Источник и сообщение. Две оценки вместо одной

G.011Методология04 СборИнициатива лаборатории

Каждое сообщение в работе лаборатории получает две отметки. Буква говорит о надежности источника, цифра о достоверности самого сообщения, и одна не выводится из другой.

Шкала надежности источника от A до F и шкала достоверности сообщения от 1 до 6. Отметка B2 и отметка F6 читаются по-разному.

Сообщение в работе лаборатории получает две отметки. Буква от A до F говорит, насколько надежен источник. Цифра от 1 до 6 говорит, насколько достоверно само сообщение. Шкала старая: ее называют системой Адмиралтейства, и ей пользуются разведка и полиция многих стран.

Полная шкала стоит в методологии лаборатории. Здесь разобрано, зачем оценок две и как их ставить на открытых источниках.

Зачем две оценки

Надежность источника складывается из его прошлого: как часто он оказывался прав и есть ли у него доступ к тому, о чем он сообщает. Достоверность сообщения складывается из настоящего: согласуется ли сказанное с тем, что уже установлено, и подтверждает ли его кто-то еще.

Одна общая оценка переносит репутацию источника на каждую его фразу. Надежный реестр бывает неточен в отдельной записи. Анонимный канал иногда передает верное. Две отметки позволяют сказать об этом прямо.

Буква: надежность источника

A - полностью надежный. Источник с долгой историей верных сообщений и прямым доступом к предмету.
B - обычно надежный. Ошибки бывали, но редко.
C - довольно надежный. Верных сообщений больше, чем ошибочных.
D - обычно ненадежный. Ошибочных сообщений больше.
E - ненадежный. История источника говорит против него.
F - надежность невозможно оценить. Истории нет.

Для открытых источников буква зависит от того, что источник фиксирует сам. Государственный реестр надежен для даты регистрации компании: эту запись он делает сам. Для сведений, которые реестр записывает со слов заявителя, он надежен настолько, насколько надежен заявитель.

Новый источник без истории получает F. Ставить ему C «для порядка» - значит выдать незнание за оценку.

Цифра: достоверность сообщения

1 - подтверждено независимыми источниками.
2 - вероятно достоверно. Согласуется с установленным, но независимого подтверждения нет.
3 - возможно достоверно. Согласуется частично.
4 - сомнительно. Скорее противоречит установленному.
5 - маловероятно. Противоречит.
6 - достоверность невозможно оценить. Сверить не с чем.

Единица требует независимых источников. Пять публикаций, которые перепечатывают одно сообщение, дают один источник. Счесть их пятью источниками - одна из восьми логических ошибок, о которых мы писали раньше.

Как читается отметка

Отметка - это буква и цифра вместе. B2 значит: источник обычно надежный, сообщение вероятно достоверно. C3 встречается чаще всего, и в этом нет ничего плохого: открытые источники редко бывают лучше.

F6 значит, что оценка невозможна. О ложности сообщения F6 ничего не говорит, и в тексте такую отметку не пересказывают как «ненадежные сведения».

Бывает и E1: ненадежный источник передал сообщение, которое подтвердили независимо. Сообщение подтверждено, а источник остается ненадежным для следующего сообщения.

Как отметка попадает в записку

У каждого факта в записке стоит отметка его источника. Уверенность вывода (высокая, средняя или низкая) аналитик определяет по совокупности отметок. Среднюю отметку по фактам не считают: буквы и цифры задают порядок, и среднее от них ничего не измеряет.

Рецензент вне команды проверяет, что уверенность вывода не выше, чем позволяют отметки под ним. Это часть второго шлюза аналитического цикла.

Частые ошибки

Оценка по известности. Крупное издание получает A, хотя о предмете оно пересказывает чужие слова.
Оценка по умолчанию. Всем источникам ставится C3, и шкала перестает что-либо различать.
Повышение после одного совпадения. Источник, который один раз оказался прав, получает B.
Отметка без даты. Надежность меняется со временем, поэтому отметка ставится на дату и пересматривается.