Архитектура мышления

Карточка инструмента

Правило чистого второго взгляда.Проверяющему дают то, что нужно для задачи: время, место, источник, условия съёмки. Не дают ваш вывод, чужую оценку, ориентировку, ожидаемый ответ. Если без ориентировки задачу не понять, проверяющий сначала описывает материал без неё, потом получает её и пишет, изменилось ли описание. Проверка слепая, только если выполнены пять условий:

Проверяющий не знает вывода первого аналитика.

Он не знает, кто первый аналитик.

Проверяющего назначает третье лицо, а не автор вывода.

Ему не сообщают, что дело считается важным или что от него «ждут подтверждения».

Расхождение между ними разбирает третье лицо.

Честная оговорка: колонка «Ждал» опирается на самонаблюдение.А самонаблюдение в этом вопросе ненадёжно. Эмили Пронин и коллеги показали, что люди уверенно видят предвзятость у других и гораздо хуже — у себя [71]. Поэтому запись — лишь половина защиты; главное — порядок: кто, что и когда получает.

3.1. Для профессионала: управление контекстом

Читателю «для себя» можно перейти к разделу 4.

То, что для отдельного аналитика — личная дисциплина, для подразделения — порядок работы.

Последовательное раскрытие.Эксперт сначала изучает исследуемый материал изолированно и записывает первичный вывод вместе с уверенностью; сравнительные и контекстные сведения он получает только потом [19]. Расширенная версия метода заранее оценивает каждое сведение по нужности для задачи, объективности и силе наводки и раскрывает их от нужного и объективного к наводящему; для этого есть рабочий лист [72]. После каждого раскрытия записывается, изменился ли вывод и почему. Изменения после раскрытия обычны и сами по себе не отличают ошибочные выводы от верных [85]. Поэтому правило звучит так: «каждое изменение обосновать признаком материала, а не раскрытым сведением». Таблица раскрытия для кейса «Кадр 03:12» и метод «ряда образцов» с его ценой [74] — в пособии для инструктора (сценарий 1.1).

Менеджер дела и раздельные поля.Ограждать аналитика от ненужных сведений [45, с. 48] должен тот, через кого идёт материал. Самый дешёвый способ — разделить поля в сообщении оператора: «Наблюдение» (обязательно) и «Оценка оператора». Второе поле уходит менеджеру дела и раскрывается аналитику после первичного описания.

Ожидание от машины.Поиск по огромной базе находит самые похожие отпечатки — а значит, и те, что вероятнее всего собьют эксперта с толку [83, с. 137]. На 23 экспертах и 55 200 сравнениях положение кандидата в выдаче системы влияло на ошибки, а ложные идентификации тяготели к верхним строкам списка [20]. Для аналитика, работающего с поиском, ранжированием и подсказками искусственного интеллекта, «кандидат № 1 от системы» — такой же источник ожидания, как строка оператора. Его место — в колонке «Ждал».

Источник и сведения — разные оси.Надёжность источника (A–F) и достоверность сообщения (1–6) оценивают раздельно: на практике первое легко подменяет второе [46]; данные — в пособии для инструктора (сценарий 1.2). Строка оператора — сообщение надёжного источника о том, что он истолковал, и надёжность оператора не делает толкование наблюдением.

4. Психологический барьер: «Я же вижу»

Сомневаться в чужих словах профессионала учат. Сомневаться в собственных глазах — почти никогда. Наблюдение кажется первичным: сначала я увидел, потом подумал. Поэтому, когда коллега говорит «а может, это не устройство», хочется ответить: «Я же вижу». В этой фразе и прячется ошибка: «вижу» уже включает толкование, но ощущается как чистый факт.

Второй барьер — статусный. Опытному аналитику неловко записывать «ждал разведку»: это похоже на признание в предвзятости. Оператору проще написать «похоже на устройство», чем «тёмный вытянутый предмет»: первое звучит профессионально, второе — беспомощно.

Поэтому протокол нельзя держать на личной добросовестности. Его нужно встроить в форму: в бланк дежурного сообщения, в шаблон справки, в порядок передачи материала на проверку. Если для честного описания каждый раз требуется смелость, процесс устроен неправильно.

5. Разбор реального случая: отпечаток № 17

Случай изложен по отчёту Управления генерального инспектора Министерства юстиции США 2006 года [83], страницы — по печатной нумерации. Разбор посвящён механизму ошибки, а не оценке людей и ведомств.

Что произошло.11 марта 2004 года в Мадриде взорвали пригородные поезда; по данным отчёта, погибли около 200 человек (с. 29). На пакете с детонаторами испанская полиция обнаружила латентный отпечаток пальца, получивший номер 17 (с. 21). Снимки через Интерпол получило ФБР. Автоматизированная дактилоскопическая система выдала двадцать кандидатов; американский адвокат Брэндон Мэйфилд был в этом списке четвёртым (с. 31). 19 марта лаборатория ФБР идентифицировала отпечаток как отпечаток Мэйфилда (с. 21).

Идентификацию подтвердил второй эксперт — бывший сотрудник лаборатории с 35-летним стажем, работавший по контракту (с. 32–33), а позднее и назначенный судом независимый эксперт (с. 22). Руководитель подразделения, согласившийся с выводом, собственного полного исследования к тому моменту не провёл, хотя, по его словам, один участок следа вызывал у него сомнения «с самого начала» (с. 33).

13 апреля испанская полиция сообщила, что её собственное сравнение дало отрицательный результат (с. 51–52). 6 мая Мэйфилда задержали как важного свидетеля (с. 67). 19 мая испанская полиция сообщила, что отпечаток принадлежит другому человеку — гражданину Алжира (с. 21, 81). ФБР отозвало идентификацию, Мэйфилд был освобождён (с. 21); позднее правительство принесло извинения и выплатило ему два миллиона долларов [45, с. 42–43].

Как ожидание вошло в «наблюдение».Из причин ошибки, которые называет отчёт, к теме главы прямо относятся две. Первая — необычное сходство. Отпечатки Мэйфилда и настоящего владельца следа действительно были похожи по характерным деталям (с. 130, 136). Система поиска сработала так, как была задумана: она и должна находить похожие отпечатки (с. 137). Первичное сходство было реальным фактом — тем ошибка и опасна.

Вторая — предвзятость от образцов Мэйфилда, которую отчёт прямо называет «круговым рассуждением» (с. 138). Увидев образец, эксперт начал «находить» в неясном следе признаки, которых там не было, и переосмысливать неудобные: он изменил толкование пяти из семи признаков, отмеченных в следе первоначально (с. 144). Деталь, которую стоит запомнить каждому аналитику: в четырёх из этих пяти случаев первоначальное толкование было верным — оно совпадало с отпечатком настоящего владельца (с. 144). До встречи с образцом эксперт видел точнее, чем после. Отчёт квалифицирует такое обратное рассуждение как вероятную потерю объективности (с. 139).

Проверка, которая не была проверкой.Проверяющие в лаборатории знали, что идентификация уже сделана другим экспертом (с. 175–176). Руководитель подразделения признал, что знание выводов коллег повлияло на его собственный просмотр отпечатка (с. 176). Международная группа экспертов, изучавшая дело, рекомендовала проводить проверку вслепую — так, чтобы проверяющему были неизвестны прежние выводы (с. 128).

Что это значит для аналитика.Механизм тот же, что в вашей первой строке доклада в прологе, только цена несравнимо выше: сначала кандидат, потом образец, потом признаки следа подстраиваются под образец. Будь признаки записаны до встречи с образцом, а первый вывод скрыт от проверяющего, у ошибки было бы меньше шансов пройти три проверки; это и рекомендуют Кассин, Дрор и Кукучка [45]. Позже Дрор и коллеги использовали этот случай как наводящий контекст в своём эксперименте [18].

Ограничение. Дактилоскопия — особая область, а отчёт описывает одно дело; перенос на анализ кадров, документов и сообщений — интерпретация автора.

6. Две истории: кадр и видео

Описания технических средств и порядка охраны в историях намеренно опущены: для анализа мышления они не нужны.

6.1. «Кадр 03:12»

Паспорт кейса

02:40. Ожидание

Ксения начала смену с ориентировки, пришедшей накануне вечером. Текст был короткий и неконкретный: ни описания людей, ни времени, ни способа. Ксения отметила её про себя тем особым вниманием, которое опытный аналитик включает автоматически: если что-то будет, то вот оно.

03:14. Кадр

Сообщение оператора пришло вместе с кадром. Ксения открыла снимок и сразу увидела то, о чём говорил оператор: человек у сетки, наклон, предмет в руке. Предмет был вытянутый, с утолщением на конце. «Антенна? Сканер?» Она почувствовала знакомое ускорение мысли — то, за которое её ценили. Через минуту в черновике было написано: «В 03:12 у внешнего ограждения зафиксирован неустановленный, осуществлявший осмотр ограждения с использованием технического устройства. Возможна разведка».

03:20. Пауза

Ксения перечитала фразу и задержалась на слове «осуществлявший». Его нельзя было показать пальцем. Она открыла новую страницу и разделила её на три колонки.

«Вижу»: силуэт человека у сетки; 03:12; около сорока секунд в кадре; наклон вперёд; в правой руке тёмный вытянутый предмет, нижний конец у земли; лицо не различимо.

«Думаю»: осматривает ограждение; предмет — устройство.

«Ждал»: ориентировка о возможном интересе к периметру; слово «устройство» — из строки оператора.

Колонка «Ждал» объясняла почти всё, что в черновике было сверх «Вижу».

03:35. Чистые глаза

Ксения отправила кадр Петру Ильину, аналитику соседней группы, без строки оператора и без ориентировки. Только время, место и условия съёмки. «Опиши, что видишь, и предложи два-три прочтения».

Через десять минут пришёл ответ: «Человек наклоняется к земле. В руке длинный предмет — палка, трость, щуп, удочка? Похоже, водит им у земли. Прочтения: 1) что-то ищет на земле; 2) осматривает основание сетки; 3) выгуливает собаку, которой не видно в кадре». Ни одно из прочтений Пётр не назвал вероятным: «по такому кадру — не возьмусь».

Пётр увидел движение «у земли», а не «у сетки». Для Ксении человек был у ограждения, потому что ограждение было главным в её ожидании.

03:50. Доклад

Первая строка доклада стала такой: «В 03:12 у внешнего ограждения участка зафиксирован человек, около 40 секунд. По кадру не определяются характер действий и предмет в руке (тёмный, вытянутый, у земли)».

Вторая: «Возможные прочтения: осмотр основания ограждения; поиск чего-то на земле; посторонняя бытовая активность. Связь с вечерней ориентировкой маловероятна (около 25 %; по журналу эпизодов участка за год примерно три из четырёх ночных эпизодов — бытовые, остальные не установлены). Уверенность в этой оценке низкая: ориентировка не содержит проверяемых признаков, оценка опирается только на частоту прошлых эпизодов, а кадр не позволяет её уточнить».

Третья: «Предлагаю проверить эпизод. Оценку пересмотрю, если появятся сведения о повторных эпизодах или о предмете».

Рябцев прочитал и спросил то, что спросил бы любой начальник смены: «Так это опасно или нет? Откуда двадцать пять процентов?» Ксения не стала прятаться за описанием: «Из журнала участка. За прошлый год там шестнадцать ночных эпизодов: двенадцать оказались бытовыми, четыре так и не установлены, подтверждённого интереса к объекту — ни одного. Так что двадцать пять — скорее верхняя граница. Проверить эпизод стоит в любом случае — решение за вами». Она держалась правила, общего для аналитических стандартов: вероятность события и уверенность в основаниях — разные вещи, и их не смешивают в одной фразе [67]. Рябцев назначил проверку.

07:40. Развязка без развязки

Утренняя проверка нашла у сетки и вдоль обочины следы одного человека. Житель посёлка, который ходит с металлоискателем, подтвердил, что иногда ходит вдоль этой дороги, но в ту ночь, по его словам, из дома не выходил. Эпизод остался неустановленным. Ксения дописала в запись по эпизоду ещё одно прочтение — «поиск металла с металлоискателем». Оценку не меняла: это прочтение входит в бытовую активность, а сличить жителя с силуэтом невозможно.

Так заканчивается большинство таких эпизодов. Но доклад Ксении был правильным независимо от того, кто стоял у сетки: он точно сообщил, что известно, что нет, насколько вероятна связь с ориентировкой и что изменит оценку.

Уйди наверх первый черновик — в отчётности появилась бы «разведка с использованием технического устройства», которую никто уже не опроверг бы. На неё опиралась бы следующая ориентировка, и непроверенное толкование стало бы «подтверждённым фактом».

Развилка.Представьте, что ориентировка была конкретной: «мужчина среднего роста с длинным предметом, интересуется основанием ограждения в ночное время». Меняет ли это оценку кадра? Да, и законно: ожидание с проверяемыми признаками повышает вероятность одной из версий. Ошибка не в том, чтобы учитывать ориентировку, а в том, чтобы не записать, что именно вы из неё взяли, и выдать это за то, что вы увидели.

Вопрос читателю: Ксения отправила кадр Петру без строки оператора. А если бы Пётр сидел рядом и слышал её разговор с оператором — был бы его взгляд «чистым»?

6.2. «Видео с подписью»

Паспорт кейса

18:05. Подпись

Утром редакция обсуждала жалобы жителей на выбросы химического завода на окраине. Вечером Лизе переслали видео: густой чёрный дым над крышами, вдали — силуэт заводской трубы. Подпись: «Взрыв на заводе, есть пострадавшие». Лиза посмотрела ролик дважды и увидела то, что ожидала: завод, о котором говорили утром. Через семь минут два конкурента вышли с заголовком «Взрыв на химзаводе», и главный редактор написал в чат: «Мы где?»

18:15. Три колонки

«Вижу»: чёрный дым широким столбом; на переднем плане крыши гаражей; вдали труба, она не дымит; звука, огня и людей нет. «Думаю»: горит на территории завода. «Ждал»: утренняя планёрка о заводе; подпись к видео; заметки конкурентов.

Всё, что связывало дым с заводом, оказалось в колонках «Думаю» и «Ждал».

18:25. Чистый второй взгляд

Лиза отправила Артёму ролик без подписи: «Что это и где? Без контекста». Через десять минут он ответил: «Горит что-то за гаражами, по цвету дыма — похоже на шины или мусор. Труба далеко, километра два, к пожару, по-моему, отношения не имеет. Гаражи узнаю — кооператив у объездной». По панорамам улиц из открытых карт совпали крыши, линия электропередачи и поворот дороги.

«А когда снято?» — спросила Лиза: старые ролики с новыми подписями — самая частая подмена. Самая ранняя публикация нашлась в чате жителей кооператива — 17:54, «горит у нас, шестой ряд». На крышах лежал снег, выпавший, по данным метеостанции, после 13:00. Значит, ролик снят, скорее всего, сегодня между 13:00 и 17:54: более ранняя публикация могла просто не найтись.

19:10. Публикация

В вечерней ленте вышла заметка: «Пожар в гаражном кооперативе у объездной дороги. Видео, опубликованное жителями около 18:00, распространяется с подписью о взрыве на химическом заводе; по видео это не подтверждается. Сведения о пострадавших проверяются». В 20:40 региональная служба спасения сообщила о возгорании шин в кооперативе без пострадавших. Конкуренты исправили заголовки к 21:30. Проверка стоит времени, и это время приходится защищать.

Развилка.Допустим, место установить не удалось. Тогда — не «взрыв на заводе» и не молчание, а, например: «В соцсетях распространяется видео сильного задымления с подписью о взрыве на заводе. Место и время съёмки пока не установлены; запрос в службу спасения направлен». Это не скучно. Это точно.

Подпись к видео — то же, что строка оператора у Ксении: чужое ожидание, доставленное вместе с материалом. Мы читаем её первой.

Дебрифинг для двух историй

• Уровень 1. Факты. Выпишите из каждой истории всё, что попало в колонку «Вижу». Сколько там глаголов намерения? Должно быть ноль.

• Уровень 2. Источник ожидания. Для каждого толкования назовите, откуда оно пришло: из материала, из чужого текста, из прошлого или из вашей версии.

• Уровень 3. Второй взгляд. Что получили Пётр и Артём, а что от них скрыли? Что изменилось бы, если бы скрыли меньше?

• Уровень 4. Цена двух ошибок. Чего стоила бы «разведка, которой не было» — и «ничего не было», если человек действительно осматривал ограждение?

• Уровень 5. Системная коррекция. Как изменить бланк сообщения оператора и регламент публикации видео, чтобы разделение «вижу — думаю» не зависело от личной дисциплины Ксении и Лизы?

7. Развилки и контрпримеры: когда протокол вредит

Случай 1. Ожидание, которое спасает.Опытный специалист замечает слабый признак именно потому, что ждёт его. Если «очистить» его взгляд от всех ожиданий, он станет медленнее и слепее, а не точнее. Исправление: записывать ожидание, не подавляя его.

Случай 2. Второй взгляд без нужного контекста.Проверяющему скрыли всё, включая технические условия съёмки, масштаб и время. Он ошибся, потому что гадал. Исправление: скрывать выводы и чужие оценки, а не условия задачи. Если контекст нужен, сначала — описание без него, потом — с ним, и разница записывается.

Случай 3. Протокол вместо действия.При непосредственной угрозе аналитик начал заполнять протокол вместо того, чтобы немедленно сообщить об угрозе. Исправление: протокол — инструмент оценки, и задерживать им сообщение нельзя. Защитное действие и срочное сообщение идут первыми; разбор восприятия — следом.

Случай 4. Спрятаться за описанием.Аналитик пишет только «вижу» и отказывается от любой оценки: «я ничего не утверждаю». Руководитель остаётся с сырым материалом. Исправление: протокол разделяет факт и оценку, но не отменяет оценку.

Случай 5. Осторожность как привычка.После нескольких тренировок аналитик начинает автоматически выбирать «безобидное» прочтение: в учебных историях оно так часто оказывалось верным. Но протокол делает вывод обоснованным; мягче он его делать не должен. Если признаки указывают на угрозу, оценка должна быть высокой, а доклад — срочным. Инструмент, который снижает ложные тревоги ценой пропусков, сдвигает порог, а не улучшает различение. Поэтому в учебных материалах обязательно должны быть настоящие сигналы, а успех тренировки измеряется парой показателей — долей попаданий и долей ложных тревог.

8. Практикум

Базовый уровень

А. Фотография из новостей.Возьмите фотографию из сегодняшней новостной ленты, закройте подпись и опишите снимок в колонке «Вижу». Потом откройте подпись и запишите, что она добавила. Сколько слов подписи вы бы сами «увидели» на снимке?

Б. Семейный разговор.Вспомните, как вы недавно сказали о ком-то близком: «Он обиделся», «Она устала», «Он врёт». Разложите сказанное на колонки. Что вы на самом деле видели? На что из этого вы не решились бы опереться, если бы от вывода зависела судьба человека?

Профессиональный уровень

В. Переписать сообщение.Перепишите строку оператора «У ограждения человек, в руке предмет, похоже на устройство» так, чтобы начальник смены мог отличить наблюдение от толкования, а сообщение не стало длиннее двух строк. Критерий: есть время, признаки с уверенностью и отдельное поле «оценка оператора». Время — 10 минут.

Г. Порядок раскрытия.У вас есть кадр, схема участка, сведения о прошлых эпизодах, строка оператора и ориентировка. Для каждого сведения оцените нужность для задачи, объективность и силу наводки и решите, в каком порядке раскрыть его проверяющему. Сравните с таблицей в пособии для инструктора (сценарий 1.1, «Перед занятием»). Время — 15 минут.

Продвинутый уровень

Д. «Восемь узлов»(90 минут, группа): влияние наводящей записки инспектора при трёх порядках раскрытия (сценарий 1.1).

Е. «Десять роликов»(60 минут, линия Лизы): раздельная оценка канала и сообщения (сценарий 1.2).

Ж. «Бланк без лишней графы»(45 минут, проектная работа): разделить в бланке дежурного сообщения наблюдение и оценку, не добавляя полей.

Материалы, ключи и показатели всех трёх заданий — в пособии для инструктора. Точность оценок в них измеряется баллом Брайера: вероятность как доля (70 % — это 0,7) минус исход (1 или 0), в квадрате, среднее по случаям; ноль — идеально, 0,25 — всегда «50 на 50». Счёт для нескольких версий и данные об обучении [7] — в пособии для инструктора, журнал прогнозов — в главе 14.

На тренировке подсказки допустимы. На аттестации их нет: оценивается перенос на незнакомый материал, а не память о названиях колонок.

9. Аттестация и обратная связь

Этот раздел можно пропустить, если вы читаете для себя.

Сумма 0–6 — учебная обратная связь, а не допуск к работе; валидированных порогов нет. На продвинутом уровне добавляются балл Брайера, доли попаданий и ложных тревог, число слов наводящего контекста в описании.

Критические ошибки фиксируются отдельно: толкование выдано за наблюдение в докладе руководителю; проверяющему сообщён первый вывод или ожидаемый ответ; вывод о намерениях человека сделан по одному внешнему виду; запись сделана задним числом и выдана за первичную. Аттестация проводится на новом материале; два оценщика работают независимо, их согласие проверяется.

Слабый ответ на вопрос «Как написать первую строку доклада о кадре 03:12?»:«Зафиксирован неустановленный, осуществлявший осмотр ограждения с использованием технического устройства». Почему слабый: толкование подано как наблюдение; источник слова «устройство» скрыт; нет оценки и условия пересмотра.

Сильный ответ:доклад Ксении в 03:50 (раздел 6.1). Почему сильный: факт отделён от оценки; вероятность и уверенность названы раздельно; назван источник оценки; есть альтернативы и условие пересмотра.

10. Выход в жизнь

Карточка на рабочий стол

В Протокол проверки убеждений.Это первая строка вашего Протокола — «Исходный материал и кто описал его первым». Для вашего текущего важного вывода запишите, на каком исходном материале он стоит, кто и как описал этот материал первым и было ли у описавшего ожидание.

Главное за минуту

• Ожидание приходит раньше материала и ощущается не как догадка, а как зрение.

• Колонка «Вижу» — тоже выводы, только нижнего уровня; поэтому у каждого признака стоит уверенность.

• Записать ожидание полезно, но мало: себя мы видим хуже, чем других. Главная защита — порядок: материал раньше мнений, мнения — в известной очерёдности.

• Проверка, при которой проверяющий знает первый вывод, — не проверка: так в деле Мэйфилда ошибочную идентификацию подтвердили несколько экспертов.

• Доклад обязан содержать оценку: факт отдельно, вероятность отдельно, уверенность отдельно, и условие пересмотра.

Заключение главы.Мы привыкли проверять выводы. Эта глава предлагает начинать раньше — с проверки того, что мы видим. Не потому, что глазам нельзя верить, а потому, что глаза никогда не работают одни: вместе с ними смотрит всё, что мы прочитали, услышали и решили заранее. Профессионализм не в том, чтобы смотреть без ожиданий. Он в том, чтобы знать, какие ожидания смотрели вместе с вами. В следующей главе ожидание получит имя и дату: им станет первая версия.