- •Часть I
- •Снижение уровня шума при назначении наказаний
- •К разговору о шуме при вынесении приговоров
- •Лотерея, создающая шум
- •Ревизия шумовых помех выявляет системный шум
- •Нежелательный разброс против желаемого разнообразия
- •Иллюзия согласия
- •К разговору о системном шуме в страховой компании
- •Уникальные или типовые
- •Шум в уникальных решениях
- •Как контролировать шум в уникальных решениях
- •К разговору об уникальных решениях
- •Процесс вынесения суждения: пример
- •Цель суждения: внутренний сигнал
- •Как оценивается суждение: результат и процесс
- •Оценочные суждения
- •В чем проблема с шумом
- •Нежелательный, но поддающийся измерению
- •К разговору о профессиональных суждениях
- •Нужно ли компании GoodSell сокращать уровень шума?
- •Среднеквадратические значения
- •Уравнения расчета погрешности
- •Цена шума
- •Ревизия шумовых помех при назначении наказаний
- •Средний срок приговора
- •Лотерея при вынесении приговоров
- •Некоторые судьи особенно суровы: межэкспертный шум
- •Не все судьи одинаковы: внутриэкспертный шум
- •Составляющие шума
- •К разговору об анализе шума
- •Вторая лотерея
- •Измерение уровня ситуативного шума
- •Один в поле воин
- •Источники ситуативного шума
- •Определение масштабов ситуативного шума
- •Ситуативный шум, внутренние причины
- •К разговору о ситуативном шуме
- •Шум в музыке
- •Не только скачивание музыки
- •Каскады
- •Групповая поляризация
- •К разговору о групповых решениях
- •Часть III
- •Суждение или формула?
- •Пол Мил: оптимальная модель одерживает над вами верх
- •Голдберг: ваша модель одерживает над вами верх
- •К разговору об оценках и моделях
- •Больше простоты: грубые и прекрасные
- •Еще больше простоты: простые правила
- •Больше сложности: методы машинного обучения
- •Освобождение под залог: оптимальные решения
- •Почему мы не так часто используем правила?
- •Объективная неосведомленность
- •Излишне самоуверенные эксперты
- •Беспомощные эксперты и немногим лучшие модели
- •Отрицание неведения
- •К разговору об объективной неосведомленности
- •Прогнозирование жизненного пути
- •Понимание и прогнозирование
- •Каузальное мышление
- •Понимание в долине правдоподобности
- •Взгляд изнутри и взгляд со стороны
- •К разговору о границах понимания
- •Часть IV
- •Диагностика искажений
- •Подстановка
- •Предопределенность вывода
- •Избыточная когерентность
- •Психологические искажения как причина шума
- •К разговору об эвристике, искажениях и шуме
- •Сравнение и когерентность
- •Сравнение интенсивности
- •Искажения в сравнительных прогнозах
- •Шум в сравнительных прогнозах: пределы абсолютных оценок
- •К разговору о сравнениях
- •Гипотеза о возмущении
- •«Шумные» шкалы
- •Доллары и якорение
- •Неутешительные выводы
- •К разговору о шкалах
- •Задачи трудные и задачи легкие
- •Внутриэкспертный шум: постоянный или временный
- •Аналогия с чертами характера человека
- •К разговору о внутриэкспертном шуме
- •Компоненты шума
- •Систематизация компонентов шума
- •Объяснение ошибок
- •Шум как статистическое явление
- •К разговору об источниках шума
- •Эксперты и лидеры мнений
- •Интеллектуальные способности
- •Когнитивные стили
- •К разговору о «лучших судьях»
- •Предупреждать или исправлять?
- •Ограничения методов устранения искажений
- •Наблюдатель за процессом принятия решений
- •Снижение уровня шума: гигиена принятия решений
- •Отпечатки пальцев
- •Ситуативный шум в дактилоскопии
- •Насколько шум чреват ошибками?
- •Прислушиваясь к шуму
- •Управление информационным потоком
- •К разговору об управлении информационным потоком
- •Улучшение качества прогнозов
- •Проект «Верное суждение»
- •Вечная бета-версия
- •Шум и смещение в прогнозировании
- •В каких случаях срабатывают методы отбора и обобщения
- •К разговору об отборе и агрегировании
- •Общий обзор
- •Значение методических рекомендаций: снижение шума в медицине
- •Психиатрия – удручающий пример
- •К разговору о методических рекомендациях в медицине
- •Требуется суждение…
- •Старая проблема: в поисках решения
- •Аргументы в пользу суждений относительного характера
- •Ранжируем без принуждения
- •Что же дальше?
- •К разговору об определении шкалы оценки профессиональной эффективности
- •Риски интервью
- •Шум при собеседованиях
- •Психология интервьюера
- •Структурирование как метод оптимизации подбора персонала
- •К разговору о структурировании процесса найма персонала
- •Первая встреча: согласование подхода
- •Вторая встреча: определение факторов для промежуточных оценок
- •Команда аналитиков
- •Решающее совещание
- •Протокол промежуточных оценок при типовых решениях
- •Перемены, которые вносит протокол
- •К разговору о протоколе промежуточных оценок
- •Меньше шума – больше ошибок?
- •«Бесшумные» предвзятые алгоритмы
- •К разговору о цене снижения шума
- •Изменение системы ценностей
- •Обман системы и обход правил
- •Предупреждение правонарушений Аппетит к риску
- •Творческое начало, моральный настрой и свежие идеи
- •К разговору о достоинстве
- •Неоднородность и неосведомленность
- •Боссы и контроль над подчиненными
- •Возврат вытесненного
- •Обоснование концепции
- •Объявим шум вне закона?
- •К разговору о правилах и стандартах
- •Суждения
- •Ошибки: смещение и шумовые помехи
- •Измерение смещения и шума
- •Шум – серьезная проблема
- •Разновидности шума
- •Психология суждений и влияние шума
- •Шум – «вещь в себе»
- •Как снизить уровень шума и влияние искажений
- •Допустимое количество шума
- •Подготовка материалов исследования
- •Предварительная встреча с руководством компании
- •Проведение исследования
- •Анализ и выводы
- •Чек-лист для выявления искажений
- •Выражение признательности
- •Об авторах
- •Примечания
блюдают неукоснительно. Остается лишь надеяться, что их ответственность все же исключит ошибки, подобные допущенной в деле Мэйфилда и ряде других.
Прислушиваясь к шуму
Отмечая наличие шумовых помех в криминалистике, мы никоим образом не хотим бросить тень на дактилоскопистов, а говорим лишь о том наблюдении, которым делились неоднократно: там, где есть место суждению, найдется и шум. Шумовой фон даже выше, чем нам представляется. Анализ отпечатков пальцев кажется нам настолько объективной процедурой, что многие из нас и мысли не допускают, что его результат – лишь разновидность суждения. Подобный анализ оставляет место и для непоследовательности, и для несогласованности, а порой и для ошибок. Как бы низка ни была доля ложных идентификаций, все же ее значение не равно нулю. Как отмечает PCAST, жюри присяжных должно держать в уме эту возможность.
Первым шагом на пути снижения шума должно стать признание вероятности его наличия. Подобное допущение не является аксиомой для сообщества дактилоскопистов, многие из которых изначально скептически отнеслись к ревизии шумовых помех, проведенной Дрором. Уже само предположение, что эксперт неосознанно подпадает под влияние контекстной информации, вызывает у многих профессиона-
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
лов нервный тик. Председатель «Общества дактилоскопистов» пишет в ответ на исследование Дрора: «Любой дактилоскопист… который допускает те или иные колебания в процессе принятия решения… является настолько незрелым специалистом, что ему стоит поискать работу в Дисней-
ленде»260. Руководитель крупной криминалистической лаборатории отмечает, что доступ к информации о расследовании «дает криминалисту некоторое моральное удовлетворение, позволяя ему получать удовольствие от работы и ни-
коим образом не влияет на изменение суждения »261. Даже
ФБР262 в процессе внутреннего расследования по случаю Мэйфилда пришло к выводу, что «эксперты, осуществляющие верификацию заключений первого специалиста, обыч-
но в курсе его суждения, и все же подобная информация не сказывается на заключении верификатора ». Обе ремарки равнозначны отрицанию эффекта заданности восприятия.
Допустим даже, что криминалисты полностью осознают риски психологического давления; подобная осведомленность – еще не гарантия иммунитета к влиянию мертвой зоны когнитивных искажений. Признавая наличие ошибок у других, своих промахов не видишь – таково общее правило.
В источниках приведены сведения об опросе четырехсот263 профессиональных криминалистов из двадцати одной страны мира. 71 % из них соглашается, что «когнитивные искажения являются поводом для беспокойства в сфере крими-
налистики», и лишь 26 % считают, что «на их собственные суждения влияют когнитивные искажения». Иными словами, почти половина профессионалов полагает, что в решения коллег проникает шум, не оказывая при этом никакого эффекта на их собственные выводы. Шум – проблема невидимая, и ее не замечают даже специалисты, чья работа – находить то, что недоступно невооруженному глазу.
Управление информационным потоком
Благодаря настойчивости Дрора и его коллег отношение к проблеме постепенно меняется, и все больше криминалистических лабораторий начинают принимать меры по снижению шума. Например, PCAST в своем отчете высоко оценил усилия лаборатории ФБР по переформатированию стандартов в целях минимизации влияния заданности восприятия.
Необходимая методология сравнительно проста. Мы сейчас говорим о гигиене принятия решений, которая применя-
ется во многих областях: управление информационным потоком снижает вероятность интуитивных решений . При вынесении любого суждения какая-то доля информации неминуемо оказывается лишней. Большой объем информации не всегда полезен, особенно если он потенциально способен исказить ваше решение, заставив заранее положиться на интуицию.
Именно в этом духе и осуществляются преобразования
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
в криминалистических лабораториях: главная цель – обеспечить независимость суждения эксперта, предоставив ему минимально необходимый объем информации. Иными словами, лаборатории стараются максимально оградить дактилоскописта от подробностей расследования и выдавать информацию порционно. В этом суть подхода, разработанного Дрором и его коллегами: линейной последовательности рас-
крытия информации264.
Дрор предложил еще одну рекомендацию, иллюстрирующую все ту же стратегию гигиены принятия решений: эксперту необходимо регистрировать каждый этап своего суждения, документировать все стадии анализа скрытого отпечатка еще до того, как начнется сличение с эталонным образцом. Подобная последовательность действий поможет дактилоскописту избежать риска подсознательной идентификации скрытого отпечатка и эталона. Более того, суждение нужно фиксировать на бумаге до получения контекстной информации, способной оказать психологическое давление на эксперта. Если суждение дактилоскописта меняется после ознакомления с подробностями расследования, причины изменения также следует отражать письменно. Данные требования ограничивают риск принятия незрелых интуитивных решений на протяжении всего процесса.
Та же логика послужила предпосылкой для третьей рекомендации – важнейшей части стратегии гигиены принятия решений. Верификатор не должен быть в курсе суждения
первого эксперта.
Присутствие шумового фона в криминалистике, безусловно, вызывает беспокойство: решение дактилоскописта
– вопрос жизни и смерти подозреваемого. Этот момент показателен. Мы очень долго не подозревали о возможности ошибок в идентификации отпечатков пальцев, а теперь осознали, что далеко не всегда следует доверять суждению эксперта; поняли, что ревизия шумовых помех способна выявить неожиданно серьезный шумовой фон. И все же возможность снизить влияние негативных факторов, совершив не самые сложные преобразования, должна вдохнуть оптимизм в тех, кто пытается улучшить качество принимаемых решений.
Основная стратегия гигиены принятия решений – управление информационным потоком – найдет широкое применение в качестве преграды на пути ситуативного шума. Как мы уже отмечали, спусковым механизмом для ситуативных шумов могут послужить многочисленные факторы, в том числе настроение человека или даже температура воздуха. Невозможно рассчитывать на то, что вам удастся держать эти факторы под контролем, однако почему бы не попробовать поставить заслон наиболее очевидным из них? Вы уже знаете, что на формирование суждения влияют гнев, страх и иные эмоции, и, вероятно, отметили для себя, что отличной практикой станет переосмысление решения через некоторое время, когда источники ситуативного шума, скорее всего,
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/