Отсутствие достаточного количества контейнеров: Неспособность запомнить или учесть что-то в анализе из-за отсутствия у аналитика соответствующей категории или "корзины" для этого элемента информации была причиной многих провалов американской разведки. После терактов 11 сентября мы поняли, что одним из факторов, способствовавших провалу воображения разведывательного сообщества США, было то, что у него не было "корзин" для использования коммерческого авиалайнера в качестве большой горючей ракеты или угона самолета без намерения посадить его.
Ожидание незначительных изменений: Еще одна частая ловушка - фокусировка на узком спектре альтернатив и прогнозирование только маргинальных, а не радикальных изменений. В качестве примера можно привести предположение, что конфликт в Сирии - это борьба между режимом Асада и объединенной оппозицией, и не рассматривать сценарии более радикальных изменений, таких как разделение на несколько государств, распад страны до статуса несостоявшегося государства или захват власти радикальными исламистскими силами.
7.1.1 Метод: Простые гипотезы
Чтобы использовать метод простых гипотез, в начале проекта определите проблему и определите, как предполагается использовать гипотезы. Будут ли гипотезы использоваться в анализе конкурирующих гипотез, в каком-либо другом проекте по проверке гипотез, как основа для разработки сценариев или как средство для выбора из широкого спектра альтернативных результатов тех, которые требуют наиболее пристального внимания? Рисунок 7.1.1 иллюстрирует этот процесс.
Соберите разнородную группу для анализа имеющейся информации и объяснений проблемы, деятельности или поведения, которые вы хотите оценить. При формировании разнородной группы учитывайте, что вам понадобятся различные виды экспертизы по различным аспектам проблемы, культурные знания о географическом регионе, различные точки зрения различных заинтересованных сторон и различные стили мышления (левый мозг/правый мозг, мужской/женский). Затем сделайте следующее:
Попросите каждого члена группы записать на карточке размером 3 × 5 не более трех альтернативных объяснений или гипотез. Поощряйте творческое мышление, используя следующее:
- Ситуационная логика: Примите во внимание все известные факты и понимание основных сил, действующих в данное время и в данном месте.
- Исторические аналогии: Рассмотрите примеры явлений одного типа.
- Теория: Рассматривайте теории, основанные на многочисленных примерах того, как обычно складывается ситуация определенного типа.
Соберите карточки и выведите результаты на доску. Объедините список, чтобы избежать дублирования.
Используйте дополнительные методы группового и индивидуального мозгового штурма для выявления ключевых сил и факторов.
Объедините гипотезы в группы родства и обозначьте каждую группу.
Используйте переформулировку проблемы и рассмотрение противоположного варианта для разработки новых идей.
Обновите список альтернативных гипотез. Если гипотезы будут использоваться в ACH, старайтесь, чтобы они были взаимоисключающими - то есть, если одна гипотеза истинна, все остальные должны быть ложными.
Пусть группа уточнит каждую гипотезу, задав классический список вопросов журналиста: Кто, Что, Как, Когда, Где и Почему?
Выберите наиболее перспективные гипотезы для дальнейшего изучения.
7.1.2 Метод: Генератор множественных гипотез™
Multiple Hypotheses Generator™ - это техника для разработки нескольких альтернативных вариантов объяснения конкретной проблемы, деятельности или поведения. Аналитики часто могут выработать полезный набор гипотез и без такого инструмента, но Multiple Hypotheses Generator™ может дать большую уверенность, чем другие методы, в том, что критическая альтернатива или исключение не были упущены. Аналитикам следует использовать Multiple Hypotheses Generator™, чтобы убедиться, что они рассмотрели широкий спектр потенциальных гипотез. В некоторых случаях у них может быть много данных, и они хотят убедиться, что создали набор правдоподобных объяснений, которые согласуются со всеми имеющимися данными. В другом случае им может быть представлена гипотеза, которая, как кажется, объясняет рассматриваемое явление, и их попросили оценить ее обоснованность. Программное обеспечение также помогает аналитикам ранжировать альтернативные гипотезы от наиболее до наименее правдоподобных и сосредоточиться на тех, которые находятся в верхней части списка и считаются наиболее заслуживающими внимания.
Чтобы использовать этот метод:
Определите проблему, деятельность или поведение, которые подлежат изучению. Часто полезно задать вопрос следующим образом:
- Какие варианты можно разработать, чтобы опровергнуть ведущую гипотезу о том, что ... ?
- Какие возможные перестановки перевернут предположения, содержащиеся в ведущей гипотезе о том, что ... ?
Разбейте главную гипотезу на составные части, следуя порядку: "Кто", "Что", "Как", "Когда", "Где" и "Почему"? Некоторые из этих вопросов могут быть неуместны или же они могут быть само собой разумеющимися для конкретной проблемы, деятельности или поведения, которые вы изучаете. Обычно только три из этих компонентов имеют непосредственное отношение к рассматриваемому вопросу; кроме того, этот метод лучше всего работает, когда количество генерируемых гипотез остается управляемым.
Рисунок 7.1.2 Генератор множественных гипотез™: Генерация перестановок
Источник: 2013 Globalytica, LLC.
- В случае, когда вы пытаетесь оспорить предпочтительную гипотезу, определите, кто, что, как, когда, где и почему относится к данной гипотезе. Затем создайте правдоподобные альтернативы для каждого соответствующего ключевого компонента.
Просмотрите списки альтернатив для каждого из ключевых компонентов; старайтесь, чтобы альтернативы в каждом списке были взаимоисключающими.
Сформируйте список всех возможных перестановок, как показано на Рисунок 7.1.2 .
Отбросьте все перестановки, которые просто не имеют смысла.
Оцените достоверность оставшихся вариантов, подвергнув сомнению ключевые предположения каждого компонента. Некоторые из этих предположений могут быть проверяемыми. Присвойте каждой перестановке "балл достоверности", используя шкалу от 1 до 5 баллов, где 1 - низкая достоверность, а 5 - высокая достоверность.
Пересортируйте оставшиеся перестановки, перечислив их от наиболее достоверных к наименее достоверным.
Переформулируйте перестановки в виде гипотез, убедившись, что каждая из них соответствует критериям хорошей гипотезы.
Выберите из верхнего списка те гипотезы, которые больше всего заслуживают внимания.
7.1.3 Метод: Формирование гипотезы квадранта
Используйте технику квадрантов для определения базового набора гипотез, когда можно выделить две легко идентифицируемые ключевые движущие силы, которые, скорее всего, определят исход проблемы. Техника определяет четыре потенциальных сценария, которые представляют собой экстремальные условия для каждой из двух основных движущих сил. Она охватывает логические возможности, присущие взаимосвязи и взаимодействию двух движущих сил, тем самым создавая варианты, которые аналитики в противном случае могут упустить из виду.
Генерация гипотез по квадрантам проще и быстрее, чем Генератор множественных гипотез™, но она ограничена случаями, когда исход ситуации определяется двумя основными движущими силами, и зависит от правильной идентификации этих сил. Он менее эффективен, когда существует более двух основных движущих сил или когда аналитики расходятся во мнениях относительно того, какие силы составляют эти две основные движущие силы.
Это шаги по созданию гипотезы квадранта:
Определите две основные движущие силы, используя такие методы, как структурированный мозговой штурм или опрос профильных экспертов. Обсуждение с целью выявления двух основных движущих сил может быть полезным упражнением само по себе.
Постройте матрицу 2 × 2, используя два драйвера.
Представьте каждый фактор как континуум от одной крайности до другой. Напишите крайние точки каждого из драйверов в конце вертикальной и горизонтальной осей.
Заполните каждый квадрант деталями того, каким будет конечное состояние, определяемое двумя движущими силами.
Разработайте указатели, которые покажут, движутся ли события в направлении одной из гипотез. Используйте указатели или индикаторы изменений для разработки стратегий сбора разведданных или приоритетов исследований, чтобы определить, в каком направлении движутся события.
На рисунке 7.1.3 показан пример квадрантной диаграммы. В данном случае аналитикам было поручено подготовить документ о возможном будущем Ирака, сосредоточившись на потенциальном конечном состоянии правительства. Аналитики определили и согласовали два ключевых фактора, определяющих будущее правительства: уровень централизации федерального правительства и степень религиозного контроля над ним. Они разработали свою квадрантную диаграмму и изложили четыре логические гипотезы, основанные на их решениях.
Четыре гипотезы, выведенные на основе квадрограммы, можно сформулировать следующим образом:
1. Окончательное состояние правительства Ирака будет представлять собой централизованное государство и секуляризованное общество.
2. Окончательное состояние иракского правительства будет представлять собой централизованное государство и религиозное общество.
3. Окончательное состояние правительства Ирака будет представлять собой децентрализованное государство и секуляризованное общество.
4. Окончательное состояние иракского правительства будет децентрализованным государством и религиозным обществом.
Потенциальные ловушки
Ценность этой техники ограничивается способностью аналитиков генерировать надежный набор альтернативных объяснений. Если групповая динамика нестабильна, то и результаты будут нестабильными. Появление правильной гипотезы или "идеи" в результате этого процесса и ее идентификация аналитиком или аналитиками не могут быть гарантированы, но перспектива включения правильной гипотезы в набор рассматриваемых гипотез значительно возрастает.
Рисунок 7.1.3 Квадрант "Генерация гипотез": Четыре гипотезы о будущем Ирака
Взаимосвязь с другими техниками
Результат анализа сценариев можно представить как набор альтернативных гипотез. Формирование гипотез по квадрантам - это конкретное применение общего метода, называемого морфологическим анализом, описанного в в главе 5 . Анализ альтернативных вариантов будущего использует аналогичный подход к построению квадрантных диаграмм для определения четырех потенциальных исходов.
Истоки этой техники
Выдвижение и проверка гипотез - ключевой элемент научного обоснования. Подход "Простые гипотезы" был разработан Рэнди Ферсоном. Генератор множественных гипотез™ также был разработан Рэнди Ферсоном и более подробно описан в его "Справочнике аналитических инструментов и методик" (Reston, VA: Pherson Associates, LLC, 2008) и на сайте www.globalytica.com . Описание Quadrant Hypothesis Generation взято из учебных материалов Разведывательного управления Министерства обороны.
ДИАГНОСТИЧЕСКОЕ ОБОСНОВАНИЕ
Диагностическое обоснование - это применение проверки гипотез к новой разработке, одному новому элементу информации или разведданных, или к надежности источника. Он отличается от анализа конкурирующих гипотез тем, что используется для оценки одного элемента релевантной информации или одного источника, в то время как ACH имеет дело с целым рядом гипотез и множеством элементов релевантной информации.
Когда использовать
Аналитикам следует использовать диагностическое обоснование, если они обнаруживают, что делают интуитивные выводы, оценивая значение нового события, важность нового отчета или надежность потока сообщений из нового источника. Часто бывает так, что большая часть информации, используемой для поддержки основной гипотезы, оказывается совместимой и с альтернативными гипотезами. В таких случаях новая информация не должна - и не может - использоваться как доказательство в поддержку преобладающего мнения или основной гипотезы.
Эта техника также помогает снизить вероятность того, что вас застанут врасплох, поскольку гарантирует, что аналитик или лицо, принимающее решение, хотя бы немного рассмотрит альтернативные объяснения. Ее особенно важно использовать, когда аналитик - или лицо, принимающее решение, - ищет доказательства для подтверждения существующей ментальной модели или политической позиции. Он помогает аналитику оценить, согласуется ли та же информация с другими разумными выводами или с альтернативными гипотезами.
Добавленная стоимость
Ценность диагностического обоснования заключается в том, что оно помогает аналитикам сбалансировать их естественную тенденцию интерпретировать новую информацию как соответствующую их существующему пониманию происходящего, то есть ментальной модели аналитика. Техника побуждает аналитиков задавать себе вопрос, согласуется ли эта же информация с другими разумными выводами или альтернативными гипотезами. Часто случается, что информация, подтверждающая наиболее вероятный вывод, на самом деле имеет ограниченную ценность для подтверждения существующего мнения, поскольку та же информация согласуется и с альтернативными выводами. Необходимо оценивать новую информацию в контексте всех возможных объяснений этой информации, а не только в контексте устоявшейся модели мышления.
Техника "Диагностическое обоснование" помогает аналитику определить и сосредоточиться на информации, которая наиболее необходима для принятия решения, и избежать ошибки отбрасывания или игнорирования информации, которая не соответствует тому, что аналитик ожидает увидеть. При оценке доказательств аналитики склонны ассимилировать новую информацию с тем, что они воспринимают в данный момент. Постепенное изменение трудно заметить. Иногда прошлый опыт может стать помехой в том, что эксперту еще многое предстоит узнать, и свежий взгляд может оказаться полезным.
Диагностическое обоснование также помогает аналитикам избежать классических интуитивных ловушек: предположить, что в игре участвует одна и та же динамика, когда что-то кажется согласующимся с прошлым опытом аналитика, и продолжать придерживаться аналитического суждения, когда сталкиваешься с растущим списком доказательств, противоречащих первоначальному выводу. Это также помогает снизить внимание к информации, которая не является диагностической, путем выявления информации, которая согласуется со всеми возможными альтернативами.
Метод
Диагностическое рассуждение - это процесс, в ходе которого вы пытаетесь опровергнуть альтернативные суждения, а не подтвердить то, что вы уже считаете истиной. Вот шаги, которые необходимо предпринять:
Когда вы получаете потенциально важную информацию, мысленно отметьте, что она, по-видимому, означает (то есть объяснение того, почему что-то произошло, или что это предвещает в будущем). Сделайте быстрое, интуитивное суждение, основанное на вашей текущей модели мышления.
Определите основной вопрос. Например, мозговой штурм в рамках программы Diagnostic Reasoning часто начинается с таких вопросов, как:
- Существуют ли альтернативные объяснения ведущей гипотезы (определяемые как ... ), которые также соответствовали бы новой информации, новому развитию или новому источнику информации?
- Есть ли причина, кроме гипотезы о том, что ... ?
В одиночку или в небольшой группе проведите мозговой штурм альтернативных суждений, которые другой аналитик с другой точкой зрения мог бы обоснованно счесть имеющими шанс быть точными. Составьте список этих альтернатив.
Для каждой альтернативы задайте следующий вопрос: Если бы эта альтернатива была верной или точной, насколько вероятно, что я увижу эту новую информацию?
Вынесите предварительное суждение на основе рассмотрения этих альтернатив. Если новая информация с равной вероятностью относится к каждой из альтернатив, она не имеет диагностической ценности и может быть проигнорирована. Если информация явно не согласуется с одной или несколькими альтернативами, эти альтернативы можно исключить.
Следуя этому способу мышления для каждой из альтернатив, решите, какие из них требуют дальнейшего внимания, а какие можно исключить из рассмотрения или отложить до появления новой информации.
Приступайте к поиску дополнительных доказательств, чтобы опровергнуть оставшиеся альтернативы, а не подтвердить их.
Потенциальные ловушки
При получении новой информации аналитикам необходимо убедиться в том, что она точна и не является обманчивой или намеренно вводящей в заблуждение. Также возможно, что ни одна из ключевых сведений не окажется диагностической или что вся релевантная информация не будет выявлена.
Взаимосвязь с другими техниками
Диагностическое обоснование является неотъемлемой частью двух других методик: Анализ конкурирующих гипотез и Валидатор индикаторов™ ( глава 6 ). Здесь она представлена как отдельная техника, чтобы показать, что ее применение не ограничивается этими двумя техниками. Это фундаментальная форма критического мышления, которая должна широко использоваться в анализе разведданных.
Истоки этой техники
Диагностическое обоснование уже много лет является основным методом решения медицинских проблем. О роли диагностического мышления в мире медицины см. следующие публикации: Альберт С. Эльштейн, "Размышления о диагностическом мышлении: Тридцатилетняя перспектива", Advances in Health Science Education, опубликованное онлайн издательством Springer Science+Business Media, 11 августа 2009 года; и Pat Croskerry, "A Universal Model of Diagnostic Reasoning", Academic Medicine 84, No. 8 (август 2009).
АНАЛИЗ КОНКУРИРУЮЩИХ ГИПОТЕЗ
Анализ конкурирующих гипотез (ACH) - это аналитический процесс, в ходе которого определяется полный набор альтернативных гипотез, систематически оцениваются данные, согласующиеся или не согласующиеся с каждой гипотезой, и проводится отказ от гипотез, а не попытка подтвердить наиболее вероятную гипотезу. Отклонение, а не подтверждение гипотез применяет к анализу разведданных научные принципы, которые отстаивал Карл Поппер, один из самых влиятельных философов науки XX века.4
ACH начинается с определения набора взаимоисключающих альтернативных объяснений или результатов, называемых гипотезами. Аналитик оценивает соответствие или несоответствие каждого элемента релевантной информации каждой гипотезе, а затем выбирает гипотезу, которая лучше всего соответствует релевантной информации. Научный принцип, лежащий в основе этой методики, заключается в том, чтобы попытаться опровергнуть как можно больше разумных гипотез, а не подтвердить ту, которая изначально кажется наиболее вероятной. Наиболее вероятной считается та гипотеза, против которой имеется меньше всего релевантной информации, а также информация в ее пользу, а не та, которая имеет больше всего релевантной информации в ее пользу.
Когда использовать
ACH подходит практически для любого анализа, когда существуют альтернативные объяснения того, что произошло, происходит или может произойти. Используйте его, когда суждение или решение настолько важно, что вы не можете позволить себе ошибиться. Используйте его, когда ваша интуиция недостаточно хороша, и когда вам нужен систематический подход, чтобы избежать неожиданностей в случае непредвиденного исхода. Используйте его в спорных вопросах, когда желательно точно определить области разногласий и оставить аудиторский след, чтобы показать, какая информация была рассмотрена и как разные аналитики пришли к различным суждениям.
ACH особенно эффективен при наличии мощного потока данных, которые нужно усвоить и оценить. Например, он хорошо подходит для решения вопросов по техническим вопросам в химической, биологической, радиологической и ядерной сферах, таких как "Для какой системы вооружений, скорее всего, импортируется эта деталь?" или "Какой тип ракетной системы импортирует или разрабатывает страна X?". ACH особенно полезен, когда аналитику приходится иметь дело с потенциальными возможностями отрицания и обмана, поскольку изначально он разрабатывался именно для этих целей.
Эта техника может использоваться одним аналитиком, но наиболее эффективна она в небольшой команде, члены которой могут подвергать сомнению оценку друг друга в отношении соответствующей информации. Она структурирует и облегчает обмен информацией и идеями с коллегами из других офисов или агентств. Анализ ACH требует скромных затрат времени: на построение матрицы ACH после сбора всей необходимой информации может уйти день или больше, и еще один день может потребоваться на проработку всех этапов аналитического процесса перед написанием выводов. Часто требуется фасилитатор или коллега, ранее обученный использованию данной методики, чтобы помочь аналитикам пройти этот процесс, особенно если они впервые используют данную методику.
Добавленная стоимость
Аналитикам часто приходится работать с неполными, неоднозначными, аномальными, а иногда и обманчивыми данными. Кроме того, жесткие временные ограничения и необходимость "сделать выбор" часто вступают в сговор с естественными когнитивными предубеждениями человека, что приводит к неточным или неполным суждениям. Если аналитик в целом хорошо разбирается в теме, то обычно он разрабатывает предпочтительную гипотезу, а затем ищет соответствующую информацию для ее подтверждения. Такой подход называется "удовлетворительным" - он предполагает принятие первого ответа, который, как кажется, подтверждается доказательствами.
Удовлетворение потребностей эффективно, потому что экономит время, и в большинстве случаев оно работает. Однако аналитик не вкладывает средств в защиту от неожиданностей или того, что называется "предвзятостью подтверждения". Этот подход не стимулирует аналитика выявлять и подвергать сомнению фундаментальные предположения. Он обходит стороной анализ альтернативных объяснений или исходов, который должен быть основополагающим для любого полного анализа. В результате сатисфакция не позволяет понять, что значительная часть информации, которая, казалось бы, подтверждает предпочтительную гипотезу, также согласуется с одной или несколькими альтернативными гипотезами. Он часто не признает важности того, что отсутствует (т. е. того, что должно быть наблюдаемо, если данная гипотеза верна, но отсутствует).
ACH повышает шансы аналитика на преодоление этих проблем, поскольку требует от него выявить, а затем попытаться опровергнуть как можно больше разумных гипотез, используя весь спектр данных, предположений и пробелов, относящихся к рассматриваемой проблеме. Метод анализа конкурирующих гипотез требует времени и внимания на начальных этапах, но приносит большие дивиденды. Когда аналитики впервые знакомятся с ACH и говорят, что находят его полезным, это происходит потому, что простой фокус на выявлении альтернативных гипотез и их опровержении побуждает аналитиков серьезно задуматься о доказательствах, объяснениях или результатах, которые раньше не приходили им в голову.
Процесс ACH требует от аналитика собрать собранную информацию и организовать ее в аналитически полезном виде, чтобы ее можно было легко извлечь для использования в анализе. Для этого создается матрица с релевантной информацией в левой части и гипотезами в верхней части. Каждый элемент релевантной информации оценивается на предмет соответствия или несоответствия каждой гипотезе, и этот материал используется для оценки поддержки или несогласия с каждой гипотезой. Это можно сделать вручную, но гораздо проще и лучше использовать программное обеспечение ACH, предназначенное для этой цели. Различные программы ACH могут использоваться для сортировки и анализа данных по типу источника и дате получения информации, а также по степени поддержки или несогласия с каждой гипотезой.
ACH также помогает аналитикам создавать более качественные аналитические продукты:
Ведение учета соответствующей информации и отслеживание того, как эта информация соотносится с каждой гипотезой.
Фиксирование основных предположений аналитика в процессе кодирования данных и запись того, какая дополнительная информация необходима или какие требования к сбору данных должны быть сформированы.
Позволяет аналитикам представлять выводы в более организованном и прозрачном виде, чем это было бы возможно в других случаях.
Обеспечивает основу для определения индикаторов, которые затем можно отслеживать и проверять, чтобы определить направление развития событий.
Оставляйте четкий аудиторский след о том, как проводился анализ, какие выводы были сделаны и как отдельные аналитики могли отличаться в своих предположениях или суждениях.
Программное обеспечение ACH
ACH зародился как ручной метод в ЦРУ в середине 1980-х годов. Первое профессионально разработанное и протестированное программное обеспечение ACH было создано в 2005 году Исследовательским центром Пало-Альто (PARC) при финансировании федерального правительства и технической помощи Ричардса Хойера и Рэнди Ферсона. Рэнди Ферсон руководил его внедрением в разведывательное сообщество США. Она была разработана при условии, что PARC предоставит ее в общественное пользование бесплатно, и ее по-прежнему можно бесплатно скачать с сайта PARC: http://www2.parc.com/istl/projects/ach/ach.html .
Версия PARC была разработана для использования отдельным аналитиком, но на практике она обычно используется группой аналитиков, находящихся в одном месте. Члены таких групп сообщают, что:
Эта техника помогает им лучше понять различия во мнениях с другими аналитиками или между аналитическими отделами.
Обзор матрицы ACH обеспечивает систематическую основу для выявления и обсуждения различий между участвующими аналитиками.
Ссылка на матрицу помогает обезличить аргументацию, когда возникают разногласия.
Другие версии ACH были разработаны различными исследовательскими центрами и академическими институтами. Одна из заслуживающих внимания версий под названием "Структурированный анализ конкурирующих гипотез", разработанная для обучения в колледже Мерсихерст, опирается на ACH, требуя более глубокого анализа на некоторых этапах.
Последнее достижение в технологии ACH называется Te@mACH®, разработанное под руководством Рэнди Ферсона для Globalitica, LLC, в 2010 году. Он обладает почти всеми функциями инструмента PARC ACH, но разработан как инструмент для совместной работы. Он позволяет аналитикам в нескольких местах одновременно работать над одной и той же проблемой. Они могут выдвигать гипотезы и вносить данные в матрицу из разных мест, но они должны договориться работать на основе одного и того же набора гипотез и одного и того же набора релевантной информации. Программное обеспечение позволяет им в электронном чате обсуждать оценки и предположения друг друга, сравнивать свой анализ с анализом своих коллег и узнавать, каков консенсус группы в отношении общего решения проблемы.
Te@mACH® - это инструмент для внутриведомственного или межведомственного взаимодействия, обеспечивающий работу всех аналитиков на основе одной и той же базы данных доказательств, аргументов и предположений, а также возможность для каждого члена команды высказать свое мнение о том, как эта информация связана с вероятностью каждой гипотезы. Аналитики могут использовать этот инструмент как синхронно, так и асинхронно. В него добавлены другие полезные функции, такие как метод опроса для ввода данных, защищающий от предвзятости, возможность записи ключевых предположений и требований к сбору данных, а также функция фильтрации, позволяющая аналитикам сравнивать и сопоставлять то, как каждый человек оценил соответствующую информацию.5
Метод
Удерживать в рабочей памяти три-пять-семь гипотез и отмечать, как каждый элемент информации вписывается в каждую гипотезу, не под силу большинству людей. Для этого требуется гораздо больше умственных способностей, чем для обычной практики поиска доказательств в поддержку одной гипотезы, которая уже считается наиболее вероятным ответом. Однако ACH можно осуществить с помощью следующего девятишагового процесса:
1. Определите гипотезы, которые необходимо рассмотреть. Гипотезы должны быть взаимоисключающими, то есть если одна гипотеза истинна, то все остальные должны быть ложными. Список гипотез должен включать все разумные возможности. Включите гипотезу обмана, если это уместно. Для каждой гипотезы разработайте краткий сценарий или "историю", объясняющую, как она может оказаться правдой.
2. Составьте список значимой информации, которая для ACH означает все, что имеет отношение к оценке гипотез - включая доказательства, предположения и отсутствие того, что можно было бы ожидать увидеть, если бы гипотеза была верна. Важно включать как предположения, так и фактические данные, потому что матрица должна быть точным отражением мышления аналитика по данной теме. Если в основе мышления аналитика лежат предположения, а не неопровержимые факты, это должно стать очевидным, чтобы предположения можно было оспорить. Классическим примером отсутствия доказательств является история Шерлока Холмса о собаке, лающей по ночам. То, что собака не лаяла, было убедительным доказательством того, что виновником был не посторонний, а внутренний человек, который был известен собаке.
3. Создайте матрицу, в которой все гипотезы расположены сверху, а все элементы релевантной информации - слева. Пример см. на Рисунок 7.3a . Проанализируйте каждый входной сигнал, задав вопрос: "Соответствует ли этот входной сигнал гипотезе, не соответствует ли он гипотезе, или он неприменим или не имеет отношения к делу?" Это можно сделать, заполняя каждую ячейку матрицы построчно или используя метод опроса, при котором аналитик случайным образом выбирает ячейку в матрице для оценки (см. Рисунок 7.3b для примера). Если гипотеза согласуется, поставьте "C" в соответствующую ячейку матрицы; если она не согласуется, поставьте "I"; если она неприменима к данной гипотезе, поставьте "NA". Если конкретное доказательство, аргумент или предположение особенно убедительно, поставьте два "С"; если оно сильно опровергает гипотезу, поставьте два "И".
Когда вы спрашиваете, согласуются или не согласуются исходные данные с определенной гипотезой, обычно отвечают: "Все зависит от... . . ." Это означает, что оценка гипотезы будет основана на предположении, от которого "зависит" оценка. Вам следует записывать все такие предположения. Заполнив матрицу, найдите в этих предположениях какую-либо закономерность - например, одно и то же предположение, сделанное при ранжировании нескольких элементов информации. После того как соответствующая информация будет отсортирована на предмет диагностичности, отметьте, сколько из высоко диагностичных оценок несоответствия основаны на предположениях. Подумайте, насколько вы должны быть уверены в этих предположениях, а затем соответствующим образом скорректируйте уверенность в оценках несоответствия ACH.
Рисунок 7.3a Создание матрицы ACH
4. Проанализируйте, в чем аналитики расходятся в своих оценках, и решите, нужны ли корректировки в рейтингах (см. Рисунок 7.3c ). Часто различия в оценке аналитиками конкретного элемента информации можно проследить по разным предположениям о гипотезах при составлении рейтингов.
5. Уточните матрицу, пересмотрев гипотезы. Имеет ли смысл объединить две гипотезы в одну или добавить новую гипотезу, которая не рассматривалась вначале? Если добавляется новая гипотеза, вернитесь назад и оцените всю релевантную информацию для этой гипотезы. В любой момент можно добавить дополнительную релевантную информацию.
6. Сделайте предварительные выводы об относительной вероятности каждой гипотезы, основывая свои выводы на анализе диагностичности каждого элемента релевантной информации. Программное обеспечение помогает аналитику, суммируя количество оценок несоответствия для каждой гипотезы и выставляя балл несоответствия для каждой гипотезы. Затем программа ранжирует гипотезы от гипотез с наименьшим количеством баллов несоответствия до гипотез с наибольшим количеством баллов несоответствия. Гипотеза с наименьшим баллом несоответствия предварительно считается наиболее вероятной. Гипотеза с наибольшим количеством несоответствий обычно является наименее вероятной.
Рисунок 7.3b Кодирование релевантной информации в ACH
Баллы несоответствия - это широкие обобщения, а не точные расчеты. ACH призвана помочь аналитику вынести оценочное суждение, но не делать это за него. Этот процесс, скорее всего, будет приводить к правильным оценкам чаще, чем менее систематические или строгие подходы, но система баллов не отменяет необходимости использования аналитиками собственного здравого смысла. В разделе "Потенциальные проблемы" ниже приводится несколько случаев, когда аналитикам необходимо отменить баллы за несоответствие.
Рисунок 7.3c Оценка уровней разногласий в ACH
7. Проанализируйте чувствительность вашего предварительного заключения к изменению интерпретации нескольких критических элементов релевантной информации, которые программа автоматически перемещает в верхнюю часть матрицы. Подумайте о последствиях для вашего анализа, если один или несколько из этих критических элементов релевантной информации окажутся неверными, обманчивыми или подвергнутся иной интерпретации. Если иной интерпретации будет достаточно, чтобы изменить ваше заключение, вернитесь назад и сделайте все возможное, чтобы перепроверить точность вашей интерпретации.
8. Сообщите о выводах. Рассмотрите относительную вероятность всех гипотез, а не только наиболее вероятной. Укажите, какие элементы релевантной информации были наиболее диагностичными и насколько убедительными они являются для определения наиболее вероятной гипотезы.
9. Определите индикаторы или вехи для будущего наблюдения. Составьте два списка: в первом - будущие события или то, что может быть выявлено в ходе дополнительных исследований, которые помогут доказать правильность вашего аналитического суждения; во втором - список показателей, которые могут свидетельствовать о том, что ваше суждение менее вероятно окажется верным или что ситуация изменилась. Проверяйте показатели и регулярно отслеживайте оба списка, обращая внимание на то, усиливает ли новая информация или ослабляет ваши аргументы.
Потенциальные ловушки
Несколько слов предостережения: ACH работает только тогда, когда все аналитики подходят к вопросу относительно непредвзято. Аналитик, который уже убежден в правильности ответа, часто найдет способ интерпретировать соответствующую информацию так, чтобы она соответствовала этому убеждению. Другими словами, ACH как противоядие от Confirmation Bias можно сравнить с прививкой от гриппа. Прививка от гриппа обычно предохраняет вас от заболевания гриппом, но она не поможет вам выздороветь, если вы уже заболели гриппом.
Баллы несоответствия, полученные программой ACH для каждой гипотезы, не являются результатом волшебной формулы, которая подсказывает вам, в какую гипотезу следует верить! Программа ACH проводит вас через систематический аналитический процесс, а компьютер выполняет сложение, но полученное суждение будет настолько точным, насколько вы сами отберете и оцените соответствующую информацию для рассмотрения.
Поскольку опровергнуть гипотезы сложнее, чем найти информацию, подтверждающую предпочтительную гипотезу, генерация и проверка альтернативных гипотез часто скорее увеличивает, чем уменьшает уровень неопределенности аналитика. Такая неопределенность расстраивает, но обычно она является точным отражением истинного положения дел. Преимущество процедуры ACH в том, что она позволяет сосредоточить внимание на тех немногих элементах критической информации, которые вызывают неопределенность или, если бы они были доступны, позволили бы ее снять. ACH может направить будущий сбор, исследование и анализ, чтобы устранить неопределенность и вынести более точное суждение.
Аналитики должны знать о пяти обстоятельствах, которые могут привести к расхождению между собственными убеждениями аналитика и показателями несоответствия. В первых двух обстоятельствах, описанных в следующем списке, баллы несоответствия кажутся неверными, когда на самом деле они верны. В следующих трех обстоятельствах баллы несоответствия могут казаться верными, когда на самом деле они неверны. Аналитикам необходимо распознать эти обстоятельства, понять суть проблемы и внести соответствующие коррективы.
Пропущенные предположения или логические умозаключения: Если оценки в матрице не подтверждают наиболее вероятную, по вашему мнению, гипотезу, матрица может быть неполной. На ваше мышление могут повлиять предположения или логические выводы, которые не были включены в список релевантной информации или аргументов. Если это так, их следует включить, чтобы матрица полностью отражала все, что влияет на ваше суждение по данному вопросу. Всем аналитикам важно признать роль, которую играют в их анализе невысказанные или не подвергнутые сомнению (а иногда и непризнанные) предположения. Например, в политическом или военном анализе выводы могут быть обусловлены предположениями о возможностях или намерениях другой страны. Главная цель процесса ACH - выявить факторы, которые определяют мышление аналитика по тому или иному вопросу, чтобы затем подвергнуть их сомнению и, если необходимо, изменить.
Недостаточное внимание к менее вероятным гипотезам: Если вы считаете, что при подсчете баллов одна или несколько менее вероятных гипотез вызывают излишнее доверие, это может быть связано с тем, что вы не собрали необходимую информацию для их опровержения. Возможно, вы уделили недостаточно внимания получению такой информации, или же ее просто нет. Если вы не можете найти доказательства для опровержения гипотезы, возможно, необходимо скорректировать свое мышление и признать, что неопределенность больше, чем вы думали изначально.
Определенная актуальная информация: Бывают случаи, когда сборщики разведданных получают информацию от надежного и хорошо расположенного внутреннего источника. Анализ ACH может обозначить эту информацию как имеющую высокую степень достоверности, но этого, вероятно, недостаточно, чтобы отразить убедительность такой релевантной информации и то влияние, которое она должна оказывать на размышления аналитика о гипотезах. Другими словами, в некоторых обстоятельствах один или два высокоавторитетных отчета от надежного источника, обладающего информацией, могут настолько сильно поддержать одну гипотезу, что опровергнут все остальные гипотезы, независимо от того, что может показать другая менее надежная или менее определенная релевантная информация.
Несбалансированный набор доказательств: Доказательства и аргументы должны быть репрезентативными для проблемы в целом. Если имеется большое количество доказательств по смежным, но периферийным вопросам и сравнительно мало доказательств по основному вопросу, оценка за несоответствие может ввести в заблуждение.
Уменьшение отдачи: По мере накопления доказательств каждый новый пункт несоответствующей информации или аргументации оказывает меньшее влияние на баллы несоответствия, чем предыдущая информация. Например, влияние любого отдельного элемента меньше, когда их пятьдесят, чем когда их всего десять. Чтобы понять это, подумайте, что происходит, когда вы вычисляете среднее значение пятидесяти чисел. Каждое число имеет одинаковый вес, но добавление пятьдесят первого числа окажет меньшее влияние на среднее значение, чем если бы вы начали с десяти чисел и добавили еще одно. Иначе говоря, накопление релевантной информации со временем замедляет скорость изменения балла несоответствия в ответ на появление новой релевантной информации. Поэтому эти числа могут не отражать реальный объем изменений в ситуации, которую вы анализируете. Если вы оцениваете изменения с течением времени, желательно периодически удалять старую релевантную информацию или разделить релевантную информацию и анализировать старую и новую релевантную информацию отдельно.
При использовании ACH следует обратить внимание на некоторые другие предостережения:
Существует вероятность того, что ни одна из выявленных релевантных сведений не является диагностической.
Не вся необходимая информация указана.
Выявленная информация может быть неточной, обманчивой или вводящей в заблуждение.
Рейтинги субъективны и поэтому подвержены человеческому фактору.
Когда анализ проводится группой, результат может зависеть от здоровой групповой динамики.
Взаимосвязь с другими техниками
ACH часто используется в сочетании с другими методами. Например, структурированный мозговой штурм, метод номинальных групп, генератор множественных гипотез™ или метод Дельфи могут быть использованы для определения гипотез или релевантной информации, которые должны быть включены в анализ ACH, или для оценки значимости релевантной информации. Обнаружение обмана может выявить мотивы, возможности или средства противника для проведения обмана, а также прошлые практики обмана; информация об этих факторах должна быть включена в список релевантной информации ACH. Техника диагностического обоснования включена в метод ACH. На последнем этапе метода ACH определяются индикаторы для мониторинга будущих событий.
Матрица ACH призвана отражать всю релевантную информацию и аргументы, которые влияют на мышление человека в отношении определенного набора гипотез. Это означает, что она также должна включать предположения, выявленные в ходе проверки ключевых предположений ( глава 8 ). И наоборот, оценка соответствия элемента релевантной информации определенной гипотезе часто основывается на предположении. Оценивая соответствие релевантной информации в матрице ACH, аналитик должен спросить: "Если эта гипотеза верна, увижу ли я этот элемент релевантной информации?" Часто в ответ на этот вопрос можно услышать: "Все зависит от... . . ." Это означает, что, как бы ни оценивалась согласованность данного элемента релевантной информации, эта оценка будет основана на предположении - на том предположении, от которого "зависит" оценка. Эти предположения должны быть занесены в матрицу и затем рассмотрены в контексте проверки ключевых предположений.
Для перепроверки выводов анализа ACH можно использовать метод Дельфи ( глава 9 ). Нескольких внешних экспертов по отдельности просят оценить вероятность одного и того же набора гипотез и объяснить обоснование своих выводов. Если две разные группы аналитиков, использующие разные методы, приходят к одному и тому же выводу, это является основанием для значительного повышения уверенности в заключении. Если же они расходятся во мнениях, то отсутствие согласия также полезно, поскольку в этом случае можно попытаться понять, чем обоснованы разные суждения.
ACH и Argument Mapping (описанная на сайте в следующем разделе ) используются для решения одних и тех же типов сложных аналитических задач. Они оба являются систематическими методами организации релевантной информации, но работают принципиально по-разному и лучше всего используются на разных этапах аналитического процесса. На ранних этапах ACH используется для анализа ряда гипотез, чтобы определить, какая из них наиболее соответствует широкому массиву релевантной информации. На более поздних этапах, когда основное внимание уделяется разработке, оценке или представлению аргументов в пользу конкретного вывода, уместно использовать метод Argument Mapping. У каждого метода есть сильные и слабые стороны, поэтому оптимальным решением будет использование обоих.
Истоки этой техники
Ричардс Хойер первоначально разработал технику ACH в ЦРУ в середине 1980-х годов как одну из частей методики анализа наличия или отсутствия советского обмана. Впервые она была публично описана в его книге "Психология разведывательного анализа6 в 1999 году; Хойер и Рэнди Ферсон помогли Исследовательскому центру Пало-Альто получить финансирование от федерального правительства в 2004 и 2005 годах для создания первого профессионально разработанного программного обеспечения ACH. Рэнди Ферсон руководил его внедрением в разведывательное сообщество США. Недавно при содействии Ферсона компания Globalytica, LLC, разработала версию этого программного обеспечения под названием Te@mACH®, предназначенную для совместной работы.
СОПОСТАВЛЕНИЕ АРГУМЕНТОВ
Карта аргументов - это техника, которая проверяет одну гипотезу с помощью логических рассуждений. Карта аргументов начинается с одной гипотезы или предварительного аналитического суждения, а затем графически разделяет утверждения и доказательства, чтобы помочь разложить сложные вопросы и передать обоснование вывода. Она представляет собой тип древовидной диаграммы, которая начинается с вывода или основной гипотезы, затем разветвляется на причины, доказательства и, наконец, предположения. Процесс создания карты аргументов помогает выявить ключевые предположения и пробелы в логике.
Карта аргументов облегчает как аналитикам, так и получателям анализа прояснение и организацию своих мыслей, а также оценку обоснованности тех или иных выводов. Она показывает логические связи между различными мыслями в систематизированном виде и позволяет быстро и наглядно оценить силу общей аргументации. Эта техника также помогает аналитикам и получателям отчета сосредоточиться на ключевых вопросах и аргументах, а не концентрировать слишком много внимания на незначительных моментах.
Когда использовать
Когда вы выносите интуитивное суждение, используйте карту аргументов, чтобы проверить свои рассуждения. Создание визуальной карты ваших рассуждений и доказательств, подтверждающих эти рассуждения, поможет вам лучше понять сильные и слабые стороны, а также пробелы в ваших аргументах. Лучше всего использовать эту технику до написания продукта, чтобы убедиться в качестве аргументов и уточнить линию аргументации.
Составление карты аргументов и анализ конкурирующих гипотез (ACH) - это взаимодополняющие техники, которые хорошо работают как по отдельности, так и вместе. Argument Mapping - это детальное представление аргументов в пользу одной гипотезы, а ACH - более общий анализ нескольких гипотез. Идеальный вариант - использовать оба метода.
Прежде чем создавать карту аргументов, можно извлечь значительную пользу, используя ACH для более детального изучения жизнеспособности альтернативных гипотез. Рассмотрев альтернативные гипотезы, вы сможете выбрать лучшую из них для составления карты.
После того как вы определили предпочтительную гипотезу с помощью ACH-анализа, вы можете извлечь много пользы, используя Argument Mapping, чтобы проверить и помочь представить обоснование этой гипотезы.
Добавленная стоимость
Карта аргументов организует мышление человека, показывая логические связи между различными мыслями, как "за", так и "против". Карта аргументов также помогает аналитику распознать предположения и выявить пробелы в имеющихся знаниях. Визуализация этих взаимосвязей облегчает обдумывание сложного вопроса и служит руководством для четкого представления другим людям обоснования выводов. Наличие такого обоснования в наглядной форме помогает как аналитику, так и получателям отчета сосредоточиться на ключевых моментах, а не блуждать бесцельно или уходить по несущественным касательным.
При совместном использовании составление карты аргументов помогает обеспечить выражение и учет различных точек зрения. Визуальное представление аргументов также облегчает выявление слабых мест в аргументах противников. Оно позволяет точно определить место возникновения разногласий, а также может служить объективной основой для посредничества в урегулировании разногласий.
Карта аргументов - идеальный инструмент для решения вопросов причины и следствия, а также для того, чтобы избежать когнитивной ловушки, когда предполагается, что корреляция подразумевает причинно-следственную связь. Изложив все аргументы за и против основной гипотезы, а также все подтверждающие доказательства и логику каждого аргумента, можно легко оценить обоснованность общей аргументации. Этот процесс также защищает от интуитивной ловушки игнорирования вероятности базовой ставки, побуждая аналитика искать и записывать все значимые факты, подтверждающие каждое предположение. Аналогичным образом, сосредоточенность на поиске и регистрации всех данных, которые поддерживают или опровергают ключевые моменты аргументации, затрудняет аналитику совершить ошибку, сделав чрезмерные выводы на основе небольшой выборки данных или продолжая придерживаться аналитического суждения, когда он сталкивается с растущим списком доказательств, противоречащих первоначальному выводу.
Метод
Карта аргументов начинается с гипотезы - односложного утверждения, суждения или утверждения, по поводу которого аналитик может в последующих высказываниях представить общие аргументы и подробные доказательства, как "за", так и "против". Графы с аргументами располагаются в иерархическом порядке под этим утверждением, и эти графы соединяются стрелками. Стрелки означают, что утверждение в одной ячейке является основанием для того, чтобы верить или не верить утверждению в ячейке, на которую указывает стрелка. Разные типы ячеек выполняют разные функции в процессе рассуждения, а в ячейках используется определенная комбинация цветовой кодировки, значков, фигур и меток, чтобы можно было быстро отличить аргументы, поддерживающие гипотезу, от аргументов, опровергающих ее. Рисунок 7.4 - это очень простой пример карты аргументов, на котором показаны некоторые аргументы, относящиеся к оценке того, что Северная Корея обладает ядерным оружием.
Конкретные шаги, связанные с построением общей карты аргументов, таковы:
Запишите главную гипотезу - односложное утверждение, суждение или утверждение на вершине дерева аргументов.
Нарисуйте ряд ячеек под этой начальной ячейкой и перечислите основные причины, по которым это утверждение верно, и основные возражения против него.
Используйте зеленые линии, чтобы связать причины с основным утверждением или другими выводами, которые они подтверждают.
С помощью зеленых линий соедините доказательства, подтверждающие ключевую причину, с этой причиной. (Подсказка: назовите причину, а затем спросите себя: "Потому что?". Ответ должен быть тем доказательством, которое вы ищете).
Укажите все контрдоказательства, которые не согласуются с причиной. Используйте красные линии, чтобы связать контрдоказательства с причинами, которым они противоречат.
Определите все возражения или претензии к основному утверждению или ключевым выводам. Используйте красные линии, чтобы соединить возражения с основным утверждением или ключевыми выводами.
Укажите все контрдоказательства, которые подтверждают возражения или претензии. Используйте красные линии, чтобы связать контрдоказательства с возражениями или опровержениями, которые они поддерживают.
Укажите опровержения, если они есть, оранжевыми линиями. Возражение, вызов или контрдоказательство, не имеющее опровержения в виде оранжевой линии, свидетельствует о недостатках аргументации.
Оцените аргументацию на предмет ясности и полноты, убедившись, что выделенные красным цветом противоположные утверждения и доказательства имеют опровержения, выделенные оранжевым цветом. Если все доводы могут быть опровергнуты, значит, аргумент не заслуживает внимания.
Потенциальные ловушки
Составление карты аргументов - сложный навык. Чтобы правильно использовать эту технику и получить ее преимущества, необходимы тренировка и практика. Подробные инструкции по эффективному использованию этой техники можно найти на сайте, указанном ниже в разделе "Истоки этой техники". Для начинающих пользователей необходима помощь опытного в использовании техники человека. Для различных типов составления карты аргументов существует коммерческое и бесплатное программное обеспечение. В отсутствие программного обеспечения использование клейких записок для обозначения каждого поля в карте аргументов, нарисованной на доске , может быть очень полезным, поскольку клейкие записки легко перемещать по мере развития и изменения карты.
Истоки этой техники
История создания карт аргументов уходит корнями в начало девятнадцатого века. В начале двадцатого века Джон Генри Вигмор стал пионером его использования для юридической аргументации. Доступность компьютеров для создания и модификации карт аргументов в конце двадцатого века вызвала более широкий интерес к картографии аргументов в Австралии для использования в различных аналитических областях. Приведенное здесь краткое описание основано на материалах сайта Austhink: http://www.austhink.com/critical/pages/argument_mapping.html .
ОБНАРУЖЕНИЕ ОБМАНА
Обман - это действие, направленное на то, чтобы противник повлиял на восприятие, решения или действия другого человека в интересах обманщика. Обнаружение обмана - это набор контрольных списков, которые аналитики могут использовать для того, чтобы определить, когда искать обман, выяснить, присутствует ли обман на самом деле, и понять, что делать, чтобы не быть обманутым. "Точное восприятие обмана в контрразведывательном анализе необычайно сложно. Если обман выполнен хорошо, аналитик не должен ожидать, что увидит какие-либо доказательства его наличия. С другой стороны, если обман ожидается, аналитик часто находит доказательства обмана даже там, где его нет".7
Когда использовать
Аналитики должны быть обеспокоены возможностью обмана, когда:
Потенциальный обманщик имеет опыт обмана.
Ключевая информация поступает в критический момент - то есть когда получатель или потенциальный обманщик может многое выиграть или потерять.
Информация получена из источника, чья добросовестность вызывает сомнения.
Анализ зависит от одного критического фрагмента информации или отчетности.
Принятие новой информации потребует от аналитика изменения ключевого предположения или ключевого суждения.
Принятие новой информации заставит получателя потратить или перенаправить значительные ресурсы.
Потенциальный обманщик может иметь канал обратной связи, который показывает, обрабатывается ли информация об обмане и каким образом, и с какой целью.
Добавленная стоимость
Большинство аналитиков разведки знают, что нельзя считать достоверным все, что поступает в их почтовый ящик, но лишь немногие знают, как эффективно учитывать подобные опасения в своей повседневной работе. Если аналитик допускает возможность того, что часть полученной информации может быть преднамеренно обманчивой, это накладывает на него значительную когнитивную нагрузку. Тогда все доказательства оказываются под вопросом, и становится трудно делать какие-либо обоснованные выводы из полученной информации. Эта фундаментальная дилемма может парализовать анализ, если нет практических инструментов, позволяющих аналитику определить, когда уместно беспокоиться об обмане, как лучше выявить обман в отчетности и что делать в будущем, чтобы не быть обманутым.
Очень трудно бороться с обманом, когда вы просто пытаетесь понять, что происходит, а в системе так много шума, так много перегрузок и так много двусмысленности. Когда вы накладываете на это схемы обмана, это подрывает вашу способность действовать.
-Роберт Джервис, "Сигнализация и восприятие в информационную эпоху", в книге "Информационная революция и национальная безопасность", под ред. Томас Э. Коупленд, Институт стратегических исследований Военного колледжа армии США, август 2000 г.
Показателем хорошей операции по обману является то, насколько хорошо она использует когнитивные предубеждения целевой аудитории. Стратегия обманщика обычно заключается в том, чтобы предоставить обманываемому человеку некую разведывательную информацию или информацию, представляющую ценность, в надежде, что он или она решит, что "информация" достаточно хороша и должна быть распространена. По мере сбора дополнительной информации предрассудок удовлетворения усиливается, и доверие получателя к информации или источнику обычно растет, еще больше ослепляя получателя возможностью того, что его обманывают. Обманщик знает, что предоставляемая информация высоко ценится, хотя со временем некоторые люди начинают сомневаться в добросовестности источника. Часто это ставит человека, разработавшего источник или получившего информацию, в оборонительное положение, и его естественной реакцией становится отказ от любой критики. Разорвать этот замкнутый круг обычно удается только путем применения структурированных методов, таких как "Обнаружение обмана", чтобы заставить критически оценить истинное качество информации и потенциал обмана.
Метод
Аналитики должны регулярно рассматривать возможность того, что оппоненты или конкуренты пытаются ввести их в заблуждение или скрыть важную информацию. Возможность обмана нельзя отвергать только потому, что нет доказательств его наличия; ведь если обман сделан хорошо, не стоит ожидать появления доказательств его наличия. Некоторые обстоятельства, при которых обман наиболее вероятен, перечислены в разделе "Когда его использовать". Когда такие обстоятельства возникают, аналитик или, предпочтительно, небольшая группа аналитиков должны оценить ситуацию, используя четыре контрольных списка, которые обычно называются их аббревиатурами: MOM, POP, MOSES и EVE. (См. вставку на стр. 201.)
Аналитики также считают, что следующие "правила дорожного движения" помогают справиться с обманом:8
Избегайте чрезмерной зависимости от одного источника информации.
Прислушивайтесь к мнению тех, кто наиболее близок к составлению отчета.
Относитесь с подозрением к источникам или субисточникам, с которыми не встречались лично или в отношении которых неясно, как или от кого они получили информацию.
Не полагайтесь исключительно на слова человека (вербальная разведка); всегда ищите вещественные доказательства (документы, фотографии, адрес или номер телефона, которые можно подтвердить, или какую-то другую конкретную, проверяемую информацию).
Ищите закономерность, когда в нескольких случаях сообщение источника сначала кажется верным, но потом оказывается неверным, и источник предлагает правдоподобное, хотя и слабое, объяснение расхождения.
В самом начале проекта создайте и оцените полный набор правдоподобных гипотез, включая гипотезу обмана, если это необходимо.
Знайте ограничения и возможности потенциального обманщика.
Взаимосвязь с другими техниками
Аналитики могут объединить обнаружение обмана с анализом конкурирующих гипотез, чтобы оценить возможность обмана. Аналитик явно включает обман в число гипотез, подлежащих анализу, а информация, выявленная с помощью контрольных списков MOM, POP, MOSES и EVE, затем включается в качестве доказательства в анализ ACH.
Истоки этой техники
Обман и усилия по его обнаружению всегда были неотъемлемой частью международных отношений. Отличная книга на эту тему - Michael Bennett and Edward Waltz, Counterdeception Principles and Applications for National Security (Boston: Artech House, 2007). Описание обнаружения обмана в этой книге было ранее опубликовано в книге Randolph H. Pherson, Handbook of Analytic Tools and Techniques (Reston, VA: Pherson Associates, LLC, 2008).
КОНТРОЛЬНЫЕ СПИСКИ ДЛЯ ОБНАРУЖЕНИЯ ОБМАНА
Мотив, возможности и средства (MOM)
Мотив: Каковы цели и мотивы потенциального обманщика?
Каналы: Какие средства доступны потенциальному обманщику для передачи нам информации?
Риски: Какие последствия понесет противник, если обман будет раскрыт?
Затраты: Придется ли потенциальному обманщику жертвовать конфиденциальной информацией, чтобы установить надежность канала обмана?
Обратная связь: Есть ли у потенциального обманщика механизм обратной связи для отслеживания последствий операции по обману?
Прошлые оппозиционные практики (POP)
Есть ли у противника опыт обмана?
Вписываются ли нынешние обстоятельства в схему прошлых обманов?
Если нет, есть ли другие исторические прецеденты?
Если нет, изменились ли обстоятельства, которые объясняют использование этой формы обмана в данный момент?
Манипулируемость источников (MOSES)
Уязвим ли источник для контроля или манипуляций со стороны потенциального обманщика?
На чем основано мнение о надежности источника?
Имеет ли источник прямой или только косвенный доступ к информации?
Насколько хороша репутация источника?
Оценка доказательств (EVE)
Насколько точны сведения источника? Проверена ли вся цепочка доказательств, включая переводы?
Подтверждается ли критическое свидетельство? Помните, что субисточник может быть более критичным, чем источник.
Противоречат ли данные из одного источника (например, человеческой разведки) данным из другого источника (например, сигнальной разведки или открытых источников)?
Есть ли в других источниках информации подтверждающие доказательства?
Можно ли назвать какие-либо доказательства, которые можно было бы ожидать увидеть, примечательными из-за их отсутствия?
1. См. обсуждение в главе 2 противопоставления характеристик Системы 1, или интуитивного мышления, и Системы 2, или аналитического мышления.
2. Герберт А. Саймон, "Поведенческая модель рационального выбора", Quarterly Journal of Economics LXIX (февраль 1955 г.): 99-101.
3. Карл Поппер, "Логика науки" (Нью-Йорк: Basic Books, 1959).
4. См. Поппер, "Логика науки".
5. Более подробное описание Te@mACH® можно найти на вкладке "Программное обеспечение" по адресу http://www.globalytica.com . Через этот сайт можно также получить доступ к инструменту PARC ACH.
6. Ричардс Дж. Хойер-младший, Психология разведывательного анализа (Вашингтон, округ Колумбия: Центр ЦРУ по изучению разведки, 1999; переиздано Pherson Associates, LLC, Reston, VA 2007).
7. Ричардс Дж. Хойер-младший, "Когнитивные факторы в обмане и контробмане", в книге "Стратегический военный обман", под ред. Дональд К. Дэниел и Кэтрин Л. Хербиг (Нью-Йорк: Пергамон Пресс, 1982).
8. Эти правила взяты из книги Ричардса Дж. Хойера-младшего "Когнитивные факторы в обмане и контробмане" в книге "Стратегический военный обман", под ред. Donald C. Daniel and Katherine L. Herbig (New York: Pergamon Press, 1982); и Michael I. Handel, "Strategic and Operational Deception in Historical Perspective", in Strategic and Operational Deception in the Second World War, ed. Michael I. Handel (London: Frank Cass, 1987).
8.Оценка причинно-следственных связей
Опыты объяснить прошлое и спрогнозировать будущее основаны на понимании причин и следствий. Такое понимание затруднено, поскольку виды переменных и взаимосвязей, изучаемых аналитиком разведки, в большинстве случаев не поддаются эмпирическому анализу и разработке теории, которые характерны для академических исследований. Лучшее, что может сделать аналитик, - это вынести обоснованное суждение, но такие суждения зависят от опыта аналитика в данной области и его способности рассуждать, а также подвержены различным когнитивным ловушкам и ошибкам в рассуждениях.
Одной из наиболее распространенных причин провалов разведки является зеркальное отражение - неосознанное предположение, что другие страны и их лидеры будут действовать так же, как мы в аналогичных обстоятельствах. Другая причина - тенденция приписывать поведение людей, организаций или правительств характеру действующего лица и недооценивать влияние ситуационных факторов. И наоборот, люди склонны считать, что их собственное поведение почти полностью обусловлено ситуацией, в которой они оказались. Это известно как "фундаментальная ошибка атрибуции".
Мы также склонны считать, что результаты действий противника соответствуют его замыслу, и не спешим признавать реальность простых ошибок, случайностей, непреднамеренных последствий, совпадений или мелких причин, приводящих к крупным последствиям. Аналитики часто полагают, что существует единственная причина, и прекращают поиск объяснения, когда найдена первая кажущаяся достаточной причина. Восприятие причинности частично определяется тем, куда направлено внимание человека; в результате информация, которая легко доступна, заметна или ярка, с большей вероятностью будет воспринята как причинная, чем та, которая таковой не является. Когнитивные ограничения и распространенные ошибки в восприятии причинно-следственных связей более подробно рассматриваются в книге Ричардса Хойера "Психология разведывательного анализа".
Люди также допускают несколько распространенных логических ошибок. Когда два события часто происходят в одно и то же время или когда одно следует за другим, говорят, что они коррелируют. Часто предполагается, что одно событие вызывает другое, но не следует путать корреляцию с причинно-следственной связью. Часто бывает, что третья переменная вызывает оба явления. "Классический пример - продажи мороженого и количество утонувших летом. Тот факт, что продажи мороженого растут по мере увеличения числа утоплений, не означает, что одно из них стало причиной другого. Скорее, третий фактор, например, жаркая погода, мог вызвать и то, и другое".1
Не существует единой и простой методики, позволяющей избежать подводных камней при вынесении суждений о причинно-следственных связях, поскольку аналитики обычно не располагают информацией, необходимой для того, чтобы быть уверенными в наличии причинно-следственной связи. Более того, сложные события, которые находятся в центре внимания разведывательного анализа, часто имеют множество причин, которые взаимодействуют друг с другом. Однако правильное использование методов, описанных в этой главе, может помочь смягчить целый ряд распространенных когнитивных ограничений и повысить шансы аналитика на то, что он все сделает правильно.
Я считаю, что мы всегда должны относиться к нашим мнениям с некоторой долей сомнения. Я не хочу, чтобы люди догматически верили в любую философию, даже в мою.
-Бертран Рассел, английский философ
Психология анализа разведданных описывает три основные стратегии, которые аналитики разведки используют для вынесения суждений, чтобы объяснить причину текущих событий или спрогнозировать, что может произойти в будущем:
Ситуационная логика: Вынесение экспертных суждений на основе известных фактов и понимания глубинных сил, действующих в данное время и в данном месте. Когда аналитик работает с неполной, неоднозначной и, возможно, обманчивой информацией, эти экспертные суждения обычно зависят от предположений о возможностях, намерениях или нормальном функционировании вещей в стране, вызывающей озабоченность. В этой главе описывается проверка ключевых предположений, которая является одной из наиболее часто используемых структурированных техник.
Сравнение с историческими ситуациями: Сочетание понимания фактов конкретной ситуации со знанием того, что происходило в аналогичных ситуациях в прошлом, либо в личном опыте, либо в исторических событиях. Эта стратегия предполагает использование аналогий. Техника структурированных аналогий, описанная в этой главе, придает этому процессу строгость и повышает точность.
Применение теории: Основание суждений на систематическом изучении многих примеров одного и того же явления. Теории или модели, часто основанные на эмпирических академических исследованиях, используются для объяснения того, как и когда обычно происходят определенные типы событий. Многие академические модели слишком обобщены, чтобы быть применимыми к уникальным характеристикам большинства проблем разведки. Многие другие предполагают количественный анализ, который выходит за рамки структурированных аналитических методов, как они определены в этой книге. Однако концептуальная модель, которая просто определяет соответствующие переменные и различные способы их сочетания для получения конкретных результатов, может стать полезным шаблоном для руководства сбором и анализом некоторых общих типов проблем. Мышление "снаружи-внутрь" можно использовать для объяснения текущих событий или прогнозирования будущего.
ОБЗОР ТЕХНИКИ
Проверка ключевых предположений - одна из самых важных и часто используемых техник. Аналитические суждения всегда основаны на сочетании доказательств и предположений или предубеждений, которые влияют на интерпретацию доказательств. Проверка ключевых предположений - это систематическая попытка сделать явными и подвергнуть сомнению предположения (т. е. ментальную модель), которыми руководствуется аналитик в своем мышлении.
Структурированные аналогии применяют аналитическую строгость к рассуждениям по аналогии. Этот метод требует, чтобы аналитик систематически сравнивал интересующий его вопрос с несколькими потенциальными аналогиями, прежде чем выбрать ту, для которой обстоятельства наиболее схожи с интересующим его вопросом. Использование аналогий при принятии решений или прогнозов кажется естественным, поскольку они по определению содержат информацию о том, что происходило в аналогичных ситуациях в прошлом. Люди часто распознают закономерности и затем сознательно предпринимают действия, которые были успешными в предыдущем опыте, или избегают действий, которые ранее были неудачными. Однако аналитикам следует избегать сильной тенденции привязываться к первой пришедшей на ум аналогии, которая подтверждает их прежнее мнение о проблеме.
Ролевая игра, как описано здесь, начинается с текущей ситуации, возможно, с реального или гипотетического нового события, которое только что произошло и на которое игроки должны отреагировать. Этот тип ролевой игры, в отличие от многих военных игр, часто может быть завершен за один или два дня, без предварительной подготовки. Даже простые упражнения Ролевой игры стимулируют творческое и систематическое мышление о том, как может развиваться текущая сложная ситуация. Ролевая игра также является эффективным механизмом для объединения аналитиков, которые, хотя и работают над общей проблемой, могут иметь мало возможностей встретиться и обсудить свои взгляды на нее. Когда необходимо принять важные решения, а времени в обрез, эта техника может быть использована для того, чтобы собрать аналитиков и лиц, принимающих решения, в одной комнате для динамичного решения проблем.
Red Hat Анализ - это полезная техника, позволяющая воспринимать угрозы и возможности так, как их видят другие. Аналитики разведки часто пытаются спрогнозировать поведение иностранного лидера, группы, организации или страны. При этом им необходимо избегать распространенной ошибки зеркального отражения - естественной склонности считать, что другие думают и воспринимают мир так же, как и мы. Анализ Red Hat имеет ограниченную ценность без глубокого понимания культуры страны и людей. См. главу 9 для обсуждения того, чем эта техника отличается от анализа "Красной команды".
Мышление "извне" расширяет представления аналитика о силах, которые могут повлиять на конкретный интересующий его вопрос. Этот метод требует от аналитика выйти за рамки своей специализации и рассмотреть более широкие социальные, организационные, экономические, экологические, технологические, политические, правовые и глобальные силы или тенденции, которые могут повлиять на анализируемую тему.
ПРОВЕРКА ОСНОВНЫХ ДОПУЩЕНИЙ
Aналитические суждения всегда основаны на сочетании доказательств и предположений, или предубеждений, которые влияют на то, как интерпретируются доказательства.2 Проверка ключевых предположений - это систематическая попытка сделать явными и подвергнуть сомнению предположения (ментальную модель), которыми руководствуется аналитик при интерпретации доказательств и рассуждениях о любой конкретной проблеме. Такие предположения обычно необходимы и неизбежны как средство заполнения пробелов в неполной, двусмысленной, а иногда и обманчивой информации, с которой приходится работать аналитику. Они определяются образованием, подготовкой и опытом аналитика, а также организационным контекстом, в котором он работает.
Организация действительно начинает учиться, когда ее самые заветные предположения подвергаются сомнению с помощью контрпредположений. Поэтому необходимо выявить предположения, лежащие в основе существующих политик и процедур, и предложить альтернативные политики и процедуры, основанные на контрпредположениях.
-Ян И. Митрофф и Ричард О. Мейсон, Создание диалектической социальной науки: Концепции, методы и модели (1981)
Проверка ключевых предположений - одна из наиболее часто используемых техник, поскольку аналитикам обычно приходится делать предположения, чтобы заполнить пробелы. В мире разведки это часто предположения о намерениях или возможностях другой страны, о том, как обычно работают правительственные процессы в этой стране, об относительной силе политических сил, о надежности или точности ключевых источников, о достоверности предыдущих анализов по тому же вопросу, о наличии или отсутствии соответствующих изменений в контексте, в котором происходит деятельность. Предположения зачастую трудно выявить, поскольку многие социокультурные убеждения существуют неосознанно или настолько прочно, что принимаются за истину и не подлежат оспариванию.
Когда использовать
Любое объяснение текущих событий или оценка будущего развития требует интерпретации фактических данных. Если имеющиеся данные неполны или неоднозначны, на эту интерпретацию влияют предположения о том, как обычно обстоят дела в интересующей вас стране. Эти предположения должны быть четко сформулированы на ранних этапах аналитического процесса.
Если проверка ключевых допущений не была проведена в самом начале проекта, она может оказаться чрезвычайно ценной, если будет проведена в процессе координации или перед представлением или предоставлением выводов. Если проверка ключевых допущений была проведена на ранней стадии процесса, часто бывает желательно проанализировать допущения еще раз на более поздней стадии процесса - например, непосредственно перед или сразу после подготовки отчета. Определите, сохраняют ли допущения свою актуальность или их следует изменить.
Добавленная стоимость
Подготовка письменного списка рабочих предположений в начале любого проекта помогает аналитику сделать следующее:
Определите конкретные допущения, лежащие в основе базовой аналитической линии.
Достигните лучшего понимания фундаментальной динамики.
Получите возможность взглянуть на проблему с лучшей стороны и стимулировать новое мышление.
Обнаружение скрытых отношений и связей между ключевыми факторами.
Укажите все события, которые могут привести к отказу от предположения.
Избегайте неожиданностей, если новая информация сделает старые предположения недействительными.
Проверка ключевых допущений предохраняет аналитика от нескольких классических ошибок мышления, в том числе от склонности делать чрезмерные выводы при наличии небольшого количества данных, придавать слишком большое значение первым впечатлениям и не обращать внимания на то, как отсутствие информации может повлиять на анализ. Правильное понимание предположений, лежащих в основе аналитического суждения, устанавливает пределы уверенности, которую аналитик должен иметь при вынесении суждения.
Метод
Процесс проверки ключевых предположений относительно прост по своей концепции, но зачастую сложен в практической реализации. Одна из проблем заключается в том, что участвующие аналитики должны быть готовы к тому, что они могут ошибаться. Полезно привлечь к этому процессу нескольких авторитетных аналитиков, которые в целом знакомы с темой, но не имеют предварительной приверженности какому-либо набору предположений по рассматриваемому вопросу. Имейте в виду, что многие "ключевые предположения" оказываются "ключевыми неопределенностями". Обширный опыт Рэнди Ферсона как организатора аналитических проектов показывает, что примерно каждое четвертое ключевое предположение рушится при тщательном изучении.
Вот шаги по проведению проверки ключевых предположений:
Соберите небольшую группу людей, которые работают над проблемой, а также несколько "сторонних наблюдателей". Основная аналитическая группа уже работает на основе сложившейся ментальной модели, поэтому "аутсайдеры" нужны для того, чтобы привнести другие точки зрения.
В идеале нужно попросить участников принести свой список предположений, когда они придут на встречу. Если этого не было сделано, начните встречу с молчаливого мозгового штурма. Попросите каждого участника записать несколько предположений на карточках размером 3 × 5.
Соберите карточки и перечислите предположения на доске для всеобщего обозрения.
Выявите дополнительные предположения. Работайте от преобладающей аналитической линии назад к ключевым аргументам, которые ее поддерживают. Используйте различные приемы, чтобы подтолкнуть участников к размышлениям:
- Задайте стандартные журналистские вопросы. Кто: Предполагаем ли мы, что знаем, кто все ключевые игроки? Что: предполагаем ли мы, что знаем цели ключевых игроков? Когда: Предполагаем ли мы, что условия не изменились со времени нашего последнего отчета или что они не изменятся в обозримом будущем? Где: Предполагаем ли мы, что знаем, где будут происходить реальные действия? Почему: Предполагаем ли мы, что нам понятны мотивы ключевых игроков? Как: Предполагаем ли мы, что знаем, как они собираются это сделать?
- Использование таких фраз, как "всегда будет", "никогда не будет" или "придется", говорит о том, что идея не оспаривается. Возможно, так и должно быть.
- Использование таких фраз, как "на основании" или "в общем случае", говорит о том, что делается спорное предположение.
- Когда поток предположений начнет замедляться, спросите: "Что еще кажется настолько очевидным, что обычно не задумываешься о том, чтобы это оспорить?". Если никто не может назвать больше предположений, значит, есть предположение, что их не существует, что само по себе является предположением, которое можно оспорить.
Определив полный набор предположений, вернитесь назад и критически проанализируйте каждое предположение. Задайте следующие вопросы:
- Почему я уверен, что это предположение верно?
- При каких обстоятельствах это предположение может оказаться неверным?
- Могло ли это быть правдой в прошлом, но уже не является таковой сегодня?
- Насколько я уверен в правильности этого предположения?
- Если он окажется недействительным, как сильно это повлияет на анализ?
Отнесите каждое предположение к одной из трех категорий:
- В принципе, солидно.
- Правильно, но с некоторыми оговорками.
- Неподтвержденные или сомнительные - "ключевые неопределенности".
Уточните список, исключив из него те предположения, которые не выдерживают проверки, и добавив новые, появившиеся в ходе обсуждения. Прежде всего, подчеркните те предположения, которые, если они ошибочны, приведут к изменению аналитических выводов.
Подумайте, следует ли перевести ключевые неопределенности в разряд требований к сбору разведданных или тем для исследований.
Завершая анализ, помните, что вероятность того, что ваш вывод окажется верным, не может быть выше, чем самое слабое звено в цепи ваших рассуждений. Пересмотрите свои предположения, оцените качество доказательств и надежность источников, а также оцените общую трудность и сложность вопроса. Затем сделайте приблизительную оценку вероятности того, что ваш аналитический вывод окажется неверным. Используйте это число для расчета приблизительной вероятности того, что ваш вывод окажется точным. Например, вероятность того, что вы окажетесь правы, равна три из четырех (75 процентов), а вероятность того, что вы ошибетесь, равна один из четырех (25 процентов). Такое внимание к тому, как и почему мы можем ошибаться, необходимо для того, чтобы компенсировать естественную человеческую тенденцию нежелания признавать, что мы можем ошибаться.
На рис. 8.1 показаны ошибочные предположения, сделанные в деле о шпионаже Вэнь Хо Ли в 1990-х годах, и то, что показало дальнейшее расследование этих предположений. Проверка ключевых предположений могла бы выявить слабые места в деле против Ли гораздо раньше.
Взаимосвязь с другими техниками
Проверка ключевых предположений часто используется в паре с другими техниками, поскольку предположения играют важную роль во всех структурированных аналитических работах, и важно, чтобы они были правильными. Например, если какое-либо предположение имеет решающее значение для анализа, но при этом остаются вопросы относительно обоснованности этого предположения, может быть целесообразно после проверки ключевых предположений провести анализ "Что, если? Анализ. Представьте себе будущее (или настоящее), в котором данное предположение неверно. Что могло произойти, чтобы сделать его неверным, как это могло произойти и каковы последствия?
Особого внимания заслуживает взаимодействие между проверкой ключевых предположений и анализом конкурирующих гипотез (ACH). Ключевые предположения должны быть включены в матрицу ACH в качестве "доказательств", чтобы матрица была точным отражением мышления аналитика. Аналитики часто выявляют предположения в процессе заполнения матрицы ACH. Это происходит, когда аналитик оценивает соответствие или несоответствие какого-либо доказательства гипотезе и приходит к выводу, что это суждение зависит от чего-то другого - как правило, от предположения. Te@mACH® - единственная версия программного обеспечения ACH, которая включает в себя поле, которое аналитики могут использовать для отслеживания предположений, которые они делают при оценке доказательств против гипотез.
Рисунок 8.1 Проверка ключевых предположений: Случай Вэнь Хо Ли
Источник: 2009 Pherson Associates, LLC.
Quadrant Crunching™ ( глава 5 ) и Simple Scenarios ( глава 6 ) используют предположения и их противоположности для создания нескольких объяснений или результатов.
Истоки этой техники
Хотя предположения были предметом аналитической озабоченности в течение долгого времени, идея разработки специальной аналитической техники, направленной на изучение предположений, возникла только в конце 1990-х годов. Обсуждение проверки ключевых предположений в этой книге взято из книги Randolph H. Pherson, Handbook of Analytic Tools and Techniques (Reston, VA: Pherson Associates, LLC, 2008).
СТРУКТУРИРОВАННЫЕ АНАЛОГИИ
Техника аналогии применяет повышенную строгость к аналоговым рассуждениям, требуя систематического сравнения проблемного вопроса с несколькими аналогиями, а не с одной аналогией.
Когда использовать
Использование аналогий при вынесении суждений или составлении прогнозов кажется естественным, поскольку по определению они содержат информацию о том, что происходило в аналогичных ситуациях в прошлом. Люди делают это в повседневной жизни, а аналитики - в своей роли аналитиков разведки. Люди распознают схожие ситуации или закономерности и затем сознательно предпринимают действия, которые были успешными в предыдущем опыте, или избегают действий, которые ранее были неудачными. Люди часто прибегают к аналоговым рассуждениям в незнакомых или неопределенных ситуациях, когда имеющейся информации недостаточно для любого другого подхода.
Одним из наиболее широко используемых инструментов в разведывательном анализе является аналогия. Аналогии служат основой для построения многих прогностических моделей, лежат в основе большинства гипотез и, справедливо или нет, лежат в основе многих обобщений о том, что будет делать другая сторона и как она будет это делать.
-Джером К. Клаузер и Сандра М. Вейр, Методология исследования разведки, Школа оборонной разведки (1975)
Аналогия подразумевает восприятие двух похожих вещей и суждение о том, что раз они похожи в одном отношении, то, скорее всего, будут похожи и в других аналитически значимых отношениях. Аналитики могут заметить, что новый военный самолет имеет ряд характеристик, схожих с существующим самолетом, и сделать вывод, что новый самолет был разработан для выполнения аналогичных задач. Примерами аналогий в более широком масштабе могут служить успешная оккупация Германии и Японии после Второй мировой войны как основание полагать, что военная оккупация Ирака будет успешной, или неудачная советская оккупация Афганистана как предвестник разочарований США, связанных с их участием в делах этой страны. История насчитывает множество аналогий, которые приводили как к плохим, так и к хорошим решениям.
Проводя аналогию, важно думать не только о сходстве. Необходимо также учитывать те условия, качества или обстоятельства, которые не совпадают между двумя явлениями. Это должно быть стандартной практикой во всех рассуждениях по аналогии, и особенно в тех случаях, когда нельзя позволить себе ошибиться.
Многие аналогии используются в свободной форме и оказывают широкое влияние на мышление как тех, кто принимает решения, так и широкой общественности. Одна из задач анализа - взять аналогии, которые уже используются другими и оказывают влияние, а затем подвергнуть их тщательному изучению.
Мы рекомендуем аналитикам, рассматривающим возможность использования этой техники, прочитать Ричарда Д. Нойштадта и Эрнеста Р. Мэя, "Unreasoning from Analogies", глава 4 в Thinking in Time: The Uses of History for Decision Makers (New York: Free Press, 1986). Мы также рекомендуем Джованни Гаветти и Яна В. Ривкина, "Как стратеги действительно думают: использование силы аналогии", Harvard Business Review (апрель 2005 г.).
Добавленная стоимость
Рассуждения по аналогии помогают достичь понимания, сводя незнакомое к знакомому. При отсутствии данных, необходимых для полного понимания текущей ситуации, рассуждения по аналогии могут быть единственной альтернативой. Однако при таком подходе следует помнить о значительном потенциале ошибок, и аналитику следует максимально снизить его за счет использования техники структурированных аналогий. Использование этой техники помогает уберечь аналитика от ошибок мышления, когда он делает чрезмерные выводы на основе небольшого набора данных и предполагает, что в игре присутствует та же динамика, когда на первый взгляд что-то согласуется с его прошлым опытом.
Прибегая к аналогии, [люди] склонны использовать первую пришедшую на ум. Они не проводят более широкого исследования. Они также не останавливаются, чтобы проанализировать пример, проверить его пригодность или даже спросить, в чем он может быть ошибочным.
-Эрнест Р. Мэй, "Уроки прошлого: Использование и неправильное использование истории в американской внешней политике (1975)
Преимущество метода структурированных аналогий заключается в том, что он позволяет избежать тенденции быстро зацикливаться на одной аналогии и затем концентрироваться только на доказательствах, подтверждающих сходство этой аналогии. Аналитики должны учитывать время, необходимое для применения этого структурированного подхода, и могут использовать его только в тех случаях, когда цена ошибки высока.
Структурированные аналогии - одна из техник, эффективность которой была изучена эмпирически. В серии экспериментов структурированные аналогии сравнивались с независимыми суждениями при прогнозировании решений, принятых в восьми конфликтных ситуациях. Это были сложные проблемы прогнозирования, и 32-процентная точность экспертов без помощи была лишь немного выше случайности. В отличие от этого, 46 процентов прогнозов, сделанных с помощью описанного здесь процесса структурированных аналогий, были точными. Среди экспертов, которые могли самостоятельно придумать две или более аналогий и имели непосредственный опыт работы с наиболее близкой аналогией, точность прогнозов составила 60 %. (См. "Истоки этой техники").
Метод
Перед использованием этой техники рекомендуется пройти обучение. Такой курс обучения доступен на сайте http://www.academia.edu/1070109/Structured_Analogies_for_Forecasting .
Ниже приводится пошаговое описание этой техники:
Опишите проблему и суждение или решение, которое необходимо принять.
Определите группу экспертов, которые знакомы с проблемой и обладают широким кругозором, позволяющим им находить аналогичные ситуации. Чем разнообразнее их опыт, тем лучше. Как правило, экспертов должно быть не менее пяти.
Попросите группу экспертов выявить как можно больше аналогий, не слишком акцентируя внимание на том, насколько они похожи на текущую ситуацию. Различные университеты и международные организации ведут базы данных, облегчающие проведение такого рода исследований. Например, Массачусетский технологический институт (MIT) поддерживает систему Cascon для анализа международных конфликтов - базу данных о 85 конфликтах, произошедших после Второй мировой войны, которые классифицированы и закодированы, чтобы облегчить их сравнение с текущими конфликтами интересов. Университет Мэриленда ведет базу данных International Crisis Behavior Project, охватывающую 452 международных кризиса в период с 1918 по 2006 год. Каждый случай кодируется по восьмидесяти одной описательной переменной.
Просмотрите список потенциальных аналогий и решите, какие из них следует изучить дальше.
Разработайте предварительный список категорий для сравнения аналогий, чтобы определить, какая из них наиболее близка к рассматриваемому вопросу. Например, база данных конфликтов MIT кодирует каждый случай по следующим широким категориям, а также более тонким подкатегориям: предыдущие или общие отношения между сторонами, участие великих держав и союзников, внешние отношения в целом, военно-стратегические, международные организации (ООН, правовые, общественное мнение), этнические (беженцы, меньшинства), экономика/ресурсы, внутренняя политика сторон, связь и информация, действия на спорной территории.
Составьте рассказ о каждой выбранной аналогии, уделяя одинаковое внимание как сходным, так и различным аспектам аналогии. Задание по написанию описаний всех аналогий должно быть разделено между экспертами. Каждый рассказ можно разместить в вики, где каждый член группы сможет прочитать и прокомментировать его.
Пересмотрите предварительный список категорий для сравнения аналогичных ситуаций, чтобы убедиться, что они по-прежнему уместны. Затем попросите каждого эксперта оценить сходство каждой аналогии с рассматриваемым вопросом. Эксперты должны провести оценку наедине, используя шкалу от 0 до 10, где 0 = совсем не похоже, 5 = немного похоже, а 10 = очень похоже.
После объединения оценок для расчета среднего рейтинга по каждой аналогии обсудите результаты и сделайте прогноз по текущему проблемному вопросу. Как правило, это будет тот же результат, что и в наиболее похожей аналогии. В качестве альтернативы определите несколько возможных исходов, или сценариев, на основе различных исходов аналогичных ситуаций. Затем используйте аналогичные случаи для определения движущих сил или политических действий, которые могут повлиять на исход текущей ситуации.
Истоки этой техники
Более подробно эта техника описана в книге Kesten C. Green и J. Scott Armstrong, "Structured Analogies for Forecasting", в Principles of Forecasting: Руководство для исследователей и практиков, под ред. J. Scott Armstrong (New York: Springer Science+Business Media, 2001), и www.forecastingprinciples.com/paperpdf/Structured_Analogies.pdf .
ИСПОЛНЕНИЕ РОЛИ
В ролевых играх аналитики берут на себя роли лидеров, которые являются объектом их анализа, и разыгрывают их реакцию на происходящее. Эта техника также известна как игровая, но мы используем здесь название "Ролевая игра", чтобы отличить ее от более сложных форм военной игры. В данной методике речь идет о простой ролевой игре, когда исходным сценарием является текущая ситуация, возможно, с реальным или гипотетическим новым событием, которое только что произошло и на которое игроки должны отреагировать.
Когда использовать
Ролевые игры часто используются для улучшения понимания того, что может произойти при взаимодействии двух или более людей, организаций или стран, особенно в конфликтных ситуациях или на переговорах. Она показывает, как каждая сторона может отреагировать на заявления или действия другой стороны. Много лет назад Ричардс Хойер участвовал в нескольких ролевых играх, в том числе в одной, где аналитики Советского Союза из всего разведывательного сообщества играли роль членов Политбюро, принимавших решение о преемнике советского лидера Леонида Брежнева. Рэнди Ферсон также организовал несколько ролевых игр по Латинской Америке с участием аналитиков разведки и высокопоставленных политических чиновников. Ролевые игры имеют желаемый побочный продукт, который может быть частью обоснования использования этой техники. Это полезный механизм для объединения людей, которые, хотя и работают над общей проблемой, имеют мало возможностей встретиться и обсудить свои взгляды на эту проблему. Ролевая игра может привести к долгосрочным преимуществам, которые возникают при взаимопонимании и постоянном сотрудничестве. Чтобы извлечь максимальную пользу, организатор игры должен предоставить участникам возможность провести время в неформальной обстановке.
Добавленная стоимость
Ролевая игра - это хороший способ посмотреть на проблему с точки зрения другого человека, получить представление о том, как думают другие люди, или получить представление о том, как другие люди могут реагировать на действия США. Игра в роли дает человеку возможность думать и действовать по-другому. Простая попытка представить, как будет думать и реагировать другой лидер или страна, что часто делают аналитики, не является ролевой игрой и, вероятно, менее эффективна, чем ролевая игра. Нужно действительно играть роль и стать, в некотором смысле, тем человеком, чья роль взята на себя. Именно "проживание" роли открывает ментальную модель человека и позволяет связать факты и идеи друг с другом способами, отличными от привычных шаблонов.
Ролевые игры особенно полезны для понимания возможных исходов конфликтной ситуации. Стороны конфликта часто действуют и реагируют многократно, и их поведение может меняться в результате их взаимодействия. Существует ряд исследований, показывающих, что эксперты, использующие независимое суждение, предсказывают исход такого конфликта не лучше, чем случайность. Эффективность значительно повышается, если использовать "симуляцию взаимодействия" (Role Playing) для разыгрывания конфликтов.3
Ролевая игра не обязательно дает "правильный" ответ, но она обычно позволяет игрокам увидеть некоторые вещи в новом свете. Игроки лучше осознают, что "место, где ты стоишь, зависит от того, где ты сидишь". Меняя роли, участники могут увидеть проблему в другом контексте. Большинство участников считают свой опыт полезным для получения новой информации и понимания.4 Объединение аналитиков из разных офисов и агентств дает каждому участнику возможность провести скромную проверку реальности своих взглядов. Участники вынуждены довольно прямолинейно столкнуться с тем фактом, что их предположения о проблеме не обязательно разделяются другими. Эта техника помогает им избежать ловушек, когда они придают слишком большое значение первым впечатлениям и видят закономерности там, где их нет.
Метод
Большинство игр, проводимых в Министерстве обороны и в академических кругах, довольно сложны, поэтому требуют значительной подготовительной работы. Но это не обязательно так. Подготовительной работы (например, написания сценариев) можно избежать, начав игру с текущей ситуации, которая уже известна аналитикам и лицам, принимающим решения, а не с вымышленного сценария, который участники должны выучить. Для начала игры достаточно одной условной новости или разведывательного сообщения. По опыту авторов, полезную политическую игру можно провести всего за один день, вложив лишь скромные средства в подготовительную работу.
По возможности ролевая игра должна проводиться вне офиса, с выключенными мобильными телефонами. Нахождение вдали от офиса исключает прерывания и позволяет участникам представить себя в другой обстановке, с другим набором обязательств, интересов, амбиций, страхов и исторических воспоминаний.
Каждый участник обычно играет отдельного иностранного лидера или заинтересованную сторону, и в некоторых случаях перед игрой ему необходимо подготовиться, изучив роль, интересы и личность этого человека. Игра может имитировать принятие решений руководством одной страны или группы, или взаимодействие между лидерами двух или более стран или групп. Чтобы сократить численность команд до легко управляемого размера и обеспечить активную роль для всех участников, может быть целесообразно, чтобы один участник играл две или более менее активных ролей.
Аналитик, который планирует и организует игру, возглавляет группу контроля. Эта группа следит за временем, чтобы игра шла по плану, служит каналом связи для передачи сообщений между командами, руководит анализом результатов игры и помогает составить отчет о результатах игры, в котором кратко излагаются произошедшие события и извлеченные уроки. Группа контроля также играет любую роль, которая становится необходимой, но не была предусмотрена - например, посредника Организации Объединенных Наций. Если необходимо удержать игру в нужном русле или направить ее в нужное русло, группа контроля может ввести новые события, такие как террористический акт, вызывающий эмоции, или новое программное заявление президента США по данному вопросу.
После окончания игры или на следующий день необходимо провести анализ результатов. Если все участники согласны с тем, что они хорошо сыграли свои роли, может возникнуть естественная тенденция считать, что исход игры - это разумный прогноз того, что в итоге произойдет в реальной жизни. Это естественное предубеждение в пользу результатов игры необходимо проверить во время анализа результатов. Группа контроля во время игры должна записывать все высказывания или действия любого игрока, которые, как кажется, задали направление развития игры. Затем группа должна обсудить каждый из этих поворотных моментов, включая то, какие еще разумные действия были доступны этому игроку и могли ли другие действия привести к другому исходу игры.
Потенциальные ловушки
Одним из ограничений ролевых игр является сложность обобщения из игры в реальный мир. Если что-то происходит в ролевой игре, это не обязательно означает, что так будет и в будущем. Это замечание кажется очевидным, но на самом деле оно может стать проблемой. Из-за непосредственности опыта и личного впечатления, произведенного симуляцией, результат может оказать более сильное влияние на мышление участников, чем это оправдано известными фактами. Как мы обсудим, эта реакция должна быть учтена при анализе результатов.
J. Скотт Армстронг, известный специалист по методологии прогнозирования, изучил литературу о валидности ролевых игр как метода предсказания решений. Он обнаружил, что эмпирические данные подтверждают гипотезу о том, что ролевые игры обеспечивают большую точность прогнозирования исхода конфликтов по сравнению с индивидуальным экспертным мнением. В пяти различных исследованиях ролевая игра предсказала правильный исход в 56 процентах случаев из 143 прогнозов, в то время как экспертное мнение оказалось верным в 16 процентах случаев из 172 прогнозов. (См. "Происхождение этой техники"). Исход конфликтных ситуаций трудно предсказать, потому что они включают в себя серию действий и реакций, причем каждое действие зависит от предыдущей реакции другой стороны на предыдущее действие и так далее. Люди не обладают когнитивными способностями, чтобы проигрывать в голове столь сложные ситуации. Разыгрывание ситуаций и реакций полезно, потому что оно имитирует этот тип последовательного взаимодействия.
Результаты Армстронга подтверждают использование ролевых игр в качестве полезного инструмента для анализа разведданных, но они не подтверждают, что результат можно рассматривать как достоверное предсказание. Несмотря на то что Армстронг признал результаты ролевой игры более точными, чем мнение эксперта, коэффициент ошибок для ролевой игры все равно был достаточно велик. Более того, условия, в которых Ролевая игра используется для анализа разведданных, сильно отличаются от тех исследований, которые рассматривал и проводил Армстронг. Когда техника используется для анализа разведданных, целью является не четкое предсказание, а лучшее понимание ситуации и возможных исходов. Метод не заканчивается с завершением ролевой игры. Обязательно проводится анализ ключевых поворотных моментов и того, как мог бы измениться исход, если бы в ключевые моменты игры были приняты другие решения.
Истоки этой техники
Ролевая игра - это базовая техника во многих различных областях аналитики. Описание ее здесь основано на личном опыте Ричардса Хойера и Рэнди Ферсона, а также на информации из следующих источников: Robert Mandel, "Political Gaming and Foreign Policy Making During Crises," World Politics 29, no. 4 (июль 1977 г.); и Дж. Скотт Армстронг, "Ролевые игры: Метод прогнозирования решений" в Principles of Forecasting: Руководство для исследователей и практиков", под ред. Дж. Скотт Армстронг (Нью-Йорк: Springer Science+Business Media, 2001).
АНАЛИЗ КРАСНОЙ ШАПОЧКИ
Интеллектуальные аналитики часто пытаются спрогнозировать действия противника или конкурента. При этом им необходимо избегать распространенной ошибки зеркального отражения - естественной склонности считать, что другие думают и воспринимают мир так же, как и мы. Анализ Red Hat5 - это полезная техника, позволяющая попытаться воспринять угрозы и возможности так, как их видят другие, но сама по себе эта техника имеет ограниченную ценность без глубокого понимания культуры другой страны и народа.
Чтобы увидеть варианты, с которыми сталкиваются иностранные лидеры, такими, какими их видят эти лидеры, необходимо понять их ценности и предположения, а также их заблуждения и непонимание. Без такого понимания интерпретация решений иностранных лидеров или прогнозирование будущих решений зачастую являются не более чем частично обоснованными спекуляциями. Слишком часто поведение иностранных лидеров кажется "иррациональным" или "не отвечающим их собственным интересам". Такие выводы часто свидетельствуют о том, что аналитики проецируют американские ценности и концептуальные рамки на иностранных лидеров и общества, вместо того чтобы понять логику ситуации, как она представляется им самим.
-Ричардс Дж. Хойер-младший, Психология разведывательного анализа (1999)
Когда использовать
Шансы на точность анализа Red Hat выше, если пытаться предугадать поведение конкретного человека, имеющего право принимать решения. Авторитарные лидеры, а также небольшие сплоченные группы, такие как террористические ячейки, являются очевидными кандидатами для такого рода анализа. Шансы сделать точный прогноз относительно решения противника или конкурента значительно ниже, если это решение сдерживается законодательной властью или находится под влиянием конфликтующих групп интересов. В правоохранительных органах Red Hat Analysis может эффективно использоваться для моделирования вероятного поведения преступника или наркобарона.
Добавленная стоимость
Есть большая доля истины в поговорке "место, где ты стоишь, зависит от того, где ты сидишь". Red Hat Analysis - это техника рефрейминга6, которая требует от аналитика принять и принять решения, соответствующие культуре иностранного лидера, сплоченной группы, преступника или конкурента. Это сознательное усилие представить ситуацию так, как ее воспринимает объект, помогает аналитику получить другой и, как правило, более точный взгляд на проблему или вопрос. Рефрейминг проблемы обычно меняет точку зрения аналитика, превращая его из аналитика, наблюдающего и прогнозирующего поведение противника, в лидера, который должен принять сложное решение в рамках данной оперативной культуры. Этот процесс переосмысления часто вводит новые и различные стимулы, которые могли бы не учитываться в традиционном анализе. Например, в ходе учений Red Hat участники могли бы задать себе такие вопросы: "Чего ждут от меня мои сторонники?" "Действительно ли мне нужно принять это решение сейчас?" "Каковы последствия принятия неверного решения?" "Как отреагируют Соединенные Штаты?"
Метод
Соберите группу экспертов с глубоким знанием цели, оперативной обстановки, личности, мотивов и стиля мышления старшего лица, принимающего решения. Если это возможно, постарайтесь включить в группу людей, хорошо знакомых с культурой противника, говорящих на том же языке, имеющих ту же этническую принадлежность или много живших в данном регионе.
Представьте экспертам ситуацию или стимул и спросите их, как бы они поступили, столкнувшись с этой ситуацией. Например, вы можете попросить отреагировать на такую ситуацию: "Соединенные Штаты только что ввели санкции против вашей страны". Или: "Мы собираемся запустить новый продукт. Как, по-вашему, отреагируют наши конкуренты?". Причина, по которой необходимо сначала спросить экспертов, как бы они отреагировали, заключается в том, чтобы установить базовую линию для оценки вероятности того, что противник отреагирует иначе.7
После того как эксперты сформулировали, как бы они отреагировали или поступили, попросите их объяснить, почему, по их мнению, они повели бы себя именно так. Попросите экспертов перечислить, какие основные ценности или основные предположения мотивировали их поведение или действия. Опять же, этот шаг устанавливает базовую линию для оценки того, почему противник, скорее всего, отреагирует иначе.
После того как они убедительно объяснят, почему они решили действовать именно так, попросите экспертов поставить себя на место противника или конкурента и смоделировать, как бы отреагировал их противник или конкурент. На этом этапе эксперты должны спросить себя: "Разделяет ли наш противник или конкурент наши ценности, мотивы или методы работы?" Если нет, то как эти различия заставляют их действовать так, как мы, возможно, не предполагали до участия в этом упражнении?
Если вы пытаетесь предугадать действия группы или организации, воспользуйтесь техникой ролевых игр. Чтобы получить культурный опыт, которого в противном случае может не хватить, используйте метод Дельфи ( глава 9 ) для привлечения экспертов, находящихся в разных географических точках.
Представляя результаты, опишите альтернативные варианты, которые рассматривались, и обоснование выбора пути, по которому, как считается, человек или группа пойдут с наибольшей вероятностью. Рассмотрите другие, менее традиционные способы представления результатов анализа, например следующие:
- Описание гипотетического разговора, в котором лидер и другие игроки обсуждают проблему от первого лица.
- Составление документа (набора инструкций, военных приказов, директивных документов или директив), который, скорее всего, создаст противник или конкурент.
На рис. 8.4 показано, как можно использовать технику "Красная шляпа" для поимки грабителей банков.
Рисунок 8.4 Использование анализа Red Hat для поимки грабителей банков
Источник: Эрик Хесс, старший менеджер по биометрическим продуктам, MorphoTrak, Inc. Из неопубликованного доклада "Распознавание лиц для уголовных расследований", представленного на конференции Международной ассоциации аналитиков разведки правоохранительных органов, Лас-Вегас, 2009 г. Воспроизводится с разрешения.
Потенциальные ловушки
Прогнозирование человеческих решений или результатов сложного организационного процесса затруднительно при самых благоприятных обстоятельствах. Например, насколько успешно вы сможете спрогнозировать сложные решения, которые предстоит принять президенту США или даже мэру вашего города? Еще сложнее иметь дело с чужой культурой и значительными пробелами в доступной информации. Зеркальной визуализации трудно избежать, поскольку в отсутствие глубокого понимания чужой ситуации и культуры ваши собственные представления кажутся единственным разумным способом взглянуть на проблему.
Распространенная ошибка в наших представлениях о поведении других людей, организаций или правительств всех типов, вероятно, будет еще более распространенной при оценке поведения иностранных лидеров или групп. Речь идет о тенденции приписывать поведение людей, организаций или правительств характеру действующего лица и недооценивать влияние ситуационных факторов. Эту ошибку особенно легко совершить, если предположить, что актор имеет злые намерения, но наше понимание давления на него ограничено. И наоборот, люди склонны считать, что их собственное поведение почти полностью обусловлено ситуацией, в которой они оказались. Мы редко считаем себя плохим человеком, но часто видим злые намерения в других. Это известно когнитивным психологам как "фундаментальная ошибка атрибуции".8
Аналитики всегда должны пытаться увидеть ситуацию с точки зрения другой стороны, но если у них нет глубоких знаний о культуре и операционной среде объекта исследования, они часто будут ошибаться и станут жертвой зеркального отражения. Осознание этой неопределенности должно побудить аналитиков использовать такие слова, как "возможно" и "может произойти", а не "вероятно" или "вероятно", когда они сообщают о результатах анализа Red Hat. Ключевым первым шагом в предотвращении зеркального отражения является определение того, как бы вы себя повели и почему. После того как эта исходная ситуация установлена, аналитик задается вопросом, будет ли противник вести себя иначе и почему это может произойти. Мотивирован ли противник другими стимулами, или у него другие основные ценности? Затем задача Red Hat Analysis заключается в том, чтобы проиллюстрировать, как эти различия приведут к различным политикам или поведению.
Взаимосвязь с другими техниками
Анализ Red Hat отличается от анализа Red Team Analysis тем, что его может провести или организовать любой аналитик, которому необходимо понять или спрогнозировать поведение противника и который обладает или может получить доступ к необходимым культурным знаниям. Анализ "красной команды" - это метод анализа проблем, описанный в главе 9 . Обычно проводится постоянным подразделением организации или временной группой, укомплектованной людьми, которые обладают достаточной квалификацией, чтобы думать как противник или играть его роль. Цель Red Hat Analysis - использовать имеющиеся ресурсы для разработки наилучшего возможного анализа поведения противника или конкурента. Цель анализа "Красной команды" обычно заключается в том, чтобы бросить вызов общепринятым представлениям или команде противника.
ТЕЛЕГРАМКанал с обзорами, анонсами новинок и книжными подборками
Книжный Вестник
Бот для удобного поиска книг (если не нашлось на сайте)
Поиск книг
Персональные книжные рекомендации
Что почитать?
Свежие любовные романы в удобных форматах
Любовные романы
Детективы и триллеры, все новинки
Детективы
Фантастика и фэнтези, все новинки
Фантастика
Отборные классические книги
Классика
ВКОНТАКТЕБиблиотека с любовными романами, которая наверняка придётся по вкусу женской части аудитории
Любовные романы
Библиотека с фантастикой и фэнтези, а также смежных жанров
Фантастика
Самые популярные книги в формате фб2
Топ фб2
книги