После окончания игры или на следующий день необходимо провести анализ результатов. Если все участники согласны с тем, что они хорошо сыграли свои роли, может возникнуть естественная тенденция считать, что исход игры - это разумный прогноз того, что в итоге произойдет в реальной жизни. Это естественное предубеждение в пользу результатов игры необходимо проверить во время анализа результатов. Группа контроля во время игры должна записывать все высказывания или действия любого игрока, которые, как кажется, задали направление развития игры. Затем группа должна обсудить каждый из этих поворотных моментов, включая то, какие еще разумные действия были доступны этому игроку и могли ли другие действия привести к другому исходу игры.
Потенциальные ловушки
Одним из ограничений ролевых игр является сложность обобщения из игры в реальный мир. Если что-то происходит в ролевой игре, это не обязательно означает, что так будет и в будущем. Это замечание кажется очевидным, но на самом деле оно может стать проблемой. Из-за непосредственности опыта и личного впечатления, произведенного симуляцией, результат может оказать более сильное влияние на мышление участников, чем это оправдано известными фактами. Как мы обсудим, эта реакция должна быть учтена при анализе результатов.
J. Скотт Армстронг, известный специалист по методологии прогнозирования, изучил литературу о валидности ролевых игр как метода предсказания решений. Он обнаружил, что эмпирические данные подтверждают гипотезу о том, что ролевые игры обеспечивают большую точность прогнозирования исхода конфликтов по сравнению с индивидуальным экспертным мнением. В пяти различных исследованиях ролевая игра предсказала правильный исход в 56 процентах случаев из 143 прогнозов, в то время как экспертное мнение оказалось верным в 16 процентах случаев из 172 прогнозов. (См. "Происхождение этой техники"). Исход конфликтных ситуаций трудно предсказать, потому что они включают в себя серию действий и реакций, причем каждое действие зависит от предыдущей реакции другой стороны на предыдущее действие и так далее. Люди не обладают когнитивными способностями, чтобы проигрывать в голове столь сложные ситуации. Разыгрывание ситуаций и реакций полезно, потому что оно имитирует этот тип последовательного взаимодействия.
Результаты Армстронга подтверждают использование ролевых игр в качестве полезного инструмента для анализа разведданных, но они не подтверждают, что результат можно рассматривать как достоверное предсказание. Несмотря на то что Армстронг признал результаты ролевой игры более точными, чем мнение эксперта, коэффициент ошибок для ролевой игры все равно был достаточно велик. Более того, условия, в которых Ролевая игра используется для анализа разведданных, сильно отличаются от тех исследований, которые рассматривал и проводил Армстронг. Когда техника используется для анализа разведданных, целью является не четкое предсказание, а лучшее понимание ситуации и возможных исходов. Метод не заканчивается с завершением ролевой игры. Обязательно проводится анализ ключевых поворотных моментов и того, как мог бы измениться исход, если бы в ключевые моменты игры были приняты другие решения.
Истоки этой техники
Ролевая игра - это базовая техника во многих различных областях аналитики. Описание ее здесь основано на личном опыте Ричардса Хойера и Рэнди Ферсона, а также на информации из следующих источников: Robert Mandel, "Political Gaming and Foreign Policy Making During Crises," World Politics 29, no. 4 (июль 1977 г.); и Дж. Скотт Армстронг, "Ролевые игры: Метод прогнозирования решений" в Principles of Forecasting: Руководство для исследователей и практиков", под ред. Дж. Скотт Армстронг (Нью-Йорк: Springer Science+Business Media, 2001).
АНАЛИЗ КРАСНОЙ ШАПОЧКИ
Интеллектуальные аналитики часто пытаются спрогнозировать действия противника или конкурента. При этом им необходимо избегать распространенной ошибки зеркального отражения - естественной склонности считать, что другие думают и воспринимают мир так же, как и мы. Анализ Red Hat5 - это полезная техника, позволяющая попытаться воспринять угрозы и возможности так, как их видят другие, но сама по себе эта техника имеет ограниченную ценность без глубокого понимания культуры другой страны и народа.