Методы коллективных экспертных оценок

Методы коллективных экспертных оценок — это метод комиссий, метод Дельфи, метод «мозгового штурма»; метод морфологического анализа.

Содержание метода «комиссий» следующее. Создается рабочая группа, в функции которой входят: назначение экспертов, проведение опроса, обработка материалов, анализ результатов коллективной экспертной оценки. Уточняются основные направления развития объекта, а также составляется матрица, отражающая генеральную цель, подцели и средства их достижения, т. е. направления научных исследований и разработок, результаты которых могут быть использованы для достижения цели.

Затем разрабатываются вопросы для экспертов. Это может быть перечень или таблица, но содержание вопросов должно определяться спецификой прогнозируемого объекта. Далее следуют проведение опроса экспертов и статистическая обработка материалов, которые характеризуют обобщенное мнение и степень согласованности индивидуальных оценок экспертов. Они служат исходной базой для синтеза прогнозных гипотез и вариантов развития исследуемого явления или процесса. Методика представляет собой совокупность оценок относительной важности, назначенных экспертами каждого из оцениваемых направлений исследований и разработок, выражающихся в баллах и принимающих значения от 0 до 1, от 0 до 10, от 0 до 100 и т. д. Эти оценки по определенному вопросу сводятся в таблицу, строки которой соответствуют направлениям исследований, а столбцы — порядковые номера экспертов.

Метод «комиссий» состоит в определении согласованности мнений экспертов по перспективным направлениям развития объекта прогнозирования, сформулированным ранее отдельными специалистами. При этом имеется ввиду, что развитие данного объекта не может быть определено другими методами.

Пример: в администрацию города поступили многочисленные просьбы от жителей отдаленного от центра района города о том, чтобы в их районе была построена школа. Со стороны администрации была проведена следующая работа:

• — создание рабочих групп, обеспечивающих подготовку и поведение опроса, обработку материалов и анализ результатов экспертной оценки;
• — уточнение основных направлений развития объекта, определение генеральной цели;
• — разработка вопросов для экспертов, обеспечение однозначности понимания экспертами определенных вопросов, а также независимости их суждений;
• — назначение группы экспертов для разработки прогноза;
• — проведение опроса и обработка материалов;
• — определение окончательной оценки опроса, которая выводится либо как среднее суждение, либо как среднее арифметическое, либо как среднее взвешенное значение оценки.

«Метод Дельфи» — один из наиболее распространенных методов экспертных оценок. Его основными особенностями являются: анонимность экспертов, полный отказ от личных контактов экспертов и коллективных обсуждений; многоуровневая процедура опроса экспертов посредством их анкетирования; обеспечение экспертов информацией, включая и обмен ею между экспертами, после каждого тура опроса при сохранении анонимности оценок, аргументации и критики; обоснование ответов экспертов по запросу организаторов.

Метод предназначен для получения относительно надежной информации в ситуациях ее острой недостаточности. Например, может быть использован в задачах долгосрочного научно-технического комплексного прогнозирования.

Метод «мозгового штурма». В самых широких кругах известен метод с громким названием «мозговой штурм». С этим интригующим словосочетанием — «мозговой штурм» — больше знакомы инженеры, изучавшие эвристические методы творчества. Эвристика шумный успех в романтичные 60-е, когда очень многим казалось, что за ближайшим историческим поворотом человечество ожидает благоденствие, материальную часть которого ваяют бородатые «физики», а духовную составляющую — неистовые романтики-«лирики». Метод мозгового штурма появился в Соединенных Штатах Америки в конце 30-х годов, а окончательно оформился и стал известен широкому кругу специалистов с выходом в 1953 году книги А. Осборна «Управляемое воображение», в которой раскрывались принципы и процедуры творческого мышления. Осборн предположил, что рождение новых, нестандартных идей «тормозит» особенность человеческого сознания, которая проявляется в подсознательном желании «подвергать критике» любую идею. Иначе говоря, в любом из нас таится персональный «цензор», отсеивающий по принципу «пройдет — не пройдет», отталкиваясь при этом от собственных понятий об «общепринятых нормах» предшествующего личного и общественного опыта, субъективных представлений о «рациональном и иррациональном».

Осборн предложил удивительно простой подход — разделить во времени и пространстве два процесса: генерирование идей и критический анализ идей. При этом идеи рождаются группой «генераторов» и теряют свое «персональное» авторство, становясь плодом коллективного творчества. По Осборну, это помогает высвобождать творческий потенциал сознания любого из нас, не скованного страхом попасть «под ножницы цензора».

Структурно метод довольно прост. Он представляет собой двухэтапную процедуру решения задачи: на первом этапе выдвигаются идеи, а на втором они конкретизируются и развиваются. Словосочетание, предложенное А. Осборном — brain-storming допускает несколько вариантов перевода. В настоящее время наиболее распространенным названием данного метода является «мозговой штурм». Распространены также варианты перевода: «мозговая атака», «конференция идей».

Для участия в этапе генерации идей целесообразно привлекать людей, отличающихся хорошими творческими способностями, большой скоростью мыслительных процессов, легкостью включения в новые ситуации, гибкостью, способностью быстро переключать внимание с одного аспекта на другой. Умение отойти от привычных установок и психологических «тормозов», ограничений позволяет расширить область возможностей каждого из участников штурма. Снятие давления предыдущего профессионального и житейского опыта повышает чувствительность к очень слабым ассоциациям, на основе которых зачастую и рождаются неожиданные, оригинальные, а иногда — шокирующие творческие находки.

Западные специалисты считают наилучшим способом мозгового штурма так называемый метод I-G-I (индивид — группа — индивид).

К участникам штурма обращаются с просьбой разработать исходные идеи. Для этого в одной комнате собираются 4—7 человек. Участникам не разрешено разговаривать друг с другом — вначале идет индивидуальная работа. Ведущий представляет стратегию позиционирования, которая должна лежать в основе творческих идей, а затем действует как наблюдатель. На первом этапе участники получают два указания: 1) выдавать количество, а не качество и 2) выдать не менее 10 решений, при этом на каждое дается не более 15 минут.

• 1. Ведущий собирает изложенные на бумаге идеи и воспроизводит их на экране проектора или на доске. Далее начинается этап группового обсуждения по следующему сценарию: каждый автор кратко представляет свою идею, а остальные участники высказывают замечания и пытаются соотнести каждую новую идею с теми, которые уже были заслушаны.
• 2. После группового обсуждения участники вновь переходят к самостоятельной работе и голосуют за ту идею, которую считают лучшей. Все имеют равное право голоса. В итоге выбираются несколько лучших идей. Можно оценивать их по порядку 1, 2, 3 и так далее до наименее интересной. Получившие наивысшую общую оценку идеи будут переданы на реализацию и тестирование.

Итак «мозговой штурм» — это выявление вероятностных вариантов развития объекта прогнозирования и их оценка. При «мозговой атаке» сначала активизируется творческий потенциал специалистов, что находит отражение в генерации определенной идеи. Затем следует процесс деструирования (разрушения, критики) этой идеи и формулируется контридея. Это позволяет за короткое время путем вовлечения всех экспертов в активный творческий процесс получить продуктивные результаты.

Пример метода «мозгового штурма»: при обсуждении вопросов строительства нового, ультрасовременного стадиона, с нестандартной архитектурой, были приглашены ряд специалистов с креативными целями и был использован метод «мозгового штурма».

Метод морфологического анализа представляет собой упорядоченный способ рассмотрения объекта и получения систематизированной информации по всем возможным вариантам его развития. Он включает ряд приемов, имеющих единый принцип действий: систематизированное рассмотрение характеристик объекта, стремление не пропустить ни одной из них, ничего не отбрасывать без предварительного исчерпывающего исследования. Этой цели служит прием систематизированного охвата информации с последующим исследованием ее по методу «морфологического ящика». Последний строится в виде дерева или матрицы, в клетках которых помещены соответствующие характеристики объекта. Последовательное соединение одного из параметров первого уровня с одним из параметров последующего уровня представляет собой одно из возможных состояний объекта или решений проблемы. В результате создается новая информация об изучаемом объекте и вырабатывается оценка всех возможных альтернатив его состояния.

Пример: можно использовать научно-технических прогнозах, при развитии какой-либо отрасли науки.

Группа методов коллективных экспертных оценок основана на том, что при коллективном мышлении, во-первых, выше точность результата и, во-вторых, при обработке индивидуальных независимых оценок, выносимых экспертами, могут возникнуть продуктивные идеи.