Методики экспертного вопроса.

Экспертный опрос — это совокупность (еще говорят: комплекс) различных методов, приемов, техник, процедур. Прежде всего процедура работы экспертов может быть совместной или отдельной. Среди коллективных процедур можно обнаружить метод «мозговая атака (штурм)», обычную дискуссию, дельфийскую технику. Выделим две основные процедуры: обычный опрос и многоступенчатый опрос. Первая предполагает проведение разового анонимного опроса. Он и в организационном, и в экономическом отношении наиболее легкий. В принципе он мало чем отличается от обычного массового опроса. Вторая процедура связана с тенденцией усложнять задачу экспертов. Многоступенчатость вводится для того, чтобы на каждом последующем этапе эксперты решали все более сложные задачи. Обычно экспертам предлагается использовать различные логические методы анализа («дерево целей», таблицы «взаимного влияния», сценарии и т.д.). Сам по себе многоступенчатый опрос может быть организован по-разному: сначала могут быть поставлены общие вопросы, затем все более конкретные (метод «воронки») или, наоборот, в конце эксперты делают некие обобщения (метод «пирамиды»).

Так как участники опроса, как правило, осведомлены о цели и задачах опроса, теряется смысл использования косвенных вопросов, проективной техники, тестов и других приемов, с помощью которых обычно выявляют позиции респондента без его ведома. Их использование, а также применение «вопросов-ловушек» может даже нанести заметный ущерб качеству экспертного опроса. Ведь эксперт — это участник научного исследования, всякие попытки превратить его из субъекта исследования в объект могут поколебать основы взаимного доверия, которое необходимо между организаторами исследования и экспертами. Чтобы добиться активного и серьезного отношения эксперта, дать ему почувствовать себя полноправным участником научного исследования, его необходимо в какой-то мере познакомить с программой исследования. В силу специфики экспертной аудитории основным методом опроса становится не интервью, а анкета, заполняемая самим экспертом. Причем в анкете значительно чаще прибегают к открытым вопросам, которые позволяют лучше установить творческий потенциал эксперта, и дают возможность участнику опроса высказать оригинальную точку зрения. Кроме того, отказ от подсказок ослабляет влияние стереотипов.

Методисты выделяют также методы заочного и очного экспертного опроса. К методам первого из них относятся: письменный опрос (сбор мнений), анкетирование (формализованный опрос), метод независимых характеристик и дельфийская техника, ко вторым — интервью, совещание, исследовательская беседа, «мозговая атака». Число экспертов не должно превышать 10—15 человек.

Наиболее простым видом заочного опроса экспертов является письменный опрос (сбор мнений). Он состоит в том, что экспертам рассылаются (раздаются) специально подготовленные опросные листы, в которых они должны изложить свое мнение по существу поставленных вопросов. При составлении экспертного вопросника используется от 50 до 90% открытых вопросов. Сбор мнений подобен свободному интервью и отличается от него лишь письменной формой опроса, которая дает возможность привлечь большое число экспертов. Правда, заочный опрос связан с организационными трудностями, обусловленными низким уровнем возврата анкет.

Формализованный опрос экспертов представляет собой обычное анкетирование с вопросами, сформулированными как в открытой, так и в закрытой форме. По целям, задачам и содержанию этот метод существенно отличается от письменного сбора мнений. Если последний проводится для выявления эвристичных, принципиально новых идей, взглядов на проблему, неожиданных подходов к старой проблеме, то анкетирование направлено на выяснение оценок тех или иных аспектов готового решения. Обычный метод анализа данных в таком случае — статистический.

Метод независимых характеристик позволяет дать обобщенную оценку одного явления, информация о котором поступает из нескольких независимых источников (от разных людей). На первом этапе происходит сравнение и сопоставление разных мнений, на втором — они обрабатываются с помощью математико-статистических процедур, на третьем — формулируются достоверные выводы. Такой метод активно применяется в социальной психологии для изучения деловых и личностных качеств индивида5. Здесь нескольких людей, хорошо знакомых с изучаемым человеком, просят охарактеризовать его по единой шкале, а затем обобщают независимые оценки в интегральный показатель. В коллективной оценке субъективные отклонения взаимопогашаются, что обеспечивает в конечном итоге объективный, научно обоснованный результат.

Одной из самых распространенных процедур проведения экспертного опроса выступает «дельфийская техника». Метод предусматривает опрос экспертов в несколько туров, обработку результатов каждого тура, информирование их об этих результатах и вновь повторение такой же процедуры. В первом туре ответы даются без аргументации. После обработки выделяются крайние и средние суждения и сообщаются экспертам. Во втором туре опрашиваемые вновь обращаются к своим оценкам. Так как они имели достаточно времени на размышление и узнали о существовании других позиций на этот счет, им предоставляется возможность пересмотреть свои взгляды либо, напротив, аргументировать. После второго тура обрабатываются новые оценки: крайние и средние мнения обобщаются, итоги вновь докладывают экспертам. Так повторяется 3—4 раза. Практика показывает, что после третьего или четвертого тура мнения экспертов не меняются. В ходе подобной процедуры вырабатывается согласованная оценка, при этом исследователь не должен игнорировать мнение тех, кто после неоднократных опросов остался на своей позиции.

Метод «Дельфы» направлен на усовершенствование процесса принятия экспертных оценок, но с такой целью, чтобы общую оценку выводила не математика и статистика, а сами люди, ориентируясь на мнение других, если надо корректируя его, усиливая свою аргументацию или отказываясь от нее в пользу наилучшей, более обоснованной точки зрения. Подобная техника позволяет уменьшить влияние недостаточно компетентных экспертов на групповую оценку, как это наблюдается при простом анкетировании. Оно достигается за счет полученной ценной информации от более компетентных экспертов.

Метод «мозговой атаки» («мозгового штурма») считается наиболее известным методом коллективного принятия творческих решений. Он представляет собой свободный, неструктурированный процесс генерирования собственных идей вокруг заданной темы, спонтанно предлагаемых участниками. Философия этого метода исходит из предположения, что при обычных приемах обсуждения возникновению новаторских идей препятствуют контрольные механизмы сознания, которые сковывают поток этих идей под давлением привычных, стереотипных форм принятия решения. Тормозящее влияние оказывают боязнь неудачи, страх оказаться смешным и т.д.

Этот метод разработан и описан американским психологом А.Ф. Осборном в 1938 г. Ученый обратил внимание на то, что одни люди легко выдвигают новые идеи, другие больше склонны к критическому анализу чужих идей. При обычных обсуждениях обе категории людей оказываются вместе и, как правило, мешают друг другу. Вот почему было решено разделить этапы генерирования идей и их анализа. Для этого создаются две группы: участники мозговой атаки — те, кто должен предложить новые варианты решения нужной задачи, и члены комиссии, которые будут обрабатывать предложенные материалы. В первую группу, которая будет генерировать идеи, сначала назначается руководитель, который будет эту группу укомплектовывать, включая в нее 4—11 человек. Члены этой группы не могут быть связаны отношениями «руководитель—подчиненный» из-за угрозы разрушения атмосферы доверия. Руководитель опроса сообщает членам группы суть решаемой проблемы за 2—3 дня до проведения «мозговой атаки». Проблема должна быть обозначена как можно более четко и всесторонне. При проведении мозговой атаки в группе создается непринужденная атмосфера. Этому содействует состав группы, поведение руководителя, выбор помещения, освещение и т.д. Никто из участников не должен бояться того, что его высказывания не представляют ценности. Предложения или идеи нельзя негативно оценивать ни словом, ни жестом, ни интонацией (любая критика запрещена), наоборот, желательна их поддержка и развитие. Свои мысли участники должны высказывать откровенно и свободно. Нередко это уменьшает скованность группы и является первопричиной рождения оригинальных идей. Поступившие при обсуждении предложения фиксирует секретарь. Мозговой штурм длится не более 2—3 ч. Слишком быстрое завершение нежелательно, так как установлено, что новые и оригинальные идеи возникают часто тогда, когда кажется, что исчерпаны все возможные мысли и ассоциации.

Распространенными считаются две формы мозговой атаки: простое совещание и совещание по круговой системе.

На простом совещании руководитель поочередно опрашивает каждого участника и просит высказать предложение по решению стоящей перед ними проблемы. Каждое решение заносится в список и нумеруется, затем этот список вывешивается у всех на виду. Критика или оценка идей не допускается. Особое значение уделяется созданию свободной и творческой обстановки, позволяющей всем экспертам беспрепятственно высказывать свои идеи и предложения. Большое значение имеет количество представленных предложений. В их выдвижении должны участвовать все. Особо ценится экспромт, т.е. предложения, возникшие тут же и под влиянием той информации, которую эксперт услышал от других. Они ценятся выше домашних заготовок, поскольку аккумулируют коллективную мысль, помноженную на знание ситуации и творческое воображение автора идеи. Если атака на непознанное идет слишком вяло, совещание переносят на другую дату, позволяя экспертам «дозреть».

При совещании по круговой системе эксперты разбиваются на небольшие группы, состоящие из 3 или 4 человек, где продуцируют новые идеи и записывают их на листе бумаги или на карточках (по 2—3 идеи на каждой). Затем члены малой группы обмениваются своими карточками, в результате чего к старым идеям добавляются новые. После троекратного обмена каждая подгруппа составляет сводный перечень выдвинутых идей. Затем собирается весь коллектив, на рассмотрение которого представляются групповые отчеты. Такую форму целесообразно использовать при снижении активности или когда участники отвлекаются в ожидании своей очереди.

Список идей, выдвинутых в результате «мозгового штурма», обычно довольно длинный (более 15—20). Ведущему бывает сложно определиться с их приоритетностью, а участникам — дождаться своей очереди на обсуждение. В помощь рекомендуют применять следующий метод. Перечень идей с порядковыми номерами вывешивается на видном месте. Каждый эксперт получает право на пять голосов, которыми он может распорядиться по своему усмотрению: по одному голосу за каждую из пяти идей, все пять — за одну, два голоса за одну идею и по одному за каждую из трех других и т.д. Такой подход позволяет каждому эксперту высказать свое предпочтение, а коллективу в целом — определиться с приоритетами. Другой способ: на заседании группы каждая идея зачитывается под своим номером, а эксперты голосуют поднятием рук. Число вытянутых пальцев на поднятой руке указывает на количество поданных голосов.

Метод «мозговой атаки наоборот» во многом напоминает обычную «мозговую атаку», но при этом разрешается высказывать критические замечания. Точнее сказать, критика специально поощряется, так как философия такого метода построена на том, чтобы все эксперты выявляли как можно больше недостатков у предлагаемых идей. Метод может дать неплохие результаты, если он выступает предваряющей процедурой к другим методам экспертизы.

Метод прогнозных сценариев — наиболее популярный в последние десятилетия метод экспертных оценок. Термин «сценарий» впервые был употреблен в 1960 г. футурологом Г. Каном при разработке картин будущего, необходимых для решения стратегических вопросов в военной области. Сценарий — это вероятностное описание картины будущего, составленной на основе компетентных технических суждений. Один прогноз включает несколько сценариев, в большинстве случаев три: оптимистический, пессимистический и промежуточный (наиболее вероятный, ожидаемый). Составление сценария происходит в несколько этапов: 1) структурирование и формулировка вопроса: сбор и анализ исходной информации, согласование задачи со всеми участниками проекта, выделение структурных характеристик проблемы; 2) определение факторов внешнего влияния; 3) нахождение показателей, желательно альтернативных, будущего состояния; 4) формирование и отбор согласующихся наборов предположений при помощи компьютерных программ; 5) разработка практических рекомендаций к сценарию будущего и определение возможных последствий его реализации.

Метод коллективного блокнота («банка» идей) — способ, основанный на сочетании независимого выдвижения идей каждым экспертом с последующей их коллективной оценкой.

Метод KJ — так называется метод антропологических исследований, когда исследователи сначала собирают коллекцию фактов о жизни племени, а затем просят туземцев объяснить их значение. Японский бизнес адаптировал метод KJ следующим образом: служащих компании просят набросать на листочках бумаги свои пожелания об усовершенствованиях процесса производства и предложения о том, что компании следует делать. Полученные пожелания и предложения анализируются, и на основе суммы мнений получается картина, на которой изображена перспектива компании и ее подразделений в будущем. Метод носит скорее интегрирующий, чем аналитический, характер.

Метод неспециалиста заключается в том, что решение проблемы предлагается лицам, которые никогда ею не занимались, но являются специалистами в смежных областях.

Пример. В Центре социологии региональных и национальных отношений ИСПИ РАН (рук. чл.-кор. РАН В.Н. Иванов) изучение проблем взаимодействия федерального центра и регионов построено на основе систематических опросов экспертных групп. В состав экспертных групп или так называемых групп специализированного сознания входили: специалисты областных (республиканских, краевых) и городских администраций, руководители предприятий и учреждений различной формы собственности, работники средств массовой информации, высшего образования, а также представители творческих союзов. Метод сбора информации — раздаточная анкета. География исследований была весьма широкой. По Сопоставимой методике исследования проводились в Москве, Ставрополе, Уфе, Петрозаводске, Якутске, Улан-Удэ, Тюмени, Новосибирске, Казани, Астрахани, Тамбове, Саранске, Рязани, Ростове-на-Дону, Волгодонске, Барнауле, Владикавказе, Нальчике, Назрани. Данные экспертных опросов, проведенных в 2000— 2002 гг., свидетельствуют, что если сложившаяся к концу 1990-хгг. ситуация в РФ могла быть охарактеризована как кризисная, а в начале 2000-х гг. она начинает выправляться (обнаружена положительная динамика оценок экспертов во времени). Ежегодные экспертные опросы, проводимые Отделом социальной экологии регионов ИСПИ РАН (рук. И. А. Сосунова), позволяют определить значимые для населения экологические проблемы, порождающие негативные социально-экологические процессы. В частности, установлено, что наиболее болезненно воспринимаются населением проблемы, проявляющиеся в сфере здравоохранения и порождающие социально-демографические, социально-экономические и иные последствия. В результате опроса членов экспертных советов по социальным и гуманитарным наукам ВАКа сотрудники Отдела теоретических проблем социоло-гии ИСПИ РАН (рук. Л.Н.Москвичев) получили следующие данные: почти половина экспертов отмечают снижение требований к кандидатским работам и около 40% экспертов отмечают снижение требований к докторским работам. Примерно такая же ситуация складывается и применительно к диссертациям по социологическим наукам.