Организация работы экспертов.

Перейдем к следующей методической проблеме — процедуре ра­боты экспертов.

На практике применяются различные процедуры. Различие между ними сводится в основном к следующим аспектам:

1) характер контактов экспертов друг с другом (анонимный или нет);

2) «обратная связь» в работе экспертов (наличие или отсутствие возможности самообучения в процессе экспертизы).

В соответствии с первым аспектом различаются очные и заочные (как правило, анонимные), в соответствии со вторым — одноразовые и многоразовые (в несколько туров) опросы.

Одна из главных разновидностей очного (и, как правило, однора­зового) опроса[3] — «мозговая атака»[4], или «коллективная генерация идей». В основе этой методики лежит организация коллективного обсуждения проблемы таким образом, чтобы стимулировать творчес­кую активность экспертов, обеспечить их взаимное влияние друг на друга, вызвать своеобразную «цепную реакцию идей» и добиться по­лучения качественно новой информации. В принципе «мозговая атака» широко применяется при решении любого типа проблем. Ее можно использовать в науке, технике, торговле, при решении социально-эко­номических проблем и проблем межличностных отношений. Резуль­таты мозговой атаки оказывают влияние на развитие личных качеств членов «мозгоатакующсго» коллектива. Но особое значение она имеет в социальном прогнозировании, где необходима качественно новая информация.

При проведении «мозгоатакующего» совещания обычно обраща­ют внимание на 4 основных правила:

1) критика исключена, единственной задачей является выдвиже­ние идей;

2) свободные ассоциации приветствуются; чем смелее и необыч­нее замысел, тем лучше; надо высказать все появившиеся идеи;

3) важно множество замыслов; чем больше замыслов, тем больше вероятность их использования (доказано, что количество замыслов рождает их качество);

4) комбинирование и улучшение замыслов желательно; участники совещания должны взаимно улучшать, комбинировать и направлять замыслы остальных; замыслы других могут быть использованы как «трамплин» для замыслов индивида; замыслы индивида являются, как правило, комбинацией замыслов других членов коллектива.

Ключевое звено такой организации работы экспертов — катего­рический запрет на критику любого мнения, оценки, рекомендации, высказанных во время заседания экспертов, какое бы негативное впе­чатление на первый взгляд они ни производили. Напротив, требуется развитие высказанной партнером мысли независимо от своего перво­начального отношения к ней, поиск альтернативных решений, выяв­ление принципиально новых подходов и т.п. Иными словами, меха­низм обратной связи, обеспечивающий самообучение экспертов, откры­вается только в одном направлении — поиске оптимального решения поставленной проблемы путем соревнования, конкуренции идей. Ни­какая альтернатива не будет предложена, если нет уверенности в том, что она будет принята и рассмотрена. Как раз большинство хороших замыслов утрачиваются из-за недоверия к себе, повышенной боязни критики и неадекватной оценки вероятности принятия предложения, вследствие чего члены коллектива вообще не предлагают эти идеи.

Поэтому создание атмосферы, в которой вообще недопустимы какие-либо отрицательные оценки или критические высказывания, спо­собствует появлению альтернатив.

На этом первом этапе все предложения принимаются доброжела­тельно. Возможность личных нападок, сведения «личных счетов» и «отбрасывания» идей после первых критических замечаний в этих условиях исключается.

Когда каждый член коллектива своими замыслами способствует появлению различных ассоциаций у всех остальных членов группы, все предложенные идеи считаются достоянием всего коллектива, а при окончательном выборе решения за него отвечает весь коллектив.

«Мозгоатакующее» совещание никогда не должно носить фор­мальный характер. Единственным формальным моментом является запись и фиксация количества мыслей. Совещание ведется в форме дружеской беседы. Шутливые предложения по решению проблемы тоже записываются.

Примерная продолжительность совещания не более 1,5-2 часов (учитывается крайняя напряженность умственного труда экспертов при такой организации работы). После первого часа интенсивной мозговой атаки большинство участвующих в совещании устают и думают, что они уже не способны что-либо предложить. Однако совещание следует продолжить. В заключительной части совещания у членов коллектива возникают обычно 2-3 наиболее оригинальные идеи. Новые и оригинальные мысли возникают тогда, когда кажется, что исчерпаны все мысли и ассоциации.

На второй или третий день после «мозгоатакующего» совещания созывается следующее совещание, которое должно из множества пред­ложенных мыслей выбрать наилучшие и решить, какие из них можно реализовать.

В новом совещании принимают участие те, кто не участвовал в «мозговой атаке». Оптимальное число участвующих в этом совещании 5-7 человек.

После проведения экспериментов и окончательньк испытаний используется примерно 10% предложенных мыслей.

Здесь вряд ли уместно подробное описание самой методики, до­вольно детально представленной в научной литературе и к тому же постоянно совершенствуемой. Достаточно указать, что в принципе все процедуры этого класса делятся на простые и управляемые.

Первые подразумевают спонтанную дискуссию по поставленной проблеме, что имеет эвристическую ценность само по себе и, кроме того, методически несложно, требует меньше времени и средств на подготовку, проведение и обработку материалов сессии. Однако при большой сложности проблем (характерных, в частности, для социоло­гического прогнозирования) такая процедура может оказаться недо­статочно эффективной из-за стихийного отклонения экспертов в сто­рону от поставленной проблемы, высказываний не по существу. В этих случаях целесообразно пойти на затрату дополнительных усилий для организации управляемой процедуры.

Данная процедура подразумевает заблаговременное четкое распре­деление ролей между экспертами согласно их способностям и функ­циональному назначению, чтобы держать процесс коллективной гене­рации идей на должном уровне.

Один из ведущих экспертов назнача­ется руководителем (председателем), «президентом круглого стола», удерживающим внимание экспертов на центральной теме дискуссии. В качестве «президента» может выступать сам организатор исследо­вания. В его обязанности входит постановка проблемы и обеспечения подготовки, проведения и обработки материалов совещания. Кроме того, он является высшей инстанцией, арбитром, к которому можно апеллировать при возникновении каких-либо недоразумений. Иногда дискуссию начинает специально выделенный докладчик, который за­остряет поставленную проблему таким образом, чтобы вызвать воз­можно более энергичную реакцию участников дискуссии, но чаше это входит в обязанности председателя.

Затем слово предоставляется экспертам-аналитикам, раскрываю­щим современное состояние и тенденции исследований по поставлен­ной проблеме. Далее в дело вступает центральное звено — эксперты-генераторы, отличающиеся способностью высказывать нетривиальные, оригинальные идеи. Их сменяют эксперты-регуляторы, в задачу кото­рых входит «приглушение», «притормаживание» обсуждения явно слу­чайных иди не относящихся к делу идей с целью возвращения дис­куссии в намеченное русло, чтобы полемика проходила в рамках объективного обсуждения и не переходила в русло взаимной оценки компетентности друг друга.

Им на смену приходят эксперты-стимуляторы, стремящиеся ожи­вить «заглохшие» почему-либо конструктивные идеи. Возможно по­вторное предоставление слова генераторам и другим экспертам. Нако­нец, можно выделить группу экспертов-селекторов, которые (жела­тельно уже после завершения беседы) оценивают высказанные пред­ложения, идеи, рекомендации, отбирают наиболее конструктивные из них и дают свободу руководителю, который подводит итоги.

Помимо перечисленных участников сессии к ним следует доба­вить экспертов-методистов, ответственных за подготовку, проведение и обработку материалов дискуссии с соблюдением необходимых ме­тодических требований, а также работников группы обеспечения, от­вечающих за техническую сторону дела. Оптимальное число экспертов в очном опросе за «круглым столом» 20-25 человек. Однако число участников дискуссии на практике большей частью не превышает 5-10 человек, поэтому некоторые эксперты выполняют несколько функций. Председателю приходится одновременно исполнять обязанности до­кладчика, аналитика, а иногда и селектора. Эксперт-генератор высту­пает также в роли стимулятора, эксперт-регулятор в роли селектора и т. д. Это предъявляет исключительно жесткие требования к отбору каждого члена экспертной группы, максимальному учету его способ­ностей и недостатков. Поскольку общая продолжительность сессии не должна превышать 1,5-2 часов, то необходим предельно жесткий рег­ламент (не более 2-3 минут на выступление) и строжайшая дисциплина дискуссии.

Другая разновидность очного опроса экспертов — «традиционная дискуссия», или «метод комиссии», — обычный обмен мнениями, в ходе которого каждый участник имеет право задавать вопросы высту­пающему, критиковать или поддерживать любую точку зрения, сам выступать неограниченное число раз, изменять или уточнять свою точку зрения с учетом полученной им новой информации. Конечно, такая процедура отнимает сравнительно много времени, особенно при «традиционном» регламенте 10-20 минут для каждого выступления, и имеет относительно низкий «к.п.д.». Но у нее есть и сильные стороны. Она обеспечивает мгновенную обратную связь и быстрое самообучение экспертов, вызывает соревнование между ними, позво­ляет подкреплять рациональные доводы эмоциональным воздействием, способствует быстрому преодолению возникающего иногда «взаимо­непонимания» экспертов. А, главное — она привычна, проста, не тре­бует специальной подготовки и организации.

Опыт показывает, что «традиционная дискуссия» сравнительно эффективна только при условии, если поставленная проблема хорошо знакома всем или, по крайней мере, подавляющему большинству участ­ников. В противном случае полагаться на ее результаты нецелесооб­разно.

Недостатки метода «традиционной дискуссии» вызвали к жизни третью разновидность очного опроса экспертов — «метод отнесенной оценки», еще один вариант управляемой процедуры опроса. Данная процедура используется для того, чтобы в сжатые сроки получить согласованное мнение по какой-то конкретной проблеме. В основу кладется процедура итерации, т.е. в данном случае повторение не­скольких циклов дискуссии с выявлением сущности наметившихся разногласий и постепенной выработки единого мнения всех или боль­шинства участников экспертизы, с оставлением за несогласными права на частное заключение. Такая процедура требует детально разработан­ного сценария обсуждения, в котором необходимо запрограммировать направленность дискуссии, распределение внимания в отношении от­дельных вопросов, регламент выступлений, логику обсуждения с уче­том цели и задач экспертизы и т.п. В отличие от «мозговой атаки» целенаправляющее воздействие председателя на ход и исход дискуссии осуществляется открыто. Существует еще несколько разновидностей очного опроса экспертов, но все они могут трактоваться как модифи­кация перечисленных трех.

Теперь о заочном виде экспертного опроса. Простейшая разно­видность заочного опроса экспертов — разовый анонимный опрос, ничем в принципе не отличающийся от опроса населения, сравнитель­но простой (ввиду небольшого числа респондентов) и поэтому наибо­лее распространенный. Его существенный недостаток, как и при «тра­диционной дискуссии», — низкий «к.п.д.»,

Этот недостаток, как и при очном опросе экспертов, породил заочный вариант «метода отнесенной оценки» — «дельфийскую тех­нику», «метод эвристического прогнозирования» (название данной техники прогноза заимствовано от названия древнегреческого города Дельфы, получившего известность еще до нашей эры как центр пред­сказаний оракулов). В основу этой методики положена идея о потенциальной возможности самообучения экспертов при проведении заоч­ного опроса в несколько туров. Гарантируется соблюдение аноним­ности респондентов (во избежание «давления авторитетов» и опасения за свою репутацию в случае «неожиданных» ответов). Респондентам предоставляется возможность знакомиться с материалами предыдуще­го тура и последовательно уточнять свои оценки по мере изучения новых аргументов.

«Дельфийская техника» помогает экспертам избавиться от сковы­вающего их фактора (мнения лидеров научного направления, господ­ствующие взгляды большинства, эмоциональное воздействие оппонен­тов, затруднительность публичного отказа от ранее высказанного мне­ния и т.п.) и вместе с тем сохранить ценную возможность не только высказывать оригинальные суждения, но и менять их с учетом новой информации без риска для своей репутации. Эксперты заполняют ано­нимные анкеты или подключаются непосредственно к работе с ЭВМ, что повышает скорость опроса при сохранении анонимности. После 1-го тура эксперты знакомятся с итоговыми характеристиками позиции группы в целом. Во 2-м туре они получают возможность либо сблизить свое мнение с позицией большинства (если это необходимо), либо изучить и обсудить причину отклонения. В 3-м туре новая информация откры­вает возможность еще раз пересмотреть точки зрения.

Это не значит, конечно, что частные заключения меньшинства или одиночек не должны приниматься во внимание. Напротив, их стоит исследовать особенно тщательным образом. Но для рекоменда­ций в сфере планирования и управления прежде всего важны макси­мально надежные оценки. В этом отношении согласованное мнение большой группы первоклассных экспертов имеет большое значение. Не случайно поэтому «дельфийская техника», несмотря на сложность подготовки, проведения и обработки результатов опроса, несмотря на сравнительно большие затраты времени и средств, получила значи­тельное распространение. По масштабам применения во многих стра­нах она оказалась в первой пятерке наиболее «популярных» методов социального прогнозирования.

Следует отметить, что в последние годы получили значительное распространение упрощенные вариации «дельфийской техники» («мини-дельфи»), позволяющие собрать экспертные оценки по 2-3 турам за несколько дней или даже часов. Особенно упрощается техника сбора оценок при непосредственном подключении экспертов к работе с ЭВМ. Насчитывается еще несколько разновидностей заочных опросов экспертов, но все они занимают то или иное промежуточное положе­ние между простейшим разовым анкетированием и сложившейся «дельфийской техникой».

Эффективность экспертных опросов вызвала усиление тенденции к усложнению задач экспертов, к превращению опроса в особую раз­новидность многоэтапного исследования, в ходе которого экспертам предлагается решать все более сложные проблемы типа уточнения прогностических сценариев, матриц, графов, различных видов моде­лей, построения «дерева проблем» и «дерева целей» и т.д. В резуль­тате эксперт вынужден отходить от чисто интуитивной деятельности, активнее заниматься логическим анализом поставленной проблемы. Методы опроса постепенно теряют свой исключительно интуитивный характер, органичнее включаются в сложные системы комплексных методик прогнозирования.

Так, одна из американских систем прогнозирования (ПАТТЕРН) побуждала экспертов принимать участие в составлении сценария, ха­рактеризующего тенденции развития объекта прогнозирования, давать оценку различным альтернативам дальнейшего развития, участвовать в построении «дерева целей», устанавливать иерархию задач, требую­щих разрешения для достижения главной цели (скажем, приписать каждой цели коэффициент значимости, определить степень важности, полезности, стоимости различных средств достижения той или иной цели).[5]

Итак, мы показали методологические и методические особенности основных методов прикладного социологического исследования инно­вационного типа, которые положены в основу широко разрабатывае­мого сейчас социального проектирования. Это прежде всего методы моделирования, экспериментирования и экспертизы социальных явле­ний. Мы стремились обосновать, что все эти методы взаимосвязаны, неразделимы и подчинены единой методологической посылке. В част­ности, моделирование, на наш взгляд, есть процесс восхождения от абстрактного к конкретному, а содержание модели воплощает в себе единство теоретического и эмпирического уровней, конкретно-истори­ческого и типологического подходов, субъективного и объективного в функционировании и развитии объекта в сфере управления и пла­нирования, Отсюда методологические особенности мысленной (иде­альной) модели в модельном (теоретическом) и натурном эксперимен­те. В свою очередь, социальный эксперимент также представляет собой противоречивую систему «производства» и «потребления» социологи­ческого знания, теоретического и эмпирического мышления, анализа и синтеза, идеального и материального и др. Одним из эффективных методов практической деятельности социолога, обеспечивающих комплексную разработку предложений и ускорение их внедрения в прак­тику социального управления и планирования, являются метод экс­пертных оценок и его разновидности (коллективная генерация идей, «мозговая атака», «дельфийская техника», деловые игры и т. д.), а также метод социального анализа.

Социальный анализ (как завершение экономического), в конечном счете, призван оценить реализацию экономических результатов дея­тельности предприятия в социальном развитии коллектива. Речь идет о внедрении в практику социального управления и планирования но­вого, собственно прикладного анализа сложных процессов и механиз­мов социальной жизни, который позволит превратить социальный про­ект или план из суммы планов и проектов по отдельным сферам социальной жизни трудового коллектива в план-систему, в эффектив­ную систему практических мероприятий.

 

ЛИТЕРАТУРА

1. Литвак Б.Г. Экспертная информация. М., 1982.

2. Масленников Е.В. Эксперт в социологическом исследовании. // Вестник МГУ. Сер. Социология и политология 1995. № 4.

3. Масленников Е.М. Метод интеграции концепций экспертов в социологическом исследовании. М., 1992.

4. Макаревич В.П. Игровые методы в социологии: концепция, содержание, сим­волы. / Пер. с англ. М., 1993.

5. Прогнозирование в социологических исследованиях . / Отв. ред. И.В. Бесту­жев-Лада, М., 1978.

6. Osborn A.F. Applied Imagination. New York, 1960.

7. Шошин П.Б. Метод экспертных оценок. М., 1987.

[1] Чередниченко В.В. Применение экспертных оценок в социологических иссле­дованиях. // Социологические исследования. 1981. № 3.

[2] Бешелев С.Д., Гурвич Ф.Г. Экспертные оценки. М., 1973. С. 103; Эксперт­ные оценки в научно-техническом прогнозировании. / Отв. ред. В. С. Михалевич. Киев, 1974. С. 56; Перлаки И. Нововведение в организациях. М., 1980. С. 28- 31 (Перлаки при­водит 25 личных и 21 рабочую характеристику творческого индивида — идеального экс­перта); Литвак Б.Г. Экспертная информация. М., 1982.

[3] Оsbоrn A.F. Applied Imagination. New York, 1960.

[4] Лисичкин В. Отраслевое научно-техническое прогнозирование. М., 1971. С. 147-167; Кузьмин Е. . и др. Руководитель и коллектив. Л., 1974.

[5] Масленников Е.С. Методика и процедуры комплексирования концепций экспер­тов в социологическом исследовании. М., 1986; см. также: Прогнозирование в со­циологических исследованиях. /Отв. ред. И.В. Бестужев-Лада. М., 1978.