Виды и методы экспертного опроса. М

Экспертный опрос - разновидность социологического опроса, в ходе которого респондентами выступает особый тип людей - эксперты. Это компетентные лица, имеющие глубокие знания о предмете или объекте исследования.

Эксперт (лат. expertus - опытный) - специалист, делающий заключение при рассмотрении какого-нибудь вопроса.

Представитель любой сферы деятельности, кроме нашей собственной, может выступать для нас в качестве эксперта. Отличительная особенность этого метода состоит в том, что он предполагает компетентное участие экспертов в анализе и решении проблем исследования. К примеру, для оценки ожидаемого спроса на те или иные виды продукции экспертами могут выступать продавцы или товароведы магазинов, руководители малых предприятий, дилеры или брокеры. В армейском подразделении экспертами могут быть командиры, офицеры воспитательных структур, старослужащие (они, как правило, осведомлены по широкому кругу вопросов службы и быта).

В связи с этим серьезно меняется ролевая функция эксперта, который в полном смысле слова выступает активным участником социологического исследования. И попытка скрыть от него цель исследования, превратив, таким образом, в пассивный источник информации, чревата потерей его доверия к организаторам исследования 2 .

От других форм социологического опроса экспертный метод отличают несколько весьма важных черт:

♦ количество опрашиваемых: их всегда меньше, чем при анкетировании и даже интервью;

♦ качества опрашиваемых: кругозор, уровень квалификации, знание специальной области у них на несколько порядков выше, чем у обычных респондентов;

♦ тип и объем информации: экспертный опрос проводится для получения знаний, которых нет и никогда не будет у социолога-исследователя; в отличие от обыденных знаний, которые известны социологу из своего опыта, получаемые от экспертов знания относятся к специальным научным знаниям;

♦ типичность данных: в массовом опросе социолога интересует типичность, повторяемость, обычность добываемых сведений о ценностных ориентациях и мотивах поведения людей, а в экспертном опросе исследователь дорожит именно уникальностью технических или гуманитарных знаний эксперта, их глубиной, неповторимостью;

♦ программная функция: первичную информацию, получаемую в анкетировании или интервью, социолог использует для проверки научных гипотез, а в экспертном опросе - для того, чтобы разобраться в совершенно новой для себя области.

Такие формы сбора первичной социологической информации, как анкетирование, интервьюирование, почтовый опрос, телефонное интервью, предназначены прежде всего для массовых опросов. Их особенность заключается в том, что они направлены на выявление информации, которая отражает знания, мнения, ценностные ориентации и установки респондентов, их отношение к событиям, явлениям действительности. И то, что данная информация основывается на индивидуальном интересе опрашиваемых и может быть весьма субъективной, отнюдь не противоречит научному характеру ее получения. Напротив, цель массового опроса заключается в том, чтобы при помощи соответствующего инструментария получить достоверные сведения о предмете и объекте исследования. Например, выявить группы читателей по степени их интереса к различным рубрикам газеты либо дифференцировать студентов по уровню их активности на занятиях и т.д. Таким образом, в ходе массового опроса источником социологической информации, дающей оценку тем или иным сторонам объекта исследования, выступают представители этого же объекта 3 .

Основное назначение экспертного опроса: выявление наиболее существенных, важных аспектов исследуемой проблемы, повышение надежности, достоверности, обоснованности информации, выводов и практических рекомендаций благодаря использованию знаний и опыта экспертов.

Область применения экспертного опроса: может быть использован при изучении всех сфер деятельности; в диагностике, в оценке состояний социального объекта, нормировании, проектировании, прогнозировании, в принятии решений. Разновидности экспертного опроса достаточно эффективно применяются на разных этапах социологического исследования: в определении целей и задач, выявлении проблемных ситуаций, поиске гипотез, ходе интерпретации понятий, обосновании надежности инструментария и исходной информации, в обосновании выводов, в выработке рекомендаций.

Основные нормативные требования: при опросе экспертов нужно дать четкое обоснование необходимости применения соответствующей методики экспертного опроса. Тщательность подбора экспертов: обязательная оценка их компетентности. Учет факторов, влияющих на суждения эксперта. Создание условий для наиболее продуктивного использования экспертов в ходе исследования. Сохранение полученной от экспертов информации без искажения на всех этапах исследования.

Существуют некоторые ограничения в применении выводов для разных методик экспертных опросов. Так, при использовании некоторых методик экспертных оценок полезно помнить, что заключения по их экспертизам имеют тенденцию к усреднению мнений, а потому могут оказаться непригодными для оценки нестандартных явлений, например новаторских произведений искусства. Не следует также забывать, что данные экспертного опроса носят субъективный характер, а потому желательно их сопоставление с объективной информацией об объекте, полученной другими методами (хотя часто применение экспертного опроса вызвано как раз трудностью получения информации другим способом).

Программа применения экспертного опроса включает в себя основные структурные элементы программы социологического исследования. Ведущими задачами являются: выделение целей опроса, построение критериев подбора, правил организации участия экспертов и критериев оценки данной ими информации. В отличие от массового опроса программа опроса экспертов не столь детализирована и носит преимущественно концептуальный характер. В ней прежде всего однозначно формулируется подлежащее оцениванию явление, предусматриваются в виде гипотез возможные варианты его исхода.

Основной инструментарий экспертных опросов - анкета или бланк-интервью, разработанные по специальной программе. В соответствии с этим процедура опроса может заключаться либо в анкетировании, либо в интервьюировании экспертов.

Бесспорно, для принятия обоснованных решений необходимо опираться на опыт, знания и интуицию специалистов. После Второй мировой войны в рамках теории управления (менеджмента) стала развиваться самостоятельная дисциплина - экспертные оценки. Экспертные оценки - это суждения знатоков, предполагающие процедуру сравнения объектов, их свойств по выделенным критериям. Метод экспертных оценок - вид экспертного опроса, предполагающий использование экспертных оценок. Основное содержание метода заключается в рациональной организации осуществляемого экспертами анализа проблем с последующей оценкой выделенных исследователем суждений и обработкой полученных данных.

Фоновые суждения фиксируют факторы, влияющие на состояние изучаемого объекта. В процедуре опроса эксперт вьщеляет среди них наиболее важные, существенные для объекта, дает им оценку.

Применение экспертного метода опроса связано с соблюдением определенных правил. При его организации большое внимание уделяют обычно трем методологическим проблемам: подбору экспертов, процедуре их работы, обработке высказанных мнений 4 .

4.2. Виды экспертного опроса

Экспертный опрос - это совокупность (еще говорят: комплекс) различных методов, приемов, техник, процедур. Прежде всего процедура работы экспертов может быть совместной или отдельной. Среди коллективных процедур можно обнаружить метод «мозговая атака (штурм)», обычную дискуссию, дельфийскую технику. Выделим две основные процедуры: обычный опрос и многоступенчатый опрос. Первая предполагает проведение разового анонимного опроса. Он и в организационном, и в экономическом отношении наиболее легкий. В принципе он мало чем отличается от обычного массового опроса. Вторая процедура связана с тенденцией усложнять задачу экспертов. Многоступенчатость вводится для того, чтобы на каждом последующем этапе эксперты решали все более сложные задачи. Обычно экспертам предлагается использовать различные логические методы анализа («дерево целей», таблицы «взаимного влияния», сценарии и т.д.). Сам по себе многоступенчатый опрос может быть организован по-разному: сначала могут быть поставлены общие вопросы, затем все более

конкретные (метод «воронки») или, наоборот, в конце эксперты делают некие обобщения (метод «пирамиды»).

Так как участники опроса, как правило, осведомлены о цели и задачах опроса, теряется смысл использования косвенных вопросов, проективной техники, тестов и других приемов, с помощью которых обычно выявляют позиции респондента без его ведома. Их использование, а также применение «вопросов-ловушек» может даже нанести заметный ущерб качеству экспертного опроса. Ведь эксперт - это участник научного исследования, всякие попытки превратить его из субъекта исследования в объект могут поколебать основы взаимного доверия, которое необходимо между организаторами исследования и экспертами. Чтобы добиться активного и серьезного отношения эксперта, дать ему почувствовать себя полноправным участником научного исследования, его необходимо в какой-то мере познакомить с программой исследования. В силу специфики экспертной аудитории основным методом опроса становится не интервью, а анкета, заполняемая самим экспертом. Причем в анкете значительно чаще прибегают к открытым вопросам, которые позволяют лучше установить творческий потенциал эксперта, и дают возможность участнику опроса высказать оригинальную точку зрения. Кроме того, отказ от подсказок ослабляет влияние стереотипов.

Методисты выделяют также методы заочного и очного экспертного опроса. К методам первого из них относятся: письменный опрос (сбор мнений), анкетирование (формализованный опрос), метод независимых характеристик и дельфийская техника, ко вторым - интервью, совещание, исследовательская беседа, «мозговая атака». Число экспертов не должно превышать 10-15 человек.

Наиболее простым видом заочного опроса экспертов является письменный опрос (сбор мнений). Он состоит в том, что экспертам рассылаются (раздаются) специально подготовленные опросные листы, в которых они должны изложить свое мнение по существу поставленных вопросов. При составлении экспертного вопросника используется от 50 до 90% открытых вопросов. Сбор мнений подобен свободному интервью и отличается от него лишь письменной формой опроса, которая дает возможность привлечь большое число экспертов. Правда, заочный опрос связан с организационными трудностями, обусловленными низким уровнем возврата анкет.

Формализованный опрос экспертов представляет собой обычное анкетирование с вопросами, сформулированными как в открытой, так и в закрытой форме. По целям, задачам и содержанию этот метод существенно отличается от письменного сбора мнений. Если последний проводится для выявления эвристичных, принципиально новых идей, взглядов на проблему, неожиданных под-

ходов к старой проблеме, то анкетирование направлено на выяснение оценок тех или иных аспектов готового решения. Обычный метод анализа данных в таком случае - статистический.

Метод независимых характеристик позволяет дать обобщенную оценку одного явления, информация о котором поступает из нескольких независимых источников (от разных людей). На первом этапе происходит сравнение и сопоставление разных мнений, на втором - они обрабатываются с помощью математико-статистичес-ких процедур, на третьем - формулируются достоверные выводы. Такой метод активно применяется в социальной психологии для изучения деловых и личностных качеств индивида 5 . Здесь нескольких людей, хорошо знакомых с изучаемым человеком, просят охарактеризовать его по единой шкале, а затем обобщают независимые оценки в интегральный показатель. В коллективной оценке субъективные отклонения взаимопогашаются, что обеспечивает в конечном итоге объективный, научно обоснованный результат.

Одной из самых распространенных процедур проведения экспертного опроса выступает «дельфийская техника». Метод предусматривает опрос экспертов в несколько туров, обработку результатов каждого тура, информирование их об этих результатах и вновь повторение такой же процедуры. В первом туре ответы даются без аргументации. После обработки выделяются крайние и средние суждения и сообщаются экспертам. Во втором туре опрашиваемые вновь обращаются к своим оценкам. Так как они имели достаточно времени на размышление и узнали о существовании других позиций на этот счет, им предоставляется возможность пересмотреть свои взгляды либо, напротив, аргументировать. После второго тура обрабатываются новые оценки: крайние и средние мнения обобщаются, итоги вновь докладывают экспертам. Так повторяется 3-4 раза. Практика показывает, что после третьего или четвертого тура мнения экспертов не меняются. В ходе подобной процедуры вырабатывается согласованная оценка, при этом исследователь не должен игнорировать мнение тех, кто после неоднократных опросов остался на своей позиции.

Метод «Дельфы» направлен на усовершенствование процесса принятия экспертных оценок, но с такой целью, чтобы общую оценку выводила не математика и статистика, а сами люди, ориентируясь на мнение других, если надо корректируя его, усиливая свою аргументацию или отказываясь от нее в пользу наилуч-

шей, более обоснованной точки зрения. Подобная техника позволяет уменьшить влияние недостаточно компетентных экспертов на групповую оценку, как это наблюдается при простом анкетировании. Оно достигается за счет полученной ценной информации от более компетентных экспертов.

Метод «мозговой атаки» («мозгового штурма») считается наиболее известным методом коллективного принятия творческих решений. Он представляет собой свободный, неструктурированный процесс генерирования собственных идей вокруг заданной темы, спонтанно предлагаемых участниками. Философия этого метода исходит из предположения, что при обычных приемах обсуждения возникновению новаторских идей препятствуют контрольные механизмы сознания, которые сковывают поток этих идей под давлением привычных, стереотипных форм принятия решения. Тормозящее влияние оказывают боязнь неудачи, страх оказаться смешным и т.д.

Этот метод разработан и описан американским психологом А.Ф. Осборном в 1938 г. Ученый обратил внимание на то, что одни люди легко выдвигают новые идеи, другие больше склонны к критическому анализу чужих идей. При обычных обсуждениях обе категории людей оказываются вместе и, как правило, мешают друг другу. Вот почему было решено разделить этапы генерирования идей и их анализа. Для этого создаются две группы: участники мозговой атаки - те, кто должен предложить новые варианты решения нужной задачи, и члены комиссии, которые будут обрабатывать предложенные материалы. В первую группу, которая будет генерировать идеи, сначала назначается руководитель, который будет эту группу укомплектовывать, включая в нее 4-11 человек. Члены этой группы не могут быть связаны отношениями «руководитель-подчиненный» из-за угрозы разрушения атмосферы доверия. Руководитель опроса сообщает членам группы суть решаемой проблемы за 2-3 дня до проведения «мозговой атаки». Проблема должна быть обозначена как можно более четко и всесторонне. При проведении мозговой атаки в группе создается непринужденная атмосфера. Этому содействует состав группы, поведение руководителя, выбор помещения, освещение и т.д. Никто из участников не должен бояться того, что его высказывания не представляют ценности. Предложения или идеи нельзя негативно оценивать ни словом, ни жестом, ни интонацией (любая критика запрещена), наоборот, желательна их поддержка и развитие. Свои мысли участники должны высказывать откровенно и свободно. Нередко это уменьшает скованность группы и является первопричиной рождения оригинальных идей. Поступившие при обсуждении предложения фиксирует секретарь. Мозговой 494

штурм длится не более 2-3 ч. Слишком быстрое завершение нежелательно, так как установлено, что новые и оригинальные идеи возникают часто тогда, когда кажется, что исчерпаны все возможные мысли и ассоциации. I

Распространенными считаются две формы мозговой атаки: простое совещание и совещание по круговой системе.

На простом совещании руководитель поочередно опрашивает каждого участника и просит высказать предложение по решению стоящей перед ними проблемы. Каждое решение заносится в список и нумеруется, затем этот список вывешивается у всех на виду. Критика или оценка идей не допускается. Особое значение уделяется созданию свободной и творческой обстановки, позволяющей всем экспертам беспрепятственно высказывать свои идеи и предложения. Большое значение имеет количество представленных предложений. В их выдвижении должны участвовать все. Особо ценится экспромт, т.е. предложения, возникшие тут же и под влиянием той информации, которую эксперт услышал от других. Они ценятся выше домашних заготовок, поскольку аккумулируют коллективную мысль, по- " множенную на знание ситуации и творческое воображение автора идеи. Если атака на непознанное идет слишком вяло, совещание переносят на другую дату, позволяя экспертам «дозреть».

При совещании по круговой системе эксперты разбиваются на небольшие группы, состоящие из 3 или 4 человек, где продуцируют новые идеи и записывают их на листе бумаги или на карточках (по 2-3 идеи на каждой). Затем члены малой группы обмениваются своими карточками, в результате чего к старым идеям добавляются новые. После троекратного обмена каждая подгруппа составляет сводный перечень выдвинутых идей. Затем собирается весь коллектив, на рассмотрение которого представляются групповые отчеты. Такую форму целесообразно использовать при снижении активности или когда участники отвлекаются в ожидании своей очереди.

Список идей, выдвинутых в результате «мозгового штурма», обычно довольно длинный (более 15-20). Ведущему бывает сложно определиться с их приоритетностью, а участникам - дождаться своей очереди на обсуждение. В помощь рекомендуют применять следующий метод. Перечень идей с порядковыми номерами вывешивается на видном месте. Каждый эксперт получает право на пять голосов, которыми он может распорядиться по своему усмотрению: по одному голосу за каждую из пяти идей, все пять - за одну, два голоса за одну идею и по одному за каждую из трех других и т.д. Такой подход позволяет каждому эксперту высказать свое предпочтение, а коллективу в целом - определиться с приоритетами. Другой способ: на

заседании группы каждая идея зачитывается под своим номером, а эксперты голосуют поднятием рук. Число вытянутых пальцев на поднятой руке указывает на количество поданных голосов 6 .

Метод «мозговой атаки наоборот» во многом напоминает обычную «мозговую атаку», но при этом разрешается высказывать критические замечания. Точнее сказать, критика специально поощряется, так как философия такого метода построена на том, чтобы все эксперты выявляли как можно больше недостатков у предлагаемых идей. Метод может дать неплохие результаты, если он выступает предваряющей процедурой к другим методам экспертизы.

Метод прогнозных сценариев - наиболее популярный в последние десятилетия метод экспертных оценок. Термин «сценарий» впервые был употреблен в 1960 г. футурологом Г. Каном при разработке картин будущего, необходимых для решения стратегических вопросов в военной области. Сценарий - это вероятностное описание картины будущего, составленной на основе компетентных технических суждений. Один прогноз включает несколько сценариев, в большинстве случаев три: оптимистический, пессимистический и промежуточный (наиболее вероятный, ожидаемый). Составление сценария происходит в несколько этапов: 1) структурирование и формулировка вопроса: сбор и анализ исходной информации, согласование задачи со всеми участниками проекта, выделение структурных характеристик проблемы; 2) определение факторов внешнего влияния; 3) нахождение показателей, желательно альтернативных, будущего состояния; 4) формирование и отбор согласующихся наборов предположений при помощи компьютерных программ; 5) разработка практических рекомендаций к сценарию будущего и определение возможных последствий его реализации.

Метод коллективного блокнота («банка» идей) - способ, основанный на сочетании независимого выдвижения идей каждым экспертом с последующей их коллективной оценкой.

Метод KJ- так называется метод антропологических исследований, когда исследователи сначала собирают коллекцию фактов о жизни племени, а затем просят туземцев объяснить их значение. Японский бизнес адаптировал метод KJ следующим образом: служащих компании просят набросать на листочках бумаги свои пожелания об усовершенствованиях процесса производства и предложения о том, что компании следует делать. Полученные пожелания и предложения анализируются, и на основе суммы мнений получается картина, на которой изображена перспектива компа-496

нии и ее подразделений в будущем. Метод носит скорее интегри-рующий, чем аналитический, характер.

Метод неспециалиста заключается в том, что решение пробле-мы предлагается лицам, которые никогда ею не занимались, но являются специалистами в смежных областях.

Пример. В Центре социологии региональных и национальных отношений ИСПИ РАН (рук. чл.-кор. РАН В.Н. Иванов) изучение проблем взаимодействия федерального центра и регионов построено на основе систематических опросов экспертных групп 7 . В состав экспертных групп или так называ-емых групп специализированного сознания входили: специалисты облает- ных (республиканских, краевых) и городских администраций, руководители предприятий и учреждений различной формы собственности, работники средств массовой информации, высшего образования, а также представи-тели творческих союзов. Метод сбора информации - раздаточная анкета. География исследований была весьма широкой. По Сопоставимой методи-ке исследования проводились в Москве, Ставрополе, Уфе, Петрозаводске, Якутске, Улан-Удэ, Тюмени, Новосибирске, Казани, Астрахани, Тамбове, Саранске, Рязани, Ростове-на-Дону, Волгодонске, Барнауле, Владикавказе, Нальчике, Назрани. Данные экспертных опросов, проведенных в 2000- 2002 гг., свидетельствуют, что если сложившаяся к концу 1990-хгг. ситуация в РФ могла быть охарактеризована как кризисная, а в начале 2000-х гг. она начинает выправляться (обнаружена положительная динамика оценок экс-пертов во времени). Ежегодные экспертные опросы, проводимые Отделом социальной экологии регионов ИСПИ РАН (рук. И. А. Сосунова), позволяют определить значимые для населения экологические проблемы, порождаю-щие негативные социально-экологические процессы. В частности, установ-лено, что наиболее болезненно воспринимаются населением проблемы, про-являющиеся в сфере здравоохранения и порождающие социально-демо-графические, социально-экономические и иные последствия. В результате опроса членов экспертных советов по социальным и гумани-тарным наукам ВАКа сотрудники Отдела теоретических проблем социоло-гии ИСПИ РАН (рук. Л.Н.Москвичев) получили следующие данные: почти половина экспертов отмечают снижение требований к кандидатским рабо-там и около 40% экспертов отмечают снижение требований к докторским работам. Примерно такая же ситуация складывается и применительно к дис-сертациям по социологическим наукам.

4.3. Отбор экспертов

\И в массовом, и в экспертном (его в противоположность массовому можно назвать элитарным) опросе чуть ли не главным моментом выступает отбор опрашиваемых. В первом случае речь идет о правильном составлении выборочной совокупности, которая впоследствии обеспечит репрезентативность данных. Уровень образования и компетентности, если это не опрос целевой группы, не играют никакой роли - все равно вопросы для всех стандартизированные. Во втором случае задача стоит почти обратная. Типичные эксперты нужны далеко не всегда. Часто социологу необходимы эталонные, лучшие представители своей профессии. И на репрезентативность данные проверять никто не станет. Достоверность данных в массовом опросе как некоторых среднестатистических показателей тем выше, чем больше совокупность опрошенных. Что же касается экспертного опроса, то в связи с высокой компетентностью участвующих в нем лиц мнение даже одного эксперта, а тем более группы экспертов может оказаться достаточно обоснованным и достоверным. Отметим и другой факт: некоторые технические и методические приемы, широко используемые в массовых опросах, теряют свое значение при опросе такой специфической аудитории, как эксперты. Как правило, массовые опросы носят анонимный характер. В экспертных опросах это теряет смысл, ибо эксперты должны быть полностью осведомлены о задачах, которые решаются в ходе исследования с их помощью. Так, например, в экспертной анкете не применяются косвенные и контрольные вопросы, тесты или какие-либо другие приемы, имеющие своей целью выявить «скрытые» позиции респондента.

Состав экспертной группы определяет эффективность использования этого метода. Дело в том, что такой характеристикой, как знания и опыт по данной проблематике, можно пользоваться только на самом первоначальном этапе отбора. Очень часто исследователь в первоначальный список потенциальных экспертов включает всех, кто работает в данной области, а затем отбирает из него узкий круг лиц.

Как же грамотно сформировать нужную группу экспертов? Вот что предлагают авторы известной у нас в стране книги «Основы прикладной социологии», изданной под редакцией крупного методиста, директора Центра социального прогнозирования и маркетинга Ф.Э. Шереги 10 . На самом первом этапе отбора в качестве критериев целесообразно использовать два признака: род занятий

и стаж работы по интересующему нас профилю. При необходимо-сти учитываются также уровень, характер образования, опыт об-щественно-политической деятельности, возраст и др. Первый спи-сок экспертов может быть весьма широким, однако в последую-щем его целесообразно «сузить», так как не каждый человек способен выступить в роли эксперта.

Центральный критерий отбора экспертов - их компетент-ность. Для ее определения применимы, с той или иной степенью точности, два метода; самооценка экспертов и коллективная оцен-ка авторитетности экспертов.

Наиболее простая и удобная форма самооценки экспертов -совокупный индекс, рассчитанный на основании оценки экспер-тами своих знаний, опыта и способностей по ранговой шкале с позициями «высокий», «средний», «низкий». При этом первой позиции приписывается числовое значение «1», второй - «0,5», третьей - «0». В таком случае совокупный индекс - коэффици-ент уровня компетентности эксперта - вычисляется по формуле:

где k l - числовое значение самооценки экспертом уровня сво» теоретических знаний; к 2 - числовое значение самооценки npaKii тического опыта; к 3 -числовое значение самооценки способнс ти к прогнозу.

Коэффициент уровня компетентности может изменяться от (полная компетентность) до 0 (полная некомпетентность).

Обычно в группу экспертов принято включать тех, у кого ин-деке компетентности не менее среднего (0,5) и выше (до 1). По-лучение первичных числовых значений самооценки (k v kj, к 3) для расчета индекса компетентности экспертов происходит при помо-щи вопроса табличной формы (табл. 4.1).

Исходя из числовых значений оценок, обозначенных крестиками в клетках таблицы, рассчитаем коэффициент уровня компетентности эксперта по проблемам правового государства:

Полученное число свидетельствует о том, что уровень компетентности эксперта по исследуемому вопросу выше среднего.

При отборе экспертов методом самооценки возникает проблема ее завышения. Однако, как отмечают специалисты, «опыт многочисленных экспертиз и у нас и за рубежом показывает, что группы с высокой самооценкой, как правило, ошибаются в своих суждениях при проведении экспертизы меньше других» 11 .

Метод коллективной оценки применяется для формирования группы экспертов в том случае, когда они знают друг друга как специалисты. Такая ситуация чаще всего характерна для ученых, творческих деятелей, известных политиков, экономистов. Этот метод можно рассмотреть на примере формирования группы экспертов, осуществленного С. Бешелевым и Ф. Гурвичем.

Предположим, что мы имеем список, включающий десять экспертов, и просим каждого из них выделить пять наиболее компетентных коллег. На основании ответов построим табл. 4.2, обозначив в ней номерами от 1 до 10 в первом столбце тех, кого выбирают, а в первой строке тех, кто выбирает. В клетках таблицы число «1» обозначает выбор, «тире» - отсутствие выбора, «0» - указывает на то, что никто сам себя не назвал.

Таблица 4.2 Таблица взаимных оценок экспертов

Кого назвали	Кто назвал	Сколько раз назвал

		-	-				-		-
					-
	-			-		-	-	-	-	-
			-		-	-			-
								-		-
	-	-		-						-
								-
	-	-	-		-	-	-		-
	-			-				-		-
		-	-	-	-	-	-
Итого

В последнем столбце таблицы приводится сумма голосов, ко-торые получил соответствующий эксперт. Эти числа принимают-ся в качестве «веса» мнений, ими заменяются «единицы» в тали-це (по столбцам), в результате чего получается ранжированный ряд оценок уровня компетентности всех десяти экспертов (табл. 4.3).

Таблица 4.3 Таблица уточненных взаимных оценок экспертов

Кого назвали

Кто назвал

Суммарная оценка

Ранговая оценка I компетентности

1 " . J

Таким образом, если мы хотим сформировать группу из пяти наиболее компетентных экспертов, то, судя по оценкам в пред-последнем столбце, мы зачислим в эту группу экспертов под но-мерами 7, 5, 2, 9, 4.

Опросы компетентных лиц именуются экспертными, а резуль-таты опросов - экспертными оценками. В наиболее общем виде можно выделить две основные функции метода экспертной оцен-ки в социологическом исследовании: оценка состояния (включая причины) и прогноз тенденций развития различных явлений и процессов социальной действительности.

4.4. Факторы валидности экспертных оценок

Валидность - доверие, которое заслуживают суждения экспер-тов. Она зависит от компетентности экспертов и трудности решаемой задачи. Существует много причин, по которым эксперт может оказаться не в состоянии реализовать свой интеллектуаль-ный и творческий потенциал. Отметим некоторые из них и дадим рекомендации по их устранению.

1. Идентификация суждения с его источником - естественный компонент восприятия человека человеком. Значительно снима-ется при отсутствии непосредственного контакта экспертов. Если

же группа работает в режиме очного взаимодействия, следует составлять ее так, чтобы туда не попадали люди, хорошо знающие друг друга, начальники и подчиненные. Включение в группу «громких имен» целесообразно лишь тогда, когда вся она состоит из специалистов высокого ранга.

2. Центростремительное давление возникает из-за свойственного большинству людей смещения своих суждений в сторону нейтральной середины. Установлено: чем выше самооценка компетентности эксперта, тем выше устойчивость высказываемых суждений. Переход к заочному взаимодействию экспертов сам по себе не исключает возникновения центростремительного давления, однако некоторые процедуры сбора информации (процедуры с качественной обратной связью, с индивидуальной обратной связью) позволяют справиться с этой сложностью.

3. Стремление к доминированию может возникать у членов экспертной группы, не являющихся признанными лидерами, это потенциальный источник конфликтов. Следует избегать включения экспертов с повышенной тягой к лидерству в опросы с режимом непосредственного воздействия.

4. Неустойчивость формирующегося мнения характерна для большинства экспертов на этапе знакомства с объектом и первичного обдумывания оценок. Высказанное в этот момент незрелое суждение может быть воспринято остальными как желанная подсказка. На первом этапе необходимо поддерживать информационную изоляцию экспертов.

Достоверность экспертных оценок повышается за счет правильной формализации исходной информации, корректного подбора экспертов, соблюдения принципов и процедур экспертного опроса. Она зависит и от индивидуальных качеств эксперта (профессиональных и практических знаний, стажа и опыта работы в конкретной сфере деятельности и др.).

Высококвалифицированные специалисты в определенной области деятельности.

Метод подразумевает компетентное участие специалистов в анализе и решении рассматриваемой проблемы.

В практике социологических исследований используется:

для прогноза развития того или иного явления
для оценки степени достоверности массового опроса
для сбора предварительной информации о проблеме исследования (зондаж)
в ситуациях, когда массовый опрос простых респондентов не возможен или не эффективен.

Надёжность оценок и решений, принимаемых на основе суждений экспертов, достаточно высока и в значительной степени зависит от организации и направленности процедуры сбора, анализа и обработки полученных мнений.

Сама процедура предполагает:

анализ исследуемой ситуации
выбор группы экспертов
выбор способа замера экспертных оценок
процедуру непосредственной оценки работы экспертов
анализ полученных данных

Может оказаться необходимой также:

проверка входных данных, используемых для экспертных оценок
изменение состава экспертных групп
повторные замеры по тем же вопросам с последующим сопоставлением результатов с объективной информацией, полученной другими методами.

Роль эксперта

Эксперт может участвовать в опросе как:

генератор, источник идей, гипотез и предложений
арбитр по оценке имеющихся данных, характеристик и показателей объекта
аудитор по оценке условий постановки эксперимента
источник неизвестной исследователю информации, которая служит основой для дальнейшего анализа.

Сравнение с другими методами

Результаты опроса групп экспертов существенно отличаются от решений, формируемых в результате дискуссий на заседаниях комиссий, где может возобладать мнение авторитетных или всего лишь «напористых» участников. Это не означает, что индивидуальное мнение конкретного специалиста или решение такой комиссии не значимо. Однако соответствующим образом обработанная информация, полученная от группы экспертов, как правило, оказывается более достоверной и надежной.

Подбор экспертов

Количество членов экспертной группы значительно меньше в сравнении с количеством респондентов, опрашиваемых при массовом опросе. Отбор экспертов, формирование экспертных групп - достаточно сложная задача, результат которой в наибольшей степени определяет эффективность метода и правильность полученных решений.

Предварительная группа

Подбор специалистов для участия в экспертном опросе, начинается с определения научных, технических и административных проблем, непосредственно связанных в решением поставленной задачи.

Составляется список компетентных в необходимых областях лиц, который служит основой для выбора экспертов.

Формирование группы потенциальных экспертов начинается методом «снежного кома». Оценив число возможных кандидатов в эксперты, решается вопрос о численности экспертной группы.

Оптимальное количество вряд ли возможно определить точно, но очевидно, что в малой группе экспертов на итоговую оценку оказывает излишнее влияние оценка каждого из экспертов. Слишком большое число экспертов затрудняет формирование согласованного мнения. Кроме того, при увеличении числа участников уменьшается роль нестандартных мнений, отличающихся от мнения большинства, но не всегда оказывающихся неправильными.

Принципиальное значение имеет возможность обеспечения «равноправия» учёных-специалистов различных направлений, различного уровня компетентности с учётом специфики исследуемой проблемы.

Тем не менее, можно установить некоторые общие требования, подразумевающие выяснение следующих параметров:

компетентность потенциального эксперта в исследуемой области
эрудированность в смежных областях
звание
стаж научной или практической работы в определённой сфере
должностное положение
принципиальность
объективность
способность творчески мыслить

Реестр качеств, которыми должен обладать «идеальный» эксперт, с которым предпочтительно работать:

креативность , то есть способность творчески решать задачи, метод решения которых полностью или частично не известен
эвристичность , то есть способность видеть или создавать неочевидные проблемы
интуиция - способность делать заключения об исследуемом объекте без осознания пути движения мысли к этому заключению
предикаторность, то есть способность предсказывать, предчувствовать будущее состояние исследуемого объекта
независимость, то есть способность противопоставлять предубеждениям и массовому мнению свою точку зрения
всесторонность, то есть способность видеть проблему с различных точек зрения.

Рабочая группа

Для отбора специалистов в рабочую группу используют некоторые простые статистические способы и приемы, а также их комбинацию.

Так, подбор экспертов может быть:

экспериментальным (с использованем тестирования, проверки эффективности их прежней экспертной деятельности)
документальным (на основе социально-демографических данных)
при помощи голосования (на основе аттестации потенциальных экспертов их коллегами)
при помощи самооценки (оценка степени компетентности изучаемой проблемы, которая дается самим потенциальным экспертом).

Кроме указанных способов возможен расчёт достоверности и точности экспертных оценок, представленных каким-либо из потенциальных экспертов в прошлом. В этом случае специалистов-экспертов можно рассматривать как «прибор», дающий информацию о вероятности каких-либо предстоящих событий или гипотез, объясняющих происходящие события. Следует определить точность и достоверность этой информации, подобно тому, как это делается для измерительных приборов . Рассматривая эксперта именно в таком ключе, определяют достоверность и точность его оценок по результатам прошлой деятельности. Для этого рассчитывают степень надёжности эксперта, под которой понимается относительная частота случаев, когда эксперт приписал наибольшую вероятность гипотезам, впоследствии подтвердившимся (то есть количество прогнозов, сделанных экспертом вообще делится на количество сбывшихся прогнозов). Под степенью точности эксперта при вынесении им суждения о значении вероятности для некоторого события понимается степень соответствия его персональной оценки корректности того класса гипотез, которым он приписал эту вероятностную оценку. Понятие надёжности и точности эксперта базируется на предположении о том, что существует класс задач для решения которых эксперт либо подходит, либо не подходит.

Подготовка экспертов к работе

Работа социолога, организующего экспертный опрос, включает в себя ещё и подготовку экспертов к работе, в частности обеспечение их максимально объективными данными по проблеме. Следует заботиться о достаточной информированности участников об источниках возникновения исследуемой проблемы и путях решения сходных проблем в прошлом.

В работу социолога входит:

составление специальных опросных листов для экспертов (по сравнению с массовым опросами, специфика опросных листов состоит в том, что не применяются вопросы-ловушки, ибо эксперт является осведомленным лицом, а кроме того, преобладают вопросы открытого типа)
разработка способа и процедуры опроса экспертов
проведение опроса
анализ полученных данных.

Особые требования

Необходимо, чтобы условия проведения опроса способствовали получению наиболее достоверных оценок. С целью обеспечения независимости оценок, следует по возможности устранять взаимовлияние экспертов и уменьшать воздействие посторонних факторов. Большое значение имеет правильная формулировка вопросов опросника, позволяющая выразить отношение эксперта относительно каждого вопроса в виде количественной оценки и возможность согласования оценок, полученных от разных экспертов. Если форма опроса экспертов предполагает их очное взаимодействие, необходимо заботиться о том, чтобы мнения наиболее известных и авторитетных экспертов не задавали тон всех остальных дискуссий (для этого при выступлении сначала предоставляется слово «простым» участникам, а потом наиболее известным и авторитетным).

Формы проведения

Выбор вариантов работы с экспертами (очная или заочная форма) определяется спецификой проблемы и ситуацией. Очные варианты работы с экспертами позволяют собрать более качественную информацию, хотя есть сложности организационного порядка и взаимовлияния экспертов. Заочные же формы работы с экспертами дают возможность пренебрегать географическими рамками при опросе экспертов, исключает взаимовлияние их, однако делает работу экспертных групп не оперативной.

Очный опрос

Свободное интервью экспертов. Имеет разведывательную цель и чаще используется, когда необходимо более точно представить проблему, уточнить некоторые нюансы, чётче интерпретировать употребляемые понятия и наметить основные направления исследования. Число интервьюируемых экспертов здесь невелико (10-15), но главное - чтобы подобранные эксперты были представителями разных в профессиональном и научном отношении точек зрения. Такое интервью проводится опытным социологом.
Анкетный опрос экспертов.
«Мозговой штурм » , «Мозговая атака» - прямой обмен мнениями, стимулирование наблюдения. Основная цель - нахождение решения или путей решения какой-либо научной или практической проблемы.

Заочный опрос

Почтовый анкетный опрос экспертов
Дельфийская техника - многократный почтовый анкетный опрос одной и той же группы экспертов с применением шкалированных оценок. Цель данного вида опроса экспертов - сопоставление тщательно скорректированной программы последовательных индивидуальных опросов, направленной на уменьшение группового влияния, возникающего при совместной работе экспертов. Суть метода - в интерактивных циклах, обеспечивающих обратную связь: после первого опроса экспертов и обработки его результатов, итоги сообщаются участникам экспертной группы. Они должны либо подтвердить свою точку зрения, высказанную на предыдущем этапе, и если она значительно отличается от мнения большинства, развернуто ее мотивировать, либо изменить свою оценку в соответствии с мнением большинства участников. Затем снова производят обработку информации, результаты вновь рассылаются экспертам и так до тех пор, пока не прекратится «эффект интерактивных циклов», то есть пока новые туры опроса не перестанут давать статистически значимое увеличение согласованности оценок экспертов (обычно это достигается на 4-5 туре опроса). Очевидно, что данный вид работы с экспертами весьма трудоемок и сложен, хотя использование дельфийской техники имеет и свои преимущества: обеспечивается анонимность опроса путем исключения взаимодействия экспертов; установление обратной связи в виде сообщения обработанной информации о согласованной точке зрения экспертов на предыдущих этапах опроса; исключения взаимовлияния экспертов. Метод Дельфы не имеет целью достичь полное единство мнений экспертов по существу вопроса, поэтому несмотря на сближение точек зрения, различие во мнениях экспертов все равно будет существовать. Недостатком данного вида опроса экспертов является зависимость оценок, данных экспертами от формулировок вопросов и аргументации; влияние общественного мнения на экспертов.

Экспертный опрос - разновидность социологического опроса, в ходе которого респондентами выступает особый тип людей - эксперты. Это компетентные лица, имеющие глубокие знания о предмете или объекте исследования.

Эксперт (лат. expertus - опытный) - специалист, делающий заключение при рассмотрении какого-нибудь вопроса.

В связи с этим серьезно меняется ролевая функция эксперта, который в полном смысле слова выступает активным участником соци-ологического исследования. И попытка скрыть от него цель исследования, превратив, таким образом, в пассивный источник информации, чревата потерей его доверия к организаторам исследования2.

От других форм социологического опроса экспертный метод отличают несколько весьма важных черт:

¦ количество опрашиваемых: их всегда меньше, чем при анкетировании и даже интервью;

¦ качества опрашиваемых: кругозор, уровень квалификации, знание специальной области у них на несколько порядков выше, чем у обычных респондентов;

¦ тип и объем информации: экспертный опрос проводится для получения знаний, которых нет и никогда не будет у социолога-исследователя; в отличие от обыденных знаний, которые известны социологу из своего опыта, получаемые от экспертов знания относятся к специальным научным знаниям;

¦ типичность данных: в массовом опросе социолога интересует типичность, повторяемость, обычность добываемых сведений о ценностных ориентациях и мотивах поведения людей, а в экспертном опросе исследователь дорожит именно уникальностью технических или гуманитарных знаний эксперта, их глубиной, неповторимостью;

¦ программная функция: первичную информацию, получаемую в анкетировании или интервью, социолог использует для проверки научных гипотез, а в экспертном опросе - для того, чтобы разобраться в совершенно новой для себя области.

Такие формы сбора первичной социологической информации, как анкетирование, интервьюирование, почтовый опрос, телефонное интервью, предназначены прежде всего для массовых опросов. Их особенность заключается в том, что они направлены на выявление информации, которая отражает знания, мнения, ценностные ориентации и установки респондентов, их отношение к событиям, явлениям действительности. И то, что данная информация основывается на индивидуальном интересе опрашиваемых и может быть весьма субъективной, отнюдь не противоречит научному характеру ее получения. Напротив, цель массового опроса заключается в том, чтобы при помощи соответствующего ин-струментария получить достоверные сведения о предмете и объекте исследования. Например, выявить группы читателей по степени их интереса к различным рубрикам газеты либо дифференцировать студентов по уровню их активности на занятиях и т.д.

Таким образом, в ходе массового опроса источником социологической информации, дающей оценку тем или иным сторонам объекта исследования, выступают представители этого же объекта3.

Основное назначение экспертного опроса: выявление наиболее существенных, важных аспектов исследуемой проблемы, повышение надежности, достоверности, обоснованности информации, выводов и практических рекомендаций благодаря использованию знаний и опыта экспертов.

Область применения экспертного опроса: может быть использован при изучении всех сфер деятельности; в диагностике, в оценке состояний социального объекта, нормировании, проектировании, прогнозировании, в принятии решений. Разновидности экспертного опроса достаточно эффективно применяются на разных этапах социологического исследования: в определении целей и задач, выявлении проблемных ситуаций, поиске гипотез, ходе интерпретации понятий, обосновании надежности инструментария и исходной информации, в обосновании выводов, в выработке рекомендаций.

Основные нормативные требования: при опросе экспертов нужно дать четкое обоснование необходимости применения соответствующей методики экспертного опроса. Тщательность подбора экспертов: обязательная оценка их компетентности. Учет факторов, влияющих на суждения эксперта. Создание условий для наиболее продуктивного использования экспертов в ходе исследования. Сохранение полученной от экспертов информации без искажения на всех этапах исследования.

Существуют некоторые ограничения в применении выводов для разных методик экспертных опросов. Так, при использовании некоторых методик экспертных оценок полезно помнить, что заключения по их экспертизам имеют тенденцию к усреднению мнений, а потому могут оказаться непригодными для оценки нестандартных явлений, например новаторских произведений искусства. Не следует также забывать, что данные экспертного опроса носят субъективный характер, а потому желательно их сопоставление с объективной информацией об объекте, полученной другими методами (хотя часто применение экспертного опроса вызвано как раз трудностью получения информации другим способом).

Программа применения экспертного опроса включает в себя основные структурные элементы программы социологического исследования. Ведущими задачами являются: выделение целей опроса, построение критериев подбора, правил организации участия экспертов и критериев оценки данной ими информации. В отличие от массового опроса программа опроса экспертов не столь детализирована и носит преимущественно концептуальный характер. В ней прежде всего однозначно формулируется подлежащее оцениванию явление, предусматриваются в виде гипотез возможные варианты его исхода.

Основной инструментарий экспертных опросов - анкета или бланк-интервью, разработанные по специальной программе. В соответствии с этим процедура опроса может заключаться либо в анкетировании, либо в интервьюировании экспертов.

Бесспорно, для принятия обоснованных решений необходимо опираться на опыт, знания и интуицию специалистов. После Второй мировой войны в рамках теории управления (менеджмента) стала развиваться самостоятельная дисциплина - экспертные оценки. Экспертные оценки - это суждения знатоков, предполагающие процедуру сравнения объектов, их свойств по выделенным критериям. Метод экспертных оценок - вид экспертного опроса, предполагающий использование экспертных оценок. Основное содержание метода заключается в рациональной организации осуществляемого экспертами анализа проблем с последующей оценкой выделенных исследователем суждений и обработкой полученных данных.

Экспертный опрос может выступать видом метода экспертных оценок. Применяется такой опрос для решения задач по прогнозированию на длительное время, выяснением ситуации и каждого момента в деятельности организации. Данное исследование дополняет кабинетное исследование. Подобного рода мероприятие используют для получения помощи, которая поможет развивать рынок и принимать стратегические решения, используя при этом подобное исследование.

Социология способна использовать экспертный опрос в таких случаях:

1- Исследование закрытых данных. 2- Необходимо оперативное исследование ситуации, что меняется мгновенно. 3- Необходимо формирование первичного представления о малоизвестной области.

Отличие экспертного опроса от массового

Экспертный опрос – это труднодоступный случай, используемый высшим руководством. Он представляет собой исследование и оценивание данных. Этот опрос дает возможность получить достоверное сведение о предмете и объекте, который связан с исследованием. Практика часто использует массовый опрос. Опрос не требует участия огромного количества специалистов, которыми обладает респондент. В опросе принимает участие около 25 спецов, каждый из которых высказывает свою позицию. Основой метода «массового опроса» может являться демографическая, географическая и личная характеристика респондентов. Наиболее наглядно экспертный опрос отличается от массового опроса прогнозированием. Так, например, программы опроса специалистов носят концептуальный характер. В процессе формирования выборки данного опроса уделяет внимание профессионализму специалистов, компетентности к изучению метода, по которому проводят исследование. Эксперт – это представитель знаний любой области, который проводит исследование определенного вопроса с помощью его компетентности. Он помогает изучить качество обслуживания клиентов и предполагать, какие итоги будет иметь компания в дальнейшем. Экспертное исследование имеет особенность: предполагает компетентное участие специалистов в рассмотрении проблем, которые проходят исследование.

Виды экспертного опроса

Согласно характеру взаимодействия между экспертами: 1- Заочный – это эффективный метод, производимый в письменной форме. Он состоит в том, что специалистам раздают подготовленные специально опросные листы, в которых они излагают свое личное мнение. Открытый опрос имеет прямое отношение к экспертному опросу и занимает большую его часть. Данный опрос имеет проблему в низком уровне возврата анкет. 2- Очный – достоверный вид, при котором специалист получает информацию во время личного общения с экспертами. Обычно – это экспертное интервью в неформальном виде, прямой контакт со специалистом. Положительной стороной этого метода является то, что тема интервью меняется в зависимости от полученных ответов эксперта, а это очень существенно для ожидаемых результатов.

В зависимости от численности экспертов существует два вида экспертного опроса:

1- Групповое исследование – дискуссия групповая. Этот вид прдпологает прямые столкновения различных взглядов. 2- Индивидуальный опрос – единственный специалист. Такой метод дает полную формулировку вопросов и позволяет получить всю информацию, которой обладает компетентный исследователь и принять решение. За процедурой согласования оценок: 1- Одноразовый. 2- Многотуровый – многоразовое обращение к экспертам, чтобы сформулировать итоги предыдущего тура и получить необходимую информацию.

Группа постоянных экспертов, с которыми проводятся беседы по предварительной договоренности и по определенной теме – это экспертная панель.

Организация и проведение экспертного опроса

Существует несколько этапов, которые использует подобное исследование: 1- Постановка главной задачи, уточнение, как именно будет проводиться исследование. 2- Определение критериев отбора специалистов и их подбор. 3- Применение пилотажного интервью. 4- Организация доступа к специалистам. 5- Сбор информации. 6- Подготовка и направление отчетности, заключения специалиста. 7- Рекомендации по решению проблем, если они обнаружены.

Подбор экспертов

Количество требуемых экспертов зависит от ширины исследуемой темы. Обычно 20 человек достаточно для решения поставленной задачи.

При подборе экспертов, проводится отбор и осуществляется опрос экспертов.

Компетентность оценивают за такими критериями: 1- Стаж, вид занятий, образование. 2- Взаимная оценка экспертов. 3- Проведение подготовки и склонность к общению.

Способы повышения готовности экспертов к сотрудничеству:

1- Письмо с данными об организации и проведенном опросе. 2- Обязательство предоставления экспертам кратких результатов исследования. 3- Публикация итогов исследований в общественных или специализированных СМИ. 4- Компенсация времени экспертов в материальном виде. Опрос может использоваться при анализе всех сфер деятельности. Метод этого опроса обладает некоторыми ограничениями в его применении. В процессе использования некоторых методик экспертных оценок необходимо знать, что итоги по их экспертизам имеют тенденцию к усреднению мнений. Не нужно забывать и то, что данный опрос носит субъективный характер. Недостатком данного опроса экспертов считается зависимость оценок экспертов от аргументации. Для принятия конкретного решения экспертный специалист обязан использовать опыт и знания.

Оценка качества экспертной информации:

1- Информация, которую преподносит эксперт-лидер, должна позволять рассматривать ее как оценку, а не как факт. 2- Информация должна проверяться с помощью других способов сбора данных. 3- Оценка выгоды, которую получит специалист, преподнося итоги своей работы. Экспертный опрос может означать исследование маркетинговым методом, что используют для решения исследовательских нюансов. Им необходим экспертный опрос и высококвалифицированные специалисты.

Один из самых важных методов, когда необходимо узнать какое-либо мнение в интересующим вопросам

Экспертный опрос – разновидность опроса, респондентами которого являются эксперты.

Эксперт – лицо, имеющее специальные знания и опыт в той области, в которой находится объект экспертизы. Это, как правило, люди высокой квалификации, обладающие большим багажом знаний.

Основное назначение: выявление наиболее важных и сложных аспектов исследовательской проблемы, а также повышение надежности и обоснованности информации.

Задача: получить независимую экспертную оценку по объекту исследования

Ограничения при формировании экспертной группы

Эксперт не должен быть лицом, принимающим решения на основе полученной информации.
Не каждый специалист, даже весьма авторитетный в своей области, годится для работы в экспертной группе. При формировании экспертной группы необходимо учитывать такие факторы как социально-психологическая совместимость

Критерии отбора экспертов:

Степень компетентности экспертов (ученая степень, стаж работы по специальности, служебное положение, число опубликованных работ, чисто ссылок на работы человека)
Актуальность и новизна подхода эксперта (когда написаны работы по интересующей теме
Оптимальное сочетание узкой специализации и узкого кругозора эксперта (т.е. он должен знать не только узкий объект исследования, но и совмещенные темы)
Оптимальное сочетание индивидуальных качеств экспертов как научных или практических работников (способность к анализу и синтезу изучаемых проблем, к объективной оценке изучаемого объекта)
Моральные качества эксперта

Методы отбора экспертов

Объективный подход – использование специальной методики отбора, не то, что человек сам о себе говорит
- Документальный – отбор по формальным характеристикам (см. критерии)
- Экспериментальный – отбор по формальным характеристикам: а)проверка эффективности оценок и рекомендации кандидата по опыту его прежней работы; б)проверка с помощью специальных тестов
Субъективный подход – отбор по субъективным факторам, мнениям.

Отбор экспертов с помощью открытого или тайного голосования с потенциальных членов экспертной группы, с отводом тех из них, кто не набрал определенного минимума голосов. (Минус в том, что трудно оценивать незнакомцев или напротив – голоса распределяются по личным предпочтениям)
Метод взаимной оценки будущих экспертов (в баллах или ранжирование). Тоже самое, что и первый прием, но более конкретный.

Кого назвали		Кто назвал
		Ив	петро	Сидор	Козлов	печ
1	Иванов		1	0	1	2
2	Петров
3	Сидоров
4	Козлов
5	печенкин

Метод самооценки – когда кандидата просят высказаться по своей компетентности, оценить себя

Характеристика экспертной группы:

Оптимальное количество членов группы 5-7 (10-15) при очных опросах и 20-30 (60-80) человек при заочных опросах
Разумное сочетание экспертов различного возраста, темперамента, различных научных школ

Методы опроса экспертов

Метод индивидуальной экспертной оценки , где сильная сторона специалиста (т.е. знание, опыт) может стать его слабой стороной, так как груз прошлого может мешать эксперту увидеть необходимость изменений.
Методы коллективной экспертной оценки , результатом является не просто усредненное мнение группы, а происходит процесс объективизации субъективных оценок.
Очные
Заочные

«Мозговая атака» или метод коллективной генерации идей в основе этой методики лежит организация коллективного обсуждения проблемы таким образом, чтобы стимулировать творческую активность экспертов, чтобы обеспечить их взаимное стимулирующее влияние друг на друга, вызвать своеобразную цепную реакцию идей и добиться получения качественно новой информации.

Принципы проведения:

категорический запрет на критику любого мнения
требуется развитие высказанной партнером мысли, независимо от изначального отношения к ней
конструктивное развитие идей
подбор специалистов примерно равного научного и должностного статуса
создание обстановки непринужденности
максимальный срок работы – 1,5-2 часа
четкая формулировка проблемы обсуждения
регистрация всех высказываний
предоставления возможности экспертам дополнительного высказывания (т.к. процесс обсуждения очень динамичный, не все успевают высказаться)

Метод «дельфи» или дельфийская техника – заключается в выработке согласованных мнений путем многократного повторения опроса одних и тех же экспертов. Реализуется в заочной форме.

После первого опроса и обобщения результатов его итоги сообщаются участникам экспертной группы. Затем проводится повторный опрос в ходе которого, эксперты либо подтверждают свою точку зрения, высказанную на предыдущем этапе, либо меняют свою оценку в соответствии с новой информацией без риска для своей репутации. Опрос повторяется 3-4 раза. В ходе этой процедуры вырабатывается согласованная оценка, но при этом не должно игнорироваться мнение тех, кто после многократных опросов остался на своей позиции.