Исходные цели формирования и дальнейшее развитие метода дельфи. Экспертная оценка: метод Дельфи

Метод «Дельфи» характеризуются следующими чертами:

  • · анонимность мнений экспертов;
  • · регулируемая обработка, связь, которая осуществляется аналитической группой за ряд туров опроса, причем результаты каждого тура сообщаются экспертам;
  • · групповым ответом, который получается с помощью статистических методов и отображает обобщенное мнение участников экспертизы

Метод Дельфи является наиболее формальным из всех методов экспертного прогнозирования и наиболее часто используется в технологическом прогнозировании, данные которого используются, затем в планировании производства и сбыта продукции. Это групповой метод, при котором проводится индивидуальный опрос группы экспертов относительно их предположений о будущих событиях в различных областях, где ожидаются новые открытия или усовершенствования.

Опрос проводится с помощью специальных анкет анонимно, т.е. личные контакты экспертов и коллективные обсуждения исключаются. Полученные ответы сопоставляются специальными работниками, и обобщенные результаты снова направляются членам группы. На основе такой информации члены группы, по-прежнему сохраняя анонимность, делают дальнейшие предположения о будущем, причем этот процесс может повторяться несколько раз (так называемая многотуровая процедура опроса). После того как начинает появляться совпадение мнений, результаты используются в качестве прогноза.

Метод Дельфи назван в честь дельфийского оракула в Древней Греции. Он разработан Олафом Хельмером, видным математиком из корпорации “РЭНД”, и его коллегами и вероятно поэтому, по сравнению с другими творческими подходами, дает достаточную точность прогноза.

Метод Дельфи относится к классу количественных методов групповых экспертных оценок. Опрос экспертов проводится в 3-4 тура, состоящих из серии анкет, вопросы конкретизируются от тура к туру. Для проведения этого метода необходимо также создать аналитическую группу, которая после каждого тура производит статистическую обработку полученной информации.

Прежде всего, аналитики определяют область предпочтительных количественных значений объектов.

Процедуру экспертного опроса по методу "Дельфи" можно выделить в несколько этапов.

Этап 1. Формирование рабочей группы

Задача рабочей группы заключается в организации процедуры экспертного опроса.

Этап 2. Формирование экспертной группы.

В соответствии с методом "Дельфи" группа экспертов должна включать 10-15 специалистов в данной области. Компетентность экспертов определяется путем анкетирования, анализом уровня реферирования (количества ссылок на работы данного специалиста), использованием листов самооценки.

Этап 3. Формулирование вопросов

Формулировки вопросов должны быть четкими и однозначно трактуемыми, предполагать однозначные ответы.

Этап 4. Проведение экспертизы

Метод "Дельфи" предполагает повторение нескольких шагов проведения опроса.

Этап 5. Подведение итогов опроса

Для проведения первого тура экспертам предлагаются вопросы. Ответы должны быть представлены в виде количественных оценок на поставленный вопрос. Ответ должен быть обоснован экспертом.

Аналитическая группа проводит статистическую обработку полученной от всех экспертов информации. Для этого рассчитывается среднее значение исследуемого параметра, средневзвешенное значение исследуемого параметра, определяется медиана как средний член общего ряда чисел, полученных от экспертов и область доверительности. Область доверительности целесообразнее рассчитывать через показатель квартиль. Значение квартиля равно ј разницы между максимальной и минимальной оценок ряда. Сама область доверительности будет равна как минимальная оценка минус значение квартиля, максимальная оценка плюс значение квартиля.

Эксперты должны обязательно познакомиться с результатами и выводами аналитиков, после чего проводится второй (очередной) тур. Эксперты по результатам представленных расчетов могут увидеть, как корреспондируется их мнение с мнением всей группы экспертов. Они могут изменить свои мнения или оставить прежними, но в этом случае выдвинуть контраргументы в свою пользу. При этом строго соблюдается принцип анонимности. Таким образом проводится 2-3 тура. В итоге получаем довольно точную групповую оценку.

Существует несколько модификаций метода Дельфи, в которых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т.п. Для удобства обработки информации все модификации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Но у него есть недостатки - например, субъективность мнений специалистов, участвующих в опросе, он не позволяет сталкивать в споре мнения экспертов и на него затрачивается много времени.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз путем создания автоматизированных систем обработки результатов опроса. Техническая реализация такой системы основана на использовании ЭВМ с внешними терминалами (дисплеями). ЭВМ обеспечивает представление вопросов экспертам (общающимся с ней через их персональные дисплеи), сбор и обработку результатов ответов, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

Кроме того, некоторые специалисты считают, что «предположение о том, чтобы те, кто резко расходится с мнением большинства, обосновали свою точку зрения, может привести к усилению эффекта приспособления, а не уменьшить его, как это было задумано». Но все же многие ученые утверждают, что метод Дельфи превосходит «обычные» методы прогнозирования, по крайней мере, при разработке краткосрочных прогнозов.

Метод Дельфи впервые был описан в «Докладе об изучении долгосрочного прогнозирования» американской корпорации «Рэнд» в 1964 г. Объектами исследования явились: научные прорывы, рост населения, автоматизация, исследование космоса, возникновение и предотвращение войн, будущие системы оружия. За истекший период круг прогнозируемых процессов с помощью метода Дельфи значительно расширился, но несомненно, что наибольшее применение этот метод нашел в областях, связанных с научно-техническим прогрессом.

Основанный на групповых экспертных оценках. Представляет собой ряд последовательных процедур, направленных на подготовку и обоснование прогноза, которые характеризуются анонимностью (независимостью ответов экспертов) опроса, регулируемой обратной связью между результатами опроса предыдущего этапа и подготовкой их нового варианта, а также групповым характером ответа.

Регулируемая обратная связь осуществляется путем проведения нескольких туров опроса, на каждом из которых ответы обрабатываются с применением математико-статистических методов и результаты сообщаются анонимно. Групповой ответ формируется путем обработки и анализа результатов ответов экспертов. Критерием окончания процесса разработки прогноза, как правило, служит «близость» мнений экспертов.

В первом туре они дают ответы на поставленные вопросы, как правило, без аргументации. Ответы обрабатываются, определяются их статистические характеристики (среднее, среднеквадратическое отклонение , минимальное и максимальное значения ответов), и результаты обработки сообщаются экспертам. После этого проводится второй тур опроса, в ходе которого эксперты должны объяснить, почему они изменили или не изменили своего мнения.

Данные обработки результатов второго тура опроса и аргументация ответов с сохранением анонимности снова сообщаются экспертам перед проведением третьего тура опроса. Последующие туры осуществляются по такой же схеме. Подобная организация экспертизы позволяет экспертам учесть в своих ответах новые для них обстоятельства и в то же время избавляет их от давления при отстаивании своей позиции.

Как правило, на практике оказывается достаточным проведение четырех туров опросов. После чего мнения всех экспертов либо сближаются, либо образуют две (или больше) группы существенно различающихся мнений. В первом случае достигнутый результат со значительной степенью обоснованности может быть рассмотрен в качестве прогнозного решения, во втором — необходимо продолжить исследование проблем развития объекта с учетом выдвигаемой различными группами аргументации.

Несомненным преимуществом метода по сравнению с методами, основанными на обычной статистической обработке результатов индивидуальных опросов, является то, что он позволяет уменьшить колебания по всей совокупности индивидуальных ответов, ограничивает колебания внутри групп. При этом, как показывают проводимые эксперименты, наличие малоквалифицированных экспертов оказывает менее сильное влияние на групповую оценку, чем простое усреднение результатов ответов, поскольку ситуация помогает им исправить ответы за счет получения новой информации от своей группы.

Существует несколько модификаций метода Дельфи, в которых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т.п. Для удобства обработки информации все модификации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз путем создания автоматизированных систем обработки результатов опроса.

Техническая реализация такой системы основана на использовании вычислительной техники, которая обеспечивает представление вопросов экспертам, сбор и обработку результатов ответов, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

Метод Дельфи представляет собой ряд последовательно осуществляемых процедур, направленных на подготовку и обосно-вание прогноза. Эти процедуры характеризуются анонимностью (независимостью ответов экспертов) опроса, регулируемой об-ратной связью между результатами опроса предыдущего этапа и подготовкой их нового варианта, а также групповым характе-ром ответа.

Регулируемая обратная связь осуществляется путем проведения нескольких туров опроса экспертов , на каждом из которых характеристики их ответов обрабатываются с помощью математико-статистических методов и результаты сообщаются анонимно.

Групповой ответ формируется путем обработки и анализа результатов ответов экспертов. Критерием окончания его разработки, как правило, служит «близость» мнений экс-пертов.

Недостаток метода Дельфи заключается в том, что он не по-зволяет сталкивать в споре различные мнения и стимулировать тем самым возникающее при личном контакте «генерирование» идей. Кроме того, при экспертизе по методу Дельфи необходимо значительное время.

Рассмотрим порядок проведения экспертного опроса по методу Дельфи .

1. Отбор специалистов для участия в экспертизе начинается с составления списка компетентных в соответствующих облас-тях лиц. Этот список служит основой для выбора экспертов с помощью специальных методов оценки их качеств. Известны четыре группы таких методов: самооценки, оценки группой каждого специалиста, оценки специалиста на основе результа-тов его прошлой экспертной деятельности, методы определения компетентности .

При методе самооценок специалисты оценивают по предлага-емой анкете свои способности (зрительную память, настойчивость, способность к аналитическому мышлению, сообразительность, внимание, активность, эрудицию и многое другое) по пятибалль-ной шкале.

Организаторы экспертизы рассчитывают средние значения по каждой характеристике, для группы экспертов в целом. В зависимости от их значений состав группы может ме-няться. Практический опыт показывает, что группы с высокой самооценкой ошибаются в своих экспертных суждениях меньше других: средняя групповая ошибка уменьшается с ростом средней самооценки. С помощью самооценок определяют компетент-ность эксперта, оценивая аргументы, с помощью которых он обосновывал свои ответы, а также степень его знакомства с ис-следуемом проблемой.

В тех случаях, когда эксперты знают друг друга, наряду с самооценкой используют метод коллективной оценки каждого из них остальными членами группы. Коллективные оценки обычно менее точны, чем самооценки. Поэтому, как правило, использу-ются оба метода: организаторы экспертизы предлагают каждому из кандидатов заполнить опросные листы на себя и на других участников опроса.


Более объективными оказываются методы, основанные на использовании результатов прошлой экспертной деятельности специалиста. Они применяются, когда имеются данные о резуль-татах участия специалиста в экспертизах в прошлом. Одним из таких методов является определение степени надежности экспер-та, которое представляет собой частное от деления правильных оценок к общему числу оценок эксперта.

Определить оптимальную численность экспертной группы до-вольно трудно. Наиболее простой способ - установление ее ми-нимальной численности. Минимальное количество специалистов должно соответствовать количеству рассматриваемых проблем. Верхняя оценка численности экспертной группы определяется как потенциально возможное и достаточное число экспертов.

2. Общая схема проведения экспертизы по методу Дельфи со-стоит в следующем .

На первом туре эксперты дают ответы на поставленные вопросы, как правило, без аргументации. Ответы обрабатываются, определяются их статистические характеристики (средняя, среднеквадратическое отклонение, крайние значения ответов) и результаты обработки сообщаются экспертам .

После этого проводится второй тур опроса, в ходе которого экспер-ты должны объяснить, почему они изменили или не изменили своего мнения. Данные обработки результатов второго тура опроса и аргу-ментация ответов с сохранением анонимности снова сообщаются экспертам перед проведением третьего тура опроса.

Последу-ющие туры проводятся по такой же схеме. Подобная организация экспертизы позволяет экспертам учесть в своих ответах новые для них обстоятельства и в то же время избавляет их от какого бы то ни было давления при отстаивании своей позиции.

Как правило, на практике оказывается достаточным прове-дение четырех туров опросов . После чего мнения всех экспертов либо сближаются, либо образуют две (или больше) группы су-щественно различающихся мнений. В первом случае достигнутый результат со значительной степенью обоснованности может быть рассмотрен в качестве прогнозного решения, во втором - не-обходимо продолжить исследование проблем развития объекта с учетом выдвигаемой различными группами аргументации.

Метод Дельфи имеет несомненные преимущества по срав-нению с методами, основанными на обычной статистической обработке результатов индивидуальных опросов. Он позволяет уменьшить колебания по всей совокупности индивидуальных ответов, ограничивает колебания внутри групп. При этом, как показывают проводимые эксперименты, наличие малоквали-фицированных экспертов оказывает менее сильное влияние на групповую оценку, чем простое усреднение результатов ответов, поскольку ситуация помогает им исправить ответы за счет по-лучения новой информации от своей группы.

Существует несколько модификаций метода Дельфи, в кото-рых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т. п. Для удобства обработки информации все моди-фикации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз пу-тем создания автоматизированных систем обработки результатов опроса.

Техническая реализация такой системы основана на ис-пользовании компьютерной сети по схеме «клиент - сервер ». Это обеспечивает представление вопросов экспертам (общающимся с сервером посредством Интернета или выделенного канала), сбор и обработку результатов ответов на выделенном сервере, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

Кроме того, некоторые специалисты считают, что пред-положение о том, чтобы те, кто резко расходится с мнением большинства, обосновали свою точку зрения, может привести к усилению эффекта приспособления, а не уменьшить его, как это было задумано. Но все же многие ученые утверждают, что метод Дельфи превосходит «обычные» методы прогнозирования, по крайней мере, при разработке краткосрочных прогнозов.

Метод Дельфи впервые был описан в «Докладе об изуче-нии долгосрочного прогнозирования» американской корпора-ции «Рэнд» в 1964 г. Объектами исследования явились: научные прорывы, рост населения, автоматизация, исследование космоса, возникновение и предотвращение войн, будущие системы оружия.

За истекший период круг прогнозируемых процессов с помощью метода Дельфи значительно расширился, но несомненно, что наибольшее применение этот метод нашел в областях, связанных с научно-техническим прогрессом. Благодаря развитию теле-коммуникационных технологий его применение существенно упростилось по сравнению с той длительной бюрократической процедурой, которую он представлял собой вначале. В нашей стране в последнее время он довольно успешно применяется в предпринимательской деятельности, при разработке комплекс-ных, затрагивающих различные сферы социума проектов. Метод Дельфи используется, как правило, в сочетании или в качестве составляющей части в сложных методиках синтеза управлен-ческих решений.

Здравствуйте, уважаемые читатели! Метод дельфи это особый инструмент, позволяющий разработать оптимальные решения какой-либо сложности, а также провести качественную оценку этих решений и, конечно же, спрогнозировать дальнейшие события.

Немного истории

Название взяло начало благодаря Дельфийскому Оракулу. Изначально этот метод был создан Олафом Хэлмером, Норманом Дэлки и Николасом Решером для того чтобы предугадать, какое влияние окажут научные открытия будущего на способы ведения военных действий. Это случилось примерно в 1950—1960 годы в Санта Монике.

Учёные трудились в исследовательском центре «RAND», пытаясь изобрести инструмент, позволяющий прогнозировать точные события. Когда его удалось закончить, именно Каплан (он был сотрудником и профессором Калифорнийского университета) дал ему такое название. Если помните, храм Делфи являлся местом, где систематизировалась и аккумулировалась информация, её записывали на специальные пластины и считали истинной и единственно верной.

По такому же принципу строилась работа и современного оракула. Только информация о будущем появляется не благодаря провидцам, а от обычных людей, компетентных в той сфере, где возникла сложность. Происходит это с помощью анкетирования, в письменном или в электронном виде.

Структура

  1. Изначально подбирается группа экспертов. Количество участников не ограничено, но рекомендуется не более 20 человек, иначе получение результатов значительно затянется, да и усложнится процесс работы.
  2. Когда экспертный состав готов, каждый из специалистов получает одинаковую задачу – обработав тему вопроса, составить план исследования и вопросник, или же просто разбить проблему на более мелкие сложности.
  3. Далее подбирается группа аналитиков, которые рассматривают все созданные экспертами списки и выделяют из них схожие моменты. После чего создают уже новый вопросник, на основе полученных общих данных и отправляют обратно.
  4. Теперь эксперты вносят дополнения и свои коррективы в обновлённый общий список. То есть мы получаем, к примеру, 20 разнообразных мнений и взглядов на одну и ту же проблему.
  5. Скорректированный вопросник отсылается опять к аналитикам, которые пытаются обнаружить схожести в ответах, чтобы создать обновления и отправить обратно, чтобы группа на этот раз разработала свои пути решения проблемы. В этот период оценивается эффективность и актуальность предложенных способов, а также осуществляется проверка ресурсов, необходимых для реализации задуманных действий.
  6. Аналитики опять пытаются проанализировать ответы. Если они обнаруживают кардинально различные точки зрения, то обязательно выносят их на обсуждение, чтобы предыдущая группа, в свою очередь, или привела аргументы в защиту своих идей, или пересмотрела их адекватность и уместность.
  7. Каждый шаг будет повторяться до тех пор, пока не исчезнут все риски и «слабые места», и, конечно же, пока все специалисты не придут к единому мнению. Желательно, чтобы таких туров было не более 5, иначе утратится большая часть необходимой и ценной информации. А промежуток между ними – не более одного месяца.

Вариации

Вышеописанный метод считается классическим, но существуют ситуации, когда решение необходимо принять в максимально краткие сроки, поэтому активной популярностью пользуется «Экспресс — Делфи». Он позволяет проанализировать проблему и прийти к единому мнению буквально за несколько часов, необходимо только подготовить хорошую техническую базу.

То есть, у каждого участника должен быть компьютер, подключённый к одной общей сети. Весь процесс анализа и выбора наиболее оптимального варианта проводится ускоренно, без глубокой обработки предоставленного материала. Несмотря на то, что этот метод очень удобный и эффективный, у него есть один недостаток, существенно влияющий на результат – из-за ограниченности по времени, специалисты не успевают тщательно обдумать стоящую перед ними задачу и дать объективную оценку заключениям остальных.

Тут даже не стоит приводить какой-то пример, вы и сами знаете, чем обычно заканчивается спешка и невнимательность к деталям. Поэтому, если от этого способа будет зависеть чья-то жизнь или здоровье, то лучше воспользоваться традиционной пошаговой инструкцией с соблюдением временных рамок.

  • Привлекать рекомендуется компетентных специалистов, которые обладают знаниями касательно возникшей проблемы. Только не общей направленности, а из разных сфер, тогда можно будет рассмотреть вопрос под разными углами, согласовав выводы экспертов.
  • Прежде, чем начинать работу, используя метод Делфи, необходимо уточнить такую информацию:
    — Как именно будет строиться работа? То есть, где будут находиться участники, каким образом они будут анализировать информацию и куда отправлять результаты.
    — Кто будет ответственным за принятие окончательного решения? Кто решит, что достаточно и пора завершать этот процесс?
    — Существуют ли ещё способы, с помощью которых возможно было бы проконтролировать и перепроверить результаты?
    — Примерно, какие варианты вы ожидаете получить в итоге? Чего именно добиваетесь?
  • Предоставляйте специалистам время для того чтобы подумать над своими выводами, а также приобрести новые знания по теме.

В каких случаях применяется?

Дельфи позволяет осуществлять прогнозирование путём систематизации мнений о какой-либо ситуации различных групп людей. Поэтому применяется, в основном для того чтобы произвести оценку долгосрочных проблем, идентифицировать тему и построить суждение на основе различных утверждений.

В комплексе с другими техниками окажется прекрасным инструментом, на который можно будет опираться в дальнейшем. Используется чаще всего для того чтобы рассмотреть как личные перспективы в будущем, так и технические, организационные.

Преимущества и недостатки

Участники не пересекаются между собой, они даже могут быть не знакомы друг с другом и не иметь понятия, с кем согласовывают своё мнение в процессе. А это удобно для тех, кто испытывает чрезмерное напряжение от самой мысли, что придётся с кем-то общаться и отстаивать своё мнение, аргументировать точку зрения и прочее. К тому же имеет влияние и тип темперамента на качество работы, ведь каким бы ни был профессионалом своего дела человек с интровертной акцентуацией характера, ему будет намного легче дать свою оценку происходящему, не вступая в прямой контакт с остальными участниками процесса.
+ Отсутствует давление на экспертов, с целью добиться определённых выводов. Поэтому исследование будет проходить без подтасовки результатов, что важно для получения максимально честных и объективных суждений.

— Количество участников нестабильно, так как процесс трудоёмкий и длительный по времени, отчего люди по разным причинам могут «выпадать».
— Если большинство членов группы будут обладать поверхностными знаниями о возникшей сложности, в силу неопытности и прочее, то и соответственно, такие поверхностные и ошибочные решения будут приняты во внимание.

Заключение

А на сегодня всё, уважаемые читатели! Практическое применение этого способа подходит больше для компаний и корпораций, если же вы хотите проанализировать ситуацию с включением меньшего количества людей, или даже самостоятельно, то рекомендую подписаться на обновления или вступить в группы соц.сетей. В ближайшее время мы рассмотрим еще множество подобных методов. Сил вам и успехов!

Материал подготовила Журавина Алина.

Метод «Дельфи» один из основных в проведении групповых экспертиз и имеет различные модификации Фактически это группа процедур, объединенных общими требованиями к организации экспертизы и форме получения экспертных оценок. В нем предусматривается создание условий, обеспечивающих наиболее продуктивную работу экспертной комиссии, что достигается анонимностью процедуры, с одной стороны, и возможностью пополнить информацию о предмете экспертизы - с другой Метод разработан и применен в США впервые в 1964 г. сотрудниками научно- исследовательской корпорации «РЭНД» О. Хелмером и Т. Гордоном

Название метода связывают с наиболее известным в Древней Греции местом религиозных пророчеств, которое находилось в городе Дельфы при храме Аполлона

Метод «Дельфи» целесообразно применять в таких случаях, когда имеющиеся в распоряжении или доступные данные непригодны для анализа существующей проблемы, в распоряжении нет нужных данных; нет достаточного времени для сбора данных, процесс получения и анализа необходимых данных слишком дорог.

Метод «Дельфи» предусматривает создание условий, обеспечивающих эффективную работу экспертной комиссии. Это достигается анонимностью процедуры, с одной стороны, и возможностью пополнить информацию о предмете экспертизы, отказом от коллективного мнения - с другой. Еще одно важное свойство - обратная связь, позволяющая экспертам корректировать свои суждения с учетом промежуточных усредненных оценок и пояснений экспертов, высказавших «крайние» точки зрения. Для реализации обратной связи необходима многотуровая процедура. Экспертиза проводится чаще всего в четыре тура.

Прямые дебаты заменены тщательно разработанной программой последовательных опросов, проводимых обычно в форме анкетирования. Ответы экспертов обобщаются и вместе с новой дополнительной информацией поступают в распоряжение экспертов, после чего они уточняют нервоначальные ответы. Такая процедура повторяется несколько раз до достижения приемлемой согласованности всей совокупности высказанных мнений.

На первом туре экспертам сообщается цель экспертизы и формируются вопросы, ответы на которые составляют основное содержание экспертизы Вопросы предъявляются каждому эксперту персонально в вида анкеты, иногда сопровождаемой пояснительной запиской. Если предъ* являемые экспертам вопросы достаточно сложны, целесообразна прсдван рительная разработка приближенной модели исследуемой системы, что-| бы правильно ориентировать эксперта, конкретизировать цели и предмет экспертной процедуры, показать характер возможных ответов. |

Успеху экспертизы способствует предоставление эксперту дополнительной информации о предмете экспертизы Информация, полученная от эксперта, поступает в распоряжение аналитической группы, обеспечивающей организацию, проведение, обработку промежуточных и окончательных результатов экспертизы. Аналитическая группа определяет экспертов, высказавших крайние точки зрения, давших самую высокую и самую низкую оценку альтернативе, усредненное мнение экспертов - медиану, верхнюю и нижнюю квартили, т.е. значение оцениваемой альтернативы, выше и ниже которых расположены 25% числовых значений оценок. Расстояние между квартилями характеризует разброс экспертных оценок, т е. согласованность точек зрения экспертов Вводятся следующие обозначения.

/0 - значение наиболее ранней оценки,

/0 25 - значение оценки, определяющей 25% наиболее ранних оценок (из всех имеющихся),- нижний квартиль,

(0 5 - значение оценки, разделяющей упорядоченную по оси времени совокупность оценок на две равные по количеству оценок части,- медиана;

/0 75 - значение оценки, определяющей 25% наиболее поздних оценок (из всех имеющихся),- верхний квартиль;

/, 0 - значение наиболее поздней оценки

Степень согласованности мнений экспертов определяют коэффициентом вариации п, который не должен превышать 33%. Он рассчитывается по формуле

где Б - среднее квадратическое отклонение оценок;

іде дг -среднее значение оценки, х1 -оценка каждою эксперта, п - число экспертов Медиана - значение оценки, которое находится в середине ранжированного ряда Для нахождения медианы ряда с четным числом складывают два средних варианта и делят сумму пополам

На втором туре экспертам предъявляется усредненная оценка экспертной комиссии и обоснования экспертов, высказавших «крайние» точки фения. Обоснования принимаются анонимно, без указания имен экспертов После получения дополнительной информации эксперты, как правило, корректируют свои оценки Скорректированная информация вновь по ступает в аналитическую группу. На третьем туре эта информация вместе с анонимными аргументациями поставленных оценок снова направляется каждому участнику. На основе полученной информации эксперты пересматривают предыдущие оценки. Если же оценка какого-либо эксперта значительно выходит за рамки общего интервала, то он должен подтвердить достаточной аргументацией свою позицию и объяснить, почему предыдущая информация и аргументация противоположных оценок не заставили его изменить свое мнение На четвертом туре каждому эксперту предоставляется право распределения оценок третьего тура, и он должен снова представить на рассмотрение пересмотренную оценку, учтя полученную информацию Как показывает практика, желаемое согласие наступает к четвертому туру. В некоторых случаях согласованная точка зрения экспертов может быть получена уже после второго или третьего туров Тогда необходимость проведения следующих туров отпадает.

При использовании метода «Дельфи» полезно учитывать следующее 1

Группы экспертов должны быть стабильными, их численность должна удерживаться в благоразумных рамках. 2

Время между турами опросов не должно быть более месяца 3.

Вопросы в анкетах должны быть тщательно продуманы и однозначно сформулированы.

4 Число туров должно быть достаточным, чтобы обеспечить всем участникам возможность ознакомиться с причиной появления той или иной оценки, а также и для критики этих причин. 5.

Должен проводиться систематический отбор экспертов 6.

Необходимо иметь самооценку компетенции экспертов по рассматриваемым проблемам. 7.

Нужна формула согласованности оценок, основанная на данных самооценок 8.

Следует установить влияние общественного мнения на экспертные оценки и па совмещение этих оценок 9.

Необходимо установить влияние различных видов передачи информации экспертам по каналам обратной связи.

Следует отметить, что использование медианы и квартилей в методе «Дельфи» имеет помимо положительной стороны и отрицательную. В частности, при анализе ответов экспертов оценка, слишком сильно отличающаяся от других, практически исключается, несмотря на то что она может оказаться более верной, чем остальные, т с. большинство экспертов мо1ут сойтись в ошибочной оценке. Правда, по мнению авторов, подобные отклонения метода «Дельфи», компенсируются отчасти тем, что эксперта, несогласного с мнением большинства, просят обосновать причины несогласия. Все эксперты имеют возможность не согласиться с этими причинами и могут принять во внимание или отвергнуть их, переоценить свое мнение или остаться при нем Так что оценка, заметно отличающаяся от других, отбрасывается фактически лишь в том случае, если эксперту не удастся достаточно веско аргументировать свою точку зрения

Имеется и другая трудность - сложность четкой формулировки »опросов Максимальная точность достигается за счет громоздкого стиля изложения, вызывающего отрицательную реакцию у отвечающих на анке- \у Здесь также надо найти оптимум между четкостью и лаконичностью поставленных вопросов, чтобы всс участники одинаково их интерпретировали. Другим недостатком метода является то, что ответы высококомпетентных экспертов как бы «разбавляются» оценками мснсс информиро- панных специалистов, кроме того, в ряде случаев одни и тс же специалисты нключаются в разные группы (чего допускать нельзя).

Тем не менее, несмотря на указанные недостатки, метод «Дельфи» является достаточно надежным инструментом получения экспертной информации.

С его помощью выявляется преобладающее суждение специалистов по какому-либо вопросу в обстановке, исключающей их прямые дебаты между собой, но позволяющей им вместе с тем периодически II

шешивать свои суждения с учетом ответов доводов коллег. Пересмотр II

возможность изменения прежних оценок на основе выяснения соображений каждого нз экспертов и последующий анализ каждым участником I овокупности причин, представленных экспертами, стимулирует опраши- млемых к учету факторов, которые они на первых порах склонны были опустить как незначительные.

Рассмотрим применение метода «Дельфи» на примере принятия решения о величине валового сбора зерна в условном регионе в периоде упреждения В подгоювке решения участвовало 14 экспертов Координатором экспертизы был сделан доклад о состоянии и основных направлениях развития I ельского хозяйства в рассматриваемом регионе, приведена статистика вало- иого сбора зерна и 1913-2003 гг (рис 5 1) Опрос проводился в гри тура.

Экспертами были приведены следующие аргументы в пользу того, ?1 го объем сбора зерна будет минимальным 1)

прогнозируемые синоптиками неблагоприятные погодные усло- И11Я - дожди во время уборки, 2)

высокая степень износа сельскохозяйственной техники; 3)

недостаточное финансирование производящих отраслей агропромышленного комплекса; 4)

проблемы управления сельским хозяйством, ни жая квалификация мдров управления, неэффективность организационных структур управ- юпия, отсутствие системы непрерывного прогнозирования и планирования в производящих организациях и т д

500 1000 1500 2000 2500 3000 ті

іс. 5.1. Динамика валового сбора зерна в регионе В пользу того, что объем валового сбора зерна будет максимальным, Экспертами были высказаны следующие аргументы 1)

увеличение объемов производства сельскохозяйственной продукции в фермерских хозяйствах области, 2)

увеличение посевных площадей, 3)

тенденции увеличения производства зерна в регионе за последние Годы, 4)

политика органов регионального управления направлена на стабилизацию кризисных явлений в сельском хозяйстве области.

Первый тур Для проведения экспертизы экспертам раздали анкеты, В которых содержался вопрос и место для ответа. Результаты обработки анкет на первом туре представлены в табл. 5.1

Таблица 5.1

Результаты анкетирования (первый тур) Экспертные данные (тыс т) 1000 2900 1500 2500 2100 1200 1700 Ранжированный ряд 1000 1100 1100 1200 1200 1500 1700 Экспертные данные (тыс т) 2600 1100 2200 1200 1100 2400 2600 Ранжированный ряд 2100 2200 2400 2500 2600 2600 2900 Среднее значение оценки:

X =(1000 + 1100 + 1100 + 1200 + 1200 + 1500 + 1700 + 2100 + 2200 + + 2400 + 2500 + 2600 + 2600 + 2900): 14 = 1864,3.

Среднее квадратичное отклонение оценок а ="

п - число экспертов, участвующих в эксисргизс, х1 -оценка эксперта

Коэффициент вариации у - ?ю0% = 100% = 35,0% д: 1864,3

Нижний квартиль?>02, = 1200 Верхний квартиль?>оп = 2500 м.™™, _ 1700 + 2100

Эксперты

И- Экспертные данные

Ранжированный ряд

Рис. 5.2. Графики экспертных оценок валового сбора зерна (1-й тур)

Во время второго тура повторяются те же вопросы, что и в вопроснике первого тура. Каждому эксперту предлагается пересмотреть собственный предыдущий ответ и при желании изменить его В анкете содержалась информация о средней оценке по итогам первого тура (табл. 5 2). Если новый ответ не будет находиться между верхним и нижним квартилями оценок всех экспертов в первом туре, то требовалось объяснить такую точку зрения.

Таблица 5.2

Образец анкеты второго тура Вопрос Средняя

экспертов Интервал от ветов (ИО) старый новый Причина того, почему ваш новый ответ выше (или ниже) ИО Каким будет валовой сбор зерновых в регионе в 2004 г.? 1864 1200- 2500 Заполняется координатором экспертизы Приведем статистические характеристики этого тура экспертной оценки (табл 5 3).

Таблица 5.3

Статистическая характеристика второго тура экспертизы Экспертные данные (тыс т) 950 2000 1900 1100 900 2000 2600 Ранжированный ряд 900 950 1000 1100 1200 1200 1300

Продолжение Экспертные данные (гыс т) 1500 2200 1000 1200 1100 1200 1300 Ранжированный ряд 1400 1500 1900 2000 2000 2200 2600 X -1517,8 0О 25=1ЮО сг = 511,16 Ме = 1350 ??0 75 = 2000 у = 33,6%

Третий тур экспертной оценки аналогичен Каждому эксперту предлагается пересмотреть свои предыдущие ответы и при желании исправить их. Все исправления сопровождаются объяснениями, почему увеличиваются или уменьшаются объемы валового сбора (табл. 5.4).

Таблица 5.4

Статистическая характеристика третьего тура экспертизы "Экспертные данные (тыс т) 1200 1350 1100 1000 1300 1200 1000 Ранжированный ряд 1000 1000 1000 1100 1100 1200 1200

Продолжение Экспертные данные 1450 1200 1500 1000 1200 1400 1100 Ранжированный ряд 1200 1200 1300 1350 1400 1450 1500 Х = 1221,4 0О25=11ОО сг = 160,9 М> = 1200 ?>„„=1350 V = 13,1%

В таблице 5.5 приведены результаты экспертизы по турам. Таблица 5.І

Обшиє результаты экспертизы по турам Тур Интервал Средняя оценка в туре Дисперсия Вариация, % 1 1200-2500 1 828,5 426 581,52 35,0 2 1100-2000 1 517,8 261 284,54 33,6 3 1100-1350 1 221,4 25 888,81 13,1 В нашем случае экспертиза завершена после третьего тура, так как мнения экспертов стали согласованными (коэффициент вариации п = 13,1%)

В результате применения метода «Дельфи» валовой сбор зерна в регионе ожидается в объеме 1200 тыс. т.

После первой апробации метода «Дельфи» были разработаны его различные модификации. Все они сохраняли основные особенности первоначального варианта, но или совершенствовали их, или включали новые элементы. Все модификации могут быть охарактеризованы следующим образом. 1.

Составление классификатора событий, которые экспертам предстоит анализировать. Составление направленного перечня событий, что является добавлением еще одного (предварительного) тура опроса, но для других экспертов, не участвующих в основном анкетировании. Другими словами, тс, кто составляет этот перечень, передают его другим экспертам, начинающим работу как бы со второго тура. В частности, этот прием активно используется в методах эвристического и программного прогнозирования. 2.