Метод построения сценария – аналитический метод прогнозирования, основанный на установлении логической последовательности состояний объекта прогнозирования и прогнозного фона во времени. Преимуществом разработки сценария является необходимость детальной проработки экспертом будущего состояния и альтернативных путей развития объекта, что могло быть упущено, если бы эксперт обсуждал прогнозируемые варианты поверхностно, а не с общих позиций. Недостатком методов индивидуальной экспертной аналитической оценки является необходимость использования специалиста, энциклопедически информированного в различных смежных областях знаний, что на практике очень проблематично.
Морфологический анализ – метод прогнозирования, основанный на построении матрицы характеристик объекта прогнозирования и их возможных значений с последующим перебором и оценкой вариантов сочетаний этих значений. Важнейший принцип морфологического анализа, проводимого экспертом с целью прогнозной оценки развития какого-либо объекта, состоит в рассмотрении и систематизации по всем без исключения возможным аспектам изучаемой проблемы. Недостатком метода является субъективность выбора наилучшего варианта решения проблемы, а достоинством - возможность широкого использования ЭВМ для “перебора” альтернативных решений.
Методы коллективных экспертных оценок представляют собой попытку повысить степень объективности мнений экспертов , увеличить достоверность коллективного суждения . Метод коллективного экспертного опроса – метод прогнозирования, основанный на выявлении обобщённой объективированной оценки экспертной группы путём обработки индивидуальных независимых оценок, вынесенных экспертами, входящими в группу.
Методы коллективной экспертной оценки могут осуществляться путём непосредственного опроса экспертов (метод комиссии, методы коллективной генерации идей), а также “заочно” с помощью анкетирования (метод “Дельфи”, эвристическое прогнозирование и др.). Первая группа методов может быть отнесена к “зависимому интеллектуальному эксперименту”, так как каждый эксперт “лицом к лицу” должен аргументировать или отстаивать своё мнение, в идеале независящее от мнения большинства, от личностного восприятия и эмоциональной окраски отдельных суждений и т.д., что на практике весьма затруднительно. Вторая группа методов характеризует “независимый интеллектуальный эксперимент”, когда с помощью анкет, обеспечивающих анонимность экспертов и возможность всесторонне обдумать свою точку зрения, выявляется достаточно согласованное мнение экспертной группы. Согласованность суждений достигается путём многоэтапного (два, три и более раз) анкетирование экспертов, причём итоговые характеристики каждого предыдущего этапа доводятся до сведения всех без исключения экспертов с просьбой мотивировать своё суждение, если оно в достаточной степени отлично от усреднённой оценки.
Таким образом , можно сделать вывод, что сущность экспертного метода состоит в проведении интуитивно-логического анализа проблемы, выполняемого привлечёнными для этой цели специалистами экспертами, обладающими необходимым профессиональным образованием, опытом и интуицией [6, с. 27].
2.2.Экспертные методы: проблемы и технологии их применения
К основным проблемам совершенствования экспертных технологий относятся следующие
1. Формирование экспертной комиссии.
Одной из центральных проблем при формировании экспертной комиссии является определения качества эксперта.
При формировании экспертной комиссии необходимо предусмотреть возможность эффективного взаимодействия экспертов, входящих в ее состав, с целью получения полной и адекватной оценки объекта экспертизы.
2. Организация и проведение экспертиз.
Ряд работ посвящен организации и проведению экспертиз. Это, прежде всего, работы по систематизации многочисленных разновидностей метода "Дельфи", касающиеся, в основном, совершенствования процедур обмена информации между экспертами в процессе экспертизы. Дальнейшее развитие получили методы мозговой атаки, сценариев, ситуационного анализа.
В настоящее время все большее значение приобретает проведение комплексных экспертиз при оценке сложных объектов.
3. Получение экспертной информации.
Широкое распространение получили методы экспертных ранжирований и гиперупорядочений, классификаций, парные и множественные сравнения и др.
При практическом использовании значительное внимание уделяется как качественным, так и количественным методам получения экспертной информации.
Разрабатываются методы измерения экспертной информации. К числу основных проблем относятся:
· проблема представимости экспертной информации;
· проблема единственности измерений;
· проблема адекватности.
4. Определение результирующих экспертных оценок.
Одной из центральных проблем обработки экспертной информации является определение результирующих экспертных оценок – результата коллективной работа экспертов. Для этой цели был введен аналог расстояний – мера близости между ранжированиями, классификациями и т.д.
Это позволило разработать корректные способы определения результирующих экспертных оценок, такие как медиана Кемени, метод строчных сумм и др.
5. Многокритериальные оценки.
Многокритериальный опыт использования методов и процедур экспертного оценивания показал, что во многих случаях, хотя и не во всех, оценки объектов экспертизы экспертами оказывались более точными при использовании методов многокритериального оценивания.
6. Анализ результатов экспертизы.
Полученная экспертная информация обязательно должна быть проанализирована. Получили развитие методы оценки согласованности экспертных суждений, высказанных в виде ранжирований, парных сравнений и т.д. При этом установлена связь между коэффициентами ранговой корреляции, характеризующие согласованность экспертных суждений, и упомянутыми ранее мерами близости.
Скорее поставлены, чем решены проблемы оценки степени конъюнктурности, конформизма и других факторов, характеризующих адекватность экспертной информации.
7. Компьютерная система поддержки.
Характерным для современного этапа использования методов экспертного оценивания является широкое применение компьютерных систем поддержки. К числу таких систем могут быть отнесены экспертные системы, позволяющие использовать знания и опыт экспертов-специалистов высокой квалификации специалистами менее высокой квалификации для решения задач, возникающие в их практической деятельности.
Система поддержки принятия решений, находящая применение в различных областях, в качестве одной из основных составляющих использует результаты экспертного оценивания.
Однако наиболее важным классом компьютерных систем, позволяющих обеспечить сопровождение и поддержку непосредственно процедур получения, обработки и анализа экспертной информации являются, с нашей точки зрения, автоматизированные системы экспертного оценивания (АСЭО).
АСЭО обеспечивает технологическое сопровождение, необходимое методическое и информационное обеспечение процесса экспертного оценивания при организации и проведении экспертиз с учетом специфического характера проводимой экспертизы [1, с. 17 - 20].
Для прогнозов развития науки и техники, будущих открытий и изобретений, для которых не имеется достаточной теоретической базы в момент составления прогноза, составления картины будущего мира широко применяется один из методов, связанный с обобщением и статистической обработкой мнений группы экспертов, получивший название метода "Дельфи". Этот метод относится к классу методов групповых экспертных оценок. Он был разработан и применен в США впервые в 1964 году сотрудниками научно-исследовательской корпорации РЭНД О.Хелмером и Т.Гордоном [3, с.155].
Происхождение названия этого метода связывают с понятиями "дельфийский оракул". Дельфийский оракул – наиболее известное в Древней Греции место религиозных пророчеств. Дельфийский оракул находился в городе Дельфы при храме Аполлона, считавшегося покровителем и прорицателем. Пророческие изречения в Дельфийском оракуле от имени Аполлона давала жрица-пифия.
Метод "Дельфи" наиболее целесообразно применять в таких случаях, когда имеющиеся в распоряжении или доступные данные непригодны для решения существующей проблемы; в распоряжении нет нужных данных; нет достаточного времени для сбора необходимых данных; процесс получения и анализа необходимых данных слишком дорогостоящий [5, с.30].
В методе "Дельфи" предусматривается создание условий, обеспечивающих наиболее продуктивную работу экспертной комиссии [6, с.26]. Это достигается равномерностью процедуры, возможностью пополнить информацию о предмете экспертизы, отказом от коллективного мнения. Еще одно важное свойство – обратная связь, позволяющая экспертам корректировать свои суждения с учетом промежуточных усредненных оценок и пояснений экспертов, высказавших "крайние" точки зрения. Для реализации обратной связи необходима многотуровая процедура. Экспертизы по методу "Дельфи" проводятся, чаще всего, в 4 тура при помощи анкетирования [6, с.26].
На первом туре экспертам сообщается цель экспертизы, и формируются вопросы, на которых составляют основное содержание экспертизы. Вопросы предъявляются каждому эксперту персонально в виде анкеты, иногда сопровождаемой пояснительной запиской. Если предъявляемые экспертам вопросы достаточно сложны, целесообразна предварительная разработка приближенной модели исследуемой системы, чтобы правильно ориентировать эксперта, конкретизировать цели и предмет экспертной процедуры, показать характер возможных ответов.