Качество экспертного прогноза определяется по таким критериям, как:
компетентность (или, в более общем виде, качество) эксперта;
качество информации, представляемой экспертам;
качество экспертной информации, поступающей от экспертов;
уровень технологии разработки прогноза.
Если период прогнозирования уже завершился, то необходимо сопоставить спрогнозированные значения показателей и параметров с полученными в результате реализовавшегося в действительности хода прогнозируемых событий.
И здесь на первый план выступает вопрос, - по какому критерию оценивать качество прогноза апостериорно. В качестве примера критериев оценки точности прогноза можно привести следующую формулу:
K1=¦X-И¦K2=¦lnX/И¦,
где X—прогнозировавшееся значение оценки показателя;
U—истинное значение оценки показателя.
После того, как прогноз подготовлен и представлен руководству организации, наступает этап после прогнозной работы с подготовленным материалом.
Вариантная разработка прогноза предполагает разработку прогноза при различных альтернативных вариантах условий и предположений. А они могут измениться. События, вчера казавшиеся маловероятными, сегодня происходят, а казавшиеся наиболее вероятными не происходят.
Поэтому неотъемлемой частью современной технологии прогнозирования является периодически, в зависимости от происходящих изменений, осуществляемый мониторинг хода реализации прогнозированного хода развития событий. Мониторинг позволяет своевременно выявлять значительные отклонения в ходе развития событий. Если они могут оказать принципиальное влияние на дальнейший ход событий в части касающейся принятия важных стратегических решений, то прогноз должен быть подвергнут корректировке.
Коррективы могут быть различного уровня значимости, сложности, трудоемкости и т.д. Если они не очень значительны, то эта проблема может решаться на уровне аналитической группы, сопровождающей разработку прогноза. Если коррективы более существенны, то может потребоваться дополнительное привлечение отдельных экспертов, а в особо важных случаях при наличии значительных изменений - дополнительная работа экспертной комиссии с возможным изменением её состава. Последнее необходимо, в особенности, в тех случаях, когда для корректировки прогноза требуется привлечение специалистов другой профессиональной ориентации.
3. Метод изыскательского прогнозирования.
Одним из основных методов, используемых в изыскательском прогнозировании, является экстраполяция временных рядов - статистических данных об интересующем нас объекте. Экстраполяционные методы основаны на предположении о том, что закон роста, имевший место в прошлом, сохранится и в будущем, с учетом поправок из-за возможного эффекта насыщения и стадий жизненного цикла объекта.
К числу кривых, достаточно точно отражающих изменение прогнозируемых параметров в ряде распространенных ситуаций, является экспонента, то есть функция вида:
y=a•ebt,
где t—время, a и b—параметры экспоненциальной кривой.
К числу наиболее известных экспоненциальных кривых, используемых при прогнозировании можно отнести кривую Перла, выведенную на основании обширных исследований в области роста организмов и популяций, и имеющую вид:
Y = L/(1+a•e-bt),
где L —верхний предел переменной y.
Не менее распространена кривая Гомперца, выведенная на основании результатов исследований в области распределения дохода и уровня смертности (для страховых компаний), имеющая вид:
где k—также параметр экспоненты.
Кривые Перла и Гомперца использовались при прогнозе таких параметров, как возрастание коэффициента полезного действия паровых двигателей, рост эффективности радиостанций, рост тоннажа судов торгового флота и т.д.
Как кривая Перла, так и кривая Гомперца могут быть отнесены к классу так называемых S-образных кривых. Для таких кривых характерен экспоненциальный или близкий к экспоненциальному рост на начальной стадии, а затем при приближении к точке насыщения они принимают более пологий вид.
Многие из упомянутых процессов могут быть описаны с помощью соответствующих дифференциальных уравнений, решением которых и являются кривые Перла и Гомперца.
При экстраполяции используются регрессионные и феноменологические модели. Регрессионные модели строятся на базе сложившихся закономерностей развития событий с использованием специальных методов подбора вида экстраполирующей функции и определения значений её параметров. В частности, для определения параметров экстраполирующей функции может быть использован метод наименьших квадратов.
Предполагая использование той или иной модели экстраполирования, того или иного закона распределения, можно определить доверительные интервалы, характеризующие надежность прогнозных оценок.
Феноменологические модели строятся исходя из условий максимального приближения к тренду процесса, с учетом его особенностей и ограничений и принятыми гипотезами о его будущем развитии.
При многофакторном прогнозе в феноменологических моделях можно присваивать большие коэффициенты весомости факторам, которые в прошлом оказывали большее влияние на развитие событий в прошлом.
Если при прогнозировании рассматривается ретроспективный период, состоящий из нескольких отрезков времени, то, в зависимости от характера прогнозируемых показателей, менее удаленных от момента прогнозирования по шкале времени и т.д. Также должен быть учтен тот факт, что нередко при прогнозировании оценки экспертов относительно близкого будущего могут отличаться излишним оптимизмом, а оценки относительно более отдаленного будущего излишним пессимизмом.
Если в прогнозируемом процессе может участвовать несколько различных технологий, каждая из которых представлена соответствующей кривой, то в качестве результирующей экспертной кривой может быть использована огибающая частных кривых, соответствующих отдельным технологиям.
4. Метод нормативного прогнозирования.
Нормативное прогнозирование представляет собой подход, к разработке прогноза исходя из целей и задач, которые ставит перед собой организация в прогнозируемом периоде. Основным методом, использующимся в нормативном прогнозировании, является метод горизонтальных матриц решений, когда производится определение первоочередности выполнения предлагаемых для достижения поставленных целей проектов.
Обычно используются двумерные и трехмерные матрицы. Наиболее часто горизонтальные матрицы решений используются для определения оптимального распределения ресурсов при заданных ограничениях. При этом в качестве ресурсов могут выступать денежные средства, рабочая сила, её качество и квалификация, оборудование, энергетические ресурсы и т.д.
В частности, одно измерение горизонтальной матрицы решений может соответствовать основным проблемам, возникающим при достижении цели, второе измерение - ресурсам, которые могут потребоваться для решения этих проблем.
Согласованные матрицы более низких иерархических уровней проблем объединяются в матрицы более высоких уровней вплоть до главных матриц для стратегических проблем организации.
В трехмерной горизонтальной матрице решений одно измерение, например, может соответствовать коммерческим миссиям (областям сбыта), второе - ресурсам, третье - времени. Ресурсы в свою очередь, могут подразделяться на финансовые, коммерческие, ресурсы сбыта, производства, оборудования и т.д.
Вертикальные матрицы решений предназначены для отслеживания вертикального перемещения технологий. Вертикальная матрица решений для внутрифирменного планирования по рекомендациям Стэнфоррдского института может выглядеть примерно так.
Стадия исследований и разработок
Продукт
Заказчик
Ресурсы
Открытие
Создать
Воплотить
Разработать
В частности, трехмерная вертикальная матрица решений под названием «Общая схема разработки системы национальной космической программы» была разработана в компании «Норт америкэн авиэйшн».
Для более рационального выбора проектов для реализации могут быть использованы методы исследования операций такие, как:
линейное программирование, позволяющее сформулировать оптимизационную задачу в виде линейных ограничений (неравенств или равенств) и линейной целевой функции;
динамическое программирование, рассчитанное на решение многоступенчатых оптимизационных задач;
целочисленное программирование, позволяющее решать оптимизационные задачи, в том числе задачи оптимального распределения ресурсов, при дискретных (целочисленных) значениях переменных и др.
В инструментарий нормативного прогнозирования входят методы построения деревьев целей, методы типа Паттерн и др.
В этом случае каждой из рассматриваемых целей приписываются количественные весовые коэффициенты, а для каждого проекта оценивается вклад в достижение каждой из целей, если он ненулевой. Степень вклада впоследствии умножается на весовой коэффициент цели.
Наименование проектов
Цели обеспечения качества продукции
Цели обеспечения ритмичности производства
Все цели
0,6
0,4
Ценность проекта А=0,6*8+0,4*5=6,8
8
5
Ценность проекта В=0,6*4+0,4*7=5,2
4
7
Ценность проекта С=0,6*6+0,4*6=6,0.
6
6
Естественно для реализации целесообразно выбрать проект, представляющий наибольшую ценность.
5. Метод сценариев.
При разработке управленческих решений широкое распространение нашел метод сценариев, также дающий возможность оценить наиболее вероятный ход развития событий и возможные последствия принимаемых решений. Разрабатываемые специалистами сценарии развития анализируемой ситуации позволяют с, тем или иным уровнем достоверности определить возможные тенденции развития, взаимосвязи между действующими факторами, сформировать картину возможных состояний, к которым может прийти ситуация под влиянием тех или иных воздействий. Профессионально разработанные сценарии позволяют более полно и отчетливо определить перспективы развития ситуации, как при наличии различных управляющих воздействий, так и при их отсутствии. С другой стороны, сценарии ожидаемого развития ситуации позволяют своевременно осознать опасности, которыми чреваты неудачные управленческие воздействия или неблагоприятное развитие событий. Высказывается мнение, что необходимость в предвидении наиболее вероятного развития ситуации впервые возникла с возникновением промышленного производства, поскольку при сезонно повторяющемся сельскохозяйственном производстве в этом не было никакой необходимости. Полностью согласиться с такой точкой зрения трудно, поскольку испокон веков человечество воевало, время от времени вело грандиозное строительство. И без представления возможного развития ситуации такие, целенаправленные действия вряд ли были бы возможны. В то же время прототипы метода сценариев нередко мы находим в разные времена в разных странах. Так Кутузов собравший военный совет в Филях, и прослушавший различные варианты возможных действий, оценивал различные сценарии развития войны с французами, предлагавшиеся военноначальниками. Он сопоставлял их сильные и слабые стороны и пришел к тяжелому, но, пожалуй, единственно верному решению оставить Москву, обрекая ее на пожары и разрушения. Однако последующее развитие событий подтвердило его правоту. Предпочтенный им сценарий развития событий полностью себя оправдал. Государственный деятель, занимающий ответственный пост, и бизнесмен, принимающий важное для судьбы проекта решение, финансист, анализирующий фондовый рынок, хирург накануне сложной нетрадиционной операции, конструктор, закладывающий основы принципиально нового объекта при принятии важных решений, как правило, пытаются предугадать возможный сценарий развития событий с тем, чтобы принять решение, обеспечивающее успех. Считается, что первым сценарии для прогнозирования развития сложных систем использовал Герман Кан. Первые из разработанных сценариев носили преимущественно описательный характер. Впоследствии метод сценариев был в значительной степени развит за счет использования более точных качественно-количественных моделей. Метод сценариев предполагает создание технологий разработки сценариев, обеспечивающих более высокую вероятность выработки эффективного решения в тех ситуациях, когда это возможно, и более высокую вероятность сведения ожидаемых потерь к минимуму в тех ситуациях, когда потери неизбежны. В настоящее время известны различные реализации метода сценариев такие, как: ? получение согласованного мнения, ? повторяющаяся процедура независимых сценариев, ? использование матриц взаимодействия и др. Метод получения согласованного мнения является, по существу, одной из реализаций метода Делфи, ориентированной на получение коллективного мнения различных групп экспертов относительно крупных событий в той или иной области в заданный период будущего. К недостаткам этого метода можно отнести недостаточное внимание, уделяемое взаимозависимости и взаимодействию различных факторов, влияющих на развитие событий, динамике развития ситуации. Метод повторяющегося объединения независимых сценариев состоит в составлении независимых сценариев по каждому из аспектов, оказывающих существенное влияние на развитие ситуации, и повторяющемся итеративном процессе согласования сценариев развития различных аспектов ситуации. Достоинством этого метода является более углубленный анализ взаимодействия различных аспектов развития ситуации. К его недостаткам можно отнести недостаточную разработанность и методическую обеспеченность процедур согласования сценариев. Метод матриц взаимовлияний, разработанный Гордоном и Хелмером, предполагает определение на основании экспертных оценок потенциального взаимовлияния событий рассматриваемой совокупности. Оценки, связывающие все возможные комбинации событий по их силе, распределению во времени и т.д., позволяют уточнить первоначальные оценки вероятностей событий и их комбинаций. К недостаткам метода можно отнести трудоемкость получения большого количества оценок и корректной их обработки. В работе предлагается методология составления сценариев, предполагающая предварительное определение пространства, параметров, характеризующих систему. Состояние системы в момент времени t является точкой S(t) в этом пространстве параметров. Определение возможных тенденций развития ситуации позволяет определить вероятное направление эволюции положения системы в пространстве выявленных параметров S(t) в различные моменты времени в будущем S(t+l), S(t+2) и т.д. Если управляющие воздействия отсутствуют, то предполагается, что система будет эволюционировать в наиболее вероятном направлении. Управляющие воздействия эквивалентны воздействию сил, способных изменить направление траектории S(t). Естественно, что управляющие воздействия должны рассматриваться как с учетом ограничений накладываемых как внешними, так и внутренними факторами. Предлагаемая технология разработки сценариев предполагает рассмотрение положения системы в дискретные моменты времени t, t+1, t+2, ... . При этом предполагается, что точка, соответствующая системе S(t) в пространстве параметров расположенным в конусе, расширяющемся при удалении от исходного момента времени t. В некоторый момент времени t+T ожидается, что система будет расположена в сечении конуса, соответствующем моменту времени t+T. Все точки этого сечения могут считаться вероятным расположением системы в пространстве параметров. Естественно, что наиболее вероятным считается положение системы на центральной оси конуса. Управляющие воздействия приводят к смещению положения системы в пространстве параметров. В этом случае также целесообразно рассматривать лишь дискретные точки, наибольшее внимание, уделяя при этом наиболее вероятным точкам. При таком анализе необходимо предвидеть возможность возникновения дополнительных внутренних напряжении между элементами системы, поскольку они также могут изменять положение системы в пространстве параметров. Для оценки напряжений могут быть использованы соответствующие индикаторы, в частности, экономического или социального характера, а также пороговые значения индикаторов, при превышении которых положение системы может значительно измениться. Управляющие воздействия в ряде случаев могут быть направлены на предотвращение превышения пороговых значений индикаторов, если нашей целью является сохранение стабильности. В некоторых случаях можно целенаправленно стремиться к превышению пороговых значений индикаторов, если это соответствует поставленным перед системой задачам. Одним из наиболее важных результатов использования этой разновидности метода сценариев, как впрочем, и других его разновидностей, является лучшее понимание анализируемой ситуации и основных закономерностей и особенностей ее развития. Заслуживает внимания разновидность метода сценариев, предложенная Абтом, Фостером и Ри. Авторы подчеркивают, что их метод разработки сценариев относится скорее к анализу возможного, а не к вероятного будущего. Действительно, полученное в процессе разработки прогноза более глубокое понимание ситуации предполагает в качестве следующего шага выработку системы воздействий, которая может изменить рассмотренные сценарии развития ситуации. И вероятное будущее может оказаться скорректированным. Разработанный авторами метод предусматривает отбор только тех переменных, которые имеют непосредственное отношение к развитию анализируемой системы, будь то система контроля за окружающей средой или система управления технологическим процессом в действующем производстве и т.д. Далее предполагается разработка достаточно детальных сценариев для выявления опасностей, угрожающих системе, и необходимого противодействия им. Предусматривается отбор среди множества возможных сценариев наиболее пригодных для последующего анализа, а также процедуры использования компьютеров для разработки неискаженных сценарных прогнозов. Рассмотрим перечисленные процедуры более детально. Прежде, чем приступить к разработке сценария, предполагается провести анализ ситуации с определением основных действующих сил, основных взаимоотношений между основными действующими в ней факторами, необходимую детализацию и структуризацию ситуации. Отбор переменных в этом методе предполагает использование экспертов.