Постановление Правительства Российской Федерации от 07.02.2011 № 61

                   |              |
                   |  1  1      1 |
               1   |Z   Z   ...Z  |          ___
              Z  = | 21  22     2J|,     1 = 1,n,
                   |  .   .     . |
                   |              |
                   |  1  1      1 |
                   |Z   Z   ...Z  |
                   | J1  J2     JJ|
                   |              |

          1
     где Z   - результат сравнения  j-го фактора  с k-м, полученный
          jk
1-м экспертом.
              1
     Оценки  Z    назначаются в соответствии  с  вербально-числовой
              jk
шкалой значений следующим образом:

      |1, если j-й и k-й факторы имеют одинаковую важность;
      |3, если j-й фактор немного важнее k-го фактора;
Z   = |5, если j-й фактор важнее k-го фактора;
 jk   |7, если j-й фактор значительно важнее k-го фактора;
      |9, если j-й фактор абсолютно важнее k-го фактора.

     Эксперт    может    руководствоваться    и   более   детальной
классификацией  результатов  качественного  сравнения  критериев  и
                                  1
назначать промежуточные значения Z  , то есть 2, 4, 6, 8.
                                  jk
     При  заполнении матрицы накладывается и учитывается требование
взаимного дополнения оценок:

                                  1
                            Z   = ___.
                             jk   Z
                                   kj

     Применение  вербально-числовой  шкалы  повышает  объективность
оценок,  облегчает  задачу  привлекаемых к экспертизе специалистов,
обеспечивает сопоставимость оценок экспертов.
     Элементы  матриц  парных  сравнений   Z    рассматриваются   в
                                            jk
качестве оценок  отношений  действительных  искомых   коэффициентов
относительной важности характеристик, то есть:

                                 V
                                  j
                           Z   = __.
                            jk   V
                                  k

         Алгоритм обоснования критериев важности факторов

                          Исходные данные

     В  качестве  исходных данных используется иерархическая модель
развития  системы образования, отражающая взаимосвязь направлений и
основных  задач  и  их влияние на достижение конечной цели развития
образования.

         Алгоритм расчета относительной важности факторов

     Обоснование    критериев   относительной   важности   факторов
(направлений и задач) проводится в следующей последовательности:
     1) для   перечня   задач   и   направлений,   составленного  в
соответствии  с иерархической моделью развития системы образования,
разрабатываются  листы  экспертного  опроса  вклада  направлений  в
решение  основных  задач  развития образования и задач в достижение
конечной цели (матрицы парных сравнений факторов);
     2) разработанные   листы   заполняются   экспертами.   При  их
заполнении  используется  изложенная выше вербально-числовая шкала.
Рекомендации  по  заполнению  листа  опроса эксперта и листы опроса
экспертов  для  обоснования коэффициентов важности основных задач и
направлений   модернизации   будут   доработаны   при  формировании
методики    для    оценки   социально-экономической   эффективности
реализации Программы.
     Экспертами  сначала  заполняется  только  верхняя от диагонали
часть.   Заполнение  второй  части  матрицы  проводится  на  основе
использования   условия  взаимного  дополнения   оценок,  то   есть
      1
Z   = ___;
 jk   Z
       kj
     3) в   отношении   строк   матрицы,   заполненных  каждым  l-м
экспертом,  определяется  произведение  их  J элементов (ячеек), из
которого   извлекается  корень  степени  J,  то  есть  определяется
величина:

       *1     J         1     1     1     1           1
      Z   = корень из (Z   х Z   х Z   х Z   х ... х Z  ) =
       j                11    12    13    11          1J

        J        J    1        ___        ___
      корень из (П   Z  ), j = 1,J,   1 = 1,L;                 (г)
                 k=1  jk

     4) рассчитанные  величины  суммируются,  то  есть  в отношении
матриц, заполненных каждым экспертом, определяется величина:

                          *1        J    1
                         Z      = сумма Z ;
                          сумма    j=1   j

     5) на   основе   нормализации  полученных  чисел  определяются
коэффициенты  важности  факторов  развития  системы  образования  с
позиции каждого эксперта:

                  *1       *1
                 Z        Z
             1    j        j                 ___
            V  = ______ = _________,     1 = 1,L,               (д)
             j    *1        J    *1
                 Z        сумма Z
                  сумма    j=1   j

          1
     где V  - коэффициент важности  j-го  фактора  развития системы
          j
образования с позиции l-го эксперта.
     6) определяются   коэффициенты   важности   факторов  развития
системы   образования   как  среднее  арифметическое  коэффициентов
важности,  полученных  на  основе обработки результатов экспертного
опроса всех экспертов:

                    1      L    1          ___
               V  = __ х сумма V ,     j = 1,J.                 (е)
                j   L     l=1   j

     Пример расчета коэффициентов относительной важности факторов.
     Пусть    требуется    оценить   влияние   некоторых   условных
направлений  развития  системы образования (направления 1, 2, 3, 4)
в  решение некоторой основной задачи "З". При этом условимся, что к
опросу привлечено 2 специалиста.
     Определение  коэффициентов  относительной  важности каждого из
четырех  направлений  в  решении  задачи  "З"  проводится следующим
образом:
     разрабатывается лист экспертного опроса;
                              ___
     каждый  1-й эксперт (1 = 1,L) с использованием рекомендуемой в
данной методике вербально-числовой шкалы заполняет лист опроса;
                                                   *
     для каждого направления вычисляется величина Z ;
                                                   j
                                  *1
     определяется сумма значений Z  ;
                                  j
     аналогично  определяются  коэффициенты  относительной важности
направлений   развития   системы   образования  с  позиции  второго
эксперта   на   основе  заполненной  им  матрицы  парных  сравнений
направлений развития системы образования;
     определяются     коэффициенты     важности     рассматриваемых
направлений  развития  системы  образования в решении задачи "З" по
зависимости:

                          1     L    1          ___
                     V  = _ х сумма V ,     j = 1,J.
                      j   L    l=1   j

          V. Предложения по организации экспертной оценки
          социально-экономической эффективности Программы

     Для   решения   задачи   по   организации   экспертной  оценки
социально-экономической  эффективности  Программы  следует выделить
объекты  наблюдений  и  исследований  в  сфере образования, которые
будут  включены в мониторинг с целью оценки социально-экономической
эффективности   на  основе  разработанных  предложений:  учреждения
образования,  органы государственного управления различного уровня,
бизнес-сообщество, население.
     Основные  характеристики указанных групп будут сформированы на
основе  данных  органов  государственной  статистики,  а  также при
формировании   выборок   и   панелей   для  проведения  наблюдения,
экспертных   обсуждений,   фокус-групп   и   тематических  опросов.
Выборочный  характер  исследования  позволит  выявлять  гипотезы об
отдельных    социально-экономических    эффектах   и   осуществлять
моделирование  процессов,  проектировать  механизмы  возникающих  в
ходе  реализации  Программы  зависимостей,  что  затем  можно будет
структурировать  для  организации  количественной проверки, а также
сопоставления с целевыми индикаторами и показателями Программы.
     Такой   подход   нацелен  на  комплексную  оценку  ситуации  и
выявление  косвенных  эффектов,  которые  сложно  отнести  к итогам
каких-либо  отдельных мероприятий или проектов Программы. Системный
макроанализ   даст  возможность  поиска  взаимосвязей  эффектов  от
реализации   Программы   с   эффектами   от   других  программ  как
федерального,  так  и регионального уровней, и позволит формировать
стратегические  модели  и  прогнозировать  долгосрочные  эффекты по
итогам реализации задач Программы.
     Анализ   данных   по   итогам   наблюдения   указанных   групп
целесообразно  проводить  в  рамках  отдельных субъектов Российской
Федерации,  где  особое  внимание  рекомендуется  уделять следующим
аспектам:
     перечень услуг, оказываемых системой образования;
     организационно-правовые формы учреждений образования;
     источники финансирования учреждений образования;
     численность и структура занятых в системе образования;
     динамика   развития   учреждений   образования   за  последние
несколько лет.
     Количественный  и  качественный  анализы  приведенных факторов
позволят   выявить  структуру  и  ключевые  социально-экономические
характеристики   системы   образования   в   наблюдаемых  субъектах
Российской   Федерации.   Предполагается  сопоставление  полученных
сведений   как   для   формирования   сравнительных   характеристик
регионов,   так   и   для  поиска  точек  соприкосновения  с  иными
мероприятиями  и  программами федерального и регионального уровней.
Данный  подход  не  является  корректным для прямого применения при
построении  рекомендаций в рамках сравнительного анализа, поскольку
не  будет учитывать в должной мере специфику регионов, однако итоги
такого  сопоставления  имеют  ценность  при  формировании гипотез и
вопросов  для  проведения  количественных  исследований  в группах,
взаимодействующих с системой образования.
     При  проведении макро-анализа в субъектах Российской Федерации
для  оценки  социально-экономических  эффектов  каждая из указанных
выше  групп,  взаимодействующих  с  системой образования, потребует
краткой   общей   характеристики,  а  также  исследования  аспектов
взаимоотношений  с  системой  образования  по  следующей  схеме (на
основе   данной   карты   предполагается   построение  гипотез  для
количественных и качественных исследований).
     Таким  образом, можно выявить следующие тематические блоки для
макроанализа    социально-экономической    эффективности    системы
образования в регионах:
     общая  оценка  уровня  развития системы образования в регионе,
экспертные   комментарии   к   полученной   структуре   на   основе
статистических данных;
     проблемы  и перспективы развития системы образования региона в
различных  аспектах  (экономический,  законодательный, социальный и
др.) -   шкалирование  факторов,  препятствующих  развитию  системы
образования по степени их значимости;
     комментарии    к   сводным   итогам   по   каждой   из   групп
взаимодействия  (с  чем  связаны  полученные  ожидания, претензии и
т. д.);
     ресурсная   база   системы   образования   региона  (источники
финансирования, кадровые, информационные и иные виды ресурсов).
     В   ходе   методической  доработки  инструментария  на  основе
экспертного обсуждения перечень тем может быть расширен.
     Предполагается  получение данных по итогам работы с различными
информационными    источниками    для    проведения    макроанализа
социально-экономической эффективности Программы в регионах.
     Количественные данные должны охарактеризовать:
     учреждения  образования,  действующие  на  территории субъекта
Российской   Федерации,  с  указанием  основных  характеристик  (на
основе   информации   органов   статистики   и  органов  управления
образованием);
     структуру     спроса     населения,     органов    власти    и
бизнес-сообщества  на  образовательные,  социальные,  культурные  и
иные  услуги, которые могут быть предоставлены системой образования
региона;
     приоритеты  населения,  органов  власти  и бизнес-сообщества в
деятельности  системы  образования  региона  (доли  ключевых  групп
интересов,  считающих  важными  решения  различных проблем развития
образования);
     общую    динамику   развития   системы   образования   региона
(демографическая, экономическая, социальная ситуация).
     Данная   информация  позволит  сопоставить  динамику  развития
системы   образования   с  динамикой  развития  иных  характеристик
региона,   а  также  проведения  сравнительного  анализа  различных
субъектов    Российской    Федерации   и   агрегирования   сведений
федерального уровня.
     Качественные данные должны охарактеризовать:
     различные  аспекты взаимоотношений системы образования региона
с  ключевыми  группами интересов (население, государственный сектор
и бизнес);
     мнения   указанных  трех  групп  о  перспективах  и  проблемах
развития системы образования региона;
     оценку потребностей в услугах системы образования;
     видение   социально-экономической   эффективности   реализации
Программы в регионе представителями различных целевых групп.
     Все   перечисленные   аспекты   являются  крайне  важными  для
макро-анализа  и  формирования дальнейших инструментов исследования
социально-экономической эффективности.
     Кроме  того, предполагается проведение контент-анализа средств
массовой   информации  (в  том  числе  интернет-ресурсов)  с  целью
выявления  тех  аспектов деятельности систем образования регионов и
социально-экономических  эффектов,  которые явились информационными
поводами  и  были  освещены в местной прессе и сети Интернет. Такой
анализ  позволит  дополнить  характеристики взаимоотношений системы
образования  и  различных  групп,  выявить  наиболее  транслируемые
аспекты  социально-экономического  развития  по  итогам  реализации
Программы  и  иные подробности, позволяющие косвенно верифицировать
полученные из иных источников данные.


                          ______________