Общий обзор оценивания программ и политик.
Eval_vishka - жж
Определения
Оценка (EVALUATION) - аналитический интсрумент или процедура, предназначенная для измерения прямых эффектов, результативности и долгосрочныз последствий реализации гос-х программ, отраслевых политик, оценки регулирующего воздействия, а такде программ равития, проектов некоммерческого сектора
Оценочное исследование - междисциплинарное исследование, использующее экономические, социологичекие, политилоические методы в соответствии с признаннымоткрытами стандартами (руководящими принципами)национальных и международных обществ по оценке.
Для разграничения между исследовательскми подходами служит уже известных политико управленческий цикл policy-cycle
Policy research - направлено на обобщающий анализ политического цикла
Implementation research - нацелено на изучение в первую очередь процесов реализации политики (и их связи с формулированием политики)
Evaluation research - фокусируе внимание на результатах (и обусловленностью их предшествующими этапами политик)
Показатели результативности:
Input - ресурсы, издержки, затраты. Ссе что дается гос органу для выполнения каких-либо функци
Output - непосредственный результат, объем предоставляемых гос услуг. Гос органы тратят определнное кол-во ресурссв с целью обслужить определенное число людей, это число людей и будет составлять объем предоставляемых услуг
Outcomes - конечный результат, социальный результат. Например, снижение безработицы, рост доходов населения.
Типологии оценивания
Какой этап проведения оценивания
Ex-ante evaluation - предаврительное (прогнозное) оцениваниея
On - going evaluation -Сопровождение оценивания (мониторинг)
Ex-post evaluation- Итоговоое (суммирующие) оценивание
Meta-evaluation- Мета-оценивание (оценка уже проведенных оценочных исследований в данном секторе)
Как проводится оценивание?
Внутреннее оценивание
Само-оценивание
Внешнее оценивание
Кто проводит оценивание?
Академические (научные) оценочные исследования
Конрактные (коммерческие) оценочные исследования
Фрилансеры (независимые консультанты)
Основые задачи оценивания.
Спрогнозировать возможные последствия, результаты реализации гос программы, воздействия аконопроекта (на этапе разработки)
Обеспечить обратную связь (сопровождающие исследования)
Оценить степен достижения намеченные целей
Оценить, как и в какой мере наблюдаемые изменения связаны с проведенными мероприятиями программы\политики
Предоставить в распоряжения заказчика доказательную, фактическую информация для усиления "политической поддержки" данной программы\политики (или наоборот ее "торможения")
Предыстория развития оценки
Конец 50-х
Следствие т.н. "спутникового шока" - после запуска первого в истории спутрика СССР в октябре 1957 года американское правительсво выделило в рамках модернизации нацчной и образовательсной системы значительные средства на переход от системы аккредитации образовательных учреждений к системе оценки и мониторинга
Середниа 60-х
С началом развертывания многочисленныз гос. социальных программ (сначала в США, затем - в западной Европе) потребовалась итоговая оценка их эффективности
Однако оценка программ (в широком смысле) имеет более длительную историю, начинающуюся приблизительно за 150 лет до "бума" использования оценивания на гос уровне.
Середина 19 века - первые социальные реформы в США и Великобритании (законы оь оказании помощи неимущим). Оценка носит неофициальный и несистематический характер, принимала форму созданных правительством комиссий для исследования реформируемой сферы, например в Великобритании:
1850: Королевская комиссия о оценке начального образования в Ирладнии - после получения данных о низком уровне образования в национальных школах (рекомендовано вндрить опыт английских школ, где з\п учителей частично зависела от уровня оценок учащихся на экзаменах)
1882: Королевская комиссия по оценке инфекционных больницах (рекомендовано открыть больницы для всех граждан)
В США самая ранняя официальная оценка была проведена в 1815 году: Армейкий отдел Артиллерии составил систему инструкций для "однородности изготовления всего артиллерийского оружия"
Бостон (1845): министерство образования штата провело первую формальную попытку оценить работу школ.
Помимо оценки качетсва образовательных программ комиссией преследовалась еще одна цель - сбор данных для сравнения школ.
Аналогичные подходы в Российской империи и СССР
Совет по делам местногт озяйства (1908-1910): Обсуждение законопроектов с местными деятелями.
В рамках планирования развивались:
Методики прогнозирования (срв "предварительное оценивание")
Показатели планирования (срв "целевые индикаторы")
Эталонное сравнение (срв "Бенчмаркинг")
Ежегодные отеты выполнения плана (срв "Мониторинг")
Другие аналогичные процедуры и подходы:
Партхозактивы (срв "Публичные консультации")
Оценка научно-технического прогресса (срв "оценивание в области исследований, инноваций и технологий")
Система Санэпиднадзора (срв "мониторнинг СПИДа")
Волны развития оценивания
Первая волна (1960-е )- фокус на итоговое оценивание масштабных национальных приоритетных программ "государственого благосостояния"
Стратиегически необходимыми элементами были признаны институционализация и внедрение прогнозировния\оценочных процедур
Оценивание политик (в идеале - полноценное, научно обоснованное исследование) изначально было направлено на анализ конечных целей и непосредственных эффектов, последствий их реализации.
Внедрение оцнивания на этом этапе было направлено на улучшение результатов проведения политик и маскимимазию эффективности воздействия тех или иных программ
Лидер - США, в Европе (с конца 60-х) - Германия и Швеция
Вторая волна (с середины 70-х) - в результате бюджетного кризиса большой упор делается на сокращение гос-х расходов:
Середина 1970-х - мировой экономический и бюджетный кризисы ("нефтяной шок" 1973 года)
Необходимость сокрвщения бюджетных расходов
Усилия направлены на максимизацию экономической эффективности и достижение реально работающих политических механизмов
Оценивание политик получило новый импульс, связанный с внедрением предварительных, прогнозных оценок
Яркими предстваителями данного периода являются Нидерланды и Великобритания
Третья волна (с 1990-х) - волна административных реформ по лекалам new public management, оценка закрепляется законодательно:
Новое гос управление, заимствование концепций и инструментов изчастного сектора, основано на управленческом цикле
Заимствование 3-х уровневой схемы реструктурирования центральной ИВ воплощает такой стадиальных подход. При этом устанавливается непосредственная связь между автономными и ответственными гос ведомствами\фазами политио-управленческого цикла, с одной стороны, и большей эффективностью управления с другой.
Яркие представители - Швейцария и англосаксонские страны
Итоги развития к началу 21 века.
В настоящее время за рубежом оценка:
Сложивщаяся индустрия на растущем рынке, с начавшейся специализацияе компании
С профиьными кафедрами, магистерскими программами, аспирантурами
С проф журналами и спец изданиями
С нац и международными ассоциациями, создавщими стандарты оценок
В швейцарии, франции оценка эффективности внедрена на уровне федеральной конституции
Прочитать в ридере!
Оценивание в России до 2004 года
До 2004 года в России оценивание программ и политик развивалось в секторе НКО (иностранные доноры закладывают по умолчанию 2-7% бюджета на оценивание)
Немногие отечетсвенные специалисты в области социологии и госуправления, включенные в международное академического сообщество, постепенно вводили в свои учебные курсы и прикладные исследования соответствующие подходы.
С 2004 года бюджетная и административная реформы постепенно сформировали запрос на мониторинг и контроль результативности, а реформа технического регулирования - на подготовку ФЭО дл технических регламентов, призванных прийти на смену советской системе ГОСТов.
Реформистский импульс первого президентского срока В. Путина и потекшие министерсукие НИРы "нефтяные еньги" вызвали к жизни многие рационально-ориаентированные подходы.
Интенсивность внедрения оценивания в гос-ве и обществе: стадии 1 и 2:
1.Минимальные требования к проведению гос-й политики:
Аудит целевого использования фин. Средств
Мониторинг исполнения законов.
Интервенционистская гос политика
Мониторинг реализации целевых программ и най проектов
Системы индикаторов применяются для оценки и деятельности регион. И метс. Властей
В ведомствах (парламенте) создаются подразделения, ответственные за оценку
Взаимодействие с бизнесом:
Оценка регулирующего воздействия обязательна, но носит формальный характер
Проводятс публичные консультации с участием бизнес-ассоциаций и СРО
Бизнес заказывает в консалтинговых фирмах\университетских центрах оценку своих корпоративных программ
Оценивание встроено в госу-ое и корпоративное управление и в общественные института:
Оценка политиу и программ является такой же "индустрией" как и оценка бизнеса (имущества)
Происходит интеграция с менеджериальными подходами типа Total Quality management
Оценка внедрена снизу доверху
Гос-е органы задействованы в оценке эффективности на всех этапах.
Лекция 4.
Организации. Работающие в области оценки:
Более 60.
На международном уровне
IOCE - международная организация по сотрудничеству в области оценки
IDEAS- международная ассоциация оценки развития
На межрегиональном уровне:
AEA - американская ассоциация по оценке
AES - Австрало- Азиатскаое общество оценки
AfrEA - Африканская Ассоциация по Оценке
EES - Европейское общество оценки
ReLAC - Латино-Американская и Карибская сеть по оценке
IPEN - Международная сеть "Оценки Программ" (СНГ)
Национальные проекты
Профильные департаменты международных организаций (UNICEF, UNEG, World Bank Group)