HIV AIDS UNIT Задачи семинара по M&О (Acknowledgement: IEU, UNODC, Vienna)

HIV/AIDS Unit 1. Основы M&О 2. Разработка структуры оценки для проекта … 3. Используя уроки, полученные в 1&2 разработать структуры оценки для а) качества b) Воздействия национальных программ NSPs.

HIV/AIDS Unit По завершении семинара, участники изучат, обсудят и применят: базовые концепции, методы и инструменты для использования их в оценке; Узнают как разрабатывать вопросы по оценке, индикаторы… как мониторинговая информация/данные используются при оценке Разработают структуру оценки для проекта XEE/06/J20 вопросы для оценки, индикаторы качества и воздействия для национальной NSPs

HIV/AIDS Unit Основы Мониторинга и Оценки Жаннат Космухамедова Отдел по ВИЧ/СПИДу Прага, июнь 2007 год

HIV/AIDS Unit Мониторинг и Оценка Сработали ли усилия? Насколько эффективны были данные усилия? Если усилия были эффективными, то почему? Если неэффективными, то в чем причина их неэффективности? Какие уроки мы можем извлечь из этого? Постоянное наблюдение

HIV/AIDS Unit Мониторинг Надзор над уровнем заболеваемости и распространением инфекции Прогресс в деятельности программы Политические события Планирование действий на случай возникновения непредвиденных обстоятельств (управление рисками) Бюджет

HIV/AIDS Unit Надзор над уровнем заболеваемости и распространением инфекции Мониторинг Заболеваемость ВИЧ в Центральной Азии

HIV/AIDS Unit Надзор над уровнем заболеваемости и распространением инфекции Мониторинг Заболеваемость ВИЧ в Центральной Азии

HIV/AIDS Unit Мониторинг - Планирование действий на случай возникновения непредвиденных обстоятельств = подготовка к... "Что делать, если случается Х или У ?"

HIV/AIDS Unit Мониторинг - ВлияниеВлияние ВысокаяСредняяНизкая Высокая Средняя Низкая Вероятность того, что это произойдет

HIV/AIDS Unit Мониторинг - Вероятность того, что это произойдет ВлияниеВлияние ВысокаяСредняяНизкая Высокое Среднее Низкое Требует внимания !

HIV/AIDS Unit Мониторинг - Вероятность того, что это произойдет ВлияниеВлияние ВысокаяСредняяНизкая Высокое Среднее Низкое Вероятно требует меньшего внимания

HIV/AIDS Unit Мониторинг и Оценка T0T0 Tn

HIV/AIDS Unit По окончании программы Промежуточная Мониторинг и Оценка 2008

HIV/AIDS Unit K I S S Keep it Simple, Stupid Мониторинг и Оценка

HIV/AIDS Unit

Процесс или Оценка воздействия Кто Что Когда Где Как Что-то/(Ничего не) было сделано

HIV/AIDS Unit Процесс или Оценка воздействия Сколько времени потребовалось? Сколько тренингов было проведено? Сколько людей были обучены? Какие инструментарии были использованы? Кто принимал участие?

HIV/AIDS Unit Процесс или Оценка воздействия Были ли действия эффективны Насколько были эффективны Почему были эффективны/ почему нет Все они количественно измеримые

HIV/AIDS Unit Что мы измеряем в ходе ОЦЕНКИ? Efficiency Effectiveness Правомерность Социальная справедливость и беспристрастность Быстрота и скорость

HIV/AIDS Unit например, это потребовало (всего лишь) $100,000 и заняло (всего лишь) 12 месяцев для реализации Effectiveness Правомерность Социальная справедливость и беспристрастность Что мы измеряем в ходе ОЦЕНКИ?

HIV/AIDS Unit Efficiency Effectiveness Правомерность Социальная справедливость и беспристрастность Охват и воздействие Что мы измеряем в ходе ОЦЕНКИ?

HIV/AIDS Unit Efficiency Сколько, насколько, ск-ко жизней изменило Правомерность Социальная справедливость и беспристрастность Что мы измеряем в ходе ОЦЕНКИ?

HIV/AIDS Unit Но существует также ложная эффективность Пример: Данная деятельность стоило в половину меньше предыдущей и заняло половину времени, ушедшего на реализацию предыдущей деятельности. - Овации!! НО: Данная деятельность охватила лишь одну четвертую всей целевой группы и улучшила качество жизни лишь половины охваченных людей.

HIV/AIDS Unit Efficiency Effectiveness Правомерность Социальная справедливость и беспристрастность Правильность Юридическая? Этическая? Права человека? Гендерные, культуральные особенности? Что мы измеряем в ходе ОЦЕНКИ?

HIV/AIDS Unit В нашей работе мы сталкивались с подобными примерами -- пример, одна из стран Юго-Восточной Азии Можно решить проблему преступности на 95% за одну ночь! Просто убив всех мужчин!

HIV/AIDS Unit Два золотых правила : 1.Не причини вреда. - Наблюдающий и наблюдаемые не должны подвергаться риску. 2. Если это невозможно измерить, не делай этого. Т.е. результат деятельности может быть вредным, нежели полезным, и в случае, если невозможно определить, была ли деятельность полезной или вредной, данная деятельность не должна вестись.

HIV/AIDS Unit Outputs, outcomes, impacts ПРОДУКТ Отчеты, руководства Обзоры, Оценки Семинары, встречи Проекты, программы Работа, проделанная в рамках осуществления в рамках осуществленияпроекта Исход, результат Воздействие, влияние

HIV/AIDS Unit Outputs, outcomes, impacts Промежуточные достижения Отчеты, руководствавосприятие, качество, применение Обзоры, Оценки + вклад в знания Семинары, встречи+ изменение в убеждениях, поведении Проекты, программы + мера, характер достижения целей деятельности Исход, результат

HIV/AIDS Unit Outputs, outcomes, impacts Изменения на индивидуальном уровне, измеряемые на общем уровне Обзоры, Оценки Отчеты, руководства Семинары, встречи Проекты, программы Например, показатели ВИЧ снижены на 10% Воздействие,

HIV/AIDS Unit Outputs, outcomes, impacts ПродуктрезультатВоздействие, Правовая оценка + к нашим знаниям Пример

HIV/AIDS Unit Outputs, outcomes, impacts ПродуктрезультатВоздействие Правовая оценка + к нашим знаниям Мы не применяем новые знания Воздействие= 0

HIV/AIDS Unit Outputs, outcomes, impacts ПродуктрезультатВоздействие Тренинги для судей, прокуроров, правоохранительн ых органов 70% усваивают материал применяют новые знания Воздействие= снижение размеров торговли людьми на 15%

HIV/AIDS Unit Единый План Оценки Триединое исследование достоверности Первичное исследование (обзор) Результ ат Встречи с ключевыми людьми Обзор данных – официальная, стат. информация

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) «Миссия», главная цель, что мы хотим достичь в целом Ключевые результаты, говорящие о том, что задача была достигнута Продукты, необходимая для получения ключевых результатов Каким образом данные результаты были получены Вопросы, задаваемые для оценки успешности деятельности Механизм ответа на данные вопросы

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) Взаимосвязь

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) Детализация (n=1) (n=3) (n=12) (n=30) (n=60+) (n=120+)

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) Вопросы по оценке указывают нам на те индикаторы, которые должны быть определены. Они не могут быть выработаны после того, как определенное действие было совершено, на основании того, "чем мы располагаем".

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) Пример: Руководство Сколько времени заняло издание руководства? Полноценность, аккуратность, релевантность Сколько экземпляров и сколько лиц его получили? Как была воспринята информация? Как используется в настоящее время, как часто, какие части наиболее часто? Воздействие - под оценочные вопросы, информация до и после, официальные отчеты, и т.д.

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) Если наши вопросы для оценки говорят нам о том, что результаты не могут быть измерены, мы не приступаем к исполнению данных действий!

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) Не имеют определенного направления Количество Х Соотношение У Темп развития Z

HIV/AIDS Unit Структура ОЦЕНКИ Objective (Цель) Principle Outcomes (Результаты) Key outputs (Продукт) Activities (Деятельность) Evaluation questions (Вопросы) Indicators (Индикаторы) Снизить заболеваемость ВИЧ на 30% Увеличить охват услугами на 35% Это цели, а не индикаторы!

HIV/AIDS Unit SСпецифический, чувствительный MИзмеряемый AДостигаемый RСоответствующий, надежный, поддающийся отчетности TСвоевременный, основаный на времени. SMART, QUEST, FABRIC, PRAGMATIC

HIV/AIDS Unit Спасибо