Оценка качества дошкольных образовательных программ в США Бодрова Е.В. ebodrova@toolsofthemind.org. - презентация

1 Оценка качества дошкольных образовательных программ в США Бодрова Е.В.

2

3 Cуществующие практики Оценка по структурным показателям Оценка по результатам Оценка по качеству взаимодействия взрослых с детьми

4 Implementation Science = Системное исследование условий успешности программ (не только образовательных)

5 Fixsen, D. L., Naoom, S. F., Blase, K. A., Friedman, R. M. & Wallace, F. (2005). Implementation Research: A Synthesis of the Literature. Tampa, FL: University of South Florida, Louis de la Parte Florida Mental Health Institute, The National Implementation Research Network (FMHI Publication #231). Implementation Research: A Synthesis of the Literature © Dean Fixsen, Karen Blase, Robert Horner, George Sugai, 2008

6 Оценка по структурным показателям Quality Rating and Improvement Systems (QRIS)

7 Квалификация педагогов Отношение числа детей и взрослых; число детей в группе Связь с семьей Качество предметной среды

8 Оценка содержания образования Эффективность программ

9 Условия успеха Эффективное ПРИМЕНЕНИЕ ПРОГРАММА НЕ эффективное Эффективная НЕ эффективная УСПЕХ

10 Эффективные программы Что считать критерием эффективности? Стадии проверки эффективности Эффективность в различных условиях

11 Что считать критерием эффективности? Показатели на уровне ребенка – какие? – как мерять? – когда мерять? – в чем специфика дошкольников?

12 Что считать критерием эффективности? Показатели на уровне школы или детского сада – какие? – у кого мерять? – как мерять? – когда мерять?

13 Подход к отбору эффективных программ Программы отбираются на основе «научно обоснованных» и «научно-доказательных» содержания и методов – Следствия для практики teacher-proof уроки широкомасштабного образовательного эксперимента Reading First планируемые и не планируемые последствия

14 Подход к отбору эффективных программ Программы отбираются на основе их соответствия представлениям педагогов о – целях и задачах образования – специфике местных условий Программы выбираются на основе критериев, внешних по отношению к программе Программы выбираются по нескольким основаниям

15 Качество выполнения программы На уровне отдельного воспитателя или педагогического коллектива – понятие точности выполнения (fidelity of implementation) – проблема измерения следовать букве или следовать духу? какие изменения допустимы?

16 Качество выполнения программы На уровне образовательной системы – организация подготовки и переподготовки – организация мониторинга и аттестации – организация сбора и обработки данных – обратная связь

17 © Fixsen & Blase, 2008 Successful Student/Family Outcomes Core Implementation Components Competency Drivers Organization Drivers Leadership Program/Initiative (set of practices) How: What: Why: Capacity to provide direction/vision of process Staff capacity to support students/families with the selected practices Institutional capacity to support staff in implementing practices with fidelity

18 © Fixsen & Blase, 2008 Performance Assessment (Fidelity) Coaching Training Selection Systems Intervention Facilitative Administration Decision Support Data System Integrated & Compensatory Competency Drivers Organization Drivers Leadership AdaptiveTechnical Successful Student/Family Outcomes Program/Initiative (set of practices)

19 Что нам уже известно На учащихся не могут оказывать влияние программы, которые не выполняются Подготовка учителей сама по себе недостаточна Изменения в образовательной политике сами по себе недостаточны Финансовые стимулы сами по себе недостаточны © Dean Fixsen, Karen Blase, Robert Horner, George Sugai, 2008

20 Два компонента необходимы для успеха Программа –Набор апробированных практик –Отбор на основе потребности, соответствия, наличия ресурсов, готовности к применению Инфраструктура поддержки –Обеспечивает точность применения программы (кто применяет, когда применяет, на каком уровне)

21 Оценка программ по показателям развития детей Практики и проблемы

22 Цели исследований образовательных программ Определить эффективность программы для достижения определенного результата для широкой популяции для специфической подгруппы – по сравнению со старыми программами (или отсутствием программ) – по сравнению с аналогичной (тоже новой) программой

23 Дизайн исследований образовательных программ Экспериментальный дизайн = золотой стандарт – рандомизированный по детям – рандомизированный по воспитателям идеален для устранения случайных факторов но практически неосуществим в силу сложностей, связанных с рандомизации детей

24 Экспериментальный дизайн: Иерархическая модель

25 Что нужно учитывать при интерпретации результатов исследований Если в исследовании использовалась иерархическая модель – эффект программы может быть статистически незначимым (или на пределе значимости) – это не всегда значит, что исследуемая программа неэффективна

26 Допущения часто принимаемые в процессе исследования Содержание программы – самый важный фактор, определяющий ее эффективность – хорошая программа не зависит от воспитателя ее выполняющего Основной показатель эффективности программы – результаты на уровне отдельного ребенка

27 Допущения – неявные --часто принимаемые в процессе исследования От отношения воспитателя к применяемой программе мало что зависит – попытки учитывать повышенную мотивацию воспитателей в «экспериментальной» группе – эффект Хоторна – в целях повышения внутренней валидности – в то же время не учитывается, что мотивация в экспериментальных условиях не всегда соответствует мотивации в реальных условиях – угроза экологической валидности

28 Пример сравнительного исследования эффективности популярных образовательных программ (PCER)

29

30 Оценка программ по критерию качества взаимодействий между взрослыми и детьми The Classroom Assessment Scoring System (CLASS)

31 Теоретическая модель

32 Параметры педагогической поддержки (CLASS) Эмоциональная Организационная Образовательная

33

34 Tools of the Mind