Совещание региональных координаторов 2 марта – 4 апреля 2012 г. Проведение исследования PISA-2012. - презентация

1 Совещание региональных координаторов 2 марта – 4 апреля 2012 г. Проведение исследования PISA-2012

2 Сроки проведения и передача материалов в Национальный центр Сроки проведения: с 9 апреля по 18 мая 2012 года Передача материалов: не позднее 25 мая 2012 года Все материалы исследования должны быть переданы в Национальный центр не позднее 25 мая 2012 года. 2

3 Материалы тестирования Что получает Региональный координатор черном пакете 1. Комплект материалов для Регионального координатора в черном пакете 2. Материалы для Проводящего письменное тестирование в образовательном учреждении: «открытый» конверт жёлтый «закрытый» пакет с тетрадями фиолетовый «закрытый» пакет с анкетами 3

4 Материалы тестирования Что получает Региональный координатор 3. Материалы для Проводящего компьютерное тестирование в образовательном учреждении: «открытый» конверт пакет с USB-накопителями 4

5 Материалы тестирования Что получает Региональный координатор Комплект материалов для Регионального координатора Комплект материалов для Регионального координатора: руководство по проведению тестирования руководство по проведению компьютерного тестирования тестовые тетради (1, 7, 8, 10, 13, 71) анкета для учащихся и студентов (Формы А, B и С) анкета для администрации ОУ Отчет по результатам исследования PISA

6 Материалы тестирования Что получает Проводящий письменное тестирование 1 конверт «открытый» для каждого образовательного учреждения содержит: Список учащихся, отобранных для тестирования Форму участия в письменном тестировании – 2 экз. Протокол проведения – 2 экз. Руководство по проведению тестирования Анкету для администрации ОУ Форму возврата материалов Отчет по результатам исследования PISA

7 Что получает Проводящий письменное тестирование 1 жёлтый «закрытый» пакет содержит: Тетрадь с тестами для каждого отобранного учащегося/студента плюс 1-2 дополнительные тетради 1 фиолетовый «закрытый» пакет содержит: Анкету для каждого отобранного учащегося/студента плюс 2 дополнительные анкеты Материалы тестирования 7

8 Что делать с полученными материалами? «Закрытые» пакеты откладываются до тестирования – их можно вскрыть не раньше чем за 1 час до начала проведения исследования. С содержимым конверта необходимо ознакомиться заранее. 8

9 Кто проводит тестирование? Наиболее предпочтительно, чтобы Проводящие письменного и компьютерного тестирований не являлись сотрудниками ни одного из образовательных учреждений, которые будут принимать участие в исследовании PISAНаиболее предпочтительно, чтобы Проводящие письменного и компьютерного тестирований не являлись сотрудниками ни одного из образовательных учреждений, которые будут принимать участие в исследовании PISA. Проводящие тестирования обязательно должны пройти предварительную подготовку на семинаре по проведению исследования. 9

10 Кто проводит тестирование? Тестирование проводится: - подготовленными специалистами регионального уровня или, в исключительных случаях, - преподавателями образовательных учреждений. 10

11 Обязанности Проводящего тестирование –проверка и хранение материалов, полученных от Регионального координатора; –подготовка к проведению исследования; –проведение письменного тестирования и анкетирования или компьютерного тестирования; –обеспечение стандартизированной процедуры тестирования; –документальное подтверждение того, что исследование в школе проводилось в соответствии с международными требованиями: Заполнение Формы участия Заполнение Протокола проведения тестирования –сбор материалов исследования; –отправка материалов в Региональный центр. 11

12 Проверка и хранение материалов, полученных от Регионального координатора Материалы письменного тестирования:для каждого учащегося, отобранного для тестирования, предусмотрена одна тетрадь и одна анкета. На обложке каждой тетради и анкеты (кроме дополнительных) есть наклейка с указанием идентификатора учащегося. Материалы письменного тестирования: для каждого учащегося, отобранного для тестирования, предусмотрена одна тетрадь и одна анкета. На обложке каждой тетради и анкеты (кроме дополнительных) есть наклейка с указанием идентификатора учащегося. Новосибирская область г. Новосибирск, МОУ СОШ 138 Полный ID учащегося: I00004 Ф.И. класс,курс,12 : Алексанов Илья, 10а тетради: 13 Форма анкеты: С 1 45 анкет 45 тетрадей МАКСИМУМ Новосибирская область г. Новосибирск, МОУ СОШ 138 Полный ID учащегося: I00004 Ф.И. класс,курс,12 : Алексанов Илья, 10а тетради: 13 Форма анкеты: С 12

13 1-2 дополнительные тетради и 2 дополнительные анкеты предназначены для использования в случае обнаружения брака печати или повреждений, делающих невозможным полноценное участие учащегося в тестировании или анкетировании. В случае использования дополнительных тетрадей или анкет на их обложку должна быть переписана следующая информация с наклейки, размещенной на бракованной или поврежденной тетради или анкете: - Полный ID учащегося; - Фамилия и имя учащегося, класс/группа. Проверка и хранение материалов, полученных от Регионального координатора 13

14 Проверка и хранение материалов, полученных от Регионального координатора Список обучающихся, отобранных для тестирования (1 экз. в конверте) СПИСОК ОБУЧАЮЩИХСЯ, ОТОБРАННЫХ ДЛЯ ТЕСТИРОВАНИЯ PISA-2012 (MS) 2 14

15 Список обучающихся, отобранных для тестирования содержит информацию, которая запрашивалась в ОУ Национальным центром, проводящим исследование PISA. Список учащихся должен быть проверен Координатором образовательного учреждения; при необходимости в него вносятся исправления, касающиеся фамилии и имени учащегося, пола, даты рождения, программы обучения, кода исключения. Перед проведением тестирования Проводящий тестирование должен убедиться в том, что в Список учащихся внесены все необходимые изменения. Проверка и хранение материалов, полученных от Регионального координатора 15

16 Проверка и хранение материалов, полученных от Регионального координатора ФОРМА УЧАСТИЯ В ПИСЬМЕННОМ ТЕСТИРОВАНИИ PISA-2012 (MS) 3 Форма участия (2 экз. в конверте) 16

17 Проверка и хранение материалов, полученных от Регионального координатора (2 экземпляра в конверте) ПРОТОКОЛ ПРОВЕДЕНИЯ ПИСЬМЕННОГО ТЕСТИРОВАНИЯ PISA

18 Проверка и хранение материалов, полученных от Регионального координатора ФОРМА ВОЗВРАТА МАТЕРИАЛОВ 56 1 экземпляр В конверте 18

19 Руководства по проведению письменного и компьютерного тестирований Руководство по проведению тестирования и Руководство по проведению компьютерного тестирования содержат всю необходимую информацию о: подготовке к письменному тестированию и анкетированию или компьютерному тестированию; требованиях, предъявляемых к тестированиям; процедуре проведения исследования (Сценарий проведения тестирования); подготовке материалов к отправке в Национальный центр. 19

20 Проверка и хранение материалов, полученных от Регионального координатора Материалы для проведения компьютерного тестирования: USB-накопители (число USB-накопителей зависит от числа отобранных учащихся и выбранной модели проведения компьютерного тестирования); Форма с данными для входа к систему тестирования (1 форма для каждого отобранного учащегося); Форма участия в компьютерном тестировании (2 экз.); Протокол проведения компьютерного тестирования (2 экз.). Руководство по проведению компьютерного тестирования 20

21 Обязанности Проводящего тестирование Каким образом должна быть обеспечена стандартизированная процедура тестирования? 21

22 Обеспечение правильного распределения времени на выполнение письменного теста и заполнение анкеты 1. Организационная часть: раздача тетрадей, чтение инструкции и т.д минут (примерно) 2. Тестирование (первый час) 1 час (ровно) 3. Перерыв не более 5 минут 4. Тестирование (второй час) 1 час (ровно) 5. Ответы на вопросы анкеты в конце тетради 5 минут 6. Перерыв 15 минут 7. Анкетирование 40 минут (примерно) Важно, чтобы учащиеся успели ответить на все вопросы анкеты. При необходимости время на заполнение анкет можно добавить. 8. Сбор материалов тестирования и анкетирования 3-5 минут ( примерно) Всего:около 3,5 часов 22

23 Обеспечение правильного распределения времени на выполнение компьютерного теста 1. Подготовка компьютерного класса 15 минут 2. Регистрация учащихся при входе в систему тестирования (с указанием пароля) 5 минут 3. Выполнение тренировочного теста 15 минут 4. Выполнение основного теста 40 минут (ровно) 5. Завершение работы, сбор материалов и передача данных 15 минут Всего:около 1,5 часов 23

24 Обязанности Проводящего тестирование –Обеспечение стандартизированной процедуры тестирования: Обеспечение правильного распределения тестовых материалов между учащимися При проведении письменного тестирования важно: - удостовериться в том, что учащиеся, сидящие за одной партой, выполняют разные варианты теста. (При необходимости нужно рассадить учащихся.) - удостовериться в том, что каждый учащийся получил свою тетрадь с предусмотренным именно для него номером (на тетрадях имеются наклейки с указанием фамилии ученика). 24

25 Обязанности Проводящего тестирование –Обеспечение стандартизированной процедуры тестирования: При проведении компьютерного тестирования важно: - удостовериться в том, что каждый учащийся получил свою Форму с данными для входа в компьютерную систему. 25

26 Обязанности Проводящего тестирование – Обеспечение стандартизированной процедуры тестирования: Тестирование должно проходить строго по Сценарию проведения, приведенному в Руководстве по проведению тестирования. 26

27 Обязанности Проводящего тестирование Документальное подтверждение того, что исследование в ОУ проводилось в соответствии с международными требованиями: Заполнение Формы участия Заполнение Протокола проведения тестирования Расчет коэффициента участия учащихся в тестировании и проведение дополнительного тестирования (при необходимости)

28 Использование кодов при заполнении Формы участия и Протокола проведения в исследовании PISA-2012 Формы участияПротокола проведения письменного тестирования В исследовании PISA при заполнении Формы участия и Протокола проведения письменного тестирования используются два вида кодов: Двузначный код тестирования/анкетирования Первая цифра Первая цифра означает номер Проводящего. Если в ОУ только один Проводящий, то двузначный код будет начинаться с цифры «1», если два Проводящих, то для второго он будет начинаться с цифры «2». Вторая цифра Вторая цифра означает порядковый номер тестирования или анкетирования, проводимого данным Проводящим. Однозначный код (статус участия учащихся в тестировании и анкетировании) ставится в колонки 9-10 Формы участия Тестирование (колонка 9): 1 – присутствовал; 0 – отсутствовал; 2 – частично присутствовал (отсутствовал более 10 мин.) Анкетирование (колонка 10): 1 – присутствовал; 0 – отсутствовал. 28

29 Использование кодов при заполнении Формы участия и Протокола проведения в исследовании PISA-2012 Формы участияПротокола проведения компьютерного тестирования В исследовании PISA при заполнении Формы участия и Протокола проведения компьютерного тестирования используются два вида кодов: Двузначный код тестирования Первая цифра Первая цифра означает номер Проводящего. Если в ОУ только один Проводящий, то двузначный код будет начинаться с цифры «1», если два Проводящих, то для второго он будет начинаться с цифры «2». Вторая цифра Вторая цифра означает порядковый номер компьютерного тестирования, проводимого данным Проводящим. Однозначный код (статус участия учащихся в тестировании) ставится в колонку 8 Формы участия 0 – не участвовал (не по причине технических проблем); 1 – участвовал; 2 – частично участвовал (не по причине технических проблем) 3 – частично участвовал (по причине технических проблем); 4 – не участвовал (по причине технических проблем). 29

30 ПРИМЕРЫ использования кодов тестирования и/или анкетирования Протокол проведения тестирования Один проводящий тестирование и анкетирование Два проводящих тестирование и анкетирование Тестирование и анкетирование проводит один человек в один день Тестирование и анкетирование проводят два человека в один день, одновременно в двух отдельных помещениях. Тестирование и анкетирование проводит один человек в один день. Дополнительное прово- дится в другой день тем же Проводящим. Код 11 Код 11 – основное Код 12 - дополнительное Код 11 – один Проводящий Код 21 – другой Проводящий Форма участия 30

31 ПРИМЕРЫ использования кодов участия в исследовании (статус участия учащихся, заполнение Формы участия в письменном тестировании) Заполняется Проводящим во время тестирования и анкетирования 31

32 Заполнение Протокола проведения тестирования PISA-2012 В Протоколе указывается: ID региона ID образовательного учреждения Код тестирования /анкетирования Дата проведения ФИО Проводящего Время выполнения теста Число использованных тетрадей и анкет Комментарии (проблемы, происшествия и т.п. в пунктах 5-8) 32

33 Определение необходимости проведения дополнительного тестирования Для определения необходимости проведения дополнительного письменного тестирования потребуются следующие данные: Число А – Число учащихся, вошедших в Список обучающихся, отобранных для тестирования. Обычно это число равно 43. Но в ряде ОУ оно может быть меньше (в зависимости от общего числа учащихся 1996 г.р.); Число B – Число учащихся, которым в колонке 12 Списка обучающихся, отобранных для тестирования проставлен один из следующих кодов исключения: «2», «3», «4», «5» или «n»; Число C – Число учащихся, присутствовавших на тестировании. 33

34 Расчет коэффициента участия Коэффициент R (процент) участия учащихся в основном тестировании рассчитывается по следующей формуле: Число учащихся, присутствовавших на тестировании R = х 100 % Общее число учащихся, вошедших в Список обучающихся, за исключением тех, у кого в колонке 12 проставлен код исключения ИЛИ C R = х 100 % A – B 34

35 ПРИМЕР расчета коэффициента участия В образовательном учреждении для тестирования было отобрано 15 учащихся 1996 г.р. (число А). Двое из них имеют код исключения в колонке 12 Списка учащихся, отобранных для тестирования (число B). Двенадцать учащихся присутствовали на тестировании (число С). Рассчитаем коэффициент участия для этого ОУ: Коэффициент участия оказался выше 90%. 35

36 ПРИМЕР расчета коэффициента участия Если R (коэффициент участия) ниже 90%, то необходимо проводить дополнительное тестирование для учащихся, отсутствовавших на основном тестировании. При условии небольшого числа отобранных учащихся (до 10 человек) допускается отсутствие только 1 человека; в этом случае дополнительное тестирование не проводится. 36

37 Обязанности Проводящего тестирование Во время тестирования можно отвечать на вопросы только по процедуре тестирования, но не по содержанию тестаВо время тестирования можно отвечать на вопросы только по процедуре тестирования, но не по содержанию теста Учащиеся могут пользоваться калькуляторамиУчащиеся могут пользоваться калькуляторами Во время анкетирования можно отвечать на вопросы учащихся, поясняя смысл вопросов анкеты. Для этого необходимо использовать комментарии для Проводящего, приведенные в Приложении 1 Руководства по проведению.Во время анкетирования можно отвечать на вопросы учащихся, поясняя смысл вопросов анкеты. Для этого необходимо использовать комментарии для Проводящего, приведенные в Приложении 1 Руководства по проведению. 37

38 Сбор материалов исследования и их проверка После окончания тестирования и анкетирования Проводящий тестирование должен собрать ВСЕ тетради и анкеты ИЛИ USB-накопители вместе с откорректированным Списком учащихся, заполненными соответствующими Формой участия и Протоколом проведения тестирования Статус участия учащегося должен быть зафиксирован в Форме участия Все пункты Протокола проведения тестирования должны быть заполнены 38

39 Сбор материалов исследования и их упаковка Перед отправкой материалов исследования в Национальный центр необходимо проверить наличие следующих материалов (по каждому образовательному учреждению): 39

40 Порядок упаковки материалов исследования Список учащихся, отобранных для тестирования Пачка 1 – Письменное тестирование/анкетирование Форма участия Протокол проведения тестирования Заполненные тетради и анкеты для учащихся/студентов Другие материалы Неиспользованные тетради/анкеты для учащихся и студентов Дополнительные экземпляры тетрадей, анкет для учащихся и студентов Пачка 2 – Компьютерное тестирование Форма участия Протокол проведения тестирования USB-накопители Форма возврата материалов Анкета для администрации ОУ Пачка 3 – Другие материалы письменного тестирования (если использовались) Пачка 4 – Другие материалы компьютерного тестирования (если использовались) 8 40

41 Убедительная просьба! Просим Вас сообщить в Национальный центр об отправке материалов. Спасибо! Успехов в проведении! 41

42 Тел./факс: (499) cайт: centeroko.ru