1 Тест как инструмент измерения знаний обучающихся Дузкенева Найля Акатаевна Руководитель отдела тестирования ЦМК.

Презентация:



Advertisements
Похожие презентации
ТИПОЛОГИЯ ТЕСТОВЫХ ЗАДАНИЙ. Всё множество применяемых в практике тестирования форм заданий можно свести к четырем, каноническим, формам, выделяемым В.С.
Advertisements

РАЗРАБОТЧИК Т.В.ПАЛИЕВА ПЕДАГОГИЧЕСКОЕ ТЕСТИРОВАНИЕ КАК СРЕДСТВО ИЗМЕРЕНИЯ КАЧЕСТВА ОБУЧЕНИЯ.
«Совершенствование системы оценки уровня подготовки специалистов в области защиты населения и территорий, минимизации последствий радиоактивного загрязнения.
Инструментальные системы для создания компьютерных тестов.
Презентация-тест
Создание теста с помощью программы My Test МКОУ СОШ с. Вязовка учитель физики Харитонов Г.В.
Тестовые технологии как средство осуществления контроля качества исторической и обществоведческой подготовки учащихся. Редькина А.В. учитель истории и.
МАСТЕР-КЛАСС Критериально-ориентированное педагогическое тестирование Модуль 2. Внутренняя экспертиза тестов © РЭА им. Г.В. Плеханова © Управление качеством.
Тестовые технологии как средство повышения качества образования Педсовет г.
1 Система работы по составлению тестовых заданий и проведению тестирования с использованием программы MyTestX.
Итоговая диагностика познавательных метапредметных умений, 5 класс Демидова М.Ю., МЦКО
Методика организации тестового контроля знаний учащихся на уроках информатики.
1 Термины и определения Муратова Елена Анатольевна.
Компьютерное тестирование: возможности, технологии, специфика.
Тест ( в переводе с английского испытание, проба, исследование) это стандартизированное задание, по результатам которого судят о знаниях, умениях, навыках.
Немешаева А.Г. МОУ СОШ Использование тест - контроля на уроках математики.
Так С 1- С 4 представляют собой составное задание, или так называемый мини - тест. Он включает фрагмент источника и четыре вопроса - задания на его анализ.
ЕГЭ 2015 Каждый вариант экзаменационной работы состоит из двух частей, включающих в себя 40 заданий. Часть 1 содержит 35 заданий с кратким ответом, в их.
Методы оценивания учебных достижений учащихся. Функции проверки и оценки результатов обучения Учетно-контрольная (информационная) Контрольно-корректирующая.
Москва 1999 Требования к созданию тестовых заданий и типология тестов (Обзор возможностей контроля знаний) ЦДО МГИЭМ.
Транксрипт:

1 Тест как инструмент измерения знаний обучающихся Дузкенева Найля Акатаевна Руководитель отдела тестирования ЦМК

2 Понятие « качество образования » Дать однозначное определение понятию «качество образования» невозможно. Поэтому, для практических целей под качеством образования стали понимать «качество подготовки». Выделяют 3 уровня понятия « качество подготовки» 1. Планирование обучения, когда планируемое качество подготовки закладывается в образовательные программы по каждой дисциплине 2. Реализация образовательных программ в учебном процессе 3. Результат осуществленного учебного процесса. Часто используют термин «учебные достижения» как синоним понятия « качество подготовки». Закон РК «Об образовании» от 27 июля 2007 года не дает определения, что такое « качество образования», хотя само понятие используется. Ст.55 п.2 Управление качеством образования осуществляется путем принятия управленческих решений на всех уровнях на основе результатов образовательного мониторинга. П.3 Образовательный мониторинг проводится методом внешней и внутренней оценки качества образования. Внутренняя оценка качества образования включает в себя СМК, различные процедуры самооценки всех видов деятельности организаций образования, текущего контроля успеваемости, оценку образовательных достижений обучающихся.

3 Под качеством образования можно понимать меру соответствия фактически достигнутых результатов предварительно планируемым. Гарантии качества образования без измерений его результатов носят во многом декларативный характер. ГОСО РК «Система образования РК. Контроль и оценка знаний в высших учебных заведениях», введенный с г. содержит раздел 6 «Измерители знаний обучающихся». В п.6.2 говорится «Измерители знаний обучающихся разрабатываются высшими учебными заведениями в различных видах: контрольные вопросы, билеты, тесты ( открытые, закрытые, комбинированные, на соответствие, эссе и др.), задания лабораторных, расчетно- графических, курсовых и других работ. Раздел 7 Инструменты измерений знаний обучающихся. В п. 7.1 В качестве инструментов измерения знаний обучающихся выступает шкала оценок, которая рекомендована МОН РК.

4 Педагогическое измерение Педагогическое измерение – процесс установления соответствия между оцениваемыми характеристиками обучаемых и точками эмпирической шкалы, в которой отношения между различными оценками характеристик выражены свойствами числового ряда В качестве характеристик обучаемых выступают их знания и умения на момент выполнения теста Роль единицы измерения играют тестовые задания Объектом оценки становятся обучаемые Результатом измерения – шкала баллов тестируемых

5 Наиболее эффективным средством измерения, обеспечивающим объективность и сопоставимость оценок в процессе контроля, являются педагогические тесты. Негативное отношение к тестированию является следствием недостаточно хорошего представления о нём, как об инструментальном средстве образовательного процесса. Если рассматривать тестирование как диагностическую процедуру, то снимаются многие опасения, связанные с его использованием в образовательном процессе Широко методы диагностирования применяются при определении уровня владения учебным материалом (педагогическая диагностика) Основная цель педагогического диагностирования – получение диагностической информации Для принятия верных решений информация о реальном положении дел должна быть объективной, информативной и пригодной для контроля Роль диагностических признаков при педагогическом диагностировании играют тестовые задания, которые должны отвечать определённым требованиям (информативность, контролепригодность и.т.д.)

6 Только для тестов существуют научно- обоснованные критерии качества. Тест образует не любая система заданий, а только та, которая обеспечивает информативные оценки уровня и качества подготовки обучаемых. Критерий информативности является ключевым для характеристики теста как средства измерения. Информативность теста зависит как от характеристики тестовых заданий ( для оценки информативности заданий необходимо эмпирическое исследование теста на репрезентативной выборке обучающихся), так и от уровня подготовки обучающихся.

7 Уровни современного понимания теста и тестирования « Бытовой» уровень. Тест - это набор вопросов с вариантами ответов ( в одном ряду с кроссвордами, головоломками) «Словарный» уровень. Для него характерны разночтения и противоречия в понятиях и определениях. Именно на этом этапе находится современная тестология на постсоветском пространстве. Научный уровень. Он наиболее точен, учитывает особенности тестов и отражает требования к ним.

8 Тест как инструмент измерения знаний студентов Тест – это инструмент, состоящий из квалиметрически выверенной системы тестовых заданий, стандартизированной процедуры проведения, заранее спроектированной технологии обработки и анализа результатов, предназначенный для измерения качеств и свойств личности, изменение которых возможно в процессе систематического обучения. В основе теста лежит специально подготовленный и испытанный набор заданий, позволяющий объективно и надежно оценить исследуемые качества и свойства на основе использования статистических методов.

9 Преимущества тестирования Отличительная черта теста – наличие измерения, функция которого состоит в том, чтобы поставлять количественную и качественную информацию о прогрессе обучения, о диагнозе пробелов и о прогнозе успешности. Тестовый контроль отличается от других методов контроля (устные и письменные экзамены, зачеты, контрольные работы и т.п.) тем, что он представляет собой специально подготовленный контрольный набор заданий, позволяющий надежно и адекватно количественно оценить знания обучающихся посредством статистических методов.

10 Преимущества тестирования Тесты – качественный и объективный способ оценивания Объективность достигается путем стандартизации процедуры проведения, стандартизации и проверки показателей качества заданий и теста целиком. Тесты имеют широкие возможности для принятия управленческих решений

11 Преимущества тестирования Тест Емкий инструмент Объемный инструмент Мягкий инструмент Широкий инструмент

12 Цели проведения теста определение степени соответствия результатов обучения декларированным целям определение проблемных областей дисциплины (разделы, которые оказались недостаточно хорошо изложены в лекционном курсе, слабо закреплены на упражнениях, по которым отсутствуют необходимые методические указания и т.д.) создание базы тестовых заданий, обладающих хорошими диагностическими свойствами выработка критериев сопоставления результатов тестирования с принятой в вузах балльной системой оценок

13 Классификация педагогических тестов По подходам к интерпретации результатов тестирования Нормативно- ориентированный тест Критериально- ориентированный тест

14 Классификация педагогических тестов Нормативно- ориентированные тесты разрабатываются для сравнения обучающихся по уровню учебных достижений. Вывод с точки зрения интерпретации результатов выстраивается по схеме: Задание ответы выводы о знаниях тестируемого рейтинг Критериально- ориентированные тесты создаются для сопоставления учебных достижений обучающихся с планируемым к усвоению объемом ЗУН ( знаний, умений, навыков) Задание ответы выводы о соответствии тестируемого заданному критерию

15 Классификация педагогических тестов По целям использования Входные тесты Формирующие тесты Диагностические тесты Итоговые тесты

16 Классификация педагогических тестов По процедуре создания стандартизированные не стандартизированные

17 Классификация педагогических тестов По степени однородности гомогенные гетерогенные

18 Классификация педагогических тестов По способу предъявления бланковые компьютерные

19 Основные этапы создания теста 1. Определение цели тестирования, выбор вида теста и подхода к его созданию 2. Составление спецификации учебных элементов по данной дисциплине (разделу, теме) 3. Определение объектов контроля и выделение учебных элементов, по которым будут составлены тесты 4. Составление тестов в первом (рабочем) варианте 5. Экспертно-редакционная проверка и корректировка тестов 6. Экспериментальная проверка 7. Анализ результатов экспериментальной проверки и корректировка заданий и эталонов 8. Определение паспортных выходных характеристик тестов 9. Публикация теста (в случае сетевых решений - это установка его на Web-сервере) Далее акцент будет сделан на 1, 2, 5 этапах составления теста

20 1. Определение цели тестирования Классификация целей обучения 1. Уровень усвоения учебного материала – воспроизведение знаний Требования к достижению обучающихся – знать терминологию, специфические факты, категории, критерии, методы, принципы, законы, теории и.т.д Требования в терминах внешней деятельности - дать определение, формулировать, описать, установить соответствие, показывать( находить), распознавать ( находить), перечислять ( особенности), выбирать 2. Уровень усвоения учебного материала – понимание и применение знаний в знакомой ситуации Требования к достижению обучающихся – понимать факты, категории, критерии, методы, принципы, законы, теории; применять знания для объяснения, сравнения, для решения качественных и количественных задач, правильно использовать методы, алгоритмы, процедуры Требования в терминах внешней деятельности – объяснять, соотносить, сравнивать, устанавливать ( различие, зависимость, причины), выделять существенные признаки, решить, составить что- то по готовой схеме, измерить, продемонстрировать

21 3. Уровень усвоения учебного материала –применение знаний в незнакомой ситуации Требования к достижению обучающихся – интегрировать знания из разных разделов для решения различных проблем, анализировать, обобщать, оценивать, конструировать, планировать деятельность Требования в терминах внешней деятельности – проводить исследование, формулировать гипотезу, обосновать свою точку зрения, отличать факты от мнений, гипотез, анализировать информацию, предсказывать последствия, высказывать суждения о качестве (точности, эффективности, экономичности)проделанной работы

22 2. Спецификация теста Спецификация теста фиксирует цель, структуру теста, охват требований ГОСО, общее число заданий, содержание проверки и процентное соотношение заданий по разделам в тесте, число параллельных вариантов время для выполнения теста. Наиболее распространенный подход к созданию краткой спецификации основан на сопряжении системы знаний и умений с процентным соотношением заданий по различным разделам дисциплины в тесте. Если взять за перечень ЗУ указанные ниже обозначения, можно выстроить следующую карту спецификации А – знание понятий, определений, терминов В – знание законов и формул С – умение применять законы и формулы для решения задач D- умение интерпретировать результаты на графиках E – умение проводить оценочные суждения

23 Пример возможной краткой спецификации теста Планируемые к проверке ЗУ Разделы дисциплиныСуммарное число заданий по каждому пункту I (20%)II 10%)III (30%)IV (40%) А (10 %) В (20%) С (30%) D (30%) E(10%) Итого

24 5. Экспертно-редакционная проверка и корректировка тестов Первое направление работы эксперта – анализ содержания отдельных заданий теста Второе направление – анализ качества содержания всего теста ( в нашем случае надо говорить об анализе тестовой базы целиком) Третье направление – подготовка обобщающих выводов и рекомендаций по улучшению содержания теста

25 Основные методические требования к созданию теста Содержательная валидность (от valid (англ.) – правильный) - соответствие теста содержанию и объему полученной в процессе обучения информации. Валидность означает, насколько тест отражает то, что он должен оценивать. Высокая валидность теста означает, что из него убраны все элементы, которые не относятся к диагностируемой области. Надежность теста. Требование надежности теста состоит в устойчивости получаемых результатов при проведении тестирования одного и того же испытуемого. Надежность показывает, насколько точно данный тест измеряет изучаемое явление. Определенность теста. Это требование означает, что задания в тесте должны быть сформулированы в максимально простой, корректной и лаконичной форме, не допускающей различного толкования.

26 Основные методические требования к созданию теста Однозначность теста. Это требование обеспечивается наличием в тесте эталона, определяющего систему измерения и оценки качества выполненной тестируемым деятельности по тесту. Фактор времени. Время определяет качество получаемых в процессе тестирования результатов и оно должно быть оптимальным. Дифференцирующая (дискриминативная) способность теста. Тест как педагогический измерительный материал должен иметь максимально возможную разрешающую способность, т.е. разделять студентов, имеющих высокие и низкие показатели учебной успеваемости. Высокая дискриминативность – важная характеристика удачного тестового задания.

27 Типы тестовых заданий Закрытого типа Тестовые задания Открытого типа

28 Типы тестовых заданий Задания закрытого типа Альтернативных ответов Множественного выбора Восстановления соответствия Установления последовательности

29 Типы тестовых заданий Задания открытого типа Дополнения Свободного изложения

30 Основные методические требования к созданию тестовых заданий закрытого типа С точки зрения разработчика необходимо соблюсти минимальные требования к составу тестовых заданий 1. Инструкция 2. Текст задания ( вопроса) 3. Правильный ответ Варианты неправильных, но правдоподобных ответов называются дистракторами. Важное значение при разработке теста имеет т.н. длина теста: число заданий в тесте. Она устанавливается с учетом цели создания теста, контингента обучающихся, объема содержания проверки.

31 Основные методические требования к созданию тестовых заданий закрытого типа Инструкция к тесту и тестовому заданию должна содержать именно те операции, которые обучающийся должен выполнить практически. Если тест проводится на бланках, общая инструкция выглядит так: Обведите номер ( букву) правильного ответа. При компьютерной выдаче заданий инструкция может иметь вид: Для ответа нажмите клавишу с номером ( буквой) правильного ответа. Примеры других инструкций: Расположите в правильной последовательности Допишите предложение Впишите пропущенное слово Установите соответствие

32 Основные методические требования к созданию тестовых заданий закрытого типа Дистракторы - варианты неправильных, но правдоподобных ответов Оптимальное число ответов для заданий итогового теста – 5. Дистрактор, который никто не выбирает в качестве правильного ответа, называют неработающим Тестовое задание считается «хорошо работающим», если, знающие студенты его выполняют правильно, а незнающие выбирают любой из ответов с равной вероятностью

33 Требования к основному тексту тестового задания закрытого типа Текст не должен содержать двусмысленности и неясности формулировки Следует формулировать задание предельно кратко Задание должно содержать простую синтаксическую конструкцию ( не более одного придаточного предложении) Необходимо исключить все вербальные ассоциации, способствующие угадыванию правильного ответа Следует исключить задания, содержащие оценочные суждения и мнения студентов Задание, которое формулируется в форме утверждения, должно превратиться в ложное или истинное высказывание после выбора ответа Задание в форме вопроса должно согласовываться с предлагаемыми ответами

34 Требования к ответам тестового задания закрытого типа Ответы должны быть примерно одинаковой длины Частота выбора одного и того же номера места для правильного ответа в различных заданиях теста должна быть примерно одинаковой ( характерно для тестов на бумажных носителях, при компьютерном тестировании номер места правильного ответа выбирается случайным порядком) Исключить в ответах все повторяющиеся слова, включив их в текст задания Не рекомендуется использовать в ответах слова «все», « ни одного», «никогда», «всегда» ( способствуют угадыванию правильного ответа) Исключить из дистракторов ответы, вытекающие один из другого Все дистракторы должны быть равновероятно привлекательны для тех студентов, которые не знают правильного ответа Ни один из дистракторов не должен являться частично правильным ответом Ответ на одно задание не должно служить ключом к правильным ответам на другие задания теста Все ответы в задании должны быть параллельными по конструкции и грамматически согласованными с основным текстом задания

35 Правила составления тестовых заданий Четко представьте цель, для которой создаются тестовые задания Формулируйте задание в соответствии с программными требованиями по дисциплине и с целью проводимого тест - контроля Начинайте формулировать задание с правильного ответа. Это позволит свести к минимуму наличие более одного правильного ответа, наличие только неправильных ответов. Помните, что задание должно содержать одну законченную мысль Задание формулируйте конкретно, при этом избегайте слов большой, малый, много, мало, меньше, больше. Избегайте вводных фраз или предложений, имеющих мало связи с основной мыслью. Не прибегайте к пространным утверждениям, которые могут привести к правильному ответу, даже если обучающийся его не знает. Не составляйте задания с подвохом ( хорошо знающие дисциплину студенты могут попасть в ловушку, и это противоречит цели тестирования- определить уровень знания и понимания)

36 Правила составления тестовых заданий Как можно реже используйте отрицание ( особенно двойные отрицания ) в основной части ( это часто приводит к противоречиям при чтении задания) Стремитесь к тому, чтобы неправильные ответы были разумными, умело подобранными, не допускайте явных неточностей, подсказок. Не ставьте в зависимость ответ на поставленный вопрос от предыдущих ответов или от основного текста задания Создавайте правильные и неправильные ответы однозначными по содержанию, структуре, и общему количеству слов Лучше не используйте такие варианты ответов как « ни один из перечисленных», и « все перечисленные» Постарайтесь, чтобы различия между вариантами ответов были более точными Избегайте повторения.

37 Значение трудности тестовых заданий Некоторые авторы разделяют понятия трудности и сложности задания. Под сложностью понимают количество действий или интеллектуальных операций, которое необходимо выполнить для решения задания ( решение задачи в 1,2,3 действия) Трудность задания – характеристика относительная и без указания тех, для кого эта трудность установлена, не имеет смысла. Основное назначение трудности задания –выявление заданий, которые не подходят для использования по причинам излишней простоты или сложности. Общий подход при определении трудности – задания должны быть достаточно сложными для обучающихся с разным уровнем подготовки Трудность задания может зависеть не только от содержания учебного материала, но и от выбранной формы задания, его формулировки, от формы предъявления, варианта выбранной невербальной поддержки ( графика, схемы, рисунка )

38 Значение трудности тестовых заданий Трудность является фундаментальным свойством не только задания, но и теста целиком. Он может состоять из простых заданий или из сложных Результаты тестирования тогда могут иметь значение, когда станет ясна сложность тех заданий, из которых составлен тест. Трудность задания можно проверить с помощью формулы Р 1 = n 1 /N*100 % где: P 1 – трудность 1 задания n 1 – число испытуемых правильно справившихся с первым заданием N – общее число испытуемых Пример: Р 1 = 50/200=0,25*100 или 25 % – трудное задание (1/4 часть тестируемых справилась с заданием) Р 1 = 150/200=0,75*100 или 75 % - менее трудное задание

39 Проблема угадывания правильного ответа Одним из доводов критиков тестирования является именно вероятность угадывания. Это касается только тестовых заданий закрытого типа. Чем меньше возможных альтернатив в ответах предлагается, тем больше вероятность угадывания. Существует специальная формула коррекции угадывания. Исследования показали, что с увеличением количества вариантов ответа снижается вероятность угадывания правильного ответа. Угадывание правильного ответа уменьшается также от корректно составленного тестового задания, включая постановку вопроса и предлагаемые дистракторы.

40 Роль и значение невербальных материалов в тестовых заданиях Невербальные материалы можно использовать как в тексте задания, так и в вариантах ответов. Цель их использования - проверка некоторых специальных умений: понимать и читать схемы, графики, диаграммы, умение работать с картой и.т.д. Для ряда дисциплин использование невербальных материалов очень важно. По истории и географии – карты, по физике, химии, математике – графики, таблицы, схемы и.т.д Пример Инструкция. Обведите кружком цифру с правильным ответом. Вопрос. Как нужно соединить три одинаковых сопротивления, чтобы общее сопротивление было наименьшим? 1 3 2

41 Примеры составления тестовых заданий закрытого типа и возможные типичные недостатки Задания альтернативных ответов Возможны только два варианта ответа: верно или неверно, да или нет. Применяются для оценки одного элемента знаний, поэтому их целесообразно применять сериями. Пример Инструкция: Обведите ответ «да» или «нет» Задание : Биосфера – это часть Варианты ответа: да нет -геологической оболочки Земли да нет - биологической оболочки Земли да нет - гидрологической оболочки Земли да нет - оболочки Земли, где присутствует воздух да нет - оболочки Земли, населенной организмами да нет - оболочки Земли, где возможна жизнь Ответ: да - нет – нет – нет –да -нет Задания с альтернативными ответами рекомендуются для выявления умений работать с графиками, диаграммами, таблицами. Например, дается какой- либо график и к нему вопрос: исходя из информации на графике, являются ли следующие утверждения ложными или истинными. Далее варианты ответов.

42 Задания с множественным выбором Предполагают выбор одного правильного ответа из предложенных. Минимальное количество альтернатив – 3. Оптимальное – 5. В заданиях с большим количеством дистракторов на первый план при выборе правильного ответа выходят знания, а не догадка. Такие задания больше подходят для использования при проведении итогового контроля с применением компьютерного тестирования.

43 Типичные недостатки тестовых заданий с выбором ответа 1.Отсутствие логической корректности в формулировках тестовых заданий Пример Задание: Какие системы вы знаете? Варианты ответа: A. биологические, логические, общественные B. механические, картографические, пунктуации C. магистральные, связи, блокировки D. учебные, пенитенциарные E. экономические, политические, социальные Данное тестовое задание неудачно как с точки зрения содержания основного текста ( неопределенность постановки проблемы – о какой системе идет речь), так и с точки зрения дистракторов ( любой ответ нельзя оценить как неправильный, так и трудно приравнять к планируемому правильному ответу)

44 Отсутствие логической корректности условия в формулировках тестовых заданий бывает вызвано частично правильными ответами. Пример Задание: Из вегетативной почки вырастает Варианты ответа: A. ветка B. ветка с листьями C. ветка с листьями и почками D. цветок E. цветок и листья Правильный ответ С, но А и В частично правильные, они являются элементами нужного ответа.

45 2. Двусмысленность формулировок – наиболее распространенный недостаток при создании заданий теста. Пример Задание: Изменится ли температура кипения в открытом сосуде при повышении атмосферного давления? Если изменится, то как? Варианты ответа: A. Повышается B. Понижается C. Остается неизменной D. Изменится Недостаток - обучающему необходимо сразу ответить на 2 вопроса, ответы допускают два в разной степени правильных ответа (В,D). Вопрос может быть легко скорректирован.

46 3. Недостаток, связанный с нарушением логической связи между содержанием задания и содержанием ответов 4.Несоответствие основной части задания и ответов Пример Задание: Можно ли компенсировать недостаток витамина С другими витаминами? Вариант ответа: A. Витамином А B. Витамином Д C. Витамином С D. Нельзя Ошибка – Ответы А,В,С не связаны с постановкой вопроса в основной части и думающий студент их сразу исключит, выбрав правильный ответ D.

47 5. Типичный недостаток - использование в тестовых заданиях оценочных суждений тестируемых. Пример. Задание: Согласны ли вы с утверждением «Научный продукт не имеет потребительской стоимости»? Варианты ответа: A. Нет, как всякий продукт целесообразной деятельности, научный продукт имеет определенную потребительскую стоимость B. Да, потребительскую стоимость научный продукт приобретает лишь после внедрения в промышленность C. Да, потребительскую стоимость имеет лишь конкурентоспособная технология В подобных заданиях нужно спрашивать о том, что является признанным, объективно истинным и поддается рациональной аргументации, а не следует спрашивать мнение студента. Это допустимо во время устного экзамена. Все спорные точки зрения, допустимые к обсуждению на экзамене, нельзя включать в тестовое задание.

48 6.Нарушение правильных пропорций также является недостатком тестового задания. 7. Нарушение требования краткости может проявляться в избыточном словесном составе основной части задания, тавтологии или многословности ответов. Пример. Задание: Сельскохозяйственными угодьями называют Варианты ответа: A. Земли, используемые под пастбища B. Земли, используемые под пашни C. Земли, используемые в садово-огороднических товариществах D. Земли, используемые в сельскохозяйственном производстве После корректировки задание приобретает вид Задание: Сельскохозяйственными угодьями называют земли, используемые Варианты ответа: A. Под пастбища B. Под пашни C. В садово-огороднических товариществах D. В сельскохозяйственном производстве

49 8.К типичным недостаткам разработчиков тестовых заданий относятся случаи введения инструкции в содержательную основу задания ( использование слов : укажите, сравните, определите, найдите, определите и.т.д) Пример. Задание. Укажите образования, которые могут быть отнесены к одной системе органов Варианты ответов: A. костные клетки, кости, скелет B. легкие, сердце, диафрагма C. ротовая полость, пищевод, кишечник, желудок, печень D. кости и мышцы рук, нервы, обеспечивающие движение После корректировки задание примет вид Задание. К одной системе органов относятся Варианты ответов: A. костные клетки, кости, скелет B. легкие, сердце, диафрагма C. ротовая полость, пищевод, кишечник, желудок, печень D. кости и мышцы рук, нервы, обеспечивающие движение

50 9. Типичный недостаток – формулировки, способствующие угадыванию правильного ответа в отдельных заданиях. Подсказкой могут служить грамматические признаки, которые помогают угадыванию: число, время глагола, род существительных, несогласованные падежные окончания. Пример Задание. О разнообразии природных условий России свидетельствует Варианты ответа: A. Равнинный рельеф B. Различные формы рельефа C. Различные типы климата D. Многообразие ландшафтов. Единственное число глагола в основной части ограничивает выбор 1 и 4 ответом. Два остальных ответа не работают. Пример Задание Одним из приоритетных направлений интеграции стала Варианты ответов: A. Научно- техническая сфера B. Сельское хозяйство C. Производство товаров роскоши D. Нескоординированное развитие внешней торговой политики Задание может быть легко скорректировано.

51 10.Особого внимания заслуживают случаи, когда один из ответов сформулирован в виде « все ответы верны», « все перечисленное выше», «ни один из перечисленных ответов». Пример. Задание. Человек представляет собой Варианты ответа A. Субъект управленческой деятельности B. Один из объектов исследования C. Один из возможных элементов исследования D. Все утверждения верны. Такие формулировки появляются тогда, когда разработчик затрудняется с подбором нужного числа дистракторов к заданиям теста. Использование таких ответов не позволяет заданию после выбора ответа стать законченным высказыванием.

52 Задания на восстановление соответствия Задания соответствия- такие задания, в которых необходимо найти или приравнять части, элементы, понятия – конструкциям, фигурам, утверждениям, т.е.восстановить соответствие между элементами двух списков. Задания на соответствие используют чаще в текущем контроле знаний. При составлении таких тестовых заданий необходимо учесть ряд правил: Задание формулируется так, чтобы все содержание можно было выразить в виде двух множеств с соответствующими названиями Элементы задающего столбца располагаются слева, элементы для выбора справа Каждый столбец желательно озаглавить Желательно, чтобы элементы правового множества содержали несколько дистракторов, которые должны быть правдоподобными Элементы столбцов должны содержать гомогенный материал Помимо основной инструкции: Установите соответствие, необходимо сообщить о наличии дистракторов, о том, используется ли каждый элемент правого столбца один раз или более одного раза

53 Пример. Инструкция: Установите соответствие Задание. Моменты инерции относительно Их числовые значения оси, проходящей через центр масс 1.однородного шара радиуса R A. mR 2. 2.однородного шара радиуса R B. mR 3 /2 (ось перпендикулярна плоскости диска) C. mR 2 /3 3.обруча радиуса R D. 2mR 2 /5 (ось перпендикулярна плоскости обруча) E. mR 2 /2 F. mR 4 /5 Ответы: 1____,2____,3____ Каждое задание завершается строкой ответов, в которой проставляются буквы вместо прочерков. Чаще один ответ, но возможны и несколько ответов При оценивании желательно использовать дихотомическую оценку для таких заданий: при одной ошибке в задании – 0 баллов, при правильном выполнении – 1 балл

54 Задания на установление правильной последовательности Эти задания редко используются в тестах, хотя представляют собой качественную форму тестовых заданий. Это задание подходит для любой дисциплины, где присутствует алгоритмическая деятельность или временные события. Для истории – восстановление временных последовательностей событий, для языковых дисциплин - этапы словообразования, для точных наук - алгоритмы решения задач. В заданиях приводятся в произвольном, случайном порядке действия, процессы, элементы, связанные с определенной задачей Стандартная инструкция имеет вид: Установите правильную последовательность Инструкция: Установите правильную последовательность событий, которые привели к началу Первой мировой войны 1. А. Германия объявила войну Франции 2. В. Россия начала всеобщую мобилизацию 3. С. убийство в Сараево 4. D. Англия объявила войну Германии 5. E. Германия вторглась на территорию Бельгии 6. F. Австро-Венгрия предъявила ультиматум Сербии 7. J. Германия объявила войну России

55 Требования к тестовым заданиям открытого типа Задания открытого типа не имеют готовых ответов. Обучающемуся необходимо самому записать одно или несколько слов ( цифр, символов, словосочетаний). Основной трудностью при составлении заданий открытого типа является соблюдение основного требовании к тестовым заданиям – наличие однозначного правильного ответа. Этого можно избежать, если: - формулировать вопрос так, чтобы ответ был однозначным - выделить ключевые слова, и их использование считать за правильный ответ - применить более сложную шкалу оценки: использование всех ключевых слов оценить в 2 балла, использование части ключевых слов – 1 балл Преимущества таких заданий краткость и однозначность ответа необходимость воспроизведения ответа по памяти отсутствие необходимости искать несколько вариантов ответа простота формулировки вопросов невозможность угадать ответ -основное достоинство этих заданий Основной недостаток – сложность формализации правильного ответа

56 Задания дополнения В этих заданиях тестируемый должен самостоятельно дать ответы на поставленные вопросы. Каждое задание должно быть нацелено на одно дополнение, место которого обозначается прочерком или точками. Дополнение лучше ставить в конце задания или как можно ближе к концу. Задания дополнения имеют инструкцию следующего вида. Инструкция: вместо каждого многоточия ( прочерка) впишите только одно слово ( символ, знак, формулу и.т.д.) или дополните Пример Инструкция. Дополните. Задание. _______ осуществляют перенос аминокислот к месту синтеза белка. Данное задание неудачное, так как сложно обучающемуся сообразить, что от него требуется. После корректировки задание имеет вид Задание. Перенос аминокислот к месту синтеза белка осуществляют ______

57 Задания свободного изложения Они предполагают свободные ответы тестируемых по сути задания. На ответы не накладываются ограничения. Однако формулировки должны обеспечивать наличие только одного правильного ответа. Инструкция для заданий свободного изложения: закончите предложение ( фразу), дополните определение, впишите правильный ответ. Пример Инструкция. Продолжите формулировку правила Задание. Вводными называются слова ______________

58 Общие итоги 1.Тест должен быть объективен, т.е. независим от субъективных оценок, а также должен быть прозрачен для контроля со стороны независимых экспертов 2.Тест должен давать достаточно большую и достоверную статистическую информацию, анализ которой может служить основой для совершенствования учебного процесса 3.Необходимо научиться (и это не так просто) формулировать тестовые задания в корректной форме 4.Тест - это визитная карточка дисциплины. По тестовым заданиям, их объёму и содержанию, можно судить о том, сколько нового, полезного и интересного студенты узнали от преподавателя. 5.Разработка преподавателем тестовых педагогических измерительных материалов способна значительно повысить его квалификацию как педагога, по-новому переосмыслить учебный материал преподаваемой дисциплины, более эффективно использовать традиционные формы и методы контроля

59 Общие итоги 6. Не существует учебных дисциплин, для которых тестовый опрос не возможен или не эффективен 7. В полной мере достоинства тестирования проявляются, когда оно проводится не как разовая процедура по окончании обучения, а служит инструментальным средством осуществления мониторинга образовательного процесса и управления его качеством. 8. Тестовый опрос многофункционален. Он позволяет быстрее понять, как дальше работать с данным студентом, а также помогает лектору скорректировать курс. 9. Одним из недостатков тестового метода контроля знаний студентов является то, что создание тестов, их унификация и анализ – это большая кропотливая работа. Чтобы довести тест до полной готовности к применению необходимо несколько лет собирать, анализировать статистические данные, затем проводить шлифовку, корректировку тестовой базы.

60 Литература 1. Иванов Б.С. Основы педагогической диагностики и мониторинг образовательной деятельности в техническом вузе. Санкт-Петербург, Майоров А.Н. Теория и практика создания тестов для системы образования. М., Сеногноева Н. А. Технология тестов учебной деятельности как средства оценивания результатов обучения. Автореферат диссертации на соискание ученой степени доктора пед.наук, Киров, Челышкова М.Б. Теория и практика конструирования педагогических тестов. М., 2002