Технология проектирования дидактических тестов

Методические рекомендации по разработке дидактических тестов

Общие требования к дидактическим тестам.

Тесты (англ. test, «испытание») применяются в медицине, психологии, педагогике и даже технике. Так, психологические тесты позволяют диагностировать качества и свойства личности, общие и специальные способности, уровень интеллекта. Тесты на профпригодность помогают определить уровень профессиональных знаний, навыков и умений, а также морально-деловых качеств сотрудника в той или иной трудовой области. Особую группу составляют дидактические тесты (иначе: тесты учебных достижений), предназначенные для проверки и оценки уровня знаний, навыков и умений учащихся в процессе обучения.

Дидактический тест имеет следующую структуру:

• 1) заголовок;
• 2) инструкция (правила работы с тестом) для учащегося;
• 3) совокупность тестовых заданий;
• 4) ключ (иначе: эталон) — правильные ответы, с которыми сверяются при проверке ответы учащегося;
• 5) шкала для выведения оценки по результатам тестирования.

Иногда к тесту прилагаются также:

• 6) уровень требований к знаниям, навыкам и умениям учащихся;
• 7) инструкция для учителя.

Дидактический тест должен удовлетворять следующим показателям: адекватность, простота, валидность, надежность.

Адекватность. Тест является адекватным, если он точно соответствует изученному содержанию учебного материала, а также уровню сложности, на котором, согласно образовательного стандарта и учебной программы, должен быть усвоен данный материал учащимися.

Простота. Дидактический тест должен быть простым. Это значит, что инструкция и тестовые задания формулируются предельно ясно и четко. В тексте не должно быть двусмысленных и туманных формулировок. Учащийся должен без труда понять, какие знания, навыки, умения и в каком объеме он должен продемонстрировать.

Валидность — показатель того, соответствует ли тест тому, что он предназначен измерять. Например, в тест по химии, служащий для проверки умения решать задачи на вычисление концентрации растворов, не рекомендуется включать задачи, требующие сложных математических расчетов. Иначе чисто математические ошибки ученика могут показать якобы слабые знания и умения по вопросу «Концентрация растворов». Поэтому тест должен проходить процедуру валидизации — анализа содержания на предмет валидности.

Надежность. Надежность связана с точностью измерений и показывает, насколько можно верить результатам тестирования. Данный показатель вычисляется с помощью метода корреляционного анализа: испытуемым предлагается выполнить тест, а затем те же знания, навыки, умения проверяются и оцениваются с помощью других методов контроля (устный опрос, контрольная работа и т. п.); если имеется существенное расхождение оценок, то возникают сомнения в надежности теста.

Чем больше заданий в тесте, тем больше его надежность. Так, для теста, состоящего из 10−12 однородных заданий на выбор варианта ответа надежность очень мала: 20−30%. Для того, чтобы тест имел надежность 70−75% (такой коэффициент надежности достаточна для тестов, применяющихся учителем в процессе обучения), должно быть не менее 30−40 заданий.

Тесты делятся на две группы: стандартизированные и нестандартизированные. Стандартизированные — это тесты, прошедшие экспертизу содержания с применением методов математической статистики. Процедуру стандартизации проходят, в частности, тесты ЦТ (Беларусь) и ЕГЭ (Россия). Разработка стандартизированного теста — долгий и сложный процесс, занимающий от 2 до 5 лет (если это тест по учебному предмету за один класс) и от 5 до 7 лет (тест за полный школьный курс учебного предмета). Нестандартизированные тесты разрабатываются учителем-практиком для собственного использования по конкретной учебной теме, разделу. Качество нестандартизированных тестов может быть достаточно высоким, если разработчик учитывает научные рекомендации к проектированию дидактических тестов.

Основной структурной единицей теста является тестовое задание. Типы тестовых заданий: открытые, закрытые и смешанные.

В открытых тестовых заданиях ученик сам записывает ответ. Например, предлагается вставить пропущенные слова. Или дано название закона физики, а ученик должен записать формулу, которой описывается этот закон.

В закрытых тестовых заданиях ученик только осуществляет выбор из предложенного множества вариантов.

В смешанных тестовых заданиях предложен ряд вариантов для выбора, но есть также возможность записать собственный вариант ответа.

По уровню сложности тестовые задания делятся на четыре группы:

• 1. Задания на узнавание. К этому уровню относятся, например, задания с выбором ответов, в которых требуется указать номер (букву) правильного ответа; задания на установление соответствия; задания, в которых требуется расположить какие-либо элементы (события, даты, явления) в правильной последовательности.
• 2. Задания на понимание. В них требуется закончить фразу, вставить пропущенные слова и т. п.
• 3. Задания на применение. В заданиях этого уровня требуется, например, решить задачу и записать ответ на бланке в предназначенное для этого поле (окошечко). Или нарисовать (дорисовать) схему какого-либо объекта.
• 4. Задания на перенос, или творческие. Задания данного уровня мало распространены, так как творчество с трудом поддается стандартизации.

Если все задания теста одинаковы по уровню и типу, тест называется однородным (гомогенным). Например, тест, где все задания закрытого типа, с выбором одного правильного ответа из четырех возможных.

Если в тесте имеются задания разных типов или разных уровней, тест называется комбинированным (гетерогенным). Задания каждого уровня или типа в тесте должны располагаться вместе, одной группой. Задания, относящиеся к разным группам, имеют разное обозначение: А-1 (первое задание группы А), Б-4 (четвертое задание группы Б), и т. п. Причем группы заданий следует размещать в тесте в порядке возрастания уровня сложности.

Задания с разной формой представления информации (словесная, числовая, графическая) желательно в тесте чередовать.

Структура тестового задания.

Тестовое задание состоит из следующих частей:

• 1. номер задания в тесте
• 2. констатирующая часть (ее может и не быть). Это описание конкретной ситуации по

Предмету (9 мая 1945 года в Берлине был подписан акт о капитуляции фашистской Германии. Свои подписи под актом поставили представители германского командования и стран-победителей.).

• 3. процедурная часть (т.е. сам вопрос, предложение выполнить какие-либо действия) (Назовите советского военоначальника, подписавшего от имени СССР акт о капитуляции Германии)
• 4. элементы выбора, т. е. варианты ответа, часть которых — неправильные ответы (их называют дистракторами):

А. Рокоссовский К.К.

Б. Жуков Г. К.

В. Конев И.М.

Г. Сталин И.В.

Требования к процедурной части:

• 1) процедурная часть не должна быть длинной. Рекомендуется её длина до 7−8 слов;
• 2) задание должно иметь простую синтаксическую конструкцию (не более одного придаточного предложения);
• 3) процедурная часть не должна быть отрицательным предложением (например, ошибочной является такая формулировка: выберите из предложенного списка фамилии педагогов, которые не являлись сторонниками телесных наказаний).

Требования к элементам выбора:

• 1) число вариантов ответа в каждом задании одного и того же типа должно быть одинаковым;
• 2) если тестовое задание закрытого типа предполагает выбор одного правильного ответа, то элементов выбора должно быть от 3 до 7 (специалисты-тестологи считают оптимальным число элементов выбора, равное 4). Если задание предполагает выбор двух и более правильных вариантов, то элементов выбора может быть до 12 (по некоторым источникам — до 14);
• 3) элементы выбора должны быть примерно равной длины. Например, методически неграмотным будет следующее тестовое задание:
• 1. Что является предметом педагогики как науки?

А. Человек.

Б. Личность.

В. Коллектив.

Г. Целенаправленный процесс формирования и развития личности в процессе воспитания.

Как правило, даже самые неподготовленные студенты выберут в этом задании четвертый вариант ответа, так как он представляется более наукообразным и содержательным. И окажутся правы.

• 4) все элементы выбора должны иметь примерно одинаковую степень правдоподобности. Среди них не должно быть абсурдных и заведомо ложных. Так, задание не должно формулироваться подобным образом:
• 2. Что открыл Христофор Колумб?

А. Америку.

Б. Африку.

В. Австралию.

Г. Луну.

Вариант Г в данном случае — абсурдный. Даже самый неуспевающий ученик его сразу мысленно отбросит, и тем самым сократит для себя число элементов выбора. Задания такого рода допустимы лишь в шуточных тестах, используемых при проведении развлекательных мероприятий.

• 5) не рекомендуются такие элементы выбора, как «все правильные», «все неправильные», «всегда», «никогда» и т. п.;
• 6) в тестовом задании должен быть хотя бы один правильный ответ;
• 7) если среди элементов выбора есть парные («анализ» и «синтез», «индукция» и «дедукция» и т. п.), то желательно не давать их сразу один за другим, а разделить другими элементами выбора:
• 3. Какие методы педагогического исследования относятся к теоретическим?

А. Анализ.

Б. Анкетирование.

В. Индукция.

Г. Синтез.

Д. Беседа.

Е. Ранжирование.

Ж. Дедукция.

З. Эксперимент.

И. Наблюдение.

К. Классификация.

• 8) если все элементы выбора содержат общее слово или словосочетание, то его лучше вынести в процедурную часть.
• 4. Назовите методы формирования сознания личности:

А. Метод убеждения.

Б. Метод поощрения.

В. Метод положительного примера.

Г. Метод наказания.

Правильнее будет:

А. Убеждение.

Б. Поощрение.

В. Положительный пример.

Г. Наказание.

Другой пример:

5. Когда была учреждена Лига Наций?

А. 1917 г.

Б. 1918 г.

В. 1919 г.

Г. 1920 г.

Правильнее записать данное задание таким образом:

5. В каком году была учреждена Лига Наций?

А. 1917.

Б. 1918.

В. 1919.

Г. 1920.

9) частота выбора одного и того же номера (буквенного обозначения) правильного ответа должна быть в различных заданиях примерно одинакова.

Другими словами, в тесте, состоящем из заданий на выбор варианта, не должно быть слишком много правильных ответов А, или Б, или В и т. д.

10) тестовое задание, предполагающее более одного правильного ответа, считается выполненным только в том случае, если ученик полностью и верно указал все варианты правильных ответов. «Частичное» выполнение не засчитывается. Другими словами, в тестировании действует принцип: «все или ничего». Если нарушить это правило, то школьники (да и учитель), во-первых, запутаются при выведении оценки, а во-вторых, это будет приучать учеников к мысли о том, что работу можно выполнить некачественно, «спустя рукава».

Требования к тестовым заданиям на установление соответствия:

1) такие задания представляют собой таблицу их двух столбцов. В левой части таблицы размещаются элементы задающего множества, а в правой — элементы выбора. Инструкция к заданиям такого типа обычно сопровождается словами: «Установите соответствие…» Для этого используются соединительные линии, либо буквы и цифры. Например:

Установите соответствие между фамилией педагога и его произведением, соединив линиями соответствующие слова в левом и правом столбцах:

Либо:

Установите соответствие между типами и содержанием литературных произведений Древней Руси. Образец: 1 — Е, 2 — Д, и т. д.

• 2) элементы задающего множества и элементы выбора должны иметь разное обозначение. Если элементы задающего множества обозначаются цифрами, то элементы выбора нужно обозначить буквами. Или же: элементы задающего множества обозначаются римскими цифрами, а элементы выбора — арабскими;
• 3) необходимо, чтобы все элементы выбора были равновероятно подобны;
• 4) правый столбец может содержать больше элементов, чем левый (наоборот нельзя). Но «лишних» элементов выбора (не соответствующих никакому элементу задающего множества) быть не должно;
• 5) в инструкции должно быть указано, используется каждый элемент правого столбца только один раз или более одного раза;
• 6) задание располагается на одной странице без переноса его элементов на другую.

Требования к тестовым заданиям на установление правильной последовательности:

• 1) в таких заданиях тестируемому нужно установить правильную последовательность действий, процессов, событий и так далее, которые приводятся в тексте задания в случайном порядке. Инструкция к заданиям сопровождается словами: «Установите правильную последовательность…» или «Расположите в правильной последовательности…» Например, задание из теста по истории:
• 8. Расположите в правильной последовательности события второй мировой войны:

А. Битва на Курской дуге.

Б. Оборона Брестской крепости.

В. Нападение фашистской Германии на Польшу.

Г. Сталинградская битва.

Д. Операция «Багратион».

Е. Битва за Москву.

Ж. Высадка союзных войск в Нормандии.

Ученик должен расставить цифровые или буквенные обозначения элементов выбора в нужном порядке: Б, А, Г, В, Д;

2) такое задание считается выполненным только в том случае, если ученик полностью и верно указал всю последовательность. Ошибка хотя бы в одной цифре (букве) ведет к тому, что задание считается выполненным неверно.

Требования к тестовым заданиям открытого типа:

1) процедурная часть начинается словами: «Впишите недостающее слово на месте прочерка» или «Получите и запишите ответ в бланке ответов»;

Примеры:

9. Объем пирамиды равен 60 см³, площадь основания 30 см². Чему равна высота пирамиды?

Ответ: ___________ см.

10. Напішыце словы па-беларуску:

Диплом ________________.

Тимур ________________.

Тенденция ________________.

Подвеять ________________.

• 2) прочерк ставится на месте ключевого элемента, знание которого является наиболее существенным для контролируемого материала;
• 3) все прочерки должны быть одной длины;
• 4) на место каждого прочерка вставляется только одно слово, буква или число (без обозначения единиц измерения или вместе с ними);
• 5) повторы одинаковых ответов исключаются.

Технология проектирования дидактических тестов включает следующие этапы:

I. Теоретический этап:

• 1) определение цели тестирования (например, входной, текущий, тематический или итоговый контроль);
• 2) изучение программных требований и материалов учебника по данной теме;
• 3) выбор вида тестовых заданий.

II. Практический этап:

• 4) спецификация, т. е. определение структуры теста (количество вариантов теста, типы тестовых заданий, число заданий каждого типа, число ответов к заданиям с выбором вариантов, «вес» каждого задания при подсчете баллов, время выполнения теста учащимися исходя из времени на выполнение каждого задания);
• 5) разработка тестовых заданий;
• 6) экспертиза тестовых заданий;
• 7) корректировка;
• 8) разработка методического обеспечения теста (бланк заданий, бланк ответов, инструкция для тестируемого, ключ к тесту, руководство для преподавателя).

III. Экспериментальный этап:

• 9) предварительное тестирование;
• 10) анализ результатов предварительного тестирования;
• 11) переработка теста на основе результатов предварительного тестирования;
• 12) составление окончательного варианта теста.