ТЕХНОЛОГИЯ РАЗРАБОТКИ ТЕСТОВЫХ ЗАДАНИЙ

(тезисы лекции) Воскресенская О.Л., Марийский государственный университет Тест – Совокупность стандартизированных заданий, результат выполнения которых позволяет измерить знания, навыки и умения испытуемого, а также психофизиологические и личностные характеристики. Цель тестового задания – получить ответ от испытуемого, на основе которого может быть сделан вывод о его знаниях, интеллектуальных умениях, способностях, представлениях, навыках на определенной области содержания (Переверзев, 2005). Требования к разработке тестов: Надежность теста – это степень точности, с которой тест измеряет уровень знаний, или характеристику личности, или определенное свойство. Валидность теста – это способность теста измерять то, что он должен измерять по замыслу. Общие требования к тестовым заданиям разного типа (основа задания) • Задания должны быть направлены на проверку значимых элементов содержания, а не тех, которые проще формулируются или просты в обработке. • Текст задания должен исключать всякую двусмысленность и неясность формулировок. • Текст задания формулируется предельно кратко, т.е. освобождается от всякого постороннего для данной проблемы материала. Текст задания должен иметь предельно простую синтаксическую конструкцию. • В задании не используются слова, вызывающие различное понимание у испытуемых, а также слова, являющиеся подсказкой, например, «иногда», «часто», «всегда», «все», «никогда». • В заданиях, носящих составной характер, необходимо обеспечить такую последовательность, чтобы правильность выполнения одного задания не зависела от правильности выполнения другого задания данной группы. • В тексте задания исключается двойное отрицание. • Используемая в заданиях терминология не должна выходить за рамки учебной литературы, используемой в вузе Требования к дистракторам (ответам): • По возможности, не следует делать ответы длинными; • Одно и то же слово (или словосочетание, или однокоренное слово) не должно находиться в тексте задания и правильном ответе; • Все ответы должны быть подобными (аналогичными, похожими), это касается и их внешнего вида, и грамматической структуры. • В вариантах ответа на задания желательна краткость; • Каждый дистрактор должен быть правдоподобным, внушающим доверие, вполне убедительным и привлекательным для экзаменующихся; • Правильный ответ должен быть ясен, краток, правилен и свободен от подсказок (как внутри текста задания, так и вне его); • Ответы должны быть одинаковы по длине (хотя бы приблизительно), не следует формулировать правильный ответ заметно длиннее или короче, чем дистракторы; • В дистракторах не следует использовать слова или термины, которые экзаменующийся не может или не должен знать; • При формулировке дистракторов не следует использовать выражения: «ни один из перечисленных», «все перечисленные» и т.д., так как они способствуют угадыванию правильного ответа; • Из дистракторов, как правило, исключаются все повторяющиеся слова путем ввода их в основной текст задания; • Все ответы должны быть грамматически согласованными с основной частью задания; • Если ответ выражен в виде числа, то, как правило, эти числа располагаются от меньшего к большему или наоборот. Задания с выбором одного верного ответа (ВО) - Формулировка основной части задания, должна быть законченной - В заданиях базового уровня в ответы целесообразно включать не более двух-трех важных, ключевых слов, при этом правильный ответ не должен отличатся какими-либо формальными признаками от неправильных ответов (дистракторов). - В заданиях базового уровня не должно требоваться выбрать один НЕПРАВИЛЬНЫЙ ответ при наличии нескольких правильных. - Из текста задания исключаются все словесные ассоциации, способствующие выбору правильного ответа с помощью догадки. - Если имеется задание с отрицаниями, то частицу НЕ или слово, выражающее отрицание, необходимо выделить в тексте (жирным текстом с подчеркиванием). - Задания должны иметь одинаково правдоподобные дистракторы (ответы), одинаково привлекательные для выбора. - Исключаются ответы, вытекающие один из другого или дополняющие друг друга. При составлении тестовых заданий разработчикам следует не только придерживаться определенных правил к формулировке заданий, правильных ответов и дистракторов, но и избегать основных, наиболее типичных неточностей и ошибок при их написании. Наиболее часто встречаются следующие нарушения требований и определенных критериев при написании тестовых заданий. 1. Следует избегать составлять задания, которые проверяют больше чем одну идею, проблему, концепцию. При этом в правильном ответе и дистракторах не должно содержаться разное количество элементов ответа: Важнейшими экологическими последствиями глобального загрязнения атмосферы являются … 1) кислотные осадки и парниковый эффект 2) демографические параметры 3) извержения вулканов 4) естественные сукцессии В правильном ответе и дистракторах содержится разное количество элементов ответа: В ходе световой фазы фотосинтеза происходит… 1) фотолиз воды и выделение свободного кислорода 2) фиксация углекислого газа 3) использование энергии АТФ 4) синтез глюкозы К липидам относятся… 1) стероиды, терпены, воска и фосфолипиды 2) только стероиды 3) только терпены 4) только фосфолипиды 2. Из дистракторов, как правило, исключаются все повторяющиеся слова путем ввода их в основной текст задания, например: Области концентрации живого вещества на границе двух сред обитания В.И. Вернадский назвал … 1) узлами жизни 2) очагами жизни 3) рубежами жизни 4) точками жизни Следует сделать так: Области концентрации живого вещества на границе двух сред обитания В.И. Вернадский назвал _____________ жизни. 1) узлами 2) очагами 3) рубежами 4) точками Часть ответа лучше вынести в вопрос, например Для изучения тонкой структуры клеточных органелл наиболее эффективным оказался метод … 1) электронной просвечивающей микроскопии 2) электронной сканирующей микроскопии 3) флуоресцентной микроскопии 4) световой микроскопии Следует сделать так: Для изучения тонкой структуры клеточных органелл наиболее эффективным оказался метод ________ микроскопии. 1) электронной просвечивающей 2) электронной сканирующей 3) флуоресцентной 4) световой 3. Альтернативные варианты ответа должны быть грамматически согласованны с основной частью задания. Это необходимо для того, чтобы тестируемый не имел возможности прийти к правильному (либо заведомо неправильному) ответу посредством грамматического сопоставления суждения одного из вариантов ответа. Например, наблюдается несоответствие родов или падежей: Круговорот веществ, движущей силой которого является деятельность живых организмов, называется … 1) биологическим 2) большой 3) геологический 4) антропогенным 4. Не все иностранные фамилии можно склонять по падежам. Роль микроорганизмов в питании растений была выявлена в опытах, проведенных… 1) Прянишниковым Д.Н. 2) Сабининым Д.А. 3) Кнопом И. 4) Саксом Ю. Следует сделать так: Роль микроорганизмов в питании растений была выявлена в опытах, которые провел… 1) Прянишников Д.Н. 2) Сабинин Д.А. 3) Кноп И. 4) Сакс Ю. 5. Все ответы должны быть грамматически согласованными с основной частью задания. Например, может наблюдаться несоответствие чисел (единственное и множественное)‏: Пространство, на котором популяция или вид в целом встречается в течение всей своей жизнедеятельности, называется … 1) ареалом 2) площадью 3) зонами 4) территориями В таких случаях в тексте задания следует писать: называет(ют)ся. 6. Не допускается использование словосочетаний: ни один из перечисленных выше; все перечисленные; все, кроме… Основные способы приспособления организмов к условиям окружающей среды –это … 1) активный путь, пассивный путь, избегание неблагоприятных воздействий 2) все перечисленные, кроме активного пути 3) только активный путь 4) ни один из перечисленных вариантов ответа не верен 7. Ответы должны быть одинаковы по длине (хотя бы приблизительно), не следует формулировать правильный ответ заметно длиннее или короче, чем дистракторы. Различная полнота ответов в вариантах не является существенной ошибкой, но непроизвольно подталкивает тестируемого к выбору наиболее «длинного» ответа (в силу психологических особенностей человека). Тем самым снижается объективность тестового задания. Для защиты атмосферы от загрязнения проводят … 1) очистку выбросов предприятий от вредных примесей с помощью газоулавливающих средств 2) интродукцию растений 3) рекультивацию земель 4) мелиоративные мероприятия 8. Не следует в качестве дистракторов приводить понятия, явно не имеющие отношения к предмету тестирования: Для физико-химической очистки сточных вод используют … 1) адсорбер 2) автобус 3) автомат 4) аттестацию 9. Не следует разрабатывать тестовые задания на несоответствие современным научным достижениям или использовать устаревшую информацию: В настоящее время количество населения на планете составляет ________ человек. 1) 5 млрд. 2) 3 млрд. 3) 500 млн. 4) 100 млн. Ключевое слово Ключевое слово тестового задания необходимо выносить в начало предложения. Верно: СОПРОТИВЛЕНИЕ МЕТАЛЛИЧЕСКОГО ПРОВОДНИКА ПРИ УВЕЛИЧЕНИИ ТЕМПЕРАТУРЫ ______ а) возрастает б) снижается в) не изменяется г) обладает цикличностью Неверно: ПРИ УВЕЛИЧЕНИИ ТЕМПЕРАТУРЫ СОПРОТИВЛЕНИЕ МЕТАЛЛИЧЕСКОГО ПРОВОДНИКА ________ Исключение лишних слов из основы суждения Необходимо исключать лишние слова или ненужную информацию из содержательной части задания. Верно: ТЕСТОВОЕ ЗАДАНИЕ С ВАРИАНТАМИ ОТВЕТОВ – ЭТО ЗАДАНИЕ ____________ ФОРМЫ. Неверно: ТЕСТОВОЕ ЗАДАНИЕ, КОТОРОЕ СОДЕРЖИТ ВАРИАНТЫ, ИЗ КОТОРЫХ ТЕСТИРУЕМЫЙ ДОЛЖЕН ВЫБРАТЬ ОДИН ИЛИ НЕСКОЛЬКО ПРАВИЛЬНЫХ ОТВЕТОВ – ЭТО ЗАДАНИЕ ____________ ФОРМЫ. Четкость тестовых заданий Тестовые задания должны формулироваться как можно более четко и просто. Иногда, чтобы усложнить тестовое задание, преподаватель прибегает к туманным формулировкам. Это неправильно! Нельзя давать задания с подвохом. Например, когда все ответы верные или все ответы неверные. Исключение связанных заданий Задания и ответы на них не должны быть связаны с предыдущими заданиями и ответами к ним, т. е. не должно быть ссылок на предыдущие задания и предыдущие задания не должны быть подсказкой к данному. Основа тестового задания Основа тестового задания должна представлять собой точное, определенное и однозначное описание явления (проблемы). Отсутствие однозначности и определенности может вызвать различные толкования суждения, что снижает объективность выставляемой оценки. Подсказки в вариантах ответов Следует избегать альтернативных ответов, содержащих подсказки. При этом не стоит конструировать и такие тестовые задания, в которых присутствовали бы лжеподсказки (т. е. побуждать тестируемого дать неправильный ответ). Цикл углерода в биосфере получил название круговорот… а) углерода б) азота в) серы г) кислорода