Отладка теста
Пт, 2010-03-12 19:49 | 
admin
При разработке тестов на этапе составления заданий каждое из них обычно заранее экспериментально проверяется. При этом оценивается сложность задания и привлекательность каждого из вариантов предполагаемых ответов. Об уровне сложности судят по проценту обучаемых, давших неверные ответы, а об уровне привлекательности какого-либо варианта предполагаемого ответа – по проценту обучаемых, выбравших его.
Для всестороннего анализа подготовленного задания составляется статистика числа ответов по каждому из предполагаемых вариантов с разбивкой всех обучаемых на подгруппы. Эта разбивка осуществляется по результатам тестирования. В первую подгруппу включаются самые слабые, во вторую более сильные, в последнюю - самые сильные ученики. Обычно ограничиваются делением на пять подгрупп, и, таким образом, в каждую из них входит 20% участников тестирования. Понятно, что в самой сильной подгруппе будет больше всего лиц, ответивших на рассматриваемое задание успешно, и наоборот, в самой слабой подгруппе будет больше всего неправильных ответов. Если эффективность задания велика, то число правильных ответов будет повышаться, а число неправильных - снижаться от первой к пятой подгруппе.
Полученная таким образом информация используется экспертами для совершенствования заданий рассматриваемого теста.
Заданиям, отобранным для составления теста, присваиваются номера в порядке нарастания (по мнению составителей) степени сложности их выполнения.
На следующем этапе разработки теста на достаточно представительной группе испытуемых с подготовленными заданиями проводится эксперимент. При этом выполнение заданий теста оценивается по заранее оговоренным критериям и с использованием также заранее оговоренной системы оценок. Наиболее простой и достаточно часто используемой является система оценок, при которой за каждое правильно и полно выполненное задание теста испытуемому начисляется один балл. В противном случае его оценкой является ноль баллов.
По данным эксперимента составляется матрица оценок. Ее вид при использовании двухбалльной системы оценок показан в таблице 2. Здесь для наглядности учтено всего лишь 12 заданий и 12 испытуемых. Подсчитаны суммы баллов, набранные каждым испытуемым по всем заданиям с одной стороны, и всеми испытуемыми по каждому заданию, с другой.
Таблица 2. Пример матрицы результатов тестирования по итогам эксперимента
|
Фамилии
испытуемых |
