Теория и практика конструирования педагогических тестов - Челышкова М.Б.
ISBN 5-94010-143-7
Скачать (прямая ссылка):
Одно из важнейших требований к характеристикам тестового задания связано с оценкой величины корреляции задания с критерием. Для итоговых тестов, разрабатываемых в рамках норматив-
57
GUNPOWDER
но-ориентированного подхода, в качестве критерия обычно выбирается сумма индивидуальных баллов испытуемых по заданиям теста. Величина коэффициента корреляции является показателем валидное™ задания теста. (Значения коэффициента корреляции, позволяющие отнести тестовое задание к категории валидных, а также формулы для подсчета коэффициента приводятся в гл. 5.) В целом же можно считать, что, чем выше корреляция, тем более валидным является задание, тем больше оснований для отнесения его к категории тестовых и последующего включения в тест. Однако это утверждение относится не ко всем, а только к отражающим различное содержание заданиям теста [5,11,43].
Конечно, нет никакого смысла включать в итоговый тест задания, имеющие одинаковое или сходное содержание и подменяющие друг друга в процессе проверки. Учитывая это обстоятельство, можно сформулировать еще одно требование. Оно связано с выявлением степени отличия содержания данного задания от содержания остальных и нацелено на повышение специфичности каждого задания теста. При этом можно руководствоваться простым правилом: чем меньше задание коррелирует с другими, тем выше специфичность его содержания, тем больше оно отличается от других заданий теста.
Определенные ограничения на подбор тестовых заданий накладывает требование аксиомы локальной независимости, согласно которой вероятность правильного выполнения каждого задания испытуемыми одного уровня подготовки не должна зависеть от вероятности правильного выполнения остальных заданий теста [46]. Конечно, в чистом виде требование аксиомы не может быть выполнено, однако оно, несомненно, исключает цепочную логику, когда ответ на предыдущее задание входит в число данных к последующему заданию теста.
Есть определенные требования к оценкам параметров тестового задания. В первую очередь, это утверждение касается параметра трудности и параметра дифференцирующей способности, оценки которых должны обладать свойством инвариантности относительно уровня подготовленности тестируемой группы. Если судить по приведенному требованию, то для отнесения задания к категории тестовых необходима тщательная эмпирическая проверка, сопровождаемая специальной обработкой и развернутым анализом результатов обработки эмпирических данных выполнения теста.
Еще одно требование связано с анализом информационных и характеристических кривых тестовых заданий, построение которых также основано на эмпирических результатах выполнения теста и
58
GUNPOWDER
предполагает использование математического аппарата теории лаге нтно-структурного анализа. Согласно требованию каждое тестовое задание должно обладать известной характеристической кривой с приемлемой формой и подходящим расположением, обеспечивающим в совокупности с другими кривыми планируемый при создании геометрический образ теста [31,46,47].
Помимо характеристической, каждому тестовому заданию можно поставить в соответствие информационную кривую, которая дает представление о точности оценок испытуемых различного уровня подготовки в том гипотетическом случае, когда измерение осуществлялось с помощью только одного данного задания теста. (Подробная методика и алгоритмы построения кривых приводятся в гл. 5.)
Из перечисленных выше тестологических требований вытекает обязательность многократных эмпирических проверок и переработок предтестовых заданий до тех пор, пока они не обретут статус тестовых. Каждая проверка должна сопровождаться обработкой эмпирических результатов и их интерпретацией путем соотнесения с научно обоснованными требованиями к характеристикам тестовых заданий. Выполнение всех требований и общая принадлежность тестовых заданий к одной и той же системе дают основа-пие для их объединения в тест.
Педагогический тест
В отличие от первых двух определений, довольно инвариантных относительно целей создания тестов, определение педагогического теста ориентировано на конкретные цели и подходы. В частности, для случая оценки итоговых достижений по одной из учебных дисциплин в рамках нормативно-ориентированного подхода определение теста может иметь следующий вид.
Определение 3. Итоговый нормативно-ориентированный тест — ппо система тестовых заданий, упорядоченных в рамках определенной стратегии предъявления и обеспечивающих информативность оценок уровня и качества подготовки испытуемых.
Предложенное определение отличается от многих других, имеющихся в отечественной и зарубежной литературе. В основном оно предназначено для гомогенного теста, обладающего дисциплинарной общностью заданий, однако с определенными оговорками и дополнениями может быть использовано и для гетерогенного теста, охватывающего систему знаний по нескольким учебным дисциплинам. В последнем случае необходимо изменить требования к ха-
59
GUNPOWDER
рактеристикам тестовых заданий. Другой будет и стратегия их упорядочения в тесте. В отличие от гомогенного теста, где задания чаще всего располагаются по нарастанию трудности, в гетерогенных тестах сохранение принципа нарастания трудности выражается, как правило, в так называемой спиральной или ступенчатой форме.
