Теория и практика конструирования педагогических тестов - Челышкова М.Б.
ISBN 5-94010-143-7
Скачать (прямая ссылка):
221
GUNPOWDER
эту, казалось бы, привычную для традиционного контроля и желаемую для педагога ситуацию, когда испытуемый справился со всем объемом контролируемого материала, необходимо привнести элементы тестовой науки. Хотя традиционный и тестовый контроль служат одной и той же цели — оценке знаний испытуемых, между ними есть существенные различия не только по форме проведения, но и по качеству получаемых оценок. В отличие от традиционных тестовые методы контроля позволяют ответить на наиболее важный вопрос: насколько точна оценка знаний каждого испытуемого и следует ли ей вообще доверять?
Сама по себе постановка вопроса никак не связана с недостатками тестовых методов, поскольку ошибка (погрешность) измерения существует всегда и везде. В том числе и в процессе тестовых измерений возникает ряд погрешностей, мешающих получить истинные баллы учеников. Существование погрешностей приводит к мысли об относительной точности оценок, которая варьирует и которую можно счесть как достаточной, так и не позволяющей доверять полученным оценкам.
Обычно, если нормативно-ориентированный тест сделан хорошо, то достаточной точностью обладают примерно 70% результатов, находящихся в центре распределения, а примерно 5% самых слабых и 5% самых сильных результатов вообще нельзя доверять, так как они отражают истинный уровень знаний учеников с очень большой ошибкой измерения. Именно по этим соображениям профессионально организованные тестовые службы при обработке отбрасывают не менее 3 или 5% результатов на концах распределения. К сожалению, в нашей стране зачастую тестовые оценки испытуемых выставляются без учета теоретических ограничений на возможные диапазоны их применения.
Причина такого положения — практическое незнакомство большинства преподавателей с основами тестовой теории, незнание основных ее положений. Особенно пагубно это незнание сказывается на качестве тестов, разрабатываемых в нашей стране. Нередко автор теста, если его выполнили все или почти все испытуемые группы, расценивает свою работу как успех. У этой тенденции есть свои печальные следствия. Тестовые оценки, полученные со значительной ошибкой измерения, порождают у преподавателей многочисленные сомнения в возможностях педагогических тестов. В сущности, здесь виноваты не тесты, а отсутствие должного профессионализма их разработчиков, но об этом почему-то никто не думает, особенно в тех случаях, когда ругают педагогические тесты.
222
GUNPOWDER
При правильном положении вещей последние две строки матрицы должны быть удалены, и матрица тестовых результатов примет вид, приведенный в табл. 5.2.
Таблица 5.2. Матрица результатов после удаления строк
Номер испытуемого I Номер задания j
1 2 3 4 5 6 7 8 9 10
1 1 1 1 1 1 0 0 0 0
2 1 0 0 0 0 0 0 0 0
3 0 0 0 0 0 0 0 1 0 0
4 1 0 1 1 1 1 1 1 1
5 0 1 0 1 1 0 0 0 0
6 1 1 0 0 0 0 1 0 0
7 1 1 1 0 1 0 0 0 0
8 1 1 1 0 0 0 0 0 0
9 1 1 1 1 1 1 1 1 0
10 1 1 1 1 1 0 1 0 0 0
Третий шаг. Третий шаг связан с подсчетом индивидуальных баллов испытуемых и количеством правильных ответов испытуемых на каждое задание теста. Индивидуальный балл испытуемого получается суммированием всех единиц, полученных им за правильно выполненные задания теста. Например, 4-й испытуемый выполнил правильно 9 заданий, поэтому его индивидуальный балл равен 9. В строке ответов 2-го испытуемого стоят всего две единицы — его индивидуальный балл X2 - 2. Для удобства полученные индивидуальные баллы X1 (/ = 1, 2,10) приводятся в последнем столбце матрицы результатов (табл. 5.3).
Число правильных ответов на задания Y.также получается суммированием единиц, но уже расположенных по столбцам. Например, в 1-м столбце стоят 9 единиц — число испытуемых, правильно ответивших на 1-е задание, равно 9. На последнее, 10-е задание ответил правильно только один ученик, поэтому K10= 1. Число правильных ответов на каждое задание также помещается в матрицу
223
GUNPOWDER
Таблица 5.3. Матрица результатов с индивидуальными баллами испытуемых и количеством правильных ответов на задания теста
Номер испытуемого I Номер задания j Индивидуальный балл (множество Я))
1 2 3 4 5 6 7 8 9 10
1 1 1 1 1 1 0 0 0 0 6
2 1 0 0 0 0 0 0 0 0 2
3 0 0 0 0 0 0 0 1 0 0 1
4 1 1 0 1 1 1 1 1 1 1 9
5 1 0 1 0 1 1 0 0 0 0 4
6 1 1 1 0 0 0 0 1 0 0 4
7 1 1 1 1 0 1 0 0 0 0 5
8 1 1 1 0 0 0 0 0 0 4
9 1 1 1 1 1 1 1 1 1 0 9
10 1 1 1 1 1 0 1 0 0 0 6
Число правильных ответов (множество Rj) 9 8 7 6 5 5 3 4 2 1 50
результатов, обычно оно располагается в последней строке под номером соответствующего задания теста (см. табл. 5.3).
Четвертый шаг. На четвертом шаге осуществляется упорядочение матрицы результатов тестирования. Для этого производят перестановку столбцов, располагая числа Я. в порядке убывания. Затем меняют местами строки матрицы так, чтобы верхняя строка соответствовала обучаемому с минимальным индивидуальным баллом. Значения X располагают сверху вниз в порядке возрастания. Упорядоченная матрица данных тестирования приведена в табл. 5.4.
Пятый шаг. На пятом шаге производится графическая интерпретация эмпирических данных. Эмпирические результаты тестирования можно представить в виде полигона, гистограммы, сглаженной кривой (процентилей, огивы) или машинописного графика.
