Теория и практика конструирования педагогических тестов - Челышкова М.Б.
ISBN 5-94010-143-7
Скачать (прямая ссылка):
Идея взаимосвязи результатов измерения и положения испытуемого на оси переменной, ассоциируемой со шкалой в одномерном случае, когда по результатам выполнения теста выстраивается только одна шкала, представлена на рис. 2.5. Каждый результат измерения характеристики учащегося из тестируемой группы соответствует одной точке оси, а каждая точка определяет положение испытуемого или даже группы испытуемых с одинаковым тестовым баллом.
На изображенной оси более высокие баллы располагаются правее, низкие — левее. Крайний слева результат обычно характерен для случая, когда испытуемый выполнил правильно лишь несколько заданий теста. Противоположный случай, когда ученик выполнил все или почти все, соответствует крайней правой точке на оси переменной измерения. Остальные точки занимают некоторое про-
64
GUNPOWDER
I *c:j\ j і ы ні измереї f и я
t
Ось переменной
Тестовый OcLLi ученика или группы учеников Рис. 2.5. Геометрическая интерпретация результата тестовых измерений
межуточное положение между описанными выше экстремальными ситуациями.
Второй этап визуализации нацелен на интерпретацию связи между отдельными значениями переменной и совокупностью различных по трудности заданий теста.
Общий подход к интерпретации основан на операционализации понятия измерения. Результаты операционализации позволяют поставить в соответствие каждой точке оси переменной определенное число правильно выполненных заданий теста. Естественно предположить, что более трудные задания смещены вдоль оси вправо, так как их, скорее всего, будут выполнять правильно наиболее сильные испытуемые группы. Наоборот, более легкие задания будут смещены влево — они по силам ученикам с низким уровнем подготовки. Таким образом, при расположении заданий на оси переменной можно придерживаться следующего правила: чем выше уровень подготовки тестируемой группы учеников, тем правее расположены задания, поскольку сильным ученикам по плечу наиболее трудные задания теста.
Если ранее на основании предварительного сбора статистических данных были получены устойчивые оценки параметра трудности заданий, то появляется возможность упорядочения заданий в рамках определенной стратегии предъявления их тестируемой группе учеников. Обычно в гомогенных педагогических тестах задания ранжируют по нарастанию трудности от начала к концу теста. Формально это утверждение можно представить в виде
?, <?2 <...<?y <...<?/M <?„,
іде ?y. — уровень трудностиу-го задания, j = 1, 2, п\ п — число заданий в тесте.
Пример расположения заданий возрастающей трудности показан на рис. 2.6. Из дидактических соображений рассматривается случай выполнения небольшого числа заданий, однако все поло-
\ Мельникова М.Г).
65
GUNPOWDER
Низкий уровень подготовки
Истинный балл ученика
О
Высокий уровень подготовки
о
о
Наблюдаемый балл = 3
Ось переменной
задание
трудное
задание
Рис. 2.6. Операциональное определение переменной измерения
жения, развиваемые на этом примере, применимы к любому числу заданий и к любому ученику тестируемой группы. Для иллюстрации идеи операционализации на рисунке указано положение истинного балла ученика на оси переменной для случая, когда правильно были выполнены три из ранжированных по нарастанию трудности четырех заданий теста.
Нетрудно понять, что локализация места расположения результата ученика на оси переменной зависит в основном от соотношения между величиной его истинного балла и трудностью заданий теста. Если балл ученика довольно высок, а задание достаточно легкое, то у ученика есть все основания для успешного выполнения этого задания теста. В противном случае, когда соотношение между упомянутыми выше величинами меняется на противоположное, у ученика есть веские основания для неуспеха. Конечно, наверняка предугадать ничего нельзя. Обычно говорят лишь о некоторой вероятности успеха или неуспеха.
Источники ошибок измерения
Вероятностный характер наблюдаемых результатов выполнения теста обусловлен влиянием различных факторов, способствующих возникновению ошибок измерения. Среди этих факторов, действующих независимо друг от друга, выделяют случайные и неслучайные. К числу последних принадлежат те, которые появляются из-за просчетов разработчиков в процессе создания теста. К случайным факторам можно отнести настроение испытуемого, поведение экзаменатора, обстановку при тестировании в классе и многое другое — словом, все то, что учесть и предвидеть при тестировании попросту невозможно.
Совсем иначе обстоит дело с неслучайными факторами, порождающими систематические ошибки в процессе измерения. Ошибки систематического характера возникают из-за неудачного выбора подхода к созданию теста либо вследствие применения малоэффек-
66
GUNPOWDER
тивной технологии при его разработке. К ним могут привести нарушения требований методики сбора статистических данных, некачественная интерпретация результатов выполнения теста и ряд других факторов, действие которых разработчики тестов обычно стремятся свести к нулю или хотя бы значительно уменьшить, чтобы не выйти за пределы допустимой ошибки измерения.
