Для Влад-Ress, Удмуртская Республика 8 июня 2010 23:05
Проблема измерительной неэквивалентности вариантов ЕГЭ – это суровая реальность.
Эта проблема может быть решена, причём достаточно легко. Надо разрешить ФЦТ (Федеральному центру тестирования) составить таблицу соответствия первичного и тестового балла для каждого варианта в отдельности без усреднения по разным вариантам.
ФЦТ всегда выступал за построение для каждого варианта КИМ своей шкалы тестовых баллов, но не получал на это разрешения.
Такого разрешения ФЦТ не получал не из-за самодурства чиновников, а из-за сильных побочных эффектов использования нескольких (десятков и даже сотен) шкал.
Во-первых, возможны инверсии: вы решили больше задач, а получили меньше баллов из-за того, что задачи в вашем варианте были легче, чем в другом варианте. Причём на ваш балл будет влиять трудность не только решенных задач, НО И НЕ РЕШЁННЫХ ВАМИ ЗАДАЧ ТОЖЕ!
Во-вторых, используемая в ФЦТ при шкалировании модель Partial Credit даёт некоторую случайную ошибку определения тестового балла, которая может превосходить разность тестовых баллов вследствие неэквивалентности вариантов. В этом случае применение различных шкал для разных вариантов становится необоснованным.
Вот два гипотетических примера.
1. Различие тестовых баллов двух вариантов при одинаковых первичных баллах равно 10, а ошибка модели составляет 5 тестовых баллов. Введение разных шкал совершенно необходимо.
2. Различие тестовых баллов двух вариантов при одинаковых первичных баллах равно 5, а ошибка модели составляет 10 тестовых баллов. Введение разных шкал не является обоснованным.
Реальная проблема заключается в том, что разработчики вариантов ЕГЭ 2010 года по математике вообще не предполагали использования при шкалировании модели Partial Credit, которая и даёт возможность строить разные шкалы для разных вариантов, чтобы устранить их неэквивалентность.