Влияние формы представления тестовых заданий на качество показателей

Михайлов Виталий Владиславович

канд. техн. наук, учитель информатики МБОУ гимназия №5 г. Конаково г. Конаково, Тверская область

DOI 10.21661/r-463543

Влияние формы представления тестовых заданий на качественные показатели

• ГОСТ
• APA

Опубликовано: Михайлов В.В. Влияние формы представления тестовых заданий на качественные показатели // Инновационные технологии в образовании и науке: материалы II Междунар. науч.-практ. конф. (Чебоксары, 10 сент. 2017 г.) / редкол.: О.Н. Широков [и др.] – Чебоксары: ЦНС «Интерактив плюс», 2017. – С. 145-148. – ISBN 978-5-9500865-1-9. doi:10.21661/r-463543

Аннотация: в статье исследуются результаты компьютерных тестов уровня усвоения знаний. В процессе тестирования выделяется несколько временных фаз, соответствующих различной дифференцирующей способности и степени восприятия тестовых заданий.

Ключевые слова: компьютерный тест, форма представления, тестовые задания, дифференцирующая способность.

Вопрос влияния времени теста на его качественные показатели рассматривался в работах В.С. Аванесова [1], А. Н. Майорова [4]. Указывается, что каждый тест имеет свое оптимальное время. Эффекты проявления утомления у тестируемого связываются со временем, отведенным на выполнение теста. Дифференцирующая способность задания и утомление тестируемого тесно взаимосвязаны. В статье рассмотрены возможности управлением восприятия тестовой информации посредством различных форм ее представления в компьютерном тесте.

Для проверки гипотезы о влиянии формы представления тестового задания на его дифференцирующую способность автором статьи обработаны и анализированы первичные результаты тестирования по четырем типам тестов:

1. тест на единственный выбор ответа из четырех возможных - TestTip_1;
2. тест на множественный выбор из четырех возможных - TestTip_2;
3. тест на сопоставление - TestTip_3;
4. тест на нахождение цепочки связей - TestTip_4;

Порядок обработки следующий. Заполняется таблица, в которой для каждого студента в горизонтальном ряду выставляется время решения каждого тестового задания согласно порядку его получения. По каждому заданию вычисляется дисперсия времени решения относительно всей выборки испытуемых. Выборка тестируемых по признаку доли верно решенных тестовых заданий разделяется на две группы - меньше среднего и больше среднего. Условно эти группы именуются соответственно «неуспешные» и «успешные» Строятся совмещенные графики дисперсии для трех выборок: вся выборка испытуемых, «неуспешные» и «успешные» и график средней доли количества ошибок в порядке прохождения теста. Построенные графики позволяют:

• получить представление о том, насколько однородно время выполнения каждого заданий всей выборкой испытуемых;
• по совокупности трех параметров: время решения задания, дисперсия времени решения заданий и доля неверно решенных заданий - выделить участки с определенным характером их изменения;
• выделенные участки соотнести к фазам, характеризующим реакцию ис­пытуемых.

На графиках ось Y определяет среднее время решения задания в выборке тестируемых, вычисленную дисперсию времени, а также долю неверно решенных заданий. По оси Х отсчитывается время от начала тестирования.

На рис. 1 представлены графики для TestTip_4. Они наиболее дифференцированы по показателю дисперсии.

Рис. 1. Дисперсия и доля неверно решенных заданий в TestTip_4

На рис. 2 представлены графики для TestTip_1. Он среди прочих типов наименее дифференцирован по показателю дисперсии. Все фазы одинаково и малоконтрастно выделены у «успешных» и «неуспешных.

Рис. 2. Дисперсия и доля неверно решенных заданий в TestTip_1

Эта форма представления тестовых заданий наиболее распространена среди составителей тестов, поскольку наиболее проста в конструировании и разработке алгоритма решения. Тест с понятным и простым для большинства тестируемых алгоритмом решения, который не требует от пользователя сложных умозаклю­чений.

• —   —    дисперсия “успешных”

................    дисперсия “неуспешных”

-------------    доля неверно решенных заданий

-------------    дисперсия времени решения заданий

• • —  ■    -  время решения задания(мин)

Фад.- фаза адаптации

Фст. - фаза стабилизации

Фут. - фаза утомления

Рис. 3. Условные обозначения

Выводы:

1. В процессе выполнения теста наблюдается три основные фазы: первая - адаптация, вторая - стабилизация, третья - утомление.
2. Фазы выделяются по изменениям наблюдаемых и вычисляемых характеристик: времени решения задания, дисперсии времени решения задания, количества неверных решений.
3. В первой фазе тестирования наблюдается увеличение времени решения задания, увеличение ее дисперсии. В зависимости от типа теста фаза длится 9­17 мин. Это фаза адаптации тестируемых к условиям тестирования, увеличения осознанно воспринимаемой и обрабатываемой информации.
4. Во второй фазе наблюдается уменьшение времени решения заданий и дисперсии с последующим выравниванием. Количество неверно решенных заданий уменьшается до минимума. Это фаза стабилизации усилий тестируемых, максимально осознанно воспринимаемой и обрабатываемой информации.
5. В третьей фазе наблюдается очередной спад времени и ее дисперсии. Ко­личество неверных решений увеличивается. Эта фаза утомления, степень восприятия и обработки информации уменьшается.
6. Фаза стабилизации также наиболее продолжительна у тестов с мультиме­дийной формой представления - TestTip_4. Нестандартная мультимедийная форма представления тестовых заданий способствует большей концентрации внимания и повышению восприятия информации. Соответственно, и фазы утомления наступают в этих тестах позже. Дифференцирующая способность тестов достаточна для выделения «успешных» и «неуспешных».
7. TestTip_1, несмотря на простой алгоритм решения, самый худший по по­казателям. Дифференцирующая способность теста низкая, разделение на «успешных» и «неуспешных» не выражено. Форма тестовых заданий, вследствие несложности решения, не мотивирует «успешных» и не представляет больших трудностей для «неуспешных».

Список литературы

1. Аванесов В.С. Форма тестовых заданий / В.С. Аванесов. - М.: Центр те­стирования, 2005. - 155 с. Аванесов В.С. Оптимальное время педагогического тестирования. http://viperson.ru/articles/optimalnoe-vremya-pedagogicheskogo-testirovaniya .
2. Башина О.Е. Общая теория статистики / О.Е. Башина, А.А. Спирин, В.Т. Спирин, В.Т. Бабурин, И.А. Ионсон; под. ред. О.Е. Башиной, А.А. Спирина. - 5-е изд., доп. и перераб. - М.: Финансы и статистика, 2003. - 440 с.
3. Ким В.С. Тестирование: Монография. - Уссурийск: УГПИ, 2007. - 214 с.
4. Майоров А.Н. Теория и практика создания тестов для системы образования. М.: Интеллект-Центр, 2001. – 296 с.