Применение заданий с выбором нескольких правильных ответов для внешней оценки учебных достижений студентов вузов Республики Казахстан

Опубликовано в  ж. «Педагогические Измерения», № 1 2013, стр.79-85.   

 

Жибек Касенова

Национальный центр тестирования МОН РК, г.Астана

zh.seide@mail.ru

 

Аннотация

 

Рассмотрены возможности существенного улучшения качества контроля посредством перехода от применения традиционной формы тестовых заданий с выбором одного правильного ответа к заданиям с выбором нескольких правильных ответов.  

Ключевые слова: Внешняя оценка учебных достижений (ВОУД), Промежуточный государственный контроль (ПГК), качество контроля, мониторинг образовательных услуг, тестирование, форма тестовых заданий, тестовые задания нового формата. 

 

Введение

За последние годы в системе образования Казахстана приняты Законы «Об образовании», «О науке», Государственная программа развития образования, где важными приоритетами представляются качество высшего образования. Кроме того, в ежегодных Посланиях Президента Республики Казахстан высказываются предложения по развитию человеческого капитала, формированию интеллектуальной нации, модернизации институциональной структуры системы образования, повышению конкурентоспособности при подготовке кадров новой формации, в том числе - в рамках соответствия Болонским принципам образования.

Болонский процесс стимулирует казахстанскую систему образования к модернизации, в направлении усиления прагматизации обучения.

 

Введение ВОУД

В связи с принятием Государственной программы развития образования на 2011-2020 годы и в соответствии со статьей 55 Закона Республики Казахстан «Об образовании» в 2011-2012 учебном году введена внешняя оценка учебных достижений (ВОУД) - один из видов независимого от организаций образования мониторинга за качеством обучения.

В высшем образовании с 2005 по 2011 годы внешняя оценка проводилась в форме Промежуточного государственного контроля (ПГК) для студентов 2 (3) курсов всех организаций образования независимо от форм собственности и ведомственной принадлежности.  Принципиальным различием ВОУД от ПГК является отказ от правовых последствий в отношении организаций образования. Результаты ВОУД будут использоваться для широкого информирования потенциальных учащихся, студентов, родительской общественности о качестве предоставления образовательных услуг в каждой организации образования. Тем самым, организации образования, не обеспечивающие достаточный уровень подготовки, будут вынуждены принимать экстренные меры к исправлению ситуации.[1]

 

Задачи ВОУД

1) осуществление мониторинга учебных достижений обучающихся;

2) оценка эффективности организации учебного процесса;

3) проведение сравнительного анализа качества образовательных услуг, предоставляемых организациями образования.[2]

 

Система ВОУД

Перечень специальностей высшего образования по направлениям обучения и высшие учебные заведения, на базе которых проводится ВОУД, определяются уполномоченным органом ежегодно. Для проведения ВОУД используются тестовые задания по циклам базовых и профилирующих дисциплин ГОСО.

Введение внешней оценки учебных достижений (ВОУД) обучающихся как одного из эффективных видов независимого от организаций образования мониторинга за качеством обучения, вполне справедливо.

Система ВОУД  применяется для проверки знаний студентов выпускных курсов вузов РК. А поскольку это уже подготовленные обучающиеся, имеющие достаточно более чем трехлетний опыт экзаменационного тестирования, ежегодное проведение ВОУД позволит наиболее полно отобразить уровень качества высшего образования, а также позволит вести сравнительный анализ вузов. ВОУД позволяет также вести систематическое наблюдение, оценивать и прогнозировать состояние и динамику изменения результатов учебных достижений обучающихся. Результаты ВОУД могут быть использованы в анализах при рейтинговых исследованиях.

Таким образом, осуществление мониторинга образовательных услуг путем введения ВОУД стимулирует вузы на предоставление  качественного образования, тем самым давая гражданам страны возможность самостоятельного  выбора  вуза для обучения.

 

Тестирование – государственная форма контроля

 Необходимо отметить, что на современном этапе развития системы образования в Республике Казахстан тестирование признано как государственная форма контроля, метод контроля и оценки учебных достижений обучающихся на всех уровнях образования, а тесты и тестовые задания являются стандартизированными средствами контроля  и оценки знаний.

С целью  максимально полной и объективной оценки уровня теоретической и практической подготовленности обучаемых НЦТ ведется поиск новых более совершенных и эффективных форм тестовых заданий  для объективной оценки знаний и умений обучающихся.

 

Качество заданий

Качество тестовых заданий зависит, в первую очередь, от уровня профессионализма и степени подготовленности преподавателей. Данную постановку вопроса подтверждает проф. Аванесов В.С., ежегодно обучающий  профессорско-преподавательский состав вузов из разных регионов Казахстана по проблемам применения тестовых форм в образовательном процессе. Программа, предлагаемая им, позволяет создать педагогические условия для перехода к образовательно-технологическим формам итоговой аттестации выпускников вузов посредством системы ВОУД. А также стимулировать творческую деятельность педагогов в вопросах создания новых форм образовательной деятельности и методов объективной аттестации выпускников вузов.

Необходимость обучения профессорско-преподавательского состава вузов по проблеме вытекает из проблемной ситуации. В этой ситуации имеет место противоречие между требованиями объективных методов аттестации выпускников вузов, с одной стороны, и недостаточной подготовленностью преподавателей в вопросах разработки наиболее подходящих для этого педагогических форм. В наше время возрастающую роль играет также умелая организация и стимулирование учебно-познавательной деятельности студентов посредством систем заданий в тестовой форме.

 

Новый вариант заданий

С целью обеспечения эффективности государственного мониторинга в организациях высшего образования Национальным центром тестирования в 2010 году, в режиме эксперимента было предложено создание тестовых заданий нового формата. Такие задания предполагали выбор нескольких ответов из числа предложенных вариантов ответов. Преимущество заданий с выбором нескольких правильных ответов заключается в технологичности, что позволяет, при правильной организации тестового процесса, исключить элементы субъективизма в оценивании. Помимо повышения трудности и технологичности, задания данного варианта позволяют проверить знания полнее, глубже и точнее. [3]

Процесс проведения ВОУД в форме тестирования предъявляет повышенные требования к личности и познавательным процессам студента. Ситуация усугубляется состоянием стресса тестируемого, как реакция на специфическую обстановку, количественные и качественные характеристики тестового материала. Задания с выбором нескольких правильных ответов противоречат предыдущему опыту студента с выбором одного правильного ответа, что является ломкой сложившегося стереотипа.

В этой связи, на первоначальном этапе, с целью плавного и  безболезненного перехода, а также быстрой адаптации к тестовым заданиям нового формата, было решено использовать экспериментально тестовые задания с фиксированным числом правильных и неправильных ответов. Таким образом, были разработаны тестовые задания с выбором трех правильных ответов из восьми предложенных вариантов ответов.

В таких заданиях за правильный выбор всех трех ответов студенту присваивается максимум 2 балла, за выбор двух верных ответов 1 балл и за 1 верный ответ 0 баллов.

В 2011 году, в режиме эксперимента по дисциплинам  наиболее престижных направлений обучения: экономических, юридических и педагогических, на государственном и русском языках (таблица), были разработаны тестовые задания нового формата (с выбором трех верных ответов из восьми предложенных).

 

Образование	Право	Экономика и бизнес
Информатика Педагогика Психология Философия Английский язык	Конституционное право Теория государства и права	Макроэкономика Экономическая теория

 

Тестовые задания по выше перечисленным дисциплинам дважды подверглись экспертизе. Они были апробированы среди студентов 2-3 курсов ведущих вузов Республики Казахстан. Общий контингент тестируемых составил 1983 человека. Экспериментальная апробация проводилась в форме бланочного тестирования. В итоге, результаты тестируемых в апробации тестовых заданий нового формата были сопоставлены с результатами тех же студентов по соответствующим дисциплинам ПГК 2011 года.

Выборка результатов уровня знаний отдельных студентов свидетельствовала о том, что средние результаты апробации тестовых заданий нового формата на 5% ниже результатов ПГК-2011 с использованием общепринятой формы тестовых заданий с выбором одного правильного ответа из пяти предложенных.

Согласно исследованиям, выявилась целесообразность использования  тестовых заданий нового формата во внешней оценке учебных достижений выпускных курсов, что позволяет наиболее полно отобразить уровень качества высшего образования, а также вести сравнительный анализ рейтинга вузов РК.

По мнению ведущих ученых, тестовые задания с выбором нескольких правильных ответов позволяют максимально полно и объективно оценить уровень теоретической и практической подготовленности обучаемых. А также, в отличие от традиционных (тестовых заданий с одним правильным ответом из пяти предложенных), тестовые задания нового формата позволяют радикально снизить угадываемость правильного ответа, проверить различные виды знаний, а также повысить качество педагогических измерений.

Каждый разработчик тестов придерживается обычно своего «излюбленного», если можно так сказать, числа ответов. Но содержание разных заданий допускает неодинаковые возможности подбора правдоподобных ответов. А потому подбор, например, трех и только трех ответов, становится искусственным шаблоном, снижающим, в свою очередь, эффективность задания и общую надежность тестовых результатов. Вот почему, в отличие от сложившейся практики, рекомендуется отходить от шаблона и иметь в заданиях своего теста различающееся число ответов. Следовательно, тестируемый не должен точно знать количество правильных ответов. В противном случае, он (тестируемый) будет зациклен на поиске количества правильных ответов, и соответственно не будет думать над содержанием ответов. [4]

В сходной манере в книге «Теория и практика конструирования педагогических тестов» отмечается:[5]

1. Особенностью заданий с выбором нескольких правильных ответов является то, что испытуемому надо не только найти правильные ответы, но и определить полноту своего ответа.

2. В заданиях с выбором нескольких правильных ответов общее число ответов, по мнению некоторых авторов, желательно иметь от 5 до 7.

3. При этом возникает вопрос оптимальной доли числа правильных и неправильных ответов. Добиваться равенства количества правильных и неправильных ответов в каждом задании не следует, потому что испытуемые должны быть готовы к тому, что в любом задании может оказаться любое количество правильных ответов.

 

Оценка ответов

Исходя из того, что суждение относительно выбора трёх, и только трех правильных ответов не в полной мере оценивает качество знаний испытуемых в плане объективности, были созданы в дополнение к имеющимся тестовые задания с переменным  числом правильных и неправильных вариантов ответов.

 В таких заданиях предполагается оценивание результатов тестрования следующим образом:

1) За выбор всех правильных ответов  студенту присваивается 2 (два) балла.

2) За допущенную 1 (одну) ошибку начисляется 1 балл.

3) За допущенные 2 (две)  и более ошибки начисляется 0 баллов.

На основании представленного выше, с целью подтверждения результатов исследований предыдущих лет об эффективности использования тестовых заданий нового формата в ходе внешней оценки учебных достижений студентов выпускных курсов вузов, планируется провести пробное тестирование. По результатам пробного тестирования будет проведена обработка результатов: матричная оценка, оценка тестовых заданий (дистракторный анализ, выявление коэфициента корреляции), что позволит в последующем принять окончательные решения, которые помогут определить дальнейшие качественные меры по систематизации и последовательности принимаемых мер в сфере составления тестовых заданий.

Реализация ВОУД позволит выстроить такую систему образования, которая обеспечит создание конкурентоспособного качественного человеческого капитала. Кроме того, ВОУД обеспечит определение уровня освоения студентами учебных образовательных программ по направлениям обучения в соответствии с принятыми ГОСО МОН РК.

Таким образом, предполагается, что совершенствование использования новой системы с использованием нескольких правильных ответов в первый год её внедрения окажет оптимальное влияние на качество проведения ВОУД НЦТ МОН РК и обеспечит эффективное управление системой высшего образования в вузах Казахстана.

 

Вы пытаетесь найти своего старого друга или одноклассника? Заходи на портал namebook.club. Здесь ты без проблем сможешь найти своих друзей, с помощью простого и понятного поисковика.