Тесты за счет адаптации к формату интернет-тестирования и освоения в том числе и вопросов, включаемых в такого рода тесты

Оглавление

Цели и задачи тестирования

1. 
   Стимулировать студентов регулярно обращаться к материалу лекций, семинаров и учебника
   
2. 
   Повысить готовность студентов сдавать аккредитационные тесты за счет адаптации к формату интернет-тестирования и освоения в том числе и вопросов, включаемых в такого рода тесты
   
3. 
   Дать возможность преподавателям выявлять темы и конкретные вопросы, которые вызывают наибольшие трудности за счет наличия в LMS статистики ответов на каждый вопрос
   
4. 
   Высвободить время на семинарах, ранее затрачиваемое на проведение тестов в традиционной форме
   

Описание структуры и содержания библиотеки тестов

1. 
   На ключевые темы подготовлено больше вопросов, чем на менее важные.
   
2. 
   Авторы специально разбили библиотеку на множество разделов, чтобы не возникло проблемы излишней укрупненности блоков. Поскольку не на каждую тему дается отдельный тест, нет необходимости иметь по каждой теме одинаково большое количество вопросов.
   
3. 
   Библиотека формировалась с сентября 2010 по октябрь 2011 года, поэтому в ней есть смещение в сторону тем, изучающихся в начале учебного года (эти блоки пополнялись в начале двух учебных годов, тогда как темы, изучаемые ближе к концу курса – только в конце одного учебного года).
   

Рекомендуемая методика работы

1. 
   Централизованное пополнение. Несмотря на то, что библиотека тестов может пополняться независимо несколькими преподавателями, для обеспечения высокого качества тестовых материалов вопросы присылаются одному из них, взявшему на себя обязанности по администрированию данного урока.
   
2. 
   Место в накопительной системе. Ниже приведена система выставления оценки по курсу эконометрики в НИУ ВШЭ – Санкт-Петербург, из которой видно, какой вес отведен тестам.
   

3. 
   Оповещение студентов о размещении теста. 1 раз в 2 недели вечером дня, в который проходит лекция и семинары в LMS размещается тест, о чем на групповые ящики студентов преподаватель отправляет сообщение. Тест необходимо выполнить в субботу или воскресенье. Ранее давался больший временной промежуток, что приводило к коллективному обсуждению тестов в компьютерных классах.
   

4. 
   Настройки теста (Рис. 3)
   

5. 
   Описание теста (Рис. 4)
   

6. 
   Настройка вопросов теста. На Рис. 5 приведен пример теста, в который включаются вопросы из первых двух тем.
   

7. 
   Заполнение «Журнала оценок». После завершения срока, который отводится на выполнение теста, преподаватель добавляет оценки за тест в «Журнал оценок».
   

8. 
   Проводится выборочный просмотр протоколов выполнения тестов (прежде всего, сильными студентами) для выявления нетривиальных вопросов, для которых в библиотеке создаются подробные комментарии к ответу.
   

Результаты использования

1. 
   Вес тестов в накопительной оценке воспринимается студентами как достаточно существенный (15% от оценки за зачет в первом семестре и 5% от итоговой оценки во втором семестре), что стимулирует всех студентов регулярно выполнять теста, их анализировать собственные ошибки, при необходимости обращаясь за разъяснениями к преподавателю.
   
2. 
   Несмотря на формальную необязательность данного вида контроля, тесты проходят, как правило, 100% студентов: все готовы потратить 10 минут в неделю, чтобы не потерять баллы.
   
3. 
   Высвободилось примерно 15 минут от каждого семинарского занятия, которые требовались ранее для проведения тестов.
   
4. 
   Преподаватели экономят более 60 минут в неделю в расчете на подгруппу студентов, которые требовались ранее на распечатку бумажных тестов и проверку работ 12-14 студентов.
   
5. 
   За первый год использования библиотеки тестов улучшилось понимание преподавателями того, какие вопросы вызывают наибольшие затруднения. Этот материал более тщательно разбирается на лекциях и семинарах.
   
6. 
   Благодаря снижению времени написания тестов в 2011-2012 по сравнению с 2010-2011 годом на 10 минут удалось исключить злоупотребление использованием внешних материалов и коллективных обсуждений.
   
7. 
   Благодаря ограничению времени прохождения теста субботой и воскресеньем (по сравнению с целой неделей в прошлом учебном году) удалось заметно снизить эффект «коллективного творчества», что проявилось в некотором снижении средних баллов и в более сильном разбросе времени выполнения тестов, что косвенно указывает на эффективность принятых мер.
   
8. 
   Использование библиотеки тестов позволило выявить 2 технические проблемы и сообщить о них специалистам по LMS:
   

1. 
   Иногда система выставляет студентам оценку 100 баллов, даже когда у них есть ошибки (которые отмечены красным цветом в протоколе выполнения). Поэтому стобалльные работы просматриваются преподавателем, и оценка при необходимости корректируется вручную
   
2. 
   Некоторым студентам система дает не 10 минут, а какое-то другое произвольное число минут на выполнение теста. Данная проблема ставит под вопрос корректность использования LMS для проведения тестов, однако, по всей вероятности, в ближайшее время будет решена.