Заключение
Объективный контроль знаний, умений и навыков обучаемого или любого гражданина – одна из актуальных задач настоящего времени.
В данной работе проведен анализ источников ошибок педагогических измерений. Средствами теории вероятности рассмотрена проблема случайного угадывания правильных ответов. Проведен анализ методов корректировки тестового балла испытуемого с учетом случайного угадывания, результаты которого свидетельствуют об отсутствии надежных методов коррекции тестового балла с учетом возможного угадывания правильного ответа. Доказано, что при относительно небольшом количестве ошибок такая корректировка невозможна в принципе. Показана возможность снижения влияния угадывания до допустимого уровня за счет уменьшения среднего значения вероятности угадывания до 0,1, что достигается за счет рационального сочетания форм тестовых заданий и увеличения количества дистракторов.
Рассмотрена проблема жесткости алгоритмов оценивания, заключающаяся в том, что незначительно различие результатов выполнения теста может привести к необоснованно существенному отличию оценок. Для компьютерного тестирования предложен алгоритм перевода доли правильных ответов в оценку. Этот алгоритм основан на расчете разности значений вероятности оценок с использованием функции Лапласа.
Показано, что результат тестирования в основном определяется знанием учебного материала, а время прохождения теста индивидуальными свойствами нервной системы обучаемого. Время решения контрольных задач конкретным студентом мало изменяется; взаимосвязь этого времени с уровнем подготовки к занятию, а также с результатом решения задач практически отсутствует. Если скорость выполнения теста не является профессионально значимым фактором, то продолжительность тестирования для студентов, систематически не укладывающихся в отводимое время, должна быть увеличена.
Разработанные алгоритмы реализованы в авторской системе автоматизированного контроля знаний Assistent. Приведено описание входящих в эту систему программ.
Даны рекомендации по разработке тестовых материалов и обучающих программ.
Вопрос о целесообразности применения тестовой формы контроля каждый преподаватель для себя решат сам; «право на свободу выбора … методов оценки знаний обучающихся» ему предоставлено Федеральным законом "Об образовании". Надеюсь, что изложенное окажется полезным тем, кто отвечает «тестам – да».
Литература
ОСТ Т 1.1. Педагогические тесты, термины и определения. Отраслевой стандарт. – М.: Министерство образования РФ, 2001.
Аванесов В.С. Композиция тестовых заданий. Учебная книга для преподавателей вузов, техникумов и училищ, учителей школ, гимназий и лицеев, для студентов и аспирантов педагогических вузов. – М.: Центр тестирования, 2002, - 240 с.
Аванесов В.С. Научные основы тестового контроля знаний. М.: Исследовательский центр, 1994.
Аванесов В. С. Основы научной организации педагогического контроля в высшей школе. Учебное пособие. - М.: Исследовательский центр, 1989.
Аванесов В.С. Применение тестовых форм в Rasch Measurement // Педагогические измерения, 2005, №4. с.3-20.
Аванесов В.С. Системы заданий в тестовой форме. // Педагогические измерения, 2006, №2.
Аванесов В.С. Содержание теста. Принципы разработки содержания теста. Логические требования к содержанию теста. Знания как предмет тестового контроля. Виды знаний. // Управление школой. №№36,38, 42, 44, 46, 1999 и №2, 2000.
Аванесов В.С. Тесты в системе полного усвоения знаний. // Педагогическая диагностика, 2004. № 4. - с.17-21.
Аванесов В.С. Форма тестовых заданий. – М., 2005.
Ащепкова Л.Я. Конструирование тестовых заданий и обработка результатов тестирования. – Владивосток: ДГУ, 2003.
Башмаков А.И., Башмаков И.А. Разработка компьютерных учебников и обучающих систем. – М.: ФИЛИНЪ, 2003.
Беспалько В.П. Образование и обучение с участием компьютеров. – М.: МОДЭК, 2002.
Беспалько В.П. Педагогика и прогрессивные технологии обучения. М.: Педагогика, 1995.
Беспалько В.П., Татур Ю.Г. Системно-методическое обеспечение учебно-воспитательного процесса подготовки специалистов. - М: Высшая школа, 1989.
Бронштейн И.Н., Семендяев К.А. Справочник по математике для инженеров и учащихся втузов. - М.: Наука, 1981.
Бузун Д.Н. Компьютерные дидактические тесты: оценка качества. Сб. ст. Педагогические аспекты исторической информатики; Вып. 3/ Под. ред. В. Н. Сидорцова. – Минск-Гродно, 2003.
Буланова-Топоркова М.В. и др. Педагогика и психология высшей школы. – Ростов-на-Дону: Феникс, 2002.
Вентцель Е.С. Теория вероятностей. – М.: Высшая школа, 2001.
Гальперин П.Я. О психологических основах программированного обучения. Новые исследования в пед. науках. Вып. VI. - М.: Просвещение, 1965.
Гласс Дж., Стэнли Дж. Статистические методы в педагогике и психологии. –М: Прогресс. 1976.
Гузеев В.В. Оценка, рейтинг, тест. — М.: Знание, 1999.
Деменченок О.Г. Автоматизированное обучение как средство индивидуализации. // Современные стратегии и образовательные технологии: Материалы 11 всероссийской конференции.– Иркутск: ВСИ МВД, 2006.
Деменченок О.Г. Алгоритм уточнения оценки при компьютерном тестировании // Педагогические измерения, 2007, №2.
Деменченок О.Г. Ваш первый компьютерный тест. //Подготовка кадров для силовых структур. Современные направления и образовательные технологии: Материалы 11 всероссийской конференции.– Иркутск: ВСИ МВД, 2007.
Деменченок О.Г. Влияние угадывания на значение тестового балла: корректировать или устранять? // Педагогические измерения, 2007, №1.
Деменченок О.Г. Как сделать хороший тест. // Современные стратегии и образовательные технологии: Материалы 11 всероссийской конференции.– Иркутск: ВСИ МВД, 2006.
Деменченок О.Г. Инструментальная среда для создания компьютерных тестов и обучающих программ. //Вестник ИГПУ. – Иркутск: ИГПУ, №6, 2005.
Деменченок О.Г. Контроль знаний в свете гуманизации образования //Вестник ИГПУ. – Иркутск: ИГПУ, №7, 2006
Деменченок О.Г. О возможности внедрения программированного обучения. //Современные подходы к подготовке кадров для органов внутренних дел и государственной противопожарной службы: Материалы межвузовской научно-методической конференции.– Иркутск: ВСИ МВД, 2004.
Деменченок О.Г. Повышение точности педагогических измерений. //Информационные и математические технологии: Труды Байкальской Всероссийской конференции. – Иркутск, ИСЭМ СО РАН, 2004.
Деменченок О.Г. Повышение точности оценки уровня знаний. //Информационные и коммуникационные технологии: Труды международной Интернет конференции. – Екатеринбург, РГППУ, 2005.
Деменченок О.Г., Ширяева Н.К. Метод повышения точности педагогических измерений. //Вестник ВСИ. – Иркутск: ВСИ МВД, №1, 2005.
Деменченок О.Г., Ширяева Н.К. Учет влияния случайных факторов на результат тестового контроля знаний. //Вестник ВСИ. – Иркутск: ВСИ МВД, №4, 2004.
Деменченок О.Г., Ширяева Н.К. Влияние типов тестовых заданий на достоверность оценки знаний учащихся. //Эволюция и современные подходы к подготовке кадров для правоохранительных органов и спасательных служб: Материалы межвузовской научно-методической конференции. – Иркутск: ВСИ МВД, 2005.
Джонсон С., Джонсон К. Одноминутный учитель. – М: Попурри, 2002. – 160 с.
Единый государственный экзамен по ИСТОРИИ РОССИИ. Демонстрационный вариант КИМ 2007 г. – М.: ФИПИ, 2007.
Ерохин А.Л., Кольченко А.В., Патрах Т.Е., Чикина В.А. Программный комплекс для генерации компьютерных тестирующих систем // Сборник научных трудов 6-й Международной конференции Украинской ассоциации дистанционного образования.– Харьков-Ялта: УАДО, 2002.– с. 323-327.
Захаркин В.Г. и др. Прочность усвоения знаний и психофизиологические особенности учащихся. - Новые исследования в психологии, 1983, №2.
Ким В.С. Коррекция тестовых баллов на угадывание // Педагогические измерения, 2006, 4
Клайн П. Справочное руководство по конструированию тестов. - Киев: ПАН Лтд, 1994.
Колеченко А.К. Энциклопедия педагогических технологий: Материалы для специалиста образовательного учреждения. - М.: Каро – 2004.
Компьютерная технология обучения: Словарь-справочник / Под ред. В.И. Грищенко, А.М. Довгялло, А.Я. Савельева. – Киев: Наукова думка, 1992.
Компьютерные технологии в высшем образовании. / Ред. кол.: А.Н. Тихонов, В.А. Садовничий и др.– М.: Изд–во МГУ, 1994.
Ксензова Г.Ю. Оценочная деятельность учителя. Учебно-методическое пособие. — М.: Педагогическое общество России, 1999.
Михайлычев Е.А. Дидактическая тестология. – М.: Народное образование, 2001.
Нейман Ю.М., Хлебников В.А. Введение в теорию моделирования и параметризации педагогических тестов. – М.: Прометей, 2000.
Нейман Ю.М., Хлебников В.А. Педагогическое тестирование как измерение. Учебное пособие. Часть 1. – М.: Центр тестирования МО России, 2002.
Орлов А.И. Прикладная статистика. - М.: Экзамен, 2006.
Попов Б.А., Артамонов В.С., Багрецов С.А. и др. Контроль знаний в автоматизированных обучающих системах. – С-Пб.: МО РФ, МВД России, 1997.
Рекомендации по организации учебного процесса и подготовке локальных нормативных правовых актов в образовательных учреждениях МВД России: Сборник. Том 1. – М.: Академия экономической безопасности МВД России, 2006. - 136 с.
Роберт И.В. Новые информационные технологии в обучении: дидактические проблемы, перспективы использования. - М.: Школа-Пресс, 1994.
Самылкина Н.Н. Построение тестовых заданий по информатике. – М.: БИНОМ, 2003.
Свиридов А.П. Основы статистической теории обучения и контроля знаний: Метод. пособие. – М.: Высшая школа, 1981.
Свиридов А.П., Вербицкий А.Л. Психолого-педагогические особенности контекстного обучения. - М.: Знание, 1987.
Секей Г. Парадоксы в теории вероятностей и математической статистике: Пер. с англ. – М.: Мир, 1990.
Скибицкий Э.Г. Комплексный подход к проектированию, созданию и применению целостных компьютеризированных курсов в общеобразовательной школе. - Новосибирск: Изд-во Новосиб. ун-та, 1996.
Скиннер Б. Обучающие машины. /В приложении к кн.: Столаров Л.М. Обучение с помощью машин. М.: Мир, 1965.
Талызина Н.Ф. Управление процессом усвоения знаний. - М.: Изд-во Моск. ун-та, 1975.
Челышкова М. Б. Разработка педагогических тестов на основе современных математических моделей: Уч. пособие. - М.: Исслед. центр проблем качества подготовки специалистов, 1995.
Челышкова М. Б. Теория и практика конструирования педагогических тестов: Уч. пособие. – М.: Логос, 2002.
Хасбутдинова Л.В., Поляк Л.М. К вопросу о роли социально-психологических факторов в управлении качеством образовательных услуг. В сб. Модернизация высшей школы: обеспечение качества профессионального образования: Материалы Всероссийской научно-практической конференции. Ч. 2. – Барнаул: Изд-во ААЭП, 2004.
Чернилевский Д. В. Дидактические технологии в высшей школе: Учеб. пособие для вузов. – М.: ИНФО, 2002.
|
