Тесты в системе оценки знаний студентов
Скачать 0.79 Mb.
|
Тестовая контрольная работа но теме Вариант № _____ 1.-2.-3.-4.-5.-6.-7.- 8.-9.-10.- 11.-12.-13.- 14.  49Время тестирования может быть различным в зависимости от числа заданий в тесте (длины теста). Оно устанавливается таким образом, чтобы каждый тестируемый попытался по крайней мере один раз выполнить каждое задание теста. Такое тестирование называют тестированием без ограничения времени. Однако, следует иметь в виду, что слишком длинные тесты вызывают усталость, рассеянное внимание и скуку, что отрицательно сказывается на точности педагогических измерений. Если процедура тестирования достаточно длительна, могут быть предусмотрены перерывы с тем условием, что вторая часть теста предъявляется после перерыва. Обычно в педагогический тест включают такое количество заданий, чтобы среднему испытуемому для их выполнения потребовалось бы не более полутора часов. На выполнение одного задания учащийся должен тратить 0,5 - 2 минуты [32]. В тех случаях, когда хотят получить максимальные различия в результатах тестируемых, проводят тестирование с ограничением времени (нормативный подход). Число вариантов тестов должно быть достаточным для того, чтобы предотвратить обмен информацией во время тестирования. Расширение числа вариантов возможно путем замены содержательных элементов в тексте заданий ("фасет") и простой перестановкой ответов. Чтобы затруднить студентам идентификацию вариантов теста, желательно, чтобы они были максимально унифицированы и выглядели однообразно. Наблюдение за процедурой тестирования может, в принципе, осуществлять любой человек. Если задания в тесте сформулированы четко, понятно, научно и методически верно в соответствии с требованиями теории педагогических измерений, то у тестируемых не возникает вопросов ни по форме, ни по содержанию заданий. Заранее специально оговаривается возможность пользоваться литературой, калькулятором, выходить из аудитории во время тестирования. Время окончания тестирования сообщается учащимся заранее. Примерно за 2 мин. до окончания тестирования студенты предупреждаются об этом. Проверка результатов тестирования при наличии эталонов правильных ответов может проводиться любым преподавателем. Если речь идет об итоговом тестировании, то лучше, если это будет преподаватель, не проводивший занятия с данной группой, чтобы исключить заинтересованность, подтасовку и фальсификацию 50 результатов. Тестирование аннулируется, если обнаружены совершенно одинаковые правильные и неправильные ответы. В этом случае рекомендуется пройти повторное тестирование. Представляет интерес опыт тестирования по методологии ETS (Education Testing Service, USA), где в тесте есть "экспериментальная" секция, которая тестируемому не засчитывается, а служит для "обкатки" новых тестовых заданий. Лучшие задания из экспериментальной секции затем включаются в основной тест. 3.9. Интерпретация результатов тестирования Независимо от процедуры проведения тестирования (бланковое или компьютерное), исходным материалом для обработки и интерпретации полученных данных является матрица тестовых результатов, табл. В матрицу заносится профиль ответов каждого учащегося на задания теста в виде последовательности единиц и нолей (1 - правильный ответ, 0 - неправильный). Суммирование единиц и нолей в каждой строке дает индивидуальный тестовый балл X,. Таблица 3.9.1. Пример матрицы тестовых результатов Тема ___________________ Вариант Число заданий ( К) Число испытуемых ( N )
51 3.9.1. Оценка уровня знаний Х можно рассматривать как показатель уровня знаний студентов. Существует два подхода к интерпретации X*. а) Нормативный подход, который основан на измерении отношения тестовых баллов студентов. При этом полагается, что Xt / Х2 как знания 1-го относятся к знаниям 2-го. Тесты, ориентированные на нормы, дифференцируют студентов по суммарным показателям, что является основанием для построения рейтинговой шкалы учебных достижений в группе. Как правило, для нормативно-ориентированных тестов подбирают задания с трудностью q =0,2- 0,8. Типичным примером нормативного теста является абитуриентский тест. б) Критериальный подход, в котором X, рассматривается как степень достижения учебной цели (успешности усвоения), преодоления установленного барьера для получения оценки "удовлетворительно", "хорошо" или "отлично". Отличительной особенностью тестов, ориентированных на критерии, является их высокая содержательная валидность. Количество заданий в критериально- ориентированных тестах обычно больше, чем в нормативно - ориентированных. Более того, при создании критериально - ориентированных тестов не стремятся получить максимум индивидуальных различий, а скорее наоборот. Итоговый контроль, аттестационные процедуры проводятся с использованием только критериально - ориентированных тестов. Абсолютные стандарты достижений устанавливаются в тех случаях, когда необходим минимальный обязательный уровень компетенции (врач, спасатель на воде, фармацевт, секретарь, железнодорожный инженер, пилот самолета ). Преподаватели, использующие тесты, неизбежно сталкиваются с проблемой перевода X, в традиционную оценку по пятибалльной шкале. Здесь при выработке критериев следует опираться на опыт тестирования и экспертную оценку преподавателей. В современной педагогической науке нет единого общепринятого подхода к решению данной проблемы. Однозначным является только мнение о том, что барьер, преодоление которого позволяет считать педагогическое тестирование успешно пройденным, устанавливает разработчик данного теста. Тем не менее, приведем несколько рекомендаций по этому вопросу. В проекте государственного образовательного стандарта 52 среднего (полного) образования по химии [38] предложено при оценке уровня знаний учащихся использовать дихотомическую шкалу "зачет - незачет". Оценку "зачет" предложено ставить в том случае, если в бланке ответов учащегося содержится не менее70% правильных ответов. При разработке сборника заданий в тестовой форме по органической и общей химии [39] творческой группой разработчиков предложено в случае дифференцированного подхода к оценке уровня знаний учащихся ставить оценку "3", если учащийся правильно выполнит 60 - 75% заданий; оценку "4" - 76 - 90% тестовых заданий и оценка "5", если учащийся выполнит более 90% заданий. Многолетний опыт тестирования студентов на кафедре биологической и биоорганической химии ЯГМА, общей и биоорганической химии ЯрГУ им.П.Г.Демидова свидетельствует о рациональности использования 50% - ного барьера для того, чтобы считать тестирование успешно пройденным. 3.9.2. Оценка структуры знаний Информацию о структуре знаний можно извлечь из анализа профилей ответов студентов на задания теста в матрице тестовых результатов. Рассмотрим, например, ответы студентов 1, 2, 3, имеющих одинаковый тестовый балл Xi, табл.3.9.1. При условии, что задания в тесте расположены в порядке нарастания трудности, структуру знаний 1-го студента следует признать правильной: легкие задания он выполняет, а трудные - нет. 2-й студент дает правильные ответы бессистемно, так он учился (или его учили), 3-й студент почему-то не выполнил легкие задания, но справился с трудными. Это информация для размышления о качестве заданий и о недостатках в организации тестирования (подсказка, списывание). Считается, что чем компактнее расположены единицы в левой части матрицы, тем лучше структура знаний студента [22]. 3.9.3. Оценка качества тестовых заданий Основными показателями качества заданий являются их трудность, дифференцирующая способность и корреляция с критерием (суммой баллов всех испытуемых за тест) [32]. Трудность j-того задания q, определяется долей студентов, давших на него неправильный ответ. Задания со значением q от 0,2 до 53 0,8 считаются удовлетворительными [32]. Если трудность задания равна 0,2 - 0,4, то это легкие задания, 0,4 - 0,6 - средней трудности, 0,6 - 0,8 - трудные задания. Задания со значением q меньше 0,2 и больше 0,8, как правило, исключаются из теста. Дифференцирующая способность j-того задания показывает, насколько хорошо оно отличает знания сильного студента от слабого. Удобной характеристикой дифференцирующей способности задания является «индекс дискриминативности» (или «индекс различения») D. Это разность долей правильных ответов Pj на задание в группе «сильных» (High) и,«слабых» (Low) студентов. D= pH - ръ Размер каждой группы составляет 27% от общего числа учащихся. Хорошими считаются задания, имеющие D> 0,30. Задания с D< 0,20 требуют улучшения или замены [17]. Корреляция с критерием (суммой баллов всех испытуемых за тест) является основным критерием и мерой валидности задания [32]. Чем выше корреляция (г), тем лучше задание. Кроме того, при конструировании тестов представляет интерес корреляция заданий друг с другом, а также с индивидуальным тестовым баллом. Чем меньше задание коррелирует с другими (коэффициент корреляции г<0,3), тем больший специфический вклад оно вносит в общий результат. Формулы для расчета коэффициентов корреляции приведены в [19,32]. Однородный и дискриминативный тест может быть получен путем отбора заданий с трудностью в пределах 0,2- 0,8 и, кроме того, имеющих высокую корреляцию с общим показателем (г>0,2)[32]. 3.9.4. Оценка теста в целом Основными показателями качества теста в целом являются его валидность, дискриминативность и надежность. Валидность - это та степень, в которой тест измеряет то, для чего он предназначен. В понятие «валидность» входит большое количество самой разнообразной информации о тесте. Различные категории этих сведений и способы их получения образуют типы валидности. Например, содержательная валидность теста учебных достижений определяется той степенью, в которой задания теста соответствуют содержанию предмета. Содержание теста, одобренное опытными преподавателями-экспертами, является основным 54 критерием его валидности. Тест имеет конкурентную валидность в том случае, если тестовый балл хорошо коррелирует с одновременно проведенными независимыми измерениями и оценками [17]. Дискриминативность (различающая способность) теста тем больше, чем больше дисперсия тестовых баллов. Принимается во внимание также характер распределения результатов тестирования. Обычно создатели теста стремятся добиться нормального распределения за счет варьирования числа легких и трудных заданий. В сбалансированном тесте побольше заданий средней трудности и меньше откровенно легких или трудных заданий. Надежность теста связана с понятием точности измерений. Под надежностью подразумевается, во-первых, внутренняя согласованность теста и, во-вторых, воспроизводимость результатов тестирования. Наиболее понятным и простым способом оценки надежности является повторное тестирование в той же группе учащихся. Результаты обоих тестирований коррелируются. Чем выше коэффициент корреляции, тем выше надежность теста. Надежность при повторном тестировании через некоторое время называется ретестовой надежностью. Можно оценить надежность и при однократном тестировании. Для этого делят тест пополам (например, на четные и нечетные задания) и полученные суммы баллов коррелируются специально разработанным для этого способом [32]. Наиболее статистически достоверным является метод оценки надежности с помощью параллельного теста. Параллельными называются тесты, одинаковые по содержанию, числу и форме заданий попарно равной трудности. Чем выше коэффициент корреляции между параллельными тестами, тем выше надежность теста. Существуют и другие методы оценки надежности тестов, основанные на применении дисперсионного и факторного анализа. Следует отметить, что все исследования надежности должны выполняться на больших (200 и более) и репрезентативных выборках. Определение надежности с помощью коэффициента корреляции достаточно трудоемкий процесс, что не всегда удобно тем исследователям, у которых есть затруднения с выходом на ЭВМ. Для упрощения расчетов было предложено множество формул, из них наибольшее распространение получила формула KR - 20, для дихотомических заданий, в которой буквами обозначены фамилии авторов (Kuder и Richardson), а цифра 20 - порядковый номер | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Похожие:
 | Положение о балльно-рейтинговой системе оценки знаний студентов,... Лльно-рейтинговой системы оценки знаний является комплексная оценка качества учебной работы студентов на основе регламентации семестровых... | | Ргу нефти и газа им. И. М. Губкина Юридический факультет Кафедра... Рейтинговая система оценки знаний студентов вводится в соответствии с приказом ргу нефти и газа им. И. М. Губкина от 11. 09. 2008... |
| Положение о балльно-рейтинговой системе оценки знаний студентов Настоящее положение регламентирует использование балльно-рейтинговой системы оценки успеваемости студентов при организации учебного... |  | Тесты для оценки физической подготовленности студентов I-II курса... Гос впо по специальности 080105. 65 Финансы и кредит, утвержденный Министерством образования РФ «17» марта 2000 г., №180 эк /сп |
| Тесты для оценки физической подготовленности студентов I-II курса... Гос впо по специальности 080111. 65 Маркетинг, утвержденный Министерством образования РФ «23» марта2000 г., №202 эк/сп | | Тесты для оценки физической подготовленности студентов I-II курса... Гос впо по специальности 030501. 65 Юриспруденция, утвержденный Министерством образования РФ «27» марта 2000 г., №260 гум/сп |
| Тесты для оценки физической подготовленности студентов I-II курса... Гос впо по специальности 080109. 65 Бухгалтерский учет анализ и аудит, утвержденный Министерством образования РФ «17» марта 2000... | | Факультет инженерной механики Кафедра промышленной безопасности и... Настоящие положение разработано в соответствии с Инструкцией методической «Рейтинговая система оценки качества учебной работы студентов»... |
| Тесты для контрольной работы Экзаменационные вопросы Шкала оценки... Комплект учебно-методических материалов курса «Эколого-экономический мониторинг окружающей среды» | | Инструкция для студентов. Ключ к системе в старой версии сайта такой же: 186375tt822 Система «Интернет-тренажеры в сфере образования», представляющая собой программный комплекс, в основу которого положены оригинальная... |
| Тесты, задания и контрольные вопроы по дисциплине «Материаловедение.... Материалы для оценки уровня знаний (тесты, задания и контрольные вопроы) по дисциплине | | Правила Рейтингового контроля знаний студентов факультета инженерной... Рейтинговая система оценки знаний студентов принята ректората университета от 28. 12. 2009 г |
| Положение о балльно-рейтинговой системе оценки успеваемости студентов дневного отделения Минобразования №2654 от 11. 07. 02, а также в соответствии с приказом Министерства образования и науки РФ №40 от 15. 02. 2005 г.... | | Ученым Советом " утверждаю" Целью использования балльно-рейтинговой системы оценки успеваемости студентов является обеспечение объективности процедуры оценки... |
| Программа по формированию навыков безопасного поведения на дорогах... Результаты обучения, приведённые в рабочей программе, сформулированные в деятельностной форме и полностью соответствуют стандарту.... | | Методические подходы оценки плодородия садовых агроценозов западного предкавказья бузоверов А. В Ат. Разработаны методические подходы к проведению почвенного мониторинга в садах и установлены показатели (тесты) оценки плодородия... |
