Глава 1. Алгоритмизация процесса оценки компетентности обучающегося Современные подходы к решению задач оценки знаний обучающихся
Новые представления об образовании сформировал Ян Амос Коменский, в работах которого содержится основная мысль, воплощенная в наши дни в концепции непрерывного образования. Сам термин «непрерывное образование» впервые употребляется в 1968 году в материалах ЮНЕСКО, а после опубликования комиссии под руководством Э. Фора в 1972 году принято решение ЮНЕСКО, согласно которому непрерывное образование признается основным принципом, «руководящей конструкцией» для нововведений или реформ образования во всех странах мира. Значимость этой идеи, в общечеловеческом и философском контексте, очень велика, а главный смысл заключается в обеспечении человеку постоянного развития, совершенствования, творческого обновления на протяжении всей жизни, обеспечивая, таким образом, процветание всего общества. Основа реализации идей непрерывного образования заложена в индивидуализации обучения. При индивидуальном подходе к обучению максимально учитывается структура личности. Важной составляющей индивидуального обучения является контроль полученных знаний. Контроль результатов обучения является одной из областей образовательной деятельности, требующей активного использования вычислительных средств. Причиной этому является стремительный рост быстродействия технических средств, уменьшение цен на вычислительную технику, появление качественных и мощных систем программирования увеличило потребность в системах, позволяющих объективно, быстро и надежно оценивать знания обучающихся, предлагая интересные формы взаимодействия с ними.
Использование контроля результатов обучения, с применением современных средств информационных технологий в процессе обучения, по сравнению с другими методами контроля, имеет ряд очевидных преимуществ, В качестве основных преимуществ можно выделить: высокую степень стандартизации, объективность оценки результатов, удобную количественную форму выражения результатов, повышенную устойчивость к фальсификациям, высокую скорость обработки результатов, единство требований ко всем учащимся, исключение субъективизма при оценке результатов. Так, например, удобство в наличии количественных показателей выражается в возможности сравнения знаний и умений одних обучаемых с другими, или отслеживании динамики усвоения знаний одним учащимся в процессе обучения.
Основу методов измерения и оценки результативности проведения контроля в образовательном процессе учебных заведений, базирующемся на использовании современных технических средств, могут составлять различные подходы [22] На порядок и форму измерений и оценки могут оказать влияние имеющиеся средства обучения и контроля. В отдельных ситуациях может быть использована универсальная технология, предлагаемая для реализации контроля.
Основным критерием и подходом к оцениванию результатов обучения отдельного учащегося в рамках каждого вида контроля является сравнение реальных знаний, умений и навыков учащихся с требованиями, оговоренными в описании проведения текущего, рубежного и заключительного контроля качества освоения учебного материала [20]. Сравнение результатов обучения различных участников между собой и выставление оценок с учетом относительной результативности нежелательно.
Проведение текущего контроля происходит на аудиторных занятиях, а также на индивидуальных консультациях. При этом оцениваются:
· уровень теоретической и практической подготовки учащихся;
· творческая активность учащихся;
· качество и степень самостоятельности решенных в ходе тестирования задач;
· готовность учащегося к выполнению тестовой работы;
· своевременность сдачи отчета и выполненных практических работ.
Текущий контроль осуществляется в повседневной учебной работе и выражается в систематических наблюдениях за учебно-познавательной деятельностью обучаемых на каждом занятии [20]. Основное его назначение - оперативное получение объективных данных об уровне знаний обучаемых и качестве организации и проведения занятия. Отличительной особенностью текущего контроля является его проведение на всех этапах изучения темы или раздела: ознакомления с учебным материалом, формирования и развития знаний и умений, их закрепления и углубления. В процессе текущего контроля от обучаемых можно требовать знания только на том познавательном уровне, какой предусматривается определенным этапом овладения учебным материалом. А выявление и оценка знаний и умений обучаемых, усвоенных не на одном, а на нескольких занятиях, так же обеспечиваются корректирующим контролем.
Рубежный контроль осуществляется в рамках контрольных работ [Ковтун]. Рубежный контроль осуществляется по окончании периода обучения, его также рекомендуется проводить в тестовой форме. Рубежный контроль позволяет проверить и оценить знания обучаемых по каждой теме учебной дисциплины, выяснить, как усвоены понятия, положения существенные связи и отношения между явлениями и процессами, охваченными одной темой. Рубежный контроль, являясь разновидностью корректирующего контроля, особенной его формой, представляет собой качественно новую систему проверки и оценки знаний тесно связанную с проблемным обучением.
Проведение рубежного контроля происходит за определенный учебный отрезок времени. Назначение данного вида контроля - проверка усвоения и оценка результатов каждой темы, постоянный мониторинг педагогом работы всей группы и отдельных обучаемых. По результатам этого контроля преподаватель выясняет, готовы ли обучаемые к усвоению последующего учебного материала.
Одной из форм заключительного контроля является проведение компьютерного теста в рамках экзамена или зачета в конце изучения курса с целью выявления, насколько полны и глубоки приобретенные обучаемыми знания, соответствуют ли они их содержанию обязательного минимума, насколько полно могут быть использованы в практической деятельности и при изучении нового материала.
Как правило, заключительная проверка и оценка знаний, навыков, умений обучаемых проводится в конце соответствующего периода обучения. Ее цель - определить объем и глубину усвоенных знаний и умений, их прочность и осознанность. Итоги проверки служат основанием для оценки успеваемости обучаемых, которая характеризует степень овладения обучаемыми знаниями, навыками и умениями в соответствии с требованиями учебной программы.
Заключительный контроль производится накануне перехода к новому этапу или ступень обучения. Его задача - зафиксировать минимум подготовки, который обеспечивает дальнейшее обучение. Знания по итогам изучения темы могут быть оценены положительно, если обучаемые овладели всеми основными элементами изучаемого материала.
Контроль результатов обучения является одним из основных элементов оценки качества образования. Преподаватели постоянно контролируют своих обучающихся путем устных опросов во время занятий и путем оценки различных письменных работ. Для проведения текущего контроля используются разнообразные формы его организации. Наиболее распространенными являются письменные проверочные работы.
Важной формой организации учебной деятельности обучаемых является самостоятельная работа [22].. Данная работа может выполняться на занятиях и во внеучебное время. По времени самостоятельная работа непродолжительная и является письменной проверкой знаний и умений обучаемых по небольшой теме курса. Целями этой работы, обычно, являются: проверка усвоения способов решения задач; осознание понятий; ориентировка на конкретные правила и закономерности. Если самостоятельная работа проводится на начальном этапе становления умения и навыка, то она не оценивается отметкой. Вместо нее преподаватель дает аргументированный анализ работы учащихся, который он проводит совместно с ними. Если умение находится на стадии закрепления, автоматизации, то самостоятельная работа может оцениваться отметкой. Возможно использование и динамичных самостоятельных работ, рассчитанных на непродолжительное время.
При рубежном контроле могут использоваться письменные работы, которые используются во всех видах контроля и осуществляются как во время занятий, так и вне занятий (выполнение домашних заданий). Домашние контрольные работы, на выполнение которых отводится 10-15 дней, охватывают большой раздел учебной программы, требуют работы с литературой и другими материалами.
Достижения обучаемых наиболее полно могут оцениваться при итоговом контроле [22]. В ходе итогового контроля всегда должна проводиться проверка усвоения системы знаний и умений. Необходима подготовка таких заданий или вопросов, ответы на которые предполагают усвоение максимального числа исходных понятий и действий. Итоговый контроль предусматривает, что задания должны обеспечивать продуктивную работу обучающихся. Проверка умений осуществляется с помощью практических заданий. В процессе выполнения подобных задач обучающийся даст обоснование своего решения, которое позволяет установить, насколько он владеет теоретическими знаниями, лежащими в основе данного способа деятельности, т.е. одновременно с проверкой умений осуществляется проверка знаний.
При итоговом контроле используется и устный опрос, который устанавливает непосредственный контакт между преподавателем и обучаемым. В процессе контакта преподаватель получает информацию об усвоении обучаемыми дисциплины. При проведении итоговой проверки знаний и умений целесообразнее всего проводить индивидуальный опрос, который предполагает постановку вопросов требующих развернутого ответа. Вопросы должны быть четкими, ясными, конкретными, иметь прикладной характер, охватывать основной изученный материал.
Заключительная часть устного опроса – подробный анализ ответов, где отмечаются положительные стороны, указываются недостатки, делается вывод о том, как изучен материал [22]. В практике обучения, в настоящее время, всё чаще применяется устная проверка, и это положительный момент. Контроль должен проходить в том же плане, что и обучение, поэтому для того чтобы проверить умения и навыки формирования аргументированных ответов, следует применять устные приёмы проверки.
Широко применяемые письменные формы контроля имеют некоторые преимущества. Во-первых, ими можно охватить одновременно всех обучаемых; во-вторых, гораздо удобнее обрабатывать письменные работы, нежели устные ответы. Ошибки в письменных работах легче квалифицировать и анализировать, поскольку действия обучаемого точно зафиксированы, в то время как при устном ответе часто говорят предложение, затем тут же его исправляют, не заканчивают одно предложение и начинают другое и т.д. Но письменный контроль не может быть использован для проверки всех умений, несмотря на названные выше его достоинства. Очень трудно проверить в письменной форме компетенции, связанные с умением вести беседу или высказываться по теме и другие. Поэтому прибегать к письменной проверке рекомендуется с целью контроля умений и навыков письма, а также для контроля умений переводить научно – популярную литературу со словарем [22].
Появившись на заре цивилизации [3,7,58], контролирование и оценивание являются непременными спутниками высшей школы, сопровождают ее развитие. Тем не менее, по сей день идут жаркие споры о смысле оценивания, его технологии. Как и сотни лет назад, педагоги спорят, что должна показывать оценка, должна ли она быть индикатором качества — категорическим определением успеваемости обучаемого или же, наоборот, должна существовать как показатель преимущества и недостатков той или иной системы (методики) обучения.
На сегодня в теории педагогики [7,22] еще нет установившегося подхода к определению понятий "оценка", "контроль", "проверка", "учет" и других, с ними связанных. Нередко они смешиваются, взаимозамещаются, употребляются то в одинаковом, то в различном значении. Для них общим родовым понятием выступает "контроль", означающий выявление, измерение и оценивание знаний, умений обучаемых. Выявление и измерение называют проверкой. Поэтому проверка — составной компонент контроля, основной дидактической функцией которого является обеспечение обратной связи между преподавателем и обучающимися, получение педагогом объективной информации о степени освоения учебного материала, своевременное выявление недостатков и пробелов в знаниях. Проверка имеет целью определение не только уровня и качества обученности обучающегося, но и объема учебного труда последнего. Кроме проверки, контроль содержит в себе оценивание (как процесс) и оценку (как результат) проверки. В ведомостях успеваемости, базах (банках) данных и т.д. оценки фиксируются в виде отметок (условных обозначений, кодовых сигналов, "зарубок", памятных знаков и т.п.).
Одним из вариантов решения проблемы контроля за результатами обучения являются технологии рейтинговой системы контроля качества усвоения учебного материала. Современными требованиями подходов в обучении студентов является четко выраженная направленность учебного процесса на развитие у обучающихся навыков логического мышления при принятии решений, связанных с характером предстоящей профессиональной деятельности. Реализация данной задачи связана с прогрессивными методами контроля, к которым относится рейтинговый метод, как способ оценки знаний, умений и навыков – компетенций.
Рейтинговая система контроля учитывает всю активную деятельность обучающихся, связанную с приобретением знаний, умений и других показателей, формирующих личностные качества студента, как-то: участие в научной работе на кафедре, написание реферата, участие в конкурсах научно-технического творчества, выступление с докладом на студенческой научной конференции и др.
Педагогическое тестирование как один из методов контроля усвоения обучаемыми знаний, умений и навыков обладает важными преимуществами перед традиционными методами контроля знаний. Вот некоторые из них [3,22]:
1. Более высокая, чем в традиционных методах, объективность контроля. Обычно на оценку, получаемую студентами, влияют, помимо уровня его учебных достижений, многие другие факторы: личность преподавателя и самого студента, их взаимоотношения, строгость или, наоборот, либеральность преподавателя и т.п. В оценке, выставляемой на основе традиционных методов контроля, оказывается существенным субъективный компонент. Это подтверждается тем известным фактом, что за один и тот же ответ разные преподаватели могут поставить разные отметки. В тесте такое влияние субъективных факторов исключается. Если тест достаточно качественный, то получаемая оценка может рассматриваться как объективная.
2. Оценка, получаемая с помощью теста, более дифференцирована. В традиционных методах контроля пользуются четырехбалльной шкалой ("отлично", "хорошо", "удовлетворительно", " неудовлетворительно ").
Результаты тестирования, благодаря особой организации тестов, могут быть представлены, если необходимо, в более дифференцированных шкалах, содержащих больше градаций оценки. При этом обеспечивается более высокая точность измерений учебных достижений.
3. Тестирование обладает заметно более высокой эффективностью, чем традиционные методы контроля. Тесты можно одновременно проводить на больших группах студентов. Обработка результатов для получения окончательных оценок проводится легче, быстрее, чем, скажем, проверка контрольных работ. Особенно велика экономия времени, когда в форме тестирования проводятся экзамены.
Конечно, у тестирования как метода контроля есть и свои ограничения. Легче всего с помощью тестов проверять овладение просто организованным учебным материалом. Проверка глубинного понимания предмета, овладения стилем мышления, свойственным изучаемой дисциплине, с помощью тестов затруднена, хотя в принципе возможна. Отсутствие непосредственного контакта со студентом, с одной стороны, делает контроль более объективным, но, с другой стороны, повышает вероятность влияния на результат других случайных факторов. Например, невозможно проконтролировать случайные ошибки студента, вызванные невниманием или неправильным пониманием задания. Существуют довольно изощренные методы, позволяющие в значительной степени преодолеть эти недостатки.
Ограничения тестирования как метода контроля необходимо хорошо осознавать, чтобы правильно применять тесты. В ряде случаев наилучший эффект дает сочетание тестов с традиционными методами контроля. Достоинство тестов заключается еще в том, что можно оценить степень вероятности влияния на результат случайных факторов и, следовательно, знать, насколько точен полученный результат.
Поскольку рейтинг — это шкала достижений студентов, то совершенно очевидно, что должен быть стандартный инструмент измерения. Таким инструментом является правильно построенный и хорошо составленный тест, который соответствует не только предмету обучения, но и его задачам, является педагогическим тестом достижений. Обычно в тесте нет заданий, на которые можно найти прямой ответ в учебнике, поэтому возможность списывания практически исключена или бессмысленна.
Модульно-рейтинговая система обучения [20] может служить логическим завершением идеи постоянной комплексной оценки учебной деятельности студента. Модульно-рейтинговая система – это результат совмещения двух принципов.
Первый – модульная организация обучения.
Второй принцип – рейтинговая система оценки деятельности студента. Предполагалось выставление оценки по унифицированной системе баллов за каждый выполненный студентом модуль и на основании общей суммы баллов определение места студента в групповом рейтинге. В наше время обычно в рейтинг включаются и дополнительные баллы – за участие в конференциях, научные публикации, профессиональные достижения при работе студента по специальности. После изучения модуля предусматривается аттестация в форме контрольной работы, теста, коллоквиума (в наше время также выполнение кейса, представление портфолио, защита проекта и т.д.). Модульно-рейтинговая система подходит для оценки компетенции в силу того, что в балах оцениваются не только знания и навыки учащихся, но и творческие их возможности: активность, неординарность решений поставленных проблем, умения организовать группу для решения проблемы и т.д.
Каждый модуль включает обязательные виды работ – лабораторные, практические, семинарские занятия, домашние индивидуальные работы, а также дополнительные работы (участие в олимпиаде, написание реферата, выступление на конференции, участие в научно-исследовательских работах студентов, решение задач повышенной сложности, выполнение комплексных усложненных лабораторных работ).
Таким образом, рейтинг служит развитию и закреплению системного подхода к изучению дисциплины. Это, пожалуй, наиболее важная положительная сторона рейтинга, кроме тех, что отмечены выше.
Тест представляет собой научно обоснованный метод измерения интересующих качеств и свойств личности. В зависимости от предмета измерения выделяются тесты педагогические, психологические, социологические, социально-психологические, культурологические и др.
Процесс тестирования, приведенный в работе [26], начинается с того, что испытуемому дается инструкция, как работать с тестом. После этого выдаются тестовые задания. Они могут или читаться вслух перед группой испытуемых, или раздаваться испытуемым в виде брошюры, или, при компьютерном тестировании, выдаваться на экран дисплея. Испытуемые дают ответы в соответствии с инструкцией — или на специальных бланках для ответов, или на дисплее компьютера.
Тесты являются той формой контроля, которая наиболее просто поддается автоматизации, и это объясняет повышенный интерес к этой форме как со стороны обучающих, так и со стороны разработчиков компьютерных систем тестирования.
Среди форм проведения автоматизированного контроля с управляемыми параметрами качества тестирование является одной из наиболее технологичных. Ни одна из используемых форм контроля знаний с тестированием не может сравниться.
Учебными заведениями развитых стран внедрение и совершенствование тестов шло быстрыми темпами. Широкое распространение получили диагностические тесты успеваемости, использующие форму альтернативного выбора правильного ответа из нескольких правдоподобных, написания очень краткого ответа (заполнения пропусков), дописывания букв, цифр, слов, частей формул и т.п. С помощью этих несложных заданий удается накапливать значительный статистический материал, подвергать его математической обработке, получать объективные выводы в пределах тех задач, которые предъявляются к тестовой проверке. Тесты печатаются в виде сборников, прилагаются к учебникам, распространяются на компьютерных дискетах.
В массовую практику все больше проникают тесты обученности, т.к. с их помощью эффективно обеспечивается текущий, рубежный и итоговый контроль знаний, умений, учет успеваемости, академических достижений. Но не все необходимые характеристики усвоения можно получить средствами тестирования. Такие, например, показатели, как умение конкретизировать свой ответ примерами, знание фактов, умение связно, логически и доказательно выражать свои мысли, некоторые другие характеристики знаний, умений, навыков диагностировать тестированием невозможно. Это значит, что тестирование должно обязательно сочетаться с другими (традиционными) формами и методами проверки. Правильно действуют те педагоги, которые, используя письменные тесты, дают возможность обучаемым устно обосновывать свои ответы. В рамках классической теории тестов уровень знаний испытуемых оценивается с помощью их индивидуальных баллов, преобразованных в те или иные производные показатели. Это позволяет определить относительное положение каждого испытуемого в нормативной выборке.
Тесты представляют собой новые формы различного контроля и включают в себя множество вариаций. По уровням сложности выделяются [20]:
тесты первого уровня;
тесты второго уровня;
тесты третьего уровня;
тесты четвертого уровня.
Эти уровни тестов имеют следующую интерпретацию.
Первый уровень (знакомство) - тесты по узнаванию, т.е. отождествлению объекта и его обозначения (задания на опознание, различение или классификацию объектов, явлений и понятий) [20].
Второй уровень (репродукция) - тесты-подстановки, в которых намеренно пропущено слово, фраза, формула или другой какой-либо существенный элемент текста, и конструктивные тесты, в которых учащимся в отличие от теста-подстановки не содержится никакой помощи даже в виде намеков и требуется дать определение какому-либо понятию, указать случай действия какой-либо закономерности и т.д. [20].
Третьему уровню соответствуют задания, содержащие продуктивную деятельность, в процессе которой необходимо использовать знания-умения. Тестами третьего уровня могут стать нетиповые задачи на применение знаний в реальной практической деятельности. Условия задачи формулируются близкими к тем, которые имели место в реальной жизненной обстановке [20].
Тесты четвертого уровня – это проблемы, решение которых есть творческая деятельность, сопровождающаяся получением объективно новой информации. Тестами четвертого уровня выявляется умение учащихся ориентироваться и принимать решения в новых, проблемных ситуациях [20].
Существуют другие виды тестов для решения задач обучения и они учитывают наработки из смежных областей образовательной деятельности [20].
Тесты действия (performance tests) . Термин взят из психологии, где тесты действия понимаются как процедура, ориентирующая испытуемого на выполнение какого-нибудь практического действия (практические испытания). В педагогике или при приеме на работу [20] тесты действия распространены как проверка реальных профессиональных умений (напечатать на машинке или на компьютере текст, откорректировать газетную статью, измерить давление пациенту и т.д. Они предназначены еще и для выявления умений выполнять работу с механизмами, материалами, инструментами. Дают возможность проверить не только уровень овладения навыком, но и оценить различные качества личности и уровень формирования сопутствующих компетенций.
Ситуационные тесты. Требуют не произвести реальное действие, а сымитировать его [20]. При их проведении не является необходимым наличие реальных механизмов, полевых производственных условий (реальных пациентов и т.п.). Простейшая форма – метод инцидента. Испытуемым излагается проблемная ситуация, связанная с их будущей профессиональной деятельностью и предлагается принять быстрое решение (например, студенту педвуза – что делать, если ученик не готов к уроку или нагрубил учителю?). Время решения задачи резко ограничено, при оценке учитывается не только правильность ответа, но и быстрота реакции, которая имеет важное значение в реальной ситуации. Более сложная форма – анализ конкретной ситуации. Испытуемым предлагается обширная информация о конкретной ситуации (например, студентам-экономистам предлагается смоделировать развитие производства при росте цен на сырье). Требуется провести анализ ситуации, при этом испытуемый должен учитывать, что часть информации – лишняя, но есть возможность добыть дополнительную информацию (воспользовавшись справочником или задав вопрос). После анализа принимается мотивированное решение. Работа может проводиться как в группе, так и индивидуально.
Методика последовательных ситуаций [20]. Более сложная форма ситуационного теста. Задача разворачивается во времени и решается поэтапно; переход к следующему этапу возможен только в случае правильного ответа на вопросы предыдущего этапа, условия следующего этапа определяются в зависимости от варианта ответа на предыдущем этапе. Например, при определении стратегии лечения «больного» студентами медиками если избирается путь оперативного вмешательства, то на следующем этапе студент сталкивается с одним набором проблем, если избирается путь консервативного медикаментозного лечения – с другим.
Деловая (ролевая) игра [20]. Является наиболее сложной формой ситуационного теста, использующей метод моделирования профессиональной деятельности, при котором студенты не просто теоретически выбирают пути решения предложенных задач, а «проигрывают» их в своем поведении. Например, они проводят «производственное совещание», выступая в роли директора предприятия, председателя профсоюза, менеджера и т.д. Часто этот метод предполагает создание нескольких команд, которые соревнуются друг с другом в решение той или иной задачи. Деловая игра требует не только знаний и навыков, но и умения работать в команде, находить выход из неординарных ситуаций и т.д.
Портфолио. Понимается как способ фиксирования, накопления и оценки индивидуальных достижений [20]. Слово «портфолио» возникло в эпоху Возрождения, так итальянские архитекторы называли папки, в которых приносили на суд заказчика свои строительные проекты. Начиная с 1960-х гг. в американской педагогике портфолио стали называть также папки индивидуальных учебных достижений учащихся. Они могут содержать их рефераты, сочинения, эссе, решения задач – все, что свидетельствует об уровне образования и духовной эволюции учащегося. Выделяются три основные типа портфолио:
1. Портфолио документов – портфель сертифицированных (документированных) индивидуальных образовательных достижений.
2. Портфолио работ – собрание различных творческих, проектных, исследовательских работ учащегося, а также описание основных форм и направлений его учебной и творческой активности: участие в научных конференциях, конкурсах, учебных лагерях, прохождение элективных курсов, различного рода практик, спорт. и худож. достижений и др.
3. Портфолио отзывов – включает оценку обучающимся своих достижений, проделанный им анализ различных видов учебной и внеучебной деятельности и её результатов, резюме, планирование будущих образоват. этапов, а также отзывы, представленные преподавателями, родителями, возможно, сокурсниками, работниками системы образования и др.
В приложении 1 рассмотрен подход к оценке научно-исследовательской работы. Результаты научной деятельности могут также служить для оценки компетентности.
В материалах приложения 2 изложены подходы, технологии к оценке и формированию компетенций. Показана таксономия категорий усвоения знаний, выявленная коллективом американских ученых под руководством Б. Блума
Особенности аттестации и сертификации специалистов за рубежом, на примере Германии, представлены в приложении 3.
Таким образом, рассмотренные подходы к решению задач оценки знаний обучаемых служат развитию и закреплению системного подхода к изучению дисциплины, формированию компетенций у обучаемых.
|
