Учебно-методический комплекс дисциплины «Проектирование и экспертиза образовательных систем»

Тема: Количественная оценка качественных характеристик Цель: познакомиться с методом экспертных оценок. Теоретические сведения Качественными называются показатели, не имеющие определенных единиц измерения. Квалиметрия – это наука об измерении и количественной оценке качественных показателей. В основе квалиметрии лежат 4 основных исходных положения: 1. Качество зависит от ряда свойств, образующих древо качества, т.е. необходимо найти составляющие элементы данного качества, их оценить, затем дать оценку всему показателю. 2. Любое качество или его элементы можно измерить с помощью экспертов, применив специально разработанные шкалы. 3. Каждое свойство (качество) определяется двумя числами: относительным показателям К и вместимостью М. Относительный показатель характеризует выявленный уровень измеряемого свойства, а вместимость – сравнительную важность разных показателей. 4. Сумма вместимостей свойств на каждом уровне равна 1. В свою очередь методические приемы квалиметрии делятся на 2 группы: 1) эвристические (интуитивные) основаны на экспертных оценках и анкетировании; 2) инструментальные основаны на применении технических средств. 1. Метод экспертных оценок Под экспертными методиками понимают комплекс логических и математико-статистических процедур, направленных на получение от специалистов информации, ее анализ и обобщение с целью подготовки и выбора рациональных решений. Экспертные методы применимы в том случае, когда выбор и обоснование оценки результата не могут быть выполнены на основании точных измерений и расчетов. Экспертной называется оценка, получаемая путем опроса мнений специалистов. Экспертиза бывает индивидуальной и групповой. Существует несколько видов информации, используемой при работе с экспертной группой: 1. Эксперт высказывает мнение в виде соответствующего числа в предложенных рамках, т.е. дает оценку. 2. Эксперт может проранжировать участников, т.е. расставить их по местам. 3. Эксперт может разбить участников всей совокупности на отдельные подклассы. 4. Эксперт может попарно сравнивать оцениваемые объекты и сообщает какой из них лучше. Требования, предъявляемые к экспертам: эксперт должен быть высококвалифицированным, компетентным, беспристрастным специалистом с хорошо развитой интуицией, имеющим широкие взгляды и независимость суждений. Существует два подхода к выбору экспертов: 1. Проводятся специальные экзамены, применяется самооценка экспертов. 2. Определяется эффективность деятельности экспертов. Различают абсолютную и относительную эффективность. Абсолютная – отношение правильно высказанных мнений к общему числу высказываний эксперта. Относительная – отношение абсолютной эффективности к средней абсолютной эффективности группы экспертов. Проведение экспертизы включает в себя следующие этапы: 1. Формирование цели экспертизы. 2. Подбор экспертов. 3. Выбор методики проведения опроса. 4. Обработка полученной информации, в том числе проверка согласованности достоверности индивидуальных экспертных оценок. Пример 12.1. Определить методом предпочтения места спортсменок в показательных выступлениях по художественной гимнастике (10-ти балльная система). Решение: С у д ь и № Ф.И.О. 1 2 3 4 5 е Место 1 Иванова Г.И. 10 9 10 10 10 49 II 2 . . . 8 7 8 7 7 37 IV 3 . . . 6 6 5 5 6 28 V 4 . . . 9 9 9 8 8 43 III 5 . . . 10 10 10 10 10 50 I 6 . . . 5 5 4 4 3 21 VII 7 . . . 6 4 5 7 5 27 VI Пример. Определить методом попарного сравнения места спортсменок-гимнасток (этот метод основан на попарном сравнении всех факторов). При этом устанавливается в каждой сравниваемой паре объектов наиболее лучший спортсмен (он оценивается 1 баллом, а второй, наиболее худший – 0 баллов). Решение: 2. Метод анкетирования Анкетированием называется метод сбора мнений посредством заполнения анкет. Анкетирование наряду с интервью и беседой относится к методам опроса. Методы опроса позволяют получать информацию о мнениях людей, мотивах поведения, намерениях и т.д., то есть обо всем, что пока еще не может быть установлено при помощи инструментальных методов измерения. По отношению к методу экспертных оценок анкетирование играет служебную роль, но имеет и самостоятельное значение, если речь идет о сборе массовых мнений. В отличие от интервью и беседы анкетирование предполагает письменные ответы лица, заполняющего анкету – респондента (англ. respondent – отвечающий), на систему стандартизированных вопросов. Применяется несколько вариантов анкетирования: групповое и индивидуальное, очное и заочное, персональное и анонимное. Анкета как правило, состоит из двух частей: демографической и основной. Вопросы демографического характера рекомендуется помещать в конце анкеты. В основную часть анкеты включают следующие вопросы: открытые (свободные) и закрытые, безусловные и условные, прямые и косвенные. От составителя анкеты требуется высокая профессиональная компетентность, безупречная грамотность, такт. Вопросы должны быть лаконичны и точны, они должны соответствовать образовательному уровню респондентов. Желательно в начале анкеты расположить нетрудные вопросы, которые могли бы заинтересовать респондентов, а основную часть вопросов «по существу» поместить в середину анкеты. Качество анкетирования повысится, если до начала опроса подвергнуть составленную анкету экспертной оценке и усовершенствовать ее в соответствии с высказываниями экспертов. В последнее время квалиметрические методы (экспертиза, анкетирование и др.) все чаще используются для решения оптимизационных задач (оптимизация соревновательной деятельности, тренировочного процесса). Современный подход к задачам оптимизации связан с имитационным моделированием соревновательной и тренировочной деятельности. В отличие от других видов моделирования при синтезе имитационной модели наряду с математически точными данными используется квалитативная информация, собираемая методами экспертизы, анкетирования и наблюдения. Например, при моделировании соревновательной деятельности лыжников нельзя точно предсказать коэффициент скольжения. Его вероятную величину можно оценить путем опроса специалистов по смазке лыж, знакомых с климатическими условиями и особенностями трассы, на которой будут проходить соревнования. Приложение ПРИЛОЖЕНИЯ Рекомендации для организации и проведения экспертизы I. Краткий справочный материал Экспертиза – целенаправленная деятельность по выявлению состояния, уровня развития, причин, обусловивших данное состояние, и условий для дальнейшего развития состояния системы. Методы проведения экспертизы: 1. Морфологический – по нескольким показателям одновременно. 2. Монологический – по одному показателю в течение длительного времени. 3. Групповой – несколькими экспертами одновременно с выведением средней оценки. 4. Индивидуальный – одним экспертом. 5. Статистический - набором информации, организованной определенным способом с применением математических операций. 6. Комбинированный – составленный из нескольких методов. II. Программа проведения экспертной оценки деятельности методических объединений педагогов Цель: подготовить материалы для итогового педсовета. Задачи: 1. Выявить соответствие или несоответствие задач, решаемых методическими объединениями и задач, поставленных перед коллективом в образовательной программе и сформулированных в решениях педагогических советов. 2. Выявить соответствие или несоответствие форм организации работы в методических объединениях запросам и интересам педагогов. 3. Выявить роль и значение методического совета в структуре работы школы. Материалы и документы, необходимые для проведения: образовательная программа школы, положения о методическом совете и методических объединениях, приказы об организации методической службы, выписки из решений педагогических советов, аналитические записки о деятельности методических объединений, данные социологических исследований, проведенных заранее, планы, книги учета проделанной работы, протоколы заседаний методических объединений, материалы с посещенных уроков и внеклассных мероприятий, другие документы. Рекомендуемая шкала оценок. 0-2 балла – несоответствие, отсутствие признака, недостаточность его проявления 3-4 балла – слабое проявление признака, показателя 5-6 баллов – достаточное проявление признака, показателя 7-8 баллов - высокий уровень проявления признака, показателя 9-10 баллов – полное соответствие Примерный перечень показателей. 1. Соответствие задач, выдвинутых МО, стратегическим задачам, школы (из сравнения задач программы и МО). 2. Соответствие планов МО поставленным задачам. 3. Реализация планов (из сравнения планов и отчетов). 4. Соответствие форм работы запросам педагогов. 5. Соответствие направлений работы МО стратегическим целям школы. 6. Выполнение управленческой функции методическими службами школы (распоряжения, решения). 7. Выполнение методическими объединениями организационной функции (проведение обучения, проведение открытых мероприятий). 8. Выполнение коррекционной функции (посещение уроков, разработка рекомендаций) 9. Выполнение контрольно-аналитической функции (анализ уроков, внеклассных мероприятий, работы за предыдущий период). III. Макет аналитической записки по результатам экспертизы. Аналитическая записка, составленная по результатам деятельности МО_(указать какого)_____________. Экспертная группа в составе: 1. _____________________________________ 2.  _____________________________________ 3.  _____________________________________ провела анализ деятельности МО____________________ методом ________________________. В результате установлено, что уровень результатов деятельности можно признать ___________. Данный вывод основан на оценках по показателям, указанным в таблице и рейтинговому баллу ________, что соответствует данному уровню по ______балльной шкале оценок, принятой экспертами. В ходе экспертизы выяснено, что проявилось несоответствие (какое и в чем), низкие оценки получились по показателям (указать каким), выявилось противоречие между (указать между чем) и т.д. Причинами этого можно считать следующее: _________________________________________. Для устранения обозначенных причин необходимо выполнить следующее: _______________________________________________________________________(указать ряд условий, которые могут обеспечить более полную реализацию признака). Следует отметить ряд положительных моментов ____________________________________. Продолжить работу по совершенствованию ________________________________________. Руководитель экспертной группы: (Ф.И.О.) Члены экспертной группы: (Ф.И.О.) Дата проведения АНКЕТА Уважаемые коллеги! Для изучения отношения педагогов к осуществлению личностно-ориентированного подхода в образовательном пространстве школы ответьте, пожалуйста, на следующие вопросы. 1. Изучены ли Вами основные принципы, лежащие в основе построения личностно-ориентированных технологий в образовании? 2. Стали ли эти идеи и подходы для Вас значимыми? 3. Проведена ли Вами диагностика личного опыта ученика, осмыслена ли значимость того, через что Вы воздействуете на ученика? 4. Определены ли Вами средства для развития способностей учеников? 5. Владеете ли Вы методикой проведения диагностических процедур и приемами отслеживания результатов? 6. Чего больше всего не хватает Вам в работе: знаний, технических средств, времени или еще чего-то? (дополните). 7. Ранжируйте следующие утверждения: Для успешной работы педагог должен быть не просто знающим теорию человеком, а Честным и добросовестным Добрым и отзывчивым Управляющим деятельностью своих учеников Знающим, как передать ученикам свои знания Умеющим найти такие ключи к ученику, которые бы включили его в процесс обучения, заставили самообразовываться 8. Что бы вам хотелось изменить в школе: Упразднить кабинетную систему Заменить 5-балльную систему оценки на 12-балльную Перейти на технологию модульного обучения Создать какие-либо новые организационные структуры или возродить старые Изменить что-либо в деятельности структур (конкретно каких) 9. Что бы вам хотелось изменить в деятельности методических объединений школы? Ничего, просто выполнять намеченное Больше изучать теоретических вопросов Больше проводить открытых уроков Организовать конкурс «Учитель года» Стало скучно, пора что-то менять Организовать систематическую учебу по типу курсовой переподготовки Включить вопросы по психологии в план работы Нужны какие-нибудь новые формы работы, например, клубная межпредметная работа Давайте не будем объединяться, лучше отвечать самому за себя 10. Нужен ли школе методический совет и в чем его роль? Для направления деятельности методических объединений Для проведения экспертизы нововведений Для выработки решений, связанных с развитием школы Для диагностики состояния педагогической системы Для обеспечения учебно-воспитательного процесса Для пропаганды новых педагогических идей Для _________________________________ (дополнить) Не нужен СПАСИБО! Рекомендации по обработке анкетных данных

Похожие:

	Учебно-методический комплекс дисциплины Проектирование и экспертиза... Программа предназначена для преподавателей, ведущих данную дисциплину, и студентов, участвующих в процессе изучения дисциплины		Учебно-методический комплекс дисциплины «Товароведение и экспертиза хозяйственных товаров» «Товароведение и экспертиза товаров» (в области таможенной деятельности) в соответствии с требованиями гос впо по данной специальности...
	Учебно-методический комплекс дисциплины ««Товароведение и экспертиза строительных материалов» «Товароведение и экспертиза товаров» (в сфере производства и обращения непродовольственных товаров и сырья) в соответствии с требованиями...		Учебно-методический комплекс дисциплины «Товароведение и экспертиза ювелирных товаров» «Товароведение и экспертиза товаров» (в сфере производства и обращения непродовольственных товаров и сырья) в соответствии с требованиями...
	Учебно-методический комплекс дисциплины проектирование информационных... Основная цель изучения курса “Исследование систем управления” приобретение знаний, формирование и развитие умений и навыков исследовательской...		Учебно-методический комплекс дисциплины «проектирование информационных систем» Специальность 080801. 65 «Прикладная информатика (в экономике)» Форма подготовки очная Филиал двфу в г. Арсеньеве
	Учебно-методический комплекс дисциплины «Товароведение и экспертиза рыбы и рыбных товаров» Гос впо по данной специальности и положением об учебно-методических комплексах дисциплин образовательных программ высшего профессионального...		Учебно-методический комплекс по специальности 080801  «Прикладная информатика в геодезии» Проектирование информационных систем: Учеб метод комплекс/ В. П. Седякин – М.: МиигаиК, 2010
	Учебно-методический комплекс дисциплины проектирование информационных систем Формы обучения очная, заочная (полная), заочная (сокращенная), очно-заочная (вечерняя)		Учебно-методический комплекс дисциплины «Поведение потребителей» «Товароведение и экспертиза товаров» (по областям применения) в соответствии с требованиями гос впо по данной специальности и положением...
	Учебно-методический комплекс дисциплины «Безопасность жизнедеятельности» «Товароведение и экспертиза товаров» (по областям применения) в соответствии с требованиями гос впо по данной специальности и положением...		Учебно-методический комплекс дисциплины «Теория систем и системный анализ» Учебно-методический комплекс дисциплины включает следующие документы и материалы
	Учебно-методический комплекс дисциплины для студентов третьего курса... Учебно-методический комплекс дисциплины для студентов третьего курса по специальности 270115. 65 «Экспертиза и управление недвижимостью»...		Учебно-методический комплекс дисциплины «Монтаж и наладка систем электроснабжения» Учебно-методический комплекс составлен в соответствии с требованиями государственного образовательного стандарта высшего профессионального...
	Учебно-методический комплекс учебной дисциплины «проектирование информационных... Программа соответствует требованиям гос впо от 23 декабря 2005 г по направлению подготовки 230200 – Информационные системы, специальности...		Учебно-методический комплекс дисциплины «Психологические теории проектирования... Контрольный экземпляр находится на кафедре теории и методики профессионального образования