Для проведения работы по методу экспертных оценок создают Рабочую группу (РГ), которая и организует по поручению ЛПР деятельность экспертов, объединенных (формально или по существу) в экспертную комиссию (ЭК).
Основные стадии экспертного опроса
Как показывает опыт проведения экспертных исследований, с точки зрения менеджера - организатора такого исследования целесообразно выделять следующие стадии проведения экспертного опроса [15].
Таблица 1.2 Основные стадии технологии проведения экспертного опроса
№
|
Диаграмма стадии технологии проведения экспертного опроса
|
Название стадии
|
Описание стадии
|
1
|
|
Принятие решения
|
Принятие решения о необходимости проведения экспертного опроса и формулировка Лицом, Принимающим Решения (ЛПР) его цели.
|
2
|
Подбор и назначение ЛПР основного состава Рабочей группы (РГ)
|
РГ включает обычно научного руководителя и секретаря. Научный руководитель отвечает за организацию и проведение экспертного исследования в целом, а также за анализ собранных материалов и формулировку заключения экспертной комиссии. Он участвует в формировании коллектива экспертов и выдаче задания каждому (вместе с ЛПР или его представителем).
|
3
|
Разработка и утверждение технического задания
|
На этой стадия решение о проведении экспертного опроса приобретает четкость во времени, финансовом, кадровом, материальном и организационном обеспечении. В РГ выделяются различные группы специалистов - аналитическая, эконометрическая (специалисты по методам анализа данных), компьютерная, по работе с экспертами (например, интервьюеров), организационная.
|
4
|
Разработка сценария проведения сбора и анализа экспертных мнений
|
Сценарий включает в себя прежде всего конкретный вид информации, которая будет получена от экспертов (тексты (слова), условные градации, числа, ранжировки, разбиения или иные виды объектов нечисловой природы), конкретные методы анализа собранной информации.
|
5
|
Подбор экспертов
|
На этой стадии РГ составляет список возможных экспертов в соответствии с их компетентностью.
|
6
|
Формирование экспертной комиссии
|
На этой стадии РГ проводит переговоры с экспертами, получает их согласие на работу в экспертной комиссии. ЛПР вычеркивает или добавляет экспертов к предложениям РГ, утверждает состав экспертной комиссии. Проводится заключение договоров с экспертами об условиях их работы и ее оплаты.
|
7
|
Сбор экспертной информации
|
Часто перед этим проводится набор и обучение интервьюеров - одной из групп, входящих в РГ
|
8
|
Анализ экспертной информации
|
Компьютерный анализ экспертной информации с помощью включенных в сценарий методов.
|
9
|
Итоговый анализ экспертных мнений
|
Итоговый анализ экспертных мнений, интерпретация полученных результатов аналитической группой РГ и подготовка заключительного документа ЭК для ЛПР.
|
10
|
Окончание деятельности РГ
|
Официальное окончание деятельности РГ, в том числе утверждение ЛПР заключительного документа ЭК, подготовка и утверждение научного и финансового отчетов РГ о проведении исследования, оплата труда экспертов и сотрудников РГ, официальное прекращение деятельности (роспуск) ЭК и РГ.
|
|
Проблема подбора экспертов является одной из наиболее сложных в теории и практике экспертных исследований. Очевидно, в качестве экспертов необходимо использовать тех людей, чьи суждения наиболее помогут принятию адекватного решения. Надо прямо сказать, что нет методов подбора экспертов, наверняка обеспечивающих успех экспертизы [15].
1.3.5. Методы информационного поиска с использованием правовых справочных информационных систем
1.3.5.1 Поиск по реквизитам
Поиск по реквизитам - поиск записей (документов), реквизиты которых удовлетворяют условиям поискового запроса [4]. Для поиска любого документа достаточно заполнить лишь два-три поля. Если точно знать, например, номер документа, то этой информации в большинстве случаев будет вполне достаточно. Удобство и простота этого способа не вызывает сомнений, но использование этого вида поиска возможно только при условии наличия точных реквизитов конкретного документа. Рассмотрим возможности использования этого вида поиска на конкретном примере. Для того, что бы найти документы, непосредственно связанные с областью наноиндустрии, нужно заполнить карточку реквизитов. Карточку реквизитов можно заполнить, используя различные поля:
Ввести дату принятия и номер документа.
Ввести название документа.
Ввести название издавшего органа, примерную дату принятия и ключевое слово.
Ввести точную фразу из текста: "документы наноиндустрии ".
1.3.5.2 Поиск по ситуации
Полнотекстовый поиск - "автоматизированный документальный поиск, при котором в качестве поискового образа документа используется его полный текст или существенные части текста". В СПС (Справочная правовая система) полнотекстовый поиск - это программно реализованный поиск слов или комбинаций символов непосредственно в тексте документов БД. Этот вид поиска осуществляется при отсутствии точных данных о документе [7].
Для увеличения скорости процесса используется информация индексного словаря. Возможность данного вида поиска основана на полнотекстовом автоматизированном индексировании документов, при котором все слова, встречающиеся в текстах, автоматически заносятся в словарь с указанием номера документа, где встретилось данное слово. Такой словарь структурирован в алфавитном порядке, но отличается от алфавитного указателя тем, что в него автоматически включаются все слова из текстов, а не специально отбираемые правовые термины. Полнотекстовый поиск по словам и словосочетаниям в СПС - это автоматический поиск, основанный на использовании словаря данного типа. Автоматическая методика отбора документов требует от библиографа и пользователя интеллектуального подхода при формировании поискового запроса, наличия нескольких вариантов запросов с использованием различных синонимичных терминов и определений [8].
Для поиска по ситуации необходимо ввести в поле поиска текст из документа.
1.3.5.3 СПС «Консультант»
Карточка поиска
Основное средство поиска документов в информационной базе (ИБ) - карточка реквизитов. Она представляет собой таблицу с некоторым количеством поисковых полей. Для каждого поискового поля в системах часто предусмотрен свой словарь, автоматически заполняемый и корректируемый по мере поступления документов в ИБ. При вводе в систему каждого нового документа его реквизиты заносятся в словарь, соответствующий определенному поисковому полю. Как правило, в карточку реквизитов, по которым осуществляется поиск, включен более широкий набор полей: орган, принявший документ, вид документа, название документа, дата принятия, номер, номер и дата регистрации в Министерстве юстиции [8].
Одним из основных условий успешного библиографического разыскания конкретного документа традиционным способом является определение органа, его принявшего, вида нормативного акта и установление даты принятия. В соответствии с этим, библиограф обращается к тому или иному источнику опубликования. СПС реализуют принципиально новые технологии работы с правовой информацией, при которых эффективность поиска напрямую не связана с точным указанием тех или иных параметров документа и не зависит от источника опубликования. Компьютерные технологии, в отличие от традиционного информационно-библиографического обслуживания, позволяют не только быстро сориентироваться в законодательстве, но и предоставить доступную систему взаимосвязанных актов. [20]
1.3.6 Анализ субъектов, осуществляющих сбор информации
Главными субъектами мониторинга рынка значимых для отрасли современных образовательных технологий являются внешние участники образовательного процесса, которых можно разбить на две категории:
первая категория (на рис. выделены тёмнозелёным цветом): потребители услуг профессионального образования, к которым относятся: население (студенты и их родители), предприятия наноиндустрии, образовательные учреждения всех уровней подготовки, выпускники образовательного учреждения;
вторая категория (светлозелёный цвет): сюда отнесены опосредованные потребители услуг профессионального образования: органы государственной и местной власти, центры занятости населения; торгово-промышленная палата, поставщики и производители учебного оборудования.
Учреждение профессионального образования
Органы исполнительной власти
Предприятие
Центры занятости населения
Торгово-промышленная палата
Учреждения профессионального образования (ВПО, СПО, НПО, ДПО)
Население
Выпускники
Производители технических средств обучения
Рисунок 1.10 Внешние участники мониторинга.
Важным аспектом является мониторинг внутренних участников образовательного процесса, в части эффективности используемых образовательных технологий. К внутренним участникам, безусловно, относятся студенты, преподаватели и руководство образовательного учреждения (рис).
Администрация
Студенты
Научно-педагогические работники
Учреждение профессионального образования
Рисунок 1.11 Внутренние участники мониторинга.
Организация по изучению и сбору информации, необходимой по предмету мониторинга, осуществляется специально обученными сотрудниками Межрегионального ресурсного образовательного центра.
Администрация Межрегионального ресурсного образовательного центра может привлекать представителей общественности на добровольных или возмездных началах, в том числе:
представителей отрасли, работодателей;
представителей Профсоюза работников образования и науки Российской Федерации.
работников муниципальных органов управления образованием;
педагогических и иных работников образовательных учреждений;
членов попечительских и наблюдательных советов;
членов официально зарегистрированных общественных объединений, а также членов органов общественной самодеятельности, действующих в области образования;
работников средств массовой информации.
За каждым субъектом, участвующим в проведении мониторинга, целесообразно четко закрепить конкретный перечень объектов мониторинга и собственные тематические и предметные поля исследования.
Органы исполнительной власти субъекта Российской Федерации, участвующие в проведении мониторинга обязаны:
обеспечить сбор достоверной и репрезентативной информации по предмету мониторинга в соответствии с «Методическими рекомендациями по сбору и обобщению материалов по изучению рынка значимых современных образовательных технологий»;
отразить полученные данные по форме, рекомендованной Методическими рекомендациями;
подготовить аналитическую справку о проведенном мониторинге рынка значимых современных образовательных технологий
дать конкретные и обоснованные предложения о совершенствовании образовательных технологий;
представить названные материалы в МОРЦ в установленные им сроки;
принять участие в семинарах, проводимых МОРЦ в 2012г., в ходе
1.3.7 Аналитический доклад.
По итогам мониторинга необходимо подготовить Аналитический доклад о проведении мониторинга значимых для отрасли современных образовательных технологий за 2009-2011гг.
В докладе должны быть представлены результаты проведения мониторинга рынка значимых для отрасли современных образовательных технологий, данные опросов работодателей, специалистов отрасли и представителей образовательных учреждений; исследование рынка производимого современного учебно-производственного оборудования, в т.ч. уникального, необходимого для обеспечения образовательного процесса в целях подготовки кадров, а также анализ реализуемых программ профильными образовательными учреждениями НПО, СПО, ВПО и ДПО.
1.3.7.1 Разработка алгоритма проведения мониторинга рынка наноиндустрии значимых для отрасли современных образовательных программ
Алгоритм проведения мониторинга рынка наноиндустрии значимых для отрасли современных образовательных программ можно представлен на рис 1.12.
Функционал участников мониторинга:
руководитель группы – руководство, постановка задач и контроль за реализацией проекта; оказание помощи помощь членам группы; взаимодействие с организациями и ведомствами;
ответственный исполнитель – инструктаж рабочих групп экспертов; руководит разработкой рабочего варианта анкет для проведения обследований в организациях; анализа результатов, подготовка аналитической справки;
эксперт - разработка рабочего варианта анкет для проведения обследований в организациях; анализ результатов;
интервьюеры – проводят анкетирование, сбор замечаний, участвуют в обсуждениях по разработке документаций.
Для проведения мониторинга рынка значимых для наноиндустрии современных образовательных технологий был сформирован пакет документации, включающий сопроводительное письмо с описанием миссии организаторов мониторинга, целей, процедуры проведения исследования и анкеты.
Формирование проектной группы
Обучение группы экспертов и интервьюеров, обследования
разработка дидактических материалов для проведения мониторинга
Обработка полученных материалов
Анализ результатов
Подготовка и составление отчёта
Сбор материалов
Проведение опроса в группе респондентов
Ознакомление с полученными предварительными результатами участников проекта
Работа над замечаниями и предложениями
Сдача отчёта
Рисунок 1.12 Алгоритм проведения мониторинга.
Учитывая специфику работы с образовательными учреждениями и предприятиями, все разработанные материалы по целевой аудитории можно разделить на 2 группы:
пакет документации для проведения мониторинга предприятия;
пакет для мониторинга образовательного учреждения.
Разработанные анкеты для предприятий касаются вопросов обеспечения предприятия кадровыми ресурсами и потребностью предприятия в обучении/повышении квалификации сотрудников. В целом было разработано 14 анкет, тестовое задание на 40 вопросов, интервью – 6. Респондентами выступали руководители предприятий, сотрудники кадровой службы, непосредственные руководители сотрудника/технологом, молодые специалисты. Часть вопросов в анкетах пересекается с целью оценить состояние вопроса с нескольких точек зрения.
Для проведения опроса были сформированы дидактические материалы для обследования уровня подготовки и потребности в специалистах в следующих областях (направлениях/профилях): наноинженерия, наноматериалы, микросистемная техника. При этом учитывались следующие аспекты деятельности:
проектно-конструкторская;
проектно-технологическая;
производственно-технологическая;
сервисно-эксплуатационная;
организационно-управленческая.
Кроме того, в процессе исследования использовались такие источники, как:
материалы неправительственных общественных организаций по вопросам изучения и внедрения значимых для отрасли современных образовательных технологий;
информация с сайтов Росстат и Минобр;
публикации по вопросам образования, внедрение новых образовательных технологий, помещенные в прессе или иных средствах массовой информации, научной литературе;
иные опубликованные документы.
Более того мониторинг, ориентированный на получение полных, всесторонних и достоверных знаний практики реализации законодательства об образовании, не может проводиться без анкетирования и интервьюирования основных участников образовательных отношений (обучающихся, педагогических работников, должностных лиц и др.). И только в исключительных случаях допускается мониторинг, основанный на анализе одних письменных источников, при этом, вполне понятно, что он заранее обречен на неполноту исследования и определенную односторонность сформулированных по итогам исследования выводов и предложений.
2 АНАЛИЗ ЭФФЕКТИВНОСТИ И РЕЗУЛЬТАТИВНОСТИ ИСПОЛЬЗОВАНИЯ РАНЕЕ ПРЕДЛОЖЕННОГО МЕХАНИЗМА МОНИТОРИНГА РЫНКА ТРУДА ОТРАСЛИ И РЫНКА ОБРАЗОВАТЕЛЬНЫХ УСЛУГ. ВЫВОДЫ И ПОДГОТОВКА ПРЕДЛОЖЕНИЙ О СОВЕРШЕНСТВОВАНИИ И РАСШИРЕНИИ МЕХАНИЗМА ПОСТОЯННОГО МИНИТОРИНГА РЫНКА ЗНАЧИМЫХ ДЛЯ ОТРАСЛИ СОВЕРЕМЕННЫХ ОБРАЗОВАТЕЛЬНЫХ ТЕХНОЛОГИЙ
Рассмотрим 2 модели мониторинга – первая, разработанная ранее в 2011 году (Мониторинг-1) и вторая- усовершенствованная в 2012 году (Мониторинг2).
Предлагаемая в Отчете модель (Мониторинг-2) мониторинга максимально полно ориентирована на рынок современных образовательных технологий, применительно к отраслям наноноиндустрии (оптоэлектроника, квантовая физика, микроскопия, САПР).
Доработанная модель мониторинга -2, как и модель мониторинга- 1 включает в себя:
1.Понятие, цели и задачи модели мониторинга рынка современных образовательных технологий.
2. Объект и предмет мониторинга.
3. Источник мониторинга.
4. Процедуры и методы сбора информации.
5. Субъекты, осуществляющие сбор информации по предмету мониторинга.
Однако, был исключен пункт «Особенности и сроки проведения мониторинга в 2011 г.», как утратившего актуальность и значимость. В период с сентября 2011 по май 2012 гг. проводилась системная работа над совершенствованием механизма мониторинга рынка значимых для отрасли современных образовательных технологий.
Основные отличия двух мониторингов состоят в следующем:
В определении задач мониторинга:
Так, в Мониторинге- 1 были обозначены следующие задачи:
определить объект и предмет мониторинга, а также совокупность регионов Российской Федерации; изучение практики применения современных образовательных технологий позволит получить достоверные и репрезентативные сведения о востребованности их в образовательных организациях НПО, СПО, ВПО субъектов Российской Федерации;
унифицировать подходы к сбору и обобщению информации, получаемой в процессе осуществления мониторинга;
разработать методику сбора, фиксации и оценки информации, способную обеспечить единообразный подход всех специалистов, участвующих в мониторинге, к выявлению и анализу явлений и процессов мониторинга образовательных технологий в сфере образования, а также получение объективных и всесторонних сведений об исследуемых явлениях и процессах, подготовку и представление в Министерство образования РФ сопоставимых аналитических материалов, позволяющих экстраполировать полученные результаты на всю исследуемую совокупность;
установить порядок и сроки сведения в единую базу данных и обобщение результатов мониторинга, собранных в регионах Российской Федерации в сфере образования, с целью выявления новых современных образовательных технологий;
В Мониторинге -2 определены более конкретные задачи по выявлению и изучению:
требований профессиональных стандартов и квалификационных характеристик, требований ФГОС для специальностей, связанных с наноиндустрией для НПО, СПО, ВПО, ДПО;
требований работодателей к содержанию программ обучения по наиболее востребованным специальностям в отрасли наноиндустрии, условиям и технологиям их совместной реализации и образовательным результатам – профессиональным компетенциям специалистов;
рынка производимого современного учебно-производственного оборудования, в т.ч. уникального, необходимого для обеспечения образовательного процесса в целях подготовки кадров для нужд наноиндустрии;
реализуемых программ профильными (по профилям отрасли наноиндустрии) образовательными учреждениями НПО, СПО, ВПО, ДПО;
перечня наиболее востребованных инженерных и рабочих специальностей для кадрового обеспечения наноиндустрии на ближайшую перспективу, в т.ч. программ, обучение по которым планируется осуществлять в формате сетевых технологий;
организация мониторингов рынков труда по различным количественным и качественным параметрам и характеристикам кадрового запроса со стороны отрасли наноиндустрии;
трансляция изменившихся кадровых запросов в требования основных и дополнительных образовательных программ;
В объекте исследования в Мониторинге- 1 является весь набор образовательных технологий, применяемых в образовательных организациях, осуществляющих управление образованием и общего, и профессионального образования, а также в учреждениях НПО, СПО, ВПО, тогда как в Мониторинге- 2 объектом исследования является:
рынок труда;
программы образовательных учреждений НПО, СПО, ВПО и ДПО в области наноиндустрии.
измерительные материалы (анкеты, протоколы наблюдений, листы опросов)
В предмете исследования в Мониторинге-1 обозначено органическое единство совокупности действий органов управления образованием, исполнительных органов власти, отраслевых институтов и субъектов регионов образования, направленных на создание и применение значимых для отрасли наноиндустрии образовательных технологий; в Мониторинге 2– соответствие требованиям работодателей, ФГОС и профессиональным стандартам качества образовательных услуг в сфере наноиндустрии (среднего, высшего, послевузовского и дополнительного профессионального образования).
4. В Источниках мониторинга: В Мониторинге-1 источниками мониторинга определены законодательные документы, информационные источники, содержащие необходимую информацию по предмету мониторинга, а также сведения о конкретных правонарушениях, совершенных в отношении участников образовательных отношений смогут быть получены из юридически значимых документов, источников. В ходе мониторинга надлежит анализировать в первоочередном порядке такие источники, как:
материалы неправительственных общественных организаций по вопросам изучения и внедрения значимых для отрасли современных образовательных технологий;
направленные в адрес Рособрнадзора, иных государственных органов исполнительной власти и органов местного самоуправления решения общих собраний родителей (законных представителей) обучающихся либо общих собраний обучающихся по вопросам применения современных образовательных технологий;
а также публикации по вопросам образования, внедрение новых образовательных технологий, помещенные в прессе или иных средствах массовой информации, научной литературе; данные опроса обучающихся, иных участников образовательных отношений или должностных лиц, полученные с помощью стандартной анкеты или стандартного интервью.
В Мониторинге- 2 список источников дополнен:
К основным источникам мониторинга были отнесены:
Потребители образовательных услуг учреждений профессионального образования;
Руководители предприятий – партнеров отраслевой направленности;
Менеджеры и специалисты предприятий, участвующие в организации практического обучения студентов на своих предприятиях;
Представители региональных общественных ассоциаций, организаций и объединений, заинтересованных в развитии крупного, среднего и малого бизнеса;
Ответственные специалисты органов исполнительной власти курирующих вопросы экономики и промышленности;
Ответственные специалисты органов муниципальной и исполнительной власти региона, курирующих вопросы занятости населения;
Ответственные специалисты органов исполнительной и муниципальной власти региона, курирующих сферу образования;
Оценка удовлетворенности студентов качеством обучения;
Оценка руководителями образовательных учреждений поставщиков учебного оборудования.
Совокупность законодательных документов, используемых в ходе мониторинга.
5. В процедурах и методах сбора информации. В Мониторинге-1 были использованы только 6 методов сбора информации, тогда как при проведении Мониторинга-2 использованы 18 методов, что позволяет получить более подробную и качественную информацию.
Рисунок 2.1 Методы сбора информации, используемые в Мониторинге-1
Рисунок 2.2 Методы сбора информации, используемые в Мониторинге-2
6. В субъектах, осуществляющих сбор информации по предмету мониторинга.
В мониторинге-1 это:
представители Профсоюза работников образования и науки Российской Федерации;
работники муниципальных органов управления образованием;
педагогические и иные работники образовательных учреждений;
члены родительных комитетов образовательных учреждений;
члены попечительских и наблюдательных советов;
члены официально зарегистрированных общественных объединений, а также члены органов общественной самодеятельности, действующих в области образования;
работники средств массовой информации.
В Мониторинге -2 в приоритете представители отрасли наноиндустрии, работодатели.
При проведении Мониторинга 1 было привлечено 9 работодателей наноотрасли, тогда как в ходе выполнения Мониторинга- 2 приняли участие специалисты 32 ведущих предприятий наноиндустрии.
Результатом приведения Мониторинга-1 стала оценка уровня подготовки выпускников, требования к профессиональным компетенциям (специальная, социальная, персональная компетенции) и дополнительным навыкам, обзор производимого учебно- лабораторного оборудования.
Таким образом, доработанный и скорректированный на 3 этапе механизм постоянного мониторинга рынка значимых для отрасли современных образовательных технологий более эффективен и результативен в сопоставлении с мониторингом, проводимым на 1 этапе реализации Государственного контракта № 12.Р20.11.0006 от 29.08.2011г. В результате проведенных исследований были выявлены наиболее востребованные современные образовательные технологии, используемые для подготовки кадров для наноиндустрии.
Непрерывный, многоуровневый и комплексный мониторинг позволил:
исследовать исходное соответствие подготовки студентов требованиям действующих ФГОС по направлениям (профилям) для наноиндустрии на предмет определения реальных требований рынка к качеству образования и компетенций молодых специалистов для работы в современных условиях;
получить от потребителей перечня основных и дополнительных компетенций специалистов по направлениям (профилям) путем определения всех обязательных и необходимых практических знаний, умений и навыков для успешной и результативной их ежедневной деятельности в условиях постоянно совершенствующихся технологий и непрерывно развивающегося конкурентоспособного предприятия;
определить требования профессиональных стандартов и квалификационных характеристик, требований ФГОС для специальностей, связанных с наноиндустрией
выявить требования работодателей к содержанию программ обучения по наиболее востребованным специальностям в отрасли наноиндустрии, условиям и технологиям их совместной реализации и образовательным результатам – профессиональным компетенциям специалистов;
изучить рынок производимого современного учебно-производственного оборудования, в т.ч. уникального, необходимого для обеспечения образовательного процесса в целях подготовки кадров для нужд наноиндустрии;
обозначить наиболее востребованные инженерные и рабочие специальности для кадрового обеспечения наноиндустрии на ближайшую перспективу, в т.ч. программы, обучение по которым планируется осуществлять в формате сетевых технологий;
3. ИЗМЕРНИТЕЛЬНЫЕ МАТЕРИАЛЫ МОНИТОРИНГА
Для проведения мониторинга были разработаны варианты анкет, интервью, тесты.
|
