Скачать 4.53 Mb.
|
В работе должны быть определены все основные категории исследования: критериальный подход, воспитательная деятельность, эффективность воспитательной деятельности, оценка эффективности воспитательной деятельности, теоретико-методологическое обоснование. В работе представлены определения следующих ключевых для исследования понятий (по последовательности их введения) в авторской формулировке и в формулировке других ученых, ссылки на работы которых в исследовании указаны: воспитательная деятельность, качество деятельности (авторская трактовка), качество воспитательной деятельности (ссылка не дана, возможно, авторская формулировка), результат воспитательной деятельности, результативность, результативность воспитательной деятельности (авторская трактовка), эффективность. Вывод рецензента. Желательно уточнение формулировок объекта, предмета и цели исследования (см. таблицу). В исследовании не определены следующие ключевые понятия: критериальный подход, эффективность воспитательной деятельности, оценка эффективности воспитательной деятельности, теоретико-методологическое обоснование. Желательно представить авторскую позицию относительно содержания используемых понятий более выпукло, например, сделать одно из приложений «Тезаурус исследования». Если исследование проведено корректно, должным образом отработана методология, получены и осмыслены его результаты, то между отдельными логическими фрагментами имеется корреляция «по горизонтали»: каждой подпроблеме соответствует раздел гипотезы, отдельная задача исследования и соответствующий пункт основных положений выносимых на защиту (В.С. Леднев). Для установления этого соответствия может быть использована следующая матрица: Таблица 3 Внутренняя согласованность исследования
По результатам работы с данной матрицей может быть сделан вывод о согласованности указанных параметров исследования. Отдельно может быть охарактеризован наиболее сложный компонент любого исследования — четкая формулировка проблемы исследования. И, безусловно, может быть получено знание о возможных результатах исследования. В качестве примера рассмотрим еще одно исследование, поступившее на экспертизу. Тема - Педагогические условия культуросообразного построения содержания образования в современной школе. Объект - Культуросообразное содержание образовательной области гуманитарных предметов школьного образования. Предмет - Система педагогических условий культуросообразного построения и реализации гуманитарного образования учащихся общеобразовательной школы, обеспечивающая развитие культурной идентичности подростков в направлении ее открытости.
Вывод: 1) Формулировка проблемы исследования как таковой отсутствует, но приведены противоречия, на разрешение которых направлено исследование. «Просится» четкая формулировка проблемы исследования после указанных противоречий. Культуросообразное содержание образования проектируется не ради себя самого, а ради достижения открытости культурной идентичности школьника? Если исследование направлено на разрешение указанных противоречий, значит должны быть указаны пути их преодоления: требования к дидактическому инструментарию (или сам инструментарий); пути согласования содержания образования с культурной идентификацией. 2) В гипотезе появилось «становление целостной открытой культурной идентичности личности», но в основных параметрах исследования такого акцента не было. 3) Пока неясно, каковы же педагогические условия культуросообразного построения содержания образования. В положениях на защиту охарактеризованы дополнительные условия, а какие являются основными? 4) Реализация задачи 5 никак не проявилась в гипотезе и в положениях на защиту. 5) В формулировке задач не хватает именно задачи, т.е. пути от «данного» к «требуемому». Диссертационные исследования по педагогике являются реальным инструментом получения значимых теоретических и практических результатов в том случае, если автор работы ориентирован на их получение, а не на научное знание «вообще». Позиция исследователя и его руководителя, выражаемая простым предложением «давайте исследуем это, проанализируем это, а там посмотрим, на что выйдем…», не устремлена к получению конкретных результатов и может явиться фактором, в конечном итоге снижающим качество исследования. На разных этапах исследования как самим автором и его руководителем или консультантом, так и, безусловно, экспертом, могут быть найдены резервы повышения качества работы. С этой целью могут быть использованы предложенные матрицы. Как показывает собственный опыт авторов данного издания, работа с предложенными матрицами позволяет в наибольшей степени снизить степень субъективности экспертизы. Однако, они не исчерпывают всех ресурсов экспертизы. Не менее значимым в деле повышения качества диссертационных исследований и их экспертизы мог бы быть банк полученных результатов, содержащий информацию не только о самих результатах, но и о возможных условиях их переноса. В банке мог бы осуществляться поиск по ключевым словам, по областям паспорта научной специальности, по предметным областям науки и т.п. К сожалению, пока такой банк отсутствует. Возможно, его создание – дело недалекого будущего. 2.4. Оценивание новизны и значимости научных результатов
Оценивание научной новизны и теоретической значимости результатов диссертационного исследования в условиях роста общего числа работ становится делом чрезвычайно ответственным и теоретически сложным. Это связано с поиском новых углов зрения на полученные результаты, формулировкой степени новизны и значимости, а не просто указанием самого результата. Данная деятельность может быть частично облегчена предлагаемыми матрицами оценивания. Каждый конкретный результат научного исследования только тогда будет считаться научным результатом, когда он будет принят сообществом и, соответственно, включен в систему научных коммуникаций. Таким образом, каждый результат проходит проверку временем и всесторонней оценкой различных экспертов. Выявление результатов диссертационного исследования и оценивание их новизны и значимости могут быть осуществлены с помощью предлагаемой ниже матрицы: Таблица 4
По итогам заполнения матрицы может быть сделан вывод о полученных результатах, их новизне и значимости, достоверности доказательства, возможностях использования. Теоретическая значимость результатов исследования показывает их влияние на существующие концепции, подходы, идеи, теоретические представления в области теории и истории педагогики, методики, то есть характеризует ценностную для развития теории сторону результатов. В зависимости от степени и широты влияния полученных результатов на существующие теоретические представления можно выделить: общепедагогический, дисциплинарный, общепроблемный, частнопредметный уровни значимости. Границы между ними подвижны, однако в большинстве случаев их можно диагностировать. Этот критерий тесно связан с концептуальностью, доказательностью полученных выводов, перспективностью результатов исследования для разработки прикладных тем. Исходя из теоретической значимости, можно объяснить, предсказать те факты и явления, которые с прежних позиций нельзя было увидеть и объяснить, открываются новые пути разработки методов, подходов исследований. Для фундаментальных исследований концептуальность является сущностной характеристикой. В прикладных разработках исследователи могут пользоваться уже готовыми схемами, развивать и дополнять существующие концепции. Новизна результатов диссертационного исследования характеризует новые теоретические положения и практические (нормативные) рекомендации, которые ранее не были известны и не зафиксированы в науке и практике. Существенную роль в определении научной новизны играет ее сопоставление с другими атрибутами научного аппарата исследования, особенно ее сопоставление с положениями, выносимыми на защиту. В «идеале» последние детерминируют и смыслы, и структуру обоснования новизны результатов. В свою очередь, в формулировании научной новизны отражены (и в содержательно-смысловом плане конкретизированы) положения, выносимые на защиту (А.М. Степашко). Новизна результатов научно-педагогического исследования может быть представлена на трех уровнях, подчеркивающих место полученных знаний в ряду известных (В.М. Полонский):
Критерий практической значимости педагогических исследований свидетельствует о реальных сдвигах, которые произошли или могут произойти в результате внедрения результатов исследования в практику. Этот критерий являлся актуальным всегда. Однако в последние годы все чаще в диссертациях появляется формулировка типа «результаты исследования могут быть использованы при разработке программ, спецкурсов и т.д.». На наш взгляд, автор должен более конкретно определить, где именно могут быть использованы результаты. В качестве примера рассмотрим варианты представления новизны, теоретической и практической значимости результатов диссертационного исследования в заключениях диссертационных советов. Теоретическая значимость результатов исследования показывает степень значимости полученных результатов и заключается:
Научная новизна результатов исследования показывает меру новизны и заключается в том, что:
В заключениях диссертационного совета, безусловно, учитывается контекст самого исследования, поэтому формулировки новизны и значимости не могут быть столь формализованными. Для иллюстрации нашей позиции, приведем пример фрагмента заключения диссертационного совета: Наиболее существенные научные результаты диссертационного исследования, полученные лично соискателем заключаются в следующем:
Научная новизна результатов диссертационного исследования заключается:
Теоретическая значимость результатов диссертационного исследования заключается:
Основными признаками и показателями практической значимости результатов исследования, по мнению В.М. Полонского, являются следующие:
В ходе экспертизы для оценки практической значимости результатов может быть использована следующая матрица, разработанная с использованием методики оценки практической значимости В.М. Полонского (табл. 5) В данной матрице введено понятие уровня значимости результатов. Необходимо отметить, что в современных заключениях диссертационных советов не указывается масштаб использования результатов, как это было ранее. Но сама идея такой матрицы представляется чрезвычайно продуктивной для выявления резервов повышения качества диссертации на промежуточных этапах экспертизы. Таблица 5 Оценка практической значимости результатов исследования (по В.М. Полонскому)
Возможно использование и другого подхода к оценке указанных параметров результатов исследования, например критериев и показателей, разработанных в Ростовском государственном педагогическом университете: Таблица 6 Оценка новизны, теоретической и практической значимости результатов исследования
Думается, что предложенные таблицы 5 и 6 могут служить ориентировочной основой оценки качества диссертации, но никак не догмой, необходимой для заполнения в обязательном порядке.
2.5. Анализ достоверности и обоснованностиполучения научных результатов
Данный параметр исследования зачастую вызывает трудности, как у самих авторов исследования, так и у экспертов. Что является в исследовании источником информации о достоверности и обоснованности полученных результатов? По мнению авторов данного издания, достоверность полученных результатов исследования может быть выявлена на основании анализа совокупности теоретико-методологических оснований, избранной методологии исследования, его логики, и практического подтверждения. Зачастую авторы исследования, а вслед за ними и эксперты в заключениях диссертационных советов, достаточно формально описывают данный параметр исследования. Поэтому и в авторефератах и в заключениях (диссертационных советов и оппонентов) довольно часто встречаются столь формальные формулировки, которые без изменения могут быть вписаны в другой автореферат или в другое заключение. Вот лишь несколько примеров: 1. Достоверность и обоснованность результатов исследования обеспечиваются четкостью методологических позиций, использованием комплекса современных теоретических методов, применяемых в исторической работе, адекватных объекту, предмету, целям и задачам диссертации, природе изучаемого явления, репрезентативностью источниковой базы исследования. 2. Обоснованность и достоверность результатов обеспечивались использованием педагогической теории, практического опыта; применением комплекса теоретических и эмпирических методов; адекватностью применяемых диагностических методик, репрезентативностью выборки; математико-статистической обработкой материалов исследования; психолого-педагогической экспертизой полученных результатов; публикацией выводов. 3. Достоверность и обоснованность основных положений и выводов исследования обусловлена непротиворечивостью и последовательностью реализации теоретико-методологических основ исследования, использованием комплекса взаимодополняющих методов исследования, подтверждающими исходную гипотезу результатами опытно-экспериментальной работы. Думается, что подобных примером «близнецов-братьев» каждый из читателей данного издания может привести еще множество. Общие недостатки определяются тем, что в анализе формулировок доказательства достоверности полученных результатов часто повторяются положения, близкие по смыслу. Сложившаяся в опыте структура формулирования данной методологической характеристики указывает на ее сопряженность с методологической основой, методами и источниками исследования. Это позволило Л.А. Степашко57 выявить следующие общие структурные компоненты, выступающие в качестве аргументов:
При этом каждая их характеристик сопровождается соответствующей позитивной оценкой (методология на базе современных научных достижений, методы «адекватны», источники «репрезентативны», база исследования обширна и т.д.). Думается, что проблема здесь заключается не просто в правильном или неправильном, точном или неточном, описании данного фрагмента текста автореферата или заключения, а в более глубинном процессе – методологически непротиворечивого и обоснованного исследования избранной проблемы. Процесс получения достоверных результатов в исследовании связан с многими факторами: с выбором методологии и методики исследования, с мировоззрением исследователя и его научно-познавательным опытом, с характером избранной для исследования проблемы, с контекстом исследования и многими другими. Нельзя построить алгоритмического предписания, следуя которому можно было бы с гарантией совершать научные открытия. Однако, столь же верно и то, что неорганизованный научный поиск, не имеющий осмысленной логики, не может привести к выводам, обладающим качеством всеобщности, проверяемости, новизны58. Попытаемся разобраться в том, каким образом может быть оценен этот процесс, его стратегия и логика развертывания, его устремленность к получению новых достоверных знаний. Любая совокупность результатов исследования несет на себе черты мировоззрения и стиля мышления самого исследователя, что проявляется в выборе подхода к анализу проблемы. Все чаще современные авторы диссертаций указывают на различные методологические подходы, в логике которых выполнено исследование. В автореферате докторской диссертации «Развитие методологии отечественной педагогики (середина 60-х – 80-е годы ХХ века)» читаем: «Методологическая основа исследования определяется междисциплинарным объединением общих и специальных подходов к анализу феномена науки и ее методологии: науковедческого, философско-научного, общеметодологического, историко-научного, философско-педагогического, метапедагогического, историко-педагогического, обладающих «парадигмальной близостью». К сожалению, никаких объяснений по поводу именно такого выбора подходов автор не представляет. Другое докторское исследование «Становление и развитие интеграционных процессов в современном европейском образовании» также выполнено в логике определенного подхода, о чем в автореферате говорится следующее: «Методологической основой исследования является культурологический подход, позволяющий всесторонне объяснить процессы, происходящие в европейском обществе и т.д.». Далее следует обоснование своего выбора. Ещё один пример объяснения выбора автора. В докторском исследовании «Социокультурная обусловленность изменения функций профессионально-педагогической деятельности учителя» следующим образом обосновывается его методологическая основа: «Методологической основой исследования явился функциональный исследовательский подход, определяемый как проявление системного подхода. Функциональный подход, позволяющий исследовать систему в рамках более крупной системы и устанавливать функциональные зависимости между ними, определил логику построения исследования взаимосвязи социокультурных факторов и функций профессионально-педагогической деятельности через:
С точки зрения экспертизы здесь возникает несколько вопросов: Как должен согласовываться избранный методологический подход или подходы с теоретической основой исследования? Каким образом могут быть выявлены противоречия (если они существуют) между подходом и теоретическим анализом проблемы? Каким образом проявляется избранный подход в исследовании? Каким образом может быть проведена оценка качества исследования с позиций избранного методологического подхода? Сколько вообще подходов может быть использовано в исследовании? Существует две группы подходов, используемых в исследовании. Первая группа, понимаемая как направление изучения предмета исследования, включает в себя подходы, имеющие общенаучное значение, применимые к исследованиям в любой науке. Они классифицируются по парным категориям диалектики, отражающим полярные стороны процесса исследования: содержание и форма, историческое и логическое, качество и количество, явление и сущность и т.д. Вторая группа, понимаемая как некоторый исходный принцип, исходная позиция, основное положение или убеждение исследователя, образует широкий спектр подходов: личностный; деятельностный; культурологический; ценностный (аксиологический); гуманистический; системный; антропологический; личностно - деятельностный; личностно - ориентированный и др. Выбор исследовательского подхода определяет угол зрения на предмет исследования, ведущую идею и замысел исследования, а также предпочтение способа решения проблемы исследования. Например, в исследовании «Проектирование содержания элективных курсов в профильном обучении» возможно выделение двух групп подходов. В данном случае методология исследования – это методология педагогического проектирования. Причем здесь очень важно четко понять на чьих теоретических позициях ведется исследование (например, позиция Е.С. Заир-Бек в отношении сущности педагогического проектирования отличается от взглядов В.Е. Радионова). В данном исследовании есть и другая совокупность подходов – к построению содержания образования. Здесь возможно использование разных подходов (но не в совокупности):
Возможна ситуация анализа решения одной и той же проблемы с позиций разных подходов. Почему это возможно? Во-первых, ответ на этот вопрос сопряжен с важнейшей характеристикой методологии гуманитарного познания – человекосоразмерностью, т.е. построением методологии конкретного гуманитарного исследования с расчетом включения в него целей и смыслов человеческой деятельности, т.к. человек, с его желаниями, стремлениями и свободной волей, становится необходимым и направляющим компонентом методологии научного познания59. Во-вторых, ответ лежит во множестве поисковых полей60, которые оказываются отличными друг от друга и строятся или разными субъектами, или одним и тем же субъектом, поочередно перебирающим различные возможные исходные позиции. Эта идея представляется чрезвычайно плодотворной для развития оценочных процедур. Действительно, как утверждает автор, поисковые поля, оставаясь в тех или иных аспектах теми же самыми, могут, однако, сильно изменяться и преобразовываться в других отношениях. Поле может быть одним и тем же, но разные субъекты познавательной деятельности видят в нем разные проблемы, расставляют разные акценты, выбирают разные подходы к решению одной и той же проблемы, что, в конечном счете, позволяет говорить о неодинаковости исходных условий познавательного процесса. Причем, с ростом знания о том или ином явлении увеличивается возможность построения различных поисковых полей. Исходя из сложившейся познавательной ситуации, т.е. из всего накопленного и относящегося к данной проблеме материала, каждый или один и тот же исследователь, применяя разные подходы, использует различные данные, в результате чего и формируется несколько поисковых полей. Эта ситуация по сути и определяет мировоззрение исследователя. Основная проблема, возникающая перед экспертом в ходе анализа подхода, используемого автором исследования, заключается в том, что чаще всего диссертант упоминает используемый подход или совокупность подходов в самом начале диссертации и автореферата, а дальше вообще забывает об этом выборе. Многообразие упоминаемых авторами подходов в методологических основаниях исследования позволило составить такой перечень, который пока трудно поддается систематизации: системно-деятельностный, системный, деятельностный, критериальный, личностно-ориентированный, информационно-технологический, интегративный, социокультурный, гуманистический, структурный, антропологический, личностно-деятельностный, аксиологический, культурологический, цивилизационный, гуманистический, ноосферный, компетентностный и ряд других. Совершенно очевидно, что не все из перечисленных подходов являются методологическими, и очевидно назрела необходимость выполнения специального исследования по изучению методологических возможностей различных подходов. Тем не менее, невозможно исследовать научную цель иначе как в рамках определенного подхода, а выбор подхода связан с принятием специфических стратегий, которые взаимодействуют со специфическими (социальными и нравственными) ценностями, усиливая при этом друг друга (Х. Лейси). Стратегия – это тоже подход к научному исследованию, определение целей науки в соответствии с конкретными социальными ценностями. Принятие стратегии в научном исследовании связано с социальными ценностями, а теории (теоретической основы) – с когнитивными ценностями. Понятие «стратегия» выполняет функции, многие из которых сходны с функциями понятий Т.Куна «парадигма» и «дисциплинарная матрица». В определенной степени оно близко также понятию И. Лакатоса «исследовательская программа». Сам Х. Лейси отмечает, что вводимое им понятие «стратегия» - это интеллектуальный отпрыск «парадигмы». Возможно и другое понимание стратегии, например, в смысле определения и выбора линии развития вспомогательных гипотез, являющихся посредствующим звеном между теорией и эмпирическими знаниями. В рамках стратегий развиваются теории, принятые на основе ценностей. Стратегия одновременно и ограничивает класс потенциально применяемых теорий, и отбирает виды эмпирических данных, считающихся подходящими для оценки теорий, которые удовлетворяют этим ограничениям. В конечном итоге именно стратегия исследования оказывает существенное влияние на виды и качество получаемых результатов. Чрезвычайно важны формулировка цели и задач исследования, т.к. именно они задают логику теоретического поиска и практической проверки. В том случае, если в исследовании задачи сформулированы как содержательные шаги, позволяющие построить собственно текст диссертации в логике их решения, может быть использована следующая матрица анализа степени решения содержательных задач исследования (Табл. 7) Таблица 7 Анализ степени решения содержательных задач исследования
|
Тема. Сертификация и оценка процессов создания по содержание В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | Договор №0003913/1168Д В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | ||
Г. С. Прыгин основы психодиагностики В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | Удк 33 ббк 65. 262. 1 В44 В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | ||
Томас дж. Стэнли уильям д. Данко В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | Нормативные предписания разработчикам и пользователям психодиагностических методик В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | ||
1. Общие принципы стандартизации жизненного цикла программных средств … В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | Проект по созданию системы автоматизации дистанционного образования... В37 Современное диссертационное исследование по педагогике: Оценка качества: Книга для эксперта. Саратов: Саратовский государственный... | ||
Методические указания к лабораторной работе по курсу «Технология... Цель работы: практическое знакомство со стандартными методами определения качества вина: органолептическая оценка качества вина... | Вместо предисловия подарите мне холст, научите меня рисовать Цель работы: практическое знакомство со стандартными методами определения качества вина: органолептическая оценка качества вина... | ||
Как одно из средств достижения нового образовательного результата на уроках в начальной школе Цель работы: практическое знакомство со стандартными методами определения качества вина: органолептическая оценка качества вина... | Концепция содержит следующие основные разделы: Введение I. Основные... Российской Федерации на период до 2010 года, одобренных Правительством Российской Федерации, предусмотрено создание моделей организации... | ||
Пояснительная записка. Главная цель оот подготовка учащихся к самостоятельной... Цель работы: практическое знакомство со стандартными методами определения качества вина: органолептическая оценка качества вина... | Демонстрационный вариант диагностической работы по русскому языку для учащихся 5 классов Понятие о качестве образования. Оценка как элемент управления качеством. Традиционные и современные средства оценки (рейтинг; мониторинг;... | ||
Контрольная работа по русскому языку №2 по теме «Правописание приставок» Понятие о качестве образования. Оценка как элемент управления качеством. Традиционные и современные средства оценки (рейтинг; мониторинг;... | Всю ночь крепко закрыты з…л…тые к…рзинки одуванчика Понятие о качестве образования. Оценка как элемент управления качеством. Традиционные и современные средства оценки (рейтинг; мониторинг;... |