Тема 3.3. Количественные методы организации научных исследований в профессиональной деятельности психолого - педагогического направления

Количественные (статистические) методы анализа широко применяются в научных исследованиях и в социальных науках.

Методы количественного анализа делятся на две большие группы:

- Методы статистического описания – направлены на получение количественной характеристики данных.

- Методы статистического вывода – позволяют выявить устойчивые тенденции и строить на этой основе теории, предназначенные для их объяснения.

Количественным методам отдается предпочтение в традиционных социологических эмпирических исследованиях, качественным - при использовании герменевтического принципа анализа социальной реальности. При этом технические приемы для исследования повседневного бытия составляют резервуар для применения всех социально - научных методов. Можно уже говорить и о предварительных критериях, характеризующих эмпирические исследования социальной работы.

Сила количественных методов сказывается прежде всего в том, что они позволяют основательно и в систематизированном виде открывать новое. Таким образом, специалисты определяют количественные методы социальных исследований как разновидность социальной диагностики.

«Количественные методы меньше учитывают индивидуальный или субъективный опыт. Их предпочитают те социологи, которые используют системные или структурные концепции. Количественные данные чаще всего ассоциируются с позитивистскими методами исследования и считаются более «достоверными». Достоверность в данном контексте означает возможность повторить часть исследований и получить тот же результат, то есть показать, что существует закономерность, позволяющая прийти к этим заключениям»

Модуль 4. Мониторинг и диагностика качества научных исследований в профессиональной деятельности психолого - педагогического направления

Тема 4.1 Мониторинг качества организации научных исследований в профессиональной деятельности психолого - педагогического направления

Федеральный закон «О науке и государственной научно-технической политике», определив статус Российской академии образования как государственной отраслевой академии наук, существенно повысил ее ответственность за состояние вопросов прогнозирования, планирования, организации, проведения и координации фундаментальных исследований в области наук об образовании: педагогики, психологии и смежных с ними наук. Вместе с этим, современные информационные технологии значительно изменили технологию научных исследований и определили новые подходы к решению стоящих задач. В новых условиях необходима переоценка подходов к организации науки, стратегии планирования и финансирования исследований и научной политики в целом. Для решения этих задач возрастает важность адекватных оценок состояния комплекса наук в области образования и тенденций его развития.

Ключевой проблемой применения качественных и количественных методов анализа является создание надежной и достоверной статистической базы, а также системы объективной и независимой экспертизы. Эффективно реализовать функции РАО, вытекающие из законодательства о науке, можно только обладая полной и систематизированной информацией о состоянии исследований и их результатах, о научных организациях и коллективах исследователей. В связи с этим задачи осуществления мониторинга развития наук об образовании становятся одними из центральных в деятельности РАО, требуют соответствующего методологического и научно-методического обоснования и сопровождения.

Мониторинг состояния и развития науки в целом, а также по ряду научных направлений и отраслей осуществляется Министерством образования и науки Российской Федерации, Российской академией наук на базе подведомственных им научных организаций, а также Российским фондом фундаментальных исследований и Российским гуманитарным научным фондом. В этой сфере научной деятельности накоплен большой опыт, созданы базы данных и информационные системы, обеспечивающие проведение мониторинга, обработку и анализ данных, получаемых в ходе мониторинга. В области наук об образовании такая работа только разворачивается (Приложение 1).

Вместе с этим, исследования и экспериментальная деятельность в области педагогики, психологии и смежных с ними наук имеют свои особенности, которые должны быть учтены при разработке и формировании системы мониторинга развития наук об образовании.

Например, одной из важных особенностей исследований в этой области является длительность полного цикла – от разработки фундаментальных вопросов функционирования и развития сферы образования, до применения результатов исследований в образовательной практике. Это существенно усложняет обеспечение ключевого принципа «не навреди» и требует при анализе эффективности исследований охватывать большие промежутки времени, обладать разносторонней информацией об изучаемых процессах.

Следовательно, мониторинг должен охватывать весь этот цикл и включать вопросы мониторинга непосредственно развития научных исследований, экспериментальных работ и инновационной деятельности, проводимой в образовательных учреждениях. Необходимо учитывать также сложившуюся структуру организации, управления и координации исследовательской деятельности в этих областях науки, формы и направления использования результатов исследований в сфере образования. Такой подход важен и для эффективного прогнозирования и планирования развития психолого-педагогических и смежных с ними наук.

Мониторинг включает изучение планов исследований и отчетов о деятельности научных организаций РАО, отчетов о ходе реализации и выполнении научных проектов и программ РАО, проведение регулярных обследований деятельности научных организаций, запросы в необходимых случаях дополнительной информации, анализ информации, содержащееся в различных информационных научных базах, в том числе анализ научных и научно-методических работ, проведение экспертных оценок состояния исследований по областям научных знаний.

Таким образом, система мониторинга в области наук об образовании должна формироваться РАО на основе комплексности, обеспечивать получение необходимой информации на всех основных стадиях проведения НИР – начиная от их организации и завершая экспериментальной апробацией и использованием полученных результатов в образовательной и других формах социальной практики.

В связи с этим методологически важно определить направления, формы проведения и уровни мониторинга развития науки, а также механизмы использования его результатов таким образом, чтобы формируемая система позволяла получать достаточный объем информации, необходимой для прогнозирования и планирования научных исследований, их координации и оценки эффективности, с минимальными дублированием и затратами на ее сбор, обработку, хранение и использование.

Система, направления и задачи мониторинга развития наук об образовании. Исходя из отмеченных выше задач РАО и требований к системе мониторинга, целесообразно в эту систему включить как непосредственное проведение мониторинговых исследований, так и формирование необходимых для этого баз данных, включая учет и регистрацию результатов научной деятельности. Важными элементами этой системы должны стать:

• выявление и регулярный анализ различных источников информации, содержащих информацию о научных исследованиях в области образования, с целью оценки состояния и развития исследований в целом и отдельных научных направлений;

• регулярное (на наш взгляд, ежегодное) проведение анкетирования подведомственных организаций по специально разработанной форме – продолжение ранее проводимой инвентаризации организаций Академии;

• по мере необходимости проведение тематического анкетирования, связанного с получением той или иной информации, необходимой для работы отделений и Президиума РАО;

• проведение экспертных оценок развития научных направлений, научных школ, результатов научной деятельности по планам или поручениям руководства отделений или Президиума РАО.

В качестве направлений мониторинга целесообразно определить следующие взаимосвязанные и взаимодополняющие направления научной деятельности:

1. Сбор и обработка данных, осуществление анализа состояния и развития научных исследований и экспериментальной работы в области педагогики, психологии и смежных с ними наук на основе использования различных баз данных и других источников научной информации, проведение в необходимых случаях экспертных оценок и анкетирования.

2. Учет результатов научной деятельности, полученных научными организациями РАО и другими научными и образовательными организациями, участвующими в выполнении программ и проектов РАО, формирование базы данных с информацией об этих результатах на основе их регистрации, анализ актуальности и уровня полученных результатов и эффективности их использования в сфере образования.

3. Анализ состояния и развития научных организаций РАО на основе формирования базы данных о научных организациях РАО.

Разделение мониторинга на эти направления в определенной степени условно и связано с формированием баз данных научной информации. По второму и третьему направлению формируются конкретные базы данных, указанные ниже, а первое направление является интегрирующим и предполагает использование различных источников информации.

Первое направление мониторинга включает получение информации о направлениях, тематике, содержании и результатах научных исследований и экспериментальной деятельности; проведение анализа данной информации с точки зрения актуальности и перспективности, оценки качества и продуктивности научных исследований. Мониторинг осуществляется на основе создания и использования баз данных первичной и вторичной научной информации, необходимых как для проведения самих исследований и экспериментальных работ, так и для оценки их состояния и результативности.

Объектом мониторинга является научно-исследовательская и экспериментальная деятельность, отраженная в планах и программах научных исследований, в научных статьях, монографиях, отчетах и других материалах, содержащих информацию о направлениях, тематике и ходе исследований и экспериментов, а также инновационная деятельность образовательных учреждений, проводимая на основе результатов научных и экспериментальных работ.

Основными формами проведения мониторинга в данном случае являются сбор, накопление, обработка и анализ информации, включая экспертизу результатов научных работ и экспериментальной и инновационной деятельности (публикаций, отчетов и других материалов), подготовка вторичной научной информации, проведение анализа и подготовка аналитических материалов о состоянии и развитии научных исследований, отражающих основные полученные результаты и перспективы дальнейших исследований.

Реализация данного направления мониторинга потребует развития системы независимой научной экспертизы. Поэтому, одной из первоочередных задач является развитие методологии и отработка методик проведения экспертизы уровня развития и результативности научных исследований в области психологии, педагогики и смежных с ними наук. В целом, общие основы методологии экспертизы научной деятельности не зависят от отрасли науки и достаточно хорошо развиты и представлены в научной литературе.

Вместе с этим, науки об образовании имеют существенную особенность: объектом исследований являются процессы интеллектуального и духовного развития человека, увязанные с физиологическими, психологическими и другими изменениями, происходящими по мере изменения его возраста. Значительное влияние на эти процессы оказывает также социальная среда, в которой развивается человек, вопросы социализации и изменения социальных ролей в течение его жизни.

Все эти процессы в отличие от естественнонаучных и технических областей человеческого знания далеко не всегда можно эффективно охарактеризовать количественными показателями, соответственно трудно выявить законы или закономерности в данных научных отраслях. Не менее трудно доказать повторяемость выявленных в отдельных исследованиях и экспериментальных работах закономерностей и взаимосвязей.

Поэтому, в ряде случаев разработка общих методов оценки направлений и тематики исследований, полученных результатов, а также процедуры и показателей, по которым должна проводиться экспертиза и которые должны обеспечить ее объективность и эффективность, является весьма сложной задачей. Зачастую объективность и эффективность экспертизы может быть достигнута только за счет привлечения нескольких экспертов и высокого уровня компетентности и независимости самих экспертов. Тем не менее, по конкретным отраслям наук об образовании такую работу необходимо проводить.

Важно, чтобы система экспертизы была организована на всех уровнях мониторинга (см. раздел IV данной работы), по возможности использовала единую или скоординированную систему требований и критериев оценки экспертируемых объектов (направлений, тематики, результатов научных исследований, включая научные планы и отчеты, научную и научно-методическую литературу, учебники и т.д.). С этой целью потребуется наряду с разработкой методик проведения экспертизы определить и требования к экспертам, реализовав при этом принципы независимости, компетентности, осуществить более широкое привлечение «внешних» экспертов.

Необходимо будет сформировать составы экспертных групп, скорее всего несколько, с учетом направлений и уровней мониторинга. Поскольку результаты экспертизы могут иметь административные или финансовые последствия для научных коллективов и исследователей, должны быть отработаны механизмы использования этих результатов и с целью создания правовой базы для разрешения возможных коллизий приняты нормативные документы, закрепляющие данные механизмы.

Также в качестве одной из важных самостоятельных задач, укладывающихся в первое направление мониторинга, является проведение наукометрических исследований, включая библиометрические. Среди средств, которые могут быть использованы для решения проблем оценок развития таких сложных социальных систем как наука, библиографическая информация занимает одно из важнейших мест. Современный уровень развития информационных и коммуникационных технологий позволяет более полно использовать потенциальные возможности массивов библиографической информации.

Актуальность данной работы определяется также необходимостью разработки методологии анализа тенденций развития отечественной науки об образовании и ее роли в мировой науке с использованием возможностей распределенных библиографических ресурсов и сетевых технологий. При этом появляются возможности для постановки актуальных задач научно-информационной и библиотечной деятельности, и в частности новых задач информационного обслуживания исследователей в области психолого-педагогических и смежных с ними наук.

Библиометрия основана на количественном анализе библиографических данных публикаций, содержащихся в различных научных информационных базах данных, включая публикации, сгруппированные по разным признакам: авторам, журналам, тематическим рубрикам, странам и т.п. Анализ результатов, полученных с помощью методов библиометрии должен быть многоаспектным. Особенно это касается междисциплинарных исследований в области образования, так как современная наука характеризуется стремительным ростом отдельных направлений, значение которых не всегда на первоначальных этапах можно объективно оценить. Необходимо подчеркнуть, что в российской науке оценка деятельности отдельных исследователей и научных коллективов зачастую проводится по упрощенным методикам, на основе простого подсчета отдельных публикаций и ссылок.

При переходе от отдельных разрозненных оценок к систематическому мониторингу всего комплекса наук об образовании на основе библиометрических методов повышаются требования к качественным характеристикам библиографической информации и применяемым статистическим методам. Задача такого мониторинга – это не одноразовая задача. По оценке специалистов периодичность ее решения – не менее одного раза в два года. Информация, накопленная при проведении библиометрических исследований в течение нескольких циклов, может служить базой для обоснованного решения задач краткосрочного и долгосрочного прогнозирования. Без этих прогнозов невозможно формирование эффективной стратегии научных исследований в сфере образования.

Вместе с этим, развитие в РАО полномасштабных библиометрических исследований потребует дополнительных финансовых затрат и подготовки соответствующих специалистов. Необходимо планировать развитие таких исследований в Академии на перспективу, а в настоящий момент эффективно использовать уже имеющиеся заделы, созданные в научных организациях РАО и, в частности, в Государственной научной библиотеки им. К.Д. Ушинского.

Второе направление обеспечивает оценку эффективности научных исследований, проводимых в РАО и контроль за использованием их результатов. Основой данного направления мониторинга является создаваемая в РАО Единая система учета научных результатов и контроля за их использованием (ЕСУНР), включающая учет результатов научно-технической деятельности в соответствии с постановлением Правительства Российской Федерации и в рамках государственной Системы научно-технической информации.

Объектами мониторинга являются результаты научной деятельности, отраженные в явном виде в научных статьях, монографиях, отчетах, заявках на регистрацию результатов научной деятельности и других материалах.

Основными формами мониторинга в этом случае являются актуализация и ведение базы данных ЕСУНР, анализ на ее основе оценки результативности научных исследований и подготовка необходимых аналитических материалов. Для реализации данного направления необходимо на основе нормативных правовых актов Правительства Российской Федерации и нормативных документов министерства разработать соответствующие нормативные и методические документы РАО.

Третье направление мониторинга развивает апробированную в РАО систему проведения инвентаризации деятельности подведомственных научных организаций РАО, обеспечивает на основе ежегодного сбора информации о подведомственных научных организациях по установленной форме актуализацию и ведение базы данных о материальном и кадровом потенциале научных организаций, о направлениях и результатах их деятельности и подготовку соответствующих аналитических материалов. В частности, эта база данных будет использоваться и при проведении других форм мониторинга. В данном случае объектами мониторинга являются научные организации, их подразделения и научные школы.

Реализация перечисленных направлений мониторинга в полном объеме является сложной многоуровневой задачей. Поэтому система мониторинга должна строиться поэтапно, с учетом структуры Российской академии образования, структуры информационных потоков, используемых при мониторинге, и в ней должны быть задействованы все основные субъекты, формирующие, обрабатывающие и использующие информационные ресурсы РАО.