Добавил:
ivanov666
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз:
Предмет:
Файл:Основы научно-исследовательской деятельности. Учебное пособие
.pdf
51
половинам не будет, коэффициент будет высоким. Можно сравнивать
по частям, но лучше — по четным и нечетным.
Валидность теста — понятие, указывающее нам, что тест измеряет, и насколько хорошо он это делает. Валидность — это ком-
плексная характеристика, включающая, с одной стороны, сведения о
том, пригодна ли методика для измерения того, для чего она была со-
здана, а с другой стороны, какова ее действенность, эффективность,
практическая польза. По этой причине не существует какого-то еди-
ного универсального подхода к определению валидности. В зависи-
мости от того, какую сторону валидности хочет рассмотреть исследо-
ватель, используются и разные способы доказательства. Другими
словами, понятие валидности включает в себя разные ее виды, име-
ющие свой особый смысл. Проверка валидности методики называется
валидизацией.
Валидность — соответствие конкретного исследования приня-
тым стандартам (безупречному эксперименту).
Валидность в первом ее понимании имеет отношение к самой
методике, т.е. это валидность измерительного инструмента. Такая
проверка называется теоретической валидизацией. Валидность во
втором ее понимании уже относится не столько к методике, сколько к
цели ее использования. Это — прагматическая валидизация. При тео-
ретической валидизации исследователя интересует само свойство,
измеряемое методикой.
Так как для определения теоретической валидизации тяжело
найти какой-нибудь независимый критерий, лежащий вне методики,
и поэтому раньше принимались на веру голословные утверждения о
валидности этой методики, так как теоретическая валидизация
направлена на доказательство того, что методика измеряет именно
свойство, которое она должна измерить. Для теоретической валиди-
зации кардинальной проблемой является отношение между психоло-
52
гическими явлениями и их показателями, посредством которой эти
психологические явления пытаются познать. Она показывает, что замысел автора и результаты методики совпадают.
Для проверки прагматической валидности используется незави-
симый внешний критерий — показатель проявления изучаемого
свойства в повседневной жизни. В качестве такого критерия могут
выступать успеваемость (для тестов способностей к обучению, тестов
достижений, тестов интеллекта), производственные достижения (для
методик профессиональной направленности), эффективность реаль-
ной деятельности — рисования, моделирования и так далее (для те-
стов специальных способностей), субъективные оценки (для тестов
личности). Оценка валидности методики может носить количествен-
ный и качественный характер. Для вычисления количественного по-
казателя (коэффициента валидности) сопоставляются результаты, по-
лученные при применении диагностических методик, с данными тех
же лиц, полученные по внешнему критерию. Используются разные
виды линейной корреляции (по Спирмену, по Пирсону).
Качественное описание сущности измеряемого свойства. Здесь
не используют статистическую обработку. Существуют несколько
видов валидности, обусловленных особенностями диагностической
методики, а также временным статусом внешнего критерия:
валидность «по содержанию» (используется в тестах дости-
жения): 3–4 вопроса из большой темы могут показать истинные зна-
ния ученика. Для этого результаты диагностики сравнивают с экспертными оценками учителя;
валидность «по одновременности» или текущая валид-
ность — собираются данные, относящиеся к настоящему времени:
успеваемость, производительность. С ними коррелируют результаты
успешности по тесту;
53
«предсказывающая» валидность («прогностическая»). Опре-
деляется по надежному внешнему критерию, но информация по нему
собирается некоторое время спустя после испытания. Точность про-
гноза находится в обратной зависимости от времени, заданного для
такого прогнозирования;
«ретроспективная» валидность (определяется на основе кри-
терия, отражающего события или состояние качества в прошлом).
Может быть использована для быстрого получения сведений о предсказательных возможностях методики.
Репрезентативность характеризует способность выборки испы-
туемых быть представительной, т.е. адекватно отражать характери-
стики того контингента испытуемых, который обследуется. Если вы
имеете тестовые нормы, полученные на оценке старших школьников,
их нельзя примерять для оценки младших школьников.
Стоит отметить, что прежде, чем говорить о репрезентативности, очень важно познакомиться с такими понятиями как:
генеральная совокупность, под которой в психологии понима-
ется относительно большая группа индивидов, которую планируется
исследовать с помощью той или иной медики диагностики;
выборка, под которой понимают некоторую часть или под-
множество генеральной совокупности;
выборка стандартизации, под которой понимают некоторую
группу индивидов, реально подвергающуюся исследованию, с помо-
щью которой в дальнейшем будет оцениваться вся генеральная совокупность.
Репрезентативность определяет, насколько возможно обоб-
щать результаты исследования с привлечением определенной выбор-
ки на всю генеральную совокупность, из которой она была собрана.
Также репрезентативность (представительность, говоря ненаучным
языком) можно определить как свойство выборочной совокупности
54
представлять параметры генеральной совокупности, значимые с точки зрения задач исследования.
На сегодняшний день репрезентативность характеризует то,
насколько с некоторой наперед выбранной или вычисленной стати-
стически погрешностью распределение исследуемых параметров, ко-
торое представлено в некоторой выборке, в реальности соответствует
их действительному распределению. Для обеспечения репрезента-
тивности выборки в рамках любого исследования в обязательном по-
рядке должны выполняться следующие условия: все единицы гене-
ральной совокупности должны характеризоваться равной вероятно-
стью включения в ту или иную выборку; выборка переменных
должна быть осуществлена независимо от исследуемого признака;
отбор в обязательном порядке осуществляется из однородных сово-
купностей; количество единиц в выборке — большое; по возможно-
сти выборка и генеральная совокупность должны быть однородны.
На современном этапе развития одной из важнейших характеристик
наиболее эффективных психодиагностических методик можно
назвать существование некоторых нормативных данных. Под норма-
ми в данном случае понимают некоторое множество характеристик,
из конкретных выборок, а разработка и процедура получения таких
показателей представляют собой стандартизацию теста.
Пример.
Предположим, совокупность — это все учащиеся школы
(600 человек из 20 классов, по 30 человек в каждом классе). Предмет
изучения — отношение к курению вне зависимости от возраста учащихся. Выборка, состоящая из 60 учеников старших классов, гораздо
хуже представляет совокупность, чем выборка из тех же 60 человек, в которую войдут по 3 случайных ученика из каждого класса.
Главной причиной тому — неравное возрастное распределение в
классах. Следовательно, в первом случае репрезентативность вы-
55
борки низкая, а во втором случае репрезентативность высокая (при
прочих равных условиях).
Поэтому начальная оценка репрезентативности выборки, равно как и ее сохранение в дальнейшем, осуществляются в тесной связи с предметом исследования.
Достоверность. Особой разновидностью валидности является
достоверность, которая не всегда выделяется в учебниках по психо-
диагностике, хотя требует специальных усилий и процедур по обес-
печению. Речь идет о сознательных или бессознательных искажени-
ях, которые вносит в тестовые результаты сам испытуемый, руковод-
ствуясь в ходе теста особой мотивацией, отличающейся от той,
которая присуща ему в реальном поведении. Способность теста за-
щищать информацию от мотивационных искажений и есть достовер-
ность теста. Особенно остро проблема достоверности стоит в случае
тест-опросников, которые допускают больше свободы в выборе ис-
пытуемым любого варианта ответа.
Типичный прием обеспечения достоверности — наличие в тест-
опросниках шкал лжи. Эти шкалы основываются главным образом на
феномене социальной желательности — стремлении испытуемых да-
вать в ходе тестирования социально одобряемую информацию. Если
испытуемый набрал по шкале лжи балл выше критического, то его
протокол объявляется недостоверным и ему предлагается либо вы-
полнить данный тест еще раз более откровенно, либо выполнить дру-
гой тест. Многие более специфичные «ловушки», направленные на
измерение достоверности, часто входят как компонент в структуру
конкретного теста, а иногда даже не подлежат разглашению как эле-
мент «ноу-хау» (информационного изобретения) и профессиональной
тайны, разделяемой разработчиками только с лицензированными
пользователями методики, подписавшими особое лицензионное соглашение при приобретении теста.
56
Достоверность тестирования тесно связана со степенью довери-
тельности общения, которую смог психолог установить с данным ис-
пытуемым. Здесь полезно различать две диагностические ситуации:
консультативную (ситуация клиента) и аттестационную (ситуация
экспертизы).
Психологические факторы, от которых зависит достоверность
самоотчета, условно можно сгруппировать в следующие классы:
факторы знания;
фактор социальной желательности;
факторы индивидуальной тактики.
Вопросы для самопроверки
1. Охарактеризуйте основные средства повышения надежности
аппарата психологических измерений.
2. Понятие валидности диагностической методики, виды по це-
ли ее использования.
3. Понятие репрезентативности и достоверности тестов.
Список используемой литературы
1. Ильясов Ф.Н. Репрезентативность результатов опроса в мар-
кетинговом исследовании // Социологические исследования. —
2011. — № 3. — С. 112–116.
2. Ильясов Ф.Н. Алгоритмы формирования выборки социологи-
ческого опроса // Социальные исследования. — 2017. — № 2. —
С. 60–75.
3. Лаврова И.Г. Выборочный метод // Большая медицинская эн-
циклопедия: в 30 т. / главный редактор Б.В. Петровский. — 3-е изд. —
Москва : Советская энциклопедия, 1977. — Т. 4: Валин — Гамбия. —
576 с.
57
4. Летов О.В. Проблема научной объективности: от постпози-
тивизма к постмодернизму / ответственный редактор — кандидат философских наук Г.В. Хлебников. — Москва : РАН. ИНИОН. Центр
социальных научно-информационных исследований, 2011. — 196 с.
5. Психологический словарь / составитель Е.С. Рапацевич ; под
редакцией А.П. Астахова. — Москва : Современная школа, 2010. —
928 с.
6. Карпова Н.С. Репрезентативность выборки // Большая рос-
сийская энциклопедия : [в 35 т.] / главный редактор Ю.С. Осипов. —
Москва : Большая российская энциклопедия, 2004.
58
5. ФОРМУЛИРОВАНИЕ, УТОЧНЕНИЕ,
ИНТЕРПРЕТАЦИЯ ПОНЯТИЙ
И РЕЗУЛЬТАТОВ ИССЛЕДОВАНИЯ
Важнейшим требованием к любой научной работе является упо-
требление однозначной терминологии. Если в обыденной жизни, и
даже в устных выступлениях на семинарах, иногда допускается из-
вестная свобода в оперировании терминами, то в научном исследова-
нии и изложении его результатов требуется четкость и строгость употребления научного языка.
Это требование необходимо выполнять в силу необходимости
интерпретации научных результатов исследования, где в зависимости
от употребления тех или иных понятий строится открытие новых явлений.
Отличие педагогики и психологии от многих других наук за-
ключается в том, что, если другие науки, как правило, располагают
определенным набором особых терминов, понятных в основном спе-
циалистам, то в педагогике и психологии широко пользуются обще-
употребительными понятиями и терминами. Эта особенность приво-
дит к тому, что разные авторы употребляют одни и те же понятия в
разных смыслах, и в педагогическом исследовании особенно важно
каждому понятию, существенному для тематики исследования дать
по возможности точное и однозначное определение, толкования которого строго затем придерживается в своей работе исследователь.
Примером этому могут служить основные педагогические кате-
гории, такие, как образование, воспитание, обучение, содержание об-
разования, педагогические средства и т.д. допускают неоднозначное
толкование.
Поэтому в процессе исследования и на дескриптивном этапе
написания научного труда необходимо постоянно следить за тем
59
смыслом, который вы вкладываете в тот или иной используемый термин.
Каждый раз, когда появляется необходимость использовать ка-
кой-либо термин, нужно обращаться к разнообразию существующих
определений. Для этого надо начинать работу с общих словарей, эн-
циклопедических словарей и энциклопедий. В первую очередь это
словари русского языка (В. Даля, С.И. Ожегова и др.), словари ино-
странных слов, энциклопедические словари. Эти источники дадут од-
нозначное толкование общеупотребительных терминов в общенацио-
нальном масштабе. Хотя термины в них трактуются практически
одинаково, однако каждый из них все же вносит свои нюансы допол-
няя, уточняя и конкретизируя объяснения значений тех или иных
терминов, что позволит лучше ориентироваться при использовании
того или иного термина и обогатит о смысле изучаемого явления. В
процессе написания научных текстов для обогащения языка, совер-
шенствования стиля полезными могут оказаться Словари синонимов
русского языка.
Когда речь идет уже о сугубо педагогических, психологических,
философских понятиях необходимо работать с соответствующими
специальными словарями, энциклопедиями. В философских словарях
любому исследователю полезно познакомиться с содержанием весьма
распространенных в исследованиях общенаучных понятий (катего-
рий), таких как: абстракция, анализ, знание, значение, качество, нор-
ма, обобщение, объект, опыт, основание, проблема, развитие, рефлексия, система, сущность, теория, эксперимент и др.
Наконец, когда речь идет о терминах, имеющих существенное
значение для Вашей работы, Вы начинаете анализировать их толко-
вание не только в словарях и энциклопедиях, но в педагогической и
психологической литературе — монографиях, статьях и т.д. Причем в
первую очередь Вы изучаете фундаментальные публикации тех авто-
60
ров, на чьи теории, концепции Вы опираетесь в методологическом
отношении.
Считается целесообразным составление тезауруса — словаря
основных используемых данными авторами терминов с раскрытием
их толкований. Каждый раз, применяя тот или иной термин, полезно
контролировать себя — в чьей трактовке Вы их используете. В тексте
статей и в диссертации для существенных терминов принято явно
указывать, трактовку какого автора Вы берете и почему. Можно так-
же порекомендовать завести словарь собственной используемой тер-
минологии — по типу алфавитной записной книжки с указанием зна-
чения каждого термина и источника, откуда взято его толкование.
Важно не только выявить ключевые понятия и термины, но и
набрать определенное число синонимов и близких по смыслу поня-
тий и терминов (близлежащее окружение), что дает не только более
объемное представление о предмете исследования, но и бывает
крайне полезным при библиографическом поиске (задании ключевых
слов для поиска монографий, авторефератов диссертаций, статей).
Подчас исследователя не удовлетворяют существующие трак-
товки понятий. Есть два пути — либо обогащать уже существующие
термины новыми смыслами, либо вводить новые термины. Оба пути
таят опасности. Научное сообщество крайне настороженно воспри-
нимает новые термины в науке. Поэтому введение новых терминов
допустимо только в крайних случаях, когда ни один из имеющихся
терминов не может описать соответствующее явление, процесс. С
другой стороны, при использовании устоявшегося научного термина,
недопустимо вкладывать в него какой-то новый смысл, давать «ав-
торские» определения устоявшемуся общепринятому термину.
Однако именно обогащение понятий новыми смыслами, пере-
определения, уточнения понятий — необходимые методы теоретического исследования. Здесь важно различать понятия-категории, до-
Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]