Лекція № 9. Надійність психодіагностичних методик

1. Визначення. Фактори, що впливають на надійність методики. Стандартна помилка вимірювання. Надійність вимірювання. Поняття про метод вимірювання ретестовой надійності

Надійність - одне з трьох головних психометричних властивостей будь вимірювальної психодіагностичної методики (тесту).

Надійність - це завадостійкість тесту, незалежність його результату від дії різноманітних випадкових факторів. До числа таких факторів належать:

1) різноманітність зовнішніх матеріальних умов тестування, що міняються від одного випробуваного до іншого (часу доби, освітленості, температури в приміщенні, наявності сторонніх звуків, що відволікають увагу і т. п.);

2) динамічні внутрішні фактори, по-різному діють на різних випробуваних в ході тестування (час так званої врабативаемості - виходу на стабільні показники темпу і точності дій після початку тестування, швидкість настання втоми і т. п.);

3) інформаційно-соціальні обставини (різна динаміка у встановленні контакту з психологом чи лаборантом, які проводять тестування; можливу наявність інших людей в приміщенні, наявність попереднього досвіду знайомства з даними тестом; наявність якогось знання і ставлення до тестів взагалі і т. п. ).

Різноманітність і мінливість цих факторів такі великі, що вони зумовлюють появу у кожного випробуваного непрогнозованого за розмірами і напрямком відхилення виміряного тестового бала від істинного тестового бала (який можна було б, в принципі, одержувати в ідеальних умовах). Середня відносна величина цього відхилення визначається як стандартна помилка вимірювання (Se). Величина помилки вимірювання вказує на рівень неточності або ненадійності тестової шкали.

Помилка виміру (Se) і надійність виміру (R) відповідно до загальноприйнятої психометрической теорії пов'язані наступною формулою:

R = 1 - Se 2 / Sx 2, (1),

де Sx - дисперсія тестових показників Х.

Формула (1) є чисто теоретичною, і на її основі не можна підрахувати надійність тесту, так як величина Se виявляється також невідомою величиною. Тому на практиці застосовують кореляційні методи. Найвідоміший з них - метод перетестірованія («тест-ретест») або метод вимірювання ретестовой надійності. На одній і тій же вибірці випробовуваних (не менше 30 людей, що беруть участь в пілотажний психометрической експериментальному дослідженні) проводять перше тестування Х, а потім повторне тестування Y. Інтервал, як правило, 2 тижні, що гарантує забування питань тесту.

Потім для двох рядів значень Х та Y підраховується, наприклад, лінійний коефіцієнт кореляції, або ранговий коефіцієнт кореляції:

де Sx, Sy - стандартні відхилення X і Y, t;

Cov (X, Y) - коваріація двох змінних X і Y.

Для суті теорії надійності методів важлива можливість визначити помилку вимірювання, після того як підрахована кореляція «тест - ретест» за формулою (3), отриманої шляхом простого перетворення формули (1):

Se = Sx? V1 - R. (3)

Таким чином, якщо стандартне відхилення в тесті склало 10 очок (середнє відхилення, яке в середньому допускають випробовувані від середнього балу для вибірки), а кореляція «тест - ретест» виявилася рівною лише 0,5, то помилка виміру виявляється дуже великий:

Se = 10? V1-0, 5 ~ 7.1.

Виявляється, що похибка вимірювання перекриває більшу частину розкиду тестових показників, так як справжній бал по тесту може відхилятися від виміряного балу на цілих 7 очок! І, якщо випробуваний набрав на 6 очок більше, ніж середній випробуваний, ми не можемо з достатньою впевненістю (статистичною достовірністю) говорити про те, що він істотно перевершив середнього випробуваного, так як це відхилення виявляється в межах стандартної помилки вимірювання.

Таким чином, низька кореляція результатів тесту між першим і повторним тестуванням говорить про те, що випадкові фактори суттєво спотворюють результати тесту. Це означає, що тест не володіє необхідною завадостійкістю і його не можна використовувати як вимірювальний інструмент.

Показник надійності R, який прийнято вважати досить високим, дорівнює або перевищує 0,95. Хоча в особистісних тестах часто користуються значно менш надійними тестами з показниками 0,8-0,9.

Метод вимірювання ретестовой надійності придатний тільки для психічних властивостей, стабільних у часі. Надійність тестів на психічні стани і динамічні установки особистості не можна перевірити таким чином. У цьому випадку застосовують різні методи розщеплення тесту на окремі пункти.

Надійність - характеристика методики, що відображає точність психодіагностичних вимірювань, а також стійкість результатів тесту до дії сторонніх випадкових факторів. Надійність і валідність є найважливішими характеристиками методики як інструменту психодіагностичного дослідження. Будь-яка зміна ситуації дослідження посилює вплив одних і послаблює вплив інших факторів на результат тесту. Загальний розкид (дисперсію) результатів тестового обстеження можна, таким чином, уявити як результат впливу двох груп причин: мінливості, властивої самому вимірюваному властивості, і факторів нестабільності вимірювальної процедури.

У самому широкому сенсі надійність тесту - це характеристика того, якою мірою виявлені у випробовуваних відмінності за тестовими результатами є відображенням дійсних відмінностей в вимірюваних властивостях і якою мірою вони можуть бути приписані випадкових помилок.

У більш вузькому, методичному сенсі під надійністю розуміють ступінь узгодженості результатів тесту, одержуваних при первинному і вторинному його застосуванні у одних і тих же випробовуваних в різні моменти часу з використанням різних (але порівняних за характером) наборів тестових завдань або при інших змінах умов обстеження.

Різновидів характеристик надійності тесту так само багато, як умов, які впливають на його результати. Найбільш широке практичне застосування знаходить кілька типів характеристик надійності: надійність ретестовой, надійність паралельних форм, надійність частин тесту.