Еще раз о систематическом смешении и ненадежности

Итак, основным препятствием для достижения внут­ренней валидности в эксперименте с межгрупповым сравнением является потенциальная возможность влия­ния на полученные результаты индивидуальных разли­чий испытуемых в каждой из групп. Из-за этих влияний подлинные воздействия экспериментальных условий мо­гут и вовсе не проявиться. Если группы составлены так, что между ними сохраняется устойчивое различие (например, в одной группе юноши, в другой—девушки), то систематическое смешение независимой переменной с индивидуальными особенностями испытуемых неизбеж­но. А случайные различия между испытуемыми в груп­пе, обусловленные ограниченным размером выборки, будут снижать надежность значений тех зависимых переменных, которые исследуются в эксперименте.

Как мы знаем, по своей внутренней валидности реальные эксперименты не могут быть безупречными. Однако реальные группы испытуемых можно сравни­вать с такими группами, которые участвовали бы в иде­альном и бесконечном эксперименте. Эти мысленные, неосуществимые эксперименты уже знакомы нам по схемам эксперимента с одним испытуемым. В идеаль­ном эксперименте с межгрупповым сравнением членами обеих групп должны быть одни и те же люди. Только тогда полученная разница между условиями независи­мой 165переменной совершенно не будет связана с инди­видуальными различиями испытуемых каждой группы. Однако на практике достичь этого невозможно, так как испытуемые каждой группы должны быть разными людьми. И все же нужно стараться сделать группы как можно больше похожими друг на друга, подбирая их буквально испытуемый к испытуемому.

Для проведения бесконечного эксперимента с меж­групповым сравнением нужно, чтобы обе группы состоя­ли из бесконечного числа испытуемых (причем способ составления групп не должен порождать систематичес­кого смешения). Мы уже советовали вам привлекать для эксперимента большое число испытуемых. Как вы помните, в эксперименте с одним испытуемым для до­стижения высокого уровня надежности с увеличением разброса данных требуется больше проб. А в экспери­менте с межгрупповым сравнением соответствующим требованием будет увеличение количества испытуемых.

Кроме того, надежность индивидуального эксперимента можно повысить путем усреднения изменчивости во вре­мени. Поскольку какая-то часть различий между испы­туемыми целиком зависит от субъективных особенно­стей, этот метод применяется и при межгрупповом срав­нении. Эти различия уменьшатся также в том случае, если для всех испытуемых будут обеспечены примерно равные условия проведения эксперимента. Если в экс­перименте с испанским языком применение того или другого метода обучения к разным студентам как-то различалось, то нужно ожидать подобных различий и в успешности обучения. В индивидуальных эксперимен­тах соблюдение строгости в отношении всех необходи­мых аспектов—независимой, зависимой и дополнитель­ных переменных — будет увеличивать надежность, а в новом случае ее можно повысить путем сокращения межгрупповых различий, уравнивая условия работы ис­пытуемых. И если добиться этого, то высокая надеж­ность эксперимента может быть достигнута и не на столь большом количестве испытуемых.