Глава 7

Рис. 7.3. <Проблемная клетка>, разработанная Торндайком в 1911 году. Кошка,

помещенная в такую клетку, должна была методом проб и ошибок научиться

нажимать на деревянную педаль, что благодаря системе блоков и веревок

позволяло открывать дверцу.

для того, чтобы решить стоящую перед ней задачу-выйти из клетки

и получить пищу, помещенную снаружи.

Наблюдая за животными, Торндайк заметил, что сначала их

действия были чисто случайными, но в конце концов кошка <нечаянно>

Ошибки

Ошибки

8 12 16

Пробы

Ошибки

8 12162024

Пробы

8 12 16

Пробы

Рис. 7.4. Кривые научения методом проб и ошибок. Сходные кривые получал

Торндайк по данным своих опытов на кошках. Видно, что чем больше проб

совершает животное, тем меньше становится число ошибок.

Научение 309

задевала веревку или крючок, освобождалась и получала вознагражде-

ние. Однако по мере увеличения числа попыток действия животных все

больше сосредоточивались вокруг <ключевого> участка клетки, и число

ошибок, а также и время, проведенное в клетке, быстро сокращалось.

Торндайк представил эти результаты в виде кривых (рис. 7.4) и вывел

закономерности, позволяющие объяснить эффективность такого метода

<проб и ошибок>. Согласно важнейшей из этих закономерностей-закону

эффекта,- в случае, если какое-то действие приводит к желательным

результатам, вероятность его повторения возрастает, а если к нежела-

тельным последствиям-снижается (см. документ 7.2).

Однако научение методом проб и ошибок само по себе не очень

эффективно. Если бы новые формы поведения удавалось <изобрести>

лишь случайным образом, было бы трудно объяснить быстрое приобре-

тение новых навыков людьми и домашними животными. Без сомнения,

вполне вероятно, что на протяжении миллионов лет именно такой

процесс приводил к выработке различных навыков у наших предков. Но

не менее очевидно, что по мере совершенствования этих навыков

и упрочения власти человека над окружающей средой постепенно скла-

дывались новые способы формирования и передачи новых типов пове-

дения.

Скиннер-признанный вождь американских бихевиористов в послед-

ние 30 лет-систематизировал теорию Торндайка, пытаясь объяснить,

каким образом в структурированной среде формируется множество

различных типов поведения. При этом Скиннер вскрыл принципы

оперантного обусловливания и формирования реакций путем последова-

тельных приближений.

Формирование реакций

С точки зрения Скиннера, поведение не всегда возникает чисто

случайным образом - нередко оно формируется в результате отбора под

действием подкрепляющего фактора. Таким фактором может быть

любой стимул, появляющийся или исчезающий после той или иной

поведенческой реакции и повышающий вероятность того, что эта

реакция будет повторена с целью получить подкрепление. Это позволяет

объяснить формирование очень сложных поведенческих реакций по-

этапно, каждый этап при этом будет подкрепляться.

Исходя из этих соображений, Скиннер разработал способ формиро-

вания поведения путем последовательных приближений, составляющий

основу оперантного обусловливания. Этот способ состоит в том, что

весь путь от исходного поведения (еще до начала обучения) до конечной

реакции, которую исследователь стремится выработать у животного,

разбивается на несколько этапов. В дальнейшем остается лишь последо-

вательно и систематически подкреплять каждый из этих этапов и таким

образом подводить животное к нужной форме поведения. При таком

способе обучения животное вознаграждают за каждое действие, прибли-