Глава 7

Рис. 7.5. Голубь в клетке Скиннера реагирует на

световой сигнал, появляющийся перед ним на стенке

при освещении пластмассового диска с другой сто-

роны. В ответ на такой сигнал голубь ударяет по

диску клювом, чтобы в кормушке появилось зерно.

жающее его к конечной цели, и у него постепенно вырабатывается

заданное поведение.

Допустим, что нам нужно обучить голубя ударять клювом по

маленькому светящемуся кружку, когда он захочет получить вознаграж-

дение в виде зернышка (рис. 7.5). Вначале мы будем давать ему

зернышко каждый раз, когда он зайдет в ту половину клетки, где

находится светящийся кружок. Далее мы будем вознаграждать его лишь

в том случае, если он не только зашел в эту половину клетки, но еще

и повернулся головой к стенке, на которой находится кружок. На

третьем этапе можно, например, давать зернышко при сочетании этих

двух условий, если вдобавок еще клюв животного направлен в сторону

кружка. Затем постепенно можно заставить голубя касаться клювом

кружка и, наконец, ударять по нему с целью получить вознаграждение.

Как мы видим, при таком методе обучения к очередному этапу

переходят лишь тогда, когда уже сформировалась поведенческая реак-

ция, необходимая на предыдущем этапе (рис. 7.6).

По мнению Скиннера и других бихевиористов, именно так происхо-

дит выработка большинства поведенческих реакций у человека. Действи-

тельно, можно привести множество примеров, как будто бы частично

подтверждающих это.

С позиций Скиннера можно объяснить очень быстрое обучение

ребенка первым словам (не распространяя, однако, эту концепцию на

освоение языка в целом). Вначале, когда ребенок еще только начинает

произносить какие-то членораздельные звуки, лепет <ме-ме-ме> уже

вызывает восторг окружающих, и особенно счастливой мамы, которой

уже кажется, что дитя зовет именно ее. Однако вскоре энтузиазм

родителей по поводу таких звуков остывает до тех пор, пока младенец

ко всеобщей радости не выговорит <мо... мо>. Потом и эти звуки

перестают для новорожденного подкрепляться, пока не появится

сравнительно членораздельное <мо-мо>. В свою очередь это слово по

тем же причинам вскоре сменится сочетанием <мома>, и наконец

ребенок отчетливо выговорит свое первое слово-<мама>. Все же

остальные звуки будут восприниматься окружающими лишь как <дет-

Научение 311

Рис. 7.6. Крыса, помещенная в клетку Скиннера,

должна при появлении определенного стимула на-

жать на рычаг, за что получает пищевое вознаграж-

дение.

ский лепет> в буквальном смысле слова, и они постепенно исчезнут из

<лексикона> новорожденного.

Таким образом, в результате избирательного поощрения со стороны

членов семьи младенец отбрасывает те неправильные реакции, за

которые он не получает социального подкрепления, и сохраняет лишь те,

которые наиболее близки к ожидаемому результату.

Формирование реакции играет роль не только в воспитании ребенка,

но также в отношениях между супругами и в различных аспектах

социальной жизни. Каждый раз, когда индивидуум или социальный

институт хочет добиться той или иной поведенческой реакции от

партнера или от группы населения, он вполне может запланировать

и реализовать такие подкрепляющие факторы, которые повышали бы

вероятность желательного поведения. Однако ясно, что подобные

методы часто находятся на грани манипулирования личностью и не

всегда практикуются исключительно для ее блага.

Кроме того, как мы уже знаем из главы 6, сторонники когнитивного

подхода к мотивации полагают, что внешняя мотивация, создаваемая

подкреплением, чаще всего приводит к исчезновению внутренней моти-

вации, присутствующей на первых этапах во многих видах поведения

у человека (см. документ 7.3).

Для того чтобы лучше разобраться в приведенных примерах, нам

нужно теперь вернуться к некоторым аспектам подкрепления.

^

Различные стороны процесса подкрепления

Подкрепление-это такое воздействие, при котором появление или

исчезновение какого-то стимула в результате той или иной поведен-

ческой реакции повышает вероятность повторения этой реакции. На-

пример, если голодное животное каждый раз будет находить в опреде-

ленном углу помещения пищу, то оно будет все чаще направляться

в этот угол (хорошим примером могут служить эксперименты Олдса,

в которых были открыты центры удовольствия; см. документ 6.4).

И напротив, если после зажигания красной лампочки животное будет

.112 Глава 7

получать удар током, а избежать его можно будет только перепрыгнув

из одной половины клетки в другую, то вероятность такой реакции на

красную лампочку будет возрастать. В первом случае потребление пищи

или удовольствие, получаемое при электростимуляции мозга, играет

роль положительного подкрепления. Во втором случае речь идет об

отрицательном подкреплении ^ - предотвращении электрического удара.

Часто смешивают отрицательное подкрепление с наказанием. Одна-

ко, как мы уже знаем, подкрепление всегда увеличивает вероятность

повторения данной поведенческой реакции, а наказание, наоборот,

приводит к исчезновению такой реакции, которая сочтена нежелатель-

ной. Значит, в отличие от подкрепления при наказании стремятся либо

подать аверсивный раздражитель (например, нанести животному удар

током или отшлепать ребенка), либо лишить вознаграждения (вкусной

еды или ласки) каждый раз, когда проявляется такая форма поведения,

которую нужно устранить.

Скиннер и многие психологи принципиально отрицают наказание как

средство воспитания, предпочитая в основном использование положи-

тельных подкрепляющих факторов, которые способствуют выработке

у ребенка социально адекватного поведения, а не подавлению социально

неадекватного. По их мнению, нежелательные формы поведения легко

могли бы исчезнуть, если бы те, кому доверен процесс воспитания,

осуществляли его правильно и не были вынуждены наказывать за то, что

они сами вначале непроизвольно поощряли.

Кроме того, бихевиористы различают первичное и вторичное под-

крепление. Первичное подкрепление -это удовлетворение физиологиче-

ских потребностей, таких как голод, жажда, сон и т. п. Что касается

вторичного подкрепления, то здесь речь идет об удовлетворении, как-то

связанном с другими подкрепляющими факторами (первичными или

вторичными). Когда мы получаем гонорар или диплом за выполненную

работу, когда ребенка награждают игрушкой или военного-орденом^,

когда человек получает престижную должность-во всех этих случаях

действует вторичное подкрепление, удовлетворение социальных потреб-

' Надо сказать, что этот термин несколько неудачен, так как всякое подкреп-

ление по определению должно способствовать выработке какой-то формы пове-

дения. т. е. оказывать положительное действие. Видимо, правильнее было бы

в обоих случаях говорить о подкреплении, но не о положительном и отрицатель-

ном, а о положительном и аверсивном (в зависимости от его значения для

организма). Однако условности и общепринятые правила, особенно в науке,

довольно живучи, и поэтому многие студенты еще долго будут недоумевать по

поводу того. почему организм может столь активно стремиться к отрицатель-

ному подкреплению.

^ Такое подкрепление широко практиковалось Наполеоном-основателем

ордена Почетного легиона и ярко выраженным лидером. Его приемы поощрения

вошли в историю: всем известно, что он мог потрепать за ухо гвардейца,

который, возможно, вскоре будет убит в сражении, или присвоить дворянский

титул первому подвернувшемуся вояке в награду за какие-то услуги.

Научение 313

ностей, повышающее самоуважение у лиц, у которых оно высоко

развито или, наоборот, поколеблено.

Угасание, дифференцировка и генерализация

Мы уже видели, что как при реактивном, так и при оперантном

научении приобретенная реакция сохраняется лишь до тех пор, пока ее

поддерживают безусловным раздражителем (в первом случае) или

специальным подкреплением (во втором случае). Если же эти подкреп-

ляющие факторы перестают действовать, то выработанное на их основе

поведение быстро угасает и после нескольких попыток прекращается

вовсе. Например, если сразу после звонка не следует подача пищи,

у собаки вскоре перестает в ответ на этот стимул выделяться слюна.

Точно так же, если в семье новорожденного ребенка вдруг перестанут

интересоваться звуками, которые он произносит, его словарный запас,

скорее всего, не будет развиваться быстро и адекватным образом. Все

это проявления процесса угасания.

Важно отметить, что речь здесь идет именно об угасании, а не об

исчезновении или <стирании следов>. Дело в том, что если снова начать

предъявлять безусловный раздражитель или подкрепляющий фактор, то

исчезнувшее было поведение почти сразу же восстанавливается.

С угасанием тесно связана так называемая дифференцировка. При

дифференцировке те поведенческие реакции, которые перестают сопро-

вождаться безусловным раздражителем или подкреплением, исчезают,

и сохраняются лишь такие реакции, при которых эти факторы продол-

жают действовать. Например, если внезапно прекратить подачу пищи

после звука колокольчика, но продолжать давать ее в сочетании со

звуком зуммера, то слюноотделение на первый из этих звуковых

раздражителей прекратится, а на второй сохранится. Точно так же и наш

младенец в приведенном выше примере постепенно перестанет издавать

неподкрепляемые звуки, и будет повторять лишь те, за которыми

следует социальное поощрение.

Важнейшую роль в научении путем выработки условных связей

играет процесс генерализации ^. Именно благодаря этому явлению вновь

образованная связь распространяется на все то, что похоже на безуслов-

ный раздражитель или на ситуацию, в которой происходило подкрепле-

ние. Например, в опытах Уотсона и Рейнер у маленького Альберта (см.

документ 7.1) быстро выработался страх перед всеми белыми пушисты-

ми предметами-от бороды деда Мороза до мехового воротника на

пальто матери. Все мы знаем, как быстро наступает генерализация

у плаксивых детей-сначала они хнычут, требуя конфету, а потом-уже

всегда, как только им чего-нибудь захочется, будь то игрушка в магазине

или телевизионная передача, идущая по параллельному каналу одно-

временно с любимой передачей родителей (табл. 7.1).

Павлов называл этот процесс <иррадиацией>.- Прим. перев.

Таблица 7.1. Сравнение реактивного и оперантного обусловливания

Реактивное обусловливание

Оперантное обусловливание

Синонимы

Способ научения

Соответствующие типы

поведения

Степень участия организма

в целом

Временные отношения

Типы связей

Угасание

Генерализация

Дифференцировка

Павловское, классическое

Путем ассоциации между специфическим

стимулом (вызывающим естественный

рефлекс) и нейтральным стимулом (2а)

Рефлекторные и эмоциональные реакции

Связь между безусловным (БС) и условным

(УС) стимулами формируется при пас-

сивном участии организма в целом (2а)

Индифферентный стимул (ИС) в большин-

стве случаев должен предшествовать

безусловному (БС) (За)

Физиологическая связь между УС и безуслов-

ным рефлексом (БР) (1а)

Никакой физиологической связи между

индифферентным стимулом (ИС) и усло-

вным рефлексом (УР) (2а)

В результате отмены БС (4а)

УР вызывается всеми стимулами, сходными

с УС

УР остается только на те сходные с УС

стимулы, после которых следует БС

Скиннеровское, инструментальное

Путем ассоциации между поведением и его

последствиями (26)

Произвольное поведение

Для формирования связи между реакцией

и подкреплением необходимы активные

действия организма над объектами

окружающей среды (26)

Реакция всегда должна предшествовать

подкреплению (36)

Связь между реакцией и естественным

поведенческим репертуаром организма

(16)

Никакой физиологической связи между

реакцией и подкреплением (26)

В результате отмены подкрепления (46)

Реакция возникает во всех ситуациях,

сходных с той, в которой происходило

подкрепление

Остаются только те реакции, за которыми

следует подкрепление

-UP]

Физиологическая связь между БС и БР

(16)

1 Ситуация Х 1

[Реакция А[

[Реакция В\

(2а)

Ассоциация между ИС и БС

(индифферентным и безусловным

стимулами)

(За)

Реакции на ситуацию Х случайны

(26)

Подкр. \ч-(Реакция А)

^__________

Реакция 81

Подкрепление связано с реакцией А

в ситуации Х

(36)

Подкр.

Реакция А-

условная

Ситуация Х

Реакция В

ИС в результате ассоциации с БС

может превратиться в УС,

способный вызывать УР

Подкрепляющая ситуация вызывает

обусловливание реакции.

Другие реакции угасают

<4а)

(46)

О

[УС)-"'

Угасание УР

Угасание

^ реакции А

Ситуация Х \"

Отмена БС вызывает угасание УР

Отмена подкрепления вызывает

угасание условной реакции