4.Эффект МакГурка. Интеграция зрительных и слуховых образов.

Эффект Мак-Гурка — феномен восприятия, который демонстрирует взаимодействие между слухом и зрением в восприятии речи. Он предполагает, что восприятие речи мультимодально, то есть вовлекает информацию сразу из нескольких органов чувств. Эффект Мак-Гурка так же иногда называют эффектом Мак-Гурка-Мак-Дональда. Впервые он был описан Мак-Гурком и Мак-Дональдом в 1976 году.

Этот эффект может быть испытан при просмотре видеоролика с видеорядом с одной фонемой и звуковой дорожкой с произношением другой фонемы. Часто воспринятая фонема является третьей, средней между этими двумя. Для примера, в оригинальном эксперименте Мак-Гурка испытуемым показывали видеозапись человека, многократно произносившего одними губами слоги ga-ga, в то время как фонограмма воспроизводила слоги ba-ba. Когда испытуемые закрывали глаза и только слушали фонограмму, они точно распознавали слоги. Более того, когда они видели только движения губ, говорившего человека, а фонограмма была выключена, они достаточно точно идентифицировали произносимые звуки как ga-ga (подтверждая тем самым, что при необходимости мы можем читать по губам и что, возможно, делаем это гораздо чаще, чем нам кажется). Однако когда испытуемым одновременно предъявлялись противоречащие друг другу слуховые и зрительные стимулы, они слышали звуки, которых не было ни в одном из них. Например, когда испытуемые видели на экране человека, артикуляция губ которого соответствовала слогам ga-ga, и одновременно звучал акустический сигнал ba-ba, большинство из них слышали совсем другой звук — da-da, при этом большинство испытуемых не осознали несоответствия слуховой и зрительной стимуляций. Последующие эксперименты показали, что подобный эффект наблюдается и при проведении экспериментов с целыми предложениями. Эффект очень устойчивый, и знание о нем почти не влияет на его восприятие, что отлично от некоторых оптических иллюзий, которые разрушаются при тщательном изучении.

Изучение эффекта Мак-Гурка используется для создания более точных программ распознавания речи с применением видео-камеры и читающего по губам программного обеспечения. Исследование Вейрэма и Райта 2005 года показало, что эффект Мак-Гурка может иметь большое влияние на повседневное восприятие.

5.Адекватность гипотезы черт для восприятия речи. Черта звучащей речи. Категоричность восприятия фонем. Эффект бланкирования речи.

Восприятие речи.

Восприятие речи базируется на распознавании фонем (фонема - единица восприятия речи).

Гипотеза черт включает в себя 3 параметра: свойство гласности и согласности, свойство звонкости и глухости, место артикуляции.

Люди склонны путать звуки, различающиеся меньшим числом черт (например Б – П)

По месту артикуляции делятся на:

- билабиальные (такие звуки на П, М т.е. при закрытых губах)

-лабио-дентальные (нижняя губа прижата к зубам, например В, Ф)

-альвеолярные (корень языка прижат к альвеолам, например Д, Т)

-задненебные (язык прижат в мягкому небу, например Г, К)

Восприятие звуков речи носит категорический характер: объекты опознаются как к принадлежащим разным категориям.

Лискер и Абрамсон провели эксперимент, с помощью компьютера создали искусственные звуки. В которых интервал между звуками 150 мс. Испытуемым нужно было ответить на вопрос ”Что вы слышите: б или п?”

Результаты не показали четко выделенного периода взаимного перехода этих звуков.

Значение интеграции звуковой и зрительной информации восприятия речи. Эксперимент Мак-Гурка.

Диктор на экране произносил звуки ”га - га” а в наушники подавалось “ба –ба”. В результате, аудиовизуальный конфликт приводил к смешению, и испытуемые слышали сочетание “да-да”.

Способность человека к в. речи поражает не менее, чем его музыкальность. Мы способны без усилий воспринимать около 180 слов в минуту. Константность в в. речи крайне велика. В данном контексте показателен эффект бланкирования речи. В эксперименте Дж. Миллера(1974) испытуемым давали прослушать магнитофонную запись. Текст диктора время от времени прерывался помехами. Периоды прерывания (бланкирования) варьировались в широком диапазоне. Затем просили воспроизвести услышанное. Оказалось, что даже при утрате 50% звуковой стимуляции правильно распознавалось 80% слов. Схожие данные были получены Френчем и Штейнбергом при помощи срезания частот устной речи. В одном из условий опыта из записи удалялись частоты менее 190 Гц, в другом – более 1900 Гц. В обоих случаях наблюдалось правильное узнавание слов на уровне 70%.