Вчені з Інституту психолінгвістики імені Макса Планка і Тілбургского університету перевірили, чи можуть візуальні сигнали вплинути на наше сприйняття звуків. Щоб дослідити це питання, фахівці відібрали кілька голландських слів, які відрізнялися тільки наголосом. Наприклад, слово «Plato» з наголосом на перший склад - це ім'я давньогрецького філософа Платона. А з наголосом на другий - плато.
Потім вчені відібрали групу чоловіків і жінок середнього віку. Їм показали відео, де один з авторів дослідження вимовляє омографи, паралельно роблячи ритмічні жести рукою. Після респондентам запропонували вибрати, яке слово виголосив вчений, спираючись на вимову, а не на жести.
Виявилося, слухачі частіше сприймали склад як ударний, якщо на ньому акцентували увагу жестів. Цей ефект зберігався, навіть якщо вчений вимовляв не слово, а набір букв: «BAAGpif» або «baagPIF». Крім того, з'ясувалося, що жести впливали і на довжину гласною: так, в першому випадку учасники почули довгий «а» в слові «baagpif», а в другому - коротке. Результати і подробиці експерименту команда опублікувала в журналі Proceedings of the Royal Society B.
«Люди слухають не тільки вухами, а й очима, - розповів Харт Рутгер Боськера, автор роботи. - Ці результати вперше показують, що жести впливають на те, які звуки ми чуємо ». Дослідники вважають, що ефект може бути більш сильним в звичайному житті, коли мова, як правило, менш зрозуміла, ніж під час експерименту в лабораторії. Так що в умовах шуму жести можуть виявитися корисними.
Крім того, результати дослідів мають значення у взаємодії людини і комп'ютера - для поліпшення систем розпізнавання мови. «Здається очевидним, що такі системи повинні враховувати більше, ніж просто мова», - уклав Боськера.
Вчені збираються продовжити дослідження, використовуючи технологію віртуальної реальності. Вони хочуть перевірити, наскільки специфічні ці ефекти, чи впливають на сприйняття звуків тільки жести або можна впливати на слухачів і іншими візуальними сигналами, наприклад кивками голови або рухом брів.
Джерело: Naked Science