Efecto McGurk

El efecto McGurk es un fenómeno perceptual que demuestra una interacción entre la audición y la visión en la percepción del habla. La ilusión ocurre cuando el componente auditivo de un sonido se combina con el componente visual de otro sonido, lo que lleva a la percepción de un tercer sonido. La información visual que una persona obtiene al verla hablar cambia la forma en que escucha el sonido. Si una persona obtiene información auditiva de mala calidad pero información visual de buena calidad, es más probable que experimente el efecto McGurk. Las capacidades de integración de información auditiva y visual también pueden influir en si una persona experimentará el efecto. Se ha demostrado que las personas que tienen una mejor integración sensorial son más susceptibles al efecto. Muchas personas se ven afectadas de manera diferente por el efecto McGurk según muchos factores, incluido el daño cerebral y otros trastornos.

Fondo

Se describió por primera vez en 1976 en un artículo de Harry McGurk y John MacDonald, titulado "Escuchar labios y ver voces" en Nature (23 de diciembre de 1976). Este efecto se descubrió por accidente cuando McGurk y su asistente de investigación, MacDonald, pidieron a un técnico que doblara un vídeo con un fonema diferente al hablado mientras realizaban un estudio sobre cómo los bebés perciben el lenguaje en diferentes etapas de desarrollo. Cuando se reprodujo el vídeo, ambos investigadores escucharon un tercer fonema en lugar del que se hablaba o pronunciaba en el vídeo.

Este efecto se puede experimentar cuando un vídeo de la producción de un fonema se dobla con una grabación de sonido de un fonema diferente que se está pronunciando. A menudo, el fonema percibido es un tercer fonema intermedio. Por ejemplo, las sílabas /ba-ba/ se pronuncian sobre los movimientos labiales de /ga-ga/, y la percepción es de /da-da/. McGurk y MacDonald originalmente creyeron que esto era el resultado de las propiedades fonéticas y visuales comunes de /b/ y /g/. Se han observado dos tipos de ilusión en respuesta a estímulos audiovisuales incongruentes: fusiones ('ba' auditiva y 'ga' visual producen 'da') y combinaciones (&# 39;ga' auditivo y 'ba' visual producen 'bga'). Este es el esfuerzo del cerebro para proporcionar a la conciencia la mejor suposición sobre la información entrante. La información que proviene de los ojos y los oídos es contradictoria, y en este caso, los ojos (información visual) han tenido un mayor efecto en el cerebro, y así se han creado las respuestas de fusión y combinación.

La visión es el sentido principal de los humanos, pero la percepción del habla es multimodal, lo que significa que involucra información de más de una modalidad sensorial, en particular, la audición y la visión. El efecto McGurk surge durante el procesamiento fonético porque la integración de la información visual y de audio ocurre temprano en la percepción del habla. El efecto McGurk es muy sólido; es decir, el conocimiento sobre ello parece tener poco efecto en la percepción que uno tiene de él. Esto es diferente de ciertas ilusiones ópticas, que se rompen una vez que uno "ve a través" de la visión. a ellos. Algunas personas, incluidas aquellas que llevan más de veinte años investigando el fenómeno, experimentan el efecto incluso cuando son conscientes de que está ocurriendo. Con la excepción de las personas que pueden identificar la mayor parte de lo que se dice únicamente leyendo los labios, la mayoría de las personas tienen una capacidad bastante limitada para identificar el habla a partir de señales únicamente visuales. Un fenómeno más extenso es la capacidad del habla visual para aumentar la inteligibilidad del habla escuchada en un ambiente ruidoso. El habla visible también puede alterar la percepción de sonidos del habla perfectamente audibles cuando los estímulos del habla visual no coinciden con el habla auditiva. Normalmente, se cree que la percepción del habla es un proceso auditivo; sin embargo, nuestro uso de la información es inmediato, automático y, en gran medida, inconsciente y por tanto, a pesar de lo ampliamente aceptado como cierto, el habla no es sólo algo que escuchamos. El habla se percibe mediante todos los sentidos que trabajan juntos (ver, tocar y escuchar el movimiento de una cara). El cerebro a menudo no es consciente de las contribuciones sensoriales separadas de lo que percibe. Por lo tanto, cuando se trata de reconocer el habla, el cerebro no puede diferenciar si está viendo u oyendo la información entrante.

También se ha examinado en relación con el testimonio de los testigos. El estudio de Wareham y Wright de 2005 demostró que la información visual inconsistente puede cambiar la percepción de las expresiones habladas, lo que sugiere que el efecto McGurk puede tener muchas influencias en la percepción cotidiana. No se limita a las sílabas, el efecto puede ocurrir en palabras completas y tener un efecto en las interacciones diarias del que la gente no es consciente. La investigación en esta área puede proporcionar información no solo sobre cuestiones teóricas, sino que también puede proporcionar relevancia terapéutica y diagnóstica para quienes padecen trastornos relacionados con la integración auditiva y visual de las señales del habla.

Factores

Interno

Daño cerebral

Ambos hemisferios del cerebro contribuyen al efecto McGurk. Trabajan juntos para integrar la información del habla que se recibe a través de los sentidos auditivos y visuales. Es más probable que se produzca una respuesta de McGurk en personas diestras para quienes el rostro tiene acceso privilegiado al hemisferio derecho y las palabras al hemisferio izquierdo. En las personas a las que se les han realizado callosotomías, el efecto McGurk todavía está presente pero significativamente más lento. En personas con lesiones en el hemisferio izquierdo del cerebro, las características visuales suelen desempeñar un papel fundamental en la terapia del habla y el lenguaje. Las personas con lesiones en el hemisferio izquierdo del cerebro muestran un efecto McGurk mayor que los controles normales. La información visual influye fuertemente en la percepción del habla en estas personas. Existe una falta de susceptibilidad a la ilusión de McGurk si el daño del hemisferio izquierdo resultó en un déficit en la percepción visual segmentaria del habla. En las personas con daño en el hemisferio derecho, se presenta deterioro tanto en las tareas de integración visual como audiovisual, aunque todavía son capaces de integrar la información para producir un efecto McGurk. La integración sólo aparece si se utilizan estímulos visuales para mejorar el rendimiento cuando la señal auditiva está empobrecida pero es audible. Por lo tanto, se presenta un efecto McGurk en personas con daño en el hemisferio derecho del cerebro, pero el efecto no es tan fuerte como en un grupo normal.

Dislexia

Los individuos disléxicos exhiben un efecto McGurk menor que los lectores normales de la misma edad cronológica, pero mostraron el mismo efecto que los lectores de la misma edad en el nivel de lectura. Los disléxicos diferían particularmente en las respuestas combinadas, no en las respuestas de fusión. El menor efecto McGurk puede deberse a las dificultades que tienen los disléxicos para percibir y producir grupos de consonantes.

Deterioro específico del lenguaje

Los niños con problemas específicos del lenguaje muestran un efecto McGurk significativamente menor que el niño promedio. Utilizan menos información visual en la percepción del habla o tienen una atención reducida a los gestos articulatorios, pero no tienen problemas para percibir señales únicamente auditivas.

Trastornos del espectro autista

Los niños con trastornos del espectro autista (TEA) mostraron un efecto McGurk significativamente reducido que los niños sin ellos. Sin embargo, si el estímulo no era humano (por ejemplo, hacer rebotar una pelota de tenis con el sonido de una pelota de playa) entonces obtenían puntuaciones similares a las de los niños sin TEA. Los niños más pequeños con TEA muestran un efecto McGurk muy reducido; sin embargo, esto disminuye con la edad. A medida que los individuos crecen, el efecto que muestran se acerca más al de aquellos que no tenían TEA. Se ha sugerido que el efecto McGurk debilitado observado en personas con TEA se debe a déficits en la identificación de los componentes auditivos y visuales del habla en lugar de en la integración de dichos componentes (aunque distinguir los componentes del habla como componentes del habla puede ser isomórfico para integrarlos).).

Discapacidades en el aprendizaje del lenguaje

Los adultos con discapacidades en el aprendizaje del lenguaje exhiben un efecto McGurk mucho menor que otros adultos. Estas personas no están tan influenciadas por la información visual como la mayoría de las personas. Por lo tanto, las personas con pocas habilidades lingüísticas producirán un efecto McGurk menor. Una razón para el efecto menor en esta población es que puede haber actividad desacoplada entre las regiones anterior y posterior del cerebro, o entre los hemisferios izquierdo y derecho. También es posible la etiología cerebelosa o de los ganglios basales.

Enfermedad de Alzheimer

En pacientes con enfermedad de Alzheimer (EA), se muestra un efecto McGurk menor que en aquellos que no la padecen. Muchas veces un tamaño reducido del cuerpo calloso produce un proceso de desconexión de hemisferios. En pacientes con EA se observa una menor influencia sobre el estímulo visual, lo que es una razón para el efecto McGurk reducido.

Esquizofrenia

El efecto McGurk no es tan pronunciado en personas esquizofrénicas como en personas no esquizofrénicas. Sin embargo, no es significativamente diferente en los adultos. La esquizofrenia ralentiza el desarrollo de la integración audiovisual y no le permite alcanzar su punto máximo de desarrollo. Sin embargo, no se observa ninguna degradación. Es más probable que los esquizofrénicos dependan de señales auditivas que de señales visuales en la percepción del habla.

Afasia

Las personas con afasia muestran una percepción deficiente del habla en todas las condiciones (solo visual, solo auditivo y audiovisual) y, por lo tanto, exhibieron un pequeño efecto McGurk. La mayor dificultad para los afásicos está en la condición de sólo visión, lo que demuestra que utilizan más estímulos auditivos en la percepción del habla.

Trastorno bipolar

Un pequeño estudio (N=22 por grupo) no mostró diferencias aparentes entre los individuos con trastorno bipolar y los que no lo tenían, con respecto al efecto McGurk. Sin embargo, las personas con trastorno bipolar mostraron puntuaciones significativamente más bajas en una tarea de lectura de labios. Esto puede sugerir que las vías neuronales formadas y activadas en la integración de la información auditiva y visual del habla en personas con trastorno bipolar son diferentes en comparación con las de personas sin ningún trastorno mental.

Externa

Doblaje cruzado

La discrepancia en la categoría de las vocales redujo significativamente la magnitud del efecto McGurk para las respuestas de fusión. Los tokens auditivos /a/ doblados a las articulaciones visuales /i/ fueron más compatibles que al revés. Esto podría deberse a que /a/ tiene una amplia gama de configuraciones articulatorias mientras que /i/ es más limitada, lo que hace que sea mucho más fácil para los sujetos detectar discrepancias en los estímulos. Los contextos vocales /i/ producen el efecto más fuerte, mientras que /a/ produce un efecto moderado y /u/ casi no tiene efecto.

Visibilidad de la boca

El efecto McGurk es más fuerte cuando el lado derecho de la boca del hablante (a la izquierda del espectador) es visible. Las personas tienden a obtener más información visual del lado derecho de la boca del hablante que del izquierdo o incluso de toda la boca. Esto se relaciona con los factores de atención hemisféricos discutidos en la sección de hemisferios cerebrales anterior.

Distractores visuales

El efecto McGurk es más débil cuando hay un distractor visual presente al que el oyente está prestando atención. La atención visual modula la percepción del habla audiovisual. Otra forma de distracción es el movimiento del hablante. Se produce un efecto McGurk más fuerte si la cara/cabeza del hablante está inmóvil, en lugar de moverse.

Estructura de sílabas

Se puede observar un fuerte efecto McGurk para las sílabas de vocales de clic en comparación con efectos débiles para clics aislados. Esto muestra que el efecto McGurk puede ocurrir en un entorno sin habla. La importancia fonológica no es una condición necesaria para que se produzca el efecto McGurk; sin embargo, aumenta la fuerza del efecto.

Género

Las mujeres muestran un efecto McGurk más fuerte que los hombres. Las mujeres muestran una influencia visual significativamente mayor en el habla auditiva que los hombres para estímulos visuales breves, pero no se observa ninguna diferencia para estímulos completos. Otro aspecto relacionado con el género es la cuestión de los rostros y voces masculinas como estímulos en comparación con los rostros y voces femeninas como estímulos. Sin embargo, no hay diferencia en la fuerza del efecto McGurk para ninguna de las situaciones. Si un rostro masculino se dobla con una voz femenina, o viceversa, todavía no hay diferencia en la fuerza del efecto McGurk. Saber que la voz que escuchas es diferente de la cara que ves, incluso si son de diferentes géneros, no elimina el efecto McGurk.

Familiaridad

Los sujetos que están familiarizados con los rostros de los hablantes son menos susceptibles al efecto McGurk que aquellos que no están familiarizados con los rostros de los hablantes. Por otro lado, no hubo diferencias en cuanto a la familiaridad de la voz.

Expectativa

La congruencia semántica tuvo un impacto significativo en la ilusión de McGurk. El efecto se experimenta con más frecuencia y se califica como más claro en la condición semánticamente congruente en relación con la condición incongruente. Cuando una persona esperaba una determinada apariencia visual o auditiva basándose en la información semántica que la conducía, el efecto McGurk aumentaba considerablemente.

Autoinfluencia

El efecto McGurk se puede observar cuando el oyente es también el hablante o articulador. Al mirarse en el espejo y articular estímulos visuales mientras se escucha otro estímulo auditivo, se puede observar un fuerte efecto McGurk. En la otra condición, donde el oyente pronuncia estímulos auditivos en voz baja mientras observa a otra persona articular los gestos visuales conflictivos, aún se puede ver un efecto McGurk, aunque es más débil.

Sincronía temporal

La sincronía temporal no es necesaria para que el efecto McGurk esté presente. Los sujetos todavía están fuertemente influenciados por los estímulos auditivos incluso cuando se retrasan 180 milisegundos con respecto a los estímulos visuales (punto en el que el efecto McGurk comienza a debilitarse). Había menos tolerancia a la falta de sincronía si los estímulos auditivos precedían a los estímulos visuales. Para producir un debilitamiento significativo del efecto McGurk, los estímulos auditivos tenían que preceder a los estímulos visuales en 60 milisegundos o retrasarse en 240 milisegundos.

Desvío de tareas físicas

El efecto McGurk se reducía considerablemente cuando la atención se desviaba hacia una tarea táctil (tocar algo). El tacto es una percepción sensorial como la visión y la audición, por lo tanto, al aumentar la atención al tacto, disminuye la atención a los sentidos auditivos y visuales.

Mirada

Los ojos no necesitan fijarse para integrar información visual y de audio en la percepción del habla. No hubo diferencia en el efecto McGurk cuando el oyente se concentraba en cualquier parte del rostro del hablante. El efecto no aparece si el oyente se centra más allá del rostro del hablante. Para que el efecto McGurk sea insignificante, la mirada del oyente debe desviarse de la boca del hablante al menos 60 grados.

Otros idiomas

Cualquiera que sea el idioma, todos los oyentes dependen hasta cierto punto de la información visual en la percepción del habla. Pero la intensidad del efecto McGurk difiere según el idioma. Los oyentes en holandés, inglés, español, alemán, italiano y turco experimentan un fuerte efecto McGurk; Los oyentes japoneses y chinos, más débiles. La mayoría de las investigaciones sobre el efecto McGurk entre idiomas se han realizado entre inglés y japonés. Se produce un efecto McGurk menor en los oyentes japoneses que en los oyentes ingleses. La práctica cultural de evitar las caras en los japoneses puede disminuir el efecto McGurk, así como el tono y las estructuras silábicas del idioma. Esta también podría ser la razón por la que los oyentes chinos son menos susceptibles a las señales visuales y, al igual que los japoneses, producen un efecto menor que los oyentes ingleses. Los estudios también muestran que los oyentes japoneses no muestran un aumento en el desarrollo de la influencia visual después de los seis años, como sí lo hacen los niños ingleses. Los oyentes japoneses identifican mejor la incompatibilidad entre los estímulos visuales y auditivos que los ingleses. Esta mayor capacidad podría estar relacionada con la falta de grupos de consonantes en japonés. De todos modos, los oyentes de todas las lenguas recurren a estímulos visuales cuando el habla es ininteligible; el efecto McGurk se aplica entonces a ellos por igual. El efecto McGurk funciona con oyentes de todos los idiomas evaluados.

Discapacidad auditiva

Se han realizado experimentos con personas con problemas de audición y personas que han tenido implantes cocleares. Estos individuos tienden a valorar más la información visual del habla que la información auditiva. En comparación con las personas con audición normal, esto no es diferente a menos que haya más de una sílaba, como una palabra. Con respecto al experimento de McGurk, las respuestas de los usuarios de implantes cocleares produjeron las mismas respuestas que las de las personas con audición normal cuando un estímulo auditivo bilabial se dobla sobre un estímulo visual velar. Sin embargo, cuando un estímulo dental auditivo se combina con un estímulo visual bilabial, las respuestas son bastante diferentes. El efecto McGurk todavía está presente en personas con problemas de audición o que utilizan implantes cocleares, aunque es bastante diferente en algunos aspectos.

Bebés

Al medir la atención de un bebé a ciertos estímulos audiovisuales, se puede registrar una respuesta que sea consistente con el efecto McGurk. Desde unos pocos minutos hasta un par de días, los bebés pueden imitar los movimientos faciales de los adultos y, a las pocas semanas de nacer, pueden reconocer los movimientos de los labios y los sonidos del habla. En este punto, la integración de información visual y de audio puede ocurrir, pero no a un nivel competente. La primera evidencia del efecto McGurk se puede observar a los cuatro meses de edad; sin embargo, se encuentran más pruebas para bebés de 5 meses. A través del proceso de habituar a un bebé a un cierto estímulo y luego cambiar el estímulo (o parte de él, como ba-voicado/va-visual a da-voicado/va-visual), se hace evidente una respuesta que simula el efecto McGurk.. La fuerza del efecto McGurk muestra un patrón de desarrollo que aumenta durante la infancia y se extiende hasta la edad adulta.