L'effet McGurk

Source : Laboratoire de Jonathan Flombaum, Johns Hopkins University

Langue parlée, une réussite humaine singulière, s’appuie fortement sur des mécanismes perceptifs spécialisés. Une caractéristique importante des mécanismes de perception de langue, c’est qu’ils dépendent simultanément des informations auditives et visuelles. C’est logique, parce que jusqu'à l’époque moderne, une personne pouvait espérer que la plupart de langue serait entendu en face-à-face. Et parce que la production de phonèmes spécifiques requiert articulation précise, la bouche peut fournir des informations visuelles bonnes sur ce que quelqu'un veut dire. En effet, avec une vue de près et dégagée du visage d’une personne, la bouche peut souvent fournir mieux les signaux visuels que discours fournit des signaux auditifs. Le résultat est que le cerveau humain favorise l’entrée visuelle et l’utilise pour lever l’ambiguïté sur une ambiguïté inhérente au langage parlé.

Cette dépendance sur entrée visuelle d’interpréter son a été décrite par Harry McGurk et John Macdonald dans un document en 1976 appelé audition des lèvres et voir la voix. ¹ dans ce document, ils ont décrit une illusion qui se pose à travers une incompatibilité entre un enregistrement sonore et un enregistrement vidéo. Cette illusion est devenu connue comme l’effet McGurk. Cette vidéo vous montrera comment produire et interpréter l’effet McGurk.

1. les stimuli

1. Pour rendre McGurk stimuli effet vous aurez besoin d’un caméra de vidéo-le genre sur un smartphone est fine.
2. Vous aurez besoin également d’un ordinateur pour contrôler la présentation des vidéos pour un sujet naïf.
3. Dirigez votre appareil photo à vous-même, afin que votre tête remplit l’écran.
4. Faire quatre enregistrements. Chacun devrait être 10 s long. Dans chacun des quatre enregistrements, vous allez répéter un mot 10 fois, environ 1/s. Voici les paroles : bane, gain, pan, peut. Essayez de dire les mots dans chaque vidéo au même rythme.

2. induisant l’Illusion

1. Pour induire l’illusion, vous pourriez raccorder le son d’une vidéo et l’image de l’autre. Mais ce n’est pas vraiment nécessaire. Il est plus facile de le faire juste en utilisant votre téléphone et un ordinateur en même temps. Voici comment.
2. Sur votre ordinateur de bureau ouvert vers le haut de la vidéo dans laquelle vous dites gain. Couper le son et lire la vidéo.
3. Sur votre téléphone, ouvrir la vidéo dans laquelle vous dites bane. Mettre le téléphone derrière l’écran de l’ordinateur pour que le son peut être entendu, mais la vidéo n’est pas visible. Lire la vidéo.
4. Demandez à un observateur à regarder l’écran d’ordinateur pendant que vous écoutez, et quand la vidéo est faite jouer, demandez-leur ce qu’ils entendaient.
5. Faites de même pour le bac/can clip : jouer le flux photo de vous peut dire alors que votre téléphone joue le flux audio de la vidéo de pan. Demander au participant de ce qu’elle a entendu.

N’oubliez pas, les sons joués à votre observateur sont le fléau des mots ou pan. Mais dans les vidéos qui l’accompagne, les mots étant articulés sont gain et peuvent respectivement. Alors quels mots personnes réellement entendra ? La réponse est le plus souvent aucun de ces quatre. Au lieu de cela, le résultat typique est que les observateurs dans la condition bane/gain entendra le mot Dane. Et observateurs à la condition de pan/can vont entendre le mot tan.

Pour comprendre pourquoi nous avons besoin de comprendre un peu comment sont fabriqués les phonèmes. Un phonème est une unité minimale de son discours. Le fléau des mots et gain ont les mêmes phonèmes dans toutes les positions mais la première. Dans le fléau de la parole le premier phonème est un b sonore, notée/b /. Le gain de mot, c’est le son/g /. Les autres sons sont les mêmes-qui est pourquoi la rime des mots. Figure 1 se décompose l’effet McGurk en ce qui concerne les phonèmes initiaux dans ces exemples. Lorsque /b/ est montré et /g/ est joué, gens entendent/d /. Le mot Dane en d’autres termes aussi rime avec bane et gain, avec une différence d’un phonème au début.

Figure 1 : Effet McGurk the arrive quand il y a une incompatibilité entre un phonème qui s’articule dans une présentation visuelle et phonème différent est jouée simultanément par le biais de haut-parleurs. Avec les phonèmes qui partagent certaines propriétés de l’articulation, le résultat entendu peut-être ne pas correspondre soit des stimuli incompatible. L’incompatibilité provoque un son troisième pour se faire entendre. Plus précisément, un /g/ visuelle avec un /b/ auditif entraîne le phonème /d/ se faire entendre. C’est pourquoi un gain visuel avec une Engeance auditif entraîne Dane se faire entendre. De même, un /k/ visuelle avec un /p/ auditif conduit le son /t/ se faire entendre. Qui est pourquoi can/pan tan produit l’effet McGurk.

Pourquoi /b/ contradictoires et /g/ produisent un /d/ spécifiquement ? Eh bien, / b /, / g/et /d/ sont vraiment pas si différentes d’un de l’autre, notamment en termes de comment ils sont produits. Les trois impliquent essentiellement le déplacement de la même quantité d’air du larynx une personne par le biais de leur bouche, avec juste une différence dans lesquels l’orateur place une petite obstruction. Quand quelqu'un fait un /b/ sonore, ils utilisent leurs lèvres pour entraver l’air ; Ceci est connu comme point d’articulation labial. Pour un /g/ sonore, que c’est le point d’articulation palatale-il est loin à l’arrière de la bouche. Et pour un son de /d/, le point d’articulation est connu comme dentaire car personnes gênent la circulation de l’air par la bouche en touchant leur langue pour les dents du haut. La figure 2 montre les relatives points d’articulation pour les six phonèmes dans l’effet McGurk.

Figure 2 : Les humains produisent des sons par le mouvement de l’air par le biais de leur gorge et la bouche. Il s’agit de vibrations dans le larynx. Un ensemble donné de vibrations produites dans le larynx peut produire plusieurs phonèmes différents en obstruant le flux d’air. L’endroit où un obstacle est placé pour créer un son particulier est appelé le point d’articulation. Trois points importants de l’articulation sont connus comme labiale, se référant aux lèvres ; dentaire, se référant au niveau des dents ; et palatale, se référant à la bouche, ou sur la terrasse arrière de la bouche. La figure montre comment les phonèmes produites et entendu dans l’effet McGurk diffèrent en fonction de leurs points d’articulation.

Maintenant que vous savez un peu sur la façon dont ces sons sont produits, la logique de l’effet McGurk devrait être plus évidente. Il fonctionne comme ceci : votre cerveau sait que certains phonèmes sont en fait assez similaires à un autre. Dans l’effet McGurk, le fléau de la parole se joue à l’observateur, led éteinte par un son /b/. Mais le visage dans la vidéo se déplace leur bouche comme ils le feraient pour rendre un son /g/ et le mot de gain. Le cerveau reçoit donc des entrées en conflit les yeux et les oreilles. Pour résoudre ce conflit, le cerveau arrive à la conclusion que la vérité est probablement quelque part entre les deux. /D/ étant l’Øresund entre /b/ et/g / - en ce qui concerne la production - c’est ce que les gens entendent. La même explication s’applique pour le tournage du conflit entre pan et peut en tan. /p/ est un bruit labial et /k/ est un son palatal. Le dentaire dans l’intervalle est/t /.

Un endroit que l’effet McGurk a été important est de comprendre comment très jeunes nourrissons apprennent la langue parlée. Une étude réalisée en 1997 a pu montrer que même 5 mois les bébés perçoivent l’effet McGurk. ² c’est important car il donne à penser que des informations visuelles peuvent servir de nourrissons pour résoudre un problème majeur pour apprendre la langue analyse un flux audio continu dans ses unités. Pensez à comment une langue étrangère parlée à sa vitesse normale peut sembler un tel fouillis que vous pourriez savent même pas où sont les limites de mot. Eh bien, si toutes les langues sont étrangers aux nourrissons, alors comment faire ils comprendre où sont les mots ? L’effet McGurk suggère qu’ils peuvent compter sur les habitudes de l’articulation du visage.