IDENTIFICATION VISUELLE DE STIMULI ASSOCIÉS À L'OPPOSITION /i/-/y/ : ÉTUDE STATIQUE

Abstract

Les travaux présentés par Worley et Àbry dans ce même congrès précisent les conditions d'anticipation du geste labial dans des séquences /iy/ en français : dans une séquence /i/->/y/, le geste d'arrondissement peut être préparé dès le début de la voyelle initiale, sans incidence acoustique, alors que les non-linéarités articulatori-acoustiques empêchent toute anticipation du /y/ vers le /i/. Nous étudions ici des séquences /zVizV2/, (Vi, v 2 = /i/ ou /y/), et nous montrons que le geste labial est bien perçu et correctement identifié visuellement, les sujets détectant l'anticipation d'arrondissement /i/->/y/ sans aucune ambiguïté. Par contre, les transitions de formants indiquant le geste de la première à la seconde voyelle ne sont pas exploitées auditivement, car elles peuvent être rapportées autant au geste consonantique /z/ qu'au geste vocalique Vi->V2.

L’Analyse de scènes audio‑visuelles : un paradigme venu de la Gestalt, en plein essor pour l’étude de la multimodalité du langage

“…Pour ce stimulus, l'information visuelle portée par la diminution de l'aire aux lèvres est seulement un peu en avance sur l'information auditive portée par l'abaissement du bruit de friction. Ce mouvement d'aire aux lèvres débute en effet dans la fin de la voyelle [i], quelques 40 ms avant l'abaissement du bruit de friction de la consonne : ce qui aboutit à un cas d'anticipation intermédiaire, entre celui où le geste articulatoire est extrêmement précoce, se déployant dès la voyelle non arrondie [i] (comme dans l'étude de P. Escudier et al, 1990) et le cas où le geste articulatoire est synchrone du décours acoustique, comme dans notre première expérience. Ainsi, pour ce troisième cas, la parole peut être entendue aussi précocement qu'elle est vue.…”

“…La voyelle [y] était identifiée en audio aussitôt que le mouvement du bruit de friction descendait au cours de la consonne [z] ; tandis qu'en vision seule, les sujets avaient besoin d'attendre un degré de constriction labiale plus important avant d'identifier décisivement la voyelle aux lèvres, ce qui correspond à des effets différents de l'arrondissement, plus précoce sur la fricative que sur la structure des formants vocaliques. Le fait que la courbe d'identification auditive soit en avance de 20 ms sur la perception audiovisuelle révèle l'intégration par nos sujets des deux modalités auditive et visuelle, avec un effet de ralentissement de l'identification auditive par la modalité visuelle.Avec un même stimulus [zizy], enregistré chez le même locuteur près de dix ans auparavant, PierreEscudier et al (1990) avaient observé le résultat classique de l'avance de la vision sur l'audition (avec un geste d'arrondissement perçu visuellement 40 à 60 ms avant sa perception acoustique). L'analyse articulatoire du stimulus révèle que le geste labial d'arrondissement des lèvres pour la voyelle [y] est très anticipé dans la production de ce locuteur : l'établissement du geste de constriction de [y] se fait en effet pendant la deuxième partie de la voyelle [i] précédente, et le minimum de constriction caractéristique de [y] est atteint en début de consonne [z].…”