Cours 5 - Perception du langage Flashcards
Par quoi est créé le signal acoustique et les voyelles et qu’est-ce que cela crée ensuite?
Produit par l’air qui est poussé par les poumons et passe par les cordes vocales jusqu’à la bouche (et le nez)
* Les voyelles par exemple sont produits par la vibration des cordes vocales et divers changements dans les voies aériennes, des changements dans “les articulateurs” (Langue, lèvres, dents, mâchoire, palais).
o Ces changements causent les “formantes”. (fréquence des changements de pression par les cordes vocales)
Qu’est-ce que sont les formantes? Que pouvons-nous dire sur la 1ère et 2e formante?
Fréquence des changements de pression par les cordes vocales
La 1ère formante est la fréquence la + basse. La 2e est + haute, et ainsi de suite.
Qu’est-ce que peut montrer un spectogramme?
Le spectrogramme nous montre les changements dans les fréquences et
l’intensité.
Par quoi sont produites les consonnes?
Les consonnes sont produites par des rétrécissement des voies aériennes.
Qu’est-ce que sont les formantes transitoires?
Les formantes transitoires sont des changements rapides dans la fréquence
avant ou après une consonne. Transitoire = augmentation de l’intensité
Qu’est-ce qu’un phonème? Combien l’anglais, le français et l’hawaïen en possèdent-ils?
= Les plus petites unités du langage dont le changement change le sens d’un mot. Forme les sons.
* En anglais, il y a 44 phonèmes: (ont + de sons de base) :
o 20 voyelles
o 24 consonnes
* En français, 36 phonèmes (19 voyelles et 17 consonnes).
* En hawaïen, 11 phonèmes
Les phonèmes sont à la base de la langue, phénomène sonore, verbale. Puisqu’à la base, le langage n’est pas des consonnes, alphabets, etc. Ce sont des phonèmes qui représente le langage à la base. On parle pour communiquer et pour l’expérience sonore (ex. chanter dans sa douche). On ne communique pas avec soi-même en principe en termes d’évolution.
Qu’est-ce que le problème de variabilité?
Problème : il n’existe pas un signal acoustique standard pour chaque phonème.
Les phonèmes n’ont pas toujours les mêmes indices acoustiques. Changent selon :
o Le contexte
o La co-articulation: superposition de l’articulation de plusieurs phonèmes
▪ When you say bat, your lips are unrounded, but when you say boot, your lips are rounded, even during the initial /b/ sound. Thus, even though the /b/ is the same in both words, you articulate each differently. In this example, the articulation of /oo/ in boot overlaps the articulation of /b/, causing the lips to be rounded even before the /oo/ sound is actually produced.
Qu’est-ce que la constance perceptuelle?
La constance perceptuelle: habilité à percevoir les phonèmes de la même façon malgré des indices acoustiques variables (et malgré la coarticulation, on comprend que boot est boot peu importe qui le dit)
o Ceux-ci sont les différentes voix humaines.
o Notre articulation peut changer par variation des phonèmes
o Se fait à même ce que dit UNE même personne : on reconnaît ce qu’elle dit + le son de sa voix et ce, malgré que le spectrogramme perçoit la différence
Qu’est-ce qui peut faire en sorte que le signal acoustique peut varier?
Variation dans la rapidité, accent, prononciation, ton de voix font en sorte que le signal acoustique sera différent.
Quel est le rôle du visage dans la perception du langage?
Le lien entre vision et langage verbal a une base physiologique.
o Calvert et al. ont montré que les mêmes régions corticales sont activées lors de la lecture sur les lèvres et la perception du langage verbal. (Processus moteurs, activité cortex moteur influence perception vocale.) = Évidence de l’effet McGurk : interaction audio-visuel
o Les aires de production et de compréhension de la parole partagent des mécanismes communs.
o On entend mieux quelqu’un qu’on voit, mais c’est aussi car on intègre la modalité visuelle
Interaction audio-visuel en perception du langage : qu’est-ce que L’effet McGurk?
o Le stimulus visuel montre le locuteur disant « ga-ga ».
o Le stimulus auditif dit par le locuteur est « ba-ba ».
o L’observateur regarde le locuteur dire « ga-ga » et entend le stimulus « ba
ba ». Que perçoit-il? « da-da » qui est à mi-chemin entre « da-da » et « ga-ga ».
o Sans l’info visuel, il entend « ba-ba »
L’intégration multimodale se fait automatiquement
Lorsque c’est une personne qu’on connait qui parle, cela active aussi zone de
reconnaissance des visages.
Stimulus visuel change la perception de ce qu’on entend du langage
Rôle de la connaissance langagière: qu’est-ce que l’Expérience de Rubin et al. ?
o Des mots courts (sin, bat et leg) et des non-mots courts (jum, baf et teg) sont présentés à des sujets
o Tâche: presser le levier lorsqu’ils entendent la « phonème cible »
o Pour les mots, 580ms
o Pour les non-mots, 631m
➔ Pour les mots, se fait + vite = supériorité du mot. C’est grâce au fait que notre système est prédictif pour les mots, mais pas les non-mots. Cela explique la rapidité, aide du traitement descendant pour reconnaitre le mot. Un mot dans un contexte aide à le repérer aussi.
Qu’est-ce que l’expérience de Warren?
o Les sujets entendent une phrase dont une phonème est éclipsée par un toussotement
o Tâche: indiquer l’endroit dans la phrase qui est couvert par le toussotement
o Les sujets ne sont pas capables d’identifier correctement l’endroit et ne réalisent même pas qu’une phonème était manquante : c’est l’effet de restauration phonémique.
▪ Peut être influencé par la signification des mots suivant le phonème manquant.
▪ Les mots plus longs augmentent les chances d’effet de restauration phonémique (Top-down processing)
Traitement n’est pas purement descendant. On reçoit imparfaitement, il manque des morceaux à l’information.
Si on écoute dans une langue étrangère, ne va pas fonctionner. Mais on arrive à reconstruire grâce au traitement descendant pour palier à l’imperfection justement.
Qu’est-ce que l’effet de restauration phonémique?
L’effet de restauration phonémique est un phénomène perceptif où le cerveau reconstruit un son manquant ou masqué dans un mot en s’appuyant sur le contexte linguistique et auditif. Par exemple, si un bruit couvre une partie d’un mot, on peut quand même l’entendre correctement grâce à notre connaissance de la langue.
Pourquoi la grammaire est utile pour comprendre le langage?
La grammaire permet de comprendre +++ le langage car améliore le processus
décisionnel de la prédiction puisqu’on connait la logique pour prédire. Phénomène de supériorité grammaticale. Si fait du sens = suit notre prédiction +++
Dans la perception des mots dans une phrase, qu’est-ce que l’expérience de Miller et Isard?
- On présente 3 types de phrases:
o Des phrases normales et grammaticalement correctes
▪ Ex. « Albert tombe sur le plancher »
o Des phrases anormales mais grammaticalement correctes
▪ Ex. « Albert tombe sur la lune »
o Une suite de mots sans grammaire particulière
▪ Ex. Charabia - Les sujets doivent suivre et répéter à voix haute les phrases qu’ils entendent
- Les résultats montrent que les sujets sont:
o 89% corrects pour les phrases normales
o 79% corrects pour les phrases anormales
o 56% corrects pour la suite de mots - Les différences augmentaient si on ajoutait un bruit de fond
Dans la perception des phrases, qu’est-ce que le problème de la segmentation? Comment se fait-il? Par quoi est-ce affecté généralement?
Le problème de la segmentation: il n’y a pas de pause dans le stimulus acoustique (Difficulté à percevoir les mots individuellement dans une phrase)
* Comment se fait la segmentation:
o Principalement par un traitement descendant, incluant la connaissance que l’entendant a du langage
* Plus spécifiquement, la segmentation est affectée par le contexte, le sens et notre connaissance de la structure des mots
On perçoit les langues étrangères comme parlant vite puisqu’on ne sait pas où sont les espaces, on n’arrive pas à segmenter les mots
Quels sont les 2 concepts affectant la connaissance de la structures des mots dans une phrase?
Probabilité de transition
Apprentissage statistique
Qu’est-ce que la probabilité de transition?
La probabilité qu’un son soit suivi d’un autre dans une langue particulière
Qu’est-ce que l’apprentissage statistique?
o Le processus d’apprendre les probabilités de transitions ainsi que les autres propriétés statistiques d’une langue
o On observe ce phénomène chez des enfants de 8 mois et +
o Les enfants s’habituent aux mots et perdent intérêts, préfèrent les stimuli nouveaux donc mots incomplets
Décrivez l’influence des traitements ascendants et descendants dans la perception du langage
Speech perception is the result of top-down processing (based on knowledge and meaning) and bottom-up processing (based on the acoustic signal) working together.
Ascendant :
* L’aspect multimodal
* Le signal acoustique
Descendant : permet de nous adapter aux signaux acoustiques dégradés
* Connaissances, sens
Notre compréhension vient de l’intégration du traitement ascendant et descendant.
La parole vocodée par le bruit est créée en divisant le signal vocal en différentes bandes de fréquence, puis en ajoutant du bruit à chaque bande.
Qu’est-ce que l’effet “pop-out”?
Ability to hear previously unintelligible words the “pop-out” effect. The pop-out effect shows that higher-level information such as listeners’ knowledge can improve speech perception.
o Participants became better at understanding other degraded sentences that they were hearing for the first time.
o Pop-out effect and later improvement in performance also occurred in a group of participants who read the sentence after hearing the degraded version
o What this means is that it wasn’t listening to the clear sound that was important, but knowing the content (the speech sounds and words) of what they were hearing that helped with learning.
Décrivez l’aphasie de Broca vs l’aphasie de Wernicke
- L’aphasie de Broca
o Dommages dans la région de Broca du lobe frontal
o Parlent difficilement et avec des phrases courtes et simples MAIS ils comprennent les autres
▪ Sauf mots de connexion comme « par » « avait », crée confusion pour eux qui a fait quoi
▪ Problème de traiter l’info des phrases - L’aphasie de Wernicke
o Dommages dans le région de Wernicke du lobe temporal
o Parlent facilement mais le contenu n’a pas de sens et est désorganisé
o Difficulté à comprendre les autres et peuvent ne pas et parfois il y a surdité verbale
o Ne comprennent pas l’écriture non plus
o Cas extrême : La surdité verbale, dans laquelle une personne est incapable de reconnaître les mots, même si sa capacité à entendre des sons purs reste intacte.
Les techniques d’imagerie moderne montrent que certains patients avec des dommages au cerveau ne peuvent pas discriminer des syllabes mais peuvent malgré tout reconnaître des mots. D’autres recherches montrent l’existence: lequel? Décrivez-le
Le modèle à double flux de la perception de la parole
o D’un “centre de la voix” dans le sillon temporal supérieur qui serait activé par les voix humaines plus que par d’autres sons
o D’un processus pour la reconnaissance de langage parlé (ventral) distinct d’un autre processus (dorsal) qui relie le signal acoustique aux mouvements utilisés pour produire le langage parlé
Ainsi, les réponses neuronales peuvent être associées à la fois aux phonèmes, qui définissent des sons spécifiques, et aux caractéristiques phonétiques, qui sont liées à la manière dont ces sons sont produits. Si l’on considère la réponse à un phonème ou à une caractéristique particulière sur l’ensemble des électrodes, on constate que chaque phonème ou caractéristique génère un schéma d’activité spécifique à travers ces électrodes. Le code neuronal des phonèmes et des caractéristiques phonétiques correspond donc à un….
codage par population
Dans la perception et production du langage, qu’est-ce que propose Liberman?
Liberman et al. proposent que les mécanismes moteurs responsables pour la production des sons du langage
activent les mécanismes responsables pour la perception des sons
- = Théorie motrice de la perception vocale permet de régler le problème de variabilité des phonèmes.
- Propriété motrice pour chaque phonème individuellement donc règle problème variabilité
- Ils mentionnent des indications de l’existence chez les singes de neurones audio-visuels
- Fait du sens puisque quand on parle, on s’entend, donc c’est interrelié
- Mais comme la théorie n’est pas parfaitement claire, elle est rejetée.
- Amène : Perception catégorielle : quand un stimuli existant sur un continuum est perçu comme divisé en catégories discrètes
o Prouvée avec : voice onset time (VOT), the time delay between when a sound begins and when the vocal cords begin vibrating.
▪ The phonetic boundary is the VOT at which perception changes from one category to another.
▪ The fact that all stimuli on the same side of the phonetic boundary are perceived as the same category is an example of perceptual constancy.
