Name: examining online syntactic processing of spoken complex sentences in chinese using dual-modal interference tasks
Uploaded: 2019-09-05T13:30:00
Description: Watch this Scientific Journal Video about Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks at JoVE.com

Cette étude a été soutenue par des subventions du Ministère des sciences et de la technologie, Taiwan, R.O.C. [NSC-101-2410-H-439-001] au premier auteur, Tuyuan Cheng. Les auteurs remercient les membres du laboratoire, Yang Ya-Hui et Chen Pei-Han, de NTIN, pour leur aide dans la préparation et la réalisation de l'expérience.

L'administration de ces expériences a suivi tous les règlements d'éthique de la recherche. Tous les sujets ont fourni le consentement verbal et écrit informé avant que les expériences aient été administrées. Toutes les procédures, les formulaires de consentement et le protocole expérimental ont été approuvés par le Comité d'éthique de la recherche de l'Université nationale Cheng Kung à Taiwan.
1. Expérience 1 tâche d'interférence intraïdale à double modal
<ol><li>Recru...

<ol>
	<li>Just, M. A., Carpenter, P. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+capacity+theory+of+comprehension:+Individual+differences+in+working+memory.">A capacity theory of comprehension: Individual differences in working memory.</a> Psychological Review. 99, 122-149 (1992).</li><li>King, J., Just, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Individual+differences+in+syntactic+processing:+The+role+of+working+memory.">Individual differences in syntactic processing: The role of working memory.</a> Journal of Memory and Language. 30, 580-602 (1991).</li><li>Caplan, D., Waters, G. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Verbal+working+memory+and+sentence+comprehension.">Verbal working memory and sentence comprehension.</a> Behavioral &amp; Brain Sciences. 22, 77-94 (1999).</li><li>Waters, G., Caplan, D., Yampolsky, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=On-line+syntactic+processing+under+concurrent+memory+load.">On-line syntactic processing under concurrent memory load.</a> Psychonomic Bulletin &amp; Review. 10 (1), 88-95 (2003).</li><li>Cowan, N. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=.">.</a> Working Memory Capacity. , (2005).</li><li>Miller, G. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+magical+number+seven,+plus+or+minus+two:+Some+limits+on+our+capacity+for+processing+information.">The magical number seven, plus or minus two: Some limits on our capacity for processing information.</a> Psychological Review. 63, 81-97 (1956).</li><li>Chen, B., Ning, A., Bi, H., Dunlap, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Chinese+subject-relative+clauses+are+more+difficult+to+process+than+the+object-relative+clauses.">Chinese subject-relative clauses are more difficult to process than the object-relative clauses.</a> Acta Psychologica. 129, 61-65 (2008).</li><li>Gibson, E., Wu, H. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Processing+Chinese+relative+clauses+in+context.">Processing Chinese relative clauses in context.</a> Language and Cognitive Processes. 28, 125-155 (2013).</li><li>Hsiao, F., Gibson, E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Processing+relative+clauses+in+Chinese.">Processing relative clauses in Chinese.</a> Cognition. 90, 3-27 (2003).</li><li>Lewandowsky, S., Oberauer, K., Brown, G. D. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=No+temporal+decay+in+verbal+short-term+memory.">No temporal decay in verbal short-term memory.</a> Trends in Cognitive Science. 13, 120-126 (2009).</li><li>Wu, J. T., Chou, T. L., Liu, I. M., Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+locus+of+the+character/word+frequency+effect.">The locus of the character/word frequency effect.</a> Advances in the study of Chinese language processing. , 31-58 (1994).</li><li>Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Tasks+and+timing+in+the+perception+of+linguistic+anomaly.">Tasks and timing in the perception of linguistic anomaly.</a> Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).</li><li>Swinney, D., Zurif, E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Syntactic+processing+in+aphasia.">Syntactic processing in aphasia.</a> Brain and Language. 50 (2), 225-239 (1995).</li><li>Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Gap-filling+and+end-of-sentence+effects+in+real-time+language+processing:+implications+for+modeling+sentence+comprehension+in+aphasia.">Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia.</a> Brain and Language. 61 (2), 169-182 (1998).</li><li>Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Measuring+processing+load+during+sentence+comprehension:+visuomotor+tracking.">Measuring processing load during sentence comprehension: visuomotor tracking.</a> Aphasiology. 14 (5-6), 501-513 (2000).</li><li>Waters, G. S., Caplan, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Age,+working+memory,+and+on-line+syntactic+processing+in+sentence+comprehension.">Age, working memory, and on-line syntactic processing in sentence comprehension.</a> Psychology and Aging. 16, 128-144 (2001).</li><li>Waters, G. S., Caplan, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Working+memory+and+online+syntactic+processing+in+Alzheimer&#8217;s+disease:+Studies+with+auditory+moving+window+presentation.">Working memory and online syntactic processing in Alzheimer&#8217;s disease: Studies with auditory moving window presentation.</a> Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).</li><li>Cheng, T., Cheung, H., Wu, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Spoken+relative+clause+processing+in+Chinese:+measure+from+an+alternative+task.">Spoken relative clause processing in Chinese: measure from an alternative task.</a> Language and Linguistics. 12 (3), 669-705 (2011).</li><li>Cheng, T., Wu, J., Huang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Use+of+Memory-Load+Interference+in+Processing+Spoken+Chinese+Relative+Clauses.">Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses.</a> Journal of Psycholinguistic Research. 47 (5), 1035-1055 (2018).</li><li>CKIP. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=.">.</a> Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , (1994).</li><li>MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Step&#8212;A+system+for+teaching+experimental+psychology+using+E-Prime.">Step&#8212;A system for teaching experimental psychology using E-Prime.</a> Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).</li><li>Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Effects+of+lexical+frequency+and+syntactic+complexity+in+spoken+language+comprehension:+Evidence+from+the+auditory+moving-window+technique.">Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique.</a> Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).</li><li>Daneman, M., Carpenter, P. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Individual+differences+in+working+memory+and+reading.">Individual differences in working memory and reading.</a> Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).</li><li>Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Is+there+a+processing+preference+for+object+relative+clauses+in+Chinese?+Evidence+from+ERPs.">Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs.</a> Frontiers in Psychology. 9, 1-18 (2018).</li><li>Mitchell, D. C., Green, D. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+effects+of+context+and+content+on+immediate+processing+in+reading.">The effects of context and content on immediate processing in reading.</a> Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).</li></ol>

Cette étude démontre que l'utilisation de méthodes DMI avec des tâches d'interférence intra- et extrasentiales peut aider à élucider le rôle de WM dans le traitement des phrases parlées et faire la lumière sur la question de l'asymétrie chinoise de traitement RC. Comme prévu, en mesurant dans quelle mesure l'ingérence d'une tâche secondaire a affecté les performances des auditeurs sur le traitement des phrases primaires, nous pouvons déduire les modèles de traitement rc chinois et parvenir à une solutio...

Le rôle de la mémoire de travail (WM) pendant le traitement des phrases parlées va de soi : en raison de la nature transitoire de la parole, les auditeurs doivent conserver les formes acoustiques composant dans leurs mémoires jusqu'à ce qu'ils soient traités. Cet aspect devient encore plus important lors du traitement des phrases syntaxiquement complexes. L'attribution de relations syntaxiques aux mots dans des phrases complexes implique l'exécution d'opérations de calcul sur des éléments conservés en mémoire pendant de courtes périodes de temps, ce qui entraîne une demande de mémoire plus élevée. Cependant, la façon dont le système WM est impliqué dans le traitement des phrases orales est controversée.
Cette controverse implique deux désaccords majeurs: certains chercheurs soutiennent qu'il existe un système WM unique qui est utilisé pour toutes les tâches verbales1,2- en d'autres termes, le traitement syntaxique repose sur les mêmes ressources de mémoire utilisées par plus processus cognitifs généraux. Il s'agit du modèle à ressources uniques. D'autres ont affirmé que la détermination de la signification d'une phrase basée sur sa structure syntaxique implique un système WM spécialisé distinct de celui utilisé pour d'autres tâches verbales3,4. Dans cette veine, le traitement syntaxique est modulaire. Il s'agit du modèle de ressources d'interprétation des phrases séparées.
Dans la recherche psycholinguistique, le paradigme de l'interférence bimodale a été utilisé pour examiner les deux comptes concurrents. Basé sur l'hypothèse que la capacité de stockage WM est limitée5,6, le paradigme aborde les questions en compliquant une tâche primaire avec une tâche intermédiaire secondaire. Étant donné que la tâche principale est en concurrence pour des ressources limitées avec la tâche secondaire intervenante, la difficulté augmente et la tâche principale présente des temps de réaction plus longs. Compte tenu de cette situation, l'approche d'interférence bimodale permet d'évaluer la charge de traitement et l'étendue de la participation du WM lorsqu'un participant se verra confier une tâche qui nécessite d'accomplir les deux tâches simultanément.
Les phrases contenant des composants RC, qui causent plus de difficultés de compréhension en raison de leurs structures syntaxiques complexes bien connues, sont largement utilisées pour étudier comment le système WM est impliqué dans le traitement des phrases complexes. Cependant, bien que le traitement des phrases complexes impose une plus grande demande aux ressources WM associées au traitement de la parole, il est moins clair si le WM qui est censé contribuer aux coûts des mouvements syntaxiques dans les langues avec RC tête initiale les constructions (comme l'anglais) reflètent la complexité syntaxique des langues avec des R-Finals (tels que le chinois). Grâce à l'utilisation d'un paradigme d'interférence bimodale, l'étude actuelle jette la lumière sur cette question.
Les difficultés associées au traitement de deux structures de CR, clauses relatives objet-défroquées et objet-gapped (SCRs contre CCO), ont fait l'objet d'un débat approfondi. Ces controverses sont principalement observées dans des langues typologiquement différentes. Dans les langues initiales telles que l'anglais, dans laquelle une clause relative suit le numéro de tête qu'elle modifie, la conclusion générale est que les CRS tels que dans l'exemple 1(a) ci-dessous sont traités plus facilement que les CCO dans l'exemple 1(b).
<img alt="Equation 1" src="/files/ftp_upload/59660/59660equ01.jpg">
Comme le montre l'exemple (1), en anglais, l'emplacement de surface de l'écart diffère au minimum entre les CRS et les CCO. Cet écart est indexé comme e1, la position vide après le nom de la tête 'acteur' (appelé remplissage) laissé par son retrait de la RC. Cependant, les CRS et les CCO diffèrent considérablement en termes de structure grammaticale et de fonction de l'écart dans le domaine RC. Le coût de la mémoire pour l'intégration et la résolution de la dépendance structurelle entre le remplissage et l'écart est une cible appropriée pour l'étude expérimentale et a été largement utilisé pour obtenir des idées sur le rôle de WM dans le traitement et la compréhension du langage.
Par exemple, la compréhension et le traitement de ces CR postnominals nécessite l'indexation du nom de la tête 'acteur' comme un sujet fonctionnel ou l'objet du verbe 'critiqué' dans SRC et ORC, puis le stockage du nom de tête dans WM afin qu'il puisse plus tard être attribué au sujet grammatical du verbe «admis» dans la clause principale.
Contrairement à la conclusion cohérente avec les langues head-initial que la compréhension des CRS est plus facile que la compréhension des CCO, des résultats mitigés ont été rapportés concernant l'asymétrie de traitement RC pour le chinois, qui est une langue de tête finale dans laquelle un parent clause précède le noun de tête. Certains ont observé un avantage de traitement de CRS, tandis que d'autres ont signalé le modèle opposé (c.-à-d., un avantage de traitement de cCO). Ces derniers axes de recherche ont également proposé que l'asymétrie de traitement du CR puisse être modulée par WM, comme le suggèrent les résultats obtenus à partir d'études sur les performances de lecture auto-rythmées7,8,9.
Comme mentionné ci-dessus, il existe deux modèles concurrents concernant le rôle que WM joue dans le traitement syntaxique (complexe). L'un est que "le traitement syntaxique est modulaire", et l'autre est que "le traitement syntaxique est général". Des phrases complexes présentant des différences bien connues dans la difficulté de compréhension, c'est-à-dire les CRS par rapport aux CCO en anglais, sont fréquemment utilisées dans des tâches d'interférence bimodale (DMI) pour examiner ces deux affirmations en ce qui concerne la question de la modularité parce que le participation de WM est revendiquée pour parallèle à l'asymétrie de traitement. Ainsi, induire la charge de mémoire simultanée par des tâches d'interférence démontre des effets WM sur le traitement syntaxique. La raison en est que, qu'il existe un seul système verbal WM ou des systèmes syntaxiques modulaires distincts, l'engagement du système avec une tâche d'interférence rend le traitement syntaxique moins efficace en raison des limitations des ressources WM. La façon dont le traitement des phrases syntaxiquement plus complexes (ORC, en anglais) souffre dans les tâches DMI se compare au traitement des phrases syntaxiquement plus simples (SRC, en anglais) fournit des preuves concernant l'effet spécifique de WM et indique la mesure de wM est impliqué.
Contrairement aux langues head-initial telles que l'anglais, les CR chinois manifestent une formation en tête-finale et présentent une relation de comblement d'écart. L'élément de déménagement indexé, l'écart, précède le noun de tête qui s'y associe, comme l'illustre 2(a), SRC et 2(b), ORC.
<img alt="Equation 1" src="/files/ftp_upload/59660/59660equ02v2.jpg">
La controverse qui découle du traitement des CR chinois est que les CRS ne sont pas constamment déclarés comme plus faciles à traiter que les CCO, et cet écart a posé un défi pour les théories du traitement et de la compréhension du langage. Étant donné que le contenu prénominal avant le relativisateur 'DE' doit être stocké dans WM jusqu'à ce que l'écart — le nom de tête déplacé « acteur », soit lié et récupéré — la compréhension de ce processus aide toujours à obtenir des informations sur le rôle de WM dans le traitement du langage.
Dans la présente étude, le traitement des phrases RC parlé est examiné parce que l'écoute est très compressive pendant le traitement et est étroitement liée au fonctionnement de WM. Le paradigme d'interférence bimodale est utilisé parce que l'interférence est une fonction d'oubli bien établie dans la mémoire auditive à court terme. Les représentations stockées dans la mémoire peuvent être dégradées et perdues par la suite lorsque des événements d'interférence se produisent10. Les distractions qui varient selon différents aspects (dans le cas actuel : intralinguistique et extranumérique, voir ci-dessous) à la phrase parlée canonique nous permettent de mesurer le coût de l'intégration de l'entrée incrémentielle au cours des différentes phases de traitement et sous conditions d'interférence différentes.
En se basant sur la position selon laquelle le traitement de phrases plus syntaxiquement complexes surcharge WM plus que ne traite des phrases plus simples, on peut supposer que la manipulation du type d'interférence au cours de la compréhension devrait avoir des effets sur traitement de la peine. Par implication, le traitement des phrases syntaxiquement plus complexes exigera soit des temps d'écoute proportionnellement plus élevés ou disproportionnés en ligne et montrera de moins bons résultats dans l'évaluation de la compréhension des phrases postonline que ne le fera traitement des constructions syntaxiquement plus simples. La présente étude examine l'hypothèse que l'interférence pendant le traitement des phrases peut indexer la participation de WM et place virtuellement sa valeur au-delà de la question de la modularité syntaxique : elle propose l'idée que la controverse sur le traitement rc chinois peut être élucidé par l'étude de WM en raison de son rôle fondamental dans la compréhension du langage. Par conséquent, l'importance attachée à l'utilisation des tâches de DMI dans le traitement chinois de RC fournit un chemin pour résoudre le débat en cours concernant l'asymétrie chinoise de traitement de RC.
Cet article présente deux expériences exemplaires impliquant le traitement auditif utilisant l'interférence intra- et extrasentiale. L'objectif de ces deux expériences était d'explorer dans quelle mesure WM est engagé dans le traitement de la RC chinoise sous différents types d'interférences.
Dans la première expérience, une tâche de décision lexicale visuellement présentée a été utilisée comme interférence intraïvaite. En tant que tâche d'interférence secondaire, la tâche de décision lexicale mot/non-mot (LDT) a été introduite à trois points au cours de la présentation auditive de la phrase relative cible, permettant ainsi de mesurer la difficulté de traitement à ces points. La principale préoccupation de cette expérience est de savoir comment l'écart dans la clause relative (RC) est associé au remplissage dans la clause de matrice (MC) et si elle affecte le traitement de MC subséquent. Par conséquent, les trois sites de sondage à mesurer ont été fixés après la région MC. Un exemple, reproduit à partir de (2), des trois sites de sondage indiqués avec des flèches et alignés avec la concatenation syntaxique correspondante, est illustré dans l'exemple 3, où 3(a) montre SRC et 3(b) montre ORC.
<img alt="Equation 1" src="/files/ftp_upload/59660/59660equ03v2.jpg">
La figure 1 montre la procédure d'interférence avec la présentation auditive continue de RC par le LDT à l'un des trois sites de sondage. La conception de synchronisation suit le protocole conventionnel de la tâche de LDT dans une étude chinoise précédente de traitement11. Par exemple, chaque essai visuel de LDT commence par un signe croisé « ô » qui indique un point de fixation au centre du moniteur pendant 500 ms, suivi du stimulus visuel de LDT, qui est affiché sur l'écran pendant 3 000 ms et disparaît immédiatement après que le sujet fait décision lexicale. Un sujet typique termine l'expérience 1, y compris la séance d'entraînement, dans un délai de 30 à 35 minutes.
<img alt="Figure 1" class="xfigimg" src="/files/ftp_upload/59660/59660fig01.jpg"> Figure 1 : Procédure d'interférence intrasententiale avec une tâche de décision lexicale. <a href="https://www.jove.com/files/ftp_upload/59660/59660fig01large.jpg" target="_blank">Veuillez cliquer ici pour voir une version plus grande de ce chiffre.</a>
Les trois sites de sondage ainsi que la tâche LDT:
1. Position 1 (P1) : Région post-SMC
La première position (P1) à mesurer est immédiatement après le sujet du MC dans la région après la limite DE LA RC. On s'attend à ce que la charge de traitement encoure à ce site. D'une part, avant ce point (SMC), la construction objet-écart et objet-écart dans le domaine RC forme contrastive verb-object (VO) et sujet-verbe (SV) structures, respectivement. D'autre part, pour intégrer les constituants de la région RC avec le numéro de tête dans MC, les auditeurs doivent identifier le rôle grammatical de l'écart et le lier avec le nouveau nœud de tête de remplissage à venir
2. Position 2 (P2) : Région POST-VMC
La deuxième position (P2) à mesurer est immédiatement après le verbe dans la clause de matrice (VMC). Ce site est également supposé induire la charge de traitement. L'intégration de l'information verbale exige que les auditeurs récupèrent les arguments de nom dans la phrase et identifient l'agent du verbe de matrice soit du domaine RC précédent ou du nom de tête que le RC modifie.
3. Position 3 (P3) : Région postsentence
La troisième position (P3) à mesurer est immédiatement après la fin de la phrase. Des études antérieures sur le traitement suggèrent qu'il y ait un effet de fin de phrase, un phénomène dans lequel l'information non syntaxique (p. ex., discours et niveau sémantique) est considérée à la fin d'une phrase pour activer et comprendre complètement12 ,13. Par conséquent, la charge de traitement devrait augmenter vers la fin de la phrase en raison de la nécessité d'intégrer cette information non-syntaxique14,15. La position 3 est supposée montrer une dégradation de la charge de traitement parce que la résolution de la phrase a été tentée autour de ce site.
Dans la deuxième expérience, une tâche de fenêtre mobile auditive (AMW) a été adoptée. La technique AMW est considérée comme étant en mesure de capturer les modèles d'allocation des ressources au cours du traitement linguistique en ligne et a été largement utilisée dans les tentatives de distinguer entre les deux approches WM concurrentes16,17. On présume que l'interférence extrasiale devrait coûter plus de temps aux auditeurs au cours du traitement de la phrase parlée transitoire à venir. Selon le paradigme AMW, les participants ont entendu des phrases qui ont été segmentées en mots, et ils ont appuyé sur une touche sur le clavier pour initier la lecture du segment suivant. Ainsi, les durées des pauses entre les clés pour initier le segment suivant et contrôler le flux d'informations entrantes reflètent la réactivité des participants aux caractéristiques linguistiques particulières en question. Par exemple, si l'interférence extraïdale a certains effets sur le traitement des phrases d'une complexité syntaxique différente, les participants présenteront des durées de pause correspondantes plus longues avant d'initier les segments suivants. Les procédures sont schématisées et présentées à la figure 2.
<img alt="Figure 2" class="xfigimg" src="/files/ftp_upload/59660/59660fig02.jpg"> Figure 2 : Procédure d'interférence extra-aïe avec une tâche de rappel de chiffres. <a href="https://www.jove.com/files/ftp_upload/59660/59660fig02large.jpg" target="_blank">Veuillez cliquer ici pour voir une version plus grande de ce chiffre.</a>
Le protocole suivant montre comment les chercheurs utilisent une tâche de décision lexicale présentée visuellement comme interférence intrasententiale et la charge d'interférence arithmétique simultanée comme interférence extraïsaire pour enquêter sur la participation de WM et le traitement asymétrie des RC chinois et d'élaborer la logique sous-jacente.

<table>
	<tbody>
		<tr>
			<td>E-Prime</td>
			<td>Psychology Software Tools</td>
			<td>version Professional 2.0</td>
			<td></td>
		</tr>
		<tr>
			<td>Headphone</td>
			<td>Logitech</td>
			<td></td>
			<td></td>
		</tr>
		<tr>
			<td>Praat</td>
			<td>Praat</td>
			<td>5.3.43</td>
			<td>The online software used to edit the sound files for listening; http://www.fon.hum.uva.nl/praat/</td>
		</tr>
		<tr>
			<td>Serial Response Box</td>
			<td>Psychology Software Tools</td>
			<td></td>
			<td></td>
		</tr>
		<tr>
			<td>Standard PC</td>
			<td>ASUS K42Jv laptop</td>
			<td></td>
			<td></td>
		</tr>
	</tbody>
</table>

examining online syntactic processing of spoken complex sentences in chinese using dual-modal interference tasks

La mémoire de travail (WM) joue un rôle central dans la compréhension des phrases complexes. Sa fonction dans le traitement des phrases complexes parlées est particulièrement évidente parce que le traitement de phrases complexes parlés est à forte intensité de mémoire. Le paradigme d'interférence bimodale a été utilisé pour examiner comment le système WM est impliqué dans le traitement syntaxique complexe. Cet article présente deux expériences exemplaires impliquant le traitement auditif avec des interférences intra- ou extrasentiales. Dans la première expérience, les stimuli auditifs [clause relative parlée-chinoise (RC) phrases avec deux types syntactiques: sujet-gapped (SRC) vs objet-gapped (ORC)] sont interférés par l'intermédiaire d'une tâche de décision lexicale visuellement présentée dans une phrase et manipulés à l'aide de trois points de temps d'interférence différents. Dans la deuxième expérience, les mêmes stimuli auditifs, présentés par une technique de déplacement de fenêtre auditive, sont interférés par l'intermédiaire d'une tâche de rappel numérique visuellement présentée au-delà de la phrase et manipulés à l'aide de trois charges de mémoire numérique. En évaluant comment la tâche principale de comprendre les phrases de RC est affectée par la tâche secondaire, nous pouvons aborder la question controversée concernant l'asymétrie chinoise de traitement de RC. Nos résultats révèlent différents modèles de traitement de RC comparés à ceux rapportés dans les études précédentes. L'expérience 1 ne présente aucun avantage évident en matière de traitement du CR en SRC ou en CCO; cependant, une préférence pour la CTO est observée à la fin des phrases, et une préférence pour le SRC se trouve sur le site de verbe principal. De même, l'expérience 2 présente un modèle dynamique. Sous une charge sans chiffre, les CRS affichent des avantages de traitement dans la région des marqueurs RC. Toutefois, dans le cadre d'interférences à charge à chiffres plus élevés, les CCO présentent des avantages de traitement dans la même région. Ces résultats conduisent à la conjecture qu'il n'existe pas d'asymétrie de traitement évidente ou intrinsèque dans le traitement des CR chinois. En utilisant l'approche d'évaluer l'interférence spécifique pendant le traitement syntaxique, ces expériences démontrent la recherche future applications qui explorent les mesures de traitement des phrases parlées impliquant la mémoire de travail.

L'effet d'interférence a été observé à la fois dans l'intra-LDT bimodal et les tâches de charge extranumériques. Compte tenu des trois sites de sonde dans l'expérience 1, les résultats DE RT de la tâche intra-LDT ont manifesté un modèle dynamique de traitement DE RC en fonction de deux types de RC. Comme le montre la figure 3, le type ORC présente un avantage de traitement à la position après le sujet de matrice (SMC) après le RC (P1) et à la fin de la phrase (P3)...

Watch this Scientific Journal Video about Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks at JoVE.com

Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks

Ici, nous présentons un protocole employant des tâches d'interférence bimodale pour examiner le traitement en ligne des phrases relatives parlées-chinoises de clause. Deux expériences exemplaires impliquant le traitement auditif avec des interférences intra- et extrasentiales sont décrites. Le paradigme fournit une méthodologie pour aborder la nature de la mémoire de travail et ses effets sur le traitement des phrases.

Examen du traitement syntaxique en ligne des phrases complexes parlées en chinois à l'aide de tâches d'interférence à double modal

Working memory (WM) plays a central role in the comprehension of complex sentences. Its function in the processing of spoken complex sentences is ...

Le paradigme expérimental DMI peut être utilisé pour examiner comment la mémoire de travail est impliquée dans le traitement syntaxique complexe. Et d’évaluer davantage l’assymétrie de traitement des cours d’écriture chinois. Combiner le paradigme DMI avec la dernière tâche de co-décision et sur la technique matco fenêtre mobile est une nouvelle approche pour mesurer la croix d’un traitement de phrase parlée en temps réel.La démonstration de la procédure avec moi sera Peihan Chen, un étudiant au NTIN. Avant de commencer l’expérience, sélectionnez un total de 48 mots chinois bi-syllabiques, dont 24 mots et 24 non-mots pour la tâche de décision Lexical. Sélectionnez les mots du Rapport technique du Corpus de Sinica, en prenant soin que tous les mots cibles sont d’une fréquence moyenne.Créez les 24 non-mots en utilisant deux caractères monosyllabiques qui sont individuellement significatifs, mais dont la combinaison est sémantiquement anomalus en évitant les mots de caractère bisyllabique avec des radicaux identiques. Rassemblez manuellement les 24 non-mots dans les phrases de remplissage et les 24 mots dans les phrases de clause relative cible. Composez les stimuli auditifs en 72 phrases, y compris 24 phrases de clause relative gapped sujet, 24 phrases de clause relative gapped objet, et 24 phrases de remplissage.Divisez ensuite uniformément les 48 phrases relatives à la clause en deux groupes pour créer une conception contrebalancée incomplète pour former 48 procès. Pour configurer le logiciel pour l’expérience, ouvrez un logiciel de recherche comportementale approprié et utilisez le logiciel pour randomiser tous les stimuli. Configurez ensuite le système logiciel pour enregistrer le temps de réponse, le taux d’exactitude des réponses du participant au test de décision lexical et la compréhension post-phrase basée sur les entrées de clavier du participant.Incluez les commentaires concernant la décision lexicale incorrecte du participant ou le manque de réponse à afficher sur l’écran du moniteur immédiatement après la réponse incorrecte ou manquante du participant. Avant de commencer l’expérience de tâche d’interférence intrasentielle bimodale, placez le participant devant un ordinateur et équipez-le d’écouteurs. Fournir au participant des instructions sous forme écrite sur l’écran de l’ordinateur et sous forme verbale par l’expérimentateur.Demandez au participant d’écouter les phrases jouées à travers son casque tout en effectuant simultanément une tâche de décision lexicale. Demandez au participant de décider si la sonde visuelle interférante affichée sur l’écran est un mot ou un non-mot et d’appuyer oui pour un mot et non pour un non-mot aussi rapidement et avec précision que possible. Informez le participant qu’une question de compréhension suivra immédiatement après la phrase et rappelez au participant d’écouter attentivement la phrase auditive tout en accomplissant simultanément la tâche.Après avoir donné toutes les instructions, demandé au participant de remplir une section de pratique comportant des essais avec rétroaction. Après la séance d’entraînement, commencez la tâche d’interférence du test de décision lexical intrasentential dual-modal permettant au participant de faire une pause entre chaque 24 essais. Pour une expérience de tâche d’interférence extrasentielle à double modale, composez les stimuli auditifs en 96 phrases, y compris 24 phrases de clause relative gapped sujet, 24 phrases de clause relative gapped objet, et 48 phrases de remplissage.Divisez les 48 phrases RC uniformément en deux groupes pour créer une conception contrebalancée incomplète avec 96 essais totaux avec zéro, trois, combinaisons à cinq chiffres avec chaque charge à zéro, trois ou cinq chiffres attribuée uniformément à tous les procès de phrases. Dans le logiciel expérimental, assigner au hasard le participant à l’un des deux ensembles de stimuli représentant les combinaisons de deux facteurs dans le sujet du type de phrase et la charge de mémoire. Demandez au participant qu’il devra écouter les phrases segmentées en mots et jouées à travers le casque et se rythmer le plus rapidement possible en appuyant sur le clavier pour initier le jeu du mot segmenté suivant.Informez le participant qu’un point d’interrogation apparaîtra à l’écran qui est suivi d’une question de non-compréhension liée à l’information qu’il vient d’entendre dans la phrase précédente et qu’il devrait répondre à la question. Un bref bip sonore sera joué lorsque le participant appuie sur la clé oui ou non pour répondre à la question de compréhension. Ensuite, demandez au participant qu’après le bip, le participant doit suivre les instructions qui apparaissent à l’écran et répéter le chiffre qu’il a observé avant d’écouter la phrase.Pour commencer l’expérience, fournissez au participant la représentation visuelle des chiffres de 1500 millisecondes. Commencez ensuite la tâche de fenêtre auditive auto-rythpide en mouvement et demandez au participant de garder la présentation visuelle précédente en mémoire. Étant donné que le rappel d’étape induit une plus grande charge de mémoire, demandez aux participants de prioriser la tentative de se souvenir correctement des chiffres tout en écoutant les phrases le plus rapidement possible.Pendant que le participant termine la tâche, enregistrez les réponses de rappel des chiffres du participant sur une feuille de pointage. Dans cette expérience intrasentielle représentative, le type de phrase de la CO présentait un avantage de traitement au sujet de la matrice post-matrice après la clause relative et à la fin de la phrase. Alors que la phrase SRC avait un avantage au verbe post-matrice après la clause relative.L’effet principal simple du type de phrase était significatif à la région de verbe de post-matrice et à la région de post-phrase indiquant que la phrase de SRC avait une charge de traitement inférieure avec la tâche d’interférence de décision lexicale aux verbes de matrice. Bien que les peines imposées par la C.ORC avaient une charge de traitement plus faible à la fin des peines. En vertu d’une interférence extrasentielle de charge à zéro chiffre, les participants ont montré un avantage pour les phrases de la CCO à la région de traitement initiale de la clause relative qui démontrait un avantage de traitement src au marqueur de clause relatif DE et aux régions de verbe matricielle.Dans le cadre de l’interférence extrasentielle de charge à trois chiffres, aucune différence de phrase relative de clause gapped de sujet ou d’objet n’a été observée autour des régions antérieures à de. Toutefois, les participants ont démontré un avantage de phrase src à DE et un avantage de phrase de LA à la région de verbe de matrice. En vertu de l’interférence extrasentielle de charge à cinq chiffres, les participants ont montré un avantage global de phrase de LA autour des régions pré DE et post DE dans la région sujet de matrice.Nos résultats montrent que le traitement chinois de RC démontrent un modèle dynamique qui mène à la conjecture qu’aucune asymétrie intrinsèque de traitement n’existe dans le traitement des CR chinois. La technique actuelle d’ICM peut être étendue au paradigme de lecture auto-rythmé pour étudier comment la mémoire de travail est impliquée dans le traitement de la lecture dans un contexte naturel de lecture avec interférence.

Research

JoVE Journal

Behavior

Study Motor Skill Learning by Single-pellet Reaching Tasks in Mice

Étude habiletés motrices apprentissage par simple granulés tâches Atteindre chez la souris

Reaching for and retrieving objects require precise and coordinated motor movements in the forelimb. When mice are repeatedly trained to grasp and ...

Recherche

Sciences du comportement

Automated Visual Cognitive Tasks for Recording Neural Activity Using a Floor Projection Maze

Tâches cognitives visuels automatisés pour l&#39;enregistrement de neurones activité en utilisant une projection au sol Maze

Neuropsychological tasks used in primates to investigate mechanisms of learning and memory are typically visually guided cognitive tasks. We have ...

Uncovering Beat Deafness: Detecting Rhythm Disorders with Synchronized Finger Tapping and Perceptual Timing Tasks

Découvrir beat Surdité: détection des troubles du rythme avec le doigt taraudage synchronisé et tâches de temporisation perceptuelles

A set of behavioral tasks for assessing perceptual and sensorimotor timing abilities in the general population (i.e., non-musicians) is presented here ...

Performing Behavioral Tasks in Subjects with Intracranial Electrodes

Exécution de tâches comportementales chez des sujets atteints intracrâniennes électrodes

Patients having stereo-electroencephalography (SEEG) electrode, subdural grid or depth electrode implants have a multitude of electrodes implanted in ...

Practical Methodology of Cognitive Tasks Within a Navigational Assessment

Méthodologie pratique de tâches cognitives Dans un Évaluation de navigation

This paper describes an approach for measuring navigation accuracy relative to cognitive skills. The methodology behind the assessment will thus be ...

Methods to Test Visual Attention Online

Les méthodes pour tester attention visuelle en ligne

Online data collection methods have particular appeal to behavioral scientists because they offer the promise of much larger and much more representative ...

Using Fiberless, Wearable fNIRS to Monitor Brain Activity in Real-world Cognitive Tasks

Utilisation fiberless, fNIRS Wearable pour surveiller l&#39;activité cérébrale dans des tâches cognitives monde réel

Functional Near Infrared Spectroscopy (fNIRS) is a neuroimaging technique that uses near-infrared light to monitor brain activity. Based on neurovascular ...

Examining Recall Memory in Infancy and Early Childhood Using the Elicited Imitation Paradigm

Examen Rappel Mémoire du nourrisson et de la petite enfance Utilisation du élicitées Imitation Paradigm

The ability to recall the past allows us to report on details of previous experiences, from the everyday to the significant. Because recall memory is ...

Comparing the Frequency Effect Between the Lexical Decision and Naming Tasks in Chinese

En comparant l&#39;effet de fréquence entre la décision lexicale et les tâches de dénomination en chinois

In psycholinguistic research, the frequency effect can be one of the indicators for eligible experimental tasks that examine the nature of lexical access. ...

Using Eye Movements Recorded in the Visual World Paradigm to Explore the Online Processing of Spoken Language

À l’aide de mouvements oculaires enregistrées dans le paradigme de l’univers visuel d’explorer le traitement en ligne de la langue parlée

In a typical eye tracking study using the visual world paradigm, participants' eye movements to objects or pictures in the visual workspace are recorded ...