Name: examining online syntactic processing of spoken complex sentences in chinese using dual-modal interference tasks
Uploaded: 2019-09-05T13:30:00
Description: Watch this Scientific Journal Video about Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks at JoVE.com

이 연구는 첫 번째 저자, 투위안 청에 과학 기술부, 대만, R.O.C. [NSC-101-2410-H-439-001]의 보조금에 의해 지원되었다. 저자들은 NTIN의 양야휘와 첸페이한이 실험을 준비하고 수행하는 데 도움을 준 연구원양야휘와 첸페이한에게 감사를 표한다.

이러한 실험의 관리는 모든 연구 윤리 규정을 따랐다. 모든 과목은 실험이 투여되기 전에 구두 및 서면 동의를 제공했다. 모든 절차, 동의서 및 실험 프로토콜은 대만 국립 청쿵 대학의 연구 윤리위원회에 의해 승인되었습니다.
1. 실험 1-이중 모달 내 간섭 작업
<ol><li>국립태인간호연구소와 국립태난중고등학교에서 97명의 학생, 54명의 여성, 42명의 남성을 모집하여 실험 1에 ?...

<ol>
	<li>Just, M. A., Carpenter, P. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+capacity+theory+of+comprehension:+Individual+differences+in+working+memory.">A capacity theory of comprehension: Individual differences in working memory.</a> Psychological Review. 99, 122-149 (1992).</li><li>King, J., Just, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Individual+differences+in+syntactic+processing:+The+role+of+working+memory.">Individual differences in syntactic processing: The role of working memory.</a> Journal of Memory and Language. 30, 580-602 (1991).</li><li>Caplan, D., Waters, G. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Verbal+working+memory+and+sentence+comprehension.">Verbal working memory and sentence comprehension.</a> Behavioral &amp; Brain Sciences. 22, 77-94 (1999).</li><li>Waters, G., Caplan, D., Yampolsky, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=On-line+syntactic+processing+under+concurrent+memory+load.">On-line syntactic processing under concurrent memory load.</a> Psychonomic Bulletin &amp; Review. 10 (1), 88-95 (2003).</li><li>Cowan, N. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=.">.</a> Working Memory Capacity. , (2005).</li><li>Miller, G. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+magical+number+seven,+plus+or+minus+two:+Some+limits+on+our+capacity+for+processing+information.">The magical number seven, plus or minus two: Some limits on our capacity for processing information.</a> Psychological Review. 63, 81-97 (1956).</li><li>Chen, B., Ning, A., Bi, H., Dunlap, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Chinese+subject-relative+clauses+are+more+difficult+to+process+than+the+object-relative+clauses.">Chinese subject-relative clauses are more difficult to process than the object-relative clauses.</a> Acta Psychologica. 129, 61-65 (2008).</li><li>Gibson, E., Wu, H. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Processing+Chinese+relative+clauses+in+context.">Processing Chinese relative clauses in context.</a> Language and Cognitive Processes. 28, 125-155 (2013).</li><li>Hsiao, F., Gibson, E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Processing+relative+clauses+in+Chinese.">Processing relative clauses in Chinese.</a> Cognition. 90, 3-27 (2003).</li><li>Lewandowsky, S., Oberauer, K., Brown, G. D. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=No+temporal+decay+in+verbal+short-term+memory.">No temporal decay in verbal short-term memory.</a> Trends in Cognitive Science. 13, 120-126 (2009).</li><li>Wu, J. T., Chou, T. L., Liu, I. M., Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+locus+of+the+character/word+frequency+effect.">The locus of the character/word frequency effect.</a> Advances in the study of Chinese language processing. , 31-58 (1994).</li><li>Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Tasks+and+timing+in+the+perception+of+linguistic+anomaly.">Tasks and timing in the perception of linguistic anomaly.</a> Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).</li><li>Swinney, D., Zurif, E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Syntactic+processing+in+aphasia.">Syntactic processing in aphasia.</a> Brain and Language. 50 (2), 225-239 (1995).</li><li>Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Gap-filling+and+end-of-sentence+effects+in+real-time+language+processing:+implications+for+modeling+sentence+comprehension+in+aphasia.">Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia.</a> Brain and Language. 61 (2), 169-182 (1998).</li><li>Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Measuring+processing+load+during+sentence+comprehension:+visuomotor+tracking.">Measuring processing load during sentence comprehension: visuomotor tracking.</a> Aphasiology. 14 (5-6), 501-513 (2000).</li><li>Waters, G. S., Caplan, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Age,+working+memory,+and+on-line+syntactic+processing+in+sentence+comprehension.">Age, working memory, and on-line syntactic processing in sentence comprehension.</a> Psychology and Aging. 16, 128-144 (2001).</li><li>Waters, G. S., Caplan, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Working+memory+and+online+syntactic+processing+in+Alzheimer&#8217;s+disease:+Studies+with+auditory+moving+window+presentation.">Working memory and online syntactic processing in Alzheimer&#8217;s disease: Studies with auditory moving window presentation.</a> Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).</li><li>Cheng, T., Cheung, H., Wu, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Spoken+relative+clause+processing+in+Chinese:+measure+from+an+alternative+task.">Spoken relative clause processing in Chinese: measure from an alternative task.</a> Language and Linguistics. 12 (3), 669-705 (2011).</li><li>Cheng, T., Wu, J., Huang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Use+of+Memory-Load+Interference+in+Processing+Spoken+Chinese+Relative+Clauses.">Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses.</a> Journal of Psycholinguistic Research. 47 (5), 1035-1055 (2018).</li><li>CKIP. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=.">.</a> Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , (1994).</li><li>MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Step&#8212;A+system+for+teaching+experimental+psychology+using+E-Prime.">Step&#8212;A system for teaching experimental psychology using E-Prime.</a> Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).</li><li>Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Effects+of+lexical+frequency+and+syntactic+complexity+in+spoken+language+comprehension:+Evidence+from+the+auditory+moving-window+technique.">Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique.</a> Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).</li><li>Daneman, M., Carpenter, P. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Individual+differences+in+working+memory+and+reading.">Individual differences in working memory and reading.</a> Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).</li><li>Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Is+there+a+processing+preference+for+object+relative+clauses+in+Chinese?+Evidence+from+ERPs.">Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs.</a> Frontiers in Psychology. 9, 1-18 (2018).</li><li>Mitchell, D. C., Green, D. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+effects+of+context+and+content+on+immediate+processing+in+reading.">The effects of context and content on immediate processing in reading.</a> Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).</li></ol>

이 연구는 DMI 메서드를 인트라-및 extrasentent 간섭 작업모두에서 사용하면 음성 문장 처리에서 WM의 역할을 설명하고 중국 RC 처리 비대칭 문제에 대한 빛을 비추는 데 도움이 될 수 있음을 보여줍니다. 예상대로, 보조 작업의 간섭이 1 차 문장 처리에 대한 청취자의 성과에 영향을 미치는 정도를 측정함으로써 중국 RC 처리 패턴을 추론하고 중국 SRC / 토론에 대한 실행 가능한 해결책에 도달 할 수 있?...

음성 문장 처리 중 작업 메모리(WM)의 역할은 자명합니다: 음성의 일시적인 특성으로 인해 청취자는 처리될 때까지 구성 요소 음향 형태를 메모리에 유지해야 합니다. 이러한 측면은 구문적으로 복잡한 문장을 처리하는 동안 더욱 중요해집니다. 복잡한 문장의 단어에 구문 관계를 할당하려면 짧은 시간 동안 메모리에 보존된 항목에 대한 계산 작업을 수행하여 메모리 수요가 증가합니다. 그러나 WM 시스템이 말하는 문장 처리에 어떻게 관여하는지는 논란의 여지가 있다.
이 논쟁은 두 가지 주요 불일치를 포함: 일부 연구자들은 모든 구두 작업에 사용되는 단일 WM 시스템이 존재한다고 주장1,2—즉, 구문 처리는 더 많은 사람들이 사용하는 동일한 메모리 리소스에 의존 일반적인 인지 과정. 단일 리소스 모델입니다. 다른 사람들은 구문 구조에 따라 문장의 의미를 결정하는 것은 다른 구두 작업에 사용되는 것과는 별개로 특수 WM 시스템을포함한다고주장했다3,4. 이 맥락에서, 구문 처리는 모듈식이다. 이것은 별도의 문장 해석 리소스 모델입니다.
심리학 연구에서, 이중 모달 간섭 패러다임은 두 경쟁 계정을 검사하는 데 사용되었습니다. WM 저장소 용량이5,6으로제한된다는 가정하에 패러다임은 보조 중간 작업으로 기본 작업을 복잡하게 하여 문제를 해결합니다. 기본 작업이 보조 중간 작업과 제한된 리소스를 위해 경쟁한다는 점을 감안할 때, 난이도가 증가하고 기본 작업은 더 긴 반응 시간을 나타낸다. 이러한 상황을 감안할 때 이중 모달 간섭 접근 방식은 참가자가 두 작업을 동시에 수행해야 하는 작업을 받을 때 WM의 처리 부하와 참여 정도를 평가할 수 있게 합니다.
잘 알려진 복잡한 구문 구조로 인해 더 많은 이해력을 유발하는 RC 구성 요소를 포함하는 문장은 WM 시스템이 복잡한 문장을 처리하는 데 어떻게 관련되어 있는지 조사하는 데 널리 사용됩니다. 그러나 복잡한 문장을 처리하는 것은 음성 처리와 관련된 WM 리소스에 더 많은 수요를 가하지만, 헤드 초기 RC가있는 언어의 구문 이동 비용에 기여할 것으로 생각되는 WM이 있는지 여부는 분명하지 않습니다. 구조(예: 영어)는 최종 VC(예: 중국어)를 통해 언어의 구문 적 복잡성을 반영합니다. 이중 모달 간섭 패러다임을 사용하여 현재 연구는이 문제에 빛을 발산합니다.
두 개의 RC 구조, 주제 간격 및 개체 간격 상대 절 (SRC 대 ORC)를 처리하는 것과 관련된 어려움은 광범위한 논쟁의 대상이되었습니다. 이러한 논쟁은 주로 유형학적으로 다른 언어에서 관찰됩니다. 상대 절이 수정하는 머리 명사다음에 있는 영어와 같은 초기 언어에서 일반적인 결과는 예 1(a)과 같은 SRC가 예제 1(b)의 ORC보다 더 쉽게 처리된다는 것입니다.
<img alt="Equation 1" src="/files/ftp_upload/59660/59660equ01.jpg">
예(1)에 표시된 것처럼 영어로 간격의 표면 위치는 SCC와 ORC 간에 최소한으로 다릅니다. 이러한 간격은 RC에서 제거하여 남겨진 머리 명사'actor'(필러라고함)의 빈 위치인 e1로인덱싱됩니다. 그러나, SRC와 ORC는 RC 도메인의 갭의 문법 구조와 기능면에서 실질적으로 다르다. 충전제와 갭 사이의 구조적 종속성을 통합하고 해결하기 위한 메모리 비용은 실험 연구를 위한 적절한 목표이며 언어 처리 및 이해에서 WM의 역할에 대한 통찰력을 얻기 위해 널리 사용되어 왔습니다.
예를 들어, 이러한 사후 RC를 이해및 처리하려면 SRC 및 ORC에서 머리 명사'를기능적 주체 또는 동사의 개체로 인덱싱한 다음 나중에 WM에 머리 명사를 저장해야 합니다. 동사의 문법 주제에 할당 '인정' 주요 절에.
SRC를 이해하기 쉽다는 헤드 초기 언어와 일관된 발견과는 달리, 상대가 하는 머리 최종 언어인 중국어의 RC 처리 비대칭에 대해 혼합된 결과가 보고되었습니다. 절은 머리 명사 앞에 옵니다. 일부는 SRC 처리 이점을 관찰한 반면 다른 일부는 반대 패턴(즉, ORC 처리 이점)을 보고했습니다. 연구의 후자 라인은 또한 RC 처리 비대칭이 WM에 의해 변조 될 수 있음을 제안, 자기 주도독서 성능의연구에서 얻은 결과에 의해 제안7,8,9.
위에서 언급했듯이 WM이 (복잡한) 구문 처리에서 수행하는 역할에 대한 두 가지 경쟁 모델이 있습니다. 하나는 "구문 처리는 모듈식"이고 다른 하나는 "구문 처리가 일반적"이라는 것입니다. 이해 난이도에 잘 알려진 차이를 가진 복잡한 문장, 즉, SCC 대 ORC(영어)는 모듈성 문제와 관련하여 이러한 두 가지 주장을 검토하기 위해 이중 모달 간섭(DMI) 작업에 자주 사용됩니다. WM의 개입은 처리 비대칭을 병렬로 주장된다. 따라서 간섭 작업을 통해 동시 메모리 로드를 유도하면 구문 처리에 대한 WM 효과가 보여 줍니다. 그 근거는 단일 구두 WM 시스템또는 별도의 모듈식 구문 시스템이 존재하든 간섭 작업과 함께 시스템을 참여하면 WM 리소스 제한으로 인해 구문 처리의 효율성이 떨어지는 것입니다. 구문적으로 더 복잡한 문장 (ORC, 영어)을 처리하는 방법은 구문적으로 간단한 문장 (SRC, 영어)을 처리하는 것과 비교하여 WM의 특정 효과에 대한 증거를 제공하고 그 정도를 나타냅니다. WM이 관여하고 있습니다.
영어와 같은 초기 언어와는 달리, 중국어 RC는 머리 - 최종 형성을 나타내고 갭 필러 관계를 나타낸다. 인덱싱된 이동 아웃 요소인 간격은 2(a), SRC 및 2(b) ORC에 표시된 대로 머리 명사앞에 옵니다.
<img alt="Equation 1" src="/files/ftp_upload/59660/59660equ02v2.jpg">
중국어 RC 를 처리하는 데서 비롯된 논란은 SCC가 ORC보다 처리하기 가 용이하다고 일관되게 보고되지 않고 있으며, 이러한 불일치는 언어 처리 및 이해 이론에 대한 도전을 제기했다는 것입니다. 상대화자 'DE' 이전의 사전 콘텐츠는 간격이 있을 때까지 WM에 저장되어야 하기 때문에 이동된 머리 명사 'actor'가 연결되고 검색되므로 이 프로세스를 이해하면 언어 처리에서 WM의 역할에 대한 통찰력을 얻는 데 도움이 됩니다.
현재 연구에서는, 음성 RC 문장 처리는 청취가 처리 도중 높게 압축되고 WM의 기능과 밀접하게 관련되기 때문에 검토됩니다. 이중 모달 간섭 패러다임은 간섭이 단기 청각 기억에서 잘 확립된 잊어버린 기능이기 때문에 사용됩니다. 메모리에 저장된 표현은 저하될 수 있으며, 간섭 이벤트가10일발생하면 이후에 손실될 수 있습니다. 다른 측면에 따라 변화하는 산만 (현재의 경우 : intralinguistic 및 extradigital, 아래 참조) 정식 음성 문장에 우리는 다른 처리 단계 와 아래 증분 입력을 통합하는 비용을 측정 할 수 있습니다 다른 간섭 조건.
구문적으로 복잡한 문장을 처리하는 것이 단순한 문장을 처리하는 것보다 WM에 과부하가 걸리기 때문에 이해 과정에서 간섭 유형을 조작하는 것이 영향을 미를 가져야 한다는 가설을 세울 수 있습니다. 문장 처리. 암시적으로, 구문적으로 더 복잡한 문장을 처리하는 것은 비례적으로 더 크거나 불균형하게 더 큰 청취 시간을 온라인으로 요구하고 온라인 문장 이해 평가에서 더 나쁜 성능을 보여줄 것입니다. 구문적으로 간단한 구조를 처리합니다. 현재 연구는 문장 처리 중 간섭이 WM 개입을 인덱싱 할 수 있다는 가설을 검토하고 사실상 구문 모듈화의 문제를 넘어 그 가치를 배치합니다 : 그것은 중국 RC 처리에 대한 논쟁이 될 수 있다는 아이디어를 제안합니다. 언어 이해의 근본적인 역할로 인해 WM의 조사를 통해 해명. 따라서 중국 RC 처리에서 DMI 작업의 사용에 첨부된 중요성은 중국 RC 처리 비대칭에 관한 지속적인 논쟁을 해결하는 경로를 제공합니다.
이 문서에서는 내 간섭과 외부 간섭을 모두 사용하여 청각 처리를 포함하는 두 가지 예시적인 실험을 제공합니다. 이 두 실험의 목표는 WM이 서로 다른 유형의 간섭하에서 중국 RC를 처리하는 데 어느 정도까지 관여하는지 탐구하는 것이었습니다.
첫 번째 실험에서는 시각적으로 제시된 어휘 결정 태스크를 내간섭으로 사용했습니다. 보조 간섭 작업으로, 단어 / 비 단어 어휘 결정 작업 (LDT)는 대상 상대 절 문장의 청각 프리젠 테이션 중에 세 지점에서 도입, 따라서 처리 어려움이 이 시점에서 측정 할 수 있도록. 이 실험에서 주요 관심사는 상대 절(RC)의 갭이 매트릭스 절(MC)의 필러와 어떻게 연관되는지, 그리고 후속 MC의 처리에 영향을 미치는지 여부이다. 따라서, 측정할 3개의 프로빙 사이트는 MC 영역 후에 설정되었다. 화살표로 표시되고 해당 구문 연결로 정렬된 3개의 프로빙 사이트 중 (2)에서 복제된 예는, 예 3(a)가 SRC를 나타내고 3(b)가 ORC를 나타낸다는 예 3에 도시되어 있다.
<img alt="Equation 1" src="/files/ftp_upload/59660/59660equ03v2.jpg">
그림 1은 3개의 조사 사이트 중 어느 곳에서나 LDT에 의한 지속적인 청각 RC 프리젠테이션을 방해하는 절차를 나타낸다. 타이밍 설계는 이전 중국 처리 연구11에서LDT 작업의 종래의 프로토콜을 따릅니다. 예를 들어, 각 시각적 LDT 시험은 500 ms에 대한 모니터의 중앙에 고정 점을 나타내는 교차 기호 "+"로 시작하고, 3,000 ms에 대한 화면에 표시되고 피사체가 만든다 직후 사라지는 시각적 LDT 자극이 뒤따릅니다. 어휘 결정. 일반적인 과목은 30~35분 이내에 연습 세션을 포함하여 실험 1을 완료합니다.
<img alt="Figure 1" class="xfigimg" src="/files/ftp_upload/59660/59660fig01.jpg"> 그림 1: 어휘 결정 작업을 가진 내적 간섭 절차. <a href="https://www.jove.com/files/ftp_upload/59660/59660fig01large.jpg" target="_blank">이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.</a>
LDT 작업과 함께 세 개의 프로빙 사이트:
1. 위치 1 (P1): 포스트 SMC 영역
측정되는 제1 위치(P1)는 RC 경계 후 영역에서 MC의 피험자 직후이다. 이 사이트에서 처리 부하가 발생할 것으로 예상됩니다. 한 가지, 이 시점 이전에(SMC),RC 도메인 내의 피사체 갭 및 객체 갭 시공은 각각 대조적인 동사-객체(VO) 및 주제동사(SV) 구조를 형성한다. 또 다른 경우, RC 지역의 구성 요소를 MC의 머리 명사와 통합하려면 청취자는 갭의 문법 적 역할을 식별하고 다가오는 필러 헤드 명사와 연결해야합니다.
2. 위치 2 (P2): 포스트 VMC 영역
측정할 제2 위치(P2)는 매트릭스 절(VMC)에서동사 바로 이후에 측정된다. 이 사이트는 또한 처리 부하를 유도하는 것으로 가정됩니다. 구두 정보를 통합하려면 수신기가 문장에서 명사 인수를 검색하고 이전 RC 도메인또는 RC가 수정하는 머리 명사에서 행렬 동사의 에이전트를 식별해야 합니다.
3. 위치 3 (P3): 포스트 문장 영역
측정할 제3 위치(P3)는 문장이 끝난 직후이다. 처리에 대한 이전 연구는 문장의 끝 마무리 효과가 있음을 제안 - 비 syntactic 정보 (예를 들어, 담론과 의미 수준)가 활성화하고 완전한 이해를 위해 문장의 끝에 고려되는 현상12 ,13. 따라서, 처리 하중은 이 비신타문 정보14,15를통합할 필요성으로 인해 문장의 끝으로 증가해야 한다. 위치 3은 이 사이트 주변에서 문장 확인이 시도되었기 때문에 처리 부하가 저하된 것으로 가정합니다.
두 번째 실험에서는 청각 이동 창(AMW) 작업이 채택되었습니다. AMW 기술은 온라인 언어 처리 동안 리소스 할당의 패턴을 캡처할 수 있는 것으로 간주되며 두 개의 경쟁 WM 접근 방식16,17을구별하기 위한 시도에서 널리 사용되고 있다. 일시적인 간섭은 일시적인 다가오는 문장을 처리하는 동안 청취자에게 추가 시간을 지불해야 한다고 추정됩니다. AMW 패러다임하에서 참가자들은 단어로 분할된 문장을 들었고, 키보드의 키를 눌러 후속 세그먼트의 연주를 시작했습니다. 따라서 키 누름 간의 일시 중지 기간은 후속 세그먼트를 시작하고 들어오는 정보의 흐름을 제어하는 데 해당되는 특정 언어 기능에 대한 참가자의 응답성을 반영합니다. 예를 들어, 추론 간섭이 서로 다른 구문 복잡성의 문장 처리에 특정 영향을 미치는 경우 참가자는 후속 세그먼트를 시작하기 전에 그에 상응하는 더 긴 일시 중지 기간을 나타낼 것입니다. 절차는 스키마화되어 그림 2에제시됩니다.
<img alt="Figure 2" class="xfigimg" src="/files/ftp_upload/59660/59660fig02.jpg"> 그림 2: 숫자 회수 작업이 있는 초분절 간섭 절차. <a href="https://www.jove.com/files/ftp_upload/59660/59660fig02large.jpg" target="_blank">이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.</a>
다음 프로토콜은 연구원이 시각적으로 제시된 어휘 결정 작업을 사내 간섭으로 사용하고 동시 산술 간섭 부하를 초인적 간섭으로 사용하여 WM 개입 및 처리를 조사하는 방법을 보여줍니다. 중국 RC의 비대칭과 기본 논리를 정교하게.

<table>
	<tbody>
		<tr>
			<td>E-Prime</td>
			<td>Psychology Software Tools</td>
			<td>version Professional 2.0</td>
			<td></td>
		</tr>
		<tr>
			<td>Headphone</td>
			<td>Logitech</td>
			<td></td>
			<td></td>
		</tr>
		<tr>
			<td>Praat</td>
			<td>Praat</td>
			<td>5.3.43</td>
			<td>The online software used to edit the sound files for listening; http://www.fon.hum.uva.nl/praat/</td>
		</tr>
		<tr>
			<td>Serial Response Box</td>
			<td>Psychology Software Tools</td>
			<td></td>
			<td></td>
		</tr>
		<tr>
			<td>Standard PC</td>
			<td>ASUS K42Jv laptop</td>
			<td></td>
			<td></td>
		</tr>
	</tbody>
</table>

examining online syntactic processing of spoken complex sentences in chinese using dual-modal interference tasks

작업 메모리 (WM)는 복잡한 문장의 이해에 중심 역할을한다. 음성 복잡한 문장 처리의 기능은 말의 복잡한 문장 처리가 메모리 집약적이기 때문에 특히 분명하다. 이중 모달 간섭 패러다임은 WM 시스템이 복잡한 구문 처리에 어떻게 관여하는지 검토하는 데 사용되었습니다. 이 문서에서는 청각 처리와 관련된 두 가지 예시적인 실험을 소개합니다. 첫 번째 실험에서, 청각 자극 [음성 - 중국어 상대 절 (RC) 두 구문 유형문장: 주제 -gapped (SRC) 대 객체 gapped (ORC)] 문장 내에서 시각적으로 제시 된 어휘 결정 작업을 통해 방해하고 세 가지 간섭 타임포인트를 사용하여 조작할 수 있습니다. 두 번째 실험에서는 청각 창 이동 기술을 통해 제시된 동일한 청각 자극이 문장 을 넘어 시각적으로 제시된 디지털 리콜 작업을 통해 방해되고 세 개의 디지털 메모리 부하를 사용하여 조작됩니다. RC 문장을 이해의 주요 작업이 보조 작업에 의해 영향을받는 방법을 평가함으로써, 우리는 중국 RC 처리 비대칭에 관한 논란이 문제를 해결할 수 있습니다. 우리의 결과는 이전 연구에서 보고된 것과 비교하여 RC 처리의 다른 패턴을 드러냅니다. 실험 1은 SRC 또는 ORC에서 명확한 RC 처리 이점을 나타내지 않습니다. 그러나 ORC에 대한 기본 설정은 문장의 끝에서 관찰되며 SRC에 대한 기본 설정은 기본 동사 사이트에서 찾을 수 있습니다. 마찬가지로 실험 2는 동적 패턴을 제공합니다. 자릿수 가중에서 SRC는 RC 마커 영역에서 처리 이점을 보여줍니다. 그러나 높은 자릿수 부하 간섭 하에서 ORC는 동일한 영역에서 처리 이점을 보여줍니다. 이러한 결과는 중국 RC의 처리에 명백하거나 본질적인 처리 비대칭이 존재하지 않는다는 추측으로 이어진다. 작업 메모리와 관련된 음성 문장의 처리 메트릭을 탐색하는 응용 프로그램입니다.

간섭 효과는 이중 모달 인트라-LDT 및 엑스트라디츠 부하 작업 모두에서 관찰되었다. 실험 1의 세 가지 프로브 사이트를 고려할 때, INTRA-LDT 태스크의 RT 결과는 두 개의 RC 유형의 함수로서 RC 처리의 동적 패턴을 나타냈다. 도 3에도시된 바와 같이, ORC 형은 RC(P1) 후 매트릭스 피사체(SMC)와문장(P3)의 끝에 있는 위치 포스트에서 처리 이점을 나타내고 있는 반면, SRC 형은 매...

Watch this Scientific Journal Video about Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks at JoVE.com

Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks

여기서는 이중 모달 간섭 작업을 사용하여 중국어 음성 상대 절 문장의 온라인 처리를 검사하는 프로토콜을 제시합니다. 경내 및 외부 간섭을 가진 청각 처리를 포함하는 2개의 예시적인 실험이 기술됩니다. 패러다임은 작업 메모리의 특성과 문장 처리에 미치는 영향을 해결하는 방법론을 제공합니다.

이중 모달 간섭 작업을 사용하여 중국어로 음성 복잡한 문장의 온라인 구문 처리 검토

Working memory (WM) plays a central role in the comprehension of complex sentences. Its function in the processing of spoken complex sentences is ...

DMI 실험 패러다임을 사용하여 작업 메모리가 복잡한 구문 처리에 어떻게 관여하는지 검사할 수 있습니다. 그리고 중국 작사 과정의 처리 비대성을 더욱 평가하기 위해서입니다. DMI 패러다임을 마지막 공동 결정 작업과 Matco 이동 창 기법을 결합하는 것은 음성 문장 처리의 십자가를 실시간으로 측정하는 새로운 접근 방식입니다.나와 함께 절차를 시연하는 것은 NTIN의 대학생 인 페이한 첸 (Peihan Chen)이 될 것입니다. 실험을 시작하기 전에, 렉서적 인 결정 작업에 대한 24 단어와 24 비 단어를 포함하여 총 48 개의 쌍음절 중국어 단어를 선택합니다. 모든 대상 단어가 중간 주파수라는 것을 주의하여 Sinica Corpus 기술 보고서에서 단어를 선택합니다.개별적으로 의미 있지만 의미있는 두 단음절 문자를 사용하여 24 개의 비 단어를 만듭니다. 필러 문장에 24개의 비단어와 대상 상대 절 문장의 24단어를 수동으로 정리합니다. 청각 자극을 24개의 주제가 갈라진 상대 조항 문장, 24개의 객체 간격 상대 조항 문장 및 24개의 필러 문장을 포함하여 72개의 문장으로 구성합니다.그런 다음 48개의 상대 조항 문장을 두 그룹으로 균등하게 나누어 불완전한 불균형 설계를 만들어 48개의 시험을 형성합니다. 실험용 소프트웨어를 설정하려면 적절한 행동 연구 소프트웨어 프로그램을 열고 소프트웨어를 사용하여 모든 자극을 무작위화합니다. 그런 다음 소프트웨어 시스템을 구성하여 응답 시간, 어휘 결정 테스트에서 참가자의 응답의 정확도 속도 및 참가자의 키보드 입력에 따라 문장 후 이해성을 기록합니다.참가자의 잘못된 어휘 결정이나 참가자의 부정확하거나 누락된 응답 직후 모니터 화면에 표시되는 응답 부족에 대한 피드백을 포함합니다. 이중 모달 간섭 작업 실험을 시작하기 전에 참가자를 컴퓨터 앞에 앉고 헤드폰을 장착합니다. 참가자에게 컴퓨터 화면에 서면 양식과 실험자가 구두 형식으로 지침을 제공합니다.참가자에게 헤드폰을 통해 재생된 문장을 들으면서 동시에 어휘적인 의사 결정 작업을 수행하도록 지시합니다. 참가자에게 화면에 표시되는 간섭 시각적 프로브가 단어인지 단어가 아닌지 결정하고 가능한 한 빠르고 정확하게 단어가 아닌 단어에 대해 예와 아니요를 누릅니다. 참가자에게 이해 질문이 문장 직후에 따를 것이라는 점을 알리고 참가자에게 동시에 작업을 수행하는 동안 청각 문장에 주의 깊게 듣도록 상기시킨다.모든 지침을 제공 한 후 참가자는 피드백과 함께 시험과 관련된 연습 섹션을 작성해야합니다. 연습 세션 후, 참가자가 모든 24 시험 사이에 휴식을 취할 수 있도록 이중 모달 내의사 결정 테스트 간섭 작업을 시작합니다. 이중 모달 외안 간섭 작업 실험의 경우, 24개의 주제가 갈라진 상대 조항 문장, 24개의 객체 간격 상대 조항 문장 및 48개의 필러 문장을 포함하여 청각 자극을 96문장으로 구성한다.48개의 RC 문장을 두 그룹으로 균등하게 나누면 모든 문장 재판에 균등하게 할당된 0, 3자리 또는 5자리 로 구성된 총 96개의 총 시험이 있는 불완전한 불균형 설계를 생성합니다. 실험 소프트웨어 프로그램에서는 문장 유형 및 메모리 로드의 주제 인자 내의 두 가지 조합을 나타내는 두 자극 세트 중 하나에 참가자를 임의로 할당합니다. 참가자에게 단어로 세분화되고 헤드폰을 통해 연주되는 문장을 듣고 키보드를 눌러 후속 분할 된 단어의 재생을 시작함으로써 가능한 한 빨리 속도를 내야한다고 참가자에게 지시하십시오.참가자에게 물음표가 화면에 표시되며, 그 다음에는 이전 문장에서 방금 들었던 정보와 관련된 예 이해 가문 질문이 표시되며 질문에 답해야 한다는 것을 알립니다. 참가자가 예 또는 아니오 키를 눌러 이해 질문에 대답할 때 짧은 비프음 소리가 재생됩니다. 그런 다음 참가자에게 경고음 이후에도 참가자가 화면에 나타나는 지침을 따라야 하며 문장을 듣기 전에 관찰한 숫자를 반복해야 한다고 지시합니다.실험을 시작하려면 참가자에게 숫자의 1500밀리초 시각적 표현을 제공합니다. 그런 다음 자가 진행되는 청취 청각 이동 창 작업을 시작하고 참가자에게 앞의 시각적 프레젠테이션을 메모리에 유지하도록 지시합니다. 스테이지 리콜은 메모리 부하를 더 많이 유도하므로 참가자에게 가능한 한 빨리 문장을 들으면서 숫자를 올바르게 기억하려고 시도하는 데 우선 순위를 지정하도록 지시합니다.참가자가 작업을 완료하는 동안 참가자의 숫자 리콜 응답을 점수 시트에 기록합니다. 본 대표적인 내분단 실험에서 ORC 문장 유형은 상대절 후 및 문장의 끝에 포스트 매트릭스 피험자에서 처리 이점을 나타냈다. SRC 문장은 상대 절 후 포스트 매트릭스 동사에서 이점이 있는 반면.문장 유형의 간단한 주요 효과는 포스트 매트릭스 동사 영역과 SRC 문장이 매트릭스 동사에서 어휘 결정 간섭 작업으로 낮은 처리 부하를 가지고 있음을 나타내는 문장 영역에서 중요했다. ORC 문장은 문장의 끝에 낮은 처리 부하를 했다 하는 동안. 제로 숫자 부하 외방해하에서, 참가자들은 상대 절 마커 DE 및 매트릭스 동사 영역에서 SRC 처리 이점을 입증한 상대 절의 초기 처리 영역에서 ORC 문장에 대한 이점을 보였다.세 자리 부하 외방해하에서, 이전 DE 영역 주위에 피사체 또는 개체 간격 상대 절 문장 차이가 관찰되지 않았다. 그러나 참가자들은 DE에서 SRC 문장 이점과 매트릭스 동사 영역에서 ORC 문장 이점을 입증했습니다. 5자리 하중 과분 간섭하에서 참가자들은 매트릭스 피험자 영역에서 DE 이전 및 포스트 DE 영역 을 중심으로 전체 ORC 문장 이점을 보였습니다.우리의 결과는 중국 RC 처리가 중국 RC의 처리에 본질적인 처리 비대칭이 존재하지 않는다는 추측을 이끄는 동적 패턴을 보여줍니다. 현재 DMI 기술은 자체 진행 식 읽기 패러다임으로 확장하여 작동 메모리가 간섭을 가진 자연스러운 읽기 컨텍스트에서 읽기 처리에 어떻게 관여하는지 조사할 수 있습니다.

Research

JoVE Journal

Behavior

Study Motor Skill Learning by Single-pellet Reaching Tasks in Mice

마우스의 단일 펠릿 도달 작업을 통한 학습 연구 모터 기술

Reaching for and retrieving objects require precise and coordinated motor movements in the forelimb. When mice are repeatedly trained to grasp and ...

연구

행동분석학

Automated Visual Cognitive Tasks for Recording Neural Activity Using a Floor Projection Maze

바닥 투사 미로를 사용하여 녹음 신경 활동에 대한 자동화 된 시각인지 작업

Neuropsychological tasks used in primates to investigate mechanisms of learning and memory are typically visually guided cognitive tasks. We have ...

Uncovering Beat Deafness: Detecting Rhythm Disorders with Synchronized Finger Tapping and Perceptual Timing Tasks

비트의 청각 장애를 폭로 : 감지 리듬 장애를 누르면 동기화 손가락 및 지각 타이밍 작업에

A set of behavioral tasks for assessing perceptual and sensorimotor timing abilities in the general population (i.e., non-musicians) is presented here ...

Performing Behavioral Tasks in Subjects with Intracranial Electrodes

두개 내 전극 피사체에 행동 작업 수행

Patients having stereo-electroencephalography (SEEG) electrode, subdural grid or depth electrode implants have a multitude of electrodes implanted in ...

Practical Methodology of Cognitive Tasks Within a Navigational Assessment

탐색 평가 이내인지 작업의 실제적인 방법론

This paper describes an approach for measuring navigation accuracy relative to cognitive skills. The methodology behind the assessment will thus be ...

Methods to Test Visual Attention Online

방법은 온라인 비주얼주의를 테스트하려면

Online data collection methods have particular appeal to behavioral scientists because they offer the promise of much larger and much more representative ...

Using Fiberless, Wearable fNIRS to Monitor Brain Activity in Real-world Cognitive Tasks

실제 세계인지 작업의 뇌 활동을 모니터 Fiberless, 착용 할 수있는 fNIRS 사용

Functional Near Infrared Spectroscopy (fNIRS) is a neuroimaging technique that uses near-infrared light to monitor brain activity. Based on neurovascular ...

Examining Recall Memory in Infancy and Early Childhood Using the Elicited Imitation Paradigm

이끌어 모방 패러다임을 사용하여 유년기와 유아에 리콜 메모리 검사

The ability to recall the past allows us to report on details of previous experiences, from the everyday to the significant. Because recall memory is ...

Comparing the Frequency Effect Between the Lexical Decision and Naming Tasks in Chinese

중국어 어휘 의사 결정 및 명명 작업 사이의 주파수 효과를 비교

In psycholinguistic research, the frequency effect can be one of the indicators for eligible experimental tasks that examine the nature of lexical access. ...

Using Eye Movements Recorded in the Visual World Paradigm to Explore the Online Processing of Spoken Language

음성된 언어의 온라인 처리를 탐험 시각적인 세계 패러다임에 기록 하는 눈 움직임을 사용 하 여

In a typical eye tracking study using the visual world paradigm, participants' eye movements to objects or pictures in the visual workspace are recorded ...