在存在沟通挑战的情况下检查手势的产生

我的研究考察了身体对手势和手语交流影响的认知和神经机制。我工作的一个主要重点是手势和语音之间的关系在典型和非典型语言发展和处理中有何不同。体内神经科学技术，如脑电图或 EEG、功能性磁共振成像或 fMRI 以及功能性近红外光谱或 fNIRS，有助于揭示手势和手语的神经机制。

此外，眼动追踪还可以深入了解手势和手语的实时处理。我的工作首次表明，观察传达音高轮廓的手势有助于无调性语言（如英语）的使用者学习词汇声调和声调语言（如普通话）。我目前正在使用 EEG 和 fNIRS 来研究这种效应的神经特征。

该协议提供了一种在存在通信挑战的情况下研究手势产生的方法。我已经成功地使用它来研究第二语言学习者和自闭症谱系障碍患者在面对面环境中的手势产生，我计划将其扩展到更多人群和虚拟环境。我的发现为观察和产生手势如何促进语言习得和处理提供了见解。

此外，它们还有助于揭示语言非典型性的潜在生物标志物以及治疗效果。