يدرس بحثي الآليات المعرفية والعصبية لتأثير الجسم على التواصل عبر إيماءات اليد ولغة الإشارة. التركيز الرئيسي لعملي هو كيف تختلف العلاقة بين الإيماءة والكلام في تطوير اللغة النموذجية وغير النمطية ومعالجتها. في تقنيات علم الأعصاب في الجسم الحي مثل تخطيط كهربية الدماغ أو EEG ، والتصوير بالرنين المغناطيسي الوظيفي أو fMRI ، والتحليل الطيفي الوظيفي للأشعة تحت الحمراء القريبة أو fNIRS كانت مفيدة في الكشف عن الآليات العصبية لإيماءات اليد ولغة الإشارة.
بالإضافة إلى ذلك ، يوفر تتبع العين نظرة ثاقبة للمعالجة في الوقت الفعلي لإيماءات اليد ولغة الإشارة. كان عملي أول من أظهر أن مراقبة إيماءات اليد التي تنقل ملامح الملعب تساعد المتحدثين باللغات الأتونالية ، مثل الإنجليزية ، على تعلم النغمة المعجمية واللغات النغمية مثل الماندرين. أنا أستخدم حاليا EEG و fNIRS للتحقيق في التوقيعات العصبية لهذا التأثير.
يوفر هذا البروتوكول وسيلة للتحقيق في إنتاج الإيماءات في وجود تحديات الاتصال. لقد استخدمته بنجاح للتحقيق في إنتاج الإيماءات لدى متعلمي اللغة الثانية والأفراد الذين يعانون من اضطرابات طيف التوحد في الإعدادات الشخصية ، وأخطط لتوسيعها لتشمل مجموعات سكانية إضافية وإعدادات افتراضية. توفر النتائج التي توصلت إليها نظرة ثاقبة حول كيف يمكن لمراقبة وإنتاج إيماءات اليد تسهيل اكتساب اللغة ومعالجتها.
علاوة على ذلك ، فهي تساعد في الكشف عن المؤشرات الحيوية المحتملة لشذوذ اللغة بالإضافة إلى فعالية العلاج.