Sign In

A subscription to JoVE is required to view this content. Sign in or start your free trial.

In This Article

  • Summary
  • Abstract
  • Introduction
  • Protocol
  • תוצאות
  • Discussion
  • Disclosures
  • Acknowledgements
  • Materials
  • References
  • Reprints and Permissions

Summary

מעקב עיניים הוא שיטה לא פולשנית לחקירת עיבוד מידע. מאמר זה מתאר כיצד ניתן להשתמש במעקב עיניים כדי לחקור התנהגות מבט במהלך משימת חירום של הדמיית טיסה בטייסים בזמן נמוך (כלומר, <350 שעות טיסה).

Abstract

מעקב עיניים שימש רבות כפרוקסי כדי לקבל תובנה לגבי התהליכים הקוגניטיביים, התפיסתיים והחושיים-מוטוריים העומדים בבסיס ביצועי מיומנות. עבודות קודמות הראו שמדדי מבט מסורתיים ומתקדמים מדגימים באופן אמין הבדלים חזקים במומחיות הטייס, עומס קוגניטיבי, עייפות ואפילו מודעות למצב (SA).

מחקר זה מתאר את המתודולוגיה לשימוש באלגוריתם מעקב עיניים לביש ומיפוי מבט הלוכד תנועות ראש ועיניים נטורליסטיות (כלומר, מבט) בסימולטור טיסה ללא תנועה בנאמנות גבוהה. השיטה המתוארת במאמר זה מתארת את ניתוחי המבט המבוססים על תחום העניין (AOI), המספקים הקשר נוסף הקשור למקום שבו המשתתפים מסתכלים, ומשך זמן השהייה, המציין עד כמה יעילים הם מעבדים את המידע המקובע. הפרוטוקול ממחיש את התועלת של מעקב עיניים לביש ואלגוריתם ראייה ממוחשבת כדי להעריך שינויים בהתנהגות המבט בתגובה למקרה חירום בלתי צפוי בטיסה.

תוצאות מייצגות הראו כי המבט הושפע באופן משמעותי כאשר אירוע החירום הוצג. באופן ספציפי, הקצאת הקשב, פיזור המבט ומורכבות רצף המבט פחתו משמעותית והפכו מרוכזים מאוד בהסתכלות מחוץ לחלון הקדמי ובמד מהירות האוויר במהלך תרחיש החירום (כל ערכי p < 0.05). נדונים התועלת והמגבלות של שימוש במעקב עיניים לביש בסביבת סימולציית טיסה ללא תנועה בנאמנות גבוהה כדי להבין את המאפיינים המרחביים-זמניים של התנהגות המבט והקשר שלה לעיבוד מידע בתחום התעופה.

Introduction

בני אדם מתקשרים בעיקר עם העולם סביבם על ידי הזזת העיניים והראש שלהם כדי למקד את קו הראייה שלהם (כלומר, מבט) לעבר אובייקט או מיקום ספציפי של עניין. זה נכון במיוחד בסביבות מורכבות כמו תא טייס של מטוסים שבהם הטייסים מתמודדים עם גירויים מתחרים מרובים. תנועות מבט מאפשרות איסוף מידע חזותי ברזולוציה גבוהה המאפשר לבני אדם לתקשר עם סביבתם בצורה בטוחה וגמישה1, שהיא בעלת חשיבות עליונה בתעופה. מחקרים הראו שתנועות עיניים והתנהגות מבט מספקות תובנה לגבי תהליכים תפיסתיים, קוגניטיביים ומוטוריים בסיסיים במשימות שונות 1,2,3. יתר על כן, למקום בו אנו מסתכלים יש השפעה ישירה על התכנון והביצוע של תנועות הגפיים העליונות3. לכן, ניתוח התנהגות מבט במהלך משימות תעופה מספק שיטה אובייקטיבית ולא פולשנית, שיכולה לחשוף כיצד דפוסי תנועת העיניים קשורים להיבטים שונים של עיבוד מידע וביצועים.

מספר מחקרים הראו קשר בין מבט לביצוע משימות בפרדיגמות מעבדה שונות, כמו גם משימות מורכבות בעולם האמיתי (כלומר, הפעלת מטוס). לדוגמה, אזורים רלוונטיים למשימה נוטים להיות מקובעים בתדירות גבוהה יותר ולמשך זמן כולל ארוך יותר, מה שמרמז על כך שמיקום קיבוע, תדירות וזמן שהייה הם פרוקסי להקצאת תשומת לב במשימות נוירו-קוגניטיביות ותעופה 4,5,6. מבצעים ומומחים מצליחים מאוד מראים הטיות קיבעון משמעותיות לתחומים קריטיים למשימה בהשוואה לביצועים פחות מוצלחים או טירונים 4,7,8. היבטים מרחביים-זמניים של המבט נלכדים באמצעות שינויים בדפוסי זמן השהייה על פני תחומי עניין שונים (AOIs) או מדדים של התפלגות קיבוע (כלומר, אנטרופיית מבט נייחת: SGE). בהקשר של פרדיגמות מבוססות מעבדה, משך הקיבוע הממוצע, אורך נתיב הסריקה ומורכבות רצף המבט (כלומר, אנטרופיית מעבר מבט: GTE) נוטים לעלות עקב הסריקה והעיבוד המוגברים הנדרשים לפתרון בעיות ולהרחבת מטרות/פתרונות משימה מאתגרים יותר 4,7.

לעומת זאת, מחקרי תעופה הראו שאורך נתיב הסריקה ומורכבות רצף המבט יורדים עם מורכבות המשימה והעומס הקוגניטיבי. פער זה מדגיש את העובדה שהבנת מרכיבי המשימה והדרישות של הפרדיגמה המופעלת היא קריטית לפירוש מדויק של מדדי מבט. בסך הכל, המחקר עד כה תומך בכך שמדדי מבט מספקים תובנה משמעותית ואובייקטיבית לגבי עיבוד מידע ספציפי למשימה העומד בבסיס ההבדלים בקושי המשימה, העומס הקוגניטיבי וביצועי המשימה. עם ההתקדמות בטכנולוגיית מעקב העיניים (כלומר, ניידות, כיול ועלות), בחינת התנהגות המבט ב"טבע" היא תחום מחקר מתפתח עם יישומים מוחשיים לקידום הכשרה תעסוקתית בתחומי הרפואה 9,10,11 ותעופה 12,13,14.

העבודה הנוכחית נועדה לבחון עוד יותר את התועלת של שימוש במדדים מבוססי מבט כדי לקבל תובנה לגבי עיבוד מידע על ידי שימוש ספציפי במעקב עיניים לביש במהלך משימת סימולציה של טיסת חירום בטייסים בזמן נמוך. מחקר זה מרחיב את העבודות הקודמות שהשתמשו במעקב עיניים מיוצב ראש (כלומר, EyeLink II) כדי לבחון הבדלים במדדי התנהגות המבט כפונקציה של קושי טיסה (כלומר, שינויים בתנאי מזג האוויר)5. העבודה המוצגת בכתב יד זה מרחיבה גם עבודות אחרות שתיארו את הגישות המתודולוגיות והאנליטיות לשימוש במעקב אחר עיניים במערכת מציאות מדומה15. המחקר שלנו השתמש בסימולטור ללא תנועה בנאמנות גבוהה יותר ומדווח על ניתוח נוסף של נתוני תנועת עיניים (כלומר, אנטרופיה). סוג זה של ניתוח דווח במאמרים קודמים; עם זאת, מגבלה בספרות הנוכחית היא היעדר סטנדרטיזציה בדיווח על השלבים האנליטיים. לדוגמה, לדיווח על אופן הגדרת תחומי העניין יש חשיבות קריטית מכיוון שהוא משפיע ישירות על ערכי האנטרופיה המתקבלים16.

לסיכום, העבודה הנוכחית בחנה מדדי התנהגות מבט מסורתיים ודינמיים בעוד שרמת הקושי במשימה עברה מניפולציה באמצעות הצגת תרחיש חירום בטיסה (כלומר, כשל מוחלט בלתי צפוי במנוע). היה צפוי שהכנסת תרחיש חירום בטיסה תספק תובנה לגבי שינויים בהתנהגות המבט העומדים בבסיס עיבוד המידע בתנאי משימה מאתגרים יותר. המחקר המדווח כאן הוא חלק ממחקר גדול יותר הבוחן את התועלת של מעקב עיניים בסימולטור טיסה כדי ליידע על הכשרת טייסים מבוססת יכולות. התוצאות המוצגות כאן לא פורסמו בעבר.

Protocol

ניתן ליישם את הפרוטוקול הבא על מחקרים הכוללים מעקב עיניים לביש וסימולטור טיסה. המחקר הנוכחי כולל נתוני מעקב עיניים שנרשמו לצד משימות מורכבות הקשורות לתעופה בסימולטור טיסה (ראה טבלת חומרים). הסימולטור הוגדר לייצוג של ססנה 172 ושימש עם לוח המחוונים הדרוש (תצורת מד קיטור), מערכת אוויוניקה/GPS, לוח אודיו/אורות, לוח מפסק ויחידת בקרת טיסה (FCU) (ראה איור 1). מכשיר סימולטור הטיסה המשמש במחקר זה ניתן לאישור למטרות אימון ומשמש את בית הספר לטיסה המקומי כדי לאמן את מערכי הכישורים הנדרשים להגיב לתרחישי חירום שונים, כגון כשל במנוע, בסביבה בסיכון נמוך. כל המשתתפים במחקר זה היו מורשים; לכן, הם חוו את תרחיש סימולטור כשל המנוע בעבר במהלך ההכשרה שלהם. מחקר זה אושר על ידי המשרד לאתיקה מחקרית של אוניברסיטת ווטרלו (43564; תאריך: 17 בנובמבר 2021). כל המשתתפים (N = 24; 14 גברים, 10 נשים; גיל ממוצע = 22 שנים; טווח שעות טיסה: 51-280 שעות) סיפקו הסכמה מדעת בכתב.

figure-protocol-1026
איור 1: סביבת סימולטור טיסה. איור של סביבת סימולטור הטיסה. נקודת המבט של המשתתף על תא הטייס העתיקה את זו של טייס שטס במטוס ססנה 172, שהוגדר מראש לגישה במורד הרוח לבסיס עד הסופי לשדה התעופה הבינלאומי ווטרלו, ברסלאו, אונטריו, קליפורניה. הקופסאות הכתומות מייצגות את עשרת תחומי העניין העיקריים המשמשים בניתוחי המבט. אלה כוללים את (1) מהירות אווירית, (2) גישה, (3) מד גובה, (4) מתאם פנייה, (5) כיוון, (6) מהירות אנכית ו-(7) מחווני כוח, כמו גם (8) החלונות הקדמיים, (9) השמאליים ו-(10) הימניים. נתון זה שונה מ-Ayala et al.5. אנא לחץ כאן לצפייה בגרסה גדולה יותר של איור זה.

1. סינון משתתפים והסכמה מדעת

  1. סנן את המשתתף באמצעות שאלון דיווח עצמי המבוסס על קריטריוני הכללה/אי הכללה 2,5: החזקת רישיון טייס פרטי (PPL) לפחות, ראייה תקינה או מתוקנת לנורמלית, וללא אבחנה קודמת עם הפרעה נוירו-פסיכיאטרית/נוירולוגית או לקות למידה.
  2. יידע את המשתתף על מטרות ונהלי המחקר באמצעות תדריך מפורט המטופל על ידי הנסיין ומדריך הטיסה/טכנאי הסימולטור המפקח. סקור את הסיכונים המתוארים במסמך ההסכמה שאושר על ידי מועצת הביקורת האתית של המוסד. ענה על כל שאלה לגבי הסיכונים הפוטנציאליים. קבל הסכמה מדעת בכתב לפני תחילת כל הליכי מחקר.

2. דרישות חומרה/תוכנה והפעלה

  1. סימולטור טיסה (בדרך כלל מבוצע על-ידי טכנאי הסימולטור)
    1. הפעל את מסכי הסימולטור והמקרן. אם אחד המקרנים אינו נדלק במקביל לאחרים, הפעל מחדש את הסימולטור.
    2. במסך ההוראות, לחץ על הכרטיסייה הגדרות קבועות מראש וודא שההגדרות הנדרשות מראש של מיקום ו/או מזג אוויר זמינות. במידת הצורך, צור סוג חדש של קביעה מוגדרת מראש; התייעץ עם הטכנאי לקבלת עזרה.
  2. מחשב נייד קולקשן
    1. סובב את המחשב הנייד והיכנס עם אישורים.
    2. כאשר תתבקש, בחר פרופיל קיים או צור פרופיל אם אתה בודק משתתף חדש. לחלופין, בחר באפשרות אורח כדי להחליף את הכיול האחרון שלו.
      1. כדי ליצור פרופיל חדש, גלול לסוף רשימת הפרופילים ולחץ על הוסף.
    3. הגדר את מזהה הפרופיל למזהה המשתתף. מזהה פרופיל זה ישמש לתיוג התיקיה, המכילה נתוני מעקב עיניים לאחר השלמת ההקלטה.
  3. כיול משקפיים
    הערה: המשקפיים חייבים להישאר מחוברים למחשב הנייד כדי להקליט. יש להשלים את הכיול עם התיבה רק פעם אחת בתחילת איסוף הנתונים.
    1. פתח את מארז מעקב העיניים והוציא את המשקפיים.
    2. חבר את כבל ה-USB למיקרו-USB מהמחשב הנייד למשקפיים. אם תתבקש במחשב הנייד, עדכן את הקושחה.
    3. אתר את תיבת הכיול השחורה בתוך מארז מעקב העיניים.
    4. במחשב הנישא של האיסוף, במרכז המעקב אחר העיניים, בחר כלים | כיול מכשיר.
    5. הנח את המשקפיים בתוך הקופסה ולחץ על התחל בחלון המוקפץ כדי להתחיל בכיול.
    6. הסר את המשקפיים מהקופסה לאחר השלמת הכיול.
  4. התאמה לאף
    1. בחר את האף.
    2. הנחו את המשתתף לשבת בתא הטייס ולהרכיב את המשקפיים.
    3. במרכז המעקב אחר העיניים, נווט אל קובץ | הגדרות | אשף האף.
    4. בדוק את התאמת המשקפיים שלך בצד שמאל של המסך. אם ההתאמה מצוינת, המשך לשלב הבא. אחרת, לחץ על התיבה.
    5. אמרו למשתתף לעקוב אחר הוראות ההמלצה להתאמה המוצגות על המסך: כוונו את האף, כוונו את המשקפיים כך שיושבים בנוחות, והסתכלו ישר קדימה על המחשב הנייד.
    6. במידת הצורך, החלף את האף. צבטו את האף באמצעו, החליקו אותו החוצה מהמשקפיים ואז החליקו עוד אחד פנימה. המשיכו לבדוק את חלקי האף השונים עד לזיהוי האף המתאים ביותר למשתתף.
  5. שיחות בקרת תנועה אווירית (ATC)
    הערה: אם המחקר דורש שיחות ATC, בקש מהמשתתף להביא אוזניות משלו או להשתמש באוזניות המעבדה. השלם את כיול גלגל העין רק לאחר שהמשתתף מרכיב את האוזניות מכיוון שהאוזניות יכולות להזיז את המשקפיים על הראש, מה שמשפיע על דיוק הכיול.
    1. בדוק שהאוזניות מחוברות לשקע בצד התחתון השמאלי של לוח המחוונים.
    2. הנחו את המשתתף להרכיב את האוזניות. בקש מהם לא לגעת בו או להוריד אותו עד לסיום ההקלטה.
      הערה: נדרש כיול מחדש בכל פעם שמזיזים את האוזניות (ולכן את המשקפיים).
    3. בצע בדיקת רדיו.
  6. כיול גלגל העין
    הערה: בכל פעם שהמשתתף מזיז את המשקפיים על ראשו, עליו לחזור על כיול גלגל העין. בקשו מהמשתתף לא לגעת במשקפיים עד לסיום הניסויים שלו.
    1. ב-Eye Tracking Hub, נווט אל תיבת הפרמטרים בצד שמאל של המסך.
      1. בדוק את מצב הכיול ובחר מבט קבוע או ראש קבוע בהתאם.
      2. בדוק שנקודות הכיול הן רשת של 5 x 5, עבור 25 נקודות בסך הכל.
      3. בדוק את מצב האימות וודא שהוא תואם למצב הכיול.
      4. בדוק את תפוקות המעקב אחר העיניים וודא שכל מה שצריך לתעד עבור המחקר מסומן באמצעות תיבות הסימון.
    2. לחץ על File | הגדרות | מתקדם ובדוק שקצב הדגימה הוא 250 הרץ.
    3. סמן את התיבה כיול מעקב העיניים שלך על המסך באמצעות העכבר. הוראות הכיול ישתנו בהתאם למצב. כדי לעקוב אחר המחקר הנוכחי, השתמשו במצב כיול המבט הקבוע : הנחו את המשתתפים להזיז את ראשם כך שהתיבה תחפוף לריבוע השחור והם יתיישרו. לאחר מכן, בקשו מהמשתתף למקד את מבטו על הכוונת בריבוע השחור וללחוץ על מקש הרווח.
    4. לחץ על התיבה אמת את ההגדרה שלך . ההוראות יהיו זהות לשלב 2.6.3. בדוק שנתון האימות MAE (שגיאה מוחלטת ממוצעת) הוא <1°. אם לא, חזור על שלבים 2.6.3 ו- 2.6.4.
    5. לחץ על שמור כיול כדי לשמור את הכיול בפרופיל בכל פעם שהכיול והאימות יושלמו.
  7. שימוש באייפד
    הערה: ה-iPad ממוקם משמאל ללוח המחוונים (ראה איור 1). הוא משמש לשאלונים בדרך כלל לאחר טיסה.
    1. הפעל את האייפד וודא שהוא מחובר לאינטרנט.
    2. פתחו חלון בספארי והזינו את הקישור לשאלון המחקר.

3. איסוף נתונים

הערה: חזור על שלבים אלה עבור כל גירסת ניסיון. מומלץ להניח את המחשב הנייד על הספסל מחוץ לתא הטייס.

  1. במחשב סימולטור הטיסה, במסך ההוראות , לחץ על קביעות מוגדרות מראש ולאחר מכן בחר את קביעת המיקום המוגדרת מראש הרצויה להדמיה. לחץ על כפתור החל וצפה במסכים המקיפים את הסימולטור כדי לוודא שהשינוי מתרחש.
  2. חזור על שלב 3.1 כדי להחיל את ההגדרה המוגדרת מראש של מזג האוויר .
  3. תן למשתתף הוראות ספציפיות לגבי הניסוי או מסלול הטיסה שלו. זה כולל להורות להם לשנות את ההגדרות בלוח המחוונים לפני שהם מתחילים.
  4. במסך ההוראות, לחץ על הלחצן הכתום STOP כדי להתחיל באיסוף נתונים. הצבע ישתנה לירוק והטקסט יציין FLYING. הקפד לתת רמז מילולי למשתתף כדי שידע שהוא יכול להתחיל להטיס את המטוס. הרמז המומלץ הוא "3, 2, 1, יש לך פקדים" כאשר לוחצים על כפתור העצירה הכתום.
  5. במחשב הנישא של האוסף, לחץ על התחל הקלטה כך שנתוני מעקב העיניים יסונכרנו עם נתוני סימולטור הטיסה.
  6. לאחר שהמשתתף סיים את המסלול שלו ונחת, המתן עד שהמטוס יפסיק לנוע.
    הערה: חשוב להמתין כי במהלך העיבוד שלאחר העיבוד; הנתונים נחתכים כאשר מהירות הקרקע מתייצבת על 0. זה נותן עקביות עבור נקודת הקצה של כל הניסויים.
  7. במסך ההוראות, לחצו על כפתור FLYING הירוק. הצבע יחזור לכתום והטקסט יגיד STOPPED. תן רמז מילולי במהלך שלב זה כאשר איסוף הנתונים עומד להסתיים. הרמז המומלץ הוא "3, 2, 1, עצור".
  8. הנחו את המשתתף למלא את השאלון שלאחר הניסוי באייפד. רענן את הדף עבור גירסת הניסיון הבאה.
    הערה: המחקר הנוכחי השתמש בשאלון הדירוג העצמי של טכניקת דירוג מודעות למצב (SART) כשאלון היחיד לאחר המשפט17.

4. עיבוד וניתוח נתונים

  1. נתוני סימולטור טיסה
    הערה: קובץ .csv שהועתק מסימולטור הטיסה מכיל יותר מ-1,000 פרמטרים שניתן לשלוט בהם בסימולטור. מדדי הביצועים העיקריים המעניינים מפורטים ומתוארים בטבלה 1.
    1. עבור כל משתתף, חשב את שיעור ההצלחה באמצעות Eq (1) על ידי לקיחת האחוז על פני תנאי המשימה. ניסויים כושלים מזוהים על ידי קריטריונים קבועים מראש שתוכנתו בתוך הסימולטור שמסיים את הניסוי באופן אוטומטי עם הנחיתה עקב כיוון המטוס והמהירות האנכית. בצע אימות לאחר המשפט כדי לוודא שקריטריון זה תואם את מגבלות המטוס בפועל (כלומר, נזק/התרסקות של ציוד הנחיתה של ססנה 172 ניכר במהירויות אנכיות > 700 רגל לדקה [fpm] בעת הנחיתה).
      שיעור הצלחה = figure-protocol-9780 (1)
      הערה: ערכי אחוזי הצלחה נמוכים יותר מצביעים על תוצאות גרועות יותר מכיוון שהם קשורים לירידה בניסיונות נחיתה מוצלחים.
    2. עבור כל ניסוי, חשב את זמן ההשלמה על סמך חותמת הזמן, המציינת שהמטוס עצר על המסלול (כלומר, GroundSpeed = 0 קשר).
      הערה: זמן השלמה קצר יותר לא תמיד משתווה לביצועים טובים יותר. יש לנקוט משנה זהירות כדי להבין כיצד תנאי המשימה (כלומר, רוחות נוספות, תרחישי חירום וכו') צפויים להשפיע על זמן ההשלמה.
    3. עבור כל ניסוי, קבע את קשיות הנחיתה על סמך המהירות האנכית של המטוס (fpm) בזמן שהמטוס נוחת לראשונה על המסלול. ודא שערך זה נלקח באותה חותמת זמן המשויכת לשינוי הראשון במצב AircraftOnGround מ-0 (באוויר) ל-1 (על הקרקע).
      הערה: ערכים בטווח של -700 סל"ד עד 0 סל"ד נחשבים בטוחים, כאשר ערכים קרובים יותר ל-0 מייצגים נחיתות רכות יותר (כלומר, טובות יותר). ערכים שליליים מייצגים מהירות אנכית כלפי מטה; ערכים חיוביים מייצגים מהירות אנכית כלפי מעלה.
    4. עבור כל ניסוי, חשב את שגיאת הנחיתה (°) על סמך ההפרש בין קואורדינטות הנחיתה לנקודת הייחוס על המסלול (מרכז סמני 500 רגל). באמצעות נקודת הייחוס, חשב את שגיאת הנחיתה באמצעות Eq (2).
      הפרש = √((Δ קו רוחב)2 + (Δ קו אורך)2) (2)
      הערה: ערכים מתחת ל-1° מוצגים כנורמליים 5,15. ערכים גדולים מצביעים על שגיאת נחיתה גדולה יותר הקשורה לנקודות נחיתה של מטוסים הרחוקות יותר מאזור הנחיתה.
    5. חשב את הממוצעים בין כל המשתתפים עבור כל משתנה תוצאת ביצועים עבור כל תנאי משימה. דווח על ערכים אלה.
  2. נתוני מודעות למצב
    1. עבור כל ניסוי, חשב את ציון ה-SA על סמך ציוני ה-SART המדווחים על פני 10 הממדים של SA17.
      1. השתמשו בשאלון SART17 כדי לקבוע את התשובות הסובייקטיביות של המשתתפים לגבי הקושי הכולל במטלה, כמו גם את התרשמותם מכמות משאבי הקשב שהיו זמינים והשקיעו במהלך ביצוע המשימה.
      2. באמצעות סולם ליקרט בן 7 נקודות, בקשו מהמשתתפים לדרג את החוויה הנתפסת שלהם בשאלות חקירה, כולל מורכבות המצב, חלוקת הקשב, היכולת המנטלית העודפת וכמות המידע ואיכותו.
      3. שלב סולמות אלה לממדים גדולים יותר של דרישות קשב (ביקוש), היצע קשב (היצע) והבנת מצב (הבנה).
      4. השתמש בדירוגים אלה כדי לחשב מדד של SA בהתבסס על Eq (3):
        SA = הבנה - (ביקוש-היצע) (3)
        הערה: ציונים גבוהים יותר בסולמות המשולבים כדי לספק מידה של הבנה מצביעים על כך שלמשתתף יש הבנה טובה של המשימה שעל הפרק. באופן דומה, ציונים גבוהים בתחום ההיצע מצביעים על כך שלמשתתף יש כמות משמעותית של משאבי קשב להקדיש למשימה נתונה. לעומת זאת, ציון ביקוש גבוה מצביע על כך שהמשימה דורשת כמות משמעותית של משאבי קשב להשלמתה. חשוב להבהיר שציונים אלה מפורשים בצורה הטובה ביותר כאשר משווים אותם בין תנאים (כלומר, תנאים קלים לעומת תנאים קשים) במקום להשתמש בהם כמדדים עצמאיים.
    2. לאחר השלמת איסוף הנתונים, חשב את הממוצעים של כל המשתתפים עבור כל מצב משימה (כלומר, בסיסי, חירום). דווח על ערכים אלה.
  3. נתוני מעקב עיניים
    1. השתמש בסקריפט אצווה למעקב אחר העיניים להגדרה ידנית של AOIs לשימוש במיפוי מבט. הסקריפט יפתח חלון חדש לבחירת מסגרת מפתח שאמור להציג בבירור את כל ה-AOIs העיקריים שינותחו. גלול בסרטון ובחר מסגרת המציגה את כל ה-AOIs בצורה ברורה.
    2. בהתאם להוראות שעל המסך, ציירו מלבן מעל אזור בפריים שיהיה גלוי לאורך כל הסרטון, ייחודי ויישאר יציב.
      הערה: מטרת שלב זה היא ליצור מסגרת קואורדינטות "בתוך המסך" שניתן להשתמש בה לאורך הקלטת הווידאו, מכיוון שתנועות הראש גורמות למיקום האובייקטים בסביבה להשתנות במהלך הקלטת הווידאו.
    3. צייר מלבן עבור כל AOI בתמונה, אחד בכל פעם. תן להם שם בהתאם. לחץ על הוסף עוד כדי להוסיף AOI חדש ולחץ על סיום באחרון. אם המבט מתאם במהלך קיבוע נתון נוחת בתוך מרחב האובייקט כפי שהוגדר במסגרת הקואורדינטות "בתוך המסך", סמן את הקיבוע הזה בתווית ה-AOI המתאימה.
      הערה: מטרת שלב זה היא ליצור ספרייה של קואורדינטות אובייקט המשמשות לאחר מכן כהפניות בעת השוואת קואורדינטות מבט לקואורדינטות במסך.
      בדרך כלל קיימים 10 AOIs, אך הדבר תלוי באופן קביעת התצורה של סימולטור הטיסה. לוח המחוונים עשוי להיות שונה. בהתאם לעבודה קודמת 5,18, המחקר הנוכחי משתמש ב-AOIs הבאים: מהירות אוויר, גישה, מד גובה, מתאם פנייה, כיוון, מהירות אנכית, כוח, חלון קדמי, חלון שמאלי וחלון ימני (ראה איור 1).
    4. תן לסקריפט להתחיל לעבד את ה-AOIs וליצור נתוני קיבוע. הוא מייצר עלילה המציגה את הסקאדות והקיבעונות מעל הווידאו.
    5. ייווצרו שני קבצים חדשים: fixations.csv ו- aoi_parameters.yaml. מעבד האצווה ישלים את העיבוד המאוחר של נתוני המבט עבור כל ניסוי וכל משתתף.
      הערה: מדדי העניין העיקריים למעקב אחר העיניים מפורטים בטבלה 2 ומחושבים עבור כל AOI עבור כל ניסוי.
    6. עבור כל ניסוי, חשב את מדדי המבט המסורתיים 4,5 עבור כל AOI בהתבסס על הנתונים שנוצרו בקובץ fixation.csv.
      הערה: כאן, אנו מתמקדים בזמן השהייה (%), המחושב על ידי חלוקת סכום הקיבועים עבור AOI מסוים בסכום כל הקיבועים והכפלת המנה ב-100 כדי לקבל את אחוז הזמן המושקע ב-AOI ספציפי. אין פרשנות שלילית/חיובית מובנית מזמני השהות המחושבים. הם נותנים אינדיקציה למקום שבו תשומת הלב מוקצית בעיקר. משכי קיבוע ממוצעים ארוכים יותר מעידים על דרישות עיבוד מוגברות.
    7. עבור כל ניסוי, חשב את קצב המצמוץ באמצעות Eq (4):
      קצב מצמוץ = סה"כ מצמוצים/זמן השלמה (4)
      הערה: עבודות קודמות הראו שקצב המצמוץ קשור הפוך לעומס קוגניטיבי 2,6,13,19,20.
    8. עבור כל ניסוי, חשב את ה-SGE באמצעות eq (5)21:
      figure-protocol-15906(5)
      כאשר v הוא ההסתברות לצפות ב- ith AOI ו - V הוא מספר ה- AOIs.
      הערה: ערכי SGE גבוהים יותר קשורים לפיזור קיבוע גדול יותר, בעוד שערכים נמוכים יותר מעידים על הקצאה ממוקדת יותר של קיבוע22.
    9. עבור כל ניסוי, חשב את ה-GTE באמצעות eq (6)23:
      figure-protocol-16361(6)
      כאשר V היא ההסתברות לצפות ב-ith AOI, ו-M היא ההסתברות לצפות ב-jth AOI בהינתן הצפייה הקודמת ב-ith AOI.
      הערה: ערכי GTE גבוהים יותר משויכים לנתיבי סריקה חזותיים מורכבים ובלתי צפויים יותר, בעוד שערכי GTE נמוכים יותר מעידים על נתיבי סריקה חזותיים צפויים ושגרתיים יותר.
    10. חשב את הממוצעים על פני כל המשתתפים עבור כל משתנה פלט מעקב עיניים (ו-AOI כאשר מצוין) וכל תנאי משימה. דווח על ערכים אלה.
מונחהגדרה
הצלחה (%)אחוז ניסויי הנחיתה המוצלחים
זמני השלמהמשך הזמן מתחילת תרחיש הנחיתה ועד למטוס שמגיע לעצירה מוחלטת על המסלול
קשיות נחיתה (fpm)הקצב ההגון בנקודת הטאצ'דאון
שגיאת נחיתה (°)ההבדל בין מרכז המטוס למרכז סמן המסלול בגובה 500 רגל בנקודת הנחיתה

טבלה 1: משתני תוצאת ביצועי סימולטור. משתנים תלויי ביצועי מטוסים והגדרותיהם.

figure-protocol-17756
איור 2: נתיב טיסה של תרחיש נחיתה. סכמטי של (A) מעגל הנחיתה שהושלם בכל הניסויים ו-(B) המסלול עם סמני 500 רגל ששימשו כנקודת ייחוס לאזור הנחיתה (כלומר, עיגול כתום מרכזי). אנא לחץ כאן לצפייה בגרסה גדולה יותר של איור זה.

figure-protocol-18304
איור 3: מיפוי תחומי עניין. איור של סקריפט האצווה המדגים חלון לבחירת מסגרת. בחירת מסגרת אופטימלית כרוכה בבחירת מסגרת וידאו הכוללת את רוב או כל תחומי העניין למיפוי. אנא לחץ כאן לצפייה בגרסה גדולה יותר של איור זה.

figure-protocol-18813
איור 4: יצירת קואורדינטות "בתוך המסך" של מיפוי אזור עניין. איור של סקריפט האצווה המדגים חלון לתיאום "בתוך המסך" של הבחירה. שלב זה כולל בחירה של אזור מרובע/מלבני שנשאר גלוי לאורך כל ההקלטה, ייחודי לתמונה ונשאר סטטי. אנא לחץ כאן לצפייה בגרסה גדולה יותר של איור זה.

figure-protocol-19374
איור 5: זיהוי אזור עניין שיש למפות. איור של חלון סקריפט האצווה המאפשר בחירה ותיוג של תחומי עניין. קיצור: AOIs = תחומי עניין. אנא לחץ כאן לצפייה בגרסה גדולה יותר של איור זה.

figure-protocol-19845
איור 6: עיבוד סקריפט אצווה. איור של סקריפט האצווה המעבד את הסרטון וממפה מבט את הקיבועים שנעשו במהלך הניסוי. אנא לחץ כאן לצפייה בגרסה גדולה יותר של איור זה.

מונחהגדרה
זמן שהייה (%)אחוז מסכום כל משכי הקיבוע שנצברו ב-AOI אחד ביחס לסכום משכי הקיבוע שנצברו בכל ה-AOIs
משך קיבוע ממוצע (ms)משך זמן ממוצע של קיבוע מעל AOI אחד מכניסה ליציאה
קצב מצמוץ (מהבהב/שניות)מספר מצמוצים בשנייה
SGE (ביטים)פיזור קיבוע
GTE (ביטים)מורכבות רצף הסריקה
מספר קרבותמספר אירועי מנהור קוגניטיבי (>10 שניות)
סה"כ זמן קרבסה"כ הזמן של אירועי מנהור קוגניטיבי

טבלה 2: משתני תוצאה של מעקב עיניים. מבט משתנים תלויי התנהגות והגדרותיהם.

תוצאות

השפעת דרישות המשימה על ביצועי הטיסה
הנתונים נותחו על סמך ניסויי נחיתה מוצלחים בתנאים בסיסיים וחירום. כל המדדים עברו מבחן t של דגימות זוגיות (גורם בתוך הנבדק: מצב המשימה (בסיסי, חירום)). כל מבחני ה-t בוצעו עם רמת אלפא שנקבעה על 0.05. ארבעה משתתפים התרסקו במה...

Discussion

שיטת מעקב העיניים המתוארת כאן מאפשרת הערכה של עיבוד מידע בסביבת סימולטור טיסה באמצעות מעקב עיניים לביש. הערכת המאפיינים המרחביים והזמניים של התנהגות המבט מספקת תובנה לגבי עיבוד מידע אנושי, שנחקר בהרחבה באמצעות פרדיגמות מעבדה מבוקרותמאוד 4,7...

Disclosures

אין אינטרסים פיננסיים מתחרים.

Acknowledgements

עבודה זו נתמכת בחלקה על ידי מלגת הבוגרים הקנדית (CGS) ממועצת המחקר למדעי הטבע וההנדסה (NSERC) של קנדה, ומענק המחקר (00753) מקרן הגבולות החדשים במחקר. כל הדעות, הממצאים, המסקנות או ההמלצות המובעות בחומר זה הן של המחבר/ים ואינן משקפות בהכרח את אלה של נותני החסות.

Materials

NameCompanyCatalog NumberComments
flight simulatorALSIMAL-250fixed fully immersive flight simulation training device
laptopHpLenovoeye tracking data collection laptop; requirements: Windows 10 and python 3.0
portable eye-trackerAdHawk MindLink eye tracking glasses (250 Hz, <2° gaze error, front-facing camera); eye tracking batch script is made available with AdHawk device purchase

References

  1. de Brouwer, A. J., Flanagan, J. R., Spering, M. Functional use of eye movements for an acting system. Trends Cogn Sci. 25 (3), 252-263 (2021).
  2. Ayala, N., Kearns, S., Cao, S., Irving, E., Niechwiej-Szwedo, E. Investigating the role of flight phase and task difficulty on low-time pilot performance, gaze dynamics and subjective situation awareness during simulated flight. J Eye Mov Res. 17 (1), (2024).
  3. Land, M. F., Hayhoe, M. In what ways do eye movements contribute to everyday activities. Vision Res. 41 (25-26), 3559-3565 (2001).
  4. Ayala, N., Zafar, A., Niechwiej-Szwedo, E. Gaze behavior: a window into distinct cognitive processes revealed by the Tower of London test. Vision Res. 199, 108072 (2022).
  5. Ayala, N. The effects of task difficulty on gaze behavior during landing with visual flight rules in low-time pilots. J Eye Mov Res. 16, 10 (2023).
  6. Glaholt, M. G. . Eye tracking in the cockpit: a review of the relationships between eye movements and the aviators cognitive state. , (2014).
  7. Hodgson, T. L., Bajwa, A., Owen, A. M., Kennard, C. The strategic control of gaze direction in the Tower-of-London task. J Cognitive Neurosci. 12 (5), 894-907 (2000).
  8. van De Merwe, K., Van Dijk, H., Zon, R. Eye movements as an indicator of situation awareness in a flight simulator experiment. Int J Aviat Psychol. 22 (1), 78-95 (2012).
  9. Kok, E. M., Jarodzka, H. Before your very eyes: The value and limitations of eye tracking in medical education. Med Educ. 51 (1), 114-122 (2017).
  10. Di Stasi, L. L., et al. Gaze entropy reflects surgical task load. Surg Endosc. 30, 5034-5043 (2016).
  11. Laubrock, J., Krutz, A., Nübel, J., Spethmann, S. Gaze patterns reflect and predict expertise in dynamic echocardiographic imaging. J Med Imag. 10 (S1), S11906-S11906 (2023).
  12. Brams, S., et al. Does effective gaze behavior lead to enhanced performance in a complex error-detection cockpit task. PloS One. 13 (11), e0207439 (2018).
  13. Peißl, S., Wickens, C. D., Baruah, R. Eye-tracking measures in aviation: A selective literature review. Int J Aero Psych. 28 (3-4), 98-112 (2018).
  14. Ziv, G. Gaze behavior and visual attention: A review of eye tracking studies in aviation. Int J Aviat Psychol. 26 (3-4), 75-104 (2016).
  15. Ke, L., et al. Evaluating flight performance and eye movement patterns using virtual reality flight simulator. J. Vis. Exp. (195), e65170 (2023).
  16. Krejtz, K., et al. Gaze transition entropy. ACM Transactions on Applied Perception. 13 (1), 1-20 (2015).
  17. Taylor, R. M., Selcon, S. J. Cognitive quality and situational awareness with advanced aircraft attitude displays. Proceedings of the Human Factors Society Annual Meeting. 34 (1), 26-30 (1990).
  18. Ayala, N., et al. Does fiducial marker visibility impact task performance and information processing in novice and low-time pilots. Computers & Graphics. 199, 103889 (2024).
  19. Recarte, M. &. #. 1. 9. 3. ;., Pérez, E., Conchillo, &. #. 1. 9. 3. ;., Nunes, L. M. Mental workload and visual impairment: Differences between pupil, blink, and subjective rating. Spanish J Psych. 11 (2), 374-385 (2008).
  20. Zheng, B., et al. Workload assessment of surgeons: correlation between NASA TLX and blinks. Surg Endosc. 26, 2746-2750 (2012).
  21. Shannon, C. E. A mathematical theory of communication. The Bell System Technical Journal. 27 (3), 379-423 (1948).
  22. Shiferaw, B., Downey, L., Crewther, D. A review of gaze entropy as a measure of visual scanning efficiency. Neurosci Biobehav R. 96, 353-366 (2019).
  23. Ciuperca, G., Girardin, V. Estimation of the entropy rate of a countable Markov chain. Commun Stat-Theory and Methods. 36 (14), 2543-2557 (2007).
  24. Federal aviation administration. . Airplane flying handbook. , (2021).
  25. Brown, D. L., Vitense, H. S., Wetzel, P. A., Anderson, G. M. Instrument scan strategies of F-117A Pilots. Aviat, Space, Envir Med. 73 (10), 1007-1013 (2002).
  26. Lu, T., Lou, Z., Shao, F., Li, Y., You, X. Attention and entropy in simulated flight with varying cognitive loads. Aerosp Medicine Hum Perf. 91 (6), 489-495 (2020).
  27. Dehais, F., Peysakhovich, V., Scannella, S., Fongue, J., Gateau, T. "Automation surprise" in aviation: Real-time solutions. , 2525-2534 (2015).
  28. Kowler, E. Eye movements: The past 25 years. J Vis Res. 51 (13), 1457-1483 (2011).
  29. Zafar, A., et al. Investigation of camera-free eye-tracking glasses compared to a video-based system. Sensors. 23 (18), 7753 (2023).
  30. Leube, A., Rifai, K. Sampling rate influences saccade detection in mobile eye tracking of a reading task. J Eye Mov Res. 10 (3), (2017).
  31. Diaz-Piedra, C., et al. The effects of flight complexity on gaze entropy: An experimental study with fighter pilots. Appl Ergon. 77, 92-99 (2019).
  32. Shiferaw, B. A., et al. Stationary gaze entropy predicts lane departure events in sleep-deprived drivers. Sci Rep. 8 (1), 1-10 (2018).
  33. Parker, A. J., Kirkby, J. A., Slattery, T. J. Undersweep fixations during reading in adults and children. J Exp Child Psychol. 192, 104788 (2020).
  34. Ayala, N., Kearns, S., Irving, E., Cao, S., Niechwiej-Szwedo, E. The effects of a dual task on gaze behavior examined during a simulated flight in low-time pilots. Front Psychol. 15, 1439401 (2024).
  35. Ayala, N., Heath, M. Executive dysfunction after a sport-related concussion is independent of task-based symptom burden. J Neurotraum. 37 (23), 2558-2568 (2020).
  36. Huddy, V. C., et al. Gaze strategies during planning in first-episode psychosis. J Abnorm Psychol. 116 (3), 589 (2007).
  37. Irving, E. L., Steinbach, M. J., Lillakas, L., Babu, R. J., Hutchings, N. Horizontal saccade dynamics across the human life span. Invest Opth Vis Sci. 47 (6), 2478-2484 (2006).
  38. Yep, R., et al. Interleaved pro/anti-saccade behavior across the lifespan. Front Aging Neurosci. 14, 842549 (2022).
  39. Manoel, E. D. J., Connolly, K. J. Variability and the development of skilled actions. Int J Psychophys. 19 (2), 129-147 (1995).

Reprints and Permissions

Request permission to reuse the text or figures of this JoVE article

Request Permission

Explore More Articles

JoVE218

This article has been published

Video Coming Soon

JoVE Logo

Privacy

Terms of Use

Policies

Research

Education

ABOUT JoVE

Copyright © 2025 MyJoVE Corporation. All rights reserved