Для просмотра этого контента требуется подписка на Jove Войдите в систему или начните бесплатную пробную версию.
Айтрекинг — это неинвазивный метод зондирования обработки информации. В этой статье описывается, как отслеживание движения глаз может быть использовано для изучения поведения взгляда во время выполнения аварийной задачи по моделированию полета у пилотов с малым рабочим временем (т.е. <350 летных часов).
Отслеживание движения глаз широко используется в качестве прокси для получения представления о когнитивных, перцептивных и сенсомоторных процессах, лежащих в основе выполнения навыков. Предыдущая работа показала, что традиционные и продвинутые метрики взгляда надежно демонстрируют устойчивые различия в опыте пилота, когнитивной нагрузке, усталости и даже осведомленности о ситуации (SA).
В этом исследовании описывается методология использования носимого айтрекера и алгоритма картирования взгляда, который фиксирует естественные движения головы и глаз (т.е. взгляда) в высокоточном симуляторе полета без движения. Метод, описанный в этой статье, описывает анализ взгляда на основе области интереса (AOI), который предоставляет больше контекста, связанного с тем, куда смотрят участники, и продолжительность времени, которая показывает, насколько эффективно они обрабатывают зафиксированную информацию. Протокол иллюстрирует полезность носимого айтрекера и алгоритма компьютерного зрения для оценки изменений в поведении взгляда в ответ на неожиданную чрезвычайную ситуацию в полете.
Репрезентативные результаты показали, что взгляд значительно пострадал при возникновении экстренного события. В частности, распределение внимания, дисперсия взгляда и сложность последовательности взглядов значительно снизились и стали в значительной степени сконцентрированными на взгляде за переднее окно и на указатель воздушной скорости во время сценария чрезвычайной ситуации (все значения p < 0,05). Обсуждаются полезность и ограничения использования носимого айтрекера в высокоточной среде неподвижного моделирования полета для понимания пространственно-временных характеристик поведения взгляда и его связи с обработкой информации в авиационной сфере.
Люди преимущественно взаимодействуют с окружающим миром, сначала двигая глазами и головой, чтобы сфокусировать свою линию взгляда (т.е. взгляд) на определенном объекте или месте, представляющем интерес. Это особенно верно в сложных условиях, таких как кабины самолетов, где пилоты сталкиваются с несколькими конкурирующими стимулами. Движения взгляда позволяют собирать визуальную информацию с высоким разрешением, которая позволяет людям взаимодействовать с окружающей средой безопасным игибким образом, что имеет первостепенное значение в авиации. Исследования показали, что движения глаз и поведение взгляда позволяют получить представление о перцептивных, когнитивных и моторных процессах, лежащих в основе различных задач 1,2,3. Более того, то, куда мы смотрим, оказывает непосредственное влияние на планирование и выполнение движений верхних конечностей3. Таким образом, анализ поведения взгляда во время выполнения авиационных задач является объективным и неинвазивным методом, который может выявить, как паттерны движения глаз связаны с различными аспектами обработки информации и производительности.
Несколько исследований продемонстрировали связь между взглядом и выполнением задач в различных лабораторных парадигмах, а также в сложных реальных задачах (например, управление самолетом). Например, области, относящиеся к задаче, имеют тенденцию фиксироваться чаще и в течение более длительной общей продолжительности, что позволяет предположить, что место фиксации, частота и время пребывания являются прокси для распределения внимания в нейрокогнитивных и авиационных задачах 4,5,6. Высокоуспешные исполнители и эксперты демонстрируют значительные смещения фиксации в сторону критически важных областей по сравнению с менее успешными исполнителями или новичками 4,7,8. Пространственно-временные аспекты взгляда фиксируются через изменения в моделях времени пребывания в различных областях интереса (AOI) или мерах распределения фиксации (т.е. энтропия стационарного взгляда: SGE). В контексте лабораторных парадигм средняя продолжительность фиксации, длина траектории сканирования и сложность последовательности взгляда (т.е. энтропия перехода взгляда: GTE) имеют тенденцию к увеличению из-за увеличения сканирования и обработки, необходимых для решения проблем и разработки более сложных задач.
И наоборот, авиационные исследования показали, что длина траектории сканирования и сложность последовательности взгляда уменьшаются с усложнением задачи и когнитивной нагрузкой. Это расхождение подчеркивает тот факт, что понимание компонентов задачи и требований используемой парадигмы имеет решающее значение для точной интерпретации метрик взгляда. В целом, проведенные на сегодняшний день исследования подтверждают, что измерения взгляда обеспечивают значимое, объективное понимание обработки информации, специфичной для конкретной задачи, которая лежит в основе различий в сложности задач, когнитивной нагрузке и выполнении задач. С развитием технологий отслеживания взгляда (т.е. портативностью, калибровкой и стоимостью), изучение поведения взгляда в «дикой природе» является новой областью исследований с ощутимым применением для продвижения профессиональной подготовки в области медицины 9,10,11 и авиации 12,13,14.
Текущая работа направлена на дальнейшее изучение полезности использования метрик, основанных на взгляде, для получения представления об обработке информации путем использования носимого айтрекера во время задачи по моделированию аварийного полета у пилотов с малым рабочим временем. Это исследование является продолжением предыдущей работы, в которой использовался стабилизированный по голове айтрекер (т.е. EyeLink II) для изучения различий в показателях поведения взгляда в зависимости от сложности полета (т.е. изменений погодных условий)5. Работа, представленная в данной рукописи, также является продолжением другой работы, в которой описываются методологические и аналитические подходы к использованию отслеживания движения глаз в системе виртуальной реальности15. В нашем исследовании использовался неподвижный симулятор с более высокой точностью, и в нашем исследовании был проведен дополнительный анализ данных о движении глаз (т.е. энтропии). Об этом типе анализа сообщалось в предыдущих работах; Тем не менее, ограничением в текущей литературе является отсутствие стандартизации в отчетности по аналитическим шагам. Например, отчетность о том, как определяются области интереса, имеет решающее значение, поскольку она напрямую влияет на результирующие значения энтропии16.
Подводя итог, можно сказать, что в данной работе рассматривались традиционные и динамические метрики поведения взгляда, в то время как сложность задачи манипулировалась путем введения сценария чрезвычайной ситуации в полете (т.е. неожиданного полного отказа двигателя). Ожидалось, что введение сценария чрезвычайной ситуации в полете позволит получить представление об изменениях в поведении взгляда, лежащих в основе обработки информации в более сложных условиях задачи. Исследование, представленное здесь, является частью более крупного исследования, изучающего полезность отслеживания взгляда в авиасимуляторе для обучения пилотов на основе компетенций. Представленные здесь результаты ранее не публиковались.
Следующий протокол может быть применен к исследованиям с использованием носимого айтрекера и авиасимулятора. Настоящее исследование включает в себя данные отслеживания движения глаз, записанные вместе со сложными задачами, связанными с авиацией, в авиасимуляторе (см. Таблицу материалов). Тренажер был сконфигурирован так, чтобы быть типичным для Cessna 172, и использовался с необходимой приборной панелью (конфигурация пародатчика), системой авионики/GPS, панелью аудио/освещения, панелью выключателя и блоком управления полетом (FCU) (см. Рисунок 1). Устройство-симулятор полета, использованное в этом исследовании, сертифицировано для учебных целей и используется местной летной школой для отработки навыков, необходимых для реагирования на различные чрезвычайные ситуации, такие как отказ двигателя, в условиях низкого риска. Все участники этого исследования имели лицензию; Таким образом, они испытали сценарий симулятора отказа двигателя ранее в ходе обучения. Это исследование было одобрено Управлением исследовательской этики Университета Ватерлоо (43564; Дата: 17 ноября 2021 г.). Все участники (N = 24; 14 мужчин, 10 женщин; средний возраст = 22 года; диапазон летных часов: 51-280 часов) дали письменное информированное согласие.
Рисунок 1: Среда авиасимулятора. Иллюстрация среды авиасимулятора. Точка зрения участника на кабину пилота повторяла точку зрения пилота, управляющего самолетом Cessna 172, предварительно настроенным на заход на посадку по ветру до базы и до конечного захода на посадку в международный аэропорт Ватерлоо, Бреслау, Онтарио, Калифорния. Оранжевые прямоугольники представляют десять основных областей интереса, используемых в анализе взгляда. К ним относятся (1) воздушная скорость, (2) ориентация, (3) высотомер, (4) координатор поворота, (5) курс, (6) вертикальная скорость и (7) индикаторы мощности, а также (8) переднее, (9) левое и (10) правое окна. Эта цифра была изменена по Ayala et al.5. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
1. Отбор участников и информированное согласие
2. Требования к аппаратному/программному обеспечению и ввод в эксплуатацию
3. Сбор данных
ПРИМЕЧАНИЕ: Повторяйте эти шаги для каждой пробной версии. Рекомендуется разместить ноутбук на скамейке за пределами кокпита.
4. Обработка и анализ данных
Срок | Определение |
Успех (%) | Процент успешных посадочных испытаний |
Время выполнения(ов) | Продолжительность времени от начала сценария посадки до полной остановки самолета на взлетно-посадочной полосе |
Твердость при посадке (fpm) | Приличный показатель в точке приземления |
Ошибка при посадке (°) | Разница между центром самолета и центром маркера взлетно-посадочной полосы длиной 500 футов в точке приземления |
Таблица 1: Переменные результатов работы симулятора. Переменные, зависящие от летно-технических характеристик самолета, и их определения.
Рисунок 2: Траектория полета по сценарию посадки. Схема (А) контура посадки, пройденного во всех испытаниях, и (В) взлетно-посадочной полосы с отметками 500 футов, которые использовались в качестве ориентира для зоны посадки (т.е. центральный оранжевый круг). Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Рисунок 3: Картографирование области интереса. Иллюстрация пакетного скрипта, демонстрирующая окно для выбора кадра. Выбор оптимального кадра включает в себя выбор видеокадра, который включает в себя большинство или все области интереса для картографирования. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Рисунок 4: Генерация картографирования области интереса «на экране» координат. Иллюстрация пакетного скрипта, демонстрирующая окно для выбора координат «на экране». Этот шаг включает в себя выбор квадратной/прямоугольной области, которая остается видимой на протяжении всей записи, уникальна для изображения и остается статичной. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Рисунок 5: Определение области интереса для картографирования. Иллюстрация окна пакетного скрипта, в котором можно выбрать и пометить области интереса. Аббревиатура: AOI = области интересов. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Рисунок 6: Пакетная обработка скриптов. Иллюстрация пакетного сценария, обработка видео и карта взгляда, фиксации, сделанные на протяжении всего судебного разбирательства. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Срок | Определение |
Время выдержки (%) | Процент от суммы всех длительностей фиксации, накопленных по одному АОИ, по отношению к сумме длительностей фиксации, накопленных по всем АОИ |
Средняя продолжительность фиксации (мс) | Средняя продолжительность фиксации над одной АОИ от входа до выхода |
Частота моргания (моргание/с) | Количество миганий в секунду |
SGE (биты) | Дисперсия фиксации |
ГТД (биты) | Сложность последовательности сканирования |
Количество боев | Количество событий когнитивного туннелирования (>10 с) |
Общее время боя (с) | Общее время событий когнитивного туннелирования |
Таблица 2: Переменные результата отслеживания взгляда. Посмотрите на переменные, зависящие от поведения, и их определения.
Влияние требований к задачам на летно-технические характеристики
Данные были проанализированы на основе успешных посадочных испытаний в базовых и аварийных условиях. Все меры были подвергнуты t-критерию парных выборок (внутрисубъектный фактор: услов...
Описанный здесь метод отслеживания движения глаз позволяет оценивать обработку информации в среде симулятора полета с помощью носимого трекера для глаз. Оценка пространственных и временных характеристик поведения взгляда дает представление об обработке информаци...
Никаких конкурирующих финансовых интересов не существует.
Эта работа частично поддерживается Канадской стипендией для выпускников (CGS) от Совета по естественным наукам и инженерным исследованиям (NSERC) Канады и грантом на исследования (00753) от Фонда «Новые рубежи в исследованиях». Любые мнения, выводы, выводы или рекомендации, выраженные в этом материале, принадлежат автору (авторам) и не обязательно отражают точку зрения спонсоров.
Name | Company | Catalog Number | Comments |
flight simulator | ALSIM | AL-250 | fixed fully immersive flight simulation training device |
laptop | Hp | Lenovo | eye tracking data collection laptop; requirements: Windows 10 and python 3.0 |
portable eye-tracker | AdHawk | MindLink eye tracking glasses (250 Hz, <2° gaze error, front-facing camera); eye tracking batch script is made available with AdHawk device purchase |
Запросить разрешение на использование текста или рисунков этого JoVE статьи
Запросить разрешениеThis article has been published
Video Coming Soon
Авторские права © 2025 MyJoVE Corporation. Все права защищены