Захват репрезентативного использования рук в домашних условиях с использованием эгоцентрического видео у людей с нарушениями верхних конечностей

Резюме

Предложен протокол для захвата естественной функции рук людей с нарушениями рук во время их повседневной жизни с помощью эгоцентрической камеры. Цель протокола состоит в том, чтобы гарантировать, что записи являются репрезентативными для типичного использования рук человека во время повседневной жизни дома.

Аннотация

Нарушение функции рук после неврологических травм может оказать серьезное влияние на независимость и качество жизни. Большинство существующих оценок верхних конечностей проводятся лично, что не всегда свидетельствует об использовании рук в сообществе. Для измерения истинного воздействия реабилитационных вмешательств требуются новые подходы к захвату функции рук в повседневной жизни. Эгоцентрическое видео в сочетании с компьютерным зрением для автоматизированного анализа было предложено для оценки использования рук в домашних условиях. Однако существуют ограничения на продолжительность непрерывных записей. Мы представляем протокол, предназначенный для обеспечения того, чтобы полученные видео представляли повседневную жизнь, уважая при этом конфиденциальность участников.

Репрезентативный график записи выбирается в рамках совместного процесса между исследователями и участниками, чтобы гарантировать, что видео отражают естественные задачи и производительность, будучи полезными для оценки рук. Участникам демонстрируется использование оборудования и процедур. В общей сложности 3-час видеозаписей запланированы на две недели. Чтобы уменьшить проблемы с конфиденциальностью, участники имеют полный контроль над началом и остановкой записей, а также возможность редактировать видео, прежде чем возвращать их исследовательской группе. Предоставляются напоминания, а также звонки помощи и визиты на дом, если это необходимо.

Протокол был протестирован с 9 выжившими после инсульта и 14 людьми с травмой шейного отдела спинного мозга. Полученные видео содержали различные виды деятельности, такие как приготовление пищи, мытье посуды и вязание. В среднем было получено 3,11 ± 0,98 ч видео. Периоды регистрации варьировались от 12 до 69 d, из-за болезни или неожиданных событий в некоторых случаях. Данные были успешно получены от двадцати двух из 23 участников, причем 6 участникам потребовалась помощь исследователей в течение периода домашней записи. Протокол был эффективен для сбора видео, которые содержали ценную информацию о функции рук в домашних условиях после неврологических травм.

Введение

Функция руки является определяющим фактором независимости и качества жизни в клинических популяциях с нарушениями верхних конечностей^1,2. Захват функции руки людей с нарушениями рук в домашних условиях имеет жизненно важное значение для оценки прогресса их способности выполнять повседневную деятельность (ADL) во время и после реабилитации. Большинство клинических оценок функции руки проводятся в клинической или лабораторной среде, а не дома^3,4. Существующие клинические оценки функции рук, которые стремятся охватить влияние на ADL в домашних условиях, являются опросниками и полагаются на субъективные самооценки^{оценок 5,6,7.} Объективная оценка для оценки конечного воздействия реабилитации на функцию рук в домашних условиях по-прежнему недоступна.

В последние годы было разработано и внедрено множество носимых технологий для захвата функции верхних конечностей в реальных условиях. Носимые датчики, такие как акселерометры и инерциальные единицы измерения (I IMUs), обычно используются для измерения движений верхних конечностей в повседневной жизни. Однако эти устройства обычно не различают, относятся ли обнаруженные эпохи к функциональным движениям верхних конечностей^8,9,определяемым как целенаправленные движения, предназначенные для выполнения желаемой задачи. Например, некоторые носимые датчики чувствительны к наличию колебаний верхней конечности во время ходьбы, что не является функциональным движением верхней конечности. Кроме того, хотя акселерометры, носимые на запястье, фиксируют движения верхних конечностей, они не могут захватывать детали функции рук в реальных условиях. Сенсорные перчатки позволяют захватывать более подробную информацию о манипуляциях с руками^10,но они могут быть громоздкими для людей, чья функция и ощущения рук уже нарушены. Носимые подходы также были предложены для захвата движений пальцев с помощью магнитометрии или носимых пальцами акселерометров^{11, 12,13,}но функциональная интерпретация этих движений остается сложной^14. Таким образом, хотя ранее предложенные носимые устройства малы и удобны в использовании, их недостаточно для описания деталей и функционального контекста ручного использования.

Носимые камеры были предложены для заполнения этих пробелов и захвата деталей функции рук во время ADL в домашних условиях для нейрореабилитационных приложений^{15,16,17,18,19.} Автоматизированный анализ эгоцентрических видео с использованием компьютерного зрения имеет значительный потенциал для количественной оценки функции рук в контексте, предоставляя информацию как о самих руках, так и о задачах, выполняемых в реальных ADL^20. С другой стороны, продолжительность непрерывных записей обычно ограничивается примерно от 1 до 1,5 ч из соображений батареи, хранения и комфорта. Здесь, в рамках этих ограничений, мы представляем эгоцентрический протокол сбора видео, предназначенный для получения данных, которые являются как репрезентативными для повседневной жизни человека, так и информативными для оценки функции руки.

протокол

Исследование было одобрено Советом по этике исследований Сети университетского здравоохранения. Подписанное информированное согласие было получено от каждого участника до регистрации в исследовании. Подписанное информированное согласие было также получено от любых лиц, осуществляющих уход, или членов семьи, появляющихся на видеозаписях.

1. Проверка применимости протокола к физическому лицу

ПРИМЕЧАНИЕ: Этот протокол предназначен для применения к лицам с нарушенной, но не полностью отсутствующей функцией руки (конкретные критерии могут быть адаптированы к населению и/или вопросу, представляющим интерес).

1. Спросите участников, влияют ли их пораженные руки на их способность выполнять ADL.
   ПРИМЕЧАНИЕ: Рекомендуется попросить участников привести некоторые примеры заданий, которые они могут и не могут выполнять самостоятельно своими пораженными руками.
2. Убедитесь, что общий балл монреальской когнитивной оценки (MoCA) выше 21, чтобы избежать потенциальных трудностей с пониманием и следованием протокольным процедурам.

2. Определение распорядка дня участников

1. Попросите участников вспомнить свои распорядки дня за последние две недели. Документируйте, какие ежедневные задачи выполняются, как долго и примерно в какое время.
2. В сотрудничестве с участниками выберите 3 таймслота по 1,5 ч каждый, в течение которых нужно записывать видео. Выберите временные интервалы, которые распределены по разным дням недели и имеют место, когда ADL с участием рук обычно выполняются последовательно.
   ПРИМЕЧАНИЕ: Выбранные ADL должны быть репрезентативными для типичных видов деятельности каждого участника и восприниматься ими как значимые. Планирование периодов записи в разные дни предназначено для увеличения разнообразия регистрируемых ADL и содействия сбору полезных и значимых данных.
   ПРИМЕЧАНИЕ: Временные интервалы записи запланированы для эффективности записи, но участники должны понимать, что они имеют полный контроль над тем, когда начинать и останавливать записи.

3. Соглашение с участниками о графиках записи и целевом видеоконтенте

1. Получить согласие каждого участника на графики записи, после обсуждения любых проблем, которые у них могут возникнуть.
2. Поставить перед собой цель – 3 ч видео в течение двух недель. Сообщите участникам, что недостаточное количество видео может привести к продлению периода записи.

4. Акцент на важности выполнения ADL естественным путем

1. Попросите участников сосредоточиться на захвате реалистичных процедур, а не указывать конкретные действия для записи. Цель инструкции состоит в том, чтобы отговорить участников от искусственной записи конкретных действий в больших количествах, чем это характерно для них.

5. Уведомление о потенциальных проблемах конфиденциальности во время записей дома

1. Убедитесь, что участники понимают, что все записи должны происходить внутри их домов, а не в общественных местах, чтобы избежать проблем с конфиденциальностью.
2. Приведите несколько примеров, которые могут вызвать проблемы с конфиденциальностью, такие как купание, одевание / раздевание и проверка конфиденциальной информации. Напомните участникам, чтобы они знали о зеркалах, которые могут показывать их лица на записях.
3. Предложите участникам избегать присутствия других людей, таких как члены семьи или опекуны, насколько это возможно в видео.
   ПРИМЕЧАНИЕ: В контексте научных исследований, в тех случаях, когда присутствие других людей неизбежно, информированное согласие должно быть получено от этих лиц.

6. Инструкция по эксплуатации камеры и планшета

ПРИМЕЧАНИЕ: Если участники указывают во время первоначального контакта, что им требуется помощь лица, осуществляющего уход, для многих из их повседневных потребностей, лицу, осуществляющему уход, рекомендуется также посетить учебную поездку и пройти обучение по использованию оборудования, чтобы они могли позже помочь участнику.

1. Покажите участникам, как использовать эгоцентрическую камеру(Таблица материалов).
   1. Покажите, как включать и выключать фотокамеру.
   2. Покажите, как управлять записью (запуск, пауза, остановка) с помощью камеры.
2. Демонстрация использования планшета(Таблица материалов)с предустановленным приложением камеры для управления записями, если это применимо.
   ПРИМЕЧАНИЕ: Демонстрация включает в себя управление записями из приложения камеры, а также воспроизведение и редактирование (например, обрезку или удаление) записанных видео. Пульт дистанционного управления камерой первоначально рассматривался(Дополнительные файлы),но на практике не использовался, потому что участникам было удобно использовать камеру или планшет для запуска и остановки записей.
   1. Покажите, как включать и выключать планшет.
   2. Покажите, как подключить планшет к камере с помощью приложения камеры.
   3. Покажите, как управлять записями из приложения камеры.
   4. Покажите, как просматривать записанные видео из приложения камеры.
   5. Покажите, как обрезать или удалить видео из приложения камеры.
3. Покажите, как надеть и надеть камеру с помощью эластичного оголовья, регулируемого к голове участника.
   ПРИМЕЧАНИЕ: См. рисунок 1.
   
   Рисунок 1. Настройка носимой камеры.  (A) Позиционирование эгоцентрической камеры. (B) Угол обзора с камеры. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этого рисунка.
   1. Поместите камеру на лоб участника. Отрегулируйте оголовье, чтобы носить камеру удобно и стабильно.
   2. Обеспечьте оптимальный угол обзора камеры по отношению ко лбу.
   3. Попросите участников записать короткий сегмент видео, двигая руками перед собой и манипулируя объектом (например, планшетом).
   4. Просмотрите записанное видео и убедитесь, что две руки были хорошо видны в центральной области сцены при выполнении манипуляций.
   5. Практикуйте использование камеры и планшета с участниками и их опекунами, пока они не продемонстрируют мастерство.

7. Предоставление оборудования

1. Дайте комплект со всем оборудованием участникам, чтобы записать свои ADL дома. В дополнение к камере и планшету, в комплект входят дополнительные батареи камеры, зарядные устройства для камеры и планшета, зарядные кабели, оголовье для камеры и печатный набор рекомендаций по использованию камеры (см. Дополнительный материал).

8. Экспериментальное устранение неполадок и последующее наблюдение

1. Предоставьте контактную информацию исследователей, чтобы помочь решить препятствия во время фактических записей дома. Через неделю исследователи звонят участникам, чтобы задокументировать прогресс записи и решить любые потенциальные технические проблемы.

9. Поиск оборудования и видео

1. Отбирайте все оборудование и видео от участников лично или через предоплаченные почтовые посылки.
2. Убедитесь, что участники согласны поделиться всеми возвращенными видео. Участникам рекомендуется просмотреть все собранные видео, прежде чем возвращать их исследовательской группе, и удалить любые части, которыми они не хотят делиться.
3. Для исследовательских исследований просмотрите возвращенные видео и проверьте, появляется ли кто-либо в видео без их согласия. Если это так, отправьте формы согласия или позвоните лицам, которые появляются в видео, чтобы получить их согласие на использование видео. Если люди недоступны, части видео, в которых они появляются, удаляются исследователями.

Результаты

Демография участников и критерии включения
Для этих исследований была набрана выборка из 23 участников: 9 выживших после инсульта (6 мужчин, 3 женщины) и 14 человек с CSCI (12 мужчин, 2 женщины). Сводная демографическая и клиническая информация по набран?...

Обсуждение

Мы представили протокол для записи видео ADL в домашних условиях с использованием носимых камер у людей с нарушениями верхних конечностей, такими как cSCI и инсульт. Протокол является гибким и может быть целенаправленным для захвата выполнения функции руки в конкретных ADL или для удаленно...

Материалы

Name	Company	Catalog Number	Comments
Egocentric camera	GoPro Inc., CA, USA	GoPro Hero 4 and 5	A camera that records from a first-person angle.
Battery chager and batteries	GoPro Inc., CA, USA	MAX Dual Battery Charger + Battery	Extra batteries for the camera and battery charger
Camera charger	GoPro Inc., CA, USA	Supercharger	This charger is connected to the camera directly without disassembling the camera frame.
Camera frame	GoPro Inc., CA, USA	The Frame	The hinge of the camera frame can be used to adjust the angle of view of the camera.
Headband for the camera	GoPro Inc., CA, USA	Head Strap + QuickClip
SD card	SanDisk, CA, USA	32GB microSD
Tablet	ASUSTeK Computer Inc., Taiwan	ZenPad 8.0 Z380M	The tablet is installed with the GoPro App in order to connect with the camera.