Method Article
Алгоритмы машинного обучения были обучены использовать паттерны мозговой активности для «расшифровки» стимулов, представляемых людям. В этой статье мы демонстрируем, что тот же метод может декодировать натуралистический видеоконтент из мозга двух домашних собак. Мы обнаружили, что декодеры, основанные на действиях в видеороликах, были успешными у собак.
Недавние достижения в области машинного обучения и функциональной магнитно-резонансной томографии (фМРТ) для расшифровки визуальных стимулов из человеческой и нечеловеческой коры головного мозга привели к новому пониманию природы восприятия. Тем не менее, этот подход еще не был применен к животным, отличным от приматов, что поднимает вопросы о природе таких представлений в животном мире. Здесь мы использовали фМРТ в сознании двух домашних собак и двух людей, полученную во время просмотра специально созданных натуралистических видео для собак. Затем мы обучили нейронную сеть (Ivis) классифицировать видеоконтент на основе 90 минут записанной активности мозга с каждой из них. Мы протестировали как объектно-ориентированный классификатор, пытаясь различить такие категории, как собака, человек и автомобиль, так и классификатор, основанный на действиях, пытаясь различить такие категории, как еда, обнюхание и разговор. По сравнению с двумя людьми, для которых оба типа классификаторов показали себя намного лучше, чем случайно, только классификаторы, основанные на действиях, были успешны в расшифровке видеоконтента от собак. Эти результаты демонстрируют первое известное применение машинного обучения для декодирования натуралистических видео из мозга плотоядного животного и предполагают, что взгляд на мир с точки зрения собаки может сильно отличаться от нашего.
Мозг человека, как и у других приматов, демонстрирует парцелляцию зрительного потока на дорсальные и вентральные пути с четкими и хорошо известными функциями — «что» и «где» объектов. Эта дихотомия «что/где» была полезной эвристикой на протяжении десятилетий, но теперь известно, что ее анатомическая основа гораздо более сложна, и многие исследователи предпочитают парцелляцию, основанную на распознавании, а не на действии («что» против «как»)2,3,4,5. Кроме того, в то время как наше понимание организации зрительной системы приматов продолжает уточняться и обсуждаться, многое остается неизвестным о том, как мозг других видов млекопитающих представляет визуальную информацию. Отчасти этот пробел является результатом исторического внимания к горстке видов в визуальной нейробиологии. Новые подходы к визуализации мозга, однако, открывают возможность неинвазивного изучения зрительных систем более широкого круга животных, что может дать новое понимание организации нервной системы млекопитающих.
Собаки (Canis lupus familiaris) предоставляют прекрасную возможность для изучения репрезентации визуальных стимулов у видов, эволюционно далеких от приматов, поскольку они могут быть единственными животными, которых можно обучить совместному участию в МРТ-сканировании без необходимости введения седативных препаратов или ограничений 6,7,8. Благодаря своей совместной эволюции с человеком за последние 15 000 лет, собаки также населяют нашу окружающую среду и подвергаются воздействию многих стимулов, с которыми люди сталкиваются ежедневно, включая видеоэкраны, которые являются предпочтительным способом представления стимулов в МРТ-сканере. Тем не менее, собаки могут обрабатывать эти обычные стимулы окружающей среды способами, совершенно отличными от человеческих, что вызывает вопрос о том, как организована их зрительная кора. Основные различия, такие как отсутствие ямки или наличие дихромата, могут иметь значительные последствия не только для зрительного восприятия более низкого уровня, но и для визуальной репрезентации более высокого уровня. Несколько исследований фМРТ на собаках продемонстрировали существование областей обработки как лица, так и объекта, которые, по-видимому, следуют общей архитектуре дорсального/вентрального потока, наблюдаемой у приматов, хотя остается неясным, есть ли у собак области обработки лица как таковые, или эти области являются селективными по морфологии головы (например, собака против человека)9. 10,11,12,13. Как бы то ни было, мозг собаки, будучи меньше, чем у большинства приматов, должен быть менее модульным, поэтому в потоках может наблюдаться большее смешивание типов информации или даже привилегированное использование определенных типов информации, таких как действия. Например, было высказано предположение, что движение может быть более заметной чертой в зрительном восприятии собак, чем текстура или цвет. Кроме того, поскольку у собак нет рук, одного из основных средств, с помощью которых мы взаимодействуем с миром, их визуальная обработка, особенно объектов, может сильно отличаться от таковой у приматов. В соответствии с этим, мы недавно обнаружили доказательства того, что взаимодействие с объектами ртом, а не лапой, приводит к большей активации в объектно-селективныхобластях мозга собаки.
Хотя собаки могут привыкнуть к видеоэкранам в своей домашней обстановке, это не означает, что они привыкли смотреть на изображения в экспериментальных условиях так же, как это сделал бы человек. Использование более натуралистичных стимулов может помочь решить некоторые из этих вопросов. В последнее десятилетие алгоритмы машинного обучения достигли значительных успехов в расшифровке натуралистических визуальных стимулов из активности мозга человека. Ранние успехи были сосредоточены на адаптации классических, блокированных конструкций для использования активности мозга как для классификации типов стимулов, которые видит человек, так и для классификации мозговых сетей, которые кодируют этипредставления. По мере разработки более мощных алгоритмов, особенно нейронных сетей, можно было расшифровывать более сложные стимулы, в том числе натуралистические видео20,21. Эти классификаторы, которые обычно обучаются на нейронных реакциях на эти видео, обобщаются до новых стимулов, что позволяет им идентифицировать, что конкретный субъект наблюдал во время ответа на фМРТ. Например, некоторые виды действий в кино могут быть точно расшифрованы из человеческого мозга, такие как прыжки и повороты, в то время как другие (например, перетаскивание) не могутбыть расшифрованы. Аналогичным образом, хотя многие типы объектов могут быть расшифрованы по ответам фМРТ, общие категории представляются более сложными. Декодирование мозга не ограничивается людьми, предоставляя мощный инструмент для понимания того, как информация организована в мозге других видов. Аналогичные эксперименты с фМРТ с нечеловекообразными приматами обнаружили различные представления в височной доле для измерений одушевленности и лица/телесности, что соответствует таковому у человека23.
В качестве первого шага к пониманию представлений собак о натуралистических визуальных стимулах, фМРТ в сознании была использована у двух домашних собак, обладающих высоким уровнем МРТ, для измерения реакций коры головного мозга на видео, подходящие для собак. В этом исследовании использовались натуралистические видеоролики из-за их потенциально большей экологической значимости для собаки и из-за их продемонстрированного успеха с нейронными сетями, которые сопоставляют видеоконтент с движениями собаки. В течение трех отдельных сеансов было получено 90 минут данных фМРТ из ответов каждой собаки на 256 уникальных видеоклипов. Для сравнения, такая же процедура была проведена на двух добровольцах. Затем, используя нейронную сеть, мы обучили и протестировали классификаторы, чтобы различать либо «объекты» (например, человек, собака, автомобиль), либо «действия» (например, разговор, еда, обнюхивание) с использованием различного количества классов. Цели этого исследования были двояки: 1) определить, можно ли декодировать натуралистические видеостимулы из коры головного мозга собаки; и 2) если да, то сначала расскажите о том, была ли организация похожа на человеческую.
Исследование собак было одобрено IACUC Университета Эмори (PROTO201700572), и все владельцы дали письменное согласие на участие своей собаки в исследовании. Процедуры исследования на людях были одобрены IRB Университета Эмори, и все участники предоставили письменное согласие перед сканированием (IRB00069592).
1. Участники
2. Стимулы
3. Экспериментальный дизайн
4. Визуализация
5. Метки стимулов
6. Предварительная обработка фМРТ
7. Анализы
К наиболее распространенным метрикам для оценки производительности модели в анализе машинного обучения относятся точность, полнота и оценка F1. Точность — это общий процент правильных прогнозов модели с учетом истинных данных. Точность — это процент положительных прогнозов модели, которые на самом деле являются положительными (т. е. истинно положительный процент), в то время как полнота — это процент истинно положительных результатов в исходных данных, которые модель может успешно предсказать. Оценка F1 — это средневзвешенное значение точности и полноты, которое действует как альтернативная мера точности, более устойчивая к классовому дисбалансу. Тем не менее, Ivis отличается от других широко используемых алгоритмов машинного обучения тем, что его выходные данные не являются двоичными. При наличии определенного ввода вокселей мозга каждый выходной элемент представляет вероятности, соответствующие каждому из классов. Вычисление точности, прецизионности, полноты и F1 для этих выходов требовало бинаризации их по принципу «победитель получает все», где класс с наибольшей вероятностью считался предсказанным для этого объема. Такой подход исключил важную информацию о ранжировании этих вероятностей, которая имела отношение к оценке качества модели. Таким образом, хотя мы по-прежнему вычисляли эти традиционные метрики, мы использовали оценку средней точности ранжирования меток (LRAP) в качестве основной метрики для вычисления точности модели на тестовом наборе. Эта метрика по существу измеряет, в какой степени классификатор присвоил более высокие вероятности истинным меткам37.
В разной степени нейросетевой классификатор оказался успешным как для человека, так и для собак. Для людей алгоритм смог классифицировать как объекты, так и действия, при этом трехклассовые модели для обоих достигли средней точности 70%. Оценка LRAP использовалась в качестве основного показателя для вычисления точности модели на тестовом наборе; Этот показатель измеряет степень, в которой классификатор присвоил более высокие вероятности истинным меткам37. Для обоих людей медианные баллы LRAP были выше 99-го процентиля случайно переставленного набора меток для всех протестированных моделей (Таблица 1; Рисунок 2). Для собак только модель действия имела медианный процентильный ранг LRAP, значительно превышающий случайность у обоих участников (Таблица 1; p = 0,13 для объектов и p < 0,001 для действий; средний показатель LRAP по модели действия трех классов для собак = 78-й процентиль). Эти результаты были справедливы для всех испытуемых в отдельности, а также при группировке по видам.
Учитывая успешность классификатора, мы обучили и протестировали с помощью дополнительных классов, чтобы определить пределы модели. Это включало в себя вычисление матриц несходства для всех 52 потенциальных классов, представляющих интерес, с использованием алгоритма иерархической кластеризации пакета Python scipy, который кластеризовал классы на основе сходства реакции мозга индивидуума на каждый из них, определяемой парной корреляцией. Из дополнительных протестированных моделей модель с самым высоким медианным процентилем LRAP у обеих собак имела пять классов: исходные «говорящие», «еда» и «обнюхивающие», а также два новых класса: «ласкающая» и «играющая» (рис. 2). Эта модель имела медианный ранг процентиля LRAP значительно выше, чем тот, который был предсказан случайно для всех участников (Таблица 1; p < 0,001 как для собак, так и для человека; среднее значение модели действия пяти классов LRAP для собак = 81-й процентиль).
При обратном отображении на соответствующие атласы мозга оценки важности функций вокселей выявили ряд кластеров информативных вокселей в затылочной, теменной и височной коре как собак, так и людей (рис. 3). У людей объектно-ориентированные и основанные на действии модели выявили более фокальную закономерность, чем у собак и в областях, обычно связанных с распознаванием объектов, хотя и с небольшими различиями в пространственном расположении объектно-ориентированных вокселей и вокселей, основанных на действиях.
Мы проверили, что эти видовые различия не являются результатом коррелированных с задачами движений собак, которые больше реагируют на одни типы видео, чем на другие (например, на видео, отличные от собачьих, скажем, на автомобилях). Мы рассчитали евклидову норму шести параметров движения и подогнали линейную модель смешанных эффектов с использованием пакета R lme4, где класс является фиксированным эффектом и число прогона как случайный эффект для каждой собаки. Для каждой из итоговых моделей мы не обнаружили значимого влияния типа класса на движение ни для Daisy (F(2, 2252) = 0,83, p = 0,44 для объектно-ориентированных и F(4, 1235) = 1,87, p = 0,11 для основанных на действии), ни для Bhubo (F(2, 2231) = 1,71, p = 0,18 для объектных и F(4, 1221) = 0,94, p = 0,45 для основанных на действии).
Рисунок 1: Натуралистические видео и презентация в МРТ. (A) Примеры кадров из видеоклипов, показанных участникам. (Б) Бхубо, 4-летний боксер-микс, смотрит видео во время прохождения фМРТ в сознании. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Рисунок 2: Производительность модели у собак и людей. Распределение баллов LRAP, представленное в виде процентильных ранжировок их нулевых распределений, более 100 итераций обучения и тестирования алгоритма машинного обучения Ivis для трехклассовой объектно-ориентированной модели, трехклассовой модели, основанной на действии, и пятиклассовой модели, где модели пытались классифицировать СМЕЛЫЕ ответы на натуралистические видеостимулы, полученные с помощью МРТ в сознании у собак и людей. Баллы агрегируются по видам. Оценка LRAP с очень высоким процентильным рейтингом указывает на то, что модель вряд ли случайно достигнет этого балла LRAP. Модель, работающая не лучше, чем случайность, будет иметь медианный процентиль баллов LRAP, равный ~50. Пунктирными линиями обозначен средний процентиль баллов LRAP для каждого вида на всех 100 прогонах. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Рисунок 3: Области, важные для различения трехклассовых объектных и пятиклассовых моделей действий. (А) Человек и (Б) собака. Воксели были ранжированы в соответствии с их важностью признаков с помощью случайного классификатора леса, усредненного по всем итерациям моделей. Здесь представлены первые 5% вокселей (т.е. те, которые используются для обучения моделей), агрегированные по видам и преобразованные в групповое пространство для целей визуализации (атласы: люди34 и собаки35). Метки показывают области мозга собак с высокими показателями важности признаков, основанными на показателях, выявленных Johnson et al.35. Сокращение: SSM = надсильвийская извилина. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.
Тип модели | Точность обучения | Точность испытаний | Счет Формулы-1 | Точность | Вспоминать | Медиана процентиля оценки LRAP | |
Человек 1 | Объект (3 класс) | 0.98 | 0.69 | 0.48 | 0.52 | 0.49 | >99 |
Экшн (3 класс) | 0.98 | 0.72 | 0.51 | 0.54 | 0.54 | >99 | |
Экшен (5 класс) | 0.97 | 0.51 | 0.28 | 0.37 | 0.27 | >99 | |
Человек 2 | Объект (3 класс) | 0.98 | 0.68 | 0.45 | 0.5 | 0.47 | >99 |
Экшн (3 класс) | 0.98 | 0.69 | 0.46 | 0.5 | 0.48 | >99 | |
Экшен (5 класс) | 0.97 | 0.53 | 0.3 | 0.4 | 0.27 | >99 | |
Бхубо | Объект (3 класс) | 0.99 | 0.61 | 0.38 | 0.41 | 0.39 | 57 |
Экшн (3 класс) | 0.98 | 0.63 | 0.38 | 0.4 | 0.4 | 87 | |
Экшен (5 класс) | 0.99 | 0.45 | 0.16 | 0.29 | 0.13 | 88 | |
Маргаритка | Объект (3 класс) | 1 | 0.61 | 0.38 | 0.43 | 0.39 | 43 |
Экшн (3 класс) | 0.97 | 0.62 | 0.35 | 0.38 | 0.35 | 60 | |
Экшен (5 класс) | 0.99 | 0.44 | 0.16 | 0.27 | 0.13 | 76 |
Таблица 1: Агрегированные метрики алгоритма машинного обучения Ivis за 100 итераций обучения и тестирования СМЕЛЫХ реакций на натуралистические видеостимулы, полученные с помощью фМРТ в сознании у собак и людей. Объектные модели имели три целевых класса («собака», «человек», «автомобиль»), а модели действий имели три или пять классов (три класса: «говорящий», «едущий», «нюхающий»; пять классов: «говорящий», «принимающий», «нюхающий», «гладящий», «играющий»). Значения, значительно превышающие случайность, выделены жирным шрифтом.
Дополнительная таблица 1: Этикетки классов. Пожалуйста, нажмите здесь, чтобы загрузить этот файл.
Дополнительный фильм 1: Образец видеоклипа. Пожалуйста, нажмите здесь, чтобы загрузить этот файл.
Результаты этого исследования демонстрируют, что натуралистические видео вызывают представления в мозге собак, которые достаточно стабильны в течение нескольких сеансов визуализации, чтобы их можно было декодировать с помощью фМРТ, аналогичной результатам, полученным как у людей, так и у обезьян. В то время как предыдущие исследования зрительной системы собак с помощью фМРТ представляли урезанные стимулы, такие как лицо или объект на нейтральном фоне, результаты здесь демонстрируют, что натуралистические видео, в которых множество людей и объектов взаимодействуют друг с другом, вызывают паттерны активации в коре головного мозга собаки, которые могут быть декодированы с достоверностью, близкой к той, которая наблюдается в коре головного мозга человека. Такой подход открывает новые возможности для изучения того, как организована зрительная система собаки.
Несмотря на то, что область фМРТ собак быстро развивалась, на сегодняшний день эти эксперименты опирались на относительно бедные стимулы, такие как изображения людей или объектов на нейтральном фоне 10,12,13. Кроме того, несмотря на то, что эти эксперименты начали идентифицировать области мозга, аналогичные веретенообразной области лица (FFA) приматов, участвующей в обработке лица, и латеральной затылочной коре (LOC) для обработки объектов, остаются разногласия по поводу природы этих представлений, например, есть ли у собак области лица как таковые, реагирующие на схожие характерные черты, как у приматов, или у них есть отдельные представления для собак и людей или лица и головы. Например 9,13. Собаки, конечно, не являются приматами, и мы не знаем, как они интерпретируют эти искусственные стимулы, оторванные от их обычного мультисенсорного контекста со звуками и запахами. Некоторые данные свидетельствуют о том, что собаки не относятся к изображениям объектов как к репрезентациям реальных вещей12. Несмотря на то, что в сканере невозможно создать настоящий мультисенсорный опыт, использование натуралистических видео может смягчить некоторую искусственность, предоставляя динамические стимулы, которые более точно соответствуют реальному миру, по крайней мере, для собаки. По тем же причинам использование натуралистических стимулов в исследованиях фМРТ человека приобрело популярность, демонстрируя, например, что последовательности событий в фильме представлены в коре головного мозга в нескольких временных масштабах и что фильмы эффективны для индуцирования надежной активации эмоций. Таким образом, в то время как натуралистические видео остаются относительно бедными стимулами, их успех в неврологии человека вызывает вопрос о том, можно ли получить подобные результаты у собак.
Наши результаты показывают, что классификатор нейронной сети успешно расшифровал некоторые типы натуралистического контента из мозга собак. Этот успех является впечатляющим достижением, учитывая сложность стимулов. Важно отметить, что, поскольку классификатор был протестирован на невидимых видеоклипах, модель декодирования выбрала широкие категории, которые можно было идентифицировать по клипам, а не свойства, специфичные для отдельных сцен. Следует отметить, что существует несколько метрик для количественной оценки производительности классификатора машинного обучения (таблица 1). Поскольку натуралистические видео по своей природе не будут иметь одинаковых вхождений всех классов, мы выбрали разумный подход, построив нулевое распределение из случайной перестановки меток и оценив значимость, на которую ссылается это. Затем мы обнаружили, что успех моделей собак был статистически значимым, достигнув 75-90-го процентилей, но только тогда, когда видео были закодированы на основе присутствующих действий, таких как игра или разговор.
Тестовые наборы, в отличие от обучающих, не были сбалансированы между классами. Составляя только 20% данных, недостаточная выборка до наименьшего размера класса привела бы к очень малому размеру выборки для каждого класса, так что любая рассчитанная статистика была бы ненадежной. Чтобы избежать возможности завышения точности из-за этого дисбаланса, нулевое распределение LRAP было вычислено путем случайной перестановки порядка классов 1000 раз для каждой итерации модели. Это нулевое распределение выступало в качестве ориентира для определения того, насколько хорошо модель может работать случайно. Затем истинный LRAP был преобразован в ранжирование процентиля в этом нулевом распределении. Очень высокий процентильный рейтинг, например, 95%, указывает на то, что такой высокий показатель возникал только в 5% случаев в 1000 случайных перестановок. Таким образом, можно считать, что такая модель работает намного выше случайности. Чтобы определить, являются ли эти процентильные рейтинги значительно выше, чем ожидалось случайно, то есть 50-й процентиль, статистически был рассчитан медианный ранжирование процентиля LRAP по всем 100 итерациям для каждой модели, и был проведен тест на ранг Вилкоксона с одной выборкой.
Несмотря на то, что основной целью была разработка декодера натуралистических визуальных стимулов для собак, сравнения с людьми неизбежны. Здесь мы отметим два основных различия: для каждого типа классификатора человеческие модели показали лучшие результаты, чем модели собак; Человеческие модели хорошо справлялись как с объектными, так и с активными моделями, в то время как модели с собаками работали только с моделями, основанными на действиях. Превосходная производительность человеческих моделей может быть обусловлена несколькими факторами. Человеческий мозг примерно в 10 раз больше, чем мозг собаки, поэтому существует больше вокселей, из которых можно выбрать для построения классификатора. Чтобы поставить модели в равное положение, следует использовать одинаковое количество вокселей, но это может быть как в абсолютном, так и в относительном смысле. Хотя окончательная модель была основана на верхних 5% информативных вокселей в каждом мозге (относительная мера), аналогичные результаты были получены при использовании фиксированного числа вокселей. Таким образом, кажется более вероятным, что различия в производительности связаны с тем, как люди и собаки воспринимают видеостимулы. Как отмечалось выше, в то время как собаки и люди обладают мультисенсорным восприятием, стимулы могут быть более бедными для собаки, чем для человека. Например, подсказки по размеру могут быть потеряны, и все выглядит как игрушечная версия реального мира. Есть некоторые свидетельства того, что собаки классифицируют объекты на основе размера и текстуры, а не формы, что почти противоположночеловеку. Кроме того, запах, который здесь не рассматривается, вероятно, является важным источником информации для распознавания объектов у собак, особенно при идентификации сородичей или людей 40,41,42. Тем не менее, даже при отсутствии сигналов размера или запаха, в необычной обстановке МРТ-сканера, тот факт, что классификатор вообще работал, говорит о том, что у собак все еще была актуальная для собак информация, которую можно было извлечь из их мозга. Поскольку у нас всего две собаки и два человека, видовые различия также могут быть обусловлены индивидуальными различиями. Тем не менее, эти две собаки представляли собой лучших из обученных МРТ собак и преуспели в удержании неподвижности во время просмотра видео. В то время как больший размер выборки, безусловно, позволил бы провести более надежные различия между видами, небольшое количество собак, способных проводить фМРТ в бодрствующем состоянии и которые будут смотреть видео в течение достаточно долгого времени, всегда ограничивает возможность обобщения на всех собак. Хотя возможно, что специализированные породы, такие как борзые, могут иметь более тонко настроенные зрительные реакции мозга, мы считаем, что индивидуальный темперамент и дрессировка, скорее всего, являются основными детерминантами того, что можно извлечь из мозга собаки.
Эти видовые различия поднимают вопрос о том, на какой аспект видео обращали внимание собаки. Один из подходов к ответу на этот вопрос основан на более простых видеостимулах. Затем, используя отдельные изображения, скажем, людей, собак и автомобилей, как по отдельности, так и вместе на нейтральном фоне, мы могли бы реконструировать характерные размеры собаки. Однако это методологически неэффективно и еще больше обедняет стимулы из реального мира. Вопрос о внимании может быть решен только с помощью подхода к декодированию, по сути, с использованием характеристик модели для определения того, на что обращают внимание43. Таким образом, полученные результаты свидетельствуют о том, что в то время как люди обращали внимание как на актеров, так и на действия, собаки были более сосредоточены на самих действиях. Это может быть связано с различиями в низкоуровневых характеристиках движения, таких как частота движений во время игры и приема пищи, или может быть связано с категориальным представлением этих действий на более высоком уровне. Распределение информативных вокселей по всей коре головного мозга собаки позволяет предположить, что эти представления не являются просто низкоуровневыми особенностями, которые в противном случае были бы ограничены зрительными областями. Дальнейшие исследования с использованием более широкого спектра видеостимулов могут пролить свет на роль движения в категории дискриминации собак.
Таким образом, это исследование продемонстрировало возможность восстановления натуралистической визуальной информации из коры головного мозга собаки с помощью фМРТ таким же образом, как это делается для коры головного мозга человека. Эта демонстрация показывает, что даже без звука или запаха характерные размеры сложных сцен кодируются собаками, смотрящими видео, и что эти измерения могут быть восстановлены из их мозга. Во-вторых, основываясь на небольшом количестве собак, которые могут выполнять задачи такого типа, информация может быть более широко распространена в коре головного мозга, чем это обычно наблюдается у людей, и типы действий, по-видимому, легче восстановить, чем личность акторов или объектов. Эти результаты открывают новый способ изучения того, как собаки воспринимают окружающую среду, которую они делят с людьми, включая видеоэкраны, и предлагают широкие возможности для будущих исследований того, как они и другие животные, не являющиеся приматами, «видят» мир.
Никакой.
Мы благодарим Кейт Ревилл, Равину Чиббер и Джона Кинга за их полезные идеи при разработке этого анализа, Марка Спивака за его помощь в наборе и обучении собак для МРТ, а также Филлис Гуо за ее помощь в создании видео и маркировке. Мы также благодарим наших преданных владельцев собак, Ребекку Бисли (Дейзи) и Ашвина Сахарданде (Бхубо). Исследования на людях были поддержаны грантом Национального института глаза (Grant R01 EY029724 to D.D.D.).
Name | Company | Catalog Number | Comments |
3 T MRI Scanner | Siemens | Trio | |
Audio recordings of scanner noise | homemade | none | |
Camera gimbal | Hohem | iSteady PRO 3 | |
Dog-appropriate videos | homemade | none | |
fMRI processing software | AFNI | 20.3.01 | |
Mock scanner components | homemade | none | Mock head coil and scanner tube |
Neural net software | Ivis | 1.7.1 | |
Optical flow software | OpenCV | 4.2.0.34 | |
Projection system for scanner | homemade | none | |
Trophy Cam HD | Bushnell | 119874 | |
Video camera | GoPro | HERO7 | |
Visualization software | ITK-SNAP | 3.6.0 | |
Windows Video Editor | Microsoft | Windows 11 version |
Запросить разрешение на использование текста или рисунков этого JoVE статьи
Запросить разрешениеThis article has been published
Video Coming Soon
Авторские права © 2025 MyJoVE Corporation. Все права защищены