JoVE Logo

Accedi

È necessario avere un abbonamento a JoVE per visualizzare questo. Accedi o inizia la tua prova gratuita.

In questo articolo

  • Riepilogo
  • Abstract
  • Introduzione
  • Protocollo
  • Risultati
  • Discussione
  • Divulgazioni
  • Riconoscimenti
  • Materiali
  • Riferimenti
  • Ristampe e Autorizzazioni

Riepilogo

I bambini piccoli non passivamente osservare il mondo, ma piuttosto attivamente esplorare e coinvolgere con il loro ambiente. Questo protocollo fornisce principi guida e consigli pratici per l'utilizzo di inseguitori testa-montata occhio per registrare degli infanti e dei più piccoli ambienti visivi dinamici e l'attenzione visiva nel contesto del comportamento naturale.

Abstract

Ambienti visivi dei bambini piccoli sono dinamici, cambiando momento per momento come bambini fisicamente e visivamente esplorare spazi e oggetti e interagiscono con le persone intorno a loro. Testa-montata eye-tracking offre un'opportunità unica per acquisire come allocare attenzione visiva all'interno di quei panorami e viste egocentriche dinamica dei bambini. Questo protocollo fornisce principi guida e consigli pratici per i ricercatori che usano inseguitori occhio testa-montata in laboratorio e impostazioni più naturalistiche. Testa-montata eye-tracking complemento altri metodi sperimentali e le opportunità di raccolta dei dati in contesti più ecologicamente validi attraverso maggiore portabilità e libertà di movimenti di testa e il corpo rispetto al basato su schermo eye-tracking. Questo protocollo può anche essere integrato con altre tecnologie, quali il tracciamento del movimento e della frequenza cardiaca monitoraggio, per fornire un dataset multimodale ad alta densità per l'esame di comportamento naturale, l'apprendimento e lo sviluppo rispetto al passato. Questo articolo illustra i tipi di dati generati da testa-montata eye-tracking in uno studio destinato per studiare l'attenzione visiva in un contesto naturale per i più piccoli: flusso libero gioco del giocattolo con un genitore. Riuscito uso di questo protocollo permetterà ai ricercatori di raccogliere dati che possono essere utilizzati per rispondere a domande non solo sull'attenzione visiva, ma anche su una vasta gamma di altre abilità percettivo, cognitivo e sociale e il loro sviluppo.

Introduzione

Degli ultimi decenni hanno visto il crescente interesse per studiare lo sviluppo del neonato e bambino di attenzione visiva. Questo interesse ha derivava in gran parte dall'utilizzo di alla ricerca della misurazione del tempo come un primario mezzo per valutare altre funzioni cognitive nell'infanzia e si è evoluto nello studio dell'attenzione visiva infantile a sé stante. Indagini contemporanee dell'attenzione visiva neonato e bambino principalmente misurano movimenti oculari durante le attività di eye tracking basato su schermo. Infanti sedersi in una sedia o sul giro del genitore davanti ad uno schermo mentre loro movimenti oculari sono monitorati durante la presentazione di immagini statiche o eventi. Tali attività, tuttavia, non riescono a catturare la natura dinamica del naturale attenzione visiva e i mezzi con cui vengono generati ambienti visual naturali per bambini - esplorazione attiva.

Neonati e bambini piccoli sono creature attive, muovendo le loro mani, teste, occhi e corpi per esplorare gli oggetti, persone e spazi intorno a loro. Ogni nuovo sviluppo nella morfologia del corpo, capacità motorie e comportamento - la ricerca per indicizzazione, a piedi, raccogliendo oggetti, impegno con i partner sociali - è accompagnata da concomitanti cambiamenti nell'ambiente visual precoce. Perché i neonati che cosa determina ciò che vedono, e ciò che vedono serve per quello che fanno in azione visivamente guida, studiando lo sviluppo naturale dell'attenzione visiva è meglio effettuato nell'ambito del comportamento naturale1.

Inseguitori di testa-montata occhio (ETs) sono stati inventati e utilizzati per adulti per decenni2,3. Solo di recente hanno tecnologia eye-tracking testa-montata progressi tecnologici compiuti adatto per neonati e bambini piccoli. I partecipanti sono provvisti di due telecamere leggere sulla testa, una fotocamera di scena rivolta verso l'esterno che cattura la prospettiva in prima persona del partecipante e una telecamera occhio rivolto verso l'interno che cattura l'immagine dell'occhio. Una procedura di calibrazione fornisce dati di training a un algoritmo che esegue il mapping più accuratamente possibile le posizioni mutevoli della pupilla e riflesso cornea (CR) nell'immagine dell'occhio ai pixel corrispondenti nell'immagine scena che erano essendo visivamente frequentato. L'obiettivo di questo metodo è di catturare entrambi gli ambienti naturali di visual di neonati e bimbi piccoli attiva esplorazione visiva di quegli ambienti come infanti mossa liberamente. Tali dati possono aiutare a rispondere a domande non solo sull'attenzione visiva, ma anche su una vasta gamma di sviluppi percettivi, cognitivi e sociali4,5,6,7,8. L'uso di queste tecniche ha trasformato comprensioni di attenzione congiunta7,8,9, attenzione sostenuta10, cambiando esperienze visive con l'età e lo sviluppo di motore4 , 6 , 11e il ruolo di esperienze visive in parola apprendimento12. Il presente documento fornisce linee guida e consigli pratici per la realizzazione di esperimenti di eye tracking testa-montata con neonati e bambini piccoli e illustra i tipi di dati che possono essere generati da testa-montata eye-tracking in una naturale contesto per i più piccoli: flusso libero gioco del giocattolo con un genitore.

Protocollo

Questo tutorial è basato su una procedura per la raccolta dati di eye tracking testa-montata con bimbi approvati dalla Institutional Review Board presso l'Indiana University. Consenso informato dei genitori è stata ottenuta prima della partecipazione dei più piccoli l'esperimento.

1. preparazione per lo studio

  1. Apparecchiature di eye-Tracking. Selezionare uno dei diversi testa-montata eye tracking sistemi che sono commercialmente disponibili, uno commercializzato come specificatamente per bambini o modificare il sistema di lavorare con una protezione infantile su misura, per esempio come mostrato nelle figure 1 e 2. Assicurarsi che il sistema di eye tracking ha le caratteristiche necessarie per il test di neonati e/o per i più piccoli attenendosi alla seguente procedura:
    1. Selezionare una telecamera di scena che è regolabile in termini di posizionamento e ha un angolo abbastanza ampio per catturare un campo visivo adeguato per affrontare le questioni di ricerca. Per catturare la maggior parte dell'attività del vostro bambino in un ambiente di gioco libero come quello qui descritto, è necessario selezionare una fotocamera che cattura un almeno 100 gradi campo visivo diagonale.
    2. Selezionare una telecamera eye che è regolabile in termini di posizionamento e dispone di un LED infrarosso sia costruito nella fotocamera o adiacente alla fotocamera e posizionato in modo tale che la cornea dell'occhio rifletterà questa luce. Si noti che alcuni modelli di eye tracking hanno posizionamento fisso, ma modelli che permettere regolazioni flessibili sono raccomandati.
    3. Scegliere un sistema di eye tracking che è discreto e leggero possibile per poter offrire il massimo di probabilità che i neonati/bambini piccoli tollererà indossando l'attrezzatura.
      1. Incorporare il sistema in un tappo collegando le telecamere di scena e con gli occhi a un cinturino in Velcro che è apposto sul lato opposto del Velcro cucita sulla PAC, e il posizionamento delle telecamere fuori il centro della vista del bambino.
        Nota: I sistemi progettati per essere simili a occhiali non sono ottimali. La morfologia del viso del bambino è diversa da quella di un adulto e parti che poggiano sul naso o le orecchie del bambino possono essere fonte di distrazione e scomodo per il partecipante.
      2. Se l'ET è collegato a un computer, avvolgere i cavi e tenere loro alle spalle del partecipante per evitare distrazioni o inciampare. In alternativa, utilizzare un sistema autonomo che archivia i dati su un dispositivo intermedio, ad esempio un telefono cellulare, che può essere posizionato sul bambino, che permette una maggiore mobilità.
    4. Selezionare un pacchetto di software di calibrazione che permette per la calibrazione in linea.
  2. Ambiente di registrazione.
    1. Prendere in considerazione nella misura in cui il bambino si muoverà in tutto lo spazio durante la raccolta dati. Se una singola posizione è preferibile, parlarne con caregiver del bambino in modo che possano aiutare il bambino a rimanere nella posizione desiderata. Rimuovere tutti i potenziali distrattori dallo spazio ad eccezione di quelli che il bambino dovrebbe interagire con, che dovrebbe essere a portata di mano.
    2. Impiegare una fotocamera di terza persona per assistere nella successiva codificazione del comportamento del bambino anche da identificare momenti quando può diventare sfollati ET. Se il bambino si muoverà in tutto lo spazio, prendere in considerazione ulteriori telecamere pure.

2. raccogliere i dati di Eye-Tracking.

  1. Personale e attività. Hanno due sperimentatori presente, uno per interagire con e occupare il bambino e uno per inserire e posizionare la ET.
    1. Coinvolgere il bambino in un'attività che occupa le mani del bambino in modo che il bambino non raggiunga fino a mossa o afferrare il ET mentre esso è stato posto sul loro capo. Considera giocattoli che incoraggiano azioni manuali e libretti che il bambino può tenere mentre lo sperimentatore o il genitore legge al bambino.
  2. Posto ET sul bambino. Poiché la tolleranza dei più piccoli di indossare la testa-montata ET varia, seguire questi consigli per promuovere il successo nel posizionamento e nel mantenere il ET sul bambino:
    1. Nel tempo che portano allo studio, chiedere gli operatori sanitari di avere il loro bambino di usura un cappello o berretto, simile a quello utilizzato con l'ET, a casa per farli abituati ad avere qualcosa sulla loro testa.
    2. Allo studio, hanno diverse tipologie di tappi disponibili a cui può essere collegato il ET. Personalizzare tappi l'acquisto di diverse dimensioni e stili di tappi, ad esempio un berretto palla che può essere indossato all'indietro o un cappellino con orecchie degli animali e aggiungendo a cui può essere collegato il sistema di eye tracking, montato con il lato opposto del Velcro, Velcro. Anche considerare di avere cappelli da indossare dal caregiver e sperimentatori, per incoraggiare l'interesse e la volontà di indossare anche un cappello del bambino.
      1. Prima di mettere il tappo sul bambino, avere uno sperimentatore desensibilizzare il bambino ai tocchi alla testa leggermente toccando i capelli più volte quando l'attenzione e l'interesse del bambino è diretto a un giocattolo.
    3. Per posizionare il ET sul bambino, essere dietro o al lato del bambino (Vedi Figura 2A). Posto il ET sul bambino quando le mani sono occupate, ad esempio quando il bambino sta tenendo un giocattolo in ogni mano.
      1. Se il bambino guarda verso lo sperimentatore ponendo l'ET, dire Ciao e lasciare che il bambino conosce che cosa è stato fatto mentre procedendo per posizionare rapidamente il ET sulla testa del bambino. Evitare di spostare troppo lentamente, pur ponendo l'ET, che possono provocare disagio del bambino e può portare a posizionamento difficile come il bambino ha una maggiore possibilità di spostare la testa o raggiungere per l'ET.
      2. Per ridurre il tempo speso regolando la fotocamera dopo la disposizione, prima di mettere il ET sul partecipante, insieme alle telecamere di essere nella loro posizione prevista quando sulla testa del bambino (vedere paragrafi 2.3.1 e 2.3.2).
  3. Scena occhio telecamere e posizione di ET. Una volta che l'ET è sulla testa del bambino, è possibile apportare modifiche alla posizione delle telecamere scena e occhio durante il monitoraggio feed video queste telecamere:
    1. Posizione la macchina fotografica scena bassa sulla fronte per meglio approssimare campo visivo del bambino (Vedi Figura 1B); centro dell'inquadratura di scena su ciò che il bambino sarà guardare durante lo studio.
      1. Tenete a mente che mani e tenutosi oggetti saranno sempre molto vicino al bambino e basso nella vista della videocamera di scena, mentre ulteriori oggetti sarà in background e più in alto nella vista della videocamera di scena. Posizione la fotocamera di scena per meglio catturare il tipo di visualizzazione più rilevanti per la domanda di ricerca.
      2. Prova la posizione della fotocamera scena attirando l'attenzione del bambino a posizioni specifiche nel loro campo visivo utilizzando un piccolo puntatore laser o giocattolo. Garantire queste posizioni sono presso l'atteso distanza delle regioni che saranno di interesse durante lo studio di osservazione (Vedi Figura 3).
      3. Evitare il tilt controllando che le superfici orizzontali appaiono Appartamento in vista della telecamera di scena. Contrassegnare l'orientamento verticale della fotocamera scena per attenuare la possibilità della fotocamera ottenere inavvertitamente invertita durante il riposizionamento, ma si noti che i passaggi aggiuntivi in fase di elaborazione possono ripristinare le immagini nell'orientamento corretto se necessario.
    2. Per ottenere dati di alta qualità sguardo, posizionare la telecamera eye per rilevare la pupilla e il riflesso cornea (CR) (Vedi Figura 2).
      1. Posizionare la telecamera eye, in modo che sia centrato sulla pupilla del bambino, con nessuna occlusione da guance o ciglia tutto il gamma completa dell'occhio di movimento (Vedi Figura 2C-F per esempi di immagini per l'occhio di buoni e cattivi). Per aiutare con questo, posizionare la telecamera eye sotto l'occhio, vicino la guancia, rivolto verso l'alto, mantenendo la fotocamera fuori del centro della vista del bambino. In alternativa, posizionare la telecamera eye qui sotto e a lato esterno dell'occhio, punta verso l'interno.
      2. Accertarsi che la fotocamera è abbastanza vicina all'occhio che il suo movimento produce un relativamente grande spostamento della pupilla nell'immagine della telecamera occhio.
      3. Evitare il tilt facendo in modo che gli angoli dell'occhio nell'immagine dell'occhio possono formare una linea orizzontale (Vedi Figura 2C).
      4. Assicurarsi che il contrasto della pupilla contro l'iride è relativamente elevato, in modo che la pupilla può essere accuratamente distinta da iris (Vedi Figura 2C). Per aiutare con questo, è necessario regolare la posizione della luce a LED (se accanto alla fotocamera occhio) o la distanza della telecamera occhio dall'occhio (se il LED non è regolabile in modo indipendente). Per il rilevamento di maggiore pupilla, posizionare la luce di LED ad angolo e non direttamente nell'occhio. Assicurarsi che eventuali regolazioni alla luce LED producono ancora una chiara CR (Vedi Figura 2C).
  4. Ottenere punti durante lo studio per la calibrazione in linea.
    1. Una volta che le immagini di scena e con gli occhi sono come di alta qualità come possono essere, i dati di calibrazione raccogliere attirando l'attenzione del bambino in posizioni diverse nel loro campo visivo.
      1. Ottenere punti di taratura su varie superfici con tutto ciò che chiaramente dirige l'attenzione del bambino ad un piccolo punto chiaro nel loro campo visivo (vedere la Figura 3). Per esempio, è possibile utilizzare un puntatore laser contro un background solido o una superficie con piccole luci a LED attivato in modo indipendente.
      2. Limitare la presenza di altre destinazioni interessanti in vista del bambino per assicurare che il bambino Guarda il target di calibrazione.
    2. Alternare di attirare l'attenzione in diverse posizioni che richiedono grandi spostamenti angolari dell'occhio.
      1. Coprire il campo di vista ugualmente e non spostare troppo in fretta tra punti, che saranno di aiuto nella ricerca di saccadi chiari dal bambino durante la calibrazione non in linea per aiutare a dedurre quando sembravano alla posizione successiva.
      2. Se il bambino non sembra immediatamente nella nuova posizione evidenziata, ottenere la loro attenzione al percorso dimenando il laser, tornitura off/sui LED, o toccando la posizione con un dito.
      3. Se fattibile, ottenere più punti di calibrazione che necessari nel caso in cui alcuni si rivelano per essere inutilizzabile in seguito.
    3. Assicurarsi che la posizione del corpo del bambino durante la calibrazione corrisponde alla posizione che verrà utilizzata durante lo studio.
      1. Ad esempio, non raccolgono punti di calibrazione quando il bambino è seduto se si prevede che il bambino sarà più tardi in piedi.
      2. Verificare che la distanza tra il bambino e il target di calibrazione è simile alla distanza tra il bambino e le regioni che saranno di interesse durante lo studio.
      3. Non posizionare punti di calibrazione molto vicino al corpo del bambino se, durante l'esperimento, il bambino sarà principalmente guardando gli oggetti che sono più lontano. Se uno è interessato a oggetti vicini e lontani, è consigliabile ottenere due diversi insiemi di punti di taratura, che successivamente può essere utilizzato per creare calibrazioni univoco per ogni distanza di osservazione (per ulteriori informazioni, vedere la sezione 3.1).
        Nota: Binoculare eye-tracking è una via di sviluppo di tecnologia13,14 che promesse avanza nell'inseguimento lo sguardo in profondità.
    4. Per ospitare per deriva o movimento dell'ET durante lo studio, raccogliere punti di calibrazione all'inizio e di fine dello studio al minimo. Se fattibile, è possibile raccogliere punti di taratura addizionali a intervalli regolari durante la sessione.
  5. Monitorare i feed Video ET e terza persona durante lo studio.
    1. Se il ET ottiene urtato o disallineati a causa di altri movimenti/azioni, prendere nota di quando nello studio questo è accaduto perché potrebbe essere necessario ricalibrare e codificare le porzioni dello studio prima e dopo l'urto/disallineamento separatamente (vedere paragrafo 3.1.1).
    2. Se possibile, interrompere lo studio dopo ogni urto/disallineamento per riposizionare le telecamere di scena e occhio (Vedi sezione 2.3), quindi ottenere nuovi punti di calibrazione (Vedi sezione 2.4).

3. dopo lo studio, calibrare i dati ET utilizzando Software di calibrazione.

Nota: Una varietà di pacchetti di software di calibrazione sono commercialmente disponibili.

  1. Considerare la creazione di calibrazioni più. Personalizzare i punti di calibrazione per diversi segmenti di video per massimizzare la precisione della pista lo sguardo di non nutrire i dati algoritmo corrispondenza in modo non corretto.
    1. Se il ET ha cambiato posizione in qualsiasi momento durante lo studio, creare calibrazioni separate per le porzioni prima e dopo la modifica della posizione di ET.
    2. Se siete interessati nell'attenzione agli oggetti a distanze di osservazione molto differenti, creare calibrazioni separate per le porzioni del video dove il bambino è alla ricerca di oggetti ad ogni distanza di osservazione. Tenete a mente che le differenze nella distanza di osservazione può essere creato da turni in attenzione visiva del bambino tra molto vicino e variare gli oggetti lontani, ma anche dai cambiamenti nella posizione del corpo del bambino rispetto a un oggetto, ad esempio spostando da seduto a in piedi.
  2. Eseguire ogni calibrazione. Stabilire il mapping tra scena e occhio creando una serie di punti di taratura - punti dell'immagine di scena a cui lo sguardo del bambino era chiaramente diretto durante quel lasso. Nota che il software di calibrazione può estrapolare e interpolare il punto dello sguardo (POG) in tutti i fotogrammi da un insieme di punti di taratura uniformemente dispersi in tutta l'immagine di scena.
    1. Assistere il software di calibrazione nella rilevazione della pupilla e CR in ogni fotogramma della telecamera occhio dei video per assicurare che il POG identificati sia affidabile. In casi dove il software non riesce a rilevare il CR in modo affidabile e coerente, utilizzare la pupilla solo (nota, tuttavia, che dati qualità soffrirà di conseguenza).
      1. Ottenere un'immagine di buon occhio nei frame fotocamera occhio regolando le soglie della calibrazione vari parametri di rilevamento del software, che possono includere: la luminosità dell'immagine dell'occhio, la dimensione della pupilla il software si aspetta, e un riquadro di delimitazione che imposta il confini di dove il software cercherà la pupilla. Disegnare il riquadro piccolo come possibile, garantendo nel contempo che la pupilla rimane all'interno della scatola in tutta gamma completa dell'occhio di movimento. Essere consapevoli del fatto che un più grande riquadro che racchiude lo spazio che la pupilla mai occupa aumenta la probabilità di rilevazione falsa pupilla e può causare piccoli movimenti della pupilla per essere rilevato in modo meno accurato.
      2. Essere consapevoli del fatto che anche dopo aver regolato varie soglie di rilevazione del software, il software a volte ancora in modo non corretto può individuare la pupilla o CR; per esempio, se ciglia coprono la pupilla.
    2. Trovare punti di calibrazione basati sulle strutture della macchina fotografica scena e occhio. Si noti che i migliori punti di calibrazione forniti al software sono quelli in cui la pupilla e CR sono accuratamente rilevati, l'occhio è stabilmente fissata su di un punto chiaramente identificabile nello spazio dell'immagine di scena, e i punti sono distribuiti uniformemente su tutta la gamma dell'immagine di scena.
      1. Garantire che la rilevazione di pupilla è accurata per ogni frame in cui viene tracciato un punto di calibrazione, affinché sia valido x-y scena coordinate e valido x-y pupilla sono alimentati nell'algoritmo.
      2. Durante il primo passaggio alla calibrazione, identificare i punti di calibrazione in momenti quando il bambino è chiaramente alla ricerca di un punto distinto dell'immagine di scena. Tenete a mente che questi possono essere punti intenzionalmente creati dallo sperimentatore durante la raccolta di dati, ad esempio con un puntatore laser (Vedi Figura 3A-B), oppure possono essere punti dallo studio in cui il POG è facilmente identificabili (Vedi Figura 3C), purché la pupilla viene rilevata con precisione per quei fotogrammi.
      3. Per trovare momenti di sguardo più estrema di x-y scena immagine coordinate, scorrere i fotogrammi di fotocamera occhio trovare momenti con rilevamento accurato pupilla quando l'occhio del bambino è nella posizione più estrema di x-y.
    3. Fare più "passaggi" per ogni calibrazione a perfezionare in modo iterativo in sulla taratura più accurata possibile. Si noti che dopo aver completato un primo "passaggio" alla calibrazione, molti programmi software consentirà l'eliminazione dei punti precedentemente utilizzato senza perdere la traccia corrente (ad es. mirino). Selezionare un nuovo insieme di punti di taratura per addestrare l'algoritmo da zero ma con l'aiuto complementare della pista POG generata dal passaggio precedente taratura, che permette di aumentare gradualmente la precisione di calibrazione da progressivamente "ripulire" qualsiasi rumore o imprecisioni introdotti dai passaggi precedenti.
  3. Valutare la qualità della calibrazione, osservando quanto bene il POG corrisponde a luoghi noti lo sguardo, quali i puntini prodotti da un puntatore laser durante la calibrazione e riflette la direzione e l'entità delle saccadi del bambino. Evitare di utilizzare punti per valutare la qualità di calibrazione che sono stati anche utilizzati come punti durante il processo di calibrazione.
    1. Ricordo che perché bambini teste e gli occhi sono in genere allineati, attenzione visiva dei bambini più spesso è diretto verso il centro dell'immagine di scena e una traccia precisa rifletterà questo. Per valutare la centralità della pista, tracciare le coordinate POG frame-by-frame x-y dell'immagine di scena generato dalla calibrazione (Vedi Figura 4). Verificare che i punti siano più densa al centro dell'immagine scena e distribuita simmetricamente, tranne in casi dove la fotocamera di scena non è stata centrata al centro del campo di vista di bambino quando originariamente posizionato.
    2. Si noti che alcuni software di calibrazione genererà punteggi di forma lineare e/o omografia che riflettono la precisione di calibrazione. Tenete a mente che questi punteggi sono utili in una certa misura dal momento che, se sono poveri, la pista probabilmente saranno anche povera. Tuttavia, non utilizzare punteggi forma come la misura primaria di precisione di calibrazione come essi riflettono il grado a cui i punti di calibrazione selezionate sono d'accordo con se stessi, che non fornisce alcuna informazione circa la misura di tali punti nella posizione di verità di terra della POG.
    3. Ricordate che ci sono momenti nello studio che il bersaglio dello sguardo è facilmente identificabile e pertanto può essere utilizzato come verità di terra. Calcolare la precisione in gradi di angolo visivo misurando l'errore tra obiettivi noti lo sguardo e il mirino POG (errore in pixel dall'immagine video può essere convertito circa a gradi basati su caratteristiche dell'obiettivo della macchina fotografica scena)4.

4. codice regioni di interesse (ROI).

Nota: Codifica di ROI è la valutazione dei dati POG per determinare quale regione un bambino è visivamente frequentando a durante un particolare momento nel tempo. ROI può essere codificato con alta precisione e ad alta risoluzione dai dati POG frame-by-frame. L'output di questa codifica è un flusso di punti di dati - un punto per ogni fotogramma video - che indicano la regione di POG nel tempo (Vedi Figura 5A).

  1. Prima di iniziare la codifica di ROI, compilare un elenco di tutte le ROIs che devono essere codificate sulla base delle domande di ricerca. Essere consapevoli del fatto che codifica ROIs che non sono necessari per la ricerca di rispondere domande rende inutilmente che richiede tempo di codifica.
  2. Principi di codifica di ROI.
    1. Ricordate che codifica successo richiede rinunciando a supposizioni di coder dove il bambino dovrebbe essere alla ricerca e invece esaminando attentamente ogni fotogramma immagine dell'occhio, immagine di scena e computata POG. Ad esempio, anche se un oggetto è correntemente da bambino ed è molto grande dell'immagine di scena per un particolare fotogramma, non dedurre che il bambino sta guardando quell'oggetto in quel momento a meno che non indicato anche dalla posizione degli occhi. Si noti che ROIs indicano quale regione il bambino è foveating, ma non cattura l'informazione visiva completa il bambino sta prendendo in.
    2. È possibile utilizzare l'immagine dell'occhio, immagine di scena e POG pista per determinare quali ROI è visivamente curato.
      1. Utilizzare la pista POG come una guida, non come terra-verità. Anche se idealmente la pista POG indicherà chiaramente la posizione esatta contemplata dal bambino per ogni fotogramma, essere consapevoli che non questo sarà sempre il caso a causa della natura (2D) dimensionale 2 di immagine scena rispetto alla natura 3D del mondo reale visualizzato dalla chil d e variazione di precisione di calibrazione tra i partecipanti.
        1. Ricordate che la traccia POG computata è una stima basata su un algoritmo di calibrazione e che affidabilità della pista POG per un particolare fotogramma dipende quindi da quanto bene la pupilla e CR sono rilevati; Se uno o entrambi non vengono rilevati o sono corrette, è possibile che la traccia POG non sarà affidabile.
          Nota: In alcuni casi, il mirino sarà costantemente fuori bersaglio da una distanza fissa. Software più recenti può consentire uno correggere informaticamente per questa discrepanza. In caso contrario, un ricercatore addestrato può fare la correzione manualmente.
      2. Utilizzare movimento della pupilla nell'immagine dell'occhio come la stecca primaria che il ROI può essere cambiato.
        1. Scorrere i fotogrammi uno guardando l'immagine dell'occhio. Quando si verifica un movimento visibile dell'occhio, controllare se il bambino si sta spostando loro POG per un ROI nuovo o non definito ROI.
        2. Si noti che non tutti i movimenti di occhio indicano un cambiamento di ROI. Se il ROI costituisce una grande regione di spazio (ad esempio, un oggetto ravvicinato), tenere a mente che l'occhio piccolo movimento può riflettere un aspetto in una nuova posizione all'interno della ROI stessa. Allo stesso modo, ricordare che i movimenti di occhio possono verificarsi come il bambino tiene traccia un singolo movimento ROI, o come un bambino che si sta muovendo la testa si muove anche i loro occhi per mantenere lo sguardo sul ROI stesso.
        3. Notare che con alcuni ETs l'immagine dell'occhio è un'immagine speculare dell'occhio del bambino, nel qual caso se l'occhio si muove a sinistra che dovrebbe corrispondere ad uno spostamento verso destra della scena.
    3. Perché la pista POG serve solo come una guida, fare uso di informazioni contestuali disponibili anche per guidare le decisioni di codifica.
      1. Integrare informazioni provenienti da fonti diverse o fotogrammi quando si codifica il ROI. Anche se il ROI è codificato separatamente per ciascun fotogramma, utilizzare fotogrammi prima e dopo il fotogramma corrente per ottenere informazioni contestuali che possono aiutare a determinare il ROI corretto. Per esempio, se la pista POG è assente o non corretto per un determinato frame dovuto rilevazione allievo mediocre, ma l'occhio non si mosse basato sui fotogrammi precedenti e successivi, in cui l'allievo è stato rilevato con precisione, quindi ignorare la pista POG per quel fotogramma e codice ba ROI SED sui fotogrammi circostanti.
      2. Prendere altre decisioni specifiche a domande di ricerca degli utenti.
        1. Ad esempio, fare un protocollo per come codice ROI quando due ROIs sono nella prossimità vicina ad uno altro, nel qual caso può essere difficile determinare qual è il ROI "corretto". Nei casi in cui il bambino sembra essere fissazione all'incrocio tra le due ROIs, decidere se codificare entrambi ROIs contemporaneamente oppure se a formulare un insieme di regole di decisione per come selezionare e assegnare solo una delle categorie di ROI.
        2. Come un altro esempio, quando un oggetto di interesse è tenuto tale che una mano è che occlude l'oggetto, decidere se il POG di codice come un ROI per la mano o come un ROI per l'oggetto tenuto.
  3. Codice ROI per affidabilità. Implementare una procedura di codificazione dopo il ROI iniziale protocollo di codifica è stato completato di affidabilità. Ci sono molti diversi tipi di procedure di codificazione di affidabilità disponibile; scegliere la procedura più rilevante sulla base delle domande di ricerca specifici.

Risultati

Il metodo descritto qui è stato applicato a un contesto di gioco giocattolo flusso libero tra i più piccoli e i loro genitori. Lo studio è stato destinato per studiare naturale attenzione visiva in un ambiente disordinato. Diadi sono stati incaricati di giocare liberamente con un insieme di 24 giocattoli per sei minuti. Attenzione visiva dei più piccoli è stato misurato tramite l'insorgenza di codifica e offset di Guarda a specifiche regioni di interesse (ROI) - ciascuno dei 24 Gioca...

Discussione

Questo protocollo fornisce principi guida e consigli pratici per l'implementazione di testa-montata eye-tracking con neonati e bambini piccoli. Questo protocollo è basato sullo studio dei comportamenti naturali del bambino nel contesto di gioco libero del genitore-bambino con i giocattoli in un ambiente di laboratorio. In-House eye tracking apparecchiature e software sono stati utilizzati per la taratura e la codifica dei dati. Tuttavia, questo protocollo è destinato a essere generalmente applicabile per i ricercatori ...

Divulgazioni

Gli autori dichiarano di non avere nessun interesse concorrente o in conflitto.

Riconoscimenti

Questa ricerca è stata finanziata dai National Institutes of Health sovvenzioni R01HD074601 (CY), T32HD007475-22 (J.I.B., DHA) e F32HD093280 (L.K.S.); National Science Foundation grant BCS1523982 (L.B.S, C.Y.); e dalla Indiana University attraverso l'iniziativa di ricerca Area emergente - apprendimento: cervelli, macchine e bambini (IMS). Gli autori ringraziano i volontari di padre e figlio che hanno partecipato a questa ricerca e che hanno accettato di essere usati nelle figure e le riprese di questo protocollo. Apprezziamo anche i membri della cognizione computazionale e laboratorio di apprendimento, soprattutto Sven Bambach, Anting Chen, Steven Elmlinger, Seth Foster, Grace Lisandrelli e Charlene Tay, per la loro assistenza nello sviluppo e nella levigatura di questo protocollo.

Materiali

NameCompanyCatalog NumberComments
Head-mounted eye trackerPupil LabsWorld Camera and Eye Camera

Riferimenti

  1. Tatler, B. W., Hayhoe, M. M., Land, M. F., Ballard, D. H. Eye guidance in natural vision: Reinterpreting salience. Journal of Vision. 11 (5), 1-23 (2011).
  2. Hayhoe, M. Vision using routines: A functional account of vision. Visual Cognition. 7 (1-3), 43-64 (2000).
  3. Land, M., Mennie, N., Rusted, J. The Roles of Vision and Eye Movements in the Control of Activities of Daily Living. Perception. 28 (11), 1311-1328 (1999).
  4. Franchak, J. M., Kretch, K. S., Adolph, K. E. See and be seen: Infant-caregiver social looking during locomotor free play. Developmental Science. 21 (4), 12626 (2018).
  5. Franchak, J. M., Kretch, K. S., Soska, K. C., Adolph, K. E. Head-mounted eye tracking: a new method to describe infant looking. Child Development. 82 (6), 1738-1750 (2011).
  6. Kretch, K. S., Adolph, K. E. The organization of exploratory behaviors in infant locomotor planning. Developmental Science. 20 (4), 12421 (2017).
  7. Yu, C., Smith, L. B. Hand-Eye Coordination Predicts Joint Attention. Child Development. 88 (6), 2060-2078 (2017).
  8. Yu, C., Smith, L. B. Joint Attention without Gaze Following: Human Infants and Their Parents Coordinate Visual Attention to Objects through Eye-Hand Coordination. PLoS One. 8 (11), 79659 (2013).
  9. Yu, C., Smith, L. B. Multiple Sensory-Motor Pathways Lead to Coordinated Visual Attention. Cognitive Science. 41, 5-31 (2016).
  10. Yu, C., Smith, L. B. The Social Origins of Sustained Attention in One-Year-Old Human Infants. Current Biology. 26 (9), 1-6 (2016).
  11. Kretch, K. S., Franchak, J. M., Adolph, K. E. Crawling and walking infants see the world differently. Child Development. 85 (4), 1503-1518 (2014).
  12. Yu, C., Suanda, S. H., Smith, L. B. Infant sustained attention but not joint attention to objects at 9 months predicts vocabulary at 12 and 15 months. Developmental Science. , (2018).
  13. Hennessey, C., Lawrence, P. Noncontact binocular eye-gaze tracking for point-of-gaze estimation in three dimensions. IEEE Transactions on Biomedical Engineering. 56 (3), 790-799 (2009).
  14. Elmadjian, C., Shukla, P., Tula, A. D., Morimoto, C. H. 3D gaze estimation in the scene volume with a head-mounted eye tracker. Proceedings of the Workshop on Communication by Gaze Interaction. , 3 (2018).
  15. Castellanos, I., Pisoni, D. B., Yu, C., Chen, C., Houston, D. M., Knoors, H., Marschark, M. Embodied cognition in prelingually deaf children with cochlear implants: Preliminary findings. Educating Deaf Learners: New Perspectives. , (2018).
  16. Kennedy, D. P., Lisandrelli, G., Shaffer, R., Pedapati, E., Erickson, C. A., Yu, C. Face Looking, Eye Contact, and Joint Attention during Naturalistic Toy Play: A Dual Head-Mounted Eye Tracking Study in Young Children with ASD. Poster at the International Society for Autism Research Annual Meeting. , (2018).
  17. Yurkovic, J. R., Lisandrelli, G., Shaffer, R., Pedapati, E., Erickson, C. A., Yu, C., Kennedy, D. P. Using Dual Head-Mounted Eye Tracking to Index Social Responsiveness in Naturalistic Parent-Child Interaction. Talk at the International Congress for Infant Studies Biennial Congress. , (2018).
  18. Holmqvist, K., Nyström, M., Andersson, R., Dewhurst, R., Jarodzka, H., Van de Weijer, J. . Eye tracking: A comprehensive guide to methods and measures. , (2011).
  19. Saez de Urabain, I. R., Johnson, M. H., Smith, T. J. GraFIX: a semiautomatic approach for parsing low- and high-quality eye-tracking data. Behavior Research Methods. 47 (1), 53-72 (2015).
  20. Franchak, J. M., Hopkins, B., Geangu, E., Linkenauger, S. Using head-mounted eye tracking to study development. The Cambridge Encyclopedia of Child Development 2nd ed. , 113-116 (2017).
  21. Yonas, A., Arterberry, M. E., Granrud, C. E. Four-month-old infants' sensitivity to binocular and kinetic information for three-dimensional-object shape. Child Development. 58 (4), 910-917 (1987).
  22. Smith, T. J., Saez de Urabain, I. R., Hopkins, B., Geangu, E., Linkenauger, S. Eye tracking. The Cambridge Encyclopedia of Child Development. , 97-101 (2017).

Ristampe e Autorizzazioni

Richiedi autorizzazione per utilizzare il testo o le figure di questo articolo JoVE

Richiedi Autorizzazione

Esplora altri articoli

Comportamentoproblema 141Head mounted eye trackingvisione egocentricasviluppoinfantebambinoattenzione visiva

This article has been published

Video Coming Soon

JoVE Logo

Riservatezza

Condizioni di utilizzo

Politiche

Ricerca

Didattica

CHI SIAMO

Copyright © 2025 MyJoVE Corporation. Tutti i diritti riservati