Los autores desean expresar su agradecimiento al Sr. Hong Hu por su ayuda en la realización de los experimentos reportados en este trabajo. Esta obra fue financiada en parte por la Fundación Nacional de Ciencias Naturales de China (N ° 61473207).

1. Adquisición de señales de EEG <ol><li> Explicar el procedimiento experimental para el tema y obtener el consentimiento informado por escrito para participar en experimentos. </li><li> Medir la circunferencia de la cabeza del sujeto utilizando una cinta métrica y seleccionar el tamaño del casquillo EEG que está cerca de la medición. La disposición de electrodos se basa en el &quot;Sistema de 10 hasta 20 Internacional&quot; 12. </li><li> Mida la distancia entre el nasión y inion. Use un lápiz marcador para marcar la piel 10% de la distancia como una referencia para la alineación de la tapa, y marcar el punto medio de la distancia que el vértice en el cuero cabelludo del sujeto. </li><li> Coloque la tapa de EEG en la materia mediante la alineación de la marca de 10% con el punto medio de los electrodos FP1 y FP2. Posición electrodo Cz de la tapa en el vértice. </li><li> Asegúrese de que el Fz, Cz, Pz y Oz se encuentran en la línea media de la cabeza, y que cada par de electrodos situados a ambos lados de la línea media se encuentran en una línea horizontal. </li><li>Unte los electrodos REF1 y REF2 con gel conductor. Coloque los electrodos de referencia en los mastoides izquierda y derecha utilizando cinta médica. Apriete el barbijo. </li><li> Coloque una jeringa de punta roma en los soportes de electrodos e inyectar gel conductor en cada electrodo en el orden siguiente: primero, el electrodo de &quot;tierra&quot; en la frente y segundo, los cinco electrodos utilizados en el experimento, O2, O1, Oz, Pz y Cz. </li><li> Sentar al sujeto en una cómoda silla de 60 cm delante de un monitor de estímulo. Instruya al sujeto para mantener su / sus ojos en el mismo nivel horizontal con el centro de la pantalla. </li><li> Conectar los hilos de los electrodos para el sistema de adquisición de datos EEG. Configure la velocidad de muestreo de 1 kHz. </li><li> Examine la calidad de la señal EEG en la dedicada DPC. Si hay un problema con un electrodo particular, gel reinyectar para ajustar la impedancia de la canal. </li><li> Utilice el SPC dedicado a parpadear cuatro imágenes robot en las frecuencias de 4.615, 12, 15 y 20Hz como estímulos visuales en la interfaz de usuario, como se muestra en la Figura 2. </li></ol> 2. Desconectado SSVEP Analizar Características <ol><li> Llevar a cabo 32 ensayos de experimentos de formación fuera de línea para cada sujeto y registrar sus señales cerebrales adquiridas del sistema EEG durante todo este proceso. NOTA: este proceso sólo se lleva a cabo por los sujetos de primera vez del experimento para establecer sus vectores de características SSVEP y entrenar el clasificador. </li><li> Cuando se inicia un juicio, seleccione un estímulo como el objetivo al azar y mostrar una flecha amarilla por encima de ella. </li><li> 1 segundo después, parpadear los cuatro estímulos visuales en diferentes frecuencias en la interfaz de usuario durante 5 segundos. </li><li> Solicitar el objeto de centrarse en el objetivo de estímulo seleccionado, manteniendo su / su movimiento corporal al mínimo. </li><li> Después de cada ensayo, dar el sec tema 3 para relajarse, y luego empezar la siguiente prueba. </li><li> Cuando hayan terminado todos los ensayos, leer los datos guardados. Extracto de una época de datos 3-sec ser<html> entre 2 y 5 segundos después del disparo que selecciona un estímulo como el objetivo en cada ensayo. </li><li> Calcular la densidad espectral de potencia (PSD) de las épocas de datos utilizando el analizador de datos sin conexión en los scripts de MATLAB. Utilice el algoritmo de procesamiento se describe en detalles a continuación: <ol><li> Calcular los coeficientes de análisis de correlación canónica (CCA) de los datos de EEG multicanal con unos datos de referencia. CCA es un método estadístico multivariable utilizado para dos conjuntos de datos para encontrar su correlación subyacente 13. Teniendo en cuenta el segmento 3s de EEG multicanal X de datos y datos de referencia Y de la misma longitud, utilice CCA para encontrar los vectores de ponderación, W x y W y, para maximizar el coeficiente de correlación ρ entre x = X T W x e y = Y T W y. Establecer los datos de referencia para ser las señales periódicas en ciertas frecuencias de estímulo. /ftp_upload/53558/53558eq1.jpg &quot;/&gt; donde f 1, f 2, 3 f, f 4 son las frecuencias características de los cuatro estímulos visuales. </li><li> Filtrado espacialmente los datos de EEG multicanal X utilizando los coeficientes calculados CCA W x para obtener una sola dimensión x de datos filtrados, que tiene la correlación más prominente con la combinación lineal de los datos de referencia. </li><li> Calcular la PSD de los datos x filtrados espacialmente utilizando Transformada Rápida de Fourier (FFT). <img alt="Ecuación 2" src="/files/ftp_upload/53558/53558eq2.jpg" /> donde N FFT es el tamaño de la muestra de datos x, y FFT (x, N FFT) devuelve el -point Fourier discreta N FFT transformada de x. </li><li> Normalizar el PSD con respecto a su valor medio entre 3 y 30 Hz. <img alt="Ecuación 3" src="/files/ftp_upload/53558/53558eq3.jpg" /> dónde60; <img alt="Ecuación 3 Denominador" src="/files/ftp_upload/53558/53558eq3denominator.jpg" /> denota la media del espectro de potencia entre 3 y 30Hz. </li></ol></li><li> Calibrar los parámetros de clasificación de las cuatro frecuencias de estímulo. En primer lugar, observar el espectro PSD normalizado que corresponde a su objetivo de estímulo, y configurar manualmente la frecuencia con la amplitud PSD fuerte como la frecuencia característica. En base a la frecuencia característica, dividir los datos PSD normalizados en dos grupos: uno se adquiere cuando el estímulo correspondiente se selecciona como destino, y el otro se adquiere cuando se seleccionan los estímulos no objetivo. Calcular el valor medio de cada conjunto respectivamente. Determinar el umbral de la mediana de los dos valores medios para clasificar el objetivo y no objetivo establece 14. </li></ol> 3. Procesamiento Online señales cerebrales <ol><li> Abra el procesador de señal en línea como se muestra en la Figura 3, que se desarrolla basándose sobre el medio ambiente OpenViBE y las secuencias de comandos de MATLAB, en la DPC para las señales cerebrales de procesamiento en línea. </li><li> Haga doble clic en el cuadro de la señal Adquirir y Proceso, que está marcado con un círculo rojo en la figura 3, para abrir la ventana de configuración OpenViBE. Configure los parámetros de clasificación para el sujeto:. Establecer la velocidad de muestreo de 1 kHz, ajuste la longitud de tiempo para la FFT como 3 seg, y establecer las frecuencias características de acuerdo a los resultados de análisis fuera de línea, por ejemplo, 4.667, 24, 15 y 20 Hz . </li><li> Haga clic en el botón Empieza a funcionar el procesador de señal en línea, que procesa los datos en tiempo real utilizando el siguiente algoritmo en tres pasos. </li><li> En primer lugar, el algoritmo adquiere datos de EEG de los canales de Oz, O1, O2, Pz y CPZ del sistema de EEG cada 0,5 s, y extrae el segmento de datos de los últimos 3s para el procesamiento en línea. </li><li> En segundo lugar, el algoritmo procesa el segmento de datos 3-sec usando los algoritmos descritos en el paso 2.7, y calcula el tiempo real PSD para CLASIFICACción. </li><li> En tercer lugar, el algoritmo clasifica los patrones de ondas cerebrales de acuerdo con las amplitudes de PSD en las cuatro frecuencias de características. Cuando la amplitud de una frecuencia característica está por encima de un umbral dado, clasificar el estímulo parpadeo a la frecuencia correspondiente como el objetivo SSVEP. </li></ol> 4. Conexión del robot humanoide <ol><li> Pulse el botón en el pecho del robot humanoide y esperar a que se inicie. NOTA: este proceso dura aproximadamente 1 min y se completa cuando el robot dice &quot;OGNAK GNOUK&quot;, mientras que en su botón en el pecho se convierte en blanco. </li><li> Establezca su conexión Wireless Fidelity (WiFi) a la DPC 15. </li><li> Abra el controlador del robot programado en C ++ guiones visuales en la DPC. El controlador recibe los resultados de la clasificación del procesador de señal en línea a través de Virtual-realidad periférica Red de interfaz (VRPN), que se traduce en los comandos del robot, y controla los comportamientos correspondientes del humanoid robot a través de conexión inalámbrica. </li><li> Configure el controlador del robot introduciendo la dirección IP del robot de acuerdo con su conexión Wi-Fi, que define tres conjuntos de comportamientos del robot que se puede cambiar fácilmente para realizar las tres tareas diferentes, y el establecimiento de los parámetros de ejecución de estos comportamientos (por ejemplo., La velocidad al caminar o distancia) para adaptarse a la exigencia de tareas. NOTA: más detalles de estos comportamientos se describen en los pasos 5.2.1, 5.3.1, y 5.4.1. </li><li> Haga clic en el botón Generar de la plataforma Visual Studio para ejecutar el controlador del robot. </li><li> Abra el programa chorégraphe en el SPC. Haga clic en &quot;Conectar a&quot; botón para que aparezca un widget de conexión. Seleccione el robot para ser controlado en función de su dirección IP y, haga doble clic en su icono para conectarse a él. </li><li> Abra el monitor de video en el menú Ver en la barra de menú chorégraphe y mueva el monitor a la parte frontal de la interfaz de usuario para mostrar información de vídeo en directo desde la cámara del robot. </li></ol> &lt;p class = &quot;jove_title&quot;&gt; 5. La realización de experimentos de control y regulación <ol><li> Solicitar el sujeto para llevar a cabo tres tareas de control en lazo cerrado específicos dentro de diferentes entornos con el fin de evaluar el desempeño interacción cerebro-robot. NOTA: estas tareas, que son importantes en aplicaciones robóticas, ya que son útiles en la asistencia a las personas con discapacidad y de edad avanzada en su vida diaria, la necesidad de activar diferentes comportamientos del robot. </li><li> Llevar a cabo la primera tarea de control de circuito cerrado de telepresencia controlar el robot humanoide mediante señales cerebrales para caminar a través de los obstáculos y apretar un interruptor de la luz para encender la luz, como se muestra en la Figura 4. <ol><li> Para llevar a cabo la primera tarea, controlar las conductas de robots que son codificadas por los cuatro estímulos SSVEP como: dando un paso adelante con una distancia fija de 0,15 m, girar a la izquierda con un radian fijo de 0,3 rad, girando a la derecha con un radian fijo de 0,3 rad, y empujando el interruptor utilizando su mano derecha. NOTA: la CONFIGURACIÓNproceso de se describe en el paso 4.4. </li><li> Informar al tema de la tarea objetivo y los cuatro comportamientos para ser controlado. </li><li> Ejecute el controlador del robot como en los pasos 4.5-4.7, y comenzar el experimento. Dar el tema de la libertad de percibir el entorno y tomar decisiones basadas en la retroalimentación de video en vivo, y para activar los comportamientos del robot por mirando a los estímulos correspondientes. NOTA: no Instrucción o la ayuda se debe dar al sujeto a no ser en situaciones de emergencia, por ejemplo, el robot está a punto de chocar con un obstáculo.. </li></ol></li><li> Llevar a cabo la segunda tarea de telepresencia controlar el robot humanoide a través de las señales del cerebro a caminar hacia la escalera siguiendo la señal de salida, como se muestra en la Figura 5. Cuando confrontar los transeúntes, pida al sujeto para controlar el robot que decir &quot;perdón&quot; y esperar a que el transeúntes que dan paso. <ol><li> Controla los comportamientos del robot codificadas por los cuatro estímulos SSVEP como: caminar hacia adelante continuously a una velocidad de 0,05 m / seg, girando a la izquierda de forma continua a una velocidad de 0,1 rad / seg, girando a la derecha de forma continua a una velocidad de 0,1 rad / seg, y detener todos los comportamientos para caminar. </li><li> Cambie el controlador del robot a la función de control de la postura dependiente 16. NOTA: cuando el robot está caminando, esta función utiliza el cuarto de estímulo como el comando de detener los comportamientos para caminar; cuando el robot no es caminar, usa el cuarto de estímulo para controlar el robot que decir &quot;perdón&quot;. La función se implementa en los scripts C ++ mediante la detección de estado de pie del robot. </li><li> Informar al tema de la tarea objetivo y los cinco comportamientos para ser controlado. </li><li> Ejecute el controlador del robot y empezar el experimento, como se describe en el paso 5.2.3. </li></ol></li><li> Llevar a cabo la tercera tarea de telepresencia controlar el robot humanoide a caminar hacia un objetivo globo, para recogerlo y entregarlo a la mano del sujeto, como se muestra en la Figura 6. <ol><li> Controla los comportamientos del robot codificadas por los cuatro estímulos SSVEP como: dando un paso adelante con una distancia fija de 0,15 m, girar a la izquierda con un radian fijo de 0,3 rad, girando a la derecha con un radian fijo de 0,3 rad, y recoger objetos. </li><li> Active la función de control de la postura dependiente en el controlador del robot volver a utilizar el cuarto de estímulo como el mando de sofocar el objeto cuando ya ha sido recogido. </li><li> Informar al tema de la tarea objetivo y los cinco comportamientos para ser controlado. </li><li> Ejecute el controlador del robot y empezar el experimento, como se describe en el paso 5.2.3. </li></ol></li></ol>

<ol>
	<li>McFarland, D. J., Wolpaw, J. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Brain-Computer+Interface+Operation+of+Robotic+and+Prosthetic+Devices.">Brain-Computer Interface Operation of Robotic and Prosthetic Devices.</a> Computer. 41, 52-56 (2008).</li><li>Lebedev, M. A., Nicolelis, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Brain-machine+interfaces:+Past,+present+and+future.">Brain-machine interfaces: Past, present and future.</a> Trends Neruosci. 29 (9), 536-546 (2006).</li><li>Wolpaw, J. R., Birbaumer, N., McFarland, D. J., Pfurtscheller, G., Vaughan, T. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Brain-computer+interfaces+for+communication+and+control.">Brain-computer interfaces for communication and control.</a> Clin. Neurophysiol. 113, 767-791 (2002).</li><li>Bell, C. J., Shenoy, P., Chalodhorn, R., Rao, R. P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Control+of+a+humanoid+robot+by+a+noninvasive+brain-computer+interface+in+humans.">Control of a humanoid robot by a noninvasive brain-computer interface in humans.</a> J. Neural. Eng. 5, 214-220 (2008).</li><li>Li, W., Li, M., Zhao, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Control+of+humanoid+robot+via+motion-onset+visual+evoked+potentials.">Control of humanoid robot via motion-onset visual evoked potentials.</a> Front. Syst. Neurosci. 8, 247 (2014).</li><li>Regan, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Some+characteristics+of+average+steady-state+and+transient+responses+evoked+by+modulated+light.">Some characteristics of average steady-state and transient responses evoked by modulated light.</a> Electroencephalogr. Clin. Neurophysiol. 20, 238-248 (1966).</li><li>Vialatte, F. B., Maurice, M., Dauwels, J., Cichocki, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Steady-state+visually+evoked+potentials:+focus+on+essential+paradigms+and+future+perspectives.">Steady-state visually evoked potentials: focus on essential paradigms and future perspectives.</a> Prog. Neurobiol. 90, 418-438 (2010).</li><li>Bin, G., Gao, X., Wang, Y., Li, Y., Hong, B., Gao, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+high-speed+BCI+based+on+code+modulation+VEP.">A high-speed BCI based on code modulation VEP.</a> J. Neural. Eng. 8, 025015 (2011).</li><li>Sutton, S., Braren, M., Zubin, J., John, E. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Evoked-potential+correlates+of+stimulus+uncertainty.">Evoked-potential correlates of stimulus uncertainty.</a> Science. 150, 1187-1188 (1965).</li><li>Pfurtscheller, G., Lopes da Silva, H. F. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Event-related+EEG/MEG+synchronization+and+desynchronization:+basic+principles.">Event-related EEG/MEG synchronization and desynchronization: basic principles.</a> Clin. Neurophysiol. 110, 1842-1857 (1999).</li><li>Zhao, J., Meng, Q., Li, W., Li, M., Sun, F., Chen, G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=OpenViBE-based+brainwave+control+system+for+Cerebot.">OpenViBE-based brainwave control system for Cerebot.</a> Proc. IEEE International Conference on Robotics and Biomimetics. , 1169-1174 (2013).</li><li>Homan, R. W., Herman, J., Purdy, P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Cerebral+location+of+international+10-20+system+electrode+placement.">Cerebral location of international 10-20 system electrode placement.</a> Electroencephalogr. Clin. Neurophysiol. 66, 376-382 (1987).</li><li>Bin, G., Gao, X., Yan, Z., Hong, B., Gao, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=An+online+multi-channel+SSVEP-based+brain-computer+interface+using+a+canonical+correlation+analysis+method.">An online multi-channel SSVEP-based brain-computer interface using a canonical correlation analysis method.</a> J. Neural. Eng. 6, 046002 (2009).</li><li>Wang, Y., Wang, R., Gao, X., Hong, B., Gao, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+practical+VEP-based+brain-computer+interface.">A practical VEP-based brain-computer interface.</a> IEEE Trans. Neural Syst. Rehabil. Eng. 14, 234-239 (2006).</li><li>Chae, Y., Jeong, J., Jo, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Toward+brain-actuated+humanoid+robots:+asynchronous+direct+control+using+an+EEG-based+BCI.">Toward brain-actuated humanoid robots: asynchronous direct control using an EEG-based BCI.</a> IEEE T. Robot. 28, 1131-1144 (2012).</li><li>Croft, R. J., Barry, R. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Removal+of+ocular+artifact+from+the+EEG:+a+review.">Removal of ocular artifact from the EEG: a review.</a> Neurophysiol. Clin. 30, 5-19 (2000).</li><li>Hwang, H. J., Hwan Kim, D., Han, C. H., Im, C. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+new+dual-frequency+stimulation+method+to+increase+the+number+of+visual+stimuli+for+multi-class+SSVEP-based+brain-computer+interface+(BCI).">A new dual-frequency stimulation method to increase the number of visual stimuli for multi-class SSVEP-based brain-computer interface (BCI).</a> Brain Res. 1515, 66-77 (2013).</li><li>Wang, M., Daly, I., Allison, B., Jin, J., Zhang, Y., Chen, L., Wang, X. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+new+hybrid+BCI+paradigm+based+on+P300+and+SSVEP.">A new hybrid BCI paradigm based on P300 and SSVEP.</a> J Neurosci Methods. 244, 16-25 (2015).</li><li>Allison, B. Z., Jin, J., Zhang, Y., Wang, X. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+four-choice+hybrid+P300+SSVEP+BCI+for+improved+accuracy.">A four-choice hybrid P300 SSVEP BCI for improved accuracy.</a> Brain-Computer Interfaces. 1, 17-26 (2014).</li><li>Pan, J. H., Xie, Q., Herman, Y., Wang, F., Di, H., Laureys, S., Yu, R., Li, Y. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Detecting+awareness+in+patients+with+disorders+of+consciousness+using+a+hybrid+brain-computer+interface.">Detecting awareness in patients with disorders of consciousness using a hybrid brain-computer interface.</a> J. Neural. Eng. 11, 056007 (2014).</li><li>Li, J., Ji, H., Cao, L., Zhang, D., Gu, R., Xia, B., Wu, Q. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Evaluation+and+application+of+a+hybrid+brain+computer+interface+for+real+wheelchair+parallel+control+with+multi-degree+of+freedom.">Evaluation and application of a hybrid brain computer interface for real wheelchair parallel control with multi-degree of freedom.</a> Int J Neural Syst. 24, 1450014-14 (2014).</li><li>Zhao, J., Meng, Q., Li, W., Li, M., Chen, G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=SSVEP-based+hierarchical+architecture+for+control+of+a+humanoid+robot+with+mind.">SSVEP-based hierarchical architecture for control of a humanoid robot with mind.</a> Proc. 11th World Congress on Intelligent Control and Automation. , 2401-2406 (2014).</li><li>Zhu, D., Bieger, J., Molina, G. G., Aarts, R. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+survey+of+stimulation+methods+used+in+SSVEP-based+BCIs.">A survey of stimulation methods used in SSVEP-based BCIs.</a> Comput Intell Neurosci. 2010, 1-12 (2010).</li><li>Muller-Putz, G. R., Scherer, R., Brauneis, C., Pfurtscheller, G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Steady-state+visual+evoked+potential+(SSVEP)-based+communication:+impact+of+harmonic+frequency+components.">Steady-state visual evoked potential (SSVEP)-based communication: impact of harmonic frequency components.</a> J Neural Eng. 2, 123-130 (2005).</li></ol>

The authors have nothing to disclose.

Este trabajo presenta un procedimiento experimental basado en SSVEP para establecer el sistema de interacción cerebro-robot con robots humanoides mediante la integración de múltiples programas de software. Debido a que la intención humana se percibe mediante la interpretación de las señales de EEG en tiempo real, es crítico para verificar las conexiones de electrodo y cualidades señal del EEG antes de realizar el experimento. Si las señales adquiridas de todos los electrodos son de cualidades pobres, es necesar...

Cerebro-Robot Interaction (BRI), que proporciona una innovadora vía de comunicación entre el ser humano y un dispositivo robótico a través de las señales del cerebro, es posible en ayudar a las personas con discapacidad en su vida diaria 1,2. Una variedad de métodos son capaces de adquirir las señales del cerebro, ya sea invasiva o no invasiva, como electrocorticografía (ECoG), electroencefalograma (EEG), la resonancia magnética funcional (fMRI), etc. El método no invasivo más utilizado para la construcción de la sistema BRI es adquirir señales EEG de electrodos colocados en el cuero cabelludo. Este método es barato, fácil de usar, y proporciona una resolución temporal aceptable 3. Entre una variedad de dispositivos robóticos, los robots humanoides son avanzados, ya que se crean para imitar algunas de las mismas tareas físicas y mentales que los seres humanos se someten a diario. BRI con un robot humanoide jugará un papel importante en la asistencia a los enfermos y ancianos, así como la realización de trabajos insalubres o peligrosos. Pero el controlde un robot humanoide a través del sistema BRI es muy difícil, ya que se desarrolla el robot humanoide con el movimiento de todo el cuerpo para realizar tareas complejas, tales como la asistencia personal 4, 5. Steady-State potencial evocado visual (SSVEP) es un tipo de señal cerebral evocada por la modulación del estímulo visual a una frecuencia dada 6. Contiene sinusoides a las frecuencias fundamentales y armónicas de estímulo parpadeo, y destacada aparece en toda la corteza visual en la región occipital del cuero cabelludo 7. La razón para elegir las señales SSVEP es que el sistema BRI basado en SSVEP rendimientos relativamente alta tasa de transferencia de información y requiere menos formación 8. Otros tipos de ondas cerebrales, como los potenciales evocados (ERPs) 9 o motor imaginería (MI) Potenciales 10, también puede ser embebido en este procedimiento experimental. Nuestro procedimiento para la interacción cerebro-robot con humanoiderobots se basa en Cerebot - una plataforma robot humanoide con control mental - que consiste en un sistema de adquisición de datos de EEG y un robot humanoide 11. El sistema EEG es capaz de registrar, pre-proceso y señales bio-potencial de visualización adquiridos por varios tipos de electrodos. Proporciona analógico múltiples E / S y E / S digitales y es capaz de grabar hasta 128 canales de señal simultáneamente a una velocidad de muestreo de 30 kHz con una resolución de 16 bits. Sus kits de desarrollo de software en C ++ y MATLAB son fáciles para los usuarios diseñar los procedimientos experimentales. El robot humanoide tiene 25 grados de libertad y está equipado con varios sensores, incluyendo 2 cámaras, 4 micrófonos, 2 telémetros de sonar, 2 IR emisores y receptores, 1 tablero inercial, 9 sensores táctiles, y 8 sensores de presión. Proporciona chorégraphe y C ++ SDK para la creación y edición de los movimientos y comportamientos de robots interactivos. El objetivo general de este método es establecer un proce experimental basada en SSVEPmiento mediante la integración de múltiples programas de software, como OpenViBE, Choregraph, software Central, así como los programas desarrollados por el usuario escritas en C ++ y MATLAB, para que el estudio de la interacción cerebro-robot con robots humanoides 11. La figura 1 muestra la estructura del sistema. El ordenador presentación del estímulo específico (SPC) muestra la interfaz de usuario para proporcionar al sujeto con estímulos visuales, instrucciones y evaluaciones ambientales. El equipo de procesamiento de datos dedicada (DPC) corre el Registrador de Datos y el analizador de datos sin conexión en el proceso de capacitación fuera de línea, y ejecuta el procesador de señal en línea y el controlador del robot para el control en línea del robot humanoide. En comparación con otros sistemas de control basados ​​en SSVEP, nuestro sistema es más confiable, más flexible, y sobre todo más conveniente para ser reutilizado y actualizado a medida que se desarrolla mediante la integración de una serie de paquetes de software estandarizados, como OpenViBE, Choregraph, software central, y módulos escritos en C ++y MATLAB. El siguiente procedimiento fue revisado y aprobado por Tianjin universidad médica comité de ética del hospital general y todos los sujetos dieron su consentimiento por escrito.

<table border="0" cellpadding="0" cellspacing="0" width="748">
	<tbody>
		<tr height="21">
			<td height="21" style="height:21px;width:284px;">Cerebus EEG Data Acquisition System</td>
			<td style="width:179px;">Blackrock Microsystems</td>
			<td style="width:119px;">4176-9967</td>
			<td style="width:167px;"></td>
		</tr>
		<tr height="21">
			<td height="21" style="height:21px;width:284px;">NAO humanoid robot</td>
			<td style="width:179px;">Aldebaran Robotics</td>
			<td style="width:119px;">H25</td>
			<td></td>
		</tr>
		<tr height="21">
			<td height="21" style="height:21px;width:284px;">EEG cap</td>
			<td style="width:179px;">Neuroscan</td>
			<td style="width:119px;">8732</td>
			<td></td>
		</tr>
		<tr height="21">
			<td height="21" style="height:21px;width:284px;">Ten20 Conductive gel</td>
			<td style="width:179px;">Weaver and company</td>
			<td style="width:119px;">10-20-8</td>
			<td></td>
		</tr>
	</tbody>
</table>

ssvep-based experimental procedure for brain-robot interaction with humanoid robots

Brain-Robot Interaction (BRI), which provides an innovative communication pathway between human and a robotic device via brain signals, is prospective in helping the disabled in their daily lives. The overall goal of our method is to establish an SSVEP-based experimental procedure by integrating multiple software programs, such as OpenViBE, Choregraph, and Central software as well as user developed programs written in C++ and MATLAB, to enable the study of brain-robot interaction with humanoid robots.
This is achieved by first placing EEG electrodes on a human subject to measure the brain responses through an EEG data acquisition system. A user interface is used to elicit SSVEP responses and to display video feedback in the closed-loop control experiments. The second step is to record the EEG signals of first-time subjects, to analyze their SSVEP features offline, and to train the classifier for each subject. Next, the Online Signal Processor and the Robot Controller are configured for the online control of a humanoid robot. As the final step, the subject completes three specific closed-loop control experiments within different environments to evaluate the brain-robot interaction performance.
The advantage of this approach is its reliability and flexibility because it is developed by integrating multiple software programs. The results show that using this approach, the subject is capable of interacting with the humanoid robot via brain signals. This allows the mind-controlled humanoid robot to perform typical tasks that are popular in robotic research and are helpful in assisting the disabled.

Los resultados aquí presentados se obtuvieron a partir de un sujeto masculino que tiene corregida a la versión normal. La Figura 7 muestra el procedimiento de procesamiento de datos de EEG, incluyendo la extracción de una época de datos multicanal (Figura 7A), filtrando espacialmente los datos utilizando coeficientes de CCA (Figura 7B) , y calculando el PSD normalizado (Figura 7C). <p class="jove_content" fo:keep...

Watch this Scientific Journal Video about SSVEP-based Experimental Procedure for Brain-Robot Interaction with Humanoid Robots at JoVE.com

SSVEP-based Experimental Procedure for Brain-Robot Interaction with Humanoid Robots

The overall goal of this method is to establish an SSVEP-based experimental procedure by integrating multiple software programs to enable the study of brain-robot interaction with humanoid robots, which is prospective in assisting the sick and elderly as well as performing unsanitary or dangerous jobs.

SSVEP basada Procedimiento Experimental para la interacción cerebro-Robot con Humanoid Robots

Brain-Robot Interaction (BRI), which provides an innovative communication pathway between human and a robotic device via brain signals, is prospective in ...

ssvep-based-experimental-procedure-for-brain-robot-interaction-with

Research

Education

JoVE Core

JoVE Journal

Electrical Engineering

Engineering

Unit 1

Introduction to Control Systems

SCIENTISTS IN ACTION

13.0K vistas.  Tianjin University. The overall goal of this method is to establish an SSVEP-based experimental procedure by integrating multiple software programs to enable the study of brain-robot interaction with humanoid robots, which is prospective in assisting the sick and elderly as well as performing unsanitary or dangerous jobs.