Name: fully automated leg tracking in freely moving insects using feature learning leg segmentation and tracking (fllit)
Uploaded: 2020-04-23T15:00:00
Duration: 8 min 4 s
Description: Watch this Scientific Journal Video about Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking FLLIT at JoVE.com

Os autores gostariam de agradecer a Moumita Chatterjee e Alice Liu pelo apoio técnico, e ao Bloomington Drosophila Stock Centre (Indiana, EUA) por disponibilizar as cepas de Drosophila usadas neste trabalho. Este trabalho foi apoiado pelo Instituto de Biologia Molecular e Celular, em Cingapura; o Instituto de Bioinformática, Cingapura; a Organização do Conselho Conjunto da Agência de Tecnologia da Ciência e Pesquisa (bolsa número 15302FG149 à SA e LC); o Programa De Pesquisa Clínica (Doença de Parkinson) administrado pelo Conselho Nacional de Pesquisa Médica do Ministério da Saúde de Cingapura (número de subvenção NMRC/TCR/013-NNI/2014 para SA), a Universidade de Alberta (bolsa de startup para LC) e o Conselho de Pesquisa de Ciências Naturais e Engenharia do Canadá (NSERC) Discovery Grant (número de subvenção RGPIN-2019-04575 à LC).

1. Configuração do sistema
<ol><li>Certifique-se de que a estação de gravação tenha uma câmera de alta velocidade e um palco sobre ela para segurar a câmara da arena (Figura 1). Ajuste a câmera para gravar a um mínimo de 250 quadros por segundo (fps), com uma velocidade de obturador adequadamente rápida (neste caso, a gravação é realizada a 1000 fps com uma velocidade de obturador de 1 ms). NOTA: Verifique se o vídeo é adequado para rastreamento, garantindo que haja um desfoque mínimo ou nenhum de movimento das pernas em movimento em todos os quadros. Se a perna móvel estiver tão desfocada que um anotador humano não possa rastreá-la, então a velocidade de gravação da câmera e/ou a velocidade do obturador devem ser aumentadas.</li>
	<li>Coloque as luzes LED infravermelhas na parte superior do palco com um difusor (folha translúcida) entre a câmera e a amostra(Figura 1A,B).</li>
	<li>Faça a câmara de gravação cortando uma folha de acrílico de 1,6 mm de espessura. Neste experimento, use um campo de visão de 11 mm x 11 mm. Coloque a câmara entre duas lâminas de vidro(Figura 1C).</li>
</ol>2. Preparação de moscas para gravação
<ol><li>Transfira as moscas para serem gravadas em um novo frasco de comida 24h antes da gravação. NOTA: Não use CO2 (geralmente usado para anestesiar as moscas na primeira coleta) nas moscas menos de 24 h antes da gravação.</li>
	<li>Cerca de 40 min antes de gravar, transfira as moscas para frascos vazios e mantenha no gelo por 5-7 min.</li>
	<li>Enquanto isso, limpe a arena e limpe os toboáguas com água e uma limpeza. NOTA: Não use etanol para limpar as câmaras e os slides.</li>
	<li>Prepare a câmara de gravação. Fixar um dos slides de vidro microscópico abaixo da câmara com fita adesiva.</li>
	<li>Quando as moscas forem anestesiadas no gelo, transfira uma mosca em cada câmara usando um pincel limpo. NOTA: Tanto as moscas masculinas quanto as fêmeas podem ser usadas nesta configuração, e, na medida do possível, moscas de ambos os sexos devem ser analisadas para evitar viés específico do sexo.</li>
	<li>Fixar a câmara com outro slide de vidro microscópico com fita(Figura 1C).</li>
	<li>Mantenha as moscas câmaradas à temperatura ambiente por 15 a 20 min para aclimatação.</li>
</ol>3. Geração de vídeos para análise FLLIT
NOTA: Esta etapa é específica para a câmera de vídeo usada. Neste caso, uma câmera de vídeo comercialmente disponível é usada (ver Tabela de Materiais).
<ol><li>Ligue a fonte de energia. Aguarde que o LED verde para alimentação e o LED laranja para que a conexão da interface ethernet se estabilize. Ligue a energia do LED infravermelho. Certifique-se de que a tensão permanece em 12,5 V.</li>
	<li>Abra o aplicativo Viewer no sistema de computador conectado.</li>
	<li>Altere a taxa de quadros de gravação para 1000 fps. Defina a velocidade do obturador para 1/1000 s (1 ms).</li>
	<li>Coloque a câmara com a mosca na arena de gravação e selecione o botão LIVE. Certifique-se de que a câmera está focada nas pontas das pernas quando a mosca estiver andando ereto no chão da câmara; as pontas das pernas devem estar em foco nítido.</li>
	<li>Clique em Record ( Figura2).</li>
	<li>Registre a mosca andando, garantindo que: A mosca caminhou em uma trajetória relativamente reta sem tocar a borda da arena. A mosca andou pelo menos três passos por perna. A mosca não faz pausa durante a caminhada. A distância percorrido equivale a pelo menos um comprimento do corpo. NOTA: Ter o fundo subtraído de forma limpa é fundamental para uma segmentação precisa. O algoritmo automatizado de subtração de fundo empregado pelo FLLIT requer que a mosca com imagem mova pelo menos um comprimento do corpo à distância.</li>
	<li>Clique em Rec Feito para parar a gravação(Figura 2).</li>
	<li>Corte o vídeo para garantir que a gravação engloba apenas uma caminhada reta da mosca (como descrito na Etapa 3.6).</li>
	<li>Clique em Salvar (Figura 2). Salve os arquivos no formato '.mraw' ou '.tiff' nas respectivas pastas. NOTA: O formato '.mraw' dá maior flexibilidade para alterar o nome do arquivo (se necessário) e para o armazenamento de vídeos em comparação com o formato de arquivo '.tiff'.</li>
</ol>4. Instalação do programa FLLIT
NOTA: As instruções atualizadas podem ser encontradas em: https://github.com/BII-wushuang/FLLIT/blob/master/Compiled/Readme.pdf
<ol><li>Baixe FLLIT em qualquer sistema operacional<ol>
<li>Baixe FLLIT no seguinte link do Github: https://github.com/BII-wushuang/FLLIT/archive/master.zip. Extrair o conteúdo do arquivo zip.</li>
		<li>Baixe os conjuntos de dados de exemplo do seguinte link do Google Drive: https://bit.ly/2EibvNY. Crie uma pasta Dados em FLLIT-master/Compilado e coloque pastas de conjunto de dados neste diretório de dados.</li>
	</ol>
</li>
	<li>Instale o FLLIT no Ubuntu<ol>
<li>Navegue até o diretório FLLIT/Compilado.</li>
		<li>Clique com o botão direito do mouse e selecione Abrir em Terminal.</li>
		<li>Emita o seguinte comando para baixar e instalar as bibliotecas de tempo de execução do MATLAB para $HOME/MCR: bash MCR_2016a.sh
</li>
		<li>Após a instalação das bibliotecas de tempo de execução do MATLAB ter sido concluída, emita o seguinte comando para garantir que os direitos executáveis sejam concedidos ao FLLIT: chmod +x FLLIT
</li>
		<li>Abra um terminal no diretório FLLIT/Compilado e emita o seguinte comando para executar o FLLIT: bash run_FLLIT.sh $HOME/MCR/v901
</li>
	</ol>
</li>
	<li>Instale o FLLIT no Windows<ol>
<li>Para 7 e 10ª Home Edition, instale o Docker Toolbox em: (https://github.com/docker/toolbox/releases/download/v19.03.1/DockerToolbox-19.03.1.exe).</li>
		<li>Para windows 10 Pro ou Enterprise Edition, instale o Docker Desktop para Windows em: (https://download.docker.com/win/stable/Docker\%20Desktop\%20Installer.exe).</li>
		<li>Para habilitar a execução de aplicativos de GUI em um contêiner Docker no Windows, instale primeiro o vcxsrv (https://sourceforge.net/projects/vcxsrv). Ao iniciar o VcXsrv, configure as configurações como na Figura S1. NOTA: Certifique-se de que docker e vcxsrv estão funcionando antes de iniciar o FLLIT.</li>
		<li>Clique duas vezes em FLLIT.bat para executar FLLIT. NOTA: Ao executar pela primeira vez, levará algum tempo para puxar a imagem do Docker do Docker Hub.</li>
	</ol>
</li>
	<li>Instale o FLLIT no MacOS<ol>
<li>Baixe Docker Desktop para MacOS em https://download.docker.com/mac/stable/Docker.dmg
</li>
		<li>Instale o socat abrindo um terminal e emitindo o seguinte comando: preparar socat instalar
</li>
		<li>Comece com: socat TCP-LISTEN:6000,reuseaddr,fork UNIX-CLIENT:\"$DISPLAY\" e reisown
</li>
		<li>Instale o XQuartz (https://www.xquartz.org) para permitir a execução de aplicativos de GUI em um contêiner Docker no MacOS. Inicie o XQuartz e altere as preferências verificando as conexões Permitir de clientes de rede na guia Segurança, conforme mostrado na Figura S2. NOTA: Certifique-se de que Docker, socat e XQuartz estejam todos funcionando antes de iniciar o FLLIT.</li>
		<li>Abra um terminal no diretório FLLIT/Compilado e execute o FLLIT com o seguinte comando: bash FLLIT_Mac.sh NOTA: Ao executar pela primeira vez, levará algum tempo para puxar a imagem do Docker do Docker Hub.</li>
	</ol>
</li>
</ol>5. Executando o FLLIT para rastreamento automatizado de pernas
<ol><li>Segmentação<ol>
<li>Converta o vídeo em arquivos TIFF individuais e copie na pasta de dados FLLIT.</li>
		<li>Execute o FLLIT (No Ubuntu, clique com o botão direito do mouse para abrir o FLLIT no Terminal).</li>
		<li>Selecione a pasta que contém as imagens TIFF quadro a quadro do vídeo a ser rastreada e clique no botão Adicionar.</li>
		<li>Na janela pop-up escolha 0 para realizar apenas segmentação de pernas, ou 1 para incluir o rastreamento da perna com segmentação da perna.</li>
		<li>Clique em Feito para iniciar a segmentação e o rastreamento do vídeo selecionado.</li>
	</ol></li>
	<li>Rastreamento<ol>
<li>Para verificar a precisão do rastreamento e realizar correções de erros (se houver), clique em Selecionar pasta de dados. Selecione a pasta a ser rastreada e clique em Abrir.</li>
		<li>Clique em Exibir rastreamento. NOTA: Verifique se o modo visualizador permanece selecionado enquanto visualiza as posições das pernas rastreadas. Caso contrário, quaisquer correções anteriores feitas serão sobre-montadas.</li>
		<li>Verifique a rotulagem de todas as pernas no primeiro quadro NOTA: Uma vez que as etiquetas da perna são colocadas de acordo com a posição na tela, se a mosca estiver andando ereto, o lado direito da mosca é rotulado como L1 (perna traseira), L2 (perna média), L3 (perna traseira) e o lado esquerdo da mosca é rotulado como R1 (perna-de-perna), R2 (perna média), R3 (perna traseira), respectivamente(Figura 3). Se a mosca estiver andando de cabeça para baixo, as etiquetas das pernas serão corretamente anotadas.</li>
		<li>Se uma perna estiver rotulada erroneamente e uma correção for necessária, clique em Pausa de visualização,seguida por Adjust Forecast (Figura 3).</li>
		<li>Do painel direito cabeça de Perna para Ajustar,selecione a perna que requer correção.</li>
		<li>Clique duas vezes na posição correta para esta perna na janela de imagem, clique em Salvare, em seguida, Saia. Para ir ao quadro anterior ou ao quadro subseqüente, clique em Pausa de visualização seguido pelos botões forward e backward e I> respectivamente(Figura 3).</li>
		<li>Para corrigir quaisquer vídeos rastreados incorretamente, abra a pasta Dados do vídeo a ser rerastreado e selecione Iniciar rastreamento manualmente.</li>
		<li>Clique no botão Rastreamento, que mudará sua etiqueta para Inicial.</li>
		<li>Clique em Ajustar a previsão e corrija as etiquetas das pernas clicando duas vezes em cada ponta da perna e, em seguida, atribuindo-a com a etiqueta correta da perna. Clique em Salvar e Sair.</li>
		<li>Clique em Retomar para iniciar o rastreamento.</li>
	</ol></li>
	<li>Processamento de dados e geração de vídeo<ol>
<li>Clique em Data Process. Na janela popup, digite o número de quadros por segundo (fps) em que os vídeos foram gravados (por exemplo, 1.000 fps).</li>
		<li>Use a seguinte equação para calcular o campo de visão real do vídeo capturado para que os parâmetros de marcha possam ser medidos em milímetros: <img alt="Equation 1" src="/files/ftp_upload/61012/61012eq1.jpg"> NOTA: Por exemplo, se o tamanho real da câmara for de 7 mm, a largura do quadro da imagem é de 137 mm, a largura da câmara no quadro de imagem na tela do computador é de 81 mm, e a largura do campo de visão foi de 11,83 mm(Figura S3).</li>
		<li>Para ver os resultados de rastreamento, vá para a pasta Rastreamento na pasta Resultados.</li>
		<li>Para gerar um vídeo da mosca rastreada, selecione Fazer vídeo. O vídeo será salvo na mesma pasta Resultados que os dados de vídeo originais analisados. NOTA: Os quadros Iniciar (primeiro) e Final (último) do vídeo podem ser selecionados.</li>
	</ol></li>
	<li>Normalização ao comprimento do corpo de cada mosca. NOTA: Como cada mosca pode ser ligeiramente diferente em tamanho, certos parâmetros de marcha devem ser normalizados ao comprimento do corpo de cada mosca para facilitar as comparações (por exemplo, o comprimento do passo pode ser maior em moscas maiores e menor em moscas menores).<ol>
<li>Abra três imagens esstill do vídeo de cada mosca (geralmente primeiro, meio e último quadros) usando software de imagem.</li>
		<li>Amplie cada quadro de imagem para 800% e rotule o pixel anterior mais alto da cabeça e posterior-mais pixel do abdômen na linha média usando uma cor brilhante (por exemplo, amarelo).</li>
		<li>Abra as imagens rotuladas no ImageJ.</li>
		<li>Use Definir escala para inserir a escala de acordo: Definir distância em pixels: 512; Distância conhecida: Campo de visão Real (mm) medido na etapa 5.3.2.; Unidade de comprimento: mm.</li>
		<li>Desenhe uma linha reta entre os pixels da ponta da cabeça e do abdômen rotulados para obter o comprimento do corpo.</li>
		<li>Abrir escala de conjunto novamente para obter o valor em uma distância conhecida, que é o comprimento do corpo em mm.</li>
		<li>Tome uma média do comprimento determinado em cada uma das três imagens para obter o tamanho médio do corpo em mm.</li>
	</ol></li>
</ol>

<ol>
	<li>Wu, S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Fully+automated+leg+tracking+of+Drosophila+neurodegeneration+models+reveals+distinct+conserved+movement+signatures.">Fully automated leg tracking of Drosophila neurodegeneration models reveals distinct conserved movement signatures.</a> PLoS Biology. 17 (6), 3000346 (2019).</li><li>Mathis, A., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=DeepLabCut:+markerless+pose+estimation+of+user-defined+body+parts+with+deep+learning.">DeepLabCut: markerless pose estimation of user-defined body parts with deep learning.</a> Nature Neuroscience. 19, 1281-1289 (2018).</li><li>Pereira, T. D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Fast+animal+pose+estimation+using+deep+neural+networks.">Fast animal pose estimation using deep neural networks.</a> Nature Methods. 16 (1), 117-125 (2019).</li><li>Machado, A. S., Darmohray, D. M., Fayad, J., Marques, H. G., Carey, M. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+quantitative+framework+for+whole-body+coordination+reveals+specific+deficits+in+freely+walking+ataxic+mice.">A quantitative framework for whole-body coordination reveals specific deficits in freely walking ataxic mice.</a> eLife. 4, (2015).</li><li>Lu, B., Vogel, H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Drosophila+models+of+neurodegenerative+diseases.">Drosophila models of neurodegenerative diseases.</a> Annual Reviews in Pathology. 4, 315-342 (2009).</li><li>McGurk, L., Berson, A., Bonini, N. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Drosophila+as+an+In+Vivo+Model+for+Human+Neurodegenerative+Disease.">Drosophila as an In Vivo Model for Human Neurodegenerative Disease.</a> Genetics. 201 (2), 377-402 (2015).</li><li>Dionne, H., Hibbard, K., Cavallaro, A., Kao, J. -. C., Rubin, G. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Genetic+reagents+for+making+split-GAL4+lines+in+Drosophila.">Genetic reagents for making split-GAL4 lines in Drosophila.</a> bioRxiv. , (2017).</li><li>Cande, J., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Optogenetic+dissection+of+descending+behavioral+control+in+Drosophila.">Optogenetic dissection of descending behavioral control in Drosophila.</a> eLife. 7, (2018).</li><li>Nern, A., Pfeiffer, B. D., Rubin, G. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Optimized+tools+for+multicolor+stochastic+labeling+reveal+diverse+stereotyped+cell+arrangements+in+the+fly+visual+system.">Optimized tools for multicolor stochastic labeling reveal diverse stereotyped cell arrangements in the fly visual system.</a> Proceedings of the National Academy of Sciences of the United States of America. 112 (22), 2967-2976 (2015).</li><li>Xie, T., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+Genetic+Toolkit+for+Dissecting+Dopamine+Circuit+Function+in+Drosophila.">A Genetic Toolkit for Dissecting Dopamine Circuit Function in Drosophila.</a> Cell Reports. 23 (2), 652-665 (2018).</li><li>Warrick, J. M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Ataxin-3+suppresses+polyglutamine+neurodegeneration+in+Drosophila+by+a+ubiquitin-associated+mechanism.">Ataxin-3 suppresses polyglutamine neurodegeneration in Drosophila by a ubiquitin-associated mechanism.</a> Molecular Cell. 18 (1), 37-48 (2005).</li><li>Ebersbach, G., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Comparative+analysis+of+gait+in+Parkinson's+disease,+cerebellar+ataxia+and+subcortical+arteriosclerotic+encephalopathy.">Comparative analysis of gait in Parkinson's disease, cerebellar ataxia and subcortical arteriosclerotic encephalopathy.</a> Brain. 122 (7), 1349-1355 (1999).</li><li>Stolze, H., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Typical+features+of+cerebellar+ataxic+gait.">Typical features of cerebellar ataxic gait.</a> Journal of Neurology, Neurosurgery and Psychiatry. 73 (3), 310-312 (2002).</li><li>Mendes, C. S., Bartos, I., Akay, T., Marka, S., Mann, R. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Quantification+of+gait+parameters+in+freely+walking+wild+type+and+sensory+deprived+Drosophila+melanogaster.">Quantification of gait parameters in freely walking wild type and sensory deprived Drosophila melanogaster.</a> eLife. 2, 00231 (2013).</li><li>DeAngelis, B. D., Zavatone-Veth, J. A., Clark, D. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+manifold+structure+of+limb+coordination+in+walking+Drosophila.">The manifold structure of limb coordination in walking Drosophila.</a> eLife. 8, (2019).</li><li>Gunel, S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=DeepFly3D,+a+deep+learning-based+approach+for+3D+limb+and+appendage+tracking+in+tethered,+adult+Drosophila.">DeepFly3D, a deep learning-based approach for 3D limb and appendage tracking in tethered, adult Drosophila.</a> eLife. 8, (2019).</li><li>Isakov, A., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Recovery+of+locomotion+after+injury+in+Drosophila+melanogaster+depends+on+proprioception.">Recovery of locomotion after injury in Drosophila melanogaster depends on proprioception.</a> The Journal of Experimental Biology. 219, 1760-1771 (2016).</li><li>Aw, S. S., Lim, I. K. H., Tang, M. X. M., Cohen, S. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+Glio-Protective+Role+of+mir-263a+by+Tuning+Sensitivity+to+Glutamate.">A Glio-Protective Role of mir-263a by Tuning Sensitivity to Glutamate.</a> Cell Reports. 19 (9), 1783-1793 (2017).</li><li>Eberl, D. F., Duyk, G. M., Perrimon, N. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+genetic+screen+for+mutations+that+disrupt+an+auditory+response+in+Drosophila+melanogaster.">A genetic screen for mutations that disrupt an auditory response in Drosophila melanogaster.</a> Proceedings of the National Academy of Sciences of the United States of America. 94 (26), 14837-14842 (1997).</li></ol>

Os autores não têm nada para revelar.

Neste manuscrito, descrevemos em detalhes as etapas envolvidas no uso do FLLIT, um programa automatizado de aprendizagem de máquina1,para analisar a marcha em Drosophilalivremente ambulante . Após o rastreamento e análise de dados, o FLLIT gera automaticamente dados brutos para as informações posicionais das garras do corpo e das pernas, produzindo vinte recursos de corpo e marcha, bem como um vídeo da mosca rastreada para permitir a visualização da marcha.
Existem agora uma série de métodos para o rastreamento do movimento das pernas de Drosophila e outros animais1,2,3,4,14,15,16, dando aos pesquisadores uma ampla gama de opções dependendo dos objetivos do experimento. Algumas delas são abordagens baseadas em impressão de pé, que são altamente precisas, mas que relatam apenas pontos de contato com a superfície de detecção4,14. Por outro lado, abordagens recentes de deep learning2,3,16 são altamente versáteis, permitindo a análise de comportamentos que requerem o rastreamento de articulações da perna e outras partes do corpo em qualquer animal, com a ressalva de que os algoritmos precisam ser treinados primeiro com conjuntos de dados anotados pelo usuário. Um terceiro tipo de abordagem usa morfologia ou métodos baseados em contraste de imagem1,,15,17 para encontrar o contorno de cada perna para identificar posições de garra. Em geral, esses métodos lidam mal com comportamentos em que as pernas se cruzam (por exemplo, durante o preparo). FLLIT combina a segunda e terceira abordagens, usando parâmetros morfológicos para treinar um algoritmo de impulso para segmentação de pernas. Isso permite que o FLLIT contorne a tarefa trabalhosa da anotação do usuário para gerar o conjunto de dados de treinamento, ao mesmo tempo em que aumenta a precisão usando aprendizado de máquina. Melhorias futuras no FLLIT terão que lidar com casos em que as pernas se cruzam, para permitir a análise de comportamentos mais complexos.
FLLIT é robusto para pequenas alterações na iluminação, resolução de gravação e velocidade do quadro1. No entanto, a velocidade de quadro dos vídeos gravados não deve cair abaixo de 250 fps, e FLLIT funciona de forma ideal para vídeos gravados a 1000 fps. Se houver desfoque de movimento nas imagens, de tal forma que é desafiador para um anotador humano identificar a posição da perna, o FLLIT não será capaz de identificar com precisão as pontas das pernas nesses quadros. Diante disso, é essencial que a câmera seja focada bruscamente nas pontas das pernas. Para evitar artefatos de segmentação, a arena deve ser completamente limpa e não deve ser movida durante a gravação. Para uma subtração de fundo precisa e segmentação limpa, a mosca deve mover pelo menos um comprimento do corpo durante a gravação, sem pausar. Após a segmentação automática e o rastreamento da rotulagem de todas as pernas devem ser verificados. Se a marcha voadora não for rastreada ou rastreada de forma errada, o arquivo deve ser rerastreado manualmente usando a opção Rastreamento iniciado manualmente (etapa 5.2.7 – 5.2.10).
Doenças neurodegenerativas e distúrbios de movimento são cada vez mais prevalentes em nossas sociedades envelhecidas. Modelos de neurodegeneração de moscas têm sido estudados por mais de duas décadas, durante os quais foram feitos avanços em relação aos aspectos moleculares e celulares da fisiopatologia da doença. No entanto, as consequências comportamentais específicas da doença têm sido tecnicamente difíceis de avaliar. Por exemplo, embora tenham sido feitos relatos de movimentos trêmulos na mosca18,19, estes não tinham sido estudados quantitativamente até recentemente1. O ensaio de escalada tem sido uma medida útil e quantitativa, mas relativamente grosseira6. Esse déficit técnico também dificultou a análise de movimento de alta resolução em outros modelos animais. O advento de novas ferramentas para a análise comportamental, portanto, tem prometido rejuvenescer o campo dos distúrbios de movimento para permitir que os pesquisadores estudem como mecanismos moleculares e celulares de doenças neuromusculares levam a desfechos comportamentais específicos em modelos animais. Neste artigo e em nosso trabalho anterior1,mostramos usando FLLIT que modelos de mosca sca3 exibem uma marcha ataxic hipercinética, enquanto os modelos de moscas pd exibem uma marcha rígida hipocinética, recapitulando marcas de movimento das respectivas doenças humanas1. A análise da marcha também nos permitiu identificar populações neuronais distintas subjacentes a disfunções específicas de movimento. Daqui para frente, a análise detalhada dos movimentos, combinada com as poderosas ferramentas de imagem e funcionais disponíveis na mosca, nos permitirá obter uma nova visão sobre os mecanismos de disfunção locomotor, iluminando nossa compreensão de doenças neurodegenerativas em relação aos mecanismos de circuito.
O FLLIT deve ser amplamente aplicável ao estudo da marcha em outros pequenos artrópodes, pois foi demonstrado anteriormente ser altamente preciso para o rastreamento dos movimentos das pernas das aranhas1. Enquanto focamos aqui no uso de fenotipagem de movimento detalhado para quantificar a marcha patogênica e seus circuitos subjacentes, os avanços no rastreamento de movimentos já revolucionaram, e terão impacto contínuo sobre a compreensão da coordenação e marcha de caminhada normal e seus circuitos subjacentes, especialmente em vários ramos da árvore evolutiva.

Nas últimas décadas, doenças neurodegenerativas e distúrbios de movimento têm se tornado mais prevalentes em nossas populações envelhecidas. Embora nossa compreensão de muitas doenças neurodegenerativas tenha avançado a nível molecular e celular, características fundamentais do circuito neuronal afetado permanecem mal compreendidas. Recentemente desenvolvidas ferramentas de rastreamento comportamental1,2,3,4 agora permitem estudar anormalidades de movimento em modelos de doençaanimal, a fim de identificar a desregulação molecular, celular e de circuito subjacente à doença.
As vias moleculares envolvidas em muitas doenças neurodegenerativas são conservadas na mosca-da-fruta Drosophila melanogaster, e os modelos da doença de Drosophila ajudaram a elucidar mecanismos fundamentais subjacentes à neurodegeneração5,6. Recentemente, mostramos que os modelos de mosca susceptíveis de Doença de Parkinson (DP) e ataxia spinocerebelar 3 (SCA3) exibem assinaturas de marcha distintas e conservadas que se assemelham às das respectivas doenças humanas1,demonstrando que o modelo de mosca pode ser usado para entender mecanismos de circuito subjacentes à disfunção do movimento em distúrbios de movimento específicos. O rico e continuamente crescente arsenal de ferramentas no modelo de mosca para manipulação e visualização direcionada de neurônios no único gene e nível de célula única7,,8,9,10 faz da mosca um modelo ideal para sondar a relação entre caminhos da doença, circuitos neuronais e manifestação pheotípica comportamental in vivo. Para permitir uma análise precisa e automatizada da marcha de insetos, desenvolvemos recentemente um método de aprendizagem de máquina, feature Learning-based LImb segmentação e racking T(FLLIT)1.
FLLIT consiste em um algoritmo multiestágio totalmente automatizado que primeiro segmenta os pixels da perna, que são posteriormente usados para localizar e rastrear as garras de perna correspondentes. FLLIT emprega um algoritmo de impulsionamento para segmentação, em contraste com algoritmos de aprendizagem profunda usados em trabalhos recentes2,3. Existem algumas semelhanças com redes neurais convolucionais em que, para ambas as estruturas, a extração de recursos é feita automaticamente através do aprendizado de núcleos convolucionais. O primeiro passo no FLLIT envolve o uso de operações morfológicas (borda e esquelização) para gerar automaticamente amostras de treinamento positivas (pixels nas pernas) e negativas (fundo ou pixels no corpo da mosca) com alta confiança. Portanto, o FLLIT é totalmente automatizado e não requer amostras de treinamento anotadas pelo usuário. Usando as amostras de treinamento acima, um classificador é então treinado na estrutura de um algoritmo de impulso. Um conjunto de classificadores fracos é aprendido iterativamente, com cada um consistindo em um conjunto de núcleos convolucionais para extração de características e uma árvore de decisão. O classificador aprendido final é então usado para segmentação de pernas e é capaz de discernir melhor regiões difíceis/amostras duras melhor do que operações morfológicas, produzindo uma segmentação geral muito mais precisa para o rastreamento1. A partir das pernas segmentadas, localizamos as pontas e as rastreamos usando o algoritmo húngaro: combinando dicas entre quadros de tal forma que a soma da distância movida por cada ponta seja minimizada. FLLIT pode lidar com casos de oclusão lembrando o último local visto (em coordenadas centradas em mosca) de modo que uma ponta da perna é recuperada uma vez que não está mais sob oclusão.
Nós mostramos anteriormente que o FLLIT pode rastrear automaticamente e com precisão os movimentos das pernas e analisar a marcha em uma mosca ou aranha não marcada, livremente em movimento, a partir de vídeo de alta velocidade1; O FLLIT deve, portanto, ser amplamente aplicável para o rastreamento de pernas de artrópodes. Ao extrair conjuntos de treinamento de aprendizagem de máquina usando parâmetros morfológicos, o FLLIT treina-se automaticamente para segmentar e rastrear pernas de insetos sem a necessidade de anotação manual trabalhosa, que é necessária para a maioria dos métodos de aprendizagem profunda. O FLLIT é, portanto, totalmente automatizado. Após a segmentação e rastreamento da perna, o FLLIT produz automaticamente posições cruas do corpo e das pernas em cada quadro de vídeo, 20 parâmetros de marcha, 5 parcelas e um vídeo rastreado para análise da marcha e visualização dos movimentos da marcha. Este protocolo fornece um guia passo-a-passo para o uso do FLLIT.

<table border="0" cellpadding="0" cellspacing="0" style="width:1025px;" width="1025">
	<colgroup>
		<col />
		<col />
		<col span="2" />
	</colgroup>
	<tbody>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Acrylic Sheets</td>
			<td style="width:123px;">Dama</td>
			<td style="width:344px;">1.6 mm thickness, Clear sheets</td>
			<td style="width:344px;">Singapore, Singapore</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Clear Glass slides</td>
			<td style="width:123px;">Biomedia</td>
			<td style="width:344px;">BMH 880101</td>
			<td style="width:344px;">Singapore, Singapore</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">High speed camera</td>
			<td style="width:123px;">Photron</td>
			<td style="width:344px;">Fastcam MC2.1</td>
			<td style="width:344px;">Tokyo, Japan. A shutter speed of 1 msec or faster is ideal to reduce motion blur of captured images</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Infra Red LED</td>
			<td style="width:123px;">Any - Generic from hardware store</td>
			<td style="width:344px;">940nm Infrared Light Board</td>
			<td style="width:344px;">Singapore, Singapore</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Kimwipe</td>
			<td style="width:123px;">Kimberly Clark</td>
			<td style="width:344px;">34155-01LS</td>
			<td style="width:344px;">Irving, Texas, USA</td>
		</tr>
	</tbody>
</table>

fully automated leg tracking in freely moving insects using feature learning leg segmentation and tracking (fllit)

O modelo de Drosophila tem sido inestimável para o estudo da função neurológica e para a compreensão dos mecanismos moleculares e celulares que sustentam a neurodegeneração. Embora as técnicas de mosca para a manipulação e o estudo de subconjuntos neuronais tenham se tornado cada vez mais sofisticadas, a riqueza dos fenótipos comportamentais resultantes não foi capturada em um detalhe semelhante. Para ser capaz de estudar movimentos sutis das pernas de mosca para comparação entre os mutantes requer a capacidade de medir e quantificar automaticamente movimentos de alta velocidade e rápidas das pernas. Por isso, desenvolvemos um algoritmo de aprendizagem de máquina para rastreamento automatizado de garras de pernas em moscas andando livremente, segmentação e rastreamento de membros baseados em aprendizagem de recursos (FLLIT). Ao contrário da maioria dos métodos de aprendizagem profunda, o FLLIT é totalmente automatizado e gera seus próprios conjuntos de treinamento sem a necessidade de anotação do usuário, usando parâmetros morfológicos incorporados no algoritmo de aprendizagem. Este artigo descreve um protocolo em profundidade para a realização de análise de marcha usando FLLIT. Ele detalha os procedimentos para configuração da câmera, construção da arena, gravação de vídeo, segmentação de pernas e rastreamento de garras de perna. Ele também dá uma visão geral dos dados produzidos pelo FLLIT, que inclui posições brutas de corpo e perna rastreadas em cada quadro de vídeo, 20 parâmetros de marcha, 5 parcelas e um vídeo rastreado. Para demonstrar o uso do FLLIT, quantificamos parâmetros relevantes de marcha doente em um modelo de mosca da ataxia spinocerebellar 3.

Após segmentação de pernas, rastreamento e processamento de dados, o FLLIT gera automaticamente dados brutos para as posições do corpo e cada garra de perna, 20 parâmetros de marcha, 5 parcelas e um vídeo rastreado(Tabela 1).
Aqui, demonstramos essas análises utilizando um modelo de mosca da ataxia spinocerebellar 3 (SCA3). O driver pan-neuronal Elav-GAL4 foi usado para conduzir o SCA3 humano de comprimento completo com 27 glutaminas no tratado de poliQ (UAS-SCA3-flQ27), ou um SCA3 humano mutante de comprimento completo com 84 glutaminas no tratado poliQ (UAS-SCA3-flQ84)11. SCA3 é tipificado por uma marcha ataxica com desvio corporal, colocação errática do pé e passos curtos e espreitadores12,13 (Tabela 2). Para caracterizar a marcha das moscas mutantes SCA3 e investigar se elas apresentam uma marcha semelhante à dos pacientes humanos, analisamos parâmetros de marcha relevantes gerados pelo FLLIT, a saber: Número de giros corporais, regularidade da pegada, sobreposição e tamanhos do domínio da perna e comprimentos de passos de perna(Tabela 2).
Verificou-se que as moscas SCA3-Q84 apresentaram mais curvas(Figura 4A,A),colocação errática do pé como exibida pela baixa regularidade da pegada (desvios padrão ampliados do AEP14)(Figura 4B),aumento da sobreposição do domínio da perna(Figura 4C-D),domínios de pernas ampliados em comprimento e área(Figura 4E,F),e diminuição do comprimento do passo(Figura 4G).
A FLLIT também gera um vídeo mostrando a mosca e as pernas rastreadas nas vistas centradas na arena e centradas no corpo, na trajetória do corpo e na direção do rumo, e deslocamentos verticais e laterais de cada perna(Figura 5). Os vídeos rastreados permitem a comparação lado a lado dos movimentos das pernas em diferentes moscas. Vídeos representativos de Elav-GAL4>SCA3-flQ27 (Vídeo 1) e Elav-GAL4>SCA3-flQ84 (Vídeo 2) moscas demonstram que em comparação com Elav-GAL4>UAS-SCA3-flQ27 moscas(Figura 5A), Elav-GAL4>UAS-SCA3-flQ84 (Figura 5B) irregulares intersecção de domínios de pernas de diferentes tamanhos, indicativo de uma marcha ataxica.
<img alt="Figure 1" class="xfigimg" src="/files/ftp_upload/61012/61012fig1.jpg"> Figura 1. Configuração da estação de gravação e arena. Gravações da frente(A)e(B)vistas laterais. (C) Um exemplo de uma arena usada para fazer gravações de moscas para rastreamento FLLIT. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig1large.jpg" target="_blank">Clique aqui para ver uma versão maior desta figura.</a>
<img alt="Figure 2" class="xfigimg" src="/files/ftp_upload/61012/61012fig2.jpg"> Figura 2: Vista da janela ativa durante a gravação da marcha voadora usando uma câmera de cabeça dupla, que permite a gravação simultânea de duas moscas. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig2large.jpg" target="_blank">Clique aqui para ver uma versão maior desta figura.</a>
<img alt="Figure 3" class="xfigimg" src="/files/ftp_upload/61012/61012fig3.jpg"> Figura 3: Janela FLLIT ativa mostrando o painel do botão e as pernas rotuladas após a segmentação e o rastreamento. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig3large.jpg" target="_blank">Clique aqui para ver uma versão maior desta figura.</a>
<img alt="Figure 4" class="xfigimg" src="/files/ftp_upload/61012/61012fig4.jpg"> Figura 4: Dados representativos gerados pelo FLLIT para parâmetros relevantes de marcha de moscas expressando wildtype (SCA3-flQ27) vs. mutante (SCA3-flQ84) SCA3. (A) Número de voltas na trajetória corporal. (B) Regularidade da pegada da perna média normalizada ao comprimento do corpo. (C-C') Atravessou os domínios das pernas de cada perna. (D)Domínio sobreposto entre as pernas. (E) Comprimento do domínio da perna média normalizado para o comprimento do corpo. (F) Área de domínio de perna média normalizada ao comprimento do corpo2. (G)Comprimento do passo médio normalizado até o comprimento do corpo. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig4large.jpg" target="_blank">Clique aqui para ver uma versão maior desta figura.</a>
<img alt="Figure 5" class="xfigimg" src="/files/ftp_upload/61012/61012fig5.jpg"> Figura 5: Instantâneo de vídeos gerados pelo FLLIT representativos. (A) Elav-GAL4>UAS-SCA3-flQ27 e (B) Elav-GAL4>UAS-SCA3-flQ84 voa. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig5large.jpg" target="_blank">Por favor, clique aqui para ver uma versão maior deste número.</a>
<img alt="Video 1" src="/files/ftp_upload/61012/61012video1.jpg"> Vídeo 1: Vídeo representativo de uma mosca expressando pan-neuronal selvagem-tipo humano de comprimento completo SCA3 (Elav-GAL4>UAS-SCA3-flQ27). <a href="https://www.jove.com/files/ftp_upload/61012/Video_1_Elav-GAL4_SCA3-flQ27_22d.mp4" target="_blank">Clique aqui para ver este vídeo. (Clique com o botão direito do mouse para baixar.)</a>
<img alt="Video 2" src="/files/ftp_upload/61012/61012video2.jpg"> Vídeo 2: Vídeo representativo de uma mosca expressando mutantes pan-neuronal humano de comprimento total SCA3 (Elav-GAL4>UAS-SCA3-flQ84). <a href="https://www.jove.com/files/ftp_upload/61012/Video_2_Elav-GAL4_SCA3-flQ84_22d.mp4" target="_blank">Clique aqui para ver este vídeo. (Clique com o botão direito do mouse para baixar.)</a>
<img alt="Supplemental Figure 1" src="/files/ftp_upload/61012/61012supfig1.jpg"> Figura suplementar 1: Configurações para VcXSrv. <a href="https://www.jove.com/files/ftp_upload/61012/61012supfig1large.jpg" target="_blank">Clique aqui para ver uma versão maior desta figura.</a>
<img alt="Supplemental Figure 2" src="/files/ftp_upload/61012/61012supfig2.jpg"> Figura suplementar 2: Configuração para Xquartz. <a href="https://www.jove.com/files/ftp_upload/61012/61012supfig2large.jpg" target="_blank">Clique aqui para ver uma versão maior desta figura.</a>
<img alt="Supplemental Figure 3" src="/files/ftp_upload/61012/61012supfig3.jpg"> Figura suplementar 3: Imagem rotulada com as dimensões necessárias para o cálculo do campo de visão. <a href="https://www.jove.com/files/ftp_upload/61012/61012supfig3large.jpg" target="_blank">Clique aqui para ver uma versão maior desta figura.</a>
<table border="1" fo:keep-together.within-page="1"><tbody><tr><td>Categoria</td>
			<td>Parâmetros</td>
			<td>Descrição</td>
			<td>Arquivo/Parcela (se aplicável)</td>
		</tr><tr><td rowspan="4">Dados brutos</td>
			<td>Posição do corpo</td>
			<td>Coordenadas posicionais do corpo centroide em cada quadro</td>
			<td>As duas primeiras colunas de CoM.csv</td>
		</tr><tr><td>Trajetória corporal</td>
			<td>Ângulo de rotação do eixo do corpo em graus (em relação ao eixo y)</td>
			<td>Terceira coluna de CoM.csv</td>
		</tr><tr><td>Garra de perna centrada na arena Posições</td>
			<td>Coordenadas posicionais de cada garra de perna em cada quadro com base nas coordenadas da arena</td>
			<td>trajetória.csv</td>
		</tr><tr><td>Garra de perna centrada no corpo Posições</td>
			<td>Coordenadas posicionais de cada garra de perna em cada quadro com base nas coordenadas da arena</td>
			<td>norm_trajectory.csv</td>
		</tr><tr><td rowspan="3">Movimento corporal</td>
			<td>Comprimento do corpo (mm)</td>
			<td>Comprimento do animal amostraestimado em cada quadro (posição anterior-mais na cabeça para posterior-mais posição nas asas)</td>
			<td>bodylength.csv</td>
		</tr><tr><td>Velocidade instantânea do corpo (mm/s)</td>
			<td>Velocidade instantânea do corpo (centróide) na amostra animal</td>
			<td>BodyVelocity.csv; BodyVelocity.pdf</td>
		</tr><tr><td>Pontos de virada do corpo Trajetória</td>
			<td>Para localizar os pontos de virada, a trajetória é reduzida a uma curva linear em pedaços usando o Dougl asâASPeucker algoritmo, seguindo o qual um evento de giro é identificado como envolvendo um ângulo > 50 deg entre dois vizinhos segmentos lineares que compõem a trajetória simplificada</td>
			<td>BodyTrajectory.pdf</td>
		</tr><tr><td rowspan="9">Parâmetros individuais de passo</td>
			<td>Duração do passo (ms)</td>
			<td>A duração de um evento de passo</td>
			<td>StrideParameters.csv</td>
		</tr><tr><td>Período de passo (ms)</td>
			<td>A duração de um evento de passo para o próximo</td>
			<td></td>
		</tr><tr><td>Deslocamento do passo (mm)</td>
			<td>Deslocamento da garra da perna durante um evento de passo</td>
			<td></td>
		</tr><tr><td>Caminho de passo coberto (mm)</td>
			<td>Caminho total coberto pela garra da perna durante um evento de passo</td>
			<td></td>
		</tr><tr><td>Posição extrema anterior (mm)</td>
			<td>Posição de aterrissagem (em relação ao corpo) de uma garra de perna no final de um evento de passo</td>
			<td></td>
		</tr><tr><td>Posição extrema posterior (mm)</td>
			<td>Posição de decolagem (em relação ao corpo) de uma garra de perna no início de um evento de passo</td>
			<td></td>
		</tr><tr><td>Amplitude do passo (mm)</td>
			<td>Deslocamento ao longo da direção do movimento para um evento de passo</td>
			<td></td>
		</tr><tr><td>Linearidade de postura (mm)</td>
			<td>Definido como o desvio do caminho do passo de uma curva suavizada (em intervalos de 20ms) o anterior correspondente e posições extremas posteriores do passo</td>
			<td></td>
		</tr><tr><td>Estiramento de passo (mm)</td>
			<td>Distância da posição da garra da perna do centro do corpo no meio de um evento de passo</td>
			<td></td>
		</tr><tr><td rowspan="10">Movimento da perna</td>
			<td>Velocidade da perna (mm/s)</td>
			<td>A velocidade instantânea de cada perna</td>
			<td>LegSpeed.csv; Gait.pdf</td>
		</tr><tr><td>Índice de marcha</td>
			<td>Isso mede o tipo de coordenação da marcha exibida pelo animal amostral (de seis patas) durante o seu movimento. Uma marcha índice de 1 corresponde a uma marcha de tripé, _1 corresponde a uma marcha tetrapode, enquanto 0 constitui uma marcha não canônica. Em nossa implementação, o índice de marcha é obtido por uma média móvel acima de uma janela de 120 ms</td>
			<td>GaitIndex.csv; GaitIndex.pdf</td>
		</tr><tr><td>Porcentagem de movimento</td>
			<td>Porcentagem do tempo que uma perna está em movimento</td>
			<td>LegParameters.csv</td>
		</tr><tr><td>Período médio de passo (ms)</td>
			<td>Duração média de um evento de passo para o próximo</td>
			<td>LegParameters.csv</td>
		</tr><tr><td>Regularidade da pegada (mm)</td>
			<td>Medidos como os desvios padrão do posterior e</td>
			<td>LegParameters.csv</td>
		</tr><tr><td></td>
			<td>posições extremas anteriores de uma perna</td>
			<td></td>
		</tr><tr><td>Área de domínio da trajetória da perna (mm2)</td>
			<td>A área do casco convexo mínimo que contém toda a trajetória da perna no quadro de referência centrado na carroceria</td>
			<td>LegParameters.csv; LegDomain.pdf</td>
		</tr><tr><td>Comprimento e largura do domínio da trajetória da perna (mm)</td>
			<td>Obtido através da distância máxima projetada das posições da garra sobre o maior (comprimento do domínio) e menor Eixos principais (largura de domínio)</td>
			<td>LegParameters.csv</td>
		</tr><tr><td>Intersecção/sobreposição de domínio de pernas (mm2)</td>
			<td>A intersecção/sobreposição entre cada possível</td>
			<td>LegDomainOverlap.csv</td>
		</tr><tr><td>Largura de postura (mm)</td>
			<td>Média da distância entre o AEP e o PEP das pernas esquerda e média</td>
			<td>StanceWidth.csv</td>
		</tr></tbody></table>Tabela 1: Parâmetros de marcha gerados por FLLIT.
<table border="1" fo:keep-together.within-page="1"><tbody>
<tr>
<td></td>
			<td colspan="4">Recurso de marcha</td>
		</tr>
<tr>
<td>Características da marcha de Ataxia Spinocerebellar 3 (SCA3)</td>
			<td>Virando</td>
			<td>Colocação errática do pé e travessia da perna</td>
			<td>Passos de lurching</td>
			<td>Passos curtos</td>
		</tr>
<tr>
<td>Parâmetro de medição</td>
			<td>Número de eventos de giro corporal</td>
			<td>Regularidade da pegada</td>
			<td>Tamanho dos domínios das pernas, grau de sobreposição de domínio</td>
			<td>Comprimento do passo</td>
		</tr>
<tr>
<td>Arquivo FLLIT</td>
			<td>BodyTrajectory.pdf</td>
			<td>LegParameters.csv</td>
			<td>LegDomainOverlap.csv</td>
			<td>StrideParameters.csv</td>
		</tr>
</tbody></table>Tabela 2: Tabela que mostra características de marcha SCA3 marcantes em pacientes humanos com seus parâmetros FLLIT correspondentes e arquivos de saída.

Watch this Scientific Journal Video about Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking FLLIT at JoVE.com

Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking FLLIT

Descrevemos protocolos detalhados para o uso do FLLIT, um método de aprendizado de máquina totalmente automatizado para rastreamento de movimento de garras de perna em movimento livre mente drosophila melanogaster e outros insetos. Esses protocolos podem ser usados para medir quantitativamente movimentos sutis de marcha ambulante em moscas do tipo selvagem, moscas mutantes e modelos de moscas de neurodegeneração.

Rastreamento de pernas totalmente automatizado em insetos em movimento livre usando segmentação e rastreamento de pernas de aprendizagem de recursos (FLLIT)

The Drosophila model has been invaluable for the study of neurological function and for understanding the molecular and cellular mechanisms that underlie ...

FLLIT é um algoritmo que calcula as composições do corpo e das pernas de um animal rastreado. E isso é útil para caracterizar os circuitos que sustentam comportamentos normais e de caminhada por doenças. A única coisa única sobre a FLLIT é que ela não requer nenhum conjunto de dados anotado pelo usuário para treinamento e, portanto, é totalmente automatizado.Mas também analisa automaticamente os dados da faixa produzindo uma série de medições de marcha, gráficos de marcha para visualização e um vídeo de faixa. Demonstrando o procedimento estará Animesh Banerjee, uma colega de pós-doutorado do meu laboratório. Antes de iniciar um experimento, confirme que a estação de gravação tem uma câmera de alta velocidade com um palco sobre ela para segurar a câmara da arena.Coloque luzes LED infravermelhas na parte superior do palco com um difusor entre a câmera e a amostra. Cerca de 40 minutos antes de começar a gravação, transfira as moscas para uma vil vazia no gelo por cinco a sete minutos. Enquanto as moscas estão sendo sedadas, use água e um lenço para limpar a arena e lâminas de vidro da câmara e fita um dos slides de vidro abaixo da câmara.Usando um pincel limpo, transfira uma mosca anestesiada para dentro da câmara e proteja a câmara com um segundo slide e fita. Em seguida, deixe a mosca câmara se aclimatar à temperatura ambiente por 15 a 20 minutos. Para gerar vídeos para análise FLLIT, primeiro, ligue a fonte de energia e abra o aplicativo do visualizador no sistema de computador conectado.Altere a taxa de quadros de gravação para 1.000 quadros por segundo e defina a velocidade do obturador em um milissegundo. Coloque a câmara com a mosca na arena de gravação e clique no botão LIVE. Confirmou que a câmera está focada nas pontas das pernas quando a mosca está andando ereto no chão da câmara e clique em Record.Durante a gravação, certifique-se de que a mosca caminha em uma trajetória relativamente reta sem tocar na borda da arena, caminha pelo menos três passos por perna, não faz uma pausa durante a caminhada, e que a distância percorria é o equivalente a pelo menos um comprimento e meio do corpo. No final da análise clique em Gravar Feito para interromper a gravação e salvar os arquivos no formato mraw ou tiff nas pastas apropriadas. Para instalar o FLLIT, baixe primeiro o programa em qualquer sistema operacional.Extrair o conteúdo do arquivo zip e baixar conjuntos de dados de amostra. Para instalar o FLLIT no Ubuntu, navegue até o diretório FLLIT/Compilado e clique com o botão direito do mouse para selecionar Abrir no Terminal. Baixe um conjunto de dados de amostra e crie dados de pastas em FLLIT-master/Compiled no qual as pastas de conjunto de dados serão colocadas.Instale as bibliotecas de tempo de execução do MATLAB em HOME/MCR. Quando a instalação da biblioteca de tempo de execução do MATLAB estiver concluída, emita o comando para garantir que os direitos executáveis sejam registrados na FLLIT. Em seguida, digite o comando para executar FLLIT.Para segmentação do vídeo, converta o arquivo em arquivos TIFF individuais e salve os arquivos convertidos na pasta de dados FLLIT. Quando todos os arquivos tiverem sido transferidos, execute a FLLIT. Na janela pop-up, selecione 0 para realizar apenas a segmentação da perna ou selecione 1 para incluir o rastreamento das pernas com a segmentação das pernas.Selecione a pasta contendo as imagens TIFF quadro a quadro do vídeo a serem rastreadas e o arquivo de interesse e clique em Adicionar. Em seguida, clique em Feito para iniciar a segmentação e rastreamento do vídeo selecionado. Para verificar a precisão do rastreamento e para realizar correções de erro, clique em Selecionar pasta de dados e selecione a pasta a ser rastreada.Clique em Exibir Rastreamento e verifique a rotulagem de todas as pernas no primeiro quadro. Se uma perna estiver rotulada incorretamente e for necessária uma correção, clique em Pausar a visualização e ajustar a previsão. No painel Perna para Ajustar, selecione a perna que requer correção e clique duas vezes na posição correta desta perna na janela da imagem.Em seguida, clique em Salvar e Sair. Para processar os dados segmentados e rastreados, clique em Processo de Dados. Primeiro, calcule o campo de visão real do vídeo capturado para que os parâmetros do portão possam ser medidos.Na janela pop-up digite o número de quadros por segundo em que o vídeo é gravado e digite o campo de visão calculado em milímetros. Para acessar os resultados de rastreamento, abra os resultados e rastreie as pastas. Para gerar um vídeo da mosca rastreada, selecione Fazer vídeo.Após a segmentação da perna, rastreamento e processamento de dados, a FLLIT gera automaticamente dados brutos para as posições do corpo, e cada garra de perna, 20 parâmetros de marcha e tramas que acompanham e vídeos rastreados. O SCA3 é tipificado por uma marcha ataxic com veering corporal, colocação errática do pé e passos de arrasto curtos. Para caracterizar a marcha das moscas mutantes SCA3 e investigar se elas exibem uma marcha semelhante à dos pacientes humanos, os parâmetros de marcha relevantes gerados pela FLLIT podem ser analisados.As moscas SCA3-Q84 exibem mais curvas, colocação errática do pé, como exibido por uma baixa regularidade de pegada, e aumento da sobreposição do domínio das pernas, domínios de pernas aumentados em comprimento e área, e diminuição do comprimento do passo. A FLLIT também pode gerar um vídeo mostrando a mosca e as pernas rastreadas nas vistas centradas na arena e centradas no corpo, trajetória corporal, direção de direção e deslocamentos verticais e laterais de cada perna. Em comparação com as moscas SCA3-Q27, as moscas SCA3-Q84 exibem domínios irregulares de pernas intersetoriais de diferentes tamanhos, indicativos de uma marcha ataxica.Os dados brutos para as posições da garra do corpo e da perna podem ser analisados para movimentos específicos de interesse. Por exemplo, o uso de FLLIT permitiu que nosso grupo determinasse que os fenótipos rígidos exibidos pelos modelos de Drosophila da doença de Parkinson são causados por disfunção do neurônio dopaminérgico.

Research

JoVE Journal

Behavior

Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking (FLLIT)

Quantifying Learning in Young Infants: Tracking Leg Actions During a Discovery-learning Task

Quantificar Aprendizagem em lactentes jovens: Ações Perna Rastreamento Durante uma tarefa de aprendizagem-Discovery

Task-specific actions emerge from spontaneous movement during infancy. It has been proposed that task-specific actions emerge through a discovery-learning ...

Comportamento

A Method to Quantify Visual Information Processing in Children Using Eye Tracking

Um método de quantificação Visual Information Processing em Crianças Usando Eye Tracking

Visual problems that occur early in life can have major impact on a child's development. Without verbal communication and only based on observational ...

Psychophysical Tracking Method to Measure Taste Preferences in Children and Adults

Psicofísica Rastreamento método para medir preferências alimentares nas crianças e adultos

The Monell two-series, forced-choice, paired-comparison tracking method provides a reliable measure of sweet taste preferences from childhood to ...

Multi-layer Cortical Ca2+ Imaging in Freely Moving Mice with Prism Probes and Miniaturized Fluorescence Microscopy

Multi-layer Cortical Ca2+ Imaging in Freely Moving Mice with Prism Probes and Miniaturized Fluorescence Microscopy

Multi-layer Cortical Ca<sup&gt; 2+</sup&gt; Imaging em ratos com movimento livre com sondas de prisma e microscopia de fluorescência miniaturizada

In vivo circuit and cellular level functional imaging is a critical tool for understanding the brain in action. High resolution imaging of mouse cortical ...

Simultaneous Recordings of Cortical Local Field Potentials and Electrocorticograms in Response to Nociceptive Laser Stimuli from Freely Moving Rats

Gravações simultâneas de potenciais de campo corticais Local e Electrocorticograms em resposta a estímulos nociceptivos Laser de ratos movimentando-se livremente

Electrocortical responses, elicited by laser heat pulses that selectively activate nociceptive free nerve endings, are widely used in many animal and ...

Behavioral Tracking and Neuromast Imaging of Mexican Cavefish

Acompanhamento comportamental e Neuromast imagem de Cavefish mexicano

Cave-dwelling animals have evolved a series of morphological and behavioral traits to adapt to their perpetually dark and food-sparse environments. Among ...

Simultaneous Eye Tracking and Single-Neuron Recordings in Human Epilepsy Patients

Monitoramento simultâneo de olho e single-Neuron gravações em pacientes com epilepsia humana

Intracranial recordings from patients with intractable epilepsy provide a unique opportunity to study the activity of individual human neurons during ...

Optogenetic Manipulation of Neuronal Activity to Modulate Behavior in Freely Moving Mice

Manipulação optogenética da atividade neuronal para modular o comportamento em camundongos em movimento livre

Optogenetic modulation of neuronal circuits in freely moving mice affects acute and long-term behavior. This method is able to perform manipulations of ...

Tracking Rats in Operant Conditioning Chambers Using a Versatile Homemade Video Camera and DeepLabCut

Rastreando ratos em câmaras de condicionamento operantes usando uma versátil câmera de vídeo caseira e deeplabcut

Operant conditioning chambers are used to perform a wide range of behavioral tests in the field of neuroscience. The recorded data is typically based on ...

Eye-tracking Technology and Data-mining Techniques used for a Behavioral Analysis of Adults engaged in Learning Processes

Tecnologia de rastreamento de olhos e técnicas de mineração de dados utilizadas para uma análise comportamental de adultos envolvidos em processos de aprendizagem