Name: fully automated leg tracking in freely moving insects using feature learning leg segmentation and tracking (fllit)
Uploaded: 2020-04-23T15:00:00
Duration: 8 min 4 s
Description: Watch this Scientific Journal Video about Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking FLLIT at JoVE.com

Forfatterne vil gjerne takke Moumita Chatterjee og Alice Liu for teknisk støtte, og Bloomington Drosophila Stock Centre (Indiana, USA) for å gjøre tilgjengelig drosophila stammer som brukes i dette arbeidet. Dette arbeidet ble støttet av Institute of Molecular and Cell Biology, Singapore; Bioinformatikk instituttet, Singapore; Agency for Science Technology and Research Joint Council Organization (gi nummer 15302FG149 til SA og LC); Clinical Research Flagship Programme (Parkinsons sykdom) administrert av Singapore Ministry of Health's National Medical Research Council (gi nummer NMRC /TCR/013-NNI/2014 til SA), University of Alberta (oppstartsstipend til LC), og Natural Sciences and Engineering Research Council of Canada (NSERC) Discovery Grant (gi nummer RGPIN-2019-04575 til LC).

1. Systemoppsett
<ol><li>Kontroller at opptaksstasjonen har et høyhastighetskamera og en scene over den for å holde arenakammeret (Figur 1). Juster kameraet for å ta opp minst 250 bilder per sekund (fps), med en tilsvarende rask lukkerhastighet (i dette tilfellet utføres opptaket med 1000 fps med en lukkerhastighet på 1 ms). MERK: Kontroller at videoen er egnet for sporing ved å sikre at det er minimal eller ingen bevegelsesuskarphet av bevegelige ben i alle rammer. Hvis det bevegelige benet er så uskarpt at en menneskelig merknador ikke kan spore det, må kameraets opptakshastighet og/eller lukkertid økes.</li>
	<li>Plasser de infrarøde LED-lampene øverst på scenen med en diffuser (gjennomsiktig ark) mellom kameraet og prøven (figur 1A,B).</li>
	<li>Lag opptakskammeret ved å kutte et 1,6 mm tykt akrylark. I dette eksperimentet bruker du et synsfelt på 11 mm x 11 mm. Plasser kammeret mellom to glasslysbilder (figur 1C).</li>
</ol>2. Forberedelse av fluer for opptak
<ol><li>Overfør fluene for å bli registrert i et nytt mathetteglass 24 timer før opptak. MERK: Ikke bruk CO2 (vanligvis brukt til å bedøve fluene ved første samling) på fluene mindre enn 24 timer før opptak.</li>
	<li>Ca 40 min før opptak, overføre fluene til tomme hetteglass og holde på is i 5-7 min.</li>
	<li>I mellomtiden tørker du av arenaen og fjerner glasssklier med vann og en klut. MERK: Ikke bruk etanol til å rengjøre kamrene og lysbildene.</li>
	<li>Forbered opptakskammeret. Fest en av de mikroskopiske glassskliene under kammeret med tape.</li>
	<li>Når fluene har blitt bedøvet på is, overfør en flue i hvert kammer ved hjelp av en ren børste. MERK: Både mannlige og kvinnelige fluer kan brukes i dette oppsettet, og så langt som mulig bør fluer av begge kjønn analyseres for å unngå kjønnsspesifikk bias.</li>
	<li>Fest kammeret med et annet mikroskopisk glasslysbilde med tape (figur 1C).</li>
	<li>Hold de kamret fluene ved romtemperatur i 15 - 20 min for akklimatisering.</li>
</ol>3. Generering av videoer for FLLIT-analyse
MERK: Dette trinnet er spesifikt for videokameraet som brukes. I dette tilfellet brukes et kommersielt tilgjengelig videokamera (se Materialtabellen).
<ol><li>Slå på strømkilden. Vent til den grønne LED-lampen for strøm og den oransje LED-lampen for ethernet-grensesnitttilkoblingen stabiliseres. Slå på strømmen for den infrarøde LED-lampen. Kontroller at spenningen forblir ved 12,5 V.</li>
	<li>Åpne Viewer-programmet på det tilkoblede datasystemet.</li>
	<li>Endre opptaksbildefrekvensen til 1000 bps. Sett lukkertiden til 1/1000 s (1 ms).</li>
	<li>Plasser kammeret med fluen på opptaksarenaen, og velg LIVE-knappen. Sørg for at kameraet er fokusert på beinspissene når flyet går oppreist på gulvet i kammeret; benspissene skal være i skarpt fokus.</li>
	<li>Klikk Post (Figur 2).</li>
	<li>Ta opp flyvandringen, og sørg for at: Flyet gikk i en relativt rett bane uten å berøre kanten av arenaen. Flyet gikk minst tre skritt per ben. Flyet stopper ikke midlertidig under turen. Avstanden som går tilsvarer minst en kroppslengde. MERK: Å ha bakgrunnen trukket rent er avgjørende for nøyaktig segmentering. Den automatiserte bakgrunnssubtraksjonsalgoritmen som brukes av FLLIT, krever at den avbildede fluen beveger minst én kroppslengde i avstand.</li>
	<li>Klikk Rec Ferdig for å stoppe opptaket ( Figur2).</li>
	<li>Beskjær videoen for å sikre at opptaket bare omfatter en rett tur av flyet (som beskrevet i trinn 3.6).</li>
	<li>Klikk Lagre (Figur 2). Lagre filene i '.mraw' eller '.tiff'-format i de respektive mappene. MERK: '.mraw'-format gir større fleksibilitet til å endre filnavnet (om nødvendig) og for lagring av videoer sammenlignet med 'TIFF'-filformat.</li>
</ol>4. Installasjon av FLLIT-programmet
MERK: Oppdaterte instruksjoner finner du på: https://github.com/BII-wushuang/FLLIT/blob/master/Compiled/Readme.pdf
<ol><li>Last ned FLLIT på alle operativsystemer<ol>
<li>Last ned FLLIT fra følgende Github-kobling: https://github.com/BII-wushuang/FLLIT/archive/master.zip. Pakk ut innholdet i zip-filen.</li>
		<li>Last ned eksempeldatasett fra følgende Google Disk-kobling: https://bit.ly/2EibvNY. Opprett en mappe Data under FLLIT-master/Kompilert og plasser datasettmapper i denne datakatalogen.</li>
	</ol>
</li>
	<li>Installer FLLIT i Ubuntu<ol>
<li>Naviger til FLLIT/Compiled-katalogen.</li>
		<li>Høyreklikk og velg Åpne i Terminal.</li>
		<li>Send følgende kommando for å laste ned og installere MATLAB-kjøretidsbibliotekene til $HOME/MCR: bash MCR_2016a.sh
</li>
		<li>Når installasjonen av MATLAB-kjøretidsbibliotekene er fullført, utsteder du følgende kommando for å sikre at kjørbare rettigheter er tildelt FLLIT: chmod +x FLLIT
</li>
		<li>Åpne en terminal i mappen FLLIT/Compiled, og gi følgende kommando følgende kommandoen ut for å kjøre FLLIT: bash run_FLLIT.sh $HOME/MCR/v901
</li>
	</ol>
</li>
	<li>Installere FLLIT i Windows<ol>
<li>For 7 og tiende Home Edition, installer Docker Toolbox på: (https://github.com/docker/toolbox/releases/download/v19.03.1/DockerToolbox-19.03.1.exe).</li>
		<li>For Windows 10 Pro eller Enterprise Edition installerer du Docker Desktop for Windows på: (https://download.docker.com/win/stable/Docker\%20Desktop\%20Installer.exe).</li>
		<li>Hvis du vil aktivere kjøring av GUI-programmer i en Docker-beholder på Windows, må du først installere VcXSrV (https://sourceforge.net/projects/vcxsrv). Når du starter VcXsrv, konfigurerer du innstillingene som i figur S1. MERK: Kontroller at Docker og VcXsrv kjører før du starter FLLIT.</li>
		<li>Dobbeltklikk FLLIT.bat for å kjøre FLLIT. MERK: Når du utfører for første gang, vil det ta litt tid å trekke Docker-bildet fra Docker Hub.</li>
	</ol>
</li>
	<li>Installere FLLIT i MacOS<ol>
<li>Last ned Docker Desktop for MacOS på https://download.docker.com/mac/stable/Docker.dmg
</li>
		<li>Installer socat ved å åpne en terminal og utstede følgende kommando: brygge installere socat
</li>
		<li>Start socat med: socat TCP-LISTEN:6000, reuseaddr, gaffel UNIX-KLIENT:\"$DISPLAY\" & disown
</li>
		<li>Installer XQuartz (https://www.xquartz.org) for å aktivere kjøring av GUI-programmer i en Docker-beholder på MacOS. Start XQuartz og endre innstillingene ved å kontrollere Tillat tilkoblinger fra nettverksklienter i kategorien Sikkerhet som vist i Figur S2. MERK: Kontroller at Docker, socat og XQuartz kjører alle før du starter FLLIT.</li>
		<li>Åpne en terminal i FLLIT/Compiled-katalogen og kjør FLLIT med følgende kommando: bash FLLIT_Mac.sh MERK: Når du utfører for første gang, vil det ta litt tid å trekke Docker-bildet fra Docker Hub.</li>
	</ol>
</li>
</ol>5. Kjører FLLIT for automatisert bensporing
<ol><li>Segmentering<ol>
<li>Konverter videoen til individuelle TIFF-filer og kopier til FLLIT-datamappen.</li>
		<li>Kjør FLLIT (I Ubuntu høyreklikker du for å åpne FLLIT i Terminal).</li>
		<li>Velg mappen som inneholder TIFF-bildene fra bilde for bilde av videoen som skal spores, og klikk på Legg til-knappen.</li>
		<li>I popup-vinduet velger du 0 for å utføre bensegmentering bare, eller 1 for å inkludere bensporing med bensegmentering.</li>
		<li>Klikk på Ferdig for å starte segmentering og sporing av den valgte videoen.</li>
	</ol></li>
	<li>Sporing<ol>
<li>For å sjekke nøyaktigheten av sporing og utføre feilrettinger (hvis noen), klikk på Velg datamappe. Velg mappen som skal spores, og klikk Åpne.</li>
		<li>Klikk på Vis sporing. MERK: Kontroller at visningsmodus forblir valgt mens du viser de sporede benposisjonene. Ellers vil eventuelle tidligere rettelser bli overridd.</li>
		<li>Kontroller merkingen for alle beina i den første rammen MERK: Siden beinetikettene er plassert i henhold til posisjonen på skjermen, hvis flyet går oppreist, er flyets høyre side merket som L1 (for-ben), L2 (midten av benet), L3 (bakbenet) og flyets VENSTRE side er merket som R1 (for-ben), R2 (midten av benet), R3 (bakbenet), henholdsvis (Figur 3). Hvis flyet går opp, vil ned beinetikettene bli riktig kommentert.</li>
		<li>Hvis et ben er feil merket og en rettelse er nødvendig, klikker du Pausevisning, etterfulgt av Juster prediksjon (Figur 3).</li>
		<li>Fra høyre panel ledet Leg til Adjust, velg benet som krever korreksjon.</li>
		<li>Dobbeltklikk på riktig posisjon for dette benet i bildevinduet, klikk på Lagre, og deretter Avslutt. Hvis du vil gå til forrige ramme eller etterfølgende ramme, klikker du Pausevisning etterfulgt av knappene forover og bakover og I> (Figur 3).</li>
		<li>Hvis du vil rette opp feil sporede videoer, åpner du Data-mappen for videoen som skal spores på nytt, og velger Start sporing manuelt.</li>
		<li>Klikk på Sporing-knappen, som deretter endrer etiketten til Initial.</li>
		<li>Klikk Juster prediksjon og korriger benetikettene ved å dobbeltklikke på hvert bentips og deretter tilordne den med riktig benetikett. Klikk Lagre og avslutt.</li>
		<li>Klikk på Fortsett for å starte sporing.</li>
	</ol></li>
	<li>Databehandling og videogenerering<ol>
<li>Klikk på Dataprosess. I popup-vinduet skriver du inn antall bilder per sekund (fps) der videoene ble tatt opp (f.eks. 1000 fps).</li>
		<li>Bruk følgende formel til å beregne det faktiske synsfeltet for den innspilte videoen slik at gangparametere kan måles i millimeter: <img alt="Equation 1" src="/files/ftp_upload/61012/61012eq1.jpg"> MERK: Hvis for eksempel den faktiske kammerstørrelsen er 7 mm, er bredden på bilderammen 137 mm, bredden på kammeret i bilderammen på dataskjermen er 81 mm, og bredden på synsfeltet var 11,83 mm (Figur S3).</li>
		<li>Hvis du vil se sporingsresultatene, går du til Sporings-mappen under Resultater-mappen.</li>
		<li>Hvis du vil generere en video av den sporede fluen, velger du Lag video. Videoen lagres i samme resultatmappe som de opprinnelige videodataene som analyseres. MERK: Start-bildene (første) og Slutt (siste) i videoen kan velges.</li>
	</ol></li>
	<li>Normalisering til kroppslengde på hver fly. MERK: Siden hver fly kan være litt forskjellig i størrelse, bør visse gangparametere normaliseres til kroppslengden på hver fly for å lette sammenligninger (f.eks. skrittlengden kan være lengre i større fluer og kortere i mindre fluer).<ol>
<li>Åpne tre stillbilder fra videoen av hver fly (vanligvis første, midtre og siste rammer) ved hjelp av bildeprogramvare.</li>
		<li>Forstørre hver bilderamme til 800% og merk den anterior-mest pixel av hodet og bakre-mest piksel av magen på midtlinjen ved hjelp av en lys farge (f.eks gul).</li>
		<li>Åpne de merkede bildene i ImageJ.</li>
		<li>Bruk Angi skala til å skrive inn skalaen tilsvarende: Angi avstand i piksler: 512; Kjent avstand: Faktisk synsfelt (mm) målt i trinn 5.3.2.; Lengdeenhet: mm.</li>
		<li>Tegn en rett linje mellom de merkede hode- og magespissene for å oppnå kroppslengden.</li>
		<li>Åpne Angi skala igjen for å oppnå verdien i en kjent avstand, som er kroppslengden i mm.</li>
		<li>Ta et gjennomsnitt av lengden bestemt i hvert av de tre bildene for å oppnå gjennomsnittlig kroppsstørrelse i mm.</li>
	</ol></li>
</ol>

<ol>
	<li>Wu, S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Fully+automated+leg+tracking+of+Drosophila+neurodegeneration+models+reveals+distinct+conserved+movement+signatures.">Fully automated leg tracking of Drosophila neurodegeneration models reveals distinct conserved movement signatures.</a> PLoS Biology. 17 (6), 3000346 (2019).</li><li>Mathis, A., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=DeepLabCut:+markerless+pose+estimation+of+user-defined+body+parts+with+deep+learning.">DeepLabCut: markerless pose estimation of user-defined body parts with deep learning.</a> Nature Neuroscience. 19, 1281-1289 (2018).</li><li>Pereira, T. D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Fast+animal+pose+estimation+using+deep+neural+networks.">Fast animal pose estimation using deep neural networks.</a> Nature Methods. 16 (1), 117-125 (2019).</li><li>Machado, A. S., Darmohray, D. M., Fayad, J., Marques, H. G., Carey, M. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+quantitative+framework+for+whole-body+coordination+reveals+specific+deficits+in+freely+walking+ataxic+mice.">A quantitative framework for whole-body coordination reveals specific deficits in freely walking ataxic mice.</a> eLife. 4, (2015).</li><li>Lu, B., Vogel, H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Drosophila+models+of+neurodegenerative+diseases.">Drosophila models of neurodegenerative diseases.</a> Annual Reviews in Pathology. 4, 315-342 (2009).</li><li>McGurk, L., Berson, A., Bonini, N. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Drosophila+as+an+In+Vivo+Model+for+Human+Neurodegenerative+Disease.">Drosophila as an In Vivo Model for Human Neurodegenerative Disease.</a> Genetics. 201 (2), 377-402 (2015).</li><li>Dionne, H., Hibbard, K., Cavallaro, A., Kao, J. -. C., Rubin, G. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Genetic+reagents+for+making+split-GAL4+lines+in+Drosophila.">Genetic reagents for making split-GAL4 lines in Drosophila.</a> bioRxiv. , (2017).</li><li>Cande, J., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Optogenetic+dissection+of+descending+behavioral+control+in+Drosophila.">Optogenetic dissection of descending behavioral control in Drosophila.</a> eLife. 7, (2018).</li><li>Nern, A., Pfeiffer, B. D., Rubin, G. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Optimized+tools+for+multicolor+stochastic+labeling+reveal+diverse+stereotyped+cell+arrangements+in+the+fly+visual+system.">Optimized tools for multicolor stochastic labeling reveal diverse stereotyped cell arrangements in the fly visual system.</a> Proceedings of the National Academy of Sciences of the United States of America. 112 (22), 2967-2976 (2015).</li><li>Xie, T., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+Genetic+Toolkit+for+Dissecting+Dopamine+Circuit+Function+in+Drosophila.">A Genetic Toolkit for Dissecting Dopamine Circuit Function in Drosophila.</a> Cell Reports. 23 (2), 652-665 (2018).</li><li>Warrick, J. M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Ataxin-3+suppresses+polyglutamine+neurodegeneration+in+Drosophila+by+a+ubiquitin-associated+mechanism.">Ataxin-3 suppresses polyglutamine neurodegeneration in Drosophila by a ubiquitin-associated mechanism.</a> Molecular Cell. 18 (1), 37-48 (2005).</li><li>Ebersbach, G., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Comparative+analysis+of+gait+in+Parkinson's+disease,+cerebellar+ataxia+and+subcortical+arteriosclerotic+encephalopathy.">Comparative analysis of gait in Parkinson's disease, cerebellar ataxia and subcortical arteriosclerotic encephalopathy.</a> Brain. 122 (7), 1349-1355 (1999).</li><li>Stolze, H., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Typical+features+of+cerebellar+ataxic+gait.">Typical features of cerebellar ataxic gait.</a> Journal of Neurology, Neurosurgery and Psychiatry. 73 (3), 310-312 (2002).</li><li>Mendes, C. S., Bartos, I., Akay, T., Marka, S., Mann, R. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Quantification+of+gait+parameters+in+freely+walking+wild+type+and+sensory+deprived+Drosophila+melanogaster.">Quantification of gait parameters in freely walking wild type and sensory deprived Drosophila melanogaster.</a> eLife. 2, 00231 (2013).</li><li>DeAngelis, B. D., Zavatone-Veth, J. A., Clark, D. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=The+manifold+structure+of+limb+coordination+in+walking+Drosophila.">The manifold structure of limb coordination in walking Drosophila.</a> eLife. 8, (2019).</li><li>Gunel, S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=DeepFly3D,+a+deep+learning-based+approach+for+3D+limb+and+appendage+tracking+in+tethered,+adult+Drosophila.">DeepFly3D, a deep learning-based approach for 3D limb and appendage tracking in tethered, adult Drosophila.</a> eLife. 8, (2019).</li><li>Isakov, A., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=Recovery+of+locomotion+after+injury+in+Drosophila+melanogaster+depends+on+proprioception.">Recovery of locomotion after injury in Drosophila melanogaster depends on proprioception.</a> The Journal of Experimental Biology. 219, 1760-1771 (2016).</li><li>Aw, S. S., Lim, I. K. H., Tang, M. X. M., Cohen, S. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+Glio-Protective+Role+of+mir-263a+by+Tuning+Sensitivity+to+Glutamate.">A Glio-Protective Role of mir-263a by Tuning Sensitivity to Glutamate.</a> Cell Reports. 19 (9), 1783-1793 (2017).</li><li>Eberl, D. F., Duyk, G. M., Perrimon, N. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/entrez/query.fcgi?db=PubMed&cmd=Search&doptcmdl=Citation&defaultField=Title+Word&term=A+genetic+screen+for+mutations+that+disrupt+an+auditory+response+in+Drosophila+melanogaster.">A genetic screen for mutations that disrupt an auditory response in Drosophila melanogaster.</a> Proceedings of the National Academy of Sciences of the United States of America. 94 (26), 14837-14842 (1997).</li></ol>

Forfatterne har ingenting å avsløre.

I dette manuskriptet beskriver vi i detalj trinnene som er involvert i bruk av FLLIT, et automatisert maskinlæringsprogram1,for å analysere gangart i fritt gående Drosophila. Etter sporing og dataanalyse genererer FLLIT automatisk rådata for posisjonsinformasjon fra kropp og benklør, som produserer tjue kropps- og gangfunksjoner samt en video av den sporede fluen for å muliggjøre gangartvisualisering.
Det finnes nå en rekke metoder for benbevegelsesporing av Drosophila og andre dyr1,2,3,4,14,15,16, noe som gir forskerne et bredt spekter av alternativer avhengig av målene for eksperimentet. Noen av disse er fotutskrift-baserte tilnærminger, som er svært nøyaktige, men som rapporterer bare klo kontaktpunkter med deteksjonsoverflaten4,14. På den annen side, nylig dyp læring tilnærminger2,3,16 er svært allsidig, slik at analyse av atferd som krever sporing av benledd og andre kroppsdeler i ethvert dyr, med forbehold om at algoritmene må først trenes med bruker kommenterte datasett. En tredje type tilnærming bruker morfologi eller bildekontrastbaserte metoder1,,15,17 for å finne omrisset av hvert ben for å identifisere kloposisjoner. Generelt handler disse metodene dårlig med atferd der beina krysser over (f.eks. under pleie). FLLIT kombinerer andre og tredje tilnærminger, ved hjelp av morfologiske parametere for å trene en økende algoritme for bensegmentering. Dette gjør det mulig for FLLIT å omgå den møysommelige oppgaven med brukermerknad for å generere opplæringsdatasettet, samtidig som nøyaktigheten forbedres ved hjelp av maskinlæring. Fremtidige forbedringer av FLLIT må håndtere tilfeller der beina krysser over, for å tillate analyse av mer kompleks atferd.
FLLIT er robust til små endringer i belysning, opptaksoppløsning og bildehastighet1. Rammehastigheten til innspilte videoer bør imidlertid ikke falle under 250 fps, og FLLIT kjører optimalt for videoer tatt opp med 1000 fps. Hvis det er bevegelsesuskarphet i bildene, slik at det er utfordrende for en menneskelig merknador å identifisere benposisjonen, vil FLLIT ikke kunne nøyaktig identifisere bentips i disse rammene. I lys av dette er det viktig at kameraet fokuseres kraftig på beinspissene. For å forhindre segmentering sartefakter, bør arenaen rengjøres grundig, og bør ikke flyttes under opptaket. For nøyaktig bakgrunnssubtraksjon og ren segmentering, bør flyet bevege seg minst én kroppslengde under opptaket, uten å sette den på pause. Etter automatisk segmentering og sporing må merkingen av alle beina kontrolleres. Hvis flygangarten ikke spores eller spores feil, bør filen spores manuelt ved hjelp av alternativet Start sporing manuelt (trinn 5.2.7 – 5.2.10).
Nevrodegenerative sykdommer og bevegelsesforstyrrelser blir stadig mer utbredt i våre aldrende samfunn. Fly modeller av neurodegeneration har blitt studert i mer enn 2 tiår, der fremskritt har blitt gjort om molekylære og cellulære aspekter av sykdom patofysiologi. Spesifikke atferdskonsekvenser av sykdom har imidlertid vært teknisk vanskelige å vurdere. For eksempel, mens rapporter om skjelvende bevegelser i fly har blitt gjort18,19, disse hadde ikke blitt kvantitativt studert før nylig1. Klatreanalysen har vært et nyttig og kvantitativt, men relativt grovt mål6. Dette tekniske underskuddet har på samme måte hindret høyoppløselig bevegelsesanalyse i andre dyremodeller. Bruk av nye verktøy for atferdsanalyse, derav, har lovet å forynge feltet av bevegelsesforstyrrelser for å gjøre det mulig for forskere å studere hvordan molekylære og cellulære mekanismer for nevromuskulære sykdommer fører til spesifikke atferdsresultater i dyremodeller. I dette papiret og i vårt tidligere arbeid1viste vi ved hjelp av FLLIT at flymodeller av SCA3 viser en hyperkinetisk ataksisk gangart, mens PD flymodeller viser en hypokinetisk stiv gangart, rekapitulerende bevegelseskjennetegn på de respektive menneskelige sykdommene1. Ganganalyse gjorde det også mulig for oss å identifisere forskjellige nevronale populasjoner underliggende spesifikke bevegelsesdysfunksjoner. Fremover vil detaljert bevegelsesanalyse, kombinert med de kraftige bildebehandlings- og funksjonelle verktøyene som er tilgjengelige i fluen, tillate oss å få ny innsikt i mekanismer for lokomotorisk dysfunksjon, og belyse vår forståelse av nevrodegenerative sykdommer med hensyn til kretsmekanismer.
FLLIT bør være allment anvendelig for å studere gangart i andre små leddyr, da det tidligere ble vist å være svært nøyaktig for sporing av edderkoppbenbevegelser1. Mens vi fokuserer her på bruk av detaljert bevegelse fenotyping for kvantifisere patogen gangart og dens underliggende kretser, har fremskritt i bevegelsessporing allerede revolusjonert, og vil ha fortsatt innvirkning på, forståelsen av normal gangkoordinering og gangart og dens underliggende kretser, spesielt i utallige forskjellige grener av det evolusjonære treet.

I de siste tiårene har nevrodegenerative sykdommer og bevegelsesforstyrrelser blitt mer utbredt i våre aldrende populasjoner. Selv om vår forståelse av mange nevrodegenerative sykdommer har avansert på molekylært og cellulært nivå, forblir grunnleggende trekk ved den berørte nevronale kretsen underliggende sykdommen dårlig forstått. Nylig utviklet atferdssporingsverktøy1,2,3,4 nå tillate oss å studere bevegelse snormiteter i dyresykdommodeller for å identifisere molekylær, cellulær og kretsdysregulering underliggende sykdom.
Molekylære veier involvert i mange nevrodegenerative sykdommer er bevart i fruktfluen Drosophila melanogaster, og Drosophila sykdommodeller har bidratt til å belyse grunnleggende mekanismer underliggende neurodegeneration5,6. Vi viste nylig at flymodeller av Parkinsons sykdom (PD) og Spinocerebellar ataksi 3 (SCA3) viser distinkte, bevarte gangartsignaturer som ligner de av de respektive menneskelige sykdommene1, som viser at flymodellen kan brukes til å forstå kretsmekanismer underliggende bevegelsesdysfunksjon i spesifikke bevegelsesforstyrrelser. Det rike og stadig voksende arsenalet av verktøy i flymodellen for målrettet manipulering og visualisering av nevroner på enkeltgenet og enkeltcellenivå7,,8,9,10 gjør flyet til en ideell modell for å undersøke forholdet mellom sykdomsveier, nevronale kretser og atferdsfenotypisk manifestasjon in vivo. For å muliggjøre presis, automatisert insektganganalyse utviklet vi nylig en maskinlæringsmetode, Feature Linntjeningsbasert LImb segmentering og Tracking (FLLIT)1.
FLLIT består av en helautomatisk flertrinnsalgoritme som først segmenterer benpikslene, som senere brukes til å finne og spore de tilsvarende benklørne. FLLIT benytter en økende algoritme for segmentering, i motsetning til dype læringsalgoritmer som brukes i nyere arbeid2,3. Det er noen likheter med convolutional nevrale nettverk i at for begge rammer, funksjonen utvinning gjøres automatisk gjennom læring convolutional kjerner. Det første trinnet i FLLIT innebærer å bruke morfologiske operasjoner (kant og skjelettisering) for å automatisk generere positive (piksler på beina) og negative (bakgrunn eller piksler på flykroppen) treningsprøver med høy tillit. FlLIT er derfor helautomatisk og krever ikke brukerkommenterte opplæringsprøver. Ved hjelp av de ovennevnte treningsprøvene blir en klassifikater deretter opplært innenfor rammen av en økende algoritme. Et ensemble av svake klassifikater er iterativt lært, med hver består av et sett med convolutional kjerner for funksjonen utvinning og et beslutningstre. Den endelige læreklassifisereren brukes deretter til bensegmentering og er i stand til å bedre skjelne vanskelige regioner / harde prøver bedre enn morfologiske operasjoner, noe som gir en samlet mye mer nøyaktig segmentering for sporing1. Fra de segmenterte beina finner vi tipsene og sporer dem ved hjelp av den ungarske algoritmen: ved å matche tips på tvers av rammer slik at summen av avstanden som flyttes av hvert tips minimeres. FLLIT kan håndtere okklusjonstilfeller ved å huske det siste sted (i fly sentrertkoordinater) slik at en benspiss gjenopprettes når det ikke lenger er under okklusjon.
Vi har tidligere vist at FLLIT kan automatisk og nøyaktig spore benbevegelser og analysere gangart i en umerket, fritt bevegelig fly eller edderkopp fra høyhastighets video1; FLLIT bør derfor være bredt anvendelig for leddyr ben sporing. Ved å trekke ut maskinlæringstreningssett ved hjelp av morfologiske parametere, trener FLLIT seg automatisk til å segmentere og spore insektben uten behov for arbeidskrevende manuell merknad, som kreves for de fleste dype læringsmetoder. FLLIT er dermed helautomatisk. Etter bensegmentering og sporing produserer FLLIT automatisk rå sporede kropps- og benposisjoner i hver videoramme, 20 gangartparametere, 5 tomter og en sporet video for ganganalyse og visualisering av gangbevegelser. Denne protokollen gir en trinnvis veiledning for bruk av FLLIT.

<table border="0" cellpadding="0" cellspacing="0" style="width:1025px;" width="1025">
	<colgroup>
		<col />
		<col />
		<col span="2" />
	</colgroup>
	<tbody>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Acrylic Sheets</td>
			<td style="width:123px;">Dama</td>
			<td style="width:344px;">1.6 mm thickness, Clear sheets</td>
			<td style="width:344px;">Singapore, Singapore</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Clear Glass slides</td>
			<td style="width:123px;">Biomedia</td>
			<td style="width:344px;">BMH 880101</td>
			<td style="width:344px;">Singapore, Singapore</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">High speed camera</td>
			<td style="width:123px;">Photron</td>
			<td style="width:344px;">Fastcam MC2.1</td>
			<td style="width:344px;">Tokyo, Japan. A shutter speed of 1 msec or faster is ideal to reduce motion blur of captured images</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Infra Red LED</td>
			<td style="width:123px;">Any - Generic from hardware store</td>
			<td style="width:344px;">940nm Infrared Light Board</td>
			<td style="width:344px;">Singapore, Singapore</td>
		</tr>
		<tr height="40">
			<td height="40" style="height:40px;width:215px;">Kimwipe</td>
			<td style="width:123px;">Kimberly Clark</td>
			<td style="width:344px;">34155-01LS</td>
			<td style="width:344px;">Irving, Texas, USA</td>
		</tr>
	</tbody>
</table>

fully automated leg tracking in freely moving insects using feature learning leg segmentation and tracking (fllit)

Drosophila-modellen har vært uvurderlig for studiet av nevrologisk funksjon og for å forstå molekylære og cellulære mekanismer som ligger til grunn for nevrodegenerasjon. Mens fly teknikker for manipulering og studie av nevronale undergrupper har vokst stadig mer sofistikert, rikdommen av de resulterende atferdsfenotypene har ikke blitt fanget på en lignende detalj. For å kunne studere subtile fluebensbevegelser for sammenligning blant mutanter krever evnen til å automatisk måle og kvantifisere høyhastighets og raske benbevegelser. Derfor utviklet vi en maskinlæringsalgoritme for automatisert benklosporing i fritt gående fluer, Feature Learning-baserte Limb-segmentering og sporing (FLLIT). I motsetning til de fleste dype læringsmetoder, fllit er helautomatisk og genererer sine egne treningssett uten behov for brukermerknad, ved hjelp av morfologiske parametere innebygd i læringsalgoritmen. Denne artikkelen beskriver en grundig protokoll for å utføre ganganalyse ved hjelp av FLLIT. Den beskriver prosedyrene for kameraoppsett, arenabygging, videoopptak, bensegmentering og benklosporing. Det gir også en oversikt over dataene produsert av FLLIT, som inkluderer rå sporede kropps- og benposisjoner i hver videoramme, 20 gangartparametere, 5 tomter og en sporet video. For å demonstrere bruken av FLLIT kvantifiserer vi relevante syke gangartparametere i en flymodell av Spinocerebellar ataksi 3.

Etter bensegmentering, sporing og databehandling genererer FLLIT automatisk rådata for kroppens posisjoner og hver benklo, 20 gangartparametere, 5 tomter og en sporet video (tabell 1).
Her demonstrerer vi disse analysene ved hjelp av en fluemodell av Spinocerebellar ataksi 3 (SCA3). Den pan-neuronale driveren Elav-GAL4 ble brukt til å kjøre enten full lengde wildtype human SCA3 med 27 glutaminer i polyQ kanalen (UAS-SCA3-flQ27), eller en full lengde mutant menneskelig SCA3 med 84 glutaminer i polyQ kanalen (UAS-SCA3-flQ84)11. SCA3 er preget av en ataksik gangart med kroppsveering, uberegnelig fotplassering og korte, lurching trinn12,13 (Tabell 2). For å karakterisere gangart av mutant SCA3 fluer og undersøke om de viser en lignende gangart til at av menneskelige pasienter, analyserte vi relevante gangartparametere generert av FLLIT, nemlig: Antall kroppssvinger, fotavtrykk regularitet, bendomeneoverlapping og størrelser, og benskrittlengder (Tabell 2).
Vi fant at SCA3-Q84 fluer viste flere svinger (Figur 4A,A'), uberegnelig fotplassering som utstilt av lav fotavtrykk regularitet (forstørret standardavvik i AEP14) (Figur 4B), økt bendomene overlapping (Figur 4C-D), forstørrede bendomener i lengde og område (Figur 4E,F) og redusert skrittlengde (figur 4G).
FLLIT genererer også en video som viser den sporede fluen og bena i de arenasentrerte og kroppssentrerte visningene, kroppsbanen og retningsretningen, og vertikale og laterale forskyvninger av hvert ben (figur 5). De sporede videoene tillater side-ved-side sammenligning av benbevegelser i forskjellige fluer. Representative videoer av Elav-GAL4>SCA3-flQ27 (Video 1) og Elav-GAL4> SCA3-flQ84 (Video 2) fluer viser at sammenlignet med Elav-GAL4>UAS-SCA3-flQ27 fluer (Figur 5A), Elav-GAL4>UAS-SCA3-flQ84 fluer (Figur 5B) utstilling uregelmessig, kryssende bendomener av forskjellige størrelser, som indikerer en lurching, ataksisk gangart.
<img alt="Figure 1" class="xfigimg" src="/files/ftp_upload/61012/61012fig1.jpg"> Figur 1. Oppsett av opptaksstasjonen og arenaen. Opptak fra siden (A) foran og (B). (C) Et eksempel på en arena som brukes til å lage flyopptak for FLLIT-sporing. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig1large.jpg" target="_blank">Vennligst klikk her for å se en større versjon av denne figuren.</a>
<img alt="Figure 2" class="xfigimg" src="/files/ftp_upload/61012/61012fig2.jpg"> Figur 2: Visning av det aktive vinduet under flygangopptak ved hjelp av et dobbelt hodekamera, noe som gjør det mulig å ta opp to fluer samtidig. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig2large.jpg" target="_blank">Vennligst klikk her for å se en større versjon av denne figuren.</a>
<img alt="Figure 3" class="xfigimg" src="/files/ftp_upload/61012/61012fig3.jpg"> Figur 3: Aktivt FLLIT-vindu som viser knappepanelet og merkede ben etter segmentering og sporing. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig3large.jpg" target="_blank">Vennligst klikk her for å se en større versjon av denne figuren.</a>
<img alt="Figure 4" class="xfigimg" src="/files/ftp_upload/61012/61012fig4.jpg"> Figur 4: Representative FLLIT-genererte data for relevante gangartparametere av fluer som uttrykker wildtype (SCA3-flQ27) vs. mutant (SCA3-flQ84) SCA3. (A) Antall svinger i kroppsbanen. (B) Mid-leg fotavtrykk regularitet normalisert til kroppslengde. Jeg har ikkenoe å sitil deg. Kryssede bendomener i hvert ben. (D) Domene overlapper mellom bena. (E) Mid-leg domene lengde normalisert til kroppslengde. (F) Mid-leg domeneområdet normalisert til kroppslengde2. (G) Midtbenet skritt lengde normalisert til kroppen lengde. <a href="https://www.jove.com/files/ftp_upload/61012/61012fig4large.jpg" target="_blank">Vennligst klikk her for å se en større versjon av denne figuren.</a>
<img alt="Figure 5" class="xfigimg" src="/files/ftp_upload/61012/61012fig5.jpg"> Figur 5: Øyeblikksbilde av representative FLLIT-genererte videoer. (A) Elav-GAL4> UAS-SCA3-flQ27 og (B) Elav-GAL4> UAS-SCA3-flQ84 fluer. Vennligst klikk her for å vise en større versjon av <a href="https://www.jove.com/files/ftp_upload/61012/61012fig5large.jpg" target="_blank">denne figuren.</a>
<img alt="Video 1" src="/files/ftp_upload/61012/61012video1.jpg"> Video 1: Representativ video av en flue som uttrykker pan-neuronal wild-type menneske full lengde SCA3 (Elav-GAL4> UAS-SCA3-flQ27). <a href="https://www.jove.com/files/ftp_upload/61012/Video_1_Elav-GAL4_SCA3-flQ27_22d.mp4" target="_blank">Vennligst klikk her for å se denne videoen. (Høyreklikk for å laste ned.)</a>
<img alt="Video 2" src="/files/ftp_upload/61012/61012video2.jpg"> Video 2: Representativ video av en flue som uttrykker pan-neuronal mutant menneskelig full lengde SCA3 (Elav-GAL4> UAS-SCA3-flQ84). <a href="https://www.jove.com/files/ftp_upload/61012/Video_2_Elav-GAL4_SCA3-flQ84_22d.mp4" target="_blank">Vennligst klikk her for å se denne videoen. (Høyreklikk for å laste ned.)</a>
<img alt="Supplemental Figure 1" src="/files/ftp_upload/61012/61012supfig1.jpg"> Tilleggsfigur 1: Konfigurasjoner for VcXSrv. <a href="https://www.jove.com/files/ftp_upload/61012/61012supfig1large.jpg" target="_blank">Vennligst klikk her for å se en større versjon av denne figuren.</a>
<img alt="Supplemental Figure 2" src="/files/ftp_upload/61012/61012supfig2.jpg"> Tilleggsfigur 2: Konfigurasjon for Xquartz. <a href="https://www.jove.com/files/ftp_upload/61012/61012supfig2large.jpg" target="_blank">Vennligst klikk her for å se en større versjon av denne figuren.</a>
<img alt="Supplemental Figure 3" src="/files/ftp_upload/61012/61012supfig3.jpg"> Tilleggsfigur 3: Bilde merket med dimensjonene som trengs for beregning av synsfelt. <a href="https://www.jove.com/files/ftp_upload/61012/61012supfig3large.jpg" target="_blank">Vennligst klikk her for å se en større versjon av denne figuren.</a>
<table border="1" fo:keep-together.within-page="1"><tbody><tr><td>Kategori</td>
			<td>Parametere</td>
			<td>Beskrivelse</td>
			<td>Fil/plott (hvis aktuelt)</td>
		</tr><tr><td rowspan="4">Rådata</td>
			<td>Kroppsstilling</td>
			<td>Posisjonskoordinater av kroppen centroid i hver ramme</td>
			<td>De to første kolonnene i CoM.csv</td>
		</tr><tr><td>Kroppsbane</td>
			<td>Rotasjonsvinkelen på kroppsaksen i grader (i forhold til y-aksen)</td>
			<td>Tredje kolonne med CoM.csv</td>
		</tr><tr><td>Arena-sentrert benklo Posisjoner</td>
			<td>Posisjonskoordinater for hver benklo i hver ramme basert på arenakoordinater</td>
			<td>bane.csv</td>
		</tr><tr><td>Body-sentrert ben klo Posisjoner</td>
			<td>Posisjonskoordinater for hver benklo i hver ramme basert på arenakoordinater</td>
			<td>norm_trajectory.csv</td>
		</tr><tr><td rowspan="3">Kroppsbevegelse</td>
			<td>Kroppslengde (mm)</td>
			<td>Lengden på prøvedyret estimert i hver ramme (fremre-mest posisjon på hodet til bakre-mest posisjon på vingene)</td>
			<td>kroppslengde.csv</td>
		</tr><tr><td>Øyeblikkelig kroppshastighet (mm/s)</td>
			<td>Øyeblikkelig hastighet på kroppen (centroid) i prøvedyret</td>
			<td>BodyVelocity.csv; BodyVelocity.pdf (engelsk)</td>
		</tr><tr><td>Vendepunkter i kroppen Banen</td>
			<td>For å finne vendepunktene reduseres banen til en stykkevis lineær kurve ved hjelp av Dougl asâASPeucker algoritme, hvoretter en svinghendelse identifiseres som involverer en vinkel > 50 grader mellom to nærliggende lineære segmenter som utgjør den forenklede banen</td>
			<td>BodyTrajectory.pdf (engelsk)</td>
		</tr><tr><td rowspan="9">Individuelle skrittparametere</td>
			<td>Skritt varighet (ms)</td>
			<td>Varigheten av en skritthendelse</td>
			<td>StrideParameters.csv (Andre)</td>
		</tr><tr><td>Skrittperiode (ms)</td>
			<td>Varigheten fra ett skritt-hendelse til neste</td>
			<td></td>
		</tr><tr><td>Skritt forskyvning (mm)</td>
			<td>Forskyvning av benkloen under en skritthendelse</td>
			<td></td>
		</tr><tr><td>Skrittsti dekket (mm)</td>
			<td>Total bane dekket av benkloen under en skritthendelse</td>
			<td></td>
		</tr><tr><td>Fremre ekstrem posisjon (mm)</td>
			<td>Landingposisjon (i forhold til kroppen) av en benklo på slutten av en skritthendelse</td>
			<td></td>
		</tr><tr><td>Bakre ekstrem posisjon (mm)</td>
			<td>Take-off posisjon (i forhold til kroppen) av en benklo i begynnelsen av en skritthendelse</td>
			<td></td>
		</tr><tr><td>Løpeamplitude (mm)</td>
			<td>Forskyvning langs bevegelsesretningen for en skritthendelse</td>
			<td></td>
		</tr><tr><td>Holdning linearitet (mm)</td>
			<td>Definert som avviket av skrittbanen fra en kurve glattet over (ved 20ms intervaller) tilsvarende framtid og bakre ekstreme posisjoner av skrittet</td>
			<td></td>
		</tr><tr><td>Løpestrekk (mm)</td>
			<td>Avstand av benkloposisjon fra kroppssenteret midt i en skritthendelse</td>
			<td></td>
		</tr><tr><td rowspan="10">Bevegelse av ben</td>
			<td>Benhastighet (mm/s)</td>
			<td>Den øyeblikkelige hastigheten på hvert ben</td>
			<td>LegSpeed.csv; Gangart.pdf</td>
		</tr><tr><td>Gangart indeks</td>
			<td>Dette måler typen gangkoordinering utstilt av (seksbent) prøvedyret under bevegelsen. En gangart indeks på 1 tilsvarer en stativ gangart, _1 tilsvarer en tetrapod gangart mens 0 utgjør en ikke-kanonisk gangart. I vår implementering oppnås gangindeksen med et glidende gjennomsnitt over et 120 ms-vindu</td>
			<td>GaitIndex.csv; GaitIndex.pdf (engelsk)</td>
		</tr><tr><td>Bevegelsesprosent</td>
			<td>Prosentandel av tiden et ben er i bevegelse</td>
			<td>LegParameters.csv (Andre)</td>
		</tr><tr><td>Gjennomsnittlig skrittperiode (ms)</td>
			<td>Gjennomsnittlig varighet fra én skritthendelse til neste</td>
			<td>LegParameters.csv (Andre)</td>
		</tr><tr><td>Fotavtrykk regularitet (mm)</td>
			<td>Målt som standardavvikene til bakre og</td>
			<td>LegParameters.csv (Andre)</td>
		</tr><tr><td></td>
			<td>fremre ekstreme posisjoner av et ben</td>
			<td></td>
		</tr><tr><td>Domeneområde for benbane (mm2)</td>
			<td>Området for det minimale konvekse skroget som inneholder hele benbanen i den kroppssentrerte referanserammen</td>
			<td>LegParameters.csv; LegDomain.pdf (Engelsk)</td>
		</tr><tr><td>Lengde og bredde på ben bane domene (mm)</td>
			<td>Oppnådd via maksimal forventet avstand av kloposisjoner på de store (domenelengde) og mindre (domenebredde) hovedakser</td>
			<td>LegParameters.csv (Andre)</td>
		</tr><tr><td>Bendomeneskjæring/overlapping (mm2)</td>
			<td>Skjæringspunktet/overlappingen mellom hver mulige</td>
			<td>LegDomainOverlap.csv (Andre)</td>
		</tr><tr><td>Holdning bredde (mm)</td>
			<td>Gjennomsnitt av avstanden mellom AEP og PEP i venstre og mellomben</td>
			<td>HoldningBredde.csv</td>
		</tr></tbody></table>Tabell 1: Gangparametere generert av FLLIT.
<table border="1" fo:keep-together.within-page="1"><tbody>
<tr>
<td></td>
			<td colspan="4">Gangart-funksjon</td>
		</tr>
<tr>
<td>Gait funksjoner i Spinocerebellar ataksi 3 (SCA3)</td>
			<td>Veering</td>
			<td>Uberegnelig fotplassering og benkryssing over</td>
			<td>Lurching trinn</td>
			<td>Korte skritt</td>
		</tr>
<tr>
<td>Måleparameter</td>
			<td>Antall body turn hendelser</td>
			<td>Fotavtrykk regularitet</td>
			<td>Størrelse på bendomener, grad av domeneoverlapping</td>
			<td>Skritt lengde</td>
		</tr>
<tr>
<td>FLLIT-fil</td>
			<td>BodyTrajectory.pdf (engelsk)</td>
			<td>LegParameters.csv (Andre)</td>
			<td>LegDomainOverlap.csv (Andre)</td>
			<td>StrideParameters.csv (Andre)</td>
		</tr>
</tbody></table>Tabell 2: Tabell som viser kjennetegn sca3 gangart funksjoner hos menneskelige pasienter med sine tilsvarende FLLIT parametere og utdatafiler.

Watch this Scientific Journal Video about Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking FLLIT at JoVE.com

Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking FLLIT

Vi beskriver detaljerte protokoller for bruk av FLLIT, en helautomatisk maskinlæringsmetode for benklobevegelsessporing i fritt bevegelige Drosophila melanogaster og andre insekter. Disse protokollene kan brukes til å kvantitativt måle subtile gangbevegelser i villtypefluer, muterte fluer og flymodeller av neurodegenerasjon.

Helautomatisk bensporing i fritt bevegelige insekter ved hjelp av feature learning leg segmentering og sporing (FLLIT)

The Drosophila model has been invaluable for the study of neurological function and for understanding the molecular and cellular mechanisms that underlie ...

FLLIT er en algoritme som beregner kroppen og bensammensetningene til et sporet dyr. Og dette er nyttig for å karakterisere kretsene som ligger til grunn for både normal og sykdomsgangatferd. Det unike med FLLIT er at det ikke krever noen brukernotaterte datasett for trening og er dermed helautomatisk.Men analyserer også automatisk spordataene som produserer en rekke gangmålinger, gangartplott for visualisering og en sporvideo. Å demonstrere prosedyren vil være Animesh Banerjee, en postdoktorkollega fra laboratoriet mitt. Før du begynner et eksperiment, må du bekrefte at opptaksstasjonen har en høyhastighetskamera med en scene over den for å holde arenakammeret.Plasser infrarøde LED-lys øverst på scenen med en diffuser mellom kameraet og prøven. Omtrent 40 minutter før innspillingen begynner, overfør fluene til en tom ond på is i fem til syv minutter. Mens fluene blir sedert, bruk vann og en klut for å fjerne arenaen og glassskliene i kammeret og tape en av glassskliene under kammeret.Bruk en ren børste til å overføre en bedøvet fly inn i kammeret og fest kammeret med et andre lysbilde og tape. La deretter kamret fly akklimatisere ved romtemperatur i 15 til 20 minutter. Hvis du vil generere videoer for FLLIT-analyse, må du først slå på strømkilden og åpne visningsprogrammet på det tilkoblede datasystemet.Endre bildefrekvensen for opptak til 1 000 bilder per sekund, og sett lukkertiden til ett millisekund. Plasser kammeret med fluen på opptaksarenaen og klikk på LIVE-knappen. Bekreftet at kameraet er fokusert på beinspissene når flyet går oppreist på gulvet i kammeret og klikker på Record.Under opptak, sørg for at flyet går i en relativt rett bane uten å berøre kanten av arenaen, går minst tre skritt per ben, ikke pause under turen, og at avstanden gikk tilsvarer minst en og en halv kroppslengder. På slutten av analysen klikker du På Spill ferdig for å stoppe opptaket og lagre filene i MRAW- eller TIFF-format i de aktuelle mappene. For å installere FLLIT, først laste ned programmet til et hvilket som helst operativsystem.Pakk ut innholdet i zip-filen og last ned eksempeldatasett. Hvis du vil installere FLLIT i Ubuntu, navigerer du til FLLIT/Compiled-katalogen og høyreklikker for å velge Åpne i Terminal. Last ned et eksempeldatasett og opprett et mappedata under FLLIT-master/Compiled der datasettmappene skal plasseres.Installer MATLAB kjøretidsbibliotekene til HOME/MCR. Når installasjonen av MATLAB runtime-biblioteket er fullført, utsteder du kommandoen for å sikre at de kjørbare rettighetene registreres til FLLIT. Skriv deretter inn kommandoen for å utføre FLLIT.For segmentering av videoen, konverter filen til individuelle TIFF-filer og lagre de konverterte filene i FLLIT-datamappen. Når alle filene er overført, kjører du FLLIT. I popup-vinduet velger du 0 for å utføre bare bensegmenteringen eller velger 1 for å inkludere beinsporing med bensegmentering.Velg mappen som inneholder TIFF-bildene for bilde av videoen som skal spores, og filen av interesse, og klikk Legg til. Klikk deretter på Ferdig for å starte segmenteringen og sporingen av den valgte videoen. Hvis du vil kontrollere nøyaktigheten av sporingen og utføre feilrettinger, klikker du Velg datamappe, og deretter velger du mappen som skal spores.Klikk vis sporing, og kontroller merkingen for alle beina i den første rammen. Hvis et ben er feil merket og en korreksjon er nødvendig, klikker du Sett visning på pause og justerer forutsigelsen. I Leg to Adjust-panelet velger du benet som krever korreksjon, og dobbeltklikker på riktig posisjon av dette benet i bildevinduet.Klikk deretter Lagre og avslutt. Hvis du vil behandle de segmenterte og sporede dataene, klikker du Dataprosess. Først beregner du det faktiske visningsfeltet for den innspilte videoen slik at portparameterne kan måles.I popup-vinduet angir du antall bilder per sekund videoen registreres på, og angir det beregnede visningsfeltet i millimeter. Hvis du vil ha tilgang til sporingsresultatene, åpner du resultatene og sporingsmappene. Hvis du vil generere en video av den sporede fly, velger du Lag video.Etter bensegmentering, sporing og databehandling genererer FLLIT automatisk rådata for kroppens posisjoner, og hver benklo, 20 gangartparametere og tilhørende plott og sporede videoer. SCA3 er preget av en ataxic gangart med kroppen veering, uberegnelig fot plassering, og korte lurching trinn. For å karakterisere gangart av muterte SCA3 fluer og for å undersøke om de viser en lignende gangart til menneskelige pasienter, kan de relevante gangartparametrene generert av FLLIT analyseres.SCA3-Q84 fluer viser flere svinger, uberegnelig fotplassering som utstilt av en lav fotavtrykk regularitet, og økt bendomene overlapping, forstørrede bendomener i lengde og område, og redusert skrittlengde. FLLIT kan også generere en video som viser den sporede fly og ben i arena-sentrert og kroppen-sentrert utsikt, kroppen banen, retning retning, og vertikale og laterale forskyvninger av hvert ben. Sammenlignet med SCA3-Q27 fluer, SCA3-Q84 fluer viser uregelmessige kryssende bendomener av forskjellige størrelser, noe som indikerer en lurching, ataxic gangart.Rådata for kroppen og benkloposisjonene kan videre analyseres for spesifikke bevegelser av interesse. For eksempel tillot bruken av FLLIT vår gruppe å fastslå at de stive fenotypene som vises av Drosophila-modeller av Parkinsons sykdom, skyldes dopaminerg nevrondysfunksjon.

Research

JoVE Journal

Behavior

Fully Automated Leg Tracking in Freely Moving Insects using Feature Learning Leg Segmentation and Tracking (FLLIT)

Quantifying Learning in Young Infants: Tracking Leg Actions During a Discovery-learning Task

Kvantifisere læring i små spedbarn: Tracking Leg Handlinger Under en Discovery-læring Oppgave

Task-specific actions emerge from spontaneous movement during infancy. It has been proposed that task-specific actions emerge through a discovery-learning ...

A Method to Quantify Visual Information Processing in Children Using Eye Tracking

En metode for å kvantifisere Visual Information Processing hos barn ved hjelp av Eye Tracking

Visual problems that occur early in life can have major impact on a child's development. Without verbal communication and only based on observational ...

Psychophysical Tracking Method to Measure Taste Preferences in Children and Adults

Psyko Tracking metode for å måle smakspreferanser hos barn og voksne

The Monell two-series, forced-choice, paired-comparison tracking method provides a reliable measure of sweet taste preferences from childhood to ...

Multi-layer Cortical Ca2+ Imaging in Freely Moving Mice with Prism Probes and Miniaturized Fluorescence Microscopy

Multi-layer Cortical Ca2+ Imaging in Freely Moving Mice with Prism Probes and Miniaturized Fluorescence Microscopy

Multi-lag Cortical Ca<sup&gt; 2+</sup&gt; Imaging i fritt bevegelige mus med prismeprober og miniatyrisert fluorescensmikroskopi

In vivo circuit and cellular level functional imaging is a critical tool for understanding the brain in action. High resolution imaging of mouse cortical ...

Simultaneous Recordings of Cortical Local Field Potentials and Electrocorticograms in Response to Nociceptive Laser Stimuli from Freely Moving Rats

Samtidig opptak av kortikale lokale feltet potensialer og Electrocorticograms svar på Nociceptive Laser Stimuli fra fritt flytte rotter

Electrocortical responses, elicited by laser heat pulses that selectively activate nociceptive free nerve endings, are widely used in many animal and ...

Behavioral Tracking and Neuromast Imaging of Mexican Cavefish

Atferdsmessige sporing og Neuromast avbildning av meksikanske Cavefish

Cave-dwelling animals have evolved a series of morphological and behavioral traits to adapt to their perpetually dark and food-sparse environments. Among ...

Simultaneous Eye Tracking and Single-Neuron Recordings in Human Epilepsy Patients

Samtidige eye tracking og Single-Nevron innspillinger i Human epilepsi pasienter

Intracranial recordings from patients with intractable epilepsy provide a unique opportunity to study the activity of individual human neurons during ...

Optogenetic Manipulation of Neuronal Activity to Modulate Behavior in Freely Moving Mice

Optogenetic manipulering av nevronal aktivitet for å modulere atferd i fritt bevegelige mus

Optogenetic modulation of neuronal circuits in freely moving mice affects acute and long-term behavior. This method is able to perform manipulations of ...

Tracking Rats in Operant Conditioning Chambers Using a Versatile Homemade Video Camera and DeepLabCut

Sporing rotter i operant condition kamre ved hjelp av en allsidig hjemmelaget videokamera og deeplabcut

Operant conditioning chambers are used to perform a wide range of behavioral tests in the field of neuroscience. The recorded data is typically based on ...