Method Article
* Questi autori hanno contribuito in egual misura
La tomografia crioelettronica (cryo-ET) consente la visualizzazione 3D dell'ultrastruttura cellulare con risoluzione nanometrica, ma la segmentazione manuale rimane lunga e complessa. Presentiamo un nuovo flusso di lavoro che integra un software avanzato di realtà virtuale per la segmentazione dei tomogrammi crio-ET, dimostrandone l'efficacia attraverso la segmentazione dei mitocondri nelle cellule di mammifero.
La crio-tomografia elettronica (cryo-ET) è una potente tecnica per visualizzare l'ultrastruttura delle cellule in tre dimensioni (3D) con risoluzione nanometrica. Tuttavia, la segmentazione manuale dei componenti cellulari nei dati crio-ET rimane un collo di bottiglia significativo a causa della sua complessità e della sua natura dispendiosa in termini di tempo. In questo lavoro, presentiamo un nuovo flusso di lavoro di segmentazione che integra un software avanzato di realtà virtuale (VR) per migliorare sia l'efficienza che l'accuratezza della segmentazione dei set di dati crio-ET. Questo flusso di lavoro sfrutta uno strumento VR immersivo con un'interazione 3D intuitiva, che consente agli utenti di navigare e annotare strutture cellulari complesse in un ambiente più naturale e interattivo. Per valutare l'efficacia del flusso di lavoro, lo abbiamo applicato alla segmentazione dei mitocondri nelle cellule dell'epitelio pigmentato retinico (RPE1). I mitocondri, essenziali per la produzione di energia cellulare e la segnalazione, mostrano cambiamenti morfologici dinamici, rendendoli un campione di prova ideale. Il software VR ha facilitato la delineazione precisa delle membrane mitocondriali e delle strutture interne, consentendo l'analisi a valle delle strutture segmentate della membrana. Dimostriamo che questo flusso di lavoro di segmentazione basato sulla realtà virtuale migliora significativamente l'esperienza dell'utente, mantenendo al contempo una segmentazione accurata di complesse strutture cellulari nei dati crio-ET. Questo approccio è promettente per ampie applicazioni nella biologia cellulare strutturale e nell'educazione scientifica, offrendo uno strumento trasformativo per i ricercatori impegnati nell'analisi cellulare dettagliata.
La tomografia crioelettronica (cryo-ET) ha rivoluzionato la nostra capacità di visualizzare i componenti cellulari nel loro stato quasi nativo ad alta risoluzione 1,2. Questa potente tecnica consente ai ricercatori di caratterizzare l'ultrastruttura cellulare, fornendo informazioni senza precedenti sull'architettura e la funzione cellulare. Tuttavia, la crio-ET non è priva di limiti, il principale tra questi è il requisito che i campioni siano abbastanza sottili da essere trasparenti agli elettroni (in genere <0,5 μm) per l'imaging nei microscopi elettronici a trasmissione standard criogenici. I recenti progressi nella fresatura a fascio ionico criofocalizzato hanno consentito l'assottigliamento di campioni spessi per l'analisi crio-ET 3,4.
I tipici flussi di lavoro crio-ET iniziano con la raccolta di una serie di inclinazione, in cui il campione viene ripreso a varie angolazioni, da +60° a -60°. Queste immagini vengono quindi allineate computazionalmente e retroproiettate per creare un volume tridimensionale (3D) o tomogramma 5,6,7. Questo tomogramma funge da mappa 3D dettagliata del paesaggio cellulare, offrendo informazioni sia spaziali che temporali sulle strutture cellulari. Un ulteriore perfezionamento attraverso la media del sottotomogramma, in cui più copie della stessa struttura sono allineate e mediate, può spingere ulteriormente i limiti di risoluzione, a volte raggiungendo una risoluzione sub-nanometricadi 7,8,9,10.
Un passaggio cruciale nell'estrazione di informazioni biologiche significative da questi tomogrammi è la segmentazione. Questo processo comporta l'annotazione di strutture cellulari specifiche, come le membrane, all'interno del volume 3D. La segmentazione consente analisi avanzate, tra cui il calcolo delle distanze intermembrana e della curvatura della membrana, fornendo preziose informazioni sui processi cellulari11,12. Sebbene siano disponibili diversi pacchetti software per questo compito, tra cui Dragonfly, Amira, MemBrain, EMAN2 e tomomemsegtv 13,14,15,16,17, il processo di segmentazione rimane un collo di bottiglia significativo nell'analisi dei dati crio-ET. Spesso si tratta di un processo manuale laborioso e dispendioso in termini di tempo, che potrebbe richiedere settimane o mesi per essere completato. Molti di questi pacchetti offrono funzionalità di segmentazione automatica, ma spesso richiedono un'ampia correzione manuale per rimuovere i falsi positivi, un processo che può essere laborioso e poco intuitivo se eseguito sezione per fetta o in 3D.
Proponiamo un approccio alternativo sfruttando la tecnologia della realtà virtuale (VR) per affrontare queste sfide. La realtà virtuale offre un metodo immersivo e interattivo per la visualizzazione dei dati, consentendo agli utenti di navigare attraverso il volume tomografico come se si trovassero all'interno dell'ambiente cellulare stesso. Questo approccio fornisce anche una preziosa piattaforma per l'educazione scientifica e l'esplorazione scientifica e la scoperta di dati crio-ET in situ , fornendo un'esperienza coinvolgente e unica. In questo lavoro, presentiamo un protocollo per la segmentazione dei dati cryo-ET utilizzando syGlass18, software VR progettato per la visualizzazione scientifica. Questo software fornisce un toolkit completo per l'analisi dei dati crio-ET, inclusa la segmentazione manuale, il perfezionamento delle segmentazioni generate automaticamente e persino il prelievo di particelle all'interno dei tomogrammi. Il nostro studio dimostra la fattibilità della realtà virtuale come potente strumento per la pulizia delle segmentazioni, il prelievo di particelle e la segmentazione manuale nell'analisi dei dati crio-ET.
Per illustrare l'utilità del software VR per la segmentazione crio-ET, ci concentriamo sull'analisi della morfologia mitocondriale nelle cellule dell'epitelio pigmentato retinico (RPE1). I mitocondri fungono da eccellente banco di prova per la segmentazione grazie alla loro struttura complessa e alla presenza di caratteristiche facilmente quantificabili, come la distanza tra le membrane mitocondriali esterne e interne. Queste caratteristiche possono essere misurate con precisione utilizzando strumenti di analisi morfometrica di superficie12, fornendo metriche solide per valutare la qualità della segmentazione. Questo protocollo fornisce istruzioni dettagliate per la segmentazione dei dati crio-ET utilizzando syGlass, dimostrando la sua utilità all'interno della pipeline di segmentazione crio-ET. Incorporando la segmentazione basata sulla realtà virtuale nel flusso di lavoro crio-ET, miriamo a migliorare sia l'efficienza che l'accuratezza dell'analisi strutturale manuale in biologia cellulare.
1. Preparazione dei dati crio-ET per la segmentazione
2. Configurazione della realtà virtuale (VR)
3. Ottimizzazione della visualizzazione 3D
4. Processo di segmentazione
5. Esportazione di dati segmentati e analisi
6. Importazione della maschera binaria nel software per la pulizia
7. Selezione delle coordinate delle particelle utilizzando il software VR
In questo studio, abbiamo segmentato tomogrammi contenenti mitocondri e organelli membranosi aggiuntivi (ad esempio, vescicole, reticolo endoplasmatico) utilizzando syGlass. I tomogrammi sono stati inizialmente ricostruiti in Warp utilizzando una proiezione pesata a 16.00 Å/pixel e sono stati sottoposti a correzione del cuneo mancante e denoising utilizzando il software IsoNet. I seguenti tomogrammi sono stati sottoposti a un'ulteriore elaborazione per l'importazione, come illustrato nella Figura 1A (vedere anche Video supplementare S1, Video supplementare S2, Video supplementare S3 e Video supplementare S4).
Dopo la pre-elaborazione, i tomogrammi in formato MRC sono stati convertiti in pile TIFF utilizzando ImageJ, con l'inversione del contrasto applicata per far apparire le membrane bianche su sfondo nero. L'equalizzazione dell'istogramma è stata quindi eseguita per migliorare ulteriormente il contrasto; Ciò consente anche una soglia più efficace. Le pile TIFF sono state importate e visualizzate in 3D all'interno di un ambiente VR immersivo, fornendo un'ispezione dettagliata delle strutture membranose utilizzando l'utensile di taglio nel software mostrato nella Figura 1B.
La segmentazione manuale è stata eseguita nel software, con la finestra impostata su auto e le regolazioni di luminosità/soglia effettuate per ottimizzare la visibilità delle funzioni cellulari. Le ROI intorno ai mitocondri e ad altre strutture sono state definite utilizzando i controller VR. Lo strumento di segmentazione ha permesso di delineare con precisione i confini della membrana, correggendo gli errori utilizzando la funzione di cancellazione. La navigazione sezione per fetta o in 3D utilizzando lo strumento ROI per inscatolare le regioni in tutto il tomogramma, combinata con lo strumento pennello regolabile, ha garantito una segmentazione accurata delle membrane mitocondriali e di altri organelli, come mostrato nella Figura 1C.
I dati segmentati sono stati visualizzati generando una mesh utilizzando l'opzione delle superfici dello strumento ROI, con le iterazioni di levigatura impostate su 12 e il livello di risoluzione impostato su 3. I rendering 3D finali mostrano chiaramente le strutture mitocondriali, comprese le membrane esterne e interne, le cristae e i depositi di fosfato di calcio, come mostrato nella Figura 1D (vedi anche Video supplementare S5, Video supplementare S6, Video supplementare S7 e Video supplementare S8).
Figura 1: Flusso di lavoro della visualizzazione, segmentazione e rendering 3D del tomogramma utilizzando la clessidra. (A) Sezioni tomografiche di cellule RPE1 a bordo sottile. Tomogrammi corretti IsoNet ricostruiti in Warp e utilizzati per la segmentazione con syGlass, visualizzati con IMOD25. I tomogrammi sono stati raccolti su un microscopio Titan-Krios da 300 keV dotato di un rivelatore K3 e focalizzato sui bordi sottili delle cellule dell'epitelio retinico. Ogni tomogramma contiene almeno un mitocondrio insieme a vari altri organelli legati alla membrana. Queste immagini sono immagini fisse di video mostrati in Video supplementare S1, Video supplementare S2, Video supplementare S3 e Video supplementare S4. (B) Tomogrammi corrispondenti visualizzati nel software. Fetta tomografica creata utilizzando lo strumento di taglio nel software VR dopo aver ottimizzato la soglia, la luminosità e la finestratura, rivelando strutture cellulari distinte. (C) Tomogrammi visualizzati nel software con membrane segmentate. Sezione tomografica creata con lo strumento di taglio nel software VR, sovrapposta alla segmentazione corrispondente. I depositi di fosfato di calcio sono mostrati in giallo, le membrane mitocondriali in ciano e altre membrane come le vescicole e la membrana plasmatica in viola. (D) Rendering 3D delle membrane segmentate in syGlass. Le membrane mitocondriali, comprese le cristae, le membrane mitocondriali esterne e interne, sono mostrate in ciano. I depositi di fosfato di calcio sono in giallo o verde, le vescicole e la membrana plasmatica sono in viola e il reticolo endoplasmatico è in marrone chiaro. Queste immagini sono immagini fisse di video mostrati in Video supplementari S5, Video supplementari S6, Video supplementari S7 e Video supplementari S8. Clicca qui per visualizzare una versione più grande di questa figura.
Video supplementare S1: Tomogramma del campione RPE-1_1 utilizzato per la segmentazione in questo studio. Questo tomogramma viene ricostruito a 16 Å/pixel utilizzando Warp, quindi denoised e corretto per il cuneo mancante con IsoNet. Clicca qui per scaricare questo file.
Video supplementare S2: Tomogramma del campione RPE-1_2 utilizzato per la segmentazione in questo studio. Questo tomogramma viene ricostruito a 16 Å/pixel utilizzando Warp, quindi denoised e corretto per il cuneo mancante con IsoNet. Clicca qui per scaricare questo file.
Video supplementare S3: Tomogramma del campione RPE-1_3 utilizzato per la segmentazione in questo studio. Questo tomogramma viene ricostruito a 16 Å/pixel utilizzando Warp, quindi denoised e corretto per il cuneo mancante con IsoNet. Clicca qui per scaricare questo file.
Video supplementare S4: Tomogramma del campione RPE-1_4 utilizzato per la segmentazione in questo studio. Questo tomogramma viene ricostruito a 16 Å/pixel utilizzando Warp, quindi denoised e corretto per il cuneo mancante con IsoNet. Clicca qui per scaricare questo file.
Video supplementare S5: La segmentazione risultante del campione RPE-1_1 dopo la generazione delle superfici. Le membrane mitocondriali sono mostrate in ciano; i fosfati di calcio all'interno dei mitocondri sono raffigurati in giallo; il reticolo endoplasmatico è mostrato in marrone chiaro; e altre membrane sono visualizzate in viola. Clicca qui per scaricare questo file.
Video supplementare S6: La segmentazione risultante del campione RPE-1_2 dopo la generazione delle superfici. Le membrane mitocondriali sono mostrate in ciano; i fosfati di calcio all'interno dei mitocondri sono raffigurati in giallo; il reticolo endoplasmatico è mostrato in marrone chiaro; e altre membrane sono visualizzate in viola. Clicca qui per scaricare questo file.
Video supplementare S7: la segmentazione risultante del campione RPE-1_3 dopo la generazione delle superfici. Le membrane mitocondriali sono mostrate in ciano; i fosfati di calcio all'interno dei mitocondri sono raffigurati in giallo; il reticolo endoplasmatico è mostrato in marrone chiaro; e altre membrane sono visualizzate in viola. Clicca qui per scaricare questo file.
Video supplementare S8: La segmentazione risultante del campione RPE-1_4 dopo la generazione delle superfici. Le membrane mitocondriali sono mostrate in ciano; i fosfati di calcio all'interno dei mitocondri sono raffigurati in giallo; il reticolo endoplasmatico è mostrato in marrone chiaro; e altre membrane sono visualizzate in viola. Clicca qui per scaricare questo file.
In questo lavoro, abbiamo dimostrato come la realtà virtuale, in particolare utilizzando syGlass, possa essere integrata nella pipeline cryo-ET per segmentare efficacemente le strutture cellulari. Sebbene la nostra attenzione si sia concentrata principalmente sulle membrane, non vi è alcuna limitazione intrinseca che impedisca la segmentazione di altre strutture cellulari, come filamenti o ribosomi, in quanto è possibile regolare la forma e le dimensioni del pennello e la soglia per garantire che vengano contrassegnati solo i voxel corrispondenti agli oggetti cellulari desiderati. Uno dei principali vantaggi della realtà virtuale nella segmentazione è l'interazione intuitiva e pratica con i dati, che consente agli utenti di visualizzare e manipolare i volumi come se fossero fisicamente al loro interno. I metodi tradizionali di segmentazione manuale o di pulizia delle maschere di segmentazione iniziale in genere comportano il lavoro diretto su un computer, che può essere meno coinvolgente e più lento da annotare.
Incorporando la realtà virtuale nel flusso di lavoro crio-ET, gli utenti possono non solo interagire rapidamente con le maschere di segmentazione generate da altri software, ma anche utilizzare la realtà virtuale per guidare la segmentazione di strutture parzialmente segmentate e ripulire in modo efficiente i falsi positivi. Attualmente, la segmentazione manuale è ancora necessaria per la maggior parte dei casi d'uso di annotazione e il flusso di lavoro presentato consente agli utenti di generare segmentazioni adatte all'analisi a valle con maggiore facilità e velocità. Per questo studio abbiamo utilizzato il visore HTC Vive VR, ma il software è compatibile con i dispositivi che supportano SteamVR o OculusVR.
Per un'applicazione ottimale di questo protocollo, i dati crio-ET devono soddisfare criteri specifici, come tomogrammi di alta qualità con un elevato rapporto segnale/rumore (SNR). L'SNR è un parametro essenziale, poiché la chiarezza delle caratteristiche strutturali influenza direttamente l'efficacia della segmentazione manuale in VR. Le fasi di pre-elaborazione, come la correzione del cuneo mancante e il denoising, sono parti fondamentali del flusso di lavoro; in questo protocollo, abbiamo utilizzato IsoNet per questi scopi. I tomogrammi devono essere ricostruiti con una risoluzione adeguata, utilizzando una dimensione del voxel che fornisca dettagli strutturali sufficienti e una separazione sufficiente tra le strutture cellulari per consentire una segmentazione efficace tra le strutture, mantenendo ulteriormente le dimensioni dei dati gestibili per la visualizzazione VR. Inoltre, è necessario applicare il contrasto invertito con le strutture cellulari che appaiono bianche su sfondo nero e l'equalizzazione dell'istogramma per migliorare la visibilità delle membrane e di altre strutture all'interno dell'ambiente syGlass.
Diversi punti critici devono essere considerati per garantire il successo di questo protocollo. In primo luogo, durante la pre-elaborazione dei dati, è fondamentale applicare accuratamente l'inversione del contrasto e l'equalizzazione dell'istogramma; Regolazioni improprie possono portare a una visualizzazione non ottimale in VR, rendendo difficile la segmentazione. In secondo luogo, all'interno del software VR, le regolazioni appropriate delle impostazioni di finestra, luminosità e soglia sono essenziali per una visualizzazione ottimale delle strutture. Gli utenti dovrebbero sperimentare queste impostazioni per ottenere i migliori risultati per i loro set di dati specifici e le configurazioni VR.
Quando si tratta di risoluzione dei problemi, gli utenti possono riscontrare problemi come limitazioni delle prestazioni del sistema VR, soprattutto quando si gestiscono set di dati di tomogrammi di grandi dimensioni. Se l'ambiente VR diventa lento o non risponde, prendi in considerazione la possibilità di sottocampionare i dati o segmentare il tomogramma in sezioni più piccole regolando il riquadro di delimitazione negli strumenti ROI in syGlass e spostandolo lungo il tomogramma durante l'esecuzione della segmentazione. Il cursore delle prestazioni nel menu di visualizzazione può anche essere regolato per ridurre il ritardo durante il processo di segmentazione. Inoltre, per mitigare la cinetosi, gli utenti possono regolare le impostazioni VR per ridurre gli effetti di movimento o fare pause regolari durante le sessioni di segmentazione.
Il nostro protocollo di segmentazione basato su realtà virtuale offre vantaggi significativi agli attuali flussi di lavoro di segmentazione crio-ET. I metodi convenzionali di segmentazione manuale spesso comportano l'annotazione 2D su singole sezioni, che può richiedere molto tempo e potrebbe non catturare completamente la continuità tridimensionale13. Inoltre, la segmentazione basata sulla realtà virtuale introduce una visione molto più immersiva delle strutture cellulari, facilitando la visualizzazione. Le segmentazioni automatizzate dell'apprendimento automatico stanno emergendo come un metodo potente per ottenere segmentazioni dai tomogrammi cellulari 14,16,17, sebbene gli elevati livelli di rumore e le strutture complesse presenti nei dati crio-ET portino a lacune e falsi positivi che richiedono un intervento manuale. Questo protocollo offre un approccio alternativo per segmentare manualmente i tomogrammi crioelettronici, per generare segmentazioni iniziali che possono potenzialmente essere utilizzate come dati di addestramento per altri software di reti neurali o per ripulire le segmentazioni iniziali generate da altri approcci automatizzati.
In conclusione, questo studio evidenzia la segmentazione basata sulla realtà virtuale come uno strumento promettente per l'analisi e l'educazione dei dati crio-ET, offrendo una maggiore efficienza e un'esperienza utente più coinvolgente. Con l'ulteriore sviluppo, la tecnologia VR ha il potenziale per rivoluzionare il modo in cui interpretiamo e diffondiamo le scoperte scientifiche di strutture cellulari complesse nei set di dati crio-ET, fornendo una valida alternativa ai tradizionali metodi di segmentazione e istruzione.
Gli autori dichiarano di non avere conflitti di interesse.
Questo lavoro è stato svolto presso il National Center for CryoEM Access and Training (NCCAT) e il Simons Electron Microscopy Center situato presso il New York Structural Biology Center, supportati da NIH (Common Fund U24GM129539, U24GM139171 e NIGMS R24GM154192), dalla Simons Foundation (SF349247) e dall'Assemblea dello Stato di New York.
Name | Company | Catalog Number | Comments |
CryoET Data | Format:TIFF-stack, TIFF | ||
HTC VIVE Cosmos | HTC | 99HARL000-00 | https://www.vive.com/sea/product/vive-cosmos/features/ |
Intel(R) Core(TM) i7-10870H CPU @ 2.20 GHz 2.21 GHz | Intel | https://ark.intel.com/content/www/us/en/ark/products/208018/intel-core-i7-10870h-processor-16m-cache-up-to-5-00-ghz.html | |
NVIDIA GeForce RTX 3070 Laptop GPU | NVIDIA | https://www.nvidia.com/en-us/geforce/laptops/compare/30-series/ | |
syGlass Software | syGlass | syGlass Software installed on a compatible Windows PC | |
VIVE Cosmos Hand Controllers | HTC | 99HAFR001-00 | https://www.vive.com/us/accessory/cosmos-controller-right/ |
Windows 11 Home | Microsoft | Microsoft Windows 11 Home |
Richiedi autorizzazione per utilizzare il testo o le figure di questo articolo JoVE
Richiedi AutorizzazioneThis article has been published
Video Coming Soon