Method Article
本文介绍了如何使用模拟监督的机器学习来分析固定细胞荧光显微镜图像中的线粒体形态。
细胞荧光显微镜图像中亚细胞器(如线粒体)的定量分析是一项艰巨的任务,因为这些小而形态多样化的结构的分割存在固有的挑战。在本文中,我们演示了使用机器学习辅助分割和分析管道来量化固定细胞荧光显微镜图像中的线粒体形态。基于深度学习的分割工具在模拟图像上进行训练,无需对监督深度学习进行地面实况注释。我们证明了该工具在具有荧光线粒体标志物稳定表达的固定心肌母细胞的荧光显微镜图像上的实用性,并采用特定的细胞培养条件来诱导线粒体形态的变化。
在本文中,我们展示了基于物理的机器学习工具在表达荧光线粒体标志物的固定心肌母细胞的荧光显微镜图像中亚细胞分割1 的实用性。
线粒体是哺乳动物细胞中产生能量的主要细胞器。具体来说,线粒体是高度动态的细胞器,通常存在于长度和分支不断变化的网络中。线粒体的形状会影响其功能,细胞可以迅速改变其线粒体形态以适应环境的变化2。为了理解这种现象,线粒体的形态分类为点、杆或网络是非常有益的3。
线粒体的分割对于分析细胞中的线粒体形态至关重要。目前分割和分析线粒体荧光显微镜图像的方法依赖于手动分割或传统的图像处理方法。基于阈值的方法(如Otsu4 )由于显微镜图像中的高噪声水平而不太准确。通常,用于线粒体形态分析的图像具有大量线粒体,使得手动分割变得繁琐。像MorphoLibJ5 这样的数学方法和像Weka6 这样的半监督机器学习方法要求很高,需要专业知识。对线粒体7 图像分析技术的回顾表明,基于深度学习的技术可能对这项任务有用。事实上,通过使用基于深度学习的模型,用于自动驾驶等应用的日常生活图像中的图像分割已经发生了革命性的变化。
深度学习是机器学习的一个子集,它提供从大量数据中学习的算法。监督式深度学习算法从大量图像中学习关系,这些图像使用其真实 (GT) 标签进行注释。使用监督深度学习在荧光显微镜图像中分割线粒体的挑战是双重的。首先,监督深度学习需要大量的训练图像数据集,在荧光显微镜的情况下,与使用更容易获得的传统基于相机的图像相比,提供这个大型数据集将是一项广泛的任务。其次,荧光显微镜图像需要对训练图像中感兴趣的对象进行GT注释,这是一项繁琐的任务,需要专业知识。这项任务很容易花费专家数小时或数天的时间来处理具有荧光标记亚细胞结构的细胞的单个图像。此外,注释器之间的差异也带来了问题。为了消除对手动注释的需求,并能够利用深度学习技术的卓越性能,这里使用了基于深度学习的分割模型,该模型在模拟图像上进行了训练。基于物理的模拟器提供了一种在显微镜中模拟和控制图像形成过程的方法,允许创建已知形状的图像。利用基于物理的模拟器,为此目的创建了一个线粒体模拟荧光显微镜图像的大型数据集。
仿真从使用参数化曲线生成几何图形开始,以生成形状。发射器以均匀分布的方式随机放置在形状的表面上,使得密度与实验值相匹配。显微镜的3D点扩散函数(PSF)是使用吉布森-兰尼模型9的计算高效近似8计算的。为了将模拟图像与实验图像紧密匹配,对暗电流和散粒噪声进行仿真,以实现照片真实感。物理 GT 以二进制映射的形式生成。生成数据集和训练模拟模型的代码10 可用,图 1 概述了创建此模拟数据集的步骤。
我们通过分析固定心肌母细胞的共聚焦显微镜图像,展示了完全在模拟数据集上训练的基于深度学习的分割的效用。这些心肌母细胞在线粒体外膜中表达荧光标记物,允许在荧光显微镜图像中可视化线粒体。在进行这里作为示例的实验之前,细胞被剥夺葡萄糖并在培养物中适应半乳糖7天。用半乳糖代替生长培养基中的葡萄糖迫使培养中的细胞变得更加氧化,因此依赖于它们的线粒体来产生能量11,12。此外,这使得细胞对线粒体损伤更敏感。可以通过向细胞培养基13中加入线粒体解偶联剂例如羰基氰间氯苯基腙(CCCP)来实验诱导线粒体形态变化。CCCP导致线粒体膜电位(ΔΨm)的丧失,从而导致线粒体从更管状(杆状)变为球状(点状)形态14。此外,在CCCP治疗期间,线粒体往往会肿胀15。我们显示了用线粒体解偶联剂CCCP处理半乳糖适应型心肌母细胞时线粒体变化的形态分布。线粒体的深度学习分割使我们能够将它们分类为点、杆或网络。然后,我们得出了定量指标来评估不同线粒体表型的分支长度和丰度。分析步骤如图 2所示,下面详细介绍了细胞培养、成像、基于深度学习的分割数据集创建以及线粒体的定量分析。
注意:如果使用具有已知实验条件的线粒体的现有显微镜图像,则可以省略第1-4节。
1. 细胞培养
2. 实验程序
3. 在盖玻片上染色和安装
4. 显微镜和成像
5. 生成模拟训练数据
6. 基于深度学习的细分
7. 形态学分析:分析"葡萄糖"和"CCCP"两个数据组的线粒体形态
在表达荧光线粒体标志物的固定心肌母细胞的共聚焦图像中对线粒体进行深度学习分割的结果展示了该方法的实用性。该方法与其他细胞类型和显微镜系统兼容,只需要重新训练。
用或不联合CCCP治疗荧光线粒体的半乳糖适应H9c2心肌母细胞2小时。然后将细胞固定,用核染料染色,并安装在载玻片上进行荧光显微镜分析。共聚焦显微镜用于获取对照和CCCP处理的细胞的图像。我们对12张共聚焦图像进行了分析,每种情况约有60个细胞。然后确定并量化每个图像中线粒体的形态状态。从训练模型获得的分割掩码进行了骨架化,以便能够分析本实验中每个单独线粒体的拓扑结构。单个线粒体的分支长度用作分类参数。根据以下规则将单个线粒体分类为形态学类。具体来说,任何长度小于1,500nm的线粒体骨架都被认为是一个点,较长的线粒体进一步分为网络或杆状。如果至少有一个交汇点,其中两个或多个分支相交,则将其定义为网络;否则,线粒体被归类为杆。图3显示了用形态学类别标记的线粒体骨骼的示例图像。
图4A中的线粒体形态分类表明,当应用CCCP2小时时,可以检测到显着变化;CCCP处理的细胞的点增加最清楚地证明了这一点。
图4B中的平均分支长度是说明形态中可检测和显着变化的另一种途径。正如预期的那样,当用CCCP处理细胞时,杆和网络相对于对照显着减少。考虑到线粒体在暴露于CCCP时所经历的肿胀,点的平均分支长度也有望显着增加。
图 1:用于模拟荧光显微镜图像的管道。 该管道包括 (i) 3D 几何生成,(ii) 发射器和光动力学仿真,(iii) 3D PSF 卷积,(iv) 噪声添加和 (v) 二值化。 请点击此处查看此图的大图。
图 2:基于机器学习的线粒体形态分析步骤 。 (1) 首先将要分割的图像裁剪为分割模型可接受的大小。(2)将基于深度学习的分割应用于图像裁剪。(3)将分割的产量作物缝合回其原始大小。(4)蒙太奇分割被骨架化。(6)基于骨架化的拓扑进行形态分析。 请点击此处查看此图的大图。
图 3:覆盖在显微镜图像分割输出上的线粒体骨架 。 (A) 分割输出。(B) 直线骨架(分支起点和终点之间的欧氏距离)叠加在分割输出的顶部。骨骼的颜色编码描绘了线粒体的类别。网络为红色,杆为绿色,点为紫色。 请点击此处查看此图的大图。
图4:线粒体形态分析。 (A)基于线粒体总长度的不同形态类别的相对百分比概述。(B)实验条件之间和形态学类别之间的平均线粒体分支长度比较。x 轴显示形态分类,y 轴显示线粒体平均分支长度(以纳米 (nm) 为单位)。p 值形式的统计显著性显示为 * p < 0.05、** p < 0.01、*** p < 0.001 和 **** p < 0.0001。 请点击此处查看此图的大图。
图 5:分段失败案例。 高密度线粒体对于分割模型来说是一个具有挑战性的场景。彩色骨架显示了图像中检测到的最长的单个线粒体。通过长度测量,可以检测这些场景,并使用形态学运算符侵蚀(瘦化检测到的骨架)来改善分割结果。 请点击此处查看此图的大图。
我们在"几何生成"和"模拟器参数"段落中讨论了与协议中关键步骤相关的预防措施。标题为"迁移学习"的段落讨论了在适应多台显微镜时为提高通量而进行的修改。关于"粒子分析"和"产生其他亚细胞结构"的段落是指该方法的未来应用。关于"与生物学真理的差异"的段落讨论了模拟可能与真实数据不同的不同原因,以及这些原因是否会影响我们的应用程序。最后,我们在"密集结构"段落中讨论了我们的方法具有挑战性的场景。
几何图形生成
要生成线粒体的 3D 几何形状,从 b 样条曲线作为骨架创建的简单 2D 结构非常适合创建合成数据集。这些合成形状与2D细胞培养物中观察到的线粒体形状非常相似。然而,在心脏组织等3D组织的情况下,线粒体的形状和排列是完全不同的。在这种情况下,通过在模拟图像中添加方向性,分割模型的性能可能会提高。
模拟器参数
设置模拟器的参数时应谨慎行事,以确保它们与要运行推理的数据的参数匹配,因为如果不这样做,可能会导致分段性能降低。其中一个参数是信噪比(SNR)范围。待测数据的信噪比范围应与模拟数据集的值匹配。此外,使用的 PSF 应与目标测试数据的 PSF 匹配。例如,来自共聚焦PSF的模型训练图像不应用于测试来自落射荧光显微镜的图像。另一个需要注意的参数是在测试数据中使用额外的放大倍率。如果在测试数据中使用了额外的放大倍率,则还应适当设置模拟器。
迁移学习
迁移学习是利用在一个任务上训练的学习模型用于另一个任务的现象。这种现象也适用于我们关于不同类型显微镜数据的问题。在一种类型的显微镜数据上训练的分割模型(随源代码一起提供)的权重可用于初始化分割模型以用于另一种光学显微镜数据。这使我们能够在训练数据集的更小子集上进行训练(3,000 张图像与 10,000 张图像相比),从而降低模拟的计算成本。
颗粒分析
也可以在分段掩模上进行颗粒分析。这可以提供有关单个线粒体的面积和曲率等的信息。此信息还可以作为线粒体定量比较的指标(不用于本实验)。例如,目前,我们使用基于线粒体长度的阈值来定义点形态。在某些情况下,结合椭圆度以更好地将小棒状线粒体与点状或点状线粒体分开可能是有用的。或者,如果某些生物学条件导致线粒体卷曲,那么曲率定量可能是分析线粒体种群的兴趣。
产生其他亚细胞结构
基于物理的亚细胞结构分割已经用于线粒体和囊泡1。虽然囊泡表现出不同的形状,但它们的大小较小,并且当通过荧光显微镜观察时,它们看起来像简单的球体。因此,囊泡的几何形状是使用适当直径范围的球形结构来模拟的。这意味着函数的变化生成结构的几何形状(线粒体情况下的圆柱体和囊泡情况下的球体)和相应的参数(协议部分中的步骤5.4)。在几何上,内质网和微管也被模拟为管状结构17。对直径为 150 nm 的内质网和平均外径为 25 nm 的微管和直径为 15 nm 的内空心管进行建模,提供了这些结构形状的近似值。每个亚细胞结构会有所不同的另一个参数是荧光团密度。这是根据荧光团结合的生物分子的分布和结合的概率计算的。
与生物学基本事实的区别
用于深度学习模型的模拟监督训练的模拟数据在许多方面与真实数据不同。(i) 模拟数据中没有非特异性标记与实际数据不同,因为真实数据中经常存在自由漂浮的荧光团。这会导致真实图像中的平均背景值更高。通过匹配SNR并设置背景值使其与观察到的实际值匹配,可以缓解这种差异。(ii)亚细胞结构的运动和光动力是系统中动力学的两个来源。活细胞中的移动结构(在几毫秒的范围内移动)会导致运动模糊。在实际数据采集过程中减少了曝光时间,以避免模糊效应。另一方面,我们不模拟延时摄影并假设静止的结构;当真实数据中的曝光时间较小时,此假设是有效的。但是,如果真实数据的曝光时间大到足以引入运动模糊,则此假设可能会在输出中产生误差。另一方面,光动力学的量级为纳秒到微秒,可以在模拟中省略,因为实验的通常曝光时间足够长(以毫秒为单位)以平均光动力学的影响。(iii)显微镜图像中的噪声有不同的来源,这些来源具有不同的概率密度函数。我们没有对这些单独的噪声源进行建模,而是将其近似为恒定背景上的高斯噪声。在低信噪比条件下(在2-4范围内)和处理荧光团的宏观密度时,这种差异不会显着改变数据分布1。(iv) 成像中的伪影可能来自像差、漂移和系统模糊。我们假设显微镜对齐良好,并且在真实数据中选择用于分析的区域没有这些伪影。还可以在PSF18,19,20中对其中一些工件进行建模。
密集的结构
无法区分重叠杆与网络的困难是2D显微镜数据分割中一个持续存在的问题。 图 5 展示了一个极具挑战性的场景,其中线粒体密集堆积,这导致分割模型和以下分析的结果欠佳。尽管存在这一挑战,但在这种情况下使用形态算子来缩小骨架化可以帮助打破这些过度连接的网络,同时允许仍然检测到所有线粒体形态类别的重大变化。此外,使用共聚焦而不是宽场显微镜进行成像是通过消除离焦光来部分缓解此问题的一种方法。此外,在未来,执行3D分割以区分相交(即物理形成网络)的线粒体和杆状线粒体(在单个平面中的投影彼此重叠)将是有用的。
深度学习分割是一种很有前途的工具,它提供了扩展显微镜用户的分析能力,从而开启了自动分析复杂数据和大型定量数据集的可能性,这在以前是无法管理的。
作者声明与本文不存在利益冲突。
作者承认与Arif Ahmed Sekh的讨论。Zambarlal Bhujabal因帮助构建稳定的H9c2细胞而受到认可。我们确认以下资金:ERC起始资助号804233(给K.A.),科学更新研究员项目拨款第325741号(给D.K.P.),挪威北部地区卫生局拨款号HNF1449-19(Å.B.B.),以及UiT的主题资助项目VirtualStain with Cristin Project ID 2061348(D.K.P.,Å.B.B.,K.A.和A.H.)。
Name | Company | Catalog Number | Comments |
12-well plate | FALCON | 353043 | |
Aqueous Glutaraldehyde EM Grade 25% | Electron Microscopy Sciences | 16200 | |
Axio Vert.A1 | Zeiss | Brightfield microscope | |
CCCP | Sigma-Aldrich | C2759 | |
Computer | n/a | n/a | Must be running Linux/Windows Operating System having an NVIDIA GPU with at least 4GB of memory |
Coverslips | VWR | 631-0150 | |
DAPI (stain) | Sigma-Aldrich | D9542 | |
DMEM | gibco | 11966-025 | |
Fetal Bovine Serum | Sigma-Aldrich | F7524 | |
Glass Slides (frosted edge) | epredia | AA00000112E01MNZ10 | |
H9c2 mCherry-EGFP-OMP25 | In-house stable cell line derived from purchased cell line | ||
Incubator | Thermo Fisher Scientific | 51033557 | |
LSM 800 | Zeiss | Confocal Microscope | |
Mounting Media (Glass) | Thermo Fisher Scientific | P36980 | |
Paraformaldehyde Solution, 4% in PBS | Thermo Fisher Scientific | J19943-K2 | |
Plan-Apochromat 63x oil (M27) objective with an NA of 1.4 | Zeiss | 420782-9900-000 | |
Sterile laminar flow hood | Labogene | SCANLAF MARS | |
Trypsin | Sigma-Aldrich | T4049 | |
Vacusafe aspiration system | VACUUBRAND | 20727400 | |
ZEN 2.6 | Zeiss |
请求许可使用此 JoVE 文章的文本或图形
请求许可This article has been published
Video Coming Soon
版权所属 © 2025 MyJoVE 公司版权所有,本公司不涉及任何医疗业务和医疗服务。