摘要
作为一种关键的纳米级成像技术,序列切片电子显微镜成像技术是获取大体量神经数据的重要观测手段。然而,受限于成像时间和切片制备工艺,生物体积数据常常面临低信噪比、大面积缺陷和高各向异性等问题,这些问题限制了神经元分割与追踪的性能,进而影响微观脑连接图谱的重建精度。目前,神经切片的电镜像质提升正面临三大挑战:首先,由于固定位置的电镜重复拍摄存在畸变与漂移,难以获取成对噪声干净真值用于监督去噪。其次,生物样品制备过程中的切片瑕疵或成像过程中的电子束击穿效应容易造成大面积内容缺陷,这不仅阻碍了后续各向同性重建算法的应用,还降低了脑神经连接图谱的准确性。最后,由于样品切片工艺限制,序列切片体积数据的横向物理分辨率远高于切片厚度,这种显著的各向异性严重影响神经元分割与追踪的精度,进一步制约微观尺度脑连接图谱的重建准确性。 为克服这些挑战,本文深入研究了电子显微镜成像的噪声模型和神经序列切片的组织连续性等生物学先验信息。针对电镜噪声干扰、大面积缺陷以及各向异性三大挑战,本文提出了一套系统的电镜像质提升方法,包括无损自监督去噪、序列切片插帧以及各向同性重建。这些方法共同提升了电子显微镜图像质量,实现了高信噪比、无缺陷和各向同性的体积数据重建,为构建高精度的微观脑连接图谱奠定了坚实的数据基础。 本文的主要工作和创新点归纳如下: 1、基于掩码介质引导的隐式无损自监督去噪。针对现有电镜去噪技术所面临的挑战,如获取成对训练数据的困难和自监督去噪方法中信号损失问题,本文提出了一种信号无损的隐式自监督去噪框架Blind2Unblind,解决了自监督方法中输入信号丢失的问题,保证了电镜去噪的信号完整性。全局掩码映射器对去噪体积中盲点处的像素进行采样,并将其映射到同一通道,实现了全局内容感知和训练加速。为克服恒等映射问题,重新可见损失将掩码去噪辅助任务作为梯度更新媒介,实现了盲点可见的自监督无损去噪。该框架适用于包括泊松高斯噪声在内的空间独立噪声,在仿真和真实电镜数据集上显著优于现有自监督方法,并表现出媲美有监督学习的去噪性能。这一成果为具有畸变漂移特性的电子显微镜去噪提供了新的研究方向和科学去噪范式。 2、基于细粒度噪声水平感知的定制无损去噪。本文进一步提出了一种强可解释的显式自监督去噪框架Blind2Sound,用于解决隐式无损去噪中生物超微结构过度平滑和超微细节丢失的问题。自适应重新可见损失能在保持信号无损的同时,根据噪声强度调整去噪力度以实现定制化噪声移除,避免了后处理所带来的误差放大。通过对梯度更新中间媒介的梯度分析,本框架的训练稳定性得到了加强。同时,克莱默高斯损失作为正则化项,促进了对噪声水平的准确感知,并进一步提升了去噪器性能。在本框架中,作为辅助分支的噪声估计器在推理阶段被移除,有效避免了额外的计算开销。在仿真和真实电镜数据集上,该显式定制化框架明显优于隐式无损自监督去噪,甚至略优于有监督基线,表现出强大的泛化能力。这一研究成果进一步验证了自监督去噪范式在电镜去噪领域的突出优势。 3、基于全局上下文稀疏聚合的神经序列切片插帧。针对因样品制备过程中出现的机械损伤和电子束击穿等问题所导致的电镜图像大面积缺陷,本文提出了一种隐式表征切片间复杂形变和风格特异性的神经序列切片插帧方法。该方法利用生物组织在z轴方向的连续性及全局空间上下文来建模体积数据的复杂形变。分层稀疏自注意力聚合模块将两级稀疏分解的长短程依赖结果聚合,实现计算量友好的隐式形变建模和全局自适应采样。为处理序列切片间的风格特异性,本文设计的自适应风格平衡损失将z轴的风格上下文考虑在内,生成了真实可靠的缺陷修复结果。实验结果证明,本方法在神经序列切片插帧任务上具有出色的精度和鲁棒性,有望在电镜成像的大面积修复上得到大规模应用。 4、基于多视角连续性蒸馏的体积非对称超分辨率重建。针对神经切片体积数据的各向异性问题,本文提出了多视角生物组织连续的各向同性重建框架。首先,多视角时空集成模块能够提取x-z和y-z平面的多尺度金字塔特征,并计算x-y平面的相关性系数。通过采用x-y平面的区域相关性采样合成预测的各向同性中间特征,对不同轴向平面的连续性进行约束。针对误匹配中间特征带来的性能退化,本文进一步提出轻量可堆叠的反馈蒸馏模块,用于校正中间特征,减少大变形引起的误匹配。误匹配反馈蒸馏模块能够根据输入特征和预测的中间特征自适应地执行反馈蒸馏,输出精确的中间插值特征。本方法在电镜非对称超分辨率重建CREMT基准数据集上取得了最先进的性能,实现了生物体积数据的近似各向同性,从而提高了神经元形态和连接关系的重建精度。