一种同时多层成像的光片照明显微成像方法及系统与流程

本发明涉及显微成像技术领域，更具体地，涉及一种同时多层成像的光片照明显微成像方法及系统。

背景技术：

光片照明显微镜利用一束侧向照明的片状光束激活样本的预设深度，具有微米量级的层析能力。垂直至于光片方向，采用宽场成像方式，为快速获取样本三维空间信息提供了帮助。由于光片照明显微镜每次只会激活待成像层，因此相比于传统的点扫描成像方式，具有更小的光漂白和光毒性，适合长时间的活体生物样本成像。

但是传统的光片照明显微镜每次只产生单个光片，利用机械扫描的方式，同步轴向扫描照明光片和成像物镜以实现3d成像。这样的成像方式，一方面引入机械式扫描会限制成像速度，另一方面每次只成像样本的单个平面，通过后期轴向堆叠实现三维成像，极大的限制了三维成像的速度。

技术实现要素：

针对现有技术的缺陷，本发明的目的在于解决传统光片照明显微镜三维成像速度慢的技术问题。

为实现上述目的，第一方面，本发明提供一种同时多层成像的光片照明显微成像方法，包括以下步骤：

产生照射到样本不同深度的多层片状照明光束，以激发样本不同深度的荧光；

通过在成像物镜和样本之间引入折射率不匹配的介质，以拉长所述成像物镜在沿样本深度方向的成像点扩散函数，使得所述成像物镜可以收集样本不同深度的荧光信号；所述介质和成像物镜均位于样本上方，所述介质位于成像物镜和样本之间，所述介质的折射率和介质与成像物镜之间空气的折射率不匹配；

基于拉长后的成像点扩散函数、多层片状照明光束的不同深度信息以及收集到的样本不同深度的荧光信号进行三维重建，得到样本的三维结构。

可选地，通过改变照射到样本的多层片状平行照明光束的深度，实现对样本不同深度的三维成像。

可选地，所述介质的折射率相比介质和成像物镜之间空气的折射率高，所述介质为水、油或者玻璃。

可选地，利用三维的图像反卷积算法和对应的不同深度成像点扩散函数对样本不同深度的荧光信号进行重建，得到样本的三维结构。

第二方面，本发明提供一种同时多层成像的光片照明显微成像系统，包括：多层光束产生装置、多层信号成像装置、成像结果处理装置；

所述多层光束产生装置，用于产生照射到样本不同深度的多层片状照明光束，以激发样本不同深度的荧光；

所述多层信号成像装置，包括成像物镜和介质，所述介质和成像物镜均位于样本上方，所述介质位于成像物镜和样本之间，所述介质的折射率和介质与成像物镜之间空气的折射率不匹配，所述多层信号成像装置通过在成像物镜和样本之间引入折射率不匹配的介质，以拉长所述成像物镜在沿样本深度方向的成像点扩散函数，使得所述成像物镜可以收集样本不同深度的荧光信号；

所述成像结果处理装置，用于基于拉长后的成像点扩散函数、多层片状照明光束的不同深度信息以及收集到的样本不同深度的荧光信号进行三维重建，得到样本的三维结构。

可选地，所述多层光束产生装置包括：照明模块和光束整形模块；

所述照明模块，用于产生均匀的光斑；

所述光束整形模块，用于基于所述均匀的光斑产生照射到样本不同深度的多层片状平行照明光束。

可选地，所述介质的折射率相比介质和成像物镜之间空气的折射率高，所述介质为水、油或者玻璃。

可选地，所述光束整形模块改变其照射到样本的多层片状平行照明光束的深度，实现对样本不同深度的三维成像。

可选地，所述照明模块包括：激光器、激光扩束单元以及激光反射镜；

所述激光器，用于提供激发样本荧光所需的光源；

所述激光扩束单元，用于对所述光源进行扩束，得到均匀光斑；

所述激光反射镜，用于将扩束后的均匀光斑反射到光束整形模块。

可选地，所述成像结果处理装置用于利用三维的图像反卷积算法和对应的不同深度成像点扩散函数对样本不同深度的荧光信号进行重建，得到样本的三维结构。

总体而言，通过本发明所构思的以上技术方案与现有技术相比，具有以下有益效果：

本发明提供的同时多层成像的光片照明显微成像方法及系统，相对于传统的光片照明显微镜，本发明在成像物镜与样本之间引入了折射率不匹配的介质，由于成像物镜和折射率不匹配介质的共同作用，从而在z轴拉长了成像物镜的成像点扩散函数，为同时多层成像提供基础。然而只有z轴拉长的成像点扩散函数，仍然无法实现真正的同时多层成像。本发明通过产生可以同时照射到样本不同深度的片状照明光来同时激活样本不同深度荧光，该不同深度荧光信号的xy面投影进一步被荧光相机收集。利用3d的反卷积图像等图像重构算法，从不同深度xy面投影图像中计算得到样本真实的三维分布。

本发明提供的同时多层成像的光片照明显微成像系统，通过同时多层照明和成像样本不同深度的信号，避免了传统光片照明显微镜系统中的成像物镜和照明光片的机械扫描，并利用后期的3d图像重构算法，使得光片照明显微镜三维成像的时间分辨率有了数量级尺度的提升。

附图说明

图1为本发明提供的同时多层成像的光片照明显微成像系统示意图；

图2(a)为传统的光片照明显微镜的3d成像原理示意图；

图2(b)为本发明提供的同时多层成像的光片照明显微镜的3d成像原理示意图；

图3为本发明提供的光束整形模块产生的不同深度的多层片状平行照明光束空间结构示意图；

图4(a)为传统的光片照明显微镜的未被拉长的成像点扩散函数示意图；

图4(b)为本发明提供的同时多层成像的光片照明显微镜的被拉长的成像点扩散函数示意图；

图5(a)为本发明提供的在拉长成像点扩散函数情况下，在样本深度方向上逐层照亮样本不同深度，得到的10um荧光小球3维原始分布；

图5(b)为本发明提供的在拉长成像点扩散函数情况下，利用光束整形模块同时照亮10个不同的样本深度的示意图；

图5(c)为本发明提供的在拉长成像点扩散函数情况下，利用光束整形模块同时照亮10个不同样本深度时在xy面上投影的图像；

图5(d)为本发明提供的利用3d反卷积重构算法得到的恢复图像质量的10um荧光小球原始3d结构；

图6为本发明提供的同时多层成像的光片照明显微成像方法流程图；

在所有附图中，相同的附图标记用来表示相同的元件或结构，其中，1为激光器、2为激光扩束单元、3为激光反射镜，4为光束整形模块，5为中继透镜，6为照明物镜，7为高折射率透光介质，8为成像物镜，9为镜筒透镜，10为荧光相机，11为样本。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。

本发明公开一种同时多层成像的光片照明显微成像系统，包括：多层光束产生装置，多层信号成像装置，成像结果处理装置。多层光束产生装置是，将激光光源输出的光扩束后，照射到一个强度调制器件整形产生多个不同z轴位置的平行片状光束。利用光路中继系统，将该光束投射到样本腔中，同时激发样本不同层面的荧光信号。多层信号成像装置利用成像物镜和样本之间介质的折射率差异，拉长成像物镜的点扩散函数，从而可以同时收集到，来自不同层的荧光信号。成像结果利用3d图像重构算法对得到的不同层荧光信号的投影图进行三维重建，最终还原样本的真实三维结构。本发明避免了机械扫描并且同时成像多个深度，从而提高了三维成像速度。

多光束产生装置主要包括：照明模块，光束整形模块，光路中继模块。照明模块主要用于产生均匀光斑照射在光束整形器上；光束整形模块主要用于产生不同z轴位置的多个平行片状光束；光路中继模块用于将光束整形模块产生的多个平行片状光束缩小共轭到样本腔中激发样本荧光。

更进一步地，照明模块包括：激光器和激光扩束单元。激光器用于提供激发荧光所需的光源。激光扩束单元用于扩大光斑尺寸，均匀照亮光束整形模块芯片。扩束的尺寸主要取决于光束整形模块的芯片大小。

更进一步地，激光扩束单元是由两个共焦点的同轴透镜组成。常常第一透镜和第二透镜为焦距不同的凸透镜。

更进一步地，光束整形模块包括：光束调制单元和光束中继单元。光束调制单元用于调制光强分布，产生不同z轴位置的多个平行片状光束。光束中继单元用于将光束调制单元产出的不同z轴分布的平行光束缩小共轭到样本腔内，同时激活样本不同深度荧光。

更近一步地，光束中继单元包括：沿光路行进方向同轴共焦点的中继透镜和照明物镜。

多层信号成像装置主要包括：成像点扩散函数拉长单元和荧光信号收集单元。成像点扩散函数拉长单元用于拉长z轴方向的点扩散函数，使不同层的荧光信号可以被荧光信号收集单元收集到。荧光信号收集单元用于收集被激发出的荧光进行成像。

更进一步到地，成像点扩散函数拉长单元包括高折射率透光介质和成像物镜。高折射率透光介质用于产生和空气不匹配的折射率，将球差引入成像系统，轴向拉长成像点扩散函数。成像物镜用于一方面配合高折射率透光介质产生球差，另一方面收集样本产生的荧光传递给荧光信号收集单元。

更进一步地，荧光信号收集单元包括：镜筒透镜和荧光相机。镜筒透镜主要用于配合成像物镜提供合适的放大倍数，将物镜收集的荧光共轭成像到荧光相机。荧光相机用来收集荧光信号，转化为图像。

成像结果处理装置主要指利用三维的图像反卷积算法，根据实验测到的不同深度的成像点扩散函数图像，对样本不同层的投影图像进行反卷积，重构出样本原始的三维结构。

在一个具体的实例中，图1为本发明提供的同时多层成像的光片照明显微成像系统，如图1所示，包括：多层光束产生装置，多层信号成像装置，成像结果处理装置。

多层光束产生装置利用光束整形模块4对入射光进行强度调制从而生成不同z轴位置的多个片状光束，利用光路中继装置，将该光束投射到样本腔中，同时激发样本11不同层面的荧光信号。多层信号成像装置利用成像物镜8和样本之间介质7的折射率差异，拉长成像物镜的成像点扩散函数，从而可以同时收集到来不同层的荧光信号。成像结果利用3d图像重构算法对得到的不同层荧光信号的投影图进行三维重建，最终还原样本的真实三维结构。

如图1所示，多光束产生装置，主要包括：照明模块，光束整形模块4，光路中继模块。照明模块主要用于产生均匀光斑照射在光束整形模块4上；光束整形模块4主要用于产生不同z轴位置的多个平行片状光束；光路中继模块用于将光束整形模块产生的多个平行片状光束缩小共轭到样本腔中激发样本荧光。

照明模块包括：激光器1、激光扩束单元2和激光反射镜3。激光器1用于提供激发荧光所需的光源。激光扩束单元用于扩大光斑尺寸，均匀照亮光束整形模块4芯片。扩束的尺寸主要取决于光束整形模块4的芯片大小。激光扩束单元2是由两个共焦点的同轴透镜组成。常常第一透镜和第二透镜为焦距不同的凸透镜。激光反射镜3用于将扩束之后的光束以合适的角度反射到光束整形模块4的芯片上。

如图1所示，光束整形模块4主要通过对入射光束进行强度调制，将被扩大的光束整形为z轴具有不同深度分布的片状照明光，作为可以用来同时激活样本不同深度荧光的光源。

光路中继装置用于将光束整形模块4产出的不同z轴分布的平行光束缩小共轭到样本腔内，同时激活样本不同深度荧光。

光束中继装置包括：沿光路行进方向同轴共焦点的中继透镜5和照明物镜6。

如图1所示，多层信号成像装置主要包括：成像点扩散函数拉长单元和荧光信号收集单元。

其中，成像点扩散函数拉长单元包括高折射率透光介质7和成像物镜8。

如图2(a)所示，传统的光片照明显微镜在激活样本时只有样本11的某一个深度被激活，且成像物镜8和样本11之间没有高折射率透光介质，成像物镜的点扩散函数没有被拉长。其通过同时z轴扫描照明光片和成像物镜8来实现3d成像，由于成像物镜8的和照明光片的轴向移动主要由机械扫描实现，这样极大的降低了3d成像速度。

如图2(b)所示，同时多层成像的光片照明显微镜在激活样本11时，由于光束整形模块可以同时产生z轴不同深度分布的片状照明光，因此样本会有多个深度被同时激活，图示中只画了3个深度，实际操作中可以根据具体实验情景合理调整同时激活不同深度的数目。且成像物镜8和样本11之间存在和成像物镜折射率不匹配的介质7，来引入球差进而轴向拉长成像点扩散函数，从而使在3d成像中无需轴向移动成像物镜(避免了机械扫描拖慢成像速度)，只需通过光束整形模块4改变照明在样本上的多层光片位置，实现更快速的3d同时成像。折射率不匹配的介质7在本申请中使用的是水，但该原理不仅限于水，也可以是油、玻璃等折射率大于空气的高折射率介质。

需要说明的是，本申请中的同时多层指的是传统的光片显微镜只能每次照一个深度，假设扫一个3d体积，传统方法需要扫40次才能扫完。而本申请每次能同时照5个深度，这样只需扫8次，即可得到和原来同样的一个3d体积大小。如果每次同时照10个深度，这样只需扫4次即可得到一个3d体积。具体同时照明多少深度的个数和样本有关，样本越稀疏，越可以同时照明的深度多，样本越密集，同时照明深度的个数则少。

荧光信号收集单元包括镜筒透镜9和荧光相机10。镜筒透镜主要用于配合成像物镜提供合适的放大倍数，将物镜收集的荧光共轭成像到荧光相机。荧光相机用来收集荧光信号，将荧光转化为图像。

样本11为待成像的生物样本。本申请中通过40度低熔点琼脂糖来包埋10um大小的荧光小球作为测试系统性能的样本，但实际操作中不限于荧光小球，也可以是任何具有三维结构的荧光生物样本。

如图3所示，利用光束整形模块4产生的多个不同深度分布的片状照明光。其中图3图例显示了同时照明5个深度，实际实验中可以根据需求合理选择同时照明深度的数量。

如图4(a)所示为传统的光片照明显微镜中成像物镜的成像点扩散函数，该成像点扩散函数只在轴向有很短的分布，不能同时收集来自不同深度的荧光。如图4(b)所示为同时多层成像的光片照明显微镜中成像物镜的成像点扩散函数，该成像点扩散函数在轴向有很长的分布，可以同时收集来自不同深度的荧光。

如图5所示为测试系统性能所做的同时成像10层10um荧光小球三维分布的示例，本申请使用的样本为40度低熔点琼脂糖来包埋10um荧光小球，但实际操作中不限于荧光小球，也可以是任何具有三维结构的荧光生物样本。

图5(a)为利用同时多层成像的光片照明显微镜顺次扫描不同深度得到的10um荧光小球的三维原始分布。

图5(b)为找出其中感兴趣的10个z轴不同深度，利用同时多层成像的光片照明显微镜同时照明该10个深度。

图5(c)为该10个z轴不同深度图像在xy面的投影(荧光相机所拍摄到的真实图像)。

图5(d)为利用三维的图像反卷积算法和对应的不同深度成像点扩散函数计算得到的样本原始三维结构。可见，本发明提供的同时多层成像的光片照明显微成像系统，通过同时多层照明和成像样本不同深度的信号，避免了系统中的机械扫描，并利用后期的图像3d重构算法，取得了三维成像中时间分辨率数量级尺度的提升。

图6为本发明提供的同时多层成像的光片照明显微成像方法流程图，如图6所示，包括如下步骤：

s101，产生照射到样本不同深度的多层片状照明光束，以激发样本不同深度的荧光；

s102，通过在成像物镜和样本之间引入折射率不匹配的介质，以拉长所述成像物镜在沿样本深度方向的成像点扩散函数，使得所述成像物镜可以收集样本不同深度的荧光信号；所述介质和成像物镜均位于样本上方，所述介质位于成像物镜和样本之间，所述介质的折射率和介质与成像物镜之间空气的折射率不匹配；

s103，基于拉长后的成像点扩散函数、多层片状照明光束的不同深度信息以及收集到的样本不同深度的荧光信号进行三维重建，得到样本的三维结构。

具体地，各个步骤的实施流程可参见前述系统实施例中的介绍，在此不做赘述。

总体而言，本发明提供的同时多层成像的光片照明显微成像方法及系统，通过同时多层照明和成像样本不同深度的信号，避免了系统中的机械扫描，并利用后期的图像3d重构算法，取得了三维成像中时间分辨率数量级尺度的提升。

本领域的技术人员容易理解，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。