用于内窥镜的时间相关的源调制的制作方法

相关申请的交叉引用：本申请要求2018年1月10日提交的、标题为“用于内窥镜的时间相关的源调制(timecorrelatedsourcemodulationforendoscopy)”的美国临时申请no.62/615,777的优先权和权益，该申请的内容整个地通过引用并入本文。

本公开一般地涉及用于内窥镜的各种传感器和照射配置。更具体地说，本公开涉及用于尖端上芯片内窥镜的各种传感器和照射配置。

背景技术：

内窥镜已经在医学界内达到了很大的接受程度，因为它们使得手术可以以最小的患者创伤进行，同时使得医生能够查看患者的内部解剖结构。根据手术，内窥镜可以被插入到身体的自然腔道或者通过皮肤中的切口。

常规的内窥镜设计通常包括细长的管状轴，该轴在一端具有刚性透镜组件或光纤透镜组件，经由该刚性透镜组件或者一个或更多个光纤股连接到相机或其他类似的光传感器。所述轴在手术期间被连接到手柄以用于操纵。经由手柄中的目镜和/或经由外部屏幕，查看通常是可能的。各种外科工具可以通过内窥镜中的工作通道被插入以用于进行不同的外科手术。

然而，常规的内窥镜设计包括各种缺点。例如，获取的信号中的吞吐量损失以及通过连接相机和透镜组件的光纤的所导致的图像失真在手术期间可能发生，而且与高质量的刚性透镜组件相关联的成本很高。

尖端上芯片内窥镜配置与常规的内窥镜配置的不同之处在于，相机在内窥镜的尖端，而不是基底。对于尖端上芯片配置，有几个益处。一个益处是相机尽可能地靠近样本，从而减小信号的吞吐量损失，并且使通过透镜组件和光纤的所导致的图像失真最小化。将相机装在内窥镜的尖端上的另一个优点是内窥镜系统本身的尺寸可能缩小，重量可能减轻。因为信号被读到内窥镜的尖端处的相机芯片上，所以不需要专门的光学器件或光纤来将图像中继转发给在内窥镜的背部的相机。这样，内窥镜系统中的部件的总数可以减少。

技术实现要素：

本公开是针对与内窥镜一起使用的或者在内窥镜内使用的尖端上芯片产品的各种实施方案。

一个实施方案提供用于内窥镜中的尖端上芯片产品，所述尖端上芯片产品包括：第一多个源照射光纤，所述第一多个源照射光纤被配置为输送第一多个调制光子；第二多个源照射纤维，所述第二多个源照射纤维被配置为输送第二多个调制光子；以及第一相机芯片，所述第一相机芯片被配置为检测光，所述光包括可见光(vis)、近红外光(nir)、可见-近红外光(vis-nir)、短波红外光(swir)、扩展短波红外光(eswir)、近红外-扩展短波红外光(nir-eswir)和它们的组合。

另一个实施方案提供所述第一相机芯片被配置为检测可见光(vis)，并且进一步包括第二相机芯片，所述第二相机芯片被配置为检测可见光(vis)。

另一个实施方案提供所述第一相机芯片被配置为检测可见光(vis)，并且进一步包括第二相机芯片，所述第二相机芯片被配置为检测近红外光(nir)。

另一个实施方案提供与所述第一相机芯片一起提供的滤色器阵列，所述滤色器阵列包括bggr、rgbg、grgb、rggb、rgbe、cyym、cygm、rgbw(2×2)、rgbw(具有对角线颜色的2×2)、rgbw(具有成对颜色的2×2)、rgbw(具有垂直w的2×2)和在水平线和垂直线上的6×6rgb、以及它们的组合。

另一个实施方案提供所述滤色器阵列选自由以下滤色器组成的组：rgbw(2×2)、rgbw(具有对角线颜色的2×2)、rgbw(具有成对颜色的2×2)、rgbw(具有垂直w的2×2)和它们的组合；并且所述滤色器阵列的w瓦片(tile)是nir滤色器、swir滤色器或eswir滤色器。

另一个实施方案提供权利要求1的尖端上芯片产品进一步包括第三多个源照射纤维，所述第三多个源照射纤维被配置为输送第三多个未调制光子。

另一个实施方案提供所述第一芯片包括硅(si)、锗(ge)、砷化镓铟(ingaas)、硅化铂(ptsi)、碲化镉汞(hgcdte)、锑化铟(insb)、胶体量子点(cqd)或它们的组合。

一个实施方案提供一种内窥镜系统，所述内窥镜系统包括：尖端上芯片产品，所述尖端上芯片产品包括：第一多个源照射纤维，所述第一多个源照射纤维被配置为输送第一多个调制光子；第二多个源照射纤维，所述第二多个源照射纤维被配置为输送第二多个调制光子；以及第一相机芯片，所述第一相机芯片被配置为检测光，所述光包括可见光(vis)、近红外光(nir)、可见-近红外光(vis-nir)、短波红外光(swir)、扩展短波红外光(eswir)、近红外-扩展短波红外光(nir-eswir)和以上光中的任何一个的组合；光源；第一调制器，所述第一调制器至少调制所述第一多个调制光子用于所述第一多个源照射纤维；以及第二调制器，所述第二调制器至少调制所述第二多个调制光子用于所述第二多个照射源纤维。

另一个实施方案提供所述第一相机芯片被配置为检测可见光(vis)，并且其中所述尖端上芯片产品进一步包括第二相机芯片，所述第二相机芯片被配置为检测可见光(vis)。

另一个实施方案提供所述第一相机芯片被配置为检测可见光(vis)，并且其中所述尖端上芯片产品进一步包括第二相机芯片，所述第二相机芯片被配置为检测近红外光(nir)。

另一个实施方案提供所述尖端上芯片产品进一步包括与所述第一相机芯片一起提供的滤色器阵列，所述滤色器阵列包括bggr、rgbg、grgb、rggb、rgbe、cyym、cygm、rgbw(2×2)、rgbw(具有对角线颜色的2×2)、rgbw(具有成对颜色的2×2)、rgbw(具有垂直w的2×2)和在水平线和垂直线上的6×6rgb、以及它们的组合。

另一个实施方案提供所述滤色器阵列选自由以下滤色器组成的组：rgbw(2×2)、rgbw(具有对角线颜色的2×2)、rgbw(具有成对颜色的2×2)、rgbw(具有垂直w的2×2)和它们的组合；并且所述滤色器阵列的w瓦片是nir滤色器、swir滤色器或eswir滤色器。

另一个实施方案提供所述尖端上芯片产品进一步包括第三多个源照射纤维，所述第三多个源照射纤维被配置为输送第三多个未调制光子。

另一个实施方案提供所述光源包括白炽灯、卤素灯、发光二极管(led)、化学激光器、固态激光器、有机发光二极管(oled)、电致发光器件、荧光、气体放电灯、金属卤化物灯、氙弧灯、感应灯或它们的组合。

另一个实施方案提供所述第一相机芯片包括硅(si)、锗(ge)、砷化镓铟(ingaas)、硅化铂(ptsi)、碲化镉汞(hgcdte)、锑化铟(insb)、胶体量子点(cqd)或它们的组合。

另一个实施方案提供所述尖端上芯片产品进一步包括第二相机芯片，并且所述第一相机芯片和所述第二相机芯片被配置为产生立体图像。

在一个实施方案中，存在一种使用内窥镜系统产生融合图像的方法，所述方法包括：提供权利要求8的内窥镜系统；从第一多个调制光子产生第一图像；从第二多个调制光子产生第二图像；并且覆盖所述第一图像和所述第二图像，从而产生融合图像。

另一个实施方案进一步提供从第三多个未调制光子产生第三图像。

另一个实施方案提供所述第三多个未调制光子是nir光子、swir光子、eswir光子或它们的组合。

另一个实施方案提供所述第一多个调制光子和所述第二多个调制光子是vis或vis-nir。

附图说明

合并在本说明书中并且形成本说明书的一部分的附图图示说明本发明的实施方案，并且与撰写的描述一起用于说明本发明的原理、特性和特征。在附图中：

图1图示说明根据本公开的内窥镜的第一变型。

图2图示说明根据本公开的内窥镜的第二变型。

图3图示说明根据本公开的内窥镜的第三变型。

图4图示说明用于与根据本公开的如图1-3所示的内窥镜变型之一一起使用的两个光学配置选项。

具体实施方式

本公开不限于所描述的特定系统、装置和方法，因为这些可以变化。描述中使用的术语仅仅是出于描述特定版本或实施方案的目的，而非意图限制范围。

如本文档中所使用的，单数形式“一个”、“一种”和“所述”包括复数指代，除非上下文另有清楚的规定。除非另有定义，本文中使用的所有的技术术语和科学术语都具有与本领域的普通技术人员通常理解的意义相同的意义。本公开中没有任何内容要被解读为承认本公开中描述的实施方案无权先于凭借先前的发明的这样的公开。如本文档中所使用的，术语“包括”意指“包括，但不限于”。

下面描述的本教导的实施方案并非意图是穷举的或者使教导限于以下详述的描述中公开的精确形式。相反，实施方案被选择和描述是为了使得本领域技术人员可以领会和理解本教导的原理和实践。

如以上所指出的，常规的内窥镜在一端包括经由一个或更多个光纤股连接到相机或其他类似的光传感器的光纤透镜组件。为了从常规的内窥镜成像系统获取多频谱数据，从样本获取的信号在到达相机之前被选择性地调谐，通常是用一个或更多个直列式滤色器来调谐。在内窥镜的尖端上具有相机(或芯片)的内窥镜系统中，在没有滤色技术的显著的微型化的情况下，对样本图像进行滤色是不容易做到的。作为替代，源照射在到达样本之前被滤色。样本信号然后被内窥镜的尖端处的相机读取。

本公开描述了三个内窥镜成像变型。这些变型包括在样本成像之前对源照射进行滤色。在所述变体中的每个中，源滤色和/或调制可以由例如光学成像滤色器执行，所述光学成像滤色器诸如声光可调谐滤色器(aotf)、液晶可调谐滤色器(lctf)和顺序扫描可调谐滤色器(包括例如多共轭滤色器(mcf)或适形滤色器(cf))。然而，应注意到，mcf和cf在本文中仅仅是作为示例描述的。附加的滤色器(诸如多元光学元件(moe)、moe滤色器和滤色器轮布置、图案化标准具滤色器和其他类似的滤色器)可以被用来对源照射进行滤色。源照射处理和滤色的附加示例可以在被作为美国专利申请公开no.2018/0116494发表的美国专利申请no.15/374,769中找到，该申请整个地通过引用并入本文。以上源滤色和/或调制在本说明书的一些实施方案中被表示为由“调制器”执行，所述调制器是指对来自光源的光子进行调制的装置中的任何一个。

如本文中所描述的，所述三个变型包括放置在内窥镜尖端的中心并且被源照射滤色器包围的相机芯片。然而，应注意到，该中心布置仅仅是作为示例提供的，并且相机芯片和源照射滤色器的附加布置可以包括在内。

如本文中所描述的内窥镜变型可以包括各种照射源。在某些实现中，单个光源可以与各种配置的分束器和/或反光镜组合用来提供多个光束。这些多个光束然后可以通过使用例如不同的源照射光纤或多组源照射光纤而被引导到内窥镜尖端。例如，在图1所示的变型中，单个光源可以被划分为两个单独的射束并且被引导到两组源照射光纤。在诸如图4所示的选项的其他实现中，单个光源可以被划分为单独的射束，或者经由一个或更多个反光镜被重新引导，以为三组源照射光纤提供源照射。应注意到，尽管例如在图1和图4中，只有一个光源被示出，但是本公开不限于单个光源。设想的是，附加光源可以包括在如本文中所描述的内窥镜变型中的一个或更多个中。这样的内窥镜变型可以包括单独或组合使用的多个单独的且不同的光源。

光源是没有限制的，并且可以是对于提供内窥镜其他辅助要求(诸如功耗、发射的频谱、包装、热输出等)必需的照射有用的任何源。在一些实施方案中，光源是白炽灯、卤素灯、发光二极管(led)、化学激光器、固态激光器、有机发光二极管(oled)、电致发光器件、荧光、气体放电灯、金属卤化物灯、氙弧灯、感应灯或这些光源的任何组合。在一些实施方案中，光源是可调谐光源，可调谐光源意味着光源是单色的，并且可以被选择在任何期望的波长范围内。可调谐光源的选定的波长是没有限制的，并且可以是紫外光(uv)、可见光(vis)、近红外光(nir)、可见-近红外光(vis-nir)、短波长红外光(swir)、扩展短波红外光(eswir)和近红外-扩展短波红外光(nir-eswir)范围内的任何通带。下面描述波长范围。

内窥镜的公开的变型包括被用作检测传入的光子并且输出该信息以形成图像的图像传感器的至少一个相机芯片。相机芯片的功能性和构造是没有限制的。在一些实施方案中，相机芯片以能够成像的光的波长为特征。可以被相机芯片成像的光的波长是没有限制的，并且包括紫外光(uv)、可见光(vis)、近红外光(nir)、可见-近红外光(vis-nir)、短波红外光(swir)、扩展短波红外光(eswir)、近红外-扩展短波红外光(nir-eswir)。这些对应于大约180nm至大约380nm(uv)、大约380nm至大约720nm(vis)、大约400nm至大约1100nm(vis-nir)、大约850nm至大约1800nm(swir)、大约1200nm至大约2450nm(eswir)和大约720nm至大约2500nm(nir-eswir)的波长。以上范围可以单独使用，或者与列出的范围中的任何一个组合使用。这样的组合包括相邻(相连)范围、重叠范围和不重叠的范围。范围的组合可以通过包括每个对特定范围敏感的多个相机芯片或者通过包括滤色器可以感测多个不同的范围的单个相机芯片来实现。

在一些实施方案中，相机芯片以形成它的材料为特征。相机芯片的材料是没有限制的，并且可以基于相机芯片预期检测的波长范围来选择。在这样的实施方案中，相机芯片是基于硅(si)、锗(ge)、砷化镓铟(ingaas)、硅化铂(ptsi)、碲化镉汞(hgcdte)、锑化铟(insb)、胶体量子点(cqd)或这些中的任何一个的组合。

在一些实施方案中，相机芯片以其电结构为特征。所述电结构是没有限制的，并且相机芯片包括电荷耦合器件(ccd)或互补金属氧化物半导体(cmos)图像传感器。应注意到，以上列出的材料每个都可以与形成最终的相机芯片的电结构一起使用。示例包括sicmos、siccd、geccd、gecmos、ingaasccd、ingaascmos、ptsiccd、ptsicmos、hgcdteccd、hgcdtecmos、insbccd、insbcmos、cqdccd或cqdcmos。这些传感器结构可以单独或者组合使用，要么在同一物理相机芯片中，要么在多个单独的相机芯片中。

在一些实施方案中，相机芯片设有滤色器阵列以生成图像。滤色器阵列的设计是没有限制的。要理解，术语“滤色器”在被用于相机芯片的上下文中时意指参考的光被允许通过该滤色器。例如，“绿色滤色器”是通过仅允许具有大约520nm至大约560nm的波长的光(对应于可见颜色绿色)通过该滤色器而对人眼表现出绿色的滤色器。类似的“nir滤色器”只允许仅红外光(nir)通过。在一些实施方案中，滤色器是被定位在相机芯片上方的滤色器。这样的滤色器阵列在设计上是变化的，但是全都与最初的“bayer”滤色器马赛克滤色器相关。滤色器阵列包括bggr、rgbg、grgb、rggb、rgbe、cyym、cygm、rgbw(2×2)、rgbw(具有对角线颜色的2×2)、rgbw(具有成对颜色的2×2)、rgbw(具有垂直w的2×2)和x-trans(由日本东京的fujifilmcorporation销售)。x-trans传感器具有通过在所有的水平线和垂直线中包括rgb瓦片来减少摩尔效应伪像的大的6×6像素图案。在列表中，b对应于蓝色，g对应于绿色，r对应于红色，e对应于祖母绿，c对应于青色，y对应于黄色，m对应于品红。w对应于下面将进一步描述的“白色”或单色瓦片。

w或“白色”瓦片本身包括几个配置。在一些实施方案中，w瓦片不对任何光进行绿色，所以所有的光都到达相机芯片。在这些实施方案中，相机芯片将检测它能够检测的所有的光。根据相机芯片，这可以是uv、vis、nir、vis-nir、vis-nir、vis-swir或vis-eswir。在一些实施方案中，w瓦片是用于vis、vis-nir、nir或eswir的滤色器，仅允许visvis-nir、nir或eswir分别到达相机芯片。这可以被有利地与以上列出的相机芯片材料或电结构中的任何一个组合。这样的滤色器阵列可以是有用的，因为它使得单个相机芯片能够既检测可见光、又检测近红外光，并且有时被称为四带滤色器阵列。

在还有的进一步的实施方案中，滤色器阵列被省略，并且不与相机芯片一起提供，这生成单色图像。在这样的实施方案中，产生的图像仅基于构成相机芯片的材料的带隙。在其他实施方案中，滤色器仍被应用于相机芯片，但是仅作为整体的单个滤色器。例如，红色滤色器的应用意味着相机芯片产生表示红色光谱的单色图像。在一些实施方案中，每个具有不同的整体的单个滤色器相机芯片的多个相机芯片被采用。作为示例，vis图像可以通过组合每个分别具有r、g和b滤色器的三个相机芯片而产生。在另一个示例中，vis-nir图像可以通过组合每个分别具有r、g、b和nir滤色器的四个相机芯片而生成。在另一个示例中，vis-eswir图像可以通过组合每个分别具有r、g、b和eswir滤色器的四个相机芯片而生成。

在一些实施方案中，颜色阵列被省略，并且相机芯片利用被组织到像素网格中的垂直堆叠的光电二极管。堆叠的光电二极管中的每个对期望波长的光做出响应。例如，堆叠式光电二极管相机芯片包括r、g和b层以形成vis图像。在另一个实施方案中，堆叠式光电二极管相机芯片包括r、g、b和nir层以形成vis-nir图像。在另一个实施方案中，堆叠式光电二极管相机芯片包括r、g、b和eswir层以形成vis-eswir图像。

在其中包括两个或更多个相机芯片的那些实施方案中，可以基于来自所述两个或更多个相机芯片中的每个的图像来产生立体图像。立体图像是有用的，因为它们使得查看者可以感知到图像中的深度，这提高了感知的准确性和现实性。在外科手术或其他类似的内窥镜活动期间，这对于操纵仪器和执行任务是有用的，安全性和准确性大于利用单像内窥镜。这是因为仅具有一个相机芯片位置的单像内窥镜不能提供深度感知。在一些实施方案中，立体图像是通过使用相同的两个相机芯片和两个滤色器阵列而形成的。在一些实施方案中，立体图像是用相同的两个相机芯片形成的，但是每个相机芯片设有不同的滤色器阵列。在一些实施方案中，立体图像是用不同的两个相机芯片形成的，这两个相机芯片设有不同的两个滤色器阵列。在一些实施方案中，立体图像是用不同的两个相机芯片形成的，其中只有一个相机芯片被提供滤色器阵列，另一个相机芯片要么被提供单色滤色器，要么根本不被提供滤色器阵列。在提供多于一个的相机芯片的任何时候，立体图像都可以通过使用每个相机芯片的输出并且组合或融合每个相机芯片的输出来产生。

在还有的进一步的实施方案中，获得立体图像的方法被提供。例如，第一相机芯片产生第一图像，在不同位置处的第二相机芯片产生第二图像，并且第一图像和第二图像被组合(“被融合”)以形成立体图像。

图1图示说明根据本公开的第一内窥镜变型。如图1所示，内窥镜可以在尖端中被配备有被两组源照射光纤t1和t2围绕的两个红-绿-蓝(rgb)相机rgb1和rgb2。如图1中的端视图中所示，源照射光纤t1、t2可以被以交替的方式围绕内窥镜的圆周布置。这样的布置可以提供围绕内窥镜的圆周的更均匀的且一致的照明。然而，应注意到，交替布置仅仅是作为示例提供的，并且另外的布置的源照射光纤可以被包括在设计中。

在一些实现中，源照射光纤t1和t2可以表示通过顺序扫描mcf滤色的两个离散的波长或者通过cf滤色的多个波长。例如，t1和t2可以被选择性地调制或者被同时递送到样本。如图1中包括的电路图中所示，单个光源可以朝向分束器。分束器可以被配置为将从光源接收的光划分为两个射束。第一射束可以顺着t1源照射路径被引导到调制器和滤色器(例如，mcf和/或cf)。类似地，第二射束可以顺着t2源照射路径被引导到第二调制器和滤色器(例如，mcf和/或cf)。通过主动地控制调制器的操作和滤色器的配置，第一多个源照射纤维t1或第二多个源照射纤维t2中的任何一个或这两个都可以以它们的相应的离散的波长照射组织样本。

在一些实现中，两个相机rgb1和rgb2可以被配置为执行单独的成像功能。例如，rgb1可以被调谐并且被配置为当样本组织通过使用源照射纤维t1被照射时提供样本图像。相反，rgb2可以被调谐并且被配置为当样本组织通过使用源照射纤维t2被照射时提供样本图像。在其他实现中，rgb1可以被实现为低分辨率相机，并且rgb2可以被实现为高分辨率相机。在这样的示例中，两个相机都可以被配置为使用任何一个源照射纤维t1和t2来捕捉图像。

图2图示说明根据本公开的第二内窥镜变型。如图2所示，内窥镜可以被配备一个rgb相机和一个近红外(nir)相机。包括源照射纤维t1和t2(类似于如上所述的t1和t2)以及第三源照射纤维ex的几个纤维可以被布置为使得它们围绕两个相机芯片。如本文中所描述的，源照射纤维ex可以被配置为引导具有用于nir荧光成像的激励波长的光。在一些实现中，照射纤维可以被布置为三个一组的多个组。例如，如图2中的端视图中所示，三个一组的多个组可以在t1、ex和t2之间交替。然而，应注意到，图2所示的交替布置仅仅是作为示例提供的。源照射纤维的交替的和/或另外的布置可以被用在设计中。

类似于图1的以上讨论，t1和t2可以表示通过顺序扫描mcf滤色的两个离散的波长或者通过cf滤色的多个波长。在一些实现中，所有的三个照射源t1、t2和ex都可以被同时呈现给样本。在一些示例中，照射源t1和t2可以被独立于照射源ex递送。

在一些实现中，使用t1和t2照射源纤维照射的组织样本的图像可以通过使用rfb相机来记录。在这样的布置中，使用ex源照射纤维照射的组织样本的荧光图像可以通过使用nir相机来记录。然而，应注意到，这样的布置仅仅是作为示例提供的，并且相机的功能性可以基于调制、滤色和与源照射纤维相关的其他类似因素来改变。

图3图示说明根据本公开的第三内窥镜变型。如图3所示，内窥镜可以在相机芯片上方被配备包括红色、绿色、蓝色和nir滤色器的四带滤色器阵列。类似于如以上关于图2描述的布置，包括源照射纤维t1和t2以及第三源照射纤维ex的几个纤维可以围绕相机芯片(一个或更多个)。在一些实现中，照射纤维可以被布置为三个一组的多个组。例如，如图3中的端视图中所示，三个一组的多个组可以在t1、ex和t2之间交替。然而，应注意到，图3所示的交替布置仅仅是作为示例提供的。源照射纤维的交替的和/或另外的布置可以被用在设计中。

类似于图1的以上讨论，t1和t2可以表示通过顺序扫描mcf滤色的两个离散的波长或者通过cf滤色的多个波长。在一些实现中，所有的三个照射源t1、t2和ex都可以被同时呈现给样本。在一些示例中，照射源t1和t2可以被独立于照射源ex递送。

在一些实现中，使用t1和t2照射源纤维成像的组织样本可以通过使用滤色器阵列的红色、绿色和/或蓝色滤色的像素来记录。在这样的布置中，使用ex源照射纤维产生的荧光图像可以通过使用nir滤色的像素来记录。

如以上参照图1-3描述的三种变型可以使用图4所示的两个光学配置选项中的一个来实现。第一光学配置(在图4中被标记为选项1)包括朝向分束器402的光源401。分束器402可以被配置为将射束划分为两个射束以使得射束中的每个都包括光源401发射的原始光的大约50％，第一划分光束被引导通过ex源照射路径，第二划分光束被引导通过t1和t2源照射路径。跟随ex源照射路径，第一划分光束可以被引导通过调制器403，并且被反光镜404反射到激励滤色器405。激励滤色器405的输出可以通过纤维耦合透镜406，并且通过ex源照射光纤束407输出。跟随t1和t2路径，第二划分光束可以通过第二分束器408。第二分束器408的输出可以是两个相等的射束，现在每个射束为光源401发射的总的光的大约25％。第一射束可以通过调制器409，被反光镜410反射，并且被滤色器411滤色。滤色的射束可以通过纤维耦合透镜412，并且通过t1源照射光纤束413输出。第二射束(来自分束器408)可以通过调制器414，并且被滤色器415滤色。滤色的射束可以通过第一耦合透镜416，并且通过t2源照射光纤束417输出。

通过主动地控制调制器403、409和414中的一个或更多个的操作，如选项1中所示的配置的输出可以被准确地控制。例如，通过启动调制器409和414并且停用调制器403，t1和t2这二者都可以主动地输出源照射。类似地，通过启动调制器403并且停用调制器409和414，ex可以主动地输出源照射。

第二光学配置(在图4中被标记为选项2)包括朝向可移动反光镜422的光源421。根据可移动反光镜422的位置，从光源421发射的光可以要么行进ex源照射路径(用选项2中的实线表示)，要么行进t1和t2源照射路径(用选项2中的虚线表示)。

跟随ex源照射路径，被可移动反光镜422反射的光可以进一步被反光镜423反射到激励滤色器424。激励滤色器424的输出可以通过纤维耦合透镜425，并且通过ex源照射光纤束426输出。

如果可移动反光镜422被定位为使得光源421发射的光不被反射，则该光可以跟随t1和t2路径。光束可以通过分束器427。分束器427的输出可以是两个相等的射束，现在每个射束为光源421发射的总的光的大约50％。第一射束(来自分束器427)可以通过调制器428，被反光镜429反射，并且被滤色器430滤色。滤色的射束可以通过纤维耦合透镜431，并且通过t1源照射光纤束432输出。第二射束(来自分束器427)可以通过调制器433，并且被滤色器434滤色。滤色的射束可以通过纤维耦合透镜435，并且通过t2源照射光纤束436输出。

通过主动地控制可移动反光镜422的位置、以及调制器428和433中的一个或更多个的操作，如选项2中所示的配置的输出可以被准确地控制。例如，通过将可移动反光镜422移动到反射光源421发射的光的位置，所有的发射的光都可以被引导到ex光纤束426。类似地，通过将可移动反光镜422定位到光源421发射的光不被反射的位置，并且主动地控制调制器428和433，光可以被输出到t1源照射光纤束432和t2源照射光纤束436中的一个或更多个。

图4中的表格比较相对照射强度吞吐量与配置选项1和2的其他性能度量。然而，应注意到，该表格中包含的特定值与仅作为示例提供的、选项1和2中包括的特定设计是相关的。根据内窥镜系统的设计和实现，选项1和2中所示的设计可以被相应地修改。例如，根据用于电路实现的可用空间，配置中的反光镜的数量和/或位置可以被改变。另外，在某些实现中，选项2的可移动反光镜422的功能可以被改变。例如，当在反射光的位置上时，可移动反光镜422可以被配置为在不被反射的光(即，可移动反光镜422在从光源421发射的光不被反射的位置上)顺着ex通路行进的同时、将反射的光引导到t1和t2通路。

在一些实施方案中，尖端上芯片产品或内窥镜系统被用作产生融合图像的方法的一部分。在这样的实施方案中，第一多个调制光子被用来产生第一图像，并且第二多个调制光子被用来产生第二图像。第一图像和第二图像被用来产生融合图像。在一些实施方案中，除了第一图像和第二图像之外的附加图像被产生，并且这些附加图像可以从调制光子和/或未调制光子产生。第一图像、第二图像和附加图像中的每个都可以从紫外光(uv)、可见光(vis)、近红外光(nir)、可见-近红外光(vis-nir)、短波红外光(swir)、扩展短波红外光(eswir)、近红外-扩展短波红外光(nir-eswir)的范围中的光子产生。在一些实施方案中，所述多个未调制光子是nir、swir或eswir光子。在其他实施方案中，第一多个调制光子是vis，并且第二多个调制光子是vis-nir。

在上面详细的说明中，参考了附图，附图形成本文的一部分。在附图中，类似的符号典型地确定类似的部件，除非上下文以其他方式指明。在详细的说明书、附图及权利要求书中所描述的图示说明的实施方案不意味是限制性的。在不脱离本文所呈现的主题的精神或范围下，其他实施方案可以被使用，并且可以作其他改变。将容易理解的是，如本文一般所描述的及附图所图示说明的，本公开的方面可以在广泛种类的不同的配置中被编排、代替、组合、分开以及设计，所有这些在本文被明确地考虑了。

根据本申请所描述的特定实施方案的本公开将不受限制，其被意图作为各种方面的图示说明。如对本领域技术人员将是清晰的那样，在不脱离本公开的精神和范围下可以作许多修改和变更。在本公开范围内，功能上等同的方法和设备，除了本文所列举的那些之外，从前述说明书来看对本领域技术人员将是清晰的。这样的修改和变更意图落入所附权利要求书的范围内。本公开将仅由所附权利要求书的条款以及这样的权利要求所给予权利的等同物的全部范围限制。将理解的是，本公开不限于特定的方法、试剂、化合物、组成或生物系统，其当然可以变化。也将理解的是，本文所使用的术语仅是出于描述特定的实施方案的目的，而并非意图是限制性的。

相对于本文基本上任何复数和/或单数术语的使用，本领域技术人员可以从复数到单数和/或从单数到复数转换，只要适合于上下文和/或应用。为清楚起见，在本文各种单数/复数置换可以被明确地阐述。

本领域技术人员将理解的是，一般地，在本文且尤其在所附权利要求书中所使用的术语(例如，所附权利要求书中的主体)一般意图作为“开放(open)的”术语(例如，术语“包括(including)”应被解释为“包括但不限于(includingbutisnotlimitedto)，术语“具有(having)”应被解释为“至少具有(havingatleast)”，术语“包含(includes)”应被解释为“包含但不限于(includesbutisnotlimitedto)”等)。尽管各种组成、方法和装置依据“包括(comprising)”各种部件或步骤(被解释为“包括但不限于(including,butnotlimitedto)”的意义)被描述，组成、方法和装置也可以由各种部件和步骤“本质上组成(consistessentiallyof)”或“组成(consistof)”，并且这样的术语应该被解释为本质上限定闭合的构件组。本领域技术人员将进一步理解的是，如果意图是特定数量的被引入权利要求陈述，则这样的意图将在权利要求中被明确地陈述，并且在没有这样的陈述时，这样的意图不存在。

例如，作为对理解的帮助，所附权利要求书可以包含引入权利要求陈述的引入性短语“至少一个”以及“一个或者更多个”的使用。然而，这样的短语的使用不应被解释为意味着通过“一”(不定冠词“a”或者“an”)引入权利要求陈述使包含这样引入的权利要求陈述的任何特定权利要求限于仅包含一个这样的陈述的实施方案，即使当同一权利要求包括引入性短语“一个或者更多个”或者“至少一个”以及“一”(不定冠词(比如，“a”或者“an”))(例如，“一”(“a”和/或“an”)应被解释为意指“至少一个”或者“一个或者更多个”)时；同样适用于用于引入权利要求陈述的定冠词的使用。

另外，即使特定数量的被引入的权利要求陈述被明确地陈述，本领域技术人员也将认识到，这样的陈述应被解释为意指至少所陈述的数量(例如，没有其他修饰语的“两个陈述”的无修饰陈述意指至少两个陈述、或者两个或者更多个陈述)。此外，在使用类似于“a、b和c等中的至少一个”的惯例的那些情况下，通常，这样的句法结构的意图是从本领域技术人员将理解该惯例的意义上来讲的(例如，“具有a、b和c中的至少一个的系统”将包括但不限于仅具有a、仅具有b、仅具有c、具有a和b、具有a和c、具有b和c和/或具有a、b和c、等等的系统)。在使用类似于“a、b或c中的至少一个”的惯例的那些情况下，通常，这样的句法结构的意图是从本领域技术人员将理解该惯例的意义上来讲的(例如，“具有a、b或c中的至少一个的系统”将包括但不限于仅具有a、仅具有b、仅具有c、具有a和b、具有a和c、具有b和c和/或具有a、b和c、等等的系统)。本领域技术人员将进一步理解的是，几乎任何分离词和/或短语呈现两种或更多种可替换的术语，无论在说明书、权利要求书或附图，应被理解来考虑包含一种术语、另一种术语或两种术语的可能性。例如，短语“a或b”将被理解为包含“a”或“b”或“a和b”的可能性。

另外，本公开的特征或一些方面根据马库什(markush)组来描述，本领域技术人员将理解的是，本公开也由此依据马库什组的任何单个成员或子组成员来描述。

如将被本领域技术人员所理解的，针对任何和所有目的，例如在提供书面描述方面，本文所公开的所有范围也涵盖任何和所有可能的子范围以及其中的子范围的组合。任何所列的范围可以被容易地理解为足够地描述以及使得相同的范围被分解为至少相等的两部分、三部分、四部分、五部分以及十部分等等成为可能。作为非限制性的实施例，本文所讨论的每个范围可以被容易地分解成下三分之一、中间三分之一和上三分之一等等。如还将被本领域技术人员所理解的，所有的语言(例如“直至(upto)”和“至少(atleast)”等等)包括列举的数字，并且指的是可以随后被分解成如上面所讨论的子范围的范围。最后，如将被本领域技术人员所理解的，范围包括每个单个成员。因此，例如，具有1-3个单元的组指的是具有1、2或3个单元的组。类似地，具有1-5个单元的组指的是具有1、2、3、4或5个单元的组等等。

各种上面所公开的及其他特征和功能，或其替换物，可以被结合到许多其他不同的系统或应用中。本领域技术人员可以随后做出各种目前无法预见或无法预期的替换、修改、变更或在其中的改进，其中的每个也意图被所公开的实施方案所涵盖。