阅读说明：本技术 一种具有3d测量功能的胶囊内窥镜及相应成像方法 (Capsule endoscope with 3D measuring function and corresponding imaging method ) 是由 章逸舟 李光元 鲁远甫 焦国华 陈良培 刘鹏 于 2019-12-11 设计创作，主要内容包括：本发明涉及一种胶囊内窥镜,核心为双目成像系统,其采用双物镜单图像传感器的设计。具体地,所述双目成像系统包括棱镜单元以及与所述棱镜单元配合使用的一个图像传感器。所述棱镜单元包括两块相同的45°角斜方棱镜,两块斜方棱镜以相互交错180°的方位关系并排放置并且光路出射面在一个平面内,分别对应所述图像传感器靶面上的两个均分区域。本发明的胶囊内窥镜光学结构紧凑,可实现对病变区的彩色成像,也可以获得3D测量的功能,同时整体制作成本也得到降低。(The invention relates to a capsule endoscope, which is mainly a binocular imaging system and adopts the design of a double-objective lens single-image sensor. Specifically, the binocular imaging system comprises a prism unit and an image sensor used in cooperation with the prism unit. The prism unit comprises two same 45-degree-angle rhombic prisms which are arranged side by side in a staggered 180-degree azimuth relation, and the emergent surfaces of the light paths are in a plane and respectively correspond to two equal division areas on the target surface of the image sensor. The capsule endoscope has compact optical structure, can realize color imaging of a lesion area, can also obtain the function of 3D measurement, and simultaneously reduces the whole manufacturing cost.)

一种具有3D测量功能的胶囊内窥镜及相应成像方法

技术领域

本发明属于医疗器械技术领域，具体涉及一种胶囊内窥镜。

背景技术

胶囊内窥镜是一种胶囊形状的可视化医用肠胃检查设备。通过胶囊内窥镜进入人体，可以窥探人体肠胃和食道部位的健康状况，从而帮助医师对病人进行诊断。胶囊内窥镜具有无创、准确、可重复利用等传统柔性肠胃内窥镜所不及的优点。目前，商业化的胶囊内窥镜主要集成2D成像的单摄像头，为了获得更大的视场，观测内窥镜通常具有高畸变，长期以来，胶囊内窥镜只是用于观察，而不是测量，这些缺陷使得医师很难利用胶囊内窥镜判断病变的严重程度。为了改善医师对病变观测的准确性和真实性，通过胶囊内窥镜获取肠胃内的三维信息是非常有利的。

专利CN107317954A通过光场技术采集待检测位置场景的光场信号，光场相机记录光在传播过程中的四维信息从而可以重构出被观测物体3D状态。但由于采用光场相机进行成像，而光场相机由主透镜组、微透镜阵列和感光元件组成，微型的微透镜阵列本身就价格昂贵，而且整套设备制作要求非常精细，因而成本也很高。

专利CN105996961A公开了一种基于结构光的3D立体成像胶囊内窥镜系统，通过结构光产生模块产生结构光并配合照明装置来获取三维信息。但是，用于成像的3D成像光带是通过对白光进行滤光处理并利用结构光产生模块所形成的，因而并不能准确反应成像目标的颜色信息，虽然可以进行3D测量，但是缺少病区颜色这一维度的重要信息对医师的诊断将带来很大影响。

专利CN104720735A的虚拟现实胶囊内窥镜采用两个摄像装置来模拟人的左右眼，每个摄像装置都包括CCD图像传感器和摄像镜头。但由于胶囊内窥镜对尺寸要求很高，采用双物镜、双图像传感器的成像技术非常不利于胶囊内窥镜满足应用中的尺寸需求，也不利于降低成本。

因此，成本高、制作工艺复杂、不容易满足尺寸需求、成像信息不够丰富等都是目前现有三维成像胶囊内窥镜具有的缺点，如能对这些缺点进行改进，将为医师通过胶囊内窥镜对病变进行诊断带来更多的便捷。

发明内容

针对上述现有技术中的缺点，本发明提出了一种用于肠胃检查的具有3D测量功能的胶囊内窥镜，该胶囊内窥镜系统借助特殊设计的棱镜模块，采用双物镜单图像传感器来实现3D测量的目的，不但减小了系统的尺寸空间，在保留光谱信息的同时还具备3D测量功能。

具体地，本发明的胶囊内窥镜包括胶囊外壳，以及设置在所述胶囊外壳内的双目成像系统、照明模块、图像采集及处理模块、电池模块、磁罩定位模块和无线发射模块；其中，所述双目成像系统包括棱镜单元以及与所述棱镜单元配合使用的一个图像传感器；所述棱镜单元包括两块相同的45°角斜方棱镜，两块斜方棱镜以相互交错180°的方位关系并排放置；两块斜方棱镜的光路出射面在一个平面内，并且分别对应所述图像传感器靶面上的两个均分区域。

进一步，所述双目成像系统还包括两套成像物镜系统，两套所述成像物镜系统分别对应所述两块斜方棱镜的入射面。所述成像物镜系统例如包括透镜单元和光阑。优选地，所述透镜单元包括透镜一、透镜二、透镜三和光阑；所述透镜一是一具有负屈光度的透镜，其物方一侧曲面凹向像方，像方一侧曲面凹向物方；所述透镜二是一具有负屈光度的透镜，其物方一侧曲面凹向像方，像方一侧曲面凹向像方；所述透镜三是一具有正屈光度的透镜，其物方一侧曲面凹向像方，像方一侧曲面凹向像方。

进一步，在所述棱镜单元和所述图像传感器之间还可设有滤光片。

优选地，所述照明模块具有设置在所述双目成像系统侧方的一个或者多个照明单元，所述照明单元例如使用LED。

同时，本发明还提出一种使用上述胶囊内窥镜进行三维成像的方法，包括如下操作步骤：

使用体外磁控设备通过控制胶囊内的所述磁罩定位模块进入肠胃道，并不断前行；

通过所述照明模块对肠胃道进行照明，通过所述双目成像系统对肠道内病变区进行成像；在成像过程中，进入两块所述斜方棱镜的图像信号具有视差，并且成像至一个所述图像传感器靶面上的两个均分区域；所述图像传感器所成的图像由所述图像采集及处理模块采集。

进一步，所述方法还包括所述图像采集及处理模块将处理后的图像输送至所述无线发射模块，所述无线发射模块对处理后的图像进行编码并传输至体外的接收装置上。

优选地，所述接收装置通过计算机软件进行三维图像重建。

与现有技术相比，本发明采用了双物镜单图像传感器的胶囊内窥镜,光学结构紧凑，可实现对病变区的彩色成像，也可以获得3D测量的功能，同时整体制作成本也得到降低。

上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，并可依照说明书的内容予以实施，以下以本申请的较佳实施例并配合附图详细说明如后。

附图说明

下面结合附图对本发明的

具体实施方式

作进一步详细的说明；

图1是双目立体成像原理；

图2是深度计算示意图；

图3是本发明的双物镜单图像传感器胶囊内窥镜示意图；

图4是双目成像系统中胶合棱镜三维示意图；

图5是双物镜单图像传感器双目成像系统实例图。

附图标记：

1-胶囊外壳、2-双目成像系统、3-照明模块、4-图像采集及处理模块、5-电池模块、6-磁罩定位模块、7-无线发射模块、21-透镜一、22-透镜二、23-透镜三、24-光阑、25-胶合棱镜、251和252-斜方棱镜、251a和252a-斜方棱镜的出射面、251b和252b-斜方棱镜的入射面、26-滤光片、27-图像传感器。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

为了实现立体测量，一种基本的成像原理是在三维成像胶囊内窥镜系统中设置有两路光学系统，分别用来摄取对应左眼和右眼的分离图像，然后再通过软件进行三维重建。

双目立体成像的基本原理参见说明书附图1所示，图中下方为两个完全相同的摄像机，两个摄像机的相应参数分别以下标1和r标注。其中O₁和O_r分别为两个摄像机的投影中心，它们之间的距离称为基线距，用B表示。O₁n₁和O_rn_r分别为左右摄像机像面C₁和C_r的两条法线，世界坐标系内一点A(X,Y,Z)在左右摄像机像面C₁和C_r上的像点分别为a₁(u₁,v₁)和a_r(u_r,v_r)，这两点又被称为“共轭点”。知道了这两个点，分别作它们与对应相机的投影中心的连线，从而得到投影线a₁O₁和a_rO_r。

假设两摄像机像面在同一平面上，则物点A在左右摄像机像面上像点的Y坐标相同，即v₁＝v_r，由三角几何关系可得到：

式(1)中f为两个摄像机的焦距，所以视差为：

式(2)就是双目立体成像的基本原理，在获得了视差信息后，根据投影模型便可以得到图像的深度信息和三维信息。

同时，在获取到视差后，也可以根据立体校正后得到的参数、待测点图像坐标和左右图像探测器，例如CCD视差进行三维信息的准确计算。参见说明书附图2所示，设

为左CCD中心，

为右CCD中心，摄像头中心间距为T，x_l为左CCD上待匹配点，x_r为右CCD上匹配点。根据相似三角形可得

可解得Z＝-Tf/x_l-x_r。

这样可知在已标定T和f，以及主图像上一点p的像差xl-xr情况下，即可计算出深度信息Z，通过标定信息可计算出(x,y)，这样即可恢复待测点三维信息(x,y,z)。

基于上述三维成像的工作原理，如前文所述目前常规的胶囊内窥镜获取两幅图像是采用双物镜、双图像传感器的成像技术，这并不适用于原本就对尺寸要求很高的胶囊内窥镜。

本发明的胶囊内窥镜的结构如说明书附图3所示，胶囊内窥镜包括胶囊外壳1、双目成像系统2、照明模块3、图像采集及处理模块4、电池模块5、磁罩定位模块6和无线发射模块7。其中，双目成像系统2、照明模块3、图像采集及处理模块4、电池模块5、磁罩定位模块6和无线发射模块7都设置并固定在所述胶囊外壳1的内部。所述胶囊外壳1可以由两部分外壳挤压在一起形成，双目成像系统2和照明模块3所面对的所述胶囊外壳1的部分是透明的。典型的胶囊外壳1可以做到约φ12mmx30mm的尺寸大小。在本实施例中，双目成像系统2设置在胶囊外壳1内的一端，其是获取三维信息的关键部件，将在后文详述。在双目成像系统2的侧方配设有照明模块3，用于为成像目标区域提供照明光。所述照明模块3可以为一个照明单元，也可以为两个或者更多个照明单元。如图3所示，在本实施例中，照明模块3具有两个照明单元，分别设置在双目成像系统2的两侧，从而为两路信号提供相近的照明环境。为了降低成本、增加使用寿命以及兼顾结构紧凑，照明模块3的各单元优选使用LED。在双目成像系统2的光路后方安装有图像采集及处理模块4、电池模块5、磁罩定位模块6和无线发射模块7，双目成像系统2获取的图像信号传送给所述图像采集及处理模块4，并由所述图像采集及处理模块4对信号进行处理从而获取三维图像信息，该三维图像信息能够通过所述无线发射模块7传送到外部设备以显示给医师。所述电池模块5为其他部分供电。所述磁罩定位模块6用于医师控制整个胶囊内窥镜。

本发明与现有技术之间最大的区别就在于所述双目成像系统2。如说明书附图4和5所示，所述双目成像系统2的核心部分是一个胶合棱镜25以及于所述胶合棱镜25配合使用的图像传感器27。所述胶合棱镜25具体采用两块完全一样的45°角斜方棱镜251和252，两块斜方棱镜以相互交错180°的方位关系并排放置，即，斜方棱镜251绕图5所示的虚线旋转轴L旋转180°即为另一块斜方棱镜252的方向，两块斜方棱镜交错并列放置，从而斜方棱镜251的底面251a和斜方棱镜252的底面252a共面，这两个面也是成像光路的出射面。而斜方棱镜251的面251b和斜方棱镜252的面252b为成像的入射面。两块斜方棱镜251和斜方棱镜252交叠的部分可以通过胶粘接在一起，从而将两个物镜的图像分别成像至同一图像传感器27靶面左右的两个均分的区域。两块斜方棱镜以及图像传感器27等双目成像系统的器件都可经由电路板进一步固定在所述胶囊外壳内。由于棱镜并靠间隙足够小，因此两个图像分界线足够清晰，左右光学信息不会互为干涉影响。

本发明中所述双目成像系统2是采用了一种双物镜光轴平移拉近设计，参见说明书附图5所示，对于胶合棱镜25的两个入射面251b和252b，使用了两个光学参数相同的成像物镜系统。在本实施例中，双目成像系统2由两个透镜一21、两个透镜二22、两个透镜三23、两个光阑24、一个胶合棱镜25配一个滤光片26、以及一个图像传感器27组成。每一套成像物镜系统都由3片透镜和一个光阑24组成：透镜一21是一具有负屈光度的透镜，其物方一侧曲面凹向像方，像方一侧曲面凹向物方；透镜二22是一具有负屈光度的透镜，其物方一侧曲面凹向像方，像方一侧曲面凹向像方；透镜三23是一具有正屈光度的透镜，其物方一侧曲面凹向像方，像方一侧曲面凹向像方；光阑24位于透镜二22和透镜三23之间。该物镜的典型视场角不小于90°，口径不大于2mm。

使用本发明的胶囊内窥镜时，目标区域被照明模块3照亮，病变区域的光线能够被两套成像物镜系统所捕获，相同病变区域进入斜方棱镜251和进入斜方棱镜252的图像信号具有视差。具体地，进入第一套成像物镜系统，即图5中上方成像物镜系统的光线依次通过上方成像物镜系统中的透镜一21、透镜二22、光阑24、透镜三23后，经斜方棱镜251的入射面251b进入胶合棱镜25，光线在斜方棱镜251中经过两次90°反射后由斜方棱镜251的出射面251a进入滤光片26，此时中心视场的主光线平行于原光轴，经过滤光片26滤光后在图像传感器27的一侧成像。进入第二套成像物镜系统，即图5中下方成像物镜系统的光线依次通过下方成像物镜系统中的透镜一21、透镜二22、光阑24、透镜三23后，经斜方棱镜252的入射面252b进入胶合棱镜25，光线在斜方棱镜252中经过两次90°反射后由斜方棱镜252的出射面252a进入滤光片26，此时中心视场的主光线也平行于原光轴，经过滤光片26滤光后在图像传感器27的另一侧成像。因此，被两个成像物镜系统捕获的图像经不同的光路分别成像至同一图像传感器27靶面左右的两个均分的区域，由于棱镜并靠间隙足够小，因此两个图像分界线足够清晰，左右光学信息不会互为干涉影响。

具体应用中，病人将本发明的胶囊内窥镜吞服后，体外磁控设备通过控制胶囊内的磁罩定位模块6进入肠胃道，并不断前行，当发现病变区时，通过照明模块3对肠胃道进行照明，通过双目成像系统2对肠道内病变区成像，对两个物镜成像范围内对应的相同的场景区域形成共同成像区，图像传感器所成的图像由图像采集及处理模块4采集并处理，处理后输送至无线发射模块7，无线发射模块7对处理后的图像进行编码并传输至体外的接收装置上，接收到的一副图像通过软件技术分隔成左右两幅截图，然后可以通过计算机软件进行三维重建和测量。胶囊内窥镜内的所有器件的能量都由电池模块5供电。

本发明胶囊内窥镜的关键在于采用双物镜单图像传感器实现3D测量。使用两个光学参数相同的成像物镜系统，在其后方分别设置两个并列、相位相错180度的斜方棱镜，从而将两个成像物镜系统捕获的图像分别成像至同一图像传感器靶面左右的两个均分区域，进而被软件算法识别并重建三维图像。与现有技术相比，本发明胶囊内窥镜的成像光路中利用棱镜内部的反射以及使用一个图像传感器获取两张具有视差的图像，因而使得整个成像光路的结构更紧凑，口径更小，最终使胶囊内窥镜的体积更小，成本也更低。同时，双目成像系统所摄取的图片既可以是彩色图像也可以是单色图像，丰富的图像信息有助于医师辨别病变区域。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。