一种图像校正方法、装置及内窥镜系统与流程
本发明涉及医疗设备图像处理领域，特别是涉及一种图像校正方法、装置及内窥镜系统。
背景技术：
物体表面呈现的颜色与光源特性和光照条件有关，随着光照、视角的不同产生不同的颜色图像。人的视觉系统能够在一定程度上自动消除和补偿光照条件等对颜色的影响，以正确地获取物体本身所固有的颜色。
因人的体腔较小，医用内窥镜的硬件设备体积很小，自身电源电量有限，补光灯功率较小，存在因补光不足使图片具有颜色偏差；此外，因人体腔道的复杂性，同一图片中距离灯光近处会出现过曝，距离灯光远处存在补光不足会出现偏暗偏黑的情况，曝光过度或曝光不足均会引起非线性的颜色失真。上述问题会影响医生读片，因此，对内镜图像进行颜色校正，可以有效改善图片的因为补光引起的曝光不均匀和图片颜色失真的问题，有利于提高医生读片的快速性准确性。
现有技术中，对图像颜色的校正一种方法是找出待校正图像和所期望的图像的颜色之间的映射关系，利用多项式来构造它们之间的颜色变换模型。构造多项式映射模型需要选取一定的样本进行训练来达到校正的效果，单一构造的颜色模型，只能解决部分颜色失真问题，不能够对所有图像有效。
另一种方式是采用直方图均衡的方法，通过直方图均衡可以得到图像灰度范围、每个灰度的频度和灰度的分布、整幅图像的平均明暗和对比度等。对图像进行非线性拉伸,重新分配图像素值,使得在某个灰度级区间像素内分布就变均匀来完成图像颜色的校正，使得灰度值的差别变大，如果图像值分布较小的话,会产生粗略分类的视觉效果，若图像大部分像素集中在低暗区域，或者高亮过曝区域,则直方图均衡处理后也会引起图像颜色失真等问题。
技术实现要素：
本发明旨在至少解决现有技术中存在的技术问题，特别创新地提出了一种图像校正方法、装置及内窥镜系统。
为了实现本发明的上述目的，根据本发明的第一个方面，本发明提供了一种图像校正方法，包括：
步骤s1，获取原始rgb图像，将原始rgb图像转换为hsv颜色空间图像；
步骤s2，分别从hsv颜色空间图像中提取v通道、s通道、和h通道的图像，并记为第一v通道图像、第一s通道图像和第一h通道图像；
步骤s3，对第一v通道图像进行局部自适应均衡处理，获得第二v通道图像；
和/或对第一s通道图像进行饱和度调整，获得第二s通道图像；
步骤s4，合并第一h通道图像、第二v通道图像和第二s通道图像，或者合并第一h通道图像、第一v通道图像和第二s通道图像，或者合并第一h通道图像、第二v通道图像和第一s通道图像；
将合并后的图像转换为rgb格式输出，得到校正后的图像。
上述技术方案的有益效果为：充分利用在hsv颜色模型中三个通道分别独立进行图像处理后会影响其它通道的优点，根据原始图像质量对v通道和/或s通道进行处理，处理后再合成新的图像，不会引入新噪声，这样处理流程简单高效，图像处理速度快；对v通道进行局部自适应均衡处理可以消除因补光引起的曝光不均匀问题带来的图像亮度不均衡问题，提高清晰度和对比度，图像原来亮度较暗的区域被增亮，过曝的区域得到抑制；对s通道进行颜色饱和度调整，使其色彩信息饱和丰富起来。
在本发明的一种优选实施方式中，所述步骤s3中，对第一v通道图像进行局部自适应均衡处理，获得第二v通道图像的步骤包括：
步骤s31，对第一v通道图像进行低频滤波，获得低频图像；在所述低频图像中，在以位置坐标为(m,n)的像素点为中心，r为半径的局部区域内的像素点的像素值相同，记为l(m,n)；
步骤s32，求取第一v通道图像中以位置坐标为(m,n)的像素点为中心，r为半径的局部区域的亮度方差为：
其中，所述p(x,y)为第一v通道图像中以位置坐标为(m,n)的像素点为中心，r为半径的局部区域中位置坐标为(x,y)的像素点的像素值；
步骤s33，将第一v通道图像减去低频图像得到高频图像，基于局部方差设置自适应系数，在高频图像中通过下式进行局部自适应均衡处理，获得第二v通道图像：
其中，
上述技术方案的有益效果为：将第一v通道图像分成高频图像和低频图像，低频图像在局部区域内的像素值相同，提高了处理速度；在第一v通道图像的像素值变化比较大的区域或者是图像边缘区域的地方，自适应系数的值较小，这样校正后就不会产生振铃效应。该局部自适应均衡处理方法对第一v通道图像的暗区域进行拉伸，对过曝区域即过亮区域进行抑制，使图像更清晰，对比度更高；降低低频区域，突出高频区域来提高清晰度和对比度；通过引入自适应系数可以有效抑制图像颜色校正产生的噪音，最后得到清晰的增强的图像。在本发明的一种优选实施方式中，在所述低频图像中以位置坐标为(m,n)的像素点为中心，r为半径的局部区域中的像素点的像素值为所述局部区域内所有像素点像素值的平均值或中值或最小值或最大值。
上述技术方案的有益效果为：便于计算，运算量较少。
在本发明的一种优选实施方式中，所述步骤s3中，对第一s通道图像进行饱和度调整，获得第二s通道图像的步骤包括：
步骤s34，选取多个原始图像，对每个原始图像进行饱和度修正获得修正图像，分别将原始图像及其对应的修正图像转换为hsv空间色彩图像并提取出s通道图像；
将原始图像的s通道图像与所述原始图像的修正图像的s通道图像相互关联并分别作为输入样本和输出样本得到训练集；
步骤s35，通过训练集对支持向量机svm模型进行训练，获得支持向量机svm模型的核函数参数；
步骤s36，将第一s通道图像输入支持向量机svm模型，支持向量机svm模型输出饱和度调整后的第二s通道图像。
上述技术方案的有益效果为：通过svm神经网络来进行第一s通道图像的饱和度校正，能够处理图像的非线性映射问题，对所有颜色失真图片有效。
在本发明的一种优选实施方式中，所述核函数为：
f(s)＝as3+bs2+cs+d；
其中，f(s)为第二s通道图像，s为第一s通道图像，a、b、c和d均为核函数参数。
上述技术方案的有益效果为：核函数能够避免svm神经网络映射函数的求解，该核函数公式能够极大的减少运算量，加快处理速度。
在本发明的一种优选实施方式中，所述步骤s34中，对每个原始图像进行饱和度修正获得修正图像的方法为：
设置饱和度阈值；调节原始图像的饱和度，当其饱和度达到饱和度阈值时，将此时获得的调节后的图像记为所述原始图像的修正图像。
上述技术方案的有益效果为：简单易行，运算量少。
在本发明的一种优选实施方式中，所述原始图像包含饱和度高于饱和度阈值的图像、饱和度等于饱和度阈值的图像和饱和度低于饱和度阈值的图像。
上述技术方案的有益效果为：满足样本多样性最大化原则，增加svm模型输出结果的可靠性。
为了实现本发明的上述目的，根据本发明的第二个方面，本发明提供了一种图像校正装置，包括图像校正单元，所述图像校正单元接收图像并按照本发明所述的图像校正方法对接收到的图像进行校正处理。
上述技术方案的有益效果为：具有本发明所述的图像校正方法的有益效果。
为了实现本发明的上述目的，根据本发明的第三个方面，本发明提供了一种内窥镜系统，包括本发明所述的图像校正装置和伸入人体或待测管道的图像传感器，所述图像传感器采集图像并传输给图像校正装置，所述图像校正装置接收图像传感器输出的图像信号并按照本发明所述的图像校正方法对接收到的图像进行校正处理。
上述技术方案的有益效果为：除具有本发明所述的图像校正方法和装置的有益效果外，还具有校正后的图片更清晰，对比度更高，使原有的不饱和的色彩信息变得饱和、丰富起来，视觉效果更好，更有利于人眼观察，有利于医生读片时对异常病变部位进一部的观察，提高医生诊断的准确性的有益效果。
附图说明
图1是本发明一具体实施方式中图像校正方法的流程示意图；
图2是本发明一种应用场景中图像校正方法的执行流程图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。
在本发明的描述中，需要理解的是，术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
在本发明的描述中，除非另有规定和限定，需要说明的是，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是机械连接或电连接，也可以是两个元件内部的连通，可以是直接相连，也可以通过中间媒介间接相连，对于本领域的普通技术人员而言，可以根据具体情况理解上述术语的具体含义。
本发明公开了一种图像校正方法，如图1所示为其流程示意图，在一种优选实施方式中，该方法具体的包括：
步骤s1，获取原始rgb图像，将原始rgb图像转换为hsv颜色空间图像；
步骤s2，分别从hsv颜色空间图像中提取v通道、s通道、和h通道的图像，并记为第一v通道图像、第一s通道图像和第一h通道图像；
步骤s3，对第一v通道图像进行局部自适应均衡处理，获得第二v通道图像；
和/或对第一s通道图像进行饱和度调整，获得第二s通道图像；
步骤s4，合并第一h通道图像、第二v通道图像和第二s通道图像，或者合并第一h通道图像、第一v通道图像和第二s通道图像，或者合并第一h通道图像、第二v通道图像和第一s通道图像；
将合并后的图像转换为rgb格式输出，得到校正后的图像。
在本实施方式中，hsv(hue,saturation,value)是根据颜色的直观特性由a.r.smith在1978年创建的一种颜色空间,也称六角锥体模型(hexconemodel)。这个模型中颜色的参数分别是：色调(h)，饱和度(s)，明度(v)。在hsv颜色模型中色调h表示颜色角度度量，取值范围为0°～360°，饱和度s表示接近光谱色的程度，明度v表示颜色明亮的程度，对于光源色，明度值与发光体的光亮度有关，三个通道分别独立进行图像处理，处理后也不会影响其它通道。
在本实施方式中，根据原始图像的颜色问题可选择对s通道和/或v通道进行处理，如因为补光问题，引起原始图像存在一定的颜色偏差，距离补光灯近处，会出现过曝，距离补光灯远处补光不足，出现偏暗偏黑的情况，曝光过度或曝光不足会引起非线性的颜色失真，这时，优选的，同时对v通道和s通道的图像进行处理。
在本实施方式中，对第一v通道图像进行局部自适应均衡处理，获得第二v通道图像的步骤，对第一s通道图像进行饱和度调整，获得第二s通道图像的步骤，两者可以同时进行或分时进行，根据选用的处理器的数量和计算能力确定。
在一种优选实施方式中，步骤s3中，对第一v通道图像进行局部自适应均衡处理，获得第二v通道图像的步骤包括：
步骤s31，对第一v通道图像进行低频滤波，获得低频图像；在低频图像中，在以位置坐标为(m,n)的像素点为中心，r为半径的局部区域内的像素点的像素值相同，记为l(m,n)；1≤m≤m1，1≤n≤n1，m1为原始图像的横向长度，n1为原始图像的纵向长度，r＞0。
步骤s32，求取第一v通道图像中以位置坐标为(m,n)的像素点为中心，r为半径的局部区域的亮度方差为：
其中，p(x,y)为第一v通道图像中以位置坐标为(m,n)的像素点为中心，r为半径的局部区域中位置坐标为(x,y)的像素点的像素值；
步骤s33，将第一v通道图像减去低频图像得到高频图像，基于局部方差设置自适应系数，在高频图像中通过下式进行局部自适应均衡处理，获得第二v通道图像：
其中，
在本实施方式中，为了能够看清楚内镜图像的更多细节部分，使得图像更加清晰，对比度更高。将图像分成高频部分和低频部分。
在本实施方式中，常数c的值可按照经验预设，如在2到8之间取值。
在本实施方式中，进一步的，在低频图像中以位置坐标为(m,n)的像素点为中心，r为半径的局部区域中的像素点的像素值为局部区域内所有像素点像素值的平均值或中值或最小值或最大值。优选的，为了提高计算处理速度，低频部分用图像的平均值来代替，低频滤波公式如下：
在本实施方式中，将第一v通道图像分为低频图像和高频图像在高频图像中通过下式进行局部自适应均衡处理，通过降低低频区域，突出高频区域来提高清晰度和对比度。
在一种优选实施方式中，步骤s3中，对第一s通道图像进行饱和度调整，获得第二s通道图像的步骤包括：
步骤s34，选取多个原始图像，对每个原始图像进行饱和度修正获得修正图像，分别将原始图像及其对应的修正图像转换为hsv空间色彩图像并提取出s通道图像；
将原始图像的s通道图像与所述原始图像的修正图像的s通道图像相互关联并分别作为输入样本和输出样本得到训练集；
步骤s35，通过训练集对支持向量机svm模型进行训练，获得支持向量机svm模型的核函数参数；
步骤s36，将第一s通道图像输入支持向量机svm模型，支持向量机svm模型输出饱和度调整后的第二s通道图像。
在本实施方式中，在步骤s34中，从原始图像库中,人工选取不同的原始图像，按照样本多样性最大化原则，平均选取多样样本，如在原始图像为内窥镜拍摄图像时，可选择不同性别和年龄段的个体的图像，具体到每个个体时，还要对不同时间段，不同部位的原始图像做进一步的筛选，平均选取正常的饱和度的图片，还有饱和度比较低的图像，以及颜色饱和度比较好的图片。
在本实施方式中，优选的，对每个原始图像进行饱和度修正获得修正图像的方法为：
设置饱和度阈值；调节原始图像的饱和度，当其饱和度达到饱和度阈值时，将此时获得的调节后的图像记为所述原始图像的修正图像。饱和度阈值可根据观察人员的习惯、应用环境、和图片拍摄对象设置一个或多个，如不同的拍摄对象选择不同的饱和度阈值来进行饱和度调节。具体的，可通过ps软件(如photoshop软件)调节原始图像的饱和度使其达到饱和度阈值。将选取好的原始图像通过ps软件，手动调整图像的饱和度，使其饱和度达到设定的饱和阈值，在该饱和度阈值具有人眼观察比较好的满意效果，将每一张图像形成原始图像和饱和度修正后的图像。这样提取原始图像的s通道图像和修正后图像的s通道图像输入到支持向量机svm中来进行训练拟合。
在本实施方式中，优选的，原始图像包含饱和度高于饱和度阈值的图像、饱和度等于饱和度阈值的图像和饱和度低于饱和度阈值的图像。
在本实施方式中，支持向量机(supportvectormachine,svm)是一类按监督学习方式对数据进行二元分类的广义线性分类器。
在一种优选实施方式中，核函数为：
f(s)＝as3+bs2+cs+d；
其中，f(s)为第二s通道图像，s为第一s通道图像，a、b、c和d均为核函数参数。
在本发明的图像校正方法的一种应用场景中，其执行流程图如图2所示，在该应用场景中，v通道和s通道时串行的，对v通道做局部自适应均衡处理和对s通道饱和度调整处理为串行的。
本发明还公开了一种图像校正装置，包括图像校正单元，图像校正单元接收图像并按照本发明的图像校正方法对接收到的图像进行校正处理。
在本实施方式中，图像校正单元优选但不限于为fpga或arm等微处理器，也可为台式电脑或笔记本电脑等。
本发明还提供了一种内窥镜系统，包括本发明的图像校正装置和伸入人体或待测管道的图像传感器，图像传感器采集图像并传输给图像校正装置，图像校正装置接收图像传感器输出的图像信号并按照本发明的图像校正方法对接收到的图像进行校正处理。
在本实施方式中，图像传感器优选但不限于为cmos摄像头，图像传感器的图像信号可通过有线或无线传输至图像校正装置。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例，本领域的普通技术人员可以理解：在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由权利要求及其等同物限定。
- 还没有人留言评论。精彩留言会获得点赞！