本发明涉及一种糖尿病视网膜病变眼底图像血管分割方法,尤其涉及一种基于深度学习的糖网病眼底图像自动分割方法。属于医学图像处理。
背景技术:
1、糖尿病视网膜病变又称为糖网病,是糖尿病最常见的微血管并发症。在我国糖尿病人群中,糖尿病确诊5年后dr的患病率为25%,15年后会高达75%-80%。随着时间的增长,病情发展会恶化,在视网膜表面会长出新的脆弱的血管,新生的脆弱血管一旦破裂,就会造成眼球内出血、视力模糊等情况,严重时会引起新生血管性青光眼,导致永久性视力丧失。
2、医学图像分割的目的是将医学图像中具有特殊含义的部分单独分割出来。在医学领域中,医生主要靠医学影片图像和主观判断来诊断疾病,医学图像分割是医学三维重建和定量分析中的关键步骤,更是病灶区量化、选择治疗手段和放射治疗的重要技术前提,分割结果的准确性直接影响后续治疗效果。目前,医学图像分割主要有以下难点:医学组织影像结构复杂,有多种成像模态,pet、mri、ct安全模型、算法与编程《网络安全技术与应用》2022年第2期‖50‖和超声等,根据不同的成像方法和成像部位要选择不同的分割方法。另外一点是,医学图像同自然图像不同,具有较高的复杂性,由于图像的像素单一,所以在病变部位的界线、形状等信息也比较模糊,医学图像的准确分割仍是一项难题。
3、在视网膜眼底图像中,血管结构是早期观察眼科疾病的重要依据,然而对病变眼球中的血管结构进行标注提取是一项费时费力、效率低且人力资源不足的工作。近些年随着人工智能的兴起,尤其是神经网络的迅速发展给医学图像处理领域提供了新的思路。
4、视网膜血管分割和糖尿病视网膜病变筛查工作主要是通过分析眼底图像来完成。糖尿病视网膜病变的早期病变特征不容易通过观察被发现,病变中晚期会对患者的视力造成严重损伤。视网膜血管的分割工作要求极高且费时费力,所以仅依靠人工是很困难的。因此,糖尿病视网膜病变血管分割算法自动提取血管结构可以很大程度上减缓医疗系统的负担,提高医疗人员的工作效率,能够更广泛的服务于各地糖尿病患者,具有很大的实际意义。
技术实现思路
1、一种基于深度学习的糖网病眼底图像自动分割方法,为医疗辅助系统提供自动分割眼底血管结构服务,依靠提取通道和滤波提升图像的特征提取效果,通过神经网络模型进行血管结构提取,可以有效地简化医生对糖网病病情的诊断和医治,提升工作效率。
2、本发明的技术解决方案是这样实现的:
3、一种基于深度学习的糖网病眼底图像自动分割方法,包括如下步骤:
4、s1、将糖尿病视网膜病变眼底图像大小调整成512*512;
5、s2、开始图像预处理:(1)提取出绿色通道部分;(2)除低频分量,除低频分量是指让原图像经过25*25均值滤波,用绿色通道图像减去均值滤波图像;(3)进行线性滤波;(4)形态学腐蚀消除噪声;
6、s3、将预处理完成的图像传入网络模型进行节点特征初始化:网络模型是基于unet++网络模型改进而来,是由残差块为单元构成的上下五层的扇型结构,每一个残差块视为一个节点,每层左侧第一个残差块为编码器节点(共5个),其余为解码器节点,网络模型第一层左侧第一个节点为整个模型的入口,第一层右侧最后一个节点为模型出口;首先预处理完成的图像输入进网络模型第一层编码器节点进行特征提取,经过提取后的特征会被发往同层的所有解码器节点及下一层的编码器节点;然后第二层编码器节点在收到上层编码器节点传递来的特征后,继续进行特征提取,并将提取的特征向同层中的所有解码器节点及下一层的编码器节点传递;以此类推完成网络模型全部节点特征初始化;
7、s4、特征传递与融合:全部节点完成特征初始化后,每个节点实时进行特征融合和特征传递,除第一层外所有节点,进行特征融合的上采样过程,从第二层第一个结点至第五层最后一个节点的所有节点,每个位于第i层的第j个节点,会将本节点提取的特征向上一层即i-1层的第j+1个节点传递,i-1层的第j+1个节点在接收到特征后,与原来的特征进行拼接操作,并将拼接后的特征传递给同层所有的在该节点右侧之后的节点,经过不断地实时传递与融合,直至传递至第一层右侧最后一个节点,特征趋于稳定;
8、s5、每个节点传递特征给上层节点,本层特征通过反卷积/插值/反池化的方法将图像中的血管结构分割出来,第一层最后一个节点完成特征融合时,分辨率恢复至原来输入图像的相同大小,血管结构分割完毕;
9、s6、血管结构分割结束后,通过单层卷积输出血管结构分割灰度图。
10、其特征还在于所述的s2中的残差块,是指残差模块、通道注意力和空间注意力以串联的形式组合在一起的结构;残差模块提取特征;空间注意力调整图像有效部分在图像整体的位置,让有效部分占据图像的中间,放大并充满整个图像;通道注意力关注特征图中有意义的特征;对于模型整体结构而言,编码器节点先进行特征提取和先调整图像没有区别,可以任意调整残差模块、通道注意力和空间注意力三部分的顺序。
11、其特征还在于所述的s2中的编码器节点和解码器节点(除每一层最后一个节点外)接收特征的残差块,卷积方式使用空洞卷积,在不增加计算资源消耗的前提下,增大感受野范围。
12、与现有技术相比较,本发明的优点是显而易见的,主要表现在:
13、1、提出了一个自动进行眼底血管分割的方法,实现医疗辅助系统对眼底血管进行自动提取。
14、2、模型结构和卷积方式改变减轻了训练和计算时的资源耗费,在速度上提升较大。
15、3、上采样结构的不同卷积方式对血管末端分割效果提升大,在末端新生血管的恢复上效果很好。
1.一种基于深度学习的糖网病眼底图像自动分割方法,其特征在于,包括如下步骤:
2.根据权利要求1所述的一种基于深度学习的糖网病眼底图像自动分割方法,其特征还在于所述的s2中的残差块,是指残差模块、通道注意力和空间注意力以串联的形式组合在一起的结构;残差模块提取特征;空间注意力调整图像,有效部分在图像整体的位置,让有效部分占据图像的中间,放大并充满整个图像;通道注意力关注特征图中有意义的特征;对于模型整体结构而言,编码器节点先进行特征提取和先调整图像没有区别,可以任意调整残差模块、通道注意力和空间注意力三部分的顺序。
3.根据权利要求1所述的一种基于深度学习的糖网病眼底图像自动分割方法,其特征还在于所述的s2中的编码器节点和解码器节点(除每一层最后一个节点外)接收特征的残差块,卷积方式使用空洞卷积,在不增加计算资源消耗的前提下,增大感受野范围。