本发明实施例涉及诊断报告技术领域,尤其涉及一种影像诊断报告的生成方法及设备。
背景技术:
目前,为了更详细地检测病灶及识别病灶,医生往往需要结合多种医疗方式来诊断。现有应用于诊断功能的医疗设备主要有x射线诊断设备、超声诊断设备、功能检查设备、内窥镜检查设备、核医学设备、实验诊断设备及病理诊断装备等。不同类型的医学成像设备具有各自的特点,例如:包括x线电子计算机断层扫描(computedtomography,ct)装置或者常规x线机在内的x线设置表,其通过测量透过人体的x射线来实现人体成像,对于密度较大的组织具有极高的分辨率,但是对于软组织病变分辨率较低;包括磁共振(magneticresonance,mr)设置的核医学设备通过测量构成人体组织元素的原子核发出mr信号实现人体成像,对于软组织具有较好的分辨率,但其对钙化、结石以及骨皮内质不含质子或者质子含量极少的组织,不能产生足够的磁共振信号,不利于诊断和鉴别诊断;正电子发射型计算机断层显像(positronemissioncomputedtomography,pet)可根据人体不同组织的代谢状态不同,在高代谢的恶性肿瘤组织中葡萄糖代谢旺盛、聚集较多,这些特点能通过pet图像反映出来,从而可对病变进行诊断和分析,但是其分辨率很难达到1.0cm、图像模糊。
基于单模态影响诊断设备都有各自的局限性,业界产生了将两种或者两种以上的成像设备集成在一起的多模态医学成像设备,例如:提供功能代谢显像的pet设备和提供解剖结构显像的ct设备结合形成的pet-ct系统,通过计算机断层显像的方法显示人体的主要器官的生理代谢功能,同时应用ct技术为这些核素分布情况进行精确定位;又例如,具有分子成像功能的pet设备与具有卓越的软组织对比功能的mr设备结合起来形成的pet-mr系统,其实现了两种模态系统的优势互补。
现有多模态系统的报告生成方法需要医生手动捕获感兴趣信息,并对其进行病灶识别和特征描述。然而,由于多项影像学检查或者同步多模态影像检查所提供的数据量十分庞大,医生很难在短时间内全面整合多项影像学检查或者同步多模态影像检查所提供的影像信息,同时还需要相关医生具有多种医疗诊断方式的知识,增加了人工成本。此外,传统的报告生成方法效率低,运营成本高,且所生成的报告人为差异较大,不利于管理,不够科学、全面。
技术实现要素:
本发明实施例提供了一种影像诊断报告的生成方法、装置、设备及存储介质,以实现影像诊断报告的自动生成,科学而全面地展示影像信息,效率高,节省成本。
第一方面,本发明实施例提供了一种影像诊断报告的生成方法,包括:
获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息,以及获取通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息;
根据所述第一影像信息确定至少一个第一目标感兴趣区域,并确定与所述第一目标感兴趣区域对应的第一报告信息;
根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域,并确定与所述第二目标感兴趣区域对应的第二报告信息;
根据所述第一报告信息和所述第二报告信息生成影像报告信息。
第二方面,本发明实施例还提供了一种影像诊断报告的生成装置,该影像诊断报告的生成装置包括:
第一影像信息模块,用于获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息;
第二影像信息模块,用于获取通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息;
第一报告信息确定模块,用于根据所述第一影像信息确定至少一个第一目标感兴趣区域,并确定与所述第一目标感兴趣区域对应的第一报告信息;
第二报告信息确定模块,用于根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域,并确定与所述第二目标感兴趣区域对应的第二报告信息;
影像报告信息生成模块,根据所述第一报告信息和所述第二报告信息生成影像报告信息。
第三方面,本发明实施例还提供了一种设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器执行:
获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息,以及获取通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息;
根据所述第一影像信息确定至少一个第一目标感兴趣区域;
根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域;
根据所述第一目标感兴趣区域和所述第二目标感兴趣区域生成影像报告信息。
第四方面,本发明实施例还提供了一种计算机可读储存介质,其上存储有计算机程序,该程序被处理器执行时实现本发明任意实施例提供的影像诊断报告的生成方法。
本发明实施例的技术方案,分别通过第一模态成像方法采集预设扫描部位的第一影像信息,第二模态成像方法采集该预设扫描部位的第二影像信息,能够结合第一模态成像方法和第二成像技术各自的成像优点获取到该预设扫描部位的更为全面的信息;然后,根据第一影像信息确定的至少一个第一目标感兴趣区域自动生成第一报告信息,根据所述第二影像信息与第一目标感兴趣区域对应的第二目标感兴趣区域的自动生成第二报告信息,能够同时结合第一报告信息和第二报告信息自动生成影像报告信息,从多方面、多角度描述影像信息,使得影像报告信息更加全面、丰富,解决了现有影像诊断报告的生成由于主要依赖于人为干预而导致的报告差异较大、运营成本高等技术问题,达到了科学而全面地生成影像诊断报告的效果,降低了运营成本及人工成本。
附图说明
图1是本发明实施例一中的一种影像诊断报告的生成方法的流程图;
图2是本发明实施例二中的一种影像诊断报告的生成方法的流程图;
图3是本发明实施例三中的一种影像诊断报告的生成装置的结构示意图;
图4是本发明实施例四中的一种设备的结构示意图。
图5是本发明实施例五中的一种设备的结构示意图。
图6是本发明实施例五中的一种mr扫描器的结构示意图。
图7是本发明实施例五中的一种pet扫描器的结构示意图。
图8是本发明实施例五中的一种显示器的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
本申请提出一种多模态影像诊断报告的生成方法,该方法能够在包含处理器的医学影像工作站或者多模态医学成像设备中执行,其能够处理两种或者多种混合模态的医学成像数据,并生成影像诊断报告。示例性地,影像诊断报告的生成方法包括:首先,获取目标对象预设扫描部位同一期相下的第一影像信息和第二影像信息,第一影像信息可以是第一模态成像设备采集得到、反应目标对象预设扫描部位分子功能信息的医学图像,第一影像信息可以是第二模态成像设备采集得到、反应目标对象预设扫描部位结构/轮廓信息的医学图像;其次,在第一影像信息上可确定一个或多个第一目标感兴趣区域,该第一目标感兴趣区域对应代谢旺盛的组织,其灰度值可明显高于周围像素;再次,确定第二影像信息中与第一目标感兴趣区域对应的第二目标感兴趣区域;最后,根据第一目标感兴趣区域和第二目标感兴趣区域获取影像报告信息。
在一个实施例中,根据第一目标感兴趣区域和第二目标感兴趣区域获取影像报告信息可包括:从第一目标感兴趣区域生成第一报告信息,从第二目标感兴趣区域生成第二报告信息,联合第一报告信息和第二报告信息生成诊断报告。可选的,第一报告信息可以是pet图像定量反应的第一目标感兴趣区域的大小、体积,以及标化摄取(suv)值;第一报告信息可以是mr图像反应的第二目标感兴趣区域的表观扩散系数(adc)、t1值、t2值,通过这些数据能够反映第二目标感兴趣区域的脂肪含量、水含量等。
在另一个实施例中,根据第一目标感兴趣区域和第二目标感兴趣区域获取影像报告信息可包括:将第一目标感兴趣区域与第二目标感兴趣区域融合,依据融合结果确定诊断报告。
实施例一
图1为本发明实施例一提供的一种影像诊断报告的生成方法的流程图,本实施例可适用于多模态系统的影像诊断报告生成的情况,该方法可以由影像诊断报告的生成装置来执行,该装置可以由硬件和/或软件来实现,具体包括如下步骤:
步骤110、获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息,以及通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息。
可选地,第一影像信息与第二影像信息可对应目标对象的同一期相,例如对应目标对象呼吸末期或者心脏的舒张期等。
可选的,所述第一模态成像方法可包括正电子发射计算机断层成像(pet)或单光子发射计算机断层成像(spect)成像,该第一模态成像方法形成的图像能够反映受检者目标区域的分子功能,显示人体的主要器官的生理代谢功能。所述第二模态成像方法可包括核磁共振成像mri、电子计算机断层扫描成像ct、光学成像以及超声成像等成像。
可以理解的是,为了更全面的采集所述目标对象所述预设扫描部位的影像信息,第一模态成像方法与第二模态成像方法可以不相同。例如,第一模态成像方法可以基于飞行时间(timeofflight)的tof-pet重建方法、基于蒙特卡罗模拟的重建方法、泊松模型的最大似然类算法、卷积反投影方法、滤波反投影方法、最大后验重建方法等,第二模态成像方法可以基于压缩感知的mr重建方法、半傅里叶成像、钥孔成像、并行成像等,还是可以反投影法、迭代法、滤波反投影方法等。
可选的,获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息,包括:
获取通过第一模态成像方法采集到的目标对象的预设扫描部位的原始影像信息,可选的,在第一模态成像之前目标对象可提前注射或者复用碳11、氟18等放射性核素,随着代谢的消耗,注射的物质会在组织内聚集,由此来反应组织的代谢活动情况;
根据接收到的用户输入的信息筛选操作确定所述原始影像信息中的第一影像信息。
可选的,所述的用户输入的信息筛选操作,可以是通过鼠标、键盘、触摸屏等方式进行输入。
可选的,所述第一影像信息、第二影像信息包括图片信息、视频信息等,该图片信息可以是三维医学图像。可选地,第一影像信息能够直接反应放射性核素分布,例如:部分区域的灰度值较高,表明放射性核素较多,该部分可能对应高代谢的恶性肿瘤组织;部分区域的灰度值较低或者趋向于均匀分布,该部分区域则属于正常组织。可选地,第二影像信息可以是一些列的二维图像序列,通过该二维图像序列能否反应目标对象的结构轮廓,以确定目标对象是肺边界、盆腔边界或者其他。
步骤120、根据所述第一影像信息确定至少一个第一目标感兴趣区域,并确定与所述第一目标感兴趣区域对应的第一报告信息。可选的,所述第一报告信息包括文字信息,图片信息,图片标注信息及视频信息中的至少一种。
可以理解的是,根据所述第一影像信息可确定出一个、两个或两个以上的第一目标感兴趣区域。当然,需要说明的是,由于不同组织的辐射衰减系数不同,不同组织之间的灰度值也存在明显差异,可选的,本实施例中所述的第一目标感兴趣区域的灰度值区别于周围像素点的灰度值,通常表现为高于周围的像素点的灰度值。
可选的,可通过图像识别算法确定出所述第一影像信息中满足预设条件的区域作为第一目标感兴趣区域,其中,预设条件可以是预设像素点的灰度值范围和/或图像的亮度值范围等,也可以是,组织结构的形状、面积及长度等参数值或参数范围。
可选的,根据所述第一影像信息确定至少一个第一目标感兴趣区域,包括:根据所述第一影像信息与影像识别算法确定至少两个待选目标感兴趣区域;接收用户输入的区域筛选操作,根据所述区域筛选操作确定出所述至少两个待选目标感兴趣区域中的至少一个第一目标感兴趣区域。
可选的,根据所述第一影像信息确定至少一个第一目标感兴趣区域,还包括:根据所述第一影像信息与影像识别算法确定至少一个第一目标感兴趣区域;或者,接收用户输入的区域选中操作,根据所述区域选中操作确定出至少一个第一目标感兴趣区域。
可选的,所述的用户输入的区域筛选操作,可以是通过鼠标、键盘、触摸屏等方式进行输入。
可选的,确定与所述第一目标感兴趣区域对应的第一报告信息,包括:
识别所述第一目标感兴趣区域的第一区域特征;可选的,所述第一区域特征包括:灰度值范围,灰度值分布、组织面积、组织长度等。
根据所述第一目标感兴趣区域及所述第一区域特征生成第一报告信息。
可选的,所述第一报告信息包括文字信息,图片信息,图片标注信息及视频信息中的至少一种。
在上述技术方案的基础上,本实施例的影像诊断报告的生成方法还可进一步包括:将所述至少两个待选目标感兴趣区域中除第一目标感兴趣区域之外的待选目标感兴趣区域作为用户筛除区域;根据所述第一影像信息的所述第一目标感兴趣区域和所述用户筛除区域对预先建立的深度学习模型进行训练,得到第一目标感兴趣区域确定模型。
可选的,所述深度学习模型所采用的深度学习算法包括神经网络算法、线性回归算法、逻辑回归算法、决策树算法、svm算法、朴素贝叶斯算法、k最近邻算法、k均值算法、随机森林算法、降维算法、gradientboost算法和adaboost算法任一项或多项。
可选的,根据所述第一影像信息的所述第一目标感兴趣区域和所述用户筛除区域对预先建立的深度学习模型进行训练,得到第一目标感兴趣区域确定模型,还包括:
初始化所述第一目标感兴趣区域确定模型,可以根据大量的实际目标感兴趣区域的确定过程进行初始化,或者根据经验丰富的一位或多位用户的经验进行初始化。
可选的,根据所述第一影像信息确定至少一个第一目标感兴趣区域,包括:根据所述第一影像信息与影像识别算法确定至少两个待选目标感兴趣区域;将所述至少两个待选目标感兴趣区域输入第一目标感兴趣区域确定模型,得到至少一个第一目标感兴趣区域。采用本技术方案,通过引入第一目标感兴趣区域确定模型,学习用户操作,不断优化本发明实施例技术方案中的确定至少一个第一目标感兴趣区域的步骤,从而获取更为准确的第一目标感兴趣区域,减少人为操作,使得本实施例的影像诊断报告的生成方法更为智能。
步骤130、根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域,并确定与所述第二目标感兴趣区域对应的第二报告信息。可选的,所述第二报告信息包括文字信息,图片信息,图片标注信息及视频信息中的至少一种。
可以理解的是,根据所述至少一个第一目标感兴趣区域及所述第二影像可确定出一个、两个或两个以上的第二目标感兴趣区域。
可选地,根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域,包括:将所述第一影像信息与所述第二影像信息进行图像融合或图像配准,根据所述至少一个第一目标感兴趣区域得到所述第二影像信息中的与所述第一目标感兴趣区域相匹配的区域作为第二目标感兴趣区域。其中,第一目标感兴趣区域与第二目标感兴趣区域可对应于目标对象的预设扫描部位的同一扫描区域,或者说是对应的同一组织的相同部位;第一目标感兴趣区域与第二目标感兴趣区域也可以是同一目标对象的不同扫描区域,例如,第二目标感兴趣区域可以是与所述第一目标感兴趣区域具有关联关系的区域,其中,关联关系可以根据预设扫描部位的结构和/或病理相关性确定。
需要说明的是,第一报告信息和第二报告信息的表现形式可以相同也可以不同。例如,第一报告信息是图片视频等形式的报告信息,第二信息时文字形式等的报告信息。为了保证报告的全面性和丰富性,所述第一报告信息描述第一目标感兴趣的第一特征,第二报告信息的可以描述第二目标感兴趣的第二特征,其中,第一特征和第二特征可以是与预设扫描部位的感兴趣区域对应的不同维度的信息或者相同维度的信息,例如都是描述感兴趣区域的尺寸、灰度等。
步骤140、根据所述第一报告信息和所述第二报告信息生成影像报告信息。
可选的,所述影像报告信息包括图像信息,图像标注信息,文字信息及视频信息。其中,所述图像标注信息,包括区域特征信息,可以是长度、面积、密度和灰度一种或多种。
示例性地,根据所述第一报告信息和所述第二报告信息生成影像报告信息,可以是将第一报告信息与第二报告信息合并生成影像报告信息,也可以是根据预设的报告筛选规则将所述第一报告信息的信息内容与所述第二报告信息的信息内容进行筛选后生成影像报告信息,还可以是根据第二报告信息对所述第一报告信息中的报告内容进行校正,根据校正后的第一报告信息生成影像报告信息,又可以是根据第一报告信息对所述第二报告信息中的报告内容进行校正,根据校正后的第二报告信息生成影像报告信息。
本发明实施例的技术方案,分别通过第一模态成像方法采集预设扫描部位的第一影像信息,第二模态成像方法采集该预设扫描部位的第二影像信息,能够结合第一模态成像方法和第二成像技术各自的成像优点获取到该预设扫描部位的更为全面的信息;然后,根据第一影像信息确定的至少一个第一目标感兴趣区域自动生成第一报告信息,根据所述第二影像信息与第一目标感兴趣区域对应的第二目标感兴趣区域的自动生成第二报告信息,能够同时结合第一报告信息和第二报告信息自动生成影像报告信息,从多方面、多角度描述影像信息,使得影像报告信息更加全面、丰富,解决了现有影像诊断报告的生成由于主要依赖于人为干预而导致的报告差异较大、运营成本高等技术问题,达到了科学而全面地生成影像诊断报告的效果,降低了运营成本及人工成本。
实施例二
图2为本发明实施例二提供的一种影像诊断报告的生成方法的流程图,本实施例的技术方案在上述技术方案的基础上进一步细化,可选地,本发明实施例影像诊断报告的生成方法还包括:接收用户在预设界面输入的第三报告信息,根据所述第三报告信息更新所述影像报告信息。
如图2所示,本实施例的方法包括:
步骤210、获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息,以及通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息。
步骤220、根据所述第一影像信息确定至少一个第一目标感兴趣区域,并确定与所述第一目标感兴趣区域对应的第一报告信息。
步骤230、根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域,并确定与所述第二目标感兴趣区域对应的第二报告信息。
步骤240、根据所述第一报告信息和所述第二报告信息生成影像报告信息。
步骤250、接收用户在预设界面输入的第三报告信息,根据所述第三报告信息更新所述影像报告信息。
可选的,所述第三报告信息,可以是用户输入的文字描述信息、区域标记信息、图像信息、视频信息、表格信息等一项或多项。
可选的,接收用户在预设界面输入的第三报告信息,可以是通过键盘、触摸屏或者鼠标在可编辑区域输入,或者通过语音进行输入,或者是通过鼠标、触摸屏在可编辑区域进行选择,比如选择下拉菜单中的一个或多个选项。
可选的,根据所述第三报告信息更新所述影像报告信息,可以是将根据所述第一报告信息和所述第二报告信息生成影像报告信息进行修改、替换、添加等操作。
本发明实施例的技术方案,通过增加第三报告信息,对第一报告信息和第二报告信息进行了修正或者补充,从而能够获得更加准确、完整和可读性强的报告信息;通过根据所述第三报告信息更新所述影像报告信息,使得影像报告信息更加准确、丰富、全面,解决了自动生成影像诊断报告的可读性不够强的技术问题,达到了科学而全面地生成影像诊断报告的效果,保障了报告的准确度,提高了报告的可读性。
实施例三
图3是本发明实施例三中的一种影像诊断报告的生成装置的结构示意图,如图3所示,影像诊断报告的生成装置包括:第一影像信息模块310、第二影像获取信息模块320、第一报告信息确定模块330、第二报告信息确定模块340和影像报告信息生成模块350。
其中,第一影像信息模块310,用于获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息;第二影像获取信息模块320,用于获取通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息;第一报告信息确定模块330,用于根据所述第一影像信息确定至少一个第一目标感兴趣区域,并确定与所述第一目标感兴趣区域对应的第一报告信息;第二报告信息确定模块340,根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域,并确定与所述第二目标感兴趣区域对应的第二报告信息;影像报告信息生成模块350,根据所述第一报告信息和所述第二报告信息生成影像报告信息。
本发明实施例的技术方案,分别通过第一模态成像方法采集预设扫描部位的第一影像信息,第二模态成像方法采集该预设扫描部位的第二影像信息,能够结合第一模态成像方法和第二成像技术各自的成像优点获取到该预设扫描部位的更为全面的信息;然后,根据第一影像信息确定的至少一个第一目标感兴趣区域自动生成第一报告信息,根据所述第二影像信息与第一目标感兴趣区域对应的第二目标感兴趣区域的自动生成第二报告信息,能够同时结合第一报告信息和第二报告信息自动生成影像报告信息,从多方面、多角度描述影像信息,使得影像报告信息更加全面、丰富,解决了现有影像诊断报告的生成由于主要依赖于人为干预而导致的报告差异较大、运营成本高等技术问题,达到了科学而全面地生成影像诊断报告的效果,降低了运营成本及人工成本。
可选的,第一影像获取信息模块310,还用于:
获取通过核正电子发射计算机断层成像技术pet或单光子发射计算机断层成像技术spect采集的所述目标对象所述预设扫描部位的第一影像信息。
可选的,第一影像获取模块310,包括:
原始影像信息获取单元,用于获取通过第一模态成像方法采集到的目标对象的预设扫描部位的原始影像信息;
第一影像获取单元,用于根据接收到的用户输入的信息筛选操作确定所述原始影像信息中的第一影像信息。
可选的,第二影像获取信息模块320,还用于:
获取通过核磁共振成像技术mri、电子计算机断层扫描成像技术ct、光学成像技术或者超声成像技术采集的所述目标对象所述预设扫描部位的第二影像信息。
可选的,第一报告信息确定模块330,包括:
待选目标感兴趣区域确定单元,用于根据所述第一影像信息与影像识别算法确定至少两个待选目标感兴趣区域;
筛选操作接收单元,用于接收用户输入的区域筛选操作;
第一目标感兴趣区域确定单元,用于根据所述区域筛选操作确定出所述至少两个待选目标感兴趣区域中的至少一个第一目标感兴趣区域;
第一报告信息确定单元,用于根据所述至少一个第一目标感兴趣区域确定与之对应的第一报告信息。
可选的,第一报告信息确定模块330,还包括:
第一目标感兴趣区域确定模型获取单元,用于将所述至少两个待选目标感兴趣区域中除第一目标感兴趣区域之外的待选目标感兴趣区域作为用户筛除区域;根据所述第一影像信息的所述第一目标感兴趣区域和所述用户筛除区域对预先建立的深度学习模型进行训练,得到第一目标感兴趣区域确定模型。
可选的,第一报告信息确定模块330,包括:
待选目标感兴趣区域确定单元,用于根据所述第一影像信息与影像识别算法确定至少两个待选目标感兴趣区域;
第一目标感兴趣区域确定单元,用于将所述至少两个待选目标感兴趣区域输入第一目标感兴趣区域确定模型,得到至少一个第一目标感兴趣区域;
第一报告信息确定单元,用于根据所述至少一个第一目标感兴趣区域确定与之对应的第一报告信息。
可选的,影像诊断报告的生成装置,还包括:
影响报告信息更新模块360,用于接收用户在预设界面输入的第三报告信息,根据所述第三报告信息更新所述影像报告信息。
本发明实施例所提供的影像诊断报告的生成装置可执行本发明任意实施例所提供的影像诊断报告的生成方法,具备执行方法相应的功能模块和有益效果。
实施例四
图4为本发明实施例四提供的一种设备的结构示意图,如图4所示,该设备包括处理器410、存储器420、输入装置430和输出装置440;设备处理器410的数量可以是一个或多个,图4中以一个处理器410为例;设备中的处理器410、存储器420、输入装置430和输出装置440可以通过总线或其他方式连接,图4中以通过总线连接为例。
存储器420作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的影像诊断报告的生成方法对应的程序指令/模块(例如,影像诊断报告装置中的第一影像信息获取模块310、第二影像信息获取模块320、第一报告信息确定模块330、第二报告信息确定模块340和影像报告信息生成模块350)。处理器410通过运行存储在存储器420中的软件程序、指令以及模块,从而执行设备的各种功能应用以及多媒体信息处理,即实现上述的影像诊断报告的生成方法。
存储器420可主要包括存储程序区和存储多媒体信息区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储多媒体信息区可存储根据终端的使用所创建的多媒体信息等。此外,存储器420可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器420可进一步包括相对于处理器410远程设置的存储器,这些远程存储器可以通过网络连接至设备/终端/服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置430可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置440可包括显示屏等显示设备或打印机。
实施例五
图5为本发明实施例五提供的一种设备的结构示意图,如图5所示,该设备500设置为pet-mr多模态医学图像处理装置,其包括:mr扫描器510、pet扫描器520、图像处理器530、控制器540和显示器550。
mr扫描器510,用于在扫描期间采集感兴趣区域的mr成像数据,并重建得到mr图像;pet扫描器520用于在扫描期间采集感兴趣区域的pet成像数据。在一个实施例中,mr扫描器510和pet扫描器520集成在一个多模态成像系统中,mr数据或pet数据可同时或相继连续采集。可选的,mr数据或pet数据可存储在硬盘、云存储器等介质中,在需要成像时获取。
图像处理器530可获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息,以及获取通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息;根据所述第一影像信息确定第一目标感兴趣区域;根据第一目标感兴趣区域确定第二影像信息中的第二目标感兴趣区域;根据第一目标感兴趣区域和第二目标感兴趣区域生成影像报告信息。在此实施例中,第一模态成像方法为pet成像,第二模态成像方法为mr成像。图像处理器530可重建mr成像数据产生感兴趣区域的mr图像,以及重建pet数据,并产生同一感兴趣区域的pet图像,可选的,该pet图像为经过衰减图校正的图像。
在一个实施例中,图像处理器530可将mr图像配准至pet图像或将pet图像配准至mr图像,以获取两者的对应关系。可选的,上述配准过程可采用光流场方法、基于特征点的配准方法、基于轮廓的配准方法、基于灰度信息的配准方法等。
可选的,图像处理器530可设置在本地或远程。mr扫描器510和pet扫描器520可共用图像处理器530或分别采用各自对应的图像处理器。
控制器540用于监测或控制mr扫描器510、pet扫描器520、图像处理器530和显示器550。可选的,控制器540可以包括中央处理器(centralprocessingunit,cpu)、专门应用集成电路(application-specificintegratedcircuit,asic)、专用指令处理器(applicationspecificinstructionsetprocessor,asip)、图形处理单元(graphicsprocessingunit,gpu)、物理处理器(physicsprocessingunit,ppu)、数字信号处理器(digitalprocessingprocessor,dsp)、现场可编程逻辑门阵列(field-programmablegatearray,fpga)、arm处理器等中的一种或几种的组合。
显示器550用于显示感兴趣区域的mr图像、pet图像,或显示pet图像与mr图像的融合图像。进一步地,显示器550还可显示受检者的身高、体重、年龄、成像部位、以及mr扫描器510、mr扫描器的工作状态、pet扫描器520、pet扫描器的工作状态等。可选的,显示器550的类型可以是阴极射线管(crt)显示器、液晶显示器(lcd)、有机发光显示器(oled)、等离子显示器等中的一种或几种的组合。
设备500可连接一个局域网(localareanetwork,lan)、广域网(wideareanetwork,wan)、公用网络、私人网络、专有网络、公共交换电话网(publicswitchedtelephonenetwork,pstn)、互联网、无线网络、虚拟网络、或者上述网络的任何组合。
图6为本发明实施例五提供的设备的mr扫描器510结构示意图,示例性地,该mr扫描器510包括mr信号获取模块610、mr控制模块620和mr数据处理模块630和mr数据存储模块640。其中,mr信号获取模块610包括磁体单元611和射频单元612。磁体单元611主要包括产生b0主磁场的主磁体和产生梯度的梯度组件。磁体单元211中包含的主磁体可以是永磁体或超导磁体,梯度组件主要包含梯度电流放大器(amp)、梯度线圈,梯度组件还可包含三个独立通道gx、gy、gz,每个梯度放大器激发梯度线圈组中对应的一个梯度线圈,产生用于生成相应空间编码信号的梯度场,以对磁共振信号进行空间定位。射频单元612主要包括射频发射线圈和射频接收线圈,射频发射线圈用于向受检者或人体发射射频脉冲信号,射频接收线圈用于接收从人体采集的磁共振信号,且根据功能的不同,组成射频单元612的射频线圈可分为体线圈和局部线圈。在一个实施例中,体线圈或局部线圈的种类可以是鸟笼形线圈、螺线管形线圈、马鞍形线圈、亥姆霍兹线圈、阵列线圈、回路线圈等。在一个具体实施例中,局部线圈设置为阵列线圈,且该阵列线圈可设置为4通道模式、8通道模式或16通道模式。磁体单元611和射频单元612可组成开放性低场磁共振装置或者封闭型超导磁共振装置。
mr控制模块620可监测包含磁体单元611和射频单元612的mr信号获取模块610、mr数据处理模块630。具体地,mr控制模块620可接收mr信号获取模块610发送的信息或者脉冲参数;此外,mr控制模块620还可控制mr数据处理模块的处理过程。在一个实施例中,mr控制模块620还连接有包含脉冲序列发生器、梯度波形发生器、发射机和接收机等,在接受用户从控制台发出的指令后,控制磁场模块611执行相应扫描序列。
示例性地,本发明mr扫描器510产生mr数据的具体过程包括:主磁体产生b0主磁场,受检者体内的原子核在主磁场作用下产生进动频率,该进动频率与主磁场强度呈正比;mr控制模块620存储和发送需要执行的扫描序列(scansequence)的指令,脉冲序列发生器根据扫描序列指令对梯度波形发生器和发射机进行控制,梯度波形发生器输出具有预定时序和波形的梯度脉冲信号,该信号经过gx、gy和gz梯度电流放大器,再通过梯度组件中的三个独立通道gx、gy、gz,每个梯度放大器激发梯度线圈组中对应的一个梯度线圈,产生用于生成相应空间编码信号的梯度场,以对磁共振信号进行空间定位;脉冲序列发生器还执行扫描序列,输出包括射频发射的射频脉冲的计时、强度、形状等数据以及射频接收的计时和数据采集窗口的长度到发射机,同时发射机将相应射频脉冲发送至射频单元612中的体发射线圈产生b1场,在b1场作用下病人体内被激发的原子核发出的信号被射频单元612中的接收线圈感知到,然后通过发送/接收开关传输到mr数据处理模块630,经过放大、解调、过滤、ad转换等数字化处理,然后传输到mr数据存储模块640。当mr数据存储模块240获取一组原始的k-空间数据后,扫描结束。原始的k-空间数据被重新整理成与每个将被重建的图像对应的单独的k-空间数据组,每个k-空间数据组被输入到阵列处理器,进行图像重建后结合磁共振信号,形成一组图像数据。
图7为本发明实施例五提供的设备的pet扫描器结构示意图。该pet扫描器520用于在受检者扫描产生与被扫描部位对应的pet数据,其具体包括探测器模块710、pet信号处理模块720、符合计数模块730和pet控制模块740。其中,探测器模块710包括一系列的探测器单元,该探测器单元可沿机架圆周的中心轴排列组成多个探测器环,受检者p可处于由多个探测器围成的扫描视野(fieldofview,fov)内成像。示例性地,上述pet扫描器获取pet数据的过程为:在pet扫描前,向受检者p体内注入放射性同位素标识的药剂(示踪剂);探测器检测从被检体p内部放出的成对湮没伽马射线,生成与检测出的成对湮没伽马射线的光量相应的脉冲状电信号;该脉冲状电信号被供给pet信号处理模块720,pet信号处理模块720根据电信号生成单事件数据(singleeventdata),实际中pet信号处理模块720通过检出电信号的强度超过阈值这一情况,从而电检测湮没γ射线;单事件数据被供给至符合计数模块730,符合计数模块730对与多个单事件有关的单事件数据实施同时计数处理。具体情况是,符合计数模块730从重复供给的单事件数据中重复确定容纳在与预先设定的时间范围内的两个单事件有关的事件数据,时间范围被设定为例如6ns~18ns左右。该成对的单事件被推测为由来于从同一成对湮没点产生的成对湮没γ射线,其中成对的单事件概括地被称为符合事件。连结检测出该成对湮没γ射线的成对的探测器的线被称为响应线(lineofresponse,lor)。与符合响应线对应的符合数据即为pet数据。
上述涉及的放射性同位素标识的药剂可以是可逆示踪剂或不可逆示踪剂,pet扫描的过程可以采用单示踪剂扫描或多示踪剂动态扫描。在一个实施例中选择头部作为扫描区域,pet扫描为双示踪剂动态扫描,示踪剂包含第一示踪剂i1和第t0时刻注入的第二示踪剂i2,且第一示踪剂为可逆示踪剂具体为13n-nh3,第二示踪剂为不可逆示踪剂具体为18f-fdg,动态扫描具体为:pet扫描从t=0开始,且在t=0向受检者体内注入第一示踪剂i1;在t=t0时注入第二示踪剂i2,经过时间t1扫描结束,整个扫描过程持续时间为t0+t1。在扫描过程中,采用探测器对注入示踪剂的头部进行实时探测获取受检者头部发出的放射性信号,经过该符合探测和采集系统处理,形成原始的符合数据,采集频率为每单位时刻采集一次,得到t0+t1组符合计数,其中:在t0时间段内采集得到的t0组符合计数对应第一示踪剂i1,在t1时间段内采集得到的t1组符合计数同时对应第一示踪剂i1和第二示踪剂i2。
可选的,mr扫描器510和pet扫描器520相互之间可独立成像,也可设置为多模态一体化成像系统。在一个实施例中,mr扫描器510和pet扫描器520可组成pet/mr多模态成像系统,更具体地,pet/mr多模态成像系统包含有射频线圈支架;包含多个射频线圈的射频单元612可固定在射频线圈支架的外表面;探测器模块710环绕设置在具有射频线圈的射频线圈支架外表面,且pet探测器与射频线圈之间设置有屏蔽层;射频单元、探测器模块同时位于主磁体孔径内部。
图8为本发明实施例五提供的设备的显示器550显示内容的示意图,如图所示,显示器550显示内容包括交互区和显示区。示例性的,在页面的最左侧为第一显示区,示例性的,当前显示的为pet图像,图像处理器530可根据pet图像的像素点分布自动识别候选病灶所在的区域。在此实施例中,头部的像素点虽然明显区别于其他周边组织,但其整体均匀分布,图像处理器530依然将其归类为正常组织,而仅将与同一组织的像素点明显区别的像素点自动提取。在pet图像的右侧会显示候选病灶的区域选择框,该部分属于第一交互区域,用于医师确定自动检测结果是否临床可信或者感兴趣。当医师选择第一交互区域中的一个候选病灶的区域选择框,其在pet图像上会自动显示轮廓,同时在第二交互区会显示候选病灶的区域选择框对应的pet图像、对应的mr图像以及pet-mr融合图像。
于此同时,医师在第二交互区可进一步地根据图像直观确定是否临床可信或者感兴趣,提供多样化的临床诊断图像。
可选的,第二交互区可设置成能够显示不同比例的图像显示结果。
在右下方的结果显示区域,还会显示第一报告信息、第二报告信息以及影像报告信息中的一者或者多者。
实施例六
本发明实施例五还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种影像诊断报告生成,该方法包括:
获取通过第一模态成像方法采集的目标对象预设扫描部位的第一影像信息,以及通过第二模态成像方法采集的所述目标对象所述预设扫描部位的第二影像信息,其中,所述第一模态成像方法包括正电子发射计算机断层成像pet和单光子发射计算机断层成像spect;
根据所述第一影像信息确定至少一个第一目标感兴趣区域,并确定与所述第一目标感兴趣区域对应的第一报告信息;
根据所述至少一个第一目标感兴趣区域确定所述第二影像信息中的至少一个第二目标感兴趣区域,并确定与所述第二目标感兴趣区域对应的第二报告信息;
根据所述第一报告信息和所述第二报告信息生成影像报告信息。影像报告信息可以是两者的集合,也可以是基于两者的信息得到的结果分析。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的影像诊断报告中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(read-onlymemory,rom)、随机存取存储器(randomaccessmemory,ram)、闪存(flash)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述搜索装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。