本申请涉及医疗图像处理,具体而言,涉及基于视频流与图像交互的脊柱术后状态评估方法及装置。
背景技术:
1、脊柱侧弯,是指脊柱的一个或数个节段向侧方弯曲或伴有椎体旋转的脊柱畸形,是危害青少年和儿童的常见疾病。对脊柱侧弯的治疗一般为矫正治疗,严重者需要进行手术治疗,并可以通过术后的恢复状态评估来评估治疗是否完成。
2、但是目前主要通过医生经验进行基于视频流与图像交互的脊柱术后状态评估,这种评估容易受到医生的主观因素影响,且不同个体评估结果会有差异。
技术实现思路
1、本申请解决的问题是当前脊柱侧弯的评估效果容易受到主观因素影响。
2、为解决上述问题,本申请第一方面提供了基于视频流与图像交互的脊柱术后状态评估方法,包括:
3、获取术后视频流和待评估医学图像;所述术后视频流包含测试对象的行走姿态,所述待评估医学图像包含所述测试对象的脊柱部位;
4、将所述术后视频流输入第一编码结构,得到视频编码特征图;
5、将所述待评估医学图像输入第二编码结构,得到图像编码特征图;
6、将所述视频编码特征图和所述图像编码特征图相加后输入解码结构,得到评估结果。
7、本申请第二方面提供了基于视频流与图像交互的脊柱术后状态评估装置,其包括:
8、图像获取模块,其用于获取术后视频流和待评估医学图像;所述术后视频流包含测试对象的行走姿态,所述待评估医学图像包含所述测试对象的脊柱部位;
9、第一编码模块,其用于将所述术后视频流输入第一编码结构,得到视频编码特征图;
10、第二编码模块,其用于将所述待评估医学图像输入第二编码结构,得到图像编码特征图;
11、解码模块,其用于将所述视频编码特征图和所述图像编码特征图相加后输入解码结构,得到评估结果。
12、本申请第三方面提供了一种电子设备,其包括:存储器和处理器;
13、所述存储器,其用于存储程序;
14、所述处理器,耦合至所述存储器,用于执行所述程序,以用于:
15、获取术后视频流和待评估医学图像;所述术后视频流包含测试对象的行走姿态,所述待评估医学图像包含所述测试对象的脊柱部位;
16、将所述术后视频流输入第一编码结构,得到视频编码特征图;
17、将所述待评估医学图像输入第二编码结构,得到图像编码特征图;
18、将所述视频编码特征图和所述图像编码特征图相加后输入解码结构,得到评估结果。
19、本申请第四方面提供了一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行实现上述所述的基于视频流与图像交互的脊柱术后状态评估方法。
20、本申请中,将术后视频流和待评估医学图像输入第一编码结构、第二编码结构和解码结构,得到评估结果,从而无需人工评估,解决了当前容易受到医生的主观因素影响的问题。
21、本申请中,通过术后视频流处理,获取运动状态下的脊柱特征,通过医学图像,获取静态下的脊柱特征,从而对脊柱的状态进行准确评估。
1.一种基于视频流与图像交互的脊柱术后状态评估方法,其特征在于,包括:
2.根据权利要求1所述的基于视频流与图像交互的脊柱术后状态评估方法,其特征在于,所述第二编码结构为二维特征提取网络。
3.根据权利要求1所述的基于视频流与图像交互的脊柱术后状态评估方法,其特征在于,所述将所述术后视频流输入第一编码结构,得到视频编码特征图,包括:
4.根据权利要求3所述的基于视频流与图像交互的脊柱术后状态评估方法,其特征在于,所述将所述三维掩码特征图输入时间特征分支,得到三维时间特征图,包括:
5.根据权利要求3所述的基于视频流与图像交互的脊柱术后状态评估方法,其特征在于,所述将所述三维掩码特征图输入空间特征分支,得到三维空间特征图,包括:
6.根据权利要求1所述的基于视频流与图像交互的脊柱术后状态评估方法,其特征在于,所述将所述视频编码特征图和所述图像编码特征图相加后输入解码结构,得到评估结果,包括:
7.根据权利要求1所述的基于视频流与图像交互的脊柱术后状态评估方法,其特征在于,在获取术后视频流和待评估医学图像之前,还包括:
8.一种基于视频流与图像交互的脊柱术后状态评估装置,其特征在于,包括:
9.一种电子设备,其特征在于,包括:存储器和处理器;
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行实现权利要求1-7任一项所述的基于视频流与图像交互的脊柱术后状态评估方法。