1.一种基于病变区域关系建模的宫颈tct图像检测装置,包括存储器和处理器,所述存储器用于存储计算机程序,其特征在于,所述处理器执行所述计算机程序时,实现以下步骤:
2.根据权利要求1所述的基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,所述第一特征提取模块包括:第一残差网络、特征金字塔、多个卷积层网络;细胞涂片图像经过第一残差网络提取特征后,提取的特征输入至特征金字塔以提取多尺度特征,每个尺度特征分别输入对应的卷积层网络经过卷积操作和展平操作得到单个token序列,所有卷积层网络输出的单个token序列拼接形成后续token序列的第一部分。
3.根据权利要求1所述的基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,所述第二特征提取模块包括:用于提取细胞涂片分割后小图像块特征的多个第二分支网络、小transformer编码器,每个第二分支网络含有第二残差网络、池化操作和展平操作,每个小图像块输入对应的第二分支网络经过池化操作和展平操作形成单个token,所有第二分支网络对应的单个token拼接后输入至小transformer编码器,经过编码操作得到后续token序列的第二部分。
4.根据权利要求1所述的基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,所述关键特征提取模块包括transformer编码器、mlp、transformer解码器,后续token序列第一部分和token序列第二部分拼接后输入至transformer编码器,得到的编码特征输入至mlp经过映射,得到的映射特征作为多头注意力机制的q通道输入至transformer解码器,编码特征同时作为多头注意力机制的k、v通道输入至transformer解码器,transformer解码器采用多头注意力机制进行解码操作,输出关键特征。
5.根据权利要求4所述的基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,所述transformer编码器包括n个依次连接的编码块,第1个编码块对初始拼接结果编码得到编码特征,从第2个编码块起的第n个编码块对输入特征进行编码,第n个编码块的输入特征包括初始拼接特征、历史编码特征,历史编码特征包括第n个编码块前所有编码块输出的编码特征,n取值为大于等于2的自然数。
6.根据权利要求4所述的基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,所述transformer解码器包括n个依次连接的解码块,每个解码块采用多头注意力机制进行解码操作,每个解码块的k、v通道均采用transformer编码器输出的编码特征,第1个解码块的q通道采用mlp输出的映射特征,从第2个解码块起的第n个解码块的q通道采用前一解码块输出的解码特征,最后一个解码块输出的解码特征作为关键特征,n取值为大于等于2的自然数。
7.根据权利要求1所述的基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,所述检测模块采用mlp,对输入的关键特征进行逻辑回归进行病变区域定位和病变区域分类。
8.根据权利要求1所述的基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,训练时,将病变区域检测神经网络输出的预测结果与病变区域定位及分类标签使用匈牙利算法进行双边匹配,从而计算定位损失和分类损失,定位损失用于度量病变区域标注位置与检测完成后病变区域定位结果的误差,分类损失则用于度量病变区域分类标签与检测完成后病变区域分类结果之间的误差。
9.一种基于病变区域关系建模的宫颈tct图像检测装置,其特征在于,包括数据获取单元、模型构建单元、训练单元、应用单元,