一种超分辨率重建方法、装置、存储介质及电子设备与流程

本发明涉及图像处理技术领域，具体涉及一种超分辨率重建方法、装置、存储介质及电子设备。

背景技术：

高分辨率(highresolution，hr)医学图像可以提供丰富的结构细节，这对帮助医生发现病变极为重要。然而，由于设备限制、扫描时间或患者舒适度的限制，很难获得hr磁共振成像(magneticresonanceimaging，mri)。目前，提高mri分辨率的常用方法有两种：第一是改进设备性能或扫描方法，成本较高；第二是通过超分辨率(super－resolution，sr)重建技术从已知的低分辨率(lowresolution，lr)图像中重建hrmri，从而克服了硬件成本的限制。第二种方法由于具有较高的性价比，故在医学图像超分辨率研究领域引起了广泛的兴趣。

近年来，随着深度学习的快速发展，越来越多的学者成功地将其应用于图像超分辨领域。dong等人首次将卷积神经网络(convolutionalneuralnetwork，cnn)应用到图像sr重建中，他们使用三层cnn学习lr/hr图像之间端到端的映射，从而指导hr图像的重建。此后，越来越多优秀的基于cnn的sr重建算法被提出，这极大地促进了mri图像超分辨率重建的发展。在多模态超分辨率重建方面，pham等人提出了一种3d残差cnn来执行mrisr任务，将插值后的lr图像与预测图像以残差的方式相结合，生成hr图像。为了加快重构时间，xiang等人在unet的基础上与密集连接网络(denselyconnectednetwork)进行组合，提出dense－unet来完成重构任务。为了进一步验证参考图像对重建效果的影响，zeng等人构建了可以同时进行单对比度和多对比度的超分辨率重建网络。

以上多模态重建方法都有一个共同的特点，即lr图像和参考图像都是先通过通道结合的方式输入网络进行特征提取，然后再通过神经网络的强大的学习能力生成hr图像。虽然可以获得更好的重建性能，但多模态重建网络是不可解释的，这可能会导致生成的hr图像不可靠。

技术实现要素：

有鉴于此，本发明实施例提供了一种超分辨率重建方法、装置、存储介质及电子设备，以解决现有的超分辨率重建网络不可靠的技术问题。

本发明提出的技术方案如下：

本发明实施例第一方面提供一种超分辨率重建方法，该方法包括：获取高分辨率图像和待处理的低分辨率图像；根据联想记忆网络建立两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像；采用多分辨多模态超分辨率重建网络，将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像。

可选地，所述两种模态高分辨率图像中，第一种模态高分辨率为t1加权像和第二种模态高分辨率为t2加权像，根据联想记忆网络建立两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像，包括：根据联想记忆网络建立高分辨率t1加权像和高分辨率t2加权像多尺度关联关系，将高分辨率t1加权像分解出多个与高分辨率t2加权像相关的关联图像。

可选地，根据联想记忆网络建立高分辨率t1加权像和高分辨率t2加权像多尺度关联关系，将高分辨率t1加权像分解出多个与高分辨率t2加权像相关的关联图像，包括：将所述高分辨率t1加权像进行特征提取、非线性映射以及特征融合得到第一尺度关联图像；将所述第一尺度关联进行下采样、特征提取、非线性映射以及特征融合得到第二尺度关联图像；将所述第二尺度关联图像进行下采样、特征提取、非线性映射以及特征融合得到第三尺度关联图像。

可选地，该超分辨率重建方法还包括：将所述第三尺度关联图像经过上采样后和所述第二尺度关联图像进行特征相加、非线性映射以及特征融合得到第四尺度关联图像；将所述第四尺度关联图像经过上采样后和所述第一尺度关联图像进行特征相加、非线性映射以及特征融合得到高分辨率t2加权像。

可选地，所述低分辨率图像包括第一倍数降分辨率图像和第二倍数降分辨率图像，采用多分辨多模态超分辨率重建网络，将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像，包括：将所述第一倍数降分辨率图像进行特性提取后与所述第三尺度关联图像进行融合得到第一高分辨率图像；将所述第一高分辨率图像进行上采样后和所述第二尺度关联图像进行特征相加、非线性映射以及特征融合得到第二高分辨率图像；将所述第二倍数降分辨率图像进行特性提取后与所述第二高分辨率图像进行融合得到第三高分辨率图像；将所述第三高分辨率图像进行上采样后和所述第一尺度关联图像进行特征相加、非线性映射以及特征融合得到低分辨率图像对应的超分辨率图像。

本发明实施例第二方面提供一种超分辨率重建装置，该装置包括：图像获取模块，用于获取高分辨率图像和待处理的低分辨率图像；多尺度关联图像确定模块，用于根据联想记忆网络建立两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像；融合模块，用于采用多分辨多模态超分辨率重建网络，将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像。

本发明实施例第三方面提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使所述计算机执行如本发明实施例第一方面及第一方面任一项所述的超分辨率重建方法。

本发明实施例第四方面提供一种电子设备，包括：存储器和处理器，所述存储器和所述处理器之间互相通信连接，所述存储器存储有计算机指令，所述处理器通过执行所述计算机指令，从而执行如本发明实施例第一方面及第一方面任一项所述的超分辨率重建方法。

本发明提供的技术方案，具有如下效果：

本发明实施例提供的超分辨率重建方法、装置、存储介质及电子设备，充分结合了多分辨率分析的思想，使得网络在重建过程中具有一定的可解释性。同时，该方法采用了两个类似unet的网络模型，包括联想记忆网络和多分辨多模态超分辨率重建网络，其中，联想记忆网络可以实现两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像；多分辨多模态超分辨率重建网络可以实现将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像，完成超分辨率重建工作。

本发明实施例提供的超分辨率重建方法、装置、存储介质及电子设备，其中，联想记忆网络的主要作用使hrt1w生成与hrt2w相关的不同尺度下的关联特征，多分辨多模态重建网络的作用是将hrt1w生成的不同尺度的关联特征与lrt2w逐步进行融合，最终生成高分辨率的t2w。与现有的一些超分辨率重建方法相比，该重建方法可以同时进行2倍和4倍的重建，并都获得更高的psnr(峰值信噪比)和ssim(结构相似性)。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据本发明实施例的超分辨率重建方法的流程图；

图2是根据本发明另一实施例的超分辨率重建方法的流程图；

图3是根据本发明实施例的联想记忆网络的结构框图；

图4是根据本发明另一实施例的超分辨率重建方法的流程图；

图5是根据本发明另一实施例的超分辨率重建方法的流程图；

图6是根据本发明实施例的多分辨多模态超分辨率重建网络的结构框图；

图7是根据本发明实施例的超分辨率重建装置的结构框图；

图8是根据本发明实施例提供的计算机可读存储介质的结构示意图；

图9是根据本发明实施例提供的电子设备的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供一种超分辨率重建方法，如图1所示，该方法包括如下步骤：

步骤s101：获取高分辨率图像和待处理的低分辨率图像；其中，对于高分辨率图像可以获取不同模态的图像，例如可以获取高分辨率t1加权像和高分辨率t2加权像。具体地，在进行医学图像扫描时，对于同一扫描对象，可以根据实际需要调整成像参数，获取不同模态的图像。而不同模态的图像之间具有互补性，可以满足不同的应用需求。而加权像是指突出某种成分的成像，使其所占的比重大、分量多的意思。

加权像主要包括t1加权像和t2加权像。tl加权像主要反映组织间t1值差别，t2加权像主要反映组织间t2值差别。t1加权成像和t2加权成像可通过调节重复时间(tr，repetitiontime)和回波时间(te，echotime)而获得。t1加权像需要采用短tr和短te的扫描序列获得，而t2加权像需要设置扫描序列为长tr和长te；因此t1加权像的成像时间比t2加权像的成像时间短，临床中更容易获得高分辨率的t1加权像。而为了加快t2加权像的成像速度，会以加大层厚为代价，从而产生t2加权像。人体不同组织及病变具有不同的t1、t2值，mri检查就是根据这些灰度变化进行疾病诊断。其中t1加权像利于观察图像的解剖结构，边缘更清晰，并且具有非常丰富的结构纹理(高频特征丰富)；t2加权像更利于组织病灶的检测。

步骤s102：根据联想记忆网络建立两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像。

信号空间l²(r)的正交分解为于是，对于任意测量信号f(x,y)∈l²(r)，多分辨率分析可以把它分解成为细节部分wn和低频大尺度近似部分vn，然后低频部分再进行进一步的分解，可以重复到任意尺度上。信号f(x,y)分解过程用数学公式表述为：

其中，fⁿ(x,y)和d^k(x,y)分别表示信号的近似部分与细节部分。由多分辨率分析可知，原始信号可以由低频信号和高频信号来联合表示。由此，可以借鉴这一思想来完成超分辨率重建工作：当只存在近似图像(低分辨率图像)时，可以引入细节图像(高频图像)来重建出原始图像(高分辨率图像)。

因此，可以利用多分辨率分析的思想完成对低分辨率图像的超分辨率重建，但是需要在重建过程中补充细节图像。在以往的脑mri超分辨率重建工作中，将高分辨率t1加权像作为先验信息去帮助其他模态图像进行超分辨率重建的工作已经被证明有效，因此，细节图像可以由高分辨率t1加权像来生成。第一步，需要将高分辨率t1加权像进行多分辨率分解：

其中fⁿ(t1w)和d^k(t1w)分别表示高分辨率t1加权像(hrt1w)的近似图像和细节图像，f⁰(t1w)为hrt1w。第二步，将hrt1w的细节图像与高分辨率t2加权像(hrt2w)的近似图像进行结合：

经过以上两个步骤完成低分辨率图像的超分辨率重建工作。

在实际重建过程中，可以利用神经网络来模仿多分辨率分析分解与融合的过程。于是建立了两个类似unet的网络模型。第一个网络是联想记忆网络(associativememorynetwork)，联想记忆网络可以建立高分辨率t1加权像和高分辨率t2加权像的多尺度关联关系，将高分辨率t1加权像分解出多个与高分辨率t2加权像相关的关联图像。

步骤s103：采用多分辨多模态超分辨率重建网络，将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像。其中，多分辨多模态超分辨率重建网络(multi－resolutionanalysismultimodalsrreconstructionnetwork)可以实现超分辨率重建的融合工作，实现由高分辨率t1加权像联想出的多尺度关联图像与t2加权像的低分辨率图像进行融合，得到t2加权像的低分辨率图像对应的超分辨率图像，完成超分辨率重建。

本发明实施例提供的超分辨率重建方法，充分结合了多分辨率分析的思想，使得网络在重建过程中具有一定的可解释性。同时，该方法采用了两个类似unet的网络模型，包括联想记忆网络和多分辨多模态超分辨率重建网络，其中，联想记忆网络可以实现两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像；多分辨多模态超分辨率重建网络可以实现将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像，完成超分辨率重建工作。

在一实施例中，如图2所示，在根据联想记忆网络建立高分辨率t1加权像和高分辨率t2加权像多尺度关联关系，将高分辨率t1加权像分解出多个与高分辨率t2加权像相关的关联图像，包括如下步骤：

步骤s201：将高分辨率t1加权像进行特征提取、非线性映射以及特征融合得到第一尺度关联图像。

具体地，对于联想记忆网络，它建立的是高分辨率t1加权像和t2加权像之间的多尺度关联关系，即联想记忆网络的输入是高分辨率t1加权像，输出的高分辨率t2加权像，因此，分解得到的图像是与高分辨率t2加权像相关的三个不同尺度的关联特征图像。

其中，如图3所示，在生成第一尺度关联图像时，可以由输入的高分辨率t1加权像进行特征提取、非线性映射以及特征融合得到。具体可以先将hrt1通过1个3d卷积进行浅层的特征提取，然后通过1个密集连接块(denseblock)进行非线性映射(学习)，然后再经过1个1＊1＊1的卷积层对密集连接块的特征进行融合，最后得到

步骤s202：将第一尺度关联图像进行下采样、特征提取、非线性映射以及特征融合得到第二尺度关联图像；其中，第二尺度关联图像的生成过程与第一尺度关联图像相同。具体可以将第一尺度关联图像进行下采样、特征提取、非线性映射以及特征融合得到第二尺度关联图像其中，如图3所示，通过池化层实现下采样，再通过1个3d卷积进行浅层的特征提取，然后通过1个密集连接块(denseblock)进行非线性映射(学习)，然后再经过1个1＊1＊1的卷积层对密集连接块的特征进行融合，最后得到

步骤s203：将第二尺度关联图像进行下采样、特征提取、非线性映射以及特征融合得到第三尺度关联图像。其中，第三尺度关联图像的生成过程也与第一尺度关联图像相同。具体可以将第二尺度关联图像进行下采样、特征提取、非线性映射以及特征融合得到第三尺度关联图像其中，如图3所示，通过池化层实现下采样，再通过1个3d卷积进行浅层的特征提取，然后通过1个密集连接块(denseblock)进行非线性映射(学习)，然后再经过1个1＊1＊1的卷积层对密集连接块的特征进行融合，最后得到

在一实施例中，对于联想记忆网络，是通过hrt1加权像生成hrt2加权像的过程，因此，在得到第三尺度关联图像后，还可以通过上采样最终得到hrt2加权像。具体地，如图4所示，该超分辨率重建方法还包括如下步骤：

步骤s301：将第三尺度关联图像经过上采样后和第二尺度关联图像进行特征相加、非线性映射以及特征融合得到第四尺度关联图像；具体地，如图3所示，上采样可以由反卷积实现，即将第三尺度关联图像经过反卷积后和第二尺度关联图像进行特征相加、1个3d卷积进行浅层的特征提取，然后通过1个密集连接块(denseblock)进行非线性映射(学习)，然后再经过1个1＊1＊1的卷积层对密集连接块的特征进行融合，得到第四尺度关联图像。

步骤s302：将第四尺度关联图像经过上采样后和第一尺度关联图像进行特征相加、非线性映射以及特征融合得到高分辨率t2加权像。具体地，如图3所示，该上采样也可以由反卷积实现，将第四尺度关联图像经过反卷积后和第一尺度关联图像进行特征相加、1个3d卷积进行浅层的特征提取，然后通过1个密集连接块(denseblock)进行非线性映射(学习)，然后再经过1个1＊1＊1的卷积层对密集连接块的特征进行融合，得到第五尺度关联图像，第五尺度关联图像经过1个3d卷积进行特征提取后即可得到高分辨率t2加权像。

在一实施例中，为了实现低分辨率图像和三个尺度关联图像的逐步融合，可以获取4倍下采样的低分辨率图像和2倍下采样的低分辨率图像，即低分辨率图像包括第一倍数降分辨率图像和第二倍数降分辨率图像。

如图5所示，采用多分辨多模态超分辨率重建网络，将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像，包括如下步骤：

步骤s401：将第一倍数降分辨率图像进行特性提取后与第三尺度关联图像进行融合得到第一高分辨率图像；具体地，多分辨多模态超分辨率重建网络实现的是低分辨率图像和多尺度关联图像融合生成超分辨率图像的过程。其中，多分辨多模态超分辨率重建网络是在联想记忆网络的下采样网络上搭建的，这部分下采样网络的权重不随重建网络的学习而发生改变。因此，在训练多分辨多模态超分辨率重建网络时，这部分网络权重无需对其进行更新。

如图6所示，在将低分辨率图像和多尺度关联图像融合过程中，先将第一倍数降分辨率图像即4倍下采样的lrt2w通过1个3d卷积进行浅层的特征提取后与第三尺度关联图像进行融合得到第一高分辨率图像，融合方式选择通道连接和1＊1＊1卷积的方式完成。

步骤s402：将第一高分辨率图像进行上采样后和第二尺度关联图像进行特征相加、非线性映射以及特征融合得到第二高分辨率图像；其中，如图6所示，上采样可以采用反卷积实现，将第一高分辨率图像进行反卷积后和第二尺度关联图像进行特征相加、1个3d卷积进行浅层的特征提取，然后通过1个密集连接块(denseblock)进行非线性映射(学习)，然后再经过1个1＊1＊1的卷积层对密集连接块的特征进行融合，得到第二高分辨率图像。

步骤s403：将第二倍数降低分辨率图像进行特性提取后与第二高分辨率图像进行融合得到第三高分辨率图像；如图6所示，对于第二高分辨率图像可以再和第二倍数降分辨率图像即2倍下采样的低分辨率图像进行融合，得到第三高分辨率图像，融合方式也选择通道连接和1＊1＊1卷积的方式完成。此外，将第三高分辨率图像进行1个3d卷积的特征提取可以得到2倍下采样的高分辨率t2加权像，实现了2倍的重建。

步骤s404：将第三高分辨率图像进行上采样后和第一尺度关联图像进行特征相加、非线性映射以及特征融合得到低分辨率图像对应的超分辨率图像。其中，如图6所示，上采样可以采用反卷积实现，将第三高分辨率图像进行反卷积后和第一尺度关联图像进行特征相加、1个3d卷积进行浅层的特征提取，然后通过1个密集连接块(denseblock)进行非线性映射(学习)，然后再经过1个1＊1＊1的卷积层对密集连接块的特征进行融合，得到第四高分辨率图像。第四高分辨率图像经过1个3d卷积进行特征提取后即可得到低分辨率图像对应的超分辨率图像，实现了4倍的重建。

本发明实施例提供的超分辨率重建方法，其中，联想记忆网络的主要作用使hrt1w生成与hrt2w相关的不同尺度下的关联图像，多分辨多模态重建网络的作用是将hrt1w生成的不同尺度的关联图像与lrt2w逐步进行融合，最终生成高分辨率的t2w。与现有的一些超分辨率重建方法相比，该重建方法可以同时进行2倍和4倍的重建，并都获得更高的psnr(峰值信噪比)和ssim(结构相似性)。

在一实施例中，为了更好地描述hrt1w和hrt2w在结构上的映射关系，联想记忆网络的损失函数选择结构相似性损失函数(structuralsimilarity，ssim)，多分辨多模态超分辨率重建网络的损失函数选择平均绝对值误差损失函数(meanabsoluteerror，mae)。

在一实施例中，在对两个网络进行训练前，还可以先对高分辨率图像进行预处理，包括配准、hrt2w降采样、数据增强和图像块的截取等；图像配准是医学图像分析的重要步骤，具体可以采用现有的spm12软件将t1w和t2w配准至同一标准空间。hrt2w降采样采用高斯滤波+下采样(平均体素)的方式，数据增强包括翻转，最重要的是从t1w和t2w的空间坐标中随机提取二者相对应64＊64＊64的图像块，输入网络前还需对图像块进行归一化处理，保证各个体素值为0～1之间。

此外，除了对图像的预处理过程外，还需要进行网络超参数的设置。两个网络的超参数值可以设置相同。其中，一次训练所选取的样本数(batch＿size)为2，除了重建层和浅层特征提取层的滤波器(filter)个数为1外，各卷积滤波器(filter)个数为64，同时使用自适应矩估计(adam)优化器，学习率设置为0.0001。

本发明实施例还提供一种超分辨率重建装置，如图7所示，该装置包括：

图像获取模块10，用于获取高分辨率图像和待处理的低分辨率图像；详细内容参见上述方法实施例中步骤s101的相关描述。

多尺度关联图像确定模块20，用于根据联想记忆网络建立两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像；详细内容参见上述方法实施例中步骤s102的相关描述。

融合模块30，用于采用多分辨多模态超分辨率重建网络，将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像。详细内容参见上述方法实施例中步骤s103的相关描述。

本发明实施例提供的超分辨率重建装置，充分结合了多分辨率分析的思想，使得网络在重建过程中具有一定的可解释性。同时，该装置采用了两个类似unet的网络模型，包括联想记忆网络和多分辨多模态超分辨率重建网络，其中，联想记忆网络可以实现两种模态高分辨率图像的多尺度关联关系，得到第一种模态高分辨率图像与第二种模态高分辨率图像之间的多尺度关联图像；多分辨多模态超分辨率重建网络可以实现将第一种模态高分辨率图像在联想记忆网络中生成的多尺度关联图像，与第二种模态的低分辨率图像进行融合，得到第二种模态的低分辨率图像对应的超分辨率图像，完成超分辨率重建工作。

本发明实施例提供的超分辨率重建装置的功能描述详细参见上述实施例中超分辨率重建方法描述。

本发明实施例还提供一种存储介质，如图8所示，其上存储有计算机程序601，该指令被处理器执行时实现上述实施例中超分辨率重建方法的步骤。该存储介质上还存储有音视频流数据，特征帧数据、交互请求信令、加密数据以及预设数据大小等。其中，存储介质可为磁碟、光盘、只读存储记忆体(read－onlymemory，rom)、随机存储记忆体(randomaccessmemory，ram)、快闪存储器(flashmemory)、硬盘(harddiskdrive，缩写：hdd)或固态硬盘(solid－statedrive，ssd)等；所述存储介质还可以包括上述种类的存储器的组合。

本领域技术人员可以理解，实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(read－onlymemory，rom)、随机存储记忆体(randomaccessmemory，ram)、快闪存储器(flashmemory)、硬盘(harddiskdrive，缩写：hdd)或固态硬盘(solid－statedrive，ssd)等；所述存储介质还可以包括上述种类的存储器的组合。

本发明实施例还提供了一种电子设备，如图9所示，该电子设备可以包括处理器51和存储器52，其中处理器51和存储器52可以通过总线或者其他方式连接，图9中以通过总线连接为例。

处理器51可以为中央处理器(centralprocessingunit，cpu)。处理器51还可以为其他通用处理器、数字信号处理器(digitalsignalprocessor，dsp)、专用集成电路(applicationspecificintegratedcircuit，asic)、现场可编程门阵列(field－programmablegatearray，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。

存储器52作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块，如本发明实施例中的对应的程序指令/模块。处理器51通过运行存储在存储器52中的非暂态软件程序、指令以及模块，从而执行处理器的各种功能应用以及数据处理，即实现上述方法实施例中的超分辨率重建方法。

存储器52可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储处理器51所创建的数据等。此外，存储器52可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器52可选包括相对于处理器51远程设置的存储器，这些远程存储器可以通过网络连接至处理器51。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

所述一个或者多个模块存储在所述存储器52中，当被所述处理器51执行时，执行如图1－6所示实施例中的超分辨率重建方法。

上述电子设备具体细节可以对应参阅图1至图6所示的实施例中对应的相关描述和效果进行理解，此处不再赘述。

虽然结合附图描述了本发明的实施例，但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型，这样的修改和变型均落入由所附权利要求所限定的范围之内。