拍摄图像的处理方法、装置、存储介质及移动终端与流程
本申请实施例涉及移动终端技术领域，尤其涉及一种拍摄图像的处理方法、装置、存储介质及移动终端。
背景技术
目前，拍照功能已成为多数移动终端的标准配置，终端用户可通过随身携带的移动终端轻松快捷的实现拍照操作。
在终端用户使用移动终端进行拍照时，若有干扰物突然闯进镜头，则拍摄图像中就会出现干扰物对应的伪影，造成拍摄图像的不清晰，因此，移动终端的图像预处理功能仍需要改进。
技术实现要素：
本申请实施例提供了一种拍摄图像的处理方法、装置、存储介质及移动终端，可以提高拍摄质量。
第一方面，本申请实施例提供了一种拍摄图像的处理方法，包括：
如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；
确定所述至少两个图像帧中移动干扰物的移动信息；
根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。
第二方面，本申请实施例提供了一种拍摄图像的处理装置，包括：
图像拍摄模块，用于如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；
信息确定模块，用于确定所述图像拍摄模块连续拍摄的至少两个图像帧中移动干扰物的移动信息；
保留确定模块，用于根据所述信息确定模块确定的移动干扰物的移动速度和/或移动轨迹信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。
第三方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本申请实施例所述的拍摄图像的处理方法。
第四方面，本申请实施例提供了一种移动终端，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，所述处理器执行所述计算机程序时实现如本申请实施例所述的拍摄图像的处理方法。
本申请实施例中提供的拍摄图像的处理方案，首先，如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；然后，确定所述至少两个图像帧中移动干扰物的移动信息；最后，根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。能够避免移动干扰物对拍摄图像清晰度的影响，提高拍摄质量。
附图说明
图1为本申请实施例提供的一种拍摄图像的处理方法的流程示意图；
图2为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图；
图3为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图；
图4为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图；
图5为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图；
图6为本申请实施例提供的一种拍摄图像的处理装置的结构框图；
图7为本申请实施例提供的一种移动终端的结构示意图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
目前，拍照功能已成为多数移动终端的标准配置，终端用户可通过随身携带的移动终端轻松快捷的实现拍照操作。但是在终端用户使用移动终端进行拍照时，若有干扰物突然闯进镜头，则拍摄图像中就会出现干扰物对应的伪影，造成拍摄图像的不清晰，因此，移动终端的图像预处理功能仍需要改进。
本申请实施例提供了一种拍摄图像的处理方法，能够在预览画面存在移动干扰物时，连续拍摄多个图像帧确定移动干扰物的移动信息，以便判断是否在生成的目标拍摄图像中保留该移动干扰物，进而避免了移动干扰物对拍摄图像清晰度的影响，提高拍摄质量。具体方案如下所示：
图1为本申请实施例提供的一种拍摄图像的处理方法的流程示意图，该方法适用于在拍照过程中，拍摄视野内存在移动干扰物的情况。特别应用于人像拍摄模式且存在移动干扰物时进行拍照的情况，该方法可以由具有拍照功能的移动终端来执行，该移动终端可以为智能手机、平板电脑、可穿戴设备(智能手表或智能眼镜)等，该方法具体包括如下步骤：
步骤101、如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧。
其中，预览画面可以是在启动拍摄功能后，移动终端的显示屏上显示的画面。该画面可以是启动拍摄功能后，摄像头实时采集显示的图像。移动干扰物可以是预览画面中的非拍摄目标且处于移动状态下的物体，例如，终端用户采用人像模式进行拍摄，人像模式可以定位的多个人脸，但是有些人脸并不是用户所需要的拍摄目标，如突然闯进拍摄范围内的人脸，此时闯进拍摄范围内的人脸为移动干扰物。
可选的，检测预览画面中是否存在移动干扰物，可以是在启动移动终端的拍摄功能后就开始实时或者每隔预设时间间隔(如1秒)检测一次预览画面中是否存在移动干扰物，并实时更新检测结果；也可以是在终端用户点击触发拍照(如点击拍摄按钮触发、语音触发、手势或表情触发等等)时，系统开始检测预览画面中是否存在移动干扰物。
可选的，检测到预览画面中存在移动干扰物，可以是若预览画面中连续的至少两个图像帧或周期性抽取的图像帧(如每隔1秒抽取的图像帧)间存在拍摄内容的变化，则检测到预览画面中存在移动干扰物。具体的，可以是获取相邻的至少两个图像帧或周期性抽取的图像帧进行比较，当图像帧之间出现拍摄内容的增加、减少、位移移动或模糊等中的至少一种时，则说明预览画面中存在移动干扰物；也可以是将相邻图像帧或周期性抽取的图像帧之间进行差分运算，若运算结果大于预设阈值，则说明存在移动干扰物。因为若不存在移动干扰物，相邻图像帧或周期性抽取的图像帧之间内容基本上是保持不变的，因此差分运算的结果较小；当出现移动干扰物时，摄像头获取的内容就会因移动干扰物的出现发生变化，此时差分运算的结果就会较大。
示例性的，若检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧可以是，若检测到预览画面中存在移动干扰物，则启动多帧连拍模式，连续拍摄至少两个图像帧。可选的，连续拍摄至少两个图像帧时的拍摄频率可以是移动终端配置的摄像头的采样频率，也可以是根据需求预先设置的，对此本申请不进行限定。
步骤102、确定至少两个图像帧中移动干扰物的移动信息。
其中，移动干扰物的移动信息可以是移动干扰物移动时的相关信息，至少包括移动速度信息和/或移动轨迹信息，可选的，移动速度信息又可以包括相邻帧的移动速度、平均移动速度或移动速度变化趋势等等。移动轨迹信息又可以包括：移动轨迹的长度、移动轨迹的范围或移动轨迹的延伸方向等等。
可选的，在本申请实施例中，确定至少两个图像帧中移动干扰物的移动信息可以是依据图像帧的时域关联性，确定至少两个图像帧中移动干扰物的移动信息，其中，图像帧的时域关联性可以是连续拍摄的相邻图像帧之间的时间关联性以及图像帧间各特征像素点之间的位置关联性等。例如，连续拍摄至少两个图像帧时的拍摄频率是一秒拍摄10个图像帧，则相邻两个图像帧对应时刻相差十分之一秒，在这十分之一秒内移动干扰物发生了移动，因此，每两个相邻图像帧中的移动干扰物的位置也存在着一定的变化关系，可以对至少两个图像帧中的移动干扰物进行跟踪，从而拟合出移动干扰物的移动轨迹信息；根据拟合出的移动干扰物的移动轨迹信息中的移动位移以及图像帧之间的间隔时间，即可确定移动干扰物的移动速度信息。
步骤103、根据移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留移动干扰物。
可选的，在本申请实施例中，依据移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留移动干扰物时，可以是预先依据移动干扰物的移动信息，设置判断规则从而判断是否在生成的目标拍摄图像中保留移动干扰物。可选的，在设置判断规则时，可以是选择移动信息中的一种信息进行判断，例如，可以是移动信息中的移动速度大于预设速度阈值；也可以结合移动信息中的多种信息进行判断，例如，移动干扰物的移动速度大于预设阈值且移动速度变化趋势并没有减小。在根据判读规则确定是否保留移动干扰物时，可以是选择一种判断规则进行确定；也可以是将多个判断规则进行组合来判断是否保留移动干扰物。
可选的，在确定是否在生成的目标拍摄图像中保留移动干扰物时，可以是根据移动干扰物的移动速度大小和/或变化趋势，确定是否在生成的目标拍摄图像中保留所述移动干扰物；和/或根据移动干扰物的移动轨迹的长度和/或轨迹走向，确定是否在生成的目标拍摄图像中保留移动干扰物。例如，可以是在移动干扰物的移动速度大于预设速度阈值，和/或移动速度的变化趋势并没有减小时，确定在生成的目标拍摄图像中不保留该移动干扰物；也可以是在移动干扰物的移动轨迹的长度大于预设长度阈值，和/或移动轨迹的变化走向朝图像边缘延伸时，确定在生成的目标拍摄图像中不保留该移动干扰物；还可以是在满足上述两种条件时，在确定在生成的目标拍摄图像中保留该移动干扰物。这样设置的好处在于，选择多维度的干扰物移动信息及其组合信息对应的判断规则，来确定是否在目标拍摄图像中保留移动干扰物，从而提高了确定是否保留移动干扰物的准确性，进而提高拍摄质量。
需要说明的是，上述移动干扰物的移动速度大小可以是移动速度的平均移动速度大小，也可以是每两个图像帧对应的瞬时移动速度大小。在判断移动速度是否大于预设速度阈值时，可以是判断平均移动速度是否超过预设速度阈值；也可以是判断每两个图像帧对应的多个瞬时移动速度中是否存在超过预设速度阈值的瞬时移动速度。对此本申请并不进行限定。
可选的，在生成的目标拍摄图像中保留移动干扰物，可以是对包含有移动干扰物的各图像帧进行融合处理，去除移动干扰物的伪影，生成最终的包含移动干扰物的清晰的目标拍摄图像。在生成的目标拍摄图像中不保留移动干扰物，可以是先去除各图像帧中的移动干扰物，然后再对去除了移动干扰物的各图像帧进行融合处理，生成最终的不包含移动干扰物的清晰的目标拍摄图像。
本申请实施例提供的拍摄图像的处理方法，首先，如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；然后，确定所述至少两个图像帧中移动干扰物的移动信息；最后，根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。相对于相关技术中在拍照过程中，若拍摄视野内存在移动干扰物，则拍摄图像模糊、质量较差的问题。本申请实施例能够在预览画面存在移动干扰物时，连续拍摄多个图像帧确定移动干扰物的移动信息，以便判断是否在生成的目标拍摄图像中保留该移动干扰物，进而避免了移动干扰物对拍摄图像清晰度的影响，提高拍摄质量。
图2为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图，作为对上述实施例的进一步说明，该方法包括如下步骤：
步骤201、如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧。
步骤202、检测至少两个图像帧中的移动干扰物所在区域。
其中，移动干扰物所在区域可以是移动干扰物在每一个图像帧中对应的区域。
示例性的，在本申请实施例中，检测至少两个图像帧中的移动干扰物所在区域的方法有很多，本申请对此不进行限定。例如，可以是检测到预览画面中存在移动干扰物时，提取该移动干扰物的特征点，在检测每个图像帧中移动干扰物所在区域时寻找每个图像帧中具有该特征点的移动干扰物，提取该移动干扰物的轮廓，将其轮廓在图像中所在的区域作为该图像中的移动干扰物所在的区域。也可以是先确定每一个图像帧的拍摄内容中的各拍摄物所在区域，并提取各拍摄物的特征点，然后将相邻两个图像帧对应的各拍摄物所在区域及特征点进行比对，检测是否存在特征点相同，但拍摄物所在区域发生变化的拍摄物，若存在，则将该拍摄物作为移动干扰物，将该拍摄物所在区域作为该图像帧中的移动干扰物所在区域。可选的，为了防止因计算误差导致的区域变化误判，可以是当拍摄物所在区域位置变化大于预设变化阈值(如，移动像素超过10个像素)时，确定该拍摄物所在区域发生了变化。
步骤203、根据拍摄参数以及各图像帧中的移动干扰物所在区域，计算移动干扰物的移动信息。
其中，拍摄参数可以是配置在移动终端上的摄像头在连续拍摄图像时对应的设置参数，可以包括：摄像头的采样频率、分辨率以及拍摄视场大小等等。在计算移动干扰物的移动信息时，可以根据移动信息具体内容的不同，选择不同的一个或多个拍摄参数进行计算。
可选的，根据拍摄参数以及各图像帧中移动干扰物所在区域，计算移动干扰物的移动轨迹信息时，可以根据每个图像帧中移动干扰物对应的区域位置坐标进行拟合，确定移动干扰物的移动轨迹。在计算该移动轨迹的长度时，可以是分别计算每两个图像帧中移动干扰物的区域位置坐标对应的轨迹长度，然后进行求和得到该移动轨迹的长度，例如，移动干扰物在拍摄的第一个图像帧中所在区域的中心位置坐标为(a，b)，在第二个图像帧中所在区域的中心位置坐标为(c，d)，在计算这两个图像帧中移动干扰物区域位置坐标对应的轨迹长度s时，可以是按照公式
可选的，根据拍摄参数以及各图像帧中移动干扰物所在区域，计算干扰物的移动速度信息时，由于根据摄像头的采样频率，可以确定相邻两个图像帧之间的时间间隔；因此，可以根据相邻两个图像帧中移动干扰物对应的移动轨迹长度以及相邻两个图像帧之间的时间间隔，确定该移动干扰物的移动速度。可选的，还可以通过计算出每两个图像帧对应的速度值，确定该移动干扰物对应的平均速度值以及速度的变化趋势等等。
步骤204、根据移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留移动干扰物。
本申请实施例提供的拍摄图像的处理方法，能够在连续拍摄多张图像后，通过检测每个图像帧中移动干扰物的区域，结合当前拍摄参数，计算移动干扰物的移动信息以便判断是否在生成的目标拍摄图像中保留该移动干扰物，提高了移动干扰物移动信息计算的准确性，为准确判断是否在生成的目标拍摄图像中保留移动干扰物提供了保障，进而提高拍摄质量。
图3为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图，作为对上述各实施例的一个优选实例，该方法适用于人像拍摄模式下拍摄多人合影图像时，对拍摄图像进行处理的情况。该方法包括如下步骤：
步骤301、开始。
步骤302、如果检测到预览画面中存在移动干扰物，则判断移动干扰物是否为目标干扰物；若是，执行步骤303；若否，执行步骤307。
其中，目标干扰物可以是按照干扰物的种类进行划分的，例如，可以分为人物干扰物、动物干扰物、车辆干扰物等等。可以根据不同的拍摄模式来确定目标干扰物的具体类型。
可选的，由于本实施例主要适用于人像拍摄模式，人像拍摄模式可以在合影时同时定位多个人物的人脸，但可能并不是所有的人物都是需要合影的人物，因此，本实施例中主要是为了对拍摄过程中移动的人物进行处理，判断是否要在最后生成的目标拍摄图像中保留该移动人物，所以本实施例中的目标干扰物可以为人物干扰物。优选的，该人物干扰物还可以具体到人物的人脸。需要说明的是，可以根据实际拍摄模式和拍摄需求，来改变目标干扰物的类型，例如，若拍摄目标为动物，可以是将目标干扰物确定的动物干扰物。
示例性的，判断移动干扰物是否是目标干扰物时，可以是预先提取目标干扰物的特征，判断检测画面中的移动干扰物是否具有该特征，若有，则说明是目标干扰物，执行步骤303，若没有，说明不是目标干扰物，执行步骤307。例如，若目标干扰物为人物，预先提取人脸的五官特征，判断检测画面中移动干扰物是否具有人脸的五官特征，若具有人脸的五官特征，则说明该干扰物为人物，可以执行步骤303，进一步判断是否需要保留该人物，若不具有人脸的五官特征，则说明该干扰物为非人物，可以执行步骤307，直接在生成的目标拍摄图像中不保留该移动干扰物。
需要说明的是，本申请实施例中，若移动干扰物不是目标干扰物，也可以是按照其他规则判断是否在生成的目标拍摄图像中保留移动干扰物，并不限定于必须执行步骤307在目标拍摄图像中不保留移动干扰物。
步骤303、若移动干扰物为目标干扰物，则连续拍摄至少两个图像帧。
步骤304、确定至少两个图像帧中移动干扰物的移动信息。
步骤305、判断移动干扰物的移动轨迹的长度是否大于预设长度阈值，或移动速度是否大于预设速度阈值；若是，执行步骤307，若否，执行步骤306。
示例性的，在众人合影的过程中，避免不了会出现有些人左右晃动或轻微移动的情况，但通常情况下，合影者的移动无论是速度还是移动轨迹的通常幅度较小，而突然闯入镜头的干扰者的速度和移动轨迹的幅度会相对较大，因此，可以通过判断移动干扰物的移动轨迹的长度是否大于预设长度阈值，或判断移动速度是否大于预设速度阈值，若是，则说明移动干扰物不是众多合影者中的一个，而是突然闯入镜头的干扰者，此时，执行步骤307，在生成的目标拍摄图像中不保留移动干扰物；否则，执行步骤306，在生成的目标拍摄图像中保留移动干扰物。
步骤306、在生成的目标拍摄图像中保留移动干扰物。
步骤307、在生成的目标拍摄图像中不保留移动干扰物。
本申请实施例提供的拍摄图像的处理方法，在拍摄图像为合影图像且移动干扰物为目标干扰物时，若移动轨迹长度大于预设长度阈值或移动速度大于预设速度阈值，则在生成的目标拍摄图像中不保留该移动干扰物，能够保留合影时小幅度移动的人物，去除大幅度移动的非合影人物的干扰，提高了拍摄质量。
图4为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图，作为对上述各实施例的一个优选实例，该方法适用于拍摄模式为人像模式时，移动干扰物为另一个拍摄目标，其在拍照过程中跑向原有拍摄目标进行拍照的情况。该方法包括如下步骤：
步骤401、开始。
步骤402、如果检测到预览画面中存在移动干扰物，则判断移动干扰物是否为目标干扰物；若是，执行步骤403；若否，执行步骤407。
步骤403、若移动干扰物为目标干扰物，则连续拍摄至少两个图像帧。
步骤404、确定至少两个图像帧中移动干扰物的移动信息。
步骤405、判断移动干扰物的移动速度是否呈减小趋势，且移动干扰物的移动轨迹是否向拍摄目标方向延伸，若是，执行步骤406，若否，执行步骤407。
示例性的，本实施例适用于拍照过程中，移动干扰物并非误闯入镜头的干扰者，而是要一起进行合影的合影者的情况，例如，镜头外的用户b想和用户a一起合影，快速跑到用户a旁边的情况。针对该情况，跑入镜头的用户通常具有两个特征：(1)闯入镜头的移动速度会逐渐减小，当其达到原有拍摄目标旁边时，速度会减少到零。(2)移动轨迹会朝向原有拍摄目标方向，最终停止在原有拍摄目标周围。因此，可以基于以上两个特征，在移动干扰物的移动速度呈减小趋势，且移动干扰物的移动轨迹向拍摄目标方向延伸时，确认该移动干扰物并非为误闯入镜头的干扰者，执行步骤406，在生成的目标拍摄图像中保留该移动干扰物；否则，确认该移动干扰物为误闯入镜头的干扰者，执行步骤407，在生成的目标拍摄图像中不保留该移动干扰物。
可选的，在判断移动干扰物的移动轨迹是否向拍摄目标方向延伸时，可以是判断移动干扰物的移动轨迹与其移动起点到拍摄目标所在直线的夹角是否逐渐减小，且移动干扰物到拍摄目标的距离是否逐渐减小，若都满足，则说明移动干扰物的移动轨迹向拍摄目标方向延伸。
步骤406、在生成的目标拍摄图像中保留移动干扰物。
步骤407、在生成的目标拍摄图像中不保留移动干扰物。
本申请实施例提供的拍摄图像的处理方法，在拍摄图像为人物图像且移动干扰物为目标干扰物时，若移动速度呈减小趋势，且移动轨迹向拍摄目标方向延伸，则在生成的目标拍摄图像中保留该移动干扰物，能够避免将跑向镜头的中原有拍摄目标旁边的另一拍摄目标误删除的情况，提高了拍摄质量。
图5为本申请实施例提供的另一种拍摄图像的处理方法的流程示意图，作为对上述实施例的进一步说明，该方法包括如下步骤：
步骤501、如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧。
步骤502、确定至少两个图像帧中移动干扰物的移动信息。
步骤503、根据移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留移动干扰物，若是，执行步骤504，若否，执行步骤505。
步骤504、若在生成的目标拍摄图像中保留移动干扰物，则根据图像帧的时域关联性，对包含有移动干扰物的至少两个图像帧进行融合，生成目标拍摄图像。
示例性的，若在生成的目标拍摄图像中保留移动干扰物，则需要对包含有移动干扰物的各图像帧进行融合处理，具体的融合处理过程可以是根据图像帧之间的时域关联性，确定各图像帧中移动干扰物所在区域位置之间的关联性。先对各图像帧中移动干扰物所在区域的图像进行融合，去除移动干扰物的伪影，得到清晰的目标干扰物图像，然后结合具体的拍摄场景，判断将融合后的移动干扰物放置在拍摄图像中的什么位置，例如，若移动干扰物为众多合影者中轻微晃动者，则可以对各图像帧中移动干扰物所在区域求均值，将融合后的移动干扰物放置在各图像帧对应的平均干扰物所在区域。若拍摄图像为闯进镜头想要参与拍照的拍摄目标，则可以是将融合后的移动干扰物放置在最后一个图像帧中移动干扰物所在区域。
可选的，对包含有移动干扰物的至少两个图像帧进行融合时，可以是基于像素级融合算法和/或特征级融合算法对处理后的至少两个图像帧进行融合处理，生成目标拍摄图像。
其中，像素级融合也称数据级融合，可以是直接对采集到的包含有移动干扰物的图像数据进行处理而获得融合图像的过程。具体的，像素级融合算法可以包括空间域算法和变换域算法等，空间域算法中又可以包括多种融合规则方法，如逻辑滤波法、灰度加权平均法和对比调制法等；变换域算法中又可以包括金字塔分解融合法和小波变换法等。采用像素级融合算法的好处在于可以尽可能多的还原图像中的细节信息，如边缘、纹理的提取等。能够很好的判断移动干扰物的像素点信息，从而把模糊的移动干扰物还原出来。此外还可以尽可能多的保留图像非移动干扰物的图像信息，使得融合后的图片不论是移动干扰物所在区域还是非移动干扰物所在区域都能保证其清晰度。
特征级图像融合算法可以是从采集到的包含有移动干扰物的图像中将特征信息提取出来，这些特征信息是移动干扰物所在区域的特征信息，然后对这些特征信息进行分析、处理与整合从而得到融合后的图像特征。采用特征级融合算法的好处在于融合后的移动干扰物的清晰度更高，且特征级融合对图像信息进行了压缩，再用计算机分析与处理，所消耗的内存与时间相对较小，拍摄图像处理的实时性就会有所提高。
可选的，在对包含有移动干扰物的至少两个图像帧进行融合时，还可以是从至少两个图像帧中，去除含有伪影的不清楚的移动干扰物所在的图像，然后再基于上述融合方法对包含有清晰移动干扰物的图像进行融合。
步骤505、若在生成的目标拍摄图像中不保留移动干扰物，则根据图像帧的时域关联性，去除至少两个图像帧中的移动干扰物，得到预处理图像集合。
示例性的，预处理图像集合可以是去除了移动干扰物后的各图像帧的集合。根据图像帧的时域关联性，去除至少两个图像帧中的移动干扰物时，可以是根据图像帧之间的时域关联性，确定每一个图像帧中移动干扰物所在区域对应的原始拍摄内容，并将原始拍摄内容替换该图像帧中的移动干扰物所在区域，例如，第一个图像帧中移动干扰物所在区域位置为s1，则可以选择除第一个图像帧外的其余任何一帧拍摄图像中对应的s1区域中的内容即为第一个图像帧中移动干扰物对应的原始拍摄内容，此时，就将除第一个图像帧外的其余任何一帧拍摄图像中对应的s1区域中的内容替换第一个图像帧中移动干扰物所在区域。
步骤506、对预处理图像集合进行融合，生成目标拍摄图像。
示例性的，对预处理图像集合进行融合时，也可以基于像素级融合算法和/或特征级融合算法对处理后的至少两个图像帧进行融合处理，生成目标拍摄图像。
本申请实施例提供的拍摄图像的处理方法，能够根据移动干扰物的移动信息，在确定保留该移动干扰物时，对包含有移动干扰物的各图像帧进行融合生成目标拍摄图像，在确定不保留该移动干扰物时，先对各图像帧去除移动干扰物后再融合生成目标拍摄图像。能够自动对拍摄过程中的移动干扰物进行分析处理，无论是否保留干扰物都能生成清晰的高质量拍摄图像。
图6为本申请实施例提供的一种拍摄图像的处理装置的结构框图，该装置可由软件和/或硬件实现，一般集成在具有拍照功能的移动终端中，可以执行上述各实施例所述的拍摄图像的处理方法。如图6所示，该装置包括：图像拍摄模块601、信息确定模块602和保留确定模块603。
图像拍摄模块601，用于如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；
信息确定模块602，用于确定所述图像拍摄模块601连续拍摄的至少两个图像帧中移动干扰物的移动信息；
保留确定模块603，用于根据所述信息确定模块602确定的移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。
进一步的，信息确定模块602用于：
检测所述至少两个图像帧中的移动干扰物所在区域；
根据拍摄参数以及各图像帧中的移动干扰物所在区域，计算所述移动干扰物的移动信息。
进一步的，图像拍摄模块601用于：
如果检测到预览画面中存在移动干扰物，则判断所述移动干扰物是否为目标干扰物；
若所述移动干扰物为目标干扰物，则连续拍摄至少两个图像帧。
进一步的，保留确定模块603用于：
若拍摄图像为合影图像，则当所述移动干扰物的移动轨迹的长度大于预设长度阈值，或移动速度大于预设速度阈值时，在生成的目标拍摄图像中不保留所述移动干扰物。
进一步的，保留确定模块603用于：
若拍摄模式为人像模式，则当所述移动干扰物的移动速度呈减小趋势，且所述移动干扰物的移动轨迹向拍摄目标方向延伸时，在生成的目标拍摄图像中保留所述移动干扰物。
进一步的，上述装置还包括图像融合模块，用于在所述确定是否在生成的目标拍摄图像中保留所述移动干扰物之后，若在生成的目标拍摄图像中不保留移动干扰物，则根据图像帧的时域关联性，去除所述至少两个图像帧中的移动干扰物，得到预处理图像集合；对所述预处理图像集合进行融合，生成目标拍摄图像。
进一步的，图像融合模块，还用于在所述确定是否在生成的目标拍摄图像中保留所述移动干扰物之后，若在生成的目标拍摄图像中保留移动干扰物，则根据图像帧的时域关联性，对包含有移动干扰物的至少两个图像帧进行融合，生成目标拍摄图像。
本申请实施例提供的拍摄图像的处理装置，首先，图像拍摄模块601如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；然后，信息确定模块602确定连续拍摄的至少两个图像帧中移动干扰物的移动信息，最后，保留确定模块603根据确定的移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。相对于相关技术中在拍照过程中，若拍摄视野内存在移动干扰物，则拍摄图像模糊、质量较差的问题。本申请实施例能够在预览画面存在移动干扰物时，连续拍摄多个图像帧确定移动干扰物的移动信息，以便判断是否在生成的目标拍摄图像中保留该移动干扰物，进而避免了移动干扰物对拍摄图像清晰度的影响，提高拍摄质量。
上述装置可执行本申请前述所有实施例所提供的方法，具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本申请前述所有实施例所提供的方法。
图7是本申请实施例提供的一种终端设备的结构示意图。如图7所示，该终端可以包括：壳体(图中未示出)、存储器701、中央处理器(centralprocessingunit，cpu)702(又称处理器，以下简称cpu)、存储在存储器701上并可在处理器702上运行的计算机程序、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部；所述cpu702和所述存储器701设置在所述电路板上；所述电源电路，用于为所述终端的各个电路或器件供电；所述存储器701，用于存储可执行程序代码；所述cpu702通过读取所述存储器701中存储的可执行程序代码来运行与所述可执行程序代码对应的程序。
所述终端还包括：外设接口703、rf(radiofrequency，射频)电路705、音频电路706、扬声器711、电源管理芯片708、输入/输出(i/o)子系统709、触摸屏712、其他输入/控制设备710以及外部端口704，这些部件通过一个或多个通信总线或信号线707来通信。
应该理解的是，图示终端设备700仅仅是终端的一个范例，并且终端设备700可以具有比图中所示出的更多的或者更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于一种终端设备进行详细的描述，该终端设备以智能手机为例。
存储器701，所述存储器701可以被cpu702、外设接口703等访问，所述存储器701可以包括高速随机存取存储器，还可以包括非易失性存储器，例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口703，所述外设接口703可以将设备的输入和输出外设连接到cpu702和存储器701。
i/o子系统709，所述i/o子系统709可以将设备上的输入输出外设，例如触摸屏712和其他输入/控制设备710，连接到外设接口703。i/o子系统709可以包括显示控制器7091和用于控制其他输入/控制设备710的一个或多个输入控制器7092。其中，一个或多个输入控制器7092从其他输入/控制设备710接收电信号或者向其他输入/控制设备710发送电信号，其他输入/控制设备710可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是，输入控制器7092可以与以下任一个连接：键盘、红外端口、usb接口以及诸如鼠标的指示设备。
其中，按照触摸屏的工作原理和传输信息的介质分类，触摸屏712可以为电阻式、电容感应式、红外线式或表面声波式。按照安装方式分类，触摸屏712可以为：外挂式、内置式或整体式。按照技术原理分类，触摸屏712可以为：矢量压力传感技术触摸屏、电阻技术触摸屏、电容技术触摸屏、红外线技术触摸屏或表面声波技术触摸屏。
触摸屏712，所述触摸屏712是用户终端与用户之间的输入接口和输出接口，将可视输出显示给用户，可视输出可以包括图形、文本、图标、视频等。可选的，触摸屏712将用户在触屏幕上触发的电信号(如接触面的电信号)，发送给处理器702。
i/o子系统709中的显示控制器7091从触摸屏712接收电信号或者向触摸屏712发送电信号。触摸屏712检测触摸屏上的接触，显示控制器7091将检测到的接触转换为与显示在触摸屏712上的用户界面对象的交互，即实现人机交互，显示在触摸屏712上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是，设备还可以包括光鼠，光鼠是不显示可视输出的触摸敏感表面，或者是由触摸屏形成的触摸敏感表面的延伸。
rf电路705，主要用于建立智能音箱与无线网络(即网络侧)的通信，实现智能音箱与无线网络的数据接收和发送。例如收发短信息、电子邮件等。
音频电路706，主要用于从外设接口703接收音频数据，将该音频数据转换为电信号，并且将该电信号发送给扬声器711。
扬声器711，用于将智能音箱通过rf电路705从无线网络接收的语音信号，还原为声音并向用户播放该声音。
电源管理芯片708，用于为cpu702、i/o子系统及外设接口所连接的硬件进行供电及电源管理。
在本实施例中，中央处理器702用于：
如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；
确定所述至少两个图像帧中移动干扰物的移动信息；
根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。
进一步的，所述确定所述至少两个图像帧中移动干扰物的移动信息，包括：
检测所述至少两个图像帧中的移动干扰物所在区域；
根据拍摄参数以及各图像帧中的移动干扰物所在区域，计算所述移动干扰物的移动信息。
进一步的，所述如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧，包括：
如果检测到预览画面中存在移动干扰物，则判断所述移动干扰物是否为目标干扰物；
若所述移动干扰物为目标干扰物，则连续拍摄至少两个图像帧。
进一步的，所述根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物，包括：
若拍摄图像为合影图像，则当所述移动干扰物的移动轨迹的长度大于预设长度阈值，或移动速度大于预设速度阈值时，在生成的目标拍摄图像中不保留所述移动干扰物。
进一步的，所述根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物，包括：
若拍摄模式为人像模式，则当所述移动干扰物的移动速度呈减小趋势，且所述移动干扰物的移动轨迹向拍摄目标方向延伸时，在生成的目标拍摄图像中保留所述移动干扰物。
进一步的，在所述确定是否在生成的目标拍摄图像中保留所述移动干扰物之后，还包括：
若在生成的目标拍摄图像中不保留移动干扰物，则根据图像帧的时域关联性，去除所述至少两个图像帧中的移动干扰物，得到预处理图像集合；
对所述预处理图像集合进行融合，生成目标拍摄图像。
进一步的，在所述确定是否在生成的目标拍摄图像中保留所述移动干扰物之后，还包括：
若在生成的目标拍摄图像中保留移动干扰物，则根据图像帧的时域关联性，对包含有移动干扰物的至少两个图像帧进行融合，生成目标拍摄图像。
本申请实施例还提供一种包含终端设备可执行指令的存储介质，所述终端设备可执行指令在由终端设备处理器执行时用于执行一种拍摄图像的处理方法，该方法包括：
如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧；
确定所述至少两个图像帧中移动干扰物的移动信息；
根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物。
进一步的，所述确定所述至少两个图像帧中移动干扰物的移动信息，包括：
检测所述至少两个图像帧中的移动干扰物所在区域；
根据拍摄参数以及各图像帧中的移动干扰物所在区域，计算所述移动干扰物的移动信息。
进一步的，所述如果检测到预览画面中存在移动干扰物，则连续拍摄至少两个图像帧，包括：
如果检测到预览画面中存在移动干扰物，则判断所述移动干扰物是否为目标干扰物；
若所述移动干扰物为目标干扰物，则连续拍摄至少两个图像帧。
进一步的，所述根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物，包括：
若拍摄图像为合影图像，则当所述移动干扰物的移动轨迹的长度大于预设长度阈值，或移动速度大于预设速度阈值时，在生成的目标拍摄图像中不保留所述移动干扰物。
进一步的，所述根据所述移动干扰物的移动信息，确定是否在生成的目标拍摄图像中保留所述移动干扰物，包括：
若拍摄模式为人像模式，则当所述移动干扰物的移动速度呈减小趋势，且所述移动干扰物的移动轨迹向拍摄目标方向延伸时，在生成的目标拍摄图像中保留所述移动干扰物。
进一步的，在所述确定是否在生成的目标拍摄图像中保留所述移动干扰物之后，还包括：
若在生成的目标拍摄图像中不保留移动干扰物，则根据图像帧的时域关联性，去除所述至少两个图像帧中的移动干扰物，得到预处理图像集合；
对所述预处理图像集合进行融合，生成目标拍摄图像。
进一步的，在所述确定是否在生成的目标拍摄图像中保留所述移动干扰物之后，还包括：
若在生成的目标拍摄图像中保留移动干扰物，则根据图像帧的时域关联性，对包含有移动干扰物的至少两个图像帧进行融合，生成目标拍摄图像。
本申请实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、rf等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请操作的计算机程序代码，程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++，还包括常规的过程式程序设计语言—诸如”c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的应用推荐操作，还可以执行本申请任意实施例所提供的拍摄图像的处理方法中的相关操作。
注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。
- 还没有人留言评论。精彩留言会获得点赞！