一种增强现实ar图像处理方法、装置及智能终端的制作方法
【专利摘要】本发明实施例公开了一种增强现实AR图像处理方法、装置及智能终端。该方法包括：检测到启动图像处理模式后，获取待处理图像；获取用户输入的图像处理指令；将获取的图像处理指令与预先存储的AR图像处理指令进行匹配；若匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。本发明实施例中，依据用户输入的图像处理指令对待处理图像进行AR处理，实现了个性化的AR图像处理方式，使得用户能够快捷地获得满意的AR图像处理效果，提高了AR图像处理方法的效率以及便捷性。
【专利说明】
一种増强现实AR图像处理方法、装置及智能终端
技术领域
[0001]本发明涉及图像处理技术领域，尤其是一种增强现实AR图像处理方法、装置及智能终端。
【背景技术】
[0002]增强现实(Augmented Reality，AR)，把原本在现实世界的一定时间空间范围内很难体验到的实体信息例如，视觉信息、声音、味道或触觉等，通过科学技术模拟仿真后再叠加到现实世界被人类感官所感知，从而达到超越现实的感官体验，这种技术叫做增强现实技术，简称AR技术。然而，现有的AR图像处理方法存在图像处理效率低下以及便捷性低等问题。
【发明内容】
[0003]本发明实施例的目的在于提供一种增强现实AR图像处理方法、装置及智能终端，以提高AR图像处理方法的效率以及便捷性。
[0004]第一方面，本发明实施例提供了一种增强现实AR图像处理方法，包括:
[0005]检测到启动图像处理模式后，获取待处理图像；
[0006]获取用户输入的图像处理指令；
[0007]将获取的图像处理指令与预先存储的AR图像处理指令进行匹配；
[0008]若匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。
[0009]第二方面，本发明实施例提供了一种增强现实AR图像处理装置，包括:
[0010]图像获取模块，用于检测到启动图像处理模式后，获取待处理图像；
[0011 ]指令获取模块，用于获取用户输入的图像处理指令；
[0012]指令匹配模块，用于将获取的图像处理指令与预先存储的AR图像处理指令进行匹配；
[0013]图像处理模块，用于若所述指令匹配模块匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。
[0014]第三方面，本发明实施例提供了一种智能终端，包括本发明任意实施例提供的增强现实AR图像处理装置。
[0015]本发明实施例提供的技术方案，通过在启动图像处理模式后，获取待处理图像及用户输入的图像处理指令，将用户输入的图像处理指令与预先存储的AR图像处理指令进行匹配，若匹配成功，则依据匹配到的AR图像处理指令对待处理图像进行AR处理。由于该方法依据用户输入的图像处理指令对待处理图像进行AR处理，实现了个性化的AR图像处理方式，使得用户能够快捷地获得满意的AR图像处理效果，提高了 AR图像处理方法的效率以及便捷性。
【附图说明】
[0016]图1a为本发明实施例一提供的AR图像处理方法的流程示意图；
[0017]图1b为本发明实施例一提供的AR图像处理效果示意图；
[0018]图2为本发明实施例二提供的AR图像处理方法的流程示意图；
[0019]图3为本发明实施例三提供的AR图像处理方法的流程示意图；
[0020]图4为本发明实施例四提供的AR图像处理装置的结构示意图；
[0021]图5为本发明实施例五提供的智能终端的结构示意图。
【具体实施方式】
[0022]下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
[0023]实施例一
[0024]图1a为本发明实施例一提供的AR图像处理方法的流程示意图，该方法可以由AR图像处理装置执行，其中该装置可以由软件和/或硬件实现，可作为智能终端的一部分被内置在智能终端内部。如图1a所示，该实现流程包括:
[0025]步骤11、检测到启动图像处理模式后，获取待处理图像。
[0026]在本实施例中，智能终端中提供有图像处理模式，用于对智能终端中的图像进行AR或美颜等图像处理。待处理图像可以是智能终端中摄像头拍摄的图像，也可以是智能终端接收或下载的图像。例如，在智能终端处于图像处理模式后，可以将用户从相册应用中选择的图像作为待处理图像。
[0027]步骤12、获取用户输入的图像处理指令。
[0028]在本实施例中，图像处理指令用于触发对待处理图像的图像处理操作。
[0029]示例性的，获取用户输入的图像处理指令，可以包括:获取用户通过语音方式、物理按键方式或文字方式输入的图像处理指令。为了提高图像处理指令输入操作的便捷性，优选地用户通过语音方式输入进行指令输入。具体的，获取用户通过语音方式输入的音频图像处理指令，采用语音识别技术将音频图像处理指令转化为文字图像处理指令，以便于后续步骤13中将用户输入的图像处理指令与预先存储的AR图像处理指令进行匹配。
[0030]需要说明的是，也可以直接将音频图像处理指令与预先存储的AR图像处理指令进行匹配。并且，本实施例中对图像处理指令的输入方式不作具体限定，如用户也可以通过图片方式输入图像处理指令，以将图片内容作为虚拟效果添加到待处理图像中等。
[0031]步骤13、将获取的图像处理指令与预先存储的AR图像处理指令进行匹配。
[0032]在本实施例中，预先存储的AR图像处理指令可以是预先统一设置的，也可以依据用户需求进行个性化设置。并且，AR图像处理指令可以存储于智能终端或服务器;也可以二者均存储，若服务器中的AR图像处理指令有更新，则将更新内容同步到客户端中。
[0033]具体的，若AR图像处理指令是文字格式，则可以基于语义识别技术，将获取的图像处理指令与AR图像处理指令进行匹配。例如，基于语义识别技术对获取的图像处理指令与AR图像处理指令进行处理，并计算二者之间的相似度，若二者之间的相似度大于相似度阈值，则确定匹配成功;否则，确定匹配不成功。本实施例中对相似度阈值不作具体限定，如相似度阈值可以为0.8。
[0034]步骤14、若匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。
[0035]参考图lb，若匹配到的AR图像处理指令为添加圣诞老人指令，则可以在包含小女孩的待处理图像中添加虚拟圣诞老人图片。需要说明的是，本实施例中对匹配到的AR图像处理指令并不作具体限定，只需通过在待处理图像中增加虚拟画面以调整待处理图像的显示效果即可。
[0036]本实施例提供的技术方案，通过在启动图像处理模式后，获取待处理图像及用户输入的图像处理指令，将用户输入的图像处理指令与预先存储的AR图像处理指令进行匹配，若匹配成功，则依据匹配到的AR图像处理指令对待处理图像进行AR处理。由于该方法依据用户输入的图像处理指令对待处理图像进行AR处理，实现了个性化的AR图像处理方式，使得用户能够快捷地获得满意的AR图像处理效果，提高了 AR图像处理方法的效率以及便捷性。
[0037]示例性的，将获取的图像处理指令与预先存储的AR图像处理指令进行匹配之后，还可以包括:
[0038]若匹配不成功，则通过提示消息以提示用户调整图像处理指令。
[0039]示例性的，对所述待处理图像进行AR处理，可以包括:
[0040]对所述待处理图像中包含的AR目标进行提亮、拉伸、放大、雾化、增加虚拟图片、增加虚拟动画、2D绘制和3D绘制中的至少一种处理。
[0041 ] 实施例二
[0042]本实施例在上述实施例一的基础上，提供了一种新的AR图像处理方法。图2为本发明实施例二提供的AR图像处理方法的流程示意图，如图2所示，该实现流程包括:
[0043]步骤21、检测到启动图像处理模式后，获取待处理图像。
[0044]步骤22、获取用户输入的图像处理指令。
[0045]步骤23、将获取的图像处理指令与预先存储的AR图像处理指令进行匹配，若匹配成功，则继续执行步骤24;若匹配不成功，则通过提示消息以提示用户调整图像处理指令。
[0046]在本实施例中，提示消息可以为语音形式和/或文本方式。具体的，可以采用语义识别技术，将获取的图像处理指令与预先存储的AR图像处理指令进行匹配，若匹配不成功，则智能终端播放或展示提醒消息，即，若匹配不成功可以通过提示消息指导用户输入图像处理指令，进一步提高了 AR图像处理方法的便捷性。
[0047]步骤24、确定匹配到的AR图像处理指令所属的图像场景与所述待处理图像所属的图像场景是否一致，若是，则继续执行步骤25;否则，跳转执行步骤26。
[0048]在本实施例中，图像场景可以包括人物图像场景、景物图像场景、白天场景或夜晚场景等。每一图像场景可以对应有多个AR图像处理指令。待处理图像所属的图像场景可以依据待处理图像中包含的图片内容进行确定，如若待处理图像中包含景物而不包含人物，则可以确定待处理图像所属的图像场景为景物图像场景;若待处理图像中包含人物，则可以确定待处理图像所属的图像场景为人物图像。又或者，若待处理图像中包含月亮或星星等，则可以确定待处理图像为夜晚场景，若待处理图像中包含太阳或白云等，则可以确定待处理图像为白天场景。
[0049 ] 步骤25、对所述待处理图像进行AR处理。
[0050]具体的，在匹配到的AR图像处理指令所属的图像场景与所述待处理图像所属的图像场景一致时，采用匹配到的AR图像处理指令对待处理图像进行AR处理。
[0051 ] 步骤26、拒绝对所述待处理图像进行AR处理。
[0052]具体的，若匹配到的AR图像处理指令所属的图像场景与所述待处理图像所属的图像场景不一致，则拒绝对待处理图像进行AR处理，有效避免了对待处理图像的误处理。
[0053]本实施例提供的技术方案，在启动图像处理模式后，获取与用户输入的图像处理指令匹配的AR图像处理指令，并确定匹配到的AR图像处理指令所属的图像场景与待处理图像所属的图像场景是否一致，若一致，则采用匹配到的AR图像处理指令对待处理图像进行AR处理;若不一致，则拒绝对待处理图像进行AR处理，有效避免了对待处理图像的误处理，进一步提升了用户体验的满意度。
[0054]实施例三
[0055]本实施例在上述实施例一的基础上，提供了一种新的AR图像处理方法。图3为本发明实施例三提供的AR图像处理方法的流程示意图，如图3所示，该实现流程包括:
[0056]步骤31、依据用户操作，确定AR图像处理指令与AR处理方式之间的映射关系。
[0057]在本实施例中，AR图像指令与AR处理方式之间的映射关系可以存储于智能终端或服务器;也可以二者均存储，若服务器中的映射关系有更新，则将更新内容同步到客户端中。
[0058]需要说明的是，上述映射关系可以依据用户操作确定，也可以由服务器统一确定。
[0059]步骤32、检测到启动图像处理模式后，获取待处理图像。
[0060]步骤33、获取用户输入的图像处理指令。
[0061]步骤34、将获取的图像处理指令与预先存储的AR图像处理指令进行匹配。
[0062]步骤35、若匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。
[0063]具体的，若匹配成功，则依据步骤31中的映射关系确定匹配到的AR图像处理指令对应的AR处理方式，并采用确定的AR处理方式对待处理图像进行AR处理。
[0064]需要说明的是，本实施例中对步骤31的执行顺序不作具体限定，只需步骤31在步骤35之前执行即可。
[0065]本实施例提供的技术方案，通过在依据匹配到的AR处理指令对待处理图像进行AR图像处理之前，还确定AR处理指令与AR处理方式之间的映射关系，以便于后续依据用户需求进行AR处理。
[0066]实施例四
[0067]图4为本发明实施例四提供的AR图像处理装置的结构示意图，该装置可以配置于智能终端中。如图4所示，该AR图像处理装置的具体结构可以包括:
[0068]图像获取模块41，用于检测到启动图像处理模式后，获取待处理图像；
[0069]指令获取模块42，用于获取用户输入的图像处理指令；
[0070]指令匹配模块43，用于将获取的图像处理指令与预先存储的AR图像处理指令进行匹配；
[0071]图像处理模块44，用于若所述指令匹配模块匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。
[0072]示例性的，所述图像处理模块44具体可以用于:
[0073]确定匹配到的AR图像处理指令所属的图像场景与所述待处理图像所属的图像场景是否一致；
[0074]若是，则对所述待处理图像进行AR处理；否则，拒绝对所述待处理图像进行AR处理。
[0075]示例性的，该装置还可以包括:
[0076]提醒模块，用于在将获取的图像处理指令与预先存储的AR图像处理指令进行匹配之后，若所述指令匹配模块匹配不成功，则通过提示消息以提示用户调整图像处理指令。
[0077]示例性的，所述指令获取模块42具体可以用于:
[0078]获取用户通过语音方式、物理按键方式或文字方式输入的图像处理指令。
[0079]示例性的，该装置还可以包括:
[0080]映射关系确定模块，用于在将获取的图像处理指令与预先存储的AR图像处理指令进行匹配之前，依据用户操作，确定AR图像处理指令与AR处理方式之间的映射关系。
[0081]示例性的，所述图像处理模块44具体可以用于:
[0082]对所述待处理图像中包含的AR目标进行提亮、拉伸、放大、雾化、增加虚拟图片、增加虚拟动画、2D绘制和3D绘制中的至少一种处理。
[0083]本实施例提供的AR图像处理装置，与本发明任意实施例所提供的AR图像处理方法属于同一发明构思，可执行本发明任意实施例所提供的AR图像处理方法，具备执行AR图像处理方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明任意实施例提供的AR图像处理方法。
[0084]实施例五
[0085]本实施例提供了一种智能终端，该智能终端可以包括本发明任意实施例提供的AR图像处理装置。图5为本发明实施例五提供的一种智能终端的结构示意图，如图5所示，图示智能手机500可以包括:存储器501、中央处理器(Central Processing Unit，以下简称CPU)502、外设接口503、RF电路505、音频电路506、扬声器511、电源管理芯片508、输入/输出(I/O)子系统509、其他输入/控制设备510以及外部端口 504，这些部件通过一个或多个通信总线或信号线507来通信。
[0086]应该理解的是，图示智能手机500仅仅智能终端的一个范例，并且智能手机500可以具有比图中所示出的更多的或者更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
[0087]下面就本实施例提供的用于AR图像处理的智能手机进行详细的描述。
[0088]存储器501:所述存储器501可以被CPU502、外设接口503等访问，所述存储器501可以包括高速随机存取存储器，还可以包括非易失性存储器，例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
[0089]外设接口503，所述外设接口可以将设备的输入和输出外设连接到CPU502和存储器 501。
[0090]I/O子系统509:所述I/O子系统509可以将设备上的输入输出外设，例如触摸屏502(相当于上述实施例中的显示器)和其他输入/控制设备510，连接到外设接口 503。1/0子系统509可以包括显示控制器5091和用于控制其他输入/控制设备510的一个或多个输入控制器5092。其中，一个或多个输入控制器5092从其他输入/控制设备510接收电信号或者向其他输入/控制设备510发送电信号，其他输入/控制设备510可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是，输入控制器5092可以与以下任一个连接:键盘、红外端口、USB接口以及诸如鼠标的指示设备。
[0091]触摸屏512:所述触摸屏512是用户终端与用户之间的输入接口和输出接口，将可视输出显示给用户，可视输出可以包括图形、文本、图标、视频等。
[0092]I/O子系统509中的显示控制器5091从触摸屏512接收电信号或者向触摸屏512发送电信号。触摸屏512检测触摸屏上的接触，显示控制器5091将检测到的接触转换为与显示在触摸屏512上的用户界面对象的交互，即实现人机交互，显示在触摸屏512上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是，设备还可以包括光鼠，光鼠是不显示可视输出的触摸敏感表面，或者是由触摸屏形成的触摸敏感表面的延伸。
[0093]RF电路505，主要用于建立手机与无线网络(即网络侧)的通信，实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地，RF电路505接收并发送RF信号，RF信号也称为电磁信号，RF电路505将电信号转换为电磁信号或将电磁信号转换为电信号，并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路505可以包括用于执行这些功能的已知电路，其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC芯片组、用户标识模块(Subscriber IdentityModule, SIM)等等。
[0094]音频电路506，主要用于从外设接口503接收音频数据，将该音频数据转换为电信号，并且将该电信号发送给扬声器511。
[0095]扬声器511，用于将手机通过RF电路505从无线网络接收的语音信号，还原为声音并向用户播放该声音。
[0096]电源管理芯片508，用于为CPU502、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
[0097]本发明实施例提供的CPU502可执行如下操作:
[0098]检测到启动图像处理模式后，获取待处理图像；
[0099]获取用户输入的图像处理指令；
[0100]将获取的图像处理指令与预先存储的AR图像处理指令进行匹配；
[0101]若匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。
[0102]注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
【主权项】
1.一种增强现实AR图像处理方法，其特征在于，包括: 检测到启动图像处理模式后，获取待处理图像； 获取用户输入的图像处理指令； 将获取的图像处理指令与预先存储的AR图像处理指令进行匹配； 若匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。2.根据权利要求1所述的方法，其特征在于，依据匹配到的AR图像处理指令所述待处理图像进行AR处理，包括: 确定匹配到的AR图像处理指令所属的图像场景与所述待处理图像所属的图像场景是否一致； 若是，则对所述待处理图像进行AR处理;否则，拒绝对所述待处理图像进行AR处理。3.根据权利要求1所述的方法，其特征在于，获取用户输入的图像处理指令，包括: 获取用户通过语音方式、物理按键方式或文字方式输入的图像处理指令。4.根据权利要求1所述的方法，其特征在于，将获取的图像处理指令与预先存储的AR图像处理指令进行匹配之前，还包括: 依据用户操作，确定AR图像处理指令与AR处理方式之间的映射关系。5.根据权利要求1所述的方法，其特征在于，对所述待处理图像进行AR处理，包括: 对所述待处理图像中包含的AR目标进行提亮、拉伸、放大、雾化、增加虚拟图片、增加虚拟动画、2D绘制和3D绘制中的至少一种处理。6.一种增强现实AR图像处理装置，其特征在于，包括: 图像获取模块，用于检测到启动图像处理模式后，获取待处理图像； 指令获取模块，用于获取用户输入的图像处理指令； 指令匹配模块，用于将获取的图像处理指令与预先存储的AR图像处理指令进行匹配；图像处理模块，用于若所述指令匹配模块匹配成功，则依据匹配到的AR图像处理指令对所述待处理图像进行AR处理。7.根据权利要求6所述的装置，其特征在于，所述图像处理模块具体用于: 确定匹配到的AR图像处理指令所属的图像场景与所述待处理图像所属的图像场景是否一致； 若是，则对所述待处理图像进行AR处理;否则，拒绝对所述待处理图像进行AR处理。8.根据权利要求6所述的装置，其特征在于，所述指令获取模块具体用于: 获取用户通过语音方式、物理按键方式或文字方式输入的图像处理指令。9.根据权利要求6所述的装置，其特征在于，还包括: 映射关系确定模块，用于在将获取的图像处理指令与预先存储的AR图像处理指令进行匹配之前，依据用户操作，确定AR图像处理指令与AR处理方式之间的映射关系。10.根据权利要求6所述的装置，其特征在于，所述图像处理模块具体用于: 对所述待处理图像中包含的AR目标进行提亮、拉伸、放大、雾化、增加虚拟图片、增加虚拟动画、2D绘制和3D绘制中的至少一种处理。11.一种智能终端，其特征在于，包括权利要求6-10任一项所述的增强现实AR图像处理目.ο
【文档编号】G06T19/00GK105979035SQ201610503240
【公开日】2016年9月28日
【申请日】2016年6月28日
【发明人】孙剑波
【申请人】广东欧珀移动通信有限公司