本发明涉及图像处理技术领域,特别是涉及到一种图像处理方法、装置和移动终端。
背景技术:
随着智能手机在生活中逐渐普及,手机的拍照性能也越来越强。在日常生活中,随手一拍分享到网络成为十分流行的事,而美颜功能更成为爱美人士喜爱的功能。在使用美颜功能进行拍照时,用户可以根据需要设置美颜处理项目,所述美颜处理项目如祛痘祛斑、放大眼睛、皮肤美白等,终端则根据设置的美颜处理项目对拍摄的照片进行美颜处理。其中,祛痘祛斑是为了消除人脸上的痘痘、斑点、疤痕、皱纹、痣等瑕疵,使得人脸看上去更加光洁美丽,是爱美人士特别是女性的最爱。
现有技术中,美颜处理等级(即处理强度)通常是设定好的,要么不可更改,要么需要每次照相时手动设定更改。然而,不同人的肤质千差万别,即使同一人的肤质也随着时间发生变化,当人脸的肤质较好时,痘痘、斑点或皱纹较少,当人脸的肤质较差时,痘痘、斑点或皱纹较多。如果美颜处理等级设定得较高,则会使得肤质较好的人脸被过度处理,导致图像失真,反而影响美颜效果;如果美颜处理等级设定得较低,则会使得肤质较差的人脸没有处理到位,导致斑点残留,从而影响美颜效果。特别是当多人合照时,由于一张照片中的所有人脸都只能使用一种美颜处理等级,因此将导致只有少部分人满意而其他人不满意的情形,影响了用户的满意度,降低了用户体验。
技术实现要素:
本发明的主要目的为提供一种图像处理方法、装置和移动终端,旨在提高终端的美颜效果,提升用户满意度。
为达以上目的,本发明提出一种图像处理方法,所述方法包括:
检测图像中的至少一人脸,并评估每一人脸的肤质级别;
根据每一人脸的肤质级别,匹配出对应的美颜处理等级;
根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理。
可选地,所述评估每一人脸的肤质级别的步骤包括:
对所述图像中的人脸进行滤波处理,获取所述人脸的轮廓细节特征;
统计所述轮廓细节特征的数量,根据所述轮廓细节特征的数量评估所述人脸的肤质级别;其中,所述轮廓细节特征的数量与所述肤质级别负相关。
可选地,所述对所述图像中的人脸进行滤波处理的步骤包括:
获取所述图像中的人脸的亮度信息;
通过滤波器对所述亮度信息进行滤波处理。
可选地,所述获取所述图像中的人脸的亮度信息的步骤包括:
将所述图像从rgb空间转换到yuv空间;
在所述yuv空间下统计所述图像的人脸区域的y值,将所述y值作为所述人脸的亮度信息。
可选地,所述滤波器为低通滤波器或高通滤波器。
可选地,所述根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理的步骤包括:根据匹配出的美颜处理等级,对所述人脸上具有轮廓细节特征的区域进行祛痘祛斑处理。
可选地,依次对所述图像中的每一人脸顺序执行以下操作:评估肤质级别、匹配美颜处理等级和进行祛痘祛斑处理。
可选地,所述检测图像中的至少一人脸的步骤包括:当拍摄获得一张照片时,检测所述照片中的至少一人脸。
可选地,所述检测图像中的至少一人脸的步骤包括:当拍摄界面显示预览图像时,检测所述预览图像中的至少一人脸。
可选地,所述检测图像中的至少一人脸的步骤包括:当接收到针对一图片的美颜指令时,检测所述图片中的至少一人脸。
可选地,所述检测图像中的至少一人脸的步骤之前还包括:启动相机程序获取带人脸的图像,并启动美颜处理。
可选地,所述根据每一人脸的肤质级别,匹配出对应的美颜处理等级的步骤包括:
调用与终端的识别码相关联的美颜处理数据库;
根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
可选地,所述识别码为电话号码。
可选地,所述根据每一人脸的肤质级别,匹配出对应的美颜处理等级的步骤包括:
调用与终端当前的运行模式相关联的美颜处理数据库;
根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
可选地,所述运行模式包括儿童模式、工作模式和家长模式中的至少两种。
可选地,所述美颜处理数据库存储于云端。
本发明同时提出一种图像处理装置,所述装置包括:
检测模块,用于检测图像中的至少一人脸,并评估每一人脸的肤质级别;
匹配模块,用于根据每一人脸的肤质级别,匹配出对应的美颜处理等级;
处理模块,用于根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理。
可选地,所述检测模块用于:
对所述图像中的人脸进行滤波处理,获取所述人脸的轮廓细节特征;统计所述轮廓细节特征的数量,根据所述轮廓细节特征的数量评估所述人脸的肤质级别;其中,所述轮廓细节特征的数量与所述肤质级别负相关。
可选地,所述检测模块用于:获取所述图像中的人脸的亮度信息,通过滤波器对所述亮度信息进行滤波处理。
可选地,所述检测模块用于:将所述图像从rgb空间转换到yuv空间;在所述yuv空间下统计所述图像的人脸区域的y值,将所述y值作为所述人脸的亮度信息。
可选地,所述处理模块用于:根据匹配出的美颜处理等级,对所述人脸上具有轮廓细节特征的区域进行祛痘祛斑处理。
可选地,所述装置依次对所述图像中的每一人脸顺序执行以下操作:评估肤质级别、匹配美颜处理等级和进行祛痘祛斑处理。
可选地,所述检测模块用于:当拍摄获得一张照片时,检测所述照片中的至少一人脸。
可选地,所述检测模块用于:当拍摄界面显示预览图像时,检测所述预览图像中的至少一人脸。
可选地,所述检测模块用于:当接收到针对一图片的美颜指令时,检测所述图片中的至少一人脸。
可选地,所述装置还包括启动模块,所述启动模块用于:启动相机程序获取带人脸的图像,并启动美颜处理,从而触发所述检测模块。
可选地,所述匹配模块用于:调用与终端的识别码相关联的美颜处理数据库;根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
可选地,所述匹配模块用于:调用与终端当前的运行模式相关联的美颜处理数据库;根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
本发明还提出一种移动终端,包括:
显示器;
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个应用程序被配置为用于执行上述图像处理方法。
本发明实施例所提供的一种图像处理方法和装置,在对图像进行美颜处理时,首先评估图像中的人脸的肤质级别,然后根据人脸的肤质级别自动匹配出对应的美颜处理等级来对该人脸进行祛痘祛斑处理。由于美颜处理等级与人脸的肤质级别相对应,因此不会出现过度处理或处理不到位的情形,能够达到最佳的美颜效果,极大的提高了用户的满意度。并且省去了用户对待处理的图像手动设置美颜处理等级的繁琐流程,简化了美颜处理的操作流程,提高了操作效率和终端的智能化水平。
同时,当图像中有多个人脸时,还可以根据每一人脸的肤质特征分别获取对应的美颜处理等级,从而有针对性的分别对每一人脸进行差异化的祛痘祛斑处理,使得最终的美颜效果符合图像中每一人脸的肤质特征,提高了图像整体的美颜效果和图像中所有人的满意度,从而避免因传统方法只能对同一张照片中的所有人脸设置相同的美颜处理等级而导致只有少部分人满意而其他人不满意的情形,大大提升了用户体验。
附图说明
图1是本发明第一实施例的图像处理方法的流程图;
图2是本发明实施例中评估每一人脸的肤质级别的步骤的具体流程图;
图3是本发明第二实施例的图像处理装置的模块示意图;
图4是本发明实施例中用于实现图像处理方法的移动终端的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
本技术领域技术人员可以理解,这里所使用的“终端”、“终端设备”既包括无线信号接收器的设备,其仅具备无发射能力的无线信号接收器的设备,又包括接收和发射硬件的设备,其具有能够在双向通信链路上,执行双向通信的接收和发射硬件的设备。这种设备可以包括:蜂窝或其他通信设备,其具有单线路显示器或多线路显示器或没有多线路显示器的蜂窝或其他通信设备;pcs(personalcommunicationsservice,个人通信系统),其可以组合语音、数据处理、传真和/或数据通信能力;pda(personaldigitalassistant,个人数字助理),其可以包括射频接收器、寻呼机、互联网/内联网访问、网络浏览器、记事本、日历和/或gps(globalpositioningsystem,全球定位系统)接收器;常规膝上型和/或掌上型计算机或其他设备,其具有和/或包括射频接收器的常规膝上型和/或掌上型计算机或其他设备。这里所使用的“终端”、“终端设备”可以是便携式、可运输、安装在交通工具(航空、海运和/或陆地)中的,或者适合于和/或配置为在本地运行,和/或以分布形式,运行在地球和/或空间的任何其他位置运行。这里所使用的“终端”、“终端设备”还可以是通信终端、上网终端、音乐/视频播放终端,例如可以是pda、mid(mobileinternetdevice,移动互联网设备)和/或具有音乐/视频播放功能的移动电话,也可以是智能电视、机顶盒等设备。
实施例一
参照图1,提出本发明第一实施例的图像处理方法,所述方法包括以下步骤:
s11、检测图像中的至少一人脸,并评估每一人脸的肤质级别。
本步骤s11中,终端通过人脸识别技术检测图像中的人脸,当检测到人脸时,通过人脸识别技术进行分析处理,评估人脸的肤质级别。进一步地,当检测到图像中至少有两个(张)人脸时,则分别评估每一人脸的肤质级别。
本发明实施例中,所述图像包括照片、图片、预览图像等。
可选地,终端每拍摄获得一张照片,则立即检测该照片中的至少一人脸,评估每一人脸的肤质级别,开始对该照片进行美颜处理,使得用户可以实时获得美颜处理后的照片。进一步地,可以设置美颜功能开关,只当美颜功能开关处于开启状态时,才自动对拍摄的照片进行美颜处理。
可选地,终端启动摄像头,根据摄像头采集的图像数据生成预览图像并显示在拍摄界面上,并立即检测该预览图像中的至少一人脸,评估每一人脸的肤质级别,开始对该预览图像进行美颜处理,使得用户可以实时的查看美颜处理效果。进一步地,可以设置美颜功能开关,只当美颜功能开关处于开启状态时,才自动对拍摄照片时的预览图像进行美颜处理。
可选地,用户可以随时发布针对本地存储的任一图片(包括照片)的美颜指令,当接收到针对一图片的美颜指令时,终端立即检测该图片中的至少一人脸,评估每一人脸的肤质级别,开始对该图片进行美颜处理。
可选地,终端启动相机程序获取带人脸的图像后,立即自动启动美颜处理,检测图像中的至少一人脸,评估每一人脸的肤质级别,开始对该图像进行美颜处理。
如图2所示,本发明实施例中,终端评估人脸的肤质级别的具体流程如下:
s111、对图像中的人脸进行滤波处理,获取人脸的轮廓细节特征。
对于人脸光洁度较高的区域,整体比较平坦则色泽统一,其像素的亮度是均匀的;而光洁度较低的区域,具有斑点、皱纹、痘痘等,其像素的亮度会发生突变。因此,本发明实施例通过对人脸的亮度信息进行滤波处理,就可以将光洁度较低的区域过滤出来,留下轮廓细节特征,从而将轮廓细节特征作为肤质特征,评估出人脸的肤质好坏。
具体的,终端首先获取图像中的人脸的亮度信息,然后通过低通滤波器或高通滤波器对人脸的亮度信息进行滤波处理,从而滤出人脸的轮廓细节特征,所述滤波器如高斯滤波器、双边滤波器等。当图像为黑白图像时,终端可以直接获取图像的亮度信息。当图像为彩色图像时,终端首先将图像从rgb空间转换到yuv空间,然后在yuv空间下统计图像的人脸区域的y值,而y值即为人脸的亮度信息。图像的rgb与yuv空间的转换为成熟的现有技术,在此不赘述。
在进行滤波处理时,终端可以像现有技术那样进行低通滤波处理或高通滤波处理。例如,进行低通滤波处理时,终端对人脸进行分区块遍历扫描处理,以5*5像素大小的区块为例,求取区块内的像素的亮度平均值,然后将平均值分别与该区块内每个像素的亮度值求差值,滤除差值的绝对值小于阈值的像素,滤出(留下或标记)差值的绝对值大于或等于阈值的像素作为轮廓细节特征,遍历人脸区域的所有区块,最终获取人脸的所有轮廓细节特征。
s112、统计轮廓细节特征的数量,根据轮廓细节特征的数量评估人脸的肤质级别。
本步骤s112中,终端将人脸的轮廓细节特征作为人脸的肤质特征,统计轮廓细节特征的数量,根据轮廓细节特征的数量评估人脸的肤质级别,其中,轮廓细节特征的数量与肤质级别负相关,即:人脸的轮廓细节特征越多,则说明肤质较差,肤质级别较低;人脸的轮廓细节特征越少,则说明肤质较好,肤质级别较高。通常的,人脸上轮廓细节特征的分布区域,则是斑点、麻子、痘痘、皱纹、痣、疤痕等瑕疵的分布区域。
在具体实施时,可以建立轮廓细节特征的数量与肤质级别的对应关系。举例而言,假设肤质级别包括好、中、差三个级别,当轮廓细节特征的数量大于或等于第一阈值时,评估人脸的肤质级别为差;当轮廓细节特征的数量介于第一阈值和第二阈值之间时,评估人脸的肤质级别为中;当轮廓细节特征的数量小于或等于第二阈值时,评估人脸的肤质级别为好。当然,也可以根据需要将肤质级别设定为两个或者多个,本发明对此不作限定。
除了采用上述例举的方式评估人脸的肤质级别外,还可以采用现有技术中的其它方式进行肤质级别的评估,本发明对此不作限定。
s12、根据每一人脸的肤质级别,匹配出对应的美颜处理等级。
本发明实施例中,可以预先建立肤质级别与美颜处理等级的对应关系,当终端评估出图像中的人脸的肤质级别时,就可以根据人脸的肤质级别匹配出与该肤质级别相对应的美颜处理等级。优选地,肤质级别与美颜处理等级一一对应。
本发明实施例中预先设定的肤质级别与美颜处理等级的对应关系,可以存储于终端本地,也可以存储于云端服务器,其中:
当存储于终端本地时,终端查询存储于本地的肤质级别与美颜处理等级的对应关系,获取与图像中人脸相匹配的美颜处理等级;
当存储于云端服务器时,终端可以将图像中人脸的肤质级别发送给云端服务器,云端服务器查询肤质级别与美颜处理等级的对应关系,获取与图像中人脸相匹配的美颜处理等级,并返回给终端。
进一步地,终端或云端服务器中可以存储至少两种不同的肤质级别与美颜处理等级的对应关系,每一种对应关系对应一个终端的识别码。终端首先获取本终端的识别码,然后调用与终端的识别码相关联的美颜处理数据库,该美颜处理数据库中存储有肤质级别与美颜处理等级的对应关系,最后根据每一人脸的肤质级别,在美颜处理数据库中匹配出对应的美颜处理等级。该识别码优选为终端的电话号码,使得不同的电话号码可以对应获取不同的美颜处理效果。此外,当美颜处理数据存储于云端时,识别码也可以是终端的唯一标识码,使得不同的终端可以对应获取不同的美颜处理效果。从而,满足了用户对美颜处理的多样化需求。
进一步地,终端或云端服务器中可以存储至少两种不同的肤质级别与美颜处理等级的对应关系,终端的每一个运行模式对应一种对应关系。终端首先检测当前的运行模式,然后调用与当前的运行模式相关联的美颜处理数据库,该美颜处理数据库中存储有肤质级别与美颜处理等级的对应关系,最后根据每一人脸的肤质级别,在美颜处理数据库中匹配出对应的美颜处理等级。该运行模式包括儿童模式、工作模式和家长模式中的至少两种,使得不同的运行模式可以对应获取不同的美颜处理效果,从而,满足了用户对美颜处理的多样化需求。
s13、根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理。
本步骤s13中,终端以匹配出的美颜处理等级对图像中的人脸进行祛痘祛斑处理,以消除人脸上的痘痘、斑点、麻子、皱纹、疤痕、痣等瑕疵,使得人脸显得更加光洁美丽。具体的处理方式与现有技术相同,在此不赘述。
当图像中至少有两个人脸时,则根据匹配出的美颜处理等级分别对每一人脸进行祛痘祛斑处理。例如:当根据人脸a的肤质级别匹配出美颜处理等级1时,则以美颜处理等级1对人脸a进行祛痘祛斑处理;当根据人脸b的肤质级别匹配出美颜处理等级2时,则以美颜处理等级2对人脸b进行祛痘祛斑处理;当根据人脸c的肤质级别匹配出美颜处理等级3时,则以美颜处理等级3对人脸c进行祛痘祛斑处理。
由于美颜处理等级与人脸的肤质级别相对应,因此不会出现过度处理或处理不到位的情形,能够达到最佳的美颜效果,极大的提高了用户的满意度。特别是多人合照时,每一个人脸都是以符合自身的肤质特征的美颜处理等级进行的祛痘祛斑处理,因此每一个人脸都能达到最佳的美颜效果,提升了照片整体的美颜效果,使得照片中所有都感到满意。
进一步地,当图像中至少有两个人脸时,终端优选依次对图像中的每一人脸顺序执行以下操作:评估肤质级别、匹配美颜处理等级和进行祛痘祛斑处理。从而可以提高处理效率,并避免处理遗漏。
进一步地,在对人脸进行祛痘祛斑处理时,终端根据匹配出的美颜处理等级,只对人脸上具有轮廓细节特征的区域进行祛痘祛斑处理。也就是说只对人脸上具有痘痘、斑点、麻子、皱纹、疤痕、痣等瑕疵的区域进行针对性处理,而不处理没有上述瑕疵的其它区域,从而保持其它区域的原有特征不变,防止对其它区域处理后导致图像失真,如眉毛、眼珠的颜色变淡等,提升了图像的整体效果。
本发明实施例的图像处理方法,在对图像进行美颜处理时,首先评估图像中的人脸的肤质级别,然后根据人脸的肤质级别自动匹配出对应的美颜处理等级来对该人脸进行祛痘祛斑处理。由于美颜处理等级与人脸的肤质级别相对应,因此不会出现过度处理或处理不到位的情形,能够达到最佳的美颜效果,极大的提高了用户的满意度。并且省去了用户对待处理的图像手动设置美颜处理等级的繁琐流程,简化了美颜处理的操作流程,提高了操作效率和终端的智能化水平。
同时,当图像中有多个人脸时,还可以根据每一人脸的肤质特征分别获取对应的美颜处理等级,从而有针对性的分别对每一人脸进行差异化的祛痘祛斑处理,使得最终的美颜效果符合图像中每一人脸的肤质特征,提高了图像整体的美颜效果和图像中所有人的满意度,从而避免因传统方法只能对同一张照片中的所有人脸设置相同的美颜处理等级而导致只有少部分人满意而其他人不满意的情形,大大提升了用户体验。
实施例二
参照图3,提出本发明第二实施例的图像处理装置,所述装置包括检测模块10、匹配模块20和处理模块30,其中:
检测模块10:用于检测图像中的至少一人脸,并评估每一人脸的肤质级别。
具体的,检测模块10通过人脸识别技术检测图像中的人脸,当检测到人脸时,通过人脸识别技术进行分析处理,评估人脸的肤质级别。进一步地,当检测到图像中至少有两个(张)人脸时,则分别评估每一人脸的肤质级别。
本发明实施例中,所述图像包括照片、图片、预览图像等。
可选地,终端每拍摄获得一张照片,检测模块10则立即检测该照片中的至少一人脸,评估每一人脸的肤质级别,开始对该照片进行美颜处理,使得用户可以实时获得美颜处理后的照片。进一步地,可以设置美颜功能开关,只当美颜功能开关处于开启状态时,才自动对拍摄的照片进行美颜处理。
可选地,终端启动摄像头,根据摄像头采集的图像数据生成预览图像并显示在拍摄界面上,检测模块10立即检测该预览图像中的至少一人脸,评估每一人脸的肤质级别,开始对该预览图像进行美颜处理,使得用户可以实时的查看美颜处理效果。进一步地,可以设置美颜功能开关,只当美颜功能开关处于开启状态时,才自动对拍摄照片时的预览图像进行美颜处理。
可选地,用户可以随时发布针对本地存储的任一图片(包括照片)的美颜指令,当接收到针对一图片的美颜指令时,检测模块10立即检测该图片中的至少一人脸,评估每一人脸的肤质级别,开始对该图片进行美颜处理。
可选地,终端还包括一启动模块,该启动模块用于启动相机程序获取带人脸的图像,并启动美颜处理。从而触发检测模块10,以使检测模块10检测图像中的至少一人脸,评估每一人脸的肤质级别,开始对该图像进行美颜处理。
检测模块10可以通过以下方式评估人脸的肤质级别:首先对图像中的人脸进行滤波处理,获取人脸的轮廓细节特征;然后统计轮廓细节特征的数量,根据轮廓细节特征的数量评估人脸的肤质级别。
检测模块10在获取人脸的轮廓细节特征时,首先获取图像中的人脸的亮度信息,然后通过低通滤波器或高通滤波器对人脸的亮度信息进行滤波处理,从而滤出人脸的轮廓细节特征,所述滤波器如高斯滤波器、双边滤波器等。当图像为黑白图像时,检测模块10可以直接获取图像的亮度信息。当图像为彩色图像时,检测模块10首先将图像从rgb空间转换到yuv空间,然后在yuv空间下统计图像的人脸区域的y值,而y值即为人脸的亮度信息。图像的rgb与yuv空间的转换为成熟的现有技术,在此不赘述。
在进行滤波处理时,检测模块10可以像现有技术那样进行低通滤波处理或高通滤波处理。例如,进行低通滤波处理时,检测模块10对人脸进行分区块遍历扫描处理,以5*5像素大小的区块为例,求取区块内的像素的亮度平均值,然后将平均值分别与该区块内每个像素的亮度值求差值,滤除差值的绝对值小于阈值的像素,滤出(留下或标记)差值的绝对值大于或等于阈值的像素作为轮廓细节特征,遍历人脸区域的所有区块,最终获取人脸的所有轮廓细节特征。
当获取轮廓细节特征后,检测模块10将人脸的轮廓细节特征作为人脸的肤质特征,统计轮廓细节特征的数量,根据轮廓细节特征的数量评估人脸的肤质级别,其中,轮廓细节特征的数量与肤质级别负相关,即:人脸的轮廓细节特征越多,则说明肤质较差,肤质级别较低;人脸的轮廓细节特征越少,则说明肤质较好,肤质级别较高。通常的,人脸上轮廓细节特征的分布区域,则是斑点、麻子、痘痘、皱纹、痣、疤痕等瑕疵的分布区域。
在具体实施时,可以建立轮廓细节特征的数量与肤质级别的对应关系。举例而言,假设肤质级别包括好、中、差三个级别,当轮廓细节特征的数量大于或等于第一阈值时,检测模块10则评估人脸的肤质级别为差;当轮廓细节特征的数量介于第一阈值和第二阈值之间时,检测模块10则评估人脸的肤质级别为中;当轮廓细节特征的数量小于或等于第二阈值时,检测模块10则评估人脸的肤质级别为好。当然,也可以根据需要将肤质级别设定为两个或者多个,本发明对此不作限定。
除了采用上述例举的方式评估人脸的肤质级别外,还可以采用现有技术中的其它方式进行肤质级别的评估,本发明对此不作限定。
匹配模块20:用于根据每一人脸的肤质级别,匹配出对应的美颜处理等级。
本发明实施例中,可以预先建立肤质级别与美颜处理等级的对应关系,当检测模块10评估出图像中的人脸的肤质级别时,匹配模块20就可以根据人脸的肤质级别匹配出与该肤质级别相对应的美颜处理等级。优选地,肤质级别与美颜处理等级一一对应。
本发明实施例中预先设定的肤质级别与美颜处理等级的对应关系,可以存储于终端本地,也可以存储于云端服务器,其中:
当存储于终端本地时,匹配模块20查询存储于本地的肤质级别与美颜处理等级的对应关系,获取与图像中人脸相匹配的美颜处理等级;
当存储于云端服务器时,匹配模块20可以将图像中人脸的肤质级别发送给云端服务器,云端服务器查询肤质级别与美颜处理等级的对应关系,获取与图像中人脸相匹配的美颜处理等级,并返回给匹配模块20。
进一步地,终端或云端服务器中可以存储至少两种不同的肤质级别与美颜处理等级的对应关系,每一种对应关系对应一个终端的识别码。匹配模块20首先获取本终端的识别码,然后调用与终端的识别码相关联的美颜处理数据库,该美颜处理数据库中存储有肤质级别与美颜处理等级的对应关系,最后根据每一人脸的肤质级别,在美颜处理数据库中匹配出对应的美颜处理等级。该识别码优选为终端的电话号码,使得不同的电话号码可以对应获取不同的美颜处理效果。此外,当美颜处理数据存储于云端时,识别码也可以是终端的唯一标识码,使得不同的终端可以对应获取不同的美颜处理效果。从而,满足了用户对美颜处理的多样化需求。
进一步地,终端或云端服务器中可以存储至少两种不同的肤质级别与美颜处理等级的对应关系,终端的每一个运行模式对应一种对应关系。匹配模块20首先检测当前的运行模式,然后调用与当前的运行模式相关联的美颜处理数据库,该美颜处理数据库中存储有肤质级别与美颜处理等级的对应关系,最后根据每一人脸的肤质级别,在美颜处理数据库中匹配出对应的美颜处理等级。该运行模式包括儿童模式、工作模式和家长模式中的至少两种,使得不同的运行模式可以对应获取不同的美颜处理效果,从而,满足了用户对美颜处理的多样化需求。
处理模块30:用于根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理。
具体的,处理模块30以匹配出的美颜处理等级对图像中的人脸进行祛痘祛斑处理,以消除人脸上的痘痘、斑点、麻子、皱纹、疤痕、痣等瑕疵,使得人脸显得更加光洁美丽。具体的处理方式与现有技术相同,在此不赘述。
当图像中至少有两个人脸时,处理模块30则根据匹配出的美颜处理等级分别对每一人脸进行祛痘祛斑处理。例如:当根据人脸a的肤质级别匹配出美颜处理等级1时,则以美颜处理等级1对人脸a进行祛痘祛斑处理;当根据人脸b的肤质级别匹配出美颜处理等级2时,则以美颜处理等级2对人脸b进行祛痘祛斑处理;当根据人脸c的肤质级别匹配出美颜处理等级3时,则以美颜处理等级3对人脸c进行祛痘祛斑处理。
由于美颜处理等级与人脸的肤质级别相对应,因此不会出现过度处理或处理不到位的情形,能够达到最佳的美颜效果,极大的提高了用户的满意度。特别是多人合照时,每一个人脸都是以符合自身的肤质特征的美颜处理等级进行的祛痘祛斑处理,因此每一个人脸都能达到最佳的美颜效果,提升了照片整体的美颜效果,使得照片中所有都感到满意。
进一步地,当图像中至少有两个人脸时,装置优选依次对图像中的每一人脸顺序执行以下操作:评估肤质级别、匹配美颜处理等级和进行祛痘祛斑处理。从而可以提高处理效率,并避免处理遗漏。
进一步地,在对人脸进行祛痘祛斑处理时,处理模块30根据匹配出的美颜处理等级,只对人脸上具有轮廓细节特征的区域进行祛痘祛斑处理。也就是说只对人脸上具有痘痘、斑点、麻子、皱纹、疤痕、痣等瑕疵的区域进行针对性处理,而不处理没有上述瑕疵的其它区域,从而保持其它区域的原有特征不变,防止对其它区域处理后导致图像失真,如眉毛、眼珠的颜色变淡等,提升了图像的整体效果。
本发明实施例的图像处理装置,在对图像进行美颜处理时,首先评估图像中的人脸的肤质级别,然后根据人脸的肤质级别自动匹配出对应的美颜处理等级来对该人脸进行祛痘祛斑处理。由于美颜处理等级与人脸的肤质级别相对应,因此不会出现过度处理或处理不到位的情形,能够达到最佳的美颜效果,极大的提高了用户的满意度。并且省去了用户对待处理的图像手动设置美颜处理等级的繁琐流程,简化了美颜处理的操作流程,提高了操作效率和终端的智能化水平。
同时,当图像中有多个人脸时,还可以根据每一人脸的肤质特征分别获取对应的美颜处理等级,从而有针对性的分别对每一人脸进行差异化的祛痘祛斑处理,使得最终的美颜效果符合图像中每一人脸的肤质特征,提高了图像整体的美颜效果和图像中所有人的满意度,从而避免因传统方法只能对同一张照片中的所有人脸设置相同的美颜处理等级而导致只有少部分人满意而其他人不满意的情形,大大提升了用户体验。
本发明实施例还提供了一种移动终端,如图4所示,为了便于说明,仅示出了与本发明实施例相关的部分,具体技术细节未揭示的,请参照本发明实施例方法部分。该终端可以为手机、平板电脑、pda(personaldigitalassistant,个人数字助理)、pos(pointofsales,销售终端)、车载电脑等任意终端设备,以终端为手机为例:
图4示出的是与本发明实施例提供的移动终端相关的手机的部分结构的框图。参考图4,手机包括:射频(radiofrequency,rf)电路310、存储器320、输入单元330、显示单元340、传感器350、音频电路360、无线保真(wireless-fidelity,wi-fi)模块370、处理器380、以及电源390等部件。本领域技术人员可以理解,图4中示出的手机结构并不构成对手机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图4对手机的各个构成部件进行具体的介绍:
rf电路310可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,给处理器380处理;另外,将设计上行的数据发送给基站。通常,rf电路310包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(lownoiseamplifier,lna)、双工器等。此外,rf电路310还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(globalsystemofmobilecommunication,gsm)、通用分组无线服务(generalpacketradioservice,gprs)、码分多址(codedivisionmultipleaccess,cdma)、宽带码分多址(widebandcodedivisionmultipleaccess,wcdma)、长期演进(longtermevolution,lte)、电子邮件、短消息服务(shortmessagingservice,sms)等。
存储器320可用于存储软件程序以及模块,处理器380通过运行存储在存储器320的软件程序以及模块,从而执行手机的各种功能应用以及数据处理。存储器320可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器320可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元330可用于接收输入的数字或字符信息,以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地,输入单元330可包括触控面板331以及其他输入设备332。触控面板331,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板331上或在触控面板331附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板331可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器380,并能接收处理器380发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板331。除了触控面板331,输入单元330还可以包括其他输入设备332。具体地,其他输入设备332可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元340可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元340可包括显示面板341,可选的,可以采用液晶显示器(liquidcrystaldisplay,lcd)、有机发光二极管(organiclight-emittingdiode,oled)等形式来配置显示面板341。进一步的,触控面板331可覆盖显示面板341,当触控面板331检测到在其上或附近的触摸操作后,传送给处理器380以确定触摸事件的类型,随后处理器380根据触摸事件的类型在显示面板341上提供相应的视觉输出。虽然在图4中,触控面板331与显示面板341是作为两个独立的部件来实现手机的输入和输入功能,但是在某些实施例中,可以将触控面板331与显示面板341集成而实现手机的输入和输出功能。
手机还可包括至少一种传感器350,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板341的亮度,接近传感器可在手机移动到耳边时,关闭显示面板341和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路360、扬声器361,传声器362可提供用户与手机之间的音频接口。音频电路360可将接收到的音频数据转换后的电信号,传输到扬声器361,由扬声器361转换为声音信号输出;另一方面,传声器362将收集的声音信号转换为电信号,由音频电路360接收后转换为音频数据,再将音频数据输出处理器380处理后,经rf电路310以发送给比如另一手机,或者将音频数据输出至存储器320以便进一步处理。
wifi属于短距离无线传输技术,手机通过wifi模块370可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图4示出了wifi模块370,但是可以理解的是,其并不属于手机的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器380是手机的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器320内的软件程序和/或模块,以及调用存储在存储器320内的数据,执行手机的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器380可包括一个或多个处理单元;优选的,处理器380可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器380中。
手机还包括给各个部件供电的电源390(比如电池),优选的,电源可以通过电源管理系统与处理器380逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管未示出,手机还可以包括摄像头、蓝牙模块等,在此不再赘述。
在本发明实施例中,该终端所包括的处理器380还具有以下功能:
检测图像中的至少一人脸,并评估每一人脸的肤质级别;
根据每一人脸的肤质级别,匹配出对应的美颜处理等级;
根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理。
本发明实施例公开了a1、一种图像处理方法,包括:
检测图像中的至少一人脸,并评估每一人脸的肤质级别;
根据每一人脸的肤质级别,匹配出对应的美颜处理等级;
根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理。
a2、如a1所述的图像处理方法,所述评估每一人脸的肤质级别的步骤包括:
对所述图像中的人脸进行滤波处理,获取所述人脸的轮廓细节特征;
统计所述轮廓细节特征的数量,根据所述轮廓细节特征的数量评估所述人脸的肤质级别;其中,所述轮廓细节特征的数量与所述肤质级别负相关。
a3、如a2所述的图像处理方法,所述对所述图像中的人脸进行滤波处理的步骤包括:
获取所述图像中的人脸的亮度信息;
通过滤波器对所述亮度信息进行滤波处理。
a4、如a3所述的图像处理方法,所述获取所述图像中的人脸的亮度信息的步骤包括:
将所述图像从rgb空间转换到yuv空间;
在所述yuv空间下统计所述图像的人脸区域的y值,将所述y值作为所述人脸的亮度信息。
a5、如a3所述的图像处理方法,所述滤波器为低通滤波器或高通滤波器。
a6、如a2-a5任一项所述的图像处理方法,所述根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理的步骤包括:
根据匹配出的美颜处理等级,对所述人脸上具有轮廓细节特征的区域进行祛痘祛斑处理。
a7、如a1-a5任一项所述的图像处理方法,依次对所述图像中的每一人脸顺序执行以下操作:评估肤质级别、匹配美颜处理等级和进行祛痘祛斑处理。
a8、如a1-a5任一项所述的图像处理方法,所述检测图像中的至少一人脸的步骤包括:当拍摄获得一张照片时,检测所述照片中的至少一人脸。
a9、如a1-a5任一项所述的图像处理方法,所述检测图像中的至少一人脸的步骤包括:当拍摄界面显示预览图像时,检测所述预览图像中的至少一人脸。
a10、如a1-a5任一项所述的图像处理方法,所述检测图像中的至少一人脸的步骤包括:当接收到针对一图片的美颜指令时,检测所述图片中的至少一人脸。
a11、如a1-a5任一项所述的图像处理方法,所述检测图像中的至少一人脸的步骤之前还包括:启动相机程序获取带人脸的图像,并启动美颜处理。
a12、如a1-a5任一项所述的图像处理方法,所述根据每一人脸的肤质级别,匹配出对应的美颜处理等级的步骤包括:
调用与终端的识别码相关联的美颜处理数据库;
根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
a13、如a12所述的图像处理方法,所述识别码为电话号码。
a14、如a1-a5任一项所述的图像处理方法,所述根据每一人脸的肤质级别,匹配出对应的美颜处理等级的步骤包括:
调用与终端当前的运行模式相关联的美颜处理数据库;
根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
a15、如a14所述的图像处理方法,所述运行模式包括儿童模式、工作模式和家长模式中的至少两种。
a16、如a12-a15任一项所述的图像处理方法,所述美颜处理数据库存储于云端。
本发明实施例还公开了b17、一种图像处理装置,包括:
检测模块,用于检测图像中的至少一人脸,并评估每一人脸的肤质级别;
匹配模块,用于根据每一人脸的肤质级别,匹配出对应的美颜处理等级;
处理模块,用于根据匹配出的美颜处理等级对每一人脸进行祛痘祛斑处理。
b18、如b17所述的图像处理装置,所述检测模块用于:
对所述图像中的人脸进行滤波处理,获取所述人脸的轮廓细节特征;统计所述轮廓细节特征的数量,根据所述轮廓细节特征的数量评估所述人脸的肤质级别;其中,所述轮廓细节特征的数量与所述肤质级别负相关。
b19、如b18所述的图像处理装置,所述检测模块用于:获取所述图像中的人脸的亮度信息,通过滤波器对所述亮度信息进行滤波处理。
b20、如b19所述的图像处理装置,所述检测模块用于:将所述图像从rgb空间转换到yuv空间;在所述yuv空间下统计所述图像的人脸区域的y值,将所述y值作为所述人脸的亮度信息。
b21、如b19所述的图像处理装置,所述滤波器为低通滤波器或高通滤波器。
b22、如b18-b21任一项所述的图像处理装置,所述处理模块用于:根据匹配出的美颜处理等级,对所述人脸上具有轮廓细节特征的区域进行祛痘祛斑处理。
b23、如b17-b21任一项所述的图像处理装置,所述装置依次对所述图像中的每一人脸顺序执行以下操作:
评估肤质级别、匹配美颜处理等级和进行祛痘祛斑处理。
b24、如b17-b21任一项所述的图像处理装置,所述检测模块用于:当拍摄获得一张照片时,检测所述照片中的至少一人脸。
b25、如b17-b21任一项所述的图像处理装置,所述检测模块用于:当拍摄界面显示预览图像时,检测所述预览图像中的至少一人脸。
b26、如b17-b21任一项所述的图像处理装置,所述检测模块用于:当接收到针对一图片的美颜指令时,检测所述图片中的至少一人脸。
b27、如b17-b21任一项所述的图像处理装置,所述装置还包括启动模块,所述启动模块用于:启动相机程序获取带人脸的图像,并启动美颜处理,从而触发所述检测模块。
b28、如b17-b21任一项所述的图像处理装置,所述匹配模块用于:调用与终端的识别码相关联的美颜处理数据库;根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
b29、如b28所述的图像处理装置,所述识别码为电话号码。
b30、如b17-b21任一项所述的图像处理装置,所述匹配模块用于:调用与终端当前的运行模式相关联的美颜处理数据库;根据每一人脸的肤质级别,在所述美颜处理数据库中匹配出对应的美颜处理等级。
b31、如b20所述的图像处理装置,所述运行模式包括儿童模式、工作模式和家长模式中的至少两种。
b32、如b28-b31任一项所述的图像处理装置,所述美颜处理数据库存储于云端。
本发明实施例还公开了c33、一种移动终端,包括:
显示器;
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个应用程序被配置为用于执行a1至a16任一项所述的方法。
本领域技术人员可以理解,本发明包括涉及用于执行本申请中所述操作中的一项或多项的设备。这些设备可以为所需的目的而专门设计和制造,或者也可以包括通用计算机中的已知设备。这些设备具有存储在其内的计算机程序,这些计算机程序选择性地激活或重构。这样的计算机程序可以被存储在设备(例如,计算机)可读介质中或者存储在适于存储电子指令并分别耦联到总线的任何类型的介质中,所述计算机可读介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、cd-rom、和磁光盘)、rom(read-onlymemory,只读存储器)、ram(randomaccessmemory,随机存储器)、eprom(erasableprogrammableread-onlymemory,可擦写可编程只读存储器)、eeprom(electricallyerasableprogrammableread-onlymemory,电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是,可读介质包括由设备(例如,计算机)以能够读的形式存储或传输信息的任何介质。
本技术领域技术人员可以理解,可以用计算机程序指令来实现这些结构图和/或框图和/或流图中的每个框以及这些结构图和/或框图和/或流图中的框的组合。本技术领域技术人员可以理解,可以将这些计算机程序指令提供给通用计算机、专业计算机或其他可编程数据处理方法的处理器来实现,从而通过计算机或其他可编程数据处理方法的处理器来执行本发明公开的结构图和/或框图和/或流图的框或多个框中指定的方案。
本技术领域技术人员可以理解,本发明中已经讨论过的各种操作、方法、流程中的步骤、措施、方案可以被交替、更改、组合或删除。进一步地,具有本发明中已经讨论过的各种操作、方法、流程中的其他步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。进一步地,现有技术中的具有与本发明中公开的各种操作、方法、流程中的步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。