肖像画生成装置、肖像画生成方法
【技术领域】
[0001]本发明涉及从面部图像生成肖像画的技术。
【背景技术】
[0002]已知如下技术:基于拍摄面部而获得的图像数据，通过计算机图像处理而自动或者半自动地制作肖像画。例如，在专利文献1中，公开了如下方法:从面部图像提取面部器官(眼睛、鼻子、嘴等)、轮廓、发型等的特征量，基于该特征量，从预先准备的多个肖像画用部件(part)中选择适当的部件而配置，从而制作肖像画。除此之外，还提出了从图像生成肖像画的各种方法，但不论哪种方法在想要使肖像画制作成尽可能与输入图像的面部相似的点上是共同的。但是，忠实地再现了原来的面部的肖像画不一定被用户所喜欢。例如，存在即使对眼睛小而感到自卑的人提示了将眼睛的部件减小的肖像画，也得不到用户的满足的可能性。此外，由于使用了在面部浮肿时拍摄的图像，所以被制作轮廓比原本大的肖像画也不好。相反地，本人认为是魅力点的特征在肖像画中没有反映或者不明显，也违背用户的期待。
[0003]因此，以往，为了制作用户喜欢的肖像画，在肖像画制作后修正了部件的大小和配置。此外，在专利文献2中，提出了如下方法:自动修正，使得将轮廓或眼睛等的部件的纵横比、面积、角度接近预先准备的理想的值。
[0004]但是，在肖像画制作后修正部件的方法中，难以以保留了像本人的样子的状态，将用户希望的变更反映到肖像画。这是因为在制作了肖像画的时刻(即，在从面部图像只提取了每个部件的特征的时刻)，几乎失去了表示本人的面部特征的信息。例如，在对肖像画进行了增大眼睛的修正的情况下，由于肖像画的信息量比原来的图像降低(例如，泪袋被消除等)，所以存在眼睛周边的表现变得不像本人的可能性。此外，在对肖像画进行了减小面部的修正的情况下，也由于信息量比原来的图像降低(例如，阴影被消除等)，所以存在脸蛋儿的表现不像本人的可能性。
[0005]现有技术文献
[0006]专利文献
[0007]专利文献1:(日本)特开2004 - 288082号公报
[0008]专利文献2:(日本)特开2004 - 110728号公报
【发明内容】
[0009]本发明是鉴于上述实情而完成的，其目的在于，提供一种用于在从面部图像制作肖像画时，以发挥了像本人的样子的状态施加期望的修正的技术。
[0010]为了达到上述目的，本发明的肖像画生成装置的特征在于，包括:图像取得部，取得拍摄了对象者的面部的面部图像；图像校正部，对所述面部图像实施至少校正面部的一部分的校正处理而生成校正面部图像；以及肖像画生成部，使用所述校正面部图像来生成所述对象者的肖像画。
[0011]根据该结构，通过对原来的面部图像实施校正处理，例如能够对对象者感到自卑的部分进行修正，或者强调对象者的面部的特征，所以能够生成符合对象者的喜好的肖像画。并且，由于对原来的面部图像实施这样的校正处理(而不是对肖像画)，所以能够不会损失与本人的面部特征有关的信息量而进行校正。因此，能够获得以发挥了像本人的样子的状态进行了期望的校正处理的肖像画。
[0012]优选地，所述肖像画生成部从所述校正面部图像提取与面部相关联的特征量，基于所述提取的特征量来生成所述对象者的肖像画。由此，能够获得适当地反映了校正后的面部的特征的肖像画。
[0013]优选地，还包括校正内容指定部，该校正内容指定部使用户指定对所述面部图像实施的校正处理的内容，所述图像校正部根据在所述校正内容指定部中由用户所指定的校正处理的内容，进行所述面部图像的校正。由此，由于能够使用户指定校正处理的内容，所以能够提供符合用户本人的希望的肖像画。
[0014]优选地，还包括估计部，该估计部基于所述面部图像来估计所述对象者的属性或者状态中的至少任一个，所述校正内容指定部根据所述估计部的估计结果来变更用户能够指定的校正处理的内容。由此，由于能够根据对象者的属性或状态来变更能够指定的校正处理的内容，对用户推荐适当的校正，所以能够实现用户的操作负担的减轻或可用性的提尚ο
[0015]优选地，还包括显著部分确定部，该显著部分确定部基于所述面部图像，在所述对象者的面部中确定具有显著性的显著部分，所述校正内容指定部根据所述显著部分确定部的确定结果来变更用户能够指定的校正处理的内容。由此，由于对对象者的面部中的显著部分实施校正处理，所以能够生成强调了该人的面部的特征的肖像画或者使该人感到自卑的部分变得不明显的肖像画。
[0016]优选地，还包括估计部，该估计部基于所述面部图像来估计所述对象者的属性或者状态中的至少任一个，所述图像校正部根据所述估计部的估计结果来变更对所述面部图像实施的校正处理的内容。由此，由于根据对象者的属性或状态来自动决定校正处理的内容，所以能够消除用户的操作负担，实现流畅且短时间的肖像画制作。
[0017]优选地，还包括显著部分确定部，该显著部分确定部基于所述面部图像，在所述对象者的面部中确定具有显著性的显著部分，所述图像校正部根据所述显著部分确定部的确定结果来变更对所述面部图像实施的校正处理的内容。由此，由于对对象者的面部中的显著部分实施校正处理，所以能够生成强调了该人的面部的特征的肖像画或者使该人感到自卑的部分变得不明显的肖像画。此外，由于根据显著部分来自动决定校正处理的内容，所以能够消除用户的操作负担，实现流畅且短时间的肖像画制作。
[0018]优选地，还包括他人图像取得部，该他人图像取得部取得他人的面部图像，所述图像校正部校正所述对象者的面部图像，以使所述对象者的面部图像内的面部与所述他人的面部图像内的面部相似。由此，能够制作保持像本人的样子且看起来还像名人等的他人的面部的肖像画。
[0019]另外，本发明能够作为具有上述结构或功能的至少一部分的肖像画生成装置、或者具备肖像画生成装置的电子设备来把握。此外，本发明还能够作为包括上述处理的至少一部分的肖像画生成方法、或者用于使计算机执行该方法的程序、或者非临时性地记录了这样的程序的计算机能够读取的记录介质来把握。上述各个结构以及处理只要不产生技术上的矛盾，则能够相互组合而构成本发明。
[0020]根据本发明，在从面部图像制作肖像画时，能够以发挥了像本人的样子的状态施加期望的修正。
【附图说明】
[0021]图1是示意性地表示第一实施方式的肖像画生成装置的结构的框图。
[0022]图2是第一实施方式的肖像画生成处理的流程图。
[0023]图3(a)?(c)是原面部图像、校正后面部图像、肖像画的例。
[0024]图4是示意性地表示第二实施方式的肖像画生成装置的结构的框图。
[0025]图5是第二实施方式的肖像画生成处理的流程图。
[0026]图6(a)?(c)是第二实施方式的肖像画生成装置的画面例。
[0027]图7是示意性地表示第三实施方式的肖像画生成装置的结构的框图。
[0028]图8(a)?(c)是在第三实施方式中使用的估计结果和校正处理的内容的对应表格的例。
[0029]图9是第三实施方式的肖像画生成处理的流程图。
[0030]图10是第三实施方式的肖像画生成装置的画面例。
[0031]图11是第四实施方式的肖像画生成处理的流程图。
[0032]图12是示意性地表示第五实施方式的肖像画生成装置的结构的框图。
[0033]图13是示意性地表示第六实施方式的肖像画生成装置的结构的框图。
[0034]图14是第六实施方式的肖像画生成处理的流程图。
[0035]标号说明
[0036]10:信息处理装置、11:摄像装置、12:显示装置、13:输入装置
[0037]60:原面部图像的显示区域、61:校正面部图像的显示区域
[0038]100:图像取得部、101:图像校正部、102:肖像画生成部、102a:肖像画用部件数据库、103:装饰处理部、104:校正内容指定部、105:估计部、106:显著部分确定部、107:面部图像数据库、108:他人图像取得部、109:类似面部选择部
【具体实施方式】
[0039]本发明涉及基于拍摄面部而获得的面部图像数据，通过计算机图像处理而自动或者半自动地生成肖像画的技术。该技术适合应用于例如在个人计算机、智能手机、平板终端、便携电话、游戏机、其他的电子设备中动作的肖像画