图像处理装置、图像处理系统及图像处理方法
【专利说明】图像处理装置、图像处理系统及图像处理方法
[0001]相关申请的交叉引用
[0002]本申请以日本专利申请2014 — 180291(申请日:2014年9月4日)为基础，从该申请享受优先权。本申请通过参照该申请而包括该申请的内容的全部。
技术领域
[0003]本发明涉及图像处理装置、图像处理系统及图像处理方法。
【背景技术】
[0004]近年来，开发了例如用户能够将试穿对象的衣服虚拟地试穿(以下称作虚拟试穿)的技术。
[0005]根据该技术，例如能够在设置于与用户面对的位置处的显示部上显示在包含由摄像部摄像的用户(被摄体)的图像上将衣服的图像重叠得到的合成图像，所以用户能够不实际进行试穿而选择该用户喜好的衣服。
[0006]但是，以往由于将预先摄像的衣服的图像原样重叠在包含用户的图像上，所以有难以将自然的观感的试穿状态向用户提示的不良状况。
【发明内容】
[0007]所以，本发明所要解决的课题在于，提供一种在虚拟试穿时能够将自然的观感的试穿状态向用户提示的图像处理装置、图像处理系统、图像处理方法及程序。
[0008]根据实施方式，图像处理装置具备被摄体图像取得机构、第1衣服图像取得机构及第2衣服图像生成机构。上述被摄体图像取得机构取得作为由摄像部连续摄像的被摄体的图像的被摄体图像。上述第1衣服图像取得机构取得作为由在上述取得的被摄体图像中包含的被摄体所穿用的衣服的图像的第1衣服图像。上述第2衣服图像生成机构对构成上述所取得的第1衣服图像的多个像素中的规定的部位的像素的透过度进行调整，生成与该第1衣服图像不同的第2衣服图像。
[0009]根据上述结构的图像处理装置，在虚拟试穿时能够将自然的观感的试穿状态向用户提示。
[0010]根据实施方式，一种图像处理系统，包括图像处理装置、和与该图像处理装置可通信地连接的外部设备，上述图像处理装置具备:被摄体图像取得机构，取得被摄体图像，该被摄体图像是由摄像部连续地摄像的被摄体的图像；第1衣服图像取得机构，取得第1衣服图像，该第1衣服图像是由上述取得的被摄体图像中所包含的被摄体穿着的衣服的图像；第2衣服图像生成机构，将构成上述取得的第1衣服图像的多个像素中的规定的部位的像素的透过度调整，生成与该第1衣服图像不同的第2衣服图像；
[0011]上述外部设备具备存储机构，该存储机构将由上述图像处理装置生成的第2衣服图像与由上述摄像部摄像的被摄体图像建立对应而存储。
[0012]根据实施方式，一种图像处理方法，具备:取得被摄体图像，该被摄体图像是由摄像部连续地摄像的被摄体的图像；取得第1衣服图像，该第1衣服图像是被上述取得的被摄体图像中所包含的被摄体穿着的衣服的图像；将构成上述取得的第1衣服图像的多个像素中的规定的部位的像素的透过度调整，生成与该第1衣服图像不同的第2衣服图像。
【附图说明】
[0013]图1是表示有关一实施方式的图像处理系统的功能结构的框图。
[0014]图2是表示有关该实施方式的衣服DB的数据构造的一例的图。
[0015]图3是表示有关该实施方式的基准位置信息的一例的图。
[0016]图4是表示有关该实施方式的第1衣服图像的一例的图。
[0017]图5是用来说明有关该实施方式的第2衣服图像的图。
[0018]图6是表示由有关该实施方式的第1编辑值计算部执行的处理的次序的一例的流程图。
[0019]图7是用来说明在该实施方式中将透过度变更前和变更后的差异的图。
[0020]图8是用来说明在该实施方式中放大缩小率的计算的图。
[0021]图9是用来说明在该实施方式中变形率的计算的图。
[0022]图10是表示有关该实施方式的第2衣服图像的一例的图。
[0023]图11是用来说明该实施方式中的旋转角度的图。
[0024]图12是表示由有关该实施方式的图像处理装置执行的处理的次序的一例的流程图。
[0025]图13是用来说明在该实施方式中将第1衣服图像合成到被摄体图像中的情况、和将第2衣服图像合成到被摄体图像中的情况的差异的图。
[0026]图14是表示有关该实施方式的图像处理系统的其他结构例的图。
[0027]图15是表示有关该实施方式的图像处理装置的硬件结构的一例的框图。
[0028]标号说明
[0029]10图像处理系统；11图像处理装置；12摄像部；13输入部；14存储部；14a衣服DB ;15显示部；101第1被摄体图像取得部；102体型参数取得部；102a深度图像取得部；102b体型参数推测部；103基准位置信息取得部；104第1衣服图像取得部；105存储控制部；106第1编辑值计算部；107第2衣服图像生成部；108第2被摄体图像生成部；109第3衣服图像生成部；110显示控制部。
【具体实施方式】
[0030]以下，参照附图对实施方式进行说明。
[0031]图1是表示有关一实施方式的图像处理系统的功能结构的框图。图1所示的图像处理系统10具备图像处理装置11、摄像部12、输入部13、存储部14及显示部15。图像处理装置11与摄像部12、输入部13、存储部14及显示部15可相互通信地连接。
[0032]另外，在本实施方式中，设想了图像处理系统10为分别单独地设有图像处理装置
11、摄像部12、输入部13、存储部14及显示部15的结构，但例如也可以为图像处理装置11与摄像部12、输入部13、存储部14及显示部15中的至少1个一体地设置的结构。此外，在本实施方式中，假设在图像处理系统10中设有显示部15，但也可以在图像处理系统10中不设置显示部15。
[0033]摄像部12将第1被摄体摄像，取得第1被摄体的第1被摄体图像。所取得的第1被摄体图像被向图像处理装置11输出。
[0034]这里，所谓第1被摄体，是指试穿衣服的对象。另外，第1被摄体只要是试穿衣服的对象就可以，既可以是生物，也可以是非生物。在第1被摄体是生物的情况下，该第1被摄体例如包括人物等，但该第1被摄体并不限于人物。第1被摄体也可以是例如狗或猫等的动物(宠物)。此外，在第1被摄体是非生物的情况下，该第1被摄体例如包括模拟人体或动物的形状的模型、衣服及其他物体等，但该第1被摄体也可以是这些以外。
[0035]所谓衣服，是指被摄体能够穿用的物件(物品)。作为衣服，可以举出例如上装、裙子、裤子、鞋及帽子等。另外，衣服并不限定于上述上装、裙子、裤子、鞋及帽子等。
[0036]摄像部12包括第1摄像部12a及第2摄像部12b。
[0037]第1摄像部12a按照每规定时间将第1被摄体连续地摄像，依次取得包含该被摄像的第1被摄体的彩色图像。该彩色图像是位图图像，是按每个像素规定了表示第1被摄体的色彩及亮度等的像素值的图像。第1摄像部12a，使用能够取得彩色图像的周知的摄像装置(照相机)。
[0038]第2摄像部12b按照每规定时间将第1被摄体连续地摄像，依次取得包含该被摄像的第1被摄体的深度图像(距离图像)。该深度图像是按每个像素规定了距第2摄像部12b的距离的图像。第2摄像部12b，使用能够取得深度图像的周知的摄像装置(深度传感器)。另外，在本实施方式中，深度图像为通过用第2摄像部12b将被摄体摄像而得到的，但例如也可以从第1被摄体的彩色图像利用立体匹配等的周知的方法生成。
[0039]另外，在本实施方式中，第1摄像部12a及第2摄像部12b以相同的定时将第1被摄体摄像。即，第1摄像部12a及第2摄像部12b被未图示的控制部等控制，以在相同的定时同步而依次进行摄像。由此，第1摄像部12a及第2摄像部12b依次取得以相同的定时摄像(取得)的第1被摄体的彩色图像及深度图像(的组)。将这样以相同的定时取得的该第1被摄体的彩色图像及深度图像如上述那样向图像处理装置11输出。另外，在本实施方式中，设第1摄像部12a及第2摄像部12b的照相机坐标系为相同而进行说明。在第1摄像部12a及第2摄像部12b的照相机坐标系不同的情况下，图像处理装置11只要将一个摄像部的照相机坐标系变换为另一个摄像部的照相机坐标系而在各种处理中使用就可以。
[0040]此外，假设在第1被摄体图像中包含彩色图像和深度图像，但例如第1被摄体图像也可以还包含后述的骨骼信息。
[0041]输入部13是能够受理来自用户的输入的输入接口。输入部13例如使用鼠标、按钮、遥控器、声音识别装置(例麦克风)、图像识别装置等的1个以上的部件的组合。例如在作为输入部13而使用图像识别装置的情况下，也可以为受理对置于输入部13的前方的用户的身体晃动或手晃动等作为用户的各种指示(输入)的装置。在此情况下，只要在图像识别装置(输入部)的存储器等中预先存储与身体晃动或手晃动等的各种运动对应的指示信息、通过从存储器读出与识别出的身体晃动或手晃动对应的指示信息来受理用户的操作指示就可以。
[0042]此外，输入部13也可以是能够从携帯终端等的能够发送各种信息的外部设备受理表示用户的操作指示的信号的通信装置。在此情况下，输入部13如果受理了表示来自上述外部设备的操作指示的信号的输入，则只要受理由受理了该输入的信号所表示的操作指示作为用户的操作指示就可以。
[0043]另外，输入部13也可以与显示部15 —体地设置。具体而言，输入部13及显示部15也可以构成为具备输入功能及显示功能的UI (User Interface、用户界面)部。作为UI部，例如有带有触摸面板的LCD (Liquid Crystal Display、液晶显示器)等。
[0044]存储部14存储各种数据。这里，在存储部14中，存储衣服数据库(以下称作衣服DB)14a。以下，参照图2对衣服DB14a进行说明。
[0045]图2是表示衣服DB14a的数据构造的一例的示意图。衣服DB14a保存对利用虚拟试穿的使用者合成的衣服的衣服图像，换言之，是保存作为合成对象的衣服的衣服图像的数据库。具体而言，被摄体信息、衣服ID、衣服图像和属性信息被建立对应地包含着。
[0046]被摄体信息包含建立了对应的被摄体ID、被摄体图像、体型参数和基准位置信息。被摄体ID是用来将各个被摄体唯一地识别的识别信息。被摄体图像包括第1被摄体图像和后述的第2被摄体图