用于衣物模拟试穿的方法及装置、设备与流程

本申请涉及衣物虚拟试穿领域，例如涉及一种用于衣物模拟试穿的方法、装置和设备。

背景技术：

随着生活水平的提高，衣服的种类以及样式越来越丰富，在人们的日常生活中，常常为每天穿什么衣物而花费大量时间，大部分情况人们都是随意选择衣物进行搭配，而对于那些希望有较好形象但时尚敏感度低或缺乏时间的人则非常困扰，尤其是由于衣物适合季节不同，款式各异，颜色不同，再加上有些衣物由于没有经常使用而被忘却，这多种因素使得用户在选择衣物的问题上大费周章。

在实现本公开实施例的过程中，发现相关技术中至少存在如下问题：目前人们在挑选衣物时，难以知道衣物是否适合自己。

技术实现要素：

为了对披露的实施例的一些方面有基本的理解，下面给出了简单的概括。所述概括不是泛泛评述，也不是要确定关键/重要组成元素或描绘这些实施例的保护范围，而是作为后面的详细说明的序言。

本公开实施例提供了一种用于衣物模拟试穿的方法、装置和设备，以能够对衣物进行模拟试穿。

在一些实施例中，所述方法包括：

接收用户输入的图像；

根据所述用户输入的图像获取试穿衣物信息；

根据所述试穿衣物信息生成用户的试穿效果图；

将所述试穿效果图反馈给所述用户。

在一些实施例中，所述用于衣物模拟试穿的装置包括：处理器和存储有程序指令的存储器，所述处理器被配置为在执行所述程序指令时，执行上述的用于衣物模拟试穿的方法。

在一些实施例中，所述设备包括上述的用于衣物模拟试穿的装置。

本公开实施例提供的用于衣物模拟试穿的装置的方法、装置和设备，可以实现以下技术效果：通过获取图像中的衣物并生成用户试穿画面，能够在用户不知道感兴趣衣物的具体信息时实现虚拟试衣，从而提高了用户在获取衣物推荐时的体验。

以上的总体描述和下文中的描述仅是示例性和解释性的，不用于限制本申请。

附图说明

一个或多个实施例通过与之对应的附图进行示例性说明，这些示例性说明和附图并不构成对实施例的限定，附图中具有相同参考数字标号的元件示为类似的元件，附图不构成比例限制，并且其中：

图1是本公开实施例提供的一个用于衣物模拟试穿的方法的示意图；

图2是本公开实施例提供的一个用于衣物模拟试穿的装置的示意图。

具体实施方式

为了能够更加详尽地了解本公开实施例的特点与技术内容，下面结合附图对本公开实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本公开实施例。在以下的技术描述中，为方便解释起见，通过多个细节以提供对所披露实施例的充分理解。然而，在没有这些细节的情况下，一个或多个实施例仍然可以实施。在其它情况下，为简化附图，熟知的结构和装置可以简化展示。

本公开实施例的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开实施例的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含。

除非另有说明，术语“多个”表示两个或两个以上。

本公开实施例中，字符“/”表示前后对象是一种“或”的关系。例如，a/b表示：a或b。

术语“和/或”是一种描述对象的关联关系，表示可以存在三种关系。例如，a和/或b，表示：a或b，或，a和b这三种关系。

结合图1所示，本公开实施例提供一种用于衣物模拟试穿的方法，包括：

步骤s101、接收用户输入的图像；

步骤s102、根据用户输入的图像获取试穿衣物信息；

步骤s103、根据试穿衣物信息生成用户的试穿效果图；

步骤s104、将试穿效果图反馈给用户。

采用本公开实施例提供的用于衣物模拟试穿的方法，通过获取图像中的衣物并生成用户试穿画面，能够在用户不知道感兴趣衣物的具体信息时实现虚拟试衣，从而提高了用户在获取衣物推荐时的体验。

可选地，根据用户输入的图像获取试穿衣物信息，包括：根据用户输入的图像搜索出对应的衣物图像；根据衣物图像获取试穿衣物信息。

在一些实施例中，根据用户输入的图像进行图像分析处理获取其中的衣物图像，根据用户输入图像中的衣物图像通过调用电子商城里，例如淘宝、京东或者周围电子百货商场的搜索引擎接口进行搜索以得到对应的衣物图像即实通过衣物图像进行以图搜图，并根据对应的衣物图像获取试穿衣物信息。可选地，该试穿衣物信息包括：衣物类型名称、衣物3d模型、衣物2d图像、型号、购买链接等信息。例如对应的衣物图像为黑色长款羊毛大衣的图像，得到的试穿衣物信息为：黑色长款羊毛大衣、黑色长款羊毛大衣的3d模型、黑色长款羊毛大衣的2d图像、黑色长款羊毛大衣的型号、黑色长款羊毛大衣的购买链接等信息。可选地，将该试穿衣物信息反馈给用户。可选地，将获得的试穿衣物信息通过显示界面展示给用户，或者，将试穿衣物信息发送给终端设备，以使终端设备向用户显示试穿衣物信息。

可选地，根据用户输入的图像获取试穿衣物信息，包括：获取用户输入的图像中的衣物类型；根据用户输入的图像中的衣物类型搜索出试穿衣物信息。通过图像识别出用户输入的图像中的衣物图像，并进一步识别出该衣物的衣物类型，得到衣物类型关键词，然后根据该衣物类型关键词调用电子商城里，例如淘宝、京东或者周围电子百货商场的搜索引擎接口进行搜索以得到对应的试穿衣物信息。

可选地，获取用户输入的图像中的衣物类型，包括：获取用户输入的图像中的衣物图像；根据衣物图像与预设的样本衣物图像的相似度，确定样本衣物；将样本衣物的类型作为用户输入的图像中的衣物类型。

在一些实施例中，对用户输入的图像进行图像分析处理得到其中的衣物图像，将该衣物图像与预设的样本衣物图像数据库中的样本衣物图像进行对比，得到相似度值，当相似度值大于或等于设定相似度阈值时，该样本衣物图像确定为样本衣物，则该样本衣物对应的类型即为用户输入图像的衣物类型。可选地，衣物类型包括衣物的面料、款式等信息。

根据该用户输入图像的衣物类型通过调用电子商城里，例如淘宝、京东或者周围电子百货商场的搜索引擎接口进行搜索，得到试穿衣物信息，可选地，试穿衣物信息包括：衣物类型名称、衣物3d模型、衣物2d图像、型号、购买链接等信息。例如，衣物类型为黑色长款羊毛大衣，得到的试穿衣物信息为：黑色长款羊毛大衣、黑色长款羊毛大衣的3d模型、黑色长款羊毛大衣的2d图像、黑色长款羊毛大衣的型号、黑色长款羊毛大衣的购买链接等信息。可选地，将该试穿衣物信息反馈给用户。可选地，将获得的试穿衣物信息通过显示界面展示给用户，或者，将试穿衣物信息发送给终端设备，以使终端设备向用户显示试穿衣物信息。

可选地，根据试穿衣物信息生成用户的试穿效果图，包括：将试穿衣物信息中的衣物3d模型与用户的人体3d模型进行合成，得到用户的试穿画面。

可选地，将试穿衣物信息中的衣物3d模型与用户的人体3d模型进行合成前，还包括：获取用户图像；根据用户图像构建用户的人体3d模型。

可选地，通过对获取的用户图像进行图像分析处理，得到图像中人物的身高、体重，肩宽，胸围、臀围等参数信息，通过参数信息进行数学建模，构建出用户的人体3d模型。

在一些实施例中，用户可以通过终端设备查看收到的试穿衣物信息，并且选择其中某件试穿衣物信息进行试穿。可选地，根据用户的人体3d模型和衣物3d模型的头部、肩部、手部和腰部等特征位置，将该衣物3d模型的特征位置嵌套到用户的人体3d模型匹配的特征位置进行合成，例如将衣物的3d模型的肩部与用户的人体3d模型的肩部进行嵌套，从而得到用户的试穿画面，即得到用户的试穿效果图。将试穿效果图展示给用户，可选地，将获得的试穿效果图通过显示界面展示给用户，或者，将试穿效果图发送给终端设备，以使终端设备向用户显示试穿效果图。这样，通过将衣物3d模型与用户的人体3d模型进行合成得到试穿效果图，能够使用户更加直观的看到试穿效果，提高了用户虚拟试穿的体验。

可选地，根据试穿衣物信息生成用户的试穿效果图，包括：获取用户的2d图像；将用户的2d图像与衣物2d图像进行合成，得到用户的试穿画面。

在一些实施例中，用户可以通过终端设备查看收到的试穿衣物信息，并且选择其中某件试穿衣物信息进行试穿。可选地，通过用户的2d图像和衣物2d图像中的头部、肩部、手部和腰部等特征位置进行嵌套合成，从而将衣物2d图像的特征位置嵌套到用户的2d图像的特征位置进行合成，例如将衣物2d图像的肩部与用户的2d图像的肩部进行嵌套。从而得到用户的试穿画面，即得到用户的试穿效果图。将试穿效果图展示给用户，可选地，将获得的试穿效果图通过显示界面展示给用户，或者，将试穿效果图发送给终端设备，以使终端设备向用户显示试穿效果图。

可选地，用户在选择其中某件试穿衣物信息后，将该件试穿衣物信息中的2d图像与用户的实时影像进行拼合，以实现虚拟试穿。可选地，通过终端设备获取用户的实时影像，终端设备将用户的实时影像上传给服务器，服务器实现拼合过程并反馈拼合后的数据给终端设备，也可以由终端设备直接进行拼合并显示。用户获得的试穿衣物信息中的2d图像为用户获得的推荐衣物。

将用户获得的推荐衣物与对应用户的实时影像进行拼合，包括：

获取用户头像，将用户获得的推荐衣物与用户头像进行拼合。

可选地，获取用户头像，包括：获取用户的实时图像，通过人脸分类器对用户的实时图像进行人脸检测并提取出对应的人脸区域图像，得到用户头像。

可选地，将用户获得的推荐衣物与用户头像进行拼合，包括：

通过人眼分类器对用户头像进行检测并提取出对应的人眼区域图像，根据人眼区域图像获得眼间距，根据眼间距将用户获得的推荐衣物与对应的用户头像进行拼合。

可选地，根据眼间距将用户获得的推荐衣物与对应的用户头像进行拼合，包括：

根据用户获得的推荐衣物获得对应的衣物图片；

根据眼间距调整用户头像的大小，然后将用户头像与对应的衣物图片进行拼合；和/或，

在用户获得的推荐衣物对应的图像库中，匹配得到与眼间距对应的衣物图片，然后将衣物图片与对应的用户头像进行拼合。

可选地，眼间距为人眼区域图像中双眼的瞳孔中心点之间的距离。确定瞳孔中心点为成熟的现有技术，在此不再赘述。得到瞳孔中心点的坐标后，可根据两瞳孔中心点的坐标计算瞳孔中心点之间的距离，从而将其作为眼间距。两点间的距离计算也为成熟的现有技术，在此不再赘述。

由于用户通过终端设备进行虚拟试穿时，终端设备摄得的图像或视频流常常会随用户的姿势变化或用户与终端设备的距离变化导致用户头像发生变化，例如终端设备距离脸部越近则摄得的用户头像越大，终端设备距离脸部越远时摄得的用户头像越小，尤其是针对用户手持智能手机或平板等终端设备时，问题尤为突出。这种情况下，如果直接将用户头像与衣物图片进行拼合，则很有可能出现头大衣服小或头小衣服大的情况，影响试穿效果。因此在拼合图片时根据人眼区域图像获得眼间距，各衣物预设有不同尺寸的对应的衣物图片，根据摄得的实时图像中不同的眼间距匹配得到对应尺寸的衣物图片；或者当眼间距大于设定阈值时，缩小对应的用户头像，直到用户头像的眼间距达到设定的眼间距范围。然后将用户获得的推荐衣物与对应的调整后的用户头像进行拼合，或是将用户头像与用户获得的推荐衣物对应尺寸的衣物图片进行拼合。由于在拼合前先使得用户头像的尺寸与衣物图片的尺寸匹配，提高了拼合效果，使用户更好的对推荐的衣物进行虚拟试穿，使得在衣物推荐时用户的体验更好。

由于不同用户的终端设备获得的图像像素可能不同，且通常出于储存量的考虑衣物图片的像素不高，衣物图片放大后效果较差。为了保证较好的图像质量，在眼间距大于衣物图片对应的眼间距设定值时，意味着用户头像对应衣物图片来说过大，因此缩放用户头像，在拼合时尽可能的保证了图像清晰度。而在眼间距小于衣物图片对应的眼间距设定值时，意味着用户头像对应衣物图片来说过小，这时通过匹配对应尺寸的衣物图片来使得用户头像与衣物图片协调拼合，也保证了图像清晰度。

可选地，用户虚拟试穿可通过图像或视频流的形式进行展示，针对视频流的方式，用户可以通过终端设备的摄像头例如前置摄像头，实时的展示用户的试穿效果。针对以视频流展示用户试穿效果的情况，将视频流按设定时间间隔抽取出若干帧图像，然后将其中的用户头像与衣物图片相结合。在一些实施例中用户根据推荐衣物进行虚拟试穿的方法还包括检测眼距变化趋势：

计算得到眼间距变化速度因子，然后计算得到下一时刻的眼间距预测值e。为眼间距变化速度因子，yd为当前时刻摄得的用户头像的眼间距，yq为前一时刻摄得的用户头像的眼间距，smin为眼间距变化速度最小值，smax为眼间距变化速度最大值，t为前一时刻至当前时刻的间隔时间，yt为第t次摄得的用户头像的眼间距，yt-1为第t-1次摄得的用户头像的眼间距，ymax为设定的最大眼间距值，ymin为设定的最小眼间距值，t≥2，t≤n且n为正整数，smax>smin。上述眼间距预测方法在考虑了终端设备与用户之间的移动趋势的同时，还考虑了眼间距的变化速度，能够准确的预测眼间距。

可选地，通过计算得到眼间距变化速度s，tim为获得yt与yt-1之间的间隔时间。

用户获得推荐衣物后，检测眼距变化趋势，然后根据得到的下一时刻的眼间距预测值e匹配出对应尺寸的衣物图片，然后将用户头像与视频流中各帧对应的衣物图片进行拼合，得到虚拟试衣视频流数据。用户通过视频流数据展示虚拟试衣效果时用户可能与终端设备之间的距离不断变化，导致用户头像的大小产生变化，那么为了达到较好的拼合效果，衣物图片的尺寸也需要随用户头像的变化而进行切换，采用上述方式对用户头像的眼间距进行变化趋势预测然后根据预测结果即眼间距预测值e匹配到对应的衣物图片以进行拼合，能够更加流畅的以视频流的形式展示用户对推荐出的衣物的虚拟试穿效果，进一步的提高了用户在衣物试穿中的体验。

在一些实施例中，用户可以根据试穿衣物信息中的购买链接进行购买，为用户提供更加方便的试穿体验。

结合图2所示，本公开实施例提供一种用于衣物模拟试穿的装置，包括处理器(processor)100和存储器(memory)101。可选地，该装置还可以包括通信接口(communicationinterface)102和总线103。其中，处理器100、通信接口102、存储器101可以通过总线103完成相互间的通信。通信接口102可以用于信息传输。处理器100可以调用存储器101中的逻辑指令，以执行上述实施例的用于衣物模拟试穿的方法。

此外，上述的存储器101中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。

存储器101作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序，如本公开实施例中的方法对应的程序指令/模块。处理器100通过运行存储在存储器101中的程序指令/模块，从而执行功能应用以及数据处理，即实现上述实施例中用于衣物模拟试穿的方法。

存储器101可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端设备的使用所创建的数据等。此外，存储器101可以包括高速随机存取存储器，还可以包括非易失性存储器。

本公开实施例提供的用于衣物模拟试穿的装置，能够通过获取图像中的衣物并生成用户试穿画面，能够在用户不知道感兴趣衣物的具体信息时实现虚拟试衣，从而提高了用户在获取衣物推荐时的体验。

本公开实施例提供了一种设备，包含上述的用于衣物模拟试穿的装置。

可选地，设备包括服务器或终端设备。

在一些实施例中，终端设备为智能手机、电视、带屏音箱、带屏冰箱、智能衣橱等。

可选地，终端设备接收用户输入的语音信息、按键信息、触屏信息或图像信息等。

可选地，通过终端设备的显示界面查看穿戴衣物、推荐的穿戴衣物和衣物搭配方案。

可选地，终端设备不为智能衣橱时，终端设备绑定智能衣橱以获取已有的衣物及其对应的衣物属性信息。

可选地，用户通过终端设备录入用户属性信息到用户信息数据库，用户通过终端设备录入已有的衣物及其对应的衣物属性信息到已有衣物数据库。

在一些实施例中，设备为服务器时，服务器通过终端设备接收用户输入的语音信息、按键信息、触屏信息或图像信息等。

可选地，用户预先在服务器设置数据库。

可选地，服务器通过终端设备获取智能衣橱的已有的衣物及其对应的衣物属性信息或接收用户输入的已有的衣物及其对应的衣物属性信息。

可选地，服务器通过终端设备的显示界面将推荐结果展示给用户。

本公开实施例提供的设备，能够通过获取图像中的衣物并生成用户试穿画面，能够在用户不知道感兴趣衣物的具体信息时实现虚拟试衣，从而提高了用户在获取衣物推荐时的体验。

本公开实施例提供了一种计算机可读存储介质，存储有计算机可执行指令，所述计算机可执行指令设置为执行上述用于衣物模拟试穿的方法。

本公开实施例提供了一种计算机程序产品，所述计算机程序产品包括存储在计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，使所述计算机执行上述用于衣物模拟试穿的方法。

上述的计算机可读存储介质可以是暂态计算机可读存储介质，也可以是非暂态计算机可读存储介质。

本公开实施例的技术方案可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括一个或多个指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开实施例所述方法的全部或部分步骤。而前述的存储介质可以是非暂态存储介质，包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等多种可以存储程序代码的介质，也可以是暂态存储介质。

以上描述和附图充分地示出了本公开的实施例，以使本领域的技术人员能够实践它们。其他实施例可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求，否则单独的部件和功能是可选的，并且操作的顺序可以变化。一些实施例的部分和特征可以被包括在或替换其他实施例的部分和特征。而且，本申请中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的，除非上下文清楚地表明，否则单数形式的“一个”(a)、“一个”(an)和“所述”(the)旨在同样包括复数形式。类似地，如在本申请中所使用的术语“和/或”是指包含一个或一个以上相关联的列出的任何以及所有可能的组合。另外，当用于本申请中时，术语“包括”(comprise)及其变型“包括”(comprises)和/或包括(comprising)等指陈述的特征、整体、步骤、操作、元素，和/或组件的存在，但不排除一个或一个以上其它特征、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。在没有更多限制的情况下，由语句“包括一个…”限定的要素，并不排除在包括所述要素的过程、方法或者设备中还存在另外的相同要素。本文中，每个实施例重点说明的可以是与其他实施例的不同之处，各个实施例之间相同相似部分可以互相参见。对于实施例公开的方法、产品等而言，如果其与实施例公开的方法部分相对应，那么相关之处可以参见方法部分的描述。

本领域技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，可以取决于技术方案的特定应用和设计约束条件。所述技术人员可以对每个特定的应用来使用不同方法以实现所描述的功能，但是这种实现不应认为超出本公开实施例的范围。所述技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本文所披露的实施例中，所揭露的方法、产品(包括但不限于装置、设备等)，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，可以仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例。另外，在本公开实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

附图中的流程图和框图显示了根据本公开实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。在附图中的流程图和框图所对应的描述中，不同的方框所对应的操作或步骤也可以以不同于描述中所披露的顺序发生，有时不同的操作或步骤之间不存在特定的顺序。例如，两个连续的操作或步骤实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。