自动图像合成装置与方法与流程

文档序号:22127244发布日期:2020-09-04 17:54阅读:来源:国知局

技术特征:

1.一种自动图像合成装置,包括:

图像搜索单元,配置为从通过车载摄像机输入的多个帧图像中搜索并提取具有待学习或待替换的对象的帧图像;

实例对象检测单元,配置为从所提取的帧图像中检测待学习或待替换的实例对象;

图像提取与对象类别信息检测单元,配置为从所提取的帧图像中提取被掩模分割的对象并形成数据结构;

标准图像映射单元,配置为将所述被掩模分割的对象映射至与所述被掩模分割的对象的类别值匹配的标准图像;以及

生成对抗网络gan网络单元,配置为接收所述标准图像和所述被掩模分割的对象,并学习替换图像或基于学习结果产生替换图像。

2.根据权利要求1所述的自动图像合成装置,其中所述图像搜索单元搜索并提取帧图像,以用于:

学习阶段,用于替换包括在所搜索到的帧图像中的特定对象图像;以及

产生阶段,用于利用已学习的学习信息生成待替换的对象图像。

3.根据权利要求1所述的自动图像合成装置,其中所述实例对象检测单元以实例为单位对所提取的帧图像中的对象进行分类,并通过查找对应对象的每个像素和类别信息的分割来执行掩模分割。

4.根据权利要求1所述的自动图像合成装置,其中所述标准图像存储在标准图像数据库中。

5.根据权利要求4所述的自动图像合成装置,其中所述标准图像数据库包括当从立方体的角度观看动态对象时除了底面之外的五个表面的图像的集合,并且在静态对象的情况下,仅存储仅具有驾驶所需信息的前表面作为标准图像。

6.根据权利要求1所述的自动图像合成装置,其中所述标准图像映射单元在学习阶段中映射至待学习的对象的标准图像,并在产生阶段中映射至待替换的对象的标准图像。

7.根据权利要求1所述的自动图像合成装置,其中所述gan网络单元通过重复处理所述标准图像和所述掩模分割图像来进行学习直到将所述标准图像和所述掩模分割图像识别为基本相同的图像,并通过学习单元存储学习结果。

8.一种自动图像合成方法,包括:

图像搜索单元从通过车载摄像机输入的多个帧图像中搜索并提取具有待学习或待替换的对象的帧图像;

实例对象检测单元从所提取的帧图像中检测待学习或待替换的实例对象;

图像提取与对象类别信息检测单元从所提取的帧图像中提取被掩模分割的对象并形成数据结构;

标准图像映射单元将所述被掩模分割的对象映射至与所述被掩模分割的对象的类别值匹配的标准图像;以及

生成对抗网络gan网络单元接收所述标准图像和所述被掩模分割的对象,并学习替换图像或基于学习结果产生替换图像。

9.根据权利要求8所述的自动图像合成方法,其中在所述帧图像的搜索和提取中,所述图像搜索单元搜索并提取帧图像,以用于:

学习阶段,用于替换包括在所搜索到的帧图像中的特定对象图像;以及

产生阶段,用于利用已学习的学习信息生成待替换的对象图像。

10.根据权利要求8所述的自动图像合成方法,其中在所述实例对象的检测中,所述实例对象检测单元以实例为单位对所提取的帧图像中的对象进行分类,并通过查找对应对象的每个像素和类别信息的分割来执行掩模分割。

11.根据权利要求8所述的自动图像合成方法,其中在所述标准图像的映射中,所述标准图像映射单元在学习阶段中映射至待学习的对象的标准图像,并在产生阶段中映射至待替换的对象的标准图像。

12.根据权利要求8所述的自动图像合成方法,其中在所述替换图像的学习或所述替换图像的产生中,所述gan网络单元通过重复处理所述标准图像和所述被掩模分割的对象来进行学习直到将所述标准图像和所述被掩模分割的对象识别为基本相同的图像,并通过学习单元存储学习结果。


技术总结
一种自动图像合成装置,包括:图像搜索单元,配置为从通过车载摄像机输入的多个帧图像中搜索并提取具有待学习或待替换的对象的帧图像;实例对象检测单元,配置为从所提取的帧图像中检测待学习或待替换的实例对象;图像提取与对象类别信息检测单元,配置为从所提取的帧图像中提取被掩模分割的对象并形成数据结构;标准图像映射单元,配置为将所述被掩模分割的对象映射至与所述被掩模分割的对象的类别值匹配的标准图像;以及生成对抗网络(GAN)网络单元,配置为接收所述标准图像和所述被掩模分割的对象,并学习替换图像或基于学习结果产生替换图像。

技术研发人员:李东烈;李真言
受保护的技术使用者:现代摩比斯株式会社
技术研发日:2020.02.26
技术公布日:2020.09.04
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1