本发明属于视频处理,具体涉及一种色彩氛围处理方法和系统。
背景技术:
1、随着虚拟技术、人工智能等技术的发展,人们在不同的空间欣赏视频时,可以更专注地感受。进一步地,在欣赏视频内容时,希望可以有伴随式的沉浸式氛围感。目前市场上已经有些产品可以根据视频画面的内容色彩分布,结合空间内的氛围灯装置进行氛围营造。常见的做法是与视频应用厂商合作,将画面色彩分析算法与该视频应用深度集成。但众多的视频应用厂商每一家都需要进行集成对接,实施困难度较大。而通过直接在系统中截屏方式获得画面内容的手段,对于受数字保全管理(digitalrightsmanagement,drm)保护的内容来说,是无法进行的。
技术实现思路
1、鉴于以上存在的问题,本发明提供一种色彩氛围处理方法和系统,用于将视频内容每一帧的色彩分布情况提取出来后,形成对应于该视频内容的色彩氛围描述文件,在播放相应视频内容时,根据空间氛围区域定义对视频对应的色彩分布数据进行映射,将映射的结果作为色彩氛围来激发该空间中的氛围发生装置进行色彩氛围表达。
2、为解决上述技术问题,本发明采用如下的技术方案:
3、第一方面,本发明提供一种色彩氛围处理方法,包括以下步骤:
4、给定视频文件,解析所述视频文件,对视频内容进行解码,获得解码后的图像帧画面;对所述图像帧画面进行区域分割,将分割后的各区域进行主题色彩提取,形成所述图像帧的区域主题色彩分布表;每一个被提取的图像帧对应的时间戳与区域主题色彩分布表组成一个色彩氛围帧描述子,所有的色彩氛围帧描述子的组合形成色彩氛围描述文件;
5、对所述色彩氛围描述文件进行管理,将包括所述色彩氛围描述文件和视频文件标识信息进行存储;
6、获取视频内容对应的色彩氛围描述文件后,提取所述色彩氛围描述文件中的每一图像帧色彩分布表,根据氛围空间的空间区域氛围配置,进行空间区域的主题色重新映射操作,生成适用于该空间区域的氛围主题色彩分布表;
7、获取视频当前播放时间对应的氛围主题色彩分布表,驱动氛围空间中的相关区域的氛围发生装置进行氛围表达。
8、一种可能的实现方式中,所述进行空间区域的主题色重新映射操作,生成适用于该空间区域的氛围主题色彩分布表为:获取并解析色彩氛围描述文件中的所有色彩氛围帧描述子,形成一张与视频图像尺寸同样规格的图像,图像中的每个子区域为描述子中的区域,区域中的色彩用该色彩氛围帧描述子中该区域对应的主题色填充,再将空间氛围分布图按照该视频的图像尺寸进行非等比拉伸,以新生成的分布图中的子矩形再次按照描述子中定义的主题色提取算法进行提取后,形成该空间的氛围主题分布表。
9、一种可能的实现方式中,帧对应的所述氛围主题色彩分布表中包括该帧中所有分割的区域色彩信息,每个区域的色彩信息包括该区域的起止坐标和主题色彩值。
10、一种可能的实现方式中,获得解码后的图像帧画面为对视频文件中的每一帧进行或间隔数帧进行抽样提取。
11、第二方面,本发明提供一种色彩氛围处理系统,包括色彩氛围采集模块、色彩氛围管理模块、色彩氛围空间映射模块和色彩氛围表达模块,其中,
12、所述色彩氛围采集模块用于获得视频内容后,对视频内容进行解码,获得解码后的图像帧画面,将解码后的图像帧画面进行区域分割,将分割后的各区域进行主题色彩提取,形成所述图像帧的区域主题色彩分布表,每一个被提取的图像帧对应的时间戳与区域主题色彩分布表组成一个色彩氛围帧描述子,所有的色彩氛围帧描述子的组合形成色彩氛围描述文件;
13、所述色彩氛围管理模块用于对所述色彩氛围描述文件进行管理,将包括所述色彩氛围描述文件和视频文件标识信息保存在相关存储中;
14、所述色彩氛围空间映射模块用于从色彩氛围管理模块中获取某视频内容对应的氛围描述文件,提取该描述文件中的每一帧的区域主体色彩分布表,然后根据氛围空间的空间区域氛围配置,进行空间区域的主题色重新映射操作,生成适用于该空间区域的氛围主题色彩分布表;
15、所述色彩氛围表达模块用于按照色彩氛围空间映射模块输出的氛围主题色彩分布表,驱动氛围空间中的相关区域的氛围发生装置进行氛围表达。
16、一种可能的实现方式中,所述进行空间区域的主题色重新映射操作,生成适用于该空间区域的氛围主题色彩分布表为:获取并解析色彩氛围描述文件中的所有色彩氛围帧描述子,形成一张与视频图像尺寸同样规格的图像,图像中的每个子区域为描述子中的区域,区域中的色彩用该色彩氛围帧描述子中该区域对应的主题色填充,再将空间氛围分布图按照该视频的图像尺寸进行非等比拉伸,以新生成的分布图中的子矩形再次按照描述子中定义的主题色提取算法进行提取后,形成该空间的氛围主题分布表。
17、一种可能的实现方式中,帧对应的主题色彩分布表中包含该帧中所有分割的区域色彩信息,每个区域的色彩信息包括该区域的起止坐标和主题色彩值。
18、一种可能的实现方式中,所述色彩氛围空间映射模块部署在终端侧设备上,终端侧设备在通过视频文件标识信息向色彩氛围管理模块请求氛围描述文件后,通过色彩氛围空间映射模块生成空间氛围分布图后进而供氛围表达模块使用。
19、一种可能的实现方式中,所述色彩氛围管理模块和色彩氛围空间映射模块部署在中心侧设备,终端侧设备在通过视频文件标识信息请求氛围描述文件时,同将空间氛围分布图上传至中心侧设备,中心侧设备从色彩氛围管理模块中获取到氛围描述文件后,调用色彩氛围空间映射模块后,形成新的氛围描述文件返回终端侧设备,终端侧设备直接解析后供氛围表达模块使用。
20、一种可能的实现方式中,获得解码后的图像帧画面为对视频文件中的每一帧进行或间隔数帧进行抽样提取。
21、采用本发明具有如下的有益效果:
22、(1)可以将色彩氛围提取与表达解耦,即氛围提取与表达分为非连续的两阶段进行。
23、(2)可以在终端无法实时获取到解码后的图像时,仍然能够通过带外的方式获取预先提取的氛围特征来进行氛围表达,从而减少了对内容、应用和系统的信赖度。
1.一种色彩氛围处理方法,其特征在于,包括以下步骤:
2.如权利要求1所述的色彩氛围处理方法,其特征在于,所述进行空间区域的主题色重新映射操作,生成适用于该空间区域的氛围主题色彩分布表为:获取并解析色彩氛围描述文件中的所有色彩氛围帧描述子,形成一张与视频图像尺寸同样规格的图像,图像中的每个子区域为描述子中的区域,区域中的色彩用该色彩氛围帧描述子中该区域对应的主题色填充,再将空间氛围分布图按照该视频的图像尺寸进行非等比拉伸,以新生成的分布图中的子矩形再次按照描述子中定义的主题色提取算法进行提取后,形成该空间的氛围主题分布表。
3.如权利要求1或2所述的色彩氛围处理方法,其特征在于,帧对应的所述氛围主题色彩分布表中包括该帧中所有分割的区域色彩信息,每个区域的色彩信息包括该区域的起止坐标和主题色彩值。
4.如权利要求1或2所述的色彩氛围处理方法,其特征在于,获得解码后的图像帧画面为对视频文件中的每一帧进行或间隔数帧进行抽样提取。
5.一种色彩氛围处理系统,其特征在于,包括色彩氛围采集模块、色彩氛围管理模块、色彩氛围空间映射模块和色彩氛围表达模块,其中,
6.如权利要求5所述的色彩氛围处理系统,其特征在于,所述进行空间区域的主题色重新映射操作,生成适用于该空间区域的氛围主题色彩分布表为:获取并解析色彩氛围描述文件中的所有色彩氛围帧描述子,形成一张与视频图像尺寸同样规格的图像,图像中的每个子区域为描述子中的区域,区域中的色彩用该色彩氛围帧描述子中该区域对应的主题色填充,再将空间氛围分布图按照该视频的图像尺寸进行非等比拉伸,以新生成的分布图中的子矩形再次按照描述子中定义的主题色提取算法进行提取后,形成该空间的氛围主题分布表。
7.如权利要求5所述色彩氛围处理系统,其特征在于,帧对应的主题色彩分布表中包含该帧中所有分割的区域色彩信息,每个区域的色彩信息包括该区域的起止坐标和主题色彩值。
8.如权利要求5所述的色彩氛围处理系统,其特征在于,所述色彩氛围空间映射模块部署在终端侧设备上,终端侧设备在通过视频文件标识信息向色彩氛围管理模块请求氛围描述文件后,通过色彩氛围空间映射模块生成空间氛围分布图后进而供氛围表达模块使用。
9.如权利要求5所述的色彩氛围处理系统,其特征在于,所述色彩氛围管理模块和色彩氛围空间映射模块部署在中心侧设备,终端侧设备在通过视频文件标识信息请求氛围描述文件时,同将空间氛围分布图上传至中心侧设备,中心侧设备从色彩氛围管理模块中获取到氛围描述文件后,调用色彩氛围空间映射模块后,形成新的氛围描述文件返回终端侧设备,终端侧设备直接解析后供氛围表达模块使用。
10.如权利要求5-9任一所述的色彩氛围处理系统,其特征在于,获得解码后的图像帧画面为对视频文件中的每一帧进行或间隔数帧进行抽样提取。