以数据加密和光学遮挡进行隐私屏蔽的方法、装置及设备与流程

文档序号:32418258发布日期:2022-12-02 22:34阅读:39来源:国知局
以数据加密和光学遮挡进行隐私屏蔽的方法、装置及设备与流程

1.本发明涉及视频数据处理技术领域,尤其以数据加密和光学遮挡进行隐私屏蔽的方法、装置及设备。


背景技术:

2.随着城市化进程不断深入,年轻父母因为没办法亲力亲为照顾婴幼儿,因此会由老人代为照顾婴幼儿,这导致年轻父母无法更好的关注到婴幼儿的成长,为解决这一问题,年轻父母选择采用ai看护设备进行婴幼儿辅助看护。
3.然而现有技术中,ai看护设备主要是基于摄像头实时采集婴幼儿场景的视频图像进行目标分析来确定婴幼儿的状态;然而婴幼儿的看护离不开监护人的照顾,同时,婴幼儿环境常常出现其他人物,从而导致ai看护设备采集的婴幼儿场景的视频图像常常存在其他人员的隐私信息,无论是视频图像在传回服务器端进行技术分析还是其他平台传播时,均会造成隐私泄露,不仅给观看者造成视觉不适,还给涉及隐私的人员带来不良体验。


技术实现要素:

4.有鉴于此,本发明实施例提供了一种以数据加密和光学遮挡进行隐私屏蔽的方法、装置及设备,用以解决现有ai看护设备采集的婴幼儿产品的视频图像涉及其他人员的隐私信息,所导致用户体验不佳的技术问题。
5.本发明采用的技术方案是:
6.本发明提供了一种以数据加密和光学遮挡进行隐私屏蔽的方法,所述方法包括:
7.s1:获取第一类图像源中存在待屏蔽的隐私信息对应的第一基础视频,以及第二类图像源中与所述第一基础视频的各帧图像的采集时序一一对应的各帧图像构成的第一图像集;
8.s2:根据所述第一图像集的各帧图像中隐私信息对应的位置信息,将所述第一基础视频的各帧图像中与各所述位置信息对应的隐私信息与原始帧头信息进行编码加密,得到所述第一基础视频的各帧图像的各目标帧头信息;
9.s3:利用各所述目标帧头信息替换所述第一基础视频中各帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频;
10.其中,所述第一类图像源为摄像头在第一镜片下实时采集的婴幼儿看护场景的视频图像,所述第二类图像源为红外传感器采集的热成像图像。
11.优选地,所述s1包括:
12.s101:获取婴幼儿睡眠时的基础视频和与所述基础视频各帧图像的采集时序对应的所述第二类图像源的图像集;
13.s102:对所述基础视频的各帧图像进行目标检测,得到包含隐私信息的各目标帧图像构成的所述第一基础视频;
14.s103:根据各所述目标帧图像中隐私信息对应的位置信息,在所述图像集对应的
各帧图像中对隐私信息对应的各检测目标进行标记,得到所述第一图像集。
15.优选地,所述s102包括:
16.s1021:获取以第一类图像源进行婴幼儿实时看护的所述基础视频;
17.s1022:对所述基础视频的各帧图像进行隐私信息检测,根据所述隐私信息生成屏蔽信号;
18.s1023:根据所述屏蔽信号,对用于采集第一类图像源的第一镜片进行光学屏蔽,得到后续包含隐私信息的第一类图像源的各目标帧图像对应的所述第一基础视频。
19.优选地,所述s1包括:
20.s111:获取对以第一类图像源进行婴幼儿实时看护的所述基础视频进行目标检测的第一间隔时间和第二间隔时间,所述第一间隔时间小于所述第二间隔时间;
21.s122:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到首帧目标图像;
22.s123:得到所述首帧目标图像之后,按所述第二间隔时间继续对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到末帧目标图像;
23.s124:根据所述首帧目标图像和所述末帧目标图像,得到所述第一基础视频。
24.优选地,所述s2包括:
25.s21:获取以第一类图像源进行婴幼儿实时看护的所述基础视频;
26.s22:对所述基础视频的各帧图像进行非目标婴幼儿的其他活体目标检测,得到存在其他活体目标的隐私信息的首帧目标图像;
27.s23:根据所述首帧目标图像中隐私信息的初始位置信息,得到第一目标图像中隐私信息对应的第一位置信息,其中,所述第一目标图像为所述第一图像集中与所述首帧目标图像采集时间相同的图像;
28.s24:根据所述第一位置信息,得到所述第一图像集的各帧图像中隐私信息对应的位置信息。
29.优选地,所述s3之后还包括:
30.s4:获取所述第一基础视频各帧图像的帧头信息;
31.s5:根据各所述帧头信息,确定包含隐私信息的各目标帧图像;
32.s6:根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
33.优选地,所述s6包括:
34.s61:获取各所述隐私信息的类别信息和位置信息;
35.s62:根据各所述类别信息,对各所述目标帧图像进行筛选,得到各待屏蔽帧图像;
36.s63:对各所述待屏蔽帧图像与对应的所述位置信息的图像进行屏蔽处理,得到与各所述待屏蔽帧图像对应的各局部屏蔽图像进行解码播放。
37.本发明还提供了一种基于上述任一项所述的以数据加密和光学遮挡进行隐私屏蔽的装置,包括:
38.数据采集模块:用于获取第一类图像源中存在待屏蔽的隐私信息对应的第一基础视频,以及第二类图像源中与所述第一基础视频的各帧图像的采集时序一一对应的各帧图像构成的第一图像集;
39.数据处理模块:用于根据所述第一图像集的各帧图像中隐私信息对应的位置信息,将所述第一基础视频的各帧图像中与各所述位置信息对应的隐私信息与原始帧头信息进行编码加密,得到所述第一基础视频的各帧图像的各目标帧头信息;
40.隐私屏蔽模块:用于利用各所述目标帧头信息替换所述第一基础视频中各帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频;
41.其中,所述第一类图像源为摄像头在第一镜片下实时采集的婴幼儿看护场景的视频图像,所述第二类图像源为红外传感器采集的热成像图像。
42.本发明还提供了一种电子设备,包括:至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令,当所述计算机程序指令被所述处理器执行时实现上述任一项所述的方法。
43.本发明还提供了一种介质,其上存储有计算机程序指令,当所述计算机程序指令被处理器执行时实现上述任一项所述的方法。
44.综上所述,本发明的有益效果如下:
45.本发明提供的一种以数据加密和光学遮挡进行隐私屏蔽的方法、装置及设备,获取存在隐私信息的第一类图像源对应的第一基础视频和第二类图像源对应的第一图像集,第一类图像源和第二类图像源的各帧图像的采集时序一一对应,第一类图像源为视频图像,第二类图像源为热成像图像;当检测到婴幼儿看护场景存在隐私信息后,在第二类图像源中确定出隐私信息的位置,然后利用检测目标在第一类图像源和第二类图像源的位置一致的特征,对第一类图像源中隐私信息所在位置对应的图像数据与原始帧头信息进行编码加密,生成第一基础图像中各帧图像新的目标帧头信息,从而将第一基础视频的隐私信息通过与帧头信息共同编码的方式进行加密屏蔽,当在播放第一基础视频时,每当对帧头信息进行解密时就会得到该帧图像存在隐私信息的图像数据,具体是该帧图像的隐私信息类别和位置,从而可以选择对该位置对应的图像区域不进行解码或增加马赛克等方式完成隐私信息屏蔽;本发明基于第二类图像源来确定第一类图像源的隐私信息所在位置,从而对第一类图像源的第一基础视频中各帧图像的隐私信息进行屏蔽,无需对每一帧视频图像进行检测分析,既能不破坏第一类图像源的视频图像,又能实现隐私信息的屏蔽,无需担心对第一基础视频进行隐私信息检测环节造成的信息泄露。
附图说明
46.为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图,这些均在本发明的保护范围内。
47.图1为本发明实施例1中以数据加密和光学遮挡进行隐私屏蔽的方法的流程示意图;
48.图2为本发明实施例1中获取第一图像集的流程示意图;
49.图3为本发明实施例1中获取第一基础视频的流程示意图;
50.图4为本发明实施例1中获取隐私信息位置的流程示意图;
51.图5为本发明实施例2中以数据加密和光学遮挡进行隐私屏蔽的装置的结构示意图;
52.图6为本发明实施例3中的电子设备的结构示意图。
具体实施方式
53.为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。在本发明的描述中,需要理解的是,术语“中心”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本技术和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括
……”
限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。如果不冲突,本发明以及实施例中的各个特征可以相互结合,均在本发明的保护范围之内。
54.实施例1
55.请参见图1,图1为本发明实施例1中一种以数据加密和光学遮挡进行隐私屏蔽的方法,所述方法包括:
56.s1:获取第一类图像源中存在待屏蔽的隐私信息对应的第一基础视频,以及第二类图像源中与所述第一基础视频的各帧图像的采集时序一一对应的各帧图像构成的第一图像集;
57.s2:根据所述第一图像集的各帧图像中隐私信息对应的位置信息,将所述第一基础视频的各帧图像中与各所述位置信息对应的隐私信息与原始帧头信息进行编码加密,得到所述第一基础视频的各帧图像的各目标帧头信息;
58.s3:利用各所述目标帧头信息替换所述第一基础视频中各帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频;
59.其中,所述第一类图像源为摄像头在第一镜片下实时采集的婴幼儿看护场景的视频图像,所述第二类图像源为红外传感器采集的热成像图像。
60.具体的,采用第一类图像源和第二类图像源对婴幼儿进行实时看护,第一类图像源为视频图像,第二类图像源为热成像图像;第一类图像源与第二类图像源的每帧图像采集时序是一一对应的,可以理解为,当第一图像集中第a帧图像与第一基础视频中的第a帧图像采集的时间相同,同时画面区域相同;当第一图像集中的第a帧图像的b位置存在隐私信息,则同样的该隐私信息也存在于第一基础视频的第a帧图像的b位置;利用第一图像集中隐私信息所在位置来确定第一基础视频的各帧图像的隐私信息;从而将隐私信息与帧头信息进行共同编码加密,得到包含隐私信息的新的目标帧头信息,从而得到将隐私信息记录在各帧图像的帧头中的目标视频,优选的将隐私信息的类别信息和位置信息记录在帧头中,而非直接将隐私信息的包括图像数据的所有信息记录在帧头中,避免造成帧头数据过
大;通过利用第二图像集中隐私信息的位置信息来代替对第一基础视频各帧图像进行隐私信息检测,然后将隐私信息与帧头进行编码加密完成第一基础视频的隐私信息屏蔽,既能保证采集的第一基础视频的完整性,又能避免隐私信息泄露,同时无需担心对第一基础视频进行隐私信息检测环节造成的信息泄露。其中,在确定包含隐私信息的第一图像集后,可以把第二图像源的其他图像帧删除,释放存储空间;有利于减少循环存储时,存储区的数据擦除频率,提高存储介质的使用寿命。
61.在一实施例中,请参见图2,所述s1包括:
62.s101:获取婴幼儿睡眠时的基础视频和与所述基础视频各帧图像的采集时序对应的所述第二类图像源的图像集;
63.s102:对所述基础视频的各帧图像进行目标检测,得到包含隐私信息的各目标帧图像构成的所述第一基础视频;
64.s103:根据各所述目标帧图像中隐私信息对应的位置信息,在所述图像集对应的各帧图像中对隐私信息对应的各检测目标进行标记,得到所述第一图像集。
65.具体的,在摄像头端,利用摄像头的视频图像和热成像传感器的热成像图像对目标婴幼儿所在区域进行实时看护,对摄像头采集的第一类图像源对应的基础视频进行目标检测,当检测到图像中存在隐私信息时,获取基础视频中存在隐私信息的首帧目标图像,得将该首帧目标图像记为第一基础视频的第一帧图像,将后续采集的第一图像源对应的存在隐私信息的图像帧作为第一基础视频的其他帧图像;以第一基础视频各帧图像中隐私信息的位置信息来标记图像集对应的各帧图像中的检出目标,即在图像集对应的各帧图像中标记出隐私信息对应的各热源目标,从而得到标记有隐私信息的第二类图像源的各帧图像构成的第一图像集。
66.在一实施例中,所述s102包括:
67.s1021:获取以第一类图像源进行婴幼儿实时看护的所述基础视频;
68.s1022:对所述基础视频的各帧图像进行隐私信息检测,根据所述隐私信息生成屏蔽信号;
69.s1023:根据所述屏蔽信号,对用于采集第一类图像源的第一镜片进行光学屏蔽,得到后续包含隐私信息的第一类图像源的各目标帧图像对应的所述第一基础视频。
70.具体的,隐私信息为非目标婴幼儿外的其他目标人物,至少包括以下之一:其他婴幼儿、目标婴儿的看护人等,ai看护设备在采用第一类图像源和第二类图像源同时对婴幼儿进行看护,当不存在隐私信息时,以第一类图像源为主和以第二类图像源为辅进行婴幼儿看护,当存在隐私信息时,以第二类图像源为主和以第一类图像源为辅进行婴幼儿看护,当对基础视频进行图像分析检测到隐私信息后,产生对隐私信息进行屏蔽的屏蔽信号,根据屏蔽信号对摄像头用于采集第一类图像源的第一镜片进行光学屏蔽,光学屏蔽方式为将ai看护设备的摄像头的镜片从第一镜片切换为第二镜片,第一镜片为正常焦距的镜片,第二镜片为近焦镜片,第一镜片采集的婴幼儿所在区域为清晰图像,第二镜片为婴幼儿所在区域为模糊图像,但是在第二镜片的近距离会采集到清洗图像,即第一基础视频中第一次检测到隐私信息之后的所有帧图像为第二镜片下采集的模糊图像,从而从视频画面上来保护隐私。
71.在一实施例中,请参见图3,所述s1包括:
72.s111:获取对以第一类图像源进行婴幼儿实时看护的所述基础视频进行目标检测的第一间隔时间和第二间隔时间,所述第一间隔时间小于所述第二间隔时间;
73.s122:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到首帧目标图像;
74.s123:得到所述首帧目标图像之后,按所述第二间隔时间继续对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到末帧目标图像;
75.s124:根据所述首帧目标图像和所述末帧目标图像,得到所述第一基础视频。
76.具体的,对基础视频的各帧图像进行目标检测,采用抽帧检测方式,从而可以减少隐私信息排查所需要的计算机算力,具体是设置第一间隔时间和第二间隔时间来对基础视频进行抽帧检测,在未检测到隐私信息前,采用第一间隔时间进行基础视频的各帧图像检测,直至第一次检测出隐私信息对应的图像,记为首帧目标图像,然后依据第二间隔时间继续对后续采集的第一类图像源的各帧图像进行抽帧检测,直到最后一次检测出隐私信息对应的末帧目标图像,将首帧目标图像和末帧目标图像之间的所有图像记为各目标帧图像,将除首帧目标图像之外的所有目标帧图像记为其他帧目标图像,通过抽帧检测方式可以减低计算机的算力消耗,第一间隔时间小于第二间隔时间,可以进一步加快各目标帧图像的筛选。
77.在一实施例中,所述第一间隔时间和所述第二间隔时间为单位时间的整数倍,所述单位时间为相邻两帧图像的间隔时间。
78.在一实施例中,若所述第一间隔时间为n倍单位时间,n为大于等于1的正整数,所述s122包括:
79.根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到第一个目标帧图像;
80.若n等于1,则第一个所述目标帧图像为所述首帧目标图像;
81.若n等于2,则将第一个所述目标帧图像的前一帧图像作为所述首帧目标图像;
82.若n大于2,则以第三间隔时间对第一个所述目标帧图像与在先一帧被检测选中的检测帧图像之间的其他帧图像进行目标检测,得到所述首帧目标图像,其中,所述第三间隔时间为小于等于2个单位时间。
83.具体的,当第一间隔时间为单位时间时,即对基础视频的每一帧图像均进行检查,从而得到第一个目标帧图像,该第一个目标帧图像也为首帧目标图像,当第一间隔时间为2个单位时间时,即对基础视频进行每间隔一帧图像检测一次,可以减少数据处理量,提供检测效率;将检测到的第一个目标帧图像的前一帧作为首帧目标图像,可以避免隐私信息不全,也无需二次检测,节约计算机资源;当第一间隔时间大于2个单位时间时,将以第一间隔时间检测的最后两帧图像之间的其他帧图像以第三间隔时间进行抽帧检测,第三间隔时间优选1个单位时间或2个单位时间,从而确定出首帧目标图像;通过设置第三间隔时间,可以在快速完成不存在隐私信息的各帧图像检测后,对小范围的多帧图像进行末帧目标图像定位,进一步节约计算机资源和提高检测效率。
84.在一实施例中,若所述第一间隔时间为n倍单位时间,n为大于等于1的正整数,所述s123包括:
85.根据所述第二间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,
得到最后一个目标帧图像;
86.若n等于1,则最后一个所述目标帧图像为所述末帧目标图像;
87.若n等于2,则将最后一个所述目标帧图像的下一帧图像作为所述末帧目标图像;
88.若n大于2,则以第三间隔时间对最后一个所述目标帧图像与以第二间隔时间在下一次选中的下一检测帧图像之间的其他图像帧进行目标检测,得到所述末帧目标图像,其中,所述第三间隔时间为小于等于2个单位时间。
89.具体的,当第二间隔时间为单位时间时,即对基础视频的每一帧图像均进行检查,从而得到最后一个目标帧图像,该最后一个目标帧图像也为末帧目标图像,当第二间隔时间为2个单位时间时,即对基础视频进行每间隔一帧图像检测一次,可以减少数据处理量,提供检测效率;将检测到的最后一个目标帧图像的后一帧作为末帧目标图像,可以避免隐私信息不全,也无需二次检测,节约计算机资源;当第二间隔时间大于2个单位时间时,获取第二间隔时间检测到隐私信息的最后一个目标帧图像和与最后一个目标帧图像间隔一个第二间隔时间对应的下一检测帧图像,将该下一检测帧图像记为参考帧图像,如:最后检测到隐私信息为第180帧图像,第二间隔时间为10个单位时间,则参考帧图像为第190帧图像,将最后一个目标帧图像和参考帧图像之间的其他帧图像以第三间隔时间进行抽帧检测,第三间隔时间优选1个单位时间或2个单位时间,从而确定出末帧目标图像;通过设置第三间隔时间,可以在快速完成不存在隐私信息的各帧图像检测后,对小范围的多帧图像进行末帧目标图像定位,进一步节约计算机资源和提高检测效率。
90.在一实施例中,请参见图4,所述s2包括:
91.s21:获取以第一类图像源进行婴幼儿实时看护的所述基础视频;
92.s22:对所述基础视频的各帧图像进行非目标婴幼儿的其他活体目标检测,得到存在其他活体目标的隐私信息的首帧目标图像;
93.s23:根据所述首帧目标图像中隐私信息的初始位置信息,得到第一目标图像中隐私信息对应的第一位置信息,其中,所述第一目标图像为所述第一图像集中与所述首帧目标图像采集时间相同的图像;
94.s24:根据所述第一位置信息,得到所述第一图像集的各帧图像中隐私信息对应的位置信息。
95.具体的,在摄像头端,对摄像头采集的基础视频的各帧图像进行目标检测,筛选出各帧图像中除目标婴幼儿还包括其他活体的首帧目标图像,其他活体包括:其他婴幼儿、家庭其他成员等,根据首帧目标图像中隐私信息对应的初始位置信息,得出第一目标图像中该隐私信息对应的第一位置信息,第一目标图像为第一图像集中与首帧目标图像采集时间相同的一帧热成像图像,从而在第一图像集中确定出隐私信息对应的人成像位置,通过该隐私信息在各帧图像的人成像位置,得到第一图像集中各帧图像的隐私信息所在位置,第一图像集中隐私信息在各帧图像所在的位置与第一基础视频中隐私信息在各帧图像所在位置对应,从而在知道第一图像集中隐私信息的位置后,无需对第一基础视频的各帧图像进行隐私信息检测,依然能确定出第一基础视频中各帧图像的隐私信息位置,从而进行屏蔽。
96.在一实施例中,所述s3之后还包括:
97.s4:获取所述第一基础视频各帧图像的帧头信息;
98.s5:根据各所述帧头信息,确定包含隐私信息的各目标帧图像;
99.s6:根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
100.具体的,app端接收到摄像头端传输过来的婴幼儿看护的第一基础视频,在播放该第一基础视频时,在帧头文件解码解密时,针对头文件中的隐私信息对应的图像进行屏蔽,然后播放;屏蔽方式包括以下之一:打马赛克、模糊处理等。
101.在一实施例中,所述s6包括:
102.s61:获取各所述隐私信息的类别信息和位置信息;
103.s62:根据各所述类别信息,对各所述目标帧图像进行筛选,得到各待屏蔽帧图像;
104.s63:对各所述待屏蔽帧图像与对应的所述位置信息的图像进行屏蔽处理,得到与各所述待屏蔽帧图像对应的各局部屏蔽图像进行解码播放。
105.具体的,在播放视频时,针对隐私信息可以根据类别信息进行选择性屏蔽,如隐私信息为监控区域出现其他婴幼儿,此时可以选择不屏蔽,也可以选择屏蔽部分;又如:app端播放时(即看护人直接播放)可以选择不屏蔽,以完整画面进行播放,其他位置播放时(服务器端、其他平台):则可以选择隐私信息屏蔽的播放方法,实现视频不同功能需求时的差异化播放,提高播放的灵活性。
106.本发明提供的一种以数据加密和光学遮挡进行隐私屏蔽的方法,获取存在隐私信息的第一类图像源对应的第一基础视频和第二类图像源对应的第一图像集,第一类图像源和第二类图像源的各帧图像的采集时序一一对应,第一类图像源为视频图像,第二类图像源为热成像图像;当检测到婴幼儿看护场景存在隐私信息后,在第二类图像源中确定出隐私信息的位置,然后利用检测目标在第一类图像源和第二类图像源的位置一致的特征,对第一类图像源中隐私信息所在位置对应的图像数据与原始帧头信息进行编码加密,生成第一基础图像中各帧图像新的目标帧头信息,从而将第一基础视频的隐私信息通过与帧头信息共同编码的方式进行加密屏蔽,当在播放第一基础视频时,每当对帧头信息进行解密时就会得到该帧图像存在隐私信息的图像数据,具体是该帧图像的隐私信息类别和位置,从而可以选择对该位置对应的图像区域不进行解码或增加马赛克等方式完成隐私信息屏蔽;本发明基于第二类图像源来确定第一类图像源的隐私信息所在位置,从而对第一类图像源的第一基础视频中各帧图像的隐私信息进行屏蔽,无需对每一帧视频图像进行检测分析,既能不破坏第一类图像源的视频图像,又能实现隐私信息的屏蔽,无需担心对第一基础视频进行隐私信息检测环节造成的信息泄露。
107.实施例2
108.本发明还提供了一种基于光学屏蔽隐私信息的婴幼儿看护装置,请参见图5,包括:
109.数据采集模块:用于获取第一类图像源中存在待屏蔽的隐私信息对应的第一基础视频,以及第二类图像源中与所述第一基础视频的各帧图像的采集时序一一对应的各帧图像构成的第一图像集;
110.数据处理模块:用于根据所述第一图像集的各帧图像中隐私信息对应的位置信息,将所述第一基础视频的各帧图像中与各所述位置信息对应的隐私信息与原始帧头信息进行编码加密,得到所述第一基础视频的各帧图像的各目标帧头信息;
111.隐私屏蔽模块:用于利用各所述目标帧头信息替换所述第一基础视频中各帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频;
112.其中,所述第一类图像源为摄像头在第一镜片下实时采集的婴幼儿看护场景的视频图像,所述第二类图像源为红外传感器采集的热成像图像。
113.在一实施例中,所述数据采集模块s1包括:
114.图像采集单元s101:获取婴幼儿睡眠时的基础视频和与所述基础视频各帧图像的采集时序对应的所述第二类图像源的图像集;
115.图像检测单元s102:对所述基础视频的各帧图像进行目标检测,得到包含隐私信息的各目标帧图像构成的所述第一基础视频;
116.图像处理单元s103:根据各所述目标帧图像中隐私信息对应的位置信息,在所述图像集对应的各帧图像中对隐私信息对应的各检测目标进行标记,得到所述第一图像集。
117.在一实施例中,所述图像检测单元s102包括:
118.原始图像采集单元s1021:获取以第一类图像源进行婴幼儿实时看护的所述基础视频;
119.屏蔽信号单元s1022:对所述基础视频的各帧图像进行隐私信息检测,根据所述隐私信息生成屏蔽信号;
120.屏蔽单元s1023:根据所述屏蔽信号,对用于采集第一类图像源的第一镜片进行光学屏蔽,得到后续包含隐私信息的第一类图像源的各目标帧图像对应的所述第一基础视频。
121.在一实施例中,所述数据采集模块s1包括:
122.采样参数获取单元s111:获取对以第一类图像源进行婴幼儿实时看护的所述基础视频进行目标检测的第一间隔时间和第二间隔时间,所述第一间隔时间小于所述第二间隔时间;
123.首帧图像单元s122:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到首帧目标图像;
124.末帧图像单元s123:得到所述首帧目标图像之后,按所述第二间隔时间继续对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到末帧目标图像;
125.第一基础视频单元s124:根据所述首帧目标图像和所述末帧目标图像,得到所述第一基础视频。
126.在一实施例中,所述数据处理模块s2包括:
127.第一图像采集单元s21:获取以第一类图像源进行婴幼儿实时看护的所述基础视频;
128.目标检测单元s22:对所述基础视频的各帧图像进行非目标婴幼儿的其他活体目标检测,得到存在其他活体目标的隐私信息的首帧目标图像;
129.位置映射单元s23:根据所述首帧目标图像中隐私信息的初始位置信息,得到第一目标图像中隐私信息对应的第一位置信息,其中,所述第一目标图像为所述第一图像集中与所述首帧目标图像采集时间相同的图像;
130.隐私信息转移单元s24:根据所述第一位置信息,得到所述第一图像集的各帧图像中隐私信息对应的位置信息。
131.在一实施例中,还包括:
132.帧头信息获取模块:获取所述第一基础视频各帧图像的帧头信息;
133.隐私信息确认模块:根据各所述帧头信息,确定包含隐私信息的各目标帧图像;
134.屏蔽播放模块:根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
135.在一实施例中,所述帧头信息获取模块包括:
136.隐私信息单元:获取各所述隐私信息的类别信息和位置信息;
137.信息屏蔽筛选单元:根据各所述类别信息,对各所述目标帧图像进行筛选,得到各待屏蔽帧图像;
138.屏蔽处理单元:对各所述待屏蔽帧图像与对应的所述位置信息的图像进行屏蔽处理,得到与各所述待屏蔽帧图像对应的各局部屏蔽图像进行解码播放。
139.本发明提供的一种基于光学屏蔽隐私信息的婴幼儿看护装置,获取存在隐私信息的第一类图像源对应的第一基础视频和第二类图像源对应的第一图像集,第一类图像源和第二类图像源的各帧图像的采集时序一一对应,第一类图像源为视频图像,第二类图像源为热成像图像;当检测到婴幼儿看护场景存在隐私信息后,在第二类图像源中确定出隐私信息的位置,然后利用检测目标在第一类图像源和第二类图像源的位置一致的特征,对第一类图像源中隐私信息所在位置对应的图像数据与原始帧头信息进行编码加密,生成第一基础图像中各帧图像新的目标帧头信息,从而将第一基础视频的隐私信息通过与帧头信息共同编码的方式进行加密屏蔽,当在播放第一基础视频时,每当对帧头信息进行解密时就会得到该帧图像存在隐私信息的图像数据,具体是该帧图像的隐私信息类别和位置,从而可以选择对该位置对应的图像区域不进行解码或增加马赛克等方式完成隐私信息屏蔽;本发明基于第二类图像源来确定第一类图像源的隐私信息所在位置,从而对第一类图像源的第一基础视频中各帧图像的隐私信息进行屏蔽,无需对每一帧视频图像进行检测分析,既能不破坏第一类图像源的视频图像,又能实现隐私信息的屏蔽,无需担心对第一基础视频进行隐私信息检测环节造成的信息泄露。
140.实施例3
141.本发明提供了一种电子设备和介质,如图6所示,包括至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令。
142.具体地,上述处理器可以包括中央处理器(cpu),或者特定集成电路(application specific integrated circuit,asic),或者可以被配置成实施本发明实施例的一个或多个集成电路,电子设备至少包括以下之一:摄像头、具有摄像头的移动设备、具有摄像头的穿戴设备。
143.存储器可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器可包括硬盘驱动器(hard disk drive,hdd)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(universal serial bus,usb)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器可在数据处理装置的内部或外部。在特定实施例中,存储器是非易失性固态存储器。在特定实施例中,存储器包括只读存储器(rom)。在合适的情况下,该rom可以是掩模编程的rom、可编程rom(prom)、可擦除prom(eprom)、电可擦除prom(eeprom)、电可改写rom(earom)或闪存或者
两个或更多个以上这些的组合。
144.处理器通过读取并执行存储器中存储的计算机程序指令,以实现上述实施例方式一中任意一种目标检测的隐私视频传输、播放方法。
145.在一个示例中,电子设备还可包括通信接口和总线。其中,处理器、存储器、通信接口通过总线连接并完成相互间的通信。
146.通信接口,主要用于实现本发明实施例中各模块、装置、单元和/或设备之间的通信。
147.总线包括硬件、软件或两者,将电子设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(agp)或其他图形总线、增强工业标准架构(eisa)总线、前端总线(fsb)、超传输(ht)互连、工业标准架构(isa)总线、无限带宽互连、低引脚数(lpc)总线、存储器总线、微信道架构(mca)总线、外围组件互连(pci)总线、pci-express(pci-x)总线、串行高级技术附件(sata)总线、视频电子标准协会局部(vlb)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线,但本发明考虑任何合适的总线或互连。
148.综上所述,本发明实施例提供了一种以数据加密和光学遮挡进行隐私屏蔽的方法、装置及设备,获取存在隐私信息的第一类图像源对应的第一基础视频和第二类图像源对应的第一图像集,第一类图像源和第二类图像源的各帧图像的采集时序一一对应,第一类图像源为视频图像,第二类图像源为热成像图像;当检测到婴幼儿看护场景存在隐私信息后,在第二类图像源中确定出隐私信息的位置,然后利用检测目标在第一类图像源和第二类图像源的位置一致的特征,对第一类图像源中隐私信息所在位置对应的图像数据与原始帧头信息进行编码加密,生成第一基础图像中各帧图像新的目标帧头信息,从而将第一基础视频的隐私信息通过与帧头信息共同编码的方式进行加密屏蔽,当在播放第一基础视频时,每当对帧头信息进行解密时就会得到该帧图像存在隐私信息的图像数据,具体是该帧图像的隐私信息类别和位置,从而可以选择对该位置对应的图像区域不进行解码或增加马赛克等方式完成隐私信息屏蔽;本发明基于第二类图像源来确定第一类图像源的隐私信息所在位置,从而对第一类图像源的第一基础视频中各帧图像的隐私信息进行屏蔽,无需对每一帧视频图像进行检测分析,既能不破坏第一类图像源的视频图像,又能实现隐私信息的屏蔽,无需担心对第一基础视频进行隐私信息检测环节造成的信息泄露。
149.需要明确的是,本发明并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本发明的方法过程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本发明的精神后,作出各种改变、修改和添加,或者改变步骤之间的顺序。
150.以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时,其可以例如是电子电路、专用集成电路(asic)、适当的固件、插件、功能卡等等。当以软件方式实现时,本发明的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中,或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、rom、闪存、可擦除rom(erom)、软
盘、cd-rom、光盘、硬盘、光纤介质、射频(rf)链路,等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
151.最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1