基于手持式装置中的眼睛俘获的增强现实处理的制作方法

文档序号:11780082阅读:来源:国知局
基于手持式装置中的眼睛俘获的增强现实处理的制作方法

技术特征:
1.一种用于区分对图像中的对象的处理的优先级的方法,其包含:使用装置的第一相机俘获第一图像,所述第一相机相对于所述装置的用户指向外;使用所述装置的第二相机俘获第二图像,其中所述第二图像包含所述用户的眼睛;基于所述第一图像中的一个或一个以上对象而产生第一概率图;基于所述第二图像中的所述用户的所述眼睛而产生第二概率图;基于所述第一和第二概率图而产生组合概率图;至少部分基于所述组合概率图而产生与所述第一图像中的所述一个或一个以上对象相关联的增强现实AR信息;其中基于所述组合概率图而产生所述AR信息包含基于所述组合优先级图而区分所述第一图像中的不同对象的优先级。2.根据权利要求1所述的方法,其中所述概率图包含多个瓦片,且至少部分基于所述第二图像中的所述用户的所述眼睛而给予所述概率图的一个或一个以上瓦片比其它瓦片高的优先级。3.根据权利要求1所述的方法,其中所述第一概率图界定所述第一图像中的具有比所述第一图像中的其它区域高的包含感兴趣的对象的概率的一个或一个以上区域;且其中所述第二概率图界定基于所述用户眼睛相对于所述第一图像中的其它区域具有更高的用户兴趣的概率的一个或一个以上区域。4.根据权利要求3所述的方法,其进一步包括产生所述第一或第二图像中的至少一者的镜像版本,使得所述第一和第二图像从共同角度对准,其中所述第一和第二概率图中的至少一者是基于所述镜像版本而产生。5.根据权利要求1所述的方法,其中使所述第一和第二图像时间同步。6.根据权利要求1所述的方法,其进一步包括针对第一图像序列和第二图像序列的每个图像来重复所述方法,其中所述第一图像序列与所述第二图像序列时间同步。7.根据权利要求1所述的方法,其进一步包括针对第一图像序列中的每第N图像以及第二图像序列中的每第N图像来重复所述方法,其中所述第一图像序列与所述第二图像序列时间同步,且其中N表示大于或等于2的整数。8.根据权利要求1所述的方法,其中通过包含所述第一相机、所述第二相机和显示器的手持式装置来执行所述方法。9.根据权利要求1所述的方法,其中实时地执行所述方法。10.根据权利要求1所述的方法,其进一步包括:使用所述第一相机俘获第一图像序列,使用所述第二相机俘获第二图像序列,其中所述第二图像序列包含所述用户的所述眼睛;基于所述第二图像序列中的所述用户的所述眼睛而产生多个概率图;至少部分基于所述多个概率图而产生所述AR信息;以及显示所述AR信息与所述第一图像序列。11.根据权利要求1所述的方法,其进一步包括通过以优先级区分的次序处理AR信息而基于所述不同对象的优先级区分来执行对所述不同对象的对象识别。12.根据权利要求1所述的方法,其进一步包括显示所述增强现实AR信息与所述第一图像。13.一种用于区分对图像中的对象的处理的优先级的装置,所述装置包括:第一相机,其经定向以在所述第一相机相对于所述装置的用户指向外时俘获第一图像;第二相机,其经定向以在所述第一相机相对于所述用户指向外时俘获包含所述用户的眼睛的第二图像;增强现实AR单元,其:基于所述第一图像中的一个或一个以上对象而产生第一概率图;基于所述第二图像中的所述用户的所述眼睛而产生第二概率图;基于所述第一和第二概率图而产生组合概率图;以及至少部分基于所述组合概率图而产生与所述第一图像中的所述一个或一个以上对象相关联的增强现实AR信息,其中在基于所述组合概率图而产生所述AR信息时,增强现实AR单元基于所述组合概率图而区分所述第一图像中的不同对象的优先级。14.根据权利要求13所述的装置,其中所述概率图包含多个瓦片,且至少部分基于所述第二图像中的所述用户的所述眼睛而给予所述概率图的一个或一个以上瓦片比其它瓦片高的优先级。15.根据权利要求13所述的装置,其中所述第一概率图界定所述第一图像中的具有比所述第一图像中的其它区域高的包含感兴趣的对象的概率的一个或一个以上区域;且其中所述第二概率图界定基于所述用户眼睛相对于所述第一图像中的其它区域具有更高的用户兴趣的概率的一个或一个以上区域。16.根据权利要求15所述的装置,其中所述AR单元产生所述第一或第二图像中的至少一者的镜像版本,使得所述第一和第二图像从共同角度对准,其中所述第一和第二概率图中的至少一者是基于所述镜像版本而产生。17.根据权利要求13所述的装置,其中所述第一和第二图像被时间同步。18.根据权利要求13所述的装置,其中所述AR单元针对第一图像序列的每个图像来重复所述AR信息的产生,其中所述第一图像序列与第二图像序列时间同步。19.根据权利要求13所述的装置,其中所述AR单元针对第一图像序列的每第N图像来重复所述AR信息的产生,其中所述第一图像序列与第二图像序列时间同步,且其中N表示大于或等于2的整数。20.根据权利要求13所述的装置,其中产生所述AR信息实时地发生。21.根据权利要求13所述的装置,其中:所述第一相机俘获第一图像序列,所述第二相机俘获第二图像序列,其中所述第二图像序列包含所述用户的所述眼睛;所述AR单元基于所述第二图像序列中的所述用户的所述眼睛而产生多个概率图,且至少部分基于所述多个概率图而产生所述AR信息;且显示器显示所述AR信息与所述第一图像序列。22.根据权利要求13所述的装置,其中所述AR单元包括集成电路和微处理器中的至少一者。23.根据权利要求13所述的装置,且其通过以优先级区分的次序处理所述AR信息而基于所述不同对象的优先级区分来执行对所述不同对象的对象识别。24.根据权利要求13所述的装置,其进一步包括显示所述AR信息与所述第一图像的显示器。25.一种用于区分对图像中的对象的处理的优先级的装置,其包括:用于用装置俘获第一图像的装置;用于用所述装置俘获第二图像的装置,其中所述第二图像包含用户的眼睛,且其中所述第一和第二图像被同时俘获;用于基于所述第一图像中的一个或一个以上对象而产生第一概率图的装置;用于基于所述第二图像中的所述用户的所述眼睛而产生第二概率图的装置;用于基于所述第一和第二概率图而产生组合概率图的装置;以及用于至少部分基于所述组合概率图而产生与所述第一图像中的所述一个或一个以上对象相关联的增强现实AR信息的装置;其中所述用于产生所述增强现实信息的装置包含用于基于所述组合概率图而区分所述第一图像中的不同对象的优先级的装置。26.根据权利要求25所述的装置,其中所述概率图包含多个瓦片,且至少部分基于所述第二图像中的所述用户的所述眼睛而给予所述概率图的一个或一个以上瓦片比其它瓦片高的优先级。27.根据权利要求25所述的装置,其中所述第一概率图界定所述第一图像中的具有比所述第一图像中的其它区域高的包含感兴趣的对象的概率的一个或一个以上区域;且其中所述第二概率图界定基于所述用户眼睛相对于所述第一图像中的其它区域具有更高的用户兴趣的概率的一个或一个以上区域。28.根据权利要求27所述的装置,其进一步包括用于产生所述第一或第二图像中的至少一者的镜像版本以使得所述第一和第二图像从共同角度对准的装置,其中所述第一和第二概率图中的至少一者是基于所述镜像版本而产生。29.根据权利要求25所述的装置,其中所述第一和第二图像被时间同步。30.根据权利要求25所述的装置,其中针对第一图像序列和第二图像序列的每个图像来重复产生所述AR信息,其中所述第一图像序列与所述第二图像序列时间同步。31.根据权利要求25所述的装置,其中针对第一图像序列中的每第N图像以及第二图像序列中的每第N图像来重复产生所述AR信息,其中所述第一图像序列与所述第二图像序列时间同步,且其中N表示大于或等于2的整数。32.根据权利要求25所述的装置,其中所述装置是包含第一相机、第二相机和显示器的手持式装置。33.根据权利要求25所述的装置,其中产生所述AR信息实时地发生。34.根据权利要求25所述的装置,其进一步包括:用于俘获第一图像序列的装置,用于俘获第二图像序列的装置,其中所述第二图像序列包含所述用户的所述眼睛;用于基于所述第二图像序列中的所述用户的所述眼睛而产生多个概率图的装置;用于至少部分基于所述多个概率图而产生所述AR信息的装置;以及用于显示所述AR信息与所述第一图像序列的装置。35.根据权利要求25所述的装置,其进一步包括用于显示所述AR信息与所述第一图像的装置。36.根据权利要求25所述的装置,其进一步包括用于通过以优先级区分的次序处理所述AR信息而基于所述不同对象的优先级区分来执行对所述不同对象的对象识别的装置。37.一种用于区分对图像中的对象的处理的优先级的设备,所述设备经配置以:在从装置的第一相机接收第一图像后,所述第一相机即刻相对于所述装置的用户指向外;以及在使用所述装置的第二相机接收第二图像后,其中所述第二图像包含所述用户的眼睛,即刻基于所述第一图像中的一个或一个以上对象而产生第一概率图;基于所述第二图像中的所述用户的所述眼睛而产生第二概率图;基于所述第一和第二概率图而产生组合概率图;以及基于所述组合概率图而产生与所述第一图像中的所述一个或一个以上对象相关联的增强现实AR信息,其中在基于所述组合概率图而产生所述AR信息时,基于所述组合概率图而区分所述第一图像中的不同对象的优先级。38.根据权利要求37所述的设备,其中所述设备包括通信地耦合到所述第一相机、所述第二相机和显示器的处理器。39.根据权利要求37所述的设备,其中所述设备包括手持式装置的AR单元。40.根据权利要求37所述的设备,其进一步包括用于输出所述AR信息的显示器。41.根据权利要求37所述的设备,其进一步经配置以通过以优先级区分的次序处理所述AR信息而基于所述不同对象的优先级区分来执行对所述不同对象的对象识别。
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1