域的一般技术人员因此将明白可在不脱离本发明的精神的情况下，使用各种修改、替代构造和等效物。
【主权项】
1.一种用于图像处理的方法，其包括: 获得不同焦距处的场景的多个图像，其中每一图像展示对焦的所述场景的不同部分； 获得与所述多个图像相关联的第一深度图； 获得与所述多个图像相关联的第二深度图，其中所述第一深度图对应于第一邻域大小且所述第二深度图对应于第二邻域大小； 基于所述多个图像和所述第一深度图产生展示对焦的所述场景的两个或两个以上部分的合成图像；以及 基于所述合成图像和所述第二深度图产生展示对焦的所述场景的选定部分的再聚焦图像。2.根据权利要求1所述的方法，其中所述第一邻域大小小于所述第二邻域大小。3.根据权利要求1所述的方法，其进一步包括: 利用清晰度测量滤波器对所述多个所俘获图像中的每一者滤波以产生多个经滤波图像； 其中获得所述第一深度图包括: 基于所述第一邻域大小将第一二维像素函数应用到所述多个经滤波图像中的每一图像以产生第一多个深度图像； 其中获得所述第二深度图包括: 基于所述第二邻域大小将第二二维像素函数应用到所述多个经滤波图像中的每一图像以产生第二多个深度图像。4.根据权利要求3所述的方法，其中所述第一二维像素函数涉及计算对应于所述第一邻域中的多个像素的深度值当中的加权平均值。5.根据权利要求3所述的方法，其中所述第一二维像素函数涉及对对应于所述第一邻域中的像素的深度值实行经加权投票方案。6.根据权利要求3所述的方法，其中所述清晰度测量滤波器为拉普拉斯滤波器。7.根据权利要求3所述的方法， 其中获得所述第一深度图包括: 针对每一像素位置获得对应于所述第一多个深度图像的第一多个深度值当中的最大深度值;且 其中获得所述第二深度图包括: 针对每一像素位置获得对应于所述第二多个深度图像的第二多个深度值当中的最大深度值。8.根据权利要求1所述的方法，其中所述多个图像的所述不同焦距均一地分布在最小焦距值与最大焦距值之间。9.根据权利要求1所述的方法，其中在运行中基于所述第一深度图产生所述第二深度图。10.—种用于图像处理的设备，其包括: 用于获得不同焦距处的场景的多个图像的装置，其中每一图像展示对焦的所述场景的不同部分； 用于获得与所述多个图像相关联的第一深度图的装置； 用于获得与所述多个图像相关联的第二深度图的装置，其中所述第一深度图对应于第一邻域大小且所述第二深度图对应于第二邻域大小； 用于基于所述多个图像和所述第一深度图产生展示对焦的所述场景的两个或两个以上部分的合成图像的装置；以及 用于基于所述合成图像和所述第二深度图产生展示对焦的所述场景的选定部分的再聚焦图像的装置。11.根据权利要求10所述的设备，其中所述第一邻域大小小于所述第二邻域大小。12.根据权利要求10所述的设备，其进一步包括: 用于利用清晰度测量滤波器对所述多个所俘获图像中的每一者滤波以产生多个经滤波图像的装置； 其中所述用于获得所述第一深度图的装置包括: 用于基于所述第一邻域大小将第一二维像素函数应用到所述多个经滤波图像中的每一图像以产生第一多个深度图像的装置； 其中所述用于获得所述第二深度图的装置包括: 用于基于所述第二邻域大小将第二二维像素函数应用到所述多个经滤波图像中的每一图像以产生第二多个深度图像的装置。13.根据权利要求12所述的设备，其中所述第一二维像素函数涉及计算对应于所述第一邻域中的多个像素的深度值当中的加权平均值。14.根据权利要求12所述的设备，其中所述第一二维像素函数涉及对对应于所述第一邻域中的像素的深度值实行经加权投票方案。15.根据权利要求12所述的设备， 其中所述用于获得所述第一深度图的装置包括: 用于针对每一像素位置获得对应于所述第一多个深度图像的第一多个深度值当中的最大深度值的装置;且 其中所述用于获得所述第二深度图的装置包括: 用于针对每一像素位置获得对应于所述第二多个深度图像的第二多个深度值当中的最大深度值的装置。16.根据权利要求10所述的设备，其中在运行中基于所述第一深度图产生所述第二深度图。17.—种用于图像处理的非暂时性处理器可读媒体，其包括处理器可读指令，所述处理器可读指令经配置以致使处理器: 获得不同焦距处的场景的多个图像，其中每一图像展示对焦的所述场景的不同部分； 获得与所述多个图像相关联的第一深度图； 获得与所述多个图像相关联的第二深度图，其中所述第一深度图对应于第一邻域大小且所述第二深度图对应于第二邻域大小； 基于所述多个图像和所述第一深度图产生展示对焦的所述场景的两个或两个以上部分的合成图像；以及 基于所述合成图像和所述第二深度图产生展示对焦的所述场景的选定部分的再聚焦图像。18.根据权利要求17所述的非暂时性处理器可读媒体，其中所述第一邻域大小小于所述第二邻域大小。19.根据权利要求17所述的非暂时性处理器可读媒体，其进一步包括经配置以致使所述处理器进行以下操作的指令: 利用清晰度测量滤波器对所述多个所俘获图像中的每一者滤波以产生多个经滤波图像； 基于所述第一邻域大小将第一二维像素函数应用到所述多个经滤波图像中的每一图像以产生第一多个深度图像;以及 基于所述第二邻域大小将第二二维像素函数应用到所述多个经滤波图像中的每一图像以产生第二多个深度图像。20.根据权利要求19所述的非暂时性处理器可读媒体，其中所述第一二维像素函数涉及计算对应于所述第一邻域中的多个像素的深度值当中的加权平均值。21.根据权利要求19所述的非暂时性处理器可读媒体，其中所述第一二维像素函数涉及对对应于所述第一邻域中的像素的深度值实行经加权投票方案。22.根据权利要求19所述的非暂时性处理器可读媒体，其中所述清晰度测量滤波器为拉普拉斯滤波器。23.根据权利要求19所述的非暂时性处理器可读媒体，其进一步包括用以致使处理器进行以下操作的指令: 针对每一像素位置获得对应于所述第一多个深度图像的第一多个深度值当中的最大深度值，以获得所述第一深度图；以及 针对每一像素位置获得对应于所述第二多个深度图像的第二多个深度值当中的最大深度值，以获得所述第二深度图。24.根据权利要求17所述的非暂时性处理器可读媒体，其进一步包括用以致使所述处理器基于所述第一深度图在运行中产生所述第二深度图的指令。25.—种用于图像处理的设备，其包括: 至少一个处理器，其经配置以: 获得不同焦距处的场景的多个图像，其中每一图像展示对焦的所述场景的不同部分； 获得与所述多个图像相关联的第一深度图； 获得与所述多个图像相关联的第二深度图，其中所述第一深度图对应于第一邻域大小且所述第二深度图对应于第二邻域大小； 基于所述多个图像和所述第一深度图产生展示对焦的所述场景的两个或两个以上部分的合成图像；以及 基于所述合成图像和所述第二深度图产生展示对焦的所述场景的选定部分的再聚焦图像；以及 存储器，其耦合到所述至少一个处理器。26.根据权利要求25所述的设备，其中所述第一邻域大小小于所述第二邻域大小。27.根据权利要求25所述的设备，其中所述至少一个处理器进一步经配置以: 利用清晰度测量滤波器对所述多个所俘获图像中的每一者滤波以产生多个经滤波图像； 基于所述第一邻域大小将第一二维像素函数应用到所述多个经滤波图像中的每一图像以产生第一多个深度图像； 基于所述第二邻域大小将第二二维像素函数应用到所述多个经滤波图像中的每一图像以产生第二多个深度图像。28.根据权利要求27所述的设备，其中所述第一二维像素函数涉及计算对应于所述第一邻域中的多个像素的深度值当中的加权平均值。29.根据权利要求27所述的设备，其中所述至少一个处理器进一步经配置以: 针对每一像素位置获得对应于所述第一多个深度图像的第一多个深度值当中的最大深度值；以及 针对每一像素位置获得对应于所述第二多个深度图像的第二多个深度值当中的最大深度值。30.根据权利要求25所述的设备，其中所述至少一个处理器进一步经配置以基于所述第一深度图在运行中产生所述第二深度图。
【专利摘要】本发明描述用于产生具有再聚焦的能力的全对焦图像的技术。一个实例包含获得与场景的多个所俘获图像相关联的第一深度图。所述多个所俘获图像可包含具有不同焦距的图像。方法进一步包含：获得与所述多个所俘获图像相关联的第二深度图；(基于所述多个所俘获图像和所述第一深度图)产生展示对焦的所述场景的不同部分的合成图像；以及(基于所述合成图像和所述第二深度图)产生展示对焦的所述场景的选定部分的再聚焦图像。
【IPC分类】G06T7/00, H04N5/222, H04N5/232
【公开号】CN105474622
【申请号】CN201480046458
【发明人】尼特希·什罗夫, 拉明·礼萨伊法尔, 皮尤诗·夏尔马
【申请人】高通股份有限公司
【公开日】2016年4月6日
【申请日】2014年8月29日
【公告号】CA2919253A1, EP3039857A1, US9344619, US20150062370, WO2015031856A1