专利名称：一种多视角拍摄进行孔径合成成像方法
技术领域：
本发明涉及一种多视角拍摄进行准确孔径合成图像的方法，属于图像处理技术领域。
背景技术：
在传统成像系统中，相机的景深随对焦距离的增加而增加，随光圈的增加而减小。为了达到某些特殊拍摄效果，如突出表现某一感兴趣的物体，需要采用较小的景深成像系统。而相机和目标物体间的距离往往是 不能改变的，即对焦距离固定，这种情况下，可以采用大光圈(孔径)的相机获取小景深成像效果。相机的光圈越大就越能更多的记录从不同方向发出的光线。但是相机的光圈不能过大，过大的光圈将使镜头的像差畸变等急剧增加。为了解决这个问题，可以利用普通相机多视角拍摄目标物体，对拍摄得到的图像进行计算合成，达到孔径合成成像的效果。在这种多视角拍摄的孔径合成成像系统中，成像景深范围极小。如果感兴趣的物体位于成像系统对焦面上，则其合成孔径图像清晰，而处于景深外的物体，由于其弥散斑直径正比于孔径大小，将会离焦虚化，从而达到突出感兴趣目标的目的。这种孔径合成成像系统中，一般采用单相机或者相机阵列对目标场景进行多视角拍摄的图像采集。为提高合成孔径图像的清晰度和准确度，需要对每个相机采集的图像进行几何校正，因为拍摄过程中各相机视角存在位置偏差。之后将几何校正之后的图像用于目标图像合成的重采样。在已有技术中，孔径合成的主要方法是利用平面相机阵列获取多视角图像。假设所有相机的光心都位于同一平面上，利用平面视差法标定相机间的相对位置。根据视差和目标深度及相机间相对位置的关系，对图像进行整像素平移，以抵消目标在不同视角拍摄造成的视差，即将所有图像对焦至目标平面。将所有对焦至目标平面的图像进行叠加和平均，这样位于对焦平面上的物体清晰，而处在对焦平面外的物体由于视差将会虚化弥散，达到突出感兴趣目标的效果。因此，在现有的多视角拍摄进行孔径合成成像的技术中，存在以下缺点在实际安装中难以严格达到所有拍摄角度的相机光心位于同一平面；对原始图像序列进行整像素的平移以对焦到感兴趣的平面忽略了其视差存在非整像素的可能性，降低了合成孔径图像的清晰度；对所有对焦后的图像进行叠加平均相当于对原始图像进行低通滤波，损失了目标图像的高频细节信息。
发明内容
本发明的目的是为了解决上述问题，提出一种多视角拍摄进行孔径合成成像方法，提高感兴趣目标图像的对比度和清晰度。—种多视角拍摄进行孔径合成成像方法，包括以下几个步骤步骤一采用平面射影变换，对原始图像序列进行坐标变换，重采样合成对焦到非感兴趣平面的图像序列；
步骤二 根据方差阈值法，对对焦到非感兴趣平面的像点进行识别，并在原始图像序列里去除非感兴趣目标平面Π的像点；步骤三根据平面射影变换，对去除非感兴趣目标的原始图像序列进行坐标变换；步骤四综合所有经变换后的图像坐标，重采样合成感兴趣目标平面，得的目标图像；本发明的优点在于(I)本发明通过多次平面射影变换的方法，准确地对感兴趣目标平面进行透视成像，校正了平面相机阵列的安装误差，提高了感兴趣目标的对比度和清晰度。(2)本发明通过采用对多张图像重采样的方法，尽量保留了感兴趣目标的高频细节信息，进一步提高感兴趣目标的图像清晰度。
图I是本发明的具体实施方式
提供的多视角成像系统示意图；图2是本发明的具体实施方式
提供的多视角拍摄的原始图像序列其中的一张；图3是本发明的具体实施方式
提供的采用现有技术方案的孔径合成图像；图4是本发明的具体实施方式
提供的采用本发明技术方案的孔径合成图像图；图5是本发明的具体实施方式
提供的多视角拍摄进行孔径合成成像算法的流程图。
具体实施例方式下面将结合附图和实施例对本发明作进一步的详细说明。一种多视角拍摄进行孔径合成成像方法，流程如图5所示，包括以下几个步骤步骤一采用平面射影变换，对原始图像序列进行坐标变换，重采样合成对焦到非感兴趣平面的图像序列；对不同视角的原始图像序列进行平面射影变换，将所有图像对焦到非感兴趣目标平面Π上,具体为
权利要求
1.一种多视角拍摄进行孔径合成成像方法，其特征在于，包括以下几个步骤 步骤一采用平面射影变换，对原始图像序列进行坐标变换，重采样合成对焦到非感兴趣平面的图像序列； 对不同视角的原始图像序列进行平面射影变换，将所有图像对焦到非感兴趣目标平面Π上，具体为 3 =Hm* y, I J |_ I 其中[Xi Ii 1]7是相机阵列中第i个相机所获得的包含感兴趣目标场景的原始图像齐次坐标，其坐标单位为像素，Hni是原始图像对焦到非感兴趣平面Π的平面射影矩阵，[xni yni 1]T是原始图像坐标，[Xi Yi 1]Τ为经平面射影变换Hni对应的齐次坐标； 取第i张原始图像，将平面射影变换后的坐标[xni yni 1]τ进行双线性重采样，得到·原始图像对焦到非感兴趣目标平面Π的图像Ini ； 同理，对其它原始图像序列进行上述操作，得到对焦到非感兴趣目标平面的图像序列； 步骤二 根据方差阈值法，对对焦到非感兴趣平面的像点进行识别，并在原始图像序列里去除非感兴趣目标平面Π的像点； 采用方差阈值法判断非感兴趣目标平面Π的坐标在对焦到非感兴趣目标平面Π的图像序列Ipi的坐标[X。。y。。1]τ;则非感兴趣目标平面Π的坐标在第i张原始图像的坐标[X(K;iYoci 1]T 为—λ·; =Hw· y c i J L1 其中在原图1中将坐标[X(K;i yoci 1]7的邻域整像素全部剔除，即灰度设置为0，生成在原图基础上去除非感兴趣目标平面Π的图像Γ i； 当非感兴趣目标为覆盖了一定的深度范围时，判断所有深度非感兴趣平面是否全部去除，如果是，则进入步骤三，否则，返回步骤一，在合成目标图像之前，反复使用步骤一、二，逐次消除各深度平面内的非感兴趣目标； 步骤三根据平面射影变换，对去除非感兴趣目标的原始图像序列进行坐标变换； 对去除非感兴趣目标的图像Γ i进行平面射影变换，对焦到目标平面上； _χ·] Γχ-；jw =Hobll* y't I J I 其中Htjbji是图像I' 3寸焦到目标的平面射影矩阵，[Xtjbji y(Aji 1]τ是图像Γ i坐标[Xi Ii I] T经目标平面射影变换对应的齐次坐标；步骤四综合所有经变换后的图像坐标，重采样合成感兴趣目标平面，得的目标图像；通过上述步骤得到N组去除非感兴趣目标且对焦到目标平面的坐标[Xtjbjl yobJ1 l]Tr··[xobJi Yobji 1]T，··· [XobjN YobjN 1]T，对这N组坐标数据进行双线性重采样,合成对焦到目标平面的图像，最后，得到目标图像； 当目标物体有一定的深度范围时，判断感兴趣目标物体各个深度平面的目标图像是否全部获取，如果是，得到目标物体在各深度处的合成孔径切片图像，对各切片图像进行图像融合，得到被遮拦目标物体的完整合成大孔径图像；否则，返回步骤三。
2.根据权利要求I所述的一种多视角拍摄进行孔径合成成像方法，其特征在于，所述的步骤一中，Hni由第i个相机的视角和对焦到非感兴趣目标平面的视角的相对位置共同决定，计算Hni采用计算机视觉中的直接线性变换。
全文摘要
本发明公开了一种多视角拍摄进行孔径合成成像方法，属于图像处理技术领域，包括以下几个步骤步骤一采用平面射影变换，对原始图像序列进行坐标变换，重采样合成对焦到非感兴趣平面的图像序列；步骤二根据方差阈值法，对对焦到非感兴趣平面的像点进行识别，并在原始图像序列里去除非感兴趣目标平面∏的像点；步骤三根据平面射影变换，对去除非感兴趣目标的原始图像序列进行坐标变换；步骤四综合所有经变换后的图像坐标，重采样合成感兴趣目标平面，得的目标图像；本发明通过多次平面射影变换的方法，准确地对感兴趣目标平面进行透视成像，校正了平面相机阵列的安装误差，提高了感兴趣目标的对比度和清晰度。
文档编号G06T7/00GK102968784SQ20121039390
公开日2013年3月13日 申请日期2012年10月17日 优先权日2012年10月17日
发明者袁艳, 颜玉慧, 苏丽娟 申请人:北京航空航天大学