专利名称:多角度特定物体判断设备及多角度特定物体判断方法
技术领域:
本发明涉及一种多角度特定物体判断设备及多角度特定物体判断方法,更具体地 说,本发明涉及一种可以在不影响判断精度的前提下,实现提升特定物体判断速度的多角 度特定物体判断设备及多角度特定物体判断方法。
背景技术:
快速而准确的物体检测算法是图像处理和视频内容分析领域中许多应用的基础 性工作,所述应用诸如人脸检测和情感状态分析、视频会议控制和分析、行人保护系统等 等。Adaboost人脸检测算法可以有效地用于人脸的正面识别,市场上有很多基于该领域的 产品出现,比如数字照相机中的人脸检测功能。但是,随着数字照相机和移动电话的迅速发 展,仅仅进行正面的物体识别已经远不能满足需求,而是开始关注于多角度情况下的快速、 准确的物体检测问题。美国专利No. 7,3 ,671 B2提出了可用于多角度人脸检测的算法和设备。在该专 利中,人脸检测系统通过一系列复杂度递增的强分类器把非人脸数据在层级分类器结构中 前面的层级(复杂度较低的层级)中滤除掉。其层级分类器结构为金字塔结构,采用了由 粗到精、由简单到复杂的策略,利用比较简单的特征(层级分类器结构中前面层级采用的 特征)就可以滤除大量的非人脸数据,从而得到了实时多角度人脸检测系统。该算法最大 的问题在于,金字塔结构在检测过程中同时包含了大量的冗余信息,从而影响了检测的速 度和精度。美国专利No. 7,457,432 B2提出了可用于特定物体检测的方法和设备。在该专利 中,HAAR特征被作为弱特征采用。Real-Adaboost算法被用来对层级分类器结构中每层级 的强分类器进行训练以进一步提升检测精度,LUT (查询表)数据结构被提出以提升特征选 择的速度。其中,“强分类器”及“弱特征”均为本技术领域中普遍熟知的概念。该专利的主 要缺点在于,该方法只适用于特定物体在一定的角度范围内的检测,主要是正面人脸识别, 以致在一定程度上限制了它的应用。专利申请公开WO No. 2008/151470 Al提出了用于在复杂背景条件下进行鲁棒性 人脸检测的算法和装置。其中,具有低计算复杂度和高冗余度的微特征结构被用来描述人 脸特性。对于损失敏感的Adaboost算法被采用来选择最有效的人脸弱特征来形成层级分 类器结构中每层级的强分类器,以区分人脸数据和非人脸数据。由于每层级的强分类器都 可以在保证检测率的前提下尽可能多地降低对于非人脸数据的错误接受率,因此最终的分 类器结构可以在只具有简单结构的情况下在复杂背景中得到很高的检测性能。其中,“弱特 征”为本技术领域中普遍熟知的概念。该技术的主要缺点在于,该方法只可以用于特定物体 在一定的角度范围内的检测,主要是正面人脸识别,以致在一定程度上限制了其应用。尽管理论上由多个检测角度的分类器组成的层级分类器结构就可以实现多角度 检测问题,但是通常的多角度检测的层级分类器结构无法克服如下两个主要问题(1)由 于增加了分类器的数目,造成分类器的判断时间增加,以致整个检测系统检测速度慢,无法达到实时检测;( 无法达到与某一特定角度下的单角度物体检测的精度同等的检测精 度,也就是造成检测精度低。
发明内容
鉴于现有技术中存在的上述问题而作出本发明,本发明着眼于特定物体检测过程 中对窗口图像是否为特定物体图像进行判断的关键环节,提供针对这一环节的多角度特定 物体判断设备及多角度特定物体判断方法,通过采用多个级联分类器组形式的多层级分类 器结构,改进对窗口图像是否为特定物体图像进行判断的速度及精度,以有助于加速检测 过程并同时提高检测精度。根据本发明的一个方面,提供一种多角度特定物体判断设备,包括输入装置,用 于输入图像数据;多个级联分类器组,其中每个级联分类器组由多个与同一检测角度相对 应的分类器级联构成,不同分类器与不同特征相对应,各个分类器用于计算图像数据在相 应特征方面属于相应检测角度的特定物体的置信度值,并根据置信度判断该图像数据是否 属于特定物体,其特征在于,在级联分类器组的分类器之间,设置自适应姿态估计装置,用 于根据该自适应姿态估计装置之前的与同一检测角度相应的各分类器计算的置信度值,判 断图像数据是否进入该检测角度的位于该自适应姿态估计装置之后的各分类器。根据本发明的另一个方面,提供一种多角度特定物体判断方法,包括输入步骤, 输入图像数据;多个并列的分类步骤,其中每个分类步骤由多个与同一检测角度相对应的 子分类步骤依次构成,不同子分类步骤与不同特征相对应,在各个子分类步骤中计算图像 数据在相应特征方面属于相应检测角度的特定物体的置信度值,并根据置信度判断该图像 数据是否属于特定物体,其特征在于,在分类步骤的子分类步骤之间,执行自适应姿态估计 步骤,根据该自适应姿态估计步骤之前的与同一检测角度相应的各子分类步骤计算的置信 度值,判断是否对图像数据执行该检测角度的在该自适应姿态估计步骤之后的各子分类步 马聚ο通过本发明的上述方面,通过加入姿态估计,在结构的前层级中就可以放弃一些 与输入数据姿态无关的分类器,从而加快判断速度;同时,自适应的姿态估计过程可以确保 与输入数据姿态相近的分类器被选中以用于后续的判断,从而保证判断精度。从而,通过采 用本发明的上述方面,有助于在保证检测精度的前提下,提升特定物体检测的速度。通过阅读结合附图考虑的以下本发明的优选实施例的详细描述,将更好地理解本 发明的以上和其他目标、特征、优点和技术及工业重要性。
图1是示出现有的多角度特定物体判断设备的示意图。图2是示出根据本发明实施例的多角度特定物体判断设备的示意图。图3A和图;3B示意性地说明物体相对于正面图像的旋转情况,图3A示出面内旋转 的情况,图3B示出面外旋转的情况。图4是示出从全图中提取窗口的示意图。图5是示出窗口图像聚类效果的示意图。图6是示出按照本发明实施例的自适应姿态估计装置的示意结构框图。
图7A和图7B示出了自适应姿态估计装置根据隶属度值选择级联分类器组的示 例。图8示出在输入正面人脸图像的情况下不同层级不同检测角度的分类器将其判 断为非人脸的数目的示例。图9示出在采用根据本发明实施例的自适应姿态估计装置的情况下对于其后相 邻层级中的分类器使用情况的影响的例子。图10示出了在未采用和采用自适应姿态估计装置的情况下、经过某层级分类器 判断之后的输入图像数据的数目关于其最多将要进入下一层级的检测角度数目的分布的 对比示例。
具体实施例方式图1是示出现有的多角度特定物体判断设备的示意图。其中,输入装置100用于输 入图像数据;级联分类器组110、120、130分别对应于不同的检测角度,级联分类器组110由
分类器111、112.......Iln级联而成,级联分类器组120由分类器121、122.......12η级
联而成,级联分类器组130由分类器131、132.......13η级联而成,η为自然数。分类器标
号左起第2位数字代表该分类器的检测角度,左起第3位数字代表该分类器在相应的级联 分类器组中的位置次序,也就是说,多个级联分类器组中左起第3位数字相同的分类器可 以视为处于同一层级,同一组中位置不同的分类器采用的特征不同,而不同组中处于同一 层级的分类器所采用的特征不必相同。而且,尽管图1中示出各个级联分类器组中均具有 η个分类器,然而,本领域技术人员可以理解,由于不同检测角度采用的特征可能不同,各个 级联分类器组中的分类器数目也可以不同,也就是,分类器不必然形成如图1所示的矩阵 阵列,或者说分类器不必填满这样的矩阵。而且,尽管图1中示出用于3个检测角度的3个级联分类器组,然而,对于本领域 技术人员显而易见的是,也可以增加或减少检测角度,例如设置2个级联分类器组用于2个 检测角度,或4个级联分类器组用于4个检测角度,或更多个级联分类器组用于更多个检测 角度,或者甚至只设置1个级联分类器组用于单角度检测作为多角度特定物体判断设备的 一种特殊形式。所输入的图像数据分别进入各个级联分类器组,首先由各组中处于第1层级的分 类器计算图像数据在相应特征方面属于相应检测角度的特定物体的置信度值,并根据置信 度判断该图像数据是否属于特定物体,例如人脸。如果某个分类器将图像数据判断为非人 脸,即判断结果为F (False),则将其归为非人脸图像,该图像数据在相应检测角度的判断结 束,如果该分类器将图像数据判断为人脸,即判断结果为T(True),则图像数据进入该角度 的下一分类器进行判断,依此类推,直到级联分类器组中最后一个分类器,例如处于第η层 级的分类器将将图像数据判断为人脸,判断为Τ,则将该图像数据归为人脸图像。其中,各个分类器可以是任意类型的强分类器,例如采用支持向量机(Support Vector Machine,SVM)、Adab00st等等的算法的公知的分类器。对于各个强分类器,可以使 用多种表象局部纹理结构的弱特征或其组合来进行计算,所述弱特征诸如HAAR特征、多尺 度LBP特征等等在本领域中通常采用的特征。针对某特定物体的分类器基于某特定姿态下的某特定物体特性的训练而得到,其中,所谓姿态在本领域中通常是指物体相对于正面图像的旋转角度,如图3所示。图3A和 图3B示意性地说明物体相对于正面图像的旋转情况。图3A示出面内旋转(rotation in plane, RIP)的情况,即以位于图中最上方的正面图像为基准,相对于垂直于图像平面的轴 来旋转。图3B示出面外旋转(rotation off plane, R0P)的情况,即以位于图中正中央的 正面图像为基准,在Pitch(俯仰)方向和Yaw(左右摇摆)方向的旋转。所谓正面图像是 本领域的公知公认的概念,与正面图像有一微小旋转角度的图像在实践中也视为正面图像 来处理。在图1所示的相关现有技术中,以及在下文描述的本发明实施例中,均以人脸作 为待处理等特定物体,然而,无论现有技术还是本发明均可以处理多种物体,例如人脸、手 掌、行人等等。无论何物体、何特征、何角度,只要在处理任务之前事先指定,并通过采用样 本进行训练,就可以得到相应的分类器,组成级联的分类器组,针对不同角度进行训练,即 得到能够进行多角度判断或检测处理的多个级联分类器组。图1示意性地示出的多角度特定物体判断设备可以用于例如用于对诸如静态图 像和视频等等的多种数据介质进行处理,检测出其中的特定物体。可以选择采用窗口提取 装置,先从整幅图像中提取窗口图像,将窗口图像数据作为图像数据输出到多角度特定物 体判断设备来进行判断处理。图4是示意性地示出从全图中提取窗口的示意图,S卩,可以根 据不同尺度以不同步长的窗口在全幅图像上遍历,得到一系列窗口图像。无论是对于经过 提取所得到的窗口图像,还是甚至对于未提取窗口的整幅图像,多角度特定物体判断设备 均可以按照同样的方式来处理。多角度特定物体判断设备输出的结果是对于所输入的图像数据是否属于定物体 或者说是否是该特定物体的图像的判断,判断为是(T)的所输入图像数据即可作为物体检 测的结果来输出。然而,还可以选择采用聚类装置,用来把在原整幅图像中实际上是同一特 定物体的多个判断为是(T)的窗口图像聚类为一个图像,使得一个特定物体只有一个检测 出的结果。图5是示出窗口图像聚类效果的示意图。聚类前的多个表示为虚线框的窗口图 像经过聚类成为一个实线框表示的窗口图像。可以通过本领域公知的现有技术来进行该聚 类处理,例如K均值聚类。显然,只要是多角度特定物体判断设备判断为是(T)的窗口图像 数据均被检测为属于该特定物体,不经过聚类处理也可以作为检测结果输出。图2是示出根据本发明实施例的多角度特定物体判断设备的示意图。根据本发明 实施例的多角度特定物体判断设备包括输入装置200,用于输入图像数据;多个级联分类 器组210、220、230,其中每个级联分类器组由多个与同一检测角度相对应的分类器级联构 成,不同分类器与不同特征相对应,各个分类器用于计算图像数据在相应特征方面属于相 应检测角度的特定物体的置信度值,并根据置信度判断该图像数据是否属于特定物体;在 级联分类器组的分类器之间设置的自适应姿态估计装置250,用于根据该自适应姿态估计 装置之前的与同一检测角度相应的各分类器计算的置信度值,判断图像数据是否进入该检 测角度的位于该自适应姿态估计装置之后的各分类器。级联分类器组210、220、230分别对应于不同的检测角度,级联分类器组210由分
类器211、212.......21η级联而成,级联分类器组220由分类器221、222....... 2 级联
而成,级联分类器组230由分类器231、232....... 23η级联而成,η为自然数。分类器标号
左起第2位数字代表该分类器的检测角度,左起第3位数字代表该分类器在相应的级联分类器组中的位置次序,也就是说,多个级联分类器组中左起第3位数字相同的分类器可以 视为处于同一层级,同一组中位置不同的分类器采用的特征不同,而不同组中处于同一层 级的分类器所采用的特征不必相同。如同图1所示的现有的多角度特定物体判断设备那样,尽管图2中示出根据本发 明实施例的多角度特定物体判断设备中,各个级联分类器组中均具有η个分类器,然而,本 领域技术人员可以理解,由于不同检测角度采用的特征可能不同,各个级联分类器组中的 分类器数目也可以不同。而且,尽管图2中示出用于3个检测角度的3个级联分类器组,然而,对于本领域 技术人员显而易见的是,也可以增加或减少检测角度,例如设置2个级联分类器组用于2个 检测角度,或4个级联分类器组用于4个检测角度,或更多个级联分类器组用于更多个检测 角度,或者甚至只设置1个级联分类器组用于单角度检测作为多角度特定物体判断设备的 一种特殊形式。如同图1所示的现有的多角度特定物体判断设备那样,根据本发明实施例的多角 度特定物体判断设备既可以处理整幅图像,也可以处理经窗口提取装置提取得到的窗口图 像,无论对何种图像,根据本发明实施例的多角度特定物体判断设备均可以按照同样的方 式来处理。而且,如同图1所示的现有的多角度特定物体判断设备那样,根据本发明实施例 的多角度特定物体判断设备输出的结果是对于所输入的图像数据是否属于特定物体或者 说是否是该特定物体的图像的判断,判断为是(T)的所输入图像数据即可作为物体检测的 结果来输出,也可以选择采用聚类装置,把在原整幅图像中实际上是同一特定物体的多个 判断为是(T)的窗口图像聚类为一个图像,使得一个特定物体只有一个检测出的结果。通过对图1、图2所示的多角度特定物体判断设备进行比较,并且根据前文的描述 可以理解,根据本发明实施例的多角度特定物体判断设备与现有技术的多角度特定物体判 断设备中相同的部件可以具有相同的功能,各个分类器可以采用强分类器,经过相应训练 可以处理各种特定物体,既可以是人脸,也可以是手掌、行人等等。本发明实施例的多角度 特定物体判断设备相对于现有技术的一个区别在于,在级联分类器组的分类器之间设置的 自适应姿态估计装置250,通过将一些与输入图像数据的姿态无关的分类器舍弃掉,来节省 大量的检测时间,并且保留与输入数据姿态相近的分类器以用于后续的判断,从而保证判 断精度。在图2所示的例子中,级联分类器组210中分类器212之后的分类器,如所示的分 类器21η,由于被自适应姿态估计装置250判断为其检测角度与输入图像数据的姿态差距 较大而在后续判断中被放弃使用,其余检测角度与输入数据姿态相近的例如级联分类器组 220和230中的分类器被用来继续处理图像。显然,根据具体的实施环境,取决于输入图像 的情况,可能是其它角度的分类器被放弃。值得注意的是,自适应姿态估计装置250用来选 择与输入图像数据中物体姿态接近的检测角度的分类器,而非直接判断输入图像数据是否 属于作为检测对象的特定物体。被自适应姿态估计装置之前的分类器判断为非特定物体图 像的输入图像由于不再处理,因而不会进入自适应姿态估计装置250,因此,对于进入自适 应姿态估计装置250、要由自适应姿态估计装置250处理的图像数据,均假定其为特定物体 图像。在各个级联分类器组中,可以按照所计算的特征复杂度升高的顺序排列分类器, 也就是,在靠前的层级中的分类器计算的特征相对简单,计算复杂度较低,层级越靠后,分
8类器计算的特征越复杂,计算复杂度较高。然而,本领域技术人员可以理解,在级联分类器 组中,分类器的排列可以按照任何次序,可以与所针对的特征没有任何关系,或者也可以按 照特征的其它关系。,自适应姿态估计装置可以设置在级联分类器组内的任何位置,可以位 于第一层级和第二层级之间,或者也可以位于第二层级和第三层级之间,本领域技术人员 可以理解,位于其它层级之间也可以实现将一些与输入图像数据的姿态无关的分类器舍弃 掉,起到节省检测时间提高判断精度的作用。图6是示出按照本发明实施例的自适应姿态估计装置250的示意结构框图。自适 应姿态估计装置250包括归一化计算装置252,用于把所述自适应姿态估计装置之前的与 同一检测角度相应的各分类器计算的置信度值进行归一化,获得置信度归一化值;融合计 算装置254,用于融合由所述归一化计算装置获得的置信度归一化值,获得与检测角度相应 的融合值;姿态估计装置256,用于根据融合计算装置获得的各个检测角度的融合值,计算 图像数据关于各个检测角度的隶属度值;级联分类器组选择装置258,用于将各个检测角 度的隶属度值分别与预定阈值进行比较,选择隶属度值大于预定阈值的检测角度的该自适 应姿态估计装置之后的各分类器,供图像数据进入。自适应姿态估计装置250位于每个级联分类器组中处于相同层级的分类器之间, 因而自适应姿态估计装置250及其中的部件归一化计算装置252、融合计算装置254、姿态 估计装置256、级联分类器组选择装置258均是针对同一层级之前的判断结果进行估计,也 就是说,自适应姿态估计装置250及其部件执行的各个操作都是针对同一层级之前的各组 中的分类器进行的。归一化计算装置252的任务是将各个级联分类器组中在自适应姿态估计装置250 之前的每一层级的强分类器的输出数据归一化到同一个度量空间。假定当前处理的第i个 级联分类器组在归一化计算装置252之前有m个层级,m为自然数,当前针对第i个级联分 类器组中的第j层级的分类器进行处理,其中i和j为正整数的索引量,该分类器计算得到 的图像数据在相应特征方面属于相应检测角度的特定物体的置信度值为valy。归一化计 算装置252可以采用多种数据归一化方法,例如最大最小化算法Min-Max、或Z-SCOre、MAD、 Double—Sigmoid、及 Tanh-estimator 等等。例如,在采用最大最小化的归一化方法的情况下,可以通过公式(1)计算该第i组 的第j层级的分类器的归一化值nvaly。nvali, j = (Vali,j-Valmin)/(Valmax-Valmin)(1)其中,Valmax, Valmin是分类器训练过程中得到的值,具体地讲,Valfflax代表在关于与 该第i个级联分类器组相应的检测角度的该第j个分类器所采用的特征进行的训练中所得 的置信度值中的最大值,即该强分类器对所有输入的样本数据可以取得的最大值,Valmin代 表在对该分类器进行的训练中所得的置信度值中的最小值,即该强分类器对所有输入的样 本数据可以取得的最小值。在训练中采用了非人脸样本图像的情况下,由于对非人脸样本求得的置信度值变 化范围相对较大,造成容易在数据度量的时候引入数据噪音,影响归一化结果的准确性。分 类器对非人脸样本计算得到的分类结果即置信度基本为负值,而人脸样本所得的置信度基 本为正值,为了解决此问题,可以使上述公式(1)中的Valmin直接为零,以消除那些偏离正 确数据分布的数据噪音对于归一化造成的影响。如此改进公式(1)后得到归一化公式(2)。
Hvalijj = (Valij-Ο)/(valmax-0)(2)归一化计算装置252也可以采用例如Z-score归一化方法,在此情况下,可以通过 公式(3)计算该第i组的第j层级的分类器的归一化值Iwali,」。nvaly = (valy-μ )/σ(3)其中μ和σ分别为在关于与该第i个级联分类器组相应的检测角度的该第j个 分类器所采用的特征进行的训练中所得的数值的算术平均值和均方差。融合计算装置254的目的是进行数据融合,可以把各个级联分类器组在自适应姿 态估计装置250之前所有层级的强分类器的计算结果进行融合,分别获得关于各个级联分 类器组的融合值。融合计算装置2M可以采用多种基于数据的融合方法,例如加法准则 Sum、乘法准则Product、或者MAX等等。例如,融合计算装置2M采用加法准则将前层级强分类器的输出数据进行加法融 合,不仅可以充分利用级联分类器组中前面各层级的历史信息,还可以进一步增强融合的 鲁棒性,在此情况下,通过公式(4)来根据第i个级联分类器组在归一化计算装置252之前 的m个层级的分类器的置信度归一化值Iivali,」求得融合值Siwali。Snvali=EnvaliJ (4)或者,除了加法准则之外,融合计算装置2M也可以采用例如乘法准则将前层级 强分类器的输出数据进行加法融合,利用如下公式(5),根据第i个级联分类器组在归一化 计算装置252之前的m个层级的分类器的置信度归一化值rwaly求得融合值Siwali。Snvali=TTnvaliJ (5)姿态估计装置256可以自适应地根据融合计算装置2M得到的融合结果来估计出 该特征物体最合适的姿态,即所处理的图像数据中特定物体的实际角度,根据图像数据中 特定物体的角度与相应检测角度的关系,计算图像数据关于相应检测角度的隶属度,其自 适应性体现在,所采用的计算公式可以自适应地根据之前各个层级的分类器的数据分布来 做出姿态估计。例如,姿态估计装置256可以通过利用如下的自适应公式(6),根据融合计算装置 254求得的第i个级联分类器组中之前的m个分类器的置信度的融合值srwal”自适应姿 态估计装置250涵盖的所有检测角度的级联分类器组的之前的m个分类器的置信度的融合 值中的最大值Siwalmax,求出图像数据关于与第i个级联分类器组相应的检测角度的隶属 度值ratio”ratioj = Bbs(Snvali-Snvalmax)ZSnvali, (6)其中,abs代表绝对值计算。作为替代,姿态估计装置256也可以通过利用如下的自适应公式(7),根据融合计 算装置2M求得的第i个级联分类器组中之前的m个分类器的置信度的融合值srwal”自 适应姿态估计装置250涵盖的所有检测角度的级联分类器的之前的m个分类器的置信度的 融合值中的最大值Siwalmax,求出图像数据关于与第i个级联分类器组相应的检测角度的 隶属度值ratio”ratioj = SnvaliZsnvalmax (7)级联分类器组选择装置258用来从多个检测角度中选择出最合适的一个或多个 检测角度用于之后层级的物体识别判断,也就是,如果图像数据中特定物体的角度关于某检测角度的隶属度过低,则在后续层级的判断中不再使用该检测角度的分类器。在对各个检测角度的分类器进行选择的过程中,利用预先定义的阈值thr来判断 姿态估计装置256为各个角度计算的隶属度值是否可以通过级联分类器组选择装置258。 例如,采用如下的公式(8)来判断是否选择第i个级联分类器组,如果rati0i大于等于预 定阈值thr,则选择结果res为1,表示在自适应姿态估计装置250之后继续采用第i个级 联分类器组的分类器,如果rati0i小于预定阈值thr,则选择结果res为0,表示在自适应 姿态估计装置250之后不再采用第i个级联分类器组的分类器。
权利要求
1.一种多角度特定物体判断设备,包括输入装置,用于输入图像数据;多个级联分类器组,其中每个级联分类器组由多个与同一检测角度相对应的分类器 级联构成,不同分类器与不同特征相对应,各个分类器用于计算图像数据在相应特征方面 属于相应检测角度的特定物体的置信度值,并根据置信度判断该图像数据是否属于特定物 体,其特征在于,在级联分类器组的分类器之间,设置自适应姿态估计装置,用于根据该自适应姿态估 计装置之前的与同一检测角度相应的各分类器计算的置信度值,判断图像数据是否进入该 检测角度的位于该自适应姿态估计装置之后的各分类器。
2.根据权利要求1所述的多角度特定物体判断设备,其中,所述自适应姿态估计装置 包括归一化计算装置,用于把所述自适应姿态估计装置之前的与同一检测角度相应的各分 类器计算的置信度值进行归一化,获得置信度归一化值;融合计算装置,用于融合由所述归一化计算装置获得的置信度归一化值,获得与检测 角度相应的融合值;姿态估计装置,用于根据融合计算装置获得的各个检测角度的融合值,计算图像数据 关于各个检测角度的隶属度值;级联分类器组选择装置,用于将各个检测角度的隶属度值分别与预定阈值进行比较, 选择适合度值大于预定阈值的检测角度的该自适应姿态估计装置之后的各分类器,供图像 数据进入。
3.根据权利要求1所述的多角度特定物体判断设备,其中,在级联分类器组中,按照特 征复杂度升高的顺序排列分类器。
4.根据权利要求3所述的多角度特定物体判断设备,其中,各个级联分类器组中排列 位置相同的分类器确定为属于同一层级,所述自适应姿态估计装置位于第一层级和第二层 级之间或第二层级和第三层级之间。
5.根据权利要求1所述的多角度特定物体判断设备,其中,所述特定物体为人脸。
6.根据权利要求1所述的多角度特定物体判断设备,其中,所述分类器为强分类器。
7.一种多角度特定物体判断方法,包括输入步骤,输入图像数据;多个并列的分类步骤,其中每个分类步骤由多个与同一检测角度相对应的子分类步骤 依次构成,不同子分类步骤与不同特征相对应,在各个子分类步骤中计算图像数据在相应 特征方面属于相应检测角度的特定物体的置信度值,并根据置信度判断该图像数据是否属 于特定物体,其特征在于,在分类步骤的子分类步骤之间,执行自适应姿态估计步骤,根据该自适应姿态估计步 骤之前的与同一检测角度相应的各子分类步骤计算的置信度值,判断是否对图像数据执行 该检测角度的在该自适应姿态估计步骤之后的各子分类步骤。
8.根据权利要求7所述的多角度特定物体判断方法,其中,所述自适应姿态估计步骤 包括归一化计算步骤,把在所述自适应姿态估计步骤之前的与同一检测角度相应的各子分类步骤中计算的置信度值进行归一化,获得置信度归一化值;融合计算步骤,融合在所述归一化计算步骤中获得的置信度归一化值,获得与检测角 度相应的融合值;姿态估计步骤,根据在融合计算步骤中获得的各个检测角度的融合值,计算图像数据 关于各个检测角度的隶属度值;分类步骤选择步骤,将各个检测角度的隶属度值分别与预定阈值进行比较,选择适合 度值大于预定阈值的检测角度的该自适应姿态估计步骤之后的各子分类步骤,来处理图像 数据。
9.根据权利要求7所述的多角度特定物体判断方法,其中,在分类步骤中,按照特征复 杂度升高的顺序排列子分类步骤。
10.根据权利要求9所述的多角度特定物体判断方法,其中,各个分类步骤中排列次序 相同的子分类步骤确定为属于同一层级,所述自适应姿态估计步骤在第一层级和第二层级 之间或第二层级和第三层级之间执行。
全文摘要
本发明提供一种多角度特定物体判断设备,包括输入装置,用于输入图像数据;多个级联分类器组,其中每个级联分类器组由多个与同一检测角度相对应的分类器级联构成,不同分类器与不同特征相对应,各个分类器用于计算图像数据在相应特征方面属于相应检测角度的特定物体的置信度值,并根据置信度判断该图像数据是否属于特定物体,其特征在于,在级联分类器组的分类器之间,设置自适应姿态估计装置,用于根据该自适应姿态估计装置之前的与同一检测角度相应的各分类器计算的置信度值,判断图像数据是否进入该检测角度的位于该自适应姿态估计装置之后的各分类器。本发明还提供一种多角度特定物体判断方法。
文档编号G06K9/00GK102147851SQ201010108579
公开日2011年8月10日 申请日期2010年2月8日 优先权日2010年2月8日
发明者刘童, 师忠超, 李滔, 王刚, 袁勋, 钟诚 申请人:株式会社理光