专利名称：一种人脸三维面形数字化测量系统的制作方法
技术领域：
本实用新型涉及一种基于复合结构光投影技术的人脸三维面形数字化 测量系统。
背景技术：
随着社会的进步和生活水平的提高，人们对生活质量提出了更高的要 求，特别是对美的追求日益显著。整形美容是世界市场范围内正在形成的新
兴产业，美国整形消费年均400亿美元，日本、韩国整形手术比例是中国的 两倍左右。随着整体健康观念的形成，中国医学美容的发展将快速提升。目 前全国整形美容目标消费群总数估计为13970万人，占全国女性总数的22 % 。此数据随市场和消费者消费观念的成熟将逐年递增。
由于人们审美水平的提高，对医学整形美容的效果提出了更高的要求。 在外科整形手术中，人们大多还是采用传统的手工测量方法来获取人脸的形 貌特征，测量精度不高，也不方便，而且容易对人脸皮肤带来损伤。随着数 字化时代的到来，人们渴求一种非接触、快速、准确的测量方法来获取数字 化的人脸三维形貌，并希望借助计算机辅助设计等现代化技术手段来模拟和 设计脸部美容的整形方案并检验效果等等，即将医学整形美容推进到数字化 阶段。
现有技术中基于医学美容的人脸三维轮廓数字化方法大致可以分为三 类 一是基于CT技术的三维重建；二是基于被动光学三维传感方法的三维 重建；三是基于相位测量轮廓术的主动光学三维传感方法的三维重建。
现有技术中，第一种方法基于CT技术的三维重建方法只能针对骨组织 的畸变或缺损的情况，在卢贞面整形以及牙颌面畸形矫治等方面应用较多。软组织表面形态是整形美容效果的最直观、最有说服力的表现形式，而CT技 术对于软组织表面的三维轮廓重建比较困难，尤其是对于比较复杂的人脸面 部容貌的三维重建很难实现。
第二种方法基于被动光学三维传感方法，采用非结构照明方式，从一个
或多个摄像系统获取的二维图像中确定距离信息，形成三维面形数据。当从 一个摄像系统获取的二维图像中确定距离信息时，必须依赖有关物体的形 态、光照条件等先验知识，如果先验知识不足就可能产生计算上的错误；从 两个或多个摄像系统获取的不同视觉方向的二维图像中确定距离信息，需要 进行大量的相关或匹配等运算，而且需要对若干个摄像机进行精确标定。另 外，基于二维图像的人脸测量，不可避免受到环境光线、背景、视角和人脸 的姿态、表情、遮挡等不利因素的影响，因而其测量精度很难有进一步的提 高，这使得采用单一 的二维图像人脸测量技术的应用产品难以达到实用水 准。因此，被动光学三维传感方法常常用于对三维目标的识别、理解以及位 置和形态分析，而大多数以三维面形测量为目的三维传感系统一般都采用主 动光学三维传感方式。
第三种方法基于相位测量轮廓术的主动光学三维传感方法采用结构光 照明方式，具有非接触、高测量精度等特点。由于三维面形对结构光场的时 间或空间进行了调制，从携带有三维面形信息的观察光场中，通过适当的方 法解调得到三维面形数据。相位测量轮廓术(PMP)是一种重要的主动光学 三维传感方法，它采用投影正弦光栅和相移技术，通过获取全场条紋的空间 信息和一个条紋周期内相移条紋的时序信息，重建物体表面的三维轮廓。但 是，相位测量轮廓术解调一幅三维轮廓数据，至少需要拍摄三幅相移条紋， 影响了测量的实时性，而且测量过程中目标人脸的微小移动或表情变化，都 会直接影响解调结果，从而造成较大的重建误差。而采用数字光栅投影的快 速相移技术，虽然能在很短时间内投影和拍摄若干幅相移条紋，但相移条紋 在快速轮换投影/拍摄时，CCD相机拍摄到的图像很容易产生拖尾、畸变等现象，因而容易造成较大的测量误差。
在医学整形美容外科手术中，对人脸三维形貌特征的精确提取是至关重 要的。目前比较成熟的方法是基于CT技术的三维测量，主要是针对骨组织
的整形分析，4艮难获取人脸软组织表面的三维形貌特征；基于立体视觉的三 维分析方法一般采用从不同视角拍摄的人脸二维图像来处理，容易受到环境 光线、背景、视角和人脸的姿态、表情、遮挡等不利因素的影响，因而其测 量精度很难有进一步的提高；基于传统的手工测量方法给患者和医生都带来 很大的不便，而且测量精度不高。因此，迫切需要寻找一种非接触、快速、 准确、便捷的测量方法来提取人脸的三维形貌特征，以提高医学整形美容手 术的成功率和效果。
因而，现有技术还有待于改进和提高。
实用新型内容
本实用新型的目的在于提供一种利用非接触、快速、准确、便捷的测量 方法来提取人脸的三维形貌特征的设备，以提高医学整形美容手术的成功率 和效果。
本实用新型的技术方案包括
一种人脸三维面形数字化测量系统，其中，它包括 复合结构光产生装置，用以产生简单结构光条紋，送往计算机调制叠加 处理，形成复合结构光条紋；
数字投影仪，用于将复合结构光条纟丈投射到目标人脸部及参考平面上； CCD摄像机，用于采集人脸高度信息调制后的变形复合条紋及参考平
面上的复合结构条紋；
计算机，用于将筒单结构光条紋处理形成复合结构光条紋；将CCD摄
像机采集的变形复合条紋进行二维傅里叶变换、二维带通滤波、逆傅里叶变 换、灰度校准，提取出两帧具有兀相位差的变形条紋，计算出受到目标人脸面部轮廓调制的位相信息；解调获得目标人脸面形的三维高度分布信息；
参考平面，用于获得参考平面的调制位相信息；
所述计算机与所述复合结构光产生装置、所述数字投影仪、所述CCD 摄像机之间通过通讯接口连接。
所述的系统，其中它还包括紋理映射装置，与计算机相连接，用于还 原脸部色彩信号。
所述的系统，其中所述的数字投影仪和CCD摄像机的镜头上设有近 红外滤波片。
本实用新型所提供的非接触、快速、准确、便捷的基于复合结构光投影 技术的人脸三维面形数字化测量系统，为人脸整形美容外科手术带来新的测 量方法和评估手段，促进医学整形美容的数字化进程，并为以后的三维人脸 研究和应用打下基础。
图l为本实用新型结构方框图2为本实用新型复合结构光条紋的形成图3为本实用新型工作流程图4为本实用新型测量光路图5为本实用新型测量框具体实施方式
以下结合附图实施例，说明本实用新型结构特征及其基于复合结构光投 影技术测量人脸的三维面形，实现人脸三维轮廓的数字化的测量的原理和工 作过程。
本实用新型结构如图1所示，包括复合结构光产生装置、数字投影仪、 CCD摄像机、计算机、参考平面。其中，计算机与复合结构光产生装置、数字投影仪、CCD摄像机间通过通讯接口连接。本实用新型还包括紋理映
射装置，用以还原脸部色彩信号，各组成部分功能及工作过程如下
如图2所示，复合结构光产生装置产生两个不同频率的载频/'与/2，
以及与其方向垂直的两顿具有兀相位差的被调制正弦条紋，其中被调制的两
帧具有"相位差的正弦光栅为
<formula>formula see original document page 7</formula>上式中，c为投影常量；"=0， 1为相移因子，""代表条紋的初始相
位；^为相位变化方向，简称相位方向(Phase);厶为正弦光栅的基频。
由计算机将两个不同频率的载频/'与/2分别对(1 )式的两帧正弦条紋 进行调制，即进行乘法运算；然后将得到的两帧调制后的条紋进行叠加，即 进行加法运算，如图2所示，即可得到一帧复合结构光条紋
/(x,>') = <:/ + 6{|c + cos(2;r/ t ;/)lcos(2;r/i x)
+ |c + cos(2;t ,/.( y + ;r"cos(2;r./' x)} (^)
其中"和6为投影常数；x为垂直于相位方向，简称垂直方向(Orthogonal )。 复合结构光条紋的具体实现采用计算机按上述原理进行编码生成数字 复合条紋。
选择合适的投影常数"和^ ，使复合结构光条紋的强度范围与投影仪的
强度范围达成一致(通过调整计算机程序的相关参数实现)。利用计算机控
制数字投影仪(DLP)，将复合结构光条紋投射到目标人脸时，人脸表面的
连续光强分布可以表示为
尸(x，力="/'(x,力+ 6r(x,_y){|c + cos(2;r./#i少+ ^(x,_y))]cos(2;r/i ;c)
+ [c + cos(2;r/c + + /r)|cos(2;r/;> x)} ( 3 )
其中Kx，力是物体表面非均匀反射率，^"，J0表示受物体高度调制的相位信 自、
此即为摄像机拍摄到的人脸高度信息调制的变形复合条紋。
由计算机对人脸高度信息调制的变形复合条紋(3)式进行二维傅里叶
7变换，并化简得到两载频二维傅里叶频语。
分别利用汉宁窗对两个载频频谱进行二维带通滤波，对滤出的频语分别 进行移中之后，再分别进行逆傅里叶变换，取其模，得到两帧具有"相位差 的正弦条紋图。对这两帧条紋图进行灰度校准，得到的光强分布式相减并进
行一维傅里叶变换，其频谱分布表示为
G(;c,/7)，(二77 —./.0) + ^/*(x, 7 + /0) ( 4 )
其中G(x，//) 、 V(x,/7)分别为、 6,(x,少)exp[/伊(x,力]的一维傅里叶语。
选择合适的滤波窗将图中阴影部分所示的基频分量滤出，对其进行傅里 叶逆变换并经过解调运算，得到调制位相信息^"，W。为了确定目标人脸的 真实三维信息，需要在测量目标后方确定一个参考平面。可以事先利用上述 方法获得参考平面的调制位相信息""，力，这样就可以获得目标人脸的真实 三维高度分布
力=(与)A(^(x' 7) = (与)[^"力—，",力]
其中A"力代表目标人脸的数字化的三维高度信息；7表示CCD摄像机与
数字投影仪(DLP)之间的夹角参数，也称为该光学测量装置的系统参数。 按照上述测量原理，工作流程可以描述为l)由几帧简单正弦条紋生成 一帧复合结构光条紋，经投影系统(数字投影仪)投射到目标人脸；2)复 合结构光条紋(载波信号)的位相受到目标人脸三维面形高度分布(调制信 号)的调制，得到变形复合结构光场；3)成像系统(CCD摄像机)将采集 到的变形复合结构光场送计算机处理；4)计算机对所得的信息进行一系列 运算处理，得到位相信息；5)根据位相与高度分布的调制关系，解调出目 标人脸三维面形的高度分布。其工作流程如图3所示。
图4表示的是测量光路图，其中"是CCD摄像机与数字投影仪之间的 距离，"是CCD摄像机到参考平面之间的距离。图5表示测量框图。采用计算机控制投影仪投射复合结构光条紋，利用 CCD工业测量相机采集受到人脸三维面形调制的变形复合结构光条紋。
我们做了一个初步的模拟实验。实验采用Panasonic液晶投影仪，型号 为PT-P2500,分辨率为1024x768。图像采集设备为加拿大Prosilica彩色CCD 工业相机，型号为EC1350C,分辨率为1360x1024,像素尺寸大小为 4.65腦xl.65飄，其中CCD型号为Sony ICX205AK，尺寸为1/2";镜头采 用日本KOWA工业镜头，型号为LM12JCM，焦距为12mm;连接CCD相 机与计算机的1394板卡采用台湾KEC，型号为1582T;参考平面为一白板。 测量系统的几4可参lt为"=73 ww ,=18附附。
采用联想台式计算机进行程序设计及数据处理。利用计算机进行编码生 成复合结构光条紋时，两个载频,'和,2分别给定为3/40//m;/"'xe/ 、 6/40/^/P/xe/，基频六为32/600//m /"'xe/。生成的复合结构光条紋通过数字 投影仪投射到参考白板上，利用CCD相机拍摄这些条紋。
实验采用的目标人脸是一个白色的人脸模具，将采集到的图像信息通 过计算机处理，得到的数字化人脸三维面形的数据。
还可以通过对三维人脸数据进行特征点分析，利用紋理映射装置还原 脸部的色彩信息，使之逼近真实人脸的色彩。
从初步实验效果图来看，利用本实用新型设备能较便捷、准确的得到 数字化三维面形信息，而且成本低廉。还可以通过调整系统参数、改善实验 环境等方法来进一 步提高其测量精度。
该技术中，我们采用计算机控制投影仪投射复合结构光条紋，投影仪 可以看作是白光光源。考虑到白光投射到人脸可能会带来人体的不舒适感， 我们可以将白光光源替换成近红外光，具体实现方式是在数字投影仪及 CCD摄像机镜头前分别加上一片近红外滤波片，这样就可以在近红外光环 境下投影和拍摄，消除白光带来的不舒适感。
在本实用新型基于复合结构光投影技术的人脸三维面形测量系统的基
9础上，可开发出一套针对人脸整形的数字美容仪，包括光学测量装置以及数 字化人脸整形美容计算机辅助设计系统软件。
本实用新型除了可应用于人脸数字美容，身体其它一些部位的整形美容 同样可以实现，比如乳房的整形美容，具体实现方式为利用本实用新型设 备精确获得乳房的数字化三维信息，然后利用本实用新型的系统软件进行整 形设计，从而实现乳房的数字化整形美容，进而指导医师实施手术，更好的 达到乳房整形美容的效果，可以极大降低手术风险。
应当理解的是，上述针对具体实施例的描述较为详细，并不能因此而认 为是对本实用新型专利保护范围的限制，本实用新型的专利保护范围应以所 附权利要求为准。
权利要求1、一种人脸三维面形数字化测量系统，其特征在于，它包括复合结构光产生装置，用以产生简单结构光条纹，送往计算机调制叠加处理，形成复合结构光条纹；数字投影仪，用于将复合结构光条纹投射到目标人脸部及参考平面上；CCD摄像机，用于采集人脸高度信息调制后的变形复合条纹及参考平面上的复合结构条纹；计算机，用于将简单结构光条纹处理形成复合结构光条纹；参考平面，用于获得参考平面的调制位相信息；所述计算机与所述复合结构光产生装置、所述数字投影仪、所述CCD摄像机之间通过通讯接口连接。
2、 如权利要求1所述的系统，其特征在于它还包括紋理映射装置， 与计算机相连接，用于还原脸部色彩信号。
3、 如权利要求1所述的系统，其特征在于所述的数字投影仪和CCD 摄像机的镜头上设有近红外滤波片。
专利摘要本实用新型公开了一种人脸三维面形数字化测量系统，结构包括复合结构光产生装置、数字投影仪、CCD摄像机、计算机、参考平面。本实用新型能快速、便捷地获取准确的人脸数字化三维轮廓，为人脸整形美容外科手术带来新的测量手段和评估方法，促进医学整形美容的数字化进程。适于相关医疗美容领域推广使用。
文档编号A61B5/103GK201299570SQ20082014705
公开日2009年9月2日 申请日期2008年8月28日 优先权日2008年8月28日
发明者洋 沈, 郑海荣 申请人:深圳先进技术研究院