用于记录牙科对象的多个三维图像的方法
【专利摘要】本发明涉及一种用于记录牙科对象(6)的若干三维图像的方法,其中,三维图像(1,2,3,4,5)中的每个包括对象(6)的测量表面(13)的3D测量数据和颜色数据,其中,在应用计算机辅助的记录算法的情况下将单个的图像(1,2,3,4,5)组合成整体图像。在图像(1,2,3,4,5)中的每个中在应用根据颜色数据的分割方法的情况下来识别带有较硬的组织的第一区域(18)和带有较软的组织的第二区域(19)。在运用记录算法时利用不同的加权因子来加权第一区域(18)和第二区域(19)。
【专利说明】用于记录牙科对象的多个三维图像的方法
【技术领域】
[0001]本发明涉及一种用于记录牙科对象的多个三维图像的方法,其中,三维图像中的每个包括对象的测量表面的3D测量数据和颜色数据,其中,在应用计算机辅助的记录算法的情况下将单个的图像组合成整体图像。
【背景技术】
[0002]由现有技术已知用于记录三维图像的多个方法,以便将这些单个的图像组合成整体图像。
[0003]当不利用单个的图像而仅利用多个图像来探测待拍摄的对象时,记录是必要的。这例如在空间上延展的牙科对象(如多件式桥)的情况中或者还在必须从所有侧面来探测的牙齿的情况中是必需的。
[0004]文件US 7,698,068 B2公开了一种用于记录重叠的区域的方法。在第一步骤中,根据不同的颜色特性将数据组分开成用于较硬的组织的第一组织数据组和用于较软的组织的第二组织数据组。在第二步骤中,基于用于较硬的组织的第一组织数据组的重叠的区域实现数据组的合并。因此在记录时忽略用于较软的组织的第二组织数据组。由此应改善所合并的整体图像的质量。单个的图像包括在牙科对象的共焦测量中所生成的3D图像数据和颜色数据。
[0005]该方法的一缺点是完全忽略带有较软的组织的区域并且仅带有较硬的组织的区域被用于记录。由此尤 其当带有较硬的组织的区域较小时,记录误差可导致单个的图像的有缺陷的重叠且因此导致有缺陷的整体图像。
[0006]因此本发明的目的在于提供一种用于记录牙科对象的多个三维图像的方法,其使尽可能无误差的记录成为可能。
【发明内容】
[0007]本发明的一主题是用于记录牙科对象的多个三维图像的方法。三维图像中的每个在此包括对象的测量表面的3D测量数据和颜色数据。在应用计算机辅助的记录算法的情况下将单个的图像组合成整体图像,其中,在图像中的每个中在应用根据颜色数据的分割方法的情况下来识别带有较硬的组织的第一区域和带有较软的组织的第二区域。在运用记录算法时利用不同的加权因子来加权第一区域和第二区域。
[0008]在尤其对于CAD/CAM系统的牙科对象的数字探测中,从牙科对象的不同方向来执行多个拍摄。在应用记录算法的情况下将单个的图像组合成整体图像。在此来识别和叠加在单个的图像中的相符的结构。将传统的自动化的结构识别方法用于识别相符的结构。
[0009]单个的图像可在应用任意的三维拍摄方法(如条带投影法(Streifenprojektionsverfahren)或共焦拍摄法)的情况下来生成。在应用宽带光谱的共焦拍摄法中,通过借助共焦光学组件和借助颜色传感器来分析由对象所散射回的光束,可同时来探测复现牙科对象的三维结构的3D测量数据和复现对象表面的实际颜色的颜色数据。[0010]在条带投影法中,以由平行的明的和暗的或还有彩色的条带构成的图案来照射测量对象。这些条带通过光学结构元件(例如幻灯片或数字调光器(DLM))投影到测量体积中而产生。在另一步骤中,借助数码相机在相对于投影的已知的视角下来拍摄所投影的条带图案。在评估时使在相机传感器上的条带过渡部的传感器位置精确地关联于在光学结构元件上的所投影的条带。在应用已知的用于观察和投影光路的针孔照相机模型的情况下,由传感器位置且已知条带数目可来确定所照射的对象与事先所确定的原点的距离。为了所投影的条带的精确关联,它们可进行彩色编码或在第二个步骤中在其宽度上在时间上相继被改变且又被拍摄。因此在该所谓的“格雷编码”方法中,对于照相机的每个传感器像素来探测与在光学结构元件上的投影面的位置的正确关联并且对于每个像素可来确定表面测量点。
[0011]为了进一步增加深度分辨率,可通过所谓的相移法来改进条带投影法。在该情况中,图案由明亮的和昏暗的区域、而不是由带有尖锐的棱边过渡部的条带构成,而该图案的强度变化过程被正弦调制。如果使相以90°的步移动并且由每个相位来拍摄,可非常精确地来探测所投影的正弦图案的相位。然后由按像素探测的相位同样可来探测所属的表面点的空间坐标。
[0012]可借助牙科手持件(Handstueck)(其具有用于条带投影法的光学器件)来探测3D测量数据。除了这些器件之外,牙科手持件可具有传统的彩色相机,其从相同方向同时拍摄颜色数据。接下来可将3D测量数据和颜色数据组合成一图像,从而使3D测量数据的测量点中的每个与相应的颜色相关联。
[0013]借助牙科手持件中的颜色传感器也可同时来测定3D测量数据和颜色数据。对于该手持件不必安装单独的彩色相机来进行颜色测量。
[0014]也可依次在两 个图像中来测定3D测量数据和颜色数据。可在图像之间来切换照明。接着根据明显的结构或记号经计算机辅助将这两个图像合并成共同的图像。
[0015]在分割方法中在应用颜色数据的情况下来识别带有较硬的组织的第一区域和带有较软的组织的第二区域。例如可将每个测量点的颜色分解成红-绿-蓝色彩空间(Farbraum) (RGB色彩空间)或HSV色彩空间的色彩成分。接着在运用阈值标准的情况下使每个测量点与一组织类型相关联。在红色成分份额较高时测量点可被识别为较软的组织、即牙龈,而在绿、蓝和红色成分份额较高时测量点可被识别为较硬的组织、即白色的牙基质。
[0016]为了改善组织的识别,该分割方法可使用颜色分类器,以真实的数据来训练它以将RGB色彩空间或HSV色彩空间相应地划分成与一组织类型相关联的区域。即在此使在所应用的色彩空间中的一定的区域与相应的组织类型相关联。不与这两个组织类型中的任何相关联的区域在记录时被特别处理。这些区域可在另一步骤中进行另外的类似的分类,以识别带有其它反射特性的组织类型。由此也可识别位于半影中或高亮部位(Glanzstelle)处的区域。在肯定地识别为牙假体(Zahnersatz)或较软的组织时同样将这些区域用于记录。此外,牙医辅助器件(如棉花或围堰(Kofferdamm))也可根据其色彩来分类,以便在记录时特别地加权或忽略其。由此来改善记录。
[0017]根据相应的情况,通过以不同的加权因子来加权包括牙齿或牙假体的第一区域和包括较软的组织或牙医辅助器件的第二区域,可来改善记录的质量。例如,在图像中较硬的组织份额较高时,比较软的组织强得多地来加权较硬的组织是有利的,因为患者的面颊或嘴唇的变形或运动可导致较软的组织的变形且因此导致有缺陷的记录。然而加热整个图像中较硬的组织的份额较小,可较强地来加权较软的组织,以改善记录的质量。
[0018]本方法的优点是,与相应的牙齿情况匹配的加权改善了记录的质量。
[0019]有利地,第一区域可描绘牙基质或牙假体而第二区域可描绘牙龈、牙龈假体或牙医辅助器件(如棉花或围堰)。
[0020]牙假体可以是任意的牙假体部件,如牙冠、嵌入物(Inlay)、嵌上物(Inlay)、贴面(Vineer)或部分牙冠。出于美观原因,牙龈假体可具有与天然牙龈类似的颜色。牙医辅助器件可具有较宽的色谱。为了改进分割方法,牙医辅助器件可尽可能绿地或蓝地来着色,以将它们更好地与周围的组织区分开。
[0021]有利地,可在单个的图像中的每个中来计算第一区域占图像的总面积的第一面积份额以及第二区域占图像的总面积的第二面积份额。假如第一面积份额超过阈值,在应用记录算法时仅考虑第一区域。如果第一面积份额低于阈值,以第一加权因子来加权第一区域而以第二加权因子来加权第二区域,其中,第二加权因子在第一面积份额减小时增加。
[0022]由此在较硬的组织的第一面积份额较小时较强地来加权较软的组织。由此来改善记录。
[0023]有利地,用于第一面积份额的阈值可确定到图像的总面积的5%与30%之间的百分比上。
[0024]由此在阈值之上记录时特别强地来加权带有较硬的组织的第一区域而仅较弱的或完全不加权带有较软的组织的第二区域。在阈值之下加强地来考虑较软的组织。介于5%与30%之间的阈值是有利的,因为在较硬的组织的第一面积份额较小时较软的组织的加权才导致记录的改善。
[0025]有利地可利用1.0的第一加权因子`来加权第一区域而利用可变的第二加权因子来加权第二区域,第二加权因子对于测量表面的每个测量点来确定并且在测量点与描绘较硬的组织的最近的第一区域的间距增加时减小。
[0026]这是加权的另一备选方案。通过随着与最近的第一区域的间距的增加而增加权重来保证,在第一区域的周围较强地来考虑较软的组织。这考虑该状况,即在牙齿附加的牙龈不像没有邻近的牙基质的牙龈那么容易变形,并且此外事实是,在此很少涉及嘴唇或面颊。与上面所提及的传统的记录(在其中仅考虑较硬的组织)相比由此来改善记录。
[0027]有利地,第二权重因子在与第一区域的界限处可为1.0的值并且可随着与最近的第一区域的间距的增加而减少至0.0的最小值。
[0028]由此更多地来考虑在与较硬的组织界限处的较软的组织并且提高记录的可靠性。
[0029]有利地可借助被应用于颜色数据的阈值标准来识别第三区域,其既不可被与带有较硬的组织的第一区域也不可被与带有较软的组织的第二区域相关联。第三区域例如可以是由于高光(Glanzlicht)而产生的太亮的区域或者是由于照明不足而产生的太暗的区域。对第三区域来计算占图像的总面积的第三面积份额。
[0030]该第三面积份额表示用于图像的质量标准。倘若第三面积份额过大且例如超过40%的百分比,相应的图像不能用且必须重来。仅当第三面积份额足够小时,相应的图像才能被用于记录。在此不考虑或者说以0.0的加权因子来加权第三区域。[0031]由此忽略由于高光或照明不足所产生的有缺陷的部位,从而由此来改善记录。因为由高光或有缺陷的照明所引起的有缺陷的区域根据照明的入射方向和拍摄方向在图像中的每个中在不同部位出现。
[0032]有利地在分割成第一区域和第二区域之前可将模糊滤器应用于在图像中的每个中的颜色数据。
[0033]由此使图像平滑并且颜色分割尤其在第一区域与第二区域之间的过渡处导致更好的结果,因为差别微小的这些过渡部由于照相机的电子噪声而显得粗糙。因此使这些粗糙部(Ausfransung)平滑,使得在第一区域与第二区域之间所计算的过渡部更好地反映在真实情况中在患者的嘴中的实际的过渡部。
[0034]有利地可通借助牙科手持件来拍摄每个图像,其包括用于生成3D测量数据的第一器件和用于生成颜色数据的第二器件,其中,同时或以较短的时间间隔从相同的拍摄方向来探测3D测量数据和颜色数据。
[0035]由此借助牙科手持件不仅可拍摄3D测量数据而且可拍摄颜色数据。然后借助计算机可将3D测量数据 与颜色数据相组合且使在3D测量数据中的测量点中的每个与相应的颜色值相关联。
[0036]有利地可在应用第一器件(其基于三角测量法和条带投影法)的情况下来生成3D测量数据而在应用传统的彩色相机的情况下来生成颜色数据。
[0037]牙科手持件由此不仅包括用于条带投影法的第一器件而且包括用于探测颜色数据的彩色相机。因此从相同的拍摄方向同时来探测3D测量数据和颜色数据。
[0038]时间间隔有利地可介于0.2ms与IOOms之间。
[0039]由此时间间隔足够短以避免在拍摄3D测量数据与拍摄颜色数据之间的晃动(其由在持握手持件时的典型的抖动引起)。
[0040]备选地,时间间隔也可超过100ms。在该情况中随后根据在这两个图像中的标记或根据明显的结构将3D测量数据的图像与颜色数据的图像叠加。
【专利附图】
【附图说明】
[0041]在附图中示出本发明的实施例。其中:
图1显示了用于说明该记录的示意图;
图2显示了所分割的带有较硬的组织的第一区域;
图3显示了所分割的带有较软的组织的第二区域;
图4显示了备选的牙齿情况的示意图;
图5显不了用于说明备选的加权的不意图。
【具体实施方式】
[0042]图1显示了用于说明用于记录牙科对象6 (在该情况中为上颌)的多个三维图像(其通过虚线1、2、3、4、5来表示)的本方法的示意图。借助牙科手持件7从由箭头所示的不同拍摄方向8、9、10、11和12来拍摄各个图像1、2、3、4和5。牙科手持件包括用于三维测量的第一器件和用于颜色测量的第二器件。因此在图像中的每个中包含对象6的待拍摄的测量表面13的3D测量数据和颜色数据。将每个图像的测量数据从牙科手持件7传输到计算机14处,联接到操作器件如键盘15和鼠标16处,且与显示装置17、如与监视器相连接。在第一步骤中,可将用于使测量表面13的3D测量数据平滑的模糊滤器应用于图像I。附加地,可将另一模糊滤器应用于颜色数据以使颜色数据平滑且因此改善颜色分割。接着来执行分割方法,其中,识别带有较硬的组织、即带有牙基质的第一区域18和带有较软的组织的第二区域19 (其描绘牙龈)。这两个步骤对于图像1、2、3、4和5中的每个实现。接下来在应用计算机辅助的记录算法的情况下将图像1、2、3、4和5合并成整体图像。在此借助结构识别算法来识别在图像1、2、3、4和5中相符的结构并且相叠加。在运用记录算法时根据相应的情况以不同的加权因子来加权带有较硬的组织的第一区域18和带有较软的组织的第二区域19。由此来改善记录的质量。
[0043]图2示出了通过应用分割方法所分割的带有较硬的组织的第一区域18 (其例如描绘牙基质)的示意图。第一区域也可描绘牙假体20,其在其颜色上相应于第一牙基质。在应用记录算法之前,分拣出由于高光而产生的太亮的区域21和由于照明不足而产生的太暗的区域22。由此防止了有缺陷的记录,因为闪亮的区域21和阴影的区域22根据牙科手持件7的照明和根据拍摄方向8、9、10、11或12在图像1、2、3、4或5中的每个中在不同的部位处。
[0044]图3示出了带有较软的组织的第二区域19(其可描绘真实的牙龈或牙龈假体)的示意图。在应用分割方法的情况下来识别第二区域19。在执行记录之前分拣出如在图2中太亮的区域21 (其由于高光而产生)和阴影区域22 (其由于照明不足而产生)。如对于图2所阐述的那样,由此防止有缺陷的记录。
[0045]图4示出了与在图1中不同的牙齿情况的示意图。在图1中,带有较硬的组织的第一区域18的第一面积份额为大约50%。带有较软的组织的第二区域19的第二面积份额在图1中为图像I的总面积的30%。其余的不能被与组织类型中的任何相关联的第三区域的第三面积份额为大约20%。第一面积份额高于所确定的30%的阈值。在图1中的该牙齿情况中因此超过阈值,从而在应用记录算法时以较高的权重考虑带有较硬的组织的第一区域18。以较小的权重来考虑或完全忽略带有较软的组织的第二区域19。
[0046]对于图4中的牙齿情况,与图1中的牙齿情况相比缺少两个中间的牙齿,使得带有较硬的组织的第一区域18的第一面积份额为图像I的总面积的大约10%而带有较软的组织的第二区域19为图像I的总面积的大约50%。其余的第三面积为大约40%。因此低于所确定的对于带有较硬的组织的第一区域的第一面积份额的30%的阈值。因此以第一加权因子来加权第一区域而以第二加权因子来加权第二区域,其中,第二加权因子在第一面积份额减小时增加。例如,对于第一区域18的第一加权因子可为1.0而对于第二区域19的可变的第二加权因子在超过阈值时可为0.5且在第一面积比例减小时可升高至1.0。第二加权因子与面积比例的相关性可根据任意的函数(如指数函数或线性函数)来确定。
[0047]在图5中示出了用于说明带有较硬的组织的第一区域18和带有较软的组织的第二区域19的备选的加权的示意图。在此以例如1.0的固定的第一加权因子来加权第一区域18。以可变的第二加权因子来加权第二区域19,第二加权因子对于测量表面13的每个测量点30来确定并且在相应的测量点与最近的带有较硬的组织的第一区域32的间距31增加时减小。第二加权因子根据与最近的第一区域32的间距31的减小可以以任意函数(如指数函数或线性函数)实现。第二加权因子在与最近的第一区域32的界限处为1.0且随着间距31的增加而降至值O。因此在与最近的带有较硬的组织的区域32的较小间距中与较硬的组织同样强地来加权较软的组织。该方法导致记录的改善,因为被较强地考虑的较软的组织靠近牙齿并且因此以较高的可能性更加固定且更加不可动。
[0048] 附图标记清单 I虚线 2虚线 3虚线 4虚线 5虚线 6对象 7手持件 8拍摄方向 9拍摄方向 10拍摄方向 11拍摄方向 12拍摄方向
13测量表面
14计算机
15键盘
16鼠标
17显示装置/监视器 18第一区域 19第二区域 20牙假体 21亮区域 22暗区域 30测量点 31间距 32最近的第一区域。
【权利要求】
1.一种用于记录牙科对象(6)的多个三维图像的方法,其中,所述三维图像(1,2,3,4,5)中的每个包括所述对象(6)的测量表面(13)的3D测量数据和颜色数据,其中,在应用计算机辅助的记录算法的情况下将单个的所述图像(1,2,3,4,5)组合成整体图像,其中,在所述图像(1,2,3,4,5)中的每个中在应用根据所述颜色数据的分割方法的情况下来识别带有较硬的组织的第一区域(18)和带有较软的组织的第二区域(19),其特征在于,在运用所述记录算法时利用不同的加权因子来加权所述第一区域(18)和所述第二区域(19)。
2.根据权利要求1所述的方法,其特征在于,所述第一区域(18)描绘牙基质或牙假体(20)而所述第二区域(19)描绘牙龈或牙龈假体。
3.根据权利要求1或2所述的方法,其特征在于,在所述图像中的每个中关于相应的所述图像的总面积来计算所述第一区域(18)的第一面积份额和所述第二区域(19)的所述第二面积份额,其中,假如所述第一区域(18)的第一面积份额低于阈值,以第一加权因子来加权所述第一区域而以第二加权因子来加权所述第二区域(19),其中,所述第二加权因子在第一面积份额减少时增加。
4.根据权利要求3所述的方法,其特征在于,所述阈值确定在介于5%与30%之间的值之间。
5.根据权利要求1或2所述的方法,其特征在于,以1.0的第一加权因子来加权所述第一区域(18),而以可变的第二加权因子来加权所述第二区域(19),所述第二加权因子对于所述测量表面的每个测量点(30)来确定并且在所述测量点与最近的带有较硬的组织的所述第一区域的间距(31)增加时减小。
6.根据权利要求5所述的方法,其特征在于,所述第二加权因子在与所述第一区域的界限处为1.0的值并且随着与最近的所述第一区域(18)的间距(31)增加而减小至0.0的最小值。
7.根据权利要求1至6中任一项所述的方法,其特征在于,借助应用于所述颜色数据的阈值标准,来识别第三区域(21,22),其既不被关联于所述第一区域(18)也不被关联于带有较软的组织的所述第二区域(19),其中,所述第三区域包括由于高光而产生的明亮的区域(21)以及由于照明不足而产生的昏暗的区域(22),其中,在记录时不考虑所述区域(21,22)。
8.根据权利要求1至7中任一项所述的方法,其特征在于,在分割成第一区域(18)和第二区域(19)之前,将模糊滤器应用于在所述图像(1,2,3,4,5)中的每个中的所述颜色数据。
9.根据权利要求1至8中任一项所述的方法,其特征在于,借助牙科手持件(7)来拍摄每个图像(1,2,3,4,5),所述手持件包括用于生成所述3D测量数据的第一器件和用于生成所述颜色数据的第二器件,其中,同时或以较短的时间间隔从相同的拍摄方向(8,9,10,11,12)来探测所述3D测量数据和所述颜色数据。
10.根据权利要求9所述的方法,其特征在于,在应用所述第一器件的情况下来生成所述3D测量数据,所述第一器件基于三角测量法和条带投影法,而在应用传统的彩色相机的情况下来生成所述颜色数据。
11.根据权利要求9所述的方法,其特征在于,所述时间间隔介于0.2ms与IOOms之间。
【文档编号】A61B5/00GK103702608SQ201280038623
【公开日】2014年4月2日 申请日期:2012年8月1日 优先权日:2011年8月1日
【发明者】G.科赫沙伊特, A.阿当森, B.波皮尔卡, F.蒂尔 申请人:西诺德牙科设备有限公司