专利名称：数字相机、图像回放装置、面部图像显示装置及其控制方法
技术领域：
本发明涉及数字相机(包括附带相机的移动电话等包含数字相机功能的信息设备)、图像回放装置和面部图像显示装置以及它们的控制方法。
背景技术：
当用数字相机拍摄被拍摄物体时，被拍摄物体的影像被显示在设于数字相机背面的显示画面上。一边观看显示在显示画面上的被拍摄物体影像，一边可以决定摄影角度。当拍摄人物时，虽然需要确认焦点是否对准人物的面部部分，但由于设于数字相机背面的显示画面比较小，所以很难确认焦点是否对准。
存在一项发明，当图像中有面部图像时，根据面部识别颜色数据来识别面部图像，切出被识别的面部图像(专利文献1)，但可以认为其没有在拍摄人物时让焦点对准人物的面部。
日本专利特开平10-334213号公报发明内容本发明的目的是容易确认人物的面部。
另外，本发明的目的还在于，当面部图像被包含在对象图像中时，可以放大面部的图像部分。
根据第1发明的数字相机的特征在于包括拍摄设备，用于拍摄被拍摄物体，输出表示被拍摄物体影像的图像数据；显示装置，用于在显示画面上显示由从所述拍摄设备输出的图像数据表示的被拍摄物体影像；面部图像检测设备，用于检测被包含在由从所述拍摄设备输出的图像数据表示的被拍摄物体影像中的面部图像；放大指令设备，用于发送放大指令；放大设备，用于随着从所述放大指令设备发送放大指令，放大由所述面部图像检测设备检测的面部图像(包含面部图像的被拍摄物体影像)；第1显示控制设备，用于控制所述显示装置，以便在显示画面上显示由所述放大设备放大的面部图像；快门释放按钮；和记录控制设备，用于随着按下所述快门释放按钮，在记录媒体上记录从所述拍摄设备输出的图像数据。
第1发明也提供一种适合所述数字相机的方法。即，该方法是这样一种方法在设置了快门释放按钮、拍摄了被拍摄物体、得到了表示被拍摄物体影像的图像数据、包括了在显示画面上显示由得到的图像数据表示的被拍摄物体影像的显示装置的数字相机中，检测被包含在由通过拍摄得到的图像数据表示的被拍摄物体影像中的面部图像；随着发送放大指令，放大被检测的面部图像；控制所述显示装置，以便在显示画面上显示被放大的面部图像；随着按下所述快门释放按钮，在记录媒体上记录由拍摄得到的图像数据。
根据第1发明，通过拍摄被拍摄物体，被拍摄物体影像被显示在显示画面上。被包含在被拍摄物体影像中的面部图像被检测。在发送放大指令后，被检测的面部图像被放大，被显示在显示画面上。当按下快门释放按钮后，表示被拍摄物体影像的图像数据被记录在记录媒体上。
由于随着发送放大指令，被放大的面部图像被显示在显示画面上，所以，可以比较简单地确认焦点是否对准了被拍摄物体的面部部分。
当所述快门释放按钮是两段触按式时，随着按下所述快门释放按钮的第一段，所述放大设备是放大由所述面部图像检测设备检测的面部图像的设备；随着按下所述快门释放按钮的第二段，所述记录控制设备就会成为记录从所述拍摄设备输出的图像数据的设备；根据第2发明的图像回放装置，其特征在于包括读取设备，用于从记录媒体读取表示被拍摄物体影像的图像数据；面部图像检测设备，用于检测被包含在由通过所述读取设备读取的图像数据表示的被拍摄物体影像中的面部图像；放大设备，用于放大由所述面部图像检测设备检测的面部图像；和第1显示控制设备，用于控制显示装置，以便在显示画面上显示由所述放大设备放大的面部图像。
第2发明也提供一种适合所述图像回放装置的控制方法。即，该方法是这样一种方法从记录媒体读取表示被拍摄物体影像的图像数据；检测被包含在由被读取的图像数据表示的被拍摄物体影像中的面部图像；放大被检测的面部图像；控制显示装置，以便在显示画面上显示被放大的面部图像。
根据第2发明，表示被拍摄物体影像的图像数据从记录媒体中被读取。然后，被包含在由被读取的图像数据表示的被拍摄物体影像中的面部图像被检测。被检测的面部图像被放大，被显示在显示装置的显示画面上。由于面部图像被放大显示，使对于面部图像部分的焦点是否对准的确认变得比较容易。
优选进一步包括判断设备，用来判断面部图像放大处理是否被设定，或者，面部图像放大指令是否被发送；和第2显示控制设备，用于按照由所述判断设备做出的，面部图像放大处理没有被设定，或者，面部图像放大指令没有被发送的判断，控制所述显示装置，以便在显示画面上显示由通过所述读取设备读取的图像数据表示的被拍摄物体影像。此时，所述第1显示控制设备就会成为这样一种设备用于按照由判断设备做出的，面部图像放大处理被设定，或者，面部图像放大指令被发送的判断，控制显示装置，以便在显示画面上显示由所述放大设备放大的面部图像。
优选所述第1显示控制设备控制所述显示装置，以便显示为了使由所述放大设备放大的面部图像的中心成为所述显示画面的中心而被放大的面部图像。
也可以进一步包括第1判断设备，用于通过基于根据所述第1显示控制设备的控制，为了使由所述放大设备放大的面部图像的中心成为所述显示画面的中心而进行的显示，判断由从所述拍摄设备输出的图像数据表示的被拍摄物体影像之外的部分是否被显示在所述显示画面上；和决定设备，用于按照所述第1判断设备做出的，所述被拍摄物体影像之外的部分被显示在所述显示画面上的判断，决定由所述放大设备放大的面部图像的中心的位置，以便所述被拍摄物体影像之外的部分不被显示在所述显示画面上。
通过面部图像被放大显示，可以事先防止没有被拍摄的部分被显示在了显示画面上，使被显示的图像变得很难看。
也可以进一步包括第2判断设备，用于判断由所述面部图像检测设备检测的面部图像的中心是否在被预先规定在所述显示画面上的区域内。此时，所述第1显示控制设备成为这样一种设备按照由所述第2判断设备做出的，被检测的面部图像的中心是在被预先规定的区域内的判断，控制所述显示装置，以使被放大的面部图像的中心成为所述显示画面的中心；按照由所述第2判断设备做出的，被检测的面部图像的中心不在被预先规定的区域内的判断，决定面部图像的中心的位置，以便所述被拍摄物体影像之外的部分不被显示在所述显示画面上，控制所述显示装置，以使被放大的面部图像的中心被显示在被决定的位置上。
此时，通过面部图像被放大显示，可以事先防止没有被拍摄的部分被显示在了显示画面上。
所述面部图像检测设备也可以包括评价值计算设备，其用于计算针对被包含在所述被拍摄物体中的部分图像的面部相似度的评价值。此时，面部图像检测设备按照由所述评价值计算设备计算的评价值，检测面部图像。而且，进一步包括第3判断设备，用于判断由所述面部图像检测设备检测的面部图像是不是多个面部图像；第2显示控制设备，用于通过由所述第3判断设备做出的，有多个面部图像的判断，控制所述显示装置，以便把多个面部图像的面部相似度的顺序与所述多个面部图像相对应，显示在所述显示画面上；和指定设备，用于在所述多个面部图像中，指定一个面部图像。所述放大设备，就会成为放大由所述指定设备指定的面部图像的设备。
当多个面部图像被包含在被拍摄物体影像中时，就可以放大显示所希望的面部图像。
也可以进一步包括第3显示控制设备，用于控制所述显示装置，以便按照所述面部相似度的顺序，用不同的形态显示所述多个面部图像的区域。
也可以进一步包括第4判断设备，用于判断由所述面部图像检测设备检测的面部图像是不是多个面部图像；决定设备，用于通过由所述第4判断设备做出的，有多个面部图像的判断，按照面部图像的面部相似度、面部图像的明亮度和面部图像的大小中的至少一个要素，决定多个面部图像的顺序；第4显示控制设备，用于控制所述显示装置，以便把由所述决定设备决定的面部图像的顺序与所述多个面部图像相对应，显示在所述显示画面上；和指定设备，用于在所述多个面部图像中，指定一个面部图像。此时，所述放大设备，就会成为放大由所述指定设备指定的面部图像的设备。
另外，也可以进一步包括要素指定设备，用于在所述决定设备中，指定用来决定多个面部图像的顺序的面部图像的面部相似度、面部图像的明亮度和面部图像的大小中的至少一个要素。此时，所述决定设备就会成为，按照由所述要素指定设备指定的要素，决定多个面部图像的顺序的设备。
根据第3发明的面部图像显示装置，其特征在于包括面部图像检测设备，用于检测被包含在对象图像中的面部图像；放大设备，用于放大由所述面部图像检测设备检测的面部图像；和显示控制设备，用于控制显示装置，以便显示由所述放大设备放大的面部图像。
第3发明也提供一种适合所述图像显示装置的控制方法。即，该方法是这样一种方法检测被包含在对象图像中的面部图像；放大由所述面部图像检测设备检测的面部图像；控制显示装置，以便显示被放大的面部图像。
根据第3发明，被包含在对象图像中的面部图像被检测，被检测的面部图像被放大。被放大的面部图像被显示。由于被包含在对象图像中的面部图像被放大显示，所以即使在面部图像与对象图像相比显得较小的情况下，大的面部图像会被显示。可以确认面部图像的内容。
图1是显示数字相机电气部分的结构框图。
图2是显示记录处理步骤的流程图。
图3显示了OK区域和NG区域。
图4中(A)显示了变焦前的被拍摄物体影像的一个例子；(B)显示了变焦后的被拍摄物体影像的一个例子。
图5中(A)显示了变焦前的被拍摄物体影像的一个例子；(B)和(C)显示了变焦后的被拍摄物体影像的一个例子。
图6显示了OK区域和NG区域。
图7是显示面部检测处理的处理步骤的流程图。
图8是显示记录处理步骤的流程图。
图9是显示记录处理步骤的流程图。
图10是显示记录处理步骤的流程图。
图11是显示面部检测处理步骤的流程图。
图12显示了变焦前的被拍摄物体影像。
图13显示了变焦前的被拍摄物体影像。
图14(A)至(D)是变焦后的被拍摄物体影像的一个例子。
图15显示了要素设定菜单。
图16是显示面部检测处理步骤的流程图。
图17显示了变焦前的被拍摄物体影像。
图18显示了变焦前的被拍摄物体影像。
图19显示了变焦前的被拍摄物体影像。
图20是显示了回放处理步骤的流程图。
具体实施例方式
图1是显示数字相机电气部分的结构框图。
根据本实施例的数字相机，是当被拍摄物体中有人物的面部时，可以放大显示其面部的图像(把其面部的图像包含在内的被拍摄物体影像的部分)的数字相机。通过放大显示面部的图像，当显示画面很小地显示了被拍摄物体影像的整体时，即使面部的图像部分小，也可以确认面部是否被适当地拍摄了。
数字相机的整体操作由控制电路20统一控制。
控制电路20包含了通过总线相连的CPU 21、ROM 22和RAM 23。ROM 22存储了用作检测面部图像的面部的样本图像数据。当然，即使不是面部的样本图像数据，有用作检测面部图像的数据也可。RAM 23暂时存储了图像数据等。
数字相机包含了操作器15，操作器15包含发送放大面部图像的指令的放大指令按钮、两段触按式的快门释放按钮、OK按钮、取消按钮、模式设定转盘、上下左右按钮等。从操作器15输出的操作信号，输入控制电路20。
变焦镜头1的变焦位置由镜头驱动电路11控制。另外，光圈2的开口由光圈驱动电路12控制。表示被拍摄物体影像的光线由变焦镜头1聚集，通过光圈2射入如CCD那样的摄像元件3。表示被拍摄物体影像的光像成像在摄像元件3的受光面上。
拍摄模式由模式设定转盘20设定后，摄像元件3由摄像元件控制电路13控制，表示被拍摄物体影像的图像信号从摄像元件3输出。图像信号在模拟信号处理电路4中，进行相关二重采样等的模拟信号处理。从模拟信号处理电路4输出的图像信号在模拟/数字转换电路4中被转换为数字图像数据，输入控制电路20和数字信号处理电路6。在数字信号处理电路6中，进行伽马校正、白平衡调节等的数字信号处理。
从数字信号处理电路6输出的图像数据通过存储器7被发送到显示控制电路10。通过显示控制电路10，被拍摄物体影像被显示在显示装置16的显示画面上。
另外，从数字信号处理电路6输出的图像数据也输入面部检测处理电路14。在面部检测处理电路14中，被拍摄物体影像的面部的图像部分被检测。详细情况如后所述，按下放大按钮后，面部图像的放大指令被发送到数字相机。然后，当面部图像被包含在由拍摄得到的被拍摄物体影像中时，其面部的图像被放大(被拍摄物体影像整体被放大，以便包含面部的图像)，被显示在显示装置16的显示画面上。
按下快门释放按钮的第一段后，如上所述，从模拟/数字转换电路5输出的图像数据被发送到控制电路20。在控制电路20中，镜头驱动电路11以及光圈驱动电路12和快门速度被控制，以便使用输入的图像数据进行自动对焦控制和自动曝光控制。
按下快门释放按钮的第二段，与上述的内容相同，被拍摄物体被再次拍摄，得到表示被拍摄物体影像的图像数据。图像数据从数字信号处理电路6被发送到存储器7，被暂时存储。图像数据从存储器7被读出，由记录/读出控制电路8记录在存储卡9中。不用说，会根据需要进行数据压缩。
回放模式由模式设定转盘设定后，表示被拍摄物体影像的图像数据通过记录/读出控制电路8被从存储卡9中读出。读出的图像数据通过存储器7被发送到显示控制电路10。由从存储卡9中读取的图像数据表示的被拍摄物体影像被显示在显示装置16的显示画面上。
当设定了回放模式时通过按下放大指令按钮，包含了由从存储卡9读取的图像数据表示的图像的面部的图像的情况下，该面部的图像被放大显示。当设定了回放模式时，按下放大指令按钮后，从存储卡9读取的图像数据通过存储卡7和数字信号处理电路6被发送到面部检测处理电路14。在面部检测处理电路14中，面部的图像部分被检测。进行图像放大处理(由图像数据的插入处理等实现)，以便被检测的面部的图像被显示在显示画面上。被放大的图像被显示在显示装置16的显示画面上。回放时，也可以进行后述的处理。
图2是显示根据本实施例的数字相机的记录时的处理步骤的流程图。
如上所述，设定拍摄模式后，被拍摄物体被拍摄，得到表示被拍摄物体影像的图像数据(步骤31)。通过把得到的图像数据发送到显示装置16，被拍摄物体影像被显示在显示装置16的显示画面上。另外，表示被拍摄物体影像的图像数据还被发送到面部检测处理电路14，进行被包含在被拍摄物体影像中的面部的图像的检测处理(步骤32)。关于这种面部检测处理的详细情况，在后面还要叙述。
按下放大指令按钮后(步骤33，YES)，当由拍摄得到的被拍摄物体影像中含有面部图像时，其被放大，以便该面部的图像的中心成为显示画面的中心，并被显示在显示装置16的显示画面上(步骤34)。但是，如后所述，当由于被放大而显示了被拍摄物体影像之外的部分时，被拍摄物体影像相对于显示画面被移动放大，以免显示被拍摄物体之外的部分。当被拍摄物体影像中不含有面部的图像时，步骤34的放大处理被跳过。不过，不用说，即使当不含有面部的图像时，也可以进行被拍摄物体影像的放大处理。
按下快门释放按钮的第一段后(步骤35，YES)，如上所述，利用从模拟/数字转换电路5输出的图像数据进行自动曝光控制(步骤36)，并且，进行自动对焦控制(步骤37)。
按下快门释放按钮的第二段(步骤38，YES)后，由拍摄得到的图像数据被记录在存储卡(装卸自如的记录媒体)9上(步骤39)。
图3显示了当放大被拍摄物体影像时，为使面部的图像的中心成为显示画面的中心而放大的区域和为使面部的图像的中心不成为显示画面的中心而放大的区域。
当被拍摄物体影像为I时，缩小了该被拍摄物体影像的外框(拍摄范围，相当于显示画面)的规定的区域40是当该被拍摄物体影像I包含了面部的图像时，为使面部的图像的中心成为显示画面的中心而放大的OK区域40。该OK区域40周围的区域是为使面部的图像的中心不成为显示画面的中心而放大的NG区域41。当面部的图像的中心在OK区域40内时，被拍摄物体影像被放大，以使该面部的图像的中心成为显示画面的中心。当面部的图像的中心在NG区域41内时，进行被拍摄物体影像的放大处理，以使该面部的图像的中心成为距离OK区域40最近的位置。
例如，当面部的图像的中心位于OK区域40的左上方顶点的左上方的坐标(x1，y1)时，被拍摄物体影像整体被移动，被拍摄物体影像被放大，以使距离该坐标(x1，y1)最近的OK区域40的坐标(x2，y2)成为面部的图像的中心。另外，当面部的图像的中心位于OK区域40的下方的坐标(x3，y3)时，被拍摄物体影像整体被移动，被拍摄物体影像被放大，以使该坐标(x3，y4)成为面部的图像的中心。通过放大被拍摄物体影像，事先防止面部图像未被显示的情况。
图4(A)和(B)是被显示在显示装置16的显示画面上的被拍摄物体影像的一个例子。(A)是放大前的图像，(B)是放大后的图像。在这些图中，也显示了图3中显示的OK区域40和NG区域41。
使用具有各种大小的检索区域，判断是否有被拍摄物体影像I1(它是由拍摄范围规定的，并且，也与显示装置16的显示画面的大小相对应)内的面部图像。按照具有各种大小的检索区域内的面部图像和面部的样本图像的一致程度，判断检索区域内的图像是否是面部图像。检索区域内的面部图像和面部的样本图像的一致程度最高的检索区域(面部框)43内的图像被判断为是面部图像。判断检索区域43内的图像是否是面部的图像，不仅仅按照检索区域43内的面部图像和面部的样本图像的一致程度，也可以使用学习结果(它是使用面部的样本图像和其他图像判断面部相似度的数据，可以不一定是样本图像，也可以是图表形态等任何形态)进行判断。
在图4(A)中，由于面部的图像(内部的图像被判断为是面部的图像的检索区域43面部框)的中心C1被包含在OK区域40内，所以被拍摄物体影像I1被扩大显示(参照图4(B))，以使面部的图像的中心C1成为显示画面的中心。这样的处理在一边拍摄时，一边实时进行。
包含被放大的面部的图像的被拍摄物体影像I2会被显示在显示装置16的显示画面上。另外，在面部的图像部分上，检索区域(面部框)44也被放大显示，但不用说，也可以不一定被显示。
图5(A)至(C)是被显示在显示画面上的被拍摄物体影像的一个例子。(A)是放大前的图像。(B)是为使面部的图像的中心成为显示画面的中心的被放大后的图像。(C)是为使面部的图像的中心离开显示画面的中心的被放大后的图像。
参照(A)，被包含在被拍摄物体影像I3中的面部框46内的面部图像的中心C2位于OK区域40之外的NG区域41内。因此，为使面部图像的中心C2成为显示画面的中心，而移动并且放大被拍摄物体影像后，如(B)所示，不存在被拍摄物体影像I4的部分48就被显示在了显示画面上。在本实施例中，如(C)所示，为使放大后的面部框47的面部的中心C3成为距离放大前的面部的图像的中心C2最近的OK区域40的位置，面部的图像的中心被确定，被放大。
图6显示了OK区域40和NG区域41的关系。
所述OK区域40和NG区域41依赖放大率(变焦倍率)。由于变焦倍率越大，放大后的图像就越大，由于即使面部的图像的中心成为显示画面的中心，被拍摄物体影像没有被显示的部分也不会出现，所以OK区域40就很大。反过来，由于变焦倍率越小，放大后的图像越小，所以面部的图像的中心成为显示画面的中心后，会出现被拍摄物体影像没有被显示的部分。例如，当变焦倍率是3倍时，为使OK区域40变得比较大，而规定了OK区域40和NG区域41的边界51。当变焦倍率是1.5倍时，为使OK区域40变得比较小，而规定了OK区域40和NG区域的边界52。
图7是显示面部检测处理(图2步骤32的处理)的处理步骤的流程图。
利用具有多个大小的检索区域扫描被拍摄物体影像，从被拍摄物体影像中检测面部的图像部分(步骤61)。检测面部的图像部分后，特别规定被拍摄物体影像的该面部的位置。(步骤62)。
如上所述，确认被特别规定的面部的图像的中心在不在OK区域内(步骤63)。如果在OK区域内(步骤43，YES)，进行变焦处理(步骤65)，以使面部的图像的中心成为显示画面的中心。如果不在OK区域内(如果在NG区域内)，移动被拍摄物体影像(通过查找地址的操作可以实现)，进行变焦处理(步骤64)，以使距离面部的图像的中心最近的OK区域内的位置成为面部的图像的中心。
图8是显示记录处理步骤的其他例子的流程图。
在图2所示的记录处理中，通过按下放大按钮进行了放大处理，在图8所示的处理中，随着按下两段触按式的快门释放按钮的第一段，进行放大处理。
设定拍摄模式后，被拍摄物体被拍摄，被拍摄物体影像被显示在显示装置16的显示画面上(步骤71)。按下快门释放按钮的第一段后(步骤72，YES)，进行自动曝光控制处理(步骤73)，并且，进行自动对焦控制处理(步骤74)。另外，进行面部检测处理(步骤75)。
并且，按下快门释放按钮的第一段的动作作为放大指令被发送到数字相机，如上所述进行面部图像的放大处理，被放大的被拍摄物体影像被显示(步骤76)。
按下快门释放按钮的第二段(步骤77，YES)后，由拍摄得到的图像数据被记录在存储卡中(步骤78)。
图9是显示记录处理步骤中更进一步的其他的例子的图，是处理预览记录的流程图。
当预览记录时，在图像数据被记录在存储卡之前，该图像数据被暂时存储在存储器中。由该被存储的图像数据表示的被拍摄物体影像被显示，通过重新发送记录指令，该图像数据被记录在存储卡中。
设定拍摄模式后，被拍摄物体被拍摄，被拍摄物体影像被显示在显示装置16的显示画面上(步骤81)。按下快门释放按钮的第一段后(步骤82，YES)，进行自动曝光控制处理(步骤83)，并且，进行自动对焦控制处理(步骤84)。另外，进行面部检测处理(步骤85)。
并且，按下快门释放按钮的第一段的动作作为放大指令被发送到数字相机，如上所述进行面部图像的放大处理，被放大的被拍摄物体影像被显示(步骤86)。
按下快门释放按钮的第二段(步骤87，YES)后，由拍摄得到的图像数据被暂时存储在存储器7中(步骤88)。图像数据从存储卡7中被读取，由被读取的图像数据表示的被拍摄物体影像被显示在显示装置16的显示画面上(步骤88)。用户看到被显示在显示画面上的被拍摄物体影像，如果对该被拍摄物体影像满意，用户就会按下OK按钮(步骤89)。然后，被暂时存储在存储器7中的图像数据被发送并被记录在存储卡16中。
图10是显示记录处理步骤中更进一步的其他的例子的图，是处理预览记录处理的流程图。在本图中，关于与图9所示的处理相同的处理，使用了相同的标号，省略了说明。
在图9所示的处理中，随着按下快门释放按钮的第一段，除进行自动曝光控制处理(步骤83)和自动对焦控制处理(步骤84)外，还进行了面部检测处理(图9步骤85)和面部图像的扩大显示处理(步骤86)。但在图10所示的处理中，随着按下快门释放按钮的第二段，进行的是面部检测处理(步骤91)和面部图像的放大显示处理(步骤92)。
按下快门释放按钮的第二段(步骤87，YES)后，由拍摄得到的图像数据被暂时存储在存储器7中(步骤88)。图像数据从存储器7中被读取，由被读取的图像数据表示的被拍摄物体影像被显示在显示装置16的显示画面上(步骤88)。其后，进行上述的面部检测处理(步骤91)和面部图像的放大显示处理(步骤92)。用户看到被显示在显示画面上的被拍摄物体影像(被放大的面部图像)，如果对该被拍摄物体影像满意，用户就会按下OK按钮(步骤89)。然后，被暂时存储在存储器7中的图像数据被发送并被记录在存储卡16中。
图11是显示面部检测处理的其它的处理步骤的流程图。该处理是当多个面部的图像被包含在被拍摄物体影像中时的处理。图12和图13是被显示在显示画面上的放大前的被拍摄物体影像的一个例子。图14(A)至(D)是放大后的被拍摄物体影像的一个例子。在下面的内容中，被显示在显示画面的中央交叉的虚线可以不一定被显示。
当多个面部的图像被包含在被拍摄物体影像中时，在各个面部的图像上会显示框。这些框按照框中的面部的图像的面部相似度，形态发生变化。另外，可以指定放大时应该成为中心图像的面部的图像，被指定的面部的图像的中心如上所述被放大，以使其成为显示画面的中心或在OK区域内。
进行被拍摄物体影像的面部图像的检测处理(步骤101)。通过该面部检测处理，确认被检测的面部的图像是不是多个面部图像(步骤102)。
如果面部图像有多个(步骤102，YES)，如图11所示，在被拍摄物体影像I6中被检测的面部的图像的框111、112、113被显示(步骤103)。在各个图像的框111、112、113上显示号码，号码显示由面部检测处理计算的面部相似度的程度(与样本图像的一致程度、评价值)的顺序。另外，在被检测的面部的图像中，对于被判断为是与面部最相似的图像的面部图像的框，用实线显示，对于其它图像的框，用虚线显示。只看一眼，就能明白在多个面部的图像中，做出了哪个图像与面部最相似的判断。
按下包含在数字相机中的上下左右按钮中的右箭头，面部的图像的框的显示转换指令就会被发送到数字相机。按下右箭头后，会认为来自用户的转换指令已被发送(步骤104，YES)，接着，被判断为与面部相似的面部图像的框被显示为实线，其它的框被显示为虚线(步骤105)。例如，图12所示的状态，按下右箭头后，如图13所示，框112被显示为实线，其它的框111和113被显示为虚线。如果没有来自用户的转换指令(步骤104，NO)，步骤105的处理会被跳过。
被实线框住的图像被认为是特别规定的面部的图像(步骤106)，判断该特别规定的面部的图像的中心是否在OK区域内(步骤107)。如果在OK区域内(步骤107，YES)，就进行变焦，以使面部的图像的中心成为显示画面的中心(步骤109)。如果不在OK区域内(步骤107，NO)，被拍摄物体影像就会被移动，进行变焦处理，以使距离面部的图像的中心最近的OK区域的点成为面部的图像的中心(步骤108)。
当变焦倍率小时，由于被特别规定的面部的图像的中心没有落入OK区域内，所以如图14(A)所示，被特别规定的面部的图像(框114内的图像)的中心不一定成为显示画面的中心(被拍摄物体影像I7)。变焦倍率提高后，如图14(B)、(C)、(D)所示，被拍摄物体影像I8、I9、I10被放大，以使被特别规定的面部的图像的中心成为显示画面的中心。
图15显示了被显示在显示装置16的显示画面上的被拍摄物体影像I11的一个例子。
在上述实施例中，当多个面部的图像被包含在被拍摄物体影像中时，为了决定多个面部的图像的顺序，使用了面部的图像的面部相似度这一要素。但是，在接下来叙述的实施例中，要使用面部相似度的要素以外的要素，决定多个面部的图像的顺序。由用户指定使用哪个要素决定多个面部的图像的顺序。
数字相机的操作器15包含了菜单按钮，通过按下该菜单按钮，在数字相机上可以设定的菜单被显示在显示装置16的显示画面上。该菜单包含了要素设定菜单，通过由用户指定要素设定菜单，如图15所示的要素设定菜单130出现在显示装置15的显示画面中。
在本实施例中可以设定的要素包含“大小”“明亮度”“面部相似度”。当然，也可以决定设定其它要素。要素设定菜单130中包含了显示文字“大小”的区域140、显示文字“明亮度”的区域150和显示文字“面部相似度”的区域160。
当作为要素设定大小时，可以设定“大顺序”或“小顺序”。因此，要素设定菜单130中包含了显示文字“大顺序”的区域141和显示文字“小顺序”的区域142。另外，当作为要素设定明亮度时，可以设定“亮顺序”或“暗顺序”。因此，要素设定菜单130中包含了显示文字“亮顺序”的区域151和显示文字“暗顺序”的区域152。并且，当作为要素设定面部相似度时，可以设定“面部相似度大的顺序”或“面部相似度小的顺序”。因此，要素设定菜单130中包含了显示文字“面部相似度较大的顺序”的区域161和显示文字“面部相似度较小的顺序”的区域162。
光标135被显示，以便框住要素设定菜单130的区域的任何一个区域。光标135按照包含在操作器15中的上下按钮的操作在各区域之间上下移动。按下包含在操作器15中的决定按钮后，由光标135框住的区域表示的要素被设定。
图16是显示面部检测的其它的处理步骤的流程图。图17至图19是被显示在显示画面上的放大前的被拍摄物体影像的一个例子。
在图16所示的流程图中，关于与图11所示的处理相同的处理，使用了相同的标号，省略了说明。在图11所示的面部检测处理中，当多个面部的图像被包含在被拍摄物体影像中时，按照面部相似度，被显示在面部图像上的框的形态发生变化，但在图16所示的面部检测处理中，用作改变框的形态的要素随着用户的设定而被决定，并且，应该可以由用户转换要素。
进行被拍摄物体影像的面部图像的检测处理(步骤101)，确认被拍摄物体影像中是否含有面部的图像(步骤121)。在被拍摄物体影像中包含了面部图像(步骤121，YES)，并且包含了多个面部的图像(步骤102，YES)后，多个面部的图像中的各个图像分别由框框住，被拍摄物体影像被显示。特别是，在本实施例中，按照如上所述的由用户设定的要素，设置了多个面部的图像的顺序，按照该顺序，号码被设在框的附近。根据要素，被决定排在首位的面部图像，被用实线框显示，其它的框被显示为虚线。
图17是当设定作为要素的被检测的面部图像大小的大顺序时的被拍摄物体影像的一个例子。在显示画面的右上方，规定了显示被设定的要素的区域180。由于设定了作为要素的大小的大顺序，文字“大顺序”被显示在了要素显示区域180中。
被拍摄物体影像I12中包含了人物影像171、172和173。面部图像的大小很大，顺序是人物影像171、172和173。因此，在人物影像171、172和173的各个面部图像的框111、112、113的附近，显示了显示面部图像的大小顺序的号码。特别是，面部图像的大小最大的人物影像171的面部图像的框111被显示为实线。其它人物影像172和173的面部图像的框112、113被显示为虚线(步骤112)。这样，就可以明白，面部图像的顺序是按照何种顺序被设置的了。
如上所述，当用户转换了要素后(步骤123，YES)，按照被转换的要素，预先决定被检测的面部的图像的顺序。显示在面部的图像的框的附近的顺序，按照被转换的要素而被更新(步骤124)。例如，要素被转换成面部图像的小顺序后，如图18所示，由于面部图像小，顺序是人物影像173的面部图像、人物影像172的面部图像、人物影像171的面部图像，所以，按照框113、112、111的顺序设置了号码。另外，框113成为实线，其它的框112和111成为虚线。要素被转换成亮顺序后，如图19所示，由于面部图像明亮(明亮度被用阴影显示)，顺序是人物影像172的面部图像、人物影像171的面部图像、人物影像173的面部图像，所以，按照框112、111、113的顺序设置了号码。框112成为实线，其它的框111和113成为虚线。这样，可以按照用户的设定而改变要素，按照被改变的要素，面部图像的顺序也会发生变化。
如果不转换要素(步骤123，NO)，步骤124的处理就被跳过，进行步骤104以后的处理。
在上述的实施例中，按照大顺序、明亮度顺序等决定面部图像的顺序，但当设定了大小、明亮度等的一定的范围，该一定的范围内包含了面部图像时，也可以决定把顺序作为应该决定的面部图像的对象。例如，太亮的面部图像、太暗的面部图像、太大的面部图像、太小的面部图像，即使它们分别被指定了亮顺序、暗顺序、大顺序、小顺序的要素，也可以考虑将它们从决定面部图像的顺序的面部图像的对象中排除。这样，就可以对适合鉴赏的面部图像，设置顺序。
图20是显示回放时的处理步骤的流程图。
在上述的实施例中，应该在记录时进行面部检测处理，但也可以如上所述，在回放时，进行面部检测处理。
对于回放图像，是否进行变焦操作，是否进行面部中心的变焦，应该通过操作预先设定菜单。不过，如上所述，也可以按照来自放大指令按钮的放大指令，决定进行变焦操作、面部中心的变焦。
设定回放模式后，记录在存储卡9的图像数据被读取(步骤191)。如果不设定进行变焦操作(步骤192，NO)，由被读取的图像数据显示的被拍摄物体影像就不放大，被显示在显示装置16的显示画面上(步骤198)。如果设定进行变焦操作(步骤192，YES)，确认是否设定进行面部中心变焦(步骤193)。
如果不设定进行变焦操作(步骤193，NO)，由被读取的图像数据显示的被拍摄物体影像的整体被放大，被显示在显示装置16的显示画面上(步骤197)。
如果设定进行变焦操作(步骤193，NO)，就如上所述，进行由被读取的图像数据显示的被拍摄物体影像的面部检测处理(步骤194)。面部图像从被拍摄物体影像中被检测后(步骤195，YES)，如上所述，面部图像在中心被放大显示(步骤196)。由于回放时面部图像在中心被放大，就可以比较简单地确认面部图像焦点是否对正。面部图像没有从被拍摄物体影像中被检测后(步骤195，NO)，被拍摄物体影像的整体就被扩大显示(步骤197)。
在上述实施例中，按照面部中心的变焦的设定、放大指令等，在中心放大了面部图像，但即使没有设定、指令等，通过回放被拍摄物体影像，也可以自动在中心放大面部图像。
权利要求
1.一种数字相机，其特征在于包括拍摄设备，用于拍摄被拍摄物体，输出表示被拍摄物体影像的图像数据；显示装置，用于在显示画面上显示由从所述拍摄设备输出的图像数据所表示的被拍摄物体影像；面部图像检测设备，用于检测被包含在由从所述拍摄设备输出的图像数据表示的被拍摄物体影像中的面部图像；放大指令设备，用于发送放大指令；放大设备，用于根据从所述放大指令设备发送的放大指令，放大由所述面部图像检测设备检测的面部图像；第1显示控制设备，用于控制所述显示装置，以便在显示画面上显示由所述放大设备放大的面部图像；快门释放按钮；和记录控制设备，用于随着按下所述快门释放按钮，在记录媒体上记录从所述拍摄设备输出的图像数据。
2.如权利要求1所述的数字相机，其特征在于所述快门释放按钮是两段触按式的按钮；按下所述快门释放按钮的第一段时，所述放大设备成为放大由所述面部图像检测设备检测的面部图像的设备；按下所述快门释放按钮的第二段时，所述记录控制设备成为记录从所述拍摄设备输出的图像数据的设备。
3.如权利要求1所述的数字相机，其特征在于所述第1显示控制设备是控制所述显示装置的设备，其控制显示为了使由所述放大设备放大的面部图像的中心成为所述显示画面的中心而被放大的面部图像。
4.如权利要求3所述的数字相机，其特征在于进一步包括第1判断设备，用于通过基于根据所述第1显示控制设备的控制，为了使由所述放大设备放大的面部图像的中心成为所述显示画面的中心而进行的显示，判断由从所述拍摄设备输出的图像数据表示的被拍摄物体影像之外的部分是否被显示在所述显示画面上；和决定设备，用于按照所述第1判断设备做出的所述被拍摄物体影像之外的部分被显示在所述显示画面上的判断来决定由所述放大设备放大的面部图像的中心的位置，以便所述被拍摄物体影像之外的部分不被显示在所述显示画面上。
5.如权利要求4所述的数字相机，其特征在于进一步包括第2判断设备，用于判断由所述面部图像检测设备检测的面部图像的中心是否在被预先规定在所述显示画面上的区域内；所述第1显示控制设备为按照由所述第2判断设备做出的被检测的面部图像的中心是在被预先规定的区域内的判断来控制所述显示装置，以使被放大的面部图像的中心成为所述显示画面的中心；按照由所述第2判断设备做出的被检测的面部图像的中心不在被预先规定的区域内的判断来决定面部图像的中心的位置，以便所述被拍摄物体影像之外的部分不被显示在所述显示画面上，控制所述显示装置，以使被放大的面部图像的中心被显示在被决定的位置上。
6.如权利要求1所述的数字相机，其特征在于所述面部图像检测设备包括评价值计算设备，用于计算针对被包含在所述被拍摄物体中的部分图像的面部相似度的评价值，按照由所述评价值计算设备计算的评价值，检测面部图像的设备；所述数字相机进一步包括第3判断设备，用于判断由所述面部图像检测设备检测的面部图像是不是多个面部图像；第2显示控制设备，用于通过由所述第3判断设备做出的有多个面部图像的判断来控制所述显示装置，以便把多个面部图像的面部相似度的顺序与所述多个面部图像相对应，显示在所述显示画面上；和指定设备，用于在所述多个面部图像中，指定一个面部图像；所述放大设备是放大由所述指定设备指定的面部图像的设备。
7.如权利要求6所述的数字相机，其特征在于进一步包括第3显示控制设备，用于控制所述显示装置，以便按照所述面部相似度的顺序，用不同的形态显示所述多个面部图像的区域。
8.如权利要求1所述的数字相机，其特征在于进一步包括第4判断设备，用于判断由所述面部图像检测设备检测的面部图像是不是多个面部图像；决定设备，用于通过由所述第4判断设备做出的有多个面部图像的判断，按照面部图像的面部相似度、面部图像的明亮度和面部图像的大小中的至少一个要素，决定多个面部图像的顺序；第3显示控制设备，用于控制所述显示装置，以便把由所述决定设备决定的面部图像的顺序与所述多个面部图像相对应，显示在所述显示画面上；和指定设备，用于在所述多个面部图像中，指定一个面部图像；所述放大设备是放大由所述指定设备指定的面部图像的设备。
9.如权利要求8所述的数字相机，其特征在于进一步包括要素指定设备，用于在所述决定设备中，指定用来决定多个面部图像的顺序的面部图像的面部相似度、面部图像的明亮度和面部图像的大小中的至少一个要素；所述决定设备是按照由所述要素指定设备指定的要素，决定多个面部图像的顺序的设备。
10.一种图像回放装置，其特征在于包括读取设备，用于从记录媒体读取表示被拍摄物体影像的图像数据；面部图像检测设备，用于检测被包含在由通过所述读取设备读取的图像数据表示的被拍摄物体影像中的面部图像；放大设备，用于放大由所述面部图像检测设备检测的面部图像；和第1显示控制设备，用于控制显示装置，以便在显示画面上显示由所述放大设备放大的面部图像。
11.如权利要求10所述的图像回放装置，其特征在于进一步包括判断设备，用来判断面部图像放大处理是否被设定，或者，面部图像放大指令是否被发送；和第2显示控制设备，用于按照由所述判断设备做出的面部图像放大处理没有被设定或者面部图像放大指令没有被发送的判断，控制所述显示装置，以便在显示画面上显示由通过所述读取设备读取的图像数据表示的被拍摄物体影像；所述第1显示控制设备为用于按照由判断设备做出的面部图像放大处理被设定或者面部图像放大指令被发送的判断控制显示装置，以便在显示画面上显示由所述放大设备放大的面部图像。
12.如权利要求10所述的图像回放装置，其特征在于所述第1显示控制设备是控制所述显示装置的设备，其控制显示为了使由所述放大设备放大的面部图像的中心成为所述显示画面的中心而被放大的面部图像。
13.如权利要求12所述的图像回放装置，其特征在于进一步包括第1判断设备，用于通过基于根据所述第1显示控制设备的控制，为了使由所述放大设备放大的面部图像的中心成为所述显示画面的中心而进行的显示，判断由从所述拍摄设备输出的图像数据表示的被拍摄物体影像之外的部分是否被显示在所述显示画面上；和决定设备，用于按照所述第1判断设备做出的所述被拍摄物体影像之外的部分被显示在所述显示画面上的判断，决定由所述放大设备放大的面部图像的中心的位置，以便所述被拍摄物体影像之外的部分不被显示在所述显示画面上。
14.如权利要求13所述的图像回放装置，其特征在于进一步包括第2判断设备，用于判断由所述面部图像检测设备检测的面部图像的中心是否在被预先规定在所述显示画面上的区域内；所述第1显示控制设备为按照由所述第2判断设备做出的被检测的面部图像的中心是在被预先规定的区域内的判断来控制所述显示装置，以使被放大的面部图像的中心成为所述显示画面的中心；按照由所述第2判断设备做出的被检测的面部图像的中心不在被预先规定的区域内的判断来决定面部图像的中心的位置，以便所述被拍摄物体影像之外的部分不被显示在所述显示画面上，控制所述显示装置，以使被放大的面部图像的中心被显示在被决定的位置上。
15.如权利要求11所述的图像回放装置，其特征在于所述面部图像检测设备包括用于计算针对被包含在所述被拍摄物体中的部分图像的面部相似度的评价值的评价值计算设备，其按照由所述评价值计算设备计算的评价值，检测面部图像；所述数字相机进一步包括第3判断设备，用于判断由所述面部图像检测设备检测的面部图像是不是多个面部图像；第3显示控制设备，用于通过由所述第3判断设备做出的有多个面部图像的判断来控制所述显示装置，以便把多个面部图像的面部相似度的顺序与在所述第2显示控制设备的控制下被显示的被拍摄物体影像的所述多个面部图像相对应，显示在所述显示画面上；和指定设备，用于在所述多个面部图像中指定一个面部图像；所述放大设备是放大由所述指定设备指定的面部图像的设备。
16.如权利要求15所述的图像回放装置，其特征在于进一步包括第4显示控制设备，用于控制所述显示装置，以便按照所述面部相似度的顺序，用不同的形态显示所述多个面部图像的区域。
17.如权利要求10所述的图像回放装置，其特征在于进一步包括第4判断设备，用于判断由所述面部图像检测设备检测的面部图像是不是多个面部图像；决定设备，用于通过由所述第4判断设备做出的有多个面部图像的判断，按照面部图像的面部相似度、面部图像的明亮度和面部图像的大小中的至少一个要素，决定多个面部图像的顺序；第4显示控制设备，用于控制所述显示装置，以便把由所述决定设备决定的面部图像的顺序与所述多个面部图像相对应，显示在所述显示画面上；和指定设备，用于在所述多个面部图像中指定一个面部图像；所述放大设备是放大由所述指定设备指定的面部图像的设备。
18.如权利要求17所述的图像回放装置，其特征在于进一步包括要素指定设备，用于在所述决定设备中，指定用来决定多个面部图像的顺序的面部图像的面部相似度、面部图像的明亮度和面部图像的大小中的至少一个要素；所述决定设备是按照由所述要素指定设备指定的要素，决定多个面部图像的顺序的设备。
19.一种面部图像显示装置，其特征在于包括面部图像检测设备，用于检测被包含在对象图像中的面部图像；放大设备，用于放大由所述面部图像检测设备检测的面部图像；和显示控制设备，用于控制显示装置，以便显示由所述放大设备放大的面部图像。
20.一种数字相机的控制方法，用在设置有快门释放按钮、拍摄被拍摄物体、获得表示被拍摄物体影像的图像数据、包括在显示画面上显示由得到的图像数据表示的被拍摄物体影像的显示装置的数字相机中，其特征在于检测被包含在由通过拍摄得到的图像数据表示的被拍摄物体影像中的面部图像；随着发送放大指令，放大被检测的面部图像；控制所述显示装置，以便在显示画面上显示被放大的面部图像；随着按下所述快门释放按钮，在记录媒体上记录由拍摄得到的图像数据。
21.一种图像回放装置的控制方法，其特征在于从记录媒体读取表示被拍摄物体影像的图像数据；检测被包含在由被读取的图像数据表示的被拍摄物体影像中的面部图像；放大被检测的面部图像；控制显示装置，以便在显示画面上显示被放大的面部图像。
22.一种面部图像显示装置的控制方法，其特征在于检测被包含在对象图像中的面部图像；放大由所述面部图像检测设备检测的面部图像；控制显示装置，以便显示被放大的面部图像。
全文摘要
为了在拍摄人物时，很容易地确认面部的图像。在拍摄被拍摄物体时，被拍摄物体影像(I1)，被显示在数字相机的显示画面上。被拍摄物体影像(I1)中的面部图像(框43内的图像)被检测。为使被检测的面部图像的中心(C1)成为显示画面的中心，被拍摄物体影像(I1)被移动，并且被放大显示在显示画面上。由于面部的图像被显示得很大，所以即使当显示画面小时，也能够很容易地确认面部。
文档编号H04N5/225GK1812492SQ20051009391
公开日2006年8月2日 申请日期2005年8月31日 优先权日2004年3月31日
发明者杉本雅彦 申请人:富士胶片株式会社