摄像装置和摄像方法与流程

文档序号:13941504阅读:146来源:国知局

本发明涉及摄像装置和摄像方法。



背景技术:

近年来的摄像装置能够通过有线通信或无线通信而与电视接收机(电视)连接。由此,用户能够利用电视的大画面观看由摄像装置取得的图像。

并且,在近年来的电视中,与进行比本来规格宽的动态范围的显示的高动态范围(hdr)显示对应的电视增加。另一方面,在近年来的摄像装置中,还存在具有通过对曝光条件不同的多个图像进行合成而取得比本来的摄像装置的规格宽的动态范围的图像的hdr图像记录功能的摄像装置。具有这种hdr图像记录功能的摄像装置可以成为能够对与hdr显示对应的电视提供有魅力的内容的摄像装置。

在具有hdr图像记录功能的摄像装置中的、例如日本特开2015-56807号公报中提出的摄像装置中,在hdr动态图像记录中存在静态图像拍摄指示的情况下,对hdr动态图像记录中得到的曝光条件不同的多个图像进行合成,记录hdr静态图像。

这里,日本特开2015-56807号公报中生成的hdr静态图像只不过是通过对动态图像拍摄中取得的图像数据进行合成而得到的,是与hdr动态图像相同的画质。近年来,根据所记录的动态图像生成静态图像的技术也发展,要求针对作为相同图像数据得到动态图像和静态图像的情况进行改善。



技术实现要素:

本发明是鉴于所述情况而完成的,其目的在于,提供能够在hdr动态图像的记录中生成有魅力的hdr静态图像、或能够记录能够生成该hdr静态图像的数据的摄像装置和摄像方法。

本发明的第1方式的摄像装置具有:摄像部,其依次取得由用于生成hdr动态图像帧的曝光条件不同的多个图像数据构成的图像数据组;第1图像处理部,其对属于各个所述图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据;以及记录处理部,其以能够对属于各个所述图像数据组的多个图像数据实施与所述第1合成处理不同的第2合成处理而生成hdr静态图像数据的方式,记录多个静态图像用图像数据。

本发明的第2方式的摄像装置具有:摄像部,其依次取得由用于生成hdr动态图像帧的曝光条件不同的多个图像数据构成的图像数据组;第1图像处理部,其对属于各个所述图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据;以及第2图像处理部,其对属于各个所述图像数据组的多个图像数据或不属于所述图像数据组的多个图像数据实施与所述第1合成处理不同的第2合成处理,生成hdr静态图像数据。

本发明的第3方式的摄像装置具有:摄像部,其依次取得由用于生成hdr动态图像帧的曝光条件不同的多个图像数据构成的图像数据组;第1图像处理部,其对属于各个所述图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据;以及选择部,其选择能够对属于各个所述图像数据组的多个图像数据实施与所述第1合成处理不同的第2合成处理而生成hdr静态图像数据的拍摄模式、以及能够对属于各个所述图像数据组的多个图像数据实施与所述第1合成处理相同的合成处理而生成hdr静态图像数据的拍摄模式中的任意一方。

本发明的第4方式的摄像方法具有以下步骤:通过摄像部依次取得由用于生成hdr动态图像帧的曝光条件不同的多个图像数据构成的图像数据组;对属于各个所述图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据;以及以能够对属于各个所述图像数据组的多个图像数据实施与所述第1合成处理不同的第2合成处理而生成hdr静态图像数据的方式,记录多个静态图像用图像数据。

本发明的第5方式的摄像方法具有以下步骤:通过摄像部依次取得由用于生成hdr动态图像帧的曝光条件不同的多个图像数据构成的图像数据组;对属于各个所述图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据;以及对属于各个所述图像数据组的多个图像数据或不属于所述图像数据组的多个图像数据实施与所述第1合成处理不同的第2合成处理,生成hdr静态图像数据。

本发明的第6方式的摄像方法具有以下步骤:通过摄像部依次取得由用于生成hdr动态图像帧的曝光条件不同的多个图像数据构成的图像数据组;对属于各个所述图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据;以及选择能够对属于各个所述图像数据组的多个图像数据实施与所述第1合成处理不同的第2合成处理而生成hdr静态图像数据的拍摄模式、以及能够对属于各个所述图像数据组的多个图像数据实施与所述第1合成处理相同的合成处理而生成hdr静态图像数据的拍摄模式中的任意一方。

附图说明

图1是示出本发明的一个实施方式的摄像装置的一例的结构的框图。

图2a是示出本发明的一个实施方式的摄像装置的主处理的流程图。

图2b是示出本发明的一个实施方式的摄像装置的主处理的流程图。

图3a是示出动作模式图标的显示例的图。

图3b是示出实时取景画面显示和拍摄模式图标的显示例的图。

图3c是示出设定画面的显示例的图。

图4是示出效果确认的处理的流程图。

图5a是示出图像数据的一览显示的例子的图。

图5b是示出比较显示的例子的图。

图5c是示出放大显示的例子的图。

图6是示出hdr合成处理的例子的图。

图7是示出伴有hdr静态图像记录的hdr动态图像拍摄的处理的时序图。

图8a是示出摄像装置用hdr动态图像文件的结构的图。

图8b是示出摄像装置用hdr静态图像文件的结构的图。

图9是示出将hdr动态图像数据和hdr静态图像数据记录在一个文件中的情况下的hdr动态图像文件的结构的图。

图10a是示出其他处理的流程图。

图10b是示出其他处理的流程图。

图11是示出外部显示设备中的图像的再现例的图。

具体实施方式

下面,参照附图对本发明的实施方式进行说明。图1是示出本发明的一个实施方式的摄像装置的一例的结构的框图。图1所示的摄像装置100例如是数字照相机、智能手机、带照相机功能的便携电话机这样的具有摄像功能的各种设备。图1所示的摄像装置100具有摄像部102、存储部104、图像处理部106、再现部108、显示部110、记录部112、通信部114、操作部116、控制部118、麦克风120。这里,摄像装置100的各块例如由硬件和软件的组合构成。摄像装置100的各块也可以不由单一的硬件或软件构成,也可以由多个硬件或多个软件构成。

摄像部102具有摄像光学系统102a、摄像元件102b、驱动部102c。摄像光学系统102a具有光圈和透镜等,使来自未图示的被摄体的光束入射到摄像元件102b。并且,摄像光学系统102a包含用于调节合焦状态的对焦透镜。摄像元件102b例如包含cmos图像传感器或ccd图像传感器,对对象物进行摄像,取得对象物的图像数据(raw数据)。摄像元件102b也可以包含相位差检测像素,以使得能够进行与拍摄的对象物之间的距离检测。并且,本实施方式中的摄像元件102b也可以构成为能够在与摄像光学系统102a的光轴正交的平面内移动。驱动部102c根据控制部118的控制,在其光轴方向上驱动摄像光学系统102a的对焦透镜,并且驱动摄像元件102b。

存储部104例如是dram,暂时存储由摄像部102取得的图像数据。

图像处理部106对由摄像部102取得并存储在存储部104中的图像数据实施图像处理。图像处理部106具有第1图像处理部106a、第2图像处理部106b、记录处理部106c。

第1图像处理部106a对存储部104中存储的图像数据实施与动态图像数据的生成有关的图像处理。这里,本实施方式中的动态图像数据包含通常动态图像数据、摄像装置用hdr动态图像数据和电视用hdr动态图像数据。通常动态图像数据是将由摄像部102取得的多个图像数据分别作为动态图像帧的动态图像数据,是具有与显示部110的显示灰度数相同的灰度数(例如8比特的灰度数)的动态图像数据。这里的灰度数表示图像数据由多少比特的数据构成。例如8比特的灰度数能够表现256灰度的明亮度。摄像装置用hdr动态图像数据是将通过对由摄像部102取得的曝光条件不同的多个图像数据进行合成而构成的合成图像数据分别作为动态图像帧的动态范围较宽的动态图像数据,并且是具有与显示部110的显示灰度数相同的灰度数(例如8比特的灰度数)的动态图像数据。电视用hdr动态图像数据是将通过对由摄像部102取得的曝光条件不同的多个图像数据进行合成而构成的合成图像数据分别作为动态图像帧的动态范围较宽的动态图像数据,并且是具有与能够进行hdr显示的电视200的显示灰度数相同的灰度数(例如10比特的灰度数)的动态图像数据。当然,在将图像收敛于特定数据量的拍摄和能够根据需要增大明亮度变化的显示中,该灰度的考虑方法不同,但是,都是与通常相比增加明亮度的信息量这样的意思,这里,为了简化而统一表现。为了生成通常动态图像数据,第1图像处理部106a实施白平衡校正处理、灰度转换、颜色校正这样的用于生成动态图像数据所需要的基本图像处理。另一方面,为了生成hdr动态图像数据,第1图像处理部106a实施第1合成处理,该第1合成处理包含白平衡校正处理、灰度转换、颜色校正这样的用于生成动态图像数据所需要的基本图像处理,以及通过对曝光条件不同的多个图像数据进行合成而实现的动态范围或信息量的放大处理。由于要求平滑性,所以,需要进行能够在各个帧中逐次自适应的高速处理。

第2图像处理部106b对存储部104中存储的图像数据实施与静态图像数据的生成有关的图像处理。这里,本实施方式中的静态图像数据包含通常静态图像数据、摄像装置用hdr静态图像数据和电视用hdr静态图像数据。通常静态图像数据是根据由摄像部102取得的一个图像数据生成的静态图像数据,并且是具有与显示部110的显示灰度数相同的灰度数(例如8比特的灰度数)的静态图像数据。摄像装置用hdr静态图像数据是通过对由摄像部102取得的曝光条件不同的多个图像数据进行合成而构成的动态范围较宽的静态图像数据,并且是具有与显示部110的显示灰度数相同的灰度数(例如8比特的灰度数)的静态图像数据。这里,简单写作灰度数,但是,存在与显示系统的特性对应的调整,所以,灰度不一定严格相同。灰度数只要是与显示系统的动态范围相应的数据量即可。电视用hdr静态图像数据是通过对由摄像部102取得的曝光条件不同的多个图像数据进行合成而构成的动态范围较宽的静态图像数据,并且是具有与能够进行hdr显示的电视200的显示灰度数相同的灰度数(例如10比特的灰度数)的静态图像数据。为了生成通常静态图像数据,第2图像处理部106b实施白平衡校正处理、灰度转换、颜色校正这样的用于生成静态图像数据所需要的基本图像处理。另一方面,为了生成hdr静态图像数据,第2图像处理部106b实施白平衡校正处理、灰度转换、颜色校正这样的用于生成静态图像数据所需要的基本图像处理,以及通过对曝光条件不同的多个图像数据进行合成而实现的动态范围的放大处理。并且,在静态图像中,如绘画那样鉴赏到各个角落,所以,也可以伴有根据位置进行优化的自适应处理。并且,也可以进行在打印时成为最优的校正。这些处理仅对应于有限的帧,所以,可以是花费时间的处理。特别是在hdr动态图像拍摄中记录hdr静态图像时,第2图像处理部106b进行与第1合成处理不同的第2合成处理。例如,作为第2合成处理,第2图像处理部106b与合成处理一并进行使对曝光条件不同的多个图像数据进行合成时的合成比率与hdr动态图像的合成时不同、对合成前或合成后的图像数据的对比度进行强调、对彩度进行强调、或组合这些处理而赋予特定的视觉效果这样的处理。通过这种第2合成处理,能够生成图像表现与hdr动态图像不同的hdr静态图像。在动态图像中,如果在图像中存在准确的运动,则大多不会留意细部的灰度,多数情况下,直接快速且平滑地再现所看到的部分即可。另一方面,在静态图像中,要求成为好像绘画那样能够经受鉴赏到各个角落的作品。因此,在静态图像的情况下,与动态图像不同,需要成为适合于静态图像的表现的hdr图像。特别地,关于动态图像,在状况时时刻刻变化的过程中,基于平滑的响应、转变的图像处理的帧表现是优选的,但是,关于该响应、转变中拍摄的静态图像,与前后帧无关,需要仅其自身也成为合适的表现。如果假设这种状况,则成为与hdr动态图像不同的表现的hdr静态图像当然是很重要的。将合成前的图像保持原样,通过改变合成而能够使表现适合于静态图像。并且,在静态图像中,还存在打印的用途,但是,成为与打印机的特性对应的特性等也是很重要的,还能够应对这样的需求。

记录处理部106c进行用于根据由第1图像处理部106a或第2图像处理部106b生成的图像数据生成记录用的图像文件的处理。例如,记录处理部106c以h.264方式等规定的动态图像压缩方式对动态图像数据进行压缩,对压缩后的动态图像数据赋予规定的标签信息,生成动态图像文件。并且,例如,记录处理部106c以jpeg方式等规定的静态图像压缩方式对静态图像数据进行压缩,对压缩后的静态图像数据赋予规定的标签信息,生成静态图像文件。这里,在动态图像拍摄中生成静态图像文件时,记录处理部106c进行用于将静态图像文件和动态图像文件关联起来的处理。

例如,记录处理部106c记录用于将静态图像文件和动态图像文件关联起来的信息(例如相关联的文件的文件名)作为标签信息。并且,在根据hdr动态图像拍摄中生成的hdr静态图像数据生成静态图像文件时,记录处理部106c以raw形式记录合成hdr静态图像数据所使用的图像数据。通过记录这种raw数据,能够在此后的编辑中生成图像表现与已经记录的hdr静态图像数据不同的hdr静态图像数据。由此,通过适合于场景或对象物的阴影、对比度、颜色再现,能够得到成为好像绘画那样能够经受鉴赏到各个角落的作品的静态图像。特别地,关于动态图像,在状况时时刻刻变化的过程中,基于平滑的响应、转变的图像处理的帧表现是优选的。另一方面,关于动态图像的拍摄中得到的静态图像,与前后帧无关,需要仅其自身也成为合适的表现。如果假设这种状况,这种编辑当然是重要的。并且,通过关联标签等,能够一边鉴赏动态图像一边进行静态图像的检索等。

再现部108进行用于再现由图像处理部106生成的图像数据的处理。再现部108具有第1再现处理部108a、第2再现处理部108b。

第1再现处理部108a进行用于利用显示部110或电视200再现动态图像数据的处理。例如,第1再现处理部108a将由第1图像处理部106a生成的动态图像数据输入到显示部110,进行显示部110中的图像的显示。并且,第1再现处理部108a经由通信部114向电视200发送由第1图像处理部106a生成的动态图像数据,由此进行电视200中的图像的显示。在图像数据被压缩时,第1再现处理部108a还对被压缩的图像数据进行解压缩。

第2再现处理部108b进行用于利用显示部110或电视200再现静态图像数据的处理。例如,第2再现处理部108b将由第2图像处理部106b生成的静态图像数据输入到显示部110,进行显示部110中的图像的显示。并且,第2再现处理部108b经由通信部114向电视200发送由第2图像处理部106b生成的静态图像数据,由此进行电视200中的图像的显示。在图像数据被压缩时,第2再现处理部108b还对被压缩的图像数据进行解压缩。

显示部110例如是液晶显示器或有机el显示器,显示基于从再现部108输入的图像数据的图像等各种图像。

记录部112例如由闪速rom构成。在记录部112中记录有由图像处理部106的记录处理部106c生成的图像文件。并且,也可以在记录部112中记录有摄像装置100的控制用的各种程序。

通信部114进行用于对摄像装置100与外部显示设备即电视200的通信进行中介的处理。通信部114例如通过hdmi(注册商标)对摄像装置100与电视200的通信进行中介。通信部114也可以通过wifi(注册商标)等无线通信对摄像装置100与电视200的通信进行中介。进而,通信部114也可以构成为还能够与外部显示设备以外的设备进行通信。

操作部116是用于供用户进行摄像装置100的操作的操作部件。操作部116例如包含释放按钮、动态图像按钮、设定按钮、选择键、电源按钮、触摸面板等。释放按钮是用于进行静态图像拍摄的指示的操作部件。动态图像按钮是用于指示动态图像拍摄的开始或结束的操作部件。设定按钮是用于显示摄像装置100的设定画面的操作部件。选择键例如是用于进行设定画面上的项目的选择和决定的操作部件。电源按钮是用于接通或断开摄像装置100的电源的操作部件。触摸面板与显示部110的显示画面一体设置,检测用户在显示画面上的触摸操作。也可以构成为能够通过触摸面板进行与所述释放按钮、动态图像按钮、设定按钮、选择键、电源按钮相同的操作。进而,操作部116也可以具有所述操作部件以外的其他操作部件。

控制部118是cpu和asic等控制电路,对摄像装置100的动作进行总括控制。与控制部118相同的功能可以通过软件来实现,也可以通过硬件和软件的组合来实现。并且,控制部118的一部分功能也可以与控制部118分开设置。

麦克风120将所输入的声音转换为电信号并取得。

外部显示设备即电视200例如显示电视影像。并且,电视200根据从通信部114转送的图像数据显示图像。这里,电视200构成为能够进行hdr显示。电视200中的hdr显示的方式不限于特定方式。

接着,对本实施方式的摄像装置的动作进行说明。图2a和图2b是示出本实施方式的摄像装置的主处理的流程图。控制部118作为主体来进行图2a和图2b的处理。

在电源接通时,图2a和图2b的处理开始。在步骤s1中,控制部118对再现部108进行指示,以使显示部110显示用于供用户选择摄像装置100的动作模式的动作模式图标。接受该指示,再现部108例如显示图3a所示的拍摄图标301、再现图标302、通信图标303。拍摄图标301是用于供用户进行将摄像装置100的动作模式切换为拍摄模式的指示的图标。再现图标302是用于供用户进行将摄像装置100的动作模式切换为再现模式的指示的图标。通信图标303是用于供用户进行将摄像装置100的动作模式切换为通信模式的指示的图标。另外,也可以显示拍摄图标301、再现图标302、通信图标303以外的与动作模式对应的图标。并且,也可以不进行图3a所示的图标显示。该情况下,例如在电源接通时,摄像装置100可以成为电源断开紧前的动作模式,也可以成为拍摄模式、再现模式、通信模式中的预定的动作模式。

在步骤s2中,控制部118判定当前的动作模式是否是拍摄模式。即,通过判定用户选择了哪个图标,控制部118判定当前的动作模式是否是拍摄模式。在步骤s2中判定为摄像装置100的动作模式是拍摄模式时,处理转移到步骤s3。在步骤s2中判定为摄像装置100的动作模式不是拍摄模式时,处理转移到步骤s24。

在步骤s3中,控制部118进行基于摄像部102的摄像,取得图像数据,以进行实时取景画面显示。在步骤s4中,控制部118进行实时取景画面显示。作为实时取景画面显示,控制部118执行基于图像处理部106的信号处理。接受该指示,图像处理部106对摄像部102中取得并存储在存储部104中的图像数据实施实时取景画面显示所需要的图像处理(白平衡校正、灰度转换、颜色校正等),生成实时取景画面数据。在生成实时取景画面数据后,如图3b所示,再现部108使显示部110逐次显示基于所生成的实时取景画面数据的实时取景画面304。并且,再现部108例如在与实时取景画面304的显示区域不同的显示区域内显示例如图3b所示的设定图标305、动态图像拍摄图标306、静态图像拍摄图标307、返回图标308。设定图标305是用于供用户进行设定指示的图标。动态图像拍摄图标306是用于供用户进行动态图像拍摄开始和结束指示图标。静态图像拍摄图标307是用于供用户进行静态图像拍摄指示的图标。返回图标308是用于供用户进行拍摄模式的结束指示的图标。这些拍摄模式用的图标也可以与实时取景画面304重叠进行显示。并且,也可以显示设定图标305、动态图像拍摄图标306、静态图像拍摄图标307、返回图标308以外的图标作为拍摄模式用的图标。

在步骤s5中,控制部118判定用户是否进行了针对摄像装置100的设定指示。例如,在用户选择了设定图标305或操作了设定按钮时,判定为进行了设定指示。在步骤s5中判定为进行了设定指示时,处理转移到步骤s6。在步骤s5中判定为未进行设定指示时,处理转移到步骤s7。

在步骤s6中,控制部118对再现部108进行指示,以使得显示设定画面。接受该指示,再现部108使显示部110显示例如图3c所示的设定画面。在显示设定画面后,控制部118根据设定画面上的用户操作,对各种设定进行变更。在设定画面上的设定结束后,处理转移到步骤s7。在图3c的例子中,在设定画面上显示拍摄设定图标309、hdr设定图标310、返回图标311。拍摄设定图标309是用于供用户进行拍摄时的各种设定的图标。通过选择拍摄设定图标309,用户能够进行拍摄时的曝光条件的设定(快门速度和光圈的设定)、拍摄时的记录画质的设定等。并且,hdr设定图标310是用于供用户进行与hdr记录模式有关的各种设定的图标。通过选择hdr设定图标310,用户能够进行用于进行hdr记录模式的打开/关闭的设定、动态图像拍摄中的hdr静态图像的记录定时的设定、与hdr静态图像的合成处理有关的设定的效果确认。并且,返回图标311是用于供用户指示设定画面的显示结束的图标。

下面,对效果确认进行说明。图4是示出效果确认的处理的流程图。在效果确认中,用户能够一边实际确认hdr静态图像,一边进行与动态图像拍摄中生成的hdr静态图像数据有关的各种设定。并且,静态图像还存在打印的用途,成为与打印机的特性对应的特性等也是很重要的,还能够应对这种需求。

在步骤s101中,控制部118取得效果确认用的图像数据。在拍摄模式中的效果确认中,控制部118对摄像部102进行控制,以取得由曝光条件不同的多个图像数据构成的图像数据组。在效果确认处理的执行紧后的步骤s101的处理中,摄像次数和各个图像数据的曝光差是固定值。例如,摄像次数为3次,进行正常曝光的条件(例如设被摄体的曝光量为适当曝光量的曝光条件)下的摄像、曝光过度的条件(设被摄体的曝光量为比适当曝光量大的曝光量的曝光条件)下的摄像、曝光不足的条件(设被摄体的曝光量为比适当曝光量小的曝光量的曝光条件)下的摄像。正常曝光、曝光过度、曝光不足的曝光差例如设为1段。

在步骤s102中,控制部118对再现部108进行控制,以使显示部110显示所取得的图像数据的一览。接受该指示,例如如图5a所示,再现部108使显示部110显示图像数据的缩小图像401、402、403。然后,处理转移到步骤s103。这里,缩小图像401是通过正常曝光的条件下的摄像而得到的图像数据的缩小图像,缩小图像402是通过曝光过度的条件下的摄像而得到的图像数据的缩小图像,缩小图像403是通过曝光不足的条件下的摄像而得到的图像数据的缩小图像。进而,再现部108例如显示调整图标404、hdr效果确认图标405、返回图标406。调整图标404是用于供用户进行hdr合成处理的调整的图标。hdr效果确认图标405是用于供用户确认hdr合成处理的结果的图标。返回图标406是用于供用户指示效果确认处理的结束的图标。

在步骤s103中,控制部118判定是否进行调整。例如,在用户选择了调整图标404时,判定为进行调整。在步骤s103中判定为进行调整时,处理转移到步骤s104。在步骤s103中判定为不进行调整时,处理转移到步骤s105。

在步骤s104中,控制部118根据用户的操作进行与效果确认中的hdr合成处理有关的调整。在该调整中,用户能够调整效果确认中进行的hdr合成处理所使用的图像数据的张数、图像数据的曝光差等。在调整结束后,处理返回步骤s101。这里,在hdr合成处理所使用的图像数据的张数大于3张的情况、以及存在图像数据的曝光差的变更的情况等由于调整而需要再次取得图像数据时,在步骤s101中进行图像数据的再次取得,步骤s102中的显示被更新。并且,也可以在此后的hdr动态图像拍摄时反映hdr合成处理所使用的图像数据的张数和图像数据的曝光差这样的调整的内容。

在步骤s105中,控制部118判定用户是否选择了hdr合成处理用的图像数据。例如,在进行图5a所示的显示时,用户通过触摸缩小图像401、402、403,能够选择hdr合成处理用的图像数据。在步骤s105中,在用户选择了hdr合成处理所需要的张数的图像数据时,判定为用户选择了hdr合成处理用的图像数据。在步骤s105中判定为用户选择了hdr合成处理用的图像数据时,处理转移到步骤s106。在步骤s105中判定为用户未选择hdr合成处理用的图像数据时,处理转移到步骤s107。

在步骤s106中,控制部118判定是否进行效果确认。例如,在用户选择了hdr效果确认图标405时,判定为进行效果确认。在步骤s106中判定为不进行效果确认时,处理转移到步骤s107。在步骤s106中判定为进行效果确认时,处理转移到步骤s108。

在步骤s107中,控制部118判定用户是否进行了返回指示。例如,在用户选择了返回图标406时,判定为进行了返回指示。在步骤s107中判定为用户未进行返回指示时,处理返回步骤s101。在步骤s107中判定为用户进行了返回指示时,图4的处理结束。

在步骤s108中,控制部118使图像处理部106的第2图像处理部106b执行第2合成处理。接受该指示,第2图像处理部106b对用户选择出的图像数据进行合成,生成hdr静态图像数据。

在步骤s109中,控制部118对再现部108进行控制,以使得进行比较显示。接受该指示,例如如图5b所示,再现部108使显示部110一览显示hdr合成处理所使用的图像数据的缩小图像407、408、以及作为hdr合成处理的结果而得到的图像数据的缩小图像409。进而,再现部108例如显示反映图标410、返回图标411。然后,处理转移到步骤s110。这里,反映图标410是用于供用户进行在此后的拍摄时反映hdr合成处理的结果的指示的图标。返回图标411是用于供用户进行针对图5a的画面的返回指示的图标。

在hdr合成处理中,通过对曝光条件不同的图像数据进行合成,能够取得动态范围较宽的图像数据。根据此时的图像数据的选择方法和合成比率的设定方法,合成后的图像数据的完成情况变化。

示出对图6所示的正常曝光的图像数据501、曝光过度的图像数据502、曝光不足的图像数据503中的2张图像数据进行合成的例子。例如,在使用曝光过度的图像数据502和曝光不足的图像数据503的hdr合成处理中,第2图像处理部106b进行如下的合成处理:关于曝光过度的图像数据502中饱和的天空的部分,将曝光不足的图像数据503的合成比率设定为较高,关于曝光不足的图像数据503中涂黑的树的部分,将曝光过度的图像数据502的合成比率设定为较高。通过这种合成处理,生成动态范围在高亮度侧和低亮度侧扩宽的hdr静态图像数据504。在hdr静态图像数据504中,能够同时再现高亮度部即天空的部分和低亮度部即树的部分双方的颜色。但是,中间灰度亮度部即山的部分的颜色再现与正常曝光的图像数据中的山的部分的颜色再现不同。

并且,在使用正常曝光的图像数据501和曝光不足的图像数据503的hdr合成处理中,第2图像处理部106b进行如下的合成处理:关于曝光不足的图像数据503中涂黑的山的部分和树的部分,将正常曝光的图像数据501的合成比率设定为较高,关于正常曝光的图像数据501中泛白的天空的部分,将曝光不足的图像数据503的合成比率设定为较高。通过这种合成处理,生成动态范围在高亮度侧扩宽的hdr静态图像数据505。在hdr静态图像数据505中,能够再现高亮度部即天空的部分和中间亮度部即山的部分这样的比较明亮的部分的颜色。但是,低灰度部即树的部分涂黑。

并且,在使用正常曝光的图像数据501和曝光过度的图像数据502的hdr合成处理中,第2图像处理部106b进行如下的合成处理:关于正常曝光的图像数据501中涂黑的树的部分,将曝光过度的图像数据502的合成比率设定为较高,关于曝光过度的图像数据502中泛白的山的部分,将正常曝光的图像数据501的合成比率设定为较高。通过这种合成处理,生成动态范围在低亮度侧扩宽的hdr静态图像数据506。在hdr静态图像数据506中,能够再现低亮度部即树的部分和中间亮度部即山的部分这样的比较暗的部分的颜色。但是,高亮度部即天空的部分泛白,而未再现蓝天。

这样,在hdr合成处理中,根据图像数据的选择方法,合成后的图像数据的完成情况变化。进而,通过改变合成比率,合成后的图像数据的完成情况也变化。通过在效果确认中进行图5b这样的比较显示,用户能够一边比较hdr合成处理前后的图像,一边进行针对hdr静态图像的合成处理的设定。

这里,返回图4的说明。在步骤s110中,控制部118判定用户是否选择了某个缩小图像。在步骤s110中判定为用户选择了某个缩小图像时,处理转移到步骤s111。在步骤s110中判定为用户未选择某个缩小图像时,处理转移到步骤s115。

在步骤s111中,控制部118对再现部108进行指示,以使得放大显示所选择出的缩小图像。接受该指示,如图5c所示,再现部108放大与所选择出的缩小图像对应的图像数据的放大图像,使显示部110进行显示。例如,图5c示出缩小图像409的放大图像409a的显示例。进而,再现部108例如显示校正图标412、返回图标413。然后,处理转移到步骤s112。这里,校正图标412是用于供用户指示针对hdr合成处理结果的校正的图标。返回图标413是用于供用户进行针对图5b的画面的返回指示的图标。

在步骤s112中,控制部118判定是否进行校正。例如,在用户选择了校正图标412时,判定为进行校正。在步骤s112中判定为不进行校正时,处理转移到步骤s113。在步骤s112中判定为进行校正时,处理转移到步骤s114。

在步骤s113中,控制部118判定用户是否进行了返回指示。例如,在用户选择了返回图标413时,判定为进行了返回指示。在步骤s113中判定为用户未进行返回指示时,处理返回步骤s111。该情况下,继续进行放大显示。在步骤s113中判定为用户进行了返回指示时,处理返回步骤s108。该情况下,返回图5b的显示。另外,在选择返回图标413之前进行了步骤s114中说明的校正时,在图5b的显示时还反映校正的内容。

在步骤s114中,控制部118使第2图像处理部106b执行与用户操作对应的校正。这里的校正包含选择出的图像数据的对比度强调、彩度强调、基于它们的组合的特殊效果的赋予、hdr合成处理所使用的图像数据的合成比率的变更等。通过这种校正,能够使hdr静态图像数据的完成情况与hdr动态图像数据的完成情况不同。在本实施方式中,能够进行针对合成前的各个图像数据的校正和针对合成后的图像数据的校正双方。在校正结束后,处理返回步骤s111。在进行了校正时,在步骤s111中再次进行合成处理,显示被更新。

在步骤s115中,控制部118判定是否反映校正的内容。例如,在用户选择了反映图标410时,判定为反映校正的内容。在步骤s115中判定为不反映校正的内容时,处理转移到步骤s116。在步骤s115中判定为反映校正的内容时,处理转移到步骤s117。

在步骤s116中,控制部118判定用户是否进行了返回指示。例如,在用户选择了返回图标411时,判定为进行了返回指示。在步骤s116中判定为用户未进行返回指示时,处理返回步骤s108。在步骤s116中判定为用户进行了返回指示时,处理返回步骤s101。该情况下,根据需要进行图像数据的再次取得。

在步骤s117中,控制部118例如使存储部104存储校正的内容。然后,结束图4的处理。在此后的hdr动态图像拍摄中的hdr静态图像的记录时反映这里存储的校正的内容。

这里,返回图2a和图2b的说明。在步骤s7中,控制部118判定是否指示了动态图像拍摄的开始。例如,在用户选择了动态图像拍摄图标306时或操作了动态图像按钮时,判定为指示了动态图像拍摄的开始。在步骤s7中判定为指示了动态图像拍摄的开始时,处理转移到步骤s8。在步骤s7中判定为未指示动态图像拍摄的开始时,处理转移到步骤s20。

在步骤s8中,控制部118判定hdr记录模式是否打开(on)。在步骤s8中判定为hdr记录模式打开时,处理转移到步骤s9。在步骤s8中判定为hdr记录模式未打开时,处理转移到步骤s15。这里,简单地利用hdr记录打开、关闭进行记载。该情况下,具有能够总括地设定动态图像hdr和静态图像hdr这样的优点,作为设定,用户不容易混乱。当然,也可以在静态图像和动态图像中分别设定hdr模式。并且,该静态图像和动态图像的hdr处理可以相同。即,这里,重点说明如下的摄像装置的技术,其特征在于,该摄像装置具有:摄像部,其依次取得用于生成hdr动态图像帧的由曝光条件不同的多个图像数据构成的图像数据组;第1图像处理部,其对属于各个图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据;以及模式,其能够对属于各个图像数据组的多个图像数据实施与第1合成处理不同的第2合成处理,生成hdr静态图像数据,但是,图2b设为能够总括地进行该hdr设定的流程进行说明。

在步骤s9中,控制部118进行hdr动态图像拍摄。即,控制部118一边变更曝光条件(例如曝光时间)一边执行摄像部102的摄像,以使得能够生成hdr动态图像帧。然后,控制部118对图像处理部106进行指示,以使得在存储部104中存储了生成hdr动态图像帧所需要的图像数据的定时生成hdr动态图像帧。接受该指示,图像处理部106的第1图像处理部106a对伴随hdr动态图像拍摄而存储在存储部104中的多个图像数据进行合成,使得灰度数成为显示部110的显示灰度数(例如8比特),生成摄像装置用hdr动态图像帧,并且,对伴随hdr动态图像拍摄而存储在存储部104中的多个图像数据进行合成,使得成为电视200的显示灰度数(例如10比特),生成电视用hdr动态图像帧。然后,处理转移到步骤s10。

在步骤s10中,控制部118判定是否指示了动态图像拍摄的结束。例如,在用户再次选择了动态图像拍摄图标306时或再次操作了动态图像按钮时,判定为指示了动态图像拍摄的结束。在步骤s10中判定为未指示动态图像拍摄的结束时,处理转移到步骤s11。在步骤s10中判定为指示了动态图像拍摄的结束时,处理转移到步骤s14。

在步骤s11中,控制部118判定是否进行hdr静态图像记录。根据步骤s6中进行的设定来判定是否进行hdr静态图像记录。作为步骤s6中由用户设定的动态图像拍摄中的hdr静态图像的记录定时,例如考虑仅用户进行了静态图像记录的指示的定时、始终(与生成hdr动态图像帧同时)这样的各种定时。在步骤s11中判定为进行hdr静态图像记录时,处理转移到步骤s12。在步骤s11中判定为不进行hdr静态图像记录时,处理返回步骤s9。

在步骤s12中,控制部118对图像处理部106指示摄像装置用hdr静态图像文件的生成。接受该指示,图像处理部106的第2图像处理部106b对伴随hdr动态图像拍摄而存储在存储部104中的多个图像数据进行合成,使得灰度数成为显示部110的显示灰度数(例如8比特),生成摄像装置用hdr静态图像数据。然后,记录处理部106c根据摄像装置用hdr静态图像数据生成摄像装置用hdr静态图像文件,将所生成的摄像装置用hdr静态图像文件记录在记录部112中。然后,处理转移到步骤s13。

在步骤s13中,控制部118对图像处理部106指示电视用hdr静态图像文件的生成。接受该指示,图像处理部106的第2图像处理部106b对伴随hdr动态图像拍摄而存储在存储部104中的多个图像数据进行合成,使得成为电视200的显示灰度数(例如10比特),生成电视用hdr静态图像数据。然后,记录处理部106c根据电视用hdr静态图像数据生成hdr静态图像文件,将所生成的电视用hdr静态图像文件记录在记录部112中。然后,处理返回步骤s9。

在步骤s14中,控制部118对图像处理部106指示hdr动态图像文件的生成。接受该指示,图像处理部106的记录处理部106c根据hdr动态图像拍摄中存储在存储部104中的摄像装置用hdr动态图像帧生成摄像装置用hdr动态图像文件,并且根据hdr动态图像拍摄中存储在存储部104中的电视用hdr动态图像帧生成电视用hdr动态图像文件,将所生成的摄像装置用hdr动态图像文件和电视用hdr动态图像文件记录在记录部112中。然后,处理返回步骤s3。

下面,对伴有hdr静态图像记录的hdr动态图像拍摄的处理进行说明。图7是示出伴有hdr静态图像记录的hdr动态图像拍摄的处理的时序图。

在hdr动态图像拍摄开始后,控制部118对摄像部102进行控制,使得以规定的摄像率(例如60fps)依次生成用于生成hdr动态图像帧的由曝光条件不同的多个图像数据构成的图像数据组。作为图像数据组中包含的图像数据的数量和曝光差,如果存在效果确认中由用户设定的值,则控制部118使用该值,如果不存在由用户设定的值,则控制部118使用预定值(例如1段)。在图7中,预先设定为在hdr动态图像帧的生成中使用曝光过度的图像数据和曝光不足的图像数据这2张图像数据。该情况下,控制部118对摄像部102进行控制,以使得以规定的摄像率反复进行曝光过度的条件下的摄像和曝光不足的条件下的摄像。

在hdr动态图像拍摄开始后,每当进行基于摄像部102的2次摄像时,控制部118对图像处理部106指示hdr动态图像帧的生成。接受该指示,图像处理部106的第1图像处理部106a对存储部104中存储的2张图像数据实施第1合成处理,生成hdr动态图像帧(摄像装置用hdr动态图像帧和电视用hdr动态图像帧)。在第1合成处理中,不使用作为效果确认结果而存储在存储部104中的校正内容。

在生成hdr动态图像帧后,记录处理部106c将所生成的hdr动态图像帧存储在例如存储部104中。并且,在hdr动态图像拍摄结束后,记录处理部106c根据所生成的hdr动态图像帧生成hdr动态图像文件(摄像装置用hdr动态图像文件和电视用hdr动态图像文件),将所生成的hdr动态图像文件记录在例如记录部112中。这里,在图7的例子中,每当进行基于摄像部102的2次摄像时,记录hdr动态图像帧。因此,在再现hdr动态图像文件时,如图7所示,在2帧的显示期间中再现相同的hdr动态图像帧。

图8a是示出hdr动态图像文件的结构的图。如图8a所示,hdr动态图像文件601具有hdr动态图像数据602、标签信息603。

hdr动态图像数据602是由被压缩的hdr动态图像帧602a构成的数据。如果是摄像装置用hdr动态图像文件,则hdr动态图像数据602是被压缩的摄像装置用hdr动态图像数据,如果是电视用hdr动态图像文件,则hdr动态图像数据602是被压缩的电视用hdr动态图像数据。

标签信息603具有hdr动态图像文件601的文件名等文件信息。并且,标签信息603具有关联信息603a,该关联信息603a包含用于确定与各个hdr动态图像帧相关联的hdr静态图像文件的信息(例如文件名)和用于确定与hdr动态图像文件601相关联的hdr动态图像文件的信息(例如文件名)。如果是摄像装置用hdr动态图像文件,则关联信息603a包含用于确定相关联的摄像装置用hdr静态图像文件的信息和用于确定相关联的电视用hdr动态图像文件的信息。如果是电视用hdr动态图像文件,则关联信息603a包含用于确定相关联的电视用hdr静态图像文件的信息和用于确定相关联的摄像装置用hdr动态图像文件的信息。

在hdr动态图像拍摄中成为hdr静态图像记录的定时时,控制部118对图像处理部106指示hdr静态图像数据的生成。图7示出在hdr动态图像帧1的摄像的定时成为hdr静态图像记录的定时的例子。该情况下,第2图像处理部106b使用曝光过度的图像数据1和曝光不足的图像数据1生成hdr静态图像数据(摄像装置用hdr静态图像数据和电视用hdr静态图像数据)。这里,在第2合成处理中,反映作为效果确认结果而存储在存储部104中的校正内容。因此,hdr静态图像帧成为图像表现与hdr动态图像数据不同的图像数据。

在生成hdr静态图像数据后,记录处理部106c根据所生成的hdr静态图像数据生成hdr静态图像文件(摄像装置用hdr静态图像文件和电视用hdr静态图像文件)。在生成hdr静态图像文件后,记录处理部106c将所生成的hdr静态图像文件记录在记录部112中。

图8b是示出hdr静态图像文件的结构的图。如图8b所示,hdr静态图像文件604具有hdr静态图像数据605、raw数据606、标签信息607。这样,如果以raw或tiff等非压缩或可逆压缩的形式记录曝光条件不同的图像数据,则作为输入显示设备的特性和观看的人的喜好而能够反映该内容的合成方法,能够根据其每个再现状况进行考虑了设备的差异、观看的人的喜好和目的的合成。即,通过依次取得曝光条件不同的由多个图像数据构成的图像数据组的摄像部、以及对属于各个图像数据组的多个图像数据实施第1合成处理而生成由多个hdr动态图像帧构成的hdr动态图像数据的第1图像处理部,能够进行与动态图像对应的高速的图像合成,另一方面,能够对属于各个图像数据组的多个图像数据实施与第1合成处理不同的适合于静态图像表现的第2合成处理而生成hdr静态图像数据。并且,在静态图像中,还存在打印的用途,但是,根据需要,成为与打印机的特性对应的特性等也是很重要的,还能够应对这种需求。并且,也可以记录图7所示的曝光不同的raw数据或tiff数据作为文件,并且,还记录hdr静态图像1作为文件。

hdr静态图像数据605是被压缩的hdr静态图像数据。如果是摄像装置用hdr静态图像文件,则hdr静态图像数据605是被压缩的摄像装置用hdr静态图像数据,如果是电视用hdr静态图像文件,则hdr静态图像数据605是被压缩的电视用hdr静态图像数据。在电视用的情况下,没有声音则没有乐趣,所以,例如也可以将动态图像记录时得到的声音数据605a收纳在文件内。由此,即使利用电视等再现该文件,也与声音一起享受图像鉴赏。

raw数据606是以raw形式记录了生成hdr静态图像数据所使用的图像数据的数据。raw数据606在图像处理步骤中的自由度较高,在摄像装置用hdr静态图像文件和电视用hdr静态图像文件中,可以没有差异。

标签信息607具有hdr静态图像文件604的文件名等文件信息。并且,标签信息607具有关联信息607a,该关联信息607a包含用于确定相关联的hdr动态图像文件的信息(例如文件名)和用于访问raw数据606的raw数据606的位置信息(例如raw数据606的开始地址、从文件的开始地址到raw数据606的开始地址的数据量)。如果是摄像装置用hdr静态图像文件,则关联信息607a包含用于确定相关联的摄像装置用hdr动态图像文件的信息。如果是电视用hdr静态图像文件,则关联信息607a包含用于确定相关联的电视用hdr动态图像文件的信息。

这里,图8b示出在hdr静态图像文件604中记录raw数据606的例子。但是,raw数据606也可以记录在与摄像装置用hdr静态图像文件604不同的raw文件中。该情况下,在raw文件中也需要具有用于确定相关联的hdr动态图像文件和hdr静态图像文件的信息。

并且,在图8a和图8b所示的例子中,hdr动态图像数据和hdr静态图像数据记录在不同的文件中。与此相对,如图9所示,hdr动态图像数据和hdr静态图像数据也可以记录在一个文件中。图9的hdr动态图像文件701具有摄像装置用hdr动态图像数据702、电视用hdr动态图像数据703、摄像装置用hdr静态图像数据704、电视用hdr静态图像数据705、raw数据706、标签信息707。在标签信息707的关联信息707a中记录有用于访问文件内的各个数据的各个数据的位置信息(例如各个数据的开始地址、从文件的开始地址到各个数据的开始地址的数据量)。

这里,返回图2a和图2b的说明。在步骤s8中判定为hdr记录模式未接通时的步骤s15中,控制部118进行通常动态图像拍摄。即,控制部118执行基于摄像部102的摄像而不变更曝光条件。然后,控制部118对图像处理部106进行指示,以使得按照每次摄像生成动态图像帧。接受该指示,图像处理部106的第1图像处理部106a根据伴随通常动态图像拍摄而存储在存储部104中的图像数据生成通常动态图像帧。然后,处理转移到步骤s16。

在步骤s16中,控制部118判定是否指示了动态图像拍摄的结束。例如,在用户再次选择了动态图像拍摄图标306时或再次操作了动态图像按钮时,判定为指示了动态图像拍摄的结束。在步骤s16中判定为未指示动态图像拍摄的结束时,处理转移到步骤s17。在步骤s16中判定为指示了动态图像拍摄的结束时,处理转移到步骤s19。

在步骤s17中,控制部118判定是否进行通常静态图像记录。与hdr静态图像记录同样判定是否进行通常静态图像记录即可。在步骤s17中判定为进行通常静态图像记录时,处理转移到步骤s18。在步骤s17中判定为不进行通常静态图像记录时,处理返回步骤s15。

在步骤s18中,控制部118对图像处理部106指示通常静态图像文件的生成。接受该指示,图像处理部106的第2图像处理部106b根据伴随通常动态图像拍摄而存储在存储部104中的图像数据生成通常静态图像数据。然后,记录处理部106c根据通常静态图像数据生成通常静态图像文件,将所生成的通常静态图像文件记录在记录部112中。然后,处理返回步骤s15。通常静态图像文件与图8b所示的hdr静态图像文件的不同之处在于,所记录的静态图像数据是通常静态图像数据。

在步骤s19中,控制部118对图像处理部106指示通常动态图像文件的生成。接受该指示,图像处理部106的记录处理部106c根据通常动态图像拍摄中存储在存储部104中的动态图像帧生成通常动态图像文件,将所生成的通常动态图像文件记录在记录部112中。然后,处理返回步骤s3。通常静态图像文件与图8a所示的hdr动态图像文件的不同之处在于,所记录的动态图像数据是通常动态图像数据。

在步骤s7中判定为未指示动态图像拍摄的开始时的步骤s20中,控制部118判定是否指示了静态图像拍摄的开始。例如,在用户选择了静态图像拍摄图标307时或操作了释放按钮时,判定为指示了静态图像拍摄的开始。在步骤s20中判定为指示了静态图像拍摄的开始时,处理转移到步骤s21。在步骤s20中判定为未指示静态图像拍摄的开始时,处理转移到步骤s23。

在步骤s21中,控制部118进行通常静态图像拍摄。即,控制部118根据步骤s6中设定的曝光条件执行基于摄像部102的一次摄像。然后,处理转移到步骤s22。

在步骤s22中,控制部118对图像处理部106进行指示,以使得生成静态图像数据。接受该指示,图像处理部106的第2图像处理部106b根据通过通常静态图像拍摄而存储在存储部104中的图像数据,生成通常静态图像数据。在生成通常静态图像数据后,记录处理部106c将所生成的通常静态图像文件记录在记录部112中。然后,处理返回步骤s3。

在步骤s23中,控制部118判定用户是否进行了返回指示。例如,在用户选择了返回图标308时,判定为进行了返回指示。在步骤s23中判定为用户未进行返回指示时,处理返回步骤s3。在步骤s23中判定为用户进行了返回指示时,处理返回步骤s1。

在步骤s2中判定为动作模式不是拍摄模式时的步骤s24中,控制部118进行拍摄模式以外的其他处理。其他处理后,处理返回步骤s1。

图10a和图10b是示出其他处理的流程图。在步骤s201中,控制部118判定当前的动作模式是否是再现模式。在步骤s201中判定为摄像装置100的动作模式不是再现模式时,处理转移到步骤s20。在步骤s201中判定为摄像装置100的动作模式是再现模式时,处理转移到步骤s204。

在步骤s202中,控制部118判定当前的动作模式是否是通信模式。在步骤s202中判定为摄像装置100的动作模式是通信模式时,处理转移到步骤s203。在步骤s202中判定为摄像装置100的动作模式不是通信模式时,图10a和图10b的处理结束。该情况下,处理返回图2a的步骤s1。

在步骤s203中,控制部118进行通信模式的处理。在通信模式的处理中,控制部118对通信部114进行控制,例如进行向外部设备发送记录部112中记录的图像文件、或者接收外部设备中记录的图像文件这样的处理。在通信模式的处理后,图10a和图10b的处理结束。该情况下,处理返回图2a的步骤s1。

在步骤s204中,控制部118对再现部108进行控制,以显示记录部112中记录的图像文件的一览。接受该指示,再现部108例如使显示部110显示表示记录部112中记录的图像文件的一览的缩略图像。然后,处理转移到步骤s205。

在步骤s205中,控制部118判定用户是否从一览显示中选择了动态图像文件。在步骤s205中判定为用户选择了动态图像文件时,处理转移到步骤s206。在步骤s205中判定为用户未选择动态图像文件时,处理转移到步骤s216。

在步骤s206中,控制部118判定摄像装置100是否与外部显示设备(例如电视200)连接。在步骤s206中判定为摄像装置100与外部显示设备连接时,处理转移到步骤s207。在步骤s206中判定为摄像装置100未与外部显示设备连接时,处理转移到步骤s213。

在步骤s207中,控制部118对再现部108进行指示,以使得向外部显示设备发送与选择出的动态图像文件对应的动态图像帧。接受该指示,再现部108的第1再现处理部108a经由通信部114向外部显示设备即电视200发送动态图像帧。由此,在外部显示设备即电视200中,例如如图11所示,进行hdr动态图像的再现。另外,在电视用hdr动态图像文件与所选择出的动态图像文件相关联时,第1再现处理部108a也可以经由通信部114向外部显示设备即电视200发送电视用hdr动态图像帧。由此,进行与电视200的规格对应的hdr显示。进而,在电视200未对应于hdr显示时,第1再现处理部108a也可以经由通信部114向外部显示设备即电视200发送摄像装置用hdr动态图像帧。

在步骤s208中,控制部118判定是否是再现静态图像的定时。例如,在存在与再现中的动态图像帧相关联的静态图像数据(hdr静态图像数据或通常静态图像数据)时,判定为是再现静态图像的定时。在步骤s208中判定为是再现静态图像的定时时,处理转移到步骤s209。在步骤s208中判定为不是再现静态图像的定时时,处理转移到步骤s212。

在步骤s209中,控制部118判定hdr静态图像数据是否与再现中的动态图像帧相关联。在步骤s209中判定为hdr静态图像数据与再现中的动态图像帧相关联时,处理转移到步骤s210。在步骤s209中判定为hdr静态图像数据不与再现中的动态图像帧相关联时,处理转移到步骤s211。

在步骤s210中,控制部118对再现部108进行指示,以使得向外部显示设备发送与再现中的动态图像帧相关联的hdr静态图像数据。接受该指示,再现部108的第2再现处理部108b经由通信部114向外部显示设备即电视200发送hdr静态图像数据。由此,在外部显示设备即电视200中,再现hdr静态图像。hdr静态图像可以在动态图像帧的再现结束后进行再现,也可以在缩小后与再现中的动态图像帧重叠进行再现。另外,在电视用hdr动态图像文件与所选择出的动态图像文件相关联时,第2再现处理部108b也可以经由通信部114向外部显示设备即电视200发送电视用hdr静态图像数据。由此,进行与电视200的规格对应的hdr显示。进而,在电视200未对应于hdr显示时,第2再现处理部108b也可以经由通信部114向外部显示设备即电视200发送摄像装置用hdr静态图像数据。

在步骤s211中,控制部118对再现部108进行指示,以使得向外部显示设备发送与再现中的动态图像帧相关联的通常静态图像数据。接受该指示,再现部108的第2再现处理部108b经由通信部114向外部显示设备即电视200发送通常静态图像数据。由此,在外部显示设备即电视200中,再现通常静态图像。另外,通常静态图像可以在动态图像帧的再现结束后进行再现,也可以在缩小后与再现中的动态图像帧重叠地进行再现。

在步骤s212中,控制部118判定是否指示了动态图像再现的结束。例如,在选择了图11所示的返回图标801时,判定为指示了动态图像再现的结束。在步骤s212中判定为未指示动态图像再现的结束时,处理返回步骤s206。在步骤s212中判定为指示了动态图像再现的结束时,处理返回步骤s204。

在步骤s206中判定为摄像装置100未与外部显示设备连接时的步骤s213中,控制部118对再现部108进行指示,以使得在显示部110中显示与所选择出的动态图像文件对应的动态图像帧。接受该指示,再现部108的第1再现处理部108a使显示部110显示动态图像帧。另外,在摄像装置用hdr动态图像文件与所选择出的动态图像文件相关联时,第1再现处理部108a也可以使显示部110显示摄像装置用hdr动态图像帧。由此,进行与显示部110的规格对应的hdr显示。

在步骤s214中,控制部118判定是否是再现静态图像的定时。例如,在存在与再现中的动态图像帧相关联的静态图像数据时,判定为是再现静态图像的定时。在步骤s214中判定为是再现静态图像的定时时,处理转移到步骤s215。在步骤s214中判定为不是再现静态图像的定时时,处理转移到步骤s212。

在步骤s215中,控制部118对再现部108进行指示,以使显示部110显示与再现中的动态图像帧相关联的静态图像。接受该指示,再现部108的第2再现处理部108b使显示部110显示静态图像。由此,在显示部110中进行静态图像的再现。另外,在摄像装置用hdr静态图像文件与所选择出的动态图像文件相关联时,第2再现处理部108b也可以使显示部110显示摄像装置用hdr静态图像。由此,进行与显示部110的规格对应的hdr显示。

在步骤s205中判定为用户未选择动态图像文件时的步骤s216中,控制部118判定用户是否从一览显示中选择了静态图像文件。在步骤s216中判定为用户选择了静态图像文件时,处理转移到步骤s217。在步骤s216中判定为用户未选择静态图像文件时,处理转移到步骤s223。

在步骤s217中,控制部118判定摄像装置100是否与外部显示设备(例如电视200)连接。在步骤s217中判定为摄像装置100与外部显示设备连接时,处理转移到步骤s218。在步骤s217中判定为摄像装置100未与外部显示设备连接时,处理转移到步骤s219。

在步骤s218中,控制部118对再现部108进行指示,以使得向外部显示设备发送所选择出的静态图像文件中包含的静态图像数据(hdr静态图像数据或通常静态图像数据)。接受该指示,再现部108的第2再现处理部108b经由通信部114向外部显示设备即电视200发送静态图像数据。由此,在外部显示设备即电视200中进行静态图像的再现。

在步骤s219中,控制部118对再现部108进行指示,以使得在显示部110中再现所选择出的静态图像文件中包含的静态图像数据(hdr静态图像数据或通常静态图像数据)。接受该指示,再现部108的第2再现处理部108b使显示部110显示静态图像。

在步骤s220中,控制部118判定是否进行效果确认。例如,在raw数据与所选择出的静态图像文件相关联、并且在静态图像的再现中选择了显示部110中显示的hdr效果确认图标时,判定为进行效果确认。在步骤s220中判定为进行效果确认时,处理转移到步骤s221。在步骤s220中判定为不进行效果确认时,处理转移到步骤s222。

在步骤s221中,控制部118进行效果确认的处理。效果确认的处理与所述图4的处理大致相同。在拍摄模式中的效果确认中,通过摄像而取得效果确认用的图像数据。与此相对,在再现模式中的效果确认中,效果确认用的图像数据是与所选择出的静态图像文件相关联的raw数据。并且,在再现模式中的效果确认中,还能够使用与所选择出的静态图像文件相关联的raw数据以外的图像数据作为效果确认用的图像数据。即,在再现模式中的效果确认中,还能够使用不属于相同的图像数据组的图像数据作为效果确认用的图像数据。在效果确认结束后,处理转移到步骤s222。

在步骤s222中,控制部118判定是否指示了静态图像再现的结束。在步骤s222中判定为未指示静态图像再现的结束时,处理返回步骤s217。在步骤s222中判定为指示了静态图像再现的结束时,处理返回步骤s204。

在步骤s223中,控制部118判定是否结束再现模式的处理。例如,在用户在一览显示中进行了返回指示时,判定为结束再现模式的处理。在步骤s223中判定为不结束再现模式的处理时,处理返回步骤s204。在步骤s223中判定为结束再现模式的处理时,图10a和图10b的处理结束。

如以上说明的那样,在本实施方式中,在hdr动态图像拍摄中记录hdr静态图像时,通过与生成hdr动态图像帧不同的图像处理,生成hdr静态图像数据。由此,能够使在再现hdr动态图像的过程中再现的hdr静态图像的图像表现与hdr动态图像不同,由此,能够使hdr动态图像成为更有魅力的内容。

并且,在本实施方式中,以电视用和摄像装置用的方式分别生成hdr动态图像数据和hdr静态图像数据。由此,能够进行适合于摄像装置的显示部110的规格的显示和适合于电视200的规格的显示双方。这在显示部的特性不同的情况下,能够进行与各个特征一致的显示。并且,在静态图像中,还存在打印的用途,也能够应对成为与打印机的特性对应的特性的情况。

并且,在本实施方式中,在hdr动态图像拍摄中记录hdr静态图像时,以raw形式记录生成hdr静态图像所使用的图像数据。由此,能够在拍摄后生成具有不同效果的hdr静态图像。具有依次取得由曝光条件不同的多个图像数据构成的图像数据组,设置有第1图像处理部和记录部,该第1图像处理部对属于各个图像数据组的多个图像数据实施第1合成处理,生成由多个hdr动态图像帧构成的hdr动态图像数据,该记录部能够记录多个静态图像用图像数据,以使得能够对属于各个该图像数据组的多个图像数据实施与第1合成处理不同的第2合成处理并生成hdr静态图像数据,所以,不仅是与输出形式对应的表现,还能够进行与该输出设备的特征和利用者的期望对应的表现的图像显示。在静态图像的情况下,有时到各个角落确认显示,优选具有这样的自由度。并且,在静态图像中,还能够应对与打印机对应的图像处理。

以上根据实施方式说明了本发明,但是,本发明不限于上述实施方式。在本实施方式的技术中,hdr动态图像拍摄也可以置换为hdr实时取景画面显示。该情况下,对hdr实时取景画面显示中的用户指示的定时生成的hdr静态图像实施与hdr动态图像帧不同的例如对比度强调等,由此,能够提高用户期望的定时取得的静态图像的视觉辨认性。即,关于动态图像,在状况变化的过程中,基于平滑的响应、转变的图像处理的帧表现是优选的,但是,关于该响应、转变中拍摄的静态图像,与前后帧无关,需要仅其自身也成为合适的表现、视觉辨认性。如果假设这种状况,则改变动态图像和静态图像中都能够利用的多帧的合成方法、对视觉辨认性和图像表现进行变更当然是很重要的。作为输入显示设备的特性、打印设备的特性和观看的人的喜好就能够反映该内容的合成方法,能够进行考虑了设备的差异、观看的人的喜好和目的的合成。这种处理例如也能够应用于内窥镜装置、显微镜装置、监视装置这样的摄像装置。

并且,上述实施方式的各处理也可以作为能够由作为计算机的控制部118执行的程序进行存储。除此之外,可以存储在磁盘、光盘、半导体存储器等外部存储装置的记录介质中进行发布。而且,控制部118读入该外部存储装置的记录介质中存储的程序,通过该读入的程序对动作进行控制,由此能够执行上述处理。针对显示结果,能够通过手动操作或活体判定等输入好恶,根据其结果,能够进行学习了要使用的人的嗜好的应用。即,也可以利用与人工智能协作的控制。该情况下,即使不是基于步骤的程序,也能够得到同样的效果。

进而,在所述实施方式中包含各种阶段的发明,通过所公开的多个结构要件的适当组合,能够提取各种发明。例如,在即使从实施方式所示的全部结构要件中删除若干个结构要件也能够解决上述课题并得到上述效果的情况下,删除了该结构要件的结构也能够作为发明来提取。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1