摄像装置和显示方法

专利名称：摄像装置和显示方法
技术领域：
本发明涉及搭载了全景摄影功能的摄像装置及其显示方法。
背景技术：
在作为摄像装置的一例的数字照相机中，具有如下的照相机，作为 摄影功能，除了通常摄影功能以外还搭载了全景摄影功能。
图10是概念性地示出这种数字照相机中的通常摄影功能下的通常 摄影和全景摄影功能下的全景摄影的图。如该图所示，在通常摄影中， 当用户按下一次快门按钮(释放按钮)时，进行一次摄影，获得一张图
像ioi。另一方面，在全景摄影中，当用户按下一次快门按钮时，进行第
一次摄影，当进行摇摄操作时，自动进行多次第二次及以后的摄影。而
且，将各摄影所获得的图像(在该图的例子中为图像102 105)组合起 来制作一张全景图像106。根据这种全景摄影功能，用户不需要注意第二 次及以后的摄影的快门时机，能够方便地进行全景摄影。另外，在全景 摄影功能中，除此之外，也可以通过快门按钮手动进行第二次及以后的 摄影的快门时机，或者，可以设定手动进行或自动进行第二次及以后的 摄影的快门时机。
但是，专利文献1涉及用于组合图像的重叠技术，提出了如下方法 根据由三维陀螺仪等各种传感器测定的数字照相机摄影时的移动信息， 运算数字照相机摄影时的移动方向和移动距离，提取出相邻的被摄体帧， 来制作全景图像。并且，专利文献2涉及用于适当维持摄影视场角的辅
助线的显示技术，提出了如下方法使用显示在显示装置上的辅助线，
用户能够维持照相机的水平状态。进而，专利文献3涉及用于适当进行
摇摄操作的摇摄状态的显示技术，提出了如下方法在取景器等中显示
全景摄影时的摇摄状态，用户能够进行适当的摇摄操作。专利文献1日本特开2004-128683号公报专利文献2日本特开2006-324948号公报专利文献3日本特开平8-223481号公报
使用上述这种全景摄影功能进行摄影时，由于用户对数字照相机的 摇摄操作，在通过第二次及以后的摄影所获得的图像中表现的被摄体中 产生抖动(以下简称为"被摄体抖动")，有时无法获得用户满意的全景图 像。认为其原因是，在第二次及以后的摄影时，用户对数字照相机的摇 摄操作相对于数字照相机的摄影条件(例如快门速度等)提前。因此， 期望如下的技术至少在第二次及以后的各摄影时进行辅助，以使用户 能够以适当的速度且向适当的方向进行数字照相机的摇摄操作。
即使使用上述专利文献1或2提出的方法也无法实现这种技术。专 利文献1和2本来也不是作为防止由摇摄操作产生的被摄体抖动的技术 而提出的，完全没有公开其对策。另一方面，如果使用上述专利文献3 所提出的方法，也许能够适当进行摇摄操作，但是，因为不知道在什么 时机对构成全景图像的图像进行摄影，所以，用户必须始终以使摇摄指 示器位于基准指示器的中心的方式进行摇摄操作，使用便利性差。

发明内容
鉴于上述情况，本发明的目的在于，提供摄像装置及其显示方法， 通过对构成全景图像的图像的摄影时机进行辅助，以使用户以适当的速 度且向适当的方向进行摇摄操作，由此，使用便利性良好，而且能够获 得没有被摄体抖动的全景图像。
为了达成上述目的，本发明的第1方面的摄像装置一边使装置相对 于被摄体移动一边进行多张图像的摄像，其特征在于，该摄像装置具有 摄像单元，其对被摄体进行摄像并获得图像数据；显示单元，其显示由
所述摄像单元获得的图像数据所涉及的图像；移动量检测单元，其根据
在第1时刻由所述摄像单元获得的图像数据所涉及的第1图像和在所述
第1时刻之后的第2时刻由所述摄像单元获得的图像数据所涉及的第2 图像，检测所述第2图像中所表现的被摄体的位置相对于所述第1图像中所表现的被摄体的位置的移动量；以及显示控制单元，所述显示控制 单元使得与显示在所述显示单元上的图像一起在所述显示单元上显示由 所述移动量检测单元检测出的移动量作为移动轨迹。
并且，本发明的第2方面的摄像装置的特征在于，在上述第1方面
中，所述显示控制单元将从进行了静态图像的摄影的时刻到当前时刻的 期间由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位 置的时间变化作为移动轨迹来显示，该移动轨迹以进行所述静态图像的 摄影的时刻或者进行所述摄影指示的时刻为起点。
并且，本发明的第3方面的摄像装置的特征在于，在上述第1方面
中，当根据由所述移动量检测单元检测出的移动量，检测出距进行了静 态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的 图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画 面的相当量时，进行下次的静态图像的摄影。
并且，本发明的第4方面的摄像装置的特征在于，在上述第1方面 中，所述移动量检测单元根据在所述第1时刻由所述摄像单元获得的图 像数据和在所述第2时刻由所述摄像单元获得的图像数据，检测移动向 量，根据该移动向量，检测所述第2图像中所表现的被摄体位置相对于 所述第1图像中所表现的被摄体位置的移动量。
并且，本发明的第5方面的摄像装置的特征在于，在上述第1方面 中，所述显示单元将对所述摄像单元获得的多个静态图像用图像数据所 涉及的图像进行合成来生成一个合成图像时所允许的垂直方向的移动允 许幅度范围，与由所述摄像单元获得的图像数据所涉及的图像一起进行 显不。
并且，本发明的第6方面的摄像装置的特征在于，在上述第1方面 中，该摄像装置还具有警告单元，该警告单元在基于由所述移动量检测 单元检测出的移动量的移动速度超过允许值时进行警告。
并且，本发明的第7方面的摄像装置的特征在于，在上述第1方面
中，该摄像装置还具有图像合成单元，其将由所述摄像单元所拍摄的 多个静态图像用图像数据合成为一个图像数据；以及记录单元，其记录由所述图像合成单元合成的图像数据。
并且，本发明的第8方面的摄像装置的特征在于，在上述第1方面 中，在初次的静态图像的摄影时，将ISO灵敏度设定为最大来进行摄影， 在以后的静态图像的摄影时，保持将所述ISO灵敏度设定为最大的状态、
且与所拍摄的所述初次的静态图像的曝光相配地来设定快门速度而进行摄影。
并且，本发明的第9方面的摄像装置的特征在于，在上述第1方面
中，该摄像装置还具有设定单元，该设定单元设定用于引导移动该摄像 装置的速度的移动速度，
所述显示单元还显示引导标记，该引导标记用于根据由所述设定单 元所设定的移动速度，引导移动该摄像装置的速度或/和下次的静态图像 的摄影。
并且，本发明的第10方面的摄像装置的特征在于，在上述第l方面 中，所述显示控制单元在所述显示单元上连续显示由所述摄像单元获得 的多个静态图像用图像数据所涉及的静态图像的移动轨迹。
并且，本发明的第11方面的摄像装置的特征在于，在上述第3方面 中，当根据由所述移动量检测单元检测出的移动量、检测出距进行了静 态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的 图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画 面的相当量时，或者根据摄影指示，将所述移动轨迹的显示位置变更为 该移动轨迹的起点侧的所述显示画面内的端部。
本发明的第12方面的摄像装置的显示方法一边使装置相对于被摄 体移动一边进行多张图像的摄像，其特征在于，该显示方法具有以下步
骤根据在第1时刻对被摄体进行摄像而获得的第1图像数据和在所述
第1时刻之后的第2时刻对被摄体进行摄像而获得的第2图像数据，检 测所述第2图像数据所涉及的图像中所表现的被摄体位置相对于所述第1 图数据所涉及的图像中所表现的被摄体位置的移动量；以及与通过摄像 获得的图像数据所涉及的图像一起，显示所检测出的所述移动量作为移 动轨迹。
8根据本发明，通过对构成全景图像的图像的摄影时机进行辅助，以 使用户以适当的速度且向适当的方向进行摇摄操作，由此，使用便利性 良好，而且能够获得没有被摄体抖动的全景图像。


图1是示出作为一个实施方式的摄像装置的数字照相机的系统结构 的图。
图2是示出在全景摄影动作中显示在显示部上的画面例的图。 图3是示意性地示出在全景摄影动作中显示在显示部上的一连串的 画面例的图。
图4是示出全景摄影动作的流程的图。 图5是概念性地示出S8的处理的图。 图6是示意性地示出S8的处理的图。
图7 (a)、 (b)、 (c)是概念性地示出S10的一部分处理的图。 图8是概念性地说明S14的处理的图。
图9是示意性地示出构成为可以连续显示多个静态图像的移动轨迹 时的显示画面例的图。
图10是概念性地示出通常摄影功能下的通常摄影和全景摄影功能 下的全景摄影的图。
标号说明
1:摄影镜头；2:摄像元件；3:摄像部；4: A/D部；5:图像缓冲 存储器；6:显示处理部；7:内置存储器；8:外部存储器；9:有线I/F; 10:无线I/F; 11:压縮解压缩部；12:图像处理部；13: CPU; 14:总 线；15:显示部；16: Flash ROM; 17:操作部；18:麦克风(录音部)； 21:区域；22:移动轨迹；31、 32、 33:移动轨迹；4h区域；42:线； 43:移动轨迹；101、 102、 103、 104、 105:图像；106:全景图像。
具体实施例方式
下面，参照

本发明的实施方式。实施例1
图1是示出作为本发明的一个实施方式的摄像装置的数字照相机的 系统结构的图。
在该图中，摄影镜头1使被摄体像成像于摄像元件2。摄像元件2
例如是CCD (Charge Coupled Device:电荷耦合器件)或CMOS
(Complementary Metal Oxide Semiconductor: 互补金属氧化物半导体) 等图像传感器，对通过摄影镜头1的作用而成像的被摄体像进行光电转 换，并输出模拟电信号。摄像部3具有降低噪声分量的CDS (Correlated Double Sampling:相关双采样)部以及使信号电平稳定的AGC(Automatic Gain Control:自动增益控制)部等，降低从摄像元件2输出的模拟电信 号的噪声分量，并且使信号电平稳定并输出。A/D部4将从摄像部3输 出的模拟电信号转换成数字电信号，作为图像数据输出该数字电信号。
A/D部4、图像缓冲存储器5、显示处理部6、内置存储器7、外部 存储器8、有线I/F9、无线I/F 10、压縮解压缩部ll、图像处理部12、 CPU 13经由总线14连接。
图像缓冲存储器5例如是DRAM( Dynamic Random Access Memory: 动态随机存取存储器)等存储器，用于临时保存从A/D部4输出的图像 数据、图像处理部13处理中的图像数据等。例如，临时保存静态图像用 的图像数据、实时图像(实况图像)用的图像数据等。另外，所谓实时 图像，是指在显示部15上实时显示成像于摄像元件2上的被摄体像时的 图像。
显示处理部6进行根据图像数据生成显示部15可以显示的图像信号 并输出给显示部15的处理。显示部15例如是LCD(Liquid Crystal Display: 液晶显示器)等，在显示画面上显示与从显示处理部6输出的图像信号 对应的图像。
内置存储器7是预先内置于该数字照相机中的存储器，记录图像数 据等。外部存储器8是在该数字照相机上装卸自如的例如xD-picture card (图像卡)(注册商标)、Compact Flash (注册商标)卡等存储卡，记录 图像数据等。有线I/F 9例如是用于利用USB (Universal Serial Bus:通用串行总 线)或其他有线通信标准与外部设备连接的接口。无线I/F IO例如是用 于利用IrDA (Infrared Data Association,红外数据标准协会)或其他无线 通信标准与外部设备连接的接口。
压縮解压縮部11在记录图像数据时、显示所记录的图像数据时等， 例如以JPEG (Joint Photographic Experts Group:联合图像专家组)方式 等进行图像数据的压缩处理和解压縮处理。
图像处理部12进行以下处理合成(组合)摄影时刻不同的多个静 态图像用的图像数据来生成一个全景图像用的图像数据的处理、根据摄 影时刻不同的两个实时图像用的图像数据来检测移动向量的处理。并且， 除此之外，也对图像数据进行以下各种图像处理y (Gamma)校正或白 平衡校正等的校正处理、增减构成图像的像素数的图像放大/縮小处理(尺 寸调节处理)等。
CPU 13通过读出存储在Flash ROM 16中的照相机程序并执行，来 控制该数字照相机整体的动作。并且，显示控制部13a控制在后面详细 叙述的全景摄影中的显示部15的显示，其通过由CPU 13执行照相机程 序进行显示控制来实现。Flash ROM 16是可以进行电擦写动作的非易失 性存储器，除了存储由CPU13执行的照相机程序以外，还存储在该照相 机程序的执行中所使用的各种数据等。
操作部17包含用于接受来自用户的各种指示并向CPU 13通知该指 示的各种按钮。例如，包含后述的快门按钮(释放按钮)、菜单按钮、上 下左右按钮以及OK按钮等。另外，快门按钮是用于进行摄影指示的按 钮。麦克风(录音部)18将声音转换为数字数据即声音数据，用于声音 的录音。
接着，详细说明作为具有这种结构的数字照相机的动作之一的全景 摄影动作。其中，在本实施方式中，以用户按下快门按钮后从左侧向右 侧对数字照相机进行摇摄操作来进行全景摄影的情况为例，说明该全景 摄影动作。
首先，说明全景摄影动作的概要。在本实施方式的数字照相机中，开始全景摄影动作时，在显示部15 的显示画面上，显示实时图像，还显示作为用于引导用户以适当的速度 且向适当的方向进行摇摄操作的标记的区域、以及表示用户实际进行的 摇摄操作的状况的移动轨迹，用户以使移动轨迹沿着基于显示画面上的 区域的引导的方式进行摇摄操作，由此，能够获得没有被摄体抖动的全 景图像。
图2是示出在全景摄影动作中显示在显示部15上的画面例的图。图 3是示意性地示出在全景摄影动作中显示在显示部15上的一连串的画面 例的图。如图2所示，在全景摄影动作中，在显示画面上显示实时图像， 还显示上述的区域21和移动轨迹22。
区域21由推荐速度区域21a、轨道修正提倡区域21b以及警告建议 显示区域21c这三种部分区域构成。推荐速度区域21a是如下的部分区 域在当前的移动轨迹(该图中的黑圈)22a包含在该推荐速度区域21a 内的情况下，表示用户正在适当地进行摇摄操作。轨道修正提倡区域21b 是如下的部分区域在当前的移动轨迹22a包含在该轨道修正提倡区域 21b内的情况下，表示对于用户的摇摄操作提倡进行轨道修正。警告建议 显示区域21c是如下的部分区域在当前的移动轨迹22a包含在该警告 建议显示区域21c内的情况下，表示用户的摇摄操作过快，该情况下， 如图3的一个画面例所示，在显示画面上进行警告显示。
当开始全景摄影动作时，这3种部分区域随着时间的经过而变化地 进行显示。在本例的情况下，因为假设从左侧向右侧进行摇摄操作，所 以，如图3所示，显示成随着时间的经过，推荐速度区域21a以与移动 允许速度v对应的一定速度从左侧向右侧移动，与此相伴，变化地显示 轨道修正提倡区域21b和警告建议显示区域21c。另外，在图3中，省略 了轨道修正提倡区域21b和警告建议显示区域21c的图示。
这里，通过下式赋予上述的移动允许速度v。
移动允许速度v-(3/ (1/a) [pixel/sec〗
卩是假设摄像元件2为CCD时CCD上的被摄体抖动的允许值[pixd]。 并且，1/ct是预先确定的快门速度[sec]。在后面详细叙述，在本实施方式的数字照相机中，在全景摄影动作中的静态图像的摄影中，必须在快门 速度高于1/(X的高速的快门速度下进行摄影。因此，当用户的摇摄操作的 速度在移动允许速度V以下时，能够拍摄没有被摄体抖动的静态图像。
并且，如图3所示，每当全景摄影动作中的静态图像的摄影结束时，
推荐速度区域21a都显示在区域21上的左端的位置，再次向右侧移动地 显示。
在当前的移动轨迹22a位于显示画面的右端的时刻，进行全景摄影 动作中的静态图像的摄影(为第二次及以后的静态图像的摄影)。即，当 拍摄了静态图像后的移动轨迹22的移动量达到区域21的水平方向(左 右方向)的长度即l个显示画面时，进行下次的静态图像的摄影。因此， 如果在推荐速度区域21a位于区域21上的右端时同时移动轨迹22a位于 区域21上的右端，则是全景摄影动作中的静态图像的最佳摄影时机。由 此，如果用户以至少当推荐速度区域21a位于区域21上的右端时移动轨 迹22a位于区域21上的右端的方式进行摇摄操作，则能够拍摄没有被摄 体抖动的静态图像。
区域21的垂直方向(上下方向)的幅度表示组合(合成)所拍摄的 多个静态图像来制作全景图像时所允许的垂直方向的移动允许幅度。
通过以上这种显示，在摇摄操作中，在当前的移动轨迹22a包含在 推荐速度区域21a内时，用户能够认识到正在适当地进行当前的摇摄操 作。并且，在当前的移动轨迹22a包含在轨道修正提倡区域21b内时， 用户能够认识到最好修正摇摄操作的轨道，以使移动轨迹22a包含在推 荐速度区域21a内。并且，在当前的移动轨迹33a包含在警告建议显示 区域21c内或在区域21外时，用户认识到正在不适当地进行当前的摇摄 操作，能够修正摇摄操作，以使当前的移动轨迹22a包含在推荐速度区 域21a内。由此，用户能够以适当的速度且向适当的方向进行全景摄影 中的摇摄操作。
并且，如果在推荐速度区域21a位于区域21上的右端时同时移动轨 迹22a位于区域21上的右端，则是全景摄影动作中的静态图像的最佳摄 影时机，所以，用户以至少当推荐速度区域21a位于区域21上的右端时使移动轨迹22a位于区域21上的右端的方式进行摇摄操作，由此能够获
得没有被摄体抖动的全景图像。因此，用户没必要以使当前的移动轨迹
22a始终包含在推荐速度区域21a内的方式进行摇摄操作，所以，使用便 利性良好。
图4是示出包含以上这种动作的全景摄影动作的流程的图。 在该图中，在设定了通常摄影模式作为摄影模式时，通过由用户操 作菜单按钮、上下左右按钮以及OK按钮而使摄影模式从通常摄影模式 变更设定为全景摄影模式时，检测出该全景摄影模式的设定(S1)，将ISO 感度设定为最大值(MAX) (S2)。这里，设定为最大值的ISO感度一直 被设定为最大值，直到之后摄影模式从全景摄影模式向其他摄影模式变 更为止。
另外，当设定为通常摄影模式或全景摄影模式这样的摄影模式时， 基本上成为在显示部15上继续进行实时图像的显示的实时画面状态。
接着，判定是否检测到用户按下快门按钮(S3)。这里，在该判定结 果为"否"的情况下，反复进行本判定。
另一方面，在S3的判定结果为"是"的情况下，在设定为最大值的ISO 感度下拍摄静态图像(S4)，对显示部15的显示画面进行初始化(S5)。 在该显示画面的初始化中，与实时图像一起，还对使用上述图2和图3 说明的区域和移动轨迹进行初始化来显示。即，在区域上的左端的位置 显示推荐速度区域，与此相伴，在区域上显示轨道修正提倡区域以及警 告建议显示区域。并且，作为当前的移动轨迹，在区域的左端、区域的 垂直方向的宽度的中心位置标绘显示黑圈。但是，在S3的判定为"是"后 的第二次及以后的S5的处理中，不变更最后作为移动轨迹而标绘显示的 黑圈在垂直方向的位置，将其移动到区域的左端侧进行显示，并且，消 去除此之外的移动轨迹。
并且，在S5的处理中，进一步将在后述的S14的处理中成为判定对 象的、从移动向量中提取出的水平分量的移动量的累计值S清除为0 (S=0)。
接着，取入实时图像用的图像数据(S6)，在图像缓冲存储器5中保存所取入的实时图像用的图像数据(S7)。其中，在图像缓冲存储器5中 没有保存设定为第1实时图像用图像数据的图像数据的情况下，将所取 入的实时图像用图像数据设定为第1实时图像用图像数据并保存。或者， 在图像缓冲存储器5中保存了设定为第1实时图像用图像数据的图像数
据、在图像缓冲存储器5中没有保存设定为第2实时图像用图像数据的 图像数据的情况下，将所取入的实时图像用图像数据设定为第2实时图 像用图像数据并保存。
接着，从设定为第1和第2实时图像用图像数据的两个图像数据中， 检测移动向量(S8)，该移动向量表示设定为第2实时图像用图像数据的 图像数据所涉及的实时图像中所表现的被摄体位置、相对于设定为第1 实时图像用图像数据的图像数据所涉及的实时图像中所表现的被摄体位 置的移动量。但是，在没有保存设定为第2实时图像用图像数据的图像 数据的情况下，不进行本处理(S8)和接下来的S9的处理，返回S6。 因此，该情况下，在接下来的S6中所取入的实时图像用图像数据被设定 为第2实时图像用图像数据并保存。
图5是概念性地示出S8的处理的图，图6是示意性地示出S8的处 理的图。
如图5和图6所示，例如在将实时图像用图像数据i (1)设定为第 1实时图像用图像数据并保存在图像缓冲存储器5中、将实时图像用图像 数据i (4)设定为第2实时图像用图像数据并保存在图像缓冲存储器5 中的情况下，通过检测设定为第l实时图像用图像数据的图像数据i (1) 和设定为第2实时图像用图像数据的图像数据i (4)之间的差分，来求 出移动向量。由此，能够求出设定为第2实时图像用图像数据的图像数 据所涉及的实时图像中所表现的被摄体位置、相对于设定为第1实时图 像用图像数据的图像数据所涉及的实时图像中所表现的被摄体位置的移 动量。另外，在后面详细叙述，根据这样求出的移动量，在显示部10的 显示画面上显示移动轨迹。
当图4的S8的处理结束时，接着，根据在该S8中所检测出的移动 向量判定是否检测到数字照相机在水平方向进行了移动(S9)。在该检测
15中，从移动向量中提取出水平方向的移动量，当该移动量在规定量以上 时，检测为数字照相机在水平方向进行了移动。
在S9中，在该判定结果为"否"的情况下，在设定为第2实时图像用 图像数据的图像数据中，解除该设定，返回S6。因此，该情况下，在接
下来的S6中所取入的实时图像用图像数据被设定为第2实时图像用图像
数据并保存。
另一方面，在S9的判定结果为"是"的情况下，从在S8中所检测出 的移动向量中提取水平方向和垂直对象的移动量，在显示部15上显示该 移动量的相当量作为当前的移动轨迹(SIO)，并且，在该S10中，在设 定为第1实时图像用图像数据的图像数据中，解除该设定，并且，将设 定为第2实时图像用图像数据的图像数据设定为第1实时图像用图像数 据，在设定为第2实时图像用图像数据的图像数据中，解除该设定。
图7 (a)、 (b)、 (c)是概念性地示出S10的一部分处理的图。
如该图(a)所示，例如将设定为第l实时图像用图像数据的图像数 据所涉及的实时图像设为第Z张实时图像，将设定为第2实时图像用图 像数据的图像数据所涉及的实时图像设为第Z+a张实时图像，将从在这 两个实时图像用图像数据之间获得的移动向量中所提取出的水平方向和 垂直方向的移动量设为该图(b)所示的Ax和Ay。该情况下，如该图(c) 所示，在显示部15上利用黑圈31标绘显示其水平方向的移动量Ax的相 当量和其垂直方向的移动量Ay的相当量，作为当前的移动轨迹。但是， 在标绘显示黑圈31作为当前的移动轨迹时，在从作为上次的移动轨迹而 标绘显示的黑圈32移动了水平方向的移动量Ax的相当量和垂直方向的 移动量Ay的相当量的位置，进行标绘显示。
另外，在该图(c)中，除了作为移动轨迹而标绘显示的黑圈31以 外的黑圈，是过去通过SIO的处理同样作为移动轨迹而标绘显示的黑圈， 黑圈33是在S3的判定为"是"后初次进行S5的处理时作为移动轨迹而标 绘显示的黑圈。
并且，在该图(c)中，为了便于说明，加大作为移动轨迹而标绘显 示的黑圈和黑圈之间的间隔来进行显示，但是，在实际的处理中，该间隔很小，如使用上述图2和图3所说明的那样，作为移动轨迹而标绘显 示的黑圈整体显示成线那样。
另外，在该图(C)中，在区域21中省略了推荐速度区域、轨道修 正提倡区域以及警告建议显示区域的图示。
当图4的S10的处理结束时，接着，判定在该SIO中显示的移动轨 迹(作为当前的移动轨迹而标绘显示的黑圈)是否存在于区域内(Sll)。
另外，该判定也是判定用户的摇摄操作是否是制作全景图像时的图像合
成所允许的水平。在Sll的判定中该判定结果为"否"的情况下，进行警 告显示(S12)，进入S14。
另一方面，在Sll的判定结果为"是"的情况下，判定在该S10中显 示的移动轨迹(作为当前的移动轨迹而标绘显示的黑圈)是否存在于警 告建议显示区域内(S13)。另外，该判定也是判定用户的摇摄操作是否 是会产生被摄体抖动的水平。在S13的判定中该判定结果为"是"的情况 下，进行警告显示(S12)，进入S14。在此时的警告显示中，如上述图3 的一个画面例所示，例如在显示部15的显示画面上显示"请稍微慢点移 动"等消息。
另一方面，在S13的判定结果为"否"的情况下，或者在S12的处理 后，接着，将从在S8中所检测出的移动向量中所提取出的水平分量的移 动量Ax与累计值S相加(S—S+Ax)，判定累计值S是否在规定量X以 上(S^X) (S14)。另外，规定量X是相当于区域的水平方向的长度即1 个显示画面的量，该判定也是判定是否是下次的静态图像的摄影时机。
图8是概念性地说明S14的处理的图。
如该图所示，通过反复进行本处理(S14)，每次将从在S8中所检测 出的移动向量中所提取出的水平分量的移动量Ax与累计值S进行累计， 在该累计值S在规定量X以上(S-Ax,+Ax2+Ax3+.,.Ax^X)时，成为下 次的静态图像的摄影时机，S14的判定为"是"。
这样进行S14的判定，在该判定结果为"是"的情况下，接着，作为 下次拍摄静态图像时的快门速度，确定与S3的判定为"是"后初次在S4 中拍摄的静态图像的曝光相配的快门速度(S15)，返回S4。另夕卜，在S15
17的快门速度的确定中，因为在S2中将ISO感度设定为最大值，所以，能
够确定更高速的快门速度。因此，在接下来的S4中进行的静态图像的摄 影中，在S15中所确定的高速的快门速度下进行静态图像的摄影，所以， 能够拍摄没有被摄体抖动的静态图像。但是，在S15的处理中，必须确 定高于上述1/a的高速的快门速度，不能确定比1/a慢的快门速度。
另一方面，在S14的判定结果为"否"的情况下，接着，判定是否检 测到全景摄影结束指示(S16)。另外，例如可以通过按下快门按钮来进 行全景摄影结束指示。该情况下，可以仅利用快门按钮进行全景摄影的 开始和结束指示。
在S16的判定结果为"是"的情况下，进行组合(合成)目前为止(从 S3的判定为"是"后到当前时刻为止)在S4中所拍摄的静态图像的图像数 据来制作全景图像的图像数据的处理(全景合成自动处理)(S17)，在外 部存储器8 (或者也可以是内部存储器7)中记录该全景图像的图像数据 (S18)，返回S3。
另一方面，在S16的判定结果为"否"的情况下，接着，判定是否在 S3的判定为"是"后经过了一定时间(S19)。在该S19的判定结果为"是" 的情况下，进入S17，进行上述S17和S18的处理，返回S3。另一方面， 在S19的判定结果为"否"的情况下，返回S6。该情况下，在接下来的S6 中所取入的实时图像用图像数据被设定为第2实时图像用图像数据并保 存。
以上，根据本实施方式的数字照相机，用户能够以适当的速度且向 适当的方向进行全景摄影中的摇摄操作，所以能够获得没有被摄体抖动 的全景图像。
并且，在该摇摄操作中，用户没必要以使当前的移动轨迹始终包含 在推荐速度区域内的方式进行摇摄操作，只要以至少推荐速度区域位于 区域上的右端时当前的移动轨迹位于区域上的右端的方式进行摇摄操作 即可，所以，能够提高使用便利性。
另外，在本实施方式的数字照相机中，说明了用户从左侧向右侧对 数字照相机进行摇摄操作时的例子，但是，从右侧向左侧进行摇摄操作时，当然也能够同样进行处理。
并且，在本实施方式的数字照相机中，如果在推荐速度区域位于区 域上的右端时同时当前的移动轨迹位于区域上的右端，则是全景摄影动 作中的静态图像的最佳摄影时机，所以，可以构成为在推荐速度区域位 于区域上的右端时，通过声音、振动或显示等，告知推荐速度区域位于 区域上的右端的情况。
并且，在本实施方式的数字照相机中，也可以构成为在全景摄影动 作中的第二次及以后的静态图像的摄影时，通过声音、振动或显示等， 告知进行了静态图像的摄影的情况。
并且，在本实施方式的数字照相机中，自动进行全景摄影动作中的 第二次及以后的静态图像的摄影，但是，也可以构成为由用户手动进行 该摄影。
并且，在本实施方式的数字照相机中，在全景摄影动作中，可以显 示从上次的静态图像的摄影到下次的静态图像的摄影为止的1个静态图 像的移动轨迹，但是，例如也可以构成为，可以连续显示多个静态图像 的移动轨迹。
图9是示意性地示出这样构成时的显示画面例的图。
该图所示的例子是构成为可以连续显示5个静态图像的移动轨迹的
例子。在该例子中，在区域41上，显示表示5个摄影图像的快门时机的 位置的线42 (42a、 42b、 42c、 42d和42e)。因此，在当前的移动轨迹43 到达区域41上的线42 (也包含线42的延长线)的位置时，成为静态图 像的摄影时机，进行静态图像的摄影。然后，在当前的移动轨迹43到达 显示画面的右端(区域41上的线42e (也包含线42e的延长线))的位置 而进行静态图像的摄影时，与上述本实施方式同样，进行区域41和移动 轨迹43的初始化。g卩，在区域41上的左端的位置显示推荐速度区域41a， 与此相伴，在区域41上显示轨道修正提倡区域以及警告建议显示区域， 进而，最后标绘显示的移动轨迹移动到显示画面的左端侧进行显示，消 去其他移动轨迹。另外，在图9中，省略了区域41上的轨道修正提倡区 域和警告建议显示区域的图示，但是，实际上与上述本实施方式同样，也显示这些区域。
并且，在这样构成为可以连续显示多个静态图像的移动轨迹的情况 下，如果预先确定了构成全景图像的静态图像数量，则也可以构成为可 以连续显示该所确定的数量的静态图像的移动轨迹。
并且，在本实施方式的数字照相机中，可以通过按下快门按钮来进 行全景摄影结束指示，但是，也可以通过按下其他按钮等其他方法来进 行全景摄影结束指示。
以上，对本发明进行了详细说明，但是，本发明不限于上述实施方 式，在不脱离本发明的主旨的范围内，当然可以进行各种改良和变更。
权利要求
1. 一种摄像装置，其一边使装置相对于被摄体移动一边进行多张图 像的摄像，其特征在于，该摄像装置具有摄像单元，其对被摄体进行摄像并获得图像数据；显示单元，其显示由所述摄像单元获得的图像数据所涉及的图像； 移动量检测单元，其根据在第1时刻由所述摄像单元获得的图像数 据所涉及的第1图像和在所述第1时刻之后的第2时刻由所述摄像单元 获得的图像数据所涉及的第2图像，检测所述第2图像中所表现的被摄 体的位置相对于所述第1图像中所表现的被摄体的位置的移动量；以及 显示控制单元，所述显示控制单元将由所述移动量检测单元检测出 的移动量作为移动轨迹与显示在所述显示单元上的图像一起显示在所述 显示单元上。
2. 根据权利要求1所述的摄像装置，其特征在于， 所述显示控制单元将从进行了静态图像的摄影的时刻到当前时刻的期间由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位 置的时间变化作为移动轨迹来显示，该移动轨迹以进行所述静态图像的 摄影的时刻或者进行所述摄影指示的时刻为起点。
3. 根据权利要求1所述的摄像装置，其特征在于，当根据由所述移动量检测单元检测出的移动量，检测出距进行了静 态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的 图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画 面的相当量时，进行下次的静态图像的摄影。
4. 根据权利要求1所述的摄像装置，其特征在于， 所述移动量检测单元根据在所述第1时刻由所述摄像单元获得的图像数据和在所述第2时刻由所述摄像单元获得的图像数据，检测移动向 量，根据该移动向量，检测所述第2图像中所表现的被摄体位置相对于 所述第1图像中所表现的被摄体位置的移动量。
5. 根据权利要求1所述的摄像装置，其特征在于，所述显示单元将对所述摄像单元获得的多个静态图像用图像数据所 涉及的图像进行合成来生成一个合成图像时所允许的垂直方向的移动允 许幅度范围，与由所述摄像单元获得的图像数据所涉及的图像一起进行 显示。
6. 根据权利要求1所述的摄像装置，其特征在于， 该摄像装置还具有警告单元，该警告单元在基于由所述移动量检测单元检测出的移动量的移动速度超过允许值时进行警告。
7. 根据权利要求1所述的摄像装置，其特征在于，该摄像装置还具有图像合成单元，其将由所述摄像单元所拍摄的多个静态图像用图像 数据合成为一个图像数据；以及记录单元，其记录由所述图像合成单元合成的图像数据。
8. 根据权利要求l所述的摄像装置，其特征在于， 在初次的静态图像的摄影时，将ISO灵敏度设定为最大来进行摄影，在以后的静态图像的摄影时，保持将所述ISO灵敏度设定为最大的状态、 且与所拍摄的所述初次的静态图像的曝光相配地来设定快门速度而进行 摄影。
9. 根据权利要求1所述的摄像装置，其特征在于， 该摄像装置还具有设定单元，该设定单元设定用于引导移动该摄像装置的速度的移动速度，所述显示单元还显示弓I导标记，该引导标记用于根据由所述设定单 元所设定的移动速度，引导移动该摄像装置的速度或/和下次的静态图像 的摄影。
10. 根据权利要求1所述的摄像装置，其特征在于， 所述显示控制单元在所述显示单元上连续显示由所述摄像单元获得的多个静态图像用图像数据所涉及的静态图像的移动轨迹。
11. 根据权利要求3所述的摄像装置，其特征在于，当根据由所述移动量检测单元检测出的移动量、检测出距进行了静 态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画 面的相当量时，或者根据摄影指示，将所述移动轨迹的显示位置变更为 该移动轨迹的起点侧的所述显示画面内的端部。
12. —种摄像装置的显示方法， 一边使装置相对于被摄体移动一边 进行多张图像的摄像，其特征在于，该显示方法具有以下步骤根据在第1时刻对被摄体进行摄像而获得的第1图像数据和在所述 第1时刻之后的第2时刻对被摄体进行摄像而获得的第2图像数据，检 测所述第2图像数据所涉及的图像中所表现的被摄体位置相对于所述第1图数据所涉及的图像中所表现的被摄体位置的移动量；以及与通过摄像获得的图像数据所涉及的图像一起，显示所检测出的所 述移动量作为移动轨迹。
全文摘要
本发明通过对构成全景图像的图像的摄影时机进行辅助，使用户以适当的速度且向适当的方向进行摇摄操作，由此使用便利性良好，能获得没有被摄体抖动的全景图像。数字照相机具有显示部(15)，其显示由摄像元件(2)等获得的图像数据所涉及的图像；及CPU(13)，其进行以下处理根据在第1时刻由摄像元件(2)等获得的图像数据所涉及的第1图像和在第1时刻之后的第2时刻由摄像元件(2)等获得的图像数据所涉及的第2图像，检测第2图像所表现的被摄体位置相对于第1图像所表现的被摄体位置的移动量、及与显示在显示部(15)上的图像一起，在显示部(15)上显示所检测出的移动量作为移动轨迹的处理等。
文档编号H04N5/232GK101312501SQ20081009934
公开日2008年11月26日 申请日期2008年5月21日 优先权日2007年5月21日
发明者伊藤健世, 藤井贵史 申请人:奥林巴斯映像株式会社