图像处理设备和图像处理方法

专利名称：图像处理设备和图像处理方法
技术领域：
本发明涉及一种图像处理设备和图像处理方法，尤其涉及
一种用于基于根据图像处理设备的姿态(orientation)变化从与 图像显示在同 一屏幕上的项中选择出的项来对图像进行处理的 图像处理设备和图像形成方法。
背景技术：
相关技术中的数字照相机等的图像处理设备在其外壳上具 有包括释放开关和变焦杆的操作单元。用户操作该操作单元以 使这种图像处理设备进行各种操作。普遍已知能够将所拍摄到 的图像显示在液晶显示器等的显示单元上的图像处理设备。近 年来，已经提出了以下系统，该系统允许用户通过操作布置在 用于显示由数字照相机所拍摄到的图像的显示屏幕前方的触摸 面板来控制该数字照相机。
日本特开平11-146317公开了以下数字照相机，该数字照相 机包括用于显示由数字照相机所拍摄到的图像和针对所拍摄到 的图像的操作项的显示单元以及布置在该显示单元前方的触摸 面板。已经提出了允许用户通过经由触摸面板触摸显示单元上 所显示的操作项的其中 一 个来操作数字照相机的方法。
另一方面，已经提出了一种使用图像处理设备的姿态变化 来处理图像的系统。日本特开2007-494847>开了以下数字照相 机，该数字照相机包括用于检测数字照相机的倾斜度的倾斜检
单元。已经提出了幻灯片放映或逐帧重放等的直观图像观看方 法。然而，在相关技术中的图像处理设备中，为了校正图像的 颜色或亮度或者删除图像，用户需要利用手指按下操作按钮或 利用触摸笔操作触摸面板。这对于用户而言是非直观的并且是 复杂的操作。即使在相关技术中的图像处理设备采用直观操作 方法时，也仅在用户》见看图像时使用该直观j乘作方法。由此， 能够使用该直观操作方法执行的处理受限制。在当前趋势倾向 记录所拍摄到的图像的更大容量的记录介质的情况下，存在允 许用户容易地处理所拍摄到的图像的需要。

发明内容
本发明提供一种用于将要处理的图像和表示处理的项显示 在同一屏幕上以允许用户直观地处理该图像的图像处理设备和
图像处理方法。
根据本发明的实施例，提供了一种图像处理设备，用于显
示图像，所述图像处理设备包括显示单元，用于显示基于图 像数据所生成的所述图像和表示对所述图像数据的处理的项； 检测单元，用于检测所述图像处理设备的姿态变化；处理单元， 用于对所述图像数据进行由所述项表示的处理；控制单元，用 于控制所述处理单元，以^吏所述处理单元基于所述4企测单元的 检测结果对与所述图像相对应的所述图像数据进行由所述项表 示的处理；以及移动单元，用于移动在所述显示单元上显示的 所述图像，其中所述移动单元基于所述检测单元的检测结果， 移动在所述显示单元上显示的所述图像；以及所述控制单元控 制所述处理单元，以使所述处理单元对所述图像数据进行由位 于由所述移动单元移动后的所述图像的位置处的项表示的处 理。
根据本发明的实施例，提供了 一种用于图像处理设备的图像处理方法，所述图像处理设备用于显示图像，所述图像处理
方法包括在显示单元上显示基于图像数据所生成的所述图像 和表示对所述图像数据的处理的项；检测所述图像处理设备的 姿态变化；基于检测结果，对与所述图像相对应的所述图像数 据进行由所述项表示的处理；以及移动在所述显示单元上显示 的所述图像，其中基于检测结果，移动在所述显示单元上显示 的所述图像；以及对所述图像数据进行由位于移动后的所述图 像的位置处的项表示的处理。
根据以下参考附图对典型实施例的说明，本发明的其它特 征将变得明显。


图l是根据本发明实施例的图像处理设备的背视图。
图2是示出根据本发明实施例的图像处理设备的结构的框图。
图3是示出由根据本发明第 一 实施例的图像处理设备进行 的处理的图。
图4是示出由根据本发明第 一 实施例的图像处理设备进行 的处理的系统图。
图5是示出在大小上调整缩略像以使其不与多个图标 重叠的情况的图。
图6是示出由根据本发明第二实施例的图像处理设备进行 的处理的图。
图7是示出由根据本发明第二实施例的图像处理设备进行 的处理的系统图。
图8是示出由根据本发明第三实施例的图像处理设备进行 的处理的图。
7图9是示出由根据本发明第三实施例的图像处理设备进行 的处理的系统图。
图IO是示出由根据本发明第四实施例的图像处理设备进行 的处理的图。
图ll是示出由根据本发明第四实施例的图像处理设备进行 的处理的系统图。
具体实施例方式
以下将参考附图来详细说明本发明的各种典型实施例、特 征和方面。
图l是根据第一实施例的图像处理设备的背视图。在以下说 明中，使用数字照相机作为根据本发明实施例的图像处理设备。
参考图l，示出了图像处理设备ioo。在本实施例中，图像 处理设备1 oo是数字照相机。
显示单元101是用于显示所拍摄到的图像、再现图像、各种 数据、操作菜单和图标等的单元，并且是例如LCD(液晶显示 器)。可以将多个显示单元用作为单个画面。电源按钮102用于 在电源的接通和断开之间切换。再现按4丑10 3用于设置从记录设 备读出图像的再现模式。四向键104用于在菜单选择时垂直地和 水平i也移动光才示。
OK按钮105用于确定菜单项。显示按钮106用于在显示单元 101上的处理模式图标显示模式和处理模式图标未显示模式之 间切换。切换按钮109是用于切换的按钮。菜单按钮107用于改 变图像处理设备100的设置。释放按钮108用于输入摄像开始指 令，并且是两段式(半按下和全按下)冲程开关。如果半按下释 放按钮108,则接通第 一 开关并且数字照相机的AE/AF功能工 作。如果全按下释放按钮108,则接通第二开关并且进行对被摄体的摄像。
在显示单元101上，显示了所拍摄到的图像的缩略像
201。将图标202 209作为表示对作为缩略像201的源的存 储用的图像数据的各种处理的项而显示。对存储用的图像数据 进行调整大小处理以减少该存储用的图像数据中所包括的像素 数，从而生成缩略像201。
存储图标202用于将图像存储在文件夹中。邮件图标203用 于通过电子邮件发送图像。保护图标204用于保护图像。垃圾箱 图标205用于删除图像。面部优先校正图标206用于从存储用的 图像数据中检测人物的面部，并且对该存储用的图像数据进行 亮度校正和颜色校正，使得所检测到的面部的亮度和颜色变为 最佳值。放大面部显示图标207用于从存储用的图像数据中检测 人物的面部，对所#:测到的面部进刊_;改大，并显示》文大后的面 部。红眼校正图标208用于从存储用的图像数据检测红眼现象， 并对所检测到的红眼现象进行4吏正。自定义色处理图标209用于 根据预先设置的校正模式对存储用的图像数据的颜色进行校 正。
尽管在图l中显示了图标202~209，然而可以根据用途和范 畴将这些图标分类成组，并且可以利用切换4安確丑109来切换这些 组。例如，可以将这些图标分类成用于对图像数据进行局部校 正的图标组和例如删除或保护图像数据等的用于对全体图像数 据进行处理的图标组，并且可以切换这些组。在本发明中，不 管项的形状如何，都可以使用这些项来表示处理或指令。除上 述项以外，例如，可以使用表示通常对图像进行的多个处理的 项。项的形状不限于上述图标。例如，可以以几何图案、图形 等的标记等形式来提供项。 选地，可以根据处理的类型将项 分类成组，并且可以由不同的颜色或字符表示这些组。图2是示出图像处理设备100的结构的框图。
透镜控制单元301是用于控制透镜302的单元。透镜302是包 括变焦透镜和调焦透镜的透镜。CCD 303是用于接收来自被摄 体的通过透镜302透射来的光、存储根据接收到的光量的电荷以 生成图像数据、并输出所生成的图像数据的摄像元件。作为摄 像元件，代替CCD，可以使用CMOS传感器。视频引擎304是用 于进行信号处理的引擎。记录设备306是用于存储图像以及与该 图像的属性和该图像的摄像日期/时间有关的附加信息的设备。 视频输出端子307是用于输出图像信号的端子。音频输出端子 308是用于输出音频信号的端子。麦克风309是用于输入声音的 麦克风。A/D转换单元310是用于将模拟信号转换成数字信号的 单元。CPU 311包括才莫式切换单元315、控制单元319和图标显 示指示单元320。
D/A转换单元312是用于将数字信号转换成模拟信号的单 元。扬声器313是用于将音频信号作为声音而输出的扬声器。通 信端子314是用于从外部接收和发送数据的端子。模式切换单元 315是用于在各种模式之间切换的单元。操作单元316包括上述 各种按钮。倾斜检测单元317是用于检测图像处理设备100的倾 斜度的单元。角速度检测单元318是用于检测图像处理设备IOO 的角速度的单元。控制单元319是用于基于存储器321中所记录 的程序来控制图像处理设备100的单元。图标显示指示单元320 是用于发送显示图标的指令的单元。存储器321记录与图3所示 的处理相对应的程序。
接着，将简要说明上述组件的操作。
来自被摄体的通过由透镜控制单元301所驱动的透镜302透 射来的光在CCD 303的摄像面上成像。由CCD 303对该光进行 光电转换。由作为信号处理单元的视频引擎304对CCD 303的输出进行处理，然后将其分割成存储用的图像数据(未示出)和根 据该存储用的图像数据而生成的缩略像数据。将存储用的
图像数据和缩略像数据输出至记录设备3 0 6 。
在摄像和图像再现时，将图像信号从视频引擎304输出至显 示单元101和视频输出端子307，并且将音频信号输出至音频输 出端子308。
在对运动图像进行摄像或注释时使用麦克风309。由A/D转 换单元310将从麦克风309输入的声音转换成数字信号，将该数 字信号输入至CPU 311，然后将其记录在记录设备306中。在再 现时，将由CPU 311从记录设备306读出的信号发送至D/A转换 单元312,然后将其作为声音从扬声器313输出。
USB端子等的通信端子314允许CPU 311与外部设备通信。 如前所述，CPU 311可以从记录设备306读出视频数字数据和音 频数字数据，并且经由通信端子314将它们传送至个人计算机。 模式切换单元315根据操作单元316的操作在摄像模式、再现模 式和处理模式之间切换，并且连接至CPU311。在再现模式下， 对图像数据进行各种处理，或者将属性添加至该图像数据。
作为用于检测图像处理设备100的姿态变化的单元，用于检 测图像处理设备10 0的倾斜度的倾斜检测单元317和用于检溯'J图 像处理设备100的角速度的角速度^r测单元318均连接至CPU 311中所包括的控制单元319。例如，倾斜;f佥测单元317配置有用 于检测重力的方向的重力传感器。控制单元319基于由重力传感 器所检测到的重力的方向，检测图像处理设备10 0的姿态。
角速度检测单元318配置有例如X轴陀螺仪传感器、Y轴陀 螺仪传感器和Z轴陀螺仪传感器。X轴陀螺仪传感器检测绕沿 CCD 303的摄像面的宽度方向设置的轴(下文中，称为X轴)的旋 转。Y轴陀螺仪传感器检测绕沿CCD 303的摄像面的高度方向设置的轴(下文中，称为Y轴)的旋转。Z轴陀螺仪传感器检测绕沿 与CCD 303的摄像面垂直的方向设置的轴(下文中，称为Z轴)的旋转。
这些陀螺仪传感器各自在检测旋转时将具有与角速度相对 应的电压值的角速度检测信号输出至控制单元319。控制单元 319沿与倾斜纟企测单元317的纟企测结果相对应的方向，以与角速 度检测单元318的检测结果相对应的速度，移动显示单元101上 所显示的缩略像201。
如果由操作单元316进行图标选择操作，则根据所选择的图 标，对缩略像201进行处理并且将属性与缩略像201相 关联。将处理后的图像数据记录在记录设备306中。
图像处理设备100包括操作单元316。操作单元316包括用于 发送摄像指令的释放按钮108、显示按钮106、再现按钮103、 OK按钮105、四向4定104、电源按钮102、切换按钮109和菜单按 钮107。控制单元319基于操作单元316的操作结果，进行与位于 检测位置处的图标相对应的处理。
操作单元316连接至用于发送显示图标的指令的图标显示 指示单元320。图标显示指示单元320根据操作单元316的操作， 显示图标202 209或者在图标202 209之间切换。这里，将相对 于图l所示的图像处理设备100的水平方向定义为X轴，并且将 相对于图l所示的图像处理设备100的垂直方向定义为Y轴。
图3是示出使用角速度检测单元318检测图像处理设备IOO 的倾斜变化并对在摄像模式下拍摄的图像进行与根据检测结果 所选择的图标相对应的处理的过程的图。在控制单元319的控制 下，使用从存储器3 21读出的控制程序进行图3所示的处理。
图4是使用设备的实际动作示出图3所示的处理的系统图。
以下将详细说明由控制单元319进行的控制处理。如果半按下释放按钮108，则开始图3所示的处理。
在步骤S401中，半按下释放按钮108，并且检测到第一开关处于接通状态。
在步骤S402中，透镜控制单元301设置AF(自动调焦)功能、AE(自动曝光)功能和AWB(自动白平衡)功能，并且图像处理设备100处于摄像准备状态。
在步骤S403中，全按下释力丈按4丑108,并且4企测到第二开关处于接通状态。
在步骤S404中，由CCD 303对通过透镜302透射来的被摄体图像进行光电转换。由作为信号处理单元的视频引擎304对CCD3 0 3的输出进行处理，然后将其作为存储用的图像数据而输出。
在步骤S405中，视频引擎304对存储用的图像数据调整大小，以生成用于显示单元101的全大小图像，并将所生成的全大小图像显示在显示单元101上。
在步骤S406中，视频引擎304对存储用的图像数据调整大小，以生成缩略像201。
在步骤S407中，控制单元319判断释放按钮108的第二开关
骤S401并且摄像模式继续。如果第二开关在预定时间段或更长时间段内保持全按下，则处理进入步骤S408。
在步骤S408中，模式切换单元315将图像处理设备的模式改变为以下处理模式在该处理模式下，对存储用的图像数据进行图像处理或将属性添加至该存储用的图像数据。
在步骤S409中，将表示对存储用的图像数据的各种处理的图标202 209显示在显示单元101上。
在步骤S410中，视频引擎304将缩略像201显示在显示单元101上。
在步骤S411中，角速度检测单元318检测图像处理设备IOO的角速度，并将检测结果发送至控制单元319。
在步骤S412中，视频引擎304沿图像处理设备100的倾斜方向移动缩略像201 ，从而将缩略像201移动至图标202 209的其中一个的位置。例如，如果图像处理设备100的上部向前倾斜，则角速度检测单元318检测到图像处理设备100沿X轴方向的倾斜。缩略像201在显示单元101上向上移动。如果图像处理设备10 0的右部向前倾斜，则检测到图像处理设备IOO沿Y轴方向的倾斜，并且缩略像201向右移动。如果图像处理设备IOO斜向倾斜，则缩略像201沿通过将所检测到的各轴的角速度相加所获得的方向移动。缩略像201未必沿与由角速度检测单元318所检测到的方向相同的方向移动。缩略像201可以沿由角速度检测单元318检测到的角速度的方向朝最适当的图标移动。
参考图4，如果图标和缩略像201重叠，则将图标显示在缩略像201前方。然而，可以将缩略像201显示在图标前方。可选地，可以使图标和缩略像201中的某一个是透明的，使得能够观看到这两者。可以随意选才奪这些显示方法的其中一个。
在步骤S413中，控制单元319判断释放按钮108的第二开关是否处于断开状态。如果释放按钮108的第二开关不处于断开状态，则处理进入步骤S411并且继续检测图像处理设备100的姿态。即，当释放按钮108的第二开关处于接通状态时，用户可以通过倾斜图像处理设备IOO，在显示单元101上移动缩略像201。如果判断为第二开关处于断开状态，则处理进入步骤S414。
14在步骤S414中，当释放按钮108的第二开关处于断开状态时，选择与缩略像201重叠的图标，并且对存储用的图像数据进行与所选择的图标相对应的处理。例如，如果缩略像201与垃圾箱图标205重叠，则在控制单元319的控制下删除与位于垃圾箱图标205的位置处的缩略像201相对应的存储用的图像数据。如果缩略像201与放大面部显示图标207重叠，则从存储用的图像数据中检测到人物的面部，并且对所检测到的面部进行放大并显示。通过进行与该图标相对应的处理，可以检查所拍摄到的图像中所包括的面部上的详细表情，并且可以判断该面部是否处于聚焦中。在进行处理之前，用户可以判断是否应当对存储用的图像数据实际进行与图标相对应的处理。
在步骤S415中，处理模式结束。
如前所述，将与要处理的存储用的图像数据相对应的缩略像201和表示对该存储用的图像数据的各种处理的图标一起显示，并且根据图像处理设备100的姿态变化，移动缩略像201。对存储用的图像数据进行与位于移动后的缩略像201的位置处的图标相对应的处理。由此，用户可以在无需进4亍例如操作触摸面板或设备中所包括的按钮的复杂操作的情况下直观地对图像进行处理。
接着，将说明在图3所示的步骤S413中缩略像201位于多个图标上的情况。在这种情况下，例如，CPU 311基于从视频引擎3 04发送来的信息，计算缩略像2 01与这些图标中的各个图标重叠的面积，并且进行与这些图标中具有最大重叠面积的图标相对应的处理。可选地，CPU 311可以计算缩略像201和这些图标中的各个图标的重心之间的距离，并且优选进行与这些图标中具有最短距离的图标相对应的处理。可以进行对应于与缩略像201重叠的全部图标的多个处理。可以随意切换上述处理方法以进行根据图像处理设备10 0的使用状况的处理。
为了防止缩略像201与多个图标重叠，可以由图标显示指示单元320控制各个图标或缩略像201的大小。在这种情况下，如图5所示，通过将缩略像在X轴方向上的长度设置为短于图标之间在X轴方向上的距离并将缩略像在Y轴方向上的长度设置为短于图标之间在Y轴方向上的距离，可以防止缩略像201与多个图标重叠。因而，对图标的大小的控制允许用户总是选择单个图标。可以对图像数据进行与所选择的图标相对应的处理。
在本实施例中，在控制单元319已判断为释;^文按钮108的第二开关处于断开状态之后，处理模式结束并且进行与所选择的图标相对应的处理。然而，当控制单元319判断为在处理模式下缩略像201已移动并且移动后的缩略像201与图标的其中一个重叠时，处理模式可以结束，并且可以对存储用的图像数据进行与判断为首先与缩略像2 01重叠的图标相对应的处理。
接着，将说明本发明的第二实施例。
在第一实施例中，可以使用根据数字照相机的姿态变化移动要处理的图像的方法来实现直观操作。另一方面，在第二实施例中，可以使用根据数字照相机的姿态变化移动用于选择表示处理的项的光标的方法来实现直观」缲作。与第一实施例中相同，在第二实施例中，使用数字照相机作为图像处理设备。相同的附图标记用于表示参考图l所示的根据第一实施例的数字照相机的背视图以及图2所示的数字照相机的框图已经说明的组件。将与图6所示的处理相对应的程序记录在存储器321中。图6是示出对在再现模式下再现的图像进行与根据角速度
检测单元318的冲企测结果所选择的图标相对应的处理的图。
图7是使用设备的实际动作示出图6所示的处理的系统图。图7所示的箭头210是根据本实施例的光标。与根据第 一 实施例的缩略像201的情况下相同，该光标显示在显示单元101上，并且在控制单元319的控制下根据倾斜检测单元317和角速度检测单元318的4企测结果在显示单元101上移动。图〗象切换标记214是表示处理的项。如果利用箭头210选择了图像切换标记214,则在要处理的图像之间进行切换。在控制单元319的控制下，根据从存储器321读出的控制程序进行图6所示的处理。
以下将详细说明由控制单元319进4亍的控制处理。如果按下了再现按钮103,则图6所示的处理开始。
在步骤S501中，检查是否按下了再现按钮103。在步骤S502中，模式切换单元315将图像处理设备100的模式切换至再现模式。
在步骤S503中，CPU 311从记录设备306读出存储用的图像数据。由视频引擎304对所读取的存储用的图像数据调整大小，然后将其作为图像显示在显示单元101上。
在步骤S504中，如果判断为已经按下了释放按钮108或电源按钮102，则再现模式结束。如果所按下的按钮是释放按钮108,则将该再现模式改变为摄像模式。如果所按下的按钮是电源按钮102,则图像处理设备100断电。如果判断为未按下释放按钮108和电源按钮102，则再现模式继续并且处理进入步骤S505。
在步骤S505中，如果判断为已经按下了显示按钮106,则将再现模式改变为处理模式。如果判断为未按下显示按钮106,则再现模式继续。在步骤S506中，图标显示指示单元320根据显示按钮106的操作，将表示对存储用的图像数据的各种处理的图标202~209显示在显示单元101上。
在步骤S507中，视频引擎304将缩略像201和箭头210显示在显示单元101上。可以利用四向4建104进4亍在要处理的缩略像201之间的切换。如果将箭头210移动至图像切换标记214的位置，则也可以进行在要处理的缩略像201之间的切换。
在步骤S508中，角速度检测单元318检测图像处理设备的角速度，并将检测结果发送至控制单元319。
在步骤S509中，视频引擎304沿图像处理设备100的倾斜方向移动箭头210, 乂人而将箭头210移动至图标202 209的其中一个的位置处。例如，如果图〗象处理i殳备100的上部向前倾^K则角速度检测单元318检测到图像处理设备100沿X轴方向的倾斜，并且箭头210在显示单元101上向上移动。如果图像处理设备10 0的右部向前倾斜，则4企测到图Y象处理i殳备10 0沿Y轴方向的倾斜，并且箭头210向右移动。如果图像处理设备100斜向倾斜，则箭头210沿通过将所检测到的各轴的角速度相加所获得的方向移动。箭头210未必沿与由角速度^r测单元318所;险测到的方向相同的方向移动。箭头210可以沿由角速度才全测单元318所检测到的角速度的方向朝最适当的图标运动。
参考图7，如果图标和箭头210重叠，则将箭头210显示在图标前方。然而，可以将图标显示在箭头210前方。可选地，可以使图标和箭头210中的某一个是透明的，使得能够观看到这两者。可以随意选择这些显示方法的其中一个。
在步骤S510中，控制单元319判断OK按钮105是否已被按下并且处于断开状态。如果OK按钮105不处于断开状态，则继续检测图像处理设备100的倾斜。即，直到按下了 OK按钮105为止，用户可以通过倾斜图像处理设备100来改变箭头210在显示单元101上的移动方向。如果判断为已按下了 OK按钮105,则处理进入步骤S511。
在步骤S511中，当OK按钮105处于断开状态时，选择图标中与箭头210重叠的图标，并且对存储用的图像数据进行与所选才奪的图标相对应的处理。例如，如果箭头210与保护图标204重叠，则在控制单元319的控制下，对作为与显示在显示单元101上的缩略像201相对应的图像数据的存储用的图像数据进行保护。如果箭头210与面部优先校正图标206重叠，则从存储用的图像数据中检测人物的面部。对该存储用的图像数据进行亮度校正和颜色校正，从而将所检测到的面部的亮度值和颜色值设置为最佳值。在对存储用的图像数据进行与所选择的图标相对应的处理之前，用户可以判断是否应当对存储用的图像数据实际进行该处理。
在步骤S512中，处理模式结束。
如前所述，将与要处理的存储用的图像数据相对应的缩略像201以及表示对存储用的图像数据的各种处理的图标一起显示，并且根据图像处理设备100的姿态变化移动箭头210。对存储用的图像数据进行与位于移动后的箭头210的位置处的图标相对应的处理。因而，用户可以在无需进行例如操作触摸面板或设备中所包括的按钮的复杂操作的情况下，直观地对图像进行处理。在第一实施例中，如果缩略像201与多个图标重叠，则检测缩略像201与这些图标中的各个图标重叠的面积或者缩略像201和这些图标中的各个图标的重心之间的距离。基于检测结果，选择这些图标的其中一个。然而，在本实施例中，可以优选选择与箭头210的末端部分重叠的图标。接着，将说明本发明的第三实施例。
在第一和第二实施例中，为了选择表示处理的项，根据数字照相机的角速度移动要处理的图像或光标。另一方面，在第三实施例中，根据数字照相机的倾斜度和角速度两者对图像数据进行与位于图像或光标的轨迹上的图标相对应的处理。与第一实施例中相同，在第三实施例中，使用数字照相机作为图像处理设备。相同的附图标记用于表示参考图l所示的根据第一实
施例的数字照相机的背视图以及图2所示的数字照相机的框图已经说明的组件。如果利用缩略像201选择了图像切换标记214，则进行在要处理的图像之间的切换。将与图8所示的处理相对应的程序记录在存储器321中。
图8是说明在图像处理设备(数字照相机)10 0中使用角速度检测单元318和倾斜才企测单元317两者的情况的图。图9是使用设备的实际动作示出图8所示的处理的系统图。
在本实施例中，将图l所示的图像处理设备100的姿态定义为正位置，并且将图9所示的图像形成设备IOO的姿态定义为垂直位置。，i定图^f象处理设备100从正位置逆时针旋转至垂直位置(在图9中，图〗象处理设备100从正位置A逆时针^:转至垂直位置B)。在这种情况下，如果基于倾斜检测单元317的检测结果移动缩略像201,则缩略像201移动至邮件图标203的位置。此时，角速度检测单元318可以检测图像处理设备100的角速度，并且可以基于角速度的检测结果来改变缩略像201移动至邮件图标203的速度。在控制单元319的控制下，根据从存储器321读出的控制程序进行图8所示的处理。
以下将详细说明由控制单元319进行的控制处理。如果按下了再现按钮103，则图8所示的处理开始。
在步骤S601中，检查是否按下了再现按钮103。在步骤S602中，模式切换单元315将图像处理设备100的模式切换至再现模式。
在步骤S603中，CPU 311从记录设备306读出存储用的图像数据。由视频引擎304将所读取的存储用的图像数据作为图像显示在显示单元101上。
在步骤S604中，如果判断为已按下了释放按钮108或电源按钮102,则再现模式结束。如果所按下的按钮是释放按钮108，则将再现模式改变为摄像模式。如果所按下的按钮是电源按钮102,则图像处理设备100断电。如果判断为未按下释放按钮108和电源按钮102,则再现才莫式继续并且处理进入步骤S605。
在步骤S605中，如果判断为已按下了显示按钮106,则将再现模式改变为处理模式。如果判断为未按下显示按钮106，则再现模式继续。
在步骤S606中，图标显示指示单元320根据显示按钮106的操作，将表示对存储用的图像数据的各种处理的图标202 209显示在显示单元101上。
在步骤S607中，将缩略像201显示在显示单元101上。可以利用四向键104进行在要处理的缩略像201之间的切换。如果将缩略像201移动至图像切换标记214的位置，则也可以进行在要处理的缩略像201之间的切换。
在步骤S608中，倾斜检测单元317和角速度检测单元318分别检测图像处理设备的倾斜度和角速度，并各自将检测结果发送至控制单元319。
在步骤S609中，视频引擎304沿图像处理设备100的倾斜方向移动缩略像201 ,从而将缩略像201移动至图标202 209的其中一个的位置。例如，如果图4象处理设备100的下部从水平状态向前倾斜，则角速度检测单元318检测 图像处理设备100沿X轴方向的倾斜。倾斜检测单元317为图像处理设备100提供重力，并且缩略像201在显示单元101上向下移动。如果在Y轴垂直于地面的情况下图像处理设备10 0绕Z轴旋转，则缩略像201停留在原处。随后，倾斜;险测单元317为图像处理设备100提供重力，并且缩略像201在显示单元101上向下移动。缩略像201未必沿与由角速度检测单元318所检测到的方向相同的方向移动。缩略像201可以沿由角速度检测单元318所检测到的角速度的方向朝最适当的图标移动。
在步骤S610中，控制单元319判断OK按钮105是否已被按下并且处于断开状态。如果OK按钮105不处于断开状态，则继续4企测图像处理设备100的倾斜。即，直到按下OK按4丑105为止，用户可以通过倾斜图^(象处理设备100来改变缩略像201在显示单元101上的移动方向。如果判断为已按下了 OK按钮105，则处理进入步骤S611。
在步骤S611中，当判断为OK按4丑105处于断开状态时，选择图标中与缩略像201重叠的图标，并且对存储用的图像数据进行与所选择的图标相对应的处理。例如，如果缩略像201与邮件图标203重叠，则将与设置在邮件图标203的位置处的缩略像2 01相对应的存储用的图像数据发送至指定地址。如果缩略像201与自定义色处理图标209重叠，则根据预先设置的校正模式对存储用的图像数据的颜色进行校正。例如，校正模式的例子包括增强红色并减小锐度的肖像模式、增强绿色和蓝色并增加锐度的风景模式以及不使用颜色的单色模式。在对存储用的图像数据进行与所选择的图标相对应的处理之前，用户可以判断是否应当对存储用的图像数据实际进行该处理。
在步骤S612中，处理模式结束。
如前所述，将与要处理的存储用的图像数据相对应的缩略
22像201以及表示对存储用的图像数据的各种处理的图标一起显示，并且根据图像处理设备10 0的倾斜度和角速度的变化，移动缩略像201 。对存储用的图像数据进行与位于移动后的缩略像201的位置处的图标相对应的处理。因而，用户可以在无需进行例如操作触摸面板或设备中所包括的按钮的复杂操作的情况下直观地对图像进行处理。
在本实施例中，移动缩略像201。然而，与第二实施例中的情况下相同，可以使用光标来选4奪表示处理的图标。即使缩略Y象201与多个图标重叠，也可以与如前在第一和第二实施例中所述类似地处理这种情况。
接着，将i兌明本发明的第四实施例。在第一、第二和第三实施例中，为了选择表示处理的项，根据数字照相机的姿态变化移动要处理的图像或光标。另一方面，在第四实施例中，根据数字照相机的姿态变化对图像数据进行与位于图像或光标的轨迹上的图标相对应的处理。与第一实施例中相同，在第四实施例中，使用数字照相机作为图像处理设备。相同的附图标记用于表示参考图l所示的根据第一实施例的数字照相机的背视图以及图2所示的数字照相机的框图已经说明的组件。将与图10所示的处理相对应的程序记录在存储器321中。
图10是说明在图像处理设备100中进行与位于根据图像处理设备(数字照相机)10 0的姿态变化而移动的图像的轨迹上的图标相对应的处理的情况的图。图ll是使用设备的实际动作示出图IO所示的处理的系统图。在控制单元319的控制下，根据从存储器321读出的控制程序进行图IO所示的处理。
以下将详细i兌明由控制单元319进行的控制处理。在本实施例中，将说明第 一 实施例中从将图像处理设备的模式改变为处理模式的步骤S408开始的处理。在步骤S701中，图标显示指示单元320根据显示按钮106的 操作将图标202 209显示在显示单元101上。
在步骤S702中，视频引擎304将缩略像201显示在显示 单元101上。
在步骤S703中，角速度^r测单元318冲全测图^(象处理设备的 姿态变化，并将检测结果发送至控制单元319。
在步骤S704中，视频引擎304沿图像处理设备100的倾斜方 向移动缩略像201 ，从而将缩略像201移动至图标 202 209的其中一个的位置。例如，如果图像处理设备100的上 部向前倾斜，则角速度4企测单元318#企测到图4象处理设备100沿 X轴方向的倾斜，并且缩略像201在显示单元101上向上移 动。如果图像处理设备100的右部向前倾斜，则检测到图像处理 设备100沿Y轴方向的倾斜，并且缩略^f象201向右移动。如 果图像处理设备100斜向倾斜，则缩略像201沿通过将所检 测到的各轴的角速度相加所获得的方向移动。缩略像201 未必沿与由角速度^全测单元318所;险测到的方向相同的方向移 动。缩略4象201可以沿由角速度4企测单元318^:测到的角速 度的方向朝最适当的图标移动。
在步骤S705中，控制单元319判断缩略像201在移动的 同时是否已与图标重叠。如果判断为缩略像201已与图标重 叠，则处理进入步骤S706。如果判断为缩略像201未与图 标重叠，则处理进入步骤S707。
在步骤S706中，将关于与在步骤S705中判断为已与缩略图 图像201重叠的图标相对应的处理的信息记录在记录设备306 中。
在步骤S707中，控制单元319判断释放按钮108的第二开关 是否处于断开状态。如果释放按钮108的第二开关不是处于断开状态，则处理进入步骤S703并且继续检测图像处理设备100的 姿态。即，当释放按钮108的第二开关处于接通状态时，用户可 以通过倾斜图像处理设备100来在显示单元101上移动缩略 像201。如果判断为第二开关处于断开状态，则处理进入步骤 S708。
在步骤S708中，判断记录设备306中是否记录有关于处理 的信息。如果未记录关于处理的信息，则处理进入步骤S710。 如果记录了关于处理的信息，则处理进入步骤S709。
在步骤S709中，基于记录设备306中所记录的关于处理的 信息，对与缩略像201相对应的存储用的图像数据进行处 理。例如，如果缩略像201如图ll所示移动，并且将与红眼 校正图标208和存储图标202有关的多个信息记录在记录设备 3 0 6中，则对从存储用的图像数据中检测到的红眼现象进行校 正，并将校正后的图像数据存储在文件夹中。在进行处理之前， 用户可以判断是否应当对存储用的图像数据实际进行与图标相 对应的处理。在本实施例中，记录了与位于缩略像的移动 轨迹上的两个图标相对应的两个处理信息。然而，处理信息的 数量不限于此，并且可以是一个或更多个。
在步骤S710中，处理模式结束。
结果，对于与和图标显示在同一屏幕上的缩略像201 相对应的存储用的图像数据，进行与位于根据图像处理设备IOO 的姿态变化而移动的缩略像201的轨迹上的图标相对应的 处理。
如前所述，将与要处理的存储用的图像数据相对应的缩略 像201以及表示对存储用的图像数据的各种处理的图标一 起显示。根据图像处理设备IOO的姿态变化移动缩略像201 。 对存储用的图像数据进行与位于缩略像201的移动轨迹上的图标相对应的多个处理。结果，在图像处理设备100中，用户
可以在无需进行例如操作触摸面板或设备中所包括的按钮的复 杂操作的情况下直观地对图像进行多个处理。
在本实施例中，移动缩略像201。然而，与第二实施例 的情况下相同，可以使用光标来选择处理。即使缩略像201 与多个图标重叠，也可以与如前在第一和第二实施例中所述类 似地处理这种情况。
在第一至第四实施例中，使用数字照相机作为图像处理设 备。然而，例如，可以4吏用DVD再现j殳备(DVD插J丈才几(DVD deck) 或便携式TV)、个人数字助理(PDA)或移动电话等具有图像再现 功能的设备。根据图像处理设备10 0的姿态变化移动缩略像 201或箭头210。然而，通过纟乘作四向4建104,用户可以移动缩略 像201或箭头210。可以基于缩略像201或箭头210的移 动结果对存储用的图像数据进行处理。
在本发明的其它实施例中，可以彼此分离地布置显示表示 多个处理的项并选才奪这些项的其中 一 个的部分以及进行与所选 择的项相对应的处理的部分。例如，可以在与图4象处理设备分 离设置的便携式设备中布置显示图标的显示单元以及倾斜检测 单元和角速度检测单元等的用于检测设备的姿态变化的单元， 并且可以在图像处理设备中进行在便携式设备中所选择的处 理。在这种情况下，根据便携式设备的姿态变化的检测结果或 该便携式设备中所包括的操作单元的操作结果，在便携式设备 中选择表示对存储用的图像数据的多个处理的项的其中一个。 将关于与所选择的项相对应的处理的信息发送至图像处理设 备，并且在图像处理设备中所包括的控制单元的控制下，对存 储用的图像数据进行在便携式设备中选择的处理。
在上述实施例中，由程序来实现本发明。然而，可以由硬件替代由程序所实现的功能中的全部或 一 些。
因而，根据本发明的上述实施例，可以提供允许用户直观 地且容易地对图像进行各种处理的图像处理设备和图像处理方 法。
尽管已经参考典型实施例说明了本发明，但是应该理解， 本发明不限于所公开的典型实施例。所附权利要求书的范围符 合最宽的解释，以包含所有这类修改以及等同结构和功能。
权利要求
1.一种图像处理设备，用于显示图像，所述图像处理设备包括显示单元，用于显示基于图像数据所生成的所述图像和表示对所述图像数据的处理的项；检测单元，用于检测所述图像处理设备的姿态变化；处理单元，用于对所述图像数据进行由所述项表示的处理；控制单元，用于控制所述处理单元，以使所述处理单元基于所述检测单元的检测结果对与所述图像相对应的所述图像数据进行由所述项表示的处理；以及移动单元，用于移动在所述显示单元上显示的所述图像，其中所述移动单元基于所述检测单元的检测结果，移动在所述显示单元上显示的所述图像；以及所述控制单元控制所述处理单元，以使所述处理单元对所述图像数据进行由位于由所述移动单元移动后的所述图像的位置处的项表示的处理。
2. 根据权利要求l所述的图像处理设备，其特征在于，所 述显示单元和所述检测单元布置在与所述图像处理设备分离设 置的便携式设备中。
3. 根据权利要求l所述的图像处理设备，其特征在于，所 述控制单元控制所述处理单元，以使所述处理单元对所述图像示的处理。
4. 根据权利要求l所述的图像处理设备，其特征在于，在 由所述移动单元移动的所述图像的轨迹上存在多个所述项的情 况下，所述控制单元控制所述处理单元，以^f吏所述处理单元对 所述图像数据进行由该多个所述项表示的多个处理。
5. 根据权利要求l所述的图像处理设备，其特征在于，还 包括判断单元，所述判断单元用于在由所述移动单元移动后的 所述图像与至少两个或更多个所述项重叠的情况下，判断应当 对所述图像数据进行由该至少两个或更多个所述项表示的多个 处理中的哪个处理。
6. 根据权利要求l所述的图像处理设备，其特征在于，还 包括图像切换单元，所述图像切换单元用于改变在所述显示单 元上显示的要处理的所述图像。
7. 根据权利要求l所述的图像处理设备，其特征在于，还 包括摄像单元，用于拍摄被摄体的图像；以及记录单元，用于记录由所述摄像单元拍摄到的图像的所述 图像数据，以及其中，在所述摄像单元已拍摄到所述被摄体的图像之后， 所述处理单元对所述图像数据进行由所述项表示的处理。
8. 根据权利要求7所述的图像处理设备，其特征在于，还 包括释放按钮，所述释放按钮用于指示所述摄像单元进行摄像， 以及其中，所述处理单元根据所述释放按钮的操作状态，开始 对所述图像数据进行由所述项表示的处理。
9. 根据权利要求8所述的图像处理设备，其特征在于，在下，所述处理单元开始对所述图像数据进行由所述项表示的处 理。
10. 根据权利要求l所述的图像处理设备，其特征在于，所 述项是图标。
11. 根据权利要求l所述的图像处理设备，其特征在于，由所述检测单元检测的所述图像处理设备的姿态变化包括所述图 像处理设备的倾斜度和所述图像处理设备的角速度至少之一。
12. —种用于图像处理设备的图像处理方法，所述图像处 理设备用于显示图像，所述图像处理方法包括在显示单元上显示基于图像数据所生成的所述图像和表示 对所述图像数据的处理的项；检测所述图像处理设备的姿态变化；基于检测结果，对与所述图像相对应的所述图像数据进行 由所述项表示的处理；以及移动在所述显示单元上显示的所述图像，其中 基于检测结果，移动在所述显示单元上显示的所述图像；以及对所述图像数据进行由位于移动后的所述图像的位置处的 项表示的处理。
全文摘要
提供了一种允许用户容易地处理拍摄到的图像的图像处理设备和图像处理方法。该图像处理设备在屏幕上显示基于图像数据所生成的图像和表示对该图像数据的处理的项，检测该图像处理设备的姿态变化，并基于姿态变化的检测结果对与所显示的图像相对应的图像数据进行处理。
文档编号H04N5/232GK101600052SQ20091014238
公开日2009年12月9日 申请日期2009年6月4日 优先权日2008年6月4日
发明者山田一成 申请人:佳能株式会社