专利名称：图像处理装置及方法、程序记录介质、以及程序的制作方法
技术领域：
本发明涉及图像处理装置及方法、程序记录介质、以及程序，尤其涉及通过将对图像施加的处理与图像的特征量相对应地进行存储，每当播放图像时，在能够再现施加了规定处理的图像的时候，可容易地编辑施加到图像上的规定处理的图像处理装置及方法、程序记录介质、以及程序。
背景技术：
正在普及用于轻松地处理图像的技术。
以往，主流是如下的线性编辑在编辑由摄像机等拍摄的图像时，一边播放原始的图像数据，一边执行施加各种处理的操作，将成为处理结果的图像记录到其他的记录介质中。
另外，在如上所述的线性编辑的情况下，在原始的图像数据是COPY ONCE(1次复制)的情况下，存在无法记录对记录到VTR(Video Tape Recorder磁带录像机)一次的数据进行播放并进一步进行编辑所得到的影像的问题。
因此，提出了将指示用于编辑图像的处理的操作进行存储的方法(参照专利文献1)。
专利文献1日本特开2003-202944号公报发明内容发明要解决的问题然而，在线性编辑的情况下，可以通过将图像和表示该图像的时间的时间代码同时进行通信从而按照时间代码进行编辑，但是在民用的VTR等中，时间代码在VTR内部，处于实际上不能将时间代码传送到外部的状态，不能使图像和指示用于编辑图像的处理的操作同步，因此即使简单地存储操作也难以正确地与图像的播放同步，并且对图像施加处理进行显示。
另外，当编辑图像时，在想要比较多个编辑内容的情况下，不能在相同的显示装置上显示多个编辑结果而进行比较，因此，在按照使用者所希望的那样进行编辑时，需要经相当的编辑经验得到的熟练的技术，所以不论编辑操作本身是否复杂，都无法如所希望的那样进行编辑。
本发明是鉴于这种状况而完成的，尤其是不对原始的图像数据施加处理，通过将对图像施加的处理与图像的特征量相对应地进行存储，每当播放图像时，在能够正确地对图像施加规定的处理进行再现时，可容易地对图像的处理内容进行编辑。
用于解决问题的手段本发明的一个方面的图像处理装置，包括特征量抽出单元，其从图像抽出特征量；设定单元，其设定用于对上述图像施加处理的设定信息；记录单元，其对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步单元，其使上述数据记录介质的特征量、与由上述特征量抽出单元抽出的特征量同步；读出单元，其在通过上述同步单元使上述数据记录介质的特征量与由上述特征量抽出单元抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映单元，其根据由上述读出单元读出的设定信息，将处理反映到上述图像中；显示图像生成单元，其在通过上述反映单元将处理反映到上述图像而得到的图像上，合成表示由上述读出单元读出的设定信息的对象，生成显示图像；以及选择单元，其将由上述读出单元读出的设定信息选择性地提供给上述反映单元或者上述显示图像生成单元。
在上述特征量抽出单元中，可将构成上述图像的规定区域的像素的像素值的加法值作为特征量抽出。
还可包含操作单元，该操作单元进行用于指定对上述图像的处理的操作，在上述设定单元中可根据上述操作单元的操作内容，设定用于对上述图像施加处理的设定信息，在上述记录单元中对应于上述图像的特征量将上述操作内容记录到上述数据记录介质中。
在上述设定信息中可包含表示自身是否为正在编辑的信息的信息。
在上述设定信息中包含有表示正在编辑的信息的情况下，在上述反映单元中，可将上述图像原样提供给上述显示图像生成单元，在上述显示图像生成单元中，可将表示根据由上述读出单元读出的设定信息而实施处理的范围的窗口作为对象合成在从上述反映单元提供的图像上，生成显示图像。
在上述设定信息中没有包含表示正在编辑的信息的情况下，在上述选择单元中，可将由上述读出单元读出的设定信息选择性地仅提供给上述反映单元，在上述反映单元中，可根据由上述读出单元读出的设定信息，将处理反映到上述图像中，上述显示图像生成单元将由上述反映单元把处理反映到上述图像而得到的图像作为显示图像。
上述同步单元包括检索位置特征量抽出单元，其对应于上述图像的特征量，从记录了用于对上述图像施加处理的设定信息的数据记录介质，作为检索位置特征量依次抽出上述特征量；以及比较单元，其将由上述特征量抽出单元抽出的特征量与上述检索位置特征量依次进行比较，在上述比较结果一致的情况下，视为对应于上述图像的特征量而记录了用于对上述图像施加处理的设定信息的数据记录介质的特征量、与由上述特征量抽出单元抽出的特征量同步。
本发明的一个方面的图像处理方法，包括特征量抽出步骤，从图像抽出特征量；设定步骤，设定用于对上述图像施加处理的设定信息；记录步骤，对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步步骤，使上述数据记录介质的特征量、与通过上述特征量抽出步骤的处理抽出的特征量同步；读出步骤，在通过上述同步步骤的处理使上述数据记录介质的特征量与利用上述特征量抽出步骤的处理抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映步骤，根据通过上述读出步骤的处理读出的设定信息，将处理反映到上述图像中；显示图像生成步骤，在通过上述反映步骤的处理将处理反映到上述图像而得到的图像上，合成表示通过上述读出步骤的处理读出的设定信息的对象，生成显示图像；以及选择步骤，选择性地提供通过上述读出步骤的处理读出的设定信息，使得能够在上述反映步骤的处理或者上述显示图像生成步骤的处理中使用该设定信息。
本发明的一个方面的程序记录介质的程序，包括特征量抽出步骤，从图像抽出特征量；设定步骤，设定用于对上述图像施加处理的设定信息；记录步骤，对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步步骤，使上述数据记录介质的特征量、与通过上述特征量抽出步骤的处理抽出的特征量同步；读出步骤，在通过上述同步步骤的处理使上述数据记录介质的特征量与利用上述特征量抽出步骤的处理抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映步骤，根据通过上述读出步骤的处理读出的设定信息，将处理反映到上述图像中；显示图像生成步骤，在通过上述反映步骤的处理将处理反映到上述图像而得到的图像上，合成表示通过上述读出步骤的处理读出的设定信息的对象，生成显示图像；以及选择步骤，选择性地提供通过上述读出步骤的处理读出的设定信息，使得能够在上述反映步骤的处理或者上述显示图像生成步骤的处理中使用该设定信息。
本发明的一个方面的程序，使计算机执行包括如下步骤的处理特征量抽出步骤，从图像抽出特征量；设定步骤，设定用于对上述图像施加处理的设定信息；记录步骤，对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步步骤，使上述数据记录介质的特征量、与通过上述特征量抽出步骤的处理抽出的特征量同步；读出步骤，在通过上述同步步骤的处理使上述数据记录介质的特征量与利用上述特征量抽出步骤的处理抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映步骤，根据通过上述读出步骤的处理读出的设定信息，将处理反映到上述图像中；显示图像生成步骤，在通过上述反映步骤的处理将处理反映到上述图像而得到的图像上，合成表示通过上述读出步骤的处理读出的设定信息的对象，生成显示图像；以及选择步骤，选择性地提供通过上述读出步骤的处理读出的设定信息，使得能够在上述反映步骤的处理或者上述显示图像生成步骤的处理中使用该设定信息。
本发明的一个方面的图像处理装置及方法、以及程序，从图像抽出特征量，设定用于对上述图像施加处理的设定信息，对应于上述图像的特征量将上述设定信息记录到数据记录介质中，使上述数据记录介质的特征量与抽出的特征量同步，在上述数据记录介质的特征量与抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息，根据读出的设定信息，将处理反映到图像中，在对上述图像反映了处理的图像上，合成表示读出的设定信息的对象而生成显示图像，为了在用于反映上述图像或者用于生成上述显示图像的任一个中使用，选择性地提供读出的设定信息。
本发明的图像处理装置既可以是独立的装置，也可以是进行图像处理的模块。
发明的效果根据本发明的一个方面，不对原始的图像数据施加处理，每当播放图像时，能够容易地编辑用于对图像施加规定处理进行再现的规定处理。
根据本发明的一个方面，不对原始的图像数据施加处理，每当播放图像时，可从视觉上容易地识别用于对图像施加规定处理进行再现的规定处理的编辑，结果能够容易地进行编辑。
图1是用于说明本发明的图像处理装置的概念的图。
图2是用于说明本发明的图像处理装置的概念的图。
图3是用于说明本发明的图像处理装置的概念的图。
图4是应用本发明的图像处理装置的一个实施方式的结构的框图。
图5是表示图4的特征量抽出部的结构例的框图。
图6是说明图像信号的结构例的图。
图7是图4的同步检测部的结构例的框图。
图8是表示图4的遥控器的结构例的图。
图9是说明图4的遥控器的操作内容的图。
图10是说明图4的遥控器的操作的图。
图11是说明图4的图像处理装置的图像处理的流程图。
图12是说明图11的特征量抽出处理的流程图。
图13是说明图12的特征量抽出处理的图。
图14是说明图11的同步检测处理的流程图。
图15是说明图14的同步检测处理的图。
图16是说明通过图4的图像处理装置的图像处理而实现的动作的图。
图17是说明个人计算机的图。
附图标记说明11记录介质；12图像播放部；13图像处理装置；14遥控器；15显示部；41特征量抽出部；42同步检测部；43存储块；44受光部；45操作信息识别部；46设定信息决定部；47选择部；48延迟部；49反映部；50显示图像生成部。
具体实施例方式
以下，说明本发明的实施方式，下面举例说明本说明书中记载的发明与发明的实施方式的对应关系。本记载是为了确认支持本说明书中记载的发明的实施方式被记载在本说明书中。因此，即使有虽然记载在发明的实施方式中，但是没有作为与发明对应的实施方式而记载在这里的实施方式，也不意味该实施方式不与该发明对应。相反，即使实施方式作为与发明对应的部分而记载于此，也不意味该实施方式不与该发明以外的发明对应。
而且，本记载并不表示本说明书中记载的全部发明。换言之，本记载是本说明书中记载的发明，并不否定没有在本申请中请求的发明的存在，即，不否定将来进行分案或者通过补正而出现、追加的发明的存在。
即，本发明的一个方面的图像处理装置，包括特征量抽出单元(例如，图4的特征量抽出单元41)，其从图像抽出特征量；设定单元(例如图4的设定信息决定部46)，其设定用于对上述图像施加处理的设定信息；记录单元(例如图4特征量设定信息记录部61)，其对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步单元(例如图4的同步检测部42)，其使上述数据记录介质的特征量、与由上述特征量抽出单元抽出的特征量同步；读出单元(例如图4的特征量设定信息读出部63)，其在通过上述同步单元使上述数据记录介质的特征量与由上述特征量抽出单元抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映单元(例如图4的反映部49)，其根据由上述读出单元读出的设定信息，将处理反映到上述图像中；显示图像生成单元(例如图4的显示图像生成部50)，其在通过上述反映单元将处理反映到上述图像而得到的图像上，合成表示由上述读出单元读出的设定信息的对象，生成显示图像；以及选择单元(例如图4的选择部47)，其将由上述读出单元读出的设定信息选择性地提供给上述反映单元或者上述显示图像生成单元。
在上述特征量抽出单元(例如图4的特征量抽出单元41)中，可将构成上述图像的规定区域的像素的像素值的加法值作为特征量抽出。
还可包含操作单元(例如图4的遥控器14)，该操作单元进行用于指定对上述图像的处理的操作，在上述设定单元(例如图4的设定信息决定部46)中可根据上述操作单元的操作内容，设定用于对上述图像施加处理的设定信息，在上述记录单元中对应于上述图像的特征量将上述操作内容记录到上述数据记录介质中。
在上述设定信息中可包含表示自身是否为正在编辑的信息的信息。
在上述设定信息中包含有表示正在编辑的信息的情况下，在上述反映单元(例如图4的反映部49)中，可将上述图像原样提供给上述显示图像生成单元，在上述显示图像生成单元(例如图4的显示图像生成部50)中，可将表示根据由上述读出单元读出的设定信息而实施处理的范围的窗口作为对象合成在从上述反映单元提供的图像上，生成显示图像。
在上述设定信息中没有包含表示正在编辑的信息的情况下，在上述选择单元(例如图4的选择部47)中，可将由上述读出单元读出的设定信息选择性地仅提供给上述反映单元，在上述反映单元(例如图4的反映部49)中，可根据由上述读出单元读出的设定信息，将处理反映到上述图像中，上述显示图像生成单元将由上述反映单元把处理反映到上述图像而得到的图像作为显示图像。
在上述同步单元(例如图4的同步检测部42)中，包括检索位置特征量抽出单元(例如图7的检索位置特征量读出部104)，其对应于上述图像的特征量，从记录了用于对上述图像施加处理的设定信息的数据记录介质，作为检索位置特征量依次抽出上述特征量；以及比较单元(例如图4的比较部103)，其将由上述特征量抽出单元抽出的特征量与上述检索位置特征量依次进行比较，在上述比较结果一致的情况下，可视为对应于上述图像的特征量而记录了用于对上述图像施加处理的设定信息的数据记录介质的特征量、与由上述特征量抽出单元抽出的特征量同步。
本发明的一个方面的图像处理方法，包括特征量抽出步骤(例如图11的流程图中的步骤S3的处理)，从图像抽出特征量；设定步骤(例如图11的流程图中的步骤S5的处理)，设定用于对上述图像施加处理的设定信息；记录步骤(例如图11的流程图中的步骤S6的处理)，对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步步骤(例如图11的流程图中的步骤S7的处理)，使上述数据记录介质的特征量、与通过上述特征量抽出步骤的处理抽出的特征量同步；读出步骤(例如图11的流程图中的步骤S8的处理)，在通过上述同步步骤的处理使上述数据记录介质的特征量与利用上述特征量抽出步骤的处理抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映步骤(例如图11的流程图中的步骤S22的处理)，根据通过上述读出步骤的处理读出的设定信息，将处理反映到上述图像中；显示图像生成步骤(例如图11的流程图中的步骤S12的处理)，在通过上述反映步骤的处理将处理反映到上述图像而得到的图像上，合成表示通过上述读出步骤的处理读出的设定信息的对象，生成显示图像；以及选择步骤(例如图11的流程图中的步骤S9、S21的处理)，选择性地提供通过上述读出步骤的处理读出的设定信息，使得能够在上述反映步骤的处理或者上述显示图像生成步骤的处理中使用该设定信息。
首先，参照图1、图2，说明应用本发明的图像处理装置的概念。应用本发明的图像处理装置对于预先被记录的图像，实施由使用者所指示的处理并显示。此时，图像处理装置抽出图像的特征量，与特征量相对应地存储处理内容的信息。而且，在播放预先记录的图像时，图像处理装置读出该所存储的处理内容的信息，对图像实施处理进行显示。
更具体地说，图像处理装置2的动作大体分为记录模式和播放模式这两种模式。
在记录模式中，如图1所示，图像处理装置2将通过DVD播放器等从例如DVD(Digital Versatile Disc数字多功能光盘)等预先记录有包含运动图像的内容的记录介质1播放的图像，显示到显示部3上。在该状态下，通过由使用者等操作遥控器等，作为所希望的对图像的处理例如指示变焦、摇摄、倾斜等时，图像处理装置2生成与操作内容对应的设定信息，并且对图像实施与设定信息相对应的处理而显示在显示部3上。而且，图像处理装置2从图像抽出特征量，与抽出的特征量相对应地将设定信息存储到操作履历保存部4中。由于能够重复进行记录模式中的处理，因此能够对处理内容进行编辑。因而，可以说在记录模式中包含编辑模式。
接着，在播放模式中，如图2所示，图像处理装置2读出通过DVD播放器等从预先记录有包含运动图像的内容的记录介质1所播放的图像，并且抽出特征量。此时，图像处理装置2与从记录介质1读出的图像的特征量同步地读出与特征量相对应地记录在操作履历保存部4中的设定信息，并且根据读出的设定信息，对图像实施处理，显示到显示部3上。
而且，在记录模式(包含编辑模式)中，当在相同的定时重复进行多次编辑处理时，在播放模式中对表示多个编辑操作的信息进行可在视觉上识别的显示，一边观看表示所播放的图像上的编辑操作的信息，一边由使用者决定处理内容。
更具体地说，在对被提供了由图3的上段所示的图像PA的图像例如施加了多次变焦处理的情况下，图像处理装置2将多次变焦处理的操作保存到操作履历保存部4，如图3的中段所示，直到选择其中任一个为止，将被多次操作的变焦位置的信息作为窗口W1至W3重叠到图像PB上而显示在显示部3。通过该处理，使用者能够在视觉上识别自身所编辑的位置。而且，当选择了任意一个窗口时，如图3的下段所示，决定对图像所施加的处理，显示施加了相对应的变焦处理的图像。在图3的下段示出了选择窗口W2，将对变焦图像施加了处理的图像PC显示在显示部3上。另外，此时，在操作履历保存部4中只剩下与对应于所决定的处理的编辑操作相对应的设定信息。
通过以上动作，图像处理装置2能够只存储针对预先记录的图像的处理内容，能够不记录作为处理结果的图像而可重复播放作为处理结果的图像。作为结果，对于COPY ONCE等复制次数有限制的预先记录的图像，可以重复进行施加各种图像处理的加工处理。另外，使用者可以从视觉上识别多个编辑操作，能够容易地实现所希望的编辑操作。
下面，详细说明参照图1、图2所说明的图像处理装置2。
图4是表示与图1、图2的图像处理装置对应的图像处理装置13的一个实施方式的结构的图。
图像播放部12对以由预先规定的形式被编码的状态记录到与图1、图2的记录介质1对应的记录介质11上的图像进行解码，依次作为图像提供给特征量抽出部41和延迟部48。
特征量抽出部41抽出从图像播放部12依次提供的图像的特征量，提供给同步检测部42、以及存储块43的特征量设定信息记录部61。此外，参照图5详细说明特征量抽出部41的结构。
遥控器14由键、按钮等构成，如图1、图2所示，在使用者对所希望的图像指示处理的内容时被操作，响应于使用者的操作而产生操作信号，并且响应于产生的操作信号而生成由红外线等构成的发光图案，向图像处理装置13的受光部44发光。此外，对于遥控器14，参照图8在后面详细叙述。
受光部44根据遥控器14的发光图案，转换为遥控器14的操作信号，提供给操作信息识别部45。操作信息识别部45根据从受光部44提供过来的操作信号，识别与对使用者所希望的图像的处理相对应的操作信息，将作为识别结果的操作信号提供给设定信息决定部46。此外，存储块43也可以根据来自遥控器14的操作信息来控制接通或者断开，因此，在操作信息识别部45中，在识别出控制存储块43的接通或者断开的操作信息的情况下，操作信息识别部45将存储块43的动作控制为接通或者断开。另外，由于操作信息中还包含有选择根据上述操作信号而生成的窗口的操作，操作信息识别部45在是选择窗口的操作的情况下，产生通知该意思的信号，提供给选择部47和显示图像生成部50。
设定信息决定部46根据从操作信息识别部45提供过来的操作信息，对于后述的反映部49，决定用于指示对图像的处理内容的设定信息，并提供给特征量设定信息记录部61和选择部47。设定信息决定部46从操作信息识别部45选择上述多个窗口中的一个窗口，在提供了表示选择以相同的特征量定时施加的多个处理中的任意一个的信息的情况下，通知存储部43的特征量设定信息记录部61使得删除与没有被选择的处理相对应的设定信息。
存储块43的特征量设定信息记录部61将从特征量抽出部41提供过来的特征量与从设定信息决定部46提供过来的设定信息相对应地存储到特征量设定信息存储部62(与图1、图2的操作履历保存部4相对应的单元)中。另外，特征量设定信息记录部61通过选择上述多个窗口中的一个窗口，选择以相同的特征量的定时施加的多个处理中的任意一个，从而在通知为删除与没有被选择的处理相对应的设定信息的情况下，从特征量设定信息存储部62删除相对应的设定信息。
同步检测部42检索存储在特征量设定信息存储部62中的特征量(后述的检索位置特征量)中的从特征量抽出部41提供过来的由图像播放部12正在播放的图像的特征量(后述的播放位置特征量)，当检测出相同的特征量时，作为图像的同步位置将检测结果提供给特征量设定信息读出部63。此外，对于同步检测部42的结构，参照图7在后面详细叙述。
特征量设定信息读出部63，当从同步检测部42获取作为同步位置检测出的特征量(检索位置特征量)时，对应于该特征量读出特征量设定信息存储部62中存储的设定信息，提供给选择部47。在与作为同步位置而检测出的特征量对应的状态下存储了多个设定信息的情况下，特征量设定信息读出部63读出其全部的设定信息。即，在相同的定时指定多个处理而作为操作履历残留的情况下，特征量设定信息读出部63读出全部设定信息，并提供给选择部47。
选择部47在从设定信息决定部46提供过来设定信息的情况下，假设在相同的定时从特征量设定信息读出部63提供设定信息，也将来自设定信息决定部46的设定信息提供给反映部49。另外，选择部47在从设定信息决定部46没有提供设定信息、而从特征量设定信息读出部63提供了设定信息的情况下，将从特征量设定信息读出部63提供的设定信息提供给反映部49。
在没有通知从操作信息识别部45最终决定对图像施加的处理的情况下，或者设定信息中没有包含表示自身最终决定的信息的情况下，选择部47在从设定信息决定部46提供过来设定信息时，不将设定信息提供给反映部49而提供给显示图像生成部50。而且，选择部47在通知了从操作信息识别部45最终决定对图像施加的处理的情况下，由于从设定信息决定部46仅提供过来与所决定的处理相对应的设定信息，因此将该设定信息提供给反映部49，不提供给显示图像生成部50。
延迟部48以特征量抽出部41、同步检测部42、存储块43、以及选择部47的处理中的延迟时间大小，临时存储从图像播放部12提供过来的图像，并输出到反映部49。反映部49在从选择部47提供过来设定信息的情况下，反映针对从延迟部48提供过来的图像的处理，并提供给显示图像生成部50。另外，反映部49在从选择部47没有提供设定信息的情况下，将从延迟部48提供过来的图像原样提供给显示图像生成部50。
显示图像生成部50根据从选择部47提供过来的设定信息，对于从反映部49提供过来的图像，施加处理并显示在显示部15上。具体地说，在从反映部49提供图像、从选择部47什么都没有提供的情况下，显示图像生成部50将从反映部49提供过来的图像原样显示在显示部15上。另外，在从反映部49提供图像、从选择部47提供过来设定信息的情况下，显示图像生成部50根据包含在设定信息中的例如变焦位置等信息，如图3所示，重叠在来自反映部49的图像而显示窗口，生成OSD(On Screen Display屏幕视控系统)形式的显示画面，显示在显示部15上。另外，在显示OSD形式的图像时，在从操作信息识别部45提供过来选择窗口的操作信息的情况下，显示图像生成部50以OSD形式进行显示使得能够识别所选择的窗口。
下面，参照图5，说明特征量抽出部41的详细的结构。
DFF(D型触发器)81存储之前的输入信号，在输入来自没有图示的时钟信号发生器的时钟信号(clk)的定时，输出到加法器82中。另外，DFF81在输入信号为图像信号中的图像数据区域外的信号时，输入复位信号并消除输入信号从而输出。即，如图6所示，由于图像信号由同步数据区域和图像数据区域构成，因此根据从作为图中的水平方向的采样和垂直方向的线的圆圈的原点的帧开始点S依次输入的位置信息，在图像数据区域外的同步数据的情况下输入复位信号，不将构成同步数据的信号输出到加法器82中。即，DFF81仅将构成图像的输入信号中的图像数据区域的数据与时钟信号同步地提供给加法器82。
加法器82将从DFF81提供过来的信号和从DFF83提供过来的信号相加，并输出到DFF83。更详细地说，加法器82在从DFF81提供过来的信号和从DFF83提供过来的信号的相加结果中，抽出下位的8位而提供给DFF83。
DFF83在输入从没有图示的时钟发生器产生的时钟信号(clk)的定时，将从加法器82提供过来的信号提供给加法器82以及输出部84。另外，DFF83在输入帧开始点(图中的水平方向的采样和垂直方向的线的圆圈的原点)S的信号时，输入复位信号并消除输入信号而输出。即，DFF83在构成图像的输入信号中，把通过加法器82仅将图像数据区域的数据进行累加的值提供给输出部84。
输出部84在从DFF83提供一个帧(或者一个场)的值时，将该值作为帧(或者该场)的图像的特征量而输出。即，输出部84把由加法器82仅将图像数据区域的数据进行累加的值的下位的8位，作为该帧(或者该场)的特征量而输出。此外，特征量只要是能够以一个帧单位识别图像的信息即可，因此并不限于仅将图像数据区域的数据(仅将像素值)进行累加的值的下位的8位，例如，也可以直接使用仅对图像数据区域的中央附近的规定区域内的像素值的相加结果。
下面，参照图7说明同步检测部42的详细结构。
特征量缓冲器101-1至101-3临时存储提供过来的特征量，并且将到此为止存储的特征量依次输出到播放位置特征量生成部102以及后级的特征量缓冲器101-2、101-3。此外，特征量缓冲器101-3由于不存在后级的特征量缓冲器101，因此仅输出到播放位置特征量生成部102。播放位置特征量生成部102依次取得包含从特征量缓冲器101-1至101-3提供过来的最新特征量的过去三个帧的特征量，将其综合而作为播放位置信息(播放位置特征量)生成，并输出到比较部103。即，播放位置特征量生成部102作为用于确定播放位置的特征量，使用从最新的帧到三个帧前为止的总计4个特征量，生成播放位置特征量。
检索位置特征量读出部104依次读出每4个连续的存储在特征量设定信息存储部62中的特征量，作为检索位置特征量提供给比较部103以及检测部105。比较部103比较从播放位置特征量生成部102提供过来的播放位置特征量、以及从检索位置特征量读出部104依次提供过来的检索位置特征量。比较部103在检索到与播放位置特征量一致的检索位置特征量的情况下，看作检测出同步，将作为检测结果检测出同步的情况通知给检测部105。检测部105在视作从比较部103检测出同步的定时，将从检索位置特征量读出部104提供过来的检索位置特征量作为同步检测结果而输出。
下面，参照图8详细说明遥控器14。
在切换存储块43的接通断开时操作遥控器14的按钮121。按钮122是决定按钮，通过操作上述窗口来决定变焦位置以及变焦倍率时，操作按钮122。按钮123、124是选择按钮，是在从多个窗口中切换1个窗口时被操作的按钮。变焦环125能够在图中的箭头AB方向上进行旋转操作，能够设定与旋转相应的变焦倍率。变焦位置杆126由杆型的操作按钮构成，在图像中使窗口的位置、即变焦位置进行移动时被操作。
接着，参照图9、图10，说明伴随遥控器14的操作的具体的处理内容。
具体地说如图9所示，通过遥控器14对输入图像QA设定变焦处理，没有决定而是正在编辑时，显示窗口F1(实线)。在该状态下，通过操作变焦位置杆126，能够对应于操作而移动窗口F1、例如可移动到窗口F2(点划线)。另外，当操作变焦环125时，对应于变焦倍率而变更窗口F1的大小，例如显示为如窗口F3(虚线)。此外，在各窗口F1至F3中，为了容易识别中央位置，在水平方向和垂直方向的中心位置上附有刻度。
而且，在确定对图像施加的处理时，通过操作按钮122，在显示部15中显示如图9的下段所示的图像QC。
在以上的例子中，说明了作为操作所施加的处理内容为1个的情况、即窗口为1个的情况，但是例如在多个的情况下，成为如下的处理。
即，如图10的中央图像P1所示，在显示了窗口R1至R4(窗口R1为实线、窗口R2为虚线、窗口R3为点划线、窗口R4为双点划线)的情况下，即在设定了对4个图像的处理的情况下，以粗线表示所选择的窗口。在图像P1中，以粗线示出了窗口R1。另外，在各窗口R1至R4中，显示为记录1至4，示出了设定基于所对应的操作的设定信息的情形。
在图像P1的状态下，当操作按钮123时，如图像P2所示，用粗线显示窗口R2，表示选择了窗口R2。而且，在图像P2的状态下，当操作按钮123时，如图像P3所示，以粗实线显示窗口R3，表示选择了窗口R3。而且，在图像P3的状态下，当操作按钮123时，如图像P4所示，以粗线显示窗口R4，表示选择了窗口R4。另外，在图像P4的状态下，当操作按钮123时，如图像P1所示，以粗线显示窗口R1，表示选择了窗口R1。
在图像P1的状态下，当操作按钮124时，如图像P4所示，以粗线显示窗口R4，表示选择了窗口R4。而且，在图像P4的状态下，当操作按钮124时，如图像P3所示，以粗线显示窗口P3，表示选择了窗口R3。另外，在图像P3的状态下，当操作按钮124时，如图像P2所示，以粗线显示窗口R2，表示选择了窗口R2。而且，在图像P2的状态下，当操作按钮124时，如图像P1所示，以粗线显示窗口R1，表示选择了窗口R1。
在图像P1的状态下，当操作按钮122时，根据窗口R1的设定信息，图像P1作为变焦图像被处理，显示为如图像P5所示。
另外，在图像P1的状态下，当通过操作变焦环125和变焦位置杆126而操作与窗口R1对应的设定信息时，如图像P6所示，对应于操作从窗口R1变更为窗口R1’进行显示。
而且，在图像P6中，在选择了窗口R1’的状态下，当操作按钮122时决定窗口R1’的设定信息，根据窗口R1’的设定信息来处理图像P1，显示为如图像P7所示。
通过以上处理，由于使用者能够从视觉上识别自己对图像施加处理的变焦位置和变焦倍率，因此容易确认是否是作为编辑结果正在显像的图像，所以能够容易地实现所希望的编辑操作。
下面，参照图11的流程图，说明图4的图像处理装置13的图像处理。此外，在以后的说明中，前提是通过操作遥控器14的按钮121，将存储块43是控制成接通的状态。
在步骤S1中，延迟部48判断是否从图像播放部12提供了新的图像，直到提供过来新的图像为止，重复该处理。
例如，在图像播放部12读出记录在记录介质11中的图像、并由延迟部48判断为提供过来新的图像的情况下，在步骤S2中，延迟部48为了将提供过来的图像临时延迟1个帧而进行存储。此外，以后以1帧为单位处理图像的情况进行说明，当然，图像并不限于1帧单位，例如也可以以1场为单位进行处理。
在步骤S3中，特征量抽出部41执行特征量抽出处理，抽出从图像播放部12提供过来的1个帧的图像的特征量。即，延迟部48为了将新的图像延迟1个帧而进行存储时，同样地，由于1个帧的图像还被提供给特征量抽出部41，因此在相同的定时，相同的图像一方面为了延迟而被临时存储，另一方面被抽出特征量。
在此，参照图12的流程图说明特征量抽出处理。
在步骤S31中，DFF83由帧开始点S(图6)被复位。
在步骤S32中选择未处理的像素，在步骤S33中判断是否为图像数据区域外。更详细地说，例如按光栅扫描的顺序，从1个帧的图像中依次读出未处理的像素，判断是否为图像数据区域外。
如图6所示，在最初的像素(帧开始点S的像素)的情况下，由于包含在同步数据中，因此是图像数据区域外，所以在步骤S35中DFF81被复位，作为像素值输出0。另一方面，选择按光栅扫描顺序成为处理对象的像素，例如在图像数据内的情况下，在步骤S34中，DFF81在时钟信号的发生定时将像素值提供给加法器82。
在步骤S36中，加法器82将输入的像素值和从DFF83提供过来的信号相加并提供给DFF83。
在步骤S37中，DFF83将在时钟信号的发生定时从加法器82提供过来的相加结果的下8位返给加法器82。此时，DFF83虽然也将相加结果提供给输出部84，但是输出部84不输出相加结果。
在步骤S38中，判断是否存在未处理的像素，在存在未处理的像素的情况下，该处理返回步骤S32。即，直到1帧的像素全部被处理为止，重复步骤S32至S38的处理。然后，在判断为1帧的全部像素被处理的情况下，在步骤S39中，输出部84将从DFF83提供过来的相加结果、即属于图像数据区域的像素值的累加结果的下8位作为1帧的图像的特征量而输出。
通过以上的处理，从1帧的图像信号，作为该帧的特征量而抽出图像数据区域的全部的像素值的累加结果的下位的8位。
在此，返回图11的流程图的说明。
在步骤S4中，操作信息识别部45判断是否由使用者操作遥控器14而指示了图像的处理。例如，一边观看显示在显示部15上的图像，一边由使用者指示了2倍变焦处理的情况下，由受光部44受光遥控器14的发光图案，将基于从受光部44受光的发光图案的信号提供给操作信息识别部45，由此，操作信息识别部45判断为进行了操作，其处理进入步骤S5。
在步骤S5中，操作信息识别部45根据从受光部44提供的信号，识别操作信息，并作为识别结果提供给设定信息决定部46。设定信息决定部46根据操作信息，决定对反映部49的用于对图像实施处理的设定信息，并提供给特征量设定信息记录部61和选择部47。即，在当前情况下，由于对图像实施了2倍的变焦处理，因此，决定用于对反映部49发出实施2倍变焦处理的指示的设定信息，提供给特征量设定信息记录部61和选择部47。
在步骤S6中，特征量设定信息记录部61将从特征量抽出部41提供过来的特征量记录到特征量设定信息存储部62，并且对应于该特征量将从设定信息决定部46提供过来的设定信息记录到特征量设定信息存储部62，由此存储特征量和设定信息。更详细地说，如图13所示，在将特征量C1记录到规定地址A中的情况下，在该m倍的地址、即地址m×A中存储与特征量C1相对应的设定信息E1。此外，在图13中，示出了将特征量设定信息存储部62内部的特征量和设定信息进行存储的地址的配置。
以后，特征量设定信息记录部61同样地将特征量C2存储到地址B中时，将对应的设定信息E2存储到m×B中，而且，将特征量C3存储到地址C中时，将对应的设定信息E3存储到m×C中。这样，通过对应于特征量地存储设定信息，当决定特征量时，能够根据特征量的地址确定设定信息的地址，因此能够平稳地进行设定信息存储部62中的每个特征量的设定信息的检索。此外，关于连续进行相同的处理而指定的期间，连续记录特征量和设定信息。即，例如，图13中的特征量C1至C3，哪个都不限于1个帧的特征量，而连续记录有指定了连续处理的期间的帧数的特征量。另外，同样地，对于设定信息，例如图13中的设定信息E1至E3，从与特征量C1至C3相对应的地址，哪个都不限于1个帧的特征量，而连续记录有指定了连续处理的期间的帧数的设定信息。
在步骤S7中，同步检测部42执行同步检测处理，检测播放中的图像的特征量、和用于对图像实施处理的设定信息相对应的特征量之间的同步。
在此，参照图14的流程图，说明同步检测处理。
在步骤S41中，同步检测部42的播放位置特征量生成部102判断是否由特征量抽出部41提供过来特征量，直到提供过来为止重复该处理。例如，在通过步骤S3的特征量抽出处理来抽出特征量、从特征量抽出部41提供了当前正在播放的图像的特征量的情况下，该处理进入步骤S42。
在步骤S42中，检索位置特征量读出部104将用于对检索位置的特征量进行计数的计数器i初始化为0。
在步骤S43中，播放位置特征量生成部102获取被提供过来的特征量，并且，获取到此为止存储在特征量缓冲器101-1至101-3中的特征量。即，特征量缓冲器101-1在新提供过来特征量时，将到此为止存储的特征量提供给播放位置特征量生成部102和特征量缓冲器101-2。同样地，特征量缓冲器101-2存储提供过来的特征量，并且将到此为止所存储的特征量提供给播放位置特征量生成部102和特征量缓冲器101-3。而且，特征量缓冲器101-3存储从特征量缓冲器101-2提供过来的特征量，并且，将到此为止所存储的特征量提供给播放位置特征量生成部102。作为结果，在播放位置特征量生成部102中被提供最新的帧特征量和到分别存储在特征量缓冲器101-1至101-3中的过去3个帧的特征量。因此，播放位置特征量生成部102将包含正在播放的帧的4个帧的特征量作为播放位置特征量提供给比较部103。
在步骤S44中，检索位置特征量读出部104，作为检索位置特征量读出从存储在特征量设定信息存储部62中的特征量的开头位置起第i个开始连续的4个帧的特征量，提供给读出比较部103和检测部105。
在步骤S45中，比较部103比较由从播放位置特征量生成部102提供过来的正在播放的帧和过去三个帧的总计4个特征量构成的播放位置特征量、和从检索位置特征量读出部104提供过来的由从存储在特征量设定信息存储部62中的特征量的开头位置起第i个开始连续的4个帧的特征量构成的检索位置特征量。
在步骤S46中，比较部103根据比较结果判断是否一致。在步骤S46中，例如在判断为不一致的情况下，在步骤S48中，检索位置特征量读出部104关于存储在特征量设定信息存储部62中的全部特征量，判断是否与播放位置特征量进行了比较。例如，在步骤S48中，在判断为没有与全部的特征量进行了比较的情况下，在步骤S49中，检索位置特征量读出部104使计数器i增加1，该处理返回步骤S44。即，通过该处理，直到播放位置特征量和检索位置特征量不一致且与存储的全部特征量进行比较为止，重复步骤S44至S46、S48、S49的处理，依次错开一个帧间隔，并且重复进行由连续的4个帧的特征量构成的检索位置特征量和播放位置特征量之间的比较。
即，例如如图15的右上部所示，检索位置特征量是从特征量抽出部41依次存储的特征量中的在当前情况下连续的4个特征量的块。此外，在图15中，图中的纵长长方形形状的组表示一个帧的特征量，斜线部分G1、G2表示配置有相同的连续的特征量。另外，如图15的右下部所示，播放位置特征量是包含从特征量抽出部41提供过来的正在播放的特征量的连续的4个帧的特征量的块。
例如，如图15所示，在播放位置特征量G2所示的情况下，当与检索位置特征量G0比较时，由于不同，因此不能作为同步位置而检测。而且，由于没有与存储的全部特征量进行比较，因此使计数器i增加1，将检索位置特征量G0’和播放位置特征量G2进行比较。这样，检索位置特征量在图中的右方向上错开一个帧的间隔，并且重复进行与播放位置特征量G2的比较。
在步骤S46中，例如，在将播放位置特征量G2和检索位置特征量G1进行比较的情况下，检索位置特征量G1和播放位置特征量G2成为相同的结构，因此判断为一致，在步骤S47中，比较部103将一致的情况通知给检测部105。检测部105根据该通知，将当前从检索位置特征量读出部104提供的检索位置特征量的开头位置、即从开头位置起第i个特征量作为同步位置信息提供给特征量设定信息读出部63。
另一方面，在步骤S48中，判断为与存储的全部检索位置特征量的比较结束的情况下，在步骤S50中，检测部105输出表示不存在与播放位置特征量一致的检索位置特征量而不同步的信息。
通过以上的处理，可以使存储在特征量设定信息存储部62中的特征量和正在播放的图像的特征量同步。即，为了降低通过仅将正在播放的帧的特征量与存储在特征量设定信息存储部62中的特征量进行比较而使特征量偶然一致、由此在错误的位置上检测出同步的可能性，同步检测部42不仅利用当前播放的帧的特征量，还利用包含播放的帧的过去三个帧的4个帧进行比较，由此正确地实施同步检测。另外，通过这样使用特征量，可以代替各帧单位中的时间代码而设定特征量，不必使用时间代码而可以进行帧单位中的同步检测。
在此，返回图11的流程图的说明。
在步骤S8中，特征量设定信息读出部63根据同步位置信息，读出相对应地存储在特征量设定信息存储部62中的全部的设定信息，提供给选择部47。
在步骤S9中，选择部47将从特征量设定信息读出部63提供过来的设定信息提供给显示图像生成部50。更详细地说，在该时刻，在设定信息中不包含表示自身所决定的内容的信息，即不包含表示不是正在编辑的内容的信息，另外，由于也没有从操作信息识别部45提供决定任何设定信息的信息，因此，选择部47不将从特征量设定信息读出部62提供过来的设定信息提供给反映部49，而是提供给显示图像生成部50。
在步骤S10中，显示图像生成部50根据从选择部47提供过来的设定信息，生成表示处理的图像。即，例如在传送过来4个设定信息的情况下，如图10的图像P1所示生成窗口R1至R4。
在步骤S11中，由于没有从选择部47提供设定信息，因此反映部49将存储在延迟部48中的图像原样提供给显示图像生成部50。
在步骤S12中，显示图像生成部50在从反映部49提供过来的图像上，以OSD的形式合成由步骤S9的处理生成的窗口从而生成显示图像，在显示部15中显示。即，例如在向延迟部48提供由图10的图像P1所表示的星星的图像的情况下，在图像P1上进行合成使窗口R1至R4为OSD形式的显示图像，并显示在显示部15上。
在步骤S13中，判断是否已经指示结束图像处理，在指示了结束的情况下结束该处理。另一方面，在没有指示结束的情况下，该处理返回步骤S1。
另一方面，在步骤S4中，在判断为被操作的情况下，该处理进入步骤S14，同步检测部42执行同步检测处理，将同步位置信息提供给特征量设定信息读出部63。此外，关于同步检测处理，由于与参照图14的流程图说明的处理相同，因此省略其说明。
在步骤S15中，特征量设定信息读出部63判断与正在播放的帧的播放位置特征量一致的特征量是否存储在特征量设定信息存储部62中。例如，在通过图14的流程图的步骤S47的处理而提供过来同步位置信息的情况下，与正在播放的帧的播放位置特征量一致的特征量被存储到特征量设定信息存储部62，因此该处理进入步骤S16。
在步骤S16中，特征量设定信息读出部63判断与同步的特征量相对应的设定信息是否存储在特征量设定信息存储部62中。即，特征量在没有设定信息的状态下也能存储在特征量设定信息存储部62中，因此通过该处理，判断有无与特征量相对应的设定信息。
在步骤S16中，例如在判断为没有存储与特征量相对应的设定信息的情况下，在步骤S17中，特征量设定信息读出部63不对选择部47提供设定信息。通过该处理，选择部47成为从设定信息决定部46和特征量设定信息读出部63的任意一个都没有提供设定信息的状态，因此不对反映部49提供指定处理的设定信息。另外，选择部47也不对显示图像生成部50提供设定信息。
作为结果，在步骤S18中，从反映部49将临时存储到延迟部48中的1帧的图像原样提供给显示图像生成部50，而且也不生成窗口，所以临时存储在延迟部48中的1帧的图像原样显示在显示部15上。
另一方面，在步骤S16中，例如在判断为存储有与特征量相对应的设定信息的情况下，在步骤S19中，特征量设定信息读出部63从特征量设定信息存储部62读出对应于同步位置信息的特征量而存储的设定信息，并提供给选择部47。
在步骤S20，选择部47判断是否正在编辑，即判断是否正在进行决定设定信息的处理。更具体地说，选择部47判断是否包含表示已指示了包含在设定信息中的决定的信息、即是否包含表示不是正在编辑的信息。在步骤S20中，在判断为包含表示设定信息已指示了决定的信息、即不是正在编辑的情况下，该处理进入步骤S21。
在步骤S21中，选择部47将从特征量设定信息读出部63提供过来的已指示了决定的设定信息提供给反映部49。
在步骤S22中，反映部49根据从选择部47提供过来的设定信息，对存储在延迟部48中的图像施加处理，反映与来自使用者的指示内容相应的处理，并提供给显示图像生成部50。
在步骤S23中，由于从选择部47没有提供设定信息，因此显示图像生成部50将从反映部49提供过来的图像原样显示在显示部15上。
即，关于已指示了决定的设定信息，将通过反映部49对由延迟部48延迟了的图像反映基于设定信息的处理所得到的图像显示在显示部15上。
在步骤S20中，在正在编辑、即设定信息中没有包含指示决定的信息的情况下，在步骤S24中，选择部47判断是否从操作信息识别部45提供了任意一个决定设定信息的操作信息，在没有提供的情况下，该处理进入步骤S9。即，显示OSD形式的图像。
另一方面，在步骤S24中，在提供了任意一个决定设定信息的操作信息的情况下，在步骤S25中，设定信息决定部46根据决定的操作信息，留下已指示了决定的设定信息，指示特征量设定信息记录部61使得删除除此之外的设定信息。特征量设定信息化记录部61在特征量设定信息存储部62中留下对应于该时刻的定时的特征量而存储的设定信息之中的指示了决定的设定信息，删除除此之外的设定信息。然后，处理进入步骤S21。
通过以上处理，可进行如图16所示的处理。
即，在以图16中的状态A表示的初始状态下，在时刻t0至t1播放记录在记录介质11中的视频时，在时刻t11至t12的定时操作遥控器14，当重复步骤S1至S13的处理而指示变焦处理时，在正在操作的时刻T0，如图16的状态A所示的右图的图像P11所示那样，使通过时刻t11至时刻t12的操作所指示的变焦处理的设定信息相对应的窗口R11(实线)与输入的图像重叠地生成OSD形式的显示图像并显示在显示部15上。
之后，在时刻t1至t2的定时进行快进，在时刻t2至t3正在播放的时刻t13至t14，操作遥控器14。
在该处理之后，在时刻t3，直到时刻t21为止指示倒退，在以图16的状态B所示的状态下，之后当从时刻t21至t22进行播放时，在时刻t11至t12，同步地读出以状态A由遥控器14指示的设定信息，因此在时刻T1，如图中右部的图像P12所示，显示窗口R11。而且，在时刻t31至t32的期间，操作遥控器14，当重复步骤S1至S13的处理而指示变焦处理时，存储设定信息，由此显示窗口R12(虚线)。
在该处理之后，在时刻t22，直到时刻t41为止指示倒退，在以图16的状态C所示的状态下，之后当从时刻t41至t42进行播放时，在时刻t51至t52，同步地读出由遥控器14指示的设定信息，但是在时刻T2，窗口R12是从时刻t41至t43的显示，因此没有显示，如图中的右部的图像P13所示显示窗口R11。而且，在时刻t51至t52的期间操作遥控器14，当重复步骤S1至S13的处理而指示变焦处理时，通过存储设定信息，显示窗口R13(点划线)。
然后，在时刻t42，直到时刻t1为止倒退，在以图16的状态D所示的状态下，当在时刻t1至t3播放整个视频的情况下，在一律没有遥控器14的操作时，重复进行步骤S1至S4、步骤S14至S16、S19、S20、S24，S9至S13的处理，在时刻t61至t62，在状态A的t21至t22的期间，同步地读出由遥控器14指示的设定信息，因此在时刻T3，如图中的右部图像P14所示，显示窗口R11(实线)。另外，在时刻t71至t72，在状态B的t31至t32的期间，同步地读出由遥控器14所指示的设定信息，因此在时刻T3如图中右部的图像P14所示，显示窗口R2(虚线)。而且，在时刻t81至t82，在状态C的t41至t42的期间，同步地读出由遥控器14指定的设定信息，因此在时刻T3如图中右部的图像P14所示，显示窗口R13(点划线)。另外，在时刻t63至t64，在状态A的t13至t14的期间，同步地读出由遥控器14指示的设定信息。此外，在时刻T3，由于不包含时刻t63至t64的期间，因此没有显示在图中右部的图像P14上。
在状态D之后，操作遥控器14，例如当选择窗口R12时，重复进行步骤S1至S4、S14至S16、S19、S20、S24、S25、S22、S23的处理，在图16的状态E所示的状态下，直到时刻t1为止倒退，在时刻t1至t3播放整个视频时，在之后的时刻t61至t71的期间，在状态A的时刻t11至t12，同步地读出由遥控器14指示的设定信息，在时刻t71至t72的期间，不是在状态A的从时刻t11至t12所指示的色定信息(图中的斜线部)，在状态B的时刻t31至t32，同步地读出由遥控器14指示的设定信息，在时刻t72至t62的期间，在状态A的时刻t11至12，同步地读出由遥控器14指示的设定信息。
因此，在时刻T3，如状态E的图中右部的图像P15所示，在显示部15上显示将窗口R12进行了变焦处理的图像。
此外，在图16中，在状态A中上段示出了第1个视频的播放定时，下段示出了遥控器14的操作定时。另外，在图16的状态B中，上段示出了第2个视频的播放定时，中段示出了状态A中的根据遥控器14的操作而设定的设定信息被同步反映的定时，下段示出了遥控器14的操作定时。而且，在图16的状态C中，上段示出了第3个视频的播放定时，从上开始第2行示出了状态A中的根据遥控器14的操作而设定的设定信息被同步反映的定时，从上开始第3行示出了状态B中的根据遥控器14的操作而设定的设定信息被同步反映的定时，下段示出了遥控器14的操作定时。另外，在图16的状态D，上段示出了第4个视频的播放定时，从上开始第2行示出了状态A中的根据遥控器14的操作而设定的设定信息被同步反映的定时，从上开始第3行示出了状态B中的根据遥控器14的操作而设定的设定信息被同步反映的定时，从上开始第4行示出了状态C中的根据遥控器14的操作而设定的设定信息被同步反映的定时。而且，在图16的状态E是在状态D进行了决定操作后的处理，上段示出了第5个视频的播放定时，从上开始第2行示出了状态A中的根据遥控器14的操作而设定的设定信息被同步反映的定时，从上开始第3行示出了状态B中的根据遥控器14的操作而设定的设定信息被同步反映的定时。
根据以上，关于对图像施加的多个处理，通过在相同的图像内作为窗口进行显示，从而可同时识别多个处理，能够在视觉上容易进行这些比较，所以能够容易地实现使用者所希望的编辑。
此外，以上说明了使用1帧的图像信号中的图像数据区域的像素值的累计(積算)值的例子，但也可以是除此之外的特征量，例如运动向量(全画面运动和局部运动)、表示特定的波形图案出现过多少次的值、缩小图像中的像素值的累计值、图像的特定部分的像素值的累计值、多个帧的这些值、或者这些多个特征量的组合等。
另外，关于设定信息，以变焦倍率为例进行了说明，但可以是除此之外的信息，例如也可以使用变焦位置(中心位置)、或者变焦位置和变焦倍率的组合等变焦参数、亮度、对比度、伽马校正、DRC(Digital Reality Creation数字现实创造)调色值(分辨率设定值、以及噪声设定值)等画质设定参数、或者音量、声音切换(使用语言的切换)等声音参数等。
而且，以上，作为表示变焦位置和变焦倍率的设定信息的例子，说明了显示窗口的例子，但是在图像内只要能够在视觉上显示设定信息即可，因此对于其他图像的处理，也可以将已知处理内容的对象显示在图像内。
如上所述，根据本发明的一个方面的图像处理装置和方法、以及程序，从图像抽出特征量，设定用于对上述图像施加处理的设定信息，对应于上述图像的特征量将上述设定信息记录到数据记录介质中，使上述数据记录介质的特征量与抽出的特征量同步，在上述数据记录介质的特征量与抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息，根据读出的设定信息，将处理反映到上述图像，将表示读出的设定信息的对象合成在使上述图像反映了处理的图像上从而生成显示图像，选择性地提供读出的设定信息，使得为了反映上述图像、或者为了生成上述显示图像而使用该设定信息。
作为结果，不对原始的图像数据施加处理，而每当播放图像时可容易地进行用于对图像施加规定处理进行再现的规定处理的编辑。另外，不对原始的图像数据施加处理，而每当播放图像时，可从视觉上容易地识别用于对图像施加规定的处理进行再现的规定处理的编辑，结果能够容易地进行编辑。
上述的一系列处理可以利用硬件执行，但也可以利用软件执行。在利用软件执行一系列的处理的情况下，将构成该软件的程序从记录介质安装到组装在专用的硬件中的计算机、或者可通过安装各种程序而执行各种功能的例如通用的个人计算机等中。
图17示出了通过软件来实现图4的图像处理装置13的电气内部结构的情况下的个人计算机的一个实施方式的结构。个人计算机的CPU1001控制个人计算机的整体的动作。另外，CPU1001在经过总线1004以及输入输出接口1005由用户利用由键盘、鼠标等构成的输入部1006输入指令时，与此对应地执行保存在ROM(Read Only Memory只读存储器)1002中的程序。或者，CPU1001还将从与驱动器1010连接的包含磁盘、光盘、磁光盘、或者半导体存储器的可移动介质1021读出并安装在存储部1008中的程序，下载到RAM(Random Access Memory随机存取存储器)1003中并执行。由此，利用软件实现上述图4的图像处理装置13的功能。而且，CPU1001控制通信部1009从而与外部进行通信，执行数据的交换。
如图17所示，记录有程序的记录介质不仅由与计算机分开的、为了向用户提供程序而配置的、包含记录有程序的磁盘(包含软盘)、光盘(包含CD-ROM(Compact Disc-Read Only Memory光盘只读存储器)、DVD(Digital Versatile Disk多功能数字光盘))、磁光盘(包含MD(Mini-Disc迷你盘))、或者半导体存储器的可移动介质1021等组成的封装介质构成，而且由在预先组装在计算机中的状态下提供给用户的、在记录有程序的ROM1002、存储部1008中包含的硬盘等构成。
此外，在本说明书中，记述记录在记录介质中的程序的步骤当然包含沿着记载的顺序按照时间序列进行的处理，还包含未必按照时间序列处理、而并列或者单独执行的处理。
权利要求
1.一种图像处理装置，包括特征量抽出单元，其从图像抽出特征量；设定单元，其设定用于对上述图像施加处理的设定信息；记录单元，其对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步单元，其使上述数据记录介质的特征量、与由上述特征量抽出单元抽出的特征量同步；读出单元，其在通过上述同步单元使上述数据记录介质的特征量与由上述特征量抽出单元抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映单元，其根据由上述读出单元读出的设定信息，将处理反映到上述图像中；显示图像生成单元，其在通过上述反映单元将处理反映到上述图像而得到的图像上，合成表示由上述读出单元读出的设定信息的对象，生成显示图像；以及选择单元，其将由上述读出单元读出的设定信息选择性地提供给上述反映单元或者上述显示图像生成单元。
2.根据权利要求1所述的图像处理装置，其特征在于，上述特征量抽出单元将构成上述图像的规定区域的像素的像素值的加法值作为特征量抽出。
3.根据权利要求1所述的图像处理装置，其特征在于，还包含操作单元，该操作单元进行用于指定对上述图像的处理的操作，上述设定单元根据上述操作单元的操作内容，设定用于对上述图像施加处理的设定信息，上述记录单元对应于上述图像的特征量将上述操作内容记录到上述数据记录介质中。
4.根据权利要求1所述的图像处理装置，其特征在于，上述设定信息包含表示自身是否为正在编辑的信息的信息。
5.根据权利要求4所述的图像处理装置，其特征在于，在上述设定信息中包含有表示正在编辑的信息的情况下，上述反映单元将上述图像原样提供给上述显示图像生成单元，上述显示图像生成单元将表示根据由上述读出单元读出的设定信息而实施处理的范围的窗口作为对象合成在从上述反映单元提供的图像上，生成显示图像。
6.根据权利要求4所述的图像处理装置，其特征在于，在上述设定信息中没有包含表示正在编辑的信息的情况下，上述选择单元将由上述读出单元读出的设定信息选择性地仅提供给上述反映单元，上述反映单元根据由上述读出单元读出的设定信息，将处理反映到上述图像中，上述显示图像生成单元将由上述反映单元把处理反映到上述图像而得到的图像作为显示图像。
7.根据权利要求1所述的图像处理装置，其特征在于，上述同步单元包括检索位置特征量抽出单元，其对应于上述图像的特征量，从记录了用于对上述图像施加处理的设定信息的数据记录介质，作为检索位置特征量依次抽出上述特征量；以及比较单元，其将由上述特征量抽出单元抽出的特征量与上述检索位置特征量依次进行比较，在上述比较结果一致的情况下，视为对应于上述图像的特征量而记录了用于对上述图像施加处理的设定信息的数据记录介质的特征量、与由上述特征量抽出单元抽出的特征量同步。
8.一种图像处理方法，包括特征量抽出步骤，从图像抽出特征量；设定步骤，设定用于对上述图像施加处理的设定信息；记录步骤，对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步步骤，使上述数据记录介质的特征量、与通过上述特征量抽出步骤的处理抽出的特征量同步；读出步骤，在通过上述同步步骤的处理使上述数据记录介质的特征量与利用上述特征量抽出步骤的处理抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映步骤，根据通过上述读出步骤的处理读出的设定信息，将处理反映到上述图像中；显示图像生成步骤，在通过上述反映步骤的处理将处理反映到上述图像而得到的图像上，合成表示通过上述读出步骤的处理读出的设定信息的对象，生成显示图像；以及选择步骤，选择性地提供通过上述读出步骤的处理读出的设定信息，使得能够在上述反映步骤的处理或者上述显示图像生成步骤的处理中使用该设定信息。
9.一种程序记录介质，记录有计算机可读取的程序，该程序包括特征量抽出步骤，从图像抽出特征量；设定步骤，设定用于对上述图像施加处理的设定信息；记录步骤，对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步步骤，使上述数据记录介质的特征量、与通过上述特征量抽出步骤的处理抽出的特征量同步；读出步骤，在通过上述同步步骤的处理使上述数据记录介质的特征量与利用上述特征量抽出步骤的处理抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映步骤，根据通过上述读出步骤的处理读出的设定信息，将处理反映到上述图像中；显示图像生成步骤，在通过上述反映步骤的处理将处理反映到上述图像而得到的图像上，合成表示通过上述读出步骤的处理读出的设定信息的对象，生成显示图像；以及选择步骤，选择性地提供通过上述读出步骤的处理读出的设定信息，使得能够在上述反映步骤的处理或者上述显示图像生成步骤的处理中使用该设定信息。
10.一种程序，使计算机执行包括如下步骤的处理特征量抽出步骤，从图像抽出特征量；设定步骤，设定用于对上述图像施加处理的设定信息；记录步骤，对应于上述图像的特征量，将上述设定信息记录到数据记录介质中；同步步骤，使上述数据记录介质的特征量、与通过上述特征量抽出步骤的处理抽出的特征量同步；读出步骤，在通过上述同步步骤的处理使上述数据记录介质的特征量与利用上述特征量抽出步骤的处理抽出的特征量同步的情况下，从上述数据记录介质读出对应于同步的上述特征量而记录的设定信息；反映步骤，根据通过上述读出步骤的处理读出的设定信息，将处理反映到上述图像中；显示图像生成步骤，在通过上述反映步骤的处理将处理反映到上述图像而得到的图像上，合成表示通过上述读出步骤的处理读出的设定信息的对象，生成显示图像；以及选择步骤，选择性地提供通过上述读出步骤的处理读出的设定信息，使得能够在上述反映步骤的处理或者上述显示图像生成步骤的处理中使用该设定信息。
全文摘要
提供图像处理装置及方法、程序记录介质、以及程序。不对原始的图像数据施加处理，每当播放图像时，可容易地进行对图像施加规定处理而再现时的规定处理的编辑。特征量设定信息读出部(63)从数据记录介质读出与同步的特征量相对应的设定信息，反映部(49)根据读出的设定信息，将处理反映到图像中，显示图像生成部(50)将表示所读出的设定信息的对象合成在使图像反映处理所得到的图像上从而生成显示图像，将所读出的设定信息选择性地提供给反映的处理、或生成显示图像的处理。本发明能够应用于图像处理装置。
文档编号G11B20/10GK101031056SQ200710079969
公开日2007年9月5日 申请日期2007年3月1日 优先权日2006年3月1日
发明者尾花通雅, 近藤哲二郎 申请人:索尼株式会社