标记信息记录装置和方法、标记信息呈现装置和方法

专利名称：标记信息记录装置和方法、标记信息呈现装置和方法
技术领域：
本技术涉及记录电子标记信息的标记信息记录装置、显示所记录的标记信息的标记信息呈现装置，以及标记信息记录方法和标记信息呈现方法。
背景技术：
日本专利申请公开第2005-236906号(下文称为专利文件I)描述了一种拍摄装置，该拍摄装置在拍摄活动图像时将表示视频相关指标的电子标记(要素标记)与视频帧相关联。由此，在编辑视频时，使用者可将与电子标记关联的帧视为缩略图，并找到预期视频场景(例如，见专利文件I的说明书中第
和
段)。

发明内容
期望不仅向视频而且向图像添加电子标记信息。鉴于上述情况，需要一种将电子标记信息记录到图像中的标记信息记录装置、一种能显示所记录的标记信息的标记信息呈现装置，以及一种标记信息记录方法和一种标记{目息呈现方法。根据本技术的一个实施方式，提供了一种标记信息记录装置，包括输出单元和记录单元。输出单元被配置为输出部分图像，以显示部分图像，该部分图像是关于单个目标 以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分。记录单元被配置为将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并记录标记信息。标记信息在与输出单兀输出的部分图像的位置信息和部分图像的分辨率(包括部分图像的完整图像的分辨率)信息相关联的同时被记录。因此，标记信息记录装置能根据部分图像的位置添加标记信息。进一步，除部分图像的位置之外，标记信息记录装置还能根据分辨率添加标记信息。“将A与B相关联”的概念包括“将A与标识B的ID相关联”和“将标识A的ID与B或标识B的ID相关联”。记录单元可被配置为将注释信息和要被组合在部分图像中的标记图像记录为标记信息。标记信息记录装置可进一步包括注释信息生成单元，其被配置为在获取到使用者进行的用于开始生成注释信息的输入操作信息时开始生成注释信息。利用该配置，根据使用者进行操作的信息，可在使用者希望的时间记录注释信息。可替代地，标记信息记录装置可进一步包括注释信息生成单元，其被配置为在获取到使用者的话音音频信息时开始生成注释信息。利用该配置，将使用者话音的开始作为触发，可开始记录标记信息。标记信息记录装置可进一步包括获取单元，其被配置为获取使用者进行的用于使输出单元输出部分图像的操作的信息。这种情况下，记录单元被配置为将标记信息与输出单元根据获取单元获取的操作信息而输出的部分图像的位置信息和分辨率信息相关联。理由该配置，可记录与根据使用者的操作而输出的部分图像(例如，使用者希望观察的完整图像的部分图像)相关联的标记信息。记录单元被配置为将位置信息和分辨率信息与位置信息和分辨率信息中的至少一个存在不同的多个部分图像中的每个相关联，多个部分图像由输出单元根据获取单元所获取的使用者进行的一系列连续或间歇操作信息而输出。在此情况下，记录单元被配置为将通过关联而获得的信息记录为每个部分图像的输出的历史信息，并将标记信息与历史信息相关联。利用此配置，可为用于连续输出多个不同部分图像的使用者的一系列操作的每条历史信息记录标记信息。记录单元可被配置为在从获取单元获取的操作信息中获取到预定操作信息时对根据预定操作信息输出的部分图像执行标记信息的关联处理。利用该配置，当获取单元从 用于输出部分图像的使用者的各种类型的操作信息中获取到有限的和预定的操作信息时，可将标记信息与通过操作信息输出的部分图像相关联。记录单元可被配置为将表示多条标记信息中的每条的呈现优先级的优先级信息与多条标记信息中的每条相关联，并记录优先级信息。利用该配置，根据设置的优先级，可呈现多条标记信息中的至少一条。记录单兀可被配置为将标记信息与包括输出单兀输出的部分图像的分辨率的至少两个以上分辨率范围中的每个相关联。换句话说，记录单元能为包括输出的部分图像的分辨率的每个分辨率范围执行标记信息的关联处理。记录单元可被配置为根据使用者的操作设置分辨率的阈值，并将设置的分辨率阈值与位置信息和标记信息相关联，并记录设置的阈值。利用该配置，在呈现标记信息时，例如，在要被输出的部分图像的放大率等于或大于阈值时，可呈现标记信息。根据本技术的一个实施方式，提供了一种标记信息呈现装置，包括输出单元、记录单元和处理单元。输出单元被配置为输出部分图像，以显示部分图像，部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分。记录单元被配置为将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并将与标记信息相关联的位置信息和分辨率信息分别记录为记录位置信息和记录分辨率信息。处理单元被配置为在构成要被输出的部分图像的输出位置信息组包括记录位置信息时执行处理，以呈现至少与记录位置信息相关联的标记信息。根据本技术的该实施方式，当构成要被输出的部分图像的输出位置信息组包括记录位置信息时，可呈现与记录位置信息关联的标记信息。处理单元可被配置为在输出位置信息组包括记录位置信息并且要被输出单元输出的部分图像的输出分辨率信息的分辨率等于与记录位置信息对应的记录分辨率信息的分辨率时执行处理，以呈现与记录位置信息和记录分辨率信息相关联的标记信息。利用该配置，可呈现与部分图像的记录位置信息和记录分辨率信息这两者关联的标记信息。记录单元可被配置为将要被组合在部分图像中的注释信息和标记图像记录为标记信息。这种情况下，处理单元被配置为执行处理，以呈现注释信息。处理单元可被配置为在构成要被输出的部分图像的输出位置信息组包括多条记录位置信息时将与多条记录位置信息关联的多个标记图像组合在要被输出的部分图像内。利用该配置，当多条标记信息与单个输出部分图像关联时，可使与该标记信息呈现装置连接的显示单元显示与多条标记信息关联的多个标记图像。处理单元可被配置为将与多条记录位置信息关联的多条记录分辨率信息中的分辨率等于要被输出单元输出的部分图像的输出分辨率信息的分辨率的图像和与包括记录分辨率范围内的分辨率的分辨率信息对应的图像中的一个组合在要被输出的部分图像内。记录单元可被配置为将表示与多个图像对应的多条注释信息中的每条的呈现优先级的优先级信息与多条标记信息相关联，并记录优先级信息。这种情况下，处理单元被配置为根据记录优先级信息设置是否呈现多条注释信息以及呈现多条注释信息的时间顺序这两者中的一个。利用该配置，可按优先级降序为使用者呈现多条注释信息。 记录单兀可被配置为将注释信息与包括输出单兀输出的部分图像的输出分辨率信息的分辨率的至少两个以上分辨率范围中的每个相关联，并为不同优先级信息中的每条设置不同记录分辨率范围。这种情况下，处理单元被配置为执行处理，以根据设置的记录分辨率范围显示多条注释信息中的至少一条注释信息，多条注释信息与输出位置信息组中包括的多条记录位置信息相关联。标记信息呈现装置可进一步包括获取单元，其被配置为获取使用者的用于使输出单元输出部分图像的操作的信息。这种情况下，记录单元被配置为在从获取单元获取的操作信息中获取到预定操作信息时对根据预定操作信息输出的部分图像执行标记信息的关联处理。进一步，处理单元被配置为在构成根据预定操作信息而输出的部分图像的输出位置信息组包括记录位置信息时执行处理，以呈现至少与记录位置信息关联的标记信息。根据本技术的一个实施方式，提供了一种标记信息记录方法，方法包括输出部分图像，以显示部分图像，部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分。标记信息在与输出的部分图像的在完整图像内的位置信息以及分辨率信息相关联的同时被记录。根据本技术的一个实施方式，提供了一种标记信息呈现方法，方法包括输出部分图像，以显示部分图像，部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分。标记信息与输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，与标记信息关联的位置信息和分辨率信息分别被记录为记录位置信息和记录分辨率信息。在构成要被输出的部分图像的输出位置信息组包括记录位置信息时，执行处理，以呈现至少与记录位置信息关联的标记信息。如上，根据本技术的实施方式，可将标记信息记录在图像内。进一步，可呈现所记录的标记信息。借助于对如附图所示的本公开最佳实施方式的以下详细说明，本公开的这些和其他目的、特征和优点将更加明显。


图I为示出作为根据本技术实施方式的包括标记信息记录装置和标记信息呈现装置的信息处理装置的例如PC (个人计算机)的硬件配置的框图；图2为示出图像金字塔结构的示意图，用于对图像金字塔结构的图像显示原理进行说明；图3为用于生成图像金字塔结构的图像组的过程的示意图；图4为PC的输入单元的一个示例的示意图；图5为完整图像和部分图像的尺寸示例的示意图；图6为根据记录处理的第一实施方式的记录处理流程图；·图7为根据第一实施方式的记录处理创建的表格；图8A示出记录音频信息时显示单元上显示画面的一个示例；图8B示出画面的一个改进示例；图9为根据第二实施方式的记录处理流程图；图10为根据第三实施方式的记录处理流程图；图11为根据第三实施方式的记录处理流程图；图12为根据第五实施方式的记录处理流程图；图13为根据第五实施方式的记录处理生成的历史信息表；图14为示出与第五实施方式中的历史信息有关的多个部分图像的移动的示意图；图15为根据第六实施方式的记录处理创建的表格；图16为根据第八实施方式的记录处理创建的表格；图17为根据呈现处理的第一实施方式的流程图；图18A和图18B均为示出组合了标记图像的部分图像的示意图，所述标记图像通过根据第一实施方式的呈现处理而获得；图19为根据第二实施方式的呈现处理流程图；图20为组合了标记图像的部分图像的示意图，所述标记图像通过根据第三实施方式的呈现处理而获得；图21为组合了标记图像的部分图像的示意图，所述标记图像通过根据第三实施方式的呈现处理而获得；图22为根据第四实施方式的呈现处理流程图；图23A和图23B均为示出组合了标记图像的部分图像的示意图，所述标记图像通过根据第五实施方式的呈现处理而获得；图24为示出组合了标记图像的部分图像的示意图，所述标记图像通过根据第五实施方式的呈现处理而获得；图25为根据上述第三实施方式的记录处理创建的表格，所述表格用于根据第六实施方式的呈现处理；图26为根据第七实施方式的呈现处理流程图；以及图27为根据第八实施方式的呈现处理流程图。
具体实施例方式下文将根据附图对本技术的实施方式进行说明。图I为示出作为根据本技术实施方式的包括标记信息记录装置和标记信息呈现装置的信息处理装置的例如PC (个人计算机)的硬件配置的框图。PC100包括CPU (中央处理器)10UR0M (只读存储器)102、RAM (随机存取存储器)103、输入/输出接口 105和将其互相连接的总线104。显示单元106、输入单元107、存储单元108、通信单元109、驱动单元110等与输入
/输出接口 105连接。
显示单元106为采用(例如)液晶或EL (电致发光)的显示装置。输入单元107包括，例如，指示装置、键盘、触控面板、麦克风及其他操作装置。在输入单元107包括触控面板的情况下，该触控面板可与显示单元106集成。图4为输入单元107的一个示例的示意图。该输入单元107的形状和功能与游戏控制器I相似，包括箭头键2和按钮A、L和R等。箭头键2为，例如，使使用者在完整图像内选择特定区域(显示区域)的键，以指定和显示作为完整图像一部分的部分图像，如下文所述。按钮L和R具有放大和缩小功能，用于改变部分图像的观察放大率。进一步，按钮A具有开始和停止注释信息创建处理的功能，如下文所述，或其他功能。存储单元108为非易失性存储装置，包括，例如，HDD (硬盘驱动器)、闪存及其他固态存储器。驱动单元110为能驱动可移动记录介质111，例如，光学记录介质、软盘(注册商标)、磁带和闪存的装置。与此相反，上述存储单元108通常用作提前安装在PC 100内的装置，主要用于驱动不可移动记录介质。通信单元109包括可与LAN (局域网)、WAN (广域网)等连接，并与其他装置通信的调制解调器、路由器和其他通信装置。通信单元109可进行有线或无线通信。通信单元109通常与PC 100单独使用。下文将对光学显微镜(未示出)获取的、将主要存储在PC 100的存储单元108内的图像和图像显示原理进行说明。图2为对显示原理进行说明的图像金字塔结构的示意图。该实施方式中的图像金字塔结构50为相对于由光学显微镜从单个观察目标15获取的单个图像以多个不同分辨率生成的图像组(完整图像组)(见图2)。图像金字塔结构50的底部具有最大尺寸的图像。图像金字塔结构50的顶部具有最小尺寸的图像。最大尺寸图像的分辨率为，例如，50*50 (kpixels :千像素)或30*40 (千像素)，如图5所示。最小尺寸图像的分辨率为，例如，256*256 (像素)或256*512 (像素)。具体地，例如，在单个显示单元106以100%显示图像(显示的每个图像的物理点与图像的像素数量一样多)时，最大尺寸图像显示为最大图像，最小尺寸图像显示为最小图像。此处，在图2中，显示单元106的显示范围用D表示。图3为用于生成图像金字塔结构50的图像组的过程的示意图。首先，准备原始图像(巨大图像)的数字图像，数字图像由光学显微镜(未示出)以预定观察放大率获得。该原始图像与处于图2所示的图像金字塔结构50的底部的最大尺寸图像对应。即，原始图像为具有最高分辨率的图像。因此，使用光学显微镜在相对较高放大率下观察和获得的图像作为处于图像金字塔结构50底部的图像。
应注意的是，在病理学领域中，通过对活体器官、组织、细胞或其部分进行切片而获得的图像一般都会成为观察目标15。随后，具有光学显微镜功能的扫描装置(未示出)对夹在载玻片之间的观察目标15进行扫描，由此获得的数字图像存储在该扫描装置或另一个存储装置中。扫描装置或通用计算机(未示出)通过逐渐降低分辨率而从以上述方式获得的最大尺寸图像中生成多个图像，如图3所示，并将生成的图像存储在(例如)作为预定尺寸单元的“瓦片”单元。单个瓦片单元的尺寸为，例如，256*256 (像素)。由此生成的图像组形成图像金字塔结构50，该图像金字塔结构50存储在PC 100的存储单元108内。实际上，PC100仅需要在将每个图像与其分辨率信息相关联的同时存储具有多个不同分辨率的图像和分辨率信息。应注意的是，图像金字塔结构50的生成和存储可由图I所示的PC 100执行。形成图像金字塔结构50的完整图像组可通过已知压缩方法生成，或可通过适用于生成(例如)缩略图的已知压缩方法生成。
通过使用采用图像金字塔结构50的系统的软件，PC 100根据使用者通过输入单元107的输入操作信息从图像金字塔结构50中提取所需图像，并将该图像输出到显示单元106中。具体地，PC 100显示使用者选择的具有任意分辨率的图像的任意部分的图像，任意部分的图像由使用者指定。这种情况下，CPU 101、输入/输出接口 105和显示单元106的至少其中之一作为向外部输出任意部分的图像，以将其显示在显示单元106上的输出单元。进一步，CPU 101或输入/输出接口 105作为获取使用者的输入操作信息的获取单元。例如，如图5所示，作为具有多个不同分辨率的完整图像中的具有任意分辨率的完整图像200的一部分的图像210由使用者通过输入操作指定。PC 100包括上述具有多个不同分辨率的完整图像200。使用者的输入操作指定图像210时，PC 100能裁切指定区域内的图像作为部分图像210，并将部分图像210输出到显示单元106中。在图5所示的示例中，部分图像210从最大尺寸原始图像中裁切出来,显示单元106使用HD (高清晰度)在显示单元106的整个画面上显示裁切部分图像210。显示单元106能显示具有任意分辨率的部分图像210。部分图像210的分辨率取决于作为要裁切的原始图像的完整图像的分辨率。理所当然，显示单元106可在显示单元106的整个画面的一部分显示裁切的部分图像。上述处理使使用者感觉好像在改变观察分辨率的同时观察观察目标15。换句话说，PC 100起虚拟显微镜的作用。此处，虚拟观察放大率与实际分辨率对应。[作为标记信息记录装置的PC的标记信息记录处理]本技术为将标记信息与完整图像内的部分图像210的位置(坐标)信息及其分辨率信息相关联的技术，部分图像210将被输出给显示单元106。下文将对PC100的标记信息记录处理进行说明。标记信息为符号、记号、索引、注释信息或对其进行表达的图像。注释信息为由文本、音频、图像、链接(例如，URL:统一资源定位符)等构成的信息，并可与上述符号、记号、索引等相关联。下文假定标记信息为注释信息(具体地，由使用者的话音构成的音频信息)和要组合在部分图像210中的图像，对其记录处理进行说明。此即为“标记信息呈现处理”的情况。应注意的是，PC 100的处理(如下文所述)通过存储在存储单元108、R0M 102等中的软件与PC 100的硬件资源之间的配合而实现。具体地，以下处理是通过CPU 101将对存储在存储单元108、R0M 102等中的软件进行配置的程序加载到RAM 103中并执行程序而实现的。为了便于说明，假定执行处理的主体是CPU 101，对处理进行说明。此即为“标记信息呈现处理”的情况。(记录处理的第一实施方式)图6为根据第一实施方式的记录处理流程图。根据使用者使用(例如)控制器I的箭头键2的输入操作，CPU 101在完整图像200内进行摇动显示(pan，移动显示)、放大、缩小，使用者搜索使用者曾观察的部分图像210。此处，摇动显示指显示单元106中指定区域(显示区域)的移动，该移动具有处于水平方向和垂直方向的至少一个方向的分量。在下文中，CPU 101在完整图像200内的摇动显示、放大、缩小的至少其中一种处理称为指定处理。具体地，CPU 101在每次执行指定处理时将部分图像210输出给显示单元106。尽管如此，但指定区域指构成完整图像200内的部分图像210的区域，部分图像210将通过指定处理输出给显示单元106。CPU 101根据使用者的输入操作执行指定处理，如上所述。随后，在CPU 101显示使用者希望观察的部分图像210时，使用者使用控制器I按下作为记录按钮的按钮A。CPU101响应于该操作而开始音频的记录处理(步骤101)。CPU 101增加(递增)标识所记录的音频信息的ID (步骤102)。进一步，CPU 101将完整图像200内部分图像210的位置(坐标)信息及其观察放大率(下文简称为放大率)存储在图7所示的表格中，同时将其与ID相关联(步骤103)，部分图像210在记录处理开始时被输出以显示。随后，CPU 101开始处理，将通过麦克风输入的使用者话音的音频信息记录在存储单元108等之内(步骤104)。这种情况下，CPU 101起注释信息生成单元的作用。CPU 101记录音频信息的同时将其与部分图像210 (的ID、位置信息和分辨率信息)相关联。这种情况下，CPU 101起记录单元的作用。表示表格中记录的部分图像210的坐标(代表坐标)仅需要为构成部分图像210的坐标组的处于预定位置的坐标。例如,坐标为处于中心位置的坐标、处于最左上位置的坐标或处于部分图像210的另一个预定位置的坐标。按下按钮A时(步骤105中的“否”)，CPU 101继续记录处理(步骤106)。使用者从按钮A上释放手指时，CPU 101终止音频记录处理(步骤107)。图8A示出记录音频信息时显示单元106上显示画面的一个示例。音频信息的记录处理开始或终止时，CPU 101将标识注释信息的标记图像M组合在记录在(例如)表格内的部分图像211内，并将标记图像M与部分图像211的ID相关联,如图7所不。图7和图8A所示的标记图像M的形式信息为蓝色圆形信息。可采用其他颜色和形状作为标记图像M的形式。进一步，标记图像M的形式可根据每个使用者而改变。可替代地，标记图像M的形式可根据其表示音频信息还是其他注释信息(例如，链接图像或文本信息)，即，根据注释信息的类型而改变。可替代地，标记图像M的形式可根据优先级而改变，如下所述。CPU 101将标记图像M组合在部分图像211中的预定位置处，例如，中心位置处。组合标记图像M的位置的坐标可为上述表示部分图像210的坐标(表格中记录的代表坐标)。
可替代地，如图SB所示，标记图像M可被组合在部分图像210中使用者用指针(或通过对画面的触摸操作)指定的任意位置的坐标处。这种情况下，标记图像M的坐标信息还可存储在图7所示的表格中。音频信息可与标记图像M的坐标相关联。作为为使用者呈现(例如，再生)记录音频信息的一种方法，可进行以下处理。例如，使用者对由此组合的标记图像M的位置进行输入操作，例如，点击(或触摸)时，CPU 101再生记录音频信息，如下所述。这种情况下，标记图像M起⑶I (图形用户界面)的作用。如上所述，在该实施方式中，作为标记信息的注释信息在存储的同时与已经输出、用于显示的部分图像211的位置信息和部分图像211的分辨率(包括部分图像211的完整图像200的分辨率)信息相关联。因此，CPUlOl能根据部分图像210的坐标添加注释信息。进一步，CPU 101不仅能根据部分图像210的坐标而且能够根据其分辨率添加注释信息。进一步，在该实施方式中，由于记录处理根据使用者对控制器I的操作信息而开始，使用者可在需要时记录首频 目息。·在上述说明中，使用者从按钮A上释放手指时，记录处理终止。但是，记录处理还可利用切换功能而执行。具体地，例如，使用者第一次按下按钮A时，可开始记录，使用者再次按下按钮A时，记录可终止。可替代地，可利用不同的按钮执行记录的开始和结束。(记录处理的第二实施方式)图9为根据第二实施方式的记录处理的流程图。对于以下实施方式，与上述第一实施方式相同的处理的说明将简化或省略。在该实施方式中，使用者话音的开始由麦克风(未示出)(输入单元107)检测，该检测被设定为开始记录处理的触发(触发器)。根据使用者的输入操作，CPU 101进行指定处理，并显示使用者希望观察的部分图像。此处，使用者的话音出现时(步骤201中的“是”)，增加ID (步骤202)。显示在显示单元106上的部分图像210的坐标和放大率信息存储在表格(见图7)中，同时与ID相关联(步骤203)。在步骤201中，例如，进行的音频输入的声压级高于阈值时，CPU 101可确定使用者话音出现。寂静时间持续一个预定时间段时(步骤205中的“是”)，CPU 101终止记录处理(步骤207)。寂静时间设为(例如)音频输入的声压级等于或小于上述阈值的时间。如上，不利用使用者对控制器I的有意识输入操作，而利用使用者话音的开始作为触发，可开始音频信息记录处理。由此，使用者的可操作性增强，可易于记录音频。PC 100可包括预先记录使用者话音中的预定词语，例如，“开始记录”或“开始”的程序，使用者说该词语时，利用该词语作为触发在步骤201中确定“是”。这种情况下，对于步骤207，PC 100可包括使用者说已记录词语时利用该词语作为触发而执行步骤207的处理的程序。(记录处理的第三实施方式)图10和图11均为不出根据第三实施方式的记录处理流程图。在该实施方式中，在记录使用者话音的中途，使用者对输入单元107进行预定输入操作时，根据输入操作信息，将通过输入操作而要被输出的部分图像210的坐标等被记录。如图10所示，使用者话音出现时(步骤301中的“是”)，CPU 101开始话音音频记录处理(步骤302)。寂静时间不持续预定时间段时(步骤303中的“否”)，CPU 101将音频信息记录在临时缓冲器中，临时缓冲器是PC 100中包括的一种存储器(步骤304)。寂静时间持续预定时间段时(步骤303中的“是”)，CPU 101终止音频记录处理(步骤305)。步骤301和303中的确定标准分别与上述步骤201和205相同。随后，随着图10所示的音频输入状态的监控环路的执行，执行使用者的输入操作状态的监控环路，如图11所示。CPU 101确定作为使用者的预定输入操作的画面放大操作是否开始(步骤401)。开始放大操作时，CPU 101确定是否在图10所示的音频输入状态的监控环路处理过程中记录音频(步骤402)。未记录音频(步骤402中的“否”)且放大操作终止(步骤403中的“是”)时，CPU 101返回到步骤401。在步骤402中，记录音频时，CPU 101增加ID (步骤404)并将被输出显示的部分 图像210的坐标和放大率与ID —起存储在图7所示的表格中(步骤405)。CPU 101确定是否在图10所示的音频输入状态的监控环路处理过程中记录音频(音频记录处理是否终止)(步骤406)。记录处理终止时，CPUlOl将已临时存储在临时缓冲器中的音频信息存储在图7所示的表格中，同时将音频信息与ID等相关联(步骤407)。在该实施方式中，在步骤407中，CPU 101仅需要记录从步骤401到步骤406临时存储的音频信息。可替代地，CPU 101仅需要记录从步骤401开始经过预定时间(例如，I至10秒)后到步骤406临时存储的音频信息。可替代地，CPU 101可记录步骤401之前到步骤406临时存储的音频信息。在该实施方式中，当使用者进行了输入操作的放大操作并且音频的记录处理正被执行时，可记录通过放大操作显示的部分图像210。进行放大操作时，通过放大而显示的部分图像210通常包括重要点。因此，根据该实施方式的处理具有很大优点。将作为步骤401和403中的确定目标的预定输入操作并不限于放大操作，可为指针或触摸移动，例如，摇动显示或缩小。进一步，PC 100可包括使使用者将预定输入操作自定义和设置为这种确定目标的程序。(记录处理的第四实施方式)虽然图中未示出，但仍可实现以下处理。例如，如果CPU 101不执行图10所示的音频输入状态的监控环路，CPU 101可在使用者的预定输入操作(例如，上述放大操作)开始之后或预定输入操作开始之后的预定时间(例如，I至10秒)结束之后立即开始记录处理。这种情况下,终止记录的方法可为图7或图9所示的方法。(记录处理的第五实施方式)图12为根据第五实施方式的记录处理流程图。该实施方式的处理为，如图14所示，记录通过使用者的一系列连续或间歇输入操作而输出的多个部分图像210，并将部分图像210与音频信息相关联。图14示出使用者的一系列输入操作连续输出指定区域I至5的图像的示例。对于指定区域I至4，其具有相同放大率，其部分图像具有不同坐标。指定区域5的中心坐标与指定区域4相同，指定区域4和5具有多个不同放大率(指定区域5的放大率较高)。例如，在使用者话音出现时，CPU 101增加ID，并开始音频记录处理(步骤501至503)。此处，CPU 101将根据使用者的一系列连续或间歇输入操作信息而输出的多个不同部分图像210的每个的坐标和分辨率信息与部分图像210相关联，并将其记录为指定处理的历史信息(步骤504)。图13示出指定处理的历史信息表。因此，多个不同部分图像和音频信息与单个ID相关联。多个不同部分图像意味着在坐标和分辨率中的至少一个上存在不同的部分图像。寂静时间持续预定时间段时(步骤506中的“是”)，CPU 101终止记录处理(步骤507)。一系列连续或间歇输入操作信息表示使用者在预定时间内以一定时间间隔进行的操作的信息，可预先设置或由使用者自定义。具体地，如果使用者在完整图像200内进行 一次摇动显示并再次进行摇动显示，预定时间内的时间间隔指两次摇动显示操作之间使用者不进行用于指定区域的输入操作的时间间隔。预定时间(例如)等于或小于一秒。如图14所示，其为部分图像210在指定区域I至2的摇动显示与指定区域2至3的摇动显示之间不进行移动的时间为时间间隔。如上所述，在该实施方式中，对于用于连续输出多个不同部分图像210的使用者的一系列操作的每条历史信息，可记录音频信息。在该实施方式中，通过将话音的出现设置为触发，可开始记录处理。但是，如图7所示，使用者按下记录按钮时，可开始记录处理，历史信息可与音频信息相关联。(记录处理的第六实施方式)图15为根据第六实施方式的记录处理创建的表格。在该实施方式中，CPU 101将作为多条注释信息的多条音频信息的每个ID与表示呈现(再生)音频信息的优先级的优先级信息相关联。因此，CPU 101能根据设置的优先级再生多条音频信息的至少其中之一。根据优先级对音频信息的再生将在下文“呈现处理”中详细说明。(记录处理的第七实施方式)在上述每个实施方式中，已被输出以显示在显示单元106上的部分图像210具有与表格中的音频信息关联的单个放大率值。但是，在记录音频信息时，音频信息可与包括已被输出以显示在显示单元上的部分图像210的放大率值的至少两个以上放大率值(即，放大率范围)的每个相关联。换句话说，在记录音频信息时，CPU 101将音频信息与包括已经输出显示的部分图像210的放大率值的每个放大率范围相关联。例如，图7所示的ID=I的放大率为20* (20倍)放大率。该放大率是开始音频信息记录处理时输出的部分图像210的放大率。这种情况下，将包括20*放大率的放大率范围，例如，10至30*放大率、5至40*放大率或20至40*放大率的放大率范围记录在表格中。由此，如下文所述，对记录音频信息进行再生时，CPU 101能进行以下处理。具体地，当包括构成部分图像的坐标组的至少一个坐标的指定区域的图像被输出，以在其放大率范围内的一个放大率下显示时，CPU 101能再生与部分图像(的ID)关联的音频信息。用于开始和终止该实施方式的音频信息的记录的触发、定时等可与上述任一实施方式相同。
该实施方式可适用于图13和图15所示的上述每个实施方式。(记录处理的第八实施方式)图16示出根据第八实施方式的记录处理创建的表格。在该实施方式中，例如，使用者设置任意放大率阈值，CPU 101将作为放大率阈值的设置放大率记录在表格中。创建图7等所示的表格之后，使用者可设置放大率，CPU 101可在任何时间将设置放大率记录在表格中。这种情况下，可修改记录的原始放大率。可替代地，本发明并不限于使用者设置放大率的情况，CPU 101可根据预定算法在音频信息等的记录处理的(例如)开始或结束或中间设置放大率。根据该实施方式，如下文所述，在呈现标记信息时，例如，要输出的部分图像210 的放大率等于或大于设置放大率时，标记信息可被呈现。(记录处理的其他实施方式)在上述每个实施方式中，至少执行记录处理的时间戳(可包括日期、月份和年份的概念)(例如，音频信息记录的开始或结束)也可与ID相关联并被记录。[作为标记信息呈现装置的PC的标记信息呈现处理]下文将对每个实施方式中以上述方式创建表格之后PC给使用者显示注释信息的处理进行说明，注释信息为表格中记录的多条标记信息的其中之一。进行该呈现处理时，CPU 101起处理单元的作用。(呈现处理的第一实施方式)图17示出根据(例如)图7所示的表格中的记录数据将音频信息呈现(再生)为注释信息的处理的流程图。记录数据为，具体地，已记录在表格中的坐标、放大率和注释信息。在下文中，表格中记录的坐标和放大率分别称为记录坐标(记录位置信息)和记录放大率(记录分辨率信息)。执行用于显示部分图像的使用者的输入操作时，CPU 101获取输入操作的信息(步骤601中的“是”)。这种情况下，CPU 101起获取单元的作用。CPU 101将构成输入操作指定的指定区域的部分图像的坐标组(作为输出位置信息组的输出坐标组)和部分图像的放大率(作为输出分辨率信息的输出放大率)与表格中的记录数据相比较(步骤602)。当等于表格中的记录坐标的输出坐标存在于构成部分图像210的输出坐标组中，且部分图像210的输出放大率等于或大于表格中的记录放大率时，CPU 101继续进行步骤604 (步骤 603)。在步骤603为“是”的情况下，CPU 101执行处理，以将与记录放大率对应的ID关联的音频数据输出到与PC 100连接的(或安装在PC内的)扬声器(未示出)中，即，执行再生处理(步骤604)。根据该实施方式，即使CPU 101将记录标记图像M组合在具有较低放大率的部分图像212内并将其输出(见下述第二实施方式)，如图18A所示，只要输出放大率不等于(或不大于)记录放大率，CPU 101就不再生音频信息。如图18B所示，部分图像213的输出放大率等于或大于记录放大率时，再生音频信息。例如，还可将上述记录处理的第七实施方式应用到该实施方式中。具体地，指定区域的部分图像的输出放大率处于表格中记录的放大率范围内时，CPU 101能呈现与放大率范围关联的标记图像M和音频信息中的至少一个。这个概念也适用于呈现处理的第一至第八实施方式，如下文所述。使用者从作为观察目标的巨大图像中选择特定部分，对所选部分进行诊断的操作一般在病理诊断中进行。这种情况下，重要的是记录特定专业人员对各个部分图像进行的诊断内容并将其再生，以进行教学等，使学生可学习如何进行诊断并学习内容。因此，作为根据本技术的标记信息的语音备忘录非常有用。如上所述，在本技术中，进行与使用者的记录输入操作情况对应的输入操作(或与其接近的输入操作，如下所述)时，对应语音备忘录被再生，非常方便，特别在病理学领域具有很大优点。(呈现处理的第二实施方式)图19示出根据第二实施方式的呈现处理流程图。在该实施方式中，假定现在显示(例如，如图18A和图18B所示)已组合了标记图像 M的部分图像212 (213)。在步骤703中，当部分图像214的输出坐标组的多个任意坐标等于表格中的单个记录坐标时，即，当输出坐标组包括记录坐标时，CPU 101将与记录坐标对应的标记图像M组合在部分图像212 (213)中，并将其输出(步骤704)。假定CPU 101已获取了使用者对标记图像的输入操作(例如，点击作为标记图像的GUI)的信息(步骤705)。随后，无论表格中的记录放大率如何，即，对于任何输出放大率，CPU 101都可再生与使用者操作的标记信息关联的音频信息(步骤706)。根据该实施方式，无论记录放大率如何，都可通过对标记图像M的输入操作再生音频信息。(呈现处理的第三实施方式)通过上述呈现处理的第一和第二实施方式中的算法，CPU 101还能将多个标记图像M (Ml至M4)组合在通过指定处理而输出的单个部分图像214中，并将其输出(如图20所示)。该实施方式适用于存在与部分图像214的输出坐标组中的多个任意坐标相等的多个记录坐标以及分别与它们相关联的音频信息的情况。这种情况下，CPU 101可将与一个或多个ID对应的标记图像M组合在将要被输出显示的部分图像214内，该一个或多个ID包括构成部分图像214的输出坐标组的多个记录坐标，且其记录放大率高于部分图像214的输出放大率。由此，CPU 101能在部分图像的输出放大率大于特定记录放大率时显示与记录放大率等于或大于该记录放大率的ID相关联的标记图像M，或再生与标记图像M关联的音频信息。可替代地，显示多个标记图像M时，如图20所示，如果CPU 101获取使用者对多个标记图像M的其中一个标记图像Ml的输入操作(例如，点击)的信息，CPU 101可再生与标记图像Ml关联的音频信息。可替代地，CPU 101可进行以下处理。具体地，CPU 101确定输出放大率和与多个记录坐标对应的每个记录放大率之间的对应性。这种情况下，即使部分图像214包括图20所示的多个记录坐标，CPU 101也能再生与记录放大率等于输出放大率的ID对应的音频信息。这种情况下，例如，使用者进行输入操作，以增加部分图像214的放大率时，如图21所述，CPU 101可仅将与等于部分图像215的放大率的记录放大率对应的标记图像M2组合在部分图像215内。换句话说，不显示与其他记录放大率对应的标记图像Ml、M3和M4。(呈现处理的第四实施方式)
图22示出根据第四实施方式的呈现处理流程图。该实施方式适用于，例如，单个部分图像210的输出坐标组包括多个记录坐标，且与多个记录坐标关联的记录放大率(或记录放大率范围，即为记录分辨率范围)互相相等的情况。具体地，在图22所示的步骤803中，CPU 101确定是否存在与输出坐标组中的多个任意坐标相等的多个记录坐标，且与多个记录坐标关联的记录放大率(或记录放大率范围)是否互相相等。在步骤803为“是”的情况下，CPU 101根据图15所示的表格中记录的优先级信息执行处理，以呈现与多个记录坐标关联的多条音频信息的至少其中之一，即，再生该条音频信息(步骤804)。CPU 101使用再生音频信息时的优先级作为(例如)下文定义的指标。(I)表示音频信息的再生时间顺序的指标或用于确定是否再生音频信息的指标。·
(2)用于再生与在低放大率下显示的部分图像关联的音频信息的指标。“优先级”的意义可从使用者的角度广泛理解。例如，优先级可指多个使用者中列入优先的那个使用者(记录的音频信息的再生)。可替代地，优先级可指根据记录部分图像210的记录音频信息的重要性(例如，医学角度的重要性)而确定的优先级。优先级一般由使用者设置，但也可由PC 100自动设置。在PC 100自动设置优先级的情况下，优先级可为(例如)记录标记信息的时间序列顺序。在上述(I)中，在将优先级作为表示再生顺序的指标，且将时间戳记录在表格中的情况下，无论时间戳如何，根据再生顺序优先级再生音频信息。在将上述(I)作为优先级定义的情况下，在步骤804中，CPU 101以优先级降序再
生多条音频信息。在应用上述(I)的情况下，CPU 101还能再生具有最高优先级的音频信息(或具有包括最高优先级的一个或多个逐步优先级的多条音频信息)而不再生其他音频信息。在将上述(2)作为优先级定义的情况下，CPU 101执行以下处理。CPU 101将多条音频信息记录在表格中，同时将多条音频信息与包括部分图像210的输出放大率的放大率范围相关联，并为多条音频信息的不同优先级信息设置不同放大率范围。这种情况下，在步骤804中，CPU 101根据上述单独设置的记录放大率范围再生与输出坐标组中的多个记录坐标关联的多条音频信息的至少其中之一。这种情况下，例如，可设定为记录放大率范围越大优先级越高。由此，即使在以低放大率显示部分图像210的情况下，只要部分图像210具有高优先级，就可再生与部分图像210关联的音频信息。如上，在该实施方式中，可按优先级降序为使用者呈现音频信息。应注意的是，在第四实施方式中，与多个记录坐标对应的记录放大率范围互相部分重叠时，标记信息可根据优先级而呈现。(呈现处理的第五实施方式)与第四实施方式一样，该实施方式适用于单个部分图像210的输出坐标组包括多个记录坐标，且与多个记录坐标关联的记录放大率(或记录放大率范围)互相相等的情况。这种情况下，与第四实施方式一样，音频信息根据图15所示的优先级信息而再生。下文将对第四实施方式中没有说明的技术进行说明。在该实施方式中，例如，如图23A所示，CPU 101将绿色和蓝色标记图像MG和MB组合在具有相对较低输出放大率的部分图像216内。随后，在随着使用者的输入操作的输出放大率的增加，输出放大率变得等于与标记图像M对应的记录放大率时，如图23B，CPU 101仅将在两个标记图像M中具有较高优先级的蓝色标记图像MB组合在部分图像217中，并将其输出。此时，CPU 101再生与蓝色标记图像MB关联的音频信息。可替代地，部分图像217处于23B所示的状态时，在CPU 101获取使用者对标记图像MB的输入操作(例如，使用者点击)的信息的情况下，CPU 101可再生音频信息。此外，如果单个部分图像210的输出坐标组包括多个记录坐标，其记录放大率互相相等(或记录放大率范围互相重叠)，进一步，其优先级互相相等，CPU 101可在记录时记录不同标记图像M。在图24所示的部分图像218的示例中，将两种不同颜色(红色和黄色)的标记图像MR和MY组合。这种情况下，例如，CPU 101还能先于黄色标记图像MY而再生红色标记图像MR的音频信息。(呈现处理的第六实施方式)根据该实施方式的呈现处理为，如图11所示，当进行作为用于显示部分图像的使用者的输入操作的其中之一的预定输入操作时的呈现处理。进行图11所示的处理时，CPU101记录数据，如图25的ID=I所示。换句话说，将“放大”操作的信息获取为预定输入操作的信息时，CPU 101记录作为放大目标图像的部分图像210的坐标和放大率，并将音频信息与部分图像210的坐标和放大率相关联，并将其记录。这种情况下的音频信息的呈现处理如下。CPU 101对用于显示部分图像210的使用者的输入操作信息和部分图像210的输出坐标进行监控。当构成已被输出显示的部分图像210的输出坐标组包括与ID=I关联的记录坐标，且输入操作为放大时，CPU 101再生与该记录坐标关联的音频信息。由此，无论记录放大率如何，都可在进行放大输入操作时再生音频信息。例如，为了教学目的，使用者(学生)进行的操作应与记录装置(老师等)进行的操作相同，以找到部分图像中的重要点。对于这种应用，使用者进行显示部分图像的操作时，仅通过在画面上触摸记录点不会再生音频。仅在使用者进行了放大之后，音频才可再生，并且这确定出使用者的操作正确。该配置并不限于医学和病理领域。另一方面，作为再生音频信息的条件，仅在满足包括上述记录放大率的三个条件之后才可再生音频信息。具体地，在部分图像210的输出坐标组包括记录坐标，进行放大操作，且其输出放大率等于记录放大率(或记录放大率范围)时，CPU 101可再生音频信息。应注意的是,在图25中的ID=2所示的示例中，通过(例如)使用者自定义将“摇动显示”设为预定输入操作的信息，而不是“放大”。在“摇动显示”的情况下，例如，在记录时，仅需要将终止摇动显示操作之后的部分图像210的坐标和放大率(摇动显示操作结束时显示的部分图像210)记录在表格中。在将除“放大”和“缩小”之外的输入操作设为预定输入操作时，再生音频信息的条件并不限于以下两个条件记录坐标的对应性；预定输入操作的对应性。可使用上述三个条件作为再生音频信息的条件。(呈现处理的第七实施方式)图26示出根据第七实施方式的呈现处理流程图。根据该实施方式的呈现处理为，如图12所示，再生与作为使用者的一系列连续或间歇输入操作信息的历史信息关联的音
频信息。
当使用者进行输入操作，以显示部分图像210时，CPU 101确定构成指定区域的部分图像210的输出坐标组是否包括表格中的多个记录坐标的至少其中之一，且其输出放大率是否等于与记录坐标对应的记录放大率(或处于记录放大率范围内)(步骤903)。在步骤903为“是”的情况下，CPU 101再生与其ID关联的音频信息(步骤904)。换句话说，在该实施方式中，当通过使用者的输入操作获取的部分图像210的信息包括在历史信息中时，再生音频信息。根据该实施方式，在记录音频的中途已被输出显示的部分图像210通过用户的输入操作被显示在显示单元106上，以此方式，可从开始再生与部分图像210关联的音频信息。即，即使在音频记录处理开始时就输出的部分图像(图13所示的表格中为“坐标I”的部分图像)没有在进行呈现时显示出来，也可从开始再生音频，非常方便。这种情况下，从开始再生音频时，CPU 101可将当前画面改变为音频记录处理开始 时输出的部分图像210，并显示部分图像210。可替代地，在图13所示的表格中，在记录音频时，CPU 101可记录音频数据，使连续音频数据分成与坐标1、2、……的每个对应的数据。由此，例如，在通过使用者的输入操作显示的部分图像210与音频记录的中间对应时,可从记录中间再生音频。在该实施方式中，在部分图像210的输出坐标组包括表格中的记录坐标时，无论记录放大率如何，都可再生音频信息。(呈现处理的第八实施方式)图27示出根据第八实施方式的呈现处理流程图。该实施方式的处理为设置放大率阈值情况下的呈现处理，如图16所示。当使用者进行输入操作，以显示部分图像210时，CPU 101确定构成指定区域的部分图像210的输出坐标组是否包括表格中的多个记录坐标的至少其中之一，且其输出放大率是否等于或大于其设置放大率(步骤1003)。在步骤1003为“是”的情况下，CPU 101再生与其ID关联的音频信息(步骤1004)。由此,仅在部分图像210的输出放大率等于(例如)使用者任意设置的放大率时才
可再生音频信息。(呈现处理的其他实施方式)在上述每个呈现处理实施方式中，例如，在图17、22、26和27中的每个步骤604、804、904和1004中，CPU 101除了执行再生音频信息的步骤之外，还可执行显示关联标记图像M的步骤。[其他实施方式]本技术并不限于上述实施方式，其他各种实施方式也可实现。在上述每个实施方式中，主要将音频信息和图像(例如，标记图像M)作为注释信息进行了举例说明。但是，在上述每个实施方式中，还可生成和呈现上述其他类型的注释信
肩、OPC 100可包括在不需要使用者进行输入操作的情况下由预定算法执行指定处理，并将部分图像210自动裁切并输出到显示单元106中的程序。PC 100可包括在不需要使用者进行输入操作的情况下由预定算法自动生成标记信息，并将标记信息与输出部分图像210关联的程序。
在上述每个实施方式中，使用者通过图4所示的控制器I将操作信息输入到PC100中。但是,毫无疑问，也可使用其他输入装置,例如，鼠标和键盘。尽管在上述每个实施方式中，音频信息由使用者生成，以作为标记信息，但标记信息也可为预先包括在PC中的符号、记号、指标或其他信息。本技术并不限于医学和病理领域的应用。只要以多个不同放大率显示部分图像210作为在巨大完整图像200内指定的区域，本技术可适用于任何领域。在这些领域中，本技术不仅适用于生物学、植物学和细菌学领域，还适用于地质学、地球物理学和宇宙物理学领域。在上述实施方式的特征中，至少两种特征可组合在一起。本技术可以如下方式配置。 ( I) 一种标记信息记录装置,包括输出单元，被配置为输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分；以及记录单元，被配置为将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并记录所述标记信息。(2)根据(I)的标记信息记录装置，其中，所述记录单元被配置为将注释信息和要被组合在所述部分图像中的标记图像记录为所述标记信息。(3)根据(2)的标记信息记录装置，进一步包括注释信息生成单元，被配置为在获取到使用者进行的用于开始生成所述注释信息的输入操作信息时开始生成所述注释信息。(4)根据(2)的标记信息记录装置，进一步包括注释信息生成单元，被配置为在获取到使用者的话音音频信息时开始生成所述注释信息。(5)根据(I)至(4)任一项的标记信息记录装置，进一步包括获取单元，被配置为获取使用者进行的用于使所述输出单元输出所述部分图像的操作信息，其中所述记录单元被配置为将所述标记信息与所述输出单元根据由所述获取单元获取的操作信息而输出的所述部分图像的位置信息和分辨率信息相关联。(6)根据(5)的标记信息记录装置，其中所述记录单元被配置为将位置信息和分辨率信息与所述位置信息和所述分辨率信息中的至少一个存在不同的多个部分图像中的每个相关联，将通过关联而获得的信息记录为每个部分图像的输出的历史信息，并将所述标记信息与所述历史信息相关联，所述多个部分图像由所述输出单元根据所述获取单元所获取的使用者进行的一系列连续或间歇操作信息而输出。(7)根据(5)或(6)的标记信息记录装置，其中，所述记录单元被配置为在从所述获取单元所获取的操作信息中获取到预定操作信息时对根据所述预定操作信息输出的部分图像执行所述标记信息的关联处理。(8)根据(I)至(7)任一项的标记信息记录装置，其中，
所述记录单元被配置为将表示多条标记信息中的每条的呈现优先级的优先级信息与多条标记信息中的每条相关联，并记录所述优先级信息。(9)根据(I)至(8)任一项的标记信息记录装置，其中所述记录单元被配置为将所述标记信息与至少两个以上分辨率范围中的每个相关联，其中，所述至少两个以上分辨率范围中的每个包括所述输出单元所输出的部分图像的分辨率。(10)根据(I)至(9)任一项的标记信息记录装置，其中所述记录单元被配置为根据使用者进行的操作来设置分辨率的阈值，并将所设置的分辨率的阈值与位置信息和标记信息相关联，并记录所设置的阈值。(11) 一种标记信息呈现装置，包括 输出单元，被配置为输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分；记录单元，被配置为将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并将与所述标记信息相关联的所述位置信息和所述分辨率信息分别记录为记录位置信息和记录分辨率信息；以及处理单元，被配置为在构成要被输出的部分图像的输出位置信息组包括所述记录位置信息时执行处理，以呈现至少与所述记录位置信息相关联的所述标记信息。(12)根据(11)的标记信息呈现装置，其中，所述处理单元被配置为在所述输出位置信息组包括所述记录位置信息并且要被所述输出单元输出的部分图像的输出分辨率信息的分辨率等于或大于与所述记录位置信息对应的记录分辨率信息的分辨率时执行处理，以呈现与所述记录位置信息和所述记录分辨率信息相关联的所述标记信息。(13)根据(12)的标记信息呈现装置，其中，所述记录单元被配置为将注释信息和要被组合在所述部分图像中的标记图像记录为所述标记信息，并且所述处理单元被配置为执行处理，以呈现所述注释信息。(14)根据(13)的标记信息呈现装置，其中，所述处理单元被配置为在构成要被输出的所述部分图像的所述输出位置信息组包括多条记录位置信息时将与所述多条记录位置信息相关联的多个标记图像组合在要被输出的所述部分图像中。(15)根据(14)的标记信息呈现装置，其中，所述处理单元被配置为在与多条记录位置信息相关联的多条记录分辨率信息中，将分辨率等于要被所述输出单元输出的部分图像的输出分辨率信息的分辨率的图像和与包括所记录的分辨率范围内的分辨率的分辨率信息相对应的图像中的一个组合在要被输出的部分图像中。(16)根据(14)的标记信息呈现装置，其中，所述记录单元被配置为将表示与多个图像对应的多条注释信息中的每条的呈现优先级的优先级信息与多条标记信息相关联，并记录所述优先级信息，并且所述处理单元被配置为根据所记录的优先级信息来设置是否呈现多条注释信息和呈现多条注释信息的时间顺序中的一个。(17)根据(14)的标记信息呈现装置，其中，所述记录单元被配置为将注释信息与至少两个以上分辨率范围中的每个相关联，并为不同优先级信息中的每条设置不同的记录分辨率范围，其中，所述至少两个以上分辨率范围中的每个包括所述输出单元所输出的部分图像的输出分辨率信息的分辨率，并且所述处理单元被配置为执行处理，以根据所设置的记录分辨率范围呈现多条注释信息中的至少一条注释信息，所述多条注释信息与所述输出位置信息组中所包括的多条记录位置信息相关联。(18)根据(11)至(17)任一项的标记信息呈现装置，进一步包括获取单元，被配置为获取使用者进行的用于使所述输出单元输出部分图像的操作息，其中， 所述记录单元被配置为在从所述获取单元所获取的操作信息中获取到预定操作信息时对根据所述预定操作信息而输出的部分图像执行标记信息的关联处理，并且所述处理单元被配置为在构成根据所述预定操作信息而输出的部分图像的输出位置信息组包括所述记录位置信息时执行处理，以呈现至少与所述记录位置信息相关联的所述标记信息。( 19) 一种标记信息记录方法，包括输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分；以及将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并记录所述标记信息。(20) 一种标记信息呈现方法，包括输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分；将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并将与所述标记信息相关联的所述位置信息和所述分辨率信息分别记录为记录位置信息和记录分辨率信息；以及在构成要被输出的部分图像的输出位置信息组包括所述记录位置信息时执行处理，以呈现至少与所述记录位置信息相关联的所述标记信息。上述标记信息呈现装置可配置如下。(21)根据(18)的标记信息呈现装置，其中，记录单元用于将位置信息和分辨率信息与至少在位置信息和分辨率信息的其中之一上有所不同的每个部分图像相关联，将通过关联而获取的信息记录为每个部分图像的包括记录位置信息和记录分辨率信息的历史信息，并将标记信息与历史信息相关联，部分图像由输出单元根据获取单元获取的使用者的一系列连续或间歇操作信息而输出。处理单元用于在构成将由输出单元输出的每个部分图像的输出位置信息组包括历史信息中包括的至少一条记录位置信息时执行处理，以显示与历史信息关联的标记信肩、O(22)根据(11)至(18)和(21)中任一项的标记信息呈现装置，进一步包括
获取单元，被配置为获取使用者进行的用于使输出单元输出部分图像的操作信息，其中，所述记录单元被配置为将所述标记信息与所述输出单元根据由所述获取单元获取的操作信息而输出的所述部分图像的位置信息和分辨率信息相关联，并将与标记信息关联的位置信息和分辨率信息分别记录为记录位置信息和记录分辨率信息；并且处理单元被配置为在输出单元根据获取单元获取的操作信息而要输出的部分图像的输出位置信息组包括记录位置信息，且要被输出单元输出的部分图像的输出分辨率信息的分辨率等于与记录位置信息对应的记录分辨率信息的分辨率时执行处理，以呈现与记录位置信息和记录分辨率信息关联的标记信息。(23 )根据(11)至(18 )、( 21)和(22 )中任一项的标记信息呈现装置，其中，记录单元被配置为将注释信息与包括输出单元所输出的部分图像的输出分辨率信息的分辨率的至少两个以上分辨率范围中的每个相关联，并将与标记信息相关联的分辨 率范围信息记录为记录分辨率范围信息，并且处理单兀被配置为在输出分辨率信息的分辨率处于记录分辨率范围内时执行处理，以呈现与输出的部分图像对应的标记信息。(24)根据(11)的标记信息呈现装置，其中，处理单元被配置为在输出位置信息组包括多条记录位置信息时执行处理，以呈现与多条记录位置信息关联的多条标记信息。(25)根据(13)的标记信息呈现装置，其中，处理单元被配置为根据使用者利用标记图像所进行的操作的信息执行处理，以呈现与标记图像对应的注释信息。(26 )根据(11)至(18 )和(21)至(23 )中任一项的标记信息呈现装置，其中，记录单元被配置为根据使用者的操作设置分辨率的阈值，并将设置的分辨率阈值与位置信息和标记信息相关联，并记录设置的阈值，并且处理单元被配置为在要被输出单元输出的部分图像的分辨率超过设置的阈值时执行处理，以呈现与要被输出的部分图像对应的标记信息。本公开包含与2011年7月21日在日本专利局提交的日本在先专利申请JP2011-159541中公开的内容相关的主题，其全部内容结合入本文作为参考。本领域技术人员应理解，可根据设计要求和其他因素进行各种修改、组合、子组合和改变，均不脱离附加权利要求或其等同物的范围。
权利要求
1.一种标记信息记录装置,包括 出单元，被配置为输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分；以及记录单元，被配置为将标记信息与所输出的部分图像的所述完整图像内的位置信息以及分辨率信息相关联，并记录所述标记信息。
2.根据权利要求I所述的标记信息记录装置，其中， 所述记录单元被配置为将注释信息和要被组合在所述部分图像中的标记图像记录为所述标记信息。
3.根据权利要求2所述的标记信息记录装置，进一步包括· 注释信息生成单元，被配置为在获取到使用者进行的用于开始生成所述注释信息的输入操作信息时开始生成所述注释信息。
4.根据权利要求2所述的标记信息记录装置，进一步包括 注释信息生成单元，被配置为在获取到使用者的话音音频信息时开始生成所述注释信肩、O
5.根据权利要求I所述的标记信息记录装置，进一步包括 获取单元，被配置为获取使用者进行的用于使所述输出单元输出所述部分图像的操作 息，其中， 所述记录单元被配置为将所述标记信息与所述输出单元根据由所述获取单元获取的操作信息而输出的所述部分图像的位置信息和分辨率信息相关联。
6.根据权利要求5所述的标记信息记录装置，其中， 所述记录单元被配置为将位置信息和分辨率信息与所述位置信息和所述分辨率信息中的至少一个存在不同的多个部分图像中的每个相关联，将通过关联而获得的信息记录为每个部分图像的输出的历史信息，并将所述标记信息与所述历史信息相关联，所述多个部分图像由所述输出单元根据所述获取单元所获取的使用者进行的一系列连续或间歇操作信息而输出。
7.根据权利要求5所述的标记信息记录装置，其中， 所述记录单元被配置为在从所述获取单元所获取的操作信息中获取到预定操作信息时对根据所述预定操作信息输出的部分图像执行所述标记信息的关联处理。
8.根据权利要求I所述的标记信息记录装置，其中， 所述记录单元被配置为将表示多条标记信息中的每条的呈现优先级的优先级信息与所述多条标记信息中的每条相关联，并记录所述优先级信息。
9.根据权利要求I所述的标记信息记录装置，其中， 所述记录单元被配置为将所述标记信息与至少两个以上分辨率范围中的每个相关联，其中，所述至少两个以上分辨率范围中的每个包括所述输出单元所输出的部分图像的分辨率。
10.根据权利要求I所述的标记信息记录装置，其中， 所述记录单元被配置为根据使用者进行的操作来设置分辨率的阈值，并将所设置的分辨率的阈值与位置信息和标记信息相关联，并记录所设置的阈值。
11.一种标记信息呈现装置，包括输出单元，被配置为输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分； 记录单元，被配置为将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并将与所述标记信息相关联的所述位置信息和所述分辨率信息分别记录为记录位置信息和记录分辨率信息；以及 处理单元，被配置为在构成要被输出的部分图像的输出位置信息组包括所述记录位置信息时执行处理，以呈现至少与所述记录位置信息相关联的所述标记信息。
12.根据权利要求11所述的标记信息呈现装置，其中， 所述处理单元被配置为在所述输出位置信息组包括所述记录位置信息并且要被所述输出单元输出的部分图像的输出分辨率信息的分辨率等于或大于与所述记录位置信息对应的记录分辨率信息的分辨率时执行处理，以呈现与所述记录位置信息和所述记录分辨率信息相关联的所述标记信息。
13.根据权利要求12所述的标记信息呈现装置，其中， 所述记录单元被配置为将注释信息和要被组合在所述部分图像中的标记图像记录为所述标记信息，并且 所述处理单元被配置为执行处理，以呈现所述注释信息。
14.根据权利要求13所述的标记信息呈现装置，其中， 所述处理单元被配置为在构成要被输出的所述部分图像的所述输出位置信息组包括多条记录位置信息时将与所述多条记录位置信息相关联的多个标记图像组合在要被输出的所述部分图像中。
15.根据权利要求14所述的标记信息呈现装置，其中， 所述处理单元被配置为在与所述多条记录位置信息相关联的多条记录分辨率信息中，将分辨率等于要被所述输出单元输出的部分图像的输出分辨率信息的分辨率的图像和与包括所记录的分辨率范围内的分辨率的分辨率信息相对应的图像中的一个组合在要被输出的所述部分图像中。
16.根据权利要求14所述的标记信息呈现装置，其中， 所述记录单元被配置为将表示与多个图像对应的多条注释信息中的每条的呈现优先级的优先级信息与多条标记信息相关联，并记录所述优先级信息，并且 所述处理单元被配置为根据所记录的优先级信息来设置是否呈现所述多条注释信息和呈现所述多条注释信息的时间顺序中的一个。
17.根据权利要求14所述的标记信息呈现装置，其中， 所述记录单元被配置为将注释信息与至少两个以上分辨率范围中的每个相关联，并为不同优先级信息中的每条设置不同的记录分辨率范围，其中，所述至少两个以上分辨率范围中的每个包括所述输出单元所输出的部分图像的输出分辨率信息的分辨率，并且 所述处理单元被配置为执行处理，以根据所设置的记录分辨率范围呈现多条注释信息中的至少一条注释信息，所述多条注释信息与所述输出位置信息组中所包括的多条记录位置信息相关联。
18.根据权利要求11所述的标记信息呈现装置，进一步包括 获取单元，被配置为获取使用者进行的用于使所述输出单元输出部分图像的操作信息，其中， 所述记录单元被配置为在从所述获取单元所获取的操作信息中获取到预定操作信息时对根据所述预定操作信息而输出的部分图像执行标记信息的关联处理，并且 所述处理单元被配置为在构成根据所述预定操作信息而输出的部分图像的输出位置信息组包括所述记录位置信息时执行处理，以呈现至少与所述记录位置信息相关联的所述标记信息。
19.一种标记信息记录方法，包括 输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分；以及 将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并记录所述标记信息。
20.—种标记信息呈现方法，包括 输出部分图像，以显示所述部分图像，所述部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分； 将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并将与所述标记信息相关联的所述位置信息和所述分辨率信息分别记录为记录位置信息和记录分辨率信息；以及 在构成要被输出的部分图像的输出位置信息组包括所述记录位置信息时执行处理，以呈现至少与所述记录位置信息相关联的所述标记信息。
全文摘要
一种标记信息记录装置和方法、标记信息呈现装置和方法。该标记信息记录装置包括输出单元和记录单元。输出单元被配置为输出部分图像，以显示部分图像，该部分图像是关于单个目标以多个不同分辨率生成的完整图像中的具有任意分辨率的完整图像的一部分。记录单元被配置为将标记信息与所输出的部分图像的完整图像内的位置信息以及分辨率信息相关联，并记录标记信息。
文档编号H04N5/92GK102890949SQ20121024510
公开日2013年1月23日 申请日期2012年7月13日 优先权日2011年7月21日
发明者木元雅士, 梶本雅人, 见山成志, 渡边裕文 申请人:索尼公司