观察系统及信息管理方法与流程

本发明涉及观察系统及信息管理方法。

背景技术：

在大量的生物关联实验中进行细胞培养。根据通常决定的步骤(协议)而实施细胞培养，但在培养过程中，细胞经常发生变化。因此，为了维持细胞的品质，始终准确地掌握细胞的状态是重要的。因此，进行细胞培养的作业者每天用显微镜观察正在培养的细胞，并确认细胞的状态。这样的观察细胞的状态的作业成为例行作业。此外，在这样的作业中，与包含掌握细胞的状态在内的培养相关的各种判断等大多是基于作业者的经验或技能而进行的。由于始终进行细胞培养，因此，作业者始终拍摄细胞的状态并保存为图像数据的情况是少见的。此外，即便进行了拍摄，由于图像数量是庞大的，因此，适当整理并管理这些图像对作业者来说负担也较大。此外，虽然有时对这些图像进行打印并粘贴于实验笔记本，并且在该实验笔记本上记载作业者的意见等，但这样的记录方式进一步增大对作业者来说的负担。因此，进一步促进基于作业者的经验或技能而进行与上述的培养相关的各种判断等。

例如在日本特开2002-85054号公报中公开了一种与附带观察装置的培养装置有关的技术，能够远程地观察并记录在恒温箱内培养的细胞的状态。在该装置中，能够使用培养装置内的扫描仪来记录培养装置内的培养皿的状态。该装置能够按照预先设定的计划而连续或定期地进行记录。该带观察装置的培养装置能够记录菌落的数量、状态等。

技术实现要素：

在日本特开2002-85054号公报所公开的装置中，能够取得图像数据、菌落的数量等数据。另一方面，关于记录作业者的判断、意见，未作出考虑。

本发明的目的在于，提供一种能够适当记录与观察结果相关的用户的见解的观察系统及信息管理方法。

根据本发明的一方案，观察系统具备：图像管理部，其管理针对培养中的活体试样按照时间序列而取得的多个图像；以及评论管理部，其根据用户的指示，与所述图像关联地记录评论。

根据本发明的一方案，信息管理方法包括如下步骤：管理针对培养中的活体试样按照时间序列而取得的多个图像；以及根据用户的指示，与所述图像关联地记录评论。

根据本发明，可提供能够适当记录与观察结果有关的用户的见解的观察系统及信息管理方法。

附图说明

图1是示出观察系统的结构例的概要的图。

图2是示出观察系统的结构例的概要的框图。

图3是示出在观察系统中处理的观察数据的结构例的概要的图。

图4是示出在观察装置中进行的记录处理的一例的概要的流程图。

图5是示出在观察系统中进行的观察数据管理处理的一例的概要的流程图。

图6是示出在显示装置中显示的主画面的一例的概要的图。

图7是示出在观察系统中进行的图像选择处理的一例的概要的流程图。

图8是示出在观察系统中进行的图像评论赋予处理的一例的概要的流程图。

图9是示出在显示装置中显示的评论画面的一例的概要的图。

图10是示出在显示装置中显示的roi设定画面的一例的概要的图。

图11是示出在观察系统中进行的图表时间选择处理的一例的概要的流程图。

图12是示出在观察系统中进行的图表评论赋予处理的一例的概要的流程图。

图13是示出在显示装置中显示的评论画面的一例的概要的图。

图14是示出在观察系统中进行的评论确认处理的一例的概要的流程图。

图15是示出在显示装置中显示的评论概要显示画面的一例的概要的图。

图16是示出在观察系统中进行的详情确认处理的一例的概要的流程图。

图17是示出在显示装置中显示的评论详情画面的一例的概要的图。

图18是示出在观察系统中进行的动态图像再现处理的一例的概要的流程图。

图19是用于说明在观察系统中进行的关联图像的选择的一例的图。

图20是示出在观察系统中进行的画面信息发送处理的一例的概要的流程图。

图21是示出在观察系统中进行的评论列表处理的一例的概要的流程图。

具体实施方式

参照附图对本发明的一实施方式进行说明。本实施方式涉及观察系统，该观察系统例如用于观察细胞这样的活体试样的培养中的状况。该观察系统例如能够拍摄恒温箱内的活体试样。观察对象的细胞等可以来源于任意生物，也可以通过任意方法进行培养。此外，在该观察系统中，通过拍摄而得到的图像被保存在服务器上，能够从多个终端阅览。此外，在该观察系统中，能够对图像附加文本、感兴趣区域(regionofinterest(roi))等与图像有关的评论(comment)等。由于能够从多个终端对图像附加评论等，或者阅览附带所附加的评论的图像，因此，能够由多个用户共享针对图像的信息，或者进行意见更换。

[拍摄系统的结构]

图1及图2示出本实施方式的观察系统1的结构例的概要。观察系统1具备观察装置110。如图1所示，观察装置110是具有大致长方体的外形的装置。在观察装置110的上表面设置有透明板111，作为观察对象的活体试样190配置在该透明板111的上方。在透明板的下方配置有具有拍摄透镜及摄像元件等且对透明板111侧进行拍摄的摄像单元112、以及使摄像单元112在与透明板111平行的平面内移动的移动机构114。摄像单元112在一次拍摄中能够取得图像的范围较窄。通过一边由移动机构114使摄像单元112移动一边由摄像单元112重复进行拍摄，观察装置110能够取得活体试样190的宽范围的图像。

如图2所示，观察装置110具备控制电路116，该控制电路116用于控制包括摄像单元112及移动机构114在内的各部的动作。控制电路116例如包括一个或多个centralprocessingunit(cpu)、applicationspecificintegratedcircuit(asic)或fieldprogrammablegatearray(fpga)等。此外，观察装置110具备用于记录通过拍摄而得到的图像等的存储装置118。此外，在控制电路116中使用的程序、各种参数等存储于存储装置118或控制电路116的存储区域等。此外，在观察装置110设置有用于供用户输入观察的开始或结束等的输入装置120。

观察装置110例如配置在恒温箱内，例如以预先设定的条件例如定期或不定期地拍摄在恒温箱内培养中的活体试样190的状况。观察系统1具备控制器130，该控制器130与观察装置110连接，进行观察装置110的各种动作的控制、观察装置110所取得的图像的管理、以及基于取得的图像的各种解析等。控制器130配置在恒温箱的外部。观察装置110与控制器130的连接可以是有线也可以是无线。控制器130例如能够使用个人计算机(pc)等。

控制器130例如是通常的pc，因此，如图2所示，例如具备cpu这样的处理器132、例如dram这样的存储器134、例如硬盘或闪速存储器等这样的存储装置136、例如液晶显示器这样的显示装置138、以及例如键盘、鼠标、触摸面板等这样的输入装置140等。

控制器130与网络180连接。观察系统1还包括经由网络180相互连接的阅览装置160和服务器200。如图1所示，服务器200包括处理器202、存储器204、存储装置206等。由观察装置110取得的活体试样190的图像等经由控制器130而上传到服务器200，并记录于存储装置206。

图1描绘出作为阅览装置160的一例的第1pc152和第2pc154。作为阅览装置160的终端不限于pc，也可以是平板型的信息终端等。此外，作为阅览装置160的终端也可以是任意个。阅览装置160例如是pc，因此，如图2所示，包括处理器162、存储器164、存储装置166、显示装置168、输入装置170等。阅览装置160用于阅览记录在服务器200的存储装置206中的活体试样190的图像等。此外，控制器130或阅览装置160等能够访问服务器200从而登记与记录于存储装置206的图像等相关的评论。所登记的评论能够包括文本及图形等各种方式。

如图2所示，服务器200具有作为通过处理器202等而实现的运算部210的功能。运算部210具有作为信息管理部212的功能，该信息管理部212统一地管理由观察装置110取得的活体试样190的图像、通过控制器130或阅览装置160等登记的评论等信息。此外，运算部210具有作为管理图像信息的图像管理部214的功能。此外，运算部210具有作为解析结果管理部215的功能，该解析结果管理部215例如管理根据图像而进行的各种解析的结果。此外，运算部210具有作为管理评论等信息的评论管理部216的功能。此外，运算部210具有作为数据解析部218的功能，该数据解析部218例如进行基于图像的各种解析。此外，运算部210具有作为显示控制部220的功能，该显示控制部220生成画面等，该画面显示于访问服务器200的控制器130或阅览装置160等。

在服务器200的存储装置206记录有与由运算部210进行的各种运算有关的控制程序242等。此外，在服务器200的存储装置206记录有数据库244。该数据库244中包括观察数据300，该观察数据300包括与活体试样190有关的图像、评论及解析结果等。此外，数据库244中包括显示数据250，该显示数据250是与显示于控制器130或阅览装置160等的画面有关的信息。

[观察数据的结构]

例如按照一系列观察中的每个观察而生成观察数据300。这里，一系列观察包括：针对配置在观察装置110的透明板111上的活体试样190进行的多个位置处的拍摄；以及伴随时间经过而依次进行的在多个定时进行的拍摄。图3示出观察数据300的结构例。观察数据300包括拍摄信息310、图像文件组330、评论文件组360以及解析信息390。

拍摄信息310具有与使用观察装置110进行的包括多次拍摄的一系列观察相关的信息。拍摄信息310包括容器信息311、拍摄位置信息312、拍摄时间信息313、评论314、特定信息315、作业信息317等。容器信息311包括与作为观察对象的活体试样190的容器有关的信息。容器例如能够为培养皿、各种尺寸的培养烧瓶、具有各种孔数的多孔盘等。拍摄位置信息312包括与通过移动机构114而移动的摄像单元112的拍摄时的位置这样的拍摄位置有关的信息。为了取得活体试样190的宽范围的图像，在多个拍摄位置处进行拍摄。拍摄时间信息313例如包括与定期地等隔开间隔而重复的由摄像单元112进行的拍摄的开始时刻这样的拍摄时间有关的信息。能够任意地设定拍摄的定时。评论314例如包括与通过控制器130或阅览装置160等而登记的评论有关的信息。评论314例如能够包括用于确定所登记的评论中的与拍摄信息310相关的评论内容、后述的评论文件中的与拍摄信息310相关的评论文件的信息等。特定信息315包括通过拍摄位置(例如图3的p1、p2、…、pn)与拍摄时间(例如图3的t1、t2、…、tn)的关系而确定的表示一次拍摄的信息(例如图3的i11、i12、…、inm)。作业信息317包括与在一系列观察中进行的关于活体试样190的培养基更换、传代作业、添加试剂的作业等这样的各种作业内容相关的信息。在作业信息317中，关于各作业的信息与进行该作业的时间被关联起来。

图像文件组330包括按照由摄像单元112进行的每个拍摄而生成的多个图像文件331。各个图像文件331包括id341、图像数据342、缩略图图像数据343、特定信息344、拍摄位置345、拍摄时间346、拍摄条件347、评论348等。id341包括按照每个图像文件331而附加的id信息。图像数据342包括由摄像单元112取得的图像数据。缩略图图像数据343包括根据图像数据342而生成的缩略图图像的数据。缩略图图像数据343例如能够用于通过控制器130或阅览装置160等而显示的显示画面所包含的拍摄图像的一览显示等。特定信息344包括通过拍摄信息310所包含的特定信息315而管理的、表示取得该图像数据342时的拍摄的信息(inm等)。如果使用该信息和拍摄信息310所包含的特定信息315，则能够确定取得该图像数据342时的拍摄位置和拍摄时间。拍摄位置345包括取得该图像数据342时的拍摄位置的信息。拍摄时间346包括取得该图像数据342时的拍摄时间的信息。关于特定信息344和拍摄位置345及拍摄时间346，由于最终得到的信息是共同的，因此，可以仅将一方记录于图像文件331，也可以记录两方。如果记录两方，则能够根据用途而使用便利的一方。拍摄条件347包括取得该图像数据342时的摄像单元112的设定等拍摄条件的信息。拍摄条件347例如包括拍摄透镜的焦距、合焦位置、光圈、曝光时间、照明条件、滤波条件等信息。评论348例如包括与通过控制器130或阅览装置160等登记的评论有关的信息。评论348例如能够包括用于确定所登记的评论中的与图像文件331相关的评论内容、后述的评论文件中的与图像文件331相关的评论文件的信息等。

评论文件组360包括与通过控制器130或阅览装置160等登记的评论有关的多个评论文件361。各个评论文件361包括id371、评论种类372、评论数据373、roi数据374、评论用户375、评论时间376、特定信息377、拍摄位置378、拍摄时间379等。id371包括按照每个评论文件361而附加的id信息。如后所述，评论种类372包括是针对图像登记的评论、还是针对表示解析结果的图表登记的评论、还是针对时间条登记的评论、还是作为针对评论的回复而登记的评论等这样的信息。评论数据373包括通过控制器130或阅览装置160等登记的评论的例如文本信息。roi数据374包括与通过控制器130或阅览装置160等登记的例如roi等这样的图形、字符、它们的位置及大小等有关的信息。评论用户375包括确定登记了评论的用户的信息。确定用户的信息例如是根据在操作用于登记评论的控制器130或阅览装置160等时认证的登录信息等而得到的。评论时间376包括通过控制器130或阅览装置160等而登记了评论的日期时间信息等。特定信息377能够包括通过拍摄信息310所包含的特定信息315而管理的、表示取得附加了评论的图像数据342时的拍摄的信息(inm等)。如果使用该信息和拍摄信息310所包含的特定信息315，则能够确定取得该图像数据342时的拍摄位置和拍摄时间。此外，特定信息377能够包括通过拍摄信息310所包含的特定信息315而管理的、表示在图表或时间条中附加了评论的拍摄时间(tm等)的信息。拍摄位置378包括取得附加了评论的图像数据342时的拍摄位置的信息。拍摄时间379包括附加了评论的拍摄时间的信息。

解析信息390包括与根据图像数据342等进行的解析结果有关的信息。解析信息390包括细胞数/密度信息391、菌落尺寸/位置信息394以及评论397。细胞数/密度信息391例如包括按照活体试样190的容器的每个孔并且按照每个拍摄时间、根据图像数据342而求出的细胞数和密度的信息。此外，细胞数/密度信息391包括表示在求出细胞数及密度时使用的图像的特定信息。此外，菌落尺寸/位置信息394包括按照每个拍摄位置及拍摄时间，即按照每个图像数据342而求出的该图像所包含的菌落的尺寸、菌落的位置等信息。评论397例如包括与通过控制器130或阅览装置160等登记的评论有关的信息。

[观察装置的动作]

对观察装置110的动作进行说明。观察装置110按照由用户例如使用控制器130预先设定的计划，重复进行活体试样190的拍摄。重复进行拍摄的期间例如可以为几日到几周或者几个月。在各拍摄定时，关于进行活体试样190的哪个位置的拍摄，也由用户例如使用控制器130预先设定。此外，在长期进行活体试样190的拍摄时，对活体试样190进行培养基更换、传代作业等作业。在进行这些作业时，用户使用观察装置110的输入装置120或控制器130，输入进行作业这一旨意的信息。

针对与通过观察装置110进行的记录处理有关的动作，参照图4所示的流程图进行说明。在步骤s101中，观察装置110的控制电路116判定是否为进行拍摄的定时。例如根据预先决定的计划，判定是否为进行拍摄的定时。此外，也可以根据能够经由观察装置110的输入装置120或控制器130输入的用户的拍摄指示，判定为是进行拍摄的定时。在是进行拍摄的定时时，处理进入步骤s102。此时，使用摄像单元112进行活体试样190的拍摄。即，在步骤s102中，控制电路116向移动机构114发出指令，使摄像单元112向拍摄位置移动。在步骤s103中，控制电路116向移动到拍摄位置的摄像单元112发出指令，使其进行拍摄动作。控制电路116对通过拍摄而得到的图像实施各种处理，并记录于观察装置110的存储装置118。在步骤s104中，控制电路116判定预先设定的拍摄范围内的拍摄是否全部完成。当拍摄未全部完成时，处理返回步骤s102。即，重复执行摄像单元112的移动、拍摄动作、拍摄结果的记录，直至所设定的全部拍摄位置结束为止。在步骤s104中，当判定为拍摄全部完成时，处理进入步骤s107。

在步骤s101中判定为不是进行拍摄的定时时，处理进入步骤s105。在步骤s105中，控制电路116判定是否记录作业历史。例如，在进行活体试样190的培养基更换、传代作业等并操作了观察装置110的输入装置120等时，判定为记录作业历史。当记录作业历史时，处理进入步骤s106。在步骤s106中，控制电路116将作业历史记录于存储装置118。该作业历史成为记录于服务器200的观察数据300的包括作业时间和作业内容在内的作业信息317的原始数据。之后，处理进入步骤s107。在步骤s105中，在判定为不记录作业历史时，处理进入步骤s107。

在步骤s107中，控制电路116判定所计划的一系列拍摄是否结束。在判定为一系列拍摄未结束时，处理返回步骤s101。即，直至所计划的拍摄结束为止，如果成为拍摄定时，则进行拍摄及其结果的记录，如果输入了记录作业历史这一旨意的指示时，则将作业历史记录于存储装置118。当既不是拍摄定时也不是记录作业历史时，重复进行上述处理。

在步骤s107中，当判定为所计划的一系列拍摄结束时，该处理结束。

通过控制器130读出与记录于观察装置110的存储装置118的拍摄图像、作业历史等有关的数据，在进行需要的处理之后，经由网络180作为观察数据300而记录于服务器200的存储装置206。即，生成包括图像数据342且附加有需要的信息的图像文件331。通过集中多个这样的图像文件而生成图像文件组330。此外，根据拍摄计划的信息、作业历史等，生成拍摄信息310。关于拍摄信息310、图像文件组330等的生成，可以通过控制器130来进行，也可以通过服务器200的运算部210来进行。

进而，基于图像文件组330所包含的图像数据342，进行各种解析。其结果是，生成包含细胞数/密度信息391和菌落尺寸/位置信息394在内的解析信息390。可以通过控制器130来进行这些解析，也可以通过服务器200的运算部210来进行这些解析。将生成的解析信息390也记录为观察数据300的一部分。

[观察数据的管理]

针对在服务器200的存储装置206中作为数据库244而记录的观察数据300的阅览及评论的登记等观察数据300的管理进行说明。图5是示出通过服务器200的运算部210而进行的观察数据管理处理的概要的流程图。这些处理通过如下方式进行：用户使用控制器130或阅览装置160这样的终端来访问服务器200，针对从该终端向服务器200发出的指示，服务器200作出响应。

在步骤s201中，运算部210对访问服务器200的控制器130或阅览装置160这样的终端发送主画面的信息，使该终端的显示装置显示主画面。接收到主画面的信息的控制器130或阅览装置160这样的终端在其显示装置显示主画面。此外，终端例如利用鼠标这样的输入装置，在该主画面上受理用户选择出的点。终端将与用户选择出的主画面上的点有关的信息发送到服务器200。服务器200的运算部210根据从终端取得的用户选择出的点，进行各种处理。

图6示出主画面500的一例。主画面500包括图像显示区510、试样信息显示区530、作业信息显示区540、时间条550、动态图像操作图标560以及解析结果显示区570。

在图像显示区510一览显示例如由观察装置110取得的图像的缩略图图像511。例如，一览显示的各缩略图图像是在不同的拍摄位置得到的图像，各缩略图图像能够为在视作相同的拍摄时间取得的图像的缩略图图像。在通过操作后述的时间条550等而变更了指定的拍摄时间时，也能够变更显示于图像显示区510的图像。此外，在选择了特定的图像时，选择出的图像被较大地显示于图像显示区510。

此外，当由用户选择了多个缩略图图像中的任意一个时，选择出的图像被实施强调显示523。例如，即便选择显示于后述的试样信息显示区530的拍摄位置534，也能够对与相应的拍摄位置对应的缩略图图像附加强调显示523。

此外，当显示于图像显示区510的多个缩略图图像所示的图像中存在被赋予评论的图像时，在相应的图像的缩略图图像511重叠显示有评论图标524。此外，在图像显示区510配置有在赋予新的评论时供用户选择的评论赋予图标525。

在试样信息显示区530包括示出活体试样190的容器种类的容器显示531。图6的例子示出在6孔盘中进行了观察的情况。该容器显示531是基于观察数据300的拍摄信息310所包含的容器信息311而实现的。在容器为多孔盘的情况等下，在试样信息显示区530能够包括孔显示532。在图6所示的例子中，通过将6孔盘的示意图作为孔显示532来显示，从而示出使用了6孔盘。并且，孔显示532通过使当前选择的孔的显示与其他孔的显示不同，从而示出当前选择的孔。在图6所示的例子中，通过以虚线表示孔显示532，从而示出选择了右下的孔。

试样信息显示区530包括容器映射533。容器映射533示出当前选择的孔等中的拍摄位置534。在图6所示的例子中，示出在6孔盘的右下的孔中设定的多个拍摄位置534。根据拍摄信息310所包含的拍摄位置信息312而显示拍摄位置534。当选择了多个拍摄位置534的任意一个时，与选择出的拍摄位置相应的图像显示区510的缩略图图像作为选择图像而被施加强调显示523。

此外，在容器映射533中，以图的形式示意性示出作为基于图像的解析结果而得到的菌落的位置及菌落的尺寸。该菌落的位置及菌落的尺寸的显示是基于解析信息390所包含的菌落尺寸/位置信息394而实现的。

作业信息显示区540显示作业信息的一览。根据拍摄信息310所包含的作业信息317而显示该一览。在显示的作业信息中包括培养基更换信息541、传代作业信息542等。针对各信息，例如显示进行了作业的日期时间的信息、该作业所需的时间等。

时间条550以条形式显示一系列观察计划。时间条550从左朝向右而示出时间序列。在时间条550中包括示出当前选择的时间的选择时间显示553。当前选择的时间对应于拍摄了与图像显示区510所显示的缩略图图像511对应的图像的拍摄时间。例如用户能够通过选择时间条550上的点来选择时间。当由用户选择了时间时，通过选择时间显示553而示出选择出的时间。此外，将在与选择出的时间相应的拍摄时间得到的图像的缩略图图像显示于图像显示区510。

在时间条550中显示作业信息。例如，在时间条550附加示出培养基更换的定时的培养基更换显示551、示出传代作业的定时的传代作业显示552。也可以附加示出试剂添加等的定时的试剂添加显示等。根据拍摄信息310的作业信息317而显示培养基更换显示551、传代作业显示552、试剂添加显示等。并且，在时间条550附加评论显示554，该评论显示554示出附加了评论的时间点。根据拍摄信息310的评论314而显示评论显示554。

动态图像操作图标560包括在用户变更图像显示区510所显示的图像时使用的图标。动态图像操作图标560包括再现图标561、最早图像选择图标562、最新图像选择图标563、过去选择图标564、未来选择图标565等。当选择了再现图标561时，图像显示区510所显示的图像进行从当前选择的时间点开始按照时间序列依次显示图像的时间推移(timelapse)动态图像的再现。当选择了最早图像选择图标562时，选择一系列图像中的最早取得的图像，并显示于图像显示区510。当选择了最新图像选择图标563时，选择一系列图像中的最新取得的图像，并显示于图像显示区510。当选择了过去选择图标564时，依次选择比当前选择出的图像更早的图像，并依次显示于图像显示区510。当选择了未来选择图标565时，依次选择比当前选择的图像更新的图像，并依次显示于图像显示区510。时间条550的选择时间显示553根据当时选择的时刻而移动。

解析结果显示区570以图表形式显示解析信息390的细胞数/密度信息391所包含的信息。在该图表中示出细胞密度571。此外，在图表中，包括示出当前选择的时间的选择时间显示573。选择时间显示573所示的时间对应于时间条550的选择时间显示553。此外，在解析结果显示区570，在对图表赋予了评论时，在示出赋予评论的时间的位置处显示有评论图标574。此外，在解析结果显示区570配置有在赋予新的评论时供用户选择的评论赋予图标575。另外，在图表中，也可以代替细胞密度或与细胞密度一起示出细胞数。

此外，主画面500包括后述的共享图标582、评论列表图标584以及退出图标586。

返回图5继续进行观察数据管理处理的说明。在步骤s202中，运算部210判定是否由用户选择了图像。例如，在由用户选择了图像显示区510内的缩略图图像中的任意一个时，判定为选择了图像。在未选择图像时，处理进入步骤s204。另一方面，在选择了图像时，处理进入步骤s203。在步骤s203中，运算部210进行图像选择处理。

参照图7所示的流程图对图像选择处理进行说明。

在步骤s301中，运算部210判定选择了图像时的点击种类是单击还是双击。在为单击时，处理进入步骤s302。在步骤s302中，例如如图6所示，运算部210将对选择出的图像实施了强调显示523的画面显示于显示装置。之后，处理进入步骤s304。

在步骤s301中，当判定为进行了双击时，处理进入步骤s303。在步骤s303中，运算部210使选择出的图像的大图像例如以充满的形式显示于图像显示区510。之后，处理进入步骤s304。

在执行步骤s304的处理时，是选择了某个图像且该图像被强调显示523或显示得较大的情况。在步骤s304中，运算部210判定是否选择了图像显示区510的评论赋予图标525。在未选择评论赋予图标525时，处理进入步骤s306。在选择了评论赋予图标525时，处理进入步骤s305。在步骤s305中，运算部210进行对图像赋予评论的图像评论赋予处理。之后，处理进入步骤s306。

在步骤s306中，运算部210判定是否应点击评论赋予图标525以外的位置等而结束图像选择处理并使处理返回观察数据管理处理。当不返回观察数据管理处理时，处理返回步骤s304，等待评论赋予图标525的选择。另一方面，当返回观察数据管理处理时，结束图像选择处理，处理返回观察数据管理处理。

参照图8所示的流程图，针对在选择了评论赋予图标525时在步骤s305中进行的图像评论赋予处理进行说明。

在步骤s401中，运算部210使显示装置显示用于对图像赋予评论的评论画面。图9示出评论画面的一例。如图9所示，评论画面610包括评论栏611、ok图标612以及roi设定图标613。此外，在评论画面610中，在用户名显示栏618显示进行当前操作的用户、即要登记图像评论的用户的名字或id等用于确定用户的信息。用户的名字或id等信息由服务器200通过访问服务器200时进行的用户认证等而取得。此外，在评论画面610中，在日期时间显示栏619显示用户要赋予评论的日期时间、即当前的日期时间。

在步骤s402中，运算部210判定是否选择了评论栏611。在未选择评论栏611时，处理进入步骤s404。另一方面，在选择了评论栏611时，处理进入步骤s403。在步骤s403中，运算部210执行供用户向评论栏611记载例如文本信息的评论的评论记入处理。之后，处理进入步骤s404。这里记入的评论可以由用户自由地输入，也可以选择样板，还可以从预先设定的记号、签名等中选择。

在步骤s404中，运算部210判定是否选择了roi设定图标613。在未选择roi设定图标613时，处理进入步骤s407。另一方面，在选择了roi设定图标613时，处理进入步骤s405。在步骤s405中，运算部210进行roi设定处理。

在roi设定处理中，在显示装置显示图10所示的roi设定画面620。roi设定画面620包括图像显示区621、roi工具622以及ok图标623。在图像显示区621显示当前选择的图像。作为roi工具622，例如如图10所示，准备箭头6221、圆6222、四边形6223、文本6224。在选择了roi工具622的箭头6221的状态下选择了图像显示区621内的点时，如图10的箭头显示6261那样在图像显示区621内显示箭头。用户能够通过拖曳操作等来变更箭头显示6261的位置、方向等。此外，在选择了roi工具622的文本6224的状态下选择了图像显示区621内的点时，如图10的文本显示6264那样，用户能够在图像显示区621内记入任意的文本。此外，在选择了roi工具622的圆6222的状态下选择了图像显示区621内的点时，如图10的圆显示6262那样，在图像显示区621内显示表示roi的圆。用户能够通过拖曳操作等来变更圆显示6262的位置、大小等。同样，在选择了roi工具622的四边形6223的状态下选择了图像显示区621内的点时，在图像显示区621内显示表示roi的四边形。

用户能够在选择roi工具622的同时，对图像设定roi等。

在步骤s406中，运算部210判定是否选择了roi设定画面620的ok图标623。如果未选择ok图标623，则处理返回步骤s405，继续roi设定处理。在选择了ok图标623时，关闭roi设定画面620，处理进入步骤s407。

在步骤s407中，在显示装置显示有评论画面610。在步骤s407中，运算部210判定是否选择了评论画面610的ok图标612。在未选择ok图标612时，处理返回步骤s402，等待进行评论的记入或roi的设定。另一方面，在选择了ok图标612时，处理进入步骤s408。

在步骤s408中，运算部210根据如上述那样记入、设定的包括文本、图形等的评论等而生成评论文件361，并记录于观察数据300。此外，在步骤s409中，运算部210将关于该评论的需要信息记录于与相应的图像有关的图像文件331的评论348。同样，运算部210将关于该评论的需要信息记录于成为解析结果显示区570所显示的图表的原始数据的解析信息390的评论397。此外，运算部210将关于该评论的需要信息记录于成为时间条550的评论显示554的基础的拍摄信息310的评论314。这里记录的关于评论的需要信息可以是评论内容的全部等，也可以是用于确定评论文件361的信息等。以上，图像评论赋予处理结束，处理返回参照图7说明的图像选择处理。当图像评论赋予处理结束后，如图6所示，在选择图像中显示有评论图标524。

根据图像评论赋予处理，针对用户使用观察装置110而得到的图像，能够在关注的部位附加标记而进行记录，也能够将针对关注部位的用户意见作为评论来赋予并记录。

返回图5所示的观察数据管理处理的说明。在步骤s203的图像选择处理之后，处理进入步骤s204。在观察数据管理处理的步骤s204中，运算部210判定是否由用户选择了解析结果显示区570的图表内的任意一个时间点。在未选择图表内的时间点时，处理进入步骤s206。另一方面，在选择了图表内的时间点时，处理进入步骤s205。在步骤s205中，运算部210进行图表时间选择处理。

参照图11所示的流程图对图表时间选择处理进行说明。在步骤s501中，运算部210在主画面500的解析结果显示区570的图表中示出选择时间显示573。

在步骤s502中，运算部210判定是否选择了解析结果显示区570的评论赋予图标575。在未选择评论赋予图标575时，处理进入步骤s504。另一方面，在选择了评论赋予图标575时，处理进入步骤s503。在步骤s503中，运算部210执行对图表赋予评论的图表评论赋予处理。之后，处理进入步骤s504。

在步骤s504中，运算部210判定是否点击了评论赋予图标575以外的位置等而应结束图表时间选择处理并使处理返回观察数据管理处理。当不返回观察数据管理处理时，处理返回步骤s502，等待评论赋予图标575的选择。另一方面，当返回观察数据管理处理时，结束图表时间选择处理，处理返回观察数据管理处理。

参照图12所示的流程图，针对在选择了评论赋予图标575时在步骤s503中进行的图表评论赋予处理进行说明。

在步骤s601中，运算部210使显示装置显示用于对图表赋予评论的评论画面。图13示出评论画面的一例。如图13所示，评论画面630包括评论栏631和ok图标632。此外，在评论画面630中，在用户名显示栏638显示进行当前操作的用户、即要登记图表评论的用户的名字或id等用于确定用户的信息。此外，在评论画面630中，在日期时间显示栏639显示用户要赋予评论的当前的日期时间。

在步骤s602中，运算部210判定是否选择了评论栏631。在未选择评论栏631时，处理进入步骤s604。另一方面，在选择了评论栏631时，处理进入步骤s603。在步骤s603中，运算部210执行供用户向评论栏631记载例如作为文本信息的评论的评论记入处理。之后，处理进入步骤s604。

在步骤s604中，运算部210判定是否选择了评论画面630的ok图标632。在未选择ok图标632时，处理返回步骤s602，等待进行评论的记入。另一方面，在选择了ok图标632时，处理进入步骤s605。

在步骤s605中，运算部210根据如上述那样记入、设定的评论等而生成评论文件361，并记录于观察数据300。此外，在步骤s606中，运算部210将关于该评论的需要信息记录于与相应的图像有关的图像文件331的评论348、解析信息390的评论397、拍摄信息310的评论314。这里记录的关于评论的需要信息可以是评论的全部内容等，也可以是用于确定评论文件361的信息等。以上，图表评论赋予处理结束，处理返回参照图11说明的图表时间选择处理。

根据图表评论赋予处理，针对基于用户使用观察装置110而得到的图像的解析结果，能够在关注的时间点附加标记而进行记录，也能够将针对关注时间点的用户意见作为评论来赋予并记录。

在上述的例子中，示出针对在图表中选择出的时间点而赋予评论的例子，但也可以对用户指定的具有宽度的时间段赋予评论。该时间段例如也可以是基于作业信息317而进行培养基更换、传代作业等的作业与作业之间这样的与作业关联起来的时间段。

返回图5所示的观察数据管理处理的说明。在步骤s205的图表时间选择处理之后，处理进入步骤s206。在观察数据管理处理的步骤s206中，运算部210判定是否由用户选择了图像显示区510的有评论图标524、时间条550的评论显示554或解析结果显示区的有评论图标574。在未选择评论时，处理进入步骤s208。另一方面，在选择了评论时，处理进入步骤s207。在步骤s207中，运算部210执行评论确认处理。

参照图14所示的流程图对评论确认处理进行说明。

在步骤s701中，运算部210使显示装置弹出显示评论的概要。图15示出该显示的一例。图15示出选择了图像显示区510的有评论图标524的情况下的例子，但在选择了时间条550的评论显示554或解析结果显示区570的有评论图标574的情况下，虽然显示的位置不同，但也进行同样的显示。以后，对选择了图像显示区的有评论图标524的情况下的例子进行说明。如图15所示，评论概要显示画面640包括评论栏641、用户名显示栏648、日期时间显示栏649、回复图标642、共享图标643以及详情图标644。登记了选择出的评论的用户的信息显示于用户名显示栏648，登记了该评论的时间显示于日期时间显示栏649。该评论的文本信息显示于评论栏641。根据评论文件361等的内容而显示这些内容。评论概要显示画面640的字符等的颜色例如也可以根据登记了评论的用户而不同，从而容易知晓是谁的评论。不限于颜色，也可以通过字体等的不同来表现用户的差异。

在步骤s702中，运算部210判定是否选择了回复图标642。在未选择回复图标642时，处理进入步骤s704。另一方面，在选择了回复图标642时，处理进入步骤s703。在步骤s703中，运算部210执行参照图8而说明的图像评论赋予处理。即，登记了某个评论的用户或不同的用户能够与该评论关联地进一步登记评论。在追加的评论/roi等的显示中，也可以按照每个登记或按照每个登记的用户，例如以颜色不同的方式进行显示等。在图像评论赋予处理之后，处理进入步骤s704。

在步骤s704中，运算部210判定是否选择了详情图标644。在未选择详情图标644时，处理进入步骤s706。另一方面，在选择了详情图标644时，处理进入步骤s705。

在步骤s705中，运算部210执行详情确认处理。参照图16所示的流程图对详情确认处理进行说明。

在步骤s801中，运算部210使显示装置显示评论详情画面。图17示出评论详情画面的一例。评论详情画面650包括图像显示区651。在图像显示区651显示当前选择的图像。此外，在图像中显示向该图像赋予的roi等。即，例如，在图像中重叠显示圆显示6512、箭头显示6513、文本显示6514等。此外，评论详情画面650包括评论栏652、用户名显示栏658以及日期时间显示栏659。在评论栏652显示被赋予的文本信息的全文，在用户名显示栏648显示登记了评论/roi等的用户的信息，在日期时间显示栏649显示评论/roi等被登记的日期时间。并且，评论详情画面650包括评论图标653、roi设定图标654、关闭图标655以及动态图像再现图标656。评论详情画面650的字符、图形等的颜色例如也可以根据登记了评论的用户而不同，从而容易知晓是谁的评论等。不限于颜色，也可以通过字体等的不同来表现用户的差异。

在步骤s802中，运算部210判定是否选择了评论图标653。在未选择评论图标653时，处理进入步骤s804。另一方面，在选择了评论图标653时，处理进入步骤s803。在步骤s803中，运算部210执行供用户向新显示的评论栏记载评论的评论记入处理。之后，处理进入步骤s804。

在步骤s804中，运算部210判定是否选择了roi设定图标654。在未选择roi设定图标654时，处理进入步骤s807。另一方面，在选择了roi设定图标654时，处理进入步骤s805。在步骤s805中，运算部210进行与参照图10说明的处理同样的使用roi设定画面620的roi设定处理。在步骤s806中，运算部210判定是否选择了roi设定画面620的ok图标623。如果未选择ok图标623，则处理返回步骤s805，继续roi设定处理。在选择了ok图标623时，关闭roi设定画面620，处理进入步骤s807。

在步骤s807中，运算部210判定是否选择了动态图像再现图标656。在未选择动态图像再现图标656时，处理进入步骤s809。另一方面，在选择了动态图像再现图标656时，处理进入步骤s808。在步骤s808中，运算部210进行动态图像再现处理，在该动态图像再现处理中，按照拍摄顺序依次显示与被附加当前选择的评论的图像关联的图像。

参照图18所示的流程图对动态图像再现处理进行说明。在步骤s901中，运算部210选择与被附加当前选择的评论的图像关联的图像。

图19示意性示出随着时间经过而拍摄的多个图像。在图19中1个四边形示出1张图像。如上所述，针对1个拍摄位置，根据设定的定时通过拍摄而得到多个图像，因此，存在按照时间序列得到的图像组700。通常观察时间较长，因此，图像组可能包含大量图像。例如，在每隔1小时进行拍摄的情况下，在30日间取得720张图像。在本实施方式中，从这些大量的图像中选择与当前选择的图像关联的一系列图像。例如，将当前选择的图像设为选择图像701。此时，将在选择图像701之前刚刚进行传代作业后的图像选择为开始图像702。此外，将在选择图像701之后将要进行传代作业前的图像选择为结束图像703。将从开始图像702到结束图像703为止的一系列图像选择为选择图像704。开始图像702及结束图像703也可以不与传代作业关联而与培养基更换关联，也可以与试剂添加等其他作业关联，还可以按照与其他观察关联的任意的基准来选择。此外，开始图像702也可以是一系列观察的最开始拍摄到的图像。此外，结束图像703也可以是一系列观察的最后拍摄到的最新的图像。能够根据目的而适当选择开始图像702及结束图像703。

在步骤s902中，运算部210使显示装置进行按照时间顺序依次显示在步骤s901中选择出的选择图像704的动态图像再现。即，运算部210使显示装置再现时间推移动态图像。以上，动态图像再现处理结束，处理返回详情确认处理。在详情确认处理中，在步骤s808的动态图像再现处理之后，处理进入步骤s809。

在步骤s809中，运算部210判定是否选择了评论详情画面650的关闭图标655。在未选择关闭图标655时，处理返回步骤s802，重复上述处理。另一方面，在选择了关闭图标655时，处理进入步骤s810。

在步骤s810中，运算部210根据如上述那样记入、设定的评论等而生成评论文件361，并记录于观察数据300。此时，在记录于评论文件361的评论种类372中，还记录示出针对评论的回复这一旨意、原始的评论的信息等。此外，在步骤s811中，运算部210将关于该评论的需要信息记录于与相应的图像有关的图像文件331的评论348、解析信息390的评论397、拍摄信息310的评论314等。

以上，详情确认处理结束，处理返回参照图14说明的评论确认处理。在评论确认处理的步骤s705的详情确认处理之后，处理进入步骤s706。

在步骤s706中，运算部210判定是否选择了共享图标643。在未选择共享图标643时，处理进入步骤s708。另一方面，在选择了共享图标643时，处理进入步骤s707。在步骤s707中，运算部210进行画面信息发送处理。画面信息发送处理是如下处理：为了使其他用户观看与当前显示的画面相同的画面，向其他用户发送与该画面相关的信息。参照图20所示的流程图对画面信息发送处理进行说明。

运算部210构成为能够通过url来确定显示画面。在步骤s1001中，运算部210生成用于确定当前显示的画面的url。在步骤s1002中，运算部210根据用户的指示来选择应共享画面的对方。在步骤s1003中，运算部210使由用户操作的终端起动电子邮件软件，并启动电子邮件的发送画面。在步骤s1004中，运算部210向发送邮件的目的地地址粘贴在步骤s1002中选择出的共享者的电子邮件地址。在步骤s1005中，运算部210向发送邮件的内容粘贴在步骤s1001中生成的url。

用户向生成的电子邮件适当追加文章等，使用电子邮件软件向共享者发送电子邮件。接收到该电子邮件的共享者通过选择记载于电子邮件的url，能够观看该电子邮件的发送者希望阅览的画面。以上，画面信息发送处理结束，处理返回评论确认处理。

这里，作为一例而示出了使用电子邮件来共享阅览画面的信息的方法，但也可以不使用电子邮件。例如，也可以使用网页浏览器或专用的信息共享应用等而共享应阅览的画面。

针对图14所示的评论确认处理继续说明。在步骤s707的画面信息发送处理后，处理进入步骤s708。

在步骤s708中，运算部210判定是否进行了例如用户通过点击评论概要显示画面640以外的区域等进行的、评论确认处理完成的指示。在未指示评论确认处理完成时，处理返回步骤s702，重复上述处理。另一方面，在指示了评论确认处理完成时，评论确认处理结束，处理返回参照图5说明的观察数据管理处理。

返回图5继续进行观察数据管理处理的说明。在步骤s207的评论确认处理后，处理进入步骤s208。在步骤s208中，运算部210判定是否选择了动态图像操作图标560的再现图标561等，即，是否选择了动态图像再现。在未选择动态图像再现时，处理进入步骤s210。另一方面，在选择了动态图像再现时，处理进入步骤s209。

在步骤s209中，运算部210进行参照图18说明的动态图像再现处理。即，选择与当前选择的时间点关联的图像，使选择出的图像作为时间推移动态图像而再现。例如如图6所示，在图像显示区510并排显示有多个缩略图图像时，进行将各个缩略图图像作为时间推移动态图像而依次切换的显示。在动态图像再现处理后，处理进入步骤s210。

在步骤s210中，运算部210判定是否在时间条550中选择了时间。在未选择时间时，处理进入步骤s212。另一方面，在选择了时间时，处理进入步骤s211。

在步骤s211中，运算部210根据选择出的时间而更新图像显示区510所显示的图像。即，将在选择出的时间取得的图像显示于图像显示区510。之后，处理进入步骤s212。

在步骤s212中，运算部210判定是否选择了主画面500内的共享图标582。在未选择共享图标582时，处理进入步骤s214。另一方面，在选择了共享图标582时，处理进入步骤s213。

在步骤s213中，运算部210进行参照图20说明的画面信息发送处理。即，运算部210进行例如通过电子邮件等将表示当前显示的画面的url发送给用户选择出的共享者的处理。在画面信息发送处理后，处理进入步骤s214。

在步骤s214中，运算部210判定是否选择了主画面500的评论列表图标584。在未选择评论列表图标584时，处理进入步骤s216。另一方面，在选择了评论列表图标584时，处理进入步骤s215。在步骤s215中，运算部210进行评论列表处理。

参照图21所示的流程图对评论列表处理进行说明。

在步骤s1101中，运算部210使显示装置显示评论列表。评论列表是一览显示观察数据300所包含的评论文件361的评论的列表。此外，在该评论列表中，例如也可以以使显示颜色或字符颜色等不同的方式进行显示，使得能够区分正在阅览的用户已经确认的评论和未确认的评论。

在步骤s1102中，运算部210判定是否选择了评论列表中的任意一个评论。在未选择评论时，处理进入步骤s1104。另一方面，在选择了评论时，处理进入步骤s1103。在步骤s1103中，运算部210进行参照图16说明的详情确认处理。即，针对选择出的评论，例如将图17所示的评论详情画面650显示于显示装置，并阅览评论的详情内容，或进行关于评论的各种处理。在详情确认处理后，处理进入步骤s1104。

在步骤s1104中，运算部210判定是否进行了评论检索的指示。在未进行评论检索的指示时，处理进入步骤s1106。另一方面，在进行了评论检索的指示时，处理进入步骤s1105。在步骤s1105中，运算部210进行评论检索处理。即，运算部210例如根据由用户输入的评论所包含的关键字、被附加了评论的图像的拍摄时间、附加了评论的用户的信息、评论被登记的时间等，从评论文件组360所包含的评论文件361中选择相应的评论。运算部210使显示装置一览显示相应的评论，由用户选择之后，针对选择出的评论显示评论详情画面650。在评论检索处理后，处理进入步骤s1106。

在步骤s1106中，运算部210判定是否使评论列表处理结束并返回观察数据管理处理。在不结束评论列表处理时，处理返回步骤s1102，重复上述处理。另一方面，在结束评论列表处理时，处理返回观察数据管理处理。

在图5所示的观察数据管理处理的步骤s215的评论列表处理后，处理进入步骤s216。在步骤s216中，运算部210判定是否选择了退出图标586。在未选择退出图标586时，处理返回步骤s202，重复上述处理。另一方面，在选择了退出图标586时，观察数据管理处理结束。

[观察系统的优点]

对本实施方式的观察系统1的优点的一部分进行说明。根据本实施方式的观察系统1，用户能够对由观察装置110得到的图像、根据该图像而得到的解析结果等赋予与关心的某个区域、时间点、内容、判断、意见等相关的评论。根据观察系统1，将这些评论与图像、解析结果等事实关联地记录。因此，将这样的评论在适当且有意义地整理的同时进行记录。此外，该记录所耗费的时间和劳力与记录于笔记本等以往的方法相比较少。细胞培养有时例如长期持续几周等。当长期重复拍摄或记录评论时，图像及评论变得大量。根据本实施方式的观察系统1，对用户来说进行记录的时间和劳力以及整理记录的时间和劳力都很少。此外，根据观察系统1，通过整理而显示图像及评论，因此，对用户来说容易进行图像及评论的阅览。

此外，根据观察系统1，能够由赋予了评论的用户以外的用户阅览这些评论。因此，能够容易由许多用户共享所赋予的评论。此外，此时由于在按照时间序列适当整理的状态下记录了评论，因此，对未进行培养作业的用户来说，也能够一边确认培养的过程一边确认该评论。赋予的评论即便是基于培养过程而完成的评论，即便是基于赋予了评论的用户的主观而得到的评论，对其他用户来说也容易掌握内容。

此外，在观察系统1中，用户能够与其他人赋予的评论关联地进一步赋予评论，因此，能够顺利地进行与培养细胞相关的报告、咨询、讨论、指示等交流。这样，根据观察系统1，能够以适当整理的形式容易地记录以往口头交流而难以保留在记录中的评论。此外，根据观察系统1，能够在场所、时间不同的情况下进行这些交流。

此外，在观察系统1中，在连续显示多个图像的时间推移动态图像再现中，从多个蓄积的图像中仅选择例如与评论等关联的图像并使其再现。因此，用户能够更加准确地掌握培养细胞的状态，能够节省阅览不需要的信息的精力。

另外，在上述实施方式中，示出了通过服务器200进行观察数据管理处理的例子，但不限于此。例如控制器130也可以不与网络连接，由控制器130进行上述的一系列观察数据管理处理。

可以去掉上述实施方式所示的多个数据、处理中的一部分，也可以追加其他的数据、处理中的一部分。例如，在观察数据300中示出了重复保持有例如拍摄位置、拍摄时间、特定信息及评论等的例子，但能够省略它们中的一部分。此外，例如示出了图5所示的观察数据管理处理包括各种处理的例子，但能够删除这里示出的处理中的一部分处理，也可以追加其他处理，处理的顺序能够适当变更。

此外，也可以在上述处理、各种判断等中利用与人工智能有关的技术。