信息处理装置、信息处理系统和信息处理方法
【专利摘要】本公开涉及信息处理装置、信息处理系统和信息处理方法。信息处理装置包括存储单元和输出单元。存储单元能够存储包括样品图像和标签图像两者的载片图像,所述样品图像和标签图像通过拍摄所述载片获取。所述载片保持所述样品并且具有正面,在所述载片的正面提供指示有关样品的标签信息的标签。输出单元能够将该载片的图像输出为缩略图。
【专利说明】信息处理装置、信息处理系统和信息处理方法
【技术领域】
[0001]本公开涉及用于虚拟显微镜的【技术领域】中处理图像的信息处理装置、信息处理系统和信息处理方法,所述虚拟显微镜用于医药、病理学等领域。
【背景技术】
[0002]在医药、病理学等领域中,人们已经提出了数字化通过光学显微镜获得的生物体的细胞、组织、器官等的图像且允许用户(例如医生和病理学者)基于数字图像检查组织等或诊断患者的虚拟显微镜系统。虚拟显微镜能够应用户的要求,在计算机上虚拟放大和缩小图像,以便在显示单元上显示图像。
[0003]在日本专利申请公开第2009-53701号公开的创建虚拟显微镜载片的方法中,计算机控制的显微镜用于取得样品的多个低倍率图像、碎片化这些图像并重构这些图像。结果,产生该样品的宏观图像。产生这样宏观图像(macro image)的目的是让用户能够一次观看整个样品,并且通过使用该样品的整个图像,选择图像上的重要部分(例如,请参见日本专利申请公开第2009-53701号的说明书的第0042段)。
[0004]进一步地,在日本专利申请公开第2011-117991号中,在载玻片上保持的样品由扫描仪读取,从而为一个样品以多个不同放大率(分辨率)生成该样品的图像。而且,利用该样品的图像,预定低倍率图像可以被设置为缩略图。缩略图列表被显示为缩略列表视图的画面,并且该缩略图被用于访问该样品图像的真实数据(原扫描图像)(例如,请参见日本专利申请公开第2011-117991号的段落0045和0052、图4等)。
【发明内容】
[0005]要求像日本专利申请公开第2011-117991号中公开的缩略列表视图一样显示缩略图列表的系统提高便利性和用户友好性。
[0006]鉴于上述的情况,提供能够增加系统在显示缩略图列表时的便利性和可用性的信息处理装置、信息处理系统和信息处理方法是有利的。
[0007]根据本公开的实施方式,提供包括存储单元和输出单元的信息处理装置。
[0008]该存储单元存储载片的图像。该载片保持该样品并且具有正面,在所述载片的正面提供指示有关样品的标签信息的标签。该载片图像包括通过对该载片拍摄获取的样品和标签两者的图像。
[0009]输出单元能够将载片的图像输出为缩略图。
[0010]由于包括样品图像和标签图像两者的载片图像可以被显示为缩略图,在用户能够在屏幕上原样观看实际的载片。因此,增加了用户的直观感觉,并且改善了便利性和可用性。
[0011]除了非易失性存储设备外,存储单元还包括短暂存储信息的易失性存储设备。
[0012]输出单元的输出功能包括执行输出到显示装置供显示的功能。
[0013]信息处理装置可以进一步包括处理单元,被配置为通过切出载片图像中的标签图像生成切出标签图像。存储单元可以将标签消除载片图像和所述切出标签图像彼此关联地存储,所述标签消除载片图像包含所述载片图像中的至少所述样品图像并且是通过从所述载片图像消除所述标签图像而获得。
[0014]结果,信息处理装置可以分开存储标签消除载片图像和切出标签图像(或标签信息,其是在切出标签图像中指示的信息),这可用于信息的管理。
[0015]处理单元可以将用于隐藏所述载片图像中的所述标签图像的遮盖图像(coverimage)叠加在所述载片图像中的所述标签图像上,从而生成所述标签消除载片图像。存储单元可以在标签消除载片图像和切出标签图像彼此关联的情况下存储标签消除载片图像和切出标签图像。
[0016]结果,输出单元可以输出缩略图,在所述缩略图中,标签图像(即标签信息)被标签遮盖图像隐藏。
[0017]处理单元能够加密切出标签图像。存储单元可以存储标签消除载片图像和被加密的加密切出标签图像,并且标签消除载片图像和加密切出标签图像彼此关联。结果,在标签信息包括有必要隐藏的信息(例如个人信息)的情况下,可以提高安全性。
[0018]或者,处理单元能够加密该切出标签图像。处理单元可以存储标签消除载片图像和被加密的加密切出标签图像并且标签消除载片图像和加密的切出标签图像彼此关联。
[0019]处理单元能够基于解码密码解码该加密切出标签图像,并且将被解码的切出标签图像叠加在标签消除载片图像中提供标签的区域上,从而恢复载片图像。
[0020]结果,输出单元可以将恢复的载片图像输出为缩略图。
[0021]例如,信息处理装置可以进一步包括接收单元,被配置为接收由用户输入的操作,并且处理单元可以根据由接收单元接收的操作输入信息,执行恢复处理。
[0022]处理单元可以将用于隐藏载片图像中的标签图像的遮盖图像叠加在载片图像中的标签图像上,从而生成标签消除载片图像。存储单兀可以存储标签消除载片图像和最初的载片图像,并且标签消除载片图像与最初的载片图像彼此关联。
[0023]结果,输出单元可以选择性地输出最初的载片图像和标签消除载片图像。
[0024]例如,信息处理装置可以进一步包括接收单元,被配置为接收由用户输入的操作,并且输出单元可以根据由接收单元获取的操作输入信息,执行选择性的输出处理。
[0025]处理单元可以从载片图像切出预定区域作为标签区域。或者,处理单元可以通过边缘检测处理,从载片图像切出标签图像。或者,处理单元可以通过字符识别处理,读取在载片图像中的标签信息。
[0026]处理单元可以加密所读取的标签信息。结果,在标签信息包括有必要隐藏的信息(例如个人信息)的情况下,可以提高安全性。
[0027]当载片是透明的时,存储单元可以将如下地获得的标签消除载片图像与载片图像关联地存储。即,通过利用来自作为载片的正面的相反侧的背面侧的照明光照射载片,并从正面侧拍摄载片,获得了样品图像和标签消除载片图像使得标签信息被标签的阴影隐藏。结果,不需要用于标签图像切出处理的算法。
[0028]根据本公开的另一个实施方式,提供了包括扫描仪装置、服务器装置和查看器装置的信息处理系统。
[0029]该扫描仪装置包括获取单元和发送单元。获取单元能够拍摄保持样品并且具有正面的载片,在所述载片正面提供指示有关样品的标签信息的标签,并且所述获取单元能够获取载片的图像,载片的图像包括通过拍摄获取的样品图像和标签图像两者。发送单元能够发送载片的图像。
[0030]服务器装置包括存储单元、接收单元和发送单元。存储单元能够将从扫描仪装置的发送单元发送的载片图像作为缩略图存储。接收单元能够接收用于请求获取缩略图的请求信号。发送单元能够基于请求信号的接收,发送所存储的缩略图。
[0031]查看器装置包括生成单元、发送单元和接收单元。生成单元能够生成请求信号。发送单元能够向服务器装置发送生成的请求信号。接收单元能够接收从服务器装置发送的缩略图。
[0032]根据本公开的另一个实施方式,提供了包括服务器装置和查看器装置的信息处理系统。
[0033]服务器装置包括存储单元、接收单元和发送单元。存储单元能够将载片图像存储为缩略图,所述载片图像包括通过拍摄载片获取的样品图像和标签,载片保持样品并具有正面,在所述正面提供指示有关样品的标签信息的标签。接收单元能够接收用于请求获取缩略图的请求信号。发送单元能够基于请求信号的接收,发送所存储的缩略图。
[0034]查看器装置包括生成单元、发送单元和接收单元。生成单元能够生成请求信号。发送单元能够向服务器装置发送所生成的请求信号。接收单元能够接收从服务器装置发送的缩略图。
[0035]根据本公开的另一个实施方式,提供了信息处理方法,所述信息处理方法包括将载片图像存储为缩略图,所述载片图像包括通过拍摄载片获取的样品图像和标签图像,载片保持样品并具有正面,在所述正面提供指示有关样品的标签信息的标签。
[0036]然后,输出缩略图。
[0037]如上所述,根据本公开,可以使用于显示缩略图列表的系统更加方便并增加其可用性。
[0038]如附图所示,根据本公开最佳模式的实施方式的以下详细描述,本公开的这些和其他目标、特征和优势将变得更加显而易见。
【专利附图】
【附图说明】
[0039]图1示出根据本公开实施方式的信息处理系统的结构的图;
[0040]图2示出信息处理装置的硬件结构的框图;
[0041]图3示出用于说明由扫描仪拍摄的真实图像数据的显示原理的图像金字塔结构的图;
[0042]图4示出用于说明当图像金字塔结构的图像组生成时的过程的图;
[0043]图5示出通过扫描仪拍摄获取的载玻片图像的例子的图;
[0044]图6示出当服务器存储从扫描仪发送的载玻片图像时的过程的流程图;
[0045]图7示出标签消除载玻片图像和标签图像作为单独文件存储的例子的图;
[0046]图8示出标签消除载玻片图像和标签图像作为单独文件存储的例子的图;
[0047]图9示出标签消除载玻片图像和最初的载玻片图像作为单独文件存储的例子的图;[0048]图10示出切出标签图像可被加密的情况的存储处理的流程图;
[0049]图1lA和图1lB示出相应于图7到图9在标签图像被加密的状态下的图;
[0050]图12示出切出标签图像未加密的情况的存储处理的流程图;
[0051]图13示出在扫描仪加密切出标签图像的情况下的处理的流程图;
[0052]图14示出查看器的缩略图的显示处理的流程图;
[0053]图15示出在标签图像未加密的情况下可由查看器显示的载玻片图像的各种模式的图;
[0054]图16示出在标签图像加密的情况下可由查看器显示的载玻片图像的各种模式的图;
[0055]图17示出由查看器显示的缩略图列表画面的例子的图;以及
[0056]图18A到图18C示出根据与本公开对比的参考例的实际载玻片和通过扫描载玻片获取缩略图的图。
【具体实施方式】
[0057]在下文中,通过参考附图,描述本公开的实施方式。
[0058](信息处理系统的结构)
[0059]图1示出根据本公开实施方式的信息处理系统的结构的图。
[0060]信息处理系统提供连接到网络的多个信息处理装置,以便彼此通信。作为信息处理装置,提供例如,数码病理扫描仪(扫描仪装置)300、病理服务器(服务器装置)200以及数字查看器终端(查看器装置)100。
[0061]通常,网络是LAN (局域网)并且是在医院的网络。网络可以包括WAN (广域网)。可供选择地,网络可以使用近场通信,例如红外通信。
[0062]数字病理扫描仪300、数字病理服务器200以及数字查看器终端100分别被称为扫描仪300、服务器200以及查看器100。
[0063]扫描仪300提供光学显微镜并且具有计算机的功能,其中所述光学显微镜拍摄保持在作为载片的透明载玻片SLG (参见,图5)上的样品(例如生物体的组织)的图像。扫描仪300可以由已知的硬件形成。
[0064]服务器200基本上存储由扫描仪300拍摄的样品图像(由将在后面介绍的图像金字塔结构50形成的整个图像组(在下文中,被称为真实图像数据))以及载玻片SLG的整体图像。
[0065]查看器100是由用户,通常是医生操作的终端装置。例如,基于用户输入的操作,查看器100获取存储在服务器200中载玻片SLG的图像或从服务器200获取真实图像数据,并且显示图像或数据。
[0066]图2示出例如作为信息处理装置的查看器100的硬件结构的框图。
[0067]通常,查看器100由PC (个人计算机)构成。查看器100设置有CPU (中央处理单元)101、ROM (只读存储器)102、RAM (随机存取存储器)103、输入和输出接口 105、以及将这些部件彼此连接的总线104。
[0068]显示单元106、输入单元107、存储单元108、通信单元(发送单元和接收单元)109、驱动单元Iio等被连接到输入和输出接口 105。[0069]显示单元106是使用液晶、EL (电致发光)、CRT (阴极射线管)等的显示设备。
[0070]输入单元107是,例如点击设备、键盘、触摸屏或其他操作设备。在输入单元107包括触摸屏的情况下,触摸屏可以与显示单元10集成在一起。
[0071]存储单元108是非易失性存储设备,例如HDD (硬盘驱动器)、闪存或其他固态存储器。
[0072]驱动单元110是能够驱动可移动记录介质111 (例如光学记录介质、flopy (注册商标)盘、磁记录带以及闪存)的设备。相反,存储单元108常常用作主要驱动不可移除记录介质并且被事先安装在查看器100上的设备。
[0073]通信单元109是用于与能够连接到LAN、WAN等网络的其他设备通信的通信装置。通信单元109可以进行有线的或无线的通信。通信单元可以包括调制解调器、路由器等功倉泛。
[0074]扫描仪300具有光学显微镜的功能和计算机的功能。计算机硬件的结构与查看器100的结构相同。已知的结构可以被用作扫描仪300。
[0075]服务器200也可以由计算机形成,并且具有仅排除例如像查看器100硬件结构的驱动单元Iio的硬件结构。
[0076]扫描仪300、服务器200以及查看器100的CPU和对于CPU的操作必要的硬件以及
软件用作“处理单元”。
[0077](样品的图像结构及其显示原理)
[0078]接下来,将描述由扫描仪300拍摄的图像(真实图像数据)和其显示原理。图3示出用于说明显示原理的图像金字塔结构的图。
[0079]在一般的病理学领域,通过切片生物体的器官、组织、细胞的物体或其一部分而获得的对象是样品。作为连续切片,通过在其厚度方向连续切片组织等,可以获取多个切片。切片样本被存储在载玻片SLG上,以及样品15 (参见图5)是要用显微镜观察的对象。在本实施方式中,具有显微镜功能的扫描仪300扫描载玻片SLG上的样品15,并且将如此获取的数字图像存储在扫描仪300或服务器200上。
[0080]图像金字塔结构50是对由扫描仪300从一个组织等样品15获取的相同图像以多个不同分辨率生成的图像组(样品的整个图像组)。在图像金字塔结构50的最下层,配置有最大尺寸的图像,以及在所述图像金字塔结构50的最上层,配置有最小尺寸的图像。具有最大尺寸的图像的分辨率是,例如50x50Kpixel (千像素)或40x60 (Kpixel)0具有最小尺寸的图像的分辨率是,例如256x256 (像素)或256x512 (像素)。
[0081]就是说,如果显示单元106例如100%地显示那些图像(以与其像素数相等的物理点数显示图像),最大尺寸的图像被显示为最大的,以及最小尺寸的图像被显示为最小的。在这里的图3中,显示单元106的显示范围由D表示。
[0082]图4示出用于说明当生成图像金字塔结构50的图像组时的过程的图。
[0083]首先,扫描仪300拍摄最初的图像作为高分辨率的图像。最初的图像对应于具有最大尺寸的图像,其是在图3中示出的图像金字塔结构50的最底层图像,就是说,最高分辨率的图像。
[0084]如图3所示,扫描仪300或服务器200生成,例如具有从如上所述获取的最大尺寸的图像逐步减少分辨率的多个图像,并且将这些图像以例如“瓦片(tile)”单位存储,其中“瓦片”是预定尺寸单位。一个瓦片的尺寸是例如256x256 (像素)。由此产生的图像组形成图像金字塔结构50,并且扫描仪300存储图像金字塔结构50的信息。实际上,扫描仪30只需要将多个不同的分辨率的图和分辨率信息彼此关联地存储。应当指出,图像金字塔结构50可以由如图1所示的查看器100生成和存储。
[0085]形成图像金字塔结构50的整个图像组可以由已知的压缩方法生成,或可以由用于生成一般缩略图的已知压缩方法生成。或者,扫描仪300可以从拍摄最初的图像的倍率依次改变倍率,以多个不同分辨率实际拍摄样品的图像,并利用如此获取的整个图像组生成图像金字塔结构50。
[0086]根据用户通过输入单元107的输入操作,查看器100使用应用软件从图像金字塔结构50提取期望的图像,并且在显示单元106上输出图像,其中所述应用软件采用图像金字塔结构50的系统。具体地,查看器100显示由用户选择的任何部分的图像,以用户选择的任何分辨率输出图像。通过这样的处理,用户可以获得在改变观察倍率的同时观察样品15的感觉。就是说,查看器100起到虚拟显微镜的作用。在这种情况下的虚拟观察倍率与实际的分辨率相对应。
[0087]进一步地,如上所述,扫描仪300以预定倍率(分辨率)拍摄保持样品15的整个载玻片SLG的图像,从而生成整个载玻片SLG的图像(在下文中,被称为载玻片图像SLT)。图7的左部分示出由图像拍摄获取的载玻片图像SLT。扫描仪300在存储单元中存储载玻片图像SLT,或向服务器200发送图像,并且服务器200存储载玻片图像SLT。载玻片图像SLT被设置为缩略图。在载玻片图像SLT以相对低分辨率拍摄的情况下,载玻片图像SLT被原样设置为缩略图。
[0088]或者,在预定倍率是相对高分辨率的情况下,可以将通过压缩载玻片图像SLT获取的图像设置为缩略图。
[0089]如图5所示,在载玻片SLG表面上,可以贴上指示标签信息的标签16,以便增加处理载玻片SLG的便利性。标签信息17是有关样品15的信息,可以被手写或打印文字、符号、图形等作为该信息。通常,标签16是对要粘贴的表面有自粘性的贴纸,。
[0090]作为标签信息的例子,可以是用于识别其组织或细胞被保持在载玻片SLG上的患者的ID(标识符)。此外,标签信息可以是染色信息、或指示患者的检查日期和时间、扫描日期和时间等的信息。例如,标签16以纵轴方向被贴在载玻片SLG的左部。进一步地,样品15被存储在载玻片SJG的中央,或被存储在从载玻片SJG的中央到右部。
[0091]根据本实施方式的扫描仪300生成包括如上所述的标签16的图像和样品15的图像的载玻片图像SLT。本技术的基本特征在于由扫描仪300、服务器200或查看器100将这样的载玻片图像SLT作为缩略图输出。
[0092]进一步地,扫描仪300或服务器200存储如上所述地生成的载玻片图像SLT和对应的真实图像数据(形成图像金字塔结构的整个图像组),其中所述载玻片图像SLT与真实图像数据彼此关联。结果,正如稍后所述,查看器100可以显示指示载玻片图像SLT的缩略图。当用户访问缩略图时,用于使得可以观察真实图像数据的预定应用软件被激活。因此,用户可以观察真实的图像数据。
[0093]在下文中,将描述有关载玻片图像SLT的存储的处理以及有关显不载玻片图像SLT的处理的模式。在这样的模式中,相同处理的说明将被简化或省略。[0094](用于载玻片图像SLT的存储处理)
[0095]1.由服务器200存储载玻片图像SLT的模式
[0096](A)标签图像未加密情况下的处理
[0097]在载玻片图像SLT的存储处理中,将描述标签图像的切出图像(切出标签图像)未加密的情况。
[0098]图6示出当服务器接收从扫描仪300发送的载玻片图像SLT时,由服务器200存储载玻片图像SLT的处理的流程图。将在下面描述的处理通常由彼此配合的硬件和软件执行。
[0099]服务器200接收从扫描仪300发送的载玻片图像SLT (步骤101)。在这样的情况下,服务器200将载玻片图像SLT暂时存储在存储器中(存储单元)。服务器200确定是否有必要在载玻片图像SLT中隐藏标签信息(步骤102)。步骤102的确定处理可以由服务器200根据预定算法动态执行。
[0100]隐藏不是必要的情况意味着,例如标签信息不包括私人信息(患者的名字等)的情况,或未记载标签信息的情况。服务器200可以通过字符识别技术将名字读取为私人信息,并且依靠数据库核对所读取的名字,或由另一算法确定标签信息是否包括私人信息。
[0101]应当指出,当前的字符识别处理不限于包括像OCR (光学字符读取器(识别))一样光学读取目标信息的步骤(即,利用扫描仪扫描目标对象的步骤)的情况,也提供将不包括文本信息的图像中的字符转换为文本信息的技术。
[0102]作为“动态执行”的情况的另一个例子,可以是由人预先记载关于私人信息是否包括在标签上的二进制信息并由服务器200读取标签信息的二进制信息的模式。
[0103]或者,步骤102的确定处理可以被静态执行,例如人来执行确定处理。
[0104]在步骤102为“否”的情况下,服务器200将载玻片图像SLT原样存储为缩略图(宏观图像)(步骤104)。
[0105]<标签图像的切出处理模式>
[0106]在步骤102为“是”的情况下,服务器200如图7所示地切出被包括在载玻片图像SLT中的标签图像26和样品图像25中的标签图像26,从而生成切出标签图像26’(步骤103)。
[0107]在步骤103的切出处理中,作为用于使服务器200识别标签图像26被提供在载玻片图像SLT的表面上的区域的算法(B卩,切出处理的算法),给出下列方法。
[0108](I)载玻片图像SLT的预先确定区域被识别为标签区域。
[0109]例如,在执行样品的染色处理时,在标签被自动贴上的情况下,或如果标签是手动贴上时贴标签位置是确定的情况下,标签区域被设置为固定位置并且设置为具有固定尺寸。
[0110](2)在载玻片图像SLT中的标签图像26通过边缘检测处理识别。
[0111]例如,通过使用已知的边缘检测算法,例如检测被二值化亮度值的边界的处理,可以自动检测标签的区域。
[0112](3)在载玻片图像SLT中的标签16上指示的标签信息17通过字符识别处理读取。
[0113]这是一种如下的方法:通过使用上述的字符识别处理的算法,将记载作为标签信息17的字符的区域的周围框(例如,矩形框)识别为标签区域。[0114]进一步地,服务器200执行步骤103的处理附带的下列处理。如图7所示,服务器200将用于隐藏最初的载玻片图像SLT的标签图像的遮盖图像28叠加在在标签图像26上,从而产生标签信息17被隐藏的载玻片图像。这里,为了帮助理解说明,标签信息17被隐藏的载玻片图像被称为标签图像被消除的标签消除载玻片图像(标签消除载片图像)。
[0115]在图7示出的例子中,用于隐藏标签图像26的遮盖图像28是利用纯黑色涂黑的图像。当然,遮盖图像28不限于黑色图像,并且可以是另一个颜色(纯色或多个颜色)或可以是包括图案(pattern)、图样(design)等图像。
[0116]作为包括图案或图样的图像,例如,使用通过将标签图像26模糊为马赛克获取的图像或钥匙图片。钥匙图片被应用到标签图像26被加密的情况是有利的,这将稍后介绍。
[0117]<图像存储处理的模式>
[0118]在步骤104中,服务器200存储图像的处理有三种模式。
[0119](I)服务器200将将在步骤103中生成的切出标签图像26’与最初的载玻片图像SLT关联(连结)在一起,并且将这些图像存储为单独的文件。
[0120](2)如图8所示,服务器200将标签消除载玻片图像STL2与在步骤103中生成的切出标签图像26’关联,并且将这些图像存储为单独的文件,其中所述标签消除载玻片图像STL2包括至少样品图像,标签图像26从载玻片图像SLT移除。
[0121]在图8所示模式的情况下,服务器200可以将最初的载玻片图像SLT与包括切出标签图像26’和标签消除载玻片图像SLT2的图像关联,并且存储这些图像。
[0122](3)或者,如图9所示,服务器200将标签消除载玻片图像SLTl与最初的载玻片图像SLT关联,并且将这些图像存储为单独的文件。在这样的情况下,在切出标签图像26’与标签消除载玻片图像SLTl以及最初的载玻片图像SLT关联的时候,仅需存储在步骤103中生成的切出标签图像26’。在此情况下,服务器200能够应查看器的要求,选择性地输出图像SLT和SLTl。
[0123]服务器200处于服务器可以应查看器100的获取缩略图请求,向查看器100发送载玻片图像SLT、标签消除载玻片图像SLTl等的状态。
[0124](B)标签图像可以被加密情况下的处理
[0125]下一步,将描述切出标签图像26’被加密的情况下的存储处理。图10是示出该处理的流程图。
[0126]步骤201到203的处理和在图6中示出的步骤101到103相同。
[0127]服务器200确定加密的密码是否被输入(步骤204)。例如,扫描仪300仅需以预定定时接收用户的密码输入并向服务器200发送密码信息。预定定时可以在例如扫描仪300扫描载玻片SLG之前或之后的定时。
[0128]在步骤204为“否”的情况下,服务器200加密标签图像26是不可能的,因此标签图像可以被删除。
[0129]在步骤204为“是”的情况下,服务器200加密标签图像26,从而获取如图1IA和图1lB所示的加密切出标签图像26”(步骤205)。在加密处理中,可以使用,例如DES (数据加密标准)以及AES (高级加密标准)。
[0130]如上所述,通过图7到图9所示方法中的一个,服务器200存储加密输出标签图像26”(步骤206)。分别对应于图7和图8的图在图1lA和图1lB中示出。[0131]2.扫描仪300存储载玻片图像SLT的模式
[0132]在上述第I项中,描述了服务器200从扫描仪300接收载玻片图像SLT并存储图像的处理。在第2项.中,将描述由扫描仪300存储载玻片图像SLT的模式。
[0133](A)标签图像未加密的情况下的处理
[0134]图12示出如第I项的(A) —样切出标签图像26’不被加密的情况下的存储处理的流程图。扫描仪300的存储处理基本与服务器200的存储处理相同。
[0135]扫描仪300如上所述地与拍摄样品的图像(生成真实图像数据)分开地拍摄整个载玻片SLG的图像,从而获取包括标签图像26和样品图像25的载玻片图像SLT (步骤301)。然后,扫描仪300执行图6中示出的步骤102 —样的处理(步骤302)。
[0136]在步骤302为“是”的情况下,扫描仪300从载玻片图像SLT切出标签图像26,从而生成切出标签图像26’(步骤303)。用于切出处理的算法可以是如上所述的算法。
[0137]扫描仪300向服务器200发送生成的图像(步骤304)。在此情况下,扫描仪300将生成的图像暂时存储在存储器(存储单元)中,并且向服务器200 (输出单元)输出图像。
[0138]在步骤304中,在步骤302为“是”的情况下,扫描仪300将在步骤301中拍摄的载玻片图像SLT作为缩略图发送。另一方面,在处理经过步骤303的情况下,扫描仪300将切出标签图像26’与标签消除载玻片图像SLTl (SLT2)彼此关联,并且将这些图像作为缩略图向服务器200发送。
[0139](B)标签图像被加密情况下的处理
[0140]图13示出在扫描仪300加密切出标签图像26’的情况下的处理的流程图。处理与图10中示出的处理基本相同。
[0141]在步骤406中,如图1lA和图1lB所示,扫描仪300将被加密的切出标签图像26’与标签消除载玻片图像SLTl等彼此关联,并且将这些图像作为缩略图向服务器200发送。
[0142](显示载玻片图像SLT的处理)
[0143]接下来,将描述由查看器100显示缩略图的处理。图14示出处理的流程图。
[0144]查看器100请求服务器200获取用于访问和查看载玻片图像SLT以及真实图像数据的文件列表的信息(生成请求信号(生成单元)以及向服务器200输出该信号)(步骤501 )。即,查看器100主要输出用于获取一个或更多载玻片图像SLT的请求信号。查看器100可以根据用户输入到查看器100的操作,生成请求信号,或可以根据预定算法,生成该信号。
[0145]一旦接收到请求信号,服务器200发送在获取请求中指定的一个或更多载玻片图像SLT。在处理中,服务器200向查看器100发送在图7到图9以及图1lA和图1lB中示出的一个模式中存储的载玻片图像SLT。在图14中示出的处理中,为了帮助理解说明,做出以下假设。即,将描述服务器200向查看器100发送存储在存储设备中的各种载玻片图像等,并且查看器100基于预定算法使载玻片图像经受各种处理(例如,解码被加密的信息)以进行显示的模式。
[0146]图15和图16示出可以由查看器100显示的载玻片图像SLT的各种模式(包括处理后和未处理的图像)。特别地,图15示出标签图像如同在上述第I项中(A)或第2项中(A)描述的一样未被加密的情况下的图像。图16示出标签图像如同在上述第I项中(B)或第2项中(B)描述的一样被加密的情况下的图像。根据如图14所示流程图的确定处理的结果,改变这些图像中要显示的载玻片图像SLT (缩略图)。[0147]在获取载玻片图像SLT (接收)后(步骤502),查看器100确定是否有必要隐藏载玻片图像SLT的标签信息(步骤503)。步骤503的处理与在图6等所示的步骤102中描述的“动态”处理相同。
[0148]在步骤503为“否”的情况下,查看器100显示所接收的载玻片图像SLT,即,最初的载玻片图像SLT (在图15的A栏中显示的图像)作为缩略图(步骤508)。在这样的情况下,查看器100的CPU101、输入和输出接口 105等起输出单元的作用,所述输出单元用于向显示单元106输出缩略图(同样适用于稍后描述的步骤509和510)。
[0149]应当指出,即使在步骤503中为“否”以及标签图像26被加密的情况下,查看器100可以在步骤508中解码该图像,并且显示最初的载玻片图像SLT (在图16的A栏中显示的图像)。
[0150]在步骤503中为“是”的情况下,查看器100确定是否显示在载玻片图像SLT中提供标签图像26的区域(标签区域)的图像(步骤504)。例如,可以根据查看器100拥有的应用软件的设置改变确定处理的结果。例如,在提供不显示标签区域的设置的情况下(在步骤504中为“否”),生成和显示标签消除载玻片图像SLTl (在图15的B栏中示出的图像)(步骤509)。另一方面,在提供显示标签区域的设置的情况下(在步骤504中为“是”),处理行进到步骤505,并且查看器100执行该处理。
[0151]应当指出,在图15的C栏中示出的图像是载玻片图像SLT,在所述载玻片图像SLT上描述包括个人信息的标签信息。通过这样的方式,查看器可以具有不经过步骤505的处理以及后续处理而将载玻片图像SLT原样显示为缩略图的设置。
[0152]在步骤509中,服务器200可以向查看器100发送标签消除载玻片图像SLTl,并且查看器100可以接收和显示图像(这同样适用于稍后描述的步骤510)。
[0153]在步骤504为“是”的情况下,查看器100确定用于解码图像的密码是否已经输入(步骤505)。例如,这是在用于查看由查看器100保持的图像的应用软件上在登录服务器200时,或在使用软件时,用户是否已经输入用户ID和密码的确定处理。当然,查看器100每次请求显示图像,会显示密码输入画面以使用户输入密码。
[0154]在步骤505中,在密码没有被输入的情况下,处理行进到步骤509。在这样的情况下,查看器100将作为标签消除载玻片图像SLTl的、通过叠加钥匙图片获得的载玻片图像SLT(图16的B栏示出的图像)显示为缩略图。结果,可以清楚地表明标签信息被加密保护。
[0155]另一方面,在密码在步骤505中已经被输入的情况下,查看器100获取包括服务器200的标签信息的被加密的切出标签图像26”,并且通过使用密码解码图像(步骤506)。在这样的情况下,服务器200向查看器100发送被加密并且与已经被发送的载玻片图像SLT关联的切出标签图像26”(参见IlA和11B)。
[0156]在解码失败的情况下(在步骤507中为“否”),查看器100接着执行步骤509的处理,并且像密码没有被输入的处理一样,将通过把钥匙图片叠加在标签区域上获取的标签消除载玻片图像(图16的C栏中显示的图像)作为缩略图显示。解码失败的情况是指例如不正确输入密码的情况。
[0157]在解码成功的情况下(在步骤507中为“是”),查看器100把解码后的切出标签图像26’叠加在标签消除载玻片图像的标签区域上,从而恢复最初的载玻片图像SLT(在图16的D栏中示出的图像)。接着,查看器100将恢复后的最初的载玻片图像SLT显示为缩略图(步骤510)。
[0158]图17示出由查看器100显示的缩略图列表的画面的例子的图。在这个例子中,例如,多个载玻片图像SLT在文件夹40中显示为缩略图,并且标签图像26在每个载玻片图像SLT中指示。用户访问(例如,双击)缩略图的文件,以及查看器100被触发请求服务器200发送对应于所述缩略图文件的真实图像数据。于是,响应于此,服务器200向查看器100发送真实图像数据。
[0159](本技术的效果)
[0160]如上所述,根据本公开,包括样品图像25和标签图像26两者的载玻片图像SLT可以显示为缩略图。因此,用户可在画面上原样查看实际的载玻片SLG。因此,增加了用户的直观感觉,并且改善了便利性和可用性。具体地,用户可以轻易选择期望的文件。
[0161]进一步地,根据本公开,可以克服下列问题。
[0162]图18A到图18C中的每个示出根据与本公开对比的参考例的实际载玻片SLG和通过扫描载玻片SLG获取的缩略图的图。
[0163]例如,在图18A中,通过将样品分割为连续切片获取的样品15存储在载玻片SLG上。通过拍摄分割样品中的一个的图像,并将该图像转换为图像数据来获取缩略图Tl。在这样的情况下,用户很难识别显示为缩略图Tl的样品的图像55指的是样品15的多个连续切片中的哪一个。进一步地,在某些情况下,用户识别从连续切片获取的样品的图像55是不可能的。相反,根据本公开,用户可以查看包括样品图像25和标签图像26两者的载玻片图像SLT,结果可以克服上述问题。
[0164]如图18B所示,对于多个载玻片SLG,样品15a和样品15b具有不同的尺寸,因此当拍摄样品的图像时,可导致拍摄图像的不同倍率。但是,如图所示,如果样品的图像55a和55b被分别获取为缩略图T2和T3,当被显示时具有几乎相同的尺寸,在这些图像具有类似形状的情况下,用户比较样品的尺寸是不可能的。
[0165]如图18C所示,在存储在实际载玻片SLG上的样品15在其右端被切出的情况下,当用户查看缩略图T4时,用户难以确定是在拍摄图像时发生的错误还是右端被实际切出。为此,必须执行多余的重新扫描。
[0166]根据本公开,可以克服在图18B和图18C中示出的问题。就是说,用户在显示真实图像数据前查看缩略图,由此可以确认样品的尺寸。进一步地,可以防止执行多余的重新扫描。
[0167]进一步地,根据本公开,如图7、8、11A以及IlB所示,例如,标签消除载玻片图像和切出标签图像26’被单独存储在不同的文件中,这对于信息的管理是有用的。
[0168]根据本公开,即使在标签信息17包括个人信息等情况下,标签图像被加密,因此,如果标签图像数据被复制,可以防止个人信息的泄漏。结果,可以被加强安全性。
[0169]例如,可以想象得到,在选择文件时,用户全体地执行标签信息的显示与不显示之间的切换。不过,仅仅通过这个操作,难以防止个人信息的泄漏。相反,在本公开中,可以将用于隐藏的遮盖图像28叠加在标签区域上,因此,只要解码被加密的标签图像,不显示标签图像。结果,可以加强安全性。
[0170](另一个实施方式)
[0171]本公开不限于上述实施方式,并且可以具有各种不同的实施方式。[0172]在上述实施方式中,扫描仪300利用照明光照射载玻片SLG的表面,并且通过利用光的反射,拍摄目标的图像。此外,扫描仪300可以获取如此获取的载玻片图像SLT,并且还可以照射作为载玻片SLG表面的相反侧的背面,利用照明光,并拍摄透射光作为目标图像。由于存储在载玻片SLG上样品15被很薄地切片,达到照明光穿过样品的程度,所以可以从正面侧拍摄图像。另一方面,标签区域呈现为阴影,这是因为标签16被附接在上面,因此扫描仪300可以通过拍摄其图像获取标签消除载玻片图像。在这样的情况下,扫描仪300或服务器200仅需要将正常载玻片图像SLT和标签消除载玻片图像彼此关联地存储。根据这个实施方式,用于标签图像切出处理的算法是不必要的。
[0173]在图14示出的处理中,服务器200可以执行步骤506的解码处理、步骤510的叠加处理等,并且可以向查看器100发送通过叠加处理获取的载玻片图像SLT。
[0174]根据本实施方式的信息处理装置包括扫描仪300、服务器200以及查看器100。不过,例如扫描仪300和服务器200可以被彼此物理集成在一起。在这样的情况下,扫描仪300可以在其存储设备中存储通过图像拍摄获取的各种图像,并且还可以用作相应于查看器100的请求向查看器100发送图像的服务器200。
[0175]在上述实施方式中,在标签信息通过例如字符识别处理读取并且创建文本信息的情况下,除了加密标签图像的处理以外,扫描仪300或服务器200还可以加密文本信息(标
签信息)。
[0176]在上述实施方式的特征部分中,可以组合至少两个特征部分。
[0177]应当指出,本公开可以采取下列配置。
[0178](I) —种信息处理装置,其包括:
[0179]能够存储载片图像的存储单元,所述载片图像包括通过拍摄载片获取的样品图像和标签图像,载片保持样品并具有正面,在所述正面上提供指不有关样品的标签/[目息的标签。
[0180]能够将该载片的图像输出为缩略图的输出单元。
[0181](2)根据第(I)项的信息处理装置,进一步包括:
[0182]处理单元,被配置为通过切出载片图像中的标签图像来生成切出标签图像,其中,
[0183]存储单元将标签消除载片图像和切出标签图像彼此关联地存储,所述标签消除载片图像包含载片图像中的至少样品图像并且通过从载片图像消除标签图像而获得。
[0184]( 3 )根据第(2 )项的信息处理装置,其中,
[0185]处理单元将用于隐藏载片图像中的标签图像的遮盖图像叠加在载片图像中的标签图像上,从而生成标签消除载片图像,以及
[0186]存储单元存储标签消除载片图像和切出标签图像,其中标签消除载片图像和切出标签图像彼此关联。
[0187]( 4 )根据第(2 )项的信息处理装置,其中,
[0188]处理单元能够加密切出标签图像,以及
[0189]存储单兀存储标签消除载片图像和被加S的加S切出标签图像,其中标签消除载片图像和加密切出标签图像彼此关联。
[0190]( 5 )根据第(3 )项的信息处理装置,其中,
[0191]处理单元能够加密切出标签图像,以及[0192]处理单元存储标签消除载片图像和被加密的加密切出标签图像,其中标签消除载片图像和加密切出标签图像彼此关联。
[0193](6)根据第(4)或(5)的项的信息处理装置,其中,
[0194]处理单元能够基于解码密码解码所述加密切出标签图像,并且将被解码的切出标签图像叠加在标签消除载片图像中提供标签的区域上以恢复载片图像。
[0195]( 7 )根据第(2 )项的信息处理装置,其中,
[0196]处理单元将用于隐藏载片图像中的标签图像的遮盖图像叠加在载片图像中的标签图像上,从而生成标签消除载片图像,以及
[0197]存储单兀存储标签消除载片图像和最初的载片图像,其中标签消除载片图像和最初的载片图像彼此关联。
[0198]( 8 )根据第(7 )项的信息处理装置,其中,
[0199]输出单元选择性地输出最初的载片图像和标签消除载片图像。
[0200]( 9 )根据第(2 )到(8 )项中任意一项的信息处理装置,其中,
[0201]处理单元从载片图像切出预定区域作为标签区域。
[0202](10)根据第(2)到(8)项中任意一项的信息处理装置,其中,
[0203]处理单元通过边缘检测处理从载片图像切出标签图像。
[0204]( 11)根据第(2 )项的信息处理装置,其中,
[0205]处理单元通过字符识别处理来读取在载片图像中的标签信息。
[0206]( 12 )根据第(11)项的信息处理装置,其中,
[0207]处理单元加密所读取的标签信息。
[0208](13)根据第(I)项的信息处理装置,
[0209]其中,当载片是透明的时,存储单元将样品图像和用标签的阴影隐藏了标签信息的标签消除载片图像与载片图像关联地存储,所述样品图像和标签消除载片图像利用来自作为载片的正面的相反侧的背面侧的照明光照射载片,并从正面侧拍摄载片而获得。
[0210](14) 一种信息处理系统,包括:
[0211]扫描仪装置,包括:
[0212]获取单元,能够拍摄保持样品并且具有正面的载片,在所述载片正面提供指示有关样品的标签信息的标签,并且所述获取单元能够获取载片的图像,载片的图像包含通过拍摄获取的样品图像和标签图像,以及
[0213]发送单元,能够发送载片图像,
[0214]服务器装置,其包括
[0215]存储单元,能够存储从扫描仪装置的发送单元发送的载片图像作为缩略图,
[0216]接收单元,能够接收用于请求获取缩略图的请求信号,以及
[0217]发送单元,能够基于请求信号的接收,发送所存储的缩略图;以及
[0218]查看器装置,包括:
[0219]生成单元,能够生成请求信号,
[0220]发送单元,能够向服务器装置发送生成的请求信号,以及
[0221]接收单元,能够接收从服务器装置发送的缩略图。
[0222](15) 一种信息处理系统,包括:[0223]服务器装置,其包括:
[0224]存储单元,能够存储载片图像作为缩略图,所述载片图像包含通过拍摄载片获取的样品图像和标签图像,载片保持样品并具有正面,在所述正面提供指示有关样品的标签信息的标签,
[0225]接收单元,能够接收用于请求获取缩略图的请求信号,以及
[0226]发送单元,能够基于请求信号的接收,发送所存储的缩略图;以及
[0227]查看器装置,其包括:
[0228]生成单元,能够生成请求信号,
[0229]发送单元,能够向服务器装置发送生成的请求信号,以及
[0230]接收单元,能够接收从服务器装置发送的缩略图。
[0231](16) 一种信息处理方法,其包括:
[0232]将载片图像存储作为缩略图,所述载片图像包含通过拍摄载片获取的样品图像和标签图像,载片保持样品并具有正面,在所述正面提供指示有关样品的标签信息的标签;以及
[0233]输出缩略图。
[0234]本公开包括在2012年6月22日提交给日本专利局的日本在先专利申请JP2012-140689中公开的主题,其全部内容通过引用结合于此。
[0235]本领域的技术人员应当理解,根据设计要求和其他因素,可以有各种修改、组合、子组合和变化,只要这些变化和修改在本发明的权利要求及其等价方案的范围内。
【权利要求】
1.一种信息处理装置,包括: 能够存储载片图像的存储单元,所述载片图像包括通过拍摄载片获取的样品图像和标签图像,所述载片保持样品并具有正面,在所述正面上提供指示有关所述样品的标签信息的标签;以及 能够将所述载片图像输出为缩略图的输出单元。
2.根据权利要求1所述的信息处理装置,进一步包括: 处理单元,被配置为通过切出所述载片图像中的所述标签图像来生成切出标签图像,其中, 所述存储单元将标签消除载片图像和所述切出标签图像彼此关联地存储,所述标签消除载片图像包含所述载片图像中的至少所述样品图像并且通过从所述载片图像消除所述标签图像而获得。
3.根据权利要求2所述的信息处理装置,其中, 所述处理单元将用于隐藏所述载片图像中的所述标签图像的遮盖图像叠加在所述载片图像中的所述标签图像上,从而生成所述标签消除载片图像,以及 所述存储单元将所述标签消除载片图像和所述切出标签图像彼此关联地存储。
4.根据权利要求2所述的信息处理装置,其中, 所述处理单元能够加密所述切出标签图像,以及 所述存储单元将所述标签消除载片图像和进行了加密的加密切出标签图像彼此关联地存储。`
5.根据权利要求3所述的信息处理装置,其中, 所述处理单元能够加密所述切出标签图像,以及 所述处理单元将所述标签消除载片图像和进行了加密的加密切出标签图像彼此关联地存储。
6.根据权利要求4所述的信息处理装置,其中, 所述处理单元能够基于解码密码解码所述加密切出标签图像,并且将被解码的所述切出标签图像叠加在所述标签消除载片图像中提供所述标签的区域上以恢复所述载片图像。
7.根据权利要求2所述的信息处理装置,其中, 所述处理单元将用于隐藏所述载片图像中的所述标签图像的所述遮盖图像叠加在所述载片图像中的所述标签图像上,从而生成所述标签消除载片图像,以及 所述存储单元将所述标签消除载片图像和最初的载片图像彼此关联地存储。
8.根据权利要求7所述的信息处理装置,其中, 所述输出单元选择性地输出所述最初的载片图像和所述标签消除载片图像。
9.根据权利要求2所述的信息处理装置,其中, 所述处理单元从所述载片图像切出预定区域作为标签区域。
10.根据权利要求2所述的信息处理装置,其中, 所述处理单元通过边缘检测处理从所述载片图像切出所述标签图像。
11.根据权利要求2所述的信息处理装置,其中, 所述处理单元通过字符识别处理来读取在所述载片图像中的所述标签信息。
12.根据权利要求11所述的信息处理装置,其中,所述处理单元加密所读取的所述标签信息。
13.根据权利要求1所述的信息处理装置, 其中,当所述载片是透明的时,所述存储单元将所述样品图像和用所述标签的阴影隐藏了所述标签信息的标签消除载片图像与所述载片图像关联地存储,所述样品图像和所述标签消除载片图像利用来自作为所述载片的所述正面的相反侧的背面侧的照明光照射所述载片,并从所述正面侧拍摄所述载片而获得。
14.根据权利要求1所述的信息处理装置, 其中,所述标签信息是用于识别患者的标识符、染色信息、指示患者的检查日期和时间的信息和/或指示扫描日期和时间的信息。
15.—种信息处理系统,包括: 扫描仪装置,包括: 获取单元,能够拍摄保持样品并且具有正面的载片,在所述载片的正面提供指示有关所述样品的标签信息的标签,并且所述获取单元能够获取载片图像,所述载片图像包含通过拍摄获取的样品图像和标签图像,以及发送单元,能够发送所述载片图像; 服务器装置,包括: 存储单元,能够将从所述扫描仪装置的所述发送单元发送的所述载片图像存储为缩略图, 接收单元,能够接收用于请求获取所述缩略图的请求信号,以及 发送单元,能够基于所述请求信号的接收,发送所存储的缩略图;以及 查看器装置,包括: 生成单元,能够生成所述请求信号, 发送单元,能够向所述服务器装置发送所生成的请求信号,以及 接收单元,能够接收从所述服务器装置发送的所述缩略图。
16.—种信息处理系统,包括: 服务器装置,包括: 存储单元,能够将载片图像存储为缩略图,所述载片图像包含通过拍摄载片获取的样品图像和标签图像,所述载片保持样品并具有正面,在所述正面提供有指示有关所述样品的标签信息的标签, 接收单元,能够接收用于请求获取所述缩略图的请求信号,以及 发送单元,能够基于所述请求信号的接收,发送所存储的缩略图;以及 查看器装置,包括: 生成单元,能够生成所述请求信号, 发送单元,能够向所述服务器装置发送所生成的请求信号,以及 接收单元,能够接收从所述服务器装置发送的所述缩略图。
17.—种信息处理方法,包括: 将载片图像存储为缩略图,所述载片图像包含通过拍摄载片获取的样品图像和标签图像,所述载片保持样品并具有正面,在所述正面提供有指示有关所述样品的标签信息的标签;以及输出所述缩略 图。
【文档编号】G06T1/00GK103514579SQ201310237013
【公开日】2014年1月15日 申请日期:2013年6月14日 优先权日:2012年6月22日
【发明者】久曾神宏, 见山成志, 田上直树 申请人:索尼公司