图像处理装置和图像处理方法
【专利摘要】提供与以往相比能够缩短在胶囊型内窥镜检查结束后成为用户作出必要判断的状态为止的等待时间的图像处理装置等。图像处理装置(5)在胶囊型内窥镜系统中从接收装置取得图像数据并进行处理,该胶囊型内窥镜系统包括无线发送通过被导入到被检体内并对该被检体内进行摄像而生成的图像数据的胶囊型内窥镜、以及接收从该胶囊型内窥镜无线发送的图像数据并进行蓄积的接收装置,图像处理装置(5)具有:图像数据取得部(52),其按照摄像时刻从晚到早的顺序依次从接收装置取得图像数据;图像处理部(54),其针对该图像数据取得部(52)取得的图像数据,按照该图像数据的取得顺序实施规定的图像处理;以及显示控制部(55),其进行在画面中显示通过规定图像处理而得到的结果的控制。
【专利说明】图像处理装置和图像处理方法
【技术领域】
[0001]本发明涉及在使用被导入到被检体内并对被检体内进行摄像的胶囊型内窥镜的 检查中、对由胶囊型内窥镜取得的图像进行处理的图像处理装置和图像处理方法。
【背景技术】
[0002] 近年来,在内窥镜的领域中,公知有使用导入到患者等被检体内并在被检体内进 行摄像的胶囊型内窥镜的检查(以下称为胶囊型内窥镜检查、或简称为检查)。胶囊型内窥 镜是在形成为能够导入到被检体的消化道内的大小的胶囊形状的壳体内内置摄像功能和 无线通信功能等的装置。
[0003] 通常,如下实施胶囊型内窥镜检查。首先,护士等医疗从事人员在作为被检体的 患者的体表佩戴天线单元,使能够与胶囊型内窥镜进行无线通信的接收装置与天线单元连 接。然后,接通胶囊型内窥镜的摄像功能,使患者咽下。由此,胶囊型内窥镜被导入到被检 体内,通过蠕动运动等在消化道内移动并进行摄像,无线发送体内图像的图像数据。图像数 据由接收装置接收并蓄积在内置存储器中。然后,患者携带接收装置即可,在医疗从事人员 指定的时间之in,能够出院等自由行动。
[0004] 当成为指定时间且患者返回医院时,检查暂时结束,医疗从事人员从患者处回收 接收装置,与由工作站等构成的图像处理装置连接。由此,接收装置内蓄积的图像数据被下 载(转送)到图像处理装置,在图像处理装置中实施规定图像处理并进行图像化。医疗从 事人员观察图像处理装置的画面中显示的体内图像,确认在胶囊型内窥镜咽下后没有引起 通信不良(天线不良)和电池切断等,在到达大肠为止,对被检体内的必要部位进行摄像并 生成图像数据,使患者回家。然后,医疗从事人员还进行接收装置等装置的整理,结束业务。
[0005] 作为与胶囊型内窥镜检查中的结束确认有关的技术,在专利文献1中公开了如下 技术:通过对从图像装置接收到的最后图像或多个图像进行分析,确定图像装置是否位于 活体内。
[0006] 现有技术文献
[0007] 专利文献
[0008] 专利文献1 :日本特开2009-297497号公报
【发明内容】
[0009] 发明要解决的课题
[0010] 如上所述,在进行胶囊型内窥镜检查的情况下,由于护士在画面上确认胶囊型内 窥镜到达大肠且被检体内的摄像正常完成,所以,必须等待直到图像数据的下载和图像处 理完成。并且,进行患者诊断的医师确认是否掌握胶囊型内窥镜观察到的范围(脏器)且 取得诊断所需要的体内图像,所以,还是必须等待图像数据的下载和图像处理完成。而且, 假设在摄像未正常完成而未得到所需要的图像的情况下,需要重新进行检查,所以,还需要 使患者等待相应时间。
[0011] 但是,由胶囊型内窥镜进行摄像而得到的一连串图像例如为6万张以上,所以,图 像数据的下载和图像处理需要很长时间。因此,以往,在检查结束后,在成为用户(医疗从 事人员)作出必要判断的状态之前,医疗从事人员和患者必须等待很长时间。
[0012] 本发明是鉴于上述情况而完成的,其目的在于,提供与以往相比能够缩短在胶囊 型内窥镜检查结束后成为用户作出必要判断的状态为止的等待时间的图像处理装置和图 像处理方法。
[0013] 用于解决课题的手段
[0014]为了解决上述课题并实现目的,本发明的图像处理装置在胶囊型内窥镜系统中从 接收装置取得图像数据并进行处理,该胶囊型内窥镜系统包括无线发送通过被导入到被检 体内并对该被检体内进行摄像而生成的所述图像数据的胶囊型内窥镜、以及接收从所述胶 囊型内窥镜无线发送的图像数据并进行蓄积的所述接收装置,其特征在于,该图像处理装 置具有:图像数据取得部,其按照摄像时刻从晚到早的顺序依次从所述接收装置取得所述 图像数据;图像处理部,其针对所述图像数据取得部取得的所述图像数据,按照该图像数据 的取得顺序实施规定的图像处理;以及显示控制部,其进行对通过所述规定的图像处理而 得到的结果进行画面显示的控制。
[0015]在上述图像处理装置中,其特征在于,所述图像处理部生成基于所述图像数据的 图像,所述显示控制部进行按照由所述图像处理部生成的所述图像的生成顺序显示该图像 的控制。
[0016]在上述图像处理装置中,其特征在于,所述图像数据取得部取得所述胶囊型内窥 镜中在从摄像时刻最晚的时刻起按时间序列追溯规定时间的时间内生成的图像数据。
[0017]在上述图像处理装置中,其特征在于,所述图像处理部生成基于所述图像数据的 图像,进而判别是否在该图像中拍摄到所述被检体内的特定部位,所述显示控制部进行显 示由所述图像处理部判别出的结果的控制。
[0018]在上述图像处理装置中,其特征在于,所述图像处理部在判别是否在基于所述图 像数据的图像中拍摄到所述被检体内的脏器后,针对判别为拍摄到所述脏器的图像,判别 该图像中拍摄到的脏器是否是所述特定部位。
[0019]在上述图像处理装置中,其特征在于,所述图像数据取得部将所述胶囊型内窥镜 在1次检查中拍摄到的一连串图像数据分割为多个块,按照各块的摄像时刻从晚到早的顺 序依次取得所述图像数据,所述图像处理部依次生成基于所述图像数据的图像,所述显示 控制部进行如下控制:显示设有多个图像显示区域的画面,该多个图像显示区域分别显示 基于分别从所述多个块中取得的图像数据的多个图像。
[0020]在上述图像处理装置中,其特征在于,所述图像数据取得部依次切换所述多个块 中的要取得所述图像数据的块,并且一部分一部分地取得各块的图像数据。
[0021]在上述图像处理装置中,其特征在于,所述图像数据取得部从所述多个块中并列 取得所述图像数据。
[0022]本发明的图像处理方法是在胶囊型内窥镜系统中从接收装置取得图像数据并进 行处理的图像处理方法,该胶囊型内窥镜系统包括无线发送通过被导入到被检体内并对该 被检体内进行摄像而生成的所述图像数据的胶囊型内窥镜、以及接收从所述胶囊型内窥镜 无线发送的图像数据并进行蓄积的所述接收装置,其特征在于,该图像处理方法包括以下 步骤:图像数据取得步骤,按照摄像时刻从晚到早的顺序依次从所述接收装置取得所述图 像数据;图像处理步骤,针对所述图像数据取得步骤中取得的所述图像数据,按照该图像数 据的取得顺序实施规定的图像处理;以及显示控制步骤,进行在画面中显示通过所述规定 的图像处理而得到的结果的控制。
[0023] 发明效果
[0024]根据本发明,按照摄像时刻从晚到早的顺序依次取入接收装置中蓄积的图像数 据,按照图像数据的取得顺序实施图像处理,在画面中显示该图像处理的结果,所以,与以 往相比能够缩短用户作出必要判断之前的时间。
【专利附图】
【附图说明】
[0025]图1是示出包含本发明的实施方式1的图像处理装置的胶囊型内窥镜系统的概略 结构的示意图。
[0026]图2是示出图1所示的胶囊型内窥镜和接收装置的内部结构的图。
[0027]图3是示出图1所示的图像处理装置的概略结构的框图。
[0028]图4是示出图1所示的胶囊型内窥镜系统的动作的流程图。
[0029]图5是用于说明图3所示的图像处理装置的动作的示意图。
[0030]图6是示出在图像数据的取得过程中在显示装置中显示的画面的显示例的示意 图。
[0031]图7是用于说明变形例1的图像处理装置的动作的示意图。
[0032]图8是示出包含本发明的实施方式2的图像处理装置的胶囊型内窥镜系统的动作 的流程图。
[0033] 图9是示出确认了大肠的通知画面的例子的示意图。
[0034] 图10是示出未确认大肠的通知画面的例子的示意图。 t〇〇35] 图11是示出用于输入是否继续进行图像处理的指示的输入画面的例子的示意 图。
[0036]图I2是用于说明本发明的实施方式3的图像处理装置的动作的示意图。
[0037]图13是示出在图像数据的取得过程中在显示装置中显示的画面的一例的示意 图。
【具体实施方式】
[0038] 下面,参照附图对本发明的实施方式的图像处理装置和图像处理方法进行说明。 另外,本发明不由这些实施方式限定。并且,在各附图的记载中,对相同部分标注相同标号 进行表示。
[0039](实施方式1)
[0040] 图1是示出包含本发明的实施方式1的图像处理装置的胶囊型内窥镜系统的概略 结构的示意图。图1所示的胶囊型内窥镜系统1具有:胶囊型内窥镜2,其被导入到被检体 10内,通过对该被检体10内进行摄像而生成图像数据,将该图像数据重叠在无线信号中进 行发送;接收装置3,其经由佩戴在被检体10上的接收天线单元4接收从胶囊型内窥镜2发 送的无线信号;以及图像处理装置 5,其从接收装置3取得由胶囊型内窥镜2生成的图像数 据并实施规定图像处理。
[0041]图2是示出胶囊型内窥镜2和接收装置3的内部结构的框图。胶囊型内窥镜2是 在被检体10能够咽下的大小的胶囊形状的壳体中内置了摄像元件等各种部件的装置,如 图2所示,该胶囊型内窥镜2具有对被检体 10内进行摄像的摄像部21、在摄像时对被检体 10内部进行照明的照明部22、信号处理部23、存储器24、发送部25和天线26、电池27。 [00 42]摄像部21例如包括根据受光面上成像的光学像生成表示被检体1〇内的图像的图 像数据的CCD或CMOS等摄像元件、以及配设在该摄像元件的受光面侧的物镜等光学系统。 [00 43]照明部22由在摄像时朝向被检体10内放射光的半导体发光元件(例如 LED(Light Emitting Diode :发光二极管))等实现。胶囊型内窥镜2内置有电路基板(未 图示),该电路基板形成有分别对这些摄像部21和照明部22进行驱动的驱动电路等,摄像 部21和照明部22以使视野从胶囊型内窥镜2的一端部朝向外侧的状态固定在该电路基板 上。
[0044]信号处理部23对胶囊型内窥镜2内的各部进行控制,并且,对从摄像部 21输出的 摄像信号进行A/D转换并生成数字图像数据,进而实施规定的信号处理。
[0045]存储器24暂时存储由信号处理部23执行的各种动作、在信号处理部23中实施了 信号处理后的图像数据。
[0046] 发送部25和天线26将存储器24中存储的图像数据与关联信息一起重叠在无线 信号中发送到外部。
[0047]电池27对胶囊型内窥镜2内的各部供给电力。另外,设电池27包括对从纽扣电 池等一次电池或二次电池供给的电力进行升压等的电源电路。
[0048] 胶囊型内窥镜2在被被检体10咽下后,通过脏器的蠕动运动等在被检体10的消 化道内移动,并以规定的时间间隔(例如0. 5秒间隔)依次对活体部位(食道、胃、小肠和 大肠等)进行摄像。然后,将根据所取得的摄像信号而生成的图像数据和关联信息依次无 线发送到接收装置3。另外,在关联信息中包含有为了识别胶囊型内窥镜2的个体而被分配 的识别信息(例如序列号)等。
[0049] 接收装置3经由具有多个(图1中为8个)接收天线4a?4h的接收天线单元4 接收从胶囊型内窥镜2无线发送的图像数据和关联信息。各接收天线4a?4h例如使用环 形天线实现,配置在被检体10的体外表面上的规定位置(例如与作为胶囊型内窥镜2的经 过路径的被检体10内的各脏器对应的位置)。
[0050] 如图2所示,接收装置3具有接收部31、信号处理部32、存储器33、数据发送部34、 操作部35、显示部36、控制部37、电池38。
[0051] 接收部31经由接收天线4a?4h接收从胶囊型内窥镜2无线发送的图像数据。
[0052] 信号处理部32对接收部31接收到的图像数据实施规定的信号处理。
[0053] 存储器33存储在信号处理部32中被实施了信号处理后的图像数据及其关联信 肩、。
[0054] 数据发送部34是能够与USB或有线LAN、无线LAN等通信线路连接的接口,在控制 部37的控制下,将存储器33中存储的图像数据和关联信息发送到图像处理装置5。
[0055]在用户输入各种设定信息等时使用操作部35。
[0056] 显示部36显示与检查有关的登记信息(检查信息、患者信息等)以及用户输入的 各种设定信息等。
[0057] 控制部37对接收装置3内的这些各部的动作进行控制。
[0058] 电池38对接收装置3内的各部供给电力。
[0059] 在通过胶囊型内窥镜2进行摄像的期间内(从胶囊型内窥镜2咽下起的规定时 间),接收装置3与佩戴在被检体10上的接收天线单元4连接,由被检体10进行携带。在 该期间内,接收装置3将经由接收天线单元4接收到的图像数据与各接收天线4a?4h中 的接收强度信息和接收时刻信息等关联信息一起存储在存储器33中。在胶囊型内窥镜2 的摄像结束后,从被检体10上取下接收装置3,然后与图像处理装置5连接,将存储器33中 存储的图像数据和关联信息转送到图像处理装置5。另外,在图1中,通过在图像处理装置 5的USB端口上连接托架3a并在该托架3a上放置接收装置3,来连接接收装置3和图像处 理装置5。
[0060] 图3是示出图像处理装置5的概略结构的框图。图像处理装置5例如由具有CRT 显示器或液晶显示器等显示装置5a的工作站构成,如图3所示,该图像处理装置5具有输 入部51、图像数据取得部52、存储部53、图像处理部54、显示控制部55、控制部56。
[0061] 输入部51例如由键盘、鼠标、触摸面板、各种开关等输入设备实现,根据用户的操 作来受理信息和命令的输入。
[0062] 图像数据取得部52是能够与USB或有线LAN、无线LAN等通信线路连接的接口,包 含USB端口和LAN端口等。图像数据取得部52经由与USB端口连接的托架3a等外部设备 或各种通信线路从接收装置3取得图像数据和关联信息。
[0063] 存储部53由闪存、RAM、ROM等半导体存储器、HDD、MO、CD-R、DVD-R等记录介质和 针对该记录介质进行信息写入和读取的写入读取装置等实现。存储部53存储用于使图像 处理装置5进行动作并执行各种功能的程序和各种信息、以及通过胶囊型内窥镜检查而取 得的图像数据等。
[0064]图像处理部54由CPU等硬件实现,通过读入存储部53中存储的规定的程序,对经 由图像数据取得部52取得的图像数据实施规定的图像处理,生成体内图像,并且执行用于 生成包含体内图像的规定形式的观察画面的处理。
[0065] 更详细地讲,图像处理部54对存储部53中存储的图像数据实施白平衡处理、去马 赛克、颜色转换、浓度转换(伽马转换等)、平滑化(噪声去除等)、清晰化(边缘强调等)等 图像生成用的图像处理(将所存储的图像数据变更为能够作为图像进行显示的格式的图 像生成用的图像处理),进而对所生成的图像实施位置检测处理、平均颜色计算处理、病变 检测处理、红色检测处理、脏器检测处理、规定特征检测处理等的与目的对应的图像处理。 [0066]显示控制部 55在控制部56的控制下,进行使显示装置5a以规定形式显示由图像 处理部54生成的体内图像的控制。
[0067]控制部56由CPU等硬件实现,通过读入存储部53中存储的各种程序,根据经由输 入部51输入的信号、经由图像数据取得部52取得的图像数据等,针对构成图像处理装置5 的各部进行指示和数据的转送等,总括地控制图像处理装置5整体的动作。
[0068]接着,对图像处理装置5的动作进行说明。图4是示出包含图像处理装置5的胶 囊型内窥镜系统1的动作的流程图。并且,图5是用于说明图像处理装置5的动作的示意 图。
[0069] 在被检体10上佩戴接收天线单元4、在接收天线单元4上连接接收装置3的状态 下,通过使被检体10咽下胶囊型内窥镜2,开始使用胶囊型内窥镜2进行检查。然后,当经 过规定时间后,用户(医疗从事人员)从接收天线单元4上取下接收装置3将其放置在托 架3a上。另外,作为上述规定时间,设定胶囊型内窥镜2能够通过蠕动运动在被检体10内 移动且穿过小肠等检查对象部位的充分时间(例如8小时左右)。并且,在该阶段内,用户 不清楚是否需要重新开始进行检查,所以使被检体10进行等待。
[0070] 与其对应地,在步骤S10中,图像数据取得部52开始取得接收装置3中蓄积的一 连串图像数据。此时,如图5所示,图像数据取得部52按照摄像时刻从晚到早的顺序、即按 照与图像的摄像顺序相反的顺序取得图像数据。
[0071] 在接下来的步骤S11中,图像处理部54针对图像数据取得部52取得的图像数据, 按照图像数据的取得顺序,开始进行白平衡处理、去马赛克等图像生成用的图像处理。另 夕卜,即使开始进行图像处理部54的图像处理,也通过图像数据取得部52继续执行按照与图 像的摄像顺序相反的顺序取得图像数据的处理。
[0072] 在步骤S12中,显示控制部55按照图像的生成顺序,开始在显示装置5a中显示图 像处理部54生成的图像。图6是示出在图像数据的取得中在显示装置5a中显示的画面的 显示例的示意图。图6所示的预览画面D1是用于使用户确认是否得到了被检体10的诊断 所需要的体内图像的画面,包括图像显示区域dl、"是"按钮d2、"否"按钮d3。图像显示区 域dl是从摄像结束时刻起按时间序列追溯显示由图像处理部 54生成的体内图像的区域。 并且,设置"是"按钮d2和"否"按钮泊是为了使用户使用由鼠标等构成的输入部51来输 入确认结果。
[0073]用户观察图像显示区域dl中显示的体内图像,判断是否得到了诊断所需要的图 像。例如,在检查对象部位为小肠整体的情况下,在图像显示区域dl中显示的图像己经从 大肠开始的情况下,判断为得到了所需要的小肠整体的图像。该情况下,用户使用鼠标等对 "是"按钮d2进行规定的指示操作(例如双击操作)。与其对应地,在控制部56中输入表 示进行了图像确认的信号("是"信号)。
[0074] 在步骤S13中,当在控制部56中输入了 "是"信号时(步骤S13 :是),控制部56 使显示控制部55结束预览画面D1的显示(步骤S14)。然后,图像数据取得部52在后台继 续执行图像数据的取得。并且,也可以暂时中止图像生成用的图像处理,在取得全部图像数 据后,重新开始进行图像处理。
[0075]另外,用户也可以在进行了图像确认的阶段,使被检体1〇回家。
[0076]在步骤S15中,当全部图像数据的取得完成时,图像处理部54按照图像的摄像顺 序对所取得的图像数据执行图像生成用的图像处理和规定的不同目的的图像处理(步骤 S16)。但是,针对在图像显示结束(步骤S14)之前已经进行了图像生成的图像数据,仅执 行不同目的的图像处理即可。并且,作为不同目的的图像处理,执行位置检测处理、平均颜 色计算处理、病变检测处理、红色检测处理、脏器检测处理、规定特征检测处理等中的预先 设定的处理。这里,在本步骤S16中以与摄像顺序相同的顺序进行图像处理,这是因为,在 不同目的的图像处理中,存在例如如位置检测处理和相似度检测处理那样,由于使用与相 邻图像有关的信息而使图像的排列顺序很重要的处理。
[0077]另外,用户也可以在全部图像数据取入到图像处理装置5的阶段,从托架3a上取 下接收装置3进行后整理,结束自身业务。
[0078]然后,当针对从接收装置3取得的全部图像数据的图像生成用和不同目的的图像 处理完成时,图像处理装置5的动作结束。另外,此后,图像处理装置5也可以进一步根据 通过用户操作而从输入部51输入的信号生成并显示包含体内图像的观察画面。
[0079]另一方面,用户观察图6所示的预览画面D1,当判断为未得到诊断所需要的图像 时,使用鼠标等对"否"按钮d3进行规定的指示操作(例如双击操作)。这里,未得到诊断所 需要的图像的情况例如是指,检查对象部位为小肠整体、但是图像显示区域dl中显示的图 像从小肠中途开始的情况、以及由于噪声等影响而使画质显著变差的情况。根据针对"否" 按钮泊的指示操作,在控制部%中输入表示未进行图像确认的信号("否"信号)。
[00S0] 在步骤S13中,当在控制部56中输入"否"信号时(步骤S13 :否),控制部56使 图像数据取得部52中止图像数据的取得(步骤S17)。
[0081] 此时,用户在认为胶囊型内窥镜2还存在于被检体10内的情况下,可以重新开始 进行检查。
[0082]在重新开始进行检查的情况下(步骤S18 :是),在用户再次将接收装置3与接收 天线单元4连接并将其佩戴在被检体1〇上后,重新开始进行检查(步骤S19)。与其对应 地,接收装置3经由接收天线单元4接收从胶囊型内窥镜2无线发送的图像数据。在从重 新开始进行检查起经过充分时间后,当再次从接收天线单元4上取下接收装置3时,检查结 束(步骤S 2〇)。然后,通过再次将接收装置3放置在托架3&上,处理返回步骤幻〇。
[0083] 另一方面,在未重新开始进行检查的情况下(步骤S18 :否),图像处理装置5重新 开始进行基于图像数据取得部52的图像数据的取得(步骤S21)。
[0084] 如以上说明的那样,根据实施方式1,在从接收装置3向图像处理装置5转送图像 数据的过程中,在预览画面中显示从摄像结束时刻起按时间序列追溯而生成的体内图像, 所以,在检查后,用户能够在较早的阶段判断是否需要针对被检体10进行再次检查。因此, 与以往相比能够缩短使被检体10等待的时间。并且,在万一未得到所需要的图像的情况 下,能够在当下重新开始进行检查,所以,能够减轻日后重新进行检查这样的被检体10的 负担。进而,用户自身也可以在图像数据的转送完成的阶段对接收装置3进行整理,所以, 能够提高与检查相关联的作业的效率。
[0085](变形例1)
[0086] 接着,对本发明的实施方式1的变形例1进行说明。图7是用于说明变形例1的 图像处理装置的动作的示意图。
[0087] 在上述实施方式1中,图像处理装置5从摄像结束时刻起开始取得接收装置3中 蓄积的图像数据,持续到通过用户对预览画面D1的操作而输入"是"信号为止。但是,也可 以如图7中斜线所示,仅取得在从摄像结束时刻起按时间序列追溯规定时间的时间内(即 规定图像张数内)生成的图像数据作为预览用图像数据。
[0088]该情况下,在预览用图像数据的取得结束而用户未进行图像确认的情况下(未输 入"是"信号或"否"信号的情况下),图像处理装置5在显示装置5a中以静态图像的方式 显示为了进行预览而生成的最后的体内图像的状态下,等待"是"信号或"否"信号的输入 即可。
[0089]并且,在用户进行了图像确认而使预览画面的显示结束后(参照步骤S14),本次, 也可以从图像的摄像开始时刻朝向摄像结束时刻、结合摄像顺序从接收装置3向图像处理 装置5取入图像数据。这是因为,通过这样使其余的图像数据的取得顺序与步骤S16中的图 像处理的顺序一致,能够在图像数据的取得完成(参照步骤 S15)之前开始进行图像处理, 能够并行执行图像数据的取得和图像处理。
[0090](实施方式2)
[0091]接着,对本发明的实施方式2进行说明。
[0092]实施方式2的图像处理装置的特征在于,自动判别在由胶囊型内窥镜2拍摄到的 一连串体内图像中是否包含诊断所需要的体内图像。另外,实施方式2的图像处理装置的 结构与图3所示的图像处理装置5相同。并且,包含图像处理装置的胶囊型内窥镜系统整 体的结构也与图1相同。
[0093]对实施方式2的图像处理装置5的动作进行说明。图8是示出包含实施方式 2的 图像处理装置5的胶囊型内窥镜系统丨的动作的流程图。并且,图9?图丨丨是示出显示装 置5a中显示的画面的示意图。另外,图 8所示的步骤S10和S11与实施方式1相同。
[0094]在接着步骤S11的步骤S31中,图像处理部δ4还按照图像的生成顺序(即与图像 的摄像顺序相反的顺序),开始对实施了图像生成用的图像处理的图像数据进行判别体内 图像中拍摄到的部位的图像处理(部位判别处理)。作为部位判别处理,可以使用公知的任 意手法。作为一例,可以根据体内图像的颜色特征量,将茶色系强的体内图像判别为大肠, 将黄色系强的体内图像判别为小肠。
[0095]在图像处理部54的部位判别结果为在从摄像结束时刻起按时间序列追溯而生成 的体内图像中包含大肠的情况下(步骤S32 :是),显示控制部55使显示装置5a显示用于 通知确认了大肠的画面(步骤S33)。图9是示出通知画面的显示例的示意图。在图9所示 的通知画面D2中设置的消息显示栏d4中显示"确认了大肠。"的文本消息。用户也可以在 确认该显示后使被检体10回家。
[0096]另外,针对用户的通知不限于文本消息的显示,例如也可以通过通知音、语音消息 等进行通知。并且,也可以代替显示文本消息或与文本消息一起显示进行了部位确认的体 内图像。
[0097]然后,图像数据取得部52在后台继续执行图像数据的取得。此时,可以继续按照 与摄像顺序相反的顺序进行图像数据的取得,也可以与变形例1同样按照与摄像顺序相同 的顺序(即,与此后的图像处理相同的顺序)进行图像数据的取得。并且,也可以暂时中止 图像生成用的图像处理,在取得全部图像数据后,重新开始进行图像处理。
[0098] 在步骤S34中,当全部图像数据的取得完成时,图像处理部54按照图像的摄像顺 序对所取得的图像数据执行图像生成用的图像处理和规定的不同目的的图像处理(步骤 S35)。另外,在将图像数据的取得切换为摄像顺序的情况下,也可以在图像数据的取得完成 之前开始进行图像处理。并且,针对实施了部位判别处理(步骤S31)为止的图像数据,仅 实施所需要的图像处理即可。
[0099]用户也可以在全部图像数据取入到图像处理装置5的阶段,从托架3a上取下接收 装置3进行后整理,结束自身业务。
[0100] 然后,当针对从接收装置3取得的全部图像数据的图像生成用和不同目的的图像 处理完成时,图像处理装置5的动作结束。另外,此后,图像处理装置5也可以进一步根据 通过用户操作而从输入部51输入的信号生成和显示包含体内图像的观察画面。
[0101]另一方面,在对预先设定的规定张数的图像执行步骤S31中的部位判别处理、但 是未检测到包含大肠的图像的情况下(步骤S32 :否),显示控制部55使显示装置5a显示用 于通知未确认大肠的画面(步骤S36)。图10是示出通知画面的显示例的示意图。在图10 所示的通知画面D3中设置的消息显示栏d5中显示"无法确认大肠。重新开始进行检查?" 的文本消息。另外,此时,也可以代替文本消息或与文本消息一起显示作为部位判别对象的 体内图像。该情况下,用户自身能够确认体内图像的部位。
[0102] 并且,在通知画面D3中设有用户输入是否重新开始进行检查的判断时使用的 "是"按钮d6和"否"按钮d7。用户判断为重新开始进行检查时,使用鼠标等对"是,,按钮 d6进行规定指示操作(例如双击操作)。与其对应地,在控制部56中输入表示重新开始进 行检查的信号。另一方面,用户判断为不重新开始进行检查时,使用鼠标等对"否"按钮d7 进行规定指示操作。与其对应地,在控制部56中输入表示不重新开始进行检查的信号。 [0 103] 在输入表示重新开始进行检查的信号时(步骤S37 :是),控制部56使图像数据取 得部52中止从接收装置3取得图像数据(步骤S38)。
[0104] 在用户再次将接收装置3与接收天线单元4连接并将其佩戴在被检体10上后,重 新开始进行检查(步骤S39)。与其对应地,接收装置3经由接收天线单元4接收从胶囊型 内窥镜2无线发送的图像数据。在从重新开始进行检查起经过充分时间后,当再次从接收 天线单元4上取下接收装置3时,检查结束(步骤S40)。然后,通过再次将接收装置3放置 在托架3a上,处理返回步骤S10。
[0105] 另一方面,当在控制部56中输入表示不重新开始进行检查的信号时(步骤S37 : 否),显示控制部55使显示装置5a显示用于使用户输入是否使图像处理装置5继续进行针 对已经蓄积在接收装置3中的图像数据的图像处理的指示的输入画面(步骤S41)。图11 是示出输入画面的显示例的示意图。在图11所示的输入画面D4中设置的消息显示栏d8 中显示"继续进行图像处理? "的文本消息。用户确认该显示,判断是否使图像处理装置5 继续进行图像处理。
[0106] 并且,在输入画面D4中设有在用户输入是否使图像处理装置5继续进行图像处理 的判断时使用的"是"按钮d9和"否"按钮dlO。在继续进行图像处理的情况下,用户使用 鼠标等对"是"按钮d9进行规定指示操作(例如双击操作)。与其对应地,在控制部56中 输入表示继续进行图像处理的指示信号。另一方面,用户在判断为不继续进行图像处理时, 使用鼠标等对"否"按钮dlO进行规定指示操作。与其对应地,在控制部56中输入表示不 继续进行图像处理的指示信号。
[0107] 当在控制部56中输入表示继续进行图像处理的指示信号时(步骤S42 :是),图像 处理装置5的动作转移到步骤S34。该情况下,图像处理装置5继续取得接收装置3中蓄积 的图像数据,接着实施图像处理。
[0108] 另一方面,当在控制部56中输入表示不继续进行图像处理的指示信号时(步骤 S42 :否),控制部56使图像数据取得部Μ中止从接收装置3取得图像数据(步骤S43)。
[0109] 如以上说明的那样,根据实施方式2,在从接收装置3向图像处理装置5转送图 像数据的过程中,对从摄像结束时刻起按时间序列追溯而生成的体内图像进行部位判别处 理,所以,用户能够在较早阶段容易地判断是否需要针对被检体10进行再次检查。并且,用 户能够根据个别的检查内容,通过自身的判断来决定是否继续进行图像处理。
[0110] (变形例2)
[0111] 接着,对本发明的实施方式2的变形例2进行说明。
[0112] 在胶囊型内窥镜2从被检体10排出后还继续进行摄像的情况下,摄像结束时刻的 图像成为拍摄到被检体10外部的图像。因此,如果对从摄像结束时刻起按时间序列追溯而 生成的全部图像实施部位判别处理,则到达被检体10内的图像为止需要时间。
[0113] 因此,在图8的步骤S31中进行部位判别处理时,也可以跳过拍摄到脏器以外部 分的图像,将其从部位判别处理的对象中排除。例如能够根据图像的平均颜色来判别应该 跳过的图像。该情况下,由于部位判别处理高速化,所以,能够缩短针对用户显示通知画面 (参照图9和图10)之前的时间、换言之为用户、被检体1〇的等待时间。
[0114] 并且,除了被检体10外的图像以外,还可以省略针对由于光晕而几乎无法判别被 摄体的图像等明显无法用于诊断的图像的部位判别处理。另外,例如能够根据图像的平均 亮度值等来判别光晕的图像。
[0115] (实施方式3)
[0116] 接着,对本发明的实施方式3进行说明。
[0117] 实施方式3的图像处理装置的特征在于,将接收装置3中蓄积的一连串图像数据 分割为多个块,从各块中取得图像数据并实施图像处理。另外,实施方式3的图像处理装置 的结构与图3所示的图像处理装置 5相同。并且,包含图像处理装置的胶囊型内窥镜系统 整体的结构和动作也与图1和图4所示的结构和动作相同。
[0118]这里,如上所述,在胶囊型内窥镜2从被检体10排出后还继续进行摄像的情况下, 摄像结束时刻的图像成为拍摄到被检体10外部的图像。因此,当在预览画面中依次显示从 摄像结束时刻起按时间序列追溯而生成的全部图像时,到达被检体10内的图像为止需要 时间。并且,对于用户来说,有时希望确认是否取得了被检体10内的特定部位的图像、并且 是否不存在由于天线不良等导致图像数据的无线发送失败而未得到图像的区域。
[0119]因此,在本实施方式3中,将接收装置3中蓄积的一连串图像数据分割为多个块, 同时预览显示被检体10内的多个部位的图像,以使得用户能够大体掌握通过检查得到的 一连串体内图像的整体。
[0120] 更详细地讲,在图4的步骤S10中,图像数据取得部52如图12所示从对一连串图 像数据进行分割后的多个块1?4中,从各块的最终摄像时刻起按照与摄像顺 序相反的顺序取得图像数据。另外,此时,与变形例1同样,也可以仅取得在从图 12中斜线 所示的最终摄像时刻h、t2、t3、t4起按时间序列追溯规定时间的时间内(即规定图像张数 内)生成的图像数据,作为预览画面用的图像数据。
[0121]并且,在接下来的步骤S11中,图像处理部54针对图像数据取得部52从各块1? 4中取得的图像数据,按照取得顺序实施图像生成用的图像处理。
[0122]图13是示出在图像数据的取得过程中在显示装置中显示的画面的一例的示意 图。在图I3所示的预览画面D5中设有分别显示基于从块1?4中取得的图像数据的图像 的4个图像显示区域dll?dl4以及"是"按钮dl5、"否,,按钮dl6。另外,与图 6所示的 "是"按钮d2和"否"按钮d3同样,在观察预览画面D5的用户输入是否得到了诊断所需要 的图像的确认结果时,使用"是"按钮dl5和"否,,按钮dl6。
[0123]这里,来自各块!?4的图像数据转送可以是串行方式,也可以是并行方式。在以 串行方式进行图像数据的转送的情况下,图像数据取得部52例如按照块4 -块3 -块2 - 块1 -块4 -…这样的顺序在块间移动,并且每次取得规定量(例如每次1张图像)的图 像数据。该情况下,在预览画面D5中,按时间序列追溯摄像时刻并逐张切换图像显示区域 dll?dl4中显示的体内图像。
[0124]并且,在以并行方式进行图像数据的转送的情况下,图像数据取得部52同时从块 1?4中每次取得规定量的图像数据。该情况下,在图像处理部54中,也并行地对从各块 1?4中取得的图像数据实施图像处理。并且,在预览画面d 5中,按时间序列追溯摄像时刻 并同时切换图像显示区域dll?dl4中显示的体内图像。
[0125]如以上说明的那样,根据实施方式3,用户能够大体掌握通过检查得到的一连串体 内图像的整体。因此,能够容易且准确地判断是否得到了诊断所需要的图像。
[0126]另外,在上述实施方式3中,代替预览显示从块1?4中取得的图像,也可以进行 部位判别处理(参照图8的步骤S31)。该情况下,在图13所示的图像显示区域du?dl4 的附近分别设置显示部位判别结果的区域即可。
[0127]本发明不限于实施方式1?3和它们的变形例,通过适当组合各实施方式和变形 例所公开的多个结构要素,能够形成各种发明。例如,可以从各实施方式和变形例所示的全 部结构要素中删除若干个结构要素来形成,也可以适当组合不同实施方式和变形例所示 结构要素来形成。 /N
[0128] 标号说明
[0129] 1 :胶囊型内窥镜系统;2 :胶囊型内窥镜;3 :接收装置;如:托架;4 :接收天线单 元;4a?4h :接收天线;5 :图像处理装置;5a :显示装置;10 :被检体;21 :摄像部.22昭 部;23 :信号处理部;24、33 :存储器;25 :发送部;26 :天线;27、38 :电池;幻:接收 信号处理部;34 :数据发送部;35 :操作部;36 :显示部;37 :控制部;51 :输入部.52 ^ · 据取得部;53 :存储部;54 :图像处理部;55 :显示控制部;56 :控制部。 ' 〃
【权利要求】
1·=种图像处理装置,该图像处理装置在胶囊型内窥镜系统中从接收装置取得图像数 据并进行处理,该胶囊型内窥镜系统包括无线发送通过被导入到被检体内并对该被检体内 进行摄像而生成的所述图像数据的胶囊型内窥镜、以及接收从所述胶囊型内窥镜无线发送 的图像数据并进行蓄积的所述接收装置,其特征在于,该图像处理装置具有: 图像数据取得部,其按照摄像时刻从晚到早的顺序依次从所述接收装置取得所述图像 数据; 图像处理部,其针对所述图像数据取得部取得的所述图像数据,按照该图像数据的取 得顺序实施规定的图像处理;以及 显示控制部,其进行对通过所述规定的图像处理而得到的结果进行画面显示的控制。
2. 根据权利要求1所述的图像处理装置,其特征在于, 所述图像处理部生成基于所述图像数据的图像, 所述显示控制部进行按照由所述图像处理部生成的所述图像的生成顺序显示该图像 的控制。
3. 根据权利要求1所述的图像处理装置,其特征在于, 所述图像数据取得部取得所述胶囊型内窥镜中在从摄像时刻最晚的时刻起按时间序 列追溯规定时间的时间内生成的图像数据。
4. 根据权利要求1所述的图像处理装置,其特征在于, 所述图像处理部生成基于所述图像数据的图像,进而判别是否在该图像中拍摄到所述 被检体内的特定部位, 所述显示控制部进行显示由所述图像处理部判别出的结果的控制。
5. 根据权利要求4所述的图像处理装置,其特征在于, 所述图像处理部在判别是否在基于所述图像数据的图像中拍摄到所述被检体内的脏 器后,针对判别为拍摄到所述脏器的图像,判别该图像中拍摄到的脏器是否是所述特定部 位。
6. 根据权利要求1所述的图像处理装置,其特征在于, 所述图像数据取得部将所述胶囊型内窥镜在1次检查中拍摄到的一连串图像数据分 割为多个块,按照各块的摄像时刻从晚到早的顺序依次取得所述图像数据, 所述图像处理部依次生成基于所述图像数据的图像, 所述显示控制部进行如下控制:显示设有多个图像显示区域的画面,该多个图像显示 区域分别显示基于分别从所述多个块中取得的图像数据的多个图像。
7. 根据权利要求6所述的图像处理装置,其特征在于, 所述图像数据取得部依次切换所述多个块中的要取得所述图像数据的块,并且一部分 一部分地取得各块的图像数据。
8. 根据权利要求6所述的图像处理装置,其特征在于, 所述图像数据取得部从所述多个块中并列取得所述图像数据。
9. 一种图像处理方法,该图像处理方法是在胶囊型内窥镜系统中从接收装置取得图像 数据并进行处理的图像处理方法,该胶囊型内窥镜系统包括无线发送通过被导入到被检体 内并对该被检体内进行摄像而生成的所述图像数据的胶囊型内窥镜、以及接收从所述胶囊 型内窥镜无线发送的图像数据并进行蓄积的所述接收装置,其特征在于,该图像处理方法 包括以下步骤: 图像数据取得步骤,按照摄像时刻从晚到早的顺序依次从所述接收装置取得所述图像 数据; 图像处理步骤,针对所述图像数据取得步骤中取得的所述图像数据,按照该图像数据 的取得顺序实施规定的图像处理;以及 显示控制步骤,进行在画面中显示通过所述规定的图像处理而得到的结果的控制。
【文档编号】A61B1/04GK104203073SQ201380017933
【公开日】2014年12月10日 申请日期:2013年10月10日 优先权日:2012年10月18日
【发明者】小林辽太, 谷口胜义 申请人:奥林巴斯医疗株式会社