图像处理装置、图像处理方法和程序的制作方法
【技术领域】
[0001] 本发明设及图像处理装置、图像处理方法和程序等。
【背景技术】
[0002] 在根据给定的时间间隔按时序持续对静态图像进行摄像的情况下、通过多个图像 网罗具有空间宽度的被摄体的情况下、或者对动态图像进行摄像后取得构成该动态图像的 各图像作为静态图像的情况下等，将会取得时间或空间上连续的非常大量的图像（W下也 记载为图像列）。在该种情况下，图像列中靠近（即时间或空间上靠近）的图像彼此是相似 图像的可能性较高，在掌握所摄像的内容时，不需要检查大量的全部图像。本来，图像张数 为数万张W上的情况也不稀奇，用户手动检查全部图像本身的负担很大。
[0003]因此，需要通过从图像列中删除一部分图像而精简为张数比原来的图像列的张数 少的图像列（W下将该处理记载为图像精简处理）。例如在专利文献1中公开了如下的图 像精简处理方法：通过提取图像列中的场景变化的交界的图像或代表图像列的图像，保留 容易掌握图像列的内容的图像。
[0004] 现有技术文献 [000引专利文献
[0006] 专利文献1;日本特开2009-5020号公报
[0007] 专利文献2;日本特开2007-257287号公报
【发明内容】
[000引发明要解决的课题
[0009] 例如在医学领域中应用图像精简技术的情况下，从避免疾患的漏看的观点来看， 需要抑制由于删除图像而无法观察的区域的产生。特别是病变区域或异常区域该样的重要 区域不能包含在无法观察的区域中。
[0010] 但是，如专利文献1的方法那样，当仅保留场景变化的交界的图像、或基于是否容 易直观观察精简后的图像列的观点而进行图像精简时，可能由于删除图像而产生无法观察 的区域，并不理想。并且，由于无法观察的区域的产生程度依赖于图像的内容，所W，在现有 的图像精简处理的方法中，很难控制疾患的漏看等的程度。
[0011] 根据本发明的若干个方式，能够提供如下的图像处理装置、图像处理方法和程序 等：根据图像间的变形信息，进行抑制产生由于删除图像而无法观察的区域、且大区域最佳 化的图像精简处理。
[0012] 用于解决课题的手段
[0013] 本发明的一个方式设及一种图像处理装置，其中，该图像处理装置包括：图像列取 得部，其取得具有第1~第N(N为2W上（包含该值）的整数）图像作为构成图像的输入 图像列；W及处理部，其进行删除所述图像列取得部取得的所述输入图像列的所述第1~ 第N图像的一部分而生成精简图像列的图像精简处理，所述处理部选择所述输入图像列的 第S(s为满足0兰s兰化1的整数）图像作为假定精简图像，选择所述输入图像列的第t(t为满足0 ^t^s-1的整数）图像作为假定紧前精简图像，选择所述输入图像列的第u(u 为满足t<u<s的整数）图像作为判定对象图像，根据所述假定精简图像与所述判定对象图 像之间的变形信息W及所述假定紧前精简图像与所述判定对象图像之间的所述变形信息 求出所述判定对象图像的删除评价值，根据第t+1~第S-1图像的所述删除评价值求出删 除了所述第t+1~第S-1图像的情况下的评价值即精简区间评价值G(t，s)，根据所述精简 区间评价值进行所述图像精简处理。
[0014] 在本发明的一个方式中，求出删除了第t+1~第S-1图像的情况下的评价值即精 简区间评价值G(t，s)，根据所求出的精简区间评价值进行图像精简处理。由此，在存在多个 精简图像列的候选的情况下，通过针对各候选使用与从输入图像列中删除的图像对应的精 简区间评价值，能够计算该候选的评价值，通过对它们进行比较，能够决定最佳的精简图像 列（即，进行大区域最佳化的图像精简处理）等。
[0015] 并且，在本发明的一个方式中，也可W是，所述处理部根据所述精简区间评价值求 出所述第1~第N图像的各图像的累计评价值E(1)~E(脚，根据所述累计评价值进行所述 图像精简处理。
[0016] 由此，能够进行基于各图像的累计评价值的图像精简处理。
[0017] 并且，在本发明的一个方式中，也可W是，所述处理部将作为假想图像的第0图像 的所述累计评价值设为E(0) = 0,使用第w(w为满足0 ^W^V-1的整数）图像的所述累 计评价值E(w)W及删除了第W+1~第V-1图像的情况下的所述精简区间评价值G(w，V)，作 为E(v) =max(E(w)+G(w,V))求出第v(v为满足1 ^V^化1的整数）图像的所述累计评 价值。
[001引由此，能够使用与该图像相比在图像列中更靠前方的图像的累计评价值求出某个 图像的累计评价值等。
[0019] 并且，在本发明的一个方式中，也可W是，所述处理部选择满足下式（1)的第X图 像，作为所述第V图像的最佳紧前精简图像。
[0020] 由此，不仅能够求出处理对象的图像的累计评价值，还能够求出该图像的最佳紧 前精简图像等。
[0021] 并且，在本发明的一个方式中，也可W是，所述处理部求出作为所述假想图像的 第化1图像的所述累计评价值E(化1)，将所述第化1图像设为精简图像列决定处理中的最 初的处理对象图像，在所述处理对象图像的所述最佳紧前精简图像不是所述第0图像的情 况下，进行将所述最佳紧前精简图像包含在所述精简图像列中的处理，并且，进行将所述最 佳紧前精简图像作为新的所述处理对象图像的更新处理，继续进行所述精简图像列决定处 理，在所述处理对象图像的所述最佳紧前精简图像是所述第0图像的情况下，结束所述精 简图像列决定处理。
[0022] 由此，通过从终点朝向始点追寻最佳紧前精简图像，能够决定精简图像列等。
[0023] 并且，在本发明的一个方式中，也可W是，所述处理部根据所述第S图像与所述第 U图像之间的所述变形信息W及所述第t图像与所述第U图像之间的所述变形信息，计算所 述第S图像和所述第t图像覆盖所述第U图像的比例即所述第U图像的覆盖率，根据所述 覆盖率计算所述删除评价值，求出对与所述第t+1~第S-1图像有关的所述删除评价值进 行合计而得到的值，作为删除了所述第t+1~第S-1图像的情况下的所述精简区间评价值 G(t,S)。
[0024] 由此，能够根据覆盖率求出精简区间评价值等。
[0025] 并且，在本发明的一个方式中，也可W是，所述处理部根据所述第S图像与所述第 U图像之间的所述变形信息W及所述第t图像与所述第U图像之间的所述变形信息判定可 否删除所述第U图像，在所述第t+1~第S-1图像中的至少一张所述构成图像被判定为不 可删除的情况下，设定第1值作为删除了所述第t+1~第S-1图像的情况下的所述精简区 间评价值G(t，s)。
[0026] 由此，在无法通过第t图像和第S图像充分覆盖其间的图像的情况下，作为精简区 间评价值，能够设定没有意义的值（狭义地讲为不可能选择第t图像作为第S图像的最佳 紧前精简图像的程度的值）等。
[0027] 并且，在本发明的一个方式中，也可W是，所述处理部在所述第t+1~第S-1图像 全部被判定为可W删除的情况下，根据所述第t+1~第S-1图像的图像张数求出删除了所 述第t+1~第S-1图像的情况下的所述精简区间评价值G(t，S)。
[002引由此，能够根据可W删除的图像的张数求出精简区间评价值等。
[0029] 并且，在本发明的一个方式中，也可W是，所述处理部在t=S-1~t= 0的范围 内W每次-1的方式更新t，并选择所述第t图像作为所述假定紧前精简图像，根据所述第t 图像与所述第U图像之间的所述变形信息W及所述第S图像与所述第U图像之间的所述变 形信息进行中止判定处理，针对通过所述中止判定处理判定为中止的t，设定第1值作为删 除了第X(x为满足0 ^X^t的整数）图像与所述第S图像之间的所述构成图像时的所述 精简区间评价值G(x，S)，结束将所述第S图像作为所述假定精简图像的处理。
[0030] 由此，通过中止假定紧前精简图像的更新处理，能够削减计算量等。
[0031] 并且，在本发明的一个方式中，也可W是，所述处理部设定负的无限大或根据所述 累计评价值决定的给定阔值W下的值，作为所述第1值。
[0032] 由此，能够具体设定上述第1值等。
[0033] 并且，在本发明的一个方式中，也可W是，所述处理部选择第0~第S-1图像中的 第S-a~第S-1图像（a为正整数）的图像作为所述假定紧前精简图像。
[0034] 由此，通过限定作为假定紧前精简图像而选择的图像的张数，能够削减计算量等。 [00巧]并且，在本发明的一个方式中，也可W是，所述处理部从所述输入图像列中检测场 景转换，在从所述输入图像列中检测到第i(i为整数）场景转换和所述第i场景转换之后 的第i+1场景转换的情况下，设定所述输入图像列的多个所述构成图像中的所述第i场景 转换的后方且所述第i+1场景转换的前方的所述构成图像作为部分图像列，对所设定的所 述部分图像列进行所述图像精简处理。
[0036] 由此，通过将根据场景转换而设定的部分图像列作为对象，能够削减计算量等。
[0037] 并且，本发明的另一个方式设及一种图像处理方法，其中，取得具有第1~第N(N 为2W上（包含该值）的整数）图像作为构成图像的输入图像列，选择所述输入图像列的 第S(S为满足0兰S兰化1的整数）图像作为假定精简图像，选择所述输入图像列的第t(t 为满足0 ^t^s-1的整数）图像作为假定紧前精简图像，选择所述输入图像列的第u(u 为满足t<u<s的整数）图像作为判定对象图像，根据所述假定精简图像与所述判定对象图 像之间的变形信息w及所述假定紧前精简图像与所述判定对象图像之间的所述变形信息 求出所述判定对象图像的删除评价值，根据第t+1~第S-1图像的所述删除评价值求出删 除了所述第t+1~第S-1图像的情况下的评价值即精简区间评价值G(t，s)，根据所述精简 区间评价值进行删除所述输入图像列的所述第1~第N图像的一部分而生成精简图像列的 图像精简处理。
[0038] 并且，本发明的另一个方式设及一种使计算机作为上述各部发挥功能的程序。
【附图说明】
[0039] 图1是第1实施方式的图像处理装置的结构例。
[0040] 图2是使用覆盖率的处理的说明图。
[0041] 图3是使用覆盖率的处理的说明图。
[0042] 图4是说明第1实施方式的图像精简处理的流程图。
[0043]图5 (A)、图5炬）是图像精简处理的具体例。
[0044] 图6(A)、图6做是图像精简处理的具体例。
[0045]图7 (A)、图7炬）是图像精简处理的具体例。
[0046] 图8(A)、图8做是图像精简处理的具体例。
[0047] 图9 (A)~图9似是说明基准图像和判定对象图像的选择方法的图。
[0048] 图10(A)、图10炬）是说明使用多个基准图像的情况下的选择方法的图。
[004引图11 (A)、图11做是说明场景转换和部分图像列的关系的图。
[0050] 图12是动态规划法的说明图。
[0051] 图13是第2实施方式的图像处理装置的结构例。
[0052] 图14是说明针对非覆盖区域的基于构造要素的收缩处理的图。
[005引图15(A)~图15似是说明针对非覆盖区域的基于构造要素的收缩处理的详细情 况的图。
[0054] 图16是说明第2实施方式的图像精简处理的流程图。
[00巧]图17(A)、图17炬）是说明针对判定对象图像的基于构造要素的收缩处理的图。
[0056] 图18是覆盖区域和要覆盖区域的包含判定的例子。
[0057] 图19(A)、图19炬）是说明使用构造要素的其他处理的图。
[005引图20是说明使用覆盖率和构造要素双方的判定处理的例子。
[0059] 图21是图像处理装置的基本结构例。
【具体实施方式】
[0060] 下面，对本实施方式进行说明。另外，W下说明的本实施方式并不是不当地限定权 利要求书所记载的本发明的内容。并且，本实施方式中说明的全部结构不一定是本发明的 必须结构要件。
[0061] 1.本实施方式的方法
[0062]首先，对本实施方式的方法进行说明。在取得由时间或空间上连续的大量图像构 成的图像列的情况下，在用户使用该图像列进行某些处理（例如如果是内窥镜图像列，贝U 进行诊断等医疗行为）时，优选进行图像精简处理。该是因为，图像列中包含的图像的张数 非常多，用户观看全部图像后进行判断需要很大劳力。并且，在图像列所包含的图像中存在 彼此相似的图像的可能性很高，即使检查全部该种相似的图像，可取得的信息量也有限，与 劳力不相称。
[0063] 作为具体例，考虑使用胶囊内窥镜进行摄像而得到的图像列。胶囊内窥镜是内置 有小型照相机的胶囊形状的内窥镜，W给定的时间间隔（例如1秒2次等）对图像进行摄 像。胶囊内窥镜从内服到排出需要几个小时（根据情况而需要十几个小时）