示关于放大关联处理执行与否的放大处理决定单 元的决定结果的确定，图像处理装置还具备接受与放大处理决定单元的决定结果的确定相 关的用户的选择的选择单元，放大处理决定单元根据经由选择单元而接受的选择结果，确 定放大关联处理执行与否。
[0046] 根据本方式，用户能够对显示单元所显示的放大处理决定单元的决定结果（放大 关联处理执行与否）进行确定选择，并能够根据该用户的选择结果来决定放大关联处理执 行与否。
[0047] 优选为，由放大处理决定单元决定的放大关联处理的处理参数和放大处理的处理 参数包含多个选择候补，显示单元从多个选择候补之中能够选择地显示放大关联处理的处 理参数和放大处理的处理参数，图像处理装置还具备接受用户从多个选择候补之中的选择 的选择单元，放大处理决定单元根据经由选择单元而接受的选择结果，确定放大关联处理 的处理参数和放大处理的处理参数。
[0048] 根据本方式，用户能够从显示单元所显示的多个选择候补之中选择放大关联处理 的处理参数和放大处理的处理参数，并根据该用户的选择结果而决定放大关联处理的处理 参数和放大处理的处理参数。因此，通过根据摄影条件数据而使选择候补的范围最佳化，基 于用户的最佳的处理参数的选择变得容易。
[0049] 优选为，图像处理装置还具备根据确定出的放大关联处理执行与否和放大关联处 理的处理参数进行放大关联处理的放大关联处理单元。
[0050] 根据本方式，能够基于确定出的放大关联处理执行与否、放大关联处理的处理参 数的决定结果，利用放大关联处理单元进行摄像数据的放大关联处理。因此，若用户根据摄 影条件数据判断为不需要放大关联处理的情况下，不进行放大关联处理，另外，能够根据用 户的意图，实施基于适合于摄影条件数据的处理参数的放大关联处理。
[0051] 优选为，图像处理装置还具备根据确定出的放大处理的处理参数进行放大处理的 放大处理单元。
[0052] 根据本方式，能够基于确定出的放大处理的处理参数，进行基于放大处理单元的 放大处理。因此，能够根据用户的意图，实施基于适合于摄影条件数据的处理参数的放大处 理。
[0053] 本发明的其他方式涉及摄像装置，具备：摄像单元，具有对包含摄像数据的图像摄 影数据进行摄像生成的摄像部；及上述的图像处理装置。
[0054] 本方式的摄像装置不特别被限定，除了以摄像为主要功能的数码相机外也具备摄 像以外的其他功能（通话功能、通信功能、其他计算机功能）的移动设备类也包含于在此所 说的摄像装置。
[0055] 本发明的其他方式涉及摄像装置，具备：摄像单元，具有至少包括第一摄像部和第 二摄像部的多个摄像部；及上述的图像处理装置。
[0056] 本方式的摄像装置不特别被限定，除了具备多个摄像部且以摄像为主要功能的数 码相机（例如能够与3D对应的相机等）之外也具备摄像以外的其他功能（通话功能、通信 功能、其他计算机功能）的移动设备类也包含于在此所说的摄像装置。
[0057] 本发明的其他方式涉及摄像装置，具备：摄像单元，具有对包含摄像数据的图像摄 影数据进行摄像生成的摄像部，摄像部能够从至少包括第一摄像部和第二摄像部的多个摄 像部之中选择互换；及上述的图像处理装置。
[0058] 本方式的摄像装置不特别被限定，例如，能够由用户互换透镜、摄像元件（CCD、 CMOS等）的数码相机等能够包含于在此所说的摄像装置。
[0059] 本发明的其他方式涉及具备上述的图像处理装置的计算机。
[0060] 本发明的其他方式涉及图像处理方法，具备：数据获取步骤，判别在包含摄像数据 的图像摄影数据中是否包含摄影条件数据，且在判别为在所输入的图像摄影数据中包含摄 影条件数据的情况下获取摄影条件数据的内容；及放大处理决定步骤，基于摄影条件数据 的获取结果，决定与根据摄像数据生成放大图像数据的放大处理关联的放大关联处理执行 与否、放大关联处理的处理参数和放大处理的处理参数中的至少任一个，摄影条件数据包 含与摄像数据的摄像生成时的光学低通滤光器的有无相关的信息。
[0061] 本发明的其他方式涉及图像处理方法，具备：数据获取步骤，判别在包含摄像数据 的图像摄影数据中是否包含摄影条件数据，且在判别为在所输入的图像摄影数据中包含摄 影条件数据的情况下获取摄影条件数据的内容；及放大处理决定步骤，基于摄影条件数据 的获取结果，决定与根据摄像数据生成放大图像数据的放大处理关联的放大关联处理执行 与否、放大关联处理的处理参数和放大处理的处理参数中的至少任一个，摄影条件数据包 含与摄像数据的摄像生成时所用的摄像部的滤色器的排列相关的信息。
[0062] 本发明的其他方式涉及一种程序，用于使计算机执行如下步骤：判别在包含摄像 数据的图像摄影数据中是否包含摄影条件数据，且在判别为在所输入的图像摄影数据中包 含摄影条件数据的情况下获取摄影条件数据的内容；及基于摄影条件数据的获取结果，决 定与根据摄像数据生成放大图像数据的放大处理关联的放大关联处理执行与否、放大关联 处理的处理参数和放大处理的处理参数中的至少任一个，摄影条件数据包含与摄像数据的 摄像生成时的光学低通滤光器的有无相关的信息。
[0063] 本发明的其他方式涉及一种程序，用于使计算机执行如下步骤：判别在包含摄像 数据的图像摄影数据中是否包含摄影条件数据，且在判别为在所输入的图像摄影数据中包 含摄影条件数据的情况下获取摄影条件数据的内容；及基于摄影条件数据的获取结果，决 定与根据摄像数据生成放大图像数据的放大处理关联的放大关联处理执行与否、放大关联 处理的处理参数和放大处理的处理参数中的至少任一个，摄影条件数据包含与摄像数据的 摄像生成时所用的摄像部的滤色器的排列相关的信息。
[0064] 发明效果
[0065] 根据本发明，能够基于与摄像数据生成时的光学低通滤光器的有无相关的信息或 者与摄像部的滤色器的排列相关的信息，决定放大关联处理执行与否、放大关联处理的处 理参数和放大处理的处理参数中的至少任一个。因此，能够使与光学低通滤光器的有无、摄 像部的滤色器的排列对应的放大关联处理和放大处理最佳化，能够生成分辨率感降低、图 像劣化不明显的放大图像。
【附图说明】
[0066] 图1是例示能够适用本发明的设备种类的功能框图，（a)表示具备一个摄像部的 摄像装置的一例，（b)表示具备二个（多个）摄像部的摄像装置的一例，（C)表示将摄像部 和图像放大处理部分体设置的例子。
[0067] 图2是表示图像放大处理部的输入输出图像摄影数据的概略的图，（a)表示图像 放大处理部中的处理前后的数据构造，（b)表示附带信息（摄影条件数据）的一例。
[0068] 图3是表示摄像装置（数码相机）的一实施方式的框图。
[0069] 图4是表示滤色器的基本排列图案例的图，（a)表示拜耳排列的滤色器，（b)表示 具有其他类型的排列的滤色器（"X - Trans"（注册商标））。
[0070] 图5表示将图4(b)所示的基本排列图案的滤色器在水平方向和垂直方向以每二 个并排配置而成的滤色器排列。
[0071] 图6是与以图像放大处理部为主体的图像放大处理相关联的功能框图。
[0072] 图7是表示第一实施方式的图像放大处理的流程的流程图，（a)是与处理A(放大 关联处理）相关的流程图，（b)是作为处理A采用了轮廓强调处理的情况下的流程图。
[0073] 图8是表不第一实施方式的一变形例的流程图。
[0074] 图9是表示第二实施方式的放大处理的流程的流程图，（a)是与处理A(放大关联 处理）相关的流程图，（b)是作为处理A采用了轮廓强调处理的情况下的流程图。
[0075] 图10是表示第三实施方式的放大处理的流程的流程图，（a)是与处理B(放大处 理）相关的流程图，（b)是作为处理B采用了基于样条插值处理法的放大处理的情况下的 流程图。
[0076] 图11是表不第三实施方式的一变形例的流程图。
[0077] 图12是表示第四实施方式的放大处理的流程的流程图。
[0078] 图13是表示第四实施方式的一变形例的流程图。
[0079] 图14是表示第五实施方式的放大处理的流程的流程图。
[0080] 图15是表示第六实施方式的放大处理的流程的流程图。
[0081] 图16是表示第七实施方式的放大处理的流程的流程图。
[0082] 图17是表示第八实施方式的放大处理的流程的流程图。
[0083] 图18是作为本发明的摄影装置的一例的智能手机的外观图。
[0084] 图19是表示图18所示的智能手机的结构的框图。
【具体实施方式】
[0085] 以下，参照附图对本发明的实施方式进行说明。首先，对本发明的概略进行说明， 其后，对具体性的应用例进行说明。另外，下述的结构不过是例示，对于其他结构也能够适 用本发明。另外，各结构能够通过任意的硬件、软件或者两者的组合适当实现。
[0086] 本申请发明涉及摄影图像的放大处理技术，能够适用于能够进行摄影图像的图像 处理的全部设备种类。因此，例如也能够通过能够对图像进行摄影的相机等摄像装置、与摄 像装置连接的计算机而实现本发明。
[0087] 图I (a)是表示具备一个摄像部的摄像装置的一例的功能框图，图I (b)是表示具 备二个（多个）摄像部的摄像装置的一例的功能框图。另外，图1(c)是表示摄像装置和与 该摄像装置连接的计算机的一例的功能框图。
[0088] 图I (a)所示的摄像单元10具备：相互连接的摄像部12、数字图像处理部14、图像 放大处理部16、用户I/F(用户接口）17、输入输出控制部18、存储部20、显示部22和信号 输入输出I/F (信号输入输出接口）24。
[0089] 摄像部12根据需要例如具备透镜、光圈、快门、配置有滤色器的摄像元件（CCD、 CMOS等）等，进行摄影而生成摄像数据。另外，后述的光学低通滤光器（OLPF)可以设于摄 像部12,也可以不设于摄像部12。
[0090] 数字图像处理部14对由摄像部12生成的摄像数据实施数字图像处理，根据需要 而进行例如偏置校正处理、WB(白平衡）校正处理、泛白像素检测校正处理、曝光校正处理、 γ (伽马）校正处理、去马赛克算法处理等。
[0091] 另外，由摄像部12获取摄像数据时的摄影条件的数据（摄影条件数据（摄影日、 像素数、F值（光圈值）等））也可以附加于摄像数据。摄影条件数据可以在摄像时在摄像 部12中附加于摄像数据，也可以在摄像后在数字图像处理部14等中附加于摄像数据。在 没有将摄影条件数据附加于摄像数据的情况下，生成不包含摄影条件数据但是包含摄像数 据的图像摄影数据。如此生成的图像摄影数据被发送到后级的图像放大处理部16。
[0092] 图像放大处理部16基于所输入的图像摄影数据，生成摄影图像的放大图像。关于 详细信息留作后述，但是如图2(a)所示，包含摄影数据（主图像）32和摄影条件数据（附 带信息）34的图像摄影数据30在图像放大处理部16中生成放大图像，并从图像放大处理 部16输出还包含放大图像数据38的图像摄影数据36。特别是，在以下的实施方式中，在摄 影条件数据34包含"与光学低通滤光器的有无相关的信息"和/或"与滤色器的排列图案 相关的信息"的情况下，图像放大处理部16实施最适合于"与光学低通滤光器的有无相关 的信息"和/或"与滤色器的排列图案相关的信息"的图像放大处理，从而能够生成优异画 质的放大图像。另外，图像摄影数据36被广义地解释，只要将图像摄影数据30和摄像数据 32建立关联即可。
[0093] 被输入到图像放大处理部16的图像摄影数据30也可以不包含图2(b)所示的摄 影条件数据（特别是"与光学低通滤光器的有无相关的信息"和/或"与滤色器的排列图案 相关的信息")34。在该情况下，图像放大处理部16进行适合于没有附加摄影条件数据的摄 像数据32的图像放大处理，而生成放大图像。
[0094] 该图像放大处理部16中的图像放大处理的详细情况留作后述（参照图6?图 17)。
[0095] 包含"放大图像数据38"和"摄影数据（主图像）32"的图像摄影数据36由图1(a) 所示的输入输出控制部18进行输出控制，存储于存储部（存储器等）20,在显示部（液晶显 示器等）22显示放大图像，或者经由信号输入输出I/F24而输出到外部。
[0096] 另外，摄像部12、数字图像处理部14、图像放大处理部16和输入输出控制部18中 的各种处理的信息能够经由显示部22而提供给用户。用户也能够一边对显示部22所示的 信息进行确认，一边经由用户I/F17对摄像部12、数字图像处理部14、图像放大处理部16 和输入输出控制部18发送控制指示信号。
[0097] 上述的放大图像的生成处理在具备图I (b)所示的多个摄像部（第一摄像部12Α、 第二摄像部12B)的摄像单元10'中也同样能够实施。即，由第一摄像部12A和第二摄像部 12B分别生成的摄像数