信息终端装置、信息取得装置和信息援助方法

信息终端装置、信息取得装置和信息援助方法
【专利摘要】本发明提供信息终端装置、信息取得装置和信息援助方法。信息终端装置具有：第1摄像部，其获得第1摄像图像；第1通信部，其按照第1通信标准，接收由第2摄像部获得的第2摄像图像；第2通信部，其按照与上述第1通信标准不同的第2通信标准进行通信；以及显示控制部，其用于在未建立上述第1通信部的通信的情况下，在上述第2通信部的通信中显示上述第1摄像图像，通过对来自多个摄像部的多个摄像图像的协作的显示控制，缩短到显示摄像图像为止的待机时间。
【专利说明】
信息终端装置、信息取得装置和信息援助方法
技术领域
[0001 ]本发明涉及使多个设备协作来实现期望的设备的所谓1T(Internet of Things:物联网)，并涉及进行所需的信息处理的信息终端装置、信息取得装置和信息援助方法。
【背景技术】
[0002]近年来，摸索出使智能手机、平板PC、笔记本PC等便携信息终端和其他设备协作，实现远程操作或信息管理的一元化、超越迄今为止的各种制约的设备控制的技术。
[0003]可通信的设备增多，而便携信息终端本身具有的传感器类、照相机类等也与操作部或显示部共同进化，这样的1T的环境下的使用设备的最优化成为了重要的课题。
[0004]在这种环境下，智能手机或平板PC等也作为控制设备发挥作用，还发挥用于通过无线、有线来操作其他设备的遥控器式的作用，能够使用设置于显示部的触摸面板等，进行针对其他设备的远程操作或从其他设备的信息收集等。所以，迅速的连接和功能的起动成为这种技术的重要要素之一。
[0005]例如，在日本特开2013-115828号公报中公开了以下技术:通过与特定设备的接触来交换用于通信连接的设备信息，根据所交换的设备信息，控制进行与特定设备的通信的近距离通信模块。通过使用该技术，还能够利用智能手机等来控制镜头型照相机。
[0006]近年来，数码照相机等带拍摄功能的便携设备(摄影装置)已经普及。在这种摄影装置中，还存在具有显示部并具有对拍摄图像进行显示的功能的摄影装置。此外，还具有在显示部上显示菜单画面，并使得摄影装置的操作变得容易的摄影装置。这种显示部很多都设置于便携设备主体的背面，用户在摄影时，还能够一边确认显示于背面的显示部上的实时取景图像一边进行摄影操作。
[0007]此外，近年来，有时候采用不具有摄像图像的显示部，而仅具有摄影和记录功能的镜头型照相机。这种镜头型照相机一般被安装于智能手机或平板PC等，将所安装的智能手机或平板PC等作为控制设备来对摄影进行控制。此外，这种智能手机或平板PC等控制设备还作为显示来自镜头型照相机的摄像图像的摄像显示装置发挥作用。
[0008]智能手机或平板PC等控制设备通过无线或有线通信与镜头型照相机之间连接，能够使用设置于显示部的触摸面板等，进行镜头型照相机的摄影操作。
[0009]但是，在智能手机等进行的镜头型照相机等协作设备的控制中，能够使用与例如蓝牙(注册商标)等近距离无线标准对应的通信模块。但是，在图像传输等通信容量大的情况下，很多情况下采用与传输速率比较高的WiFi (Wireless Fidelity:无线通信)等标准对应的通信模块。不限于此，还采用红外通信或LTE等通信容量不同的多种通信。

【发明内容】

[0010]本发明的信息终端装置具有:第I摄像部，其获得第I摄像图像;第I通信部，其按照第I通信标准，接收由第2摄像部获得的第2摄像图像;第2通信部，其按照与上述第I通信标准不同的第2通信标准进行通信；以及显示控制部，其用于在未建立上述第I通信部的通信的情况下，在上述第2通信部的通信中显示上述第I摄像图像。
[0011]此外，本发明的信息终端装置具有:第3通信部，其按照第I通信标准，与具有获得第I摄像图像的第I摄像部的设备进行通信;第4通信部，其按照与上述第I通信标准不同的第2通信标准进行通信;第2摄像部，其获得第2摄像图像；以及控制部，其经由上述第3通信部将由上述第2摄像部获得的第2摄像图像发送给上述设备，并且在未建立上述第3通信部的通信的情况下，经由上述第4通信部将与上述第2摄像部相关的摄影信息发送给上述设备。
[0012]此外，本发明的信息援助方法具有如下步骤:进行用于建立在图像传输中使用的遵循第I通信标准的通信的处理;进行用于建立遵循与上述第I通信标准不同的第2通信标准的通信的处理；由第I摄像部取得第I摄像图像；显示上述第I摄像图像;在未建立遵循上述第I通信标准的通信的情况下，当建立了遵循上述第2通信标准的通信后，通过遵循上述第2通信标准的通信来取得与第2摄像部的摄影相关的摄影信息；在上述第I摄像图像中重叠显示基于上述摄影信息的显示；以及在建立了遵循上述第I通信标准的通信后，显示由上述第2摄像部获得的第2摄像图像。
[0013]此外，本发明的信息取得装置具有:第I信息取得部，其获得第I信息；第I通信部，其按照第I通信标准，接收由第2信息取得部获得的第2信息；以及第2通信部，其按照与上述第I通信标准不同的第2通信标准进行通信；以及显示控制部，其用于在未建立上述第I通信部的通信的情况下，在上述第2通信部的通信中使用户获知上述第I信息。
【附图说明】
[0014]根据参照附图的以下描述，本发明的上述及其他目标、特征和优点将被更清楚地理解。
[0015]图1是示出本发明的第I实施方式的信息终端装置的框图。
[0016]图2是示出通过具有内置照相机的智能手机和镜头型照相机实现了本实施方式的情况下的外观的说明图。
[0017]图3是示出第I实施方式的智能手机20进行的控制的流程图。
[0018]图4A?图4C是示出摄影的状况的说明图。
[0019]图5是示出在第2实施方式中采用的照相机控制的流程图。
[0020]图6是示出在第2实施方式中采用的照相机控制的流程图。
【具体实施方式】
[0021]下面，参照附图详细说明本发明的实施方式。
[0022](第丨实施方式)
[0023]图1是示出本发明的第I实施方式的信息终端装置的框图，图2是示出通过具有内置照相机的智能手机和镜头型照相机实现了本实施方式的情况下的外观的说明图。另外，可以采用平板PC或移动电话来代替智能手机。此外，不限于镜头型照相机，也可以采用具有摄像部的各种摄影设备。
[0024]—般而言，智能手机是即使显示画面关闭也始终在起动状态下使用。因此，智能手机能够从操作开始起在比较短时间内使显示画面启动并显示由内置照相机拍摄的图像。因此，在本实施方式中，使用能够在比较短时间内建立通信的蓝牙(注册商标)等近距离无线通信，并协作使用智能手机和镜头型照相机，并且有效使用由智能手机的内置照相机进行的摄像和显示，由此能够进行不错过快门时机的快速摄影。另外，一般而言，虽然WiFi等遵循第I通信标准的无线LAN通信为传输速率比较高的通信(以下，也称作高速通信)，但是由于需要比较大的电量，所以必须仅在想要使用时从最初起进行通信的建立控制，也存在终端搜索或安全性的秘钥交换等复杂的通信手续由标准确定的问题，相对于通信建立需要比较长的时间，虽然遵循第2通信标准的近距离无线通信为传输速率比较低的通信(以下，也称作低速通信)，但是具有耗电量较小的优点，能够进行始终连接或间歇性的连接等，存在通信建立所需的时间缩短的可能性。特别是，还提出了进一步降低传输速率，即使限定通信内容也使耗电量减少的类型。还能够进行跳频等稳定通信。最近，提出了特别抑制了耗电，几乎能够常时通信待机的类型的通信标准，如果考虑到通过抑制数据通信量来完成这样的努力，则也可单纯地换言之，低速通信的连接较快。在本实施方式中，主要说明对于图像传输(或高音质的声音)采用高速通信。也就是说，在本实施例中，在无法立即实现高速通信且无法立即取得应满足的数据时，通过谋求其他手段并提出代替手段，降低用户的不满。作为代替手段，结合能够以低速通信完成的部分，弥补不足的部分，或以不需要通信的内部的功能来代替。为此，还需要实现以下的努力:预先确定能够通过何种内部功能来辅助在外部设备中利用的功能。
[0025]如图2所示，在智能手机20(图1)的壳体20a上拆装自如地安装有拆装器械31，在拆装器械31上设置有用于安装镜头型照相机10(图1)的安装部32。镜头型照相机10具有收纳有摄像部11的镜筒33，在镜筒33的基端侧设置有安装部34。能够通过嵌入或拧入等，将该安装部34安装于拆装器械31的安装部32。
[0026]在图1中，在智能手机20中设置有高速通信部21和低速通信部22。另一方面，在镜头型照相机10中也设置有高速通信部13和低速通信部14。高速通信部13、21能够进行利用例如WiFi等无线LAN的高速通信。此外，低速通信部14、22能够进行利用例如蓝牙(注册商标)等近距离无线的低速通信。
[0027]智能手机20和镜头型照相机10构成为能够经由高速通信部21、13相互进行通信，并且构成为能够经由低速通信部14、22相互进行通信。在智能手机20中设置有显示部29，显示控制部28能够将来自镜头型照相机10的摄像图像显示于显示部29的显示画面29a(参照图4A?图4C)。
[0028]在镜头型照相机10中设置有在镜筒33内中收纳有光学系统Ila的摄像部11，光学系统Ila在镜筒33内具有能够移动以通过焦点对准而设定为对焦状态的对焦镜头和在对焦状态下进行变倍的变焦镜头等(未图示)。此外，光学系统Ila具有对这些镜头和光圈进行驱动的未图示的机构部。
[0029]在摄像部11中设置有由CCD或CMOS传感器等构成的未图示的摄像元件，通过光学系统Ila将被摄体光学像引导至摄像元件的摄像面。控制部12对光学系统Ila的功能部进行控制，对这些对焦镜头、变焦镜头和光圈进行驱动控制。摄像元件对被摄体光学像进行光电转换而获得摄像图像。
[0030]镜头型照相机10的控制部12由例如CPU等处理器构成，根据来自后述的智能手机20的信号，对镜头型照相机10的各部进行控制。此外，在镜头型照相机10中还设置有操作部16，操作部16将基于用户操作的操作信号提供给控制部12。控制部12还能够根据来自操作部16的操作信号，对镜头型照相机10的各部进行控制。
[0031]摄影控制部12b产生对焦信号、变焦信号和光圈控制信号，并对光学系统Ila的对焦、变焦和光圈进行驱动控制。此外，摄影控制部12b向摄像元件供给驱动信号，对被摄体的摄像进行控制。此外，视场角控制部12a根据用户操作，或通过智能手机20的指定来设定摄影视场角，能够对摄像部11进行控制并调整摄影视场角。
[0032]控制部12被提供来自摄像部11的摄像图像，能够在实施了规定的图像信号处理，例如颜色调整处理、矩阵转换处理、噪声去除处理、其他各种信号处理后，提供给记录部18进行记录。作为记录部18，能够采用例如IC存储器。控制部12还能够经由高速通信部13将摄像图像传送到智能手机20。
[0033]控制部12具有摄影信息取得部12c。摄影信息取得部12c取得摄影信息，该摄影信息包含变焦镜头、对焦镜头等的镜头状态、光圈状态等与镜头相关的镜头信息和视场角等与拍摄相关的信息等中的至少I方。摄影信息取得部12c还能够经由低速通信部14将所取得的摄影信息传送到智能手机20。在镜头信息中还包含镜头位置、景深的范围等光轴方向的距离信息。
[0034]此外，在镜头型照相机10中还设置有仰角方位传感器15。仰角方位传感器15检测镜头型照相机10的摄像部11的姿势，将检测结果输出到控制部12。控制部12能够根据仰角方位传感器15的检测结果，判定摄像部11的摄影方向。另外，控制部12还将与摄像部11的摄影方向相关的信息作为摄影信息输出到智能手机20的控制部25。
[0035]高速通信部13能够与设置于智能手机20中的高速通信部21之间，经由规定的传输路径进行通信。作为传输路径，能够采用有线和无线的各种传输路径，例如USBdJniversalSerial Bus:通用串行总线)缆线或WiFi(Wireless Fidelity)等无线LAN的传输路径等。
[0036]此外，低速通信部14能够与设置于智能手机20中的低速通信部22之间，经由规定的传输路径进行通信。作为传输路径，例如能够采用蓝牙(注册商标)等近距离无线通信的传输路径等。
[0037]在与智能手机20之间经由低速通信部14、22建立了通信后，控制部12能够按照智能手机20的控制部25对摄影进行控制，并且将与摄影相关的各种信息(摄影信息)传送到智能手机20。此外，在与智能手机20之间经由高速通信部13、21建立了通信后，控制部12能够将摄像部11取得的摄像图像传送到智能手机20。
[0038]智能手机20具有由例如CPU等处理器构成的控制部25，控制部25对智能手机20的各部进行控制。控制部25经由低速通信部22、14向镜头型照相机10的控制部12发送用于驱动摄像元件的驱动控制信号，并接收从控制部12发送的摄影信息。此外，控制部25经由高速通信部13、21接收来自镜头型照相机1的摄像图像。
[0039]在本实施方式中，在智能手机20中设置有内置照相机部23。内置照相机部23设置有由CCD或CMOS传感器等构成的未图示的摄像元件，经由设置于壳体203的镜头35入射的被摄体光学像入射到该摄像元件的摄像面。内置照相机部23能够被控制部25控制并拍摄被摄体，将摄像图像输出到控制部25。控制部25能够在内置照相机部23摄像时，进行焦点控制、曝光控制、白平衡控制、视场角控制等各种摄影控制。
[0040]控制部25对经由高速通信部21接收到的摄像图像(以下，也称作外部摄像图像)和来自内置照相机部23的摄像图像(以下，也称作内置照相机图像)进行规定的信号处理，例如颜色调整处理、矩阵转换处理、噪声去除处理及其他各种信号处理。
[0041]控制部25能够进行与摄像图像的记录和再现相关的处理。例如，控制部25能够对信号处理后的摄像图像进行压缩处理，并将压缩后的图像提供给记录部24使其进行记录。作为记录部24，能够采用例如IC存储器等各种记录介质，记录部24能够将图像信息和声音信息等记录到记录介质中。此外，还需要花功夫预先确定能够通过何种内部功能来辅助在外部设备中利用的功能。因此，也可以在记录部24中设置代替数据库24a，与外部设备对应地记录能够用哪种内部功能进行代替。这也可以利用对外部设备进行控制的应用软件等来进行写入。此外，可以与其相关联地记录在低速通信时发送的信息。
[0042]显示控制部28执行与显示相关的各种处理。能够从控制部25对显示控制部28提供信号处理后的摄影图像，提供给显示部29使其进行显示。显示部29具有IXD等显示画面29a，对从显示控制部28提供的图像进行显示。此外，显示控制部28还能够使显示部29的显示画面29a显示各种菜单显示等。控制部25能够读出记录部24中记录的摄像图像并进行解压缩处理。显示控制部28能够通过将解压缩处理后的摄像图像提供给显示部29，进行记录图像的再现。
[0043]在智能手机20中还配设有操作部27。操作部27由设置于智能手机20中的未图示的开关、按键、软键盘等各种操作部构成，产生基于用户操作的操作信号，并输出到控制部25。控制部25根据操作信号来控制各部。
[0044]在显示部29的显示画面29a上设置有未图示的触摸面板。触摸面板能够产生与用户用手指指示的显示画面29a上的位置相应的操作信号。该操作信号被提供到控制部25。由此，在用户在显示画面29a上进行了触摸或滑动的情况下，控制部25能够检测用户的触摸位置、闭合张开手指的操作(捏合操作)、滑动操作和通过滑动操作到达的位置、滑动方向、进行触摸的期间等各种操作，从而能够执行与用户操作对应的处理。
[0045]另外，显示画面29a配置成占据智能手机20的壳体20a的例如前表面大致整个范围，用户在由镜头型照相机10进行的拍摄时能够确认显示在显示部29的显示画面29a上的摄像图像，还能够一边确认摄像图像一边进行摄影操作。
[0046]方位/视场角判定部30能够判定智能手机20的朝向和内置照相机部23的摄影视场角，将判定结果输出到控制部25。控制部25能够根据方位/视场角判定部30的判定结果，掌握内置照相机部23的摄影方向和摄影范围。
[0047]在本实施方式中，控制部25能够进行协作模式下的动作，该协作模式协作进行镜头型照相机10的摄影和内置照相机部23的摄影。控制部25在协作模式中，在建立高速通信部21、13的通信以前，对显示控制部28进行控制以将由内置照相机部23获得的摄像图像显示于显示部29。此外，在协作模式中建立了低速通信部22、14的通信后，控制部25从镜头型照相机1的控制部12经由通信部2 2、14取得摄影信息。在本实施方式中，控制部25根据所取得的摄影信息，使显示部29显示与镜头型照相机10的摄影相关的信息的显示。
[0048]此外，控制部25能够判定在内置照相机图像中包含的外部摄像图像的图像部分的范围(以下，也称作外部摄像图像范围)。在从镜头型照相机10取得的摄影信息中包含镜头型照相机10的摄像部11的摄影方向的信息和变焦信息等，控制部25能够通过使用方位/视场角判定部30的判定结果和来自镜头型照相机10的摄影信息，或者进一步使用拆装器械31在壳体203的安装位置和内置照相机部23的摄影条件的信息等，求出外部摄像图像范围。控制部25通过将所求出的外部摄像图像范围的信息提供给显示控制部28，能够将表示外部摄像图像范围的框图像显示到内置照相机图像中。
[0049]虽然控制部25还能够通过根据接收的外部摄像图像求出图像的特征并与内置照相机图像进行比较来判定外部摄像图像范围，但是在本实施方式中，通过根据与视场角或摄影方向相关的摄影信息等来判定外部摄像图像范围，还能够在将外部摄像图像传输到智能手机20以如，求出外部摄像图像??围。
[0050]这样，控制部25作为基于摄影信息的显示，还能够将例如镜头型照相机10的摄影条件的信息显示重叠显示到内置照相机部23的摄像图像上。例如，作为信息显示，可以显示镜头型照相机10的焦距的数字，此外还可以显示表示镜头型照相机10的视场角的范围、SP外部摄像图像范围的框图像。并且，控制部25还能够根据镜头型照相机10和内置照相机部23的摄影条件中的一方，变更另一方的摄影条件。
[0051]例如，如果假设通信部14、22能够在刚刚起动以后的短时间内进行通信，则在协作模式时，能够经由该通信部14、22发送与图像视场角或摄影方向相关的摄影信息。如刚刚起动以后那样，在未建立高速通信部13、21的通信且不向智能手机20传输来自镜头型照相机10的摄像部11的摄像图像的期间，控制部25还能够使内置照相机图像显示到显示画面29a上。并且，在接收外部摄像图像以前，还能够使表示镜头型照相机10拍摄的外部摄像图像的范围的框图像显示到内置照相机图像上。由此，用户还能够事先确认镜头型照相机10的摄影范围。
[0052]接着，参照图3和图4A?图4C说明这样构成的实施方式的动作。图3是示出第I实施方式的智能手机20进行的控制的流程图。图4A?图4C是示出摄影的状况的说明图，示出了显示部29的显示画面29a上的显示。
[0053]摄影者能够在被安装在智能手机20上的拆装器械31上安装镜头型照相机10。图4A?图4C示出了该状态。摄影者41例如能够用左手42把持智能手机20的壳体20a和镜筒33，在一边观察显示到显示部29的显示画面29a上的实时取景图像一边将被摄体捕捉到视野范围内的状态下进行拍摄。这里，作为信息的交换的代表例，根据图像进行说明，但是在无法进行通信时，从谋求其他手段并用代替手段来降低用户的不满的观点出发，不限于图像，只要是能够取得的信息什么都能够应用，作为除图像以外的信息的代表，存在声音数据。在声音信息中麦克风的朝向等也成为重要的要素，要求与摄影时相同的操作。
[0054]在智能手机20的协作模式时，进行图3所示的控制。在图3的步骤SI中，控制部25请求高速通信部21进行的高速通信和低速通信部22进行的低速通信。高速通信部21和低速通信部22分别进行用于建立与镜头型照相机10的高速通信部13或与低速通信部14之间的通信的处理。
[0055]控制部25在步骤S2中判定是否建立了高速通信部21、13的高速通信。高速通信的建立需要比较长的时间，由此在自高速通信的请求起的时间比较短的情况下，未建立高速通信，处理转移到步骤S3 ο在未建立高速通信的情况下，控制部25在步骤S3中，取得来自内置照相机部23的内置照相机图像。控制部25将所取得的内置照相机图像提供给显示控制部28并使其显示到显示部29的显示画面29a上(步骤S4)。图3(a)示出该状态，在显示部29的显示画面29a上显示有包含基于被摄体即鸟43的图像44的内置照相机图像。此外，可以不仅具有如照相机这样的图像信息，还具有麦克风26，取得声音信息并显示其音量等相关信息。由此能够预先对音量等级的增益调整或平衡器或消噪等进行设定，事先准备等变得方便。如上所述，作为在无法进行高速通信时被代替使用的功能，由代替数据库24a进行检索，当然也可以进行如指定那样的工作。当然用户可以任意改写该数据并能够进行定制。例如，在将照相机连接前，即使是取得网络信息等与图像无关的设定，也能够实现用户的负担减轻，能够降低不满。如果是如通过网络来检索样本图像那样的规格，则可以说与摄影无关。
[0056]接着，控制部25在步骤S5中判断是否产生了摄影指示。在未产生摄影指示的情况下，控制部25在步骤S6中判定是否建立了低速通信。在未建立低速通信的情况下，控制部25将处理返回步骤S2反复进行同样的处理。
[0057]低速通信在自低速通信的请求起比较短的时间内建立。在建立低速通信后，控制部25将处理转移到步骤S7并从外部照相机即镜头型照相机10取得摄影信息或摄影方向信息或姿势信息等(缺少哪个都可以)。镜头型照相机10的摄影信息取得部12c经由低速通信部22、14将所取得的摄影信息输出到控制部25。控制部25对显示控制部28进行控制，以使基于所取得的摄影信息的显示显示到内置照相机图像上(步骤S8)。这样，在显示部29的显示画面29a上显示有基于镜头型照相机10的摄影信息的信息显示45。另外，在步骤S8中通信的内容可以为信息量比较少的声音信息等。
[0058]图4B示出了该状态，在显示部29的显示画面29a上，在包含图像44的内置照相机图像上显示有镜头型照相机10的焦距的信息显示45。通过该信息显示45，用户在建立高速通信将来自镜头型照相机10的摄像图像显示到智能手机20的显示画面29a上以前，能够获知与镜头型照相机10进行的摄像相关的信息，并能够在某种程度上预测镜头型照相机10拍摄的摄像图像。另外，可以将示出与镜头型照相机10之间建立通信的过程中，在显示画面29a上仍未显示有来自镜头型照相机10的摄像图像的例如“通信建立中”这样的消息重叠显示到内置照相机图像上。
[0059]并且，在显示画面29a上还显示有基于方位/视场角判定部30的判定结果和镜头型照相机10的摄影信息的、表示外部摄像图像范围的框图像46。控制部25根据通过低速通信从镜头型照相机10发送来的摄影信息、以及镜头型照相机10的摄影方向和视场角的范围等信息，判定外部摄像图像是否与内置照相机图像中的任意一个的范围相当。控制部25对显示控制部28进行控制，使判定结果即表示外部摄像图像范围的框图像46显示到显示画面
29已上。
[0060]通过该框图像46的显示，用户在建立高速通信并将来自镜头型照相机10的摄像图像显示到智能手机20的显示画面29a上以前，能够获知镜头型照相机10的摄像图像的摄影范围。
[0061]在步骤S5中判定为由用户进行了指示摄影的操作后，控制部25在步骤S12中进行摄影处理。例如，在用户的摄影操作为针对内置照相机部23的摄影操作的情况下，控制部24对来自内置照相机部23的摄像图像实施规定的静态图像图像处理，将处理后的静态图像提供给记录部24进行记录。
[0062]S卩，在该情况下，在建立高速通信并将来自镜头型照相机10的摄像图像显示到智能手机20的显示画面29a上以前，能够一边确认内置照相机部23的摄像图像的实时取景图像一边进行摄影，并能够也在例如镜头型照相机10的起动时不错过快门时机地进行摄影。
[0063]此外，在用户进行的摄影操作为针对镜头型照相机10的摄影操作的情况下，控制部25在步骤S12中经由低速通信部22，对镜头型照相机10的摄影进行指示。当经由低速通信部14接收到摄影指示的信息时，镜头型照相机10的控制部12对摄像部11进行控制来进行摄像。控制部12对来自摄像部的摄像图像实施规定的静态图像的图像处理，将处理后的摄像图像提供给记录部18进行记录。
[0064]S卩，在该情况下，用户在建立高速通信并将来自镜头型照相机10的摄像图像显示到智能手机20的显示画面29a上以前，能够通过内置照相机部23的摄像图像的实时取景图像来预测镜头型照相机10的摄像图像，并能够某种程度上按照用户希望的构图等进行镜头型照相机10的摄影。由此，即使在高速通信的建立前，也能够在自高速通信的请求起比较短的时间内，由镜头型照相机10获得符合用户的希望的摄像图像。
[0065]在从高速通信的请求起经过规定时间后，在高速通信部13、21相互之间建立高速通信。在控制部25在步骤S2中判定为建立了高速通信后，将处理转移到步骤S9，并取得来自镜头型照相机10的摄像图像或声音信息。镜头型照相机10的控制部12经由高速通信部13、21将来自摄像部11的摄像图像传输到智能手机20 ο控制部25将经由高速通信部21接收到的摄像图像提供给显示控制部28，使实时取景图像显示到显示部29的显示画面29a上。这里，虽然说明了信息量较多的图像，但是如果声音等也高分辨率化等被高音质化、多通道化，则有时优选这种通信。
[0066]图4C示出了该情况下的画面显示，在显示部29的显示画面29a上显示有包含被摄体即鸟43的图像47的外部摄像图像。控制部25在步骤310中判定是否由用户进行了指示摄影的操作。在由用户进行了摄影操作后，控制部25在步骤Sll中，经由低速通信部22，对镜头型照相机10指示摄影。当经由低速通信部14接收到摄影指示的信息时，镜头型照相机10的控制部12对摄像部11进行控制来进行摄像。控制部12能够对来自摄像部的摄像图像实施规定的静态图像的图像处理，将处理后的摄像图像提供给记录部18进行记录，或者经由高速通信部13、21提供给智能手机20并在智能手机20的记录部24中进行记录。
[0067]这样，在本实施方式中，在通过高速通信接收来自外部照相机即镜头型照相机的摄像图像，并通过低速通信接收来自通过镜头型照相机的摄影信息的信息终端装置中，在高速通信的建立前，将内置照相机的摄像图像显示到显示部，并且重叠显示基于来自镜头型照相机的摄影信息的信息显示。由此，能够在镜头型照相机的摄像图像的显示前，预测镜头型照相机的摄像图像，与完全不确认实时取景图像来进行摄影的情况相比，能够在某种程度上进行用户希望的摄影。由此，即使在高速通信的建立前，也不会错过快门时机，能够在某种程度上进行希望的摄影。
[0068](第2实施方式)
[0069]图5和图6示出在第2实施方式中采用的照相机控制的流程图。图5示出了镜头型照相机10的照相机控制(外部照相机控制)，图6示出了智能手机20的照相机控制(智能手机控制)。本实施方式中的硬件结构与第I实施方式相同。
[0070]在第I实施方式中，说明了进行协作显示的例子，在高速通信建立前显示内置照相机图像，在高速通信建立后显示外部摄像图像。本实施方式说明在高速通信建立前，不仅进行协作显示，还通过内置照相机部23和摄像部11进行协作摄影控制的例子。
[0071]在图6的步骤S51中，智能手机20的控制部25判定是否指定了照相机协作模式。在指定了照相机协作模式的情况下，控制部25进行用于建立与镜头型照相机10之间的通信的控制，在步骤S52中判定是否建立了高速通信。在自高速通信请求起的时间比较短的情况那样，未建立高速通信的情况下，控制部25成为低速通信的待机状态。
[0072]控制部25在开始低速通信之前的期间内，进行与内置照相机部23的摄影相关的各种控制和信息的取得。例如，控制部25在步骤S54中起动内置照相机部23，在步骤S55中取得内置照相机图像的实时取景图像，在步骤S56中进行图像判定，关于对象部位求出自动对焦、自动曝光和自动白平衡的各设定值，在步骤S57中获得姿势的判定结果。这时，可以起动内置麦克风并首先开始声音取得和判定等。控制部25根据方位/视场角判定部30的输出，判定摄影姿势。控制部25根据该判定结果和后述的镜头型照相机10的姿势的判定结果，能够判定智能手机20的内置照相机部23的摄影方向和摄像部11的摄影方向是否一致、即是否能够拍摄相同的被摄体。这时，为了不使用户混乱，可以进行显示控制使得能够获知所显示的图像为内置照相机的图像。可以对该内容进行表述，也具有改变框或者设为黑白或者用声音进行传送等各种方法。这样，为了使用户不焦虑，可以显示设备实现最优的状况，另外，还可以在建立通信前，观察对象物或者开始图像记录。虽然这里对图像进行了说明，但是在用分体的麦克风或记录装置对鸟的声音进行录音时，想在鸟逃走之前暂且进行记录的用途等中，实施同样的功夫对于声音也很重要。此外，虽然还想要拍摄鸟的图像，但是也存在在建立通信前即使仅仅是声音也想要进行记录的需求。这样，如果应用于图像或声音或其他信息，则只要是以具有以下单元为特征的信息取得装置，就能够实现这里所说明的效果:第I信息取得部，其获得第I信息；第I通信部，其按照第I通信标准，接收由第2信息取得部获得的第2信息；第2通信部，其按照与上述第I通信标准不同的第2通信标准，进行通信；以及显示控制部，其用于在未建立上述第I通信部的通信的情况下，在上述第2通信部的通信中使用户获知上述第I信息。
[0073]另外，显示控制部在建立了第I通信部的通信后，还能够进行将第I信息显示为子图像的应用，相反，由于较烦琐，所以也可以在即将建立第I通信部的通信之前结束第I信息的显示。
[0074]在建立了低速通信部22、14相互间的低速通信后，控制部25在步骤S59中开始高速通信的建立处理。另外，控制部25可以在照相机协作模式的开始时，同时开始用于建立低速通信和高速通信双方的通信的控制。控制部25在步骤S60中判定是否建立了高速通信。在未建立高速通信的情况下，控制部25在步骤S61中进行基于内置照相机图像的实时取景图像显示。另外，在智能手机20中作为内置照相机部23具有对前方进行拍摄的外照相机部和对后方进行拍摄的内照相机部，将来自接通的照相机部的内置照相机图像用作实时取景图像。可以取得外部照相机的姿势信息和方位信息等，选择这些照相机中的适当的照相机(接近相同朝向的一方)。
[0075]虽然有时在多个面搭载智能手机照相机，但是由显示面的背面的智能手机照相机、观察与筒型照相机相同的方向的智能手机照相机开始摄影。可以使用户能够设定筒型照相机朝向哪个方向，也可以对智能手机和筒型照相机的姿势传感器的信息进行比较，或者用专用的传感器来检测安装状态。当然，也可以对摄像结果进行比较，也可以在下一次摄影开始时反映这种比较结果。也可以将这些机构或功能称作方向判定部。这样，如果存在方向判定部，则能够进行掌握了智能手机的内置照相机和筒型照相机的光轴中心的差异等的显示控制。此外，能够进行“摄影方向判定”，该“摄影方向判定”是使用智能手机的触摸部或专用传感器判定智能手机的摆放方式，还在筒型照相机中设置触摸判定或开关等专用传感器来同样判定它们的摆放方式，如判定用右手支撑智能手机，用左手支撑筒型照相机这样的状況，并判定它们是否对相同的方向进行观察。
[0076]另一方面，在图5的步骤S21中，镜头型照相机10的控制部12成为低速通信建立的待机状态。例如，通过由NFC(Near Field Communi cat 1n:近场通信)或BLE (蓝牙(注册商标)低能耗)等来构成低速通信部14，能够充分减少低速通信部14中的耗电，如果使镜头型照相机10的主要部分的电源断开，则能够通过比较小的容量的电池，实现使低速通信部14始终接通的待机状态。在建立了低速通信部14、22中的低速通信后，控制部12判定是否从智能手机20的控制部25发送了使镜头型照相机10的电源接通的指示(步骤S22)。
[0077]在产生电源接通的指示后，控制部12将镜头型照相机10的各部接通电源，判定是否指示了摄影模式(步骤S23)。在指示了摄影模式后，控制部12使高速通信部13开始高速通信的建立处理(步骤S24)。
[0078]控制部12在步骤S25?S29中取得摄影信息和实时取景图像。即，在步骤S25中，摄影信息取得部12c判定镜头规格。此外，在步骤S26中，控制部12根据仰角方位传感器15的输出，判定摄影姿势。镜头型照相机10有时从智能手机20分离使用，未必能够拍摄与智能手机20的内置照相机部23相同的摄影范围。控制部12能够根据仰角方位传感器15的输出，判定摄影姿势，并根据该判定结果和上述的智能手机20的姿势的判定结果，判定智能手机20的内置照相机部23的摄影方向和摄像部11的摄影方向是否一致、即是否能够拍摄相同的被摄体。
[0079]摄像部11将摄像图像输出到控制部12。控制部12取得基于摄像部11的摄像图像的实时取景图像(步骤S27)。控制部12求出关于所取得的摄像图像中的对象物的图像特征，并且取得该对象物的摄像图像中的位置信息(步骤S28)。另外，也可以在该时机开始图像记录，能够在今后使用。也可以应对运动图像等，开始取得声音。此外，控制部12进行图像判定，关于对象部位求出自动对焦、自动曝光和自动白平衡的各设定值(步骤S29)。
[0080]在本实施方式中，控制部12在步骤S30中判定是否建立了高速通信，在未建立的情况下，在步骤S41?S44中，使用低速通信将取得的摄影信息发送到智能手机20。即，控制部12在步骤S41中发送镜头规格的信息，在步骤S42中发送姿势的信息，在步骤S43中发送图像特征和位置信息，在步骤S44中发送关于对象部位的自动对焦、自动曝光和自动白平衡的各设定值的信息。此外，也可以在这些时机首先开始发送声音信息等。
[0081]另外，在获得了表示摄像部11和内置照相机部23的摄影方向相互不同的判定结果的情况下，控制部12可以代替步骤S41?S44的发送，而发送表示摄影方向不同的判定结果和摄影方向差的信息。
[0082]另一方面，在图6的步骤S62?S5中，智能手机20的控制部52接收来自镜头型照相机10的镜头规格信息、摄影姿势的信息、图像特征和位置的信息以及关于对象部位的自动对焦、自动曝光和自动白平衡的各设定值的信息。
[0083]控制部52根据在步骤S57中取得的自身设备的摄影姿势和通过步骤S63取得的镜头型照相机10的摄影姿势，判定内置照相机部23的摄影方向和镜头型照相机10的摄像部11的摄影方向是否一致。在不一致的情况下，控制部52在步骤S67中将两者的摄影方向的差异信息重叠显示于基于内置照相机图像的实时取景图像上。
[0084]在判定为摄影方向一致的情况下，控制部52在步骤S71中求出内置照相机图像的图像特征，并且根据所求出的图像特征的信息和在步骤S64中取得的图像特征的信息，判定在内置照相机图像和外部摄像图像中是否存在共同的对象。在判定为存在共同的对象的情况下，控制部52使所取得的各种设定值反映到基于内置照相机图像的实时取景图像中。例如，控制部52在内置照相机部23中设定镜头型照相机10的自动对焦、自动曝光和自动白平衡的各设定值。通过使用在镜头型照相机10中取得的摄影设定值，有可能能够提高内置照相机部23中的摄像图像的品质。关于声音，也可以判定是否存在相同的声音且是否取得相同的声音。
[0085]另外，智能手机20的控制部25可以根据在内置照相机部23中设定的摄影条件，设定镜头型照相机10的摄影条件。在该情况下，也有可能能够提高镜头型照相机10拍摄的摄像图像的品质。
[0086]并且，控制部52在步骤S73中使信息显示45和框图像46(参照图4B)进行显示。通过这些的显示，用户能够预测镜头型照相机10的摄像图像。在从镜头型照相机10将摄像图像输送到智能手机20以前，用户能够通过框图像46，知晓镜头型照相机10的摄影范围。
[0087]这里，假设用户对摄影进行指示。控制部25在步骤S74中判定是否存在摄影指示，在进行了摄影操作后，在步骤S75中进行摄影。例如，在用户的摄影操作为针对内置照相机部23的摄影操作的情况下，控制部25对来自内置照相机部23的摄像图像实施规定的静态图像的图像处理，将处理后的静态图像提供给记录部24进行记录。例如，控制部25可以根据外部摄像图像范围，对内置照相机图像实施裁剪。这里，虽然重视图像取得而进行了说明，但是如果是取得声音也可以为相同的思路。在外部照相机具有高性能的麦克风的情况等中，如果能够在步骤S75中对预先由该高性能麦克风仅对声音进行了收录的声音进行录音，则即使错过拍摄鸟的图像，也能够仅记录声音，或者能够在与随后拍摄到的图像一起进行再现时使用所获得的声音。
[0088]此外，在用户的摄影操作为针对镜头型照相机10的摄影操作的情况下，控制部25经由低速通信部22，对镜头型照相机10的摄影进行指示。当经由低速通信部14接收到摄影指示的信息时，镜头型照相机10的控制部12对摄像部11进行控制来进行摄像。在该情况下，控制部12可以将摄像图像记录到记录部18中，还可以在建立了高速通信后，输送到智能手机20。
[0089]这样，通过与镜头型照相机10的摄影信息相应地设定内置照相机部23的摄影条件，能够提高内置照相机部23的摄像图像的画质。此外，在内置照相机图像中显示镜头型照相机10的摄像图像的摄影范围，由此能够利用内置照相机图像来识别由镜头型照相机10的摄像部11获得的摄像图像的构图。因此，在本实施方式中，在向智能手机20输送来自镜头型照相机10的摄像图像以前，用户能够通过内置照相机部23或镜头型照相机10的摄影获得在某种程度上能够满足的摄像图像。
[0090]并且，控制部25在步骤S76中判定是否存在对摄影的调整指示。用户一边观察摄影结果，一边进行摄影条件等的调整。控制部25将该调整结果反映到照相机控制中(步骤S77)。例如，在通过智能手机20进行了放大等操作的情况下，根据该操作，能够在镜头型照相机10的摄像部11中设定变焦。
[0091]在步骤S30中判定为建立了高速通信后，镜头型照相机10的控制部12在步骤S31中经由高速通信部13、21，将实时取景图像发送到智能手机20。另外，这里，也可以发送在步骤S27中取得的图像，能追溯观察到通信延迟的部分。在步骤S81中接收到来自镜头型照相机10的实时取景图像后，智能手机20的控制部25将该实时取景图像提供给显示控制部28。显示控制部28将来自镜头型照相机10的摄像图像(外部摄像图像)代替内置照相机图像而提供给显示部29使其进行显示。另外，可以从追溯的部分开始再现图像，能够从中选择并进行摄影。可以对追溯的图像进行高速再现，好似能够连续看到实时取景图像，也可以使用多个画面，在子画面中反复显示。可以为了节能而关闭内置照相机部23，也可以在接通的状态下能够将内置照相机图像作为另外的图像进行记录。
[0092]智能手机20的控制部25在步骤S82中判定是否产生了摄影指示。在由用户进行了摄影操作后，控制部25在步骤S83中经由低速通信部22、14向镜头型照相机10发送摄影的请求。镜头型照相机10的控制部12在步骤S32中判定是否存在摄影指示，在产生了来自智能手机20的控制部25的摄影请求后，对摄像部11指示摄影。控制部12经由高速通信部13、21将来自摄像部11的摄像图像输送到智能手机20(步骤S33)。
[0093]控制部25在步骤S83中对于针对镜头型照相机10的摄影请求，判定是否是请求镜头型照相机10的摄像图像的传送的模式。在对摄像图像进行请求的模式的情况下，控制部25在步骤S85中接收从镜头型照相机10经由高速通信部11，21传送来的摄像图像，实施规定的图像处理后提供给记录部24进行记录。
[0094]此外，在镜头型照相机10中也能够进行摄影操作，控制部12在步骤S34中判定是否进行了摄影操作。在通过镜头型照相机10的操作部16进行了摄影操作后，控制部12控制摄像部11进行摄影。控制部12将通过该摄影获得的摄像图像提供给记录部18进行记录(步骤S36)。此外，在镜头型照相机10中设定了将摄像图像输送到智能手机20的模式的情况下，控制部12将处理从步骤337转移到步骤338，经由高速通信部13、21将摄像图像输送到智能手机20(步骤S38)。
[0095]另外，在镜头型照相机10中，还能够在高速通信的建立前进行摄影。控制部12在步骤S45中判定是否进行了摄影操作。在由镜头型照相机10的操作部16进行了摄影操作后，控制部12控制摄像部11进行摄影(步骤S46)。控制部12将通过该摄影获得的摄像图像提供给记录部18进行记录(步骤347)。
[0096]这样在本实施方式中也能获得与第I实施方式相同的效果。并且，在本实施方式中，在建立从镜头型照相机向智能手机输送摄像图像的高速通信之前，使用低速通信将镜头型照相机的摄影信息等输送到智能手机，智能手机能够使用镜头型照相机的摄影信息对内置照相机的摄影进行控制，并能够由内置照相机获得高品质的摄像图像。
[0097]另外，虽然在上述各实施方式中说明了使用两个摄像部中的一方的摄影信息来对另一方的摄影条件进行设定的例子，但是也可以使用两个摄像部中的一方的摄影信息来控制针对来自另一方的摄像部的摄像图像的图像处理。
[0098]此外，虽然在该实施例中，重点进行了摄影的高速化的说明，但是作为耗电对策，除必要时以外，切断WiFi通信，设置成用蓝牙(注册商标)代替的应用也有效。例如，在模式设定时，如果一边观察智能手机的画面一边进行画质调整，则能够抑制WiFi的耗电，能够长时间使用设备。
[0099]如果仅是掌握画质或图像的印象，则不必局限于镜头型照相机的图像。
[0100]另外，在始终连接中，在仅短时间保证电力的设备的情况下，间歇性地进行WiFi，一并使用如预先较早地进行通信开始设定的工作，则也可以不是蓝牙(注册商标)。也可以将不用在意耗电，无需配对就能够瞬时连接的近距离无线通信(NFC或TransferJet等)代替为第2通信。在该情况下也可以优先进行除图像以外的通信。虽然说明了除图像以外的数据通信，但是还可以包含小容量的图像。
[0101]在上述各实施方式中，作为用于拍摄的设备，使用数码照相机进行了说明，但是作为照相机，可以是数码单反照相机和袖珍数码照相机，可以是摄像机、电影拍摄机这样的动态图像用的照相机，并且当然可以是内置在移动电话或智能手机等便携信息终端I3DA(Personal Digital Assistants:个人数字助理)等中的照相机。
[0102]如果为发送如图像这样较大容量的数据和其附带的比较小容量的数据的系统，则不仅在消费者领域，在产业用、医疗用的领域中也能够使用。例如，只要是摄像部和显示部或操作部为分体的结构的图像设备就能够应用。例如，在进行身体或机械等的内侧的检查时，将摄像部放入内部，首先在操作部侧对身体或机械等的表面进行拍摄来减少浪费的时间。此外，也可以用于以下用途:在通过第I通信标准的通信输送来自内部的摄像部的观察图像之前，在第2通信标准的通信中仅首先找出位置的信息，进行定位。这样的话，先进行其他观察，无需第I通信标准的通信的等待时间，就能够较早地进入到下一个观察和诊断。
[0103]此外，虽然这里说明了需要比较高速的响应的摄影场景中的例子，但是上述各实施方式包含以下的技术构思:如果在无法进行通信时谋求其他手段并利用代替手段来缓和用户的不满，则超出限定为该摄影这样的范围。不仅是图像，还考虑了应用于由IC记录装置等进行录音的声音。即使是声音，在多信道、高分辨率声音中，有时通信与图像同样需要花费时间。此外，当然是以下的发明:只要是通过设备协作获得可测定的信息，不仅在通信开始时，在通信切断时也进行故障的回避的情况下也能够利用。
[0104]本发明不直接限定为上述各实施方式，在实施阶段能够在不脱离其主旨的范围内对结构要素进行变形并具体化。此外，能够通过上述各实施方式公开的多个结构要素的适当组合形成各种发明。例如，可以删除实施方式所示的全部结构要素中的几个结构要素。并且，可适当组合不同实施方式的结构要素。
[0105]另外，关于权利要求、说明书和附图中的动作流程，即使为了方便，使用“首先”、“接着”等进行了说明，但不是指必须按该顺序进行实施。此外，对于构成这些动作流程的各步骤，当然还能够适当省略不影响发明本质的部分。
[0106]另外，关于这里所说明的技术中主要利用流程图说明的控制，多数情况下能够利用程序进行设定，有时也保存在记录介质或记录部中。关于记录到该记录介质、记录电路中的方法，可以在产品出厂时进行记录，也可以利用发布的记录介质，还可以经由因特网进行下载。
【主权项】
1.一种信息终端装置，其具有: 第I摄像部，其获得第I摄像图像； 第I通信部，其按照第I通信标准，接收由第2摄像部获得的第2摄像图像； 第2通信部，其按照与上述第I通信标准不同的第2通信标准进行通信；以及显示控制部，其用于在未建立上述第I通信部的通信的情况下，在上述第2通信部的通信中显示上述第I摄像图像。2.根据权利要求1所述的信息终端装置，其中， 该信息终端装置具有: 控制部，其在未建立上述第I通信部的通信的情况下，当经由上述第2通信部传输了与上述第2摄像部相关的摄影信息时，对上述显示控制部进行控制以在上述第I摄像图像中重叠显示基于上述摄影信息的显示。3.根据权利要求2所述的信息终端装置，其中， 该信息终端装置具有:摄影方向判定部，该摄影方向判定部分别判定上述第I摄像部和第2摄像部的摄影方向， 上述控制部按照上述摄影方向判定部的判定结果，在上述第I摄像图像中重叠基于上述摄影信息的显示。4.根据权利要求1或2所述的信息终端装置，其中， 上述控制部根据与上述第2摄像部相关的摄影信息或姿势信息，设定上述第I摄像部。5.根据权利要求1或2所述的信息终端装置，其中， 上述控制部经由上述第2通信部，在上述第I摄像部中设定与上述第I摄像部相关的摄影条件。6.根据权利要求1或2所述的信息终端装置，其中， 在建立上述第I通信部的通信后，上述控制部对上述显示控制部进行控制，使得显示上述第2摄像图像。7.根据权利要求1或2所述的信息终端装置，其中， 上述控制部使得显示表示上述第I摄像图像中的上述第2摄像图像的摄像范围的图像或基于声音的图像，作为基于上述摄影信息的显示。8.—种信息终端装置，其具有: 第3通信部，其按照第I通信标准，与具有获得第I摄像图像的第I摄像部的设备进行通?目; 第4通信部，其按照与上述第I通信标准不同的第2通信标准进行通信； 第2摄像部，其获得第2摄像图像；以及 控制部，其经由上述第3通信部将由上述第2摄像部获得的第2摄像图像发送给上述设备，并且在未建立上述第3通信部的通信的情况下，经由上述第4通信部将与上述第2摄像部相关的摄影信息发送给上述设备。9.一种信息援助方法，其具有如下步骤: 进行用于建立在图像传输中使用的遵循第I通信标准的通信的处理； 进行用于建立遵循与上述第I通信标准不同的第2通信标准的通信的处理； 由第I摄像部取得第I摄像图像； 显示上述第I摄像图像； 在未建立遵循上述第I通信标准的通信的情况下，当建立了遵循上述第2通信标准的通信后，通过遵循上述第2通信标准的通信来取得与第2摄像部的摄影相关的摄影信息； 在上述第I摄像图像中重叠显示基于上述摄影信息的显示；以及 在建立了遵循上述第I通信标准的通信后，显示由上述第2摄像部获得的第2摄像图像。10.根据权利要求9所述的信息援助方法，其中， 该信息援助方法具有如下步骤:在遵循上述第I通信标准的通信的建立前，根据上述摄影信息来设定上述第I摄像部。11.一种信息取得装置，其具有: 第Ii目息取得部，其获得第Ii目息； 第I通信部，其按照第I通信标准，接收由第2信息取得部获得的第2信息；以及第2通信部，其按照与上述第I通信标准不同的第2通信标准进行通信；以及显示控制部，其用于在未建立上述第I通信部的通信的情况下，在上述第2通信部的通信中使用户获知上述第I信息。12.根据权利要求11所述的信息取得装置，其中， 该信息取得装置具有数据库，该数据库将上述第2信息和第I信息关联起来。
【文档编号】H04M1/725GK105916097SQ201610030716
【公开日】2016年8月31日
【申请日】2016年1月18日
【发明人】福谷佳之, 志村和彦, 神田和男, 金田刚史, 金田一刚史, 野中修
【申请人】奥林巴斯株式会社