专利名称：图像通信系统、终端装置、管理装置及附属图像生成方法
技术领域：
本发明涉及一种将本体图像与附属(r r々七寸U )图像合成后显示的终端装置、在与管理图像的管理装置之间经通信网络进行图像收发的图像通信系统、终端装置、管理装置及附属图像生成方法。
背景技术：
近年来，在网络上显示表现自己的符号3 ”、的情况下，例如在利用 SNS(social networking service)、兴趣相同的同伴彼此经各人的分身图像(r /S'夕-:头像)在网络上进行通信的情况下，因为是相同兴趣的同伴彼此，所以头像也多与兴趣相关， 同伴彼此的头像会类似。在这种情况下，向头像附加附属，但多仅从事先决定的附属中选择期望的附属，附属也会类似。
因此，以前，作为向头像附加附属的技术，已知向头像附加对应于用户属性选择的附属的技术(参照专利文献I)。
专利文献1:特开2005-332091号公报
但是，在上述专利文献I中，通过自动生成带附属的头像，能使头像的识别力大幅度提高，但作为用于决定用户属性的前提，必需对用户实施规定的测试，另外，担心用户属性类似的人彼此的附属也类似。发明内容
本发明的课题在于将生成本体图像与显示的附属图像合成的情况下， 能生成识别力高的附属图像。
根据本发明，提供一种由终端装置与管理装置构成的图像通信系统，具备
所述终端装置中摄影被摄体的摄像部；
将由所述摄像部摄影的图像内的被摄体辨别为本体图像的识别用图像的辨别部;
根据所述识别图像生成附属图像的生成部；
将所述附属图像合成于所述本体图像后生成第一合成图像的第一合成部件；和
所述终端装置中显示所述第一合成图像的显示部。
图1A是表示图像通信系统(植物培育管理系统)的服务器装置5的图。
图1B是表示图像通信系统(植物培育管理系统)的便携电话机I的图。
图1C是表示图像通信系统(植物培育管理系统)的传感器装置2的图。
图2是表示使符号显示在由便携电话机I的摄像机功能摄影的图像(直通(^ -)图像)内时的显示例的图。
图3是用于说明传感器装置2的构成的示意纵向截面图。
图4是表示便携电话机I的基本构成要素的框图。
图5是表示服务器装置5的基本构成要素的框图。
图6是用于说明图像数据库7的图。
图7是将根据识别图像生成的钥匙挂圈(々-* ^夕' )的附属图像附加于符号 (本体图像)的状态显示例的图。
图8是表示便携电话机I对服务器装置5执行附属图像登录要求时的动作(登录要求处理)的概要流程图。
图9是表示便携电话机I侧显示符号时的动作(符号显示处理)的概要流程图。
图10是表示服务器装置5侧对应于电源ON开始执行的动作的流程图。
图11是接续于图10的动作的流程图。
图12是用于详述服务器装置5中的登录处理(图10的步骤C7)的流程图。
图13是表示第2实施方式中、将附属图像登录于图像数据库7中时的动作(登录处理)的概要流程图。
图14是表示第2实施方式中、便携电话机I侧显示符号时的动作(符号显示处理)的概要流程图。
具体实施方式
下面，参照附图来详细说明本发明的实施方式。
(第I实施方式)
首先，参照图1-图12来说明本发明的第I实施方式。
本实施方式示例将本发明适用于通信系统的情况，图1A-C是表示该通信系统的图。
该通信系统构成为具有便携电话机1、传感器装置2、无线通信网3、因特网4、服务器装置(管理装置)5，是一种图像通信系统(植物培育管理系统)，其中便携电话机I侧摄影的图像经无线通信网3、因特网4发送到服务器装置(管理装置)5，服务器装置5侧生成的图像经因特网4、无线通信网3发送。该图像通信系统(植物培育管理系统)中兴趣(植物培育)共同的同伴彼此也可在网络上进行通信。
图1B的便携电话机I具备语音通话功能、电子邮件功能、因特网连接功能(Web访问功能)、近距离通信功能、摄像功能(摄像机功能)等，与检测植物培育环境的传感器装置 2之间进行近距离通信，另外，若经最近的基站(省略图示)连接于无线通信网3，则变为能经该无线通信网3与其他便携电话机(省略图示)之间通话或收发电子邮件的状态，另外， 若经无线通信网3连接于因特网4，则能收发电子邮件或阅览Web网页。
图1C的传感器装置2设置在植物附近(例如花盆内)，具备检测植物培育环境的环境传感器(温度传感器、水分传感器等)。便携电话机I若从传感器装置2接收传感器检测结果(当前的培育环境)，则将该植物的种类与当前的培育环境经无线通信网3、因特网 4发送到服务器装置5。服务器装置5若经便携电话机I接收植物的种类与当前的培育环境，则根据该接收结果检索植物用培育数据库6，并对应于该植物的种类，将表示当前培育状况的培育信息(例如最佳环境、水分不足、日照过多等)发送到最初的便携电话机I。植物用培育数据库6对应于植物的种类，存储表示当前培育状况的培育信息与表示培育方式等的培育信息。除该培育数据库6外，服务器装置5中还具备后述的图像数据库7。
便携电话机I若从服务器装置5接收培育信息，则显示包含该培育信息的符号，但此时，将符号作为本体图像，在其中合成附属图像后显示。图2是表示使符号显示在由便携电话机I的摄像机功能摄影的图像(直通图像)内时的显示例的图。此时，将花盆内的传感器装置2作为被摄体，将由摄像机功能摄影的图像作为直通图像，显示在现场视图(’ ^-)画面(监视器画面终端画面)中，将事先存储的符号(动画)重叠显示在该直通图像内。除该传感器装置2附近重叠显示的符号外，还在摄影图像(直通图像)中显示合成于作为本体图像的该符号中的附属图像(在图示实例中，为徽章(7千)型附属)。 如图所示，在监视器画面的一角落部，显示从服务器装置5取得的表示当前培育状况的培育信息(在图示实例中，为”最佳环境”)。
附属图像在服务器装置5侧生成，便携电话机I从服务器装置5接收附属图像，附加显示(合成显示)于符号(本体图像)。即，便携电话机I将附加于由摄像机功能摄影的图像内的被摄体中的标记(7 -力)辨别为符号(本体图像)识别用图像，若将该识别图像发送到服务器装置5，则服务器装置5根据该识别图像，生成附属图像，发送到便携电话机I。便携电话机I从服务器装置5接收附属图像，使附属图像合成显示于符号(本体图像)。
在图示实例中，标记被作为其识别用而附加于花盆内的传感器装置2。若以该标记为中心摄影传感器装置2作为被摄体，则从该摄影图像中抽取标记部分，辨别为识别图像。此时，当从摄影图像中抽取标记部分时，补正该图像部分后抽取，以便从正上方摄影标记部分，但该抽取方式不限于此，是任意的。标记例如是手写于传感器装置2的桌面部的绘图、数字、字符、照片等，设计来能视觉识别传感器装置2，在图示实例中，示出手写记入数字 5的情况。另外，当摄影传感器装置2、即标记作为被摄体时，从正面方向摄影该标记。
服务器装置5若与其登录要求一起接收来自便携电话机I的识别图像，则根据该识别图像，生成附属图像，并将该识别图像与附属图像对应后，登录到图像数据库7。在将识别图像与附属图像对应后登录到该图像数据库7的状态下，便携电话机I向服务器装置5 要求发送符号(本体图像)显示时附加于其中的附属图像。服务器装置5若从便携电话机 I接收附属图像的发送要求，则将与该发送要求一起接收到的识别图像作为识别信息(检索密钥)，检索图像数据库7，从而读出对应的附属图像，发送到要求源的便携电话机I。
图3是用于说明传感器装置2的构成的示意纵向截面图。
传感器装置2是具备用于观测树木与花草等植物培育环境的环境传感器与通信功能的小型电子设备，其壳体整体形成细长状中空棒体。传感器装置2的中空棒体整体形成尖细状，构成为将该传感器装置2的下部(例如下半部分)埋入钵等土壤内。在传感器装置2下部侧的表面中，形成多个细孔2a，作为通气、通水用。另外，构成为在传感器装置2 的上端部分的一侧部，突出形成(一体成型)弧状把手2b，在将传感器装置2的下部刺拔到钵等土壤内时，边用拇指的指肚部分按压其上端面，边将食指搭在把手2b的下侧，从而能顺利进行传感器装置2的拔刺。
在传感器装置2的上端部侧的桌面部，作为各种电子部件，内置检测植物外围亮度的照度(日照) 传感器2c、检测植物外围气温的外部气温传感器2d、近距离通信部用天线2e、控制上述部件动作的控制部、和依次存储各种传感器的检测结果的存储部(省略图示)，另外，在该桌面部的下方，内置电池电池2f。在传感器装置2的中央隔板部，内置检测土壤的水分量(湿度)的水分传感器2g。在传感器装置2的中空部中细孔2a的形成部分， 形成多个用于防止土壤侵入的阀部件2h。
图4是表示便携电话机I的基本构成要素的框图。
CPUll是中央运算处理装置，利用来自具备蓄电池(省略图示)的电源部12的供电来动作，对应于存储部13内的各种程序，控制该便携电话机I的整体动作。存储部13中除存储用于对应于图8及图9所示的动作步骤实现本实施方式的程序或各种应用程序等夕卜，还设置暂时存储便携电话机I动作所需的各种信息的工作区域。
无线通信部14是语音通话功能、电子邮件功能、因特网连接功能时使用的宽带通信部。摄像部15构成能高精细摄影被摄体的摄像机部，虽然未图示，但除光学透镜、摄像元件外，还具备光学系统驱动部、照明用频闪观测器、模拟处理电路、信号处理电路等。若由该摄像部15摄影传感器装置2作为被摄体，则CPUlI将附加于该传感器装置2的绘图(标记) 辨别为识别图像。显示部16例如使用高精细液晶显示器或有机EL显示器、电泳型显示器 (电子纸张m等，构成为除显示字符信息、等待图像等显示信息外、还在摄像机功能使用时作为摄影图像显示现场视像(监视器图像)的取景器画面。在该显示部15的表面积层配设检测手指接触的接触操作部(透明的接触传感器)，从而构成触摸屏(接触画面)。
操作部17省略图示，但具有电源0N/0FF按钮、切换为摄像机模式的按钮、快门按钮等，CPUll执行对应于操作按钮的处理。近距离通信部18构成蓝牙(Bluetooth :注册商标)模块，与传感器装置2之间交流通信，其可通信区域例如为IOm范围内，但可通信距离不限于此。另外，从便携电话机I发出探索传感器装置2的探索信号(搜索信号)，若从传感器装置2对此有响应，则确立便携电话机I与传感器装置2的通信链接，相互间变为能数据通信的状态。
图5是表示服务器装置5的基本构成要素的框图。
CPU51是中央运算处理装置，利用来自电源部52的供电动作，对应于存储部53内的各种程序，控制该服务器装置5的整体动作。存储部25中，存储用于对应于图10-图12 所示的动作步骤来实现第I实施方式的程序或各种应用程序等。在CPU51上，作为其外围设备，连接通信部54、显示部55、操作部56。另外，CPU51若如上所述与其登录要求一起接收来自便携电话机I的识别图像，则根据该识别图像生成附属图像，并将该识别图像与附属图像对应后登录在图像数据库7中。
图6是用于说明图像数据库7的图。
图像数据库7将识别图像与附属图像对应地存储管理，构成为其记录具有“ID”、 ““识别图像”、““附属图像”、“附属形状”、““登录日期时间”、““利用日期时间”、“状态”等各项目。“ID”是每次新登录附属图像时发行的序列号，用作检索该记录的密钥(例如第2检索密钥)。““识别图像”在便携电话机I侧摄影传感器装置2时，将附加于该传感器装置2 的标记辨别为用于识别符号的图像，用作检索该记录的密钥(例如第I检索密钥)。这里， 第I检索密钥是优先于第2检索密钥使用的密钥，第2检索密钥为第I检索密钥的辅助密钥。在图示实例中，作为““识别图像”，示例手写的脸的图、字符、数字，但当然不限于此。
““附属图像”是附加于符号(本体图像)的图像，根据““识别图像”生成。服务器装置5在根据““识别图像”生成““附属图像”的情况下，若““识别图像”中包含字符，则生成记述该字符的名牌(彳、-^ 夕' )的附属图像。另外，若““识别图像”中包含数字，则生成记述该数字的徽章(号码块的附属图像，若““识别图像”中不包含字符及数字，则生成使用该““识别图像”的钥匙挂圈的附属图像。之后，将生成的附属图像附加在符号(本体图像)的规定位置。图7是表示将根据“ID”为”1”的““识别图像”生成的钥匙挂圈的附属图像附加于符号(本体图像)的状态显示例的图。此时，识别图像被利用为装配在钥匙挂圈环部分上的装饰部。
“附属形状”作为附属种类，表示”钥匙挂圈”、”名牌”、”徽章(号码块)”等，但当然不限于此。““登录日期时间”表示生成““附属图像”后与““识别图像” 一起登录的日期时间，““利用日期时间”表示利用““附属图像”的日期时间，每次利用时更新。“状态”表示 ““附属图像”是否非长期未使用的不变状态，若不是长期未使用状态不变，则存储” true”， 若是长期未使用状态不变，则存储” false”。
下面，参照图8-图12所示的流程图来说明第I实施方式中便携电话机1、服务器装置5的动作概念。这里，这些流程图中记述的各功能以可读取的程序代码的形式存储，依次执行根据该程序代码的动作。另外，也能依次执行根据经网络等传输媒体传输的上述程序代码的动作。这在后述的其他实施方式中也一样，除记录媒体外，还能利用经传输媒体外部供给的程序/数据来执行本实施方式特有的动作。
图8是表示便携电话机I对服务器装置5执行附属图像登录要求时的动作(登录要求处理)的概要流程图。图9是表示便携电话机I侧显示符号时的动作(符号显示处理) 的概要流程图。图8、图9是表示便携电话机I的整体动作中、本实施方式的特征部分的动作概要的流程图，当从该图8、图9的流程跳出时，返回到整体动作的主流程(省略图示)。 图10-图12是表示服务器装置5侧的整体动作的概要流程图。
便携电话机I侦彳，若用户操作指示图像登录，则开始执行对应于图8流程的动作。 首先，CPUll在执行清除存储器内容等初始化处理(图8的步骤Al)之后，使摄像部15起动(步骤A2)，同时，显示摄影引导(步骤A3)。此时，用户在摄像部15的摄影方向 指向花盆内的传感器装置2的状态下，操作快门按钮。由此摄影附加于传感器装置2的识别用标记(步骤A4) ο
CPUll从该摄影图像(直通图像)中抽取标记部分，辨别为识别图像(步骤A5)， 调查该辨别是否成功(步骤A6)，返回上述步骤S4，直到辨别为正常为止。在目前能将标记正常辨别为识别图像的情况下(步骤A6为是)，为了要求图像登录，在与该识别图像一起对服务器装置5发送登录请求后(步骤A7)，调查是否与之响应从服务器装置5接收到“有已登录”(步骤AS)。
图10及图11是表示服务器装置5侧对应于电源ON开始执行的动作的流程图。
首先，CPU51调查从便携电话机I接收到何请求(图10的步骤Cl)，或调查是否为更新图像数据库7的内容的定时(例如00时00分)(步骤C2)，或调查是否执行电源OFF 操作(步骤C3)。目前当执行电源OFF操作时(步骤C3为是)，该流程终止，但当从便携电话机I接收到某一请求时(步骤Cl为是)，开始从便携电话机I接收取得识别图像的动作 (步骤C4)，调查是否正常接收完成(步骤C5)，返回到上述步骤C4，直到正常接收为止。在目前能正常接收取得识别图像的情况下(步骤C5为是)，若该请求内容是登录请求(步骤C6为是)，则移动到登录图像的登录处理(步骤C7)。
图12是用于详述服务器装置5中的登录处理(图10的步骤C7)的流程图。
首先，CPU51从图像数据库7内的已登录的““识别图像”中按其登录顺序读出一个““识别图像”(步骤Dl)，通过与从便携电话机I取得的识别图像比较，进行两者是否一致的一致判定(步骤D2)。结果，若两者不一致(步骤D3为否)，则指定下一已登录的““识别图像”(步骤D9)，返回上述步骤Dl，直到全部指定完图像数据库7内的““识别图像”(步骤DlO为是)，下面，边一个个地指定已登录的““识别图像”边重复一致判定(步骤D2、D3、 D9)。
结果，在检测到从便携电话机I取得的识别图像与图像数据库7内的任一““识别图像” 一致的情况下(步骤D3为是)，判断为与登录要求的““识别图像”相同的图像已登录完，移动到下一步骤D4，调查对应于该已登录完的““识别图像”的“状态”是否是表示长期未使用状态的”false”。这里，若是表示非长期未使用状态的”true”(步骤D4为否)，则在对其要求源的便携电话机I发送相同图像已登录完之后(步骤D8)，从图12的流程中跳出。
另外，若“状态”是” false”(步骤D4为是)，则改写成这次要求的登录内容，代替该已登录内容。即，原样利用已登录内容，改写成新登录的内容(步骤D5-D7)。此时，为了将这次的登录要求设为新登录，在将其“状态”改写成” true”后(步骤D5)，将其““登录日期时间”更新为当前日期(步骤D6)，同时，进行将其““利用日期时间”也更新为当前日期的处理(步骤D7)。如此改写登录内容之后，从图12的流程中跳出。
另一方面，若即便读出全部识别图像也不没有一致判定，即若与登录要求的识别图像相同的图像不是已登录(步骤DlO为否)，则对应于这次要求进行新登录，但此前执行根据登录要求的识别图像生成附属图像的处理(步骤D11-D16)。即，解析识别图像，进行文本辨别(步骤Dll)，调查是否包含文本(步骤S12)，若不包含文本(步骤D12为否)，则生成使用该识别图像的钥匙挂圈的附属图像(步骤D13)。
若识别图像内包含文本(步骤S12为是)，则调查其文本是否数字(步骤D14)，若是数字(D14为是)，则生成记述该数字的徽章(号码块)的附属图像(步骤D15)。若该文本是字符(步骤D14为否)，则生成记述该字符的名牌的附属图像(步骤D16)。若如此生成附属图像，则发行新的ID，生成由“ID”、“辨别图像”、““附属图像”、“附属形状”、““登录日期时间”、““利用日期时间”、“状态”构成的新的记录，将该新的记录追加登录到图像数据库 7的末尾(步骤D17)。在该新登录时存储” true”作为“状态”。之后，从图12的流程中跳出。
若这种登录处理结束(图10的步骤C7)，则服务器装置5调查该登录处理的结果是否是”无已登录”(步骤CS)，这里，在”有已登录”的情况下(步骤CS为否)，为了具备于再登录要求，返回上述步骤Cl。另外，在”无已登录”的情况下(步骤CS为是)，读出新生成的““附属图像”，发送到要求源的便携电话机1(步骤C9)，调查该发送是否完成(步骤 C10)，返回上述步骤C9，直到发送完成。由此当发送完成时(步骤ClO为是)，返回上述步骤Cl。
这里，便携电话机I在将识别图像发送给服务器装置5之后，调查是否与之响应从服务器装置5接收到”有已登录”(图8的步骤A9)，当接收到”有已登录”时(步骤A9为是)，在将请求用户应将传感器装置2的标记变更为其他标记的引导显示在显示部16后 (步骤AlO)，从图8的流程跳出。另外，当接收到”无已登录”时(步骤A9为否)，从服务器装置5接收取得附属图像(步骤All)，调查该取得是否成功(步骤A12)，返回上述步骤 All，直到正常接收取得图像。
由此，便携电话机I若附属图像的接收取得完成(步骤A12为是)，则读出并取得事先存储的符号(步骤A13)。之后，在将摄像部15摄影的图像作为直通图像显示在监视器画面中的状态下，特定附加于作为其被摄体的传感器装置2的标记位置(步骤A14)。接着，将该取得的符号合成附属图像，使该合成图像重叠显示在直通图像内的特定位置(步骤A15)。此时，在将符号合成附属图像的情况下，合成到对应于其附属形状的位置。之后， 调查有无基于用户操作的再登录指示(步骤A16)，若无再登录指示(步骤A16为否)，则在使摄像部15停止后(步骤A17)，从图8的流程跳出，但若有再登录指示(步骤A16为是)， 则为了对服务器装置5要求再登录，返回到上述步骤A3。
另一方面，服务器装置5若检测更新图像数据库7的内容的定时(例如00时00 分)(步骤C2为是)，则移动到图11的流程，从图像数据库7中按登录顺序读出一个““利用日期时间”(步骤C17)，与当前日期相比较，调查是否从““利用日期时间”起算经过I年以上(步骤C18)，将对应于该““利用日期时间”的“状态”内容改写为” false” (步骤C19)。 之后，指定下一““利用日期时间”(步骤C20)，调查是否读出全部““利用日期时间”(步骤 C21)，返回上述步骤C17，直到读出全部““利用日期时间”，重复将从““利用日期时间”起算经过I年以上的“状态”改写为” false”的动作(步骤C19)。之后，在结束指定全部““利用日期时间”的情况下(步骤C21为是)，返回图10的步骤Cl。
另一方面，便携电话机I侧若由用户操作指示符号显示，则开始执行对应于图9的流程的动作。首先，CPUll在执行清除存储器内容等的初始化处理(图9的步骤BI)之后， 使摄像部15起动(步骤B2)，同时，显示摄影引导(步骤B3)。此时，用户在摄像部15的摄影方向指向花盆内的传感器装置2的状态下，操作快门按钮。由此，若摄影传感器装置2的识别用标记(步骤B4)，则CPUlI从该摄影图像(直通图像)中辨别标记作为识别图像(步骤·B5)。接着，调查该辨别是否成功(步骤B6)。之后，返回上述步骤A4，直到正常辨别。若当前将标记正常辨别为识别图像(步骤B6为是)，则为了要求发送附属图像，与该识别图像一起对服务器装置5发送图像发送请求(步骤B7)。
服务器装置5侧若接收来自便携电话机I的请求(图10的步骤Cl为是)，则调查其是否登录请求(步骤C6)，若不是登录请求(步骤C6为否)，则判断为是附属图像的发送请求，移动到图11的步骤Cll，根据来自便携电话机I的识别图像，检索图像数据库7内的各““识别图像”。结果，调查能否检索一致的识别图像(一致完成)(步骤C12)，若未一致完成(步骤C12为否)，则调查从便携电话机I接收到的识别图像是否未登录在图像数据库 7内(未登录)(步骤C13)。
此时，服务器装置5若识别图像为未登录(步骤C13为是)，则移动到图10的步骤C7，进行登录处理，但若一致完成(步骤C12为是)，则从图像数据库7中读出并取得对应的““附属图像”(步骤C14)。之后，将该““附属图像”发送到要求源的便携电话机1(步骤C15)，调查该发送是否完成(步骤C16)，返回上述步骤C15，直到发送完成。由此若发送完成(步骤C16为是)，则返回图10的步骤Cl。
便携电话机I侧，在向服务器装置5发送识别图像后(图9的步骤B8)，则若与之响应从服务器装置5接收取得““附属图像”(步骤B9)，则调查该取得是否成功(步骤B10)， 返回上述步骤B8，再次向服务器装置5发送识别图像，直到正常取得。若由此附属图像的接收取得完成(步骤BlO为是)，则在读出并取得事先存储的符号后(步骤B11)，特定直通图像内附加于传感器装置2的标记位置(步骤B12)。
之后，使将符号合成了附属图像的合成图像重叠显示在直通图像内的特定位置 (步骤B13)。另外，在将符号合成附属图像的情况下，合成到对应于该附属形状的位置。另夕卜，在开始移动符号的动画处理之后(步骤B14)，重复符号动画处理(步骤B14)，直到指示符号显示终止(步骤B15为是)，若由用户操作等指示显示终止(步骤B15为是)，则在使摄像部15停止后(步骤B16)，从图9的流程中跳出。
如上所述，第I实施方式是一种图像通信系统，将本体图像(符号)合成附属图像并显示的便携电话机I与服务器装置5经通信网络进行图像的收发，其中，若便携电话机I 侧由摄像部5摄影被摄体，则将摄影的图像内的被摄体辨别为符号的识别用图像，并根据该辨别的识别图像，生成附属图像，所以能生成利用被摄体的识别力高的附属图像，例如， 即便存在类似的本体图像(符号)，也能容易辨别各个符号。
便携电话机I若由摄像部15摄影被摄体，则将摄影的图像内的被摄体辨别为符号的识别用图像，发送给服务器装置5，服务器装置5根据来自便携电话机I的识别图像，生成附属图像，发送给便携电话机1，所以可防止作为由便携电话机I分别单独生成附属图像时的缺陷的同一内容的重复生成。
对应于识别图像的内容来生成种类不同的附属图像，所以即便是相同被摄体，也能对应于其内容来改变附属图像。
生成包含识别图像的附属图像，所以能将被摄体自身利用为附属图像。
服务器装置5在从便携电话机I侧接受到识别图像的登录要求的情况下，将该识别图像与生成的附属图像对应后，登录在图像数据库7内，在从便携电话机I接受到对应于识别图像的附属图像的发送要求的情况下，根据该识别图像，检索图像数据库7，取得对应的附属图像，发送到要求源的便携电话机1，所以除了能由服务器装置5侧一维管理附属图像外，还能在附属图像的检索中使用识别图像。
将作为识别用附加于摄影图像内的传感器装置(被摄体)2的标记辨别为符号的识别图像，所以能利用附属图像来识别传感器装置2。
便携电话机I在摄影作为识别用附加于传感器装置(被摄体)2的标记的情况下， 在该标记的附近合成符号的同时，使来自服务器装置5的附属图像合成于符号中来显示， 所以通过仅摄影传感器装置2，就能在其附近显示带附属图像的符号，能利用附属图像识别传感器装置2。
在上述第I实施方式中，在便携电话机I侧进行识别图像的辨别，但也可在服务器装置5侧进行该识别图像的辨别。
另外，在上述第I实施方式中，对应于识别图像的内容(文本的有无、数字/字符) 来生成种类(钥匙挂圈、名牌、徽章)不同的附属图像，但也可事先由用户操作来指定附属种类。此时，便携电话机I若向服务器装置5发送用户指定的附属种类，则也可在服务器装置5侧执行生成用户指定种类的附属图像的处理，代替附属图像生成处理(图12的步骤D11-D16)。另外，也可若用户指定附属种类，则优先生成该种类的附属图像，但若未用户指定，则执行上述附属图像生成处理(图12的步骤D11-D16)。若能这样由用户操作来任意指定附属种类，则除能采纳用户的希望外，还能生成富于独创性的附属图像。
(第2实施方式)
下面，参照图13及图14来说明本发明的第2实施方式。
在上述第I实施方式中，是适用于便携电话机I与服务器装置5之间经通信网络进行图像收发的图像通信系统(植物培育管理系统)的情况，而在该第2实施方式中，是适用于便携电话机I单体的情况。这里，两实施方式中基本上或名称上相同的部件附加相同符号来表示，省略其说明，同时，下面主要说明第2实施方式的特征部分。在该第2实施方式中，在便携电话机I侧具有培育数据库6及图像数据库7。
图13是表示第2实施方式中、登录附属图像时的动作(登录处理)的概要流程图。 另外，第2实施方式中的登录处理也基本上与第I实施方式一样。
首先，便携电话机I在执行清除存储器内容等初始化处理(步骤El)之后，使摄像部15起动(步骤E2)，同时，显示摄影引导(步骤E3)。若由此摄影传感器装置2的识别用标记(步骤E4)，则从该摄影图像(直通图像)中辨别标记，作为识别图像(步骤E5)。
之后，根据识别图像来检索图像数据库7内的各““识别图像”(步骤E6)，调查是否有已登录(步骤E7)，若有已登录(步骤E7为是)，则在显示标记的变更请求之后(步骤 ES)，为了受理再登录，返回上述步骤E2。另外，若无已登录(步骤E7为否)，则对应于这次的要求，进行新登录，但在此之前，执行根据登录要求的识别图像生成附属图像的处理(步骤E9-E14)。即，解析识别图像后进行文本辨别(步骤E9)，若不包含文本(步骤ElO为否)， 则生成使用该识别图像的钥匙挂圈的附属图像(步骤Ell)。
另外，在识别图像内包含文本的情况下(步骤ElO为是)，若该文本是数字(步骤 E12为是)，则生成记述该数字的徽章(号码块)的附属图像(步骤E13)，若是字符(步骤 E12为否)，则生成记述该字符的名牌的附属图像(步骤E14)。在取得由此生成的附属图像的同时(步骤E15)，读出并取得事先存储的符号(步骤E16)。
之后，在由摄像部15摄影的图像作为直通图像显示在现场视图画画(监视器画面)的状态下，在特定附加于作为其被摄体的传感器装置2的标记位置之后(步骤E17)， 将该符号合成附属图像，并将该合成图像重叠显示在直通图像内的特定位置(步骤E18)。 此时，在将符号合成附属图像的情况下，合成到对应于该附属形状的位置。之后，调查有无基于用户操作的再登录指示(步骤E19)，若有再登录指示(步骤E19为是)，则为了进行再登录，返回上述步骤E3。另外，若无再登录指示(步骤E19为否)，则发行新的ID，生成由 “ID”、“辨别图像”、““附属图像”、“附属形状”、““登录日期时间”、““利用日期时间”、“状密” 构成的新的记录，将该新的记录追加登录到图像数据库7的末尾(步骤E20)。之后，在停止摄像部15之后(步骤E21)，从图13的流程中跳出。
图14是表示第2实施方式中、便携电话机I侧显示符号时的动作(符号显示处理)的概要流程图。另外，第2实施方式中符号显示处理也基本上与第I实施方式一样。
首先，便携电话机I在执行清除存储器内容等初始化处理(步骤Fl)之后，使摄像部15起动(步骤F2、)。若由此摄影传感器装置2的识别用标记(步骤F3、)，则从该摄影图像(直通图像)中辨别标记，作为识别图像(步骤F4)。之后，根据识别图像来检索图像数据库7内的各““识别图像”(步骤F5)，调查能否检索一致的识别图像(一致完成)(步骤F6)，若未致完成(步骤F6为否)，则调查识别图像是否未登录在图像数据库7内(未登录)(步骤F7)。
此时，若是未登录(步骤F7为是、)，则进行图13的登录处理，但若一致完成(步骤F6为是)，则从图像数据库7中读出并取得对应的““附属图像”(步骤F8)。之后，在读出并取得事先存储的符号之后(步骤F9、)，特定直通图像内附加于传感器装置2的标记位置(步骤F10)。之后，使将符号合成了附属图像的合成图像重叠显示在直通图像内的特定位置(步骤Fll)。另外，在将符号合成附属图像的情况下，合成到对应于该附属形状的位置。另外，在开始移动符号的动画处理之后(步骤F12)，重复符号动画处理(步骤F12)，直到指示符号显示终止(步骤F13为是)，若由用户操作等指示显示终止(步骤F13为是)， 则在使摄像部15停止后(步骤F14)，从图14的流程中跳出。
如上所述，第2实施方式中，便携电话机I若由摄像部15摄影被摄体，则将摄影的图像内的被摄体辨别为符号的识别用图像，并根据该辨别的识别图像，生成附属图像，所以能生成利用被摄体的识别力高的附属图像，例如即便存在类似的本体图像(符号)，也能容易识别各个符号。
便携电话机I对应于识别图像的内容来生成种类不同的附属图像，所以即便是相同被摄体，也能对应于其内容来改变附属图像。
便携电话机I生成包含识别图像的附属图像，所以能将被摄体自身利用为附属图像。
便携电话机I将识别图像与生成的附属图像对应后，登录在图像数据库7内，在符号显示时，根据该识别图像，检索图像数据库7，取得对应的附属图像，所以除了能一维管理生成的各种附属图像外，还能在附属图像的检索中使用识别图像。
便携电话机I将作为识别用附加于摄影图像内的传感器装置2的标记辨别为符号的识别图像，所以能 利用附属图像来识别传感器装置2。
便携电话机I在摄影作为识别用附加于传感器装置(被摄体)2的标记的情况下， 在该标记的附近合成符号的同时，使附属图像合成于符号中来显示，所以通过仅摄影传感器装置2，就能在其附近显示带附属图像的符号，能利用附属图像识别传感器装置2。
在上述第2实施方式中，对应于识别图像的内容(文本的有无、数字/字符)来生成种类(钥匙挂圈、名牌、徽章)不同的附属图像，但也可事先由用户操作来指定附属种类。 此时，便携电话机I也可执行生成用户指定种类的附属图像的处理，代替上述附属图像生成处理(图13的步骤E9-E14)。另外，也可若用户指定附属种类，则优先生成该种类的附属图像，但若未用户指定，则执行上述附属图像生成处理(图13的步骤E9-E14)。若能这样由用户操作来任意指定附属种类，则除能采纳用户的希望外，还能生成富于独创性的附属图像。
在上述各实施方式中，在检索图像数据库7的情况下，设““识别图像”为检索密钥，但不限于此，在以““识别图像检索失败的情况下，也可将“ID”作为密钥检索。当然也可不使用““识别图像”作为检索密钥，仅将“ ID”作为密钥检索。
另外，在上述各实施方式中，也可通过使扩展现实技术(AR)组合于摄像机功能， 使用体感、体验方法，向用户建议。此时，也可利用基于AR符号的拟人化建议提示方式，感受到无法意思显示的植物中好像存在意思或人格。由此能经符号向用户提供疑似体验植物感情的情绪价值与减轻植物管理培育困难的现实价值。
另外，在上述各实施方式中，示出植物作为培育对象，但也可是观赏鱼、鹦哥或文鸟等鸟类、狗、猫等。此时，也可测定宠物的饲养房间的环境或水槽环境等，还可在狗或猫等脖圈部分配备传感器装置2，或在水槽内配备传感器装置2，但当然不限于此。并且，不限于培育，也可以是经拟人化符号(头像)在网络上进行通信的情况。另外，被摄体不限于传感器装置2的标记，也可以是符号、风景等。
另外，在上述各实施方式中，示出适用于便携电话机I的情况，但作为终端装置， 也可以是PDA(面向个人的便携型信息通信设备)、数码相机、音乐播放器、PC(电脑)等。
另外，上述各实施方式中所示的所谓”装置”或”部”也可按功能不同而分离成多个壳体，·不限于单一壳体。另外，上述流程图中记述的各步骤不限于时间系列的处理，也可并列处理多个步骤，或单独独立处理。
以上说明了本发明的实施方式，但本发明不限于此，包含权利要求记载的发明与其均等的范围。·
权利要求
1.一种由终端装置与管理装置构成的图像通信系统，其特征在于具备 所述终端装置中摄影被摄体的摄像部； 将由所述摄像部摄影的图像内的被摄体辨别为本体图像的识别用图像的辨别部； 根据所述识别图像生成附属图像的生成部； 将所述附属图像与所述本体图像合成后生成第一合成图像的第一合成部件；和 所述终端装置中显示所述第一合成图像的显示部。
2.根据权利要求1所述的图像通信系统，其特征在于 所述终端装置具备 所述摄像部； 所述辨别部； 发送部； 接收部； 所述显示部， 所述发送部向所述管理装置发送由所述辨别部辨别的识别图像， 所述接收部从所述管理装置接收所述第一合成图像， 所述显示部显示所述接收部接收到的第一合成图像， 所述管理装置具备 识别图像接收部； 所述生成部； 所述第一合成部件；和 生成图像发送部， 所述识别图像接收部接收来自所述终端装置的所述识别图像， 所述生成部在接收到来自所述终端装置的所述识别图像的情况下，根据该识别图像，生成所述附属图像， 所述生成图像发送部向所述终端装置发送所述第一合成图像。
3.根据权利要求2所述的图像通信系统，其特征在于 所述生成部对应于所述识别图像的内容，生成种类不同的附属图像。
4.根据权利要求2所述的图像通信系统，其特征在于 所述管理装置还具备选择部，对应于用户操作，选择附属的种类。
5.根据权利要求2所述的图像通信系统，其特征在于 所述生成部生成包含所述识别图像的附属图像。
6.根据权利要求2所述的图像通信系统，其特征在于 所述管理装置包含 登录部，在从所述终端装置接收到所述识别图像的登录要求的情况下，将来自所述终端装置的该识别图像与由所述生成部生成的附属图像对应地登录； 取得部，在从所述终端装置接收到与所述识别图像对应的附属图像的发送要求的情况下，通过根据来自所述终端装置的该识别图像，检索所述登录部的登录内容，取得该识别图像对应的附属图像；和 登录图像发送部，将由所述取得部件取得的附属图像发送到要求源的终端装置。
7.根据权利要求2所述的图像通信系统，其特征在于 所述辨别部将作为识别用而附加于由所述摄像部摄影的图像内的被摄体上的绘图辨别为所述本体图像的识别用图像。
8.根据权利要求2所述的图像通信系统，其特征在于 所述终端装置包含第二合成部件，在由所述摄像部件对被摄体摄影了识别用图像的情况下，以所述第一合成图像位于该识别用图像的附近的方式，将所述第一合成图像与所述识别用图像合成，生成第二合成图像， 所述显示部显示所述第二合成图像。
9.一种终端装置，其特征在于包含 摄影被摄体的摄像部； 将由所述摄像部摄影的图像内的被摄体辨别为本体图像的识别用图像的辨别部； 根据由所述辨别部辨别的识别图像生成附属图像的生成部； 将所述附属图像与所述本体图像合成后生成第一合成图像的合成部件；和 显示所述第一合成图像的显示部。
10.根据权利要求9所述的终端装置，其特征在于 所述生成部对应于所述识别图像的内容，生成种类不同的附属图像。
11.根据权利要求9所述的终端装置，其特征在于 还具备选择部，对应于用户操作，选择附属的种类。
12.根据权利要求9所述的终端装置，其特征在于 所述生成部生成包含所述识别图像的附属图像。
13.根据权利要求9所述的终端装置，其特征在于还包含 登录部，将由所述辨别部辨别的识别图像与由所述生成部生成的附属图像对应地登录；和 取得部，通过根据所述识别图像，检索所述登录部的登录内容，取得该识别图像对应的附属图像。
14.根据权利要求9所述的终端装置，其特征在于 所述辨别部将作为识别用而附加于由所述摄像部摄影的图像内的被摄体上的绘图辨别为所述本体图像的识别用图像。
15.根据权利要求14所述的终端装置，其特征在于 还包含第二合成部件，在由所述摄像部件摄影了作为识别用而附加于被摄体的绘图的情况下，以所述第一合成图像位于该绘图的附近的方式，将所述第一合成图像与所述绘图合成，生成第二合成图像， 所述显示部显示所述第二合成图像。
16.一种管理装置，其特征在于包含 接收部，接收来自终端装置的图像； 生成部，根据该图像，生成附属图像；和 生成图像发送部，将由所述生成部件生成的所述附属图像发送到所述终端装置。
17.一种附属图像生成方法，包含以下过程 将由终端装置的摄像部摄影的图像内被摄体辨别为本体图像的识别用图像，其中该终端装置将所述本体图像与附属图像合成后显示合成图像；和根据所述辨别的识别图像来生成所述附属图像。
18.一种附属图像生成方法，包含以下过程将本体图像与附属图像合成后显示合成图像； 将由摄像部摄影的图像内被摄体辨别为所述本体图像的识别用图像；和 根据辨别的所述识别图像来生成所述附属图像。
全文摘要
本发明的图像系统中，在本体图像(符号)中合成附属图像后显示的便携电话机与服务器装置经通信网络进行图像的收发。若便携电话机侧由摄像部摄影被摄体，则将摄影的图像内被摄体辨别为符号的识别用图像，服务器装置根据该辨别的识别图像来生成附属图像。便携电话机将生成的附属图像合成显示于本体图像(符号)。
文档编号H04N7/08GK103024242SQ20121040238
公开日2013年4月3日 申请日期2012年9月20日 优先权日2011年9月21日
发明者大塚利彦 申请人:卡西欧计算机株式会社