控制装置、服务器、被控制装置、控制系统及其方法
【技术领域】
[0001 ] 本发明涉及对被控制装置进行控制的控制装置等。
【背景技术】
[0002]关于用户经由给定接口操作外部的设备的方法，由于伴随着该外部的设备能够执行的处理高度化从而该操作复杂化了，因此改善该接口的尝试正被广泛进行。
[0003]例如，通过单纯的插图(图像)就能够指定处理的接口已得到了开发。在下述的专利文献I中，公开了一种图像数据接收装置，通过从外部接收保存有对本装置中应执行的处理进行指定的信息(处理指定信息)的图像数据，即使是从仅具有图像数据发送功能的操作装置，也能够自由地操作。
[0004]在先技术文献
[0005]专利文献
[0006]专利文献1:日本国公开专利公报”特开2003-169305号公报(2003年6月13日公开)”
【发明内容】
[0007]发明要解决的课题
[0008]在上述的专利文献I所公开的技术中，存在用户能够指定的处理限定于预先与上述图像数据建立了对应的处理这样的问题。此外，存在如下这样的问题:为了增加用户能够指定的处理，在增加了上述图像数据的种类的情况下，不得不从大量的图像数据中选择与用户想要指定的处理建立了对应的图像数据。
[0009]本发明鉴于上述的问题点而作，其目的在于提供一种通过抑制与向被控制装置指示给定处理的指示信息建立了对应的图像的选择所涉及的用户的负担的同时，增加用户能够指示的给定处理的种类，来提高用户的便利性的控制装置等。
[0010]用于解决课题的手段
[0011]为了解决上述课题，本发明的一方式所涉及的控制装置是使被控制装置直接执行给定处理或者经由服务器使该被控制装置执行该给定处理的控制装置，其具备:操作获取单元，其获取使用与指示上述给定处理的执行的指示信息建立了对应的图像，来指示使被控制装置执行上述给定处理的用户操作；附加信息获取单元，其获取与在由上述操作获取单元获取到的用户操作中使用的图像建立了对应的指示信息以外的信息即附加信息；以及处理指示单元，其指示使上述被控制装置以及上述服务器的至少一方执行和与在由上述操作获取单元获取到的用户操作中使用的图像建立了对应的指示信息以及由上述附加信息获取单元获取到的上述附加信息的组合预先建立了对应的处理。
[0012]此外，为了解决上述课题，本发明的一方式所涉及的服务器具备:服务器接收单元，其从若获取使用与直接指示被控制装置执行给定处理或者经由服务器指示该被控制装置执行该给定处理的指示信息建立了对应的图像，来指示使该被控制装置执行该给定处理的用户操作，则使该被控制装置执行该给定处理的控制装置，接收(i)确定上述图像的信息即图像信息、以及(ii)上述控制装置所获取的、与上述图像建立了对应的指示信息以外的信息即附加信息；服务器发送单元，其进行向上述被控制装置发送使其执行与上述指示信息以及上述附加信息的组合预先建立了对应的处理的信号、以及执行该预先建立了对应的处理中的至少一方；和处理执行单元。
[0013]然后，为了解决上述课题，本发明的一方式所涉及的被控制装置具备:装置接收单元，其接收指示和与在控制装置所获取的、直接指示使被控制装置执行给定处理或者经由服务器指示该被控制装置执行该给定处理的用户操作中使用的指示上述被控制装置执行上述给定处理的指示信息建立了对应的图像所对应的指示信息、以及该指示信息以外的信息即附加信息的组合预先建立了对应的处理的执行的信号；和执行单元，其按照由上述装置接收单元接收到的信号，来执行与上述指示信息以及上述附加信息的组合预先建立了对应的处理。
[0014]此外，为了解决上述课题，本发明的一方式所涉及的控制系统包含:显示单元，其将与直接指示被控制装置执行给定处理或者经由服务器指示该被控制装置执行该给定处理的指示信息建立了对应的图像显示给用户；操作获取单元，其获取使用由上述显示单元显示的图像，来指示使上述被控制装置执行上述给定处理的用户操作；附加信息获取单元，其获取与在由上述操作获取单元获取到的上述用户操作中使用的上述图像建立了对应的指示信息以外的信息即附加信息；处理指示单元，其指示使上述被控制装置以及上述服务器的至少一方执行和与上述图像建立了对应的上述指示信息以及由上述附加信息获取单元获取到的上述附加信息的组合预先建立了对应的处理；以及执行单元，其执行由上述处理指示单元所指示的处理。
[0015]此外，为了解决上述课题，本发明的一方式所涉及的控制装置的控制方法是使被控制装置直接执行给定处理或者经由服务器使该被控制装置执行该给定处理的控制装置的控制方法，其包括:操作获取步骤，获取使用与指示上述给定处理的执行的指示信息建立了对应的图像，来指示使上述被控制装置执行上述给定处理的用户操作；附加信息获取步骤，获取与在上述操作获取步骤中获取到的上述用户操作中所使用的图像建立了对应的指示信息以外的信息即附加信息；以及处理指示步骤，指示使上述被控制装置以及上述服务器的至少一方执行和与在上述操作获取步骤中获取到的上述用户操作中所使用的图像建立了对应的指示信息以及上述附加信息获取步骤中获取到的上述附加信息的组合预先建立了对应的处理。
[0016]然后，为了解决上述课题，本发明的一方式所涉及的服务器的控制方法包括:服务器接收步骤，从若获取使用与直接指示被控制装置执行给定处理或者经由服务器指示该被控制装置执行该给定处理的指示信息建立了对应的图像，来指示使该被控制装置执行该给定处理的用户操作，则使该被控制装置执行该给定处理的控制装置，接收(i)确定上述图像的信息即图像信息、以及(ii)上述控制装置所获取的、与上述图像建立了对应的指示信息以外的信息即附加信息；服务器发送步骤，进行向在与由上述服务器接收步骤中接收到的上述图像信息所确定的图像建立了对应的指示信息中指定的被控制装置发送使其执行与上述指示信息以及上述附加信息的组合预先建立了对应的处理的信号、以及执行该预先建立了对应的处理中的至少一方；和处理执行步骤。
[0017]发明效果
[0018]根据本发明的上述各方式，取得如下这样的效果:通过抑制与向被控制装置指示给定处理的指示信息建立了对应的图像的选择所涉及的用户的负担的同时，增加用户能够指示的给定处理的种类，能够提高用户的便利性。
【附图说明】
[0019]图1是表示本发明的实施方式I所涉及的控制系统的控制装置、服务器以及被控制装置的重要部分构成的框图。
[0020]图2是表示本发明的各实施方式所涉及的控制系统的概要的图。
[0021]图3是表示显示于上述控制装置的显示面的指示图像例的图。
[0022]图4是表示将第2指示信息和与上述指示图像建立了对应的第I指示信息以及附加信息的组合建立了对应的数据例的图。
[0023]图5是表示上述控制系统中执行的控制处理的一例的流程图。
[0024]图6是表示上述控制系统中在用户与被控制装置之间进行的消息以及指示图像的交换的示意图。
[0025]图7是表示上述控制系统中在用户与被控制装置之间进行的另一消息以及指示图像的交换的示意图。
[0026]图8是表示上述控制系统中在用户与被控制装置之间进行的又一消息以及指示图像的交换的示意图。
[0027]图9是表示上述控制系统中在用户与被控制装置之间进行的又一消息以及指示图像的交换的示意图。
[0028]图10是表示本发明的实施方式2所涉及的控制系统的控制装置、服务器以及被控制装置的重要部分构成的框图。
[0029]图11是表示本发明的实施方式2所涉及的控制系统中在用户与被控制装置之间进行的消息以及指示图像的交换的示意图。
[0030]图12是表示本发明的实施方式3所涉及的控制系统的控制装置、服务器以及被控制装置的重要部分构成的框图。
[0031]图13是表示本发明的实施方式3所涉及的控制系统中在用户与被控制装置之间进行的消息以及指示图像的交换的示意图。
[0032]图14是表示本发明的实施方式3所涉及的控制系统中在用户与被控制装置之间进行的另一消息以及指示图像的交换的示意图。
[0033]图15是表示本发明的实施方式4所涉及的控制系统的控制装置以及被控制装置的重要部分构成的框图。
[0034]图16是例示了作为本发明的各实施方式所涉及的控制系统的各服务器、控制装置或被控制装置而能够利用的计算机的构成的框图。
【具体实施方式】
[0035]〔实施方式I〕
[0036]以下，基于图1到图9来详细说明本发明的实施方式I。
[0037]〔家族留言板系统100的概要〕
[0038]首先，基于图2来说明本实施方式所涉及的家族留言板系统100 (控制系统)的概要。图2是表示家族留言板系统100的概要的图。家族留言板系统100是提供在预先登录的用户(图2所示的例中为爸爸、妈妈、孩子)之间能够共享信息的电子留言板(所谓的社交网络服务)的系统。家族留言板系统100包含智能电话la、lb、lc、代理服务器2a、家族留言板服务器2b、家用服务器2c、配置在家庭内的设备3 (包含机器人吸尘器3a以及空气调节装置3e)。另外，以下将“配置在家庭内的设备3”称为“家庭内设备3”。此外，在无需特别区分智能电话la、lb、lc的情况下，简称为“智能电话I”。同样地，在无需特别区分代理服务器2a、家族留言板服务器2b、家用服务器2c的情况下，简称为“服务器2”。
[0039]在家族留言板系统100中，用户通过在家族留言板对指示图像Imal进行投稿(即，选择或指定指示图像Imal)，能够控制家庭内设备3的动作。在家族留言板系统100中，用户还通过将“早上好”这样的寒暄等(附加信息AdInl)与指示图像Imal —起投稿(进行输入)，能够使家庭内设备3执行与仅投稿了该指示图像的情况不同的处理。关于在用户将附加信息AdInl与指示图像Imal —起投稿到家族留言板的情况下家庭内设备3所执行的动作，在后面详细叙述。
[0040]此外，在家族留言板系统100中，根据家庭内设备3的状态以及用户所写入的消息的内容等，家庭内设备3向家族留言板写入消息。进而，用户能够使用各自持有的智能电话la、lb、lc来访问家族留言板，进行消息的写入或阅览。
[0041]智能电话1(控制装置)是经由服务器2对家庭内设备3进行控制的信息终端。智能电话I具备输入面11、显示面12。用户通过触摸输入面11，向智能电话I指定该输入面上的位置(通过提供输入面11上的坐标)，能够将选择指示图像Imal等的信息提供给智能电话I。此外，用户能够触摸输入面11，将例如“早上好”、“外部气温”、“27°C”等的文字信息(附加信息AdInl)提供给智能电话I。如上所述，智能电话I是便携式的信息终端。在此，需要注意的是，与智能电话I同等的功能也可以通过便携式电话、个人计算机、平板型终端等来实现。即，只要是能够输入输出所需的信息的设备，终端也可以不是智能电话。
[0042]代理服务器2a从智能电话I (或者家族留言板服务器2b)接收对投稿于家族留言板的指示图像Imal进行确定的信息，将与该指示图像相应的第I指示信息DirIl发送给家用服务器2c。代理服务器2a通过将第I指示信息DirIl发送给家用服务器2c，来控制家庭内设备3各自的动作。此外，代理服务器2a若从智能电话I (或者家族留言板服务器2b)，与指示图像Imal —起获取与该指示图像建立了对应的第I指示信息DirIl以外的信息即附加信息Adlnl，则执行以下动作。即，将与指示图像Imal以及附加信息AdInl的组合建立了对应的第2指示信息DirI2发送给家用服务器2c。代理服务器2a通过将第2指示信息DirI2发送给家用服务器2c，来控制家庭内设备3各自的动作。
[0043]此外，代理服务器2a根据家庭内设备3的状态、家庭内设备3所获取到的信息、以及用户的写入内容等，将各家庭内设备3作为拟人化的角色，在家族留言板写入消息等。由此，用户能够在家族留言板中模拟体验与各家庭内设备3的交流。另外，在以下的说明中，说明将空气调节装置3e进行了拟人化的角色“微风”在家族留言板写入消息等的例子。
[0044]另外，在无需特别区分第I指示信息DirIl和第2指示信息DirI2的情况下，简称为“指示信息”。此外，以下，说明代理服务器2a具备控制家庭内设备3各自的动作的功能以及进行对家族留言板的写入的功能的例子，但这些功能也可以搭载于单独的服务器。
[0045]家族留言板服务器2b进行对智能电话la、lb以及Ic的家族留言板的显示画面的提不、以及与入的管理等的有关家族留目板的所有处理。
[0046]家用服务器2c总体地控制各家庭内设备3与代理服务器2a之间的信息的收发。家用服务器2c与家庭内设备3能够通信地无线连接，家用服务器2c按照从代理服务器2a接收到的指示信息，来控制家庭内设备3各自的动作。具体来说，家用服务器2c将与从代理服务器2a接收到的指示信息相对应的控制信号发送给家庭内设备3，对家庭内设备3的动作进行控制。此外，家用服务器2c将从家庭内设备3获取到的信息发送给代理服务器2a。另外，图2示出家庭内设备3是机器人吸尘器3a、冰箱3b、洗衣机3c、烹调设备3d、空气调节装置3e、并非吸尘器机器人的吸尘器3f、以及电视机3g的例子，但家庭内设备的种类以及数量并不限定于上述设备。
[0047]家庭内设备3 (被控制装置)按照从家用服务器2c接收的控制信号，来执行给定处理。
[0048]首先，先整理智能电话I (控制装置)的概要。智能电话I是使家庭内设备3 (被控制装置)直接执行给定处理或经由服务器2使家庭内设备3执行该给定处理的控制装置，其具备:第I输入控制部111 (操作获取单元)，其获取使用对指示上述给定处理的执行的第I指示信息Dirll(指示信息)建立了对应的指示图像Imal (图像)，来指示使家庭内设备3执行上述给定处理的用户操作；第2输入控制部112 (附加信息获取单元)，其获取与由第I输入控制部111获取到的用户操作中使用的上述指示图像Imal建立了对应的第I指示信息DirIl以外的信息即附加信息AdInl ;以及处理指示部114 (处理指示单元)，其指示使上述家庭内设备3以及服务器2的至少一方执行和与上述指示图像Imal (由上述操作获取单元获取到的用户操作中使用的图像)建立了对应的第I指示信息DirIl以及由第2输入控制部112获取到的上述附加信息AdInl的组合预先建立了对应的处理。
[0049]然后，智能电话I的第2输入控制部112所获取的上述附加信息AdInl是用户输入的信息。
[0050]此外，指示图像Imal是如下图像:在第2输入控制部112未获取附加信息AdInl而第I输入控制部111获取到指示图像Irnal的情况下，使家庭内设备3以及服务器2的至少一方执行仅和与指示图像Imal建立了对应的指示信息(例如，第I指示信息DirIl)建立了对应的处理。
[0051]此外，服务器2 (例如，代理服务器2a)具备:服务器接收部211 (服务器接收单元)，其从若获取使用对向家庭内设备3直接指示给定处理的执行、或者经由服务器2向家庭内设备3指示该给定处理的执行的第I指示信息DirIl建立了对应的指示图像Imal，来指示使家庭内设备3执行该给定处理的用户操作，则使家庭内设备3执行该给定处理的智能电话I，接收(i)确定上述指示图像Imal的信息即指示图像信息Imlnl、以及(ii)智能电话I所获取的、与上述指示图像Imal建立了对应的第I指示信息DirIl以外的信息即附加信息AdInl ;以及服务器发送部212 (服务器发送单元；处理执行单元)，其进行如下处理中的至少一方:向家庭内设备3发送使其执行与上述第I指示信息DirIl和上述附加信息AdInl的组合预先建立了对应的处理的控制信号；以及执行该预先建立了对应的处理。
[0052]此外，家庭内设备3具备:设备通信部31 (装置接收单元)，其接收指示与第I指示信息Dirll、以及第I指示信息DirIl以外的信息即附加信息AdInl的组合预先建立了对应的处理的执行的信号，该第I指示信息DirIl与直接指示使家庭内设备3执行给定处理或者经由服务器2指示家庭内设备3执行该给定处理的、智能电话I所获取的用户操作中使用的、指示家庭内设备3执行上述给定处理的第I指示信息DirIl被建立了对应的指示图像Imal建立了对应；以及处理执行部32 (执行单元)，其按照由设备通信部31接收到的信号，来执行与上述第I指示信息DirIl以及上述附加信息AdInl的组合预先建立了对应的处理。
[0053]家族留言板系统100包含:显示控制部113 (显示单元)，其将向家庭内设备3直接指示给定处理的执行或者经由服务器向该被控制装置指示该给定处理的执行的第I指示信息DirIl被建立了对应的指示图像Imal显示给用户；第I输入控制部111，其获取使用由显示控制部113显示的指示图像Imal，来指示使家庭内设备3执行上述给定处理的用户操作；第2输入控制部112，其获取与由第I输入控制部111获取到的上述用户操作中使用的指示图像Imal建立了对应的第I指示信息DirIl以外的信息即附加信息AdInl ;处理指示部114，其指示使上述家庭内设备3以及服务器2的至少一方执行和与指示图像Imal建立了对应的第I指示信息DirIl以及由第2输入控制部112获取到的附加信息AdInl的组合预先建立了对应的处理；以及处理执行部32，其执行由处理指示部114指示的处理