控制系统、动作决定装置、设备、控制方法以及控制程序与流程

本发明的几个方式涉及控制系统、动作决定装置、设备、控制方法以及控制程序。

本申请基于2015年10月2日在日本申请的特愿2015-197090号并主张其优先权，在此引用其内容。

背景技术：

在家电等设备中为了表示该设备的动作状态等而设置有led、显示面板。

另一方面，已知在家电等设备中用声音传递信息。例如，引用文献1记载有在具有声音输出功能的家电设备中，不会成为统一的声音输出，从而实现使用者的使用便利性的提高。

另外，引用文献2中记载有情绪计算装置，其基于压力检测单元检测出的压力计算表示情感诱导的水平的情绪数据，将情绪数据转换为声、光、图像、影像、振动中的至少一个而输出。

现有技术文献

专利文件

专利文献1：日本特开2005-31540号公报

专利文献2：日本特开2005-152054号公报

技术实现要素：

本发明所要解决的技术问题

然而，引用文献2记载的技术只不过检测使用者的情绪数据。家电等设备等中，希望使用户怀有情绪，进而唤起对设备等的共鸣。

本发明的几个方式是鉴于上述的点而完成的，提供能够使使用者怀有情绪的控制系统、动作决定装置、设备、控制方法以及控制程序。

解决问题的手段

(1)本发明的几个方式是为了解决上述的课题而完成的，本发明的一个方式是一种控制系统，具备：存储部，其存储使多个设备中的至少一个所检测出的环境信息、人信息、设备信息或者外部装置所提供的外部信息中的至少两个信息、与包括上述多个设备的动作信息和表示基于该多个设备的声、光、或图像的通知的通知信息的自发动作信息相关联的对应信息；信息获取部，其获取上述至少两个信息；决定部，其基于上述对应信息和上述信息获取部所获取的上述至少两个信息，决定自发动作信息；以及输出部，其基于上述决定部所决定的上述自发动作信息，根据上述通知信息，进行与基于上述动作信息的动作对应的通知且基于声、光、或图像的通知。

(2)另外，对于本发明的一个方式而言，在上述的控制系统中，上述自发动作信息还包括上述多个设备的识别信息，上述决定部基于上述对应信息和上述信息获取部所获取的上述至少两个信息，决定上述多个设备的识别信息中的任一个，上述决定部所决定的上述多个设备的识别信息中的任一个表示的设备具备上述输出部，该输出部进行上述通知。

(3)另外，对于本发明的一个方式而言，在上述的控制系统中，上述存储部使上述至少两个信息与上述多个设备的识别信息相关联并存储而作为上述对应信息，上述决定部基于上述对应信息和上述信息获取部获取的上述至少两个信息，决定上述多个设备的识别信息中的多个，上述决定部决定的上述多个设备的识别信息中的多个所表示的多个设备分别具备上述输出部，该各个输出部分别进行不同的通知。

(4)另外，对于本发明的一个方式而言，在上述的控制系统中，具备：指示输入部，其输入来自使用者的指示；和更新部，其在上述输出部进行了上述通知后，基于输入至上述指示输入部的上述指示，来变更上述对应信息。

(5)另外，对于本发明的一个方式而言，在上述的控制系统中，具备通信部，其相对于进行动作的对象设备，发送针对该对象设备的上述对应信息，上述对象设备具备上述决定部，上述决定部基于上述通信部发送的上述对应信息和上述信息获取部获取的上述至少两个信息，决定上述自发动作信息。

(6)另外，本发明的一个方式是一种动作决定装置，具备：信息获取部，其从存储部读出使多个设备中的至少一个所检测出的环境信息、人信息、设备信息或者外部装置提供的外部信息中的至少两个信息、与包括上述多个设备的动作信息和表示基于该多个设备的声、光、或图像的通知的通知信息的自发动作信息相关联的对应信息，并获取上述至少两个信息；和决定部，其基于上述对应信息和上述信息获取部所获取的上述至少两个信息，决定自发动作信息。

(7)另外，本发明的一个方式是一种设备，具备：动作部，其发挥本设备的功能；指示输入部，其输入来自使用者的指示；通信部，其接收基于其他的设备检测出的环境信息、人信息或者设备信息的自发动作信息且包括与上述本设备的动作对应的通知信息的自发动作信息；以及输出部，其基于上述自发动作信息，根据上述通知信息，进行与上述本设备的动作对应的通知且基于声、光、或图像的通知。

(8)另外，对于本发明的一个方式而言，在上述设备中，上述通信部发送上述本设备检测出的环境信息、人信息或者设备信息。

(9)另外，本发明的一个方式是一种控制方法，具有：信息获取步骤，在该步骤中，信息获取部从存储部读出使多个设备中的至少一个所检测出的环境信息、人信息、设备信息、或者外部装置所提供的外部信息中的至少两个信息、与包括上述多个设备的动作信息和表示基于该多个设备的声、光、或图像的通知的通知信息的自发动作信息相关联的对应信息，并获取上述至少两个信息；决定步骤，在该步骤中，决定部基于上述对应信息和上述信息获取步骤中获取的上述至少两个信息，决定自发动作信息；以及输出步骤，在该步骤中，输出部基于上述决定步骤中决定的上述自发动作信息，根据上述通知信息，进行与基于上述动作信息的动作对应的通知且基于声、光、或图像的通知。

(10)另外，本发明的一个方式是一种控制程序，用于使控制系统所具备的一个或者多个装置的计算机执行以下流程，信息获取流程，在该流程中，从存储部读出上述多个设备所检测出的环境信息、人信息、设备信息、或者外部装置提供的外部信息中的至少两个信息、与包括上述多个设备的动作信息和表示基于该多个设备的声、光、或图像的通知的通知信息的自发动作信息相关联的对应信息，并获取上述至少两个信息；决定流程，在该流程中，基于上述对应信息和上述信息获取流程获取的上述至少两个信息，决定自发动作信息；以及输出流程，在该流程中，输出部基于上述决定流程中决定的上述自发动作信息，根据上述通知信息，进行与基于上述动作信息的动作对应的通知且基于声、光、或图像的通知。

发明效果

根据本发明的几个方式，能够使用户怀有情绪，进而产生相对于设备等的共鸣。

附图说明

图1是表示本发明的第一实施方式所涉及的控制系统的一个例子的示意图。

图2是表示本实施方式所涉及的控制系统的结构的示意图。

图3是表示本实施方式所涉及的控制系统的简要结构的功能框图。

图4是表示本实施方式所涉及的各设备的输出例的示意图。

图5是表示本实施方式所涉及的各设备的输出例的示意图。

图6是表示本实施方式所涉及的控制系统的动作的示意图。

图7是表示本发明的第二实施方式所涉及的使用情况的一个例子的说明图。

图8是表示本实施方式所涉及的设备的结构的简要框图。

图9是表示本实施方式所涉及的信息处理装置的结构的简要框图。

图10是表示本实施方式所涉及的控制装置的结构的简要框图。

图11是表示本实施方式所涉及的序列对应信息表的一个例子的示意图。

图12是表示本实施方式所涉及的序列信息表的一个例子的示意图。

图13是表示本实施方式所涉及的通知信息表的一个例子的示意图。

图14是表示本实施方式所涉及的设备登记信息表的一个例子的示意图。

图15是本实施方式所涉及的控制系统的简要序列图。

图16是表示本实施方式所涉及的历史信息日志的一个例子的示意图。

图17是表示本实施方式所涉及的更新后的序列信息表的一个例子的示意图。

图18是表示本发明的第三实施方式所涉及的控制系统的简要结构的功能框图。

图19是表示本发明的第四实施方式所涉及的控制系统的简要结构的功能框图。

图20是表示本实施方式所涉及的通知信息表的一个例子的示意图。

图21是表示本发明的第五实施方式所涉及的控制系统的简要结构的功能框图。

图22是表示本发明的第六实施方式所涉及的控制系统的简要结构的功能框图。

图23是本实施方式所涉及的控制系统的简要序列图。

图24是本实施方式所涉及的控制系统的简要序列图。

具体实施方式

(第一实施方式)

以下，参照附图对本发明的第一实施方式详细地进行说明。

＜控制系统＞

图1是表示本发明的第一实施方式所涉及的控制系统1的一个例子的示意图。该图表示在某个家庭的家中，某个房间中利用控制系统1的情况。该家庭是父亲h1、母亲h2、孩子h3的家人组成。该房间配置有机器人211、冰箱213、电视接收机(电视)215、空气调节机(空调)216、加热烹调器217、空气净化器218等家电设备。另外，父亲h1、母亲h2、孩子h3分别穿戴有通信设备219-1、219-2(未图示)、219-3(未图示)等可穿戴设备。另外，父亲h1、母亲h2作为通信设备260、270而持有智能手机等便携设备。

这些家电设备、可穿戴设备以及便携设备等各设备经由网络而与控制装置m1(参照图3)连接。控制装置m1从这些设备获取环境信息、设备信息或者人信息。

此外，环境信息是通过设备的传感器来检测的信息，例如，是表示设备周边或者传感器周边的环境的信息。设备信息例如是表示设备的动作状态或者设备的设定的信息。此外，动作状态可以是现在的动作状态，也可以是未来的(预约的)动作状态。另外，设备信息也可以是设备内部的信息。人信息是表示人、该人的状态(包括情绪的状态)的信息。

另一方面，控制装置m1从其他的信息处理装置获取外部信息。外部信息例如是由因特网等网络提供的服务的信息。

控制装置m1基于获取的环境信息、设备信息、人信息或者外部信息中的例如至少两种信息来决定自发动作。此处，自发动作例如是各设备的动作，且是推荐给人的动作。另外，自发动作基于至少两种信息来决定。例如，在基于设备信息而各设备能够选择将要进行的动作或者现在正进行动作的情况下，自发动作也根据环境信息而改变。换句话说，在基于一种信息的情况下，停留在使用者进行了指示的动作、或者使用者能够推断的动作，但通过再添加一种信息，从而控制系统1能够建议更详细的动作。由此，使用者感到各设备自发地建议动作。同样，自发动作根据设备的处理对象(例如，加热烹调器的情况下菜单、材料)、使用者而改变。

此外，自发动作有与衣服(洗涤、干燥等)相关的动作、与食物(烹调、食材的保存等)相关的动作、与住宅(温度、湿度、空气的污染、明亮度、气味等)相关的动作、或者信息提供的动作等。控制装置m1通过自发动作，针对衣服、食物、住宅或者信息，使现状改变。

控制装置m1选择能够进行自发动作的设备。控制装置m1在针对选择的一个或者多个设备，进行决定的自发动作时，决定表示该设备进行的通知(也称为“自发通知”)的通知信息(也称为“自发通知信息”)。

此处，通知信息是表示设备的通知方式、通知功能的信息。例如，表示通知方式的信息例如是表示声、光、画面的信息。作为表示通知功能的信息，是通知位置(例如扬声器的位置、发光装置的位置、显示器的位置)、或者通知类型(光的颜色、发光位置、图像、音色、声色的任一个或者多个组合)。此外，通知类型也可以是伴随着时间变化的通知的类型。

例如，控制装置m1将家电设备发挥其功能的位置(也称为“功能发挥位置”)、或者为了家电设备发挥其功能而使用者应该进行操作的位置(也称为“功能发挥操作位置”)决定为自发通知信息。此外，自发通知信息所表示的位置(也称为“自发通知位置”)也可以是距功能发挥位置或功能发挥操作位置最近的通知功能的位置、或者能够指示功能发挥位置或功能发挥操作位置的通知功能的位置。

由控制装置m1选择出的一个或者多个各设备基于自发通知信息，使自发通知位置的通知功能以自发通知信息所表示的通知类型(也称为“自发通知类型”)进行通知。此外，一个或者多个各设备在本设备正动作时或者本设备的动作前，进行通知。此处，本设备的动作前是指例如是使用者未接通电源的状态(待机状态)。

另外，一个或者多个各设备基于表示自发动作的自发动作信息，进行自发动作。此处，一个或者多个各设备在使用者许可了的情况下(例如，在使用者说了“请”的情况下、或者按下了“推荐动作”按钮的情况下)，进行自发动作(推荐动作)。

图1是例如在母亲h2在厨房烹调后返回了客厅的情况下的图。此处，加热烹调器217在例如20秒前，将表示烹调结束(动作结束)的设备信息向控制装置m1发送。通信设备219-2检测母亲h2从厨房向客厅移动、以及母亲h2的体温、发汗量或者脉搏，并将表示检测出的信息的人信息例如在10秒前向控制装置m1发送。另外，家电设备的任一个(例如，机器人211、空调216)检测客厅的温度，并将表示检测出的信息的环境信息例如在5秒前向控制装置m1发送。

控制装置m1基于设备信息，判定为在加热烹调器217烹调结束后经过预先决定的时间(例如5分)之前，而且基于人信息，判定为母亲h2向客厅移动。该情况下，控制装置m1基于人信息，在母亲h2的体温高于阈值、发汗量高于阈值、或者脉搏高于阈值的情况下，判定为母亲h2身体较热，将使母亲h2的身体降温的动作设定为自发动作。

在设定了该自发动作时，控制装置m1基于环境信息，判定客厅的温度是否高于预先决定的值。在判定为客厅的温度高于预先决定的值的情况下，控制装置m1作为自发动作的候选的一个而选择，例如将空调设定在比客厅的温度低的温度下制冷。控制装置m1能够指示该自发动作，并且作为能够执行的设备而选择空调216。另外，控制装置m1决定表示功能发挥位置的自发通知信息。

图1中，空调216中发挥功能的位置即距吹出口最近的位置在发光。另外，空调216通过声音输出“烹调辛苦了。为了使较热的身体降温，努力地加强制冷”的声音。此外，控制装置m1也可以决定表示处于远程控制器(称为“遥控器”)的功能发挥操作位置的自发通知信息，该情况下，空调216的遥控器也可以基于功能发挥操作位置而使按钮等发光。空调216在母亲h2发出“请”的声音的情况下，检测出其发音以及内容，进行推荐动作，换句话说进行设定了比客厅的温度低的温度的制冷。

另外，空调216例如在为了迅速地降低客厅的温度而使输出大于阈值的情况下，也可以通过与其对应的类型而改变通知方式。例如，对于空调216而言，自发通知类型以蓝色闪烁，另一方面，使输出变大的情况下以红色发光，与输出对应改变其发光。此处，空调216根据输出改变亮度、光的色调、光的范围，但这些也可以通过改变光的振幅、能量、对发光装置的输出(外加电压、电流)来实现。

如上所述，在控制系统1中，在考虑了环境信息、设备信息、人信息或者外部信息后决定自发动作，各设备能够向使用者建议所决定的自发动作。由此，在提出了使用者所希望的建议的情况下，使用者感到高兴，因此控制系统1能够令使用者怀有情绪。另外，环境信息、设备信息、人信息或者外部信息是使用者正在体验的信息、或者有兴趣或关心的信息。各设备基于这些信息建议自发动作，因此使用者感受到各设备在理解自己后进行建议。由此，使用者对设备感到满意，因此控制系统1能够令使用者怀有情绪。

另外，各设备例如根据输出改变通知方式。由此，使用者例如感受到各设备努力的印象而对设备产生共鸣，因此控制系统1能够令使用者怀有情绪。

＜控制系统的结构＞

图2是表示本实施方式所涉及的控制系统1的结构的示意图。

该图中，家210、220、医疗机构服务器230、自治体服务器240、企业服务器250、通信设备260、270、汽车280处于经由因特网30而能够通信的状态。

在家210设置有机器人211、冰箱213、照明器材214、电视215、空调216、加热烹调器217以及空气净化器218等家电设备。这些家电设备与通信设备219(上述的通信设备219-1、219-2、219-3)经由路由器212而与因特网30连接。

在家220设置有机器人221、冰箱223、照明器材224、电视225、空调226、吸尘器227、智能镜子(镜)228等家电设备。这些家电设备与通信设备229经由路由器222而与因特网30连接。

医疗机构服务器230是医疗机构的服务器，例如存储并提供医疗信息。医疗机构服务器230例如按每个识别个人的用户识别信息(社保号等。后述的“外部用户id”)，将受诊的医疗机构、受诊日期和时间、受诊内容(病情)、受诊结果(病情、处方药)等信息作为医疗信息而存储、提供。

自治体服务器240是自治体的服务器，例如存储和提供自治体信息。自治体服务器240例如按每个识别个人的用户识别信息(社保号等。后述的“外部用户id”)，将居民基本总账的各信息(姓名、出生日期、性别、住址等)作为自治体信息而存储并提供。另外，自治体服务器240将防灾信息(避难指示、避难建议)、紧急情况速报(地震速报、灾害速报)、自治体服务的活动信息等作为自治体信息而存储、提供。

企业服务器250是企业的服务器，存储并提供例如企业信息。

例如，在通信企业的情况下，企业服务器250将sns等会员机构的信息、各会员的属性信息(性别、年龄、偏好信息、交友信息等)作为企业信息而存储、提供。企业服务器250按每个识别会员的用户识别信息(后述的“外部用户id”)，将向网站的写入信息、购物网站等的购买信息、拍卖网站等的投标中标信息、搜索网站等的搜索信息、视频网站等的浏览信息等作为企业信息而存储、提供。另外，企业服务器250将新闻等的报道、天气信息(每个地区的天气、气温、湿度、警报)等作为企业信息而存储、提供。

例如，在汽车企业的情况下，按每个汽车(例如登记号)，将车型、所有者信息(用户识别信息(后述的“外部用户id”)、姓名、住址、电话号码、邮件地址等)、维护信息(预定、历史)、召回信息等作为企业信息而存储、提供。

此外，企业服务器250包括对控制系统1进行控制的控制装置m1(图3)。

通信设备260、270是智能手机、基本款电话、未来电话等移动电话设备、平板终端、pc(个人计算机)等便携设备。通信设备260、270也可以是手表型、腕带型、耳机型、眼镜型等可穿戴设备。

汽车280是载人并移动的装置，并搭载有汽车控制设备。汽车控制设备存储从发动机控制单元(ecu)、汽车导航系统以及空调控制装置获取的信息，将这些信息作为设备信息、环境信息、人信息而提供。例如，汽车控制设备按每个用户(司机、搭乘者)，存储并提供车的位置信息、目的地的历史信息、路径搜索的搜索结果信息、或者移动历史信息(日期和时间、经过场所、速度等)、车内或车外的温度等。

以下，对图3的设备进行说明。

各设备(家电设备、通信设备、汽车控制设备)检测环境信息。作为环境信息的具体例，是表示温度、湿度、空气的污染(尘埃、特定物质的量)等的信息。另外，环境信息也可以是明亮度、在设备周边拍摄的图像、施加于设备的力(例如，负载、振动)、气味、声音、水位、水质等。另外，环境信息也可以是如人体感应传感器、动物传感器那样通过红外线等而检测出生物存在、存在几个人(或者几只动物)的信息。

各设备获取设备信息。例如，各设备针对本设备预先存储产品编号、品名、识别设备的设备识别信息(制造编号、mac地址等))、表示本设备所具有的功能的信息、表示本设备的设置场所(表示房间的信息等)的信息、表示本设备的所有者的用户识别信息、以及本设备的能力信息，并读出这些信息。此处，本设备的能力信息是表示本设备的动作能力以及通知能力等的信息。表示本设备的动作能力的信息是表示本设备能够进行的动作(自发动作的候选)的信息。表示本设备的通知能力的信息是表示本设备的通知方式、通知功能的信息。

另外，各设备现在存储设定于本设备的设定信息，并读出该设定信息。另外，各设备在进行了相对于本设备的操作的情况下，存储并读出其操作信息(操作内容、或者操作的结果、设定的设定信息)。另外，各设备也可以使用传感器等来检测表示本设备的动作状态的动作信息。动作信息例如包括内部信息(部件的转速、部件的温度)、现在的设定信息(运转模式、设定温度等)、运转时间等。

各设备也可以能够检测人信息。作为人信息的具体例，识别认证的结果，确定出的人的用户识别信息。此处，认证例如是基于id、密码等的输入认证、面部认证、指纹、手掌、静脉、声纹认证等。另外，人信息也可以按每个用户识别信息所表示的用户，包括体温、发汗量、脉搏(搏动)、血压等生命数据。另外，人信息也可以包括表示情绪的情绪信息。例如，各设备也可以检测表情，在检测出笑脸的情况下判定为心情好，在检测出苦恼的脸的情况下判定为心情不好。另外，各设备也可以解析声音，基于解析结果(话语的种类、讲话速度、频率等)来判定情绪，也可以基于使用者的讲话次数来判定情绪。

另外，各设备也可以能够检测面部的朝向。例如，各设备通过在本设备具备检测面部的朝向的照相机，从而能够对面部是否朝向设备侧进行辨别，能够判定设备操作的主体、谁在看哪个设备。

各设备也可以能够检测人的位置。各设备通过在本设备具备人体感应传感器，从而能够检测到有人的场所、设备的附近是否有人，从附近有人的设备通知信息等，使附近有人的设备动作，从而能够不会使设备的效用浪费。各设备也可以取代人体感应传感器，而通过操作设备来判定人在该设备的附近。

另外，各设备通过并用人信息的认证、人的位置的检测，从而能够辨别谁在哪里。

＜各设备和设备信息的具体例＞

机器人211、221例如是搭载人工知能，并通过声音、表情而与人进行交流的设备。机器人211、221通过麦克风收集人的声音，进行声音识别和声音的语言解析。机器人211、221生成语言解析的结果、响应的语言，将生成的语言转换为声音而讲话。另外，机器人211、221能够根据语言解析的结果、或者响应而改变表情。

此外，也可以控制装置m1等的服务器具备人工知能、声音识别功能、语言解析功能、语言生成功能、其他机器人的动作控制功能，通过与该服务器的协作而实现机器人211、221。

另外，后述的家庭内的各设备也可以具备上述机器人的各功能。

冰箱213、223例如是电冰箱，且是将制冷剂气体进行压缩液化，由于该汽化吸热使库内冷却的设备。冰箱213、223作为设备信息，将表示运转强度(强、中、弱)、设定温度或湿度、现在的库内的温度或湿度、库内的食材(例如，食材的种类或名称)等的信息向控制装置m1发送。例如，冰箱213、223按每个事件(用户操作或自动操作(计时操作)等)或者设定时刻，将表示示出使用者(操作的情况下为操作者)的用户识别信息、操作内容(将运转强度设定为“强”等)、时刻等的信息作为设备信息而向控制装置m1发送。

照明器材214、224是通过发光将周边照亮的设备。照明器材214、224作为设备信息而将表示电源的接通/断开、照明器材的明亮度或照明强度(强、中、弱)、照明的颜色等的信息向控制装置m1发送。例如，照明器材214、224按每个事件或者设定时刻，将表示示出使用者的用户识别信息、操作内容(将电源接通，将照明强度设定为“强”等)、时刻等的信息作为设备信息而向控制装置m1发送。

电视215、225是将利用无线或者有线而传递的电信号作为设备信息而转换为图像信号，并作为影像而播放的设备。例如，电视215、225将表示电源的接通/断开、选择的广播或选择的输入的种类、选择的频道、明亮度、对比度等的信息作为设备信息而向控制装置m1发送。电视215、225作为设备信息而按每个事件或者设定时刻，将表示示出使用者的用户识别信息、操作内容(将电源接通，选择的频道等)、时刻等的信息向控制装置m1发送。

空调216、226是通过制冷、除湿、制热而进行空气调节的设备。空调216、226作为设备信息而将电源的接通/断开、运转模式(制冷、制热、除湿、或送风等)、设定温度或湿度、风向、风量、运转强度、计时器时间、或者从运转开始的经过时间向控制装置m1发送。例如，空调216、226按每个事件或者设定时刻，作为设备信息而将表示示出使用者的用户识别信息、操作内容(将电源接通，选择的模式等)、时刻等的信息发送给控制装置m1。

加热烹调器217是烤箱功能或者微波炉功能等加热食材等的设备。此外，加热烹调器217也可以是使用了炉灶、感应加热方式的烹饪加热器。加热烹调器217作为设备信息而将表示运转模式(微波炉、烤箱、解冻或自动等)、烹调品(“烤鸡”等现在烹调的结果完成的物品、或者“鸡肉”等进行烹调的对象的物品)、运转强度、设定温度或时间、现在的设备内部的温度或烹调品(现在进行烹调的对象的物品)的温度、运转开始时刻(例如，按下了开始按钮的时刻)或从运转开始时刻的经过时间等的信息向控制装置m1发送。例如，加热烹调器217按每个事件或者设定时刻，将表示示出使用者的用户识别信息、操作内容(将电源接通、开始按钮的按下、选择的模式等)、时刻等的信息作为设备信息而向控制装置m1发送。

空气净化器218是用于将空气中的粉尘、悬浮细菌除去，并将烟等的气味除去而净化空气的设备。空气净化器218可以具有加湿功能、除湿功能，也可以具有离子生成功能，通过离子将空气净化。空气净化器218作为设备信息而将表示电源的接通/断开、运转模式(空气净化、加湿或离子生成)设定湿度、运转强度、运转开始时刻(例如，按钮按下的时刻)或从运转开始时刻的经过时间等的信息向控制装置m1发送。例如，空气净化器218按每个事件或者设定时刻，将表示示出使用者的用户识别信息、操作内容(将电源接通，选择的模式等)、时刻等的信息作为设备信息而向控制装置m1发送。

吸尘器227是通过吸引而将垃圾、灰尘等除去的设备。吸尘器227作为设备信息而将表示电源的接通/断开、运转模式(地毯、地板、榻榻米)、吸引强度、运转开始时刻或从运转开始时刻的经过时间等的信息、本设备的位置信息向控制装置m1发送。例如，吸尘器227按每个事件或者设定时刻，将表示示出使用者的用户识别信息、操作内容、时刻、本设备的位置信息等的信息作为设备信息而向控制装置m1发送。

智能镜子228是具备显示功能的镜子，且是能够切换显示功能和反射(镜)功能的设备。智能镜子228作为设备信息，将表示显示的图像等的信息向控制装置m1发送。此外，智能镜子228作为人信息而将表示拍摄的图像(人的表情的图像、热成像图像等)等的信息向控制装置m1发送。

通信设备219、229是手表型、腕带型、耳机型、眼镜型等可穿戴设备。通信设备219、229也可以是移动电话设备、平板终端、pc等便携设备。通信设备219、229主要检测生命数据而作为人信息向控制装置m1发送。通信设备219、229作为设备信息而将表示本装置的位置(通过gps定位的位置等)、加速度、姿势、或者朝向的信息向控制装置m1发送。例如，通信设备219、229按每个事件或者设定时刻，将表示使用者的用户识别信息、操作内容、时刻、本设备的位置信息等的信息作为设备信息而向控制装置m1发送。

此外，设备不局限于上述的例子，例如也可以是洗涤烘干机、电饭煲、搅拌机、风扇、除湿机、加湿器、被褥烘干机等家电设备。

＜控制系统的设备以及装置的结构＞

图3是表示本实施方式所涉及的控制系统1的简要结构的功能框图。

控制系统1具备：n个设备u1-n(n＝1，2，...n)、信息处理装置s1、控制装置m1。此外，图2的机器人211、221、冰箱213、223、照明器材214、224、电视215、225、空调216、226、加热烹调器217、空气净化器218、吸尘器227、智能镜子228、通信设备219、229、260、270、以及汽车280的汽车控制设备相当于设备u1-n。图2的医疗机构服务器230、自治体服务器240以及企业服务器250的一部分相当于信息处理装置s1。图2的企业服务器250的其他的一部分相当于控制装置m1。

＜设备的结构＞

设备u1-n包括传感器部u11-n、动作部u12-n、输入输出部u13-n、控制部u14-n、存储部u15-n、以及通信部u16-n而构成。

传感器部u11-n检测设备u1-n的内部或者外部(设备周边)的信息。设备u1-n例如检测环境信息、设备信息以及人信息。

动作部u12-n根据来自控制部u14的控制而进行发挥本设备的功能的动作。

输入输出部u13-n在设备主体或者遥控器具备作为输入部的按钮等。此外，按钮可以是物理按钮，也可以是显示于触摸面板的图像按钮。另外，输入输出部u13-n在设备主体或者遥控器具备作为输出部的扬声器、发光装置、显示器等。

控制部u14-n基于从输入输出部u13-n输入的信息、传感器部u11-n检测出的信息、后述的存储部u15-n存储的信息、通信部u16-n接收的信息来控制设备u1-n的各部。例如，控制部u14-n根据通信部u16-n接收的自发动作信息，使动作部u12-n动作，使输入输出部u13-n输出。此外，自发动作信息是指示动作的信息，例如包括识别动作的动作id、通知信息(包括发光信息以及声音信息)。

存储部u15-n存储设备u1-n的程序、环境信息、设备信息、人信息、以及自发动作信息等。例如，设备信息如上述那样包括设定信息，而且也包括操作信息的历史。

通信部u16-n通过收发信息来与外部设备进行通信。通信部u16-n例如将存储部u15-n存储的信息向控制装置m1发送。另外，通信部u16-n例如从控制装置m1接收自发动作信息。

＜信息处理装置的结构＞

信息处理装置s1包括控制部s11、存储部s12以及通信部s13而构成。

控制部s11基于后述的存储部s12所存储的信息、通信部s13接收的信息而获取外部信息。此外，外部信息包括服务信息(烹饪的食谱等)、推荐信息、使用者的偏好信息、网站的浏览历史、购物网站的购买历史、广播波的节目信息、节目等的视听历史等。控制部s11将获取的外部信息存储于存储部s12，并且向控制装置m1发送。

此处，控制部s11从存储部s12读出表示外部信息的获取目的地(外部服务器等)的获取目的地信息，并获取来自该获取目的地信息所表示的获取目的地的外部信息。另外，控制部s11从存储部s12读出将表示各设备的所有者、使用者的用户识别信息(也称为“设备用户id”)、与该所有者或者使用者在外部装置利用的用户识别信息(也称为“外部用户id”)相关联的用户对应信息。控制部s11在获取了包括外部用户id的外部信息的情况下，基于用户对应信息，相对于该外部信息而赋予与该外部用户id对应的设备用户id。控制部s11将包括设备用户id的外部信息存储于存储部s12，并且向控制装置m1发送。

存储部s12存储信息处理装置s1的程序、获取目的地信息、用户对应信息以及外部信息等。

通信部s13通过收发信息来与外部设备进行通信。通信部s13例如接收来自获取目的地信息所表示的获取目的地的外部信息。另外，通信部s13例如将外部信息向控制装置m1发送。

＜控制装置的结构＞

控制装置m1包括控制部m11、存储部m12以及通信部m13而构成。

控制部m11基于后述的存储部m12存储的信息、通信部m13接收的信息来决定各设备u1-n的自发动作以及通知信息。此处，控制部m11基于从多个各设备u1-n获取的环境信息、设备信息、人信息、或者从信息处理装置s1获取的外部信息中的例如至少两种信息，决定进行动作的设备u1-n，并决定该设备u1-n的自发动作以及通知信息。此时，控制部m11从存储部m12读出使至少两种信息、自发动作、以及通知信息相关联的自发对应信息(参照图11、图12、图13)，基于自发对应信息，决定进行动作的设备u1-n，并决定该设备u1-n的自发动作以及通知信息。

作为一个例子，控制部m11至少基于环境信息以及人信息来决定设备u1-n的自发动作以及通知信息。具体而言，控制部m11从空调216获取表示使用者的体温或者发汗量的人信息、和表示房间的温度的环境信息。在人信息表示的体温高于阈值th11、或者发汗量多于阈值th12的情况下，控制部m11决定进行设定了比房间的温度低的温度的制冷、或者通知这样的建议。此处，控制部m11也可以基于人信息表示的体温或者发汗量来决定制冷的强弱。例如，在人信息表示的体温高于阈值th21(＞阈值th11)、或者发汗量多于阈值th22(＞阈值th12)的情况下，控制部m11将制冷决定为“强”，将设定温度更低地设定。

控制部m11检测出人信息表示的使用者存在的房间，选择处于该房间的空调216。控制部m11相对于感到热的人，选择推荐制冷的情况下的通知信息。该通知信息例如在距吹出口最近的位置，示出进行冷色的发光。另外，该通知信息也包括“为了使较热的身体降温，努力地加强制冷”的声音信息。

控制部m11将表示决定的自发动作的自发动作信息和通知信息向选择的空调216发送。空调226基于接收的通知信息，发音为“为了使较热的身体降温，努力地加强制冷”，在距吹出口最近的位置，进行冷色的发光。例如，在使用者发音“请”的情况下，空调216进行自发动作信息表示的自发动作，换句话说，空调216进行设定了比房间的温度低的温度的制冷。

作为其他的一个例子，控制部m11至少基于人信息以及服务信息来决定设备u1-n的自发动作以及通知信息。具体而言，控制部m11从机器人211获取表示使用者的笑脸或者叹气的人信息。在使用者的笑脸的次数少于阈值th31的情况下、或者叹气的次数多于阈值th32的情况下，控制部m11判定为该使用者情绪低落。此外，控制部m11也可以根据该使用者的笑脸的次数、叹气的次数的平均值来决定阈值th31、th32。

控制部m11在判定为使用者情绪低落的情况下，获取外部信息中的该使用者的偏好信息。控制部m11基于获取的偏好信息来选择该使用者的喜欢的节目(例如，喜欢的艺人演出的节目)，决定推荐这些音乐、影像。控制部m11选择机器人211以及电视215。另外，控制部m11选择相对于情绪低落的人推荐影像的情况下的通知信息。该通知信息例如在示出电视215的画面的位置表示进行暖色系的发光。另外，该通知信息也包括“想看××节目吗。艺人△△先生/女士演出的呢。”的声音信息。

控制部m11将表示决定的自发动作的自发动作信息和通知信息向选择的机器人211以及电视215发送。机器人211以及电视215中的先检测出使用者的设备(例如机器人211)基于接收的通知信息，发音“想看××节目吗。艺人△△先生/女士演出的呢。”，并且在电视215指示基于发光的通知。电视215与机器人211的发音同步地基于通知信息而进行发光。此外，控制系统1(控制装置m1或者获取了通知信息的所有设备)在向多个设备发送了通知信息的情况下，也可以进行控制，以使得在某个设备(例如，机器人211)进行了通知的情况下，其他的设备(电视215)不进行相同的通知。

此外，控制部m11在判定为使用者情绪低落的情况下，也可以对该使用者的家人、朋友(称为“家人等”)通知该使用者情绪低落。在这种情况下，控制部m11也可以将对家人等通知用于鼓励该使用者的信息决定为自发动作。具体而言，控制部m11基于服务信息而确定出该使用者和家人等。控制部m11抽出使用者和各个确定出的家人等的回忆信息。回忆信息是该使用者和各个家人等共同烹饪的菜肴、共同观看的电影、节目、共同拍摄的照片、共同进行的旅行等。此处，控制部m11也可以优先选择回忆信息中的体验了回忆信息所表示的回忆的日期较早的信息。另外，控制部m11也可以将回忆信息与情绪信息相关联而存储，选择与心情好的相关联的回忆信息。具体而言，信息处理装置s1(或者控制装置m1、外部装置)作为情绪信息而将笑脸的人的人数、笑脸的次数与回忆信息相关联而存储。控制部m11也可以选择笑脸的人的人数、笑脸的次数最多的情绪信息，并优先地选择与选择出的情绪信息对应的回忆信息。

控制部m11选择家人等拥有的通信设备260、270。另外，控制部m11相对于情绪低落的使用者的家人等而选择鼓励该使用者的情况下的通知信息。该通知信息例如表示使通信设备260、270的侧面发光、并且显示表示眼泪等的图像(水滴的图像)。另外，该通知信息包括：“×××先生/女士可能情绪低落。烹饪×××先生/女士喜欢的菜肴来鼓励×××先生/女士吧。”的声音信息、“×××先生/女士可能情绪低落。带着与×××先生/女士共同观看的喜欢的电影的dvd去鼓励×××先生/女士吧。”的声音信息。

控制部m11将表示决定的自发动作的自发动作信息和通知信息向选择的通信设备260、270发送。通信设备260、270基于接收的通知信息而使侧面发光，显示表示眼泪等的图像，并且发出声音信息所表示的声音。

＜输出例＞

图4、图5是表示本实施方式所涉及的各设备u1-n的输出例的示意图。该输出例是输入输出部u13-n进行通知的情况下的发光例。

各设备u1-n基于环境信息、设备信息、人信息或者外部信息，以制造出生命感、温暖、或者活跃感的方式进行发光。发光优选表现各设备u1-n的功能、方便利益或者效果。另外，发光优选表现各设备u1-n发挥功能、方便利益或者效果的状态。更具体而言，使设备给使用者带来效果的部分(冰箱213、223的开口部、电视213、223的画面的周边、空调216、226的吹出口、加热烹调器217的库内、空气净化器218的离子生成器搭载部分或吹出口等)的附近、或者与其相关的部分发光。由此，使用者具有宛如各设备u1-n具备意识而贴近自己的感觉，各设备u1-n能够相对于使用者创造情感的价值。

此处，各设备u1-n例如优选不是通过点而是通过面、线进行发光。另外，在发光中，优选空间上或者时间上发光的改变平稳。例如，在邻接的发光装置或者像素中，使亮度之差成为规定的值(例如，亮度的10％)以内。另外，在相同的发光装置或者像素中，使1秒钟的亮度之差成为规定的值(例如，亮度的10％)以内。例如，在邻接的发光装置或者像素中，使颜色之差成为规定的值(例如，各原色中10％)以内。另外，在相同的发光装置或者像素中，使1秒钟的颜色之差成为规定的值(例如，各原色中10％)以内。

另外，优选各设备u1-n改变点亮的位置、颜色、或者周期，而不是恒定的位置以恒定的颜色点亮、或者以恒定周期闪烁。例如，在以相同的设定进行动作的情况下，通知类型(点亮的位置、颜色或者周期)也可以不同。例如，各设备u1-n也可以根据动作状况(例如，输出、运转时间)而改变通知类型(点亮的位置、颜色、或者周期)。具体而言，各设备u1-n在输出较大的情况下、运转时间较长的情况下，也可以使点亮的颜色成为暖色系并加快闪烁的周期。由此，各设备u1-n能够对使用者给予各设备u1-n拼命地动作或者由于长时间动作而疲劳的印象。

另外，各设备u1-n也能够以表现自发动作信息所表示的动作的方式进行发光。例如，各设备u1-n在功能发挥位置、功能发挥操作位置中，进行表现该功能或者操作的发光。

＜冰箱的发光＞

在图4中，冰箱213具备发光装置或者画面(称为“发光部”)l11～l16。

发光部l11被配置在冰箱213的两个门的边界(开口部分)中关闭门时对置的位置。此外，发光部l11可以配置于各门的前表面，也可以配置于侧面。此处，发光部l11在沿着两个门的边界的方向上延伸配置。此外，发光部l11也能够以上述两个门打开为契机进行发光。另外，发光部l11也可以根据被配置的门的打开程度改变其发光方式(例如亮度)。另外，发光部l11也可以根据被配置的门的打开程度的变化，改变其发光方式(例如亮度)。例如，发光部l11也可以配置的门越打开，使发光越强(亮度越高)，也可以使发光越弱。另外，发光部l11在配置的门向打开的方向改变的情况下，也可以伴随着变化而使发光变强(亮度变高)，也可以相反使发光变弱。

发光部l12、l13配置于各门的前表面。例如，发光部l12、l13是矩形的画面，并具有与门的一边(图中长边)平行的长边。例如，发光部l12、l13也可以显示表现功能发挥操作位置的动画。该功能发挥操作位置是表示冰箱213的拉手部分、为了使冰箱213开口而使用者应该接触的接触部分(触摸面板)的位置。动画例如是多个面光在功能发挥操作位置集合的图像。此处，在一个面光与其他的面光重叠的情况下，发光部l12、l13也可以至少使重叠的部分的亮度较大。此外，面光是具有面积的光，例如是通过点光源、像素多个同时发光而获得的光。例如，面光是在各设备u1-n的筐体的至少一面中具有1平方厘米以上的面积的光。

冰箱213在令使用者打开了门的情况下(推荐打开的情况下)，使发光部l12、l13显示图像。

发光部l14配置于左门。该发光部l14表现发光部l14所表示的位置(冷藏室或者门的中段、左侧(朝向冰箱为右侧))有所希望的食材。此外，与发光部l14相同的发光部配置于门的整个面，冰箱213与所希望的食材的位置对应地使最接近其位置的发光部发光。

发光部l15配置于下段的抽屉的开口部。此处，发光部l15配置于抽屉的上部，换句话说拉手部分(或者接触部分)。冰箱213在令使用者打开了下段的抽屉的情况下，使发光部l15发光。

发光部l16配置于下段的抽屉。该发光部l16表现发光部l16所表示的位置(冷冻室的左侧(朝向冰箱为右侧))有所希望的食材。此外，与发光部l16相同的发光部配置于抽屉的整个面，冰箱213与所希望的食材的位置对应地使最接近其位置的发光部发光。

例如，冰箱213在作为自发动作而推荐饮料的情况下，确定出饮料的位置(例如，冷藏室的中段)。该情况下，冰箱213一边使发光部l14闪烁，一边例如发音“饮料在这里”。另外，冰箱213使发光部l12、l13显示图像，通知功能发挥操作位置。在使用者接触了功能发挥操作位置的情况下，冰箱213使发光部l11发光。

例如，在点光的情况下，其发光位置被局限，无法表示面积大(或者长度长)的开口部(或者拉手)。冰箱213通过沿着开口部的线光或者面光来进行发光，因此能够表示开口部。冰箱213例如能够通过使开口部(或者拉手)中50％(一半)以上的长度发光，来表示开口部(或者拉手)。

＜电视的发光＞

电视215具备发光部l21。发光部l21在电视215的画面(面板)的下部，沿水平方向延伸地配置。此外，发光部l21也可以在中心部配置输出较大的发光装置，或者在中心部配置较多的发光装置。由此，发光部l21能够使中心部发出比周边部更强的光。

发光部l21表示画面。换句话说，电视215在推荐通过画面显示图像的情况下使发光部l21发光。由此，电视215示出功能发挥位置(画面)。例如，在点光的情况下，其发光位置被局限，无法表示面积大的画面。电视215通过沿着画面的至少一边(图4的例子中画面的底边)的线光或者面光来进行发光，因此能够表示画面。电视215例如能够通过使画面的至少一边中该一边的50％(一半)以上的长度发光从而表示画面。

＜空调的发光＞

空调216具备发光部l31。发光部l31在空调216的吹出口的上部，沿水平方向延伸地配置。此外，发光部l31也可以在中心部配置输出较大的发光装置，或者在中心部配置较多的发光装置。由此，发光部l31能够使中心部比周边部更强地发光。

发光部l31表示空调216的吹出口。换句话说，空调216在推荐进行制冷、制热、除湿或者送风的情况下，使发光部l31发光。由此，空调216示出功能发挥位置(吹出口)。例如，在点光的情况下，其发光位置被局限，无法表示面积大(或者长度长)的吹出口。空调216通过沿着吹出口的至少一边的线光或者面光来进行发光，因此能够表示吹出口。空调216为了使发挥空调的效果的吹出口发光而示出，例如使吹出口的至少一边中该一边的50％(一半)以上的长度发光。

＜加热烹调器的发光＞

加热烹调器217具备发光部l41～l43。发光部l41、l42分别沿着加热烹调器217的门的左右的一边而延伸配置。发光部l43配置于加热烹调器217的门的前表面。换句话说，加热烹调器217的门成为电视那样的显示装置。此外，发光部l43也可以不具有光源。例如，发光部l43也可以由透射式的液晶面板构成，使用周围的光显示颜色、图像。

发光部l41、l42示出加热烹调器217的库内。换句话说，加热烹调器217在推荐进行烹调的情况下，使发光部l41、l42发光。由此，加热烹调器217示出功能发挥位置(库内)。例如，在点光的情况下，其发光位置被局限，无法表示面积大(或者长度长)的库内。另外，在点光的情况下，光不引人注意，无法彰显本设备。加热烹调器217通过沿着门的至少一边的线光或者面光来进行发光，因此能够表示库内。加热烹调器217例如能够通过使门的至少一边中该一边的50％(一半)以上的长度发光来表示库内。

另外，发光部l43例如显示有表示火、火焰的图像。例如，加热烹调器217在加热、烧烤食材等的情况下，或者正在加热、正在烧烤食材等的情况下，显示表示火、火焰的图像。此外，也可以通过led等照明的光、光的改变来表现火、火焰、热。

＜空气净化器装置的发光＞

空气净化器218具备发光部l51、l52。发光部l51配置于空气净化器218的中心部分。发光部l51示出净化空气的部分换句话说离子生成器。另外，图4中，发光部l51发出多个圆形的面光。该面光各自发光的时机、发光时间不同。另外，各面光缓慢地发光(逐渐使发光变强或者使发光面积变大)，并突然消失。换句话说，针对各面光，与完全出现的时间间隔比较，消失的时间间隔短。例如，发光部l51表现与在碳酸水的表面，开始出现气泡，逐渐变大，进而破裂的过程相同的现象。由此，空气净化器218能够在视觉上表现空气被净化的状况。此外，发光部l51中发光的面光(图像的情况下圆的中心位置)也可以随机(根据随机变数)决定。

发光部l51示出空气净化器218的离子生成器。换句话说，空气净化器218在推荐净化空气的情况下，使发光部l51发光。由此，空气净化器218示出功能发挥位置(离子生成器)。例如，在点光的情况下，光不引人注意，无法彰显本设备。另外，空气、离子尽管看不见，但由大量的粒子构成。在点光的情况下，无法表现大量的粒子。空气净化器218在主体的一部分使多个面光发光，因此能够表现空气的净化，并且示出离子生成器。空气净化器218例如能够通过显示六个以上面光而示出离子生成器。

发光部l52在空气净化器218的吹出口中沿着吹出口延伸地配置。

发光部l52示出空气净化器218的吹出口。换句话说，空气净化器218在推荐空气净化的情况下，使发光部l52发光。由此，空气净化器218示出功能发挥位置(吹出口)。例如，在点光的情况下，其发光位置被局限，无法表示面积大(或者长度长)的吹出口。空气净化器218通过沿着吹出口的至少一边的线光或者面光来进行发光，因此能够示出吹出口。空气净化器218为了使发挥空气净化的效果(净化的空气)的吹出口发光而示出，例如使吹出口的至少一边中该一边的50％(一半)以上的长度发光。

＜通信设备的发光＞

通信设备219具备发光部l61。图4的通信设备219是腕带型的可穿戴设备，佩戴于手臂。发光部l61沿着通信设备219的一边延伸地配置。例如，在图4的情况下，发光部l61在通信设备219的侧面中靠近佩戴者(与佩戴者接触的位置)的部分(佩戴时的内径侧)配置。此外，在与佩戴者接触的面(佩戴面、里面)配置有用于检测生命数据的检测装置。

通信设备219例如在推荐生命数据的测量的情况下，使发光部l61发光。由此，加热烹调器217示出功能发挥位置(检测装置)。例如，在点光的情况下，光不引人注意，无法彰显本设备。通信设备219通过沿着侧面的至少一边的线光或者面光来进行发光，因此能够示出配置有检测装置的佩戴面。通信设备219例如能够通过使里面或者侧面的至少一边中该一边的50％(一半)以上的长度发光来示出佩戴面。

通信设备260具备发光部l71、l72。图4的通信设备260是智能手机。发光部l71配置于通信设备260的物理按钮或者物理按钮的周围。发光部l72沿着通信设备260的侧面而配置于四个边侧面全体。

通信设备260例如在欲令使用者按下物理按钮以便参照画面的情况下，使发光部l71发光。通信设备260例如在欲令使用者抓握设备以便指定本设备的情况下，使发光部l72发光。例如，通信设备260能够通过使侧面的至少一边中该一边的50％(一半)以上的长度发光来显示抓握部分。

此外，各设备u1-n除了上述发光部之外，还可以具备画面等显示部。此外，该显示部显示有各设备u1-n的基本功能、或者与基本功能相关的文字等(设定信息等)。例如，电视215具备显示影像的显示部，通信设备260具备通过应用程序等而显示信息的显示部。例如，空调216具备显示设定或者现在温度等的显示部，加热烹调器217具备显示剩余时间等的显示部。

此外，设备u1-n的基本功能意味着根据设备u1-n的物品名一般可想到的特定的功能。例如，针对移动电话机，是指通信功能，针对dvd播放录像机，是指播放/录像功能。

另外，各设备u1-n除了上述发光部以及显示部之外，也可以具备灯等。该灯例如通知与各设备u1-n的基本功能相关的信息(设定信息等)、警告信息。

图5示出了关于空调216的发光的通知类型p11～p18。例如，空调216从通知类型p11缓慢(例如历时1秒)改变为通知类型p12，其后缓慢改变为通知类型p13。由此，空调216示出吹出口。另外，空调216也可以在通知类型p13后，缓慢改变为通知类型p12，其后缓慢改变为通知类型p11。空调216也能够以预先决定的次数反复上述类型的改变

同样，例如，空调216从通知类型p14缓慢改变为通知类型p15，其后缓慢改变为通知类型p16。再其后，空调216从通知类型p16缓慢改变为通知类型p17，其后，缓慢改变为通知类型p18。换句话说，空调216两个面光相互靠近而在空调216的中心部相交成为一个面光。此外，在通知类型p14～p18中，也可以调整亮度，以使得面光的每单位面积的亮度恒定。例如，在通知类型p17和通知类型p18中，通知类型p17面光的面积更小，因此空调216使通知类型p17的面光的亮度比通知类型p18的面光的亮度高。

此外，冰箱213的发光部l12、l13也可以进行与图5的通知类型p14～p18相同的通知(使旋转90度)。该情况下，冰箱213也可以如上述那样，在表示冰箱213的拉手部分、接触部分的位置(最接近的位置)，使两个面光相交。

＜总结＞

如上所述，在控制系统1中，存储部m12存储：使各设备u1-n检测出的环境信息、人信息、设备信息、或者外部装置提供的外部信息中的至少两个信息、与包括设备的动作信息(动作id)和表示基于该设备的声、光或图像的通知的通知信息的自发动作信息相关联的对应信息(图11、图12以及图13)。控制部m11获取环境信息、人信息、设备信息或者外部信息中的至少两个信息。控制部m11基于对应信息和获取的至少两个信息而决定自发动作信息。输入输出部u13-n基于控制部m11决定的自发动作信息，根据通知信息来进行同基于动作信息的动作对应的通知且基于声、光或图像的通知。

由此，在控制系统1中，人和设备u1-n能够产生共鸣。

图6是表示本实施方式所涉及的控制系统1的动作的示意图。该图中，步骤st11、st12、s13分别表示输入(input)、解释、输出(output)。

(步骤st11)控制系统1基于环境信息、人信息或设备信息，分别识别环境，识别人，识别设备的动作。或者，控制系统1获取外部信息。其后，进入步骤st12。

(步骤st12)控制系统1基于环境信息、人信息、设备信息、或者外部信息，决定自发动作信息(建议内容)。其后，进入步骤st13。

(步骤st13)控制系统1基于自发动作信息进行动作(各设备u1-n的控制)以及通知。此处，通知包括光、音(也称为“表情”。另外，“表情”包括图像，图像也包括影像)、声音。

(第二实施方式)

以下，参照附图对本发明的第二实施方式详细地进行说明。在第二实施方式中，对第一实施方式所涉及的控制系统1的使用情况的一个例子进行说明。另外，在第二实施方式中，控制装置m1针对多个设备u1-n，将它们的动作作为序列信息进行管理，生成自发动作信息、通知信息。

＜使用情况的一个例子＞

图7是表示本发明的第二实施方式所涉及的使用情况的一个例子的说明图。该图是孩子h3由于生病等而发热的情况。该情况下，各设备u1-n进行以下的动作。

(步骤st21)孩子h3佩戴的通信设备219-3针对使用者(孩子h3)的体温，检测出比阈值th41高的体温。该情况下，父亲h1拥有的通信设备260与母亲h2拥有的通信设备270使图4的发光部l71、l72点亮，用声音通知孩子h3发烧的主旨。例如，通信设备260与通信设备270发音“○○君发烧38度。请观察一下情况”。其后，通信设备219-3使图4的发光部l61点亮，用声音通知孩子h3发烧的主旨、与父亲h1和母亲h2联络的主旨、以及鼓励孩子h3的主旨。例如，通信设备219-3发音“发烧38度。已与父母亲联络。”。其后，进入步骤st22。

(步骤st22)冰箱213在检测出孩子h3的家人(例如，母亲h2)在本设备的附近的情况下，使图4的发光部中的发光部l11和l14点亮，通知孩子h3发高烧的主旨、以及对人高烧时的建议。例如，冰箱213发音“○○君发烧38度。小心脱水。这里有运动饮料。”。此外，各设备u1-n所通知的建议是对用户等所处的状况的建议，且是基于本设备u1-n的自发动作的建议。例如，冰箱213相对于孩子h3的发烧进行防止脱水症状的建议。此处，冰箱213通过发光部l14的发光而示出本设备内的运动饮料的场所，并且通过发光部l11的发光而示出为了取出运动饮料所需要的操作(打开门)。其后，进入步骤st23。

(步骤st23)在冰箱213检测出本设备的门被打开的情况下，加热烹调器217通知对人高烧时的建议，且与冰箱213的建议相关的(接续)的建议。该建议是在冰箱213的建议上再加上基于加热烹调器217的自发动作的建议。例如，冰箱213发音“加热运动饮料吗？发烧的话，最好加热到30度左右。”。换句话说，冰箱213和加热烹调器217作为防止脱水症状的建议，提出使孩子h3喝热的运动饮料。其后，进入步骤st24。

(步骤st24)空调216检测出孩子h3以及孩子h3的家人(例如，母亲h2)在空调216所设置的房间的情况下，使图4的发光部中的发光部l31点亮，通知对人高烧时的建议。例如，空调216发音“发烧的话，不要使身体受凉，要保暖。现在的室温最好由制热设定为24度。”。此处，空调216相对于孩子h3的高烧进行对病毒、发冷的建议。另外，空调216通过发光部l31的发光而示出吹出风的位置(吹出口)，并且通过暖色系的发光而示出吹出热风。此外，空调216对现在的房间的温度进行检测，基于检测出的温度，建议运转模式、设定温度。其后，进入步骤st25。

(步骤st25)处于与空调216相同的房间的空气净化器218使图4的发光部l51闪烁，用声音通知人高烧时的建议且相同的房间的空调进行制热的情况的建议。例如，空气净化器218发音“也请清洁空气。为了不干燥，请使用加湿功能。由于用于加湿的水量较少，请进行补充。”。此处，空气净化器218相对于孩子h3的高烧进行对病毒、发冷的建议(通过本设备的空气净化功能使空气清洁、以及通过加湿功能进行加湿)。另外，空气净化器218在建议加湿功能时，检测加湿所需要的水的水量，例如在水量较少的情况下，补充建议补给水。另外，通过发光部l31的发光示出产生离子的位置，而且通过该发光来表现空气的净化。其后，进入步骤st26。

(步骤st26)孩子h3的家人(例如，母亲h2)根据各设备u1-n的建议而结束对人高烧时的对策，确认孩子h3的症状稳定。确认后，孩子h3的家人向机器人211道谢。机器人211在检测出道谢后，在各设备u1-n中，确认是否发送了自发动作信息或者通知信息。机器人211在判断为在预先决定的时间内发送了自发动作信息或者通知信息的情况下，进行对道谢的回复。例如，机器人211发音“希望快些好起来。”。此时，机器人211以及各设备u1-n为了鼓舞孩子h3的家人而进行发光。此外，机器人211也可以在检测出道谢时在各设备u1-n中，确认是否进行了根据自发动作信息或者通知信息的动作。该情况下，机器人211在判断为在预先决定的时间内进行了根据自发动作信息或者通知信息的动作的情况下，进行对道谢的回复。

＜设备的结构＞

图8是表示本实施方式所涉及的设备u1-n的结构的简要框图。如图3所示那样，设备u1-n包括传感器部u11-n、动作部u12-n、输入输出部u13-n、控制部u14-n、存储部u15-n以及通信部u16-n而构成。

传感器部u11-n包括动作控制用传感器部u111-n以及环境检测用传感器部u112-n而构成。

动作控制用传感器部u111-n对发挥设备u1-n的基本功能的情况下使用的信息、以及发挥基本功能的情况下使用的信息(也称为“动作控制信息”)进行检测。

环境检测用传感器部u112-n检测设备周边的信息等、动作控制信息以外的信息。

例如，动作控制用传感器部u111-n或者环境检测用传感器部u112-n(传感器部u11-n)检测温度、湿度、粒子、水量(水位)、压力、气味、声、光、热、位置、加速度、距离、方位、时刻/时间、酒精、气体、放射线、角度、磁、人/动物、面部、指纹、静脉等物理量、特征量。由此，传感器部u11-n检测环境信息、设备信息以及人信息。此外，传感器部u11-n通过基于检测出的信息进行使用者的认证等，从而确定出该使用者的设备用户id，也可以将该设备用户id作为人信息。另外，传感器部u11-n也可以基于预先存储的血缘关系信息，来确定出所确定的设备用户id的用户所属的家人(或不属于家人)、或者亲属关系。传感器部u11-n也可以将表示确定出的家人或者亲属关系的信息与设备用户id相关联而作为人信息。

动作部u12-n根据来自控制部u14的控制，进行发挥本设备的功能的动作。

输入输出部u13-n包括输入部u131-n、显示部u132-n、发光部u132-n、声音输出部u133-n而构成。

输入部u131-n是按钮等。输入部u131-n可以具备于设备主体，也可以具备于遥控器。

显示部u132-n是显示器等。显示部u132-n根据来自控制部u14的控制，显示与各设备u1-n的基本功能相关的文字等。此外，也可以根据各设备u1-n而不具备显示部u132-n。

发光部u132-n是led等发光装置或者液晶面板等画面。发光部u132-n根据来自控制部u14的控制，进行发光。另外，发光部u132-n基于通知信息进行发光。例如，发光部u132-n通过发光方式(发光的位置、形状、花纹、颜色、亮度、点亮时机、点亮时间等)，表示各设备u1-n的动作。例如，发光部u132-n也可以不显示文字。

声音输出部u133-n是扬声器等。声音输出部u133-n输出声音。声音输出部u133-n根据来自控制部u14的控制，进行发光。另外，发光部u132-n基于通知信息进行发光。此外，通知信息不局限于声音，也可以是旋律、效果音、乐曲。

控制部u14-n包括总体控制部u141-n、动作控制部u142-n、输出控制部u143-n而构成。

总体控制部u141-n对控制部u14-n以及各设备u1-n全体进行控制。

总体控制部u141-n基于从输入输出部u13-n输入的信息、传感器部u11-n检测出的信息、存储部u15-n存储的信息、通信部u16-n接收的信息，对设备u1-n的各部进行控制。另外，总体控制部u141-n进行将从输入输出部u13-n输入的信息、传感器部u11-n检测出的信息、存储部u15-n存储的信息经由通信部u16-n而向控制装置m1发送的控制。

动作控制部u142-n基于从输入输出部u13-n输入的信息、传感器部u11-n(例如，动作控制用传感器部u111-n)检测出的信息、存储部u15-n存储的信息、通信部u16-n接收的信息，控制设备u1-n的动作。例如，动作控制部u142-n在通信部u16-n接收的自发动作信息包括本设备u1-n的设备识别信息的情况下，根据该自发动作信息，控制动作部u12-n的动作。

输出控制部u143-n基于从输入输出部u13-n输入的信息、传感器部u11-n检测出的信息、存储部u15-n存储的信息、通信部u16-n接收的信息，控制输出。例如，输出控制部u143-n根据通信部u16-n接收的通知信息，控制发光部u133-n或者声音输出部u133-n。

存储部u15-n包括设备控制信息存储部u151-n以及信息存储部u152-n而构成。

设备控制信息存储部u151-n存储设备u1-n的程序。另外，设备控制信息存储部u151-n按每个动作id，存储表示设备u1-n的动作控制的动作控制信息，按每个通知类型，存储表示通知控制的通知控制信息的。

信息存储部u152-n存储环境信息、设备信息(包括操作信息的历史)、人信息以及自发动作信息等。例如，设备信息如上述那样包括：针对本设备u1-n而表示产品编号、品名、识别设备的设备识别信息(制造编号、mac地址等)、本设备所具有功能的信息、表示本设备u1-n的设置场所(表示房间的信息等)的信息、表示本设备u1-n的所有者的用户识别信息、本设备u1-n的能力信息、设定信息、以及操作信息的历史。

通信部u16-n通过收发信息与外部设备进行通信。通信部u16-n例如将对存储部u15-n存储的信息赋予了设备识别信息的信息向控制装置m1发送。另外，通信部u16-n例如从控制装置m1接收包括本设备u1-n的设备识别信息的自发动作信息。

＜信息处理装置的结构＞

图9是表示本实施方式所涉及的信息处理装置s1的结构的简要框图。如图3所示那样，信息处理装置s1包括控制部s11、存储部s12以及通信部s13而构成。

控制部s11包括服务信息获取部s111以及信息对应部s112而构成。服务信息获取部s111从后述的获取目的地信息存储部s121读出表示外部信息的获取目的地(外部服务器等)的获取目的地信息，获取来自该获取目的地信息所表示的获取目的地的外部信息。

在服务信息获取部s111获取了包括外部用户id的外部信息的情况下，信息对应部s112从对应信息存储部s122读出用户对应信息。该情况下，信息对应部s112基于用户对应信息，相对于其外部信息赋予与该外部用户id对应的设备用户id。控制部s11将包括设备用户id的外部信息存储于获取历史存储部s123，并且向控制装置m1发送。

此外，外部用户id也可以按每个服务而不同。换句话说，用户对应信息使多个外部用户id与设备用户id相关联。

在服务信息获取部s111获取了不包括外部用户id的外部信息的情况下，控制部s11将服务信息获取部s111获取的外部信息存储于获取历史存储部s123，并且经由通信部s13而向控制装置m1发送。

存储部s12包括获取目的地信息存储部s121、对应信息存储部s122以及获取历史存储部s123而构成。

获取目的地信息存储部s121存储获取目的地信息。

对应信息存储部s122存储用户对应信息。

获取历史存储部s123存储服务信息获取部s111获取的外部信息、获取日期和时间、获取目的地、外部用户id、设备用户id等。

通信部s13通过收发信息而与外部设备进行通信。通信部s13例如接收来自获取目的地信息表示的获取目的地的外部信息。另外，通信部s13例如将外部信息向控制装置m1发送。

＜控制装置的结构＞

图10是表示本实施方式所涉及的控制装置m1的结构的简要框图。如图3所示那样，控制装置m1包括控制部m11、存储部m12以及通信部m13而构成。

控制部m11包括信息获取部m111、解析部m112、输出决定部m113、序列控制部m114以及序列更新部m115而构成。

信息获取部m111从多个各设备u1-n获取环境信息、设备信息或者人信息，而且从信息处理装置s1获取外部信息。信息获取部m111将获取的环境信息、设备信息、人信息以及外部信息存储于信息存储部m121。

解析部m112将信息获取部m111获取的信息进行解析。具体而言，解析部m112基于序列存储部m122存储的序列对应信息，从环境信息、设备信息、人信息或者外部信息的组合，决定进行动作的设备u1-n(也称为“对象设备u1-n”)，确定所决定的设备u1-n的自发动作。此处，序列对应信息是使环境信息、设备信息、人信息或者外部信息、与识别序列的序列id相关联的信息(参照图11)。序列id与对象设备u1-n以及表示其动作的动作id(自发动作)相关联。即，解析部m112通过根据环境信息、设备信息、人信息或者外部信息的组合来决定序列id，从而决定对象设备u1-n以及自发动作。此外，解析部m112也可以决定多个自发动作，该情况下，也可以决定包括顺序的多个自发动作的组合(序列)(参照图12)。另外，解析部m112也可以决定多个对象设备u1-n。

输出决定部m113基于信息获取部m111获取的信息，决定通知信息。具体而言，输出决定部m113基于序列存储部m122存储的序列对应信息，根据环境信息、设备信息、人信息或者外部信息的组合，决定进行通知的设备u1-n，确定所决定的设备u1-n的通知信息。此处，在本实施方式中，对进行动作的设备u1-n和进行通知的设备u1-n相同的情况进行说明，但本发明不局限于此，也可以不同。另外，在本实施方式中，相对于序列id，将设备u1-n以及该设备u1-n的自发动作(动作id)相关联(参照图12)，而且，将动作id与通知信息相关联(参照图13)。即，输出决定部m113通过根据环境信息、设备信息、人信息或者外部信息的组合来决定序列id，从而决定进行通知的设备u1-n以及通知信息。

序列控制部m114获取解析部m112以及输出决定部m113决定的序列id，并控制各设备u1-n，以使得执行所获取的序列id表示的序列(参照图12)。序列控制部m114根据序列将使执行的自发动作的历史信息存储于历史存储部m124。另外，序列控制部m114也可以在正执行序列时或执行序列前后的预先决定的时间内，使相对于该序列的对象设备u1-n的操作信息与自发动作的历史信息一并存储(参照图16)。该操作信息是除了序列中的自发动作之外的、或者取代序列中的自发动作的、使用者进行的操作。

序列更新部m115基于历史存储部m124存储的历史信息或者来自外部的序列的版本升级信息，更新序列。例如，序列更新部m115基于表示除了序列中的自发动作之外的、或者取代序列中的自发动作的、使用者进行的操作的操作信息，更新序列。

存储部m12包括信息存储部m121、序列存储部m122、通知信息存储部m123以及历史存储部m124而构成。

信息存储部m121存储信息获取部m111获取的环境信息、设备信息、人信息以及外部信息。另外，信息存储部m121存储设备登记信息表(参照图14)。

序列存储部m122存储序列对应信息表(参照图11)以及序列信息表(参照图12)。

通知信息存储部m123存储通知信息表(参照图13)。通知信息表是借助序列对应信息表以及序列信息表而使环境信息、设备信息、人信息或者外部信息与通知信息相关联的表。

历史存储部m124存储使序列控制部m114执行的自发动作的历史信息。另外，如上述那样，历史存储部m124在序列控制部m114正执行序列或者执行序列前后的预先决定的时间内，存储相对于该序列的对象设备u1-n的操作信息。

通信部m13通过收发信息，从而与外部设备进行通信。通信部m13例如从多个各设备u1-n接收环境信息、设备信息、人信息，从信息处理装置s1接收外部信息。通信部m13将表示解析部m112决定的自发动作的自发动作信息且包括输出决定部m113决定的通知信息的自发动作信息向进行该自发动作以及通知信息所表示的通知的对象设备u1-n发送。

＜序列对应信息表＞

图11是表示本实施方式所涉及的序列对应信息表的一个例子的示意图。如图示那样，序列对应信息表具有识别编号(no.)、条件以及序列id的各项目的列。此处，“条件”的项目具有环境信息、动作信息、外部信息、人信息的各项目的列。“条件”的项目是用于选择序列id的条件。序列对应信息表是由按每个识别编号储存有序列对应信息的行和列构成的二维的表形式的数据。

例如，图11的第一行的序列对应信息(识别编号“1”)表示在人信息为“体温为阈值th41以上”的情况下，将序列id决定为“12345”。另外，例如，图11的第二行的序列信息(识别编号“2”)表示在动作信息为“使空调以制冷模式运转”并且人信息为“检测出有家人回家”的情况下，将序列id决定为“23456”。

＜序列信息表＞

图12是表示本实施方式的序列信息表的一个例子的示意图。如图示那样，序列信息表具有序列id、流程、分支、条件以及自发动作信息的各项目的列。此处，“流程”的项目表示以各序列id表示的序列的顺序。“分支”的项目表示在各“流程”内，根据条件等而动作进行分支的情况下，识别各分支的识别信息。“条件”的项目是用于选择自发动作信息的条件。“自发动作信息”的项目具有对象设备、动作id以及声音信息的各项目的列。“动作id”是识别动作的识别信息，示出由“对象设备”所表示的设备u1-n而产生的自发动作。“声音信息”是通知信息的一个，是在进行“动作id”表示的动作前、或者进行动作时，“对象”所表示的设备u1-n发音的内容。该声音信息包括变量，变量基于环境信息、设备信息、人信息或者外部信息来决定。

序列信息表是由按每个序列id储存有序列信息的行和列构成的二维的表形式的数据。另外，在各流程中，按每个分支，储存自发动作信息。此外，在该表中，“-”(短横线)表示没有信息。例如，在自发动作信息的项目设定为“-”的情况下，表示未进行自发动作。

例如，图12的第一个序列信息(序列id“12345”)表示序列具有六个流程。

流程“1”表示序列id决定为“12345”的情况下，最初进行的自发动作。此处，在流程“1”中，根据“有联络处”和除此以外(“上述以外”)的两个条件分为分支“1-1”和“1-2”。与分支“1-1”对应的自发动作的一个为对象设备是“联络处通信设备”，动作id是“1111”，声音信息是“＜名字＞发烧＜体温＞度。请观察一下情况”。此处，“联络处通信设备”是设定于预先决定的联络处的通信设备(参照图14)。

在进行分支“1-1”的自发动作的情况下，在声音信息中，＜名字＞和＜体温＞是变量。该情况下，序列控制部m114基于体温的检测源的通信设备(例如，图7的通信设备219-3)所检测出的人信息(孩子h3，体温“38”度)、使用户识别信息与名字相关联的用户信息(使孩子h3与“○○君”相关联)，在＜名字＞代入“○○君”，而且在＜体温＞代入“38”。此外，在分支“1-2”的情况下，没有自发动作，因此跳过流程“1”的动作。

第二个流程“2”表示第一个流程“1”的自发动作的决定后(没有自发动作的情况下跳过了流程“1”后)进行的自发动作。此处，在流程“2”中，根据“检测出人并且有饮料”、“检测出人并且没有饮料”、或者这些以外(“上述以外”)的三个条件，分别分为分支“2-1”、“2-2”或者“2-3”。

第三个流程“3”表示第二个流程“2”的自发动作的决定后(没有自发动作的情况下跳过了流程“1”后)进行的自发动作。此处，在流程“3”中，根据“2-1结束并且开闭冰箱”和除此以外(“上述以外”)两个条件，分别分为分支“3-1”和“3-2”。分支“3-1”的条件中的“2-1结束”将选择分支“2-1”，执行结束作为条件的一个。换句话说，分支“3-1”的条件将分支“2-1”中冰箱推荐了饮料的结果，打开冰箱作为条件。即，分支“3-1”表示推断为使用者取出了冰箱内的饮料的情况，在这种情况下，使加热烹调器进行加热该饮料的自发动作信息。

＜通知信息表＞

图13是表示本实施方式所涉及的通知信息表的一个例子的示意图。如图示那样，通知信息表具有动作id、全体类型、条件、发光位置pr-1，pr-2，...，pr-m、以及声音的各项目的列。此处，“全体通知类型”的项目表示针对一个发光位置pr-m(m＝1，2，...，m)的通知、或者多个发光位置pr-m的通知的组合的类型。此外，在一个发光位置pr-m具有基于发光方式的类型(局部类型)的情况下，根据该局部类型的不同，全体类型也不同。“条件”的项目是用于选择通知类型的条件。“发光位置pr-m”表示在对应的位置中，基于发光的通知类型(发光方式)。“声音”的项目表示基于声音的通知类型。

通知信息表是由按每个动作id储存有通知信息的行和列构成的二维的表形式的数据。此外，该表中，“-”(短横线)表示没有信息。例如，在发光位置pr-m的项目中设定为“-”的情况下，表示不发光。

例如，图13的第二个通知信息(动作id“3333”、全体通知类型“2”)表示在“对象物处于冷藏室的左侧的中段”的情况下，使发光位置pr-1以“类型p21”发光，而且使发光位置pr-3以“类型p22”发光，发出声音信息。例如，发光位置pr-1是图4的发光部l11，发光位置pr-1是图4的发光部l14。该情况下，例如图7的步骤st22那样，冰箱213点亮，通过图12的分支2-1的声音信息进行发音。

＜设备登记信息表＞

图14是表示本实施方式所涉及的设备登记信息表的一个例子的示意图。如图示那样，设备登记信息表具有设备识别信息、设备种类、所有者、使用登记者、联络处、设置场所以及功能的各项目的列。设备登记信息表是由按每个设备识别信息储存有设备登记信息的行和列构成的二维的表形式的数据。

例如，图14的第一行设备登记信息(设备识别信息“abc123”)是通信设备219-3。该设备登记信息表示通信设备219-3是“可穿戴”设备，所有者是“孩子h3”。另外，该设备登记信息表示通信设备219-3的使用登记者是“孩子h3”，联络处是“父亲h1”和“母亲h2”。另外，该设备登记信息表示没有通信设备219-3的设置场所(“mobile”)，现在地为“x家的孩子房间”。另外，该设备登记信息表示通信设备219-3具有“显示功能、声音输出功能、体温测量功能、搏动/脉搏测量功能、以及血压测量功能”。

此外，在图14中，针对设置场所被固定的设备u1-n，作为一个例子按每个房间设定其设置场所。

＜系统的序列＞

图15是本实施方式所涉及的控制系统1的简要序列图。此外，在图15中，标注了与图7相同的附图标记的位置表示图7与图15的步骤的对应。

(步骤st20)通信设备219-3将包括孩子h3的用户识别信息和孩子h3的体温信息的人信息、以及包括通信设备219-3的设备识别信息(“abc123”)的设备信息向控制装置m1发送。控制装置m1基于接收的人信息和序列对应信息，决定是否进行自发动作。例如，在体温为38度且阈值th41为37度时，在图11的序列对应信息的情况下，控制装置m1通过将序列id决定为“12345”，从而决定为进行自发动作。其后，进入步骤st211。

(步骤st211)控制装置m1基于由步骤st20决定的序列id和序列信息表，来决定自发动作信息。例如，在图12的序列信息表的情况下，在流程“1”中，对条件(联络处的有无)进行判定。控制装置m1基于图14的设备登记信息表，判定为在步骤s20的发送源的设备的设备识别信息(“abc123”)设定有联络处。该情况下，控制装置m1判定为“有联络处”，选择分支“1-1”。

该情况下，控制装置m1将作为联络处的父亲h1和母亲h2为所有者的便携设备(设置场所“mobile”)决定为联络处通信设备(图14的“abc234”、“abc345”)。此处，终端识别信息为“abc234”、“abc345”的设备u1-n分别为通信设备260、270。控制装置m1向决定的联络处通信设备(通信设备260、270)发送包括动作id“1111”以及声音信息“○○君发烧38度。请观察一下情况”的自发动作信息。其后，进入步骤st212。

(步骤st212)控制装置m1将检测出体温的通信设备219-3决定为检测源通信设备。控制装置m1向决定的检测源通信设备(通信设备219-3)发送包括动作id“2222”以及声音信息“发烧38度。已与父母亲联络。请稍等一下”的自发动作信息。此处，控制装置m1也可以参照图14的“功能”的项目而确认通信设备219-3(“abc123”)是否具备声音输出功能。步骤s211和s212的结果，通信设备260、270和通信设备219-3进行图7的步骤st21的通知。其后，进入步骤st221。

(步骤st221)冰箱213例如检测出母亲h2，将表示母亲h2处于冰箱213的附近的人信息向控制装置m1发送。控制装置m1在将序列id决定为“12345”时，或者流程“2”的待机状态时(例如决定后的预先决定的时间内)，接收冰箱213发送的人信息。

该情况下，控制装置m1判定为在流程“2”中检测出人。其后，进入步骤st222。

(步骤st222)控制装置m1针对流程“2”的条件、变量，确认未确认的条件。换句话说，控制装置m1选择图14的设备种类与“冰箱”(图12的对象设备)对应的设备识别信息“abc456”(冰箱213)。控制装置m1相对于选择的冰箱213生成检测库内是否有饮料，而且检测有饮料的情况下饮料的位置和种类(声音信息的＜饮料＞)的检测指示。控制装置m1将生成的检测指示向冰箱213发送。其后，进入步骤st223。

(步骤st223)冰箱213基于步骤st222中发送的检测指示来检测饮料。冰箱213在检测出饮料的情况下，将表示有饮料的设备信息向控制装置m1发送。此处，冰箱213在检测出饮料的位置或者种类的情况下，将包括表示饮料的位置或者种类的信息的设备信息向控制装置m1发送。其后，进入步骤st224。

此外，控制装置m1也可以针对条件和变量的确认，分别在其他的步骤进行。具体而言，控制装置m1也可以在确认条件而决定了自发动作(分支)后，针对与决定的自发动作相关的变量，进行确认。

(步骤st224)控制装置m1基于步骤st223中发送的设备信息和序列信息来决定自发动作信息。例如，在饮料的种类为“运动饮料”的饮料处于冷藏室的左门侧的中段的情况下，控制装置m1向冰箱213发送包括动作id“3333”以及声音信息“○○君发烧38度。小心脱水。这里有运动饮料”的自发动作信息。另外，该自发信息包括图13的全体通知类型“2”的通知信息。其结果，冰箱213进行图7的步骤st22的通知。其后，进入步骤st231。

(步骤st231)冰箱213将表示分支“2-1”的自发动作结束的设备信息向控制装置m1发送。在其后的预先决定的时间内，检测出冰箱的开闭的情况下，冰箱213将表示开闭了冰箱的设备信息向控制装置m1发送。控制装置m1在将序列id决定为“12345”时或者在流程“3”的待机状态时，接收冰箱213发送的设备信息。其后，进入步骤st232。

(步骤st232)控制装置m1例如基于冰箱213发送的设备信息，判定为分支“2-1”的自发动作结束，其后开闭了冰箱213的门。换句话说，控制装置m1判定为分支“2-1”的自发动作的结果是从冰箱213取出了运动饮料，选择分支“3-1”。该情况下，控制装置m1选择图14的设备种类与“加热烹调器”中的设置于与冰箱213(设备识别信息“abc456”)相同的房间(x家的厨房)的设备对应的设备识别信息“abc567”(加热烹调器217)。控制装置m1向选择的加热烹调器217发送包括动作id“5555”以及声音信息“加热运动饮料吗？发烧的话，最好加热到30度左右。”的自发动作信息。此处，控制装置m1从分支“2-1”的＜饮料＞的变量继承＜饮料＞的变量，其结果，在分支“3-1”的＜饮料＞的变量代入“运动饮料”。其结果，加热烹调器217进行图7的步骤st23的通知。其后，进入步骤st241。

这样，加热烹调器217与其他的设备u1-n(冰箱213)的自发动作结束、同该自发动作对应的操作结束连动，进行自发动作。换言之，加热烹调器217根据冰箱213的自发动作的有无、与该自发动作对应的操作的有无，是否进行自发动作，或者改变自发动作的内容。

(步骤st241)空调216例如检测出孩子h3和母亲h2，将表示孩子h3和母亲h2在x家的孩子房间(空调216所设置的房间)的人信息向控制装置m1发送。另外，空调216检测出室温以及湿度，将表示检测出的室温以及湿度的环境信息向控制装置m1发送。此外，空调216也可以将表示设定的设定温度的设备信息向控制装置m1发送。控制装置m1在将序列id决定为“12345”时或者在流程“4”的待机状态时，接收空调216发送的人信息、环境信息以及设备信息。其后，进入步骤st242。

(步骤st242)控制装置m1例如基于环境信息所表示的室温，判定为室温为阈值th61以下。换句话说，控制装置m1判定为房间冷，选择分支“4-1”。该情况下，控制装置m1从存储部m12读出室温、运转模式以及有高烧的人的情况下的设定温度相关联的信息，基于读出的信息和环境信息表示的室温，决定运转模式和设定温度(例如，运转模式“制热”设定温度“24”度)。另外，控制装置m1选择图14的设备种类与“空调”中的、设置于有孩子h3的房间(x家的孩子房间)的设备对应的设备识别信息“abc678”(空调216)。控制装置m1向选择出的空调216发送包括动作id“6666”以及声音信息“发烧的话，不要使身体受凉，要保暖。现在的室温最好由制热设定为24度。”的自发动作信息。其结果，空调216进行图7的步骤st24的通知。其后，进入步骤st251。

(步骤st251)空调216将表示分支“4-1”的自发动作结束的设备信息向控制装置m1发送。控制装置m1在将序列id决定为“12345”时或者在流程“5”的待机状态时，接收空调216发送的设备信息。其后，进入步骤st252。

(步骤st252)控制装置m1例如基于空调216发送的设备信息，判定为分支“2-1”的自发动作结束。换句话说，控制装置m1判定为结束了分支“4-1”的自发动作，选择分支“5-1”。该情况下，控制装置m1选择图14的设备种类与“空气净化器”中的、设置于与空调216(设备识别信息“abc678”)相同的房间(x家的孩子房间)的设备对应的设备识别信息“abc789”(空气净化器218)。控制装置m1向选择的空气净化器218发送包括动作id“7777”以及声音信息“也请清洁空气。为了不干燥，请使用加湿功能。”的自发动作信息。其结果，空气净化器218进行图7的步骤st25的通知。其后，进入步骤st261。

此外，步骤st25中，空气净化器218检测出加湿功能中使用的水的水量变少，附加发音催促水的补给的声音信息。另外，控制装置m1针对选择出的空气净化器218，在图14的功能没有加湿功能的情况下，也可以从声音信息除去与加湿功能相关的部分。该情况下，控制装置m1也可以将该部分的声音信息变更为其他的声音信息。例如，控制装置m1使声音信息成为“也请清洁空气。为了不干燥，请准备湿毛巾”。

(步骤st261)机器人211例如，检测出母亲h2的道谢(例如，讲出包括“谢谢”的话语)，将表示道谢的人信息向控制装置m1发送。另外，机器人211将表示本设备的现在位置(讲出道谢的人存在的房间，例如，x家的孩子房间)的设备信息向控制装置m1发送。控制装置m1在将序列id决定为“12345”、或者在流程“6”的待机状态时，接收机器人211发送的人信息以及设备信息。其后，进入步骤st262。

(步骤st262)控制装置m1判定为进行了分支“1-1”、“2-1”、“2-2”、“3-1”、“4-1”、“5-1”的任一个，换句话说，进行了序列id“12345”的序列内的自发动作中的至少一个。另外，机器人211判定为检测出道谢。换句话说，控制装置m1判定为序列内的自发动作顺利地进行，使用者说出道谢，选择分支“6-1”。

该情况下，控制装置m1选择图14的设备种类与“机器人”中的、存在于设备信息表示的房间的设备对应的设备识别信息“abc890”(机器人211)。控制装置m1向选择的机器人211发送包括动作id“8888”以及声音信息“希望快些好起来。”的自发动作信息。其后，进入步骤st263。

(步骤st263)控制装置m1基于分支“6-1”的自发动作信息选择设置场所为机器人211的现在位置的房间的全部设备。例如，在图14的情况下，控制装置m1选择与设置场所为“x家的孩子房间”的设备对应的设备识别信息“abc123”(通信设备219-3)、“abc678”(空调216)、“abc789”(空气净化器218)、“abc890”(机器人211)。控制装置m1向选择出的通信设备219-3、空调216、空气净化器218以及机器人211发送包括动作id“9999”的自发动作信息。

这些步骤st262、st263的结果，空调216、空气净化器218以及机器人211进行图7的步骤st26的通知。其后，控制装置m1结束序列id“12345”的序列。

＜历史信息日志＞

图16是表示本实施方式所涉及的历史信息日志的一个例子的示意图。该图是进行了图15所示的序列的情况下的历史信息的一个例子。如图示那样，历史信息日志具有序列id、顺序、日期和时间、以及输出的各项目的列。此处，“日期和时间”表示对象设备进行了动作的时刻。

例如，图16的最初的历史信息表示序列id决定为“123456”后，以第“1”个的顺序进行的动作。该历史信息是进行了图7的步骤st21的情况下的历史信息。该历史信息表示在“2015/xx/xx8时30分”，通信设备260、270进行动作id“1111”所表示的动作，发音“○○君发烧38度。请观察一下情”。另外，该历史信息表示“在2015/xx/xx8时30分”，通信设备219-3进行了动作“id2222”表示的动作。

另外，图16的顺序为第“4”个的历史信息是使用者的操作信息(或者基于操作的动作)。该历史信息表示在图7的步骤st23的自发动作后，使用者相对于加热烹调器217，作为设定温度40度而使开关“接通”(按下开始按钮)。换句话说，意味着尽管在步骤st23中建议了30度，但使用者也将运动饮料加热为40度。

图16的顺序为第“9”个的历史信息是与图12的序列id“12345”的序列无关的操作信息。该历史信息表示从母亲h2的通信设备270向父亲h1的通信设备260打电话，进行了通话。

＜序列的更新＞

序列更新部m115基于历史存储部m124存储的历史信息(例如图16)，更新序列信息。

图17是表示本实施方式所涉及的更新后的序列信息表的一个例子的示意图。图17的序列信息表通过序列更新部m115来更新图12的序列信息表。

序列信息表与图12相同，具有序列id、流程、分支、条件以及自发动作信息的各项目的列。若将图17的序列信息表与图12的序列信息表进行比较，则以下的(a1)、(a2)不同。

在(a1)分支“3-1”的自发动作信息的声音信息中，“30”度变更为“40”度。追加(a2)流程“6”。流程“6”的自发动作相对于联络处通信设备(通信设备260、270)进行动作id“9922”的动作，发音“对＜名字＞打电话吧”。将该＜名字＞代入与对象设备不同的联络处通信设备的所有者的名字。例如，母亲h2的通信设备270发音“对父亲h1打电话”，父亲h1的通信设备260发音“对母亲h2打电话吧”。

对于向上述(a1)的更新而言，序列更新部m115在建议设定温度(30度)后的操作中，设定了其他的设定温度的情况下，将建议了的设定温度变更为操作的设定温度。换句话说，序列更新部m115在建议的自发动作中，进行了与建议不同的设定的操作的情况下，将建议的设定(图12的序列信息的设定)变更为操作的设定。

另外，序列更新部m115也可以使作为图16的顺序第“4”个温度设定(40度)的主体的“母亲”与“设定温度40度”相关联存储。该情况下，序列控制部m114能够在识别到加热运动饮料的主体为“母亲”的情况下执行更新的序列。

对于向上述(a2)的更新而言，序列更新部m115在正执行序列中或者执行序列的前后的预先决定的时间内，进行了序列中没有的操作的情况下，将该操作加入序列。换句话说，序列更新部m115在执行的序列中，进行了与建议不同的操作的情况下，对序列(图12的序列信息)追加与该操作相关的自发动作。

＜总结＞

如上所述，在控制系统1中，存储部m12存储各设备u1-n检测出的环境信息、人信息、设备信息或者外部装置提供的外部信息中的至少两个信息、与包括设备的动作信息(动作id)以及表示基于该设备的声、光或者图像的通知的通知信息的自发动作信息相关联的对应信息(图11、图12以及图13)。控制部m11获取环境信息、人信息、设备信息或者外部信息中的至少两个信息。控制部m11基于对应信息和获取的至少两个信息，来决定自发动作信息。输入输出部u13-n基于控制部m11决定的自发动作信息，根据通知信息，进行与基于动作信息的动作对应的通知且基于声、光或图像的通知。

此处，在控制系统1中，设备u1-n具备：发挥本设备u1-n的功能的动作部u12-n、和输入来自使用者的指示的输入输出部u13-n或者传感器部u11-n。通信部u16-n发送本设备u1-n检测出的环境信息、人信息或者设备信息，并且接受基于其他的设备检测出的环境信息、人信息或者设备信息的自发动作信息且包括以与本设备的动作对应的通知信息的自发动作信息。发光部u133-n基于自发动作信息，根据通知信息，进行与本设备u1-n的动作对应的通知且基于声、光或者图像的通知。

由此，在控制系统1中，考虑了环境信息、设备信息、人信息或者外部信息后决定自发动作，各设备能够将决定的自发动作向使用者建议。此处，在控制系统1中，使用环境信息、设备信息、人信息或者外部信息的至少两个，因此与一个的情况比较，能够建议深入的内容。由此，在成为使用者所希望的建议的情况下，使用者感到高兴，因此控制系统1能够令使用者怀有情绪。另外，环境信息、设备信息、人信息或者外部信息是使用者正在体验的信息、或者有兴趣或关心的信息。各设备建议基于这些信息的自发动作，因此使用者感到各设备在理解自己后进行建议。由此，使用者对设备感到满意，控制系统1能够令使用者怀有情绪。

由此，在控制系统1中，人和设备u1-n能够产生共鸣。

另外，在控制系统1中，自发动作信息包括设备的识别信息、该设备的动作信息、以及表示基于该设备的声、光或图像的通知的通知信息。此外，设备的识别信息(设备识别信息)通过图12的“对象设备”与图14的“设备种类”的对应而相关联。控制部m11基于对应信息和获取的至少两个信息而决定设备识别信息。控制部m11决定的设备识别信息所表示的设备u1-n的输入输出部u13-n进行与基于动作信息的动作对应的通知且基于声、光或图像的通知。

由此，控制系统1中，按每个设备，能够决定例如与设备的功能、状况对应的动作信息以及通知信息，能够向使用者建议。

另外，在控制系统1中，存储部m12存储使至少两个信息与多个设备识别信息相关联的对应信息。控制部m11基于对应信息和获取的至少两个信息，决定多个设备识别信息。控制部m11决定的多个设备识别信息所表示的设备各个输入输出部u13-n分别进行不同的通知。

由此，在控制系统1中，能够使用多个设备u1-n来决定例如与设备u1-n的功能、状况对应的动作信息以及通知信息，能够向使用者建议。使用者感到多个设备u1-n共同努力而进行建议。由此，使用者感到一体感，因此控制系统1能够令使用者怀有情绪。

另外，在控制系统1中，有时在利用一个设备u1-n而功能不足的情况下，也能够通过其他的设备u1-n来补充功能的不足。由此，在控制系统1中，与一个设备u1-n的情况比较，能够进行新的建议或者较多的建议。

另外，控制系统1中，输入输出部u13-n或传感器部u11-n(指示输入部)例如通过按钮的按下、声音、遥控器等输入来自使用者的指示。序列更新部m115在输入输出部u13-n进行了通知后，基于输入至输入输出部u13-n或者传感器部u11-n的指示，变更对应信息(参照图17)。

在使用者基于通知的建议后进行了其他的指示的情况下，认为相比建议而更希望其他的指示内容。在控制系统1中，在进行了通知后基于指示变更对应信息，因此在变更后，能够进行进一步与使用者的喜好一致的建议。建议改变为使用者的喜好，因此使用者感到各设备在理解了自己后，进行建议。由此，使用者对设备感到满意，因此控制系统1能够令使用者怀有情绪。

另外，在控制系统1中，通信部u16-n也可以相对于进行动作的对象设备u1-n而发送针对该对象设备u1-n的对应信息。该情况下，对象设备u1-n也可以具备信息获取部m111、输出决定部m113、序列控制部m114、序列存储部m122。对象设备u1-n的输出决定部m113也可以基于通信部u16-n发送的对应信息、以及通信部u16-n获取的信息且环境信息、设备信息、人信息或外部信息中的至少两个信息，决定自发动作信息。此外，该情况下的信息获取部m111也可以是输入部u131-n或者传感器部u11-n。

例如，在控制系统1中，也可以多个设备u1-n的统一由控制装置m1进行，各设备u1-n的动作的详情在设备u1-n侧进行设定或者调整。例如，在使房间降温的情况下，控制装置m1对使空调216以制冷模式起动、使风扇的电源接通、使空气净化器218的电源接通等进行控制。另一方面，空调216的温度设定、风扇的风量、空气净化器218的离子模式(仅负或正负双方)也可以由各设备u1-n基于对应信息(例如，图12的条件)来决定而设定。

此外，在控制系统1中，对控制装置m1具备控制部m11(动作决定装置)的情况进行了说明，但设备u1-n也可以具备控制部m11(动作决定装置)。该情况下，设备u1-n的控制部m11从存储部读出使各设备u1-n检测的环境信息、人信息、设备信息、或外部装置提供的外部信息中的至少两个信息、与包括设备的动作信息(动作id)和表示基于该设备的声、光或图像的通知的通知信息的自发动作信息相关联的对应信息(图11、图12以及图13)。控制部m11获取环境信息、人信息、设备信息或者外部信息中的至少两个信息。控制部m11基于对应信息和获取的至少两个信息，决定自发动作信息。另外，通知信息在具备多个发光装置的设备u1-n中，有时发光装置(发光位置)不同。换句话说，控制部m11基于各设备u1-n检测出的环境信息、人信息、设备信息或者外部装置提供的外部信息，决定发光装置(发光位置)。

另外，在控制系统1中，控制部m11基于对应信息、和环境信息、人信息、设备信息或者外部信息中的至少两个信息，决定自发动作信息。

此处，自发动作信息包括制造出生命感、温暖、或者活跃感那样的通知类型。即，控制部m11基于环境信息、人信息、设备信息或者外部信息中的至少两个信息，决定各设备u1-n的功能、方便利益或效果、或者各设备u1-n发挥功能、方便利益或效果的状态。控制部m11决定与所决定的各设备u1-n的功能、方便利益或效果、或者各设备u1-n发挥功能、方便利益或效果的状态对应的表现且表示这些的表现(通知类型)。更具体而言，控制部m11基于环境信息、人信息、设备信息、或者外部信息中的至少两个信息，来决定例如冰箱的库内存在所希望的物品、电视显示有所希望的信息、通过空调能够成为所希望的温度、通过加热能够加热食材、以及通过离子生成等能够净化空气。控制部m11为了表现所决定的各设备u1-n的功能、方便利益或效果等，分别选择冰箱213、223的开口部、电视213、223的画面的周边、空调216、226的吹出口、加热烹调器217的库内、空气净化器218的离子生成器搭载部分或吹出口或其附近、或者与其相关的部分。另外，控制部m11在选择的部分中，决定表现各设备u1-n的功能、方便利益或效果等的发光方式的通知类型。例如，控制部m11决定：在表现变热、温暖的情况下利用暖色系的颜色进行发光的通知类型、在表现降温、寒冷的情况下利用冷色系的颜色进行发光的通知类型。控制部m11基于环境信息、人信息、设备信息或者外部信息中的至少两个信息，决定具有与它们对应的发光时间、发光的形状、发光个数等的通知类型。这样，在控制系统1中，控制部m11不仅能够表现各设备中，单纯的状态、指示或者警告的显示，还能够表现各设备u1-n的功能、方便利益或效果、或者各设备u1-n发挥功能、方便利益或效果的状态。由此，使用者感觉到宛如各设备u1-n具有意识而贴近自己，各设备u1-n相对于使用者能够制造出情感的价值。

(第三实施方式)

以下，参照附图对本发明的第三实施方式详细地进行说明。在第三实施方式中，对第一实施方式或者第二实施方式所涉及的控制系统1的使用情况的其他的一个例子进行说明。

在第三实施方式中，对空调216开始自动运转的情况、或者空调216在运转中进行自动控制的情况进行说明。

图18是表示本发明的第三实施方式所涉及的控制系统1的简要结构的功能框图。

控制部m11作为人信息而获取表示检测出人的信息、个人认证信息或者个人数据(生命数据等)。例如，控制部m11从通信设备219、空调216，获取这些信息。例如，个人认证信息是空调216检测出面部，基于其特征量而确定出人的信息。另外，个人认证信息通过作为可穿戴设备的通信设备219、作为智能手机的通信设备260、270，基于id/pw或者所有者等登记信息，确定出人。

另外，控制部m11获取表示设定信息或者操作信息的设备信息。此外，操作信息也可以是基于由对象设备u1-n的外部设备进行的控制的信息。另外，控制部m11从信息处理装置s1获取外部信息。外部信息例如是表示天气预报的信息。

控制部m11以下面的信息为契机使空调216进行动作或者通知。控制部m11在该契机或者动作中，使用获取的信息。

作为使空调216的电源成为“接通”或者“断开”的契机，有基于计时器的契机。控制部m11在成为了预先决定的时刻时或者经过了预先决定的时间时，使空调216进行动作或者通知。

另外，作为使空调216的电源“接通”或“断开”的契机，有基于设备信息表示的设定温度、外部信息表示的气温(外部空气温度)、或者环境信息表示的气温(室温或车内温度)的契机。控制部m11在基于这些设定温度或气温和阈值的契机、或者基于这些设定温度或气温之差和阈值的契机，使空调216进行动作或者通知。

另外，作为使空调216的电源成为“接通”或者“断开”的契机，有基于设备信息表示的操作信息的契机。

控制部m11基于以下的信息，决定空调216的动作信息(动作id等)或者通知信息。例如，控制部m11在空调216的动作中进行所决定的动作或者通知。此外，空调216的动作信息也包括使空调216的电源成为“接通”、或者“断开”。

作为用于决定空调216的动作信息的信息，有设备信息表示的个人的设定信息、或者人信息表示的个人认证信息。例如，控制部m11根据个人的设定信息和个人认证信息来决定动作信息或者通知信息。

作为用于决定空调216的动作信息的信息，有人信息表示的生命数据。例如，控制部m11在判定为生命数据表示身体的异常的情况下(例如，判定为高烧的情况下)，决定针对该异常的对策的动作信息或者通知信息。另外，也可以根据参照个人的设定信息而识别的个人来切换温度等的设定。

控制部m11基于决定的动作信息而对空调216指示运转开始指示或者运转中的控制。空调216基于动作信息进行运转开始或者运转中的控制。

控制部m11基于决定的通知信息，对空调216指示通知。空调216基于通知信息，在运转开始时或者运转中，进行与动作信息所表示的动作对应的通知。

以下，表示通知的具体例。

(b1)空调216在进行吹出风的动作的情况下，使吹出口的附近发光。换句话说，空调216与吹出风的动作对应地使该动作相对于使用者产生作用的部分(发光部l31)发光。另外，例如，空调216在进行自动清洁过滤器的动作的情况下，使储存有过滤器的筐体的表面、或者其中沿着过滤器的外周的部分(框)发光。换句话说，空调216相对于自动清洁过滤器的动作，使进行该动作的部分发光。

(b2)空调216进行与动作状况对应的发光。动作状况是例如风扇、压缩机的状况，具体而言为输出。

(b3)空调216进行与运转模式对应的发光。例如，空调216在制冷模式的情况下以冷色系(蓝、淡蓝色)发光，在制热模式的情况下以暖色系(橙色、红色)发光。

(b4)空调216在使发光改变的情况下，使发光方式改变。例如，空调216在发光中，使光的颜色、发光方式(闪烁、切换方式)改变。

(b5)空调216根据发光方式来表现相对于使用者的推荐(建议内容)。例如，在通过天气预报预料到今后变热的情况下，空调216发音“从现在开始变热，所以推荐放置冷气设备”。在这种情况下，空调216例如以橙色(表现从现在开始变热)进行三次闪烁，其后，点亮三秒钟以淡蓝色模糊的发光(表现冷气设备)。空调216反复该发光类型。此外，为了使颜色模糊，可以在发光部的发光侧设置扩散板，也可以使图像本身模糊。在使图像本身模糊的情况下，基于某个像素的像素值，决定该像素的周边像素的像素值。

(c1)空调216输出与动作状况对应的声音(bgm等)。动作状况是例如风扇、压缩机的状况，具体而言为输出。

(c2)空调216输出与运转模式对应的声音。

(c3)空调216为了令使用者发现发光，输出催促注意的声音。

(第四实施方式)

以下，参照附图对本发明的第四实施方式详细地进行说明。在第四实施方式中，对第一实施方式或者第二实施方式所涉及的控制系统1的使用情况的其他的一个例子进行说明。

在第四实施方式中，对表示冰箱213库内是否有物品的情况进行说明。

图19是表示本发明的第四实施方式所涉及的控制系统1的简要结构的功能框图。

控制部m11作为人信息，获取表示检测出人的信息，个人认证信息或者个人数据(生命数据等)、讲话信息。例如，控制部m11从通信设备219、冰箱213获取这些信息。

另外，控制部m11获取表示设定信息或者操作信息的设备信息。此外，操作信息也可以是基于由对象设备u1-n的外部设备进行的控制的信息。另外，控制部m11从信息处理装置s1获取外部信息。外部信息例如是表示烹饪的食谱的信息。

控制部m11以下面的信息为契机而使冰箱213进行动作或者通知。控制部m11在该契机或者通知中，使用获取的信息。

例如，控制部m11在从冰箱213获取的讲话信息表示“口渴”的情况下，使冰箱213的开口部分(发光部l11)发光。另外，控制部m11在获取了表示从冰箱213获取饮料的放置场所的设备信息的情况下，使表示该放置场所的部分(发光部l14、l16)发光。或者，控制部m11也可以使冰箱213进行使表示饮料的放置场所的部分发光的指示。

例如，控制部m11在从通信设备219获取的人信息表示的体温超过了阈值的情况下，换句话说，检测出人高烧的情况下，使冰箱213的开口部分发光。另外，控制部m11在从冰箱213获取了表示饮料的放置场所的设备信息的情况下，使表示该放置场所的部分发光。此处，如后述那样，控制部m11通过发光方式来表现紧急性高。

例如，控制部m11根据获取的信息(例如，生命数据的值)来决定发光方式以及声音信息。

例如，控制部m11基于从冰箱213获取的讲话信息确定出使用者要求的食材。例如，在从冰箱213获取的讲话信息为“有西兰花吗？”的情况下，通过形态解析等而确定出表示食材的名词亦即“西兰花”。控制部m11判定确定出的食材是否存在于库内。具体而言，控制部m11从冰箱213获取使处于库内的物品(食材等)与其放置场所相关联的食材表而作为设备信息。控制部m11判定食材表中是否存在有确定出的食材。

在判定为确定出的食材存在于库内的情况下，控制部m11使冰箱213的开口部分发光。另外，控制部m11在食材表中登记有确定出的食材的放置场所的情况下，使表示该放置场所的部分发光。此外，控制部m11在食材表中，未登记有确定出的食材的放置场所的情况下(null的情况下)，使该食材本来应该存在的场所且预先登记的场所发光。例如，控制部m11在食材为蔬菜的情况下，使蔬菜室发光。

此外，存储部u15-n、存储部m12也可以按每个物品(食材)，存储通知信息表(图20)。控制部m11也可以根据确定出的食材而选择通知信息表，在该通知信息表所表示的契机(接通触发)，以每个发光位置的通知类型进行发光，开始发音，在停止通知的契机(断开触发)使该发光、发音结束。

控制部m11基于决定的通知信息，对冰箱213指示通知。冰箱213基于通知信息，进行与推荐(建议)的动作对应的通知。

以下，示出通知的具体例。

(d1)冰箱213在令使用者打开门的情况下，使开口部分或者其附近发光。换句话说，冰箱213与推荐给使用者的操作(打开门的操作)对应而使对使用者带来方便利益的部分发光。

(d2)冰箱213在对使用者推荐饮料的情况下，使开口部分、表示饮料的放置场所的部分发光。换句话说，冰箱213使实现使用者的目的、希望的部分发光。更具体而言，冰箱213与对使用者推荐物品的动作对应而使该物品所存在的场所以及为了得到该物品而进行操作的场所发光。

(d3)冰箱213进行与获取的信息对应的发光。例如，冰箱213在根据获取的人信息而判定为人口渴的情况下和人高烧的情况下，使发光方式不同。例如，冰箱213在判定为人口渴的情况下以冷色系(蓝色、淡蓝色)发光，在判定为人高烧的情况下以暖色系(橙色、红色)闪烁。由此，冰箱213在判定为人高烧的情况下，表现紧急性更高。

(d4)冰箱213在不符合使用者的目的、希望的情况下，进行表示其主旨的通知。例如，冰箱213在判定为确定出的食材不在库内的情况下，仅发音(“没有○○。”、道歉)不发光，或者以特定颜色(例如红色)发光。

(e1)冰箱213为了令使用者注意冰箱213，输出提醒注意的声音。

(e2)冰箱213进行与获取的信息对应的发光。例如，冰箱213在根据获取的人信息而判定为人口渴的情况下和人高烧的情况下，使声音不同。

(f1)冰箱213也可以具备接近传感器，在接近传感器检测出人的情况下，进行基于通知信息的通知(基于光的通知，基于声音的通知)。

(f2)冰箱213也可以具备个人认证功能以及接近传感器，在接近传感器检测出特定的使用者的情况下，进行基于通知信息的通知。

(f3)冰箱213也可以具备个人认证功能，根据使用者而进行不同的通知。

图20是表示本实施方式所涉及的通知信息表的一个例子的示意图。如图示那样，通知信息表具有接通触发、发光位置pr-1、pr-2、...、pr-m、声音以及断开触发的各项目的列。此处，“接通触发”表示开始通知的契机，“断开触发”表示结束通知的契机。

通知信息表是由按每个接通触发储存有通知信息的行和列构成的二维的表形式的数据。此外，在该表中，“-”(短横线)表示没有信息。例如，在发光位置pr-m的项目设定有“-”的情况下，表示不发光。

例如，图20的第一行的通知信息表示在检测出声音为“口渴”的主旨的情况下，使发光位置pr-1(例如，发光部l11)以“类型p21”发光，而且使发光位置pr-2(例如，发光部l14)以“类型p22”发光，发出“f-01”表示的声音。另外，该通知信息表示在未检测出冰箱213的库内的饮料中的至少一个的情况下，结束发光。

例如，图20的第二行的通知信息表示在生命数据中检测出异常的情况下，使发光位置pr-1(例如，发光部l11)以“类型p21”发光，而且使发光位置pr-2(例如，发光部l14)以“类型p23”发光。换句话说，在第一行的通知信息和第二行的通知信息中，接通触发不同，发光的类型(发光位置pr-2的类型)不同。

即，控制部m11在通知信息表所表示的契机(接通触发)不同的情况下，决定每个发光位置的类型中的至少一个不同的通知信息。

(第五实施方式)

以下，参照附图对本发明的第五实施方式详细地进行说明。在第五实施方式中，对第一实施方式或者第二实施方式所涉及的控制系统1的使用情况的其他的一个例子进行说明。

在第五实施方式中，对电视215通过表示来自外部的来信的设备信息和人信息来控制的情况进行说明。

图21是表示本发明的第五实施方式所涉及的控制系统1的简要结构的功能框图。

控制部m11作为人信息而获取表示检测出人的信息、个人认证信息、或者个人数据(生命数据等)、讲话信息。例如，控制部m11从通信设备219、电视215获取这些信息。

另外，控制部m11获取表示设定信息或者操作信息的设备信息。此外，操作信息也可以是基于由对象设备u1-n的外部设备而进行的控制的信息。

控制部m11以下面的信息为契机，使冰箱213进行动作或者通知。控制部m11使用在该契机或者通知中获取的信息。

控制部m11在生命数据检测出异常的情况下，向预先登记的联络处(例如家庭医生)进行联络。例如，在从通信设备219获取的人信息表示的体温超过了阈值的情况下，换句话说在检测出人高烧的情况下，向预先登记的联络处进行联络。该联络包括高烧的使用者的名字、生命数据以及该使用者的联络处(例如可视电话的电话号码)。另外，控制部m11将表示检测出人高烧的历史信息存储于存储部m12。

医生对高烧的使用者的联络处的电视215进行要求可视电话的发信。该情况下，电视215将有来信以及表示发信者(医生)的设备信息向控制装置m1发送。

控制部m11在检测出人高烧，并且电视215有可视电话的来信的情况下，决定进行使电视215的电源成为“接通”的动作、以及启动用于可视电话的蓝色应用程序(浏览器)的动作的动作信息。

电视215基于控制部m11决定的动作信息，开始动作，接听可视电话。此外，在使电视215接听时，电视215未检测出人的情况下，控制部m11也可以将人无法接听的主旨通知给发信者，并且启动硬盘录音器等录像/录音装置。控制部m11也可以使启动的录像/录音装置录像/录音可视电话的内容。另外，该情况下，控制部m11也可以将电视215的来信向其他的设备u1-n转送。

控制部m11在检测出人高烧，并且电视215有可视电话的来信的情况下，使电视215的发光部l21发光。此处，控制部m11根据发光方式来表现紧急性高。此外，控制部m11也可以在检测出人高烧、并且从医生有发信的情况下，进行表现紧急性高的发光。另外，控制部m11也可以相对于高烧的人的家中存在的设备u1-n中的、能够检测出人的设备u1-n，指示检测出人。另外，控制部m11也可以将检测出人的设备u1-n作为对象设备u1-n，生成催促看电视215的通知信息。该情况下，对象设备u1-n基于该通知信息，进行催促看电视215的通知。

控制部m11基于决定的通知信息，对电视215指示通知。

以下，示出通知的具体例。

(g1)电视216在使画面的下部(发光部l21)发光后，使画面显示影像。

(g2)电视216也可以发出铃声。

(第六实施方式)

以下，参照附图对本发明的第六实施方式详细地进行说明。在第六实施方式中，对第一实施方式或者第二实施方式所涉及的控制系统1的使用情况的其他的一个例子进行说明。

在第六实施方式中，对设备u1-n支援烹调的情况进行说明。

图22是表示本发明的第六实施方式所涉及的控制系统1的简要结构的功能框图。

控制部m11作为人信息而获取表示检测出人的信息、个人认证信息、或者个人数据、讲话信息。例如，控制部m11从通信设备219、冰箱213或者加热烹调器217获取这些信息。

另外，控制部m11获取表示设定信息、动作状况或者操作信息的设备信息。

此外，操作信息也可以是基于由对象设备u1-n的外部设备而进行的控制的信息。另外，控制部m11从信息处理装置s1获取外部信息。外部信息例如是表示烹饪的食谱的信息。

控制部m11例如以烹调指示为契机，使通信设备219、冰箱213以及加热烹调器217进行动作或者通知。控制部m11使用在该契机或者通知中获取的信息。

例如，通信设备219在检测出“想做蔬菜焗”的讲话的情况下，判定为从使用者有烹调指示，将表示烹调指示的信息向控制部m11发送。此外，控制部m11也可以存储冰箱等的材料的存货信息，基于存货信息将做蔬菜焗的主旨向用户建议，通过检测出表示对此同意的意思的用户的讲话而判定为有烹调指示。

控制部m11基于表示设备u1-n的动作状况的设备信息、或表示相对于设备u1-n的操作的设备信息、以及表示使用者的讲话的人信息，决定根据烹调流程的动作信息或者通知信息。

另外，控制部m11也可以向其他的通信设备219、通信设备260、270或者外部装置发送表示使用者(烹调者)的烹调状况的信息。例如，控制部m11向烹调者的家人的邮件地址、消息服务的特定的成员(例如，烹调者的友人)发送。另外，控制部m11也可以向会员机构的信息发布服务写入烹调状况。

控制部m11基于决定的通知信息，对通信设备219、冰箱213以及加热烹调器217指示通知。通信设备219、冰箱213以及加热烹调器217基于通知信息，进行与和烹调相关的动作对应的通知。

以下，示出通知的具体例。

(h1)冰箱213以及加热烹调器217分别分开或者同步地进行发光或者发音。

(h2)通信设备219进行烹调的引导。例如，通信设备219通过基于声音信息的发音来通知使用者应该接着进行的动作、使用者应该接着进行的对设备u1-n的操作。

(h3)通信设备219也可以在具备画面的情况下，在画面显示烹调流程、烹调方法等的引导。

(h4)通信设备219也可以是便携设备(通信设备260、270)、机器人211等使用者附近放置的设备。

(h5)通信设备219也可以解析人的声音，从使用者接受声音输入。

(h6)通信设备219使与佩戴者的皮肤接触的部分发光。

(h7)通信设备219与声音同步地使发出的光改变。

图23和图24是本实施方式所涉及的控制系统的简要序列图。此外，图24表示的序列是图23表示的序列的延续。

(步骤st310)控制装置m1处于等待指示的状态。

(步骤st311)使用者(例如，孩子h3)讲话“想做蔬菜焗”。其后，进入步骤st312。

(步骤st312)通信设备219(例如，通信设备219-3)对步骤st311的讲话进行录音，并将录音的讲话信息向控制装置m1发送。此外，讲话信息包括表示讲话者(通信设备219的使用者。本例中孩子h3)的用户识别信息的人信息。其后，进入步骤st313。

(步骤st313)控制装置m1对步骤st312中发送的讲话进行解析，该讲话是烹调指示，而且判定为烹调对象的料理为“蔬菜焗”。此外，烹调指示不局限于声音，也可以是按钮的按下、文本输入。

控制装置m1存储多个种类序列信息中的、叙述了烹调流程的序列信息(也称为“食谱方案”)。控制装置m1基于步骤st312的烹调指示，选择针对烹调指示所包括的料理信息表示的料理(“蔬菜焗”)的食谱方案。此外，该食谱方案叙述有“蔬菜焗”的烹调流程，并且针对各个烹调流程，与自发动作信息(对料理方法进行说明的声音信息、料理中利用的设备u1-n的设定、通知类型)相关联。控制装置m1调出并执行决定的食谱方案。此外，食谱方案也可以从信息处理装置s1等外部的服务器获取。另外，控制装置m1能够存储或者设定与家人的喜好对应的修正值，也可以相对于食谱方案进行例如使盐分降低30％、使火候加强20％等调整。并且，该修正值也可以分别相对于家人的成员而设定，分别相对于家人的成员而进行调整。控制装置m1或者设备u1-n根据调整而生成通知信息(消息、发光等)，进行设备的设定。

其后，进入步骤st314。

(步骤st314)控制装置m1根据食谱方案，生成表示烹调者(孩子h3)开始了烹调的消息。此外，该消息也可以包括烹调者开始了烹调、接下来利用的预定的设备u1-n(也称为“使用设备”)的名称等。控制装置m1将步骤st314中生成的消息向其他的通信设备219、通信设备260、270、或者外部装置(图23、图24中，记载为“外部装置”)发送。此处，联络处是预先决定的地址，例如是母亲h2的邮件地址等。其后，进入步骤st315。

(步骤st315)外部装置接收步骤st314的消息。由此，例如在母亲h2外出中、不在厨房的情况下，也能够知道孩子h3在家开始了烹调、以及孩子h3利用使用设备等。其后，进入步骤st316。

(步骤st316)控制装置m1根据食谱方案而生成指示初始发光的通知信息。该通知信息是例如相对于全部使用设备换句话说相对于食谱方案内的全部对象设备进行通知的信息。另外，冰箱213的通知信息包括用于制作料理信息表示的料理的食材信息。

该通知信息也可以使多个使用设备同步，例如同时、按流程、或者交替发光。另外，该通知信息也可以同时发音相同的话语(例如，“大家一起做蔬菜焗吧！”)、或者按流程或交替发音一系列的话语(“今天是蔬菜焗”“大家准备好了吗？”“可以啦”)。其后，进入步骤st317。

(步骤st317)控制装置m1将步骤st316中生成的通知信息向使用设备(通信设备219、冰箱213以及加热烹调器217)发送。其后，进入步骤st318。

(步骤st318)通信设备219、冰箱213以及加热烹调器217基于步骤st317的通知信息，进行通知(初始发光)。此处，冰箱213基于通知信息所包括的食材信息，在食材信息表示的食材存在于库内的情况下，使发光部l11(开口部)、以及发光部l14、l16等(表示食材的放置场所的部分)发光。另一方面，加热烹调器217使发光部l41、l42或者l43(门)发光。即，冰箱213以及加热烹调器217令相对于使用者带来方便利益的部分、或者实现使用者的目的、希望的部分发光。

通信设备219、冰箱213以及加热烹调器217基于通知信息而同步，例如同时或交替发光。而且例如，通信设备219、冰箱213以及加热烹调器217基于通知信息而同步，同时发音相同的话语或者按流程一系列的话语。其后，进入步骤st319。

此外，通知信息包括按每个使用设备以及通知而表示通知时机的时机信息(例如，时刻)，使用设备使用时机信息而同步。

(步骤st319)控制装置m1生成指示第一食材(例如“西兰花”)的准备的通知信息。该通知信息包括声音信息“请准备材料。在冰箱里”。其后，进入步骤st320。

(步骤st320)控制装置m1将步骤st319中生成的通知信息向通信设备219发送。其后，进入步骤st321。

(步骤st321)通信设备219基于步骤st320中发送的通知信息，进行通知(发音、发光)。其后，进入步骤st322。

(步骤st322)冰箱213检测到取出了食材。具体而言，冰箱213通过重量、图像、红外线等传感器、或者用户操作而监视库内的食材，检测到没有食材。或者，冰箱213也可以在步骤st321的通知后，以打开了冰箱213作为条件而判定为取出了食材。此外，该判定也可以由控制装置m1进行。其后，进入步骤st323。

(步骤st323)冰箱213将表示取出了食材的信息向控制装置m1发送。其后，进入步骤st324。

(步骤st324)控制装置m1相对于冰箱213而生成指示针对步骤st318的初始发光的熄灭的通知信息。其后，进入步骤st325。

(步骤st325)控制装置m1将步骤st324中生成的通知信息向冰箱213发送。其后，进入步骤st326以及步骤st327。

(步骤st326)冰箱213基于步骤st325中发送的通知信息，熄灭步骤st318的初始发光。

(步骤st327)控制装置m1根据食谱方案，生成相对于使用者催促第一食材的烹调作业(第一作业)的通知信息。该通知信息包括声音信息“切西兰花吧”。其后，进入步骤st328。

(步骤st328)控制装置m1将步骤st327中生成的通知信息向通信设备219发送。其后，进入步骤st329。

(步骤st329)通信设备219基于步骤st328中发送的通知信息，进行通知(发音、发光)。此外，通知信息也可以包括催促使用者在作业后联络的通知信息，例如声音信息“切完西兰花，请告诉我”。另外，控制装置m1也可以生成确认使用者是否结束了作业的通知信息，例如声音信息“切完西兰花了吗？”。该情况下，通信设备219例如也可以在步骤st329的通知后，在预先决定的时间间隔(例如，每5分钟)，确认使用者是否结束了作业。其后，进入步骤st330。

(步骤st330)使用者讲话“切完西兰花”。其后，进入步骤st331。

(步骤st331)通信设备219对步骤st330的讲话进行录音，将录音的讲话信息向控制装置m1发送。其后，进入步骤st332。

(步骤st332)控制装置m1对步骤st312中发送的讲话进行解析。控制装置m1判定为该讲话包括步骤st327的通知信息的第一食材(西兰花)、和相对于烹调作业(切吧)的结束信息(切完)。该情况下，控制装置m1判定为步骤st327的烹调作业(第一作业)结束。其后，控制系统1反复催促其他的食材的烹调作业、和该烹调作业的结束的判定。

(步骤st340)使用者讲话“材料的装盘结束”。其后，进入步骤st341。

(步骤st341)通信设备219对步骤st341的讲话进行录音，将录音的讲话信息向控制装置m1发送。其后，进入步骤st342。

(步骤st342)控制装置m1对步骤st341中发送的讲话进行解析。控制装置m1基于历史信息和食谱方案，判定为切割食材的作业、食材的装盘结束。该情况下，控制装置m1判定为加热食材的准备就绪。此外，控制装置m1不局限于声音，也可以基于按钮的按下、文本输入，判定为加热食材的准备就绪。

控制装置m1根据食谱方案，生成指示第二发光的通知信息。该第二发光例如表示接下来利用加热烹调器217而进行烹调。其后，进入步骤st343。

(步骤st343)控制装置m1将在步骤st342中生成的通知信息向加热烹调器217发送。其后，进入步骤st344以及步骤st345。

(步骤st344)加热烹调器217基于步骤st343中发送的通知信息，进行通知(第二发光)。其后，加热烹调器217等待在库内放置食材。

(步骤st345)控制装置m1根据食谱方案，生成相对于使用者催促通过加热烹调器217使装盘的食材加热的烹调作业(第二作业)的通知信息。该通知信息包括声音信息“请将食材放置于微波炉”。其后，进入步骤st346。

(步骤st346)控制装置m1将步骤st345中生成的通知信息向通信设备219发送。其后，进入步骤st347。

(步骤st347)通信设备219基于步骤st346中发送的通知信息，进行通知(发音、发光)。其后，进入图24的步骤st351。

(步骤st351)使用者在加热烹调器217放置装盘结束的食材。其后，进入步骤st352。

(步骤st352)加热烹调器217检测出在库内放置了食材。其后，进入步骤st353。

(步骤st353)加热烹调器217进行表示检测出在库内放置了食材的通知(第三发光)。其后，进入步骤st354。

(步骤st354)加热烹调器217将表示在库内放置了食材的信息向控制装置m1发送。其后，进入步骤st355。

(步骤st355)控制装置m1根据食谱方案，生成指示加热烹调器217的设定的自发动作信息。该设定是对放置于加热烹调器217的库内的食材(装盘结束的食材)进行烹调的情况下的设定(例如，“烤箱”模式，设定温度“250”度，设定时间“15”分)。另外，该自发动作信息包括表示第四发光的通知信息。该第四发光表示设定的结果，加热烹调器217发挥的功能。例如，第四发光使加热烹调器217的发光部l43显示表示火、火焰的图像。其后，进入步骤st356。

(步骤st356)控制装置m1将步骤st355中生成的自发动作信息向加热烹调器217发送。其后，进入步骤st357。

(步骤st357)加热烹调器217基于步骤st356中发送的自发动作信息，进行通知(第四发光)。其后，向步骤st358进入。

(步骤st358)加热烹调器217基于步骤st356中发送的自发动作信息，进行设定。其后，加热烹调器217等待动作开始的指示。其后，进入步骤st360。

(步骤st360)使用者对加热烹调器217进行动作指示。具体而言，使用者按下加热烹调器217的开始按钮。其后，进入步骤st361。

(步骤st361)加热烹调器217开始步骤st358中进行的设定的动作。此外，在使用者进行了其他的设定的情况下，加热烹调器217开始使用者进行的设定的动作。其后，进入步骤st362。

(步骤st362)加热烹调器217进行表示正在实施步骤st358中进行的设定的动作的通知(第五发光)。换句话说，第五发光表示正在实施动作，使加热烹调器217的发光部l43显示与第四发光不同的图像，例如以使火、火焰旋转的方式显示图像。其后，进入步骤st363。

(步骤st363)加热烹调器217将表示开始动作的信息向控制装置m1发送。其后，进入步骤st364。

(步骤st364)加热烹调器217结束步骤st361中开始的动作。此外，加热烹调器217在使用者打开了加热烹调器217的门的情况下，在加热烹调器217检测出动作结束的情况下，在经过了设定时间的情况下等，结束动作。其后，进入步骤st365。

(步骤st365)加热烹调器217进行表示结束了动作的通知(第六发光)。换句话说，第六发光例如显示与第四发光以及第五发光均不同的图像。其后，进入步骤st366。

(步骤st366)加热烹调器217将表示步骤st361中开始的动作结束的信息向控制装置m1发送。其后，进入步骤st367以及st368。

(步骤st367)加热烹调器217等待取出库内的食材。

(步骤st368)控制装置m1根据食谱方案，生成表示步骤st361中开始的动作结束的通知信息。其后，进入步骤st369。

(步骤st369)控制装置m1将步骤st368中生成的通知信息向通信设备219发送。其后，进入步骤st370。

(步骤st370)通信设备219基于步骤st369中发送的通知信息，进行通知(发音/发光)。其后，进入步骤st380。

此外，通信设备219也可以从加热烹调器217接收通知信息，进行通知。该情况下，加热烹调器217取代步骤st366而生成表示步骤st361中开始的动作结束的通知信息，向通信设备219发送。

(步骤st380)使用者在加热烹调器217取出加热烹调器217的库内的食材(被加热的菜肴。“蔬菜焗”)。其后，进入步骤st381。

(步骤st381)加热烹调器217检测出取出了库内的食材。其后，进入步骤st382。

(步骤st382)加热烹调器217将表示取出了库内的食材的信息向控制装置m1发送。其后，进入步骤st383。

(步骤st383)控制装置m1判定为基于加热烹调器217的烹调结束。其后，进入步骤st384。

(步骤st384)控制装置m1根据食谱方案，生成指示针对步骤st365的第六发光的熄灭的通知信息。其后，进入步骤st385。

(步骤st385)控制装置m1将步骤st384中生成的通知信息向加热烹调器217发送。其后，进入步骤st386以及步骤st387。

(步骤st386)加热烹调器217基于步骤st385中发送的通知信息，熄灭步骤st365的第六发光。此外，加热烹调器217也可以在st381后，自动熄灭。

(步骤st387)控制装置m1根据食谱方案，生成表示烹调者(孩子h3)结束了烹调的消息。此外，该消息也可以包括烹调者以及结束了烹调等。其后，进入步骤st388。

(步骤st388)控制装置m1将步骤st387中生成的消息向外部装置发送。此处，联络处是预先决定的地址，例如是母亲h2的邮件地址等。其后，进入步骤st389。

(步骤st389)外部装置接收步骤st388的消息。由此，例如母亲h2能够知道平安地结束了烹调。换句话说，控制系统1能够传递“放心”。其后，进入步骤st390。

(步骤st390)控制装置m1判定食谱方案全部结束。

此外，在上述各实施方式中，控制装置m1对作为各设备u1-n存在场所，以房间为基准实施管理的情况进行了说明(图14)。也可以取代该房间，或者除了该房间之外，使用车内。换句话说，例如，设备u1-n也可以基于存在于特定的车(使用者乘坐的车)的车内的情况，发送自发动作信息、通知信息。另外，控制装置m1也可以将家、大厦等作为基准进行管理，也可以基于比房间细微的位置信息进行管理。在这种情况下，控制装置m1也可以在与进行了检测的设备u1-n的相对的位置关系中，决定对象设备(进行动作的设备u1-n)。

此外，上述的实施方式的设备u1-n、控制装置m1、信息处理装置s1的一部分也可以具备于其他的设备以及装置。例如，控制装置m1的控制部m11、存储部m12以及通信部m13也可以具备于设备u1-n。另外，设备u1-n和控制装置m1的各部也可以定期或不定期地使程序、数据同步。

此外，也可以通过计算机实现上述的实施方式的设备u1-n，控制装置m1、信息处理装置s1的一部分。该情况下，也可以通过将用于实现该控制功能的程序记录于计算机能够读取的记录介质，并使计算机系统读入并执行记录于该记录介质的程序从而实现。此外，此处所说的“计算机系统”是内置于设备u1-n、控制装置m1以及信息处理装置s1的计算机系统，且包括os、周边设备等硬件。另外，“计算机能够读取的记录介质”是指软盘、磁光盘、rom、cd-rom等便携介质、内置于计算机系统的硬盘等存储装置。而且“计算机能够读取的记录介质”也可以包括：如经由因特网等网络、电话线路等通信线路而发送程序的情况下的通信线那样短时间、动态地保持程序的介质、如该情况下的成为服务器、客户端的计算机系统内部的易失性存储器那样，在一定时间保持程序的介质。而且上述程序可以用于实现上述的功能的一部分，进一步也可以通过与已经记录于计算机系统的程序的组合而能够实现上述的功能。

另外，也可以将上述的实施方式的设备u1-n、控制装置m1以及信息处理装置s1的一部分或者全部作为lsi(largescaleintegration)等集成电路而实现。设备u1-n、控制装置m1以及信息处理装置s1的各功能模块可以分别独立地处理器化，也可以将一部分或者全部集成而处理器化。另外，集成电路化的方法不局限于lsi，也可以通过专用电路或者通用处理器来实现。另外，在由于半导体技术的进步而出现了替代lsi的集成电路化的技术的情况下，也可以使用基于该技术的集成电路。

以上，参照附图对本发明的一实施方式详细地进行了说明，但具体的结构不局限于上述，在不脱离本发明的主旨的范围内能够进行各种设计变更等。

工业上的利用可能性

本发明的几个方式能够在需要家电等设备等令用户怀有情绪、唤起用户相对于设备等的共鸣的控制系统、动作决定装置、设备、控制方法以及控制程序等中应用。

符号说明

1...控制系统；210、220...家；230...医疗机构服务器；240...自治体服务器；250...企业服务器；219、219-1、219-2、219-3、229、260、270；...通信设备；280...汽车；30...因特网；211、221...机器人；222...路由器；213、223...冰箱；214、224...照明器材；215、225...电视；216、226...空调；217...加热烹调器；218...空气净化器；227...吸尘器；228...智能镜子；u1-n...设备；s1...信息处理装置；m1...控制装置；u11-n...传感器部；u12-n...动作部；u13-n...输入输出部；u14-n...控制部；u15-n...存储部；u16-n...通信部；s11...控制部；s12...存储部；s13...通信部；m11...控制部；m12...存储部；m13...通信部；l11～l16、l21、l31、l41～l43、l51、l61、l71、l72...发光部；u111-n...动作控制用传感器部；u112-n...环境检测用传感器部；u131-n...输入部；u132-n...显示部；u132-n...发光部；u133-n...声音输出部；u141-n...总体控制部；u142-n...动作控制部；u143-n...输出控制部；u151-n...设备控制信息存储部；u152-n...信息存储部以及登记信息存储部u153-n、s111...服务信息获取部；s112...信息对应部；s121...获取目的地信息存储部；s122...对应信息存储部；s123...获取历史存储部；m111...信息获取部；m112...解析部；m113...输出决定部；m114...序列控制部；m115...序列更新部；m121...信息存储部；m122...序列存储部；m123...通知信息存储部；m124...历史存储部。