电子笔、显示系统以及电子笔的控制方法与流程

本发明涉及电子笔、显示系统以及电子笔的控制方法。

背景技术：

公知有包含投影仪和遥控装置的投影仪系统，其中，该投影仪将图像投射到投射面上，该遥控装置用于对投影仪进行远程操作。在接收到来自遥控装置的启动信号时，这种投影仪启动(参照专利文献1)。

并且，公知有如下的显示系统：该显示系统检测用户使用电子笔等位置指定装置对投射图像进行的操作。这种显示系统具有：电子笔，其包含发出光的光源；以及相机，其对投射图像进行拍摄，该显示系统根据相机所拍摄到的图像来检测电子笔的发光(参照专利文献2)。

专利文献1：日本特开2006-162924号公报

专利文献2：日本特开2017-92849号公报

在投影仪的状态是消耗电力比正常动作时低的待机状态的情况下，通过对遥控装置或投影仪主体进行操作来执行待机状态的解除。即，在解除投影仪的待机状态的情况下，用户需要与电子笔分开地对遥控装置进行操作，由此导致使用方便性等易用性下降。

技术实现要素：

为了解决以上课题，本发明的优选方式的电子笔包含：通信部，其与通信对象设备进行通信；状态检测部，其检测由电子笔与通信对象设备之间的关系确定的电子笔的状态；以及控制部，其根据状态检测部所检测出的状态来变更通信部的动作。

附图说明

图1是实施方式的显示系统1的结构的示意图。

图2是构成显示系统1的各部分的功能框图。

图3是示出由电子笔10与投影仪100之间的关系确定的电子笔10的状态转变的说明图。

图4是用于说明电子笔10的动作的流程图。

图5是示出与电子笔10的状态对应的发光模式的例子的图。

图6是作为图2所示的电子笔10的变形例的电子笔12的功能框图。

标号说明

1：显示系统；10：电子笔；12：电子笔；20：通信部；22：受光部；24：发光部；30：状态检测部；40：控制部；50：操作检测部；60：操作部；64：尖端按钮；66：侧按钮；70：保持传感器；100：投影仪；200：位置检测装置；210：相机镜头；220：滤光器切换装置；222：可见光透过滤光器；224：红外光透过滤光器；230：图像传感器；240：第1处理装置；250：非易失性存储器；260：作业存储器；270：第1接口部；280：发光装置；300：投射装置；310：投射透镜；320：液晶面板；330：第2处理装置；340：第2接口部；350：受光装置。

具体实施方式

以下，参照附图对实施方式进行说明。另外，在附图中各部分的尺寸和比例尺与实际的适当不同。对本实施方式赋予了技术上优选的各种限定。但是，本发明的范围并不限于这些方式。

<第1实施方式>

以下，参照附图对实施方式的显示系统1进行说明。

图1是实施方式的显示系统1的主要部分的结构的示意图。实施方式的显示系统1包含电子笔10和将图像显示于屏幕sc的投影仪100。投影仪100是显示装置和通信对象设备的一例，屏幕sc是显示面和投射面的一例。显示面和投射面不限于屏幕，能够适当变更，例如，也可以是墙壁。

电子笔10是用户对屏幕sc进行指示的自发光指示体。电子笔10包含有在图2中说明的通信部20，根据由电子笔10与投影仪100之间的关系确定的电子笔10的状态来变更通信部20的动作。

电子笔10的状态包括同步状态和非同步状态，在同步状态下，电子笔10定期地接收使电子笔10的动作和投影仪100的动作同步的同步信号asl，在非同步状态下，未接收到同步信号asl的期间为规定时间以上。同步状态和非同步状态是由电子笔10与投影仪100之间的关系确定的电子笔10的状态的一例，同步信号asl是从投影仪100发送的信号的一例。投影仪100相对于电子笔10是通信对象设备。

投影仪100例如包含正常动作的正常工作模式和使消耗电力比正常工作模式低的待机模式。在正常工作模式下，投影仪100使用红外光，以比规定时间短的时间间隔来发送同步信号asl。在待机模式下，投影仪100停止发送同步信号asl。因此，在投影仪100的工作模式为正常工作模式的情况下，从投影仪100向电子笔10定期地发送同步信号asl。投影仪100的正常工作模式是第1模式的一例。投影仪100的待机模式是第2模式的一例。规定时间例如如后述那样被设定为比同步信号asl的周期tcy长的时间(参照图5)。

在图1所示的例子中，电子笔10根据电子笔10的状态来切换从前端发出的红外光的发光模式。例如，在电子笔10按照比规定时间短的时间间隔从投影仪100接收同步信号asl的情况下，即，在状态为同步状态的情况下，电子笔10与同步信号asl同步地输出指示体信号psl。指示体信号psl例如是使投影仪100检测屏幕sc上的电子笔10的位置的规定的发光模式的红外光。指示体信号psl是规定的模式的信号的一例。

在状态为非同步状态的情况下，电子笔10响应于用户对电子笔10的操作，使用与指示体信号psl不同的发光模式的红外光来输出解除投影仪100的待机模式的控制信号rcl。例如，控制信号rcl是基于遥控代码的发光模式的红外光，该遥控代码是用于远程操作投影仪100的遥控装置为了解除待机模式而使用的。因此，用户能够不使用遥控装置而使用电子笔10对投影仪100进行远程操作。控制信号rcl是指示使投影仪100的工作模式转变为正常工作模式的信号的一例。即，控制信号rcl的发光模式是指示对投影仪100的工作模式进行变更的发光模式的一例。

投影仪100包含：位置检测装置200，其检测屏幕sc上的电子笔10的位置；以及投射装置300，其向屏幕sc投射图像。

位置检测装置200定期地输出同步信号asl。位置检测装置200在以同步信号asl为基准的定时对屏幕sc进行拍摄，生成拍摄图像。例如，位置检测装置200在执行将投射到屏幕sc的投射图像与拍摄图像之间的位置对应起来的校准的情况下，根据位置检测装置200所接收到的可见光scl来生成拍摄图像。并且，位置检测装置200在对屏幕sc上的电子笔10的位置进行检测的情况下，对从电子笔10的前端发出的与同步信号asl同步的指示体信号psl进行拍摄而生成拍摄图像。位置检测装置200根据对指示体信号psl进行拍摄而得的拍摄图像来检测屏幕sc上的电子笔10的位置。

例如，在投影仪100的工作模式为待机模式的情况下，位置检测装置200停止同步信号asl的输出等动作。位置检测装置200在待机模式下从投射装置300接收到解除待机模式的指示时，结束待机模式，再次开始同步信号asl的输出。

投射装置300将投射图像光iml投射到屏幕sc上而将投射图像显示于屏幕sc。投射图像光iml是可见光。并且，投射装置300在从电子笔10接收到控制信号rcl的情况下，例如，执行投影仪100的启动或者待机模式的解除等处理，指示位置检测装置200输出同步信号asl。响应于同步信号asl的输出的指示，位置检测装置200输出同步信号asl。

这样，由于与待机模式的解除相伴地执行同步信号asl的发送，所以解除待机模式的指示也作为发送同步信号asl的指示来发挥功能。即，控制信号rcl也作为指示发送同步信号asl的信号来发挥功能，控制信号rcl的发光模式也作为指示发送同步信号asl的发光模式来发挥功能。

这样，本实施方式的电子笔10能够根据由电子笔10与投影仪100之间的关系确定的电子笔10的状态，将发出的信号切换为指示体信号psl和控制信号rcl中的任意信号。因此，能够提高使用电子笔10的系统的易用性。例如，用户可以不使用遥控装置而使用电子笔10将控制信号rcl发送到投影仪100。

图2是构成显示系统1的各部分的功能框图。即，图2是示出电子笔10、位置检测装置200以及投射装置300的各自结构的一例的图。显示系统1包含电子笔10和投影仪100，投影仪100包含位置检测装置200和投射装置300。

电子笔10包含：通信部20，其与投影仪100进行通信；状态检测部30，其检测电子笔10的状态；控制部40；以及操作检测部50。通信部20包含：受光部22，其从投影仪100接收同步信号asl；以及发光部24，其根据来自控制部40的指示而发光。发光部24是输出红外光的led(lightemittingdiode：发光二极管)等光源。例如，发光部24在基于来自控制部40的指示的发光模式下发出红外光，从而发送指示体信号psl和控制信号rcl中的任意信号。

状态检测部30检测通信部20对从投影仪100发送的同步信号asl的接收状态来作为电子笔10的状态。例如，状态检测部30通过检测是否处于受光部22未接收到同步信号asl的期间为规定时间以上的非同步状态来检测通信部20的接收状态。

控制部40根据状态检测部30所检测出的状态来变更通信部20的动作。例如，在电子笔10的状态为非同步状态的情况下，当后述的操作检测部50检测到针对电子笔10的操作时，控制部40使发光部24以指示解除投影仪100的待机模式的发光模式发光。即，在电子笔10的状态为非同步状态下指示投影仪100变更工作模式的情况下，控制部40使发光部24以指示解除待机模式的发光模式发光。因此，从电子笔10输出指示解除待机模式的发光模式的控制信号rcl。指示解除待机模式的发光模式例如是基于对投影仪100进行控制的遥控代码的发光模式。

并且，在受光部22接收到同步信号asl的情况下，即，在电子笔10的状态为同步状态的情况下，控制部40使发光部24在投影仪100检测电子笔10的位置的规定的发光模式下与同步信号asl同步地发光。由于从电子笔10输出与同步信号asl同步的指示体信号psl，所以电子笔10作为对屏幕sc进行指示的指示体来发挥功能。这样，控制部40根据状态检测部30所检测出的电子笔10的状态是否为非同步状态来切换发光部24所发出的光的发光模式。

操作检测部50检测针对电子笔10的操作并向控制部40通知检测结果。例如，操作检测部50检测设置于电子笔10的未图示的操作按钮是否被按下。操作检测部50在检测到电子笔10的操作按钮被按下的情况下，作为针对电子笔10的操作，向控制部40通知电子笔10的操作按钮被按下。

投影仪100的位置检测装置200包含相机镜头210、滤光器切换装置220、图像传感器230、第1处理装置240、非易失性存储器250、作业存储器260、第1接口部270以及发光装置280。

相机镜头210例如是能够对投射到屏幕sc的投射图像的整体进行拍摄的广角镜头。相机镜头210所会聚的可见光scl等光到达滤光器切换装置220。另外，除了可见光scl之外，在从电子笔10发出指示体信号psl的情况下，作为红外光的指示体信号psl也被相机镜头210会聚并到达滤光器切换装置220。

滤光器切换装置220包含：可见光透过滤光器222，其使可见光透过并遮挡红外光；以及红外光透过滤光器224，其使红外光透过并遮挡可见光。滤光器切换装置220根据位置检测装置200的工作模式来使用可见光透过滤光器222和红外光透过滤光器224中的任意滤光器。

例如，在位置检测装置200的工作模式是在投射图像与拍摄图像之间将位置对应起来的自动校准模式的情况下，滤光器切换装置220使用可见光透过滤光器222。因此，在自动校准模式下，相机镜头210所会聚的可见光scl到达图像传感器230。并且，在位置检测装置200的工作模式是检测电子笔10的位置的笔跟踪模式的情况下，滤光器切换装置220使用红外光透过滤光器224。因此，在笔跟踪模式下，相机镜头210所会聚的红外光的指示体信号psl到达图像传感器230。

图像传感器230例如是将光转换为电信号的ccd(chargecoupleddevice：电荷耦合器件)图像传感器、cmos(complementarymetaloxidesemiconductor：互补金属氧化物半导体)图像传感器等摄像元件。

第1处理装置240例如是对位置检测装置200的动作进行控制的cpu(centralprocessingunit：中央处理单元)等计算机。第1处理装置240可以具有1个或多个处理器。例如，第1处理装置240执行基于从投射装置300接收的指令的控制。并且，第1处理装置240对从图像传感器230接收的电信号进行处理而生成拍摄图像。然后，在位置检测装置200的工作模式为自动校准模式的情况下，第1处理装置240将表示使用了投射图像和拍摄图像的校准结果等的校准数据储存到非易失性存储器250中。并且，在位置检测装置200的工作模式为笔跟踪模式的情况下，第1处理装置240将表示根据拍摄图像而检测出的电子笔10的位置的检测位置坐标经由第1接口部270发送到投射装置300。

非易失性存储器250对校准数据等信息进行保持。作业存储器260在对图像进行处理时使用，例如包含帧存储器和容量比帧存储器小的高速的行存储器。例如，帧存储器是能够对1帧的图像数据进行保持的dram(dynamicrandomaccessmemory：动态随机存取存储器)等，行存储器是能够对1行的图像数据进行保持的sram(staticrandomaccessmemory：静态随机存取存储器)等。

第1接口部270例如是依据usb(universalserialbus：通用串行总线)、uart(universalasynchronousreceivertransmitter：通用异步收发器)等标准的接口，对指令、检测位置坐标等信息进行收发。

发光装置280包含输出红外光的led等光源，通过发出红外光来发送同步信号asl。另外，例如，在投影仪100的工作模式为待机模式的情况下，第1处理装置240的一部分功能、滤光器切换装置220、图像传感器230以及发光装置280等停止动作。即，在投影仪100的工作模式为待机模式的情况下，位置检测装置200停止同步信号asl的发送。由于不发送同步信号asl，所以电子笔10停止与同步信号asl同步的指示体信号psl的发送。

在解除了待机模式的情况下，位置检测装置200再次开始同步信号asl的发送。例如，第1处理装置240在从投射装置300经由第1接口部270接收到指示解除待机模式的指令的情况下，使发光装置280发送同步信号asl。因此，与受光部22所接收的同步信号asl同步地，电子笔10再次开始发送指示体信号psl。

投射装置300包含投射透镜310、液晶面板320、第2处理装置330、第2接口部340以及受光装置350。

投射透镜310是对从液晶面板320接收的投射图像光iml进行投射的透镜。液晶面板320例如对投射图像进行控制。在投影仪100的工作模式为待机模式的情况下，液晶面板320也可以停止动作。

第2处理装置330例如是对投影仪100的动作进行控制的cpu等计算机。第2处理装置330可以具有1个或多个处理器。并且，第2处理装置330对液晶面板320进行控制而将图像投射到屏幕sc上。

第2处理装置330执行受光装置350所接收到的信号的解码，并根据解码的结果对投影仪100的动作进行控制。例如，在受光装置350从电子笔10接收到控制信号rcl的情况下，第2处理装置330经由第2接口部340将指示解除待机模式的指令发送到位置检测装置200。这样，第2处理装置330经由第2接口部340将控制位置检测装置200的指令等发送到位置检测装置200。受光装置350是从遥控装置接收控制信号的接收部，能够接收基于遥控代码的发光模式的红外光。

并且，例如，第2处理装置330根据经由第2接口部340从位置检测装置200接收的检测位置坐标而在液晶面板320上描绘电子笔10的轨迹。因此，描绘在液晶面板320上的电子笔10的轨迹被投射到屏幕sc上。即，在位置检测装置200的工作模式为笔跟踪模式的情况下，投影仪100能够将电子笔10的轨迹描绘在投射图像上。以下，也将位置检测装置200的工作模式为笔跟踪模式的情况下的投影仪100的工作模式称为笔描绘模式。笔描绘模式包含在正常工作模式中。即，笔描绘模式是第1模式的一例。

第2接口部340例如是依据usb、uart等标准的接口，对指令等进行收发。受光装置350接收从电子笔10发出的控制信号rcl。例如，受光装置350接收基于遥控代码的发光模式的红外光，该遥控代码被使用在用于远程操作投影仪100的遥控装置中。这样，投射装置300能够响应于从电子笔10发出的控制信号rcl而解除投影仪100的待机模式。因此，能够提高使用电子笔10的投影仪100的易用性。

图3是示出由电子笔10与投影仪100之间的关系确定的电子笔10的状态转变的说明图。图3所示的括号内的模式示出了与电子笔10的状态对应的投影仪100的工作模式的一例。

电子笔10的状态根据与投影仪100之间的关系而被确定为同步状态和非同步状态中的任意状态。在电子笔10从位置检测装置200接收到同步信号asl的情况下，电子笔10的状态是同步状态。电子笔10的同步状态与投影仪100的笔描绘模式对应。例如，在操作检测部50检测到针对电子笔10的操作的情况下，同步状态的电子笔10发出指示体信号psl。从电子笔10发出的指示体信号psl经由位置检测装置200的相机镜头210和红外光透过滤光器224而到达图像传感器230。这样，在同步状态下，从电子笔10发出的指示体信号psl到达位置检测装置200的图像传感器230，由此实现了电子笔10的位置通知、电子笔10的描绘以及电子笔10的悬停。

电子笔10在从接收到同步信号asl起经过了规定时间也未接收到下一个同步信号asl的情况下，从同步状态转变为非同步状态。即，在电子笔10的通信部20未接收到同步信号asl的期间为规定时间以上的情况下，电子笔10的状态是非同步状态。

电子笔10的非同步状态与投影仪100的待机模式对应。例如，在操作检测部50检测到针对电子笔10的操作的情况下，非同步状态的电子笔10发出控制信号rcl。从电子笔10发出的控制信号rcl到达投射装置300的受光装置350。因此，第2处理装置330根据受光装置350所接收到的控制信号rcl来解除待机模式。当投影仪100的待机模式被解除时，从位置检测装置200发送同步信号asl。接收到同步信号asl的电子笔10从非同步状态转变为同步状态。

图4是用于对电子笔10的动作进行说明的流程图。另外，图4所示的动作是电子笔10的控制方法的一例。

在步骤s100中，控制部40判定状态检测部30所检测出的电子笔10的状态是否为同步状态。在电子笔10的状态是同步状态的情况下，电子笔10的动作转移到步骤s200。另一方面，在电子笔10的状态不是同步状态的情况下，即，在电子笔10的状态是非同步状态的情况下，电子笔10的动作转移到步骤s300。

在步骤s200中，控制部40使发光部24发出指示体信号psl。通过使发光部24发出指示体信号psl，电子笔10能够实现位置通知、描绘、悬停等。

在步骤s300中，控制部40判定操作检测部50是否检测出针对电子笔10的操作。在操作检测部50检测出针对电子笔10的操作的情况下，即，在对投影仪100指示解除待机模式的情况下，电子笔10的动作转移到步骤s320。另一方面，在操作检测部50未检测到针对电子笔10的操作的情况下，电子笔10的动作返回到步骤s100。

在步骤s320中，控制部40使发光部24发出控制信号rcl。投影仪100在接收到控制信号rcl时，解除待机模式。当投影仪100的待机模式被解除时，从投影仪100的位置检测装置200向电子笔10发送同步信号asl。其结果是，电子笔10的状态从非同步状态转变为同步状态。

图5是示出与电子笔10的状态对应的发光模式的例子的图。图5所示的星形标记表示用户执行了针对电子笔10的操作的定时(即，操作检测部50检测出针对电子笔10的操作的定时)。

从位置检测装置200按照规定的周期tcy发送同步信号asl。电子笔10在从位置检测装置200按照规定的周期tcy接收到同步信号asl的同步状态下，与同步信号asl同步地发出指示体信号psl。在图5所示的例子中，在将同步信号asl的周期tcy分成4个而得的期间中，在后半部的两个期间中红外光作为指示体信号psl来发光。

在电子笔10从接收到同步信号asl起经过了规定时间也没有接收到下一个同步信号asl的情况下，电子笔10的状态从同步状态转变为非同步状态。规定时间被设定为比同步信号asl的周期tcy长的时间。

在非同步状态的情况下，当电子笔10检测到针对电子笔10的操作时，发出控制信号rcl。例如，电子笔10发出按照38khz调制后的遥控代码的红外光来作为控制信号rcl。因此，电子笔10能够执行投影仪100的启动、投影仪的待机模式的解除等。接收到控制信号rcl的投影仪100再次开始同步信号asl的发送。

这样，在本实施方式的显示系统1中，在投影仪100的工作模式为笔描绘模式等正常工作模式的情况下，按照比规定时间短的时间间隔的周期tcy从投影仪100发送同步信号asl。并且，在投影仪100的工作模式为待机模式的情况下，不从投影仪100发送同步信号asl。

因此，在处于通信部20未接收到同步信号asl的期间比规定时间短的状态的情况下，电子笔10的控制部40使通信部20与同步信号asl同步地发送指示体信号psl。并且，在通信部20未接收到同步信号asl的期间为规定时间以上的状态下、操作检测部50检测到针对电子笔10的操作的情况下，电子笔10的控制部40使通信部20发送控制信号rcl。电子笔10能够根据由其与投影仪100之间的关系确定的电子笔10的状态来变更通信部20的动作，因此能够提高显示系统1的易用性。

<变形例>

以上所例示的各方式可进行多种变形。以下，例示了具体的变形方式。从以下的例示中任意选择的两种以上方式可在不相互矛盾的范围内适当合并。

<变形例1>

图6是作为图2所示的电子笔10的变形例的电子笔12的功能框图。另外，对与在图2中说明的要素相同或同样的要素赋予相同的标号，并省略详细的说明。关于电子笔12，除了在图2所示的电子笔10中追加了操作部60和保持传感器70之外，其他部分与电子笔10相同或同样。例如，电子笔12包含通信部20、状态检测部30、控制部40、操作检测部50、操作部60以及保持传感器70。

操作部60包含供电子笔12的用户操作的尖端按钮64和侧按钮66。根据电子笔12的状态将不同的处理分配给操作部60。

尖端按钮64例如设置于电子笔12的前端部分。例如，在电子笔12的状态为同步状态的情况下，在按下尖端按钮64时分配相当于鼠标的左点击的处理。并且，在电子笔12的状态为非同步状态的情况下，在按下尖端按钮64时分配指示解除投影仪100的待机模式的处理。

侧按钮66例如是代替鼠标的右点击等而使用的。在使用侧按钮66来代替鼠标的右点击的情况下，在电子笔12的状态为同步状态下按下侧按钮66时分配相当于鼠标的右点击的处理。另外，在电子笔12的状态为非同步状态的情况下，在按下侧按钮66时分配指示解除投影仪100的待机模式的处理。

这样，根据电子笔12的状态对尖端按钮64和侧按钮66分别分配不同的处理。另外，尖端按钮64和侧按钮66各自的按下可通过操作检测部50来检测。即，操作检测部50通过检测尖端按钮64和侧按钮66各自的按下来检测针对电子笔12的操作。

保持传感器70是对用户拿着电子笔12的情况做出反应的传感器。例如，保持传感器70是压力传感器、加速度传感器等。保持传感器70的检测结果被通知给操作检测部50。因此，操作检测部50能够根据保持传感器70的检测结果来检测针对电子笔12的操作。

然后，控制部40根据操作检测部50所检测出的操作和状态检测部30所检测出的电子笔12的状态的组合来确定通信部20的动作。因此，例如，在电子笔12的状态为非同步状态并且保持传感器70按照预先确定的阈值的时间持续进行反应的情况下，控制部40使通信部20发送指示解除投影仪100的待机模式等的控制信号rcl。

例如，在没有使用电子笔12而投影仪100的工作模式转变为待机模式的情况下，用户能够通过拿起电子笔12来解除投影仪100的待机模式。并且，在保持传感器70为加速度传感器的情况下，用户能够利用手势来移动电子笔12，从而解除投影仪100的待机模式。或者，用户通过按下电子笔12的尖端按钮64和侧按钮66中的任意按钮，能够解除投影仪100的待机模式。因此，能够提高显示系统1的易用性。

<变形例2>

在上述实施方式中，使用红外光来发送同步信号asl、指示体信号psl和控制信号rcl，但同步信号asl、指示体信号psl和控制信号rcl并不限定于红外光。例如，也可以使用红外光以外的可见区域外的光来发送同步信号asl、指示体信号psl和控制信号rcl。并且，也可以通过电波来发送同步信号asl。在该情况下，位置检测装置200包含电波的发送装置来代替发光装置280，通信部20包含电波的接收部来代替受光部22。

<变形例3>

在上述实施方式中，作为控制信号rcl的发光模式，使用了基于遥控代码的发光模式，但控制信号rcl的发光模式并不限定于基于遥控代码的发光模式。例如，作为控制信号rcl的发光模式，也可以使用基于遥控代码的发光模式以外的发光模式。

<变形例4>

在上述实施方式中，作为控制信号rcl，例示了指示投影仪100解除待机模式的信号，但控制信号rcl并不限定于指示解除投影仪100的待机模式的信号。例如，控制信号rcl可以是指示投影仪100的启动的信号，也可以是指示同步信号asl的发送的信号。

<变形例5>

在上述实施方式中，示出了电子笔10被使用在包含1台投影仪100的显示系统1中的例子，但使用电子笔10的系统并不限定于包含投影仪100的显示系统1。例如，电子笔10也可以使用在并排使用了两台投影仪100的显示系统中。

<变形例6>

状态检测部30、控制部40以及操作检测部50的各功能的全部或者一部分别可以通过由cpu等执行的软件来实现，也可以以硬件的方式通过fpga(fieldprogrammablegatearray：现场可编程门阵列)或asic(applicationspecificic：专用集成电路)等电子电路来实现。或者，状态检测部30、控制部40以及操作检测部50的各功能的全部或者一部分可以分别通过软件和硬件的协同动作来实现。

<变形例7>

通过使第1处理装置240和第2处理装置330中的至少一方读取并执行程序而实现的要素的全部或者一部分例如可以以硬件的方式通过fpga或asic等电子电路来实现，也可以通过软件和硬件的协同动作来实现。