1.本发明涉及无线连接系统、信息终端以及显示装置等技术。
背景技术:2.以往,有在用户佩戴或者携带的头戴式显示器(hmd)、可穿戴终端、智能手机或者平板终端等信息终端、与设置于环境内的平板终端或者电视装置等显示装置之间,进行无线连接的情况。特别地,在价格低廉的显示装置增加的情况下,设想在包括店铺、公共空间、交通工具内等的环境内设置大量的显示装置。还设想在该环境内,不特定的多个用户的多个信息终端和多个显示装置以多对多的关系进行无线连接的场景。例如,在餐馆等店铺内,在桌子上准备平板终端等显示装置。作为顾客的用户将自己的信息终端无线连接到所选择的显示装置,利用菜单等的显示、商品或服务的预订、以及结算等功能。
3.作为现有技术例,可以举出日本特开2010-136238号公报(专利文献1)。在专利文献1中,记载了提供使将通信机器彼此相互作为通信对方而辨识/存储的处理对于用户简便化,而能够使市场中的通信机器彼此的协作功能及其利用度大幅发展的通信机器的内容以及以下的内容。该通信机器存储可无线通信的通信机器的识别信息,从处于可通信区域的通信机器接收识别信息,在开始无线通信时,根据接收到的识别信息、以及存储的识别信息,提示此时可通信的通信机器的列表,从提示的列表受理通信机器的选择,开始与选择的通信机器的无线通信。另外,该通信机器对包括通信机器的识别信息的条形码进行摄像,从该条形码信息取得通信机器的识别信息。
4.现有技术文献
5.专利文献
6.专利文献1:日本特开2010-136238号公报
技术实现要素:7.如上所述,存在如下需求:在环境内,各用户希望将自己的信息终端无线连接到多个显示装置中的期望的显示装置来利用显示功能等。在这样的场景中,在多个信息终端和多个显示装置的多对多的关系中,各信息终端以及各显示装置需要在与被选择并许可的对方之间,适合且安全地进行无线连接。由于是无线连接,所以有在从某个用户的信息终端起电波可到达的范围内存在多个显示装置的情况、在从某个显示装置起电波可到达的范围内存在多个信息终端的情况。另外,存在与在从某个用户的信息终端观察时不在眼前的对象外的显示装置无线连接的可能性、与在从某个显示装置观察时不在眼前的对象外的信息终端无线连接的可能性。如果在多个对多个的装置之间无限制地许可无线连接,则在安全性、资源等观点上存在课题,所以需要使用认证来限制或控制无线连接。
8.以往,在bluetooth(蓝牙,注册商标)、wi-fi(注册商标)等无线通信接口中,为了进行安全的无线连接,需要利用认证用识别信息(认证用id)。在例如bluetooth的情况下,使用被称为密钥(或者密码等)的规定的认证用id。在例如wi-fi的情况下,使用如ssid以及
口令的规定的认证用id。在说明上,将这些密钥等总称为认证用id。
9.然而,在将例如hmd那样的信息终端(换言之具有无线通信功能的无线设备)与显示装置无线连接的情况下,设置于信息终端的信息输入单元受限,所以有时用户输入认证用id比较麻烦甚至困难。例如,以往一般的hmd未具备键盘、触摸面板等输入设备。
10.本发明的目的在于,关于将用户的信息终端和显示装置无线连接的技术,提供一种在无线连接时能够降低用户输入认证用信息的输入操作的工夫,即使在多对多的环境下也能够在期望的信息终端与显示装置之间适合且安全地实现无线连接的技术。
11.本发明中的代表性的实施方式具有以下所示的结构。一个实施方式的无线连接系统是在用户佩戴或者携带的信息终端与设置于环境内的显示装置之间进行无线连接的无线连接系统,其中,所述显示装置在检测到存在于附近的所述信息终端的情况下,将与用于与检测到的所述信息终端的无线连接的认证相关的设备识别信息或者对所述设备识别信息进行代码化而得到的图像,显示于显示画面,在与所述信息终端之间使用用于所述无线连接的认证用id来确立所述无线连接,所述信息终端读取所述显示装置的显示画面的所述设备识别信息或者所述图像,确认读取的所述设备识别信息是否与本设备的设备识别信息一致,在确认所述一致后,在与所述显示装置之间使用用于所述无线连接的所述认证用id来确立所述无线连接。
12.根据本发明中的代表性的实施方式,关于将用户的信息终端和显示装置无线连接的技术,在无线连接时能够降低用户输入认证用信息的输入操作的工夫,即使在多对多的环境下也能够在期望的信息终端与显示装置之间适合且安全地实现无线连接。
附图说明
13.图1是示出本发明的实施方式1的无线连接系统的结构的图。
14.图2是示出实施方式1的无线连接方法中的环境例以及手续概要的图。
15.图3是示出在实施方式1中信息终端(hmd)的外观结构例的图。
16.图4是示出在实施方式1中信息终端的功能块结构例的图。
17.图5是示出在实施方式1中显示装置的功能块结构例的图。
18.图6是示出在实施方式1中信息终端和显示装置的处理序列的图。
19.图7是示出在实施方式1中设备列表画面的例子的图。
20.图8是示出在实施方式1中代码画面的例子的图。
21.图9是示出本发明的实施方式1的无线连接系统以及方法中的信息终端和显示装置的处理序列的图。
22.图10是示出在实施方式2中设备列表画面的例子的图。
23.图11是示出在实施方式2中利用信息终端(hmd)的显示例的图。
24.图12是示出本发明的实施方式3的无线连接系统以及方法中的信息终端和显示装置的处理序列的图。
25.图13是示出在实施方式2中设备代码列表画面的例子的图。
26.图14是示出本发明的实施方式4的无线连接系统以及方法中的信息终端和显示装置的处理序列的图。
27.图15是示出在实施方式2中代码画面的例子的图。
28.(符号说明)
29.1、t1、t2、t3、tm:信息终端;1a:hmd;1b:智能手机;2、d1、d2、dn:显示装置;11:显示面;12:照相机;20:显示画面;22:照相机;u1、u2、u3、um:用户。
具体实施方式
30.以下,根据附图,详细说明本发明的实施方式。此外,在全部附图中对同一部分原则上附加同一符号,省略反复的说明。
31.(实施方式1)
32.使用图1~图8,说明本发明的实施方式1的无线连接系统以及方法等。
33.[无线连接系统]
[0034]
图1示出实施方式1的无线连接系统的结构。如图1的上侧所示,实施方式1的无线连接系统在某个环境内具有多个(设为m)用户的多个(m)信息终端1、和多个(设为n)显示装置2。该系统是能够进行多对多、即多个(m)信息终端1与多个(n)显示装置2之间的无线连接的系统。该无线连接系统在用户的信息终端1与用户选择的显示装置2之间,伴随认证来进行无线连接。
[0035]
在该无线连接系统中,在环境内的不特定的多个(m)对多个(n)装置之间,基本上以自由的组合,针对每个用户许可期望的1台信息终端与1台显示装置之间的无线连接。该无线连接系统中的认证(包括设备检查)是用于在这些多个对多个的装置之间将用户的期望的1台信息终端和1台显示装置适合并且简便地无线连接的认证。
[0036]
以用户u1、u2、u3、
……
、um表示多个(m)用户。用信息终端t1、t2、t3、
……
、tm表示多个(m)信息终端1。用显示装置d1、d2、
……
、dn表示多个(n)显示装置2。信息终端1的数量m和显示装置2的数量n也可以不同,m≥1、n≥1。此外,1台信息终端1和多个(n)显示装置2的一对多的场景、多个(m)信息终端1和1台显示装置2的多对一的场景也在本系统以及方法的可应用范围内。
[0037]
例如,在店铺等的环境内,设置有许可由认证已成功的用户以及信息终端1利用的多个(n)显示装置2。用户佩戴或者携带例如hmd1a等信息终端1。此外,也可以在店铺等的环境内对用户临时地提供信息终端1。
[0038]
该无线连接系统具有如下构造:在环境内,针对某个用户的信息终端1,能够将在多个显示装置2中处于用户的眼前的期望的选择的显示装置2、和该信息终端1简单并可靠地无线连接。在该系统中,即使在信息终端1是hmd等的情况下,用户输入认证用id的输入操作的工夫也被降低,能够提供用户的便利性高的简便的方式。另外,在该系统中,即使在环境内成为连接候补的大量的装置相互存在的情况下,也能够在期望的信息终端1与显示装置2之间适合地无线连接,防止未意图的装置之间的无线连接,提高安全性。用户能够在信息终端1和显示装置2的无线连接确立后,利用显示装置2的显示功能等。
[0039]
在图1的下侧,示出一名用户的1台信息终端1(例如hmd1a)与1台显示装置2之间的无线连接的概要。关于用户的信息终端1,典型地对应于hmd1a(包括智能眼镜等)、智能手机1b等,但不限于此。显示装置2典型地是平板终端,但不限于此。
[0040]
信息终端1以及显示装置2具备无线通信功能。无线通信功能特别是与环境对应的近距离或者中距离的无线通信功能,作为无线通信接口使用例如bluetooth(注册商标)。显
示装置2除了显示功能以外,还具有检测附近的信息终端1的功能。例如,显示装置2能够通过使用具备的无线通信功能检测信息终端1发出的信标(无线信号),检测附近的信息终端1。或者,显示装置2也可以使用照相机22、其他传感器,检测附近的信息终端1。信息终端1具有能够读取显示于显示装置2的显示画面20的图像或信息的功能。例如,信息终端1从使用具备的照相机12对显示画面20进行摄像而得到的图像,辨识显示画面20内的图像或信息。
[0041]
用户在例如佩戴hmd1a的状态下,观察显示装置2的显示画面20。显示装置2在检测到在附近出现的信息终端1的情况下,在显示画面20上,显示用于与检测到的信息终端1的无线连接的认证用信息。认证用信息将后述,是设备名或认证用id等预定的信息、且是能够从信息终端1侧读取的图像。特别地,将与无线通信接口对应的密钥等认证用id作为代码化的图像显示于显示画面20。
[0042]
用户经由信息终端1观察显示画面20的认证用信息。信息终端1读取显示画面20的认证用信息,使用包含于认证用信息的设备名(设备识别信息),进行与本设备和对方的显示装置2的无线连接是否适合有关的设备检查。信息终端1从与本设备名对应起来的代码图像通过译码取得认证用id。信息终端1使用该认证用id,确立与显示装置2的无线连接。
[0043]
此外,信息终端1与显示装置2之间的无线连接后的动作没有限定。信息终端1能够与显示装置2进行通信,利用显示装置2的显示功能等功能。例如,用户在店铺内将信息终端1无线连接到期望的显示装置2之后,能够阅览显示于显示装置2的显示画面20的动画等。反过来说,还可以说显示装置2能够利用被无线连接的信息终端1的功能。另外,在由用户利用后,信息终端1与显示装置2之间的无线连接被解除。另外,信息终端1在例如是hmd1a的情况下,能够以与显示装置2的显示画面20的显示符合的方式,在显示面11上显示增强现实(ar)的图像等。
[0044]
[无线连接方法]
[0045]
图2示出实施方式1的无线连接方法的概要。在图2的上侧,作为环境的例子,示出存在3台信息终端1和3台显示装置2的3对3的关系的情况。例如,设为用户u1希望将自己的信息终端t1无线连接到期望的显示装置d1。设为用户u2希望将自己的信息终端t2无线连接到期望的显示装置d3。设为用户u3仅为路过,对任意的显示装置2都不进行无线连接。
[0046]
此外,作为应用,并不是关于全部用户的信息终端1以及显示装置2都无限制地许可无线连接的结构,而是还能够为仅许可特定的用户的信息终端1与特定的显示装置2之间的无线连接的结构。该结构能够经由认证的设定控制。例如,能够实现用户u1的信息终端t1、用户u2的信息终端t2无法无线连接到显示装置d2,其他种类的用户的信息终端1能够无线连接到显示装置d2这样的控制。
[0047]
实施方式1的无线连接方法中的手续的概要如以下所述。在步骤s1中,显示装置2通过任意的检测单元,检测在环境内存在于本机的附近的信息终端1以及用户。例如,显示装置2通过照相机21,检测处于前方的范围内的信息终端1以及用户。详细而言,例如,显示装置2也可以检测佩戴hmd1a的用户处于本机之前的状态。例如,设为显示装置d1、显示装置d3分别检测到信息终端t1、信息终端t2。另外,此时,显示装置2检测具有可无线连接的功能的信息终端1(换言之无线设备),取得该检测到的信息终端1的设备名等信息。
[0048]
在步骤s2中,显示装置2在显示画面20上,显示检测到的信息终端1、换言之成为无线连接候补的无线设备的信息。详细而言,显示装置2将包括上述检测到的1台以上的信息
终端1的各信息的列表,作为设备列表显示于显示画面20。详细将后述,此时的显示信息例如包括设备名或者设备地址。例如,显示装置d1显示与检测到的信息终端t1以及信息终端t2有关的各信息。显示装置d3也进行同样的动作。
[0049]
在步骤s3中,用户视觉辨认并确认显示装置2的显示画面20的列表的信息,从该列表选择操作与自己的信息终端1的设备名对应的项目。
[0050]
在步骤s4中,显示装置2在显示画面20上显示对与进行了选择操作的信息终端1有关的认证用id进行代码化而得到的图像(代码图像)。详细将后述,此时显示的代码图像例如是对所选择的设备名、和显示装置2侧生成的密钥进行代码化而得到的图像。代码能够应用例如qr(quick response,快速响应)(注册商标)代码,但不限于此。
[0051]
在步骤s5中,信息终端1通过照相机12读取显示于用户的期望的所选择的显示装置2的显示画面20的代码图像,取得认证用信息。详细而言,信息终端1通过译码从上述代码图像提取设备名和密钥。此外,此时,用户使信息终端1(例如hmd1a)的照相机12朝向该显示装置2的显示画面20即可,不需要认证用id等的输入操作。例如,用户u1的信息终端t1辨识显示装置d1的显示信息。同样地,用户u2的信息终端t2辨识显示装置d3的显示信息。
[0052]
另外,信息终端1进行上述提取而得到的设备名是否与本设备的设备名一致的设备检查处理。在一致的情况下,意味着确认该信息终端1和对方的显示装置2的一对一的关系下的无线连接适合。信息终端1在设备检查中确认适合性之后,对本设备设定上述密钥。
[0053]
在步骤s6中,信息终端1使用认证用信息(特别是设备识别信息),确认本设备和对方的显示装置2的无线连接的适合性(后述设备检查)。在确认后,信息终端1使用密钥确立本设备和显示装置2的无线连接,显示装置2使用密钥确立与该信息终端1的无线连接。
[0054]
[信息终端(hmd)-外观]
[0055]
图3示出作为信息终端1是hmd1a的情况下的外观结构例。hmd1a在眼镜型的框体10中,具备显示面11、照相机12、测距传感器14、传感器部15、麦克风16、扬声器17等。显示面11是与两眼的位置对应的透射型显示面。照相机12包括例如右侧照相机12r、左侧照相机12l。另外,如图所示,也可以对hmd1a作为输入单元附设如遥控器的操作器19。操作器19与hmd1a的主体进行无线通信。
[0056]
[信息终端(hmd)-功能块]
[0057]
图4示出作为信息终端1是hmd1a的情况下的功能块结构例。作为信息终端1的hmd1a具备处理器101、存储器102、照相机12、测距传感器14、传感器部15、显示部150、通信部160、声音输入装置181、声音输出装置182、操作输入部183、电池184等,它们用总线等相互连接。处理器101由cpu、rom、ram等构成,与控制hmd1a的整体的控制器相当。存储器102由ram、存储设备等构成,储存控制程序131、应用程序132、设定信息133、显示信息134、认证用信息135等信息、数据。照相机12拍摄外界的图像而取得图像数据。测距传感器14测定与外界的物体的距离。传感器部15包括各种传感器,包括例如加速度传感器141、陀螺传感器142、地磁传感器143、gps接收器144。显示部150是包括显示面11、显示驱动电路、以及光学系统等的显示设备。通信部160包括与各种通信接口对应的通信设备。通信部160详细而言包括近距离通信部、和远距离通信部。近距离通信部在本例子中,作为无线通信接口与bluetooth对应。远距离通信部与例如移动网络、无线lan等无线通信接口对应。声音输入装置181包括上述麦克风16。声音输出装置182包括上述扬声器17。操作输入部183包括设置于
框体10的按钮等。或者,操作输入部183也可以是包括与操作器19的无线通信接口的部分。电池184对各部供给电力。
[0058]
信息终端1通过处理器101根据控制程序131等执行处理,实现各功能。各功能包括进行后述的流程的处理的功能。各功能包括后述设备检查、照相机图像解析、qr代码的译码等功能。
[0059]
设定信息133是与功能相关的系统设定信息、用户设定信息。显示信息134是用于显示于显示面11的数据。认证用信息135是本设备的设备识别信息(设备名、设备地址)、从显示装置2取得的认证用id(密钥)等信息。
[0060]
[显示装置-功能块]
[0061]
图5示出显示装置2的功能块结构例。显示装置2具备处理器201、存储器202、照相机22、测距传感器24、传感器部25、显示部250、通信部260、声音输入装置281、声音输出装置282、操作输入部283、电池284等,它们用总线等相互连接。处理器201由cpu、rom、ram等构成,与控制显示装置2的整体的控制器相当。存储器202由ram、存储设备等构成,储存控制程序231、应用程序232、设定信息233、显示信息234、认证用信息235等信息、数据。照相机22拍摄外界的图像而取得图像数据。测距传感器24测定与外界的物体的距离。传感器部25包括各种传感器,包括例如加速度传感器241、陀螺传感器242、地磁传感器243、gps接收器244。传感器部25也可以包括接近传感器等。显示部250是包括显示画面20、显示驱动电路等的显示设备,例如是触摸面板。通信部260包括与各种通信接口对应的通信设备。通信部260详细而言包括近距离通信部、和远距离通信部。近距离通信部与例如bluetooth对应。远距离通信部与例如移动网络、无线lan等无线通信接口对应。声音输入装置281包括麦克风。声音输出装置282包括扬声器。操作输入部283包括设置于框体的按钮等。操作输入部283也可以包括键盘等。在该情况下,由用户实施的文字输入变得容易。电池284对各部供给电力。对显示装置2也可以附设如遥控器那样的操作器。
[0062]
显示装置2通过处理器201根据控制程序231等执行处理,实现各功能。各功能包括进行后述的流程的处理的功能。各功能包括后述设备检查、用户检测、设备检测、密钥生成、qr代码生成等功能。
[0063]
设定信息233是与功能相关的系统设定信息、用户设定信息。显示信息234是用于显示于显示画面20的数据。认证用信息235是从信息终端1检测的设备识别信息、生成的认证用id(密钥)等信息。
[0064]
[无线通信接口]
[0065]
在实施方式1中,作为信息终端1与显示装置2之间的无线连接的无线通信接口,应用bluetooth。在该情况下,作为认证用id,使用bluetooth标准中的密钥。此外,作为无线通信接口,也可以应用wi-fi。在该情况下,作为认证用id,使用wi-fi标准中的ssid以及口令。该无线连接系统能够同样地应用与应用的无线通信接口对应的认证用id。
[0066]
[处理流程(1)]
[0067]
图6示出实施方式1的无线连接系统以及方法中的包括信息终端1(例如hmd1a)与显示装置2之间的通信的处理序列、以及各装置的处理流程。图6具有包括信息终端1的步骤s100、s101、
……
、s105的流程、和包括显示装置2的步骤s200、s201、
……
、s211的流程。
[0068]
在步骤s200中,显示装置2使用照相机22、传感器部25等,检测存在于附近的用户。
显示装置2在例如用户来到显示画面20前附近的情况下对其进行检测。此外,还能够是省略步骤s200的方式。显示装置2在检测到用户的情况(y,是)下进入到步骤s201。此外,该用户检测也可以成为用户按压设置于显示装置2的操作输入部283的硬件按钮等的操作、或者触摸作为显示部250的触摸面板的操作、或者按压显示画面20内的特定的软件按钮(gui部件)的操作等的检测。
[0069]
在步骤s201中,显示装置2使用通信部260(图5)或者照相机22、传感器部25等,检测作为存在于附近的无线设备的信息终端1。该无线设备检测是指接收并检测例如信息终端1发出的信标(无线信号)。该信标具有信息终端1的设备名或者设备地址等信息(在说明上有时记载为“设备识别信息”)。在本例子中,在步骤s201中,显示装置2根据来自信息终端1的信标,取得该信息终端1的设备名和设备地址的组的信息。此外,作为其他检测单元,显示装置2也可以从照相机22的拍摄图像,根据解析判断以及检测无线设备。
[0070]
在步骤s202中,显示装置2使用在步骤s201中检测以及取得的信息,在显示画面20上显示如下述的设备列表。
[0071]
[画面例(1)]
[0072]
图7示出在步骤s202中在显示装置2的显示画面20上显示设备列表时的画面例。该画面700是无线连接菜单画面中的设备列表画面。该画面700包括“无线连接”菜单显示701、“检测到设备”消息显示702、以及“可使用的设备”显示703。“可使用的设备”显示703包括设备列表显示。在该设备列表中,作为例子,作为与在该显示装置2的附近检测到3个无线设备即信息终端1(例如图1、图2的信息终端t1、t2、t3)的情况对应的3个设备信息项目,包括项目711、712、713。在各设备信息项目中,显示设备名704。该设备名704是用户观察而可识别信息终端1的形式的字符串等信息。显示于设备信息项目的设备名704不限于此,只要是用户观察而可识别的形式,也可以成为设备地址等其他信息。
[0073]
例如,设为项目711的设备名704(“phone_apl”)是信息终端t2的设备名,项目712的设备名704(“max-hmd01”)是信息终端t1的设备名,项目713的设备名704(“ar glass lite”)是信息终端t3的设备名。在图7中,为了在说明上使对应关系易于理解,在设备信息项目中,还记载对应的信息终端1的符号“(t1)”等,但实际上不显示。
[0074]
各设备信息项目不仅是设备名704的显示,而且还包括受理由用户实施的选择操作(例如触摸操作)的按钮等gui部件。或者,也可以与设备信息项目并行地设置其他选择按钮等。
[0075]
此外,也可以在该画面700内,还显示gui。例如,也可以作为用于对用户易于理解地引导操作等的信息,显示“请选择要连接的设备。”等消息图像。另外,用户接口不限于显示画面20中的显示,也可以并用声音输出等。
[0076]
此外,在该设备列表画面中显示有设备信息项目的3台设备(信息终端1)是被容许无线连接的设备,对于不容许的设备的情况不显示项目。作为应用,在许可特定的信息终端1和特定的显示装置2的无线连接的设定的情况下,特定的显示装置2仅在检测到的设备与特定的信息终端1相应的情况下,显示对应的设备信息项目。
[0077]
另外,作为其他应用,显示装置2也可以设定同时无线连接台数等的限制。在该情况下,显示装置2也可以以收敛于该同时无线连接台数内的方式显示设备信息项目。或者,在例如同时无线连接台数=1的情况下,显示装置2也可以在画面上显示多个设备信息项
目,以先到先得方式等方式,仅对它们中的1台信息终端1许可无线连接。能够将如上述的应用性的控制作为与本系统的认证不同的层次的控制追加实现。
[0078]
此外,显示装置2也可以在设备列表画面等上显示多个设备信息项目等时,与检测到的无线设备的顺序对应地,排列显示多个项目。或者,显示装置2也可以按照和与检测到的无线设备的距离对应的顺序,排列显示多个项目。例如,显示装置2既可以将推测为存在于最附近(即选择的可能性高)的无线设备的设备信息项目显示于最上方,也可以最强调地放大等而显示。
[0079]
返回到图6。在步骤s203中,显示装置2受理由用户从设备列表选择设备信息项目(设备名704)的选择操作。例如,用户u1从图7的画面700的设备列表,辨识具有与本设备即信息终端t1对应的设备名704的第2个项目712并进行选择操作。选择操作是例如针对作为显示部250(图5)的触摸面板的触摸操作。显示装置2掌握由用户选择的设备名704的信息终端1(例如信息终端t1)。
[0080]
在步骤s204中,显示装置2关于上述选择出的设备(信息终端1),生成作为用于无线连接的认证用id的密钥。
[0081]
在步骤s205中,显示装置2使用在上述步骤s203中选择出的设备名、和在上述s204中生成的密钥的组,生成实施方式1中的预定的代码(代码图像)。该代码以例如作为二维码的qr代码的形式生成。
[0082]
在步骤s206中,显示装置2将包括在上述步骤s205中生成的代码图像的认证用信息,显示于显示画面20内。
[0083]
[画面例(2)]
[0084]
图8示出在步骤s206中在显示装置2的显示画面20上显示代码图像时的画面例。该画面800是无线连接菜单画面中的代码画面。该画面800包括“请读取代码”消息显示802、和认证用信息显示803。认证用信息显示803是1个项目,包括设备名804和代码(代码图像)805的组。设备名804是与图7选择出的项目712的设备名704相同的值。设备名804是以在用户观察到该认证用信息显示803的项目的情况下可易于掌握的方式、即以可掌握为是与本设备有关的项目的方式辅助地设置的信息。设备名804还能够省略显示。代码805是qr代码,必需显示。该qr代码包括所选择的设备名,是特征之一。用户观察画面800的认证用信息显示803。
[0085]
返回到图6。另一方面,在步骤s100中,信息终端1根据用户的操作、例如使hmd1a的照相机12朝向显示画面20并拍摄的操作,通过照相机12读取显示于如图8的显示画面20的代码805。信息终端1从由照相机12拍摄的图像辨识代码805的部分,从该代码805通过译码提取设备名和密钥的组。
[0086]
在步骤s101中,信息终端1使用在上述步骤s100中提取而得到的设备名和密钥的组,进行信息终端1侧的设备检查处理。该设备检查处理是从代码805得到的设备名是否与本设备的设备名一致的确认。换言之,该设备检查处理是该信息终端1和用户的眼前的显示装置2的一对一的无线连接是否适合的确认。步骤s101的设备检查在实施方式1的序列中必需,是特征之一。在设备名一致的情况下(ok),进入到步骤s102,在不一致的情况下(ng),进入到步骤s104。在一致的情况下,表示该信息终端1和其对方的显示装置2是适合的无线连接的关系。在不一致的情况下,表示该信息终端1和其对方的显示装置2并非适合的无线连
接的关系、即不许可无线连接。
[0087]
在步骤s104中,在信息终端1中,作为差错处理,在显示面11上进行差错显示。由此,信息终端1侧的流程结束。在该情况下,从流程的最初重新执行。
[0088]
在步骤s102中,信息终端1将在步骤s100中得到的密钥作为用于无线连接的认证用id,设定到通信部160(图4)的电路。
[0089]
在步骤s103中,信息终端1通过通信部160中的通信处理,将无线连接请求发送给显示装置2。此时,通信部160的电路使用在步骤s102中设定的密钥进行通信处理。在该无线连接请求的通信帧中,与发送源(信息终端1)的地址、设备名一起,记述包括密钥的信息。
[0090]
另一方面,在步骤s207中,显示装置2通过通信部260(图5)的通信处理,接收来自信息终端1的无线连接请求。此时,通信部260的电路使用在步骤s204中生成的密钥进行通信处理。显示装置2取出无线连接请求中的来自发送源(信息终端1)的密钥,在该密钥与步骤s204的密钥一致的情况下,作为合法的请求接受。
[0091]
在步骤s208中,显示装置2使用在步骤s207中根据信息终端1的请求取出的设备名、和在步骤s205中已生成的设备名,进行显示装置2侧的设备检查处理。显示装置2在该设备检查处理中,确认例如步骤s207的设备名是否与步骤s204的设备名一致。在设备名一致的情况下(ok),进入到步骤s209,在不一致的情况下(ng),进入到步骤s211。在一致的情况下,表示请求源的信息终端1和该显示装置2的无线连接适合。在不一致的情况下,表示请求源的信息终端1和该显示装置2的无线连接不适合、即不许可无线连接。
[0092]
在步骤s211中,在显示装置2中,作为差错处理,在显示画面20上进行差错显示。由此,显示装置2侧的流程结束。在该情况下,从流程的最初重新执行。
[0093]
在步骤s209中,显示装置2将在上述步骤s204中已生成的密钥作为用于无线连接的认证用id,设定到通信部260(图5)的电路。由此,对信息终端1和显示装置2这两方设定相同的密钥。
[0094]
在步骤s210中,显示装置2通过通信部260的通信处理,确立与信息终端1之间的无线连接。对应地,在步骤s105中,信息终端1通过通信部160的通信处理,确立与显示装置2之间的无线连接。在步骤s105、s210之后,本序列结束。在信息终端1与显示装置2之间的无线连接已确立的状态下,能够在这些装置之间,进行实际状态的数据的发送接收等。之后,根据需要,在这些装置之间解除无线连接。
[0095]
此外,用虚线框表示在实施方式1的序列中特征性的部分(与主要的认证相关的部分)。特别地,步骤s101的设备检查是使用了设备名的特有的处理、且是确认从信息终端1观察显示装置2的情况下的适合的关系的处理、且是在多对多的环境下也确认适合的一对一的信息终端1和显示装置2的关系的处理。另外,在该序列中,除了步骤s101的信息终端1侧的设备检查以外,特别地还有步骤s208的显示装置2侧的设备检查。该处理也是使用了设备名的特有的处理、且是确认从显示装置2观察信息终端1的情况下的适合的关系的处理。实施方式1通过包括步骤s101以及步骤s208的相互的设备检查的序列,能够实现不需要由用户输入辨识用id的输入操作的简便且适合的无线连接。
[0096]
此外,作为实施方式1的变形例,还能够成为省略步骤s208的显示装置2侧的设备检查处理的方式。
[0097]
[效果等(1)]
[0098]
如上所述,根据实施方式1,在环境内用户的信息终端1和显示装置2无线连接时,能够降低由用户输入密钥等认证用id的输入操作的工夫,在多对多的环境下也能够在期望的选择的信息终端1与显示装置2之间适合地实现安全的无线连接。用户进行在显示装置2的显示画面20(图7)中选择与本设备对应的项目,使信息终端1读取所显示的代码(图8)的操作即可。之后,信息终端1自动地进行设备检查(图6的s101),确认本设备与对方的显示装置2之间的无线连接的适合性。由此,自动地设定密钥(s102、s209),确立无线连接。这样,用户能够以较少的工夫,迅速地在多对多的环境下也无错误地进行期望的信息终端1和显示装置2的无线连接。
[0099]
在实施方式1中,说明了在环境内的多个对多个的装置之间基本上以自由的组合来许可无线连接的情况,但不限于此,作为应用,关于可否无线连接,还能够进行更详细的控制。例如,某个种类的用户的信息终端1能够以仅对某个种类的显示装置2许可无线连接的方式,预先进行与认证有关的设定。该认证能够作为与在实施方式1等中说明的认证(包括设备检查)不同的层次的认证进行。
[0100]
作为利用例,在餐馆等店铺内,作为各顾客的各用户能够将自己的信息终端1简单地无线连接到设置于店铺内的桌子等的多个显示装置2(例如平板终端)中的期望的选择的显示装置2,利用显示装置2具有的显示功能、预订功能、以及结算功能等。作为其他例,在销售店铺等中,作为多个显示装置2,准备具有无现金结算功能的结算装置。顾客能够将自己的信息终端1无线连接到选择的结算装置,利用无现金结算功能。作为其他例,在车辆内,针对每个坐席设置有显示装置2。搭乘者能够将自己的信息终端1无线连接到选择的显示装置2,利用动画等的显示功能、因特网连接功能等。另外,不论是哪一个例子,都不限于不特定多数的利用,还能够通过认证的设定,限制为仅许可特定的用户的信息终端1和特定的显示装置2的无线连接以及功能利用。
[0101]
在上述中,主要说明了用户将hmd1a用作信息终端1的情况,但在使用智能手机1b(图1)的情况下,也能够同样地应用。在该情况下,用户操作手持的智能手机1b。用户使例如智能手机1b的照相机朝向显示装置2的显示画面20而拍摄即可。
[0102]
(实施方式2)
[0103]
使用图9~图11,说明本发明的实施方式2的无线连接系统以及方法。以下,说明实施方式2等中的与实施方式1不同的部分。实施方式2等的系统结构等与图1等相同,作为不同的结构点,有包括认证的处理序列。在实施方式2中,使用利用hmd1a的ar图像显示功能。
[0104]
[处理流程(2)]
[0105]
图9示出实施方式2的无线连接系统以及方法中的包括信息终端1(例如hmd1a)与显示装置2之间的通信的处理序列、以及各装置的处理流程。图9具有信息终端1的步骤s121~s129、显示装置2的步骤s220~s229、s229a、s229b。在图9中,相对实施方式1的图6主要不同的步骤是步骤s121、s122、s123、以及步骤s221、s222、s223。步骤s124以后、步骤s224以后与图6的步骤s100以后、步骤s204以后概略性地相同。
[0106]
在步骤s220中,显示装置2检测附近的用户,检测存在于附近的作为无线设备的信息终端1。在步骤s221之后,在步骤s222中,显示装置2使用上述检测而得到的设备名等信息,制作包括实施方式2中的特有的代码(设为第1代码)的设备列表。在实施方式2中,该第1代码是针对检测到的每个信息终端1对设备名进行代码化而得到的qr代码等代码图像,不
包括上述密钥。代码化的信息不限于设备名,也可以成为设备地址等其他信息。
[0107]
在步骤s202中,显示装置2在显示画面20上,如下所述,显示上述制作的设备列表。
[0108]
[画面例(3)]
[0109]
图10示出在步骤s222中在显示装置2的显示画面20上显示包括第1代码的设备列表时的画面例。该画面1000是无线连接菜单画面中的设备列表显示画面。该画面1000包括“检测到设备”消息显示1002、和设备列表显示1003。在设备列表显示1003中,作为设备列表,并列地显示检测到的每个设备(信息终端1)的设备信息项目。在本例子中,作为与检测到的3个信息终端1有关的3个设备信息项目,具有项目1011、1012、1013。各设备信息项目具有设备名显示1004、和qr代码显示1005。设备名显示1004是用于将检测到的设备通知给用户的辅助性的信息。qr代码显示1005的qr代码是第1代码。
[0110]
返回到图9。在步骤s223中,用户从该画面1000的设备列表,以设备名显示1004为参考,选择操作与自己的信息终端1(hmd1a)对应的设备信息项目、例如项目1012。此时,在实施方式2中,为了支援该选择操作,具有步骤s121~s123。
[0111]
在步骤s121中,信息终端1通过照相机12读取显示装置2的显示画面20的设备列表(图10)。信息终端1从照相机12的图像辨识设备列表显示1003的各设备信息项目的设备名显示1004、或者qr代码显示1005。
[0112]
在步骤s122中,信息终端1从上述读取的设备列表,确认是否有与本设备(hmd1a)的设备名(字符串)对应的设备名显示1004,在有的情况下进行检测。或者,信息终端1也可以使用通过qr代码显示1005的qr代码的译码而提取的设备名,进行同样的判断/检测。在图10的例子中,设为hmd1a(图1的信息终端t1)检测到项目1012的设备名显示1004的设备名(“max-hmd01”)。在有本设备名的情况下(y,是),进入到步骤s123,在无本设备名的情况下(n,否),进入到步骤s128,进行差错显示。
[0113]
在步骤s123中,信息终端1在显示面11上,显示用于将与检测到的本设备名对应的设备信息项目通知给用户的图像。该图像是用于将该项目强调显示而促使用户操作的ar图像。该ar图像如下所述重叠显示于显示画面20的设备信息项目(项目1012)上。
[0114]
[画面例(4)]
[0115]
图11示出在hmd1a的显示面11上显示步骤s123的图像的例子。图11的(a)示出图示省略的用户经由佩戴于头部的hmd1a观察显示装置2的显示画面20(例如图10的画面1000)时的示意性的影像。图11的(b)示出从用户的视点经由hmd1a的显示面11观察画面1000的项目1012时的示意性的影像。显示面11是可显示ar图像的透射型显示面。信息终端1的照相机12捕捉显示画面20。用户观察显示画面20的设备列表。在此,用虚线示意性地表示透射显示面11而看到的显示装置2。hmd1a(图4的显示部150)根据照相机12的图像的解析等,以在画面1000的项目1012(与本设备名对应的项目)上重叠显示的方式,在显示面11上显示ar图像1101。该ar图像1101是具有对用户促使该设备信息项目的选择操作的含义的图像。在本例子中,ar图像1101成为如包围项目1012那样的框图像,但不限于此,例如,既可以成为包围图10的设备名显示1004的图像、包围qr代码显示1005的图像,也可以成为伴随“请选择该项目”等消息的箭头等的图像。用户可知依照该ar图像1101,关注于该项目1012来进行选择操作即可。由此,步骤s223的选择操作变得更容易。
[0116]
返回到图9。在步骤s203中,用户依照步骤s123的ar图像1101,从上述设备列表选
择操作与本设备对应的项目,显示装置2接受该选择操作,掌握选择的设备名。
[0117]
步骤s224以后与实施方式1的图6的步骤s204以后概略性地相同。在步骤s224中,显示装置2关于上述选择的设备,生成密钥。在步骤s225中,显示装置2使用上述密钥、和上述选择的设备名,作为实施方式2中的第2代码,以例如qr代码的形式生成预定的代码。在步骤s206中,显示装置2与图8同样地,在显示画面20上显示上述生成的代码(第2代码)。另一方面,在步骤s124中,信息终端1根据用户的操作,读取显示画面20的代码(第2代码),通过译码,提取设备名和密钥的组。在步骤s125中,信息终端1使用上述设备名和密钥的组,进行设备检查处理。在提取出的设备名和本设备名一致的情况下(ok),进入到步骤s126,在不一致的情况下(ng),进入到步骤s128,进行差错显示。步骤s125的设备检查是实施方式2中的必需的处理。
[0118]
在步骤s126中,信息终端1对通信部160(图4)的电路设定在步骤s124中得到的密钥。在步骤s127中,信息终端1通过通信部160的通信处理,将无线连接请求发送给显示装置2。另一方面,在步骤s227中,显示装置2通过通信部260(图5)的通信处理,接收来自信息终端1的无线连接请求。显示装置2从接收到的无线连接请求取出密钥等信息。在步骤s228中,显示装置2使用在步骤s227中得到的密钥等信息,进行设备检查处理。关于设备名,在一致的情况下(ok),进入到步骤s229,在不一致的情况下(ng),进入到步骤s229b,进行差错处理。在步骤s229中,显示装置2对通信部260的电路设定上述密钥。在步骤s229a中,显示装置2通过通信部260的通信处理,确立与信息终端1的无线连接。对应地,在步骤s129中,信息终端1通过通信部160的通信处理,确立与显示装置2的无线连接。
[0119]
[效果等(2)]
[0120]
如上所述,在实施方式2中,用户的信息终端1从显示装置2的显示画面20的设备列表中,自动地辨识与本设备对应的项目,通过ar图像(图9、步骤s123、图11)通知给用户。由此,用户能够容易地选择与本设备对应的项目,能够迅速地进入到认证的过程,进行无线连接。
[0121]
此外,作为实施方式2的变形例,还能够成为省略显示装置2侧的设备检查处理的方式。
[0122]
(实施方式3)
[0123]
使用图12~图13,说明本发明的实施方式3的无线连接系统以及方法。在实施方式3中,信息终端1从显示装置2的显示画面20的设备列表找出本设备,不需要由用户实施选择操作,而自动地进行认证以及无线连接。
[0124]
[处理流程(3)]
[0125]
图12示出实施方式3的无线连接系统以及方法中的包括信息终端1(例如hmd1a)与显示装置2之间的通信的处理序列、以及各装置的处理流程。图12具有信息终端1的步骤s131~s136、显示装置2的步骤s230~s238。在图12中,作为相对图11、图12主要不同的结构点,有信息终端1的步骤s131、s132、显示装置2的步骤s233。
[0126]
在步骤s230中,显示装置2进行用户检测以及设备检测。在步骤s231中,显示装置2生成密钥,在步骤s232中,显示装置2生成实施方式3中的预定的代码。该代码是以例如qr代码的形式对设备名和密钥的组进行代码化而得到的图像。接下来,在步骤s233中,显示装置2在显示画面20上,显示使用在步骤s232中生成的代码制作的设备代码列表。
[0127]
[画面例(5)]
[0128]
图13示出在步骤s233中在显示装置2的显示画面20上显示设备代码列表时的画面例。该画面1300是无线连接菜单画面中的设备代码列表显示画面。该画面1000包括“检测到设备”消息显示1302、和设备代码列表显示1303。在设备代码列表显示1303中,作为设备代码列表,并列地显示检测到的每个设备(信息终端1)的设备代码信息项目。在本例子中,作为与检测到的3个信息终端1有关的3个设备代码信息项目,具有项目1311、1312、1313。各设备代码信息项目具有设备名显示1304、和qr代码显示1305。设备名显示1304是用于将检测到的设备通知给用户的辅助性的信息,还能够省略显示。qr代码显示1305的qr代码是实施方式3中的预定的代码,对设备名和密钥的组进行了代码化。还可以称图13的画面1300是将实施方式1中的图7的设备列表画面和图8的代码画面合并为1个而高效化的画面。
[0129]
返回到图12。在步骤s131中,信息终端1通过照相机12,读取显示装置2的显示画面20的设备代码列表。信息终端1从照相机12的图像,辨识各设备代码信息项目的设备名显示1304、qr代码显示1305。
[0130]
在步骤s132中,信息终端1从在步骤s131中得到的qr代码显示1305的qr代码,通过译码提取设备名和密钥的组。信息终端1使用该提取出的设备名,进行设备检查处理。该处理是在有与本设备(hmd1a)对应的设备名的情况下从得到的1个以上的设备名提取的处理、且是实施方式3中的特有且必需的处理。在能够检测到本设备名的情况下(y,是),进入到步骤s133,在无法检测到本设备名的情况下(n,否),进入到步骤s135,进行差错显示。
[0131]
步骤s133以后的处理与上述实施方式1概略性地相同。在步骤s133中,信息终端1对通信部160的电路设定在步骤s131中得到的密钥。在步骤s134中,信息终端1通过通信部160的通信处理,将无线连接请求发送给显示装置2。另一方面,在步骤s234中,显示装置2通过通信部260的通信处理,接收来自信息终端1的无线连接请求。显示装置2从接收到的无线连接请求,取出设备名以及密钥等信息。在步骤s235中,显示装置2使用步骤s232的设备名、和在步骤s234中得到的设备名,进行显示装置2侧的设备检查处理。关于设备名,在一致的情况下(ok),进入到步骤s236,在不一致的情况下(ng),进入到步骤s238,进行差错处理。在步骤s236中,显示装置2对通信部260的电路设定上述密钥。在步骤s237中,显示装置2通过通信部260的通信处理,确立与信息终端1之间的无线连接。对应地,在步骤s136中,信息终端1通过通信部160的通信处理,确立与显示装置2之间的无线连接。
[0132]
[效果等(3)]
[0133]
如上所述,在实施方式3中,用户的信息终端1能够从显示装置2的显示画面20的设备代码列表(图13)中,辨识与本设备对应的项目,自动地进入到认证的过程,迅速地进行无线连接。
[0134]
此外,作为实施方式3的变形例,还能够成为省略显示装置2侧的设备检查处理的方式。
[0135]
(实施方式4)
[0136]
使用图14~图15,说明本发明的实施方式4的无线连接系统以及方法。在实施方式4中,最初在信息终端1与显示装置2之间进行临时连接,之后进行认证以及无线连接。
[0137]
[处理流程(4)]
[0138]
图14示出实施方式4的无线连接系统以及方法中的包括信息终端1(例如hmd1a)与
显示装置2之间的通信的处理序列、以及各装置的处理流程。图14具有信息终端1的步骤s141~s149、显示装置2的步骤s240~s248。在图14中,作为主要不同的结构点,有信息终端1的步骤s141~s144、显示装置2的步骤s241~s244。
[0139]
在步骤s240中,显示装置2进行用户检测以及设备检测。在步骤s141中,信息终端1对通信部160(图4)的电路设定用于临时连接的临时密钥。关于临时密钥,如果例如密钥是6位,则使用000000这样的固定值。另一方面,在步骤s241中,显示装置2对通信部260(图5)的电路设定相同的临时密钥。
[0140]
在步骤s142中,信息终端1使用上述临时密钥,将用于临时连接的无线连接请求发送给显示装置2。在步骤s242中,显示装置2接收该无线连接请求。由此,在步骤s143、s243中,在信息终端1与显示装置2之间进行临时无线连接。
[0141]
在步骤s144中,信息终端1生成用于并非临时的目的无线连接的密钥,发送给显示装置2。在步骤s244中,显示装置2接收来自信息终端1的密钥。
[0142]
在步骤s245中,显示装置2生成实施方式4中的预定的代码。在实施方式4中,该代码是以例如qr代码的形式仅对设备名进行代码化而得到的图像。在步骤s246中,显示装置2在显示画面20上,如下所述显示上述生成的代码。
[0143]
[画面例(6)]
[0144]
图15示出在步骤s246中在显示装置2的显示画面20上显示代码时的画面例。该画面1500是无线连接菜单画面中的代码画面。该画面1500包括“请读取代码”消息显示1502、和代码显示1502。代码显示1503是与对象的1个设备(信息终端1)的设备名有关的qr代码。
[0145]
返回到图14。在步骤s145中,信息终端1通过照相机12,读取显示于上述显示画面20的代码(代码显示1502)。信息终端1从该代码通过译码提取设备名。之后,在步骤s146中,与实施方式1同样地,信息终端1使用上述提取的设备名,进行设备检查处理。信息终端1确认上述提取的设备名是否与本设备(hmd1a)的设备名一致。在一致的情况下(ok),进入到步骤s146,在不一致的情况下(ng),进入到步骤s149,进行差错显示。在步骤s146中,信息终端1为了目的无线连接,对通信部160的电路设定在步骤s144中已生成的密钥。另一方面,在步骤s247中,显示装置2侧也为了目的无线连接,对通信部260的电路设定在步骤s244中已接收的密钥。由此,在步骤s148、s248中,信息终端1与显示装置2之间的无线连接确立。换言之,临时无线连接结束而实现目的无线连接。
[0146]
[效果等(4)]
[0147]
如上所述,在实施方式4中,在信息终端1与显示装置2之间临时连接之后,信息终端1能够使用设备名的代码进行设备检查,迅速地进行无线连接。
[0148]
此外,作为实施方式4的变形例,还能够成为省略显示装置2侧的设备检查处理的方式。
[0149]
(其他实施方式)
[0150]
作为其他实施方式还能够实现以下方式。在实施方式1的图1的结构中,说明了信息终端1和显示装置2近距离地直接无线连接的情况,但不限于此,还能够成为在信息终端1与显示装置2之间,经由无线基站、接入点等装置进行无线连接的方式。另外,还能够成为信息终端1、显示装置2与通信网上的服务器等外部装置进行通信而协作的方式。
[0151]
以上,根据实施方式具体地说明了本发明,但本发明不限定于所述实施方式,能够
在不脱离要旨的范围内进行各种变更。