一种设备的连接方法及电子设备与流程

文档序号:29038177发布日期:2022-02-25 19:43阅读:87来源:国知局
一种设备的连接方法及电子设备与流程

1.本技术涉及通信技术领域,尤其涉及一种设备的连接方法及电子设备。


背景技术:

2.向tv等大屏设备投屏或者连接音箱播放音乐的操作比较繁琐,用户需要点击投屏或连接设备,然后再等待设备列表刷新,然后再识别出哪个是目标设备,点击目标设备,有时还可能点错。


技术实现要素:

3.本技术提供了一种设备的连接方法及电子设备,本技术还提供一种计算机可读存储介质,以提供一种设备的连接方法,可以根据用户的面部朝向,与目标设备建立通信连接。
4.第一方面,本技术提供了一种设备的连接方法,应用于第一电子设备,包括:
5.向至少一个第二电子设备发送定位请求,以确定第二电子设备在第一电子设备的坐标系中的第一位置信息;
6.获取用户的面部图像,计算用户的面部预设点在第一电子设备的坐标系中的空间坐标;
7.从面部图像中识别用户的面部方位信息;
8.基于用户的面部方位信息、面部预设点的空间坐标和第一位置信息,确定第二电子设备中的第一目标设备;
9.向第一目标设备发起连接请求,以与第一目标设备建立连接。
10.进一步地,向至少一个第二电子设备发送定位请求,以确定第二电子设备在第一电子设备的坐标系中的第一位置信息,包括:
11.向至少一个第二电子设备发送定位请求,以获取第一电子设备与第二电子设备之间的对准角度和距离;
12.基于对准角度与距离,确定第二电子设备在第一电子设备的坐标系中的空间坐标。
13.进一步地,从面部图像中识别用户的面部方位信息,包括:
14.将用户的面部图像输入到预置的识别模型中,以获得用户在第一电子设备的坐标系中的面部朝向。
15.进一步地,计算用户的面部预设点的空间坐标,包括:
16.获取用户的面部图像的3d模型;
17.在3d模型的坐标系中确定用户的面部预设点和用户的面部预设点的坐标;
18.将3d模型坐标系中的面部预设点的坐标转化为第一电子设备的空间坐标系的空间坐标。
19.进一步地,基于用户的面部方位信息、面部预设点的空间坐标和第一位置信息,确
定第二电子设备中的第一目标设备,包括:
20.基于用户的面部方位信息和面部预设点的空间坐标,建立指示向量;
21.基于第一位置信息,计算第二电子设备与指示向量之间的距离,以确定第二电子设备中的第一目标设备。
22.进一步地,向至少一个第二电子设备发送定位请求,以确定第二电子设备在第一电子设备的坐标系中的第一位置信息,还包括:
23.向至少一个第二电子设备发送定位请求,使得第二电子设备根据定位请求,确定第一电子设备在第二电子设备的坐标系中的第二位置信息;
24.基于用户的面部方位信息、面部预设点的空间坐标和第一位置信息,确定第二电子设备中的第一目标设备之前,还包括:
25.接收第二电子设备的屏幕朝向信息,其中,屏幕朝向信息由第二电子设备基于第二位置信息确定;
26.基于屏幕朝向信息,对第二电子设备进行筛选;
27.或者,
28.从所述第二电子设备接收定位信息,基于所述定位信息判断所述第二电子设备的屏幕是否朝向所述第一电子设备;
29.基于判断结果,对所述第二电子设备进行筛选。
30.进一步地,向至少一个第二电子设备发送定位请求之前,还包括:
31.检测用于与第二电子设备进行连接的第一指令;
32.响应于检测到的第一指令,开启连接模式,以发送定位请求。
33.进一步地,向第一目标设备发起连接请求,以与第一目标设备建立连接之后,还包括:
34.基于指示向量及预设角度,获取检测范围;
35.检测检测范围内是否包括除第一目标设备之外的第二目标设备;
36.若存在除第一目标设备之外的第二目标设备,检测用于与第二目标设备进行连接的第二指令;
37.响应第二指令,使得第一电子设备与第二目标设备建立连接。
38.第二方面,本技术还提供了一种电子设备,包括处理器和存储设备,存储设备存有应用程序,应用程序由处理器运行时,使得电子设备执行以下步骤:
39.向至少一个第二电子设备发送定位请求,以确定第二电子设备在第一电子设备的坐标系中的第一位置信息;
40.获取用户的面部图像,计算用户的面部预设点在第一电子设备的坐标系中的空间坐标;
41.从面部图像中识别用户的面部方位信息;
42.基于用户的面部方位信息、面部预设点的空间坐标和第一位置信息,确定第二电子设备中的第一目标设备;
43.向第一目标设备发起连接请求,以与第一目标设备建立连接。
44.进一步地,应用程序由处理器运行时,使得电子设备执行向至少一个第二电子设备发送定位请求,以确定第二电子设备在第一电子设备的坐标系中的第一位置信息的步
骤,包括以下步骤:
45.向至少一个第二电子设备发送定位请求,以获取第一电子设备与第二电子设备之间的对准角度和距离;
46.基于对准角度与距离,确定第二电子设备在第一电子设备的坐标系中的空间坐标。
47.进一步地,应用程序由处理器运行时,使得电子设备执行从面部图像中识别用户的面部方位信息的步骤,包括以下步骤:
48.将用户的面部图像输入到预置的识别模型中,以获得用户在第一电子设备的坐标系中的面部朝向。
49.进一步地,应用程序由处理器运行时,使得电子设备执行计算用户的面部预设点的空间坐标的步骤,包括以下步骤:
50.获取用户的面部图像的3d模型;
51.在3d模型的坐标系中确定用户的面部预设点和用户的面部预设点的坐标;
52.将3d模型坐标系中的面部预设点的坐标转化为第一电子设备的空间坐标系的空间坐标。
53.进一步地,应用程序由处理器运行时,使得电子设备执行基于用户的面部方位信息、面部预设点的空间坐标和第一位置信息,确定第二电子设备中的第一目标设备的步骤,包括以下步骤:
54.基于用户的面部方位信息和面部预设点的空间坐标,建立指示向量;
55.基于第一位置信息,计算第二电子设备与指示向量之间的距离,以确定第二电子设备中的第一目标设备。
56.进一步地,应用程序由处理器运行时,使得电子设备执行向至少一个第二电子设备发送定位请求,以确定第二电子设备在第一电子设备的坐标系中的第一位置信息的步骤,还包括以下步骤:
57.向至少一个第二电子设备发送定位请求,使得第二电子设备根据定位请求,确定第一电子设备在第二电子设备的坐标系中的第二位置信息;
58.应用程序由处理器运行时,使得电子设备执行基于用户的面部方位信息、面部预设点的空间坐标和第一位置信息,确定第二电子设备中的第一目标设备的步骤之前,还包括以下步骤:
59.接收第二电子设备的屏幕朝向信息,其中,屏幕朝向信息由第二电子设备基于第二位置信息确定;
60.基于屏幕朝向信息,对第二电子设备进行筛选;
61.或者,
62.从所述第二电子设备接收定位信息,基于所述定位信息判断所述第二电子设备的屏幕是否朝向所述第一电子设备;
63.基于判断结果,对所述第二电子设备进行筛选。
64.进一步地,应用程序由处理器运行时,使得电子设备执行向至少一个第二电子设备发送定位请求的步骤之前,还包括以下步骤:
65.检测用于与第二电子设备进行连接的第一指令;
66.响应于检测到的第一指令,开启连接模式,以发送定位请求。
67.进一步地,应用程序由处理器运行时,使得电子设备执行向第一目标设备发起连接请求,以与第一目标设备建立连接的步骤之后,还包括以下步骤:
68.基于指示向量及预设角度,获取检测范围;
69.检测检测范围内是否包括除第一目标设备之外的第二目标设备;
70.若存在除第一目标设备之外的第二目标设备,检测用于与第二目标设备进行连接的第二指令;
71.响应第二指令,使得第一电子设备与第二目标设备建立连接。
72.第三方面,本技术提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行如第一方面所述的方法。
73.第四方面,本技术提供一种计算机程序,当所述计算机程序被计算机执行时,用于执行第一方面所述的方法。
74.在一种可能的设计中,第四方面中的程序可以全部或者部分存储在与处理器封装在一起的存储介质上,也可以部分或者全部存储在不与处理器封装在一起的存储器上。
附图说明
75.图1是本发明实施例提供的一种第一电子设备的结构示意图
76.图2是本发明实施例提供的一种第二电子设备的结构示意图
77.图3是本发明实施例提供的一种蓝牙协议框架图;
78.图4a-4d为本发明实施例提供的一种对准角度的测量原理的一组示意图;
79.图5是本发明实施例提供的一种设备的连接方法的流程图;
80.图6是本发明实施例提供的一种设备的连接方法的流程图;
81.图7是申请一实施例提供的一种电子设备的连接方法的应用场景的示例图;
82.图8是本技术实施例提供的第二电子设备的屏幕朝向的示例图;
83.图9是本技术实施例提供的检测范围的示例图;
84.图10是本技术实施例提供的另一检测范围的示例图;
85.图11是本技术实施例提供的另一种设备的连接方法的流程图;
86.图12是本技术实施例提供的图11所示的设备的连接方法的应用场景的示例图。
具体实施方式
87.下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行描述。其中,在本技术实施例的描述中,除非另有说明,“/”表示或的意思,例如,a/b可以表示a或b;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,a和/或b,可以表示:单独存在a,同时存在a和b,单独存在b这三种情况。
88.以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本技术实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
89.向tv等大屏设备投屏或者连接音箱播放音乐的操作比较繁琐,用户需要点击投屏
或连接设备,然后再等待设备列表刷新,然后再识别出哪个是目标设备,点击目标设备,有时还可能点错。
90.图1为第一电子设备100的结构示例图;
91.第一电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,usb)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,sim)卡接口195等。其中传感器模块180可以包括压力传感器180a,陀螺仪传感器180b,气压传感器180c,磁传感器180d,加速度传感器180e,距离传感器180f,接近光传感器180g,指纹传感器180h,温度传感器180j,触摸传感器180k,环境光传感器180l,骨传导传感器180m等。
92.可以理解的是,本发明实施例示意的结构并不构成对第一电子设备100的具体限定。在本技术另一些实施例中,第一电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
93.处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,ap),调制解调处理器,图形处理器(graphics processing unit,gpu),图像信号处理器(image signal processor,isp),控制器,视频编解码器,数字信号处理器(digital signal processor,dsp),基带处理器,和/或神经网络处理器(neural-network processing unit,npu)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
94.控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
95.处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
96.在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,i2c)接口,集成电路内置音频(inter-integrated circuit sound,i2s)接口,脉冲编码调制(pulse code modulation,pcm)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,uart)接口,移动产业处理器接口(mobile industry processor interface,mipi),通用输入输出(general-purpose input/output,gpio)接口,用户标识模块(subscriber identity module,sim)接口,和/或通用串行总线(universal serial bus,usb)接口等。
97.i2c接口是一种双向同步串行总线,包括一根串行数据线(serial data line,sda)和一根串行时钟线(derail clock line,scl)。在一些实施例中,处理器110可以包含多组i2c总线。处理器110可以通过不同的i2c总线接口分别耦合触摸传感器180k,充电器,闪光灯,摄像头193等。例如:处理器110可以通过i2c接口耦合触摸传感器180k,使处理器110与触摸传感器180k通过i2c总线接口通信,实现第一电子设备100的触摸功能。
98.i2s接口可以用于音频通信。在一些实施例中,处理器110可以包含多组i2s总线。处理器110可以通过i2s总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过i2s接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
99.pcm接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过pcm总线接口耦合。在一些实施例中,音频模块170也可以通过pcm接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述i2s接口和所述pcm接口都可以用于音频通信。
100.uart接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,uart接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过uart接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过uart接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
101.mipi接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。mipi接口包括摄像头串行接口(camera serial interface,csi),显示屏串行接口(display serial interface,dsi)等。在一些实施例中,处理器110和摄像头193通过csi接口通信,实现第一电子设备100的拍摄功能。处理器110和显示屏194通过dsi接口通信,实现第一电子设备100的显示功能。
102.gpio接口可以通过软件配置。gpio接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,gpio接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。gpio接口还可以被配置为i2c接口,i2s接口,uart接口,mipi接口等。
103.usb接口130是符合usb标准规范的接口,具体可以是mini usb接口,micro usb接口,usb type c接口等。usb接口130可以用于连接充电器为第一电子设备100充电,也可以用于第一电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如ar设备等。
104.可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对第一电子设备100的结构限定。在本技术另一些实施例中,第一电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
105.充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过usb接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过第一电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
106.电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可
以设置于同一个器件中。
107.第一电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
108.天线1和天线2用于发射和接收电磁波信号。第一电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
109.移动通信模块150可以提供应用在第一电子设备100上的包括2g/3g/4g/5g等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,lna)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
110.调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170a,受话器170b等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
111.无线通信模块160可以提供应用在第一电子设备100上的包括无线局域网(wireless local area networks,wlan)(如无线保真(wireless fidelity,wi-fi)网络),蓝牙(bluetooth,bt),全球导航卫星系统(global navigation satellite system,gnss),调频(frequency modulation,fm),近距离无线通信技术(near field communication,nfc),红外技术(infrared,ir)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
112.在一些实施例中,第一电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得第一电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,gsm),通用分组无线服务(general packet radio service,gprs),码分多址接入(code division multiple access,cdma),宽带码分多址(wideband code division multiple access,wcdma),时分码分多址(time-division code division multiple access,td-scdma),长期演进(long term evolution,lte),bt,gnss,wlan,nfc,fm,和/或ir技术等。所述gnss可以包括全球卫星定位系统(global positioning system,gps),全球导航卫星系统(global navigation satellite system,glonass),北斗卫星导
航系统(beidou navigation satellite system,bds),准天顶卫星系统(quasi-zenith satellite system,qzss)和/或星基增强系统(satellite based augmentation systems,sbas),需要说明的是图中所示天线数量只是示例性的,还可以设置更多,例如3个、4个或者更多个。
113.第一电子设备100通过gpu,显示屏194,以及应用处理器等实现显示功能。gpu为图像处理的微处理器,连接显示屏194和应用处理器。gpu用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个gpu,其执行程序指令以生成或改变显示信息。
114.显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,lcd),有机发光二极管(organic light-emitting diode,oled),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,amoled),柔性发光二极管(flex light-emitting diode,fled),miniled,microled,micro-oled,量子点发光二极管(quantum dot light emitting diodes,qled)等。在一些实施例中,第一电子设备100可以包括1个或n个显示屏194,n为大于1的正整数。
115.第一电子设备100可以通过isp,摄像头193,视频编解码器,gpu,显示屏194以及应用处理器等实现拍摄功能。
116.isp用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给isp处理,转化为肉眼可见的图像。isp还可以对图像的噪点,亮度,肤色进行算法优化。isp还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,isp可以设置在摄像头193中。
117.摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb,yuv等格式的图像信号。在一些实施例中,第一电子设备100可以包括1个或n个摄像头193,n为大于1的正整数。
118.数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当第一电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
119.视频编解码器用于对数字视频压缩或解压缩。第一电子设备100可以支持一种或多种视频编解码器。这样,第一电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,mpeg)1,mpeg2,mpeg3,mpeg4等。
120.npu为神经网络(neural-network,nn)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过npu可以实现第一电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
121.外部存储器接口120可以用于连接外部存储卡,例如micro sd卡,实现扩展第一电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
122.内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储第一电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,ufs)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行第一电子设备100的各种功能应用以及数据处理。
123.第一电子设备100可以通过音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,以及应用处理器等实现音频功能。例如音乐播放,录音等。
124.音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
125.扬声器170a,也称“喇叭”,用于将音频电信号转换为声音信号。第一电子设备100可以通过扬声器170a收听音乐,或收听免提通话。
126.受话器170b,也称“听筒”,用于将音频电信号转换成声音信号。当第一电子设备100接听电话或语音信息时,可以通过将受话器170b靠近人耳接听语音。
127.麦克风170c,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170c发声,将声音信号输入到麦克风170c。第一电子设备100可以设置至少一个麦克风170c。在另一些实施例中,第一电子设备100可以设置两个麦克风170c,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,第一电子设备100还可以设置三个,四个或更多麦克风170c,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
128.耳机接口170d用于连接有线耳机。耳机接口170d可以是usb接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,omtp)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the usa,ctia)标准接口。
129.压力传感器180a用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180a可以设置于显示屏194。压力传感器180a的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180a,电极之间的电容改变。第一电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,第一电子设备100根据压力传感器180a检测所述触摸操作强度。第一电子设备100也可以根据压力传感器180a的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
130.陀螺仪传感器180b可以用于确定第一电子设备100的运动姿态。在一些实施例中,
可以通过陀螺仪传感器180b确定第一电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180b可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180b检测第一电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消第一电子设备100的抖动,实现防抖。陀螺仪传感器180b还可以用于导航,体感游戏场景。
131.气压传感器180c用于测量气压。在一些实施例中,第一电子设备100通过气压传感器180c测得的气压值计算海拔高度,辅助定位和导航。
132.磁传感器180d包括霍尔传感器。第一电子设备100可以利用磁传感器180d检测翻盖皮套的开合。在一些实施例中,当第一电子设备100是翻盖机时,第一电子设备100可以根据磁传感器180d检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
133.加速度传感器180e可检测第一电子设备100在各个方向上(一般为三轴)加速度的大小。当第一电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
134.距离传感器180f,用于测量距离。第一电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,第一电子设备100可以利用距离传感器180f测距以实现快速对焦。
135.接近光传感器180g可以包括例如发光二极管(led)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。第一电子设备100通过发光二极管向外发射红外光。第一电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定第一电子设备100附近有物体。当检测到不充分的反射光时,第一电子设备100可以确定第一电子设备100附近没有物体。第一电子设备100可以利用接近光传感器180g检测用户手持第一电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180g也可用于皮套模式,口袋模式自动解锁与锁屏。
136.环境光传感器180l用于感知环境光亮度。第一电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180l也可用于拍照时自动调节白平衡。环境光传感器180l还可以与接近光传感器180g配合,检测第一电子设备100是否在口袋里,以防误触。
137.指纹传感器180h用于采集指纹。第一电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
138.温度传感器180j用于检测温度。在一些实施例中,第一电子设备100利用温度传感器180j检测的温度,执行温度处理策略。例如,当温度传感器180j上报的温度超过阈值,第一电子设备100执行降低位于温度传感器180j附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,第一电子设备100对电池142加热,以避免低温导致第一电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,第一电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
139.触摸传感器180k,也称“触控器件”。触摸传感器180k可以设置于显示屏194,由触摸传感器180k与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180k用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触
摸传感器180k也可以设置于第一电子设备100的表面,与显示屏194所处的位置不同。
140.骨传导传感器180m可以获取振动信号。在一些实施例中,骨传导传感器180m可以获取人体声部振动骨块的振动信号。骨传导传感器180m也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180m也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180m获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180m获取的血压跳动信号解析心率信息,实现心率检测功能。
141.按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。第一电子设备100可以接收按键输入,产生与第一电子设备100的用户设置以及功能控制有关的键信号输入。
142.马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
143.指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
144.sim卡接口195用于连接sim卡。sim卡可以通过插入sim卡接口195,或从sim卡接口195拔出,实现和第一电子设备100的接触和分离。第一电子设备100可以支持1个或n个sim卡接口,n为大于1的正整数。sim卡接口195可以支持nano sim卡,micro sim卡,sim卡等。同一个sim卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。sim卡接口195也可以兼容不同类型的sim卡。sim卡接口195也可以兼容外部存储卡。第一电子设备100通过sim卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,第一电子设备100采用esim,即:嵌入式sim卡。esim卡可以嵌在第一电子设备100中,不能和第一电子设备100分离。
145.图2示例性的示出了本发明实施例提供的一种第二电子设备200的结构示意图。
146.下面以第二电子设备200为例对实施例进行具体说明。应该理解的是,图2所示第二电子设备200仅是一个范例,并且第二电子设备200可以具有比图2中所示的更多或更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
147.如图2所示,第二电子设备200可以包括:处理器201,存储器202,无线通信处理模块203,天线204,电源开关205,有线lan通信处理模块206,hdmi通信处理模块207,usb通信处理模块208,显示屏209,音频模块210。其中:处理器201可用于读取和执行计算机可读指令。具体实现中,处理器201可主要包括控制器、运算器和寄存器。其中,控制器主要负责指令译码,并为指令对应的操作发出控制信号。运算器主要负责保存指令执行过程中临时存放的寄存器操作数和中间操作结果等。具体实现中,处理器201的硬件架构可以是专用集成电路(asic)架构、mips架构、arm架构或者np架构等等。
148.在一些实施例中,处理器201可以用于解析无线通信模块203和/或有线lan通信处
理模块206接收到的信号,如第一第一电子设备100广播的定位请求,第一第一电子设备100发送的建立蓝牙通讯连接请求等等。处理201可以用于根据解析结果进行相应的处理操作,如用户第一输入以及第二输入的响应等等。
149.在一些实施例中,处理器201还可用于生成无线通信模块203和/或有线lan通信处理模块206向外发送的信号,如蓝牙广播信号、信标信号,又如向第一第一电子设备100发送的用于反馈状态信息(如待机、开机等)的信号。
150.存储器202与处理器201耦合,用于存储各种软件程序和/或多组指令。具体实现中,存储器202可包括高速随机存取的存储器,并且也可包括非易失性存储器,例如一个或多个磁盘存储设备、闪存设备或其他非易失性固态存储设备。存储器202可以存储操作系统,例如ucos,vxworks、rtlinux等嵌入式操作系统。存储器202还可以存储通信程序,该通信程序可用于第一第一电子设备100,一个或多个服务器,或附件设备进行通信。
151.无线通信模块203可以包括蓝牙通信模块203a、wlan通信模块203b、红外线通信模块204c中的一项或多项。其中,蓝牙通信模块203a可以包括经典蓝牙(bt)模块和低功耗蓝牙(ble)模块。
152.在一些实施例中,蓝牙通信模块203a、wlan通信模块203b、红外线通信模块204c中的一项或多项可以监听到其他设备(如第一第一电子设备100)发射的信号,如定位请求信号等等,并可以发送响应信号,如定位响应等,使得其他设备(如第一第一电子设备100)可以发现第二电子设备200,并与其他设备(如第一第一电子设备100)建立无线通信连接,通过蓝牙、wlan或红外线中的一种或多种无线通信技术与其他设备(如第一第一电子设备100)进行通信。
153.在另一些实施例中,蓝牙通信模块203a、wlan通信模块203b、红外线通信模块203c中的一项或多项也可以发射信号,如广播蓝牙信号、信标信号,使得其他设备(如第一第一电子设备100)可以发现第二电子设备200,并与其他设备(如第一电子设备100)建立无线通信连接,通过蓝牙或wlan中的一种或多种无线通信技术与其他设备(如第一电子设备100)进行通信。
154.无线通信模块203还可以包括蜂窝移动通信模块(未示出)。蜂窝移动通信处理模块可以通过蜂窝移动通信技术与其他设备(如服务器)进行通信。
155.第二电子设备200的无线通信功能可以通过天线204,无线通信模块203,调制解调处理器等实现。
156.天线204可用于发射和接收电磁波信号。第二电子设备200中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将wlan通信模块203b的天线复用为蓝牙通信模块203a的天线。在另外一些实施例中,天线可以和调谐开关结合使用。
157.在一些实施例中蓝牙通信模块203a的天线可以有一个或多个,当蓝牙通信模块203a的天线2根及以上时,即可实现第一第一电子设备100测量第二电子设备200发送的蓝牙信号到达角度(angle of arrival,aoa)或者出发角度(angle of departure,aod)。
158.电源开关205可用于控制电源向第二电子设备200的供电。
159.有线lan通信处理模块206可用于通过有线lan和同一个lan中的其他设备进行通信,还可用于通过有线lan连接到wan,可与wan中的设备通信。
160.hdmi通信处理模块207可用于通过hdmi接口(未示出)与其他设备进行通信。
161.显示屏209可用于显示图像,视频等。显示屏129可以采用液晶显示屏(liquidcrystal display,lcd),有机发光二极管(organic light-emitting diode,oled)显示屏,有源矩阵有机发光二极体(active-matrix organic light emitting diode,amoled)显示屏,柔性发光二极管(flexible light-emitting diode,fled)显示屏,量子点发光二极管(quantum dot light emitting diodes,qled)显示屏等等。
162.音频模块210可用于通过音频输出接口输出音频信号,这样可使得第二电子设备200支持音频播放。音频模块还可用于通过音频输入接口接收音频数据。第二电子设备200可以为电视机等媒体播放设备。
163.在一些实施例中,第二电子设备200还可以包括rs-232接口等串行接口。该串行接口可连接至其他设备,如音箱等音频外放设备,使得显示器和音频外放设备协作播放音视频。
164.可以理解的是图2示意的结构并不构成对第二电子设备200的具体限定。在本发明另一些实施例中,第二电子设备200可以包括比图示更多或更少的部件,或组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
165.图3为本发明实施例提供的一种蓝牙协议框架图,具体包括但不限于host(主机)协议栈、hci(host controller interface)、控制器(controller)。本发明实施例所述的方法中,第一电子设备和第二电子设备使用的蓝牙协议框架可以参考该部分内容。其中,host协议栈定义了蓝牙框架中的多个应用(profile)和核心协议(protocol),每个profile定义了各自相应的消息格式与应用规则,profile是蓝牙服务(application)。为了实现不同平台下的不同设备的互联互通,蓝牙协议为各种可能的、有通用意义的应用场景,都制定的了规范,如a2dp(advanced audiodistribution profile)、hfp(hands-free profile)等等。核心协议包括但不限于蓝牙基本的服务协议sdp(service discover protocol)、逻辑链路控制和适配协议l2cap(logical link control and adaptation protocol)等。核心协议是蓝牙协议栈中必不可少的。
166.其中,hci为上层协议提供了进入链路管理器的统一接口和进入基带的统一方式,在主机核心协议栈和控制器之间会存在若干传输层,这些传输层是透明的,完成传输数据的任务,蓝牙技术联盟(bluetooth special interest group,sig)规定了四种与硬件连接的物理总线方式,即四种hci传输层:usb、rs232、uart和pc卡。
167.其中,controller定义了底层硬件部分,包括无线射频(rf)、基带(bb)和链路管理(lm),rf层通过2.4ghz无需授权的ism频段的微波,实现数据位流的过滤和传输,主要定义了蓝牙收发器在此频带正常工作所需要满足的条件。基带负责跳频以及蓝牙数据和信息帧的传输。链路管理负责连接、建立和拆除链路并进行安全控制。lm(link manager)层是蓝牙协议栈的链路管理层协议,负责将上层hci命令翻译成基带能接受的操作,建立异步链路(asynchronous connection-oriented link,acl)和同步链路(synchronousconnectionoriented/extended,sco)以及使蓝牙设备进入节能状态的工作模式等。lc(link control)层负责在一批数据包传送期间,响应上层lm命令(如执行建立数据包的传输链路,维持链路等功能的lm命令)。
168.本发明实施例所述的方法由图1所示的第一电子设备100的无线通信模块160来实现的部分内容,具体可以是蓝牙模块或者是蓝牙芯片来执行。
169.图4a-4d为本发明实施例提供的一组蓝牙寻向功能原理图,具体涉及到ble信号到到达角(angle of arrival,aoa)和出发角(angle of departure,aod)的测算原理,用于计算所述第一电子设备和第二电子设备之间的对准角度。
170.下面介绍本发明实施例中涉及的ble信号到达角(angle of arrival,aoa)的测量原理。
171.图4a-4b为本发明实施例提供的一种蓝牙到达角aoa计算原理图。如图4a所示,发射方(transmitter)410可以通过ble发射aoa广播包(固定频率扩展信号(constant tone extension,cte)包),aoa cte包是连续的经调制过的序列,不做校验,不含循环冗余校验(cyclic redundancy check,crc)和消息完整性代码(message integrity code,mic)。接收方(receiver)420的host通过hci命令下发测量时使用的天线序列信息。开始测量后,控制器421按照host下发的天线序列信息依次切换到指定的天线进行i&q采样,并把采样信息通过hci命令上报给host,由host计算相对角度。
172.发射方410可以通过控制器411控制一根天线410发送该aoa cte包。接收方420可以通过控制器421控制射频开关422,按照一定的顺序切换到指定的天线进行的接收。其中,接收方420至少有两根天线423。其中,接收方420测得的发射方410的ble信号的到达角aoa。在一些实施例中,为了提高波到达角的估计精度,可以配备多个天线,例如三根,阵列的排列方式有一字型、环形、球形等,在此不作限定。
173.如图4b所示,假设接收方420有两根间距为d的天线(天线a和天线b),接收到的ble信号为平面电磁波。其中,由于天线a和天线b接收ble信号不同步,接收方420可以对比天线a和天线b接收到ble信号的相位,确定出天线a和天线b接收到ble信号的相位差。
174.其中,ble信号的到达角(aoa)可以通过如下公式(1)计算出:
[0175][0176]
其中,θ为ble信号的到达角(aoa),ψ为天线a和天线b接收到ble信号的相位差,λ为ble信号的波长,d为天线a与天线b之间的距离。这里可以将θ角设定为第一电子设备与第二电子设备之间的对准角度,即通过公式(1)可以算出第一电子设备与第二电子设备之间的对准角度。
[0177]
在一些可能的实施例中,发射方410可以是第二电子设备200,接收方410可以是第一电子设备100。第一电子设备100上有至少两根用于发射/接收ble信号的天线,第二电子设备200上有至少一根用于发射/接收ble信号的天线。第一电子设备100可以通过上述图4a和图4b所示测量ble信号的aoa原理,确定出第一电子设备100相对于第二电子设备200的对准角度。
[0178]
在一些可能的实施例中,发射方410可以是第一电子设备100,接收方420可以是第二电子设备200,第一电子设备100上有至少一根用于发射/接收ble信号的天线,第二电子设备200上有至少两根用于发射/接收ble信号的天线。第二电子设备200可以通过上述图4a和图4b所示测量ble信号的aoa原理,确定出第一电子设备100相对于第二电子设备200的对准角度。
[0179]
下面介绍本发明实施例中涉及的ble信号出发角(angle of departure,aod)的测量原理。
[0180]
图4c-4d为本发明实施例提供的一种蓝牙出发角aod计算原理图。如图4d所示,发射方(transmitter)430可以通过ble发射aod广播包(固定频率扩展信号(constant toneextension,cte)包),aod cte包是连续的经调制过的序列,不做校验,不含循环冗余校验(cyclic redundancy check,crc)和消息完整性代码(message integrity code,mic)。发射方430的host通过hci命令下发测量时使用的天线序列信息。开始测量后,接收方440的控制器441按照发射方430的host下发的天线序列信息,通过其单根天线对接收方440每一根天线发送过来的ble信号进行i&q采样,并把采样信息通过hci命令上报给host,由host计算相对角度。
[0181]
接收方440可以通过控制器441控制一根天线442接收由发射方430发射的该aod cte包。发射方430可以通过控制器431控制射频开关432,按照一定的顺序切换到指定的天线进行的发送该aod cte包。其中,发射方430至少有两根天线433。其中,由接收方440测得的发射方430的ble信号的出发角aod。在一些实施例中,为了提高波到达角的估计精度,可以配备多个天线,阵列的排列方式有一字型、环形、球形等,在此不作限定。
[0182]
如图4c所示,假设发射方430有两根间距为d的天线(天线a和天线b),发射出的ble信号为平面电磁波。其中,由于天线a和天线b发射ble信号不同步,接收方440可以对比接收到发射方430的天线a和天线b发出到ble信号的相位,确定出天线a和天线b发射出ble信号的相位差。
[0183]
其中,ble信号的出发角(aod)可以通过如下公式(2)计算出:
[0184][0185]
其中,θ为ble信号的出发角(aod),ψ为天线a和天线b发射出ble信号的相位差,λ为ble信号的波长,d为天线a与天线b之间的距离。这里可以将θ角设定为第一电子设备与第二电子设备之间的对准角度,即通过公式(2)可以算出第一电子设备与第二电子设备之间的对准角度。
[0186]
在一些可能的实施例中,发射方430可以是第二电子设备200,接收方440可以是第一电子设备100。第一电子设备100上有至少两根用于发射/接收ble信号的天线,第二电子设备200上有至少一根用于发射/接收ble信号的天线。第一电子设备100可以通过上述图4c和图4d所示测量ble信号的aod原理,确定出第一电子设备100相对于第二电子设备200的对准角度。
[0187]
在一些可能的实施例中,发射方430可以是第一电子设备100,接收方440可以是第二电子设备200,第一电子设备100上有至少一根用于发射/接收ble信号的天线,第二电子设备200上有至少两根用于发射/接收ble信号的天线。第二电子设备200可以通过上述图4c和图4d所示测量ble信号的aod原理,确定出第一电子设备100相对于第二电子设备200的对准角度。
[0188]
图5是本发明实施例提供的一种设备的连接方法的流程图,该方法可应用于第一电子设备100。该设备的连接方法包括:
[0189]
步骤502,向至少一个第二电子设备发送定位请求,以确定所述第二电子设备在所
述第一电子设备的坐标系中的第一位置信息
[0190]
该第一位置信息包括第二电子设备在第一电子设备的坐标系中的坐标。
[0191]
步骤504,获取用户的面部图像,计算所述用户的面部预设点在所述第一电子设备的坐标系中的空间坐标;
[0192]
步骤506,从所述面部图像中识别所述用户的面部方位信息,具体地,该面部方位信息包括用户的面部朝向。
[0193]
步骤508,基于用户的面部方位信息、面部预设点的空间坐标和第一位置信息,确定第二电子设备中的第一目标设备;
[0194]
步骤510,向所述第一目标设备发起连接请求,以与所述第一目标设备建立连接。
[0195]
本技术提供的设备连接方法通过将用户的人脸位置、人脸朝向以及周边可连接设备放在坐标系中,确认用户正在看的是哪个设备,以方便地连接。
[0196]
图6是本发明实施例提供的一种设备的连接方法的流程图,该方法可应用于第一电子设备100。该设备的连接方法包括:
[0197]
步骤602,第一电子设备检测用于与第二电子设备进行连接的第一指令。
[0198]
第二电子设备包括但不限于具有蓝牙模块的智能手机、蓝牙音响、投影设备等,具体地,这些设备与上述第二电子设备200相对应,包含支持蓝牙5.1以上协议的蓝牙模块。
[0199]
其中,在第二电子设备中包括目标设备,该目标设备为用户欲连接或者控制的设备。例如,用户想通过第一电子设备100控制投屏设备,该投屏设备即为目标设备。
[0200]
示例性地,参见图7,具体涉及本技术一实施例提供的一种电子设备的连接方法的应用场景的示例图。用户朝向tv1/音箱1,用户很可能欲连接或控制tv1/音箱1,该tv1/音箱1即为目标设备。
[0201]
该第一指令用于开启第一电子设备100的蓝牙模块,具体地,该第一指令可以包括用户输入的指令,该指令的输入方式可以包括通过屏幕输入、语音输入等等。
[0202]
步骤604,第一电子设备响应第一指令,开启连接模式,以发送所述定位请求。
[0203]
当检测到上述第一指令后,第一电子设备100响应第一指令,向至少一个第二电子设备发送定位请求。
[0204]
在一种可能的实现方式中,第一电子设备100可以周期性(例如周期为1秒)广播,向第二电子设备200发送定位请求。或者第一电子设备100在检测到上述第一指令后,发送定位请求。
[0205]
步骤606,第二电子设备向第一电子设备发送用于定位的数据
[0206]
该数据可以包括cte数据包、用于计算第一电子设备和第二电子设备之间的距离的数据、用于指示第二电子设备是否朝向第一电子设备的数据,还包括第二电子设备与第一电子设备之间的对准角度等等。具体地,该数据的类型与上述定位请求相关联。
[0207]
步骤608,确定第二电子设备在第一电子设备的坐标系中的第一位置信息。
[0208]
在一个实施例中,上述用于定位的数据为第二电子设备向第一电子设备发送的cte数据包。
[0209]
具体地,在本发明实施例中,第二电子设备200响应于第一电子设备100的定位请求。向其发送特殊定制的寻向信号,第二电子设备200将cte数据包发送至第一电子设备100,供第一电子设备100计算第二电子设备200相对于第一电子设备100的对准角度。
[0210]
在本发明的一些实施例中,如上述图4a-4b所示的ble信号aoa测量原理,其中第一电子设备100可以是ble信号的接收方,第二电子设备200可以是ble信号的发送方。第一电子设备100在发送定位请求,并经第二电子设备200确认后,第二电子设备200可以向第一电子设备100发送cte广播包,第一电子设备100可以按照一定的顺序切换到指定的天线接收该cte广播包,并根据上述公式(1)计算出第二电子设备200所发射ble信号的aoa,即第二电子设备200相对于第一电子设备100的对准角度。
[0211]
在本发明的一些实施例中,如上述图4c-4d所示的ble信号aod测量原理,其中第一电子设备100可以是ble信号的接收方,第二电子设备200可以是ble信号的发送方。第一电子设备100在发送定位请求,并经第二电子设备200确认后,第二电子设备200可以按照一定的顺序切换指定的天线向第一电子设备100发送cte广播包,第一电子设备100可以接收该cte广播包,并根据上述公式(2)计算出第二电子设备200所发射ble信号的aod,即第二电子设备200相对于第一电子设备100的对准角度。
[0212]
在一个实施例中,上述用于定位的数据可直接为第二电子设备200相对于第一电子设备100的对准角度。
[0213]
具体地,如上述图4a-4b所示的ble信号aoa测量原理,其中第一电子设备100可以是ble信号的发送方,第二电子设备200可以是ble信号的接收方。第一电子设备100在发送定位请求,并经第二电子设备200确认后,第一电子设备100可以向第二电子设备200发送cte广播包,第二电子设备200可以按照一定的顺序切换到指定的天线接收该cte广播包,并根据上述公式(2)计算出第一电子设备100所发射ble信号的aoa,即第一电子设备100相对于第二电子设备200的对准角度。随后由第二电子设备200将所述对准角度发送给第一电子设备100。
[0214]
在本发明的一些实施例中,如上述图4c-4d所示的ble信号aod测量原理,其中第一电子设备100可以是ble信号的发送方,第二电子设备200可以是ble信号的接收方。第一电子设备100在发送定位请求,并经第二电子设备200确认后,第一电子设备100可以按照一定的顺序切换指定的天线向第二电子设备200发送cte广播包,第二电子设备200可以接收该cte广播包,并根据上述公式(2)计算出第一电子设备200所发射ble信号的aod,即第一电子设备100相对于第二电子设备200的对准角度。随后由第二电子设备200将所述对准角度发送给第一电子设备100。
[0215]
在本发明另一个实施例中,上述步骤506中第二电子设备向第一电子设备发送用于定位的数据包括用于测距的其他数据,具体用于确定第一电子设备和第二电子设备的距离,例如,该数据包中包括强度信号rssi。具体地,通过第二电子设备确定rssi,然后发送给第一电子设备。第一电子设备通过公式d=10^((abs(rssi)-a)/(10*n))计算,d为计算所得距离(单位:m),rssi为接收信号强度,a为发射端和接收端相隔1米时的接收信号强度,n为环境衰减因子。需要说明的是,第一电子设备和第二电子设备还可以其他方式计算距离,本实施例示意的计算距离的方法并不构成计算该距离的方式的限制。
[0216]
在一个实施例中,第一电子设备100和第二电子设备200之间的对准角度和距离可以由第一电子设备100计算,也可以由第二电子设备200计算,然后发送给第一电子设备100。
[0217]
在一个实施例中,基于该距离信息和上述对准角度,可以确定在第一电子设备100
的空间坐标系中第二电子设备200的坐标。
[0218]
在一个实施例中,上述第一位置信息包括在第一电子设备100的空间坐标系中第二电子设备200的坐标。
[0219]
步骤610,获取用户的面部图像,计算用户的面部预设点在所述第一电子设备的坐标系中的空间坐标;该步骤可以在步骤604中发送定位请求时同时执行。
[0220]
具体地,上述用户的面部图像通过3d摄像头拍摄,该3d摄像头包括tof、双目、结构光等摄像头,该tof、双目、结构光摄像头可以将人脸坐标定位到第一电子设备的坐标系系中。
[0221]
在一个示例中,上述3d摄像头拍照时对人脸进行3d建模,识别出人脸3d建模坐标。以双眼中心作为人脸位置的代表,可以直接获取到双眼中心点在3d模型中的坐标,将3d模型坐标与本方案中的第一电子设备的坐标系进行转换,即可获得人脸位置在第一电子设备坐标系的坐标。
[0222]
具体地,以结构光3d摄像头为例,结构光3d摄像头包括红外投影模块、彩色相机,以及一块专门用于计算深度的处理器。结构光,顾名思意,为特殊的光源,通常分为三种:离散光斑、条形光,编码结构光,工作时,经过特定编码的光斑从红外投影模块投射到用户的面部上,用户的面部反射红外光,红外投影模块接收反射光,形成图片,根据光斑的畸变情况,计算用户的面部各点距离相机平面的距离,通过计算深度的处理器对获取的用户面部的深度。然后,对用户面部的图像进行3d模型,以形成3d模型。在3d模型的坐标系中确定用户的面部预设点,然后将该3d模型的坐标系中面部预设点的坐标,转化为第一电子设备的空间坐标系中的坐标。
[0223]
需要说明的是,上述转化步骤是发生在3d摄像头的坐标系和第一电子设备的坐标系不同的情况,如果3d摄像头的坐标系和第一电子设备的坐标系相同,则不需要转化。
[0224]
步骤612,从面部图像中识别用户的面部方位信息
[0225]
该面部方位信息具体包括面部朝向。该步骤可以在步骤604中发送定位请求时同时执行。
[0226]
在一个实施例中,可以将获取的用户的面部图像输入到现有的预置的图像识别模型中,基于该识别模型确定用户的面部朝向,用户的面部朝向位于第一电子设备的坐标系中。需要说明的是,在该步骤中还可以包括对用户的人脸进行识别的步骤,以判断是否为实际的操作人员。例如,通过建立操作人员的图像数据库,检测当前操作人员是否为该图像数据库所记载的人员,如果不是,则不是第一电子设备的用户,则不需要执行步骤612及以下步骤。
[0227]
步骤614,接收第二电子设备的屏幕朝向信息,其中,屏幕朝向信息由第二电子设备基于第二位置信息确定,基于屏幕朝向信息,对第二电子设备进行筛选。
[0228]
具体地,该第二位置信息包括第一电子设备与第二电子设备的对准角度,具体地,如何确定对准角度上文已经示出,在此,不在赘述。第二电子设备也可以根据上述计算对准角度的原理,计算第一电子设备在第二电子设备坐标系中的坐标。
[0229]
在一个实施例中,上述步骤606中第二电子设备向第一电子设备发送用于定位的数据还可以包括第二电子设备的屏幕朝向信息,该屏幕朝向信息可由第二电子设备确定,然后发送给第一电子设备。
[0230]
在一个实施例中,在已知第一电子设备和第二电子设备之间的对准角度的情况下,第二电子设备根据其空间坐标系中的预设坐标轴的朝向来判断第二电子设备的屏幕朝向信息。
[0231]
参见图8,具体涉及本技术一种设备的连接方法一实施例中确定第二电子设备的屏幕朝向的示例图。
[0232]
在第二电子设备200的空间坐标系中,以电子设备屏幕正面朝向为z轴方向,电子设备屏幕为x/y轴构成的平面做一个空间坐标系。第二电子设备可以通过对准角度和距离定位和检测第一电子设备在其坐标系中的位置坐标,看该位置坐标的z轴的分量是否大于0,来判断第二电子设备的屏幕是否朝向第一电子设备。
[0233]
具体地,若判断z轴的分量大于零,则屏幕朝向第一电子设备。若小于等于0,则说明第二电子设备的屏幕未朝向第一电子设备。如图7,tv1的z轴分量大于0,tv2的z轴小于0。即tv1朝向第一电子设备,tv2未朝向电子设备。tv2未朝向第一电子设备,可以直接将tv2设置为非目标设备,减轻后续的处理压力。
[0234]
在该实施例中,第二电子设备可直接把其屏幕是否朝向第一电子设备这样的结论性信息发给第一电子设备,这样第一电子设备可以直接得知第二电子设备的屏幕朝向,并基于该屏幕朝向判断结果,对第二电子设备进行筛选,例如,屏幕未朝向第一电子设备的第二电子设备,必然不是用户欲控制的设备,可以将其删除或者屏蔽,不对其发送通信连接,进一步提高了识别效率。需要说明的是,具体如何对第二电子设备筛选,还可以根据用户的需要设置。
[0235]
在一个实施例中,第二电子设备可以将上述z轴的分量大小发送给第一电子设备,然后由第一电子设备判断第二电子设备的屏幕是否朝向自己。具体地,第二电子设备向第一电子设备发送定位信息,第一电子接收该定位信息(z轴分量大小)来判断屏幕第二电子设备的屏幕是否朝向自己,从而对第二电子设备进行筛选。
[0236]
步骤616,基于所述用户的面部方位信息、所述面部预设点的空间坐标和所述位置信息,确定第二电子设备中的第一目标设备。
[0237]
在一个实施例中,基于用户的面部方位信息和面部预设点的空间坐标,建立指示向量。计算每个第二电子设备到指示向量之间的距离,确定第二电子设备与指示向量到距离最小的第二电子设备为第一目标设备。
[0238]
具体地,第一目标设备为用户欲基于第一电子设备控制或者连接的第二电子设备。
[0239]
具体地,第一电子设备100可以基于获取的用户的面部预设点的空间坐标,沿面部朝向建立指示向量,其中,面部预设点的空间坐标位于该指示向量上。具体地,上文已经示出,第一电子设备100可以通过上述3d摄像头获取面部预设点的空间坐标。
[0240]
已知在第一电子设备的坐标系中第二电子设备的空间坐标以及上述指示向量,可以计算第二电子设备到指示向量之间的距离,第一电子设备可以指定距离向量距离最小的第二电子设备为第一目标设备。参见图8,当前建立的指示向量l朝向tv/音频1,相比tv/音频2,向量l距离tv/音频1距离更近,所以tv/音频1为目标设备。
[0241]
步骤618,向所述目标设备发起建立通信连接请求
[0242]
第一电子设备在已知目标设备的情况下,可以向其直接发送通信连接请求,以控
制目标设备或与之通信。
[0243]
需要说明的是,本文公开的的方法在支持蓝牙5.1以上协议的设备上执行,当然还可以在其他支持空间定位的通信网路中执行。
[0244]
在一个实施例中,本技术所公开的方法还可以包括以下步骤:
[0245]
基于指示向量及预设角度,获取检测范围,检测该检测范围内是否包括除第一目标设备之外的第二目标设备,若存在除第一目标设备之外的第二目标设备,将第一目标设备切换为第二目标设备。
[0246]
该步骤的目的为在与第一目标设备建立通信连接后,判断是否连接错误。该检测范围指示用户朝向的一定范围,在该范围内大概率包括用户真正想控制的电子设备。例如,第一电子设备与目标设备建立连接后,用户发现并不是自己想连接的设备,第一电子设备可以在屏幕上显示用户该检测范围的所有第二电子设备,由于当前检测范围内的第二电子设备已经经过筛选,用户再经过选择更加方便。
[0247]
参见图9和图10,具体涉及第一电子设备基于指示向量和用户面部的预设点的空间坐标建立的检测范围。
[0248]
在一个实施例中,如图9,可以该面部预设点的空间坐标为顶点,以指示向量l为轴心,根据需要的角度a,建立该检测范围。例如该角度a为45度,由此形成以面部预设点的空间坐标为顶点的圆锥体,落入该圆锥体内的设备可能包含用户欲控制的目标设备。经过该步骤,可以对用户欲控制的设备进行一次筛选,并将筛选的结果进行显示,以供用户进行校正或重新切换连接或者关闭连接。
[0249]
在另一个实施例中,如图10,可以以该用户面部的预设点的空间坐标为圆心,以设定的距离为半径r做圆,然后沿指示向量方向投影,形成如图的圆柱体,例如该半径r为0.5m,落入该圆柱体内的设备包含用户欲控制的目标设备。经过该步骤,可以对用户欲控制的设备进行一次筛选,并将筛选的结果进行显示,以供用户进行校正或重新切换连接或者关闭连接。
[0250]
上述圆柱体与圆锥体覆盖的空间范围即为上述检测范围。
[0251]
本技术还提供了另一种设备的连接方法,参见图11,具体涉及该设备的连接方法的流程图,该方法可应用于第一电子设备,包括:
[0252]
步骤1102,接收由第二电子设备发出的定位请求和用户的面部图像
[0253]
具体地,用户想使第二电子设备200与第一电子设备100建立连接,可以发送定位请求,该定位请求可以包括协助请求,该协助请求使第一电子设备100确认用户是否朝向自己。具体地,第二电子设备可以将用户的面部图片发送给第一电子设备100,用来后续步骤中判断用户是否朝向自己。
[0254]
步骤1104,识别用户朝向
[0255]
判断用户朝向可以包括以下方法,追踪用户的眼球,基于追踪结果判断用户朝向,具体地,眼球追踪属于本领域的通知常识,在此,不进行阐述。
[0256]
在另一个实施例中,获取用户面部图像,将该图像输入到现有的识别模型中确定用户的面部朝向。
[0257]
在一个可能实现的方式中,第一电子设备可以在获取定位请求后,可以实时拍摄用户图像,经过识别判断用户的面部是否朝向自己,具体地,第一电子设备可以分析用户的
面部图像是否完整,例如,当用户背对第一电子设备100或者侧向第一电子设备,可以判断用户并没有朝向自己。
[0258]
步骤1106,若所述用户朝向所述电子设备,向所述第二电子设备发送反馈信息,所述反馈信息用于指示所述第二电子设备向所述第一电子设备发起建立连接请求。
[0259]
当第一电子设备检测到用户朝向自己时,可以认定用户有控制自己的意图,可以向第二电子设备发送反馈信息,以使第二电子设备向第一电子设备发起通信连接请求。
[0260]
参见图12,图11涉及图11所示方法执行时的场景示例图。
[0261]
tv1可以在获取用户的面部图像后,在接收到第二电子设备200的定位请求时,实时获取用户图像进行识别或者捕捉用户眼球,基于识别或捕捉结果,确定用户是否朝向tv1,当确认用户看向自己时,向第二电子设备200发送反馈信息,指示第二电子设备200向自己发起连接建立请求。
[0262]
可以理解的是,上述终端等为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本技术实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明实施例的范围。
[0263]
本技术实施例可以根据上述方法示例对上述终端等进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本发明实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
[0264]
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
[0265]
在本技术实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
[0266]
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本技术实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
[0267]
以上所述,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何在本技术揭露的技术范围内的变化或替换,都应涵盖在本技术的保护范围之内。因此,本申
请的保护范围应以所述权利要求的保护范围为准。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1