映射联网设备的制作方法

本公开内容总体上涉及映射联网设备以用于控制联网设备并与联网设备交互。例如，本公开内容的各方面涉及使用扩展现实系统来定位和映射联网设备以控制联网设备并与联网设备交互。

背景技术：

1、扩展现实(例如，增强现实、虚拟现实等)设备(诸如智能眼镜和头戴式显示器(hmd))通常实现相机和传感器以跟踪扩展现实(xr)设备和物理环境内的其它对象的位置。xr现实设备可以使用跟踪信息来向xr设备的用户提供现实的xr体验。例如，xr设备可以允许用户体验沉浸式虚拟环境或内容或与沉浸式虚拟环境或内容交互。为了提供现实的xr体验，xr技术可以将虚拟内容与物理世界集成，这可以涉及匹配对象和设备的相对姿态和移动。xr技术可以使用跟踪信息来计算设备、对象和/或现实世界环境的地图的相对姿态，以便匹配设备、对象和/或现实世界环境的相对位置和移动，并且以令人信服的方式将内容锚定到现实世界环境。相对姿势信息可以用于将虚拟内容与设备、对象和现实世界环境的用户所感知运动和时空状态进行匹配。

2、一些电子设备(诸如xr设备和其它电子设备(例如，移动电话、平板计算机等))可以与其它设备配对以与其它设备交互。例如，电子设备可以与联网设备(诸如物联网(iot)、连接的或智能家居设备(例如，智能相机、扬声器、灯泡、锁、插头、恒温器、显示器、电视、安全系统、电器等))配对，以控制联网设备。通常，配置电子设备以控制联网设备或其它电子设备的过程可能是困难的，并且通常涉及耗时的手动努力。

技术实现思路

1、本文描述了用于定位和映射一个或多个设备(诸如联网设备(例如，物联网(iot)、连接的或智能设备等))的系统和技术。根据至少一个示例，提供了一种用于使用诸如扩展现实(xr)设备之类的电子设备来映射联网设备以控制联网设备的方法。所述方法包括：从耦合到电子设备的连接设备接收标识输出；以及基于从所述连接设备输出的所述标识，在所述电子设备的坐标系中映射所述连接设备。

2、根据至少一个示例，提供了一种用于映射联网设备以使用诸如xr设备的电子设备来控制联网设备的非暂时性计算机可读介质。在一些示例中，所述非暂时性计算机可读介质可以包括指令，所述指令在由一个或多个处理器执行时使得所述一个或多个处理器从耦合到电子设备的连接设备接收标识输出；并且基于来自所述连接设备的标识输出，在所述电子设备的坐标系中映射所述连接设备。

3、根据至少一个示例，提供了一种用于使用诸如xr设备之类的电子设备来映射联网设备以控制联网设备的装置。在一些示例中，该装置可以包括存储器和耦合到存储器的一个或多个处理器，该一个或多个处理器被配置为从耦合到电子设备的连接设备接收标识输出；以及基于来自所述连接设备的标识输出，在电子设备的坐标系中映射所述连接设备。

4、根据至少一个示例，提供了用于使用诸如xr设备之类的电子设备来映射联网设备以控制联网设备的另一装置。在一些示例中，所述装置可以包括：用于从耦合到电子设备的连接设备接收标识输出的单元；以及基于从所述连接设备输出的所述标识，在所述电子设备的坐标系中映射所述连接设备。

5、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：基于所述标识输出来确定所述连接设备的位置；以及基于所述连接设备的所述位置，在所述电子设备的坐标系中映射所述连接设备。

6、在一些示例中，所述标识输出可以包括音频图案(pattern)、显示图案、光图案和无线电信号中的至少一项。

7、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：向所述连接设备发送被配置为触发来自所述连接设备的附加标识输出的信号；基于未能接收所述附加标识输出，在一个或多个不同时间向所述连接设备发送一个或多个附加信号，所述一个或多个附加信号被配置为触发来自所述连接设备的附加标识输出；从所述连接设备接收所述附加标识输出；以及基于所述附加标识输出来确定所述连接设备的位置。在一些示例中，在所述电子设备的坐标系中映射所述连接设备可以包括更新设备地图以将所述连接设备与所述连接设备的位置相关联。

8、在一些示例中，在一个或多个不同时间发送所述一个或多个附加信号包括：当所述电子设备在与所述连接设备的映射位置的门限接近度之内并且所述连接设备的映射的位置在所述电子设备的图像传感器的视场内时，确定未能接收所述附加标识输出；以及基于未能接收所述附加标识输出，向所述连接设备发送所述一个或多个附加信号。

9、在一些示例中，在一个或多个不同时间发送一个或多个附加信号可以包括周期性地发送一个或多个附加信号，直到经过预定时间量而没有从连接设备接收附加标识输出和发送多个附加信号而没有从连接设备接收附加标识输出中的至少一项为止。

10、在一些示例中，从所述连接设备接收所述标识输出可以包括：基于来自所述电子设备的一个或多个传感器的数据来检测所述标识输出中的一个或多个模式；以及将所述一个或多个模式识别为来自所述连接设备的所述标识输出。

11、在一些情况下，所述一个或多个模式可以包括音频图案，并且所述一个或多个传感器可以包括音频传感器。在一些情况下，所述一个或多个图案可以包括显示图案，并且所述一个或多个传感器可以包括图像传感器。在一些情况下，所述一个或多个图案可以包括光图案，并且所述一个或多个传感器可以包括光传感器。

12、在一些方面中，将所述一个或多个图案识别为来自所述连接设备的所述标识输出可以包括：使用神经网络和特征匹配中的至少一项来将所述一个或多个图案识别为所述标识输出。

13、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：接收由所述连接设备触发动作的请求；基于所述连接设备的映射来识别所述连接设备的位置；以及向所述连接设备发送被配置为由所述连接设备触发动作的命令。

14、在一些情况下，由所述连接设备触发所述动作的请求可以包括向所述电子设备发送由所述连接设备捕获的视频馈送的请求。在一些示例中，所述方法、非暂时性计算机可读介质和装置可以包括向所述连接设备发送命令，其中，所述命令被配置为触发所述连接设备向所述电子设备发送视频馈送；从所述连接设备接收视频馈送；以及在所述电子设备处显示视频馈送。

15、在一些示例中，通过所述连接设备触发所述动作的请求可以包括触发所述连接设备显示来自所述电子设备的内容的请求，并且向所述连接设备发送所述命令可以包括向所述连接设备发送包括所述命令和来自所述电子设备的内容的数据。在一些示例中，所述命令被配置为触发所述连接设备显示来自所述电子设备的内容。

16、在一些示例中，通过所述连接设备触发所述动作的请求可以包括调整所述连接设备的功率模式的请求，以及所述命令被配置为调整所述连接设备的功率模式。

17、在一些情况下，所述连接设备可以包括灯泡，由所述连接设备触发所述动作的请求可以包括调整由所述灯泡发射的光的亮度和颜色中的至少一项的请求，并且所述命令被配置为触发所述灯泡以调整由所述灯泡发射的光的亮度和颜色中的至少一项。

18、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：检测与所述电子设备相关联的用户的手势，所述手势指示所述连接设备的位置；基于所述手势，触发来自物理环境中的一个或多个连接设备的一个或多个标识输出；从所述一个或多个标识输出接收特定标识输出，所述特定标识输出源自所述位置；以及基于所述特定标识输出来确定所述连接设备位于所述位置处。在一些示例中，在所述电子设备的坐标系中映射所述连接设备可以包括更新设备地图以将所述连接设备与所述连接设备的位置相关联。

19、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：接收与所述电子设备相关联的用户的语音命令，所述语音命令指示所述连接设备的位置；基于所述语音命令，触发来自物理环境中的一个或多个连接设备的一个或多个标识输出；从所述一个或多个标识输出接收特定标识输出，所述特定标识输出源自所述位置；以及基于所述特定标识输出来确定所述连接设备位于所述位置处。

20、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：触发一个或多个连接设备进入映射模式；向所述一个或多个连接设备发送设备标识输出；从所述一个或多个连接设备接收定位信息，所述定位信息指示所述一个或多个连接设备相对于所述电子设备的位置；以及基于来自所述一个或多个连接设备的所述定位信息，在所述电子设备的所述坐标系中映射所述一个或多个连接设备。

21、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：触发一个或多个连接设备进入映射模式；从所述一个或多个连接设备接收定位信息，所述定位信息指示地标相对于所述一个或多个连接设备的第一位置；基于所述定位信息和所述地标相对于所述电子设备的第三位置来确定所述一个或多个连接设备的第二位置；以及基于所述一个或多个连接设备的所述第二位置在所述电子设备的所述坐标系中映射所述一个或多个连接设备。

22、在一些示例中，所述标识输出可以包括光图案，并且所述光图案可以包括由所述电子设备发射的光调光和增亮水平的图案、由所述电子设备发射的光的色温变化的图案以及由所述电子设备发射的闪烁光的序列中的至少一项。

23、在一些示例中，所述标识输出可以包括显示图案，并且所述显示图案可以包括显示在所述电子设备的显示设备上的代码、显示在所述电子设备的显示设备上的图像、显示在所述电子设备的显示设备上的视觉图案和显示在所述电子设备的显示设备上的数字对象中的至少一项。

24、在一些示例中，所述标识输出可以包括音频图案，并且所述音频图案可以包括由所述电子设备输出的音频代码和由所述电子设备输出的声音序列中的至少一项。

25、在一些方面中，所述方法、非暂时性计算机可读介质和装置可以包括：向所述连接设备发送被配置为触发来自所述连接设备的标识输出的信号；以及从所述连接设备接收标识输出。

26、在一些情况下，接收所述标识输出可以包括从由所述连接设备广播的多个标识输出接收一个或多个标识输出，所述一个或多个标识输出包括所述标识输出。

27、在一些情况下，所述连接设备是灯泡、扬声器、电视、麦克风、一个或多个传感器、相机、恒温器和可穿戴设备中的至少一项。

28、在一些示例中，所述标识输出可以包括接收的无线电信号。

29、在一些方面中，上述装置中的每个装置是联网设备和/或xr设备(例如，虚拟现实(vr)设备、增强现实(ar)设备或混合现实(mr)设备)，可以是联网设备和/或xr设备的一部分，或者可以包括联网设备和/或xr设备。在一些示例中，所述装置可以包括车辆、移动设备(例如，移动电话或所谓的“智能电话”或其它移动设备)、可穿戴设备、个人计算机、膝上型计算机、平板计算机、服务器计算机、机器人设备或系统、航空系统或其它设备或者是其一部分。在一些方面，所述装置包括用于捕获一个或多个图像的图像传感器(例如，相机)或多个图像传感器(例如，多个相机)。在一些方面中，所述装置包括用于显示一个或多个图像、通知和/或其它可显示数据的一个或多个显示器。在一些方面，所述装置包括一个或多个扬声器、一个或多个发光器件和/或一个或多个麦克风。在一些方面中，上文描述的装置可以包括一个或多个传感器。在一些情况下，所述一个或多个传感器可以用于确定所述装置的位置、所述装置的状态(例如，跟踪状态、操作状态、温度、湿度水平和/或其它状态)和/或用于其它目的。

30、该
技术实现要素：
既不旨在标识所要求保护的主题的关键或必要特征，也不旨在单独用于确定所要求保护的主题的范围。应当通过参考本专利的整个说明书的适当部分、任何或全部附图以及每个权利要求来理解该主题。

31、在参照以下说明书、权利要求以及附图之后，前述内容以及其它特征和实施例将变得更加显而易见。