可配置用于各种移动装置尺寸的HMD的系统和方法与流程

文档序号:21732134发布日期:2020-08-05 01:27阅读:417来源:国知局
可配置用于各种移动装置尺寸的HMD的系统和方法与流程

本公开总地涉及可穿戴虚拟现实(vr)和增强现实(ar)装置。更具体地,本公开涉及能够结合各种移动装置尺寸的可头戴式显示器的系统和方法。



背景技术:

通常,结合可移除的移动装置的头戴式装置(hmd)被设计为与单一尺寸的移动装置类型一起操作。



技术实现要素:

技术问题

增强现实hmd通常使用智能手机作为计算和显示单元,然而被限于单一尺寸的智能手机。对于更换移动装置或想要与具有不同智能手机尺寸和外形因素的其它用户共用hmd的用户,仅能够使用一种尺寸的智能手机带来困难。

对问题的方案

在第一实施方式中,提供一种头戴式装置。头戴式装置包括框架、可移除地联接到框架的带结构以及可移除地联接到框架的一部分的第一盒(cartridge)。第一盒配置为支撑显示器。当第一盒联接到框架的该部分并保持显示器时,显示器被取向为以选择的角度背对框架。头戴式装置还包括盖结构,该盖结构能够可移除地附接到框架和第一盒中的至少一个的一部分。头戴式装置具有护目镜(visor),该护目镜可移除地附接到盖结构并设置为使得护目镜的表面配置为在朝向框架的方向上反射在显示器上显示的图像。

在第二实施方式中,提供了提供头戴式装置(hmd)的方法。该方法包括提供框架以及提供可移除地联接到框架的带结构。第一盒可移除地联接到框架的部分。第一盒可以保持显示器,使得当第一盒联接到框架的该部分并保持显示器时,显示器被取向为以选择的角度背对框架。该方法还包括提供盖结构,该盖结构可移除地附接到框架的一部分或第一盒的一部分。提供护目镜,该护目镜可移除地附接到盖结构并设置为使得护目镜的表面朝向框架反射在显示器上显示的图像。

发明的有益效果

本公开提供用于hmd的系统和方法的实施方式,该hmd可配置用于各种移动装置尺寸。在本公开的一实施方式中,该系统和方法可以支持能够使用移动装置的显示器作为图像投影源的增强现实(ar)hmd。由于用户可能具有不同尺寸的移动装置,所以本公开的实施方式可以提供一种arhmd框架,该arhmd框架能够容纳并可移除地结合各种尺寸的移动装置和智能电话。

附图说明

为了更完整地理解本公开及其优点,现在参照以下结合附图进行的描述,附图中:

图1示出根据本公开的一实施方式的网络配置的示例;

图2是根据本公开的一实施方式的电子装置的示例配置的框图;

图3是示出根据本公开的一实施方式的程序模块的框图;

图4示出根据本公开的一实施方式的用于增强现实、虚拟现实或混合现实的头戴式显示器(hmd)的示例;

图5a和图5b示出根据本公开的一实施方式的hmd的透视图;

图6示出根据本公开的一实施方式的hmd的分解图;

图7a和图7b分别示出根据本公开的一实施方式的hmd的分解俯视图和分解仰视图;

图8a和图8b示出根据本公开的一实施方式的具有联接在一起的框架和盒部分的被部分组装的hmd的各种视图;

图9示出根据本公开的一实施方式的hmd的框架部分;

图10示出根据本公开的一实施方式的hmd的盒部分;

图11a、图11b和图11c示出根据本公开的一实施方式的hmd的盖部分的各种视图;

图12a、图12b和图12c示出根据本公开的另一实施方式的hmd的盖部分的各种视图;以及

图13示出根据本公开的一实施方式的示例hmd,其中盖部分包括反射镜机构。

具体实施方式

在进行下面的具体实施方式的理解之前,阐明整个专利文件中使用的特定词语和短语的定义会是有利的。术语“发送”、“接收”和“通信”及其派生词包括直接通信和间接通信两者。术语“包括”和“包含”及其派生词表示包括而没有限制。术语“或”是包含性的,表示和/或。短语“与……相关”及其派生词表示包括、被包括在……内、与……互连、包含、被包含在……内、连接到……或与……连接、联接到……或与……联接、与……通信、与……配合、交错、并置、与……接近、结合到……或与……结合、具有、具有……的性质、具有和……的关系或具有与……的关系等。

而且,下面描述的各种功能可以由一个或更多个计算机程序实现或支持,每个计算机程序由计算机可读程序代码形成并体现在计算机可读介质中。术语“应用”和“程序”是指一个或更多个计算机程序、软件组件、指令集、过程、功能、对象、类、实例、相关数据或其适于在合适的计算机可读程序代码中实施的部分。短语“计算机可读程序代码”包括任何类型的计算机代码,包括源代码、目标代码和可执行代码。短语“计算机可读介质”包括能够由计算机访问的任何类型的介质,诸如只读存储器(rom)、随机存取存储器(ram)、硬盘驱动器、紧凑盘(cd)、数字视频盘(dvd)或任何其它类型的存储器。“非暂时性”计算机可读介质不包括传输暂时性的电或其它信号的有线、无线、光学或其它通信链路。非暂时性计算机可读介质包括在其中数据能够被永久存储的介质以及在其中数据能够被存储并在随后被覆盖的介质,诸如可重写光盘或可擦除存储装置。

如这里使用的,术语“具有”、“可以具有”、“包括”、“可以包括”、“能够具有”或“能够包括”特征(例如数量、功能、操作或部件诸如零件)表示该特征的存在,并且不排除其它特征的存在。

如这里使用的,术语“a或b”、“a和/或b中的至少一个”或“a和/或b中的一个或更多个”可以包括a和b的所有可能的组合。例如,“a或b”、“a和b中的至少一个”、“a或b中的至少一个”可以表示以下全部:(1)包括至少一个a、(2)包括至少一个b或(3)包括至少一个a和至少一个b。

如这里使用的,术语“第一”和“第二”可以修饰各种部件而与重要性无关并且不限制所述部件。这些术语仅用于将一个部件和另一个区别开。例如,第一用户装置和第二用户装置可以表示彼此不同的用户装置,而与装置的顺序或重要性无关。例如,第一部件可以表示为第二部件,反之亦然,而没有脱离本公开的范围。

将理解的是,当一元件(例如第一元件)被称为(操作地或通信地)“联接到”或“连接到”另一元件(例如第二元件)或“与”另一元件(例如第二元件)“联接”或“连接”时,它可以直接联接或连接到该另一元件/与该另一元件直接联接或连接,或经由第三元件与其联接/连接。相反,将理解,当一元件(例如第一元件)被称为“与”另一元件(例如第二元件)“直接联接”或“直接连接”、或者“直接联接到”或“直接连接到”另一元件(例如第二元件)时,没有其它元件(例如第三元件)插入在该元件和该另一元件之间。

如这里使用的,术语“配置(或设定)为”可以取决于情况与术语“适合于”、“具有……的能力”、“被设计为”、“适于”、“被制造为”或“能够”可互换地使用。术语“配置(或设定)为”并不在本质上表示“以硬件专门设计为”。而是,术语“配置为”可以表示装置可以与另一装置或部件一起执行操作。

例如,术语“配置(或设定)为执行a、b和c的处理器”可以表示可通过执行存储在存储装置中的一个或更多个软件程序来执行操作的通用处理器(例如cpu或应用处理器)或者用于执行操作的专用处理器(例如嵌入式处理器)。

如这里使用的术语仅被提供用于描述其一些实施方式,而不是限制本公开的其它实施方式的范围。将理解,单数形式“一”、“一个”和“该”包括复数个指示物,除非上下文另外清楚地指示。这里使用的所有术语(包括技术术语和科学术语)都具有与本公开的实施方式所属的领域内的普通技术人员通常理解的相同的含义。还将理解的,术语诸如在通用字典中定义的那些术语应当被解释为具有与其在相关技术的背景中的含义一致的含义,将不被解释为理想化或过度形式的含义,除非这里明确地如此定义。在某些情况下,这里定义的术语可以被解释为不包括本公开的实施方式。

例如,根据本公开的实施方式的电子装置的示例可以包括智能电话、平板个人计算机(pc)、移动电话、视频电话、电子书阅读器、桌面pc、膝上型计算机、上网本计算机、工作站、pda(个人数字助理)、便携式多媒体播放器(pmp)、mp3播放器、移动医疗装置、相机或可穿戴装置(例如智能眼镜、头戴式装置(hmd)、电子衣服、电子手镯、电子项链、电子配件、电子纹身、智能镜子或智能手表)中的至少一种。

在整个本专利文件提供对其它特定词语和短语的定义。本领域普通技术人员应当理解,在很多情况下,即使不是大多数情况,这样的定义也适用于这样定义的词语和短语的先前以及将来的使用。

根据本公开的实施方式,电子装置可以是智能家用电器。智能家用电器的示例可以包括电视、数字视频盘(dvd)播放器、音频播放器、冰箱、空调、清洁器、烤箱、微波炉、洗衣机、干燥机、空气过滤器、机顶盒、家庭自动化控制面板、安全控制面板、电视盒(例如samsunghomesynctm、appletvtm或googletvtm)、游戏机(xboxtm、playstationtm)、电子词典、电子钥匙、便携式摄像机或电子相框中的至少一种。

根据本公开的某些实施方式,电子装置的示例可以包括各种医疗装置(例如各种便携式医疗测量装置(血糖测量装置、心跳测量装置或体温测量装置)、磁共振血管造影(mra)装置、磁共振成像(mri)装置、计算机断层扫描(ct)装置、成像装置或超声波装置)、导航装置、全球定位系统(gps)接收器、事件数据记录器(edr)、飞行数据记录器(fdr)、汽车信息娱乐装置、航行电子装置(例如航行导航装置或陀螺罗盘)、航空电子设备、安全装置、车载音响本体、工业或家用机器人、自动柜员机(atm)、销售点(pos)装置或物联网装置(例如灯泡、各种传感器、电表或燃气表、洒水器、火警报警器、恒温器、路灯、烤面包机(toaster)、健身器材、热水箱、加热器或锅炉)中的至少一种。

根据本公开的某些实施方式,电子装置可以是一件家具或建筑物/结构的一部分、电子板、电子签名接收装置、投影仪或各种测量装置(例如用于测量水、电、燃气或电磁波的装置)中的至少一种。

根据本公开的实施方式,电子装置是以上列出的装置中的一种或组合。根据本公开的实施方式,电子装置是柔性电子装置。这里公开的电子装置不限于以上列出的装置,并且取决于技术的发展可以包括新的电子装置。

如这里使用的,术语“用户”可以表示使用电子装置的人或另一装置(例如人工智能电子装置)。

在整个本专利文件中提供其它特定词语和短语的定义。本领域普通技术人员应当理解,在很多情况下,即使不是大多数情况,这样的定义也适用于这样定义的词语和短语的先前以及将来的使用。

下面讨论的图1至图13以及本专利文件中的用于描述本公开的原理的各种实施方式仅是为了说明,而不应以任何方式被解释为限制本公开的范围。本领域技术人员将理解,本公开的原理可以被实现在任何适当布置的无线通信系统中。

图1示出根据本公开的各种实施方式的示例网络配置100。图1所示的网络配置100的实施方式仅是为了说明。在不脱离本公开的范围的情况下,可以使用网络配置100的其它实施方式。

根据本公开的某些实施方式,电子装置101被包括在网络环境100中。电子装置101可以包括总线110、处理器120、存储器130、输入/输出(io)接口150、显示器160、通信接口170、事件处理模块180或传感器中的至少一个。在一些实施方式中,电子装置101可以不包括所述部件中的至少一个或者可以添加另外的部件。

总线110包括用于将部件120至170彼此连接并在这些部件之间传输通信(例如控制消息和/或数据)的电路。

处理器120包括中央处理单元(cpu)、应用处理器(ap)或通信处理器(cp)中的一种或更多种。处理器120能够对电子装置101的其它部件中的至少一个执行控制,和/或执行与通信有关的操作或数据处理。

例如,处理器120可以在捕获事件期间接收由相机捕获的多个帧。处理器120可以识别所述多个帧中的每个帧中的显著区域。处理器120可以基于所识别的显著区域从所述多个帧确定参考帧。处理器120可以将非参考帧与确定的参考帧融合为完整的帧。处理器120可以操作显示器以显示完整的帧。

存储器130可以包括易失性和/或非易失性存储器。例如,存储器130可以存储与电子装置101的至少一个其它部件有关的命令或数据。根据本公开的某些实施方式,存储器130可以存储软件和/或程序140。程序140包括例如内核141、中间件143、应用编程接口(api)145和/或应用程序(或“应用”)147。内核141、中间件143或api145中的至少一部分可以表示操作系统(os)。

例如,内核141可以控制或管理用于执行以其它程序(例如中间件143、api145或应用程序147)实现的操作或功能的系统资源(例如总线110、处理器120或存储器130)。内核141提供允许中间件143、api145或应用147访问电子装置101的各个部件以控制或管理系统资源的接口。

中间件143可以例如用作中继器以允许api145或应用147与内核141通信数据。可以提供多个应用147。中间件143能够控制从应用147接收的工作请求,例如通过将使用电子装置101的系统资源(例如总线110、处理器120或存储器130)的优先级分配给所述多个应用134中的至少一个。

api145是允许应用147控制从内核141或中间件143提供的功能的接口。例如,api145包括用于归档控制、窗口控制、图像处理或文字控制的至少一个接口或功能(例如命令)。

io接口150用作例如能够将从用户或其它外部装置输入的命令或数据传送到电子装置101的其它部件(们)的接口。此外,io接口150可以将从电子装置101的其它部件(们)接收的命令或数据输出到用户或其它外部装置。

显示器160包括例如液晶显示器(lcd)、发光二极管(led)显示器、有机发光二极管(oled)显示器或微机电系统(mems)显示器或电子纸显示器。显示器160能够向用户显示例如各种内容(例如文本、图像、视频、图标或符号)。显示器160可以包括触摸屏,并可以使用电子笔或用户的身体部分来接收例如触摸、手势、接近或悬停输入。

例如,通信接口170能够在电子装置101和外部电子装置(例如第一电子装置102、第二电子装置104或服务器106)之间建立通信。例如,通信接口170可以通过无线或有线通信与网络162或164连接以与外部电子装置通信。通信接口170可以是有线或无线收发器或者用于发送和接收信号(诸如视频传送或视频流)的任何其它部件。

电子装置101还包括一个或更多个传感器,所述传感器能够计量物理量或检测电子装置101的激活状态并将计量或检测到的信息转换为电信号。例如,传感器可以包括用于触摸输入的一个或更多个按钮、相机、手势传感器、陀螺仪或陀螺仪传感器、气压传感器、磁传感器或磁力计、加速度传感器或加速度计、握持传感器、接近传感器、颜色传感器(例如红绿蓝(rgb)传感器)、生物物理传感器、温度传感器、湿度传感器、照度传感器、紫外线(uv)传感器、肌电图(emg)传感器、脑电图(eeg)传感器、心电图(ecg)传感器、ir传感器、超声波传感器、虹膜传感器、指纹传感器等。传感器(们)还可以包括用于控制在其中包括的传感器中的至少一个的控制电路。这些传感器(们)中的任何一个可以位于电子装置101内。相机传感器可以捕获用于将由处理器120组合成的单一图像的多个帧。

第一外部电子装置102或第二外部电子装置104可以是可穿戴装置或可安装电子装置101的可穿戴装置(例如头戴式显示器(hmd))。当电子装置101被安装在hmd(例如电子装置102)中时,电子装置101能够检测在hmd中的安装并以虚拟现实模式操作。当电子装置101被安装在电子装置102(例如hmd)中时,电子装置101可以通过通信接口170与电子装置102进行通信。电子装置101可以与电子装置102直接连接以在不涉及单独网络的情况下与电子装置102通信。

无线通信能够使用例如长期演进(lte)、高级长期演进(lte-a)、第五代无线系统(5g)、毫米波或60ghz无线通信、无线usb、码分多址(cdma)、宽带码分多址(wcdma)、通用移动电信系统(umts)、无线宽带(wibro)或全球移动通信系统(gsm)中的至少一种作为蜂窝通信协议。有线连接可以包括通用串行总线(usb)、高清晰度多媒体接口(hdmi)、推荐的标准232(rs-232)或普通老式电话服务(pots)中的至少一种。

网络162包括通信网络(例如计算机网络(例如局域网(lan)或广域网(wan))、互联网或电话网络)中的至少一种。

第一外部电子装置102和第二外部电子装置104以及服务器106的每个可以是与电子装置101相同或不同类型的装置。根据本公开的某些实施方式,服务器106包括一个或更多个服务器的组。根据本公开的某些实施方式,在电子装置101上执行的操作的全部或一些可以在另一个或多个其它电子装置(例如电子装置102和104或服务器106)上执行。根据本公开的某些实施方式,当电子装置101应当自动地或根据请求执行某个功能或服务时,电子装置101可以请求另一装置(电子装置102和104或服务器106)执行与之相关联的至少一些功能,而不是自己执行或另外执行该功能或服务。另一电子装置(例如电子装置102和104或服务器106)能够执行所请求的功能或附加功能,并将执行结果传送给电子装置101。电子装置101可以通过按原样或另外地处理接收到的结果来提供所请求的功能或服务。为此,例如,可以使用云计算、分布式计算或客户端-服务器计算技术。

尽管图1示出电子装置101包括通信接口170以经由网络162与外部电子装置104或服务器106通信,但是根据本公开的某些实施方式,电子装置101可以在没有单独的通信功能的情况下独立地操作。

服务器106可以通过执行在电子装置101上实现的操作(或功能)中的至少一个来支持驱动电子装置101。例如,服务器106可以包括可支持在电子装置101中实现的处理器120的处理模块或处理器。

例如,事件处理服务器模块可以包括事件处理模块180的部件中的至少一个,并执行(或者替代地执行)由事件处理模块180进行的操作(或功能)中的至少一个。

事件处理模块180可以处理从其它元件(例如处理器120、存储器130、输入/输出接口150或通信接口170)获得的信息的至少部分,并可以以各种方式将其提供给用户。

例如,根据本公开的某些实施方式,事件处理模块180处理与事件有关的信息以使其适合虚拟现实模式并显示处理过的信息,该信息是当电子装置101安装在可穿戴装置(例如电子装置102)中以用作显示装置并以虚拟现实模式操作时生成的。当在以虚拟现实模式操作时生成的事件是与运行应用相关的事件时,事件处理模块180可以阻止该应用的运行或处理该应用以作为后台应用或进程来操作。关于事件处理模块180的附加信息可以通过以下描述的图2提供。

尽管在图1中事件处理模块180被示出为与处理器120分开的模块,但是事件处理模块180的至少一部分可以被包括或实现在处理器120或至少一个其它模块中,或者事件处理模块180的整个功能可以被包括或实现在所示的处理器120或另一处理器中。事件处理模块180可以与存储在存储器130中的至少一个程序140互操作地执行根据本公开的实施方式的操作。

图2示出根据本公开的各种实施方式的示例电子装置220。图2所示的电子装置220的实施方式仅用于说明。在不脱离本公开的范围的情况下可以使用电子装置220的其它实施方式。此外,结合图2描述的实施方式可以被应用于多种场景,诸如虚拟现实(vr)、增强现实(ar)、混合现实等。各种现实场景在这里可以统称为交叉现实(xr)。

图2是示出根据本公开的某些实施方式的电子装置的示例配置的框图。参照图2,根据本公开的某些实施方式的电子装置220可以是具有至少一个显示器的电子装置220。在下面的描述中,电子装置220可以是主要执行显示功能的装置,或者可以表示包括至少一个显示器的普通电子装置。例如,电子装置220可以是具有触摸屏230的电子装置(例如智能电话)。

根据本公开的某些实施方式,电子装置220可以包括触摸屏230、控制器240、存储单元250或通信单元260中的至少一个。触摸屏230可以包括显示面板231和/或触摸面板232。控制器240可以包括虚拟现实模式处理单元241、事件确定单元242、事件信息处理单元243或应用控制器244中的至少一个。

例如,当电子装置220被安装在可穿戴装置210中时,电子装置220可以例如作为hmd来操作,并运行虚拟现实模式。此外,根据本公开的某些实施方式,即使当电子装置220没有被安装在可穿戴装置210中时,电子装置220也可以根据用户的设定来运行虚拟现实模式或运行与虚拟现实模式相关的应用。在以下的实施方式中,尽管电子装置220被设定为安装在可穿戴装置210中以运行虚拟现实模式,但是本公开的实施方式不限于此。

根据本公开的某些实施方式,当电子装置220以虚拟现实模式操作(例如,电子装置220被安装在可穿戴装置210中从而以头戴式影院(hmt)模式操作)时,与用户的眼睛(左眼和右眼)相对应的两个屏幕可以通过显示面板231显示。

根据本公开的某些实施方式,当电子装置220以虚拟现实模式操作时,控制器240可以控制与当以虚拟现实模式操作时产生的事件有关的信息的处理以使其适合虚拟现实模式,并显示处理过的信息。根据本公开的某些实施方式,当以虚拟现实模式操作时生成的事件是与运行应用相关的事件时,控制器240可以阻止该应用的运行或处理该应用以作为后台进程或应用操作。

更具体地,根据本公开的某些实施方式,控制器240可以包括虚拟现实模式处理单元241、事件确定单元242、事件信息处理单元243或应用控制器244中的至少一个以执行根据本公开的各种实施方式的功能。本公开的实施方式可以被实现为使用电子装置220的至少一个部件(例如触摸屏230、控制器240或存储单元250)执行如下所述的各种操作或功能。

根据本公开的某些实施方式,当电子装置220被安装在可穿戴装置210中或虚拟现实模式根据用户的设定运行时,或者当与虚拟现实模式相关的应用运行时,虚拟现实模式处理单元241可以处理与虚拟现实模式的操作相关的各种功能。虚拟现实模式处理单元241可以加载存储在存储单元250中的至少一个虚拟现实程序251以执行各种功能。

事件检测单元242确定或检测当以虚拟现实模式操作时由虚拟现实模式处理单元241生成事件。此外,事件检测单元242可以确定是否存在将要在显示屏幕上显示的与当以虚拟现实模式操作时生成的事件相关的信息。此外,事件检测单元242可以确定与当以虚拟现实模式操作时生成的事件相关地将被运行的应用。下面描述与事件的类型相关的应用的各种实施方式。

事件信息处理单元243可以取决于由事件检测单元242确定的结果,当存在与当以虚拟现实模式操作时发生的事件相关的将被显示的信息时,处理将在显示屏上显示的事件相关信息以使其适合虚拟现实模式。可以应用用于处理事件相关信息的各种方法。例如,当以虚拟现实模式实现三维(3d)图像时,电子装置220转换事件相关信息以适合3d图像。例如,二维(2d)地显示的事件相关信息可以被转换为与3d图像相对应的左眼和右眼信息,然后所转换的信息可以被合成并在当前正运行的虚拟现实模式的显示屏上显示。

当事件检测单元242确定存在与当以虚拟现实模式操作时发生的事件相关地将被运行的应用时,应用控制器244执行控制以阻止与该事件相关的应用的运行。根据本公开的某些实施方式,当事件检测单元242确定存在与当以虚拟现实模式操作时发生的事件相关地将被运行的应用时,应用控制器244可以执行控制,使得当事件相关应用运行时该应用在后台运行从而不影响与虚拟现实模式相对应的应用的运行或屏幕显示。

存储单元250可以存储虚拟现实程序251。虚拟现实程序251可以是与电子装置220的虚拟现实模式操作相关的应用。存储单元250还可以存储事件相关信息252。事件检测单元242可以参考存储在存储单元250中的事件相关信息252,以便确定所发生的事件是否将在屏幕上显示或识别关于与所发生的事件相关地将被运行的应用的信息。

可穿戴装置210可以是包括图1所示的电子装置101的至少一个功能的电子装置,并且可穿戴装置210可以是电子装置220能够被安装到其的可穿戴底座。在可穿戴装置210是电子装置的情况下,当电子装置220被安装在可穿戴装置210上时,各种功能可以通过电子装置220的通信单元260提供。例如,当电子装置220被安装在可穿戴装置210上时,电子装置220可以检测是否被安装在可穿戴装置210上以与可穿戴装置210通信,并可以确定是否以虚拟现实模式(或hmt模式)操作。

根据本公开的某些实施方式,当通信单元220被安装在可穿戴装置210上时未能自动确定电子装置220是否被安装时,用户可以通过运行虚拟现实程序251或选择虚拟现实模式(或hmt模式)来应用本公开的各种实施方式。根据本公开的某些实施方式,当可穿戴装置210与电子装置101一起起作用或作为电子装置101的一部分起作用时,可穿戴装置可以被实现为自动确定电子装置220是否被安装在可穿戴装置210上并使电子装置220的运行模式能够自动切换到虚拟现实模式(或hmt模式)。

图2所示的控制器240的至少一些功能可以被包括在图1所示的电子装置101的事件处理模块180或处理器120中。图2所示的触摸屏230或显示面板231可以对应于图1的显示器160。图2所示的存储单元250可以对应于图1的存储器130。

尽管在图2中触摸屏230包括显示面板231和触摸面板232,但是根据本公开的某些实施方式,显示面板231或触摸面板232也可以被提供为单独的面板,而不是被结合在单个触摸屏230中。此外,根据本公开的某些实施方式,电子装置220可以包括显示面板231,而不包括触摸面板232。

在本公开的某些示例中,为了便于描述,电子装置220可以被表示为第一装置(或第一电子装置),可穿戴装置210可以被表示为第二装置(或第二电子装置)。

根据本公开的某些实施方式,一种电子装置包括:显示单元,在与虚拟现实模式相对应的屏幕上进行显示;以及执行控制的控制器,根据至少一个事件的某些实施方式检测中断、以与虚拟现实模式相对应的形式改变与事件相关的事件相关信息以及在与虚拟现实模式相对应的显示屏上显示改变后的事件相关信息。

根据本公开的某些实施方式,事件可以包括从呼叫接收事件、消息接收事件、警报通知、调度程序通知、无线保真(wi-fi)连接、wifi断开、低电量通知、数据许可或使用限制通知、无应用响应通知或异常应用终止通知当中选择的任何一个或更多个。

根据本公开的某些实施方式,电子装置还包括存储单元,该存储单元配置为当事件不是将以虚拟现实模式显示的事件时存储事件相关信息,其中控制器可以执行控制以在电子装置从虚拟现实模式切换为透视模式(see-throughmode)时显示存储在存储单元中的事件相关信息。

根据本公开的某些实施方式,电子装置还包括存储单元,该存储单元存储关于将以虚拟现实模式显示的至少一个事件的信息。

根据本公开的某些实施方式,该事件包括即时消息接收通知事件。

根据本公开的某些实施方式,当事件是与运行至少一个应用相关的事件时,控制器可以根据该事件的发生而执行阻止该应用运行的控制。

根据本公开的某些实施方式,当电子装置的屏幕模式从虚拟现实模式切换为透视模式时,控制器可以执行控制以运行被阻止的应用。

根据本公开的某些实施方式,当事件是与运行至少一个应用相关的事件时,控制器可以执行以下控制,根据该事件的发生使该应用能够在虚拟现实模式的屏幕的后台运行。

根据本公开的某些实施方式,当电子装置与可穿戴装置连接时,控制器可以执行控制以运行虚拟现实模式。

根据本公开的某些实施方式,控制器可以使事件相关信息能够被布置和处理以在当前显示屏幕上显示的虚拟现实模式屏幕的三维(3d)空间中显示。

根据本公开的某些实施方式,电子装置可以包括附加的传感器,诸如一个或更多个红色、绿色、蓝色(rgb)相机、动态视觉传感器(dvs)相机、360度相机或其组合。

图3是示出根据本公开的某些实施方式的程序模块的框图。参照图3,程序模块可以包括系统操作系统(例如os)310、框架(framework)320和应用330。

系统操作系统310可以包括至少一种系统资源管理器或至少一种装置驱动器。系统资源管理器可以执行例如系统资源的控制、分配或回收。系统资源管理器可以包括至少一种管理器,诸如进程管理器、存储器管理器或文件系统管理器。装置驱动器可以包括至少一种驱动器,诸如例如显示器驱动器、相机驱动器、蓝牙驱动器、共享存储器驱动器、usb驱动器、小键盘驱动器、wi-fi驱动器、音频驱动器或进程间通信(ipc)驱动器。

根据本公开的某些实施方式,框架320(例如中间件)可以提供例如应用通常需要的功能或者通过应用编程接口(api)向应用提供各种功能,以允许该应用有效地使用电子装置内部的有限系统资源。

框架320中包括的vr框架可以控制与电子装置上的虚拟现实模式操作相关的功能。例如,当运行虚拟现实模式操作时,vr框架320可以控制应用330当中的与虚拟现实相关的至少一个vr应用351,从而在电子装置上提供虚拟现实模式。

应用330可以包括多个应用并可以包括以虚拟现实模式运行的至少一个vr应用351以及以正常模式(其不是虚拟现实模式)运行的至少一个正常应用352。

应用330还可以包括vr控制应用340。所述至少一个vr应用351和/或至少一个正常应用352的操作可以在vr控制应用340的控制下被控制。

当在电子装置以虚拟现实模式操作时发生至少一个事件时,系统操作系统310可以将事件的发生通知给框架320(例如vr框架)。

然后框架320可以控制正常应用352的运行,使得对于在正常模式下而不是在虚拟现实模式下发生的事件,可以在屏幕上显示事件相关信息。当存在与在正常模式下发生的事件相关地将被运行的应用时,框架320可以执行或提供控制以使所述至少一个正常应用352运行。

根据本公开的某些实施方式,当以虚拟现实模式操作时发生事件时,框架320(例如vr框架)可以阻止至少一个正常应用352的显示与所发生的事件相关的信息的操作。框架320可以将当以虚拟现实模式操作时发生的事件提供给vr控制应用340。

vr控制应用340可以处理与当以虚拟现实模式操作时发生的事件相关的信息以适合虚拟现实模式的操作。例如,二维(2d)的平面事件相关信息可以被处理为3d信息。

vr控制应用340可以控制当前正运行的至少一个vr应用351,并且可以执行控制以合成处理后的事件相关信息以在由vr应用351运行的屏幕上显示并在其上显示事件相关信息的结果。

根据本公开的某些实施方式,当在以虚拟现实模式操作时发生事件时,框架320可以执行控制以阻止与所发生的事件相关的至少一个正常应用352的运行。

根据本公开的某些实施方式,当在以虚拟现实模式操作时发生事件时,框架320可以执行控制以暂时阻止与所发生的事件相关的至少一个正常应用352的运行,然后当虚拟现实模式终止时,框架320可以执行控制以运行被阻止的正常应用352。

根据本公开的某些实施方式,当在以虚拟现实模式操作时发生事件时,框架320可以控制与所发生的事件相关的至少一个正常应用352的运行,使得与该事件相关的所述至少一个正常应用352在后台操作从而不影响当前运行的vr应用351的屏幕。

结合图3描述的实施方式是用于以程序的形式实现本公开的实施方式的示例,本公开的实施方式不限于此,而是可以实现为其它各种形式。此外,尽管结合图3描述的实施方式参考vr,但是它可以应用于其它场景,诸如增强现实、混合现实等。各种现实场景在这里可以被统称为交叉现实(xr)。

图4示出用于增强现实、虚拟现实或混合现实的头戴式显示器(hmd)400的示例实施方式。hmd400的实施方式仅用于说明。在不脱离本公开的范围的情况下可以使用其它实施方式。

在图4所示的示例中,hmd400被示出为佩戴在用户的头403上。hmd400可以包括框架402和可拆卸地附接或固定到框架402的前部的护目镜(这里也被描述为透镜或眼镜)404。hmd400还包括可移除地安装或附接到框架402作为显示投影源的移动装置406。来自移动装置406的显示器的至少一个图像可以被投影到护目镜404的用户面对或框架面对表面405上,使得用户能够观看从框架面对的护目镜表面405反射的所述至少一个图像并且同时用户也能够透过透镜或护目镜404看到现实世界的物体。在一些实施方式中,护目镜由用于眼镜、护目镜和护眼产品的清澈或透明的丙烯酸、聚碳酸酯或其它合理等同或类似的材料制成。因此,透明在这里被定义为从完全透明经部分透明到半透明的任何范围的透明度。在一些实施方式中,护目镜404的透明度可以基于环境照明或从hmd400提供给护目镜404的信号来改变。

图5a和图5b示出hmd500的一实施方式的示范性透视图。hmd500的实施方式仅用于说明,并且在不脱离本公开的范围的情况下可以使用其它实施方式。在某些实施方式中,hmd500可以与hmd400相似或相同地配置。

hmd500包括框架502和附接到框架502的前上部的护目镜504。护目镜504具有一个或更多个透明的透镜。移动装置或智能手机506被示出为被安装到hmd500中,使得移动装置506的显示器505以选择的角度面向前或背对框架502。显示器505面向护目镜504的内表面或框架面对表面,使得显示器505上的图像可以通过该内表面或框架面对的护目镜表面被朝向用户的眼睛反射511,也就是,由显示器505投影的图像被提供为在护目镜504的内表面上呈现。用户观看护目镜上的反射图像。因此,在显示器上显示的图像可以左右反转地显示。此外,图像可以根据用户的双眼来划分和显示。头带508可以附接到框架502的左侧和右侧。头带508配置为绕用户的头且与框架502的前额表面510结合地装配,将hmd500稳定地保持在用户的头上。

图6绘出以分解图绘出hmd500的一实施方式的图示。arhmd装置500可以包括框架502、护目镜504、可移除的移动装置506、头带或绑带508、盒512和盖514。框架502可以包括用于将框架固定到用户的头的绑带508。绑带508可以经由接头(tab)520或其它合理的附接机构可移除地附接到框架502。框架502的一部分(前额表面510)被设计为在佩戴时与使用者的头的一部分(例如前额)接触并相应地成形。框架结构502配置为连接或附接到hmd装置500的其它部分或区段。如所示的,可移除地可拆卸盖514(其能够遮挡护目镜504的内表面以不受自头顶上方的光的影响)可以在各种实施方式中也被认为是框架502的部分。盒512可以成形为将移动装置506保持或容纳在凹槽518中。带有或不带有移动装置506的盒512可以可拆卸地附接到框架的结构。在一些实施方式中,盒512可以通过滑动或卡扣而在从框架502的前部延伸的一对托架或开槽的延伸部516之间可移除地附接到框架502。盒512可以包括标识符,移动装置506可以通过识别该标识符来识别盒是否附接到hmd。移动装置506可以经由无线接口(诸如经由近场通信协议,诸如蓝牙)来识别标识符。盒512包括凹槽518。凹槽518将尺寸形成得并适合于保持具有预定的选择尺寸的移动装置506。然而,没有具体示出的其它可互换的盒可以具有尺寸不同的凹槽,使得盒是可互换的并且不同的盒可以容纳各种不同尺寸的移动装置或显示器。这样的其它可互换的盒也可以可拆卸地附接到相同框架结构的托架或盒保持狭槽516,这允许具有不同尺寸的移动装置的用户使用相同的hmd框架500。在所示的实施方式中,盒512可以滑动或卡入适当位置以便被附接或安装到hmd框架盒托架或狭槽516。在某些实施方式中,不同的安装机构可以将盒512可移除地固定在适当位置。这样的安装机构包括但不限于扣环、夹具、按扣(snap)、夹子、接头、凹口、凸块和孔、压力配合、挠性夹子、紧固件、滑动件、榫舌和沟槽、或其它类似或相关的附接机构。护目镜或透镜504可以可拆卸地联接到盖514的前部或侧部或者框架502的其它方位位置。联接件522可以使用接头、夹子、紧固件、棘轮握持部(ratchetgrip)、磁体、粘合剂、搭扣配合、钩和环、或任何其它类似的机构来将护目镜504附接到盖514。在某些实施方式中,可以利用磁体或其它可重复使用的机构将护目镜504附接到框架502或盖514。

图7a-图7b以顶部和底部分解图示出hmd700的另一实施方式。hmd700的实施方式仅用于说明,并且不脱离本公开的范围的情况下可以使用其它实施方式。在某些实施方式中,hmd700可以与hmd400相似或相同地配置。

在图7a所示的示例中,hmd的框架702附接到可调节的绑带708、盒712和盖714。如以上参照图6描述并且也在图7b中示出的,盖714可以包括磁性元件724以将护目镜可移除地联接或可移除地附接到盖714。

图8a和图8b示出部分组装的hmd800的各种视图,其中框架802和盒812被可移除地联接在一起。盒812可以是具有不同尺寸的凹槽518的多个盒之一,以便在其中容纳并保持不同尺寸的移动装置。在一些实施方式中,切口或开口815位于盒812的底表面817上。开口815还在凹槽518的底部上,并被定位为允许在移动装置上的背侧相机或其它背侧传感器(诸如光、声音、湿度或温度传感器)、或背侧发射器(诸如光发射器、声音发射器或无线发射器)被安装在hmd800的盒812中的移动装置使用。

当与框架802联接时,托架或狭槽816以及框架802上的夹子或多个夹子821的组合与盒812接合并将盒812保持在适当位置。

图9示出hmd框架902的一实施方式。hmd框架902的实施方式仅用于说明,并且在不脱离本公开的范围的情况下可以使用其它实施方式。

框架902可以包括配置为与用户的前额接触的框架部分或前额表面910。框架902还可以包括或附接到绑带908。绑带908可以是可调节的。或者,可以使用其它类型的绑带908以将框架902可移除地保持到用户的头。环绕式绑带或弹性绑带仅是本领域中已知的将框架902固定到用户的头的多种方式的两个示例。或者,可以在框架的与用户的头接触的部分(前额表面910)和框架902自身之间使用缓冲材料。为了用户的舒适,这样的缓冲材料可以是毡、布、泡沫、记忆泡沫、凝胶或其它类似的材料。示出一个或更多个夹子921以及侧托架或狭槽916。在一些实施方式中,侧托架或狭槽916使盒能够滑入狭槽916中的正确位置,并且可移除地将多个盒中的一个夹在框架902上的适当位置。所述多个盒中的每个可以具有相同的外部尺寸和不同尺寸的凹陷区域以容纳不同尺寸的移动装置或显示装置。

图10示出示范性盒812的视图,该盒812配置为将特定尺寸的移动装置保持在凹槽区域818中。盒812可移除地附接到框架802。盒812具有结构化的凹槽818连同开口815,其将尺寸形成为可移除地保持、容纳和联接特定尺寸或型号的移动装置或显示器。其它盒被设计和配置为具有不同尺寸的凹陷区域818从而与不同长度、宽度和厚度配置的其它移动装置型号联接。其它盒具有全部相同的外部尺寸,所以它们都能够可互换地附接或联接到hmd框架802。凹槽区域818可以由盒或凹槽底表面826和侧壁828界定。侧壁828从底表面826向上延伸以限定凹槽区域818。侧壁828围绕凹槽底表面826的周边的至少一部分延伸。侧壁828的厚度可以随不同的盒变化以容纳不同尺寸的移动装置或显示器。

凹口830或(可选地)缺口或通孔可以位于盒812上以将夹子821、接头或其它保持机构接收在框架802上。将盒联接到框架可以使用多种联接手段或配置中的任一种,诸如夹子、接头、紧固件、凹口、托架、狭槽、柔性构件、按扣、绑带或按键式联接件(仅举几个例子)。

图11a-图11c分别示出示例盖814的俯视图、透视图和仰视图。盖814可以用夹子、紧固件、接头、凹口等可移除地附接到框架802。穿过盖814的表面的开口832可以被定位为允许用户接近位于盒内的移动装置的侧表面上的一个或更多个按钮或控制件。例如,开口832可以允许用户接近移动装置的开/关按钮或控制件。在各种实施方式中,盖814可以可移除地联接到hmd的透镜或护目镜部分。图11c绘出多个磁性元件824,其能够将盖814可移除地联接到透镜或护目镜部分。当连接到框架和护目镜时,盖遮挡护目镜的内表面免受外部光的影响,该外部光可能在hmd的护目镜部分上产生眩光或不需要的反射。

图12a、图12b和图12c示出hmd950的另一示例实施方式,其包括具有适配器部分952的盖954,该适配器部分952配置为将相机或视频记录装置附件(未具体示出)安装并保持到盖954。如图12a所示,适配器952包括入口956,其中相机装置可以被安装到盖954以面向前方向或背对框架方向并穿过入口956。或者,如图12b所示,相机可以是装配在可拆卸支架960中的可拆卸附件,该可拆卸支架960能够可移除地附接到盖954的上部上的适配器连接器958。

在某些实施方式中,如图12c所示,hmd250包括立体相机。例如,盖954可以包括两个或更多个相机1205,或者可以包括用于两个或更多个相机1205的连接。所述两个或更多个相机1205可以经由有线或无线连接而联接到移动装置或智能电话506。例如,所述两个或更多个相机1205可以经由盖954中的有线接口(诸如经由通信接口)联接到移动装置或智能电话506。在某些实施方式中,所述两个或更多个相机1205可以经由无线接口(诸如经由近场通信协议,诸如蓝牙)联接到移动装置或智能电话506。

图13示出另一示例实施方式,其中盖954包括位于盖954的前表面下面的反射镜机构962。反射镜或反射镜机构962定位在合适的角度以将用户的眼睛运动朝向保持在盒中的移动装置的面向前部的相机反射。例如,反射镜机构962可以被定位在盖954的面对内部框架的部分上,使得用户的眼睛运动被朝向移动装置的相机(例如前部相机、后部相机等)反射。反射镜机构962可以包括一个或更多个反射镜。在一些实施方式中,反射镜在被固定的位置和角度以将用户的眼睛运动朝向相机反射。或者,可以使用诸如电机、伺服、齿轮或压电装置的机构,这些机构由移动装置用信号通知以调整或手动调整反射镜的角度或位置,使得其将用户的眼睛运动反射到移动装置的相机中。或者,在各种实施方式中,其它反射/折射机构(诸如棱镜、透镜或其它已知的光学元件)也可以改变光或反射的方向。在一些实施方式中,反射镜机构被安装到盒。因此,反射镜机构和盒的组合将反射镜机构定位在将用户的眼睛运动反射到被保持在所选择的盒中的特定移动装置的相机中的位置。

尽管已经用示例实施方式描述了本公开,但是可以向本领域技术人员提出各种改变和修改。所意欲的是,本公开涵盖落入所附权利要求的范围内的这样的改变和修改。

本申请中的描述都不应被理解为暗示任何特定元件、步骤或功能是必须包括在权利要求范围内的必要要素。受专利权保护的主题的范围仅由权利要求书限定。而且,权利要求都不旨在援引35u.s.c.§112(f),除非确切的词语“用于......的机构”后面跟着分词(participle)。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1