一种成像设备及其交互方法与流程

文档序号:32868405发布日期:2023-01-07 02:40阅读:34来源:国知局
一种成像设备及其交互方法与流程

1.本说明书涉及医疗器械领域,特别涉及一种成像设备及其交互方法。


背景技术:

2.孔径类成像设备,如磁共振成像(magnetic resonance imaging,mri)设备或计算机断层扫描(computed tomography,ct)成像设备,在进行检查或治疗时,需要将患者移入检查孔径内。对于幽闭恐惧症患者,可能会出现胸闷、气短、心悸等症状;对于部分儿童,可能难以保持长时间的安静平躺。
3.因此,希望提供一种成像设备,使得患者在孔径中可以实现沉浸式交互,为患者营造舒适愉悦的检查环境。


技术实现要素:

4.本说明书一个方面提供一种交互方法,用于成像设备,所述成像设备包括至少两个投影装置。所述方法包括:通过图像采集装置获取包含目标对象的图像;基于所述图像确定投影内容;基于所述投影内容,控制所述至少两个投影装置在所述成像设备的目标区域进行投影。
5.在一些实施例中,所述目标区域位于所述成像设备的检查孔径内壁;所述基于所述图像确定投影内容,包括:基于所述图像确定所述目标对象的特征信息;基于所述特征信息确定交互模式,所述交互模式包括简单模式和复杂模式;以及所述基于所述投影内容,控制所述至少两个投影装置在所述成像设备的目标区域进行投影,包括:根据确定的所述交互模式,控制所述至少两个投影装置在所述目标区域投影相应的目标交互界面。
6.在一些实施例中,所述基于所述图像确定投影内容,包括:基于所述图像确定所述目标对象的特征信息;基于所述特征信息确定目标投影内容,所述目标投影内容包括视频、游戏、图片中的至少一种。
7.在一些实施例中,所述基于所述图像确定投影内容,包括:基于所述图像确定所述目标对象的眼球信息;基于所述眼球信息,确定所述目标对象的操作指令;基于所述操作指令,确定目标投影内容。
8.在一些实施例中,所述方法还包括:基于所述操作指令,切换所述目标区域的投影内容。
9.在一些实施例中,所述方法还包括:基于所述图像确定所述目标对象的位置信息;基于所述位置信息,确定所述目标区域的位置。
10.在一些实施例中,所述方法还包括:基于所述目标区域的位置,校正所述至少两个投影装置在所述目标区域的投影图像。
11.本说明书另一个方面提供一种成像设备,包括:扫描仪,用于获取目标对象的扫描数据;图像采集装置,用于获取包含所述目标对象的图像;控制模块,用于基于所述图像确定投影内容;至少两个投影装置,用于基于所述投影内容,在目标区域进行投影,所述目标
区域位于所述扫描仪的孔径内壁。
12.在一些实施例中,所述图像采集装置安装在所述扫描仪的正上方,和/或,所述至少两个投影装置可移动安装在所述扫描仪上。
13.本说明书另一个方面提供一种计算机可读存储介质,所述存储介质存储计算机指令,当计算机执行所述计算机指令时,用于执行如前所述的交互方法。
附图说明
14.本说明书将以示例性实施例的方式进一步说明,这些示例性实施例将通过附图进行详细描述。这些实施例并非限制性的,在这些实施例中,相同的编号表示相同的结构,其中:
15.图1是根据本说明书一些实施例所示的示例性成像设备的应用场景示意图;
16.图2是根据本说明书一些实施例所示的示例性交互系统的结构示意图;
17.图3是根据本说明书一些实施例所示的示例性用于成像设备的交互方法的流程示意图;
18.图4是根据本说明书一些实施例所示的示例性交互界面的示意图;
19.图5是根据本说明书一些实施例所示的示例性投影区域的示意图;
20.图6是根据本说明书一些实施例所示的示例性投影画面的示意图。
具体实施方式
21.为了更清楚地说明本说明书实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单的介绍。显而易见地,下面描述中的附图仅仅是本说明书的一些示例或实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图将本说明书应用于其它类似情景。除非从语言环境中显而易见或另做说明,图中相同标号代表相同结构或操作。
22.应当理解,本文使用的“系统”、“装置”、“单元”和/或“模块”是用于区分不同级别的不同组件、元件、部件、部分或装配的一种方法。然而,如果其他词语可实现相同的目的,则可通过其他表达来替换所述词语。
23.通常,这里使用的词语“模块”、“单元”或“块”是指体现在硬件或固件中的逻辑,或者是软件指令的集合。本文中描述的模块、单元或块可以实现为软件和/或硬件,并且可以存储在任何类型的非暂时性计算机可读介质或另一存储设备中。在一些实施例中,可以编译软件模块/单元/块并将其链接到可执行程序中。应当理解,软件模块可以从其他模块/单元/块或从它们自身调用,和/或可以响应检测到的事件或中断来调用。可以在计算机可读介质(例如,光盘、数字视频盘、闪存驱动器、磁盘或任何其他有形介质)上提供配置为在计算设备上执行的软件模块/单元/块,或者作为数字下载(最初可以以压缩或可安装的格式存储,在执行之前需要安装、解压缩或解密)。这里的软件代码可以被部分的或全部的储存在执行操作的计算设备的存储设备中,并应用在计算设备的操作之中。软件指令可以嵌入固件中,例如eprom。还应当理解,硬件模块/单元/块可以包括在连接的逻辑组件中,例如门和触发器,和/或可以包括可编程单元,例如可编程门阵列或处理器。这里描述的模块/单元/块或计算设备功能可以实现为软件模块/单元/块,但是可以用硬件或固件表示。通常,
这里描述的模块/单元/块指的是逻辑模块/单元/块,其可以与其他模块/单元/块组合或者分成子模块/子单元/子块,尽管它们是物理组织或存储器件。该描述可适用于系统、引擎或其一部分。
24.可以理解的是,除非上下文另有明确说明,当单元、引擎、模块或块被称为在另一单元、引擎、模块或块“上”、“连接”或“耦合至”另一单元、引擎、模块或块时,其可以直接在其它单元、引擎、模块或块上,与其连接或耦合或与之通信,或者可能存在中间单元、引擎、模块或块。在本说明书中,术语“和/或”可包括任何一个或以上相关所列条目或其组合。本说明书中,术语“图像”可指2d图像、3d图像或4d图像。
25.根据以下对附图的描述,本说明书的这些和其它的特征、特点以及相关结构元件的功能和操作方法,以及部件组合和制造经济性,可以变得更加显而易见,这些都构成本说明书的一部分。然而,应当理解的是,附图仅仅是为了说明和描述的目的,并不旨在限制本说明书的范围。应当理解的是,附图并不是按比例绘制的。
26.如本说明书和权利要求书中所示,除非上下文明确提示例外情形,“一”、“一个”、“一种”和/或“该”等词并非特指单数,也可包括复数。一般说来,术语“包括”与“包含”仅提示包括已明确标识的步骤和元素,而这些步骤和元素不构成一个排它性的罗列,方法或者设备也可能包含其它的步骤或元素。
27.本说明书中使用了流程图用来说明根据本说明书的实施例的系统所执行的操作,相关描述是为帮助更好地理解磁共振成像方法和/或系统。应当理解的是,前面或后面操作不一定按照顺序来精确地执行。相反,可以按照倒序或同时处理各个步骤。同时,也可以将其他操作添加到这些过程中,或从这些过程移除某一步或数步操作。
28.mri和ct成像设备是现代医学辅助检查治疗并确诊患者疾病的重要检查手段。ct设备的检查时间一般为3~15分钟,mri设备的检查时间一般为15~30分钟,患者需要在检查过程中保持平稳的生命体征。然而,mri设备和ct设备的检查环境对患者而言较为恶劣,患者需要平躺在狭小逼仄的圆柱形的检查孔径内,忍受嘈杂的机器运行的噪音。对于幽闭恐惧症患者,可能会出现胸闷、气短、心悸等症状;对于部分儿童,可能难以保持长时间的安静平躺。对于这类患者,目前医院采取的措施为注射镇静剂,但是会带来不可预估的副作用。
29.本说明书实施例中提出了一种用于mri设备或ct设备等孔径类成像设备的交互方法,通过检查孔径内的投影装置投影交互界面或播放影视画面,通过图像采集装置捕捉患者的眼球动作等信息来实现交互,可以为患者营造舒适愉悦的检查环境。
30.图1是根据本说明书一些实施例所示的示例性成像设备的应用场景示意图。
31.如图1所示,在一些实施例中,场景100可以包括成像设备110、处理设备120、终端设备130、存储设备140和网络150。在一些实施例中,场景100中的各个组件之间可以通过网络150互相连接或不通过网络150直接连接。例如,成像设备110和终端设备130可以通过网络150连接。又例如,成像设备110和处理设备120可以通过网络150连接或直接连接。又例如,成像设备120和终端设备130可以通过网络150连接或直接连接。
32.成像设备110可以用于扫描位于其检测区域(例如,检查孔径101)内的目标对象或其一部分,并生成与该目标对象或其一部分有关的图像(例如,扫描图像)。在一些实施例中,目标对象可以是生物的或非生物的。例如,目标对象可以包括患者、人造物体等。在一些
实施例中,目标对象可以包括身体的特定部分,例如头部、胸部、腹部等或其任意组合。在一些实施例中,目标对象可以包括特定器官,例如心脏、食道、气管、支气管、胃、胆囊、小肠、结肠、膀胱、输尿管、子宫、输卵管等或其任意组合。在一些实施例中,目标对象可以包括感兴趣区域(region of interest,roi),例如肿瘤、结节等。
33.在一些实施例中,成像设备110可以包括dsa(数字减影血管造影技术)设备、数字化x射线摄影设备(digital radiography,dr)、计算机x射线摄影设备(computed radiography,cr)、数字荧光x线摄影设备(digital fluorography,df)、ct设备、磁共振成像设备、乳腺x线机、c形臂设备等。
34.在一些实施例中,成像设备110可以包括检查孔径、检查床、至少两个投影装置(例如,投影装置104和105)、图像采集装置等。更多详细内容可以参见图2及其相关描述,此处不再赘述。
35.处理设备120可以处理从成像设备110、终端设备130和/或存储设备140获得的数据和/或信息。例如,处理设备120可以对图像采集装置获得的包含目标对象的图像进行分析和处理,确定投影内容,并根据投影内容控制投影装置在成像设备110的目标区域进行投影。在一些实施例中,处理设备120可以是单一服务器或服务器组。服务器组可以是集中式的或分布式的。在一些实施例中,处理设备120可以是本地或远程的。例如,处理设备120可以通过网络150从成像设备110、终端设备130和/或存储设备140访问信息和/或数据。又例如,处理设备120可以直接连接到成像设备110、终端设备130和/或存储设备140以访问信息和/或数据。在一些实施例中,处理设备120可以在云平台上实现。例如,云平台可以包括私有云、公共云、混合云、社区云、分布式云、云间云、多云等或其任意组合。
36.终端设备130可以包括移动设备131、平板电脑132、笔记本电脑133等或其任意组合。在一些实施例中,终端设备130可以通过网络150与场景100中的其他组件交互。例如,终端设备130可以通过网络150向成像设备110发送一种或多种控制指令以控制成像设备110按照指令对目标对象进行扫描,或进行投影内容的切换。又例如,终端设备130还可以通过网络150接收成像设备110扫描获得的目标对象的扫描图像。在一些实施例中,移动设备131可以包括智能家居装置、可穿戴设备、移动装置、虚拟现实装置、增强现实装置等或其任意组合。
37.在一些实施例中,终端设备130可以是处理设备120的一部分。在一些实施例中,终端设备130可以与处理设备120整合为一体,作为成像设备110的操作台。例如,场景100的用户/操作者(例如,医生或护士)可以通过该操作台控制成像设备110的运行,例如,对目标对象进行扫描、投影内容切换等。在一些实施例中,处理设备120可以集成在成像设备110中。例如,处理设备120可以为成像设备110的一部分,用于基于图像确定投影内容,以及控制至少两个投影装置在目标区域投影相应的内容。
38.存储设备140可以存储数据(例如,不同模式的交互界面、音乐、视频、游戏、图片等)、指令和/或任何其他信息。在一些实施例中,存储设备140可以存储从成像设备110、处理设备120和/或终端设备130处获取的数据。例如,存储设备140可以存储从成像设备110获取的目标对象的扫描图像等。在一些实施例中,存储设备140可以存储处理设备120可以执行或使用的数据和/或指令,以执行本说明书中描述的示例性方法。
39.在一些实施例中,存储设备140可包括大容量存储器、可移除存储器、易失性读写
存储器、只读存储器(rom)等其中一种或几种的组合。在一些实施例中,存储设备140可以通过本说明书中描述的云平台实现。
40.在一些实施例中,存储设备140可以连接网络150,以与场景100中的一个或多个组件(例如,处理设备120、终端设备130)之间实现通信。场景100中的一个或多个组件可以通过网络150读取存储设备140中的数据或指令。在一些实施例中,存储设备140可以是成像设备110或处理设备120的一部分,也可以是独立的,与成像设备110或处理设备120直接或间接相连。
41.网络150可以包括能够促进场景100的信息和/或数据交换的任何合适的网络。在一些实施例中,场景100的一个或多个组件(例如,成像设备110、处理设备120、终端设备130、存储设备140)可以通过网络150与场景100的一个或多个组件之间交换信息和/或数据。在一些实施例中,网络150可以包括公共网络(例如,互联网)、私人网络(例如,局域网(lan)、广域网(wan))等)、有线网络(例如,以太网)、无线网络(例如,802.11网络、无线wi-fi网络等)、蜂窝网络(例如,长期演进(lte)网络)、帧中继网络、虚拟专用网络(vpn)、卫星网络、电话网络、路由器、集线器、服务器计算机等其中一种或几种的组合。在一些实施例中,网络150可以包括一个或多个网络接入点。例如,网络150可以包括有线和/或无线网络接入点,例如基站和/或因特网交换点,通过接入点,场景100的一个或多个组件可以连接网络150以交换数据和/或信息。
42.应该注意的是,上述描述仅出于说明性目的而提供,并不旨在限制本说明书的范围。对于本领域普通技术人员而言,在本说明书内容的指导下,可做出多种变化和修改。可以以各种方式组合本说明书描述的示例性实施例的特征、结构、方法和其他特征,以获取另外的和/或替代的示例性实施例。例如,场景100中还可以包括图像采集装置,用于采集扫描间内的图像。然而,这些变化与修改不会背离本说明书的范围。
43.图2是根据本说明书一些实施例所示的示例性交互系统的结构示意图。
44.如图2所示,在一些实施例中,交互系统200可以包括成像设备110以及控制模块210。其中,成像设备110可以包括检查孔径101、检查床102、至少两个投影装置(例如,投影装置104、105)以及图像采集装置106。控制模块210可以为与处理设备120相同或类似的结构。
45.检查孔径101对应成像设备110的检测区域。当目标对象(例如,患者或患者的某一部位)位于检查孔径101内时,成像设备110可以对该目标对象进行扫描,以获取该目标对象的扫描图像。
46.检查床102可以用于放置目标对象以进行扫描。例如,目标对象可以背躺、侧卧或俯卧在检查床102上。在一些实施例中,检查床102可以可移动地设置于成像设备110的前方并与地面平行。例如,检查床102可以通过移动以进出检查孔径101。又如,检查床102也可以在垂直方向移动,调整进入到检查孔径101内时,检查床上的目标对象与扫描中心之间的距离,以在检测范围内对目标对象进行扫描。在一些实施例中,检查床102可以为独立于成像设备110的设备。
47.仅作为示例,当目标对象103需要进行医学检查时,目标对象103可以平躺在检查床102上。然后移动检查床102将目标对象103送入检查孔径101,并调整检查床102的位置,使得目标对象103位于扫描中心。进一步地,成像设备110的放射扫描源可以发出放射线束
(例如,x射线)到目标对象103,经目标对象103衰减后被探测到,进而产生该目标对象103的图像信号。
48.投影装置104和/或105可以用于在目标区域进行投影。目标区域可以位于检查孔径101的内壁。例如,图2中所示目标区域107位于检查孔径101的上方。其中,上方可以指与地面相对的位置。在一些实施例中,目标区域107的深度、宽度可以由用户设置或根据患者信息自动确定。其中,深度可以指沿检查孔径101的轴向(如图中箭头b的方向)的距离,宽度指沿检查孔径101的圆周方向(如图中箭头a的方向)的距离。例如,目标区域107的深度可以为20厘米,宽度为检查孔径101的圆周长度的三分之二。又如,成像设备110可以根据目标对象的身形和/或在检查孔径101内的位置,实时调节目标区域107的大小和/或位置。
49.在一些实施例中,目标区域的投影内容可以包括但不限于视频、图像、游戏等。在一些实施例中,投影装置104和105可以在目标区域107投影交互界面(例如图4中所示界面),并根据用户指令确定目标投影内容和/或实时切换投影内容。在一些实施例中,投影装置104和105的投影图像可以共同拼接为一副完整的图像。例如图5中所示,区域503对应投影装置104的投影范围,区域501对应投影装置105的投影范围,区域501和503共同组合为目标区域107。当确定目标投影内容或目标交互界面后,投影装置104在区域503的投影图像与投影装置105在区域501的投影图像可以共同拼接为完整的目标投影内容或目标交互界面。
50.在一些实施例中,投影装置104或105可以包括crt(cathode ray tube)投影、lcd投影仪、dlp(digital light procession)投影、lcos(liquid crystal on silicon)投影等技术的投影机。在一些实施例中,投影装置104和105可以为相同类型的投影机。
51.在一些实施例中,投影装置104和105可以安装在检查孔径101的内壁。例如图2中所示,投影装置104和105可以分别固定安装在检查孔径101靠近检查床102一侧的内壁处。又如,投影装置104和105可以通过导轨安装在检查孔径101内壁,并沿检查孔径101的轴向(例如,箭头b所示方向)移动。在一些实施例中,投影装置104和105可以安装在检查床102上。例如,投影装置104和105可以分别固定在检查床102的两条长边处。又如,投影装置104和105可以通过导向结构安装在检查床102的其中一条边的边缘处,并沿该条边的方向移动。
52.在一些实施例中,可以安装两个以上投影装置,两个以上投影装置的安装位置和/或安装方式可以为上述多个安装位置和安装方式的任意组合,本说明书对此不作限制。在一些实施例中,投影装置可以为独立于成像设备110的设备。例如,投影装置104和105可以安装在成像设备110所处的位置的地面。
53.图像采集装置106可以用于采集图像信息。例如,图像采集装置106可以拍摄包含目标对象全部和/或部分区域的图像。在一些实施例中,图像采集装置106可以安装在检查孔径101上。例如,图像采集装置106可以固定、或滑动、或转动安装在检查孔径101的上方。在一些实施例中,可以基于目标对象的位置,控制图像采集装置106运动,使其拍摄范围能够覆盖目标对象。例如,可以根据目标对象在检查床102的位置,控制图像采集装置106转动一定角度和/或移动一定距离,使其能够拍摄到目标对象。在一些实施例中,图像采集装置106可以包括相机(例如,数码相机、模拟相机、深度相机等)、红绿蓝(rgb)传感器、rgb深度(rgb-d)传感器或可以采集物体的图像数据的其他设备。
54.在一些实施例中,图像采集装置106可以为独立于成像设备110的设备。例如,图像
采集装置106可以固定安装在扫描间内的天花板上、角落等位置。又例如,图像采集装置106可以滑动和/或转动安装在成像设备110所处位置的天花板、地面等位置,本说明书对此不做限制。在一些实施例中,可以安装两个或两个以上图像采集装置106,所述两个或两个以上图像采集装置的安装位置和安装方式可以为上述多个安装位置和安装方式中的任意组合。例如,两个图像采集装置可以分别安装在成像设备110上与检查床102的床面对应的位置。
55.在一些实施例中,投影装置104和105、以及图像采集装置106可以通过光纤与操作室的控制模块210连接。控制模块210可以基于图像采集装置106获取的包含目标对象的图像确定投影内容,并控制投影装置104和105在目标区域107投影相应的内容。更多关于投影内容确定的描述可以参见图3,此处不再赘述。
56.在一些实施例中,控制模块210还可以用于对投影装置104和105的投影图像进行几何校正,使其在目标区域呈现出正常无畸变的投影画面。例如,校正方法可以包括三维重建法、二维图像变换法等。示例性地,如图6中所示,未校正前,投影装置104和105在目标区域107的投影画面如601所示,存在畸形;控制模块210基于目标区域107的曲面形状进行投影矩阵标定,然后以投影装置104和105的其中一个为参考,对其投影图像进行几何调整后,投影画面如603所示,畸形基本消除;进一步对投影装置104和105的颜色进行校正,使得投影装置104和105的投影画面的重叠区域的亮度融合,相应地投影图像如605所示。
57.在一些实施例中,控制模块210可以基于图像采集装置106获取的包含目标对象的图像,确定目标对象的位置信息,基于位置信息确定目标区域107的位置,进而校正投影装置104和105在目标区域的投影图像。在一些实施例中,可以基于目标区域的位置,控制至少两个投影装置移动,使其投影范围能够覆盖目标区域。例如,可以根据目标区域的位置,控制投影装置104和105分别转动一定角度和/或移动一定距离。
58.应当注意,对交互系统200的以上描述仅出于说明的目的,而无意于限制本说明书的范围。对于本领域普通技术人员而言,可以根据本说明书进行各种变型和修改。然而,这些变化和修改不脱离本说明书的范围。例如,上述成像设备110可以包括一个或以上附加模块,例如,用于数据存储的存储模块等。
59.图3是根据本说明书一些实施例所示的示例性用于成像设备的交互方法的流程示意图。
60.在一些实施例中,流程300可以由成像设备110或处理设备120执行。例如,流程300可以被实现为指令(例如,应用程序),并存储于例如存储设备140并且可由成像设备110或处理设备120访问的存储器中。成像设备110或处理设备120可以执行指令,并且在执行指令时,可以将其配置为执行流程300。下面呈现的流程300的操作示意图是说明性的。在一些实施例中,可以利用一个或以上未描述的附加操作和/或未讨论的一个或以上操作来完成该过程。另外,图3中示出的和下面描述的流程300的操作顺序是非限制性的。
61.步骤310,通过图像采集装置获取包含目标对象的图像。在一些实施例中,步骤310可以由处理设备120执行。
62.在一些实施例中,采集的图像可以包含全部或部分目标对象。例如,采集的图像可以仅包括患者的眼部或头部。又如,采集的图像可以包括患者的全身。在一些实施例中,采集的图像可以为一张或多张。
63.在一些实施例中,可以在对目标对象执行扫描之前、期间和/或之后,通过图像采集装置(例如,图像采集装置106)连续地或间歇地(例如,周期性地)采集目标对象的图像。例如,图像采集装置106可以获取目标对象在进行扫描前的第一图像,和/或目标对象在扫描过程中的第二图像。
64.步骤320,基于图像确定投影内容。在一些实施例中,步骤320可以由处理设备120执行。
65.投影内容可以指在目标区域投放的图像所包含的内容。例如,投影内容可以包括视频、游戏、图片等各种内容类型,和/或,视频/游戏/图片的具体类型等。
66.在一些实施例中,可以基于目标对象的信息确定投影内容。例如,处理设备120可以基于患者信息,控制投影装置104和105投影视频、游戏、或图片中任意一种。又如,处理设备120可以基于患者信息,控制投影装置104和105投影社科类、娱乐类、时事新闻类、生活类等任意一种类型的视频。
67.在一些实施例中,可以基于图像确定目标对象的特征信息,基于特征信息确定目标投影内容。特征信息可以反映目标对象的个人特征。例如,特征信息可以包括患者的性别、年龄等。不同年龄或性别的用户,可以投影不同类型的内容。仅作为示例,对于特殊年龄段的患者,考虑到其适应能力和接受能力,可以根据患者的特征信息播放适合其年龄段的视频。例如,0~14岁的儿童,播放适龄的动画短片;45岁以上的中老年人,播放舒缓的风景类视频等。在一些实施例中,可以利用训练好的神经网络模型(例如,训练好的卷积神经网络),基于图像确定目标对象的特征信息,并基于特征信息确定目标投影内容。例如,可以将包含目标对象的图像输入训练好的卷积神经网络,卷积神经网络通过分析图像确定目标对象的特征信息,基于特征信息输出相应的目标投影内容,如风景类视频。
68.在一些实施例中,可以基于患者的病例信息确定目标投影内容。例如,对于扫描部位疼痛等级较高的患者,目标投影内容可以为容易让人进入剧情的故事类短视频、娱乐新闻、搞笑视频等;对于扫描部位没有疼痛感或疼痛等级较低的患者,目标投影内容为社科类或教育类短视频等。又如,根据扫描部位的不同,对于扫描部位是胸部以下的患者,目标投影内容可以为小游戏;对于扫描部位是胸部或以上的患者,目标投影内容为视频。
69.在一些实施例中,可以在扫描前,由用户自主选择投影内容。例如,若用户选择搞笑视频,则在患者进入检查孔径101后,直接控制投影装置104和105在目标区域107投影存储的搞笑类短视频。
70.在一些实施例中,投影内容还可以包括交互界面。交互界面可以为用户提供各种选项,通过操作不同的选项能够进入不同的页面。例如,交互界面中可以包括选项1-游戏,选项2-视频,选项3-图片,用户选择相应的选项之后,控制模块210控制投影装置104和105在目标区域107播放内部存储的相应内容。在一些实施例中,交互界面可以包括多页。例如,上述“选项2-视频”,被用户选中后,可以进一步投影与视频类型相关的交互界面,如选项21-风景类、选项22-美食类、选项23-科技类、选项24-动物类等。当用户选择该页面中的某一选项后,可以通过投影装置在目标区域投放相应类型的视频。
71.在一些实施例中,可以包括多种不同交互模式的交互界面。例如,交互模式可以包括简单模式和复杂模式。简单模式可以仅包括一个或多个同一类型的操作按钮,复杂模式则包括多种不同类型的按钮。仅作为示例,如图4中所示,简单模式的交互界面中可以仅包
括一个或多个用于提供不同类型的投影内容的选项420;复杂模式的交互界面中除选项420外,还可以包括返回按钮410、上下翻页按钮430和440、紧急呼叫按钮450等。其中,返回按钮410可返回主界面或上一级页面,选项420可进入下一级菜单或视频/图像/游戏投放页面,按钮430可向上翻页,按钮440可向下翻页,紧急呼叫按钮450可呼叫医生。例如,当患者感到不适时,可通过操作按钮450呼叫操作室的医生,与医生进行视频通话,或通过操作按钮450暂停扫描。
72.在一些实施例中,可以基于图像确定目标对象的特征信息,基于特征信息确定交互模式。不同年龄或性别的用户,可以投影不同模式的交互界面。进一步地,可以根据确定的交互模式,控制至少两个投影装置在目标区域投影相应的目标交互界面。例如,年龄在60岁以上与5岁以下的用户,可以投影简单模式的交互界面,其他用户则投影复杂模式的交互界面。在一些实施例中,可以通过图像识别算法确定目标对象的特征信息。例如,可以通过将图像输入训练好的深度学习模型,确定目标对象的特征信息。在一些实施例中,可以直接利用训练好的深度学习模型,确定目标对象的特征信息,并基于特征信息确定交互模式。例如,模型的输入为图像,输出为交互模式。
73.在一些实施例中,可以在扫描前,由用户自主设置交互界面的交互模式。例如,医生可以在扫描前询问患者使用简单模式还是复杂模式,根据患者的选择,当患者进入检查孔径101后,自动在目标区域投影相应模式的交互界面。
74.在一些实施例中,可以基于患者的扫描部位,确定交互模式。例如,对于扫描头部之外的部位的患者,可以投影复杂模式的交互界面;对于扫描头部的患者,则投影简单模式的交互界面。
75.在一些实施例中,当进入交互界面后,进一步地,可以基于目标对象的动作信息,确定下一页面或具体的目标投影内容。在一些实施例中,可以在进入交互界面后,再次获取包含目标对象的图像,基于图像确定目标对象的动作信息,进而基于动作信息确定具体的目标投影内容。例如,可以基于第一图像确定交互模式,基于第二图像确定动作信息,第一图像的拍摄时间早于第二图像。
76.在一些实施例中,可以基于图像确定目标对象的眼球信息,基于所述眼球信息确定目标对象的操作指令,基于操作指令确定目标投影内容。
77.眼球信息可以包括眼球注视方向、注视时间、眼球运动方向等中的至少一种。在一些实施例中,可以确定一张或多张图像中目标对象的眼球信息。例如,处理设备120可以基于图像采集装置连续采集的多张图像,识别每张图像中患者的眼球注视方向,进而确定眼球运动方向和/或注视时间。在一些实施例中,可以通过图像识别算法确定图像中的眼球信息。
78.在一些实施例中,可以基于多张图像中的眼球信息,确定目标对象的操作指令。例如,处理设备120可以对比相邻帧的图像中目标对象的眼球注视方向是否一致,确定方向不一致对应的两张图像的拍摄时间,进而确定眼球注视在同一方向的时间;若该时间超过预设值(例如,3秒、5秒),则认为患者选中眼球注视方向处的按钮为目标按钮,例如,社科类视频、向下翻页等。进一步地,可以确定目标按钮对应的下一级页面的内容为目标投影内容。
79.步骤330,基于投影内容,控制至少两个投影装置在成像设备的目标区域进行投影。在一些实施例中,步骤330可以由处理设备120执行。
80.在确定投影内容后,可以控制至少两个投影装置在成像设备的目标区域进行投影。例如,处理设备120可以根据确定的交互模式,控制至少两个投影装置在目标区域投影相应的目标交互界面。又如,处理设备120可以根据确定的目标投影内容,控制至少两个投影装置在目标区域进行投影。
81.在一些实施例中,在目标区域投放具体的目标投影内容(例如,视频、图片、游戏等)后,可以进一步基于目标对象的操作指令,切换目标区域的投影内容。例如,当目标对象的眼球运动方向为上、下、左或右时,可以在目标区域107投影下一个视频或图片。
82.在一些实施例中,可以基于图像确定目标对象的头部运动信息,基于头部运动信息确定操作指令,并根据该操作指令切换目标区域的投影内容。
83.在一些实施例中,可以基于图像确定目标对象的位置信息,基于位置信息确定目标区域的位置。例如,处理设备120可以基于图像确定目标对象的眼睛相对于检查床102的第一坐标位置,进一步基于检查床102的位置和眼睛的第一坐标位置确定眼睛相对于检查孔径101的第二坐标位置,根据第二坐标位置确定目标区域在检查孔径101内的位置。例如,目标区域107可以位于眼睛平视视线垂直于检查孔径101上方内壁的位置,或目标区域的中垂线与眼睛平视视线夹角小于预设角度(如1度、2度、3度、5度等)的位置等。
84.进一步地,可以基于目标区域的位置,校正至少两个投影装置在目标区域的投影图像。例如,处理设备120可以基于目标区域的位置,对投影装置104和105的投影图像进行几何校正,以使得两个投影装置在目标区域的投影图像能够拼接成完整的投影内容。投影装置的投影图像的几何校正,可以采用任意可行的方式,例如,三维重建法等,本说明书对此不做限制。
85.应当注意的是,上述有关流程300的描述仅仅是为了示例和说明,而不限定本说明书的适用范围。对于本领域技术人员来说,在本说明书的指导下可以对流程300进行各种修正和改变。然而,这些修正和改变仍在本说明书的范围之内。
86.本说明书一些实施例还提供一种成像设备,包括:扫描仪,用于获取目标对象的扫描数据;图像采集装置,用于获取包含目标对象的图像;控制模块,用于基于所述图像确定投影内容;至少两个投影装置,用于基于所述投影内容,在目标区域进行投影。
87.本说明书一些实施例还提供一种计算机可读存储介质,所述存储介质存储计算机指令,当计算机执行所述计算机指令时,用于执行如前所述的交互方法(例如,流程300)。
88.本说明书实施例可能带来的有益效果包括但不限于:(1)通过使用至少两个投影装置将影像投放到检查孔径内部,可以让患者有身临其境的沉浸感,减少对于幽闭环境的恐惧感,提高扫描效率;(2)通过图像采集装置获取目标对象的图像,并基于图像确定交互模式和/或投影内容的类型,对于不同患者可以针对性投影更加适配的内容,提高患者在检查孔径内的用户体验,为患者营造更加舒适愉悦的检查环境;(3)通过基于图像人眼注视坐标与投影图像对应,可以使患者在检查孔径内无接触地进行交互操作。需要说明的是,不同实施例可能产生的有益效果不同,在不同的实施例里,可能产生的有益效果可以是以上任意一种或几种的组合,也可以是其他任何可能获取的有益效果。
89.上文已对基本概念做了描述,显然,对于本领域技术人员来说,上述详细披露仅仅作为示例,而并不构成对本说明书的限定。虽然此处并没有明确说明,本领域技术人员可能会对本说明书进行各种修改、改进和修正。该类修改、改进和修正在本说明书中被建议,所
以该类修改、改进、修正仍属于本说明书示范实施例的精神和范围。
90.同时,本说明书使用了特定词语来描述本说明书的实施例。如“一个实施例”、“一实施例”、和/或“一些实施例”意指与本说明书至少一个实施例相关的某一特征、结构或特点。因此,应强调并注意的是,本说明书中在不同位置两次或多次提及的“一实施例”或“一个实施例”或“一个替代性实施例”并不一定是指同一实施例。此外,本说明书的一个或多个实施例中的某些特征、结构或特点可以进行适当的组合。
91.此外,除非权利要求中明确说明,本说明书所述处理元素和序列的顺序、数字字母的使用、或其他名称的使用,并非用于限定本说明书流程和方法的顺序。尽管上述披露中通过各种示例讨论了一些目前认为有用的发明实施例,但应当理解的是,该类细节仅起到说明的目的,附加的权利要求并不仅限于披露的实施例,相反,权利要求旨在覆盖所有符合本说明书实施例实质和范围的修正和等价组合。例如,虽然以上所描述的系统组件可以通过硬件设备实现,但是也可以只通过软件的解决方案得以实现,如在现有的服务器或移动设备上安装所描述的系统。
92.同理,应当注意的是,为了简化本说明书披露的表述,从而帮助对一个或多个发明实施例的理解,前文对本说明书实施例的描述中,有时会将多种特征归并至一个实施例、附图或对其的描述中。但是,这种披露方法并不意味着本说明书对象所需要的特征比权利要求中提及的特征多。实际上,实施例的特征要少于上述披露的单个实施例的全部特征。
93.一些实施例中使用了描述成分、属性数量的数字,应当理解的是,此类用于实施例描述的数字,在一些示例中使用了修饰词“大约”、“近似”或“大体上”来修饰。除非另外说明,“大约”、“近似”或“大体上”表明所述数字允许有
±
20%的变化。相应地,在一些实施例中,说明书和权利要求中使用的数值参数均为近似值,该近似值根据个别实施例所需特点可以发生改变。在一些实施例中,数值参数应考虑规定的有效数位并采用一般位数保留的方法。尽管本说明书一些实施例中用于确认其范围广度的数值域和参数为近似值,在具体实施例中,此类数值的设定在可行范围内尽可能精确。
94.针对本说明书引用的每个专利、专利申请、专利申请公开物和其他材料,如文章、书籍、说明书、出版物、文档等,特此将其全部内容并入本说明书作为参考。与本说明书内容不一致或产生冲突的申请历史文件除外,对本说明书权利要求最广范围有限制的文件(当前或之后附加于本说明书中的)也除外。需要说明的是,如果本说明书附属材料中的描述、定义、和/或术语的使用与本说明书所述内容有不一致或冲突的地方,以本说明书的描述、定义和/或术语的使用为准。
95.最后,应当理解的是,本说明书中所述实施例仅用以说明本说明书实施例的原则。其他的变形也可能属于本说明书的范围。因此,作为示例而非限制,本说明书实施例的替代配置可视为与本说明书的教导一致。相应地,本说明书的实施例不仅限于本说明书明确介绍和描述的实施例。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1