应用于虚拟现实VR场景的视频流传输方法及装置与流程

应用于虚拟现实vr场景的视频流传输方法及装置
技术领域
1.本技术涉及虚拟现实技术领域，具体而言，涉及一种应用于虚拟现实vr场景的视频流传输方法及装置。


背景技术：

2.随着科学技术的不断发展，虚拟现实技术得到快速发展，目前虚拟现实技术通常根据获取到的vr视频素材创建全视场角的vr场景视频，以供用户通过vr客户端体验观看。
3.由于人眼所能看到的范围有限，为提升用户在观看vr场景视频时的沉浸感，vr客户端常采取以一定视场角范围放映全视场角的vr场景视频。但是，vr客户端在接收全视场角的vr场景视频后，仅针对某一视场角的vr场景视频进行放映，而接收的其他视场角的vr场景视频并未放映，便导致了网络下载资源的浪费，且造成接收vr场景视频的时延增大的问题。


技术实现要素：

4.为解决上述技术问题，本技术的实施例提供了一种应用于虚拟现实vr场景的视频流传输方法、装置、计算机可读存储介质及电子设备。
5.根据本技术实施例的一个方面，提供了一种应用于虚拟现实vr场景的视频流传输方法，该方法应用于视频流传输网关，该方法包括：接收vr直播服务器通过组播网络下发的目标直播频道的多个切片流；所述目标直播频道对应vr客户端以单播方式发起的直播请求，所述直播请求中包含fov视角信息；从所述多个切片流中选择符合所述fov视角信息的目标切片流，由所述目标切片流组合生成单播fov视频流；将所述单播fov视频流发送至所述vr客户端。
6.根据本技术实施例的一个方面，提供了一种应用于虚拟现实vr场景的视频流传输装置，包括接收模块，配置为接收vr直播服务器通过组播网络下发的目标直播频道的多个切片流；所述目标直播频道对应vr客户端以单播方式发起的直播请求，所述直播请求中包含fov视角信息；合成模块，配置为从所述多个切片流中选择符合所述fov视角信息的目标切片流，由所述目标切片流组合生成单播fov视频流；发送模块，配置为将所述单播fov视频流发送至所述vr客户端。
7.在本技术的一些实施例中，基于前述方案，所述接收模块，还配置为：接收所述vr客户端发送的所述直播请求；所述直播请求携带有所述目标直播频道的url地址与所述fov视角信息；根据所述url地址接入所述vr直播服务器对应的组播网络。
8.在本技术的一些实施例中，基于前述方案，所述接收模块，还配置为：接收所述vr客户端发送的单播请求；将所述单播请求转发至vr直播服务器，以使所述vr直播服务器查询可信网关清单，若查询到所述可信网关清单中包含所述视频流传输网关的公网信息，则向所述视频流传输网关返回重定向服务信息；所述重定向服务信息包括所述vr直播服务器中多个直播频道对应的url地址；将所述重定向服务信息转发至所述vr客户端，以使所述vr
客户端根据重定向服务信息发起所述直播请求。
9.在本技术的一些实施例中，基于前述方案，所述应用于虚拟现实vr场景的视频流传输装置，还包括：注册模块，配置为向所述vr服务器发送注册请求；所述注册请求包含所述视频流传输网关对应的公网信息以及可信凭证；以使所述vr服务器基于所述可信凭证进行所述公网信息在所述vr服务器对应的可信网关清单中的存储。
10.在本技术的一些实施例中，基于前述方案，所述合成模块，还配置为：判断所述vr客户端是否为首次接入所述组播网络；若判断为是，则将接收到的所述fov视角信息初始化为默认的fov视角信息；从所述多个切片流中选择符合所述默认的fov视角信息的目标切片流，由所述目标切片流组合生成单播fov视频流。
11.在本技术的一些实施例中，基于前述方案，所述合成模块，还配置为：去除所述目标切片流中包含的rtp包头以及重写所述目标切片流中的元数据信息，获得处理后的目标切片流；由所述处理后的目标切片流组合生成一路视频流，并采用指定协议对所述一路视频流进行封装生成所述单播fov视频流。
12.在本技术的一些实施例中，基于前述方案，所述合成模块，还配置为：接收所述vr客户端发送的视角改变信息；根据所述视角改变信息从所述多个切片流中重新选择符合所述视角改变信息的目标切片流，以生成所述单播fov视频流发送至所述vr客户端。
13.根据本技术实施例的一个方面，提供了一种计算机可读存储介质，其上存储有计算机可读指令，当所述计算机可读指令被计算机的处理器执行时，使计算机执行如上述实施例中所述的应用于虚拟现实vr场景的视频流传输方法。
14.根据本技术实施例的一个方面，提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现如上述实施例中所述的应用于虚拟现实vr场景的视频流传输方法方法。
15.本技术实施例的技术方案中，视频流传输网关在接收到vr直播服务器通过组播网络下发的目标直播频道的多个切片流之后，由于目标直播频道对应的是vr客户端以单播方式发起的直播请求，且直播请求中包含fov视角信息，因此从多个切片流中选择符合fov视角信息的目标切片流，再由目标切片流组合生成单播fov视频流，将单播fov视频流发送至vr客户端，从而实现按照vr客户端的需求选用部分切片流合成单播fov视频流，并以单播方式下发给vr客户端，减少vr客户端对切片流的接收量，进而缩短vr客户端接收vr场景视频的时间。
附图说明
16.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本技术的实施例，并与说明书一起用于解释本技术的原理。显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术者来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
17.图1是本技术涉及的一种实施环境的架构示意图。
18.图2是本技术的一示例性实施例示出的一种应用于虚拟现实vr场景的视频流传输方法的流程图。
19.图3是本技术的另一示例性实施例示出的应用于虚拟现实vr场景的视频流传输方法的流程图。
20.图4是基于图3所示实施例提出的另一示例性的应用于虚拟现实vr场景的视频流传输方法的流程图。
21.图5是图2所示实施例中步骤s220在一示例实施例中的流程图。
22.图6是本技术的还一示例性实施例示出的应用于虚拟现实vr场景的视频流传输方法的流程图。
23.图7是本技术的一示例性实施例示出的一种应用于虚拟现实vr场景的视频流传输方法中注册流程的流程图。
24.图8是本技术的另一示例性实施例示出的应用于虚拟现实vr场景的视频流传输方法的流程图。
25.图9是本技术的一示例性实施例示出的应用于虚拟现实vr场景的视频流传输装置的框图。
26.图10是本技术的一示例性实施例示出的电子设备的结构示意图。
具体实施方式
27.现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本技术将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。
28.此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中，提供许多具体细节从而给出对本技术的实施例的充分理解。然而，本领域技术人员将意识到，可以实践本技术的技术方案而没有特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知方法、装置、实现或者操作以避免模糊本技术的各方面。
29.附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
30.附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解，而有的操作/步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。
31.需要说明的是：在本文中提及的“多个”是指两个或两个以上。“和/或”描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
32.首先需要说明的是，本技术涉及vr(virtual reality，虚拟现实)技术，vr技术是一种可以创建和体验虚拟现实环境的计算机仿真系统，它利用计算机根据创建虚拟现实环境的数据构建虚拟现实环境，使用户可以沉浸到该环境中。
33.图1是一示例性的虚拟现实vr系统的架构示意图。如图1所示，虚拟现实vr系统100包括vr直播服务器110、视频流传输网关120以及vr客户端130。
34.vr直播服务器110可以根据获取到的vr视频素材创建全视场角的vr场景视频，并
通过网络进行下发；视频流传输网关120用于建立vr直播服务器与vr客户端130之间的网络连接，以使vr客户端130可以通过该网络连接获取到vr直播服务器110下发的vr场景视频供使用vr客户端130的用户进行体验观看。
35.vr直播服务器110可以实现为独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、cdn(content delivery network，内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器。
36.其中，视场角对应的是视野范围，而全视场角则表示该视野范围为360
°
的环绕视野。人眼所能看到的视野范围是有限，vr客户端130通常会采取一定视场角范围放映全视场角的vr场景视频中符合当前视场角范围的部分，以提升用户在观看时的沉浸感。且当用户当前视场角范围改变时相应改变vr场景视频的放映部分。因此vr客户端130接收全视场角的vr场景视频针对某一视场角的vr场景视频进行放映的过程中，不但会由于接收其他未放映的vr场景视频造成网络资源的浪费；并且导致接收vr场景视频的时延增大，进而导致用户的满意度降低。
37.应理解的是，上图1仅是一个示例性的虚拟现实vr系统100的架构示意图，并不表示对于虚拟现实vr系统100的架构进行限制。在实际的应用场景下，虚拟现实vr系统100可包括与图1所示架构不同的组成部分，如包括比图1所示架构更多或更少的组成部分，在此不作限制。
38.为解决上述技术问题，本技术实施例的技术方案提出了一种应用于虚拟现实vr场景的视频流传输方法，具体参照图2所示。该方法可以由图1所示的视频流传输网关120来执行。该方法至少包括步骤s210至步骤s230，详细介绍如下：
39.在步骤s210中，接收vr直播服务器通过组播网络下发的目标直播频道的多个切片流。
40.需要说明的是，vr直播服务器是指为vr客户端提供直播数据服务的服务器，例如可以向vr客户端提供多个直播频道对应的视频流数据。其中，每个直播频道均可各自对应多个切片流，以便于vr直播服务器管理下发不同的vr场景视频，同时可以扩大用户对于vr场景视频的选择范围，从而提升用户对于虚拟现实vr系统的满意度。需要说明的是，切片流是指接收到vr视频素材的vr直播服务器在构建全视场角的vr场景视频的过程中，vr直播服务器可以将vr场景视频切分为多个切片流，从而根据不同切片流便可以组合构成不同视场角下的vr场景视频。切片流也可以称之为tile流。而切片流的数量与视场角的范围可以根据由vr服务器的服务能力进行具体定义，在此不进行限制。
41.另外，vr直播服务器为了提升客户端接收切片流的速率可以采用组播方式进行下发。示例性的，vr直播服务器为每个直播频道均设立对应的组播网络，vr直播服务器通过组播网络向连接至组播网络的设备下发对应直播频道包含的多个切片流，从而避免该设备接收到与该直播频道无关的其他内容。
42.在本技术的实施方式中，当视频流传输网关接入组播网络后，便可以接收vr直播服务器通过组播网络下发的目标直播频道的多个切片流。
43.其中，目标直播频道对应vr客户端以单播方式发起的直播请求，单播方式包括视频流传输网关针对vr客户端发起的直播请求返回对应的直播视频。具体来说，vr客户端可
以在发起的直播请求中携带目标直播频道对应的信息以及vr客户端对应的fov(field of view，视场角)视角信息，以使vr客户端在接收到vr客户端发起的直播请求后，针对该直播请求接入对应的目标直播频道，并将获取到多个切片流处理为符合fov视角信息的视频流，再返回至vr客户端进行放映。
44.在步骤s220中，从多个切片流中选择符合fov视角信息的目标切片流，由目标切片流组合生成单播fov视频流。
45.其中，fov视角信息便是vr客户端为提升用户沉浸感所设定的视场角范围。而单播fov视频流则是视频流传输网关根据vr客户端以单播方式发起的直播请求携带的fov视角信息所返回的视频流。
46.在本技术的实施方式中，视频流传输网关可以从多个切片流中选择符合fov视角信息的目标切片流，再由目标切片流组合生成单播fov视频流。
47.由目标切片流组合生成单播fov视频流的方式在一个示例中，可以通过先去除目标切片流中包含的rtp(real-time transport protocol，实时传输协议)报头，再重写目标切片流中的元数据信息，以获得处理后的目标tile流，之后由处理后的目标切片流组合生成一路视频流，并采用指定协议对一路视频流进行封装生成单播fov视频流。其中，rtp报头用于指示该目标切片流为组播网络对应的传输协议，元数据信息表示单个切片流中的数据信息，元数据信息包括但不限于视频参数集、序列参数集、图片参数集或自适应参数集；指定协议用于封装切片流，例如采用rtsp(real time streaming protocol，实时流传输协议)协议将切片流封装为ts格式。
48.在步骤s230中，将单播fov视频流发送至vr客户端。
49.在本技术的实施方式中，在根据vr客户端的fov视角信息生成出单播fov视频流之后，便可以将单播fov视频流发送至vr客户端，以使vr客户端在接收到单播fov视频流后对单播fov视频流进行解码，并根据fov视角信息将单播fov视频流对应的画面进行放映。
50.在vr客户端存在多个的情况下，视频流传输网关可以根据各个vr客户端发起的直播请求中携带的fov视角信息分别生成各自对应的单播fov视频，并且可以将不同的单播fov视频流分别发送至各自对应的vr客户端。
51.此外，经vr直播服务器的组播网络引入目标直播频道的多个切片流是为了节省大网流量，但在wifi网络下的vr客户端容易抑制接收组播网络下发的多个切片流的速率，因此通过引入视频流传输网关以实现组播转单播，从而即通过组播网络节省流量，也不会影响vr客户端在wifi场景下的使用。
52.通过上述实施方式，视频流传输网关根据vr客户端发起的直播请求接收vr直播服务器通过组播网络下发的目标直播频道的多个切片流，再根据该直播请求中携带的fov视角信息对多个切片流进行处理，以根据处理后的切片流组合生成单播fov视频流向vr客户端发送，从而在不影响用户体验的前提下，减少vr客户端对切片流的接收数量，进而缩短vr客户端接收vr场景视频的时间，达到提高用户满意度的目的；
53.另外，当vr客户端选择不同的fov视角信息时，最靠近vr客户端的视频流传输网关侧可以把符合fov视角信息的切片流选择出来并且合并为单播fov视频流，从而进行组播转单播，使得vr客户端不用再与vr直播服务器进行交互，便可获取符合新的fov视角信息的切片流，进一步缩短vr客户端接收vr场景视频的时间。
54.参见图3，图3是根据另一示例性实施例示出的一种应用于虚拟现实vr场景的视频流传输。如图3所示，在图2所示实施例中的步骤s210之前，该方法还可以包括步骤s310至步骤s320，详细介绍如下：
55.在步骤s310中，接收vr客户端发送的直播请求。
56.需要说明的是，为了进一步提升用户对虚拟现实vr系统的体验感，vr直播服务器可以在不同的直播频道下发不同vr场景视频，以满足用户的不同需求。因此在本技术的实施方式中，为了确定vr客户端所要接入的目标直播频道，可以通过接收vr客户端发送的直播请求，以确定目标直播频道的url(uniform resource locator，统一资源定位系统)地址。url地址表示目标直播频道对应的组播网络的访问地址。
57.其中,根据直播请求确定目标直播频道的url地址的方式可以根据需要灵活设置，在一个示例中，vr客户端可以从预设置的数据库中直接选取目标直播频道的url地址，并将目标直播频道的url地址添加在直播请求中，以根据直播请求确定目标直播频道的url地址，也就是说，数据库可以预先存储有多个直播频道各自对应的url地址。
58.在另一个示例中，vr客户端可以通过视频流传输网关与vr直播服务器建立网络连接，再通过网络连接从vr直播服务器中获取目标直播频道的url地址，从而将目标直播频道的url地址添加在直播请求中，以实现根据直播请求确定目标直播频道的url地址的目的。
59.在步骤s320中，根据url地址接入vr直播服务器对应的组播网络。
60.在本技术的实施方式中，确定出url地址之后，便可以根据url地址接入vr直播服务器对应的组播网络。
61.通过上述实施方式，在vr服务器包含有多个直播频道的条件下，通过在直播请求中携带目标直播频道的url地址，以提升视频流传输网关确定目标直播频道对应的组播网络的速度，以及提升视频流传输网关确定目标直播频道的准确性。
62.参见图4，图4是根据另一示例性实施例示出的一种应用于虚拟现实vr场景的视频流传输方法的流程图。如图4所示，在图3所示实施例中的步骤s310之前，该方法还可以包括步骤s410至步骤s430，详细介绍如下：
63.在步骤s410中，接收vr客户端发送的单播请求。
64.需要说明的是，若vr客户端的本地并未存储有vr直播服务器的各个直播频道的url地址，则vr客户端可以向视频流传输网关发送单播请求，以通过单播请求获取vr直播服务器中各个直播频道的url地址。
65.在步骤s420中，将单播请求转发至vr直播服务器。
66.在本技术的实施方式中，在接收到vr客户端发送的单播请求后，便将单播请求转发至vr直播服务器，以使vr直播服务器向vr客户端返回各个直播频道的url地址。
67.vr直播服务器向vr客户端返回各个直播频道的url地址的方式包括vr直播服务器在接收到视频流传输网关转发的单播请求后，查询可信网关清单中是否包含视频流传输网关的公网信息，若查询到视频流传输网关的公网信息，则向视频流传输网关返回vr直播服务器中多个直播频道对应的url地址。其中，可信网关清单用于表示在vr直播服务器完成注册的视频流传输网关的清单。另外，vr直播服务器还可以将视频流传输网关在注册时记录的vr单播服务信息与vr直播服务器中多个直播频道对应的url地址合并生成为重定向服务信息发送至视频流传输网关，以便于视频流传输网关在将重定向服务信息返回至vr客户端
后，vr客户端基于vr单播服务信息发起单播方式的直播请求。其中，vr单播服务信息包括但不限于视频流传输网关对应的传输协议、内网ip、端口等。
68.而视频流传输网关在vr直播服务器进行注册的方式在一个示例中，视频流传输网关可以向vr服务器发送注册请求，并且在注册请求中携带该视频流传输网关对应的公网信息以及vr单播服务信息，以便于vr服务器将该公网信息存储在可信网关清单中，并记录vr单播服务信息，从而完成注册流程。同时，为了提升注册过程的安全性，还可以在注册请求中携带对应的可信凭证，以使vr服务器可以基于可信凭证进行公网信息在vr服务器对应的可信网关清单中的存储。
69.另外，将单播请求转发至vr直播服务器的方式在一个示例中，视频流传输网关可以以nat(network address translation，网络地址转换)方式将单播请求转发至vr直播服务器，即视频流传输网关采用视频流传输网关的ip地址将单播请求转发至vr直播服务器，从而vr直播服务器便可以通过单播请求对应的ip地址对可信网关清单中的公网信息进行查询，进而提升vr直播服务器查询可信网关清单的速度。
70.在步骤s430中，将重定向服务信息转发至vr客户端。
71.在本技术的实施方式中，在接收到vr服务器返回的重定向服务信息之后，便可以将重定向服务信息转发至vr客户端，以便于vr客户端基于重定向服务信息中携带的url地址以及vr单播服务信息以单播方式发起指向目标直播频道的直播请求。
72.参见图5，图5是在图2所示实施例中步骤s220在一示例性实施例中的流程图。如图5所示，从多个切片流中选择符合fov视角信息的目标切片流，由目标切片流组合生成单播fov视频流的过程，可以包括步骤s510至步骤s530，详细介绍如下：
73.在步骤s510中，判断vr客户端是否为首次接入组播网络。
74.在本技术的实施方式中，在接收到目标直播频道的多个切片流之后，可以判断vr客户端是否为首次接入组播网络。
75.其中，判断vr客户端是否为首次接入组播网络的方式在一个示例中，视频流传输网关可以通过查询预设置的运行日志中是否包含vr客户端接入组播网络的连接记录，若未存在连接记录，则判断vr客户端为首次接入组播网络，相反若存在连接记录，则判断vr客户端不为首次接入组播网络。
76.在步骤s520中，若判断为是，则将接收到的fov视角信息初始化为默认的fov视角信息。
77.由于全视角的vr场景视频在放映的过程中，为了给用户带来更佳的体验感，通常会选用一视角作为放映的初始视角，以便于用户确定vr场景视频当前放映的位置情况。
78.在本技术的实施方式中，在判断vr客户端是否为首次接入组播网络的过程中，若判断为是，则将接收到的fov视角信息初始化为默认的fov视角信息。
79.例如，若接收到的直播请求中所携带的fov视角信息为全视角的vr场景视频画面的上方，则在判断出vr客户端为首次接入组播网络时，将接收到的fov视角信息初始化为全视角的vr场景视频画面的正中间对应的fov视角信息；即全视角的vr场景视频画面的正中间对应的fov视角信息作为默认的fov视角信息，从而提升用户观看的舒适度。
80.在步骤s530中，从多个切片流中选择符合默认的fov视角信息的目标切片流，由目标切片流组合生成单播fov视频流。
81.在本技术的实施方式中，在将fov视角信息初始化为默认的fov视角信息之后，便从多个切片流中选择符合默认的fov视角信息的目标切片流，由目标切片流组合生成单播fov视频流。
82.参见图6，图6是根据另一示例性实施例示出的一种应用于虚拟现实vr场景的视频流传输。如图6所示，在图2所示实施例中的步骤s230之后，该方法还可以包括步骤s610至步骤s620，详细介绍如下：
83.在步骤s610中，接收vr客户端发送的视角改变信息。
84.需要说明的是，vr客户端在放映vr场景视频的过程中，vr客户端放映vr场景视频的视角是可以跟随用户的转动对放映视角进行转换的。因此在本技术的实施方式中，可以接收vr客户端发送的视角改变信息，以根据视角改变信息调整返回的单播fov视频流。
85.在步骤s620中，根据视角改变信息从多个切片流中重新选择符合视角改变信息的目标切片流，以生成单播fov视频流发送至vr客户端。
86.在本技术的实施方式中，接收到vr客户端发送的视角改变信息之后，便可以根据视角改变信息从多个切片流中重新选择符合视角改变信息的目标切片流，以生成单播fov视频流发送至vr客户端，从而使得vr客户端所放映的vr场景视频的画面相应改变。
87.例如，全视角的vr场景视频被划分为28个切片流，并按照5行6列的方式进行排列，在fov视角信息对应的范围为6个切片流的条件下，vr客户端首次放映vr场景视频的过程中，则初始化选用第2行与第3行中第3列、第4列、第5列对应的切片流。若用户控制vr客户端向上转动，则生成视角改变信息，且视角改变信息对应的范围为第1行与第2行中第3列、第4列、第5列对应的切片流，便根据视角改变信息从多个切片流中选择符合视角改变信息的第1行与第2行中第3列、第4列、第5列对应的切片流，并生成单播fov视频流发送至vr客户端，从而提高用户在观看vr场景视频时的沉浸感。
88.参见图7，图7示出本发明的一个实施例中视频流传输网关在vr直播服务器中的注册流程，具体实现方法可以包括以下步骤：
89.步骤s710，vr直播服务器向vr直播平台发送服务信息。
90.为了提升vr直播服务器的承载能力以及vr直播服务器的传输效率，可以通过设置多个vr直播服务器来提供服务，或将vr直播服务器设置在不同区域，为不同区域的用户提供服务，从而实现提升承载能力以及传输效率的目的。因此在vr直播服务器设置多个的情况下，为了便于对多个vr直播服务器进行管理，便通过设置vr直播平台以整合多个vr直播服务器的服务信息，从而便于对vr直播服务器进行管理，其中，服务信息包括vr直播服务器包含的各个直播频道的url地址、各个直播频道对应vr场景视频的多个切片流的数量。
91.步骤s720，视频流传输网关向vr直播平台发送注册请求。
92.由于vr直播平台对多个vr直播服务器的服务信息进行整合管理，因此为了提升视频流传输网关的服务能力，视频流传输网关可以向vr直播平台发送注册请求，以在vr直播平台上完成注册，并向vr直播平台发送该视频流传输网关对应的vr单播服务信息，从而便于vr直播平台生成重定向服务信息。
93.以下对本技术实施例的一个具体应用场景进行详细说明：
94.请参见图8所示。图8是本技术的一个实施例示出的方法的流程图，如图8所示，该应用于虚拟现实vr场景的视频流传输方法至少包括步骤s810至步骤s870，详细介绍如下：
95.步骤s810，vr客户端向视频流传输网关发送单播请求，以获取目标直播频道的url地址。
96.其中，视频流传输网关可以预设置的信令模块来接收和处理vr客户端发出的请求信息，请求信息包括但不限于单播请求、直播请求、视角请求信息、封装请求信息、网络协议请求信息、vr直播业务请求信息。
97.步骤s820，视频流传输网关以nat的方式将该单播请求转发至vr直播平台，以便于vr直播平台根据单播请求中携带的ip地址确定可信网关清单中是否存在视频流传输网关的记录。
98.步骤s830，vr直播平台向vr客户端返回重定向服务信息，其中，重定向服务信息包含各个直播频道对应的url地址以及vr单播服务信息。
99.步骤s840，vr客户端向视频流传输网关发起直播请求，其中，直播请求基于重定向服务信息生成的，且直播请求中携带有目标直播频道的url地址以及vr客户端对应的fov视角信息。
100.步骤s850，视频流传输网关基于直播请求中携带的url地址向vr直播服务器发起组播网络接入请求。
101.步骤s860，vr直播服务器向视频流传输网关下发目标直播频道对应的多个切片流。
102.其中，视频流传输网关还可以通过预设置的tile流接收器来同时接收来自vr直播服务器包含的多个直播频道各自对应的多个切片流。
103.步骤s870,视频流传输网关基于直播请求中携带的fov视角信息对多个切片流进行处理，以获取单播fov视频流。
104.其中，根据fov视角信息对多个切片流进行处理的具体过程请参见步骤s220的实施例中的记载，在此不进行赘述。
105.另外，视频流传输网关可以通过预设置的tile视角合成模块来根据不同vr客户端的fov视角信息分别生成各自对应的单播fov视频流，再由预设置的fov单播分发模块将不同的单播fov视频流按照各个vr客户端的要求发送至对应的vr客户端。
106.步骤s880，视频流传输网关向vr客户端发送单播fov视频流，以使vr客户端在接收到单播fov视频流之后，根据fov视角信息将单播foc视频流的画面渲染至对应的位置上。
107.以下介绍本技术的装置实施例，可以用于执行本技术上述实施例中的xx方法。对于本技术装置实施例中未披露的细节，请参照本技术上述的xx方法的实施例。
108.图9示出了根据本技术的一个实施例的应用于虚拟现实vr场景的视频流传输装置900的框图。
109.参照图9所示，根据本技术的一个实施例的应用于虚拟现实vr场景的视频流传输装置900，包括接收模块910，配置为接收vr直播服务器通过组播网络下发的目标直播频道的多个切片流；目标直播频道对应vr客户端以单播方式发起的直播请求，直播请求中包含fov视角信息；合成模块920，配置为从多个切片流中选择符合fov视角信息的目标切片流，由目标切片流组合生成单播fov视频流；发送模块930，配置为将单播fov视频流发送至vr客户端。
110.在本技术的一些实施例中，基于前述方案，接收模块910，还配置为：接收vr客户端
发送的直播请求；直播请求携带有目标直播频道的url地址与fov视角信息；根据url地址接入vr直播服务器对应的组播网络。
111.在本技术的一些实施例中，基于前述方案，接收模块910，还配置为：接收vr客户端发送的单播请求；将单播请求转发至vr直播服务器，以使vr直播服务器查询可信网关清单，若查询到可信网关清单中包含视频流传输网关的公网信息，则向视频流传输网关返回重定向服务信息；重定向服务信息包括vr直播服务器中多个直播频道对应的url地址；将重定向服务信息转发至vr客户端，以使vr客户端根据重定向服务信息发起直播请求。
112.在本技术的一些实施例中，基于前述方案，应用于虚拟现实vr场景的视频流传输装置900，还包括：注册模块，配置为向vr服务器发送注册请求；注册请求包含视频流传输网关对应的公网信息以及可信凭证；以使vr服务器基于可信凭证进行公网信息在vr服务器对应的可信网关清单中的存储。
113.在本技术的一些实施例中，基于前述方案，合成模块920，还配置为：判断vr客户端是否为首次接入组播网络；若判断为是，则将接收到的fov视角信息初始化为默认的fov视角信息；从多个切片流中选择符合默认的fov视角信息的目标切片流，由目标切片流组合生成单播fov视频流。
114.在本技术的一些实施例中，基于前述方案，合成模块920，还配置为：去除目标切片流中包含的rtp包头以及重写目标切片流中的元数据信息，获得处理后的目标切片流；由处理后的目标切片流组合生成一路视频流，并采用指定协议对一路视频流进行封装生成单播fov视频流。
115.在本技术的一些实施例中，基于前述方案，合成模块920，还配置为：接收vr客户端发送的视角改变信息；根据视角改变信息从多个切片流中重新选择符合视角改变信息的目标切片流，以生成单播fov视频流发送至vr客户端。
116.需要说明的是，上述实施例所提供的应用于虚拟现实vr场景的视频流传输装置900与上述实施例所提供的应用于虚拟现实vr场景的视频流传输方法属于同一构思，其中各个模块和单元执行操作的具体方式已经在方法实施例中进行了详细描述，此处不再赘述。
117.图10示出了适于用来实现本技术实施例的电子设备的计算机系统的结构示意图。
118.需要说明的是，图10示出的电子设备的计算机系统1000仅是一个示例，不应对本技术实施例的功能和使用范围带来任何限制。
119.如图10所示，计算机系统1000包括中央处理单元(central processing unit，cpu)1001，其可以根据存储在只读存储器(read-only memory，rom)1002中的程序或者从存储部分1008加载到随机访问存储器(random access memory，ram)1003中的程序而执行各种适当的动作和处理，例如执行上述实施例中的方法。在ram 1003中，还存储有系统操作所需的各种程序和数据。cpu 1001、rom 1002以及ram 1003通过总线1004彼此相连。输入/输出(input/output，i/o)接口1005也连接至总线1004。
120.以下部件连接至i/o接口1005：包括键盘、鼠标等的输入部分1006；包括诸如阴极射线管(cathode ray tube，crt)、液晶显示器(liquid crystal display，lcd)等以及扬声器等的输出部分1007；包括硬盘等的存储部分1008；以及包括诸如lan(local area network，局域网)卡、调制解调器等的网络接口卡的通信部分1009。通信部分1009经由诸如
因特网的网络执行通信处理。驱动器1010也根据需要连接至i/o接口1005。可拆卸介质1011，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器1010上，以便于从其上读出的计算机程序根据需要被安装入存储部分1008。
121.特别地，根据本技术的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本技术的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的计算机程序。在这样的实施例中，该计算机程序可以通过通信部分1009从网络上被下载和安装，和/或从可拆卸介质1011被安装。在该计算机程序被中央处理单元(cpu)1001执行时，执行本技术的系统中限定的各种功能。
122.需要说明的是，本技术实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(erasable programmable read only memory，eprom)、闪存、光纤、便携式紧凑磁盘只读存储器(compact disc read-only memory，cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本技术中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本技术中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的计算机程序。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的计算机程序可以用任何适当的介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。
123.附图中的流程图和框图，图示了按照本技术各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。其中，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
124.描述于本技术实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。
125.作为另一方面，本技术还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该电子设备执行时，使得该电子设备实现上述实施例中所述的方法。
126.应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本技术的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
127.通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本技术实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是cd-rom，u盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、触控终端、或者网络设备等)执行根据本技术实施方式的方法。
128.本领域技术人员在考虑说明书及实践这里公开的实施方式后，将容易想到本技术的其它实施方案。本技术旨在涵盖本技术的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本技术的一般性原理并包括本技术未公开的本技术领域中的公知常识或惯用技术手段。
129.应当理解的是，本技术并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本技术的范围仅由所附的权利要求来限制。