一种一站式虚拟直播录播的方法与流程

本发明涉及互联网视频直播技术领域，特别是一种一站式虚拟直播录播的方法。

背景技术：

视频直播具有广大的市场，特别是随着当前线上市场不断增大和快速发展，直播带货已经越来越受到商家的青睐，消费者也逐渐接受了直播销售的方式，但是线上直播同样需要的场地租借、场景搭设，这些基本设施会导致直播的成本增加，然而虚拟直播就可以很好的解决这个问题，数据显示，虚拟偶像产业规模正在不断扩大，特别是头部虚拟偶像吸粉能力呈现爆炸式增长，虚拟偶像可以携带大量的流量，在直播带货领域也将会迎来一个新的发展机遇，但是当前虚拟直播也存在一些问题导致消费者不满意，主要为形式单一、粗放以及读稿式、广告式发展，导向性太强导致消费者反感，随着技术的发展，特别是5g、vr时代下技术的巨大发展，将会进一步为在线直播带来巨大的机遇，在巨大的市场机遇面前，如何将人设、模型和互动方式高效结合，满足用户提出的各种需求，是当前虚拟直播领域亟待解决的问题。

技术实现要素：

本发明要解决的技术问题在于提供一种一站式虚拟直播录播的方法。

为了解决上述问题，本发明提供了一种一站式虚拟直播录播的方法，一种一站式虚拟直播录播的方法，包括以下步骤：

(1)通过多个动捕设备将直播者的动作进行采集，通过多个表情设备捕捉直播者的表情信号；

(2)通过接收器将步骤(1)中由动捕设备捕捉到的动作信号传输到动捕主机,以及通过wifi将步骤(1)中的表情信号传输至动捕主机；

(3)步骤(2)的动捕主机中包含合成画面和舞台画面两种虚拟软件，直播者可选择其中一种或两种同时选择；

(4)将步骤(3)的数据传输到导播软件中，直播者也可不采用步骤(1)至(3)的，直接通过打开多个摄像头将真实画面导入到导播软件中，所述导播软件含内置舞台特效模块；

(5)通过声卡采集直播者的声音数据，并将声音数据传输到变音主机中；

(6)将步骤(5)中的数据传输到变声音源控制系统中；

(7)将步骤(6)中变声音源的数据传输到步骤(4)中的导播软件中；

(8)将步骤(7)中数据通过显示屏展示最终合成效果；

(9)将步骤(8)中的最终合成效果后播放，在播放过程中可通过将实时播放数据存储，存储后可再次播放。

进一步的，所述步骤(1)中的动捕内容包括：手脚动作、关节捕捉、身体移动、骨骼部位捕捉，所述步骤(1)中的表情内容包括：面部动作、面部形状和面部大小，所述直播者的数量为1个及1个以上，所述直播者可为完全虚拟的人物、也可为经过软件处理后的真实人物。

进一步的，所述直播者包括：至少1个虚拟人物、至少1个真实人物、至少1个虚拟人物和至少一个虚拟人物。

进一步的，所述步骤(3)中的合成画面内容包括：背景画面、天气画面、底板画面、周围建筑画面中的至少一种。

进一步的，所述步骤(3)中的舞台画面包括：真实舞台场景、经过软件处理后的真实舞台场景和完全由软件形成的虚拟舞台场景。

进一步的，所述步骤(4)中的内置舞台特效模块包括：访谈节目、虚拟舞台、特色环境、讲座的至少一种

本发明的有益效果是：本发明所述一种一站式虚拟直播录播的方法，该虚拟直播方法可通过动作捕捉设备将真人的面部表情、肢体动作、声音信号映射到事先设定好的虚拟动漫角色上，使虚拟动漫角色和动作与直播者的动作同步，并上传至直播设备推流到网络，该方法主要采用虚拟形象为主体，并通过实时渲染、表情捕捉、动作捕捉、声音处理等技术将直播者的面部表情及动作映射为3d模型，直播者通过虚拟人物与外界进行实时播报、直播和互动，并且在直播过程中，用户可以实时调换内置舞台特效模块中的视频专场效果比如访谈节目、虚拟舞台、特色环境、讲座等，其次，可在虚拟背景中可以设定虚拟立体背景、图片式虚拟背景、视频动画虚拟背景等，进一步增加直播间的纵深感、空间感和高级感，从而增加观赏性和体验感，为客户吸引更多的流量，并且可在直播过程中实时录像并存储，可进行多次录播，该方法在虚拟视频直播领域具有非常积极的应用和推广价值。

附图说明

下面结合附图对本发明的具体实施方式作进一步详细的说明，其中：

图1为本发明一种一站式虚拟直播录播的方法其实现功能的流程图；

图2为本发明一种一站式虚拟直播录播的方法其一实施例的直播场景效果图；

图3为本发明一种一站式虚拟直播录播的方法其应用在线上教学的一实施例的直播场景效果图；

图4为本发明一种一站式虚拟直播录播的方法其一实施例的虚拟人物效果图。

具体实施方式

一种一站式虚拟直播录播的方法，包括以下步骤：

(1)通过多个动捕设备将直播者的动作进行采集，通过多个表情设备捕捉直播者的表情信号；

(2)通过接收器将步骤(1)中由动捕设备捕捉到的动作信号传输到动捕主机,以及通过wifi将步骤(1)中的表情信号传输至动捕主机；

(3)步骤(2)的动捕主机中包含合成画面和舞台画面两种虚拟软件，直播者可选择其中一种或两种同时选择；

(4)将步骤(3)的数据传输到导播软件中，直播者也可不采用步骤(1)至(3)的，直接通过打开多个摄像头将真实画面导入到导播软件中，所述导播软件含内置舞台特效模块；

(5)通过声卡采集直播者的声音数据，并将声音数据传输到变音主机中；

(6)将步骤(5)中的数据传输到变声音源控制系统中；

(7)将步骤(6)中变声音源的数据传输到步骤(4)中的导播软件中；

(8)将步骤(7)中数据通过显示屏展示最终合成效果；

(9)将步骤(8)中的最终合成效果后播放，在播放过程中可通过将实时播放数据存储，存储后可再次播放。

具体的，所述步骤(1)中的动捕内容包括：手脚动作、关节捕捉、身体移动、骨骼部位捕捉，所述步骤(1)中的表情内容包括：面部动作、面部形状和面部大小，所述直播者的数量为1个及1个以上，所述直播者可为完全虚拟的人物、也可为经过软件处理后的真实人物；所述步骤(1)中的直播者包括：至少1个虚拟人物、至少1个真实人物、至少1个虚拟人物和至少一个虚拟人物；所述步骤(3)中的合成画面内容包括：背景画面、天气画面、底板画面、周围建筑画面中的至少一种；所述步骤(3)中的舞台画面包括：真实舞台场景、经过软件处理后的真实舞台场景和完全由软件形成的虚拟舞台场景；所述步骤(4)中的内置舞台特效模块包括：访谈节目、虚拟舞台、特色环境、讲座的至少一种。

上面结合附图对本发明的实施方式作了详细说明，但是本发明并不限于上述实施方式，在本领域的普通技术人员所具备的知识范围内，还可以在不脱离本发明宗旨的前提下作出各种变化。

技术特征：

1.一种一站式虚拟直播录播的方法，其特征在于，包括以下步骤：

(1)通过多个动捕设备将直播者的动作进行采集，通过多个表情设备捕捉直播者的表情信号；

(2)通过接收器将步骤(1)中由动捕设备捕捉到的动作信号传输到动捕主机,以及通过wifi将步骤(1)中的表情信号传输至动捕主机；

(3)步骤(2)的动捕主机中包含合成画面和舞台画面两种虚拟软件，直播者可选择其中一种或两种同时选择；

(4)将步骤(3)的数据传输到导播软件中，直播者也可不采用步骤(1)至(3)的，直接通过打开多个摄像头将真实画面导入到导播软件中，所述导播软件含内置舞台特效模块；

(5)通过声卡采集直播者的声音数据，并将声音数据传输到变音主机中；

(6)将步骤(5)中的数据传输到变声音源控制系统中；

(7)将步骤(6)中变声音源的数据传输到步骤(4)中的导播软件中；

(8)将步骤(7)中数据通过显示屏展示最终合成效果；

(9)将步骤(8)中的最终合成效果后播放，在播放过程中可通过将实时播放数据存储，存储后可再次播放。

2.根据权利要求1所述的一种一站式虚拟直播录播的方法，其特征在于，所述步骤(1)中的动捕内容包括：手脚动作、关节捕捉、身体移动、骨骼部位捕捉，所述步骤(1)中的表情内容包括：面部动作、面部形状和面部大小，所述直播者的数量为1个及1个以上，所述直播者可为完全虚拟的人物、也可为经过软件处理后的真实人物。

3.根据权利要求1所述的一种一站式虚拟直播录播的方法，其特征在于，所述步骤(1)中直播者包括：至少1个虚拟人物、至少1个真实人物、至少1个虚拟人物和至少一个虚拟人物。

4.根据权利要求1所述的一种一站式虚拟直播录播的方法，其特征在于，所述步骤(3)中的合成画面内容包括：背景画面、天气画面、底板画面、周围建筑画面中的至少一种。

5.根据权利要求1所述的一种一站式虚拟直播录播的方法，其特征在于，所述步骤(3)中的舞台画面包括：真实舞台场景、经过软件处理后的真实舞台场景和完全由软件形成的虚拟舞台场景。

6.根据权利要求1所述的一种一站式虚拟直播录播的方法，其特征在于，所述步骤(4)中的内置舞台特效模块包括：访谈节目、虚拟舞台、特色环境、讲座的至少一种。

技术总结
本发明提供了一种一站式虚拟直播录播的方法，该虚拟直播方法可通过动作捕捉设备将真人的面部表情、肢体动作、声音信号映射到事先设定好的虚拟动漫角色上，使虚拟动漫角色和动作与直播者的动作同步，并上传至直播设备推流到网络，该方法采用虚拟形象为主体，并通过实时渲染、表情捕捉、动作捕捉、声音处理等技术将直播者的面部表情及动作映射为3D模型，直播者通过虚拟人物与外界进行实时播报、直播和互动，在直播过程中，用户可实时调换内置舞台特效模块中的视频专场效果，还可在虚拟背景中可以设定虚拟立体背景、图片式虚拟背景等增加直播间的纵深感、空间感和高级感，从而增加观赏性和体验感吸引更多的流量，该方法具有积极的应用和推广价值。

技术研发人员：秦卫卫;罗东龙
受保护的技术使用者：广东象尚科技有限公司
技术研发日：2020.10.09
技术公布日：2021.03.23