1.一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,包括:
2.根据权利要求1所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述三维数字人脸重建模块具有将输入的人脸图像与人脸表情特征一一对应的特质,实现人脸表情特征替代人脸图像传输,用于降低带宽;
3.根据权利要求1所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述三维数字人脸重建模型,包括:
4.根据权利要求1所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述动态神经辐射场单元将所述面部追踪单元获得的所述人脸位姿p、人脸表情特征δ以及可学习隐码γ共同作为条件参数进行限制,使用一个多层感知机mlp表示人脸的动态神经辐射场单元dθ;
5.根据权利要求4所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述辐射颜色rgb和体素密度σ为所述动态神经辐射场单元dθ的网络结果,其获取过程,包括:
6.根据权利要求5所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述嵌入网络和注意网络,分别对人脸表情特征进行加窗嵌入和平滑处理;所述可学习隐码γ补偿调和在所述面部追踪单元中人脸表情特征和人脸位姿中的误差。
7.根据权利要求5所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述人脸立体渲染单元模拟相机射线穿过每帧人脸图像的每个像素的采样过程,对经过所述动态神经辐射场单元得到的体素密度σ和辐射颜色rgb进行累积,得到最终图像像素点值c,包括:
8.根据权利要求1所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述的人脸特征聚类分析模块,包括:
9.根据权利要求1所述的一种基于神经辐射场的超低带宽视频通话传输系统,其特征在于,所述的人脸特征压缩模块,包括:
10.一种基于神经辐射场的超低带宽视频通话传输方法,采用权利要求1-9任一项所述的基于神经辐射场的超低带宽视频通话传输系统,其特征在于,包括: