一种基于视觉关注度优先级的高效视频编码方法
【技术领域】
[0001] 本发明属于视频处理技术领域，涉及一种基于视觉关注度优先级的高效视频编码 方法。
【背景技术】
[0002] 在科技全球化日益深入的今天，视频信息的加速普及引发了视频数据的爆炸式增 长，同时也推动了以高效为标志的视频编码技术的不断完善。在这一背景下，基于人眼视觉 感知特征的视频编码技术应运而生。
[0003] 人类视觉系统（Human Visual System，HVS)能够充分感知视频场景中存在的 亮度、颜色、运动、纹理等多种视觉信息，是人眼获取和处理外部信息的重要手段之一。同 时，由于人眼作为视频数据的主要接收端，因此适当的将人眼视觉系统与视频编码技术相 结合，可以在相同编码码率下保证更优的主观视觉体验。但现有的国际视频编码标准， 如：H. 265/HEVC，在对视频数据进行压缩时，并不区分图像中不同区域或对象在视觉意义 上的重要性差异，因而，在码率分配或计算资源分配过程中采用统一的分配标准，缺乏"因 人而异"的考虑。然而，由于人眼视觉系统自身所特有的视觉选择性注意机制（Visual Selective Attention，VSA)，使得人眼对于图像中不同区域具有不同敏感程度。同时，研究 表明：在视觉选择性注意机制的作用下，运动/纹理因素相对更加吸引人眼视觉注意。因 此，利用上述特性，可以有效地指导编码器进行高效的码率分配和运算资源分配，以在相同 编码开销下，完成主观视觉质量更优的视频编码过程。
[0004] 另一方面，在实际应用领域，视频编码算法的复杂度也是衡量其优异性的重要标 准之一，利用人眼视觉系统进行视觉感知分析而引入的额外计算量，同样值得重点关注。因 此，如何充分利用视频编码框架中的已有编码信息设计更简洁、更快速的视觉关注区域获 取方法，对于展开基于人眼视觉感知特征的高效视频编码研究具有重要意义。
【发明内容】
[0005] 本发明的目的是提供一种基于视觉关注度优先级的高效视频编码方法，即从人眼 视觉感知特征的敏感性与编解码器的主观视觉质量之间的关联性出发，充分利用编码单元 自身特性和已有编码信息，加速人眼视觉优先关注区域的获取过程，并为其设计高质量的 编码方案，同时不引入额外的编码码率增加。
[0006] 为实现上述目的，本发明采用的技术方案是，一种基于视觉关注度优先级的高效 视频编码方法，
【发明内容】
分为以下两个方面：
[0007] 第一、基于运动-纹理特征的视觉关注优先级标注
[0008] 视频中不同区域存在的视觉重要性差异为基于人眼视觉感知特征的高效视频编 码提出了应用需求。因此，在较低运算量下，完成对人眼关注区域的有效获取是提高编码 效率的重要途径之一。在这一基础上，本方法首先以编码对象的运动形态作为主导视觉关 注特征。利用人眼对于运动目标移动速度的关注程度差异将运动形态分为三类："平稳运 动"（产生于低速运动目标）、"虚影运动"（产生于高速移动目标）和"滞留运动"（产生于 移动后停止的目标），并使用由帧间编码信息所构成的运动形态参数V对其重要性进行描 述。
[0010] 其中，MK/表示该编码单元的运动矢量，/YiXg表示该编码单元的参考索引，采用 当前POC与其参考POC差的绝对值进行描述。
[0011] 其次，以编码对象的纹理信息作为辅助视觉关注特征。纹理关注程度差异主要体 现在图像内部像素信息或内容信息的变化程度，对其使用由帧内编码信息和帧间编码信息 联合组成的纹理密度参数T进行描述。
[0013] 至此，构建基于运动形态参数V和纹理密度参数T的运动-纹理特征的视觉关注 度优先级标注策略。
[0014] 第二、基于视觉关注优先级的高质量编码优化
[0015] 在基于"预测加变换"混合编码框架的视频编码标准中，对预测残差进行变换编 码时，为避免由固定离散余弦变换（Discrete Cosine Transform，DCT)或离散正弦变换 (Discrete Sine Transform，DST)系数所造成的严重块效应，减轻去方块滤波器、采样点自 适应补偿滤波器的运算负担，可以根据视觉关注优先级对变换后的高频系数进行自适应调 控，以保证视觉重点关注区域的局部主观视觉质量。首先，本方法将视觉关注优先级L描述 为L = V&&T，作为后续视觉关注优先程度的判别标准；将视觉关注度调控参数F描述为F = V+T，作为后续调控变换系数的矩阵参数。其次，采用具有自适应特性的动态频率均衡矩阵 Ω对变换系数进行调控：
[0017] 其中，动态频率均衡矩阵元素 mnn根据视觉关注优先级L和视觉关注调控参数F定 义为：
[0019] 动态频率均衡矩阵Ω对变换系数调控过程描述为：
[0021] 其中，#表示调控后的变换系数，H表示由Η. 265/HEVC标准所采用的固定变换系 数。至此，完成基于视觉关注优先级的高质量编码优化过程。
【附图说明】
[0022] 图1基于视觉关注度优先级的高效视频编码方法流程示意图。
[0023] 图2是本发明的视频编码方法流程图。
【具体实施方式】
[0024] 下面结合附图和【具体实施方式】对本发明进行详细说明：
[0025] 图1为基于视觉关注度优先级的高效视频编码方法流程示意图；为了将人眼视觉 特征合理地融入到视频编码过程，精确地获取人眼视觉关注区域是一项重要前提。但传统 的感兴趣区域获取方案在使用HVS机制时，往往需要建立复杂的视觉模型，不利于其在低 运算量开销、高实时性的实际应用环境中使用。因此，为了加速人眼视觉关注区域获取、关 注度优先级标注过程，实现编码变换系数的精细控制，在同等码率下，提升重建视频的主观 视觉体验，本发明公开了一种基于视觉关注度优先级的高效视频编码方法，流程如图2所 示，具体步骤如下：
[0026] 第一、基于运动-纹理特征的视觉关注优先级标注：
[0027] 第一步：输入视频序列，读取配置文件，进入帧间、帧内预测过程；
[0028] 第二步：记录帧间预测过程中，预测单元的运动矢量ΜΓ/和参考索引Ρ/?Ζ?信息， 以及采用Inter Merge的预测单元，并利用公式（1)计算运动形态参数V ;
[0029] 第三步：记录帧内预测过程中，预测单元的亮度预测模式信息：Intra DC、Intra Planer或Inter Angular，并利用公式（2)计算纹理密度参数T ;
[0030] 第四步：利用运动形态参数V和纹理密度参数T，分别计算视觉关注优先级L = V&&T，作为后续视觉关注优先