一种视频转码方法、装置、电子设备和存储介质与流程

文档序号:35970705发布日期:2023-11-09 11:18阅读:38来源:国知局
一种视频转码方法、装置、电子设备和存储介质与流程

所属的技术人员能够理解,本技术的各个方面可以实现为系统、方法或程序产品。因此,本技术的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。与上述方法实施例基于同一发明构思,本技术实施例中还提供了一种电子设备。在一种实施例中,该电子设备可以是服务器,如图1所示的服务器。在该实施例中,电子设备的结构可以如图13所示,包括存储器1301,通讯模块1303以及一个或多个处理器1302。存储器1301,用于存储处理器1302执行的计算机程序。存储器1301可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统,以及运行即时通讯功能所需的程序等;存储数据区可存储各种即时通讯信息和操作指令集等。存储器1301可以是易失性存储器(volatile memory),例如随机存取存储器(random-access memory,ram);存储器1301也可以是非易失性存储器(non-volatilememory),例如只读存储器,快闪存储器(flash memory),硬盘(hard disk drive,hdd)或固态硬盘(solid-state drive,ssd);或者存储器1301是能够用于携带或存储具有指令或数据结构形式的期望的计算机程序并能够由计算机存取的任何其他介质,但不限于此。存储器1301可以是上述存储器的组合。处理器1302,可以包括一个或多个中央处理单元(central processing unit,cpu)或者为数字处理单元等等。处理器1302,用于调用存储器1301中存储的计算机程序时实现上述视频转码方法。通讯模块1303用于与终端设备和其他服务器进行通信。本技术实施例中不限定上述存储器1301、通讯模块1303和处理器1302之间的具体连接介质。本技术实施例在图13中以存储器1301和处理器1302之间通过总线1304连接,总线1304在图13中以粗线描述,其它部件之间的连接方式,仅是进行示意性说明,并不引以为限。总线1304可以分为地址总线、数据总线、控制总线等。为便于描述,图13中仅用一条粗线描述,但并不描述仅有一根总线或一种类型的总线。存储器1301中存储有计算机存储介质,计算机存储介质中存储有计算机可执行指令,计算机可执行指令用于实现本技术实施例的视频转码方法。处理器1302用于执行上述的视频转码方法,如图2所示。在另一种实施例中,电子设备也可以是其他电子设备,如图1所示的终端设备。在该实施例中,电子设备的结构可以如图14所示,包括:通信组件1410、存储器1420、显示单元1430、摄像头1440、传感器1450、音频电路1460、蓝牙模块1470、处理器1480等部件。通信组件1410用于与服务器进行通信。在一些实施例中,可以包括电路无线保真(wireless fidelity,wifi)模块,wifi模块属于短距离无线传输技术,电子设备通过wifi模块可以帮助用户收发信息。存储器1420可用于存储软件程序及数据。处理器1480通过运行存储在存储器1420的软件程序或数据,从而执行终端设备的各种功能以及数据处理。存储器1420可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器1420存储有使得终端设备能运行的操作系统。本技术中存储器1420可以存储操作系统及各种应用程序,还可以存储执行本技术实施例视频转码方法的计算机程序。显示单元1430还可用于显示由用户输入的信息或提供给用户的信息以及终端设备的各种菜单的图形用户界面(graphical user interface,gui)。具体地,显示单元1430可以包括设置在终端设备正面的显示屏1432。其中,显示屏1432可以采用液晶显示器、发光二极管等形式来配置。显示单元1430可以用于显示本技术实施例中的视频转码用户界面等。显示单元1430还可用于接收输入的数字或字符信息,产生与终端设备的用户设置以及功能控制有关的信号输入,具体地,显示单元1430可以包括设置在终端设备正面的触摸屏1431,可收集用户在其上或附近的触摸操作,例如点击按钮,拖动滚动框等。其中,触摸屏1431可以覆盖在显示屏1432之上,也可以将触摸屏1431与显示屏1432集成而实现终端设备的输入和输出功能,集成后可以简称触摸显示屏。本技术中显示单元1430可以显示应用程序以及对应的操作步骤。摄像头1440可用于捕获静态图像,用户可以将摄像头1440拍摄的图像通过应用发布评论。摄像头1440可以是一个,也可以是多个。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给处理器1480转换成数字图像信号。终端设备还可以包括至少一种传感器1450,比如加速度传感器1451、距离传感器1452、指纹传感器1453、温度传感器1454。终端设备还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。音频电路1460、扬声器1461、传声器1462可提供用户与终端设备之间的音频接口。音频电路1460可将接收到的音频数据转换后的电信号,传输到扬声器1461,由扬声器1461转换为声音信号输出。终端设备还可配置音量按钮,用于调节声音信号的音量。另一方面,传声器1462将收集的声音信号转换为电信号,由音频电路1460接收后转换为音频数据,再将音频数据输出至通信组件1410以发送给比如另一终端设备,或者将音频数据输出至存储器1420以便进一步处理。蓝牙模块1470用于通过蓝牙协议来与其他具有蓝牙模块的蓝牙设备进行信息交互。例如,终端设备可以通过蓝牙模块1470与同样具备蓝牙模块的可穿戴电子设备(例如智能手表)建立蓝牙连接,从而进行数据交互。处理器1480是终端设备的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器1420内的软件程序,以及调用存储在存储器1420内的数据,执行终端设备的各种功能和处理数据。在一些实施例中,处理器1480可包括一个或多个处理单元;处理器1480还可以集成应用处理器和基带处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,基带处理器主要处理无线通信。可以理解的是,上述基带处理器也可以不集成到处理器1480中。本技术中处理器1480可以运行操作系统、应用程序、用户界面显示及触控响应,以及本技术实施例的视频转码方法。另外,处理器1480与显示单元1430耦接。在一些可能的实施方式中,本技术提供的视频转码方法的各个方面还可以实现为一种程序产品的形式,其包括计算机程序,当程序产品在电子设备上运行时,计算机程序用于使电子设备执行本说明书上述描述的根据本技术各种示例性实施方式的视频转码方法中的步骤,例如,电子设备可以执行如图2中所示的步骤。程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。本技术的实施方式的程序产品可以采用便携式紧凑盘只读存储器(cd-rom)并包括计算机程序,并可以在电子设备上运行。然而,本技术的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被命令执行系统、装置或者器件使用或者与其结合使用。可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读计算机程序。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由命令执行系统、装置或者器件使用或者与其结合使用的程序。可读介质上包含的计算机程序可以用任何适当的介质传输,包括但不限于无线、有线、光缆、rf等等,或者上述的任意合适的组合。可以以一种或多种程序设计语言的任意组合来编写用于执行本技术操作的计算机程序,程序设计语言包括面向对象的程序设计语言—诸如java、c++等,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。计算机程序可以完全地在用户电子设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户电子设备上部分在远程电子设备上执行、或者完全在远程电子设备或服务器上执行。在涉及远程电子设备的情形中,远程电子设备可以通过任意种类的网络包括局域网(lan)或广域网(wan)连接到用户电子设备,或者,可以连接到外部电子设备(例如利用因特网服务提供商来通过因特网连接)。应当注意,尽管在上文详细描述中提及了装置的若干单元或子单元,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本技术的实施方式,上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。反之,上文描述的一个单元的特征和功能可以进一步划分为由多个单元来具体化。此外,尽管在附图中以特定顺序描述了本技术方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。本领域内的技术人员应明白,本技术的实施例可提供为方法、系统、或计算机程序产品。因此,本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本技术可采用在一个或多个其中包含有计算机可用计算机程序的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。本技术是参照根据本技术实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序命令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序命令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的命令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序命令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的命令产生包括命令装置的制造品,该命令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。这些计算机程序命令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的命令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。尽管已描述了本技术的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本技术范围的所有变更和修改。显然,本领域的技术人员可以对本技术进行各种改动和变型而不脱离本技术的精神和范围。这样,倘若本技术的这些修改和变型属于本技术权利要求及其等同技术的范围之内,则本技术也意图包含这些改动和变型在内。


背景技术:

1、随着信息技术的飞跃,多媒体技术在网络中的应用得到了空前发展,作为多媒体技术重要组成部分的视频通信技术也得到了极大的发展和应用。由于不同的视频可能采用不同的编码或者压缩标准,而且具体应用场景也可能不同,因此在不同的设备间共享、交换或者播放视频文件时,通常需要进行视频转码操作。

2、视频转码(video transcoding)是指将已经压缩编码的视频码流转换成另一个视频码流,即为一个对视频文件先解码、再编码的过程,在该过程中可能涉及对码率的调整,使得通过转码操作生成的视频能够满足特定的需求,例如:降低码率,以适应网络带宽受限的传输场景或者适应终端设备播放速度的需求。

3、相关技术中,在视频转码过程中,通常依据主观经验或视频质量需求,采用设定的码率进行转码。但是,不同的场景内容对码率的需求不同,对于内容比较简单的视频,即使依据主观经验下调码率进行转码,仍然可能由于码率较高,造成网络带宽的浪费;而对于内容较为复杂的视频,即使依据主观经验上调了码率,仍然可能由于码率较低,导致转码后视频的纹理缺失和清晰度下降。


技术实现思路

1、本技术实施例提供一种视频转码方法、装置、电子设备和存储介质,用以提高保证转码后的视频质量并降低带宽消耗。

2、本技术实施例提供的一种视频转码方法,包括:

3、对初始视频码流进行解码,获得所述初始视频码流包含的各视频帧,以及所述初始视频码流的初始码率;

4、基于所述各视频帧各自包含的像素点的像素值,获得所述各视频帧各自的复杂度系数,以及各视频帧组各自的相似度系数;其中,所述各视频帧组为:按照每两个相邻的视频帧为一组的规则,对所述各视频帧进行划分获得的;所述复杂度系数表征:相应的视频帧包含的画面内容的复杂程度;所述相似度系数表征:相应的视频帧组包含的两个视频帧的画面内容之间的相似程度;

5、基于各复杂度系数和各相似度系数,对所述初始码率进行调整,获得目标码率;

6、基于所述目标码率对所述各视频帧进行编码,获得目标视频码流。

7、本技术实施例提供的一种视频转码装置,包括:

8、解码单元,用于对初始视频码流进行解码,获得所述初始视频码流包含的各视频帧,以及所述初始视频码流的初始码率;

9、处理单元,用于基于所述各视频帧各自包含的像素点的像素值,获得所述各视频帧各自的复杂度系数,以及各视频帧组各自的相似度系数;其中,所述各视频帧组为:按照每两个相邻的视频帧为一组的规则,对所述各视频帧进行划分获得的;所述复杂度系数表征:相应的视频帧包含的画面内容的复杂程度;所述相似度系数表征:相应的视频帧组包含的两个视频帧的画面内容之间的相似程度;

10、调整单元,用于基于各复杂度系数和各相似度系数,对所述初始码率进行调整,获得目标码率;

11、编码单元,用于基于所述目标码率对所述各视频帧进行编码,获得目标视频码流。

12、可选的,所述调整单元具体用于:

13、基于所述各复杂度系数和所述各相似度系数,获得全局特征系数和局部特征系数;其中,所述全局特征系数表征:所述各视频帧包含的画面内容的整体复杂程度,所述局部特征系数表征:所述各视频帧包含的画面内容的局部复杂程度;

14、基于所述全局特征系数和所述局部特征系数,对所述初始码率进行调整,获得所述目标码率。

15、可选的,所述处理单元具体用于:

16、针对所述各视频帧,分别执行以下操作:

17、将一个视频帧划分为多个视频帧区域,并分别基于所述多个视频帧区域各自包含的像素点的像素值,获得所述多个视频帧区域各自的像素方差值;

18、基于获得的各像素方差值,获得所述一个视频帧的复杂度系数。

19、可选的,所述处理单元具体用于:

20、针对所述各视频帧组,分别执行以下操作:

21、将一个视频帧组包含的两个视频帧,分别划分为多个视频帧区域;

22、基于获得的多个视频帧区域在所属视频帧中的位置,将所述多个视频帧区域划分为多个区域组,每个区域组包含的两个视频帧区域在所属的视频帧中的位置相同;

23、分别基于所述多个区域组各自包含的两个视频帧区域中,在相同位置的像素点之间的像素值的差值,获得所述多个区域组各自的像素差值;

24、基于获得的各像素差值,获得所述一个视频帧组的相似度系数。

25、可选的,所述调整单元具体用于:

26、基于所述各复杂度系数,获得复杂度分布系数,并从所述各复杂度系数中筛选出,符合复杂度取值条件的目标复杂度系数;

27、基于所述各相似度系数,获得相似度分布系数,并从所述各相似度系数中筛选出,符合相似度取值条件的目标相似度系数;

28、基于所述复杂度分布系数、所述相似度分布系数,和预设参数,获得所述全局特征系数,并基于所述目标复杂度系数、所述目标相似度系数,和所述预设参数,获得所述局部特征系数。

29、可选的,所述调整单元具体用于:

30、在所述局部特征系数大于预设阈值时,将第一预设码率作为所述目标码率;

31、在所述局部特征系数不大于所述预设阈值时,基于所述全局特征系数和第二预设码率,对所述初始码率进行调整,获得所述目标码率,其中,所述第一预设码率大于所述第二预设码率。

32、可选的,所述调整单元具体用于:

33、在所述全局特征系数不大于系数下限阈值时,基于所述全局特征系数和所述系数下限阈值,获得下调比例值,并将所述下调比例值与所述第二预设码率的乘积作为所述目标码率,所述下调比例值小于预设调整门限;

34、在所述全局特征系数大于所述系数下限阈值,且不大于系数上限阈值时,将所述第二预设码率作为所述目标码率;

35、在所述全局特征系数大于所述系数上限阈值时,基于所述全局特征系数和所述系数上限阈值,获得上调比例值,并将所述上调比例值与所述第二预设码率的乘积作为所述目标码率,所述上调比例值大于所述预设调整门限。

36、可选的,所述装置还包括筛选单元,用于:

37、基于所述各视频帧各自的标识信息,对所述各视频帧进行筛选,获得多个关键帧,所述标识信息是基于对应的视频帧在所述各视频帧中的位置确定的;

38、则所述处理单元具体用于:

39、基于所述多个关键帧各自包含的像素点的像素值,获得所述多个关键帧各自的复杂度系数,以及各关键帧组各自的相似度系数,其中,所述各关键帧组为:按照每两个相邻的关键帧为一组的规则,对所述各关键帧进行划分获得的。

40、本技术实施例提供的一种电子设备,包括处理器和存储器,其中,所述存储器存储有计算机程序,当所述计算机程序被所述处理器执行时,使得所述处理器执行上述任意一种视频转码方法的步骤。

41、本技术实施例提供一种计算机可读存储介质,其包括计算机程序,当所述计算机程序在电子设备上运行时,所述计算机程序用于使所述电子设备执行上述任意一种视频转码方法的步骤。

42、本技术实施例提供一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序存储在计算机可读存储介质中;当电子设备的处理器从计算机可读存储介质读取所述计算机程序时,所述处理器执行所述计算机程序,使得所述电子设备执行上述任意一种视频转码方法的步骤。

43、本技术有益效果如下:

44、本技术实施例提供了一种视频转码方法、装置、电子设备和存储介质,在需要对初始视频码流进行转码时,首先,对初始视频码流包含的各视频帧进行分析,获得各视频帧的复杂度系数以及相邻视频帧的相似度系数,能够通过复杂度系数和相似度系数评估视频画面内容的复杂程度,在此基础上,可以基于复杂度系数和相似度系数,自适应的对初始码率进行调整,在现有网络情况对平均传输码率的约束下,实现了基于视频画面内容对初始码率进行调整,使得码率与视频画面内容匹配,进而提高转码过程中带宽资源的利用率。

45、最后,采用调整获得的目标码率对各视频帧进行编码,能够在编码过程中兼顾视频画面内容的复杂程度,有效提升画面清晰度,并保留视频纹理细节,在提高带宽资源利用率的同时,保证获得的目标视频码流的视频质量,改善对象的视频观看体验。

46、本技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本技术而了解。本技术的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1