显示设备及视频播放方法与流程

文档序号:23177285发布日期:2020-12-04 14:07阅读:215来源:国知局
显示设备及视频播放方法与流程

本申请涉及显示设备技术领域,尤其涉及一种显示设备及视频播放方法。



背景技术:

显示设备可以为用户提供诸如音频、视频、图片等播放画面。如今,显示设备不仅可以为用户提供通过数据广播接收的直播电视节目内容,而且可以为用户提供诸如网络视频、网络游戏等各种应用和服务内容。

通过视频播放器可以播放2d格式的视频数据和3d格式的视频数据。已有的实现方式中,用户在使用视频播放器播放3d格式的视频数据之前,需要手动调整播放器播放视频的规则,例如,在视频播放器的设置界面中选中3d格式及数据的结构类型,从而,视频播放器将根据用户设置以适用于3d格式视频数据及其结构类型的播放规则,来播放视频,若用户在使用视频播放器播放3d格式的视频数据之前,不对播放器播放视频的规则进行调整,视频播放器出现播放错误。



技术实现要素:

本申请提供一种显示设备及视频播放方法。

第一方面,本申请提供一种显示设备,包括:

显示器,用于显示用户界面,所述用户界面包括视频播放窗口;

控制器,被配置为:

接收视频数据,从接收到的视频数据中抽取图像帧;

根据抽取出的图像帧判断所述视频数据是否为3d视频数据及在所述视频数据是所述3d视频数据时所述视频数据的结构类型;

在所述视频数据是第一结构类型的3d视频数据时,以第一播放规则在所述视频播放窗口中播放所述视频数据;

在所述视频数据是第二结构类型的3d视频数据时,以第二播放规则在所述视频播放窗口中播放所述视频数据。

第二方面,本申请还提供视频播放方法,所述方法包括:

接收视频数据,从接收到的视频数据中抽取图像帧;

根据抽取出的图像帧判断所述视频数据是否为3d视频数据及在所述视频数据是所述3d视频数据时所述视频数据的结构类型;

在所述视频数据是第一结构类型的3d视频数据时,以第一播放规则播放所述视频数据;

在所述视频数据是第二结构类型的3d视频数据时,以第二播放规则播放所述视频数据。

由以上技术方案可知,本申请提供一种显示设备及视频播放方法,显示设备控制器在播放视频数据前,从接收到的视频数据中抽取图像帧;根据抽取出的图像帧判断视频数据是否为3d视频数据及在视频数据是3d视频数据时该视频数据的结构类型;在视频数据是第一结构类型的3d视频数据时,以第一播放规则播放该视频数据;在视频数据是第二结构类型的3d视频数据时,以第二播放规则播放该视频数据。本申请提供的显示设备和视频播放方法可以自动识别接收到的视频数据是否为3d格式的视频数据,并能够识别出3d格式的视频数据的结构类型,如是以上下格式封装的视频数据,还是以左右格式封装的视频数据,从而可以依据识别出的视频格式及其结构类型,自动调整播放规则,无需用户操作,进而提高用户体验。

附图说明

为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。

图1中示例性示出了根据一些实施例的显示设备与控制装置之间操作场景的示意图;

图2中示例性示出了根据一些实施例的显示设备200的硬件配置框图;

图3中示例性示出了根据一些实施例的控制设备100的硬件配置框图;

图4中示例性示出了根据一些实施例的显示设备200中软件配置示意图;

图5中示例性示出了根据一些实施例的显示设备200中应用程序的图标控件界面显示示意图;

图6为本申请根据示例性实施例示出的一种视频播放方法流程图;

图7为本申请根据示例性实施例示出的一种可能的用户界面;

图8为本申请根据示例性实施例示出的一种视频播放方法流程图;

图9为本申请根据示例性实施例示出的一种图像帧示意图;

图10为本申请根据示例性实施例示出的一种第一图像和第二图像的示意图;

图11为本申请根据示例性实施例示出的缩小后的第一图像和第二图像的示意图;

图12为本申请根据示例性实施例示出的一种第一灰度图像和第二灰度图像的示意图;

图13为本申请根据示例性实施例示出的一种指纹数据的示意图;

图14为本申请根据示例性实施例示出的一种视频播放方法流程图;

图15为本申请根据示例性实施例示出的一种第三图像和第四图像的示意图;

图16为本申请根据示例性实施例示出的一种第一图像、第二图像、第三图像和第四图像的示意图。

具体实施方式

下面将详细地对实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。仅是与权利要求书中所详述的、本申请的一些方面相一致的系统和方法的示例。

基于本申请描述的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请所附权利要求保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整实施方式。

需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明(unlessotherwiseindicated)。应该理解这样使用的用语在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。

此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

本申请中使用的术语“模块”,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。

本申请中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(rf)信号和/或蓝牙与电子设备连接,也可以包括wifi、无线usb、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。

本申请中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。

图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1中示出,用户可通过移动终端300和控制装置100操作显示设备200。

在一些实施例中,控制装置100可以是遥控器,遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键,语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。

在一些实施例中,也可以使用移动终端、平板电脑、计算机、笔记本电脑、和其他智能设备以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上,在直观的用户界面(ui)中为用户提供各种控制。

在一些实施例中,移动终端300可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以实现用移动终端300与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端300上,通过控制移动终端300上用户界面,实现控制显示设备200的功能。也可以将移动终端300上显示音视频内容传输到显示设备200上,实现同步显示功能。

如图1中还示出,显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(lan)、无线局域网(wlan)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(epg)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。

显示设备200,可以液晶显示器、oled显示器、投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上一些改变。

显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能,包括但不限于,网络电视、智能电视、互联网协议电视(iptv)等。

图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中,显示设备200中包括控制器250、调谐解调器210、通信器220、检测器230、输入/输出接口255、显示器275,音频输出接口285、存储器260、供电电源290、用户接口265、外部装置接口240中的至少一种。

在一些实施例中,显示器275,用于接收源自第一处理器输出的图像信号,进行显示视频内容和图像以及菜单操控界面的组件。

在一些实施例中,显示器275,包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件。

在一些实施例中,显示视频内容,可以来自广播电视内容,也可以是说,可通过有线或无线通信协议接收的各种广播信号。或者,可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。

在一些实施例中,显示器275用于呈现显示设备200中产生且用于控制显示设备200的用户操控ui界面。

在一些实施例中,根据显示器275类型不同,还包括用于驱动显示的驱动组件。

在一些实施例中,显示器275为一种投影显示器,还可以包括一种投影装置和投影屏幕。

在一些实施例中,通信器220是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器可以包括wifi芯片,蓝牙通信协议芯片,有线以太网通信协议芯片等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。

在一些实施例中,显示设备200可以通过通信器220与外部控制设备100或内容提供设备之间建立控制信号和数据信号发送和接收。

在一些实施例中,用户接口265,可用于接收控制装置100(如:红外遥控器等)红外控制信号。

在一些实施例中,检测器230是显示设备200用于采集外部环境或与外部交互的信号。

在一些实施例中,检测器230包括光接收器,用于采集环境光线强度的传感器,可以通过采集环境光可以自适应性显示参数变化等。

在一些实施例中,检测器230还可以包括图像采集器,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。

在一些实施例中,检测器230还可以包括温度传感器等,如通过感测环境温度。

在一些实施例中,显示设备200可自适应调整图像的显示色温。如当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调,或当温度偏低的环境时,可以调整显示设备200显示图像偏暖色调。

在一些实施例中,检测器230还可声音采集器等,如麦克风,可以用于接收用户的声音。示例性的,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,使得显示设备200可以自适应适应环境噪声。

在一些实施例中,如图2所示,输入/输出接口255被配置为,可进行控制器250与外部其他设备或其他控制器250之间的数据传输。如接收外部设备的视频信号数据和音频信号数据、或命令指令数据等。

在一些实施例中,外部装置接口240可以包括,但不限于如下:可以高清多媒体接口hdmi接口、模拟或数据高清分量输入接口、复合视频输入接口、usb输入接口、rgb端口等任一个或多个接口。也可以是上述多个接口形成复合性的输入/输出接口。

在一些实施例中,如图2所示,调谐解调器210被配置为,通过有线或无线接收方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,从多多个无线或有线广播电视信号中解调出音视频信号,该音视频信号可以包括用户所选择电视频道频率中所携带的电视音视频信号,以及epg数据信号。

在一些实施例中,调谐解调器210解调的频点受到控制器250的控制,控制器250可根据用户选择发出控制信号,以使的调制解调器响应用户选择的电视信号频率以及调制解调该频率所携带的电视信号。

在一些实施例中,广播电视信号可根据电视信号广播制式不同区分为地面广播信号、有线广播信号、卫星广播信号或互联网广播信号等。或者根据调制类型不同可以区分为数字调制信号,模拟调制信号等。或者根据信号种类不同区分为数字信号、模拟信号等。

在一些实施例中,控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。这样,机顶盒将接收到的广播电视信号调制解调后的电视音视频信号输出给主体设备,主体设备经过第一输入/输出接口接收音视频信号。

在一些实施例中,控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器275上显示ui对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与所述图标相对应程序的操作。用于选择ui对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。

如图2所示,控制器250包括随机存取存储器251(randomaccessmemory,ram)、只读存储器252(read-onlymemory,rom)、视频处理器270、音频处理器280、其他处理器253(例如:图形处理器(graphicsprocessingunit,gpu)、中央处理器254(centralprocessingunit,cpu)、通信接口(communicationinterface),以及通信总线256(bus)中的至少一种。其中,通信总线连接各个部件。

在一些实施例中,ram251用于存储操作系统或其他正在运行中的程序的临时数据。

在一些实施例中,rom252用于存储各种系统启动的指令。

在一些实施例中,rom252用于存储一个基本输入输出系统,称为基本输入输出系统(basicinputoutputsystem,bios)。用于完成对系统的加电自检、系统中各功能模块的初始化、系统的基本输入/输出的驱动程序及引导操作系统。

在一些实施例中,在收到开机信号时,显示设备200电源开始启动,cpu运行rom252中系统启动指令,将存储在存储器的操作系统的临时数据拷贝至ram251中,以便于启动或运行操作系统。当操作系统启动完成后,cpu再将存储器中各种应用程序的临时数据拷贝至ram251中,然后,以便于启动或运行各种应用程序。

在一些实施例中,处理器254,用于执行存储在存储器中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。

在一些示例性实施例中,处理器254,可以包括多个处理器。多个处理器可包括一个主处理器以及一个或多个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。一个或多个子处理器,用于在待机模式等状态下一种操作。

在一些实施例中,图形处理器253,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,对基于运算器得到的各种对象,进行渲染,上述渲染后的对象用于显示在显示器上。

在一些实施例中,视频处理器270被配置为将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理,可得到直接可显示设备200上显示或播放的信号。

在一些实施例中,视频处理器270,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。

其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入mpeg-2,则解复用模块进行解复用成视频信号和音频信号等。

视频解码模块,则用于对解复用后的视频信号进行处理,包括解码和缩放处理等。

图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的gui信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。

帧率转换模块,用于对转换输入视频帧率,如将60hz帧率转换为120hz帧率或240hz帧率,通常的格式采用如插帧方式实现。

显示格式化模块,则用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出rgb数据信号。

在一些实施例中,图形处理器253可以和视频处理器可以集成设置,也可以分开设置,集成设置的时候可以执行输出给显示器的图形信号的处理,分离设置的时候可以分别执行不同的功能,例如gpu+frc(framerateconversion))架构。

在一些实施例中,音频处理器280,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。

在一些实施例中,视频处理器270可以包括一颗或多颗芯片组成。音频处理器,也可以包括一颗或多颗芯片组成。

在一些实施例中,视频处理器270和音频处理器280,可以单独的芯片,也可以于控制器一起集成在一颗或多颗芯片中。

在一些实施例中,音频输出,在控制器250的控制下接收音频处理器280输出的声音信号,如:扬声器286,以及除了显示设备200自身携带的扬声器之外,可以输出至外接设备的发生装置的外接音响输出端子,如:外接音响接口或耳机接口等,还可以包括通信接口中的近距离通信模块,例如:用于进行蓝牙扬声器声音输出的蓝牙模块。

供电电源290,在控制器250控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源290可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部电源,在显示设备200中提供外接电源的电源接口。

用户接口265,用于接收用户的输入信号,然后,将接收用户输入信号发送给控制器250。用户输入信号可以是通过红外接收器接收的遥控器信号,可以通过网络通信模块接收各种用户控制信号。

在一些实施例中,用户通过控制装置100或移动终端300输入用户命令,用户输入接口则根据用户的输入,显示设备200则通过控制器250响应用户的输入。

在一些实施例中,用户可在显示器275上显示的图形用户界面(gui)输入用户命令,则用户输入接口通过图形用户界面(gui)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。

在一些实施例中,“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphicuserinterface,gui),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、widget等可视的界面元素。

存储器260,包括存储用于驱动显示设备200的各种软件模块。如:第一存储器中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等中的至少一种。

基础模块用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。

例如,语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块用于控制显示器进行显示图像内容的模块,可以用于播放多媒体图像内容和ui界面等信息。通信模块,用于与外部设备之间进行控制和数据通信的模块。浏览器模块,用于执行浏览服务器之间数据通信的模块。服务模块,用于提供各种服务以及各类应用程序在内的模块。同时,存储器260还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。

图3示例性示出了根据示例性实施例中控制设备100的配置框图。如图3所示,控制设备100包括控制器110、通信接口130、用户输入/输出接口、存储器、供电电源。

控制设备100被配置为控制显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。如:用户通过操作控制设备100上频道加减键,显示设备200响应频道加减的操作。

在一些实施例中,控制设备100可是一种智能设备。如:控制设备100可根据用户需求安装控制显示设备200的各种应用。

在一些实施例中,如图1所示,移动终端300或其他智能电子设备,可在安装操控显示设备200的应用之后,可以起到控制设备100类似功能。如:用户可以通过安装应用,在移动终端300或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制设备100实体按键的功能。

控制器110包括处理器112和ram113和rom114、通信接口130以及通信总线。控制器用于控制控制设备100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。

通信接口130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信接口130可包括wifi芯片131、蓝牙模块132、nfc模块133等其他近场通信模块中至少之一种。

用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144等其他输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。

输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。

在一些实施例中,控制设备100包括通信接口130和输入输出接口140中至少一者。控制设备100中配置通信接口130,如:wifi、蓝牙、nfc等模块,可将用户输入指令通过wifi协议、或蓝牙协议、或nfc协议编码,发送至显示设备200。

存储器190,用于在控制器的控制下存储驱动和控制控制设备200的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。

供电电源180,用于在控制器的控制下为控制设备100各元件提供运行电力支持。可以电池及相关控制电路。

在一些实施例中,系统可以包括内核(kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构,它们让用户可以管理文件、运行程序并使用系统。上电后,内核启动,激活内核空间,抽象硬件、初始化硬件参数等,运行并维护虚拟内存、调度器、信号及进程间通信(ipc)。内核启动后,再加载shell和用户应用程序。应用程序在启动后被编译成机器码,形成一个进程。

参见图4,在一些实施例中,将系统分为四层,从上至下分别为应用程序(applications)层(简称“应用层”),应用程序框架(applicationframework)层(简称“框架层”),安卓运行时(androidruntime)和系统库层(简称“系统运行库层”),以及内核层。

在一些实施例中,应用程序层中运行有至少一个应用程序,这些应用程序可以是操作系统自带的窗口(window)程序、系统设置程序、时钟程序、相机应用等;也可以是第三方开发者所开发的应用程序,比如嗨见程序、k歌程序、魔镜程序等。在具体实施时,应用程序层中的应用程序包不限于以上举例,实际还可以包括其它应用程序包,本申请实施例对此不做限制。

框架层为应用程序层的应用程序提供应用编程接口(applicationprogramminginterface,api)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心,这个中心决定让应用层中的应用程序做出动作。应用程序通过api接口,可在执行中访问系统中的资源和取得系统的服务。

如图4所示,本申请实施例中应用程序框架层包括管理器(managers),内容提供者(contentprovider)等,其中管理器包括以下模块中的至少一个:活动管理器(activitymanager)用与和系统中正在运行的所有活动进行交互;位置管理器(locationmanager)用于给系统服务或应用提供了系统位置服务的访问;文件包管理器(packagemanager)用于检索当前安装在设备上的应用程序包相关的各种信息;通知管理器(notificationmanager)用于控制通知消息的显示和清除;窗口管理器(windowmanager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中,活动管理器用于:管理各个应用程序的生命周期以及通常的导航回退功能,比如控制应用程序的退出(包括将显示窗口中当前显示的用户界面切换到系统桌面)、打开、后退(包括将显示窗口中当前显示的用户界面切换到当前显示的用户界面的上一级用户界面)等。

在一些实施例中,窗口管理器用于管理所有的窗口程序,比如获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕,控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中,系统运行库层为上层即框架层提供支撑,当框架层被使用时,安卓操作系统会运行系统运行库层中包含的c/c++库以实现框架层要实现的功能。

在一些实施例中,内核层是硬件和软件之间的层。如图4所示,内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、wifi驱动、usb驱动、hdmi驱动、传感器驱动(如指纹传感器,温度传感器,触摸传感器、压力传感器等)等。

在一些实施例中,内核层还包括用于进行电源管理的电源驱动模块。

在一些实施例中,图4中的软件架构对应的软件程序和/或模块存储在图2或图3所示的第一存储器或第二存储器中。

在一些实施例中,以魔镜应用(拍照应用)为例,当遥控接收装置接收到遥控器输入操作,相应的硬件中断被发给内核层。内核层将输入操作加工成原始输入事件(包括输入操作的值,输入操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,根据焦点当前的位置识别该输入事件所对应的控件以及以该输入操作是确认操作,该确认操作所对应的控件为魔镜应用图标的控件,魔镜应用调用应用框架层的接口,启动魔镜应用,进而通过调用内核层启动摄像头驱动,实现通过摄像头捕获静态图像或视频。

在一些实施例中,对于具备触控功能的显示设备,以分屏操作为例,显示设备接收用户作用于显示屏上的输入操作(如分屏操作),内核层可以根据输入操作产生相应的输入事件,并向应用程序框架层上报该事件。由应用程序框架层的活动管理器设置与该输入操作对应的窗口模式(如多窗口模式)以及窗口位置和大小等。应用程序框架层的窗口管理根据活动管理器的设置绘制窗口,然后将绘制的窗口数据发送给内核层的显示驱动,由显示驱动在显示屏的不同显示区域显示与之对应的应用界面。

在一些实施例中,如图5中所示,应用程序层包含至少一个应用程序可以在显示器中显示对应的图标控件,如:直播电视应用程序图标控件、视频点播应用程序图标控件、媒体中心应用程序图标控件、应用程序中心图标控件、游戏应用图标控件等。

在一些实施例中,直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。

在一些实施例中,视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。

在一些实施例中,媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。

在一些实施例中,应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在智能电视中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。

基于如图1-5示出的显示设备200,通过视频播放器可以播放2d格式的视频数据和3d格式的视频数据。已有的实现方式中,用户在使用视频播放器播放3d格式的视频数据之前,需要手动调整播放器播放视频的规则,例如,在视频播放器的设置界面中选中3d格式及数据的结构类型,从而,视频播放器将根据用户设置以适用于3d格式视频数据及其结构类型的播放规则,来播放视频,若用户在使用视频播放器播放3d格式的视频数据之前,不对播放器播放视频的规则进行调整,视频播放器出现播放错误。

本申请实施例提供一种视频播放方法,该方法可以自动识别接收到的视频数据是否为3d格式的视频数据,并能够识别出3d格式的视频数据的结构类型,如是以上下格式封装的视频数据,还是以左右格式封装的视频数据,从而可以依据识别出的视频格式及其结构类型,自动调整播放规则,无需用户操作,进而提高用户体验。

本申请实施例提供的视频播放方法,包括但不限于应用在如图1-5所示的显示设备上,当其应用于显示设备上时,其执行主体可以为控制器250。因此,本申请还提供一种显示设备,该显示设备在如图1-5示出的显示设备的基础上,其控制器250被配置为执行本申请所提供的视频播放方法的部分或者全部步骤。如图6所示,该方法可以包括:

步骤601,接收视频数据,从接收到的视频数据中抽取图像帧。

视频数据可以是在服务器响应于显示设备的数据请求而返回给显示设备的。其中,视频播放软件响应于用户打开应用界面上某个视频资源的链接而向服务器发送数据请求。

图7为本申请示例性示出的用户界面,该用户界面为视频播放软件的应用主页的一种实施情形。如图7所示,应用主页上显示有多个视频资源对应的控件,如电影a1-a5、电视剧b1-b5、综艺节目c1-c5等。当用户对任意一个视频资源控件操作时,控制器将响应于用户操作,向服务器请求该视频资源控件对应的视频数据。接收到的视频数据,可以是2d视频格式的视频数据,即2d视频数据,也可以是3d视频格式的视频数据,即3d视频数据。

应当理解,常见的3d视频数据的结构类型,包括上下结构和左右结构。在本申请实施例中,上下结构又被称为第一结构类型,左右结构又被称为第二结构类型。

在步骤601中,从接收到的视频数据中抽取图像帧,以将图像帧用于分析视频数据是否是3d视频格式,并在视频数据是3d视频格式时分析出该3d视频数据的结构类型。

应当理解,根据视频的总时长或者时间轴上的指定标签(如指示正片起点的标签)将将视频数据分段,例如,分成片头数据、正片数据和片尾数据。通常显示设备首先接收到的视频数据是片头数据,接着接收到正片数据,最后接收到片尾数据。

基于此,为了尽量减少判断视频格式和视频结构类型的数据处理量,在一些可能的实现方式中,从接收到的片头数据中抽取图像帧,根据从片头数据中抽取的图像帧判断视频格式和结构类型,并依据判断结果确定对应的播放规则,以对应的播放规则完成整个视频数据的播放。其中,抽取图像帧的数量可以结合视频帧率、片头数据对应的时长和预定的采样率计算,本申请不予限定。可以理解的是,抽取图像帧的数量最多,判断结果越准确,但数据处理量也将变大。

实际实施场景中,用户在观看一个视频资源时,可以通过用户输入(如按键输入、语音输入等)将当前播放的视频资源切换到另一个视频资源。例如,用户可以通过视频播放画面上层显示的选集控件中选择另一集进行播放。当用户切换到新的视频资源时,控制器将接收新的视频数据,并需要从新的视频数据中抽取图像帧,以用于判断新的视频数据的视频格式和结构类型。也就是说,在切换视频资源之前,控制器从接收到的第一视频数据的片头数据中抽取至少一个图像帧;在切换视频资源之后,控制器从接收到的第二视频数据的片头数据中抽取至少一个图像帧;其中,第一视频数据和第二视频数据分别为切换视频资源前、后所接收到的视频数据。

考虑到一些视频资源的时长较短或视频图像内容的特殊性,如视频中大部分图像中的内容具有高度的对称性,在本申请的另一些实现方式中,通过对视频数据的总时长进行n等分得到的n个时间段,每个时间段则为一个预设时间段,依次从每个预设时间段对应的视频数据中抽取至少一个图像帧,根据抽取出的全部图像帧判断视频格式和结构类型。

步骤602,根据抽取出的图像帧判断所述视频数据是否为3d视频数据及在所述视频数据是所述3d视频数据时所述视频数据的结构类型。

在一些实施例中,首先根据抽取出的图像帧判断视频数据是否为第一结构类型的3d视频数据,若不是第一结构类型的3d视频数据,再根据抽取出的图像帧判断视频数据是否为第二结构类型的3d视频数据,若不是第二结构类型的3d视频数据,则视频数据即为2d视频数据。

在一些实施例中,按照图8所示步骤判断视频数据是否为第一结构类型的3d视频数据:

步骤801,按照所述图像帧在竖直方向上的对称轴线,将所述图像帧切分成第一图像和第二图像。

假设在步骤601中,从接收的视频数据中抽取出m个图像帧,对于每一个图像帧进行步骤801-步骤803的处理。

图9为本申请示例性示出的一种可能的图像帧,图中虚线为该图像帧在竖直方向上的对称轴线,沿该对称轴线对该图像帧进行切分,将得到如图10所示的第一图像和第二图像。

步骤802,分别获取所述第一图像和所述第二图像的指纹数据。

具体实现时,首先将第一图像和第二图像缩小到指定尺寸,以去除图像的细节特征,保留图像的结构和明暗特征,摒弃不同尺寸或比例造成的差异。示例性的,可以将第一图像和第二图像均缩小到8×8的尺寸,这样,缩小后的第一图像和第二图像如图11所示,每个图像分别包括64个像素点。然后对缩小后的图像进行灰度处理,得到第一灰度图像和第二灰度图像,再分别计算第一灰度图像和第二灰度图像的灰度平均值,即根据所有像素点的像素值计算得到的平均值。示例性的,可以将前述8×8的第一图像和第二图像处理为64级灰度,即所有像素点最多具有64种颜色,得到的第一灰度图像和第二灰度图像及其每个像素点的灰度值可如图12所示,在该示例中,第一灰度图像的灰度平均值为43,第二灰度图像的灰度平均值为44。最后,将第一灰度图像中每个像素点的灰度值与第一灰度图像的灰度平均值进行比较,得到第一灰度图像的指纹数据,将第二灰度图像中每个像素点的灰度值与第二灰度图像的灰度平均值进行比较,得到第二灰度图像的指纹数据;比较过程中,对于每个像素点,若其灰度值小于与其比较的灰度平均值,则记录一位指纹数据0,若其的灰度值大于或者等于与其比较的灰度平均值,则记录一位指纹数据1,所有像素点对应的记录结果组成图像的指纹数据。示例性的,将图12中示出的第一灰度图像与第二灰度图像上每个像素点的灰度值与相应的灰度平均值进行比较,得到的记录结果及指纹数据如图13所示,其中,尺寸为8×8的灰度图像的指纹数据为一64位数据。

步骤803,根据所述第一图像和所述第二图像的指纹数据判定所述第一图像和所述第二图像的相似度是否满足预设阈值,并确定相似度满足预设阈值的第一图像和第二图像的组数。

具体实现时,将第一图像的指纹数据与第二图像的指纹数据进行对应比较,确定两个图像的指纹数据的匹配位数,例如,若第一图像的指纹数据的第2位是0,第二图像的指纹数据的第2位是0,则两个图像的指纹数据的第2位匹配,若第一图像的指纹数据的第2位是0,第二图像的指纹数据的第2位是1,则两个图像的指纹数据的第2位匹配。判断两个图像的指纹数据的匹配位数是否满足预设阈值,若满足预设阈值,则说明第一图像和第二图像的相似度满足预设阈值,否则,说明第一图像和第二图像的相似度不满足预设阈值。

对抽取出的每一个图像帧进行步骤801-803的处理后,可以得到相似度满足预设阈值的第一图像和第二图像的组数,即,左右对称的图像帧的数量。

步骤804,若满足预设阈值的第一图像和第二图像的组数大于预设组数,则确定所述视频数据是第一结构类型的3d视频数据。

若抽取出的图像帧中,左右对称的图像帧的数量大于预设值,则说明该视频数据是第一结构类型的3d视频数据,即左右结构的3d视频数据。

步骤805,若满足预设阈值的第一图像和第二图像的组数不大于预设组数,则确定所述视频数据不是3d视频数据或者确定所述视频数据是第二结构类型的3d视频数据,其中,所述预设组数根据抽取出的图像帧的数量确定。

若抽取出的图像帧中,左右对称的图像帧的数量不大于预设值,则说明该视频数据不是第一结构类型的3d视频数据,其可能是第二结构类型的3d视频数据,也可能是2d视频数据。

当判定接收到的视频数据不是第一结构类型的3d视频数据时,可以按照图14所示步骤判断视频数据是否为第二结构类型的3d视频数据:

步骤141,按照所述图像帧在水平方向上的对称轴线,将所述图像帧切分成第三图像和第四图像。

假设在步骤601中,从接收的视频数据中抽取出m个图像帧,对于每一个图像帧进行步骤141-步骤143的处理。

示例性的,将图9所示图像帧按照其在水平方向上的对称轴线进行切分,将得到如图15所示的第三图像和第四图像。

步骤142,分别获取所述第三图像和所述第四图像的指纹数据。

本申请实施例中,获取第三图像和第四图像的指纹数据的方法,与前述实施例中获取第一图像和第二图像的指纹数据的方法相同,此处不予赘述。

步骤143,根据所述第三图像和所述第四图像的指纹数据判定所述第三图像和所述第四图像的相似度是否满足预设阈值,并确定相似度满足预设阈值的第三图像和第四图像的组数。

本申请实施例中,根据指纹数据判定第三图像和第四图像的相似度是否满足预设阈值的方法,与前述实施例中根据指纹数据判定第一图像和第二图像的相似度是否满足预设阈值的方法相同,此处不予赘述。

需要说明的是,若第三图像和第四图像的相似度满足预设阈值,则该组第三图像和第四图像对应的图像帧是上下对称的。

步骤144,若满足预设阈值的第三图像和第四图像的组数大于预设组数,则确定视频数据是第二结构类型的3d视频数据。

若抽取出的图像帧中,上下对称的图像帧的数量大于预设值,则说明该视频数据是第二结构类型的3d视频数据,即上下结构的3d视频数据。

步骤145,若满足预设阈值的第三图像和第四图像的组数不大于预设组数,则确定所述视频数据不是3d视频数据或者确定所述视频数据是第一结构类型的3d视频数据,其中,所述预设组数根据抽取出的图像帧的数量确定。

若抽取出的图像帧中,左右对称的图像帧的数量不大于预设值,则说明该视频数据不是第二结构类型的3d视频数据,其可能是第一结构类型的3d视频数据,也可能是2d视频数据。若判定视频数据既不是第一结构类型的3d视频数据,也不是第二结构类型的3d视频数据,则可判定该视频数据是2d视频数据。

基于与图7及图15所示实施例类似的处理思路,在本申请的另一些实施例中,按照下述步骤161-步骤166步骤对抽取出的图像帧进行分析,以判断视频数据的格式和结构类型:

步骤161,按照图像帧在竖直方向上的对称轴线和在水平方向上的对称轴线,将图像帧切分成第一图像、第二图像、第三图像和第四图像。

示例性的,将图9所示图像帧按照其在水平方向上的对称轴线和其在竖直方向上的对称轴线进行切分,将得到如图16所示的第一图像、第二图像、第三图像和第四图像。

步骤162,分别获取第一图像、第二图像、第三图像和第四图像的指纹数据。

具体实现中,可以仅获取第一图像、第二图像、第三图像和第四图像中任意三个图像的指纹数据,如获取第一图像、第二图像和第三图像的指纹数据。应当理解,获取图像的指纹数据的方法,与前述实施例所采用的方法相同,此处不予赘述。

步骤163,根据第一图像、第二图像、第三图像和第四图像的指纹数据,判定第一图像和第三图像的相似度、第二图像和第四图像的相似度、第一图像和第二图像的相似度和/或第三图像和第四图像的相似度是否满足预设阈值,并确定相似度满足预设阈值的第一图像和第三图像、第二图像和第四图像、第一图像和第二图像和/或第三图像和第四图像的组数。

示例性的,在步骤163中,可以根据第一图像、第二图像和第三图像的指纹数据,判断第一图像和第三图像的相似度是否满足预设阈值,同时判断第一图像和第二图像的相似度是否满足预设阈值。应理解的是,如果第一图像和第三图像的相似度满足预设阈值,说明该组第一图像和第三图像对应的图像帧是上下对称的,同理,如果第一图像和第二图像的相似度满足预设阈值,说明该组第一图像和第二图像对应的图像帧是左右对称的。

另一示例性的,在步骤163中,可以根据第二图像、第三图像和第四图像的指纹数据,判断第二图像和第四图像的相似度是否满足预设阈值,同时判断第三图像和第四图像的相似度是否满足预设阈值。应理解的是,如果第二图像和第四图像的相似度满足预设阈值,说明该组第二图像和第四图像对应的图像帧是上下对称的,同理,如果第三图像和第四图像的相似度满足预设阈值,说明该组第三图像和第四图像对应的图像帧是左右对称的。

步骤164,若满足预设阈值的第一图像和第二图像的组数或者第三图像和第四图像的组数大于预设组数,则确定所述视频数据是第一结构类型的3d视频数据。

步骤165,若满足预设阈值的第一图像和第三图像的组数或者第二图像和第四图像的组数大于预设组数,则确定所述视频数据是第二结构类型的3d视频数据。

步骤166,若满足预设阈值的所述第一图像和所述第三图像、所述第二图像和所述第四图像、所述第一图像和所述第二图像或者所述第三图像和第四图像的组数均不大于预设组数,则确定所述视频数据不是3d视频数据。

步骤603,在所述视频数据是第一结构类型的3d视频数据时,以第一播放规则在所述视频播放窗口中播放所述视频数据。

步骤604,在所述视频数据是第二结构类型的3d视频数据时,以第二播放规则在所述视频播放窗口中播放所述视频数据。

应当理解,第一播放规则是适用于第一结构类型的3d视频数据的播放规则,第二播放规则是适用于第二结构类型的3d视频数据的播放规则。

综上所述,本申请实施例提供一种显示设备和一种视频播放方法,当接收到视频数据时,从接收到的视频数据中抽取图像帧;根据抽取出的图像帧判断视频数据是否为3d视频数据及在视频数据是3d视频数据时视频数据的结构类型;在视频数据是第一结构类型的3d视频数据时,以第一播放规则播放视频数据;在视频数据是第二结构类型的3d视频数据时,以第二播放规则播放视频数据。该方法可以自动识别接收到的视频数据是否为3d格式的视频数据,并能够识别出3d格式的视频数据的结构类型,如是以上下格式封装的视频数据,还是以左右格式封装的视频数据,从而可以依据识别出的视频格式及其结构类型,自动调整播放规则,无需用户操作,进而提高用户体验。

具体实现中,本发明还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时可包括本发明提供的视频播放方法的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文:read-onlymemory,简称:rom)或随机存储记忆体(英文:randomaccessmemory,简称:ram)等。

本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如rom/ram、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。

本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于方法实施例而言,由于其基本相似于显示设备实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。

以上所述的本发明实施方式并不构成对本发明保护范围的限定。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1