显示装置及数据输出方法与流程

文档序号:19730360发布日期:2020-01-18 03:52阅读:169来源:国知局
显示装置及数据输出方法与流程

本申请是2015年6月15日提交的,中国专利申请号为201580019519.7(国际申请号pct/jp2015/002973),发明名称为“数据输出装置、数据输出方法以及数据生成方法”的专利申请的分案申请。

本申请涉及数据输出装置、数据输出方法以及数据生成方法。



背景技术:

以往,公开了用于改善能够显示的亮度级的图像信号处理装置(例如参照专利文献1)。

在先技术文献

专利文献

专利文献1:日本特开2008-167418号公报



技术实现要素:

本申请的一个方式涉及一种显示装置,具备数据输出装置,所述数据输出装置具备:解码部,通过对影像流进行解码,生成第一亮度范围的第一影像信号;取得部,取得与所述第一影像信号的亮度范围相关的元数据;解释部,通过对所述元数据进行解释,取得表示所述第一影像信号的所述亮度范围的特性数据、以及用于对所述第一影像信号的所述亮度范围进行转换的转换辅助数据;输出部,输出包括所述特性数据的控制信息;以及转换部,基于所述转换辅助数据,对所述第一影像信号的所述亮度范围进行转换,从而生成比所述第一亮度范围窄的第二亮度范围的第二影像信号,在所述显示装置对应于所述第一影像信号的所述亮度范围的影像输出的情况下,所述输出部将所述第一影像信号向所述显示装置输出,在所述显示装置不对应于所述第一影像信号的所述亮度范围的影像输出的情况下,所述输出部将所述第二影像信号向所述显示装置输出。

本申请的一个方式涉及一种数据输出方法,由显示装置所具备的数据输出装置执行,所述数据输出方法包括如下步骤:通过对影像流进行解码,生成第一亮度范围的第一影像信号;取得与所述第一影像信号的亮度范围相关的元数据;通过对所述元数据进行解释,取得表示所述第一影像信号的所述亮度范围的特性数据、以及用于对所述第一影像信号的所述亮度范围进行转换的转换辅助数据;输出包括所述特性数据的控制信息;以及基于所述转换辅助数据,对所述第一影像信号的所述亮度范围进行转换,从而生成比所述第一亮度范围窄的第二亮度范围的第二影像信号,在所述显示装置对应于所述第一影像信号的所述亮度范围的影像输出的情况下,在所述输出的步骤中将所述第一影像信号向所述显示装置输出,在所述显示装置不对应于所述第一影像信号的所述亮度范围的影像输出的情况下,在所述输出的步骤中将所述第二影像信号向所述显示装置输出。

本申请的一方式所涉及的数据输出装置具备:解码部,对影像流进行解码从而生成第一亮度范围的第一影像信号;取得部,取得与所述第一影像信号的亮度范围相关的第一元数据;解释部,对所述第一元数据进行解释,从而取得表示所述第一影像信号的亮度范围的特性数据;控制信息生成部,将所述特性数据转换为按照规定的传输协议的控制信息;以及输出部,将所述控制信息以所述传输协议输出。

此外,本申请的一方式所涉及的数据生成方法是数据生成装置所进行的数据生成方法,包含:第一生成步骤,生成与影像信号的亮度范围相关的元数据;以及第二生成步骤,生成包含所述影像信号和所述元数据的影像流,所述元数据包含表示所述影像信号的亮度范围的特性数据。

另外,这些概括性的或具体的方式也可以通过系统、方法、集成电路、计算机程序或计算机可读取的cd-rom等记录介质来实现,也可以通过系统、方法、集成电路、计算机程序或记录介质的任意的组合来实现。

附图说明

图1是用于说明影像技术的进步的图。

图2是用于说明导入hdr时的母盘、分发方式、以及显示装置的关系的图。

图3是在内容中存放的亮度信号的码值的决定方法、以及在再现时从码值复原亮度值的过程的说明图。

图4是表示hdr元数据的例子的图。

图5是表示静态hdr元数据的存放例的图。

图6是表示动态hdr元数据的存放例的图。

图7是静态hdr元数据的传输方法的流程图。

图8是hdr元数据的处理方法的流程图。

图9是表示数据输出装置的结构的框图。

图10是表示存放hdr元数据的sei消息的数据结构例的图。

图11是表示存放hdr元数据的sei消息的数据结构例的图。

图12是表示用户引导的显示方法的例子的图。

图13是表示用户引导的显示方法的例子的图。

图14是表示用户引导的显示方法的例子的图。

图15是表示用户引导的显示方法的例子的图。

图16是用于说明双盘的再现动作的图。

图17是表示双盘的再现动作的流程图。

图18是表示bd的种类的图。

图19是更详细示出bd的种类的图。

图20是表示在bd中记录的数据容量的第一图。

图21是表示在bd中记录的数据容量的第二图。

图22是表示在bd以及双流盘的各盘中记录的视频流和图形流的组合的一例的图。

图23是表示在bd以及双流盘的各盘中记录的视频流和图形流的组合的其他的例的图。

图24是表示在bd以及双流盘的各盘中记录的视频流和图形流的组合的再其他的例的图。

图25a是表示在hdrtv内,转换hdr信号并进行hdr显示的显示处理的一例的图。

图25b是表示使用对应于hdr的再现装置和sdrtv进行hdr显示的显示处理的一例的图。

图25c是表示对经由标准接口相互连接的对应于hdr的再现装置和sdrtv进行hdr显示的显示处理的一例的图。

图26是用于说明从hdr向模拟hdr的转换处理的图。

图27a是表示与hdr以及sdr分别对应的eotf(电光传递函数:electro-opticaltransferfunction)的例子的图。

图27b是表示与hdr以及sdr分别对应的逆eotf的例子的图。

图28是表示实施方式的转换装置以及显示装置的结构的框图。

图29是表示由实施方式的转换装置以及显示装置所进行的转换方法以及显示方法的流程图。

图30a是用于说明第一亮度转换的图。

图30b是用于说明第一亮度转换的其他一例的图。

图31是用于说明第二亮度转换的图。

图32是用于说明第三亮度转换的图。

图33是表示显示设定的详细的处理的流程图。

具体实施方式

本申请的一方式所涉及的数据输出装置具备:解码部;对影像流进行解码从而生成第一亮度范围的第一影像信号;取得部,取得与所述第一影像信号的亮度范围相关的第一元数据;解释部,对所述第一元数据进行解释,从而取得表示所述第一影像信号的亮度范围的特性数据;控制信息生成部,将所述特性数据转换为按照规定的传输协议的控制信息;以及输出部,将所述控制信息以所述传输协议输出。

据此,该数据输出装置能够基于元数据中包含的特性数据,生成控制信息。

例如,也可以是所述解释部还通过对所述第一元数据进行解释,从而取得用于对所述第一影像信号的亮度范围进行转换的转换辅助数据,所述数据输出装置还具备转换部,该转换部基于所述转换辅助数据,对所述第一影像信号的亮度范围进行转换从而生成比所述第一亮度范围窄的第二亮度范围的第二影像信号,所述输出部还将所述第一影像信号以及所述第二影像信号中的至少一方以所述传输协议输出。

据此,该数据输出装置能够使用元数据中包含的转换辅助数据对第一影像信号的亮度范围进行变更。

例如,也可以是所述解码部还从所述影像流取得与所述第一影像信号的亮度范围相关的第二元数据,所述第一元数据或所述第二元数据包含静态元数据,该静态元数据针对影像信号的连续再现单位中包含的多个图像共通地使用,且包含所述特性数据,所述控制信息生成部将所述静态元数据中包含的所述特性数据转换为按照所述传输协议的所述控制信息,所述输出部在输出所述第一影像信号的情况下,输出基于所述静态元数据的所述控制信息。

例如,也可以是所述第一元数据或所述第二元数据还包含动态元数据,该动态元数据针对比影像信号的连续再现单位更小的单位共通地使用,且包含所述特性数据,所述控制信息生成部将所述静态元数据中包含的所述特性数据以及所述动态元数据中包含的所述特性数据转换为按照所述传输协议的所述控制信息,所述输出部在输出所述第一影像信号的情况下,输出基于所述静态元数据以及所述动态元数据的所述控制信息。

例如,也可以是所述解码部还从所述影像流取得与所述第一影像信号的亮度范围相关的第二元数据,所述解释部对所述第一元数据以及所述第二元数据中的至少一方进行解释从而取得所述特性数据以及所述转换辅助数据。

例如,也可以是所述第一元数据以及所述第二元数据是针对所述第一影像信号的连续再现单位中包含的多个图像共通地使用的静态元数据,在所述解释部取得所述第一元数据以及所述第二元数据双方的情况下,通过对所述第一元数据进行解释从而取得所述特性数据以及所述转换辅助数据。

例如,也可以是所述第一元数据以及所述第二元数据是针对所述第一影像信号的连续再现单位中包含的多个图像共通地使用的静态元数据,所述解释部在仅取得了所述第一元数据以及所述第二元数据之中的所述第一元数据的情况下,通过对所述第一元数据进行解释从而取得所述特性数据以及所述转换辅助数据,在取得了所述第二元数据的情况下,将所使用的元数据从所述第一元数据切换为所述第二元数据。

例如,也可以是所述输出部在与所述数据输出装置连接的显示装置对应于所述第一影像信号的亮度范围的影像输出的情况下,将所述第一影像信号以及所述控制信息向所述显示装置输出。

例如,也可以是所述输出部在所述传输协议的初始化处理中判定所述显示装置是否对应于所述第一影像信号的亮度范围的影像输出。

例如,也可以是所述输出部将所述控制信息,与所述第一元数据为有效的第二影像信号同步地输出。

例如,也可以是所述第一元数据包含表示该第一元数据的类别的类型信息,所述解释部使用所述类型信息,判定所述数据输出装置是否能够解释该第一元数据,在所述数据输出装置能够解释该第一元数据的情况下,通过对该第一元数据进行解释从而取得所述特性数据以及所述转换辅助数据。

例如,也可以是所述第一元数据被存放在hevc(高效视频编码:highefficiencyvideocoding)的sei(补充增强信息:supplementalenhancementinformation)消息中,所述sei消息包含表示在该sei消息中是否包含元数据的识别信息,所述输出部在取得了包含表示在该sei消息中包含元数据的所述识别信息的sei消息,且数据输出目的地的显示装置对应于所述控制信息的输入的情况下,将所述sei消息按照所述传输协议原样输出。

例如,也可以是所述输出部在所述显示装置不对应于所述第一影像信号的亮度范围的影像输出的情况下,将所述第二影像信号以及所述控制信息向所述显示装置输出,且使所述显示装置显示如下意思:从所述第一亮度范围转换为所述第二亮度范围而得到的所述第二影像信号被显示。

例如,也可以是所述输出部在所述显示装置不对应于所述第一影像信号的亮度范围的影像输出的情况下,使所述显示装置显示供用户选择是否显示从所述第一亮度范围转换为所述第二亮度范围而得到的所述第二影像信号的消息。

例如,也可以是所述输出部在所述显示装置不对应于所述第一影像信号的亮度范围的影像输出的情况下,使所述显示装置显示供用户选择用于将所述第一亮度范围转换为所述第二亮度范围的多个转换方式之中的任一个转换方式的消息。

此外,本申请的一方式所涉及的数据输出方法是数据输出装置所进行的数据输出方法,包含:解码步骤,对影像流进行解码从而生成第一亮度范围的第一影像信号;取得步骤,取得与所述第一影像信号的亮度范围相关的第一元数据;解释步骤,对所述第一元数据进行解释,从而取得表示所述第一影像信号的亮度范围的特性数据;控制信息生成步骤,将所述特性数据转换为按照规定的传输协议的控制信息;以及输出步骤,将所述控制信息以所述传输协议输出。

据此,该数据输出方法能够基于元数据中包含的特性数据生成控制信息。

此外,本申请的一方式所涉及的数据生成方法是数据生成装置所进行的数据生成方法,包含:第一生成步骤,生成与影像信号的亮度范围相关的元数据;以及第二生成步骤,生成包含所述影像信号和所述元数据的影像流,所述元数据包含表示所述影像信号的亮度范围的特性数据。

据此,该数据生成方法能够生成包含包括特性数据的元数据的影像流。由此,例如,在数据输出装置中,能够基于元数据中包含的特性数据生成控制信息。

例如,也可以是所述元数据包含基本部和扩展部,该基本部的解释必须被进行,该扩展部的解释任意被进行。

例如,也可以是所述元数据包含有效载荷、表示所述有效载荷的数据是基本部还是扩展部的信息、以及表示所述有效载荷的数据尺寸的信息。

例如,也可以是所述元数据被存放在hevc(高效视频编码:highefficiencyvideocoding)的sei(补充增强信息:supplementalenhancementinformation)消息中,所述sei消息包含表示在该sei消息中是否包含元数据的识别信息。

另外,这些概括性的或具体的方式也可以通过系统、方法、集成电路、计算机程序或计算机可读取的cd-rom等记录介质来实现,也可以通过系统、方法、集成电路、计算机程序或记录介质的任意的组合来实现。

此外,关于上述特征,主要在[8.数据输出装置]~[14.用户引导显示方法5]中进行说明。

此外,以下说明的实施方式都表示本申请的一具体例。以下的实施方式所示的数值、形状、材料、结构要素、结构要素的配置位置以及连接方式、步骤、步骤的顺序等是一例,意图不在于限定本申请。此外,关于以下的实施方式中的结构要素之中表示最上位概念的独立权利要求中没有记载的结构要素,作为任意的结构要素来说明。

(实施方式)

[1.背景]

作为与以往的图像信号相比亮度范围高的图像信号的hdr(高动态范围:highdynamicrange)信号经由存放了hdr信号的蓝光(blu-ray)(注册商标,下同)盘等封装介质、广播、或ott(基于互联网:overthetop)等分发介质分发。在此,ott意味着在互联网上提供的web站点、动态图像或声音等内容或服务、或将其提供的运营商。分发后的hdr信号通过蓝光设备等被解码。此外,解码后的hdr信号被传送至对应于hdr的显示装置(tv(电视)、投影仪、平板电脑或智能电话等),通过对应于hdr的显示装置再现hdr影像。

hdr技术还在初始阶段,设想在采用了最初导入的hdr技术后,开发新的hdr方式。在该情况下,通过将新制成的hdr方式的hdr信号(以及元数据)存放至hdr分发介质从而能够采用新hdr方式。在本申请中,实现如下的方法以及装置:对存放了新的hdr信号形式(元数据)的分发介质,不改变为了原来的分发介质设计的解码装置(例如蓝光设备),保证原来的技术下的hdr再现从而保持兼容性,在与新的方式对应的hdr解码装置(例如蓝光设备)中能够对应于新的hdr方式的处理。

首先,使用图1说明影像技术的变迁。图1是用于说明影像技术的进步的图。

此前,为了提高影像的画质,主要着眼于扩大显示像素数,从标准清晰度(standarddefinition)(sd)的720×480像素的影像,正在普及高清晰度(highdefinition)(hd)的1920×1080像素的所谓2k影像。

近年,致力于进一步提高影像的画质,开始导入超高清晰度(ultrahighdefinition)(uhd)的3840×1920像素、或4k的4096×1920像素的所谓4k影像。

并且,与通过导入4k提高影像的分辨率一起,研究了进行动态范围扩展、色域的扩大、或帧速率的追加、提高等从而提高影像的画质。

其中,关于动态范围,作为维持以往的影像中的暗部级别(灰度)而且对应于为了将现行的tv信号中不能表现的镜面反射光等明亮的光以更接近于现实的明亮度来表现而将最大亮度值扩大后的亮度范围的方式,关注hdr(高动态范围:highdynamicrange)。具体而言,此前的tv信号所对应的亮度范围的方式被称为sdr(标准动态范围:standarddynamicrange),最大亮度值为100nit,相对于此在hdr中设想将最大亮度值扩大到1000nit以上。hdr在smpte((美国)电影电视工程师协会:societyofmotionpicture&televisionengineers)、itu-r(国际电信联盟无线电通信组:internationaltelecommunicationsunionradiocommunicationssector)等中,正在进行标准化。

作为hdr的具体的应用之处,与hd、uhd同样,设想在广播、封装介质(蓝光盘等)、互联网分发等中使用。

另外,以下在对应于hdr的影像中,该影像的亮度由hdr的亮度范围的亮度值构成,将该影像的亮度值被量化从而得到的亮度信号称为hdr信号。在对应于sdr的影像中,该影像的亮度由sdr的亮度范围的亮度值构成,将该影像的亮度值被量化从而得到的亮度信号称为sdr信号。

[2.导入hdr时的母盘、分发方式、以及显示装置的关系]

图2是表示制作sdr和hdr的家庭娱乐用母盘的流程、分发介质以及显示装置的关系的图。

hdr的概念已被提出,hdr的概念水平下的有效性已被确认。此外,hdr的最初的实施方法已被提出。但是,并未使用该方法大量制作hdr内容并对最初的实施方法进行实证。因此,在今后真正开始hdr内容的制作的情况下,存在现状的hdr的制作方式、特别是元数据改变的可能性。

[3.eotf的使用方法]

图3是在内容中存放的亮度信号的码值的决定方法、以及在再现时从码值复原亮度值的过程的说明图。

本例中的表示亮度的亮度信号是对应于hdr的hdr信号。调整(grading,调色)后的图像通过hdr的逆eotf被量化,与该图像的亮度值对应的码值被决定。基于该码值进行图像编码等,生成视频的流。在再现时,针对流的解码结果,基于hdr的eotf进行逆量化从而被转换为线性信号,每像素的亮度值被复原。以下将使用了hdr的逆eotf的量化称为“逆hdr的eotf转换”。将使用了hdr的eotf的逆量化称为“hdr的eotf转换”。同样,将使用了sdr的逆eotf的量化称为“逆sdr的eotf转换”。将使用了sdr的eotf的逆量化称为“sdr的eotf转换”。

使用该亮度值和元数据,在影像转换处理部中,转换为在影像显示部中能够显示的亮度值,从而能够在影像显示部中显示hdr影像。例如,在原来的hdr影像的峰值亮度为2000nit,而影像显示部的峰值亮度为800nit的情况下,能够进行转换来降低亮度。

像这样,hdr母盘的方式通过eotf以及元数据与hdr信号的组合来实现。因此,更高效的eotf以及元数据被开发,应该采用使用了这样的eotf以及元数据的hdr方式在将来可能到来。

但是,在当前不知道该新的方式是怎样的方式,然而能够想象变更eotf的可能性和追加元数据的可能性。在该情况下,hdr信号本身也改变。

本申请的目的在于,在这样变更了hdr的传输格式的情况下,通过降低购买了对应于hdr的设备的顾客重新购买新的设备的风险,从而实现hdr的普及。

[4.元数据]

图4是表示hdr元数据的例子的图。hdr元数据包含用于影像信号的亮度范围的变更(dr转换)的转换辅助信息、和hdr控制信息。各信息是例如以标题为单位设置的静态hdr元数据、以及例如以帧为单位设置的动态hdr元数据的任一个。此外,静态hdr元数据被分类为必须元数据(基本数据)和选择元数据(扩展数据)的任一个,动态hdr元数据被分类为选择元数据。另外,各信息的细节在后面叙述。

[5.hdr元数据]

作为表示hdr内容的母盘制作时的特性的参数,存在按每个标题或每个播放列表固定的静态hdr元数据、和按每个场景可变的动态hdr元数据。在此,标题以及播放列表是表示连续再现的影像信号的信息。以后,将连续再现的影像信号称为连续再现单位。

例如,静态hdr元数据包含eotf函数(曲线)的种类、18%灰值、弥漫白值、曲线拐点以及限幅点的至少一个。eotf是将多个亮度值和多个码值建立了关联的信息,是用于对影像信号的亮度范围进行变更的信息。其他信息是与影像信号的亮度相关的属性信息,因此静态hdr元数据是与影像信号的亮度范围相关的信息,可以说是用于确定影像信号的亮度范围的信息。

具体而言,18%灰值以及弥漫白值表示成为预先决定的基准的明亮度的影像中的亮度值(nit),换言之,表示影像中的基准的明亮度。更具体而言,18%灰值表示母盘制作前18nit的明亮度的物体在母盘制作后的亮度值(nit)。弥漫白值表示相当于白色的亮度值(nit)。

此外,曲线拐点以及限幅点是eotf函数的参数,表示eotf中的特性变化的点。具体而言,曲线拐点是表示将影像信号的亮度映射到eotf而得到的亮度值(输出亮度)的增量相对于摄影时的原始的亮度值(输入亮度)的增量被设为与1比1不同的值的变化点。例如,曲线拐点是在后述的图30a中,用于确定从线性变化偏离的点的信息。此外,限幅点表示在eotf函数中开始限幅的点。在此限幅是将一定值以上的输入亮度值转换为同一输出亮度值。例如,限幅点表示在后述的图30b中,输出亮度值不再变化的点。

此外,eotf函数(曲线)的种类例如是图27a所示的hdr的eotf以及sdr的eotf。

像这样,本实施方式所涉及的内容数据生成方法生成内容数据,包含:第一生成步骤,生成影像信号以及静态hdr元数据(第一元数据),该静态hdr元数据(第一元数据)是针对影像信号的连续再现单位中包含的多个图像(构成连续再现单位的影像信号)共通地使用的信息,并且是包含与影像信号的亮度范围相关的信息;以及第二生成步骤,通过将连续再现单位与静态hdr元数据建立关联从而生成内容数据。例如,与影像信号的亮度范围相关的信息是用于对影像信号的亮度范围进行转换的信息。

此外,静态hdr元数据包含用于确定将多个亮度值与多个码值建立了关联的eotf的信息。此外,影像信号中的亮度值作为码值被编码。

此外,静态hdr元数据还包含表示成为预先决定的基准的明亮度的影像信号中的亮度值的信息、或表示eotf中的特性变化的点的信息。例如,静态hdr元数据包含表示影像信号中的相当于白色的亮度值的信息(弥漫白值)。

此外,在第一生成步骤中,还生成动态hdr元数据(第二元数据),该动态hdr元数据(第二元数据)是针对比连续再现单位更小的单位共通地使用的信息,并且是与影像信号的亮度范围相关的信息。例如,与影像信号的亮度范围相关的信息是用于对影像信号的亮度范围进行转换的信息。

动态hdr元数据是表示按每个场景不同的母盘制作特性的参数等。在此母盘制作特性表示原始(母盘制作前)的亮度与母盘制作后的亮度的关系。例如,表示母盘制作特性的参数是与上述的静态hdr元数据同样的信息,换言之,是静态hdr元数据中包含的信息的至少一个。

图5是表示静态hdr元数据的存放例的图。本例是在蓝光盘等封装介质中,将静态hdr元数据存放至播放列表的例子。

作为从播放列表参照的每个流的元数据中的一个,存放静态hdr元数据。在该情况下,静态hdr元数据以播放列表为单位固定。也就是说,静态hdr元数据与各播放列表建立对应地存放。

此外,在ott中,也可以在取得流之前被参照的清单文件中存放有静态hdr元数据。也就是说,本实施方式所涉及的内容数据生成方法也可以生成影像信号作为影像流,将静态hdr元数据存放至在取得影像流之前被参照的清单文件。

此外,在广播中,也可以在表示流的属性的描述符中存放静态hdr元数据。也就是说,本实施方式所涉及的内容数据生成方法也可以生成内容数据作为影像流,将静态hdr元数据作为表示影像流的属性的识别符而与该影像流独立存放。例如,能够将静态hdr元数据作为mpeg2-ts中的描述符(descriptor)存放。

此外,在静态hdr元数据按每个标题固定的情况下,静态hdr元数据也可以作为表示标题的属性的管理信息存放。

图6是表示动态hdr元数据向视频流内的存放例的图。在mpeg-4avc或hevc(高效视频编码:highefficiencyvideocoding)中,使用被称为sei(补充增强信息:supplementalenhancementinformation)的数据结构,存放与流的再现控制有关的信息。因此,例如在sei中存放动态hdr元数据。

设想动态hdr元数据按每个场景来更新。场景的开头是gop(图片组:groupofpictures)等随机访问单位的开头的访问单元(au)。从而,动态hdr元数据也可以存放在按随机访问单位中的解码顺序处于开头的访问单元中。随机访问单位的开头访问单元成为idr图片、或附加了sps(序列参数集:sequenceparameterset)的non-idr(非idr)i图片等。因此,接收侧的装置能够通过检测构成随机访问单位的开头访问单元的nal(网络抽象层:networkabstractionlayer)单元,取得动态hdr元数据。或也可以对存放动态hdr元数据的sei赋予固有的类型。

另外,关于eotf函数的种类,也可以存放为sps中的流的属性信息等。也就是说,本实施方式所涉及的内容数据生成方法也可以将内容数据作为通过hevc编码的影像流来生成,将用于确定eotf的信息存放至影像流中包含的sps。

[6.静态hdr元数据的传输方法]

图7是表示静态hdr元数据的传输方法的图,是在bd播放器(蓝光设备)或刻录机等的再现装置中通过hdmi(注册商标,下同)等传输协议向显示装置传输hdr信号时的动作例的流程图。

之前叙述了静态hdr元数据以标题为单位或以播放列表为单位固定。从而,再现装置在需要静态hdr元数据的设定的情况下(s401中是),在标题或播放列表的再现开始时,从内容的管理信息取得静态hdr元数据,将所取得的静态hdr元数据作为hdmi的控制信息存放并进行传输。也就是说,再现装置在构成标题或播放列表的影像信号的传输开始之前,取得与该标题或播放列表对应的静态hdr元数据,将所取得的静态hdr元数据作为hdmi的控制信息来传输(s402)。更一般而言,也可以是再现装置在进行该再现装置和显示装置之间的hdmi的初始化处理时将静态hdr元数据作为初始化信息传输。

其后,再现装置传输与静态hdr元数据对应的视频流(s403)。另外,传输完毕的静态hdr元数据对该视频流成为有效。

像这样,本实施方式所涉及的影像流传输方法传输影像流(视频流),包含:取得步骤,取得包含影像信号以及的静态hdr元数据(第一元数据)的内容数据,该的静态hdr元数据(第一元数据)的内容数据是针对连续再现单位中包含的多个图像共通地使用的信息,并且是与影像信号的亮度范围相关的信息;以及传输步骤,传输与影像信号对应的影像流、以及静态hdr元数据。

例如,在传输步骤中,按照hdmi的通信协议,传输影像流和静态hdr元数据。

此外,动态hdr元数据作为视频流的一部分传输。

另外,再现装置也可以将动态hdr元数据在该动态hdr元数据成为有效的定时作为hdmi的控制信号来传输。此时,再现装置能够在静态hdr元数据和动态hdr元数据中设置识别符等以使其能够相互识别地传输。

此外,也可以是在控制信号中,仅规定用于存放动态hdr元数据的容器的数据结构,使得能够原样复制sei的内容作为容器的有效载荷数据。由此,即使sei中包含的动态hdr元数据的句法被更新,也能够不变更bd播放器等再现装置的安装地应对。

关于静态hdr元数据也同样,若使得能够对内容的管理信息中的静态hdr元数据进行复制并传输,则针对静态hdr元数据的句法的变更,能够不变更再现装置的安装地应对。也就是说,也可以规定用于存放静态hdr元数据的容器的数据结构,在传输步骤中,将内容数据中包含的静态hdr元数据复制至容器的有效载荷,并传输该容器。

[7.hdr元数据的处理方法]

图8是表示在显示装置中对hdr信号进行显示时的hdr元数据的处理方法的例子的流程图。首先,显示装置从hdmi的控制信息取得静态hdr元数据(s411),基于所取得的静态hdr元数据,决定hdr信号的显示方法(s412)。

另外,在控制信息中不包含静态hdr元数据的情况下,显示装置基于在应用标准中预先决定的值、或显示装置的默认设定,决定hdr信号的显示方法。也就是说,本实施方式所涉及的影像显示方法在不能取得静态hdr元数据的情况下,基于预先决定的值或设定,决定与影像信号对应的影像的显示方法。

此外,显示装置在视频流内的sei等中检测动态hdr元数据的情况下(s413中是),基于动态hdr元数据更新hdr信号的显示方法(s414)。也就是说,本实施方式所涉及的影像显示方法在取得了静态hdr元数据的情况下,基于所取得的静态hdr元数据决定显示方法,并显示影像,在取得了动态hdr元数据的情况下,将基于静态hdr元数据决定的显示方法更新为基于动态hdr元数据决定的显示方法,并显示影像。或也可以基于静态hdr元数据和动态hdr元数据这双方来决定显示方法。

另外,在显示装置不对应于动态hdr元数据的取得的情况下,显示装置也可以仅基于静态hdr元数据来动作。此外,在显示装置对应于动态hdr元数据的取得的情况下,有时显示装置也不能与存放了元数据的访问单元的显示时刻(pts:演示时间戳:presentationtimestamp)同步地更新hdr信号的显示方法。在该情况下,也可以是显示装置在取得元数据后,从在能够更新显示方法的最早的时刻以后显示的访问单元,更新显示方法。

另外,通过对hdr元数据赋予版本信息等,能够应对参数的更新以及追加。由此,显示装置能够基于hdr元数据的版本信息,判定该元数据是否能够解释。或也可以是hdr元数据由基本部和扩展部构成,参数的更新或追加通过扩展部的变更来应对,基本部不更新。也就是说,也可以是静态hdr元数据以及动态hdr元数据各自具有多个版本,包含多个版本中共通地使用的基本部、和按每个版本不同的扩展部。通过这样,基于基本部的hdr元数据,能够确保显示装置的向后兼容性。

像这样,本实施方式所涉及的影像显示方法基于影像流来显示影像,包含:取得步骤,取得与影像信号对应的影像流、和静态hdr元数据(第一元数据);以及显示步骤,基于静态hdr元数据,决定与影像信号对应的影像的显示方法并进行显示。

此外,影像信号中的亮度值作为码值被编码,静态hdr元数据包含用于确定将多个亮度值与多个码值建立了关联的eotf的信息,在显示步骤中,使用由静态hdr元数据确定的eotf,将影像信号所示的码值转换为亮度值从而生成影像。

[8.数据输出装置]

图9是表示bd播放器等输出hdr信号的数据输出装置400的结构的框图。被输入至数据输出装置400的hdr元数据包含表示hdr信号的母盘制作特性的特性数据、以及表示将hdr信号转换为sdr信号或对hdr信号的动态范围进行转换时的色调映射方法的转换辅助数据。这2种元数据如图5以及图6中说明的那样,作为静态hdr元数据、或动态hdr元数据来存放。进而,静态hdr元数据被存放在内容的管理信息以及影像流内的至少一方中。

数据输出装置400具备视频解码部401、外部元取得部402、hdr元解释部403、hdr控制信息生成部404、dr转换部405和hdmi输出部406。

视频解码部401对视频的编码流即影像流进行解码从而生成影像信号(第一影像信号),将所得到的影像信号输出至dr转换部405。此外,视频解码部401取得影像流内的hdr元数据(第二元数据)(静态hdr元数据或动态hdr元数据)。具体而言,视频解码部401将在mpeg-4avc或hevc的sei消息等中存放的hdr元数据输出至hdr元解释部403。

外部元取得部402取得在播放列表等内容的管理信息中存放的静态hdr元数据(第一元数据),将所取得的静态hdr元数据输出至hdr元解释部403。在此,在内容的管理信息中,也可以对在播放项目等能够随机访问的规定的单位中能够变更的动态hdr元数据进行存放。在该情况下,外部元取得部402从内容的管理信息取得动态hdr元数据,将所取得的动态hdr元数据输出至hdr元解释部403。

hdr元解释部403判定从视频解码部401或外部元取得部402输出的hdr元数据的种类,将特性数据输出至hdr控制信息生成部404,将转换辅助数据输出至dr转换部405。

另外,在视频解码部401以及外部元取得部402这双方中取得静态hdr元数据的情况下,也可以仅使用从外部元取得部402输出的静态hdr元数据作为有效的元数据。也就是说,在由外部元取得部402取得的第一元数据以及由视频解码部401取得的第二元数据是针对第一影像信号的连续再现单位中包含的多个图像共通地使用的静态hdr元数据的情况下,如果hdr元解释部403取得第一元数据以及第二元数据双方,则对第一元数据进行解释从而取得特性数据以及转换辅助数据。

或者也可以是,hdr元解释部403在由外部元取得部402取得了静态hdr元数据的情况下,使用该静态hdr元数据作为有效的元数据,进而,在由视频解码部401取得了静态hdr元数据的情况下,以该静态hdr元数据来覆写有效的元数据。也就是说,在由外部元取得部402取得的第一元数据以及由视频解码部401取得的第二元数据是针对第一影像信号的连续再现单位中包含的多个图像共通地使用的静态hdr元数据的情况下,如果hdr元解释部403在第一元数据以及第二元数据之中仅取得了第一元数据,则对第一元数据进行解释从而取得特性数据以及转换辅助数据,在取得了第二元数据的情况下,将所使用的元数据从第一元数据切换为第二元数据。

hdr控制信息生成部404基于特性数据生成hdmi中的hdr控制信息,将所生成的hdr控制信息输出至hdmi输出部406。在此,针对动态hdr元数据,决定hdmi输出部406中的hdr控制信息的输出定时,以便能够与元数据为有效的视频信号同步地输出hdr控制信息。也就是说,hdmi输出部406与元数据为有效的视频信号(影像信号)同步地输出hdr控制信息。

dr转换部405基于转换辅助数据,将解码后的影像信号转换为sdr信号或转换为动态范围。在此,在与数据输出装置400连接的显示装置对应于hdr信号的输入的情况下不需要基于dr转换部405的转换。从而,数据输出装置400在hdmi的初始化处理等中确认连接目的地的显示装置是否对应于hdr信号的输入,从而判定是否需要转换处理。在判定为不需要转换处理的情况下,由视频解码部401得到的第一影像信号不经由dr转换部405而被输入至hdmi输出部406。

也就是说,hdmi输出部406在与数据输出装置400连接的显示装置对应于hdr信号(第一影像信号)的亮度范围的影像输出的情况下,将第一影像信号以及hdr控制信息输出至显示装置。此外,hdmi输出部406在与数据输出装置400连接的显示装置不对应于hdr信号(第一影像信号)的亮度范围的影像输出的情况下,把将hdr转换为sdr而得到的第二影像信号以及hdr控制信息输出至显示装置。此外,hdmi输出部406在传输协议(例如hdmi)的初始化处理中判定显示装置是否对应于hdr信号(第一影像信号)的亮度范围的影像输出。

hdmi输出部406将从dr转换部405或视频解码部401输出的影像信号以及hdr控制信息按照hdmi的协议进行输出。

另外,在数据输出装置400接收广播或ott的内容并进行输出的情况下,也能够使用同样的结构。此外,在数据输出装置400和显示装置被包含在单一设备中的情况下,不需要hdmi输出部406。

此外,在上述说明中,数据输出装置400具备从管理信息等取得元数据的外部元取得部402,视频解码部401具有从影像流取得元数据的功能,但数据输出装置400也可以仅具有其中一方。

此外,在上述说明中,叙述了数据输出装置400输出按照hdmi的数据(影像信号以及hdr控制信息)的例子,但数据输出装置400输出按照任意的传输协议的数据即可。

像这样,数据输出装置400具备:解码部(视频解码部401),对影像流进行解码从而生成第一亮度范围(hdr)的第一影像信号;取得部(视频解码部401以及外部元取得部402的至少一方),取得与第一影像信号的亮度范围相关的第一元数据;解释部(hdr元解释部403),对第一元数据进行解释,从而取得表示第一影像信号的亮度范围的特性数据;控制信息生成部(hdr控制信息生成部404),将特性数据转换为按照规定的传输协议(例如hdmi)的hdr控制信息;以及输出部(hdmi输出部406),将hdr控制信息通过规定的传输协议来输出。

据此,数据输出装置400能够基于元数据中包含的特性数据,生成控制信息。

此外,解释部(hdr元解释部403)还对第一元数据进行解释,从而取得用于转换第一影像信号的亮度范围的转换辅助数据,数据输出装置400还具备转换部(dr转换部405),其基于转换辅助数据,对第一影像信号的亮度范围进行转换从而生成比第一影像信号的亮度范围窄的亮度范围的第二影像信号,输出部(hdmi输出部406)还将第一影像信号以及第二影像信号的至少一方通过规定的传输协议来输出。

据此,数据输出装置400能够使用元数据中包含的转换辅助数据来变更第一影像信号的亮度范围。

此外,解码部(视频解码部401)还从影像流取得与第一影像信号的亮度范围相关的第二元数据(hdr元数据),解释部(hdr元解释部403)对第一元数据以及第二元数据的至少一方进行解释从而取得特性数据以及转换辅助数据。

此外,如图4所示,静态hdr元数据包含必须元数据和选择元数据,动态hdr元数据仅包含选择元数据。也就是说,静态hdr元数据始终被使用,动态hdr元数据选择性地被使用。像这样,由外部元取得部402取得的第一元数据或由视频解码部401取得的第二元数据包含针对影像信号的连续再现单位中包含的多个图像共通地使用且包括特性数据的静态hdr元数据(静态元数据)。hdr控制信息生成部404将静态hdr元数据中包含的特性数据转换为按照规定的传输协议的hdr控制信息。hdmi输出部406在输出第一影像信号(hdr信号)的情况下,输出基于静态hdr元数据的hdr控制信息。

此外,由外部元取得部402取得的第一元数据或由视频解码部401取得的第二元数据还包含针对比影像信号的连续再现单位更小的单位共通地使用且包括特性数据的动态hdr元数据(动态元数据)。hdr控制信息生成部404将静态hdr元数据中包含的特性数据以及动态hdr元数据中包含的特定数据转换为按照规定的传输协议的hdr控制信息。hdmi输出部406在输出第一影像信号(hdr信号)的情况下,输出基于静态hdr元数据以及动态hdr元数据的hdr控制信息。

此外,本申请所涉及的数据生成方法是数据生成装置所进行的数据生成方法,包含:第一生成步骤,生成与影像信号的亮度范围相关的元数据;以及第二生成步骤,生成包含影像信号和元数据的影像流。元数据包含表示影像信号的亮度范围的特性数据、和用于对影像信号的亮度范围进行转换的转换辅助数据。

[9.hdr元数据的存放例]

图10是表示存放hdr元数据的sei消息的数据结构例的图。如图10所示,也可以定义hdr元数据专用的sei消息。也就是说,元数据也可以存放在元数据专用的消息中。

或者也可以是,hdr元数据被存放至用于存放用户数据的通用的sei消息,在该消息的有效载荷部分设置表示在该消息中存放hdr元数据的信息(后述的hdr扩展识别信息)。

hdr元数据包含静态hdr元数据和动态hdr元数据。此外,也可以设置表示是否存放了静态hdr元数据的标志信息、和表示是否存放了动态hdr元数据的标志信息。由此,能够使用仅存放静态hdr元数据的方法、仅存放动态hdr元数据的方法、以及存放静态hdr元数据和动态hdr元数据这双方的方法这3种存放方法。

进而,也可以对各个元数据,定义必须进行解释的基本数据(基本部)、和选择性地进行解释(是否解释为任意)的扩展数据(扩展部)。例如,表示元数据的类型(基本数据或扩展数据)的类型信息和尺寸被包含于头信息,定义在有效载荷中存放元数据的容器的格式。也就是说,元数据包含有效载荷、表示有效载荷的数据是基本数据还是扩展数据的信息、表示有效载荷的数据尺寸的信息。换言之,元数据包含表示元数据的类别的类型信息。例如,在类型值为0的容器中存放基本数据。此外,对扩展数据分配1以上的值作为类型值,通过该值表示扩展数据的类别。

数据输出装置以及显示装置参照类型值,取得自身能够解释的容器的数据。也就是说,数据输出装置(或显示装置)使用类型信息,判定数据输出装置(或显示装置)是否能够解释元数据,在数据输出装置(或显示装置)能够解释该元数据的情况下,对该元数据进行解释从而取得特性数据以及转换辅助数据。

此外,也可以是hdr元数据的最大尺寸被预先设定,以基本数据和扩展数据的尺寸的总和成为最大尺寸以下的方式生成元数据。也就是说,元数据的数据尺寸的最大值被规定,本申请所涉及的数据生成方法以基本数据以及扩展数据的合计的数据尺寸成为最大值以下的方式生成元数据。

数据输出装置以及显示装置具备该最大尺寸量的存储器,从而能够保证能够将hdr元数据全部存放至存储器内。或者,对静态hdr元数据或动态hdr元数据确保固定尺寸量的数据区域,还能够将存放基本数据的区域以外用作将来扩展等。

这样的数据结构也可以被用于在内容的管理信息中存放hdr元数据。

图11是表示在用于存放用户数据的sei消息中存放hdr元数据的情况下的数据结构的一例的图。除了消息包含hdr扩展识别信息和扩展类型id以外,与图11的数据结构同样。hdr扩展识别信息表示在该消息中包含hdr元数据。扩展类型id表示hdr元数据的版本等。也就是说,元数据被存放至hevc的sei消息,该sei消息包含表示在该sei消息中是否包含元数据的hdr扩展识别信息。

在该情况下,数据输出装置在接收了包含hdr扩展识别信息的用于存放用户数据的sei消息,且与数据输出装置连接的显示装置对应于hdr信号以及hdr控制信息的输入的情况下,按照hdmi等向显示装置的输出i/f的协议,原样复制所接收到的sei消息并进行输出。也就是说,数据输出装置在取得了包含表示在该sei消息中包含元数据的hdr扩展识别信息的sei消息,且数据输出目的地的显示装置对应于hdr控制信息的输入的情况下,将该sei消息按照规定的传输协议(例如hdmi)原样输出。

由此,与元数据的内容无关,数据输出装置能够向显示装置输出hdr元数据。通过这样的结构,即使在将来开发了新的dr转换处理,且定义了新的hdr元数据,与该新hdr元数据对应的显示装置连接到不对应于新hdr元数据的数据输出装置的情况下,也能够从数据输出装置向显示装置输出新hdr元数据。此外,在显示装置中能够实施与新hdr元数据相应的dr转换处理。

[10.用户引导显示方法1]

图12是表示执行从hdr向sdr的转换处理的蓝光设备中的用户引导显示方法的图。

由于从hdr向sdr的转换处理的算法尚未确立,所以现在难以准确地从hdr向sdr转换。此外,还能够安装多个从hdr向sdr的转换处理算法。

因此,在用户将对应于hdr的盘插入至与不对应于hdr的tv连接的对应于hdr的蓝光设备的情况下,需要进行适当的用户导引。

在与不对应于hdr的tv连接的对应于hdr的蓝光设备检测到从hdr向sdr的转换处理开始的情况下,例如显示“盘为对应于hdr的盘。所使用的tv为不对应于hdr的tv,所以再现由蓝光设备进行了从hdr向sdr的转换处理而得到的sdr影像,而不是hdr影像。”等导引消息。

像这样,数据输出装置(蓝光设备)在显示装置不对应于第一影像信号(hdr信号)的亮度范围的影像输出的情况下,将从第一亮度范围转换为第二亮度范围而得到的第二影像信号(sdr信号)以及hdr控制信息输出至显示装置,且使显示装置显示如下意思:从第一亮度范围转换为第二亮度范围而得到的第二影像信号被显示。

[11.用户引导显示方法2]

图13是表示在执行从盘内存放的hdr向sdr的转换处理时的用户引导的显示方法的图。

在进行从hdr向sdr的转换处理的情况下蓝光设备应显示的消息(菜单)被存放在hdr盘、或蓝光设备内的非易失存储器等中。由此,蓝光设备在执行从hdr向sdr的转换处理时,能够使消息被显示。在该情况下,例如显示为“盘为对应于hdr的盘。所使用的tv为不对应于hdr的tv,所以再现蓝光设备进行了从hdr向sdr的转换处理而得到的sdr影像而不是hdr影像。”。

[12.用户引导显示方法3]

图14是表示在执行从盘内存放的hdr向sdr的转换处理时的用户引导菜单的显示方法的图。

蓝光设备通过使用蓝光的菜单,能够显示“盘为对应于hdr的盘。所使用的tv为不对应于hdr的tv,所以再现蓝光设备进行了从hdr向sdr的转换处理而得到的sdr影像,而不是hdr影像,是否要再现?”等消息。蓝光设备在用户选择了“再现”按钮的情况下,开始转换图像的显示。此外,蓝光设备在用户选择了“不再现”的情况下,中止再现,显示促使用户插入不对应于hdr的蓝光盘的消息。

像这样,数据输出装置(蓝光设备)在显示装置不对应于第一影像信号(hdr信号)的亮度范围的影像输出的情况下,使显示装置显示供用户选择是否显示从第一亮度范围转换为第二亮度范围而得到的第二影像信号(sdr信号)的消息。

[13.用户引导显示方法4]

图15是表示能够选择在执行从盘内存放的hdr向sdr的转换处理时的处理方法的用户引导菜单的显示方法的图。

蓝光设备在蓝光中存放有从hdr向sdr的转换处理用的元数据的情况下,将该情况显示。蓝光设备在用户选择了指定的转换方式的情况下,显示提示能够进行更美观的转换的消息。也就是说,通过盘内的java(注册商标)指令等,判定在蓝光设备中安装有怎样的从hdr向sdr的转换处理。由此,蓝光设备能够显示“盘为对应于hdr的盘。所使用的tv为不对应于hdr的tv,所以再现由蓝光设备进行了从hdr向sdr的转换处理而得到的sdr影像,而不是hdr影像,要选择哪个方法?(通过处理1再现)、(通过处理3再现)、(不再现)”等从hdr向sdr的转换处理方式的选择菜单。另外,在此处理1以及处理3是从hdr向sdr的不同的转换处理。

像这样,数据输出装置(蓝光设备)在显示装置不对应于第一影像信号(hdr信号)的亮度范围的影像输出的情况下,使显示装置显示供用户选择用于将第一亮度范围转换为第二亮度范围的多个转换方式之中的任一个转换方式的消息。

[14.用户引导显示方法5]

另外,在广播中也能够显示同样的消息。例如,不对应于hdr信号的tv或再现装置使用数据广播的应用等,显示表示广播节目为hdr信号而在视听的情况下有时不能正确地显示的消息。此外,对应于hdr信号的tv或再现装置也可以不显示该消息。此外,通过表示消息的属性的标签值等,表示该消息为对于hdr信号的警告消息。对应于hdr信号的tv或再现装置参照标签值判定不需要显示消息。

[15.双盘的再现动作1]

以上,说明了仅存放了hdr信号的hdr盘的再现动作。

接着,使用图16说明在存放了hdr信号和sdr信号这双方的双盘(dualdisk)中存放的复用数据。图16是用于说明在双盘中存放的复用数据的图。

在双盘中,如图16所示,hdr信号和sdr信号分别作为不同的复用流存放。例如,在蓝光等光盘中,通过被称为m2ts的基于mpeg-2ts的复用方式,视频、音频、字幕、图形等多个媒体的数据作为一条复用流存放。这些复用流根据播放列表等再现控制用的元数据被参照,在再现时播放器对元数据进行解释从而选择要再现的复用流或在复用流中存放的各个语言的数据。在本例中,示出将hdr用和sdr用的播放列表单独存放,各自的播放列表参照hdr信号或sdr信号的状况。此外,也可以另外示出表示存放了hdr信号和sdr信号这双方的识别信息等。

虽然也能够对同一复用流复用hdr信号和sdr信号这双方,但需要以满足在mpeg-2ts中规定的t-std(系统目标解码器:systemtargetdecoder)等缓冲器模型的方式复用,特别是,在预先决定的数据的读出速率的范围内,难以将比特率高的两条视频复用。因此,优选分离复用流。

音频、字幕或图形等数据需要针对各自的复用流存放,与复用一条的情况相比数据量增加。其中,针对数据量的增加,能够使用压缩率高的视频编码方式来削减视频的数据量。例如,通过将在以往的蓝光中使用的mpeg-4avc改变为hevc(高效视频编码:highefficiencyvideocoding),可期待压缩率提高1.6~2倍。此外,也可以是关于在双盘中存放的内容,禁止存放2k的hdr与sdr的组合、4k的sdr与2k的hdr的组合等设为两条2k的情况、或者禁止存放2k与4k的组合等设为两条4k的情况,从而仅允许光盘的容量以内的组合。

[16.双盘的再现动作2]

图17是表示双盘的再现动作的流程图。

首先,再现装置判定再现对象的光盘是否是双盘(s301)。并且,在判定为是双盘的情况下(s301中是),判定输出目的地的tv是hdrtv还是sdrtv(s302)。在判定为是hdrtv的情况下(s302中是)前进至步骤s303,在判定为是sdrtv的情况下(s302中否)前进至步骤s304。在步骤s303中,从双盘内的包含hdr信号的复用流取得hdr的视频信号,并进行解码,对hdrtv输出。在步骤s304中,从双盘内的包含sdr信号的复用流取得sdr的视频信号,并进行解码,对sdrtv输出。另外,在步骤s301中判定为再现对象不是双盘的情况下(s301中否),通过规定的方法判定能否再现,基于判定结果来决定再现方法(s305)。

[17.盘的种类]

如上述那样,随着显示装置的分辨率以及亮度范围提高,提供与显示装置的规格相应的多个种类的蓝光盘(以下记作bd)。图18是表示bd的种类的图。如图18所示,以下将记录了分辨率为第一分辨率且亮度范围为第一亮度范围的影像信号的bd记作对应于2k_sdr的bd。分辨率为第一分辨率且亮度范围为第一亮度范围的影像信号在bd中作为流被存放。将该流记作2k_sdr流。对应于2k_sdr的bd是以往的bd。

此外,将记录了分辨率为第二分辨率且亮度范围为第一亮度范围的影像信号的bd记作对应于4k_sdr的bd。分辨率为第二分辨率且亮度范围为第一亮度范围的影像信号在bd中作为流被存放。将该流记作4k_sdr流。

同样,将记录了分辨率为第一分辨率且亮度范围为第二亮度范围的影像信号的bd记作对应于2k_hdr的bd。分辨率为第一分辨率且亮度范围为第二亮度范围的影像信号在bd中作为流被存放。将该流记作2k_hdr流。

此外,将记录了分辨率为第二分辨率且亮度范围为第二亮度范围的影像信号的bd记作对应于4k_hdr的bd。分辨率为第二分辨率且亮度范围为第二亮度范围的影像信号在bd中作为流被存放。将该流记作4k_hdr流。

另外,第一分辨率例如是所谓2k(1920x1080、2048x1080)的分辨率,但也可以是包含这样的分辨率的任意的分辨率。以下存在将第一分辨率简单地记作2k的情况。

此外,第二分辨率是所谓4k(3840x2160、4096x2160)的分辨率,但也可以是包含这样的分辨率的任意的分辨率。第二分辨率是与第一分辨率相比像素数更多的分辨率。

另外,第一亮度范围例如是此前说明的sdr(峰值亮度为100nit的亮度范围)。第二亮度范围例如是此前说明的hdr(峰值亮度超过100nit的亮度范围)。第二亮度范围包含全部第一亮度范围,第二亮度范围的峰值亮度比第一亮度范围的峰值亮度大。

图19是更详细示出bd的种类的图。

如图19的(c)、(f)、(g)、以及(h)所示,考虑以1张bd与多个影像表现对应的双流盘。双流盘是记录了用于再现同一内容、并且分辨率以及亮度范围的至少一方不同的多个影像信号的bd。

具体而言,图19的(c)所示的双流盘是记录了4k_sdr流和2k_sdr流的bd。图19的(f)所示的双流盘是记录了2k_hdr流和2k_sdr流的bd。

图19的(g)所示的双流盘是记录了4k_hdr流和4k_sdr流的bd。图19的(h)所示的双流盘是记录了4k_hdr流和2k_sdr流的bd。

另外,图19的(c)所示的双流盘由于蓝光设备能够进行从4k至2k的分辨率的向下转换(downconversion)(以下也记作downconvert),因此不是必须的。

[18.盘容量1]

在此,使用图20以及图21补充以上说明的各bd。图20以及图21是表示在bd中记录的数据容量的图。

图20以及图21例示在各bd和双流盘中实际使用的流的数据容量。

图20例示分辨率为2k的流(2k_sdr流以及2k_hdr流)使用mpeg-4avc被压缩的情况。电影长度、无损音频、压缩音频的比特率如下述那样。另外,bd记录与语言相应的数量的声音流(无损音频以及压缩音频)。

电影长度:150min(14-18mbps)

无损音频:0-2语言(4.5mbps)

压缩音频:3-5语言(1.5mbps)

在该情况下,所需的盘容量的最大值(a)、中间值(b)、以及最小值(c)如以下那样。

(a)(18+4.5*2+1.5*5)mbps*(150*60)s/8=38.8gb

(b)(16+4.5*1+1.5*3)mbps*(150*60)s/8=28.1gb

(c)(14+4.5*0+1.5*3)mbps*(150*60)s/8=20.8gb

此外,例示分辨率为4k的流(4k_sdr流以及4k_hdr流)使用hevc被压缩的情况。电影长度、无损音频、压缩音频的比特率如下述那样。

电影长度:150min(35-40mbps)

无损音频:0-2语言(4.5mbps)

压缩音频:3-6语言(1.5mbps)

在该情况下,所需的盘容量的最大值(a)、中间值(b)、以及最小值(c)如以下那样。

(a)(40+4.5*2+1.5*5)mbps*(150*60)s/8=63.6gb

(b)(37+4.5*0+1.5*4)mbps*(150*60)s/8=48.4gb

(c)(35+4.5*0+1.5*3)mbps*(150*60)s/8=44.4gb

在此,记录了使用mpeg-4avc压缩的2k_hdr流和使用mpeg-4avc压缩的2k_sdr流这双方的双流盘所需的盘容量通过上述(a)+(a)、(b)+(b)、以及(c)+(c)来求出。具体而言,成为最大值77.6gb、中间值56.2gb、以及最小值41.6gb。

除了以往的50gb之外,将66gb、100gb的盘作为对象,所以上述那样的双流盘在容量上也能够实现。

另外,记录了使用hevc压缩的4k_hdr流和使用hevc压缩的2k_hdr流这双方的双流盘所需的盘容量若基于上述(b)+(b)则为96.8gb,若基于上述(c)+(c)则为88.8gb。因此,这样的双流盘能够通过100gb的容量的盘实现。

同样,记录了使用hevc压缩的4k_hdr流和使用mpeg-4avc压缩的2k_sdr流这双方的双流盘所需的盘容量若基于上述(a)+(b)则为91.7gb,若基于上述(c)+(c)则为65.2gb。因此,这样的双流盘能够通过100gb的容量的盘或66gb的容量的盘来实现。

[19.盘容量2]

进而,使用图21说明其他的例子。图21例示分辨率为2k的流(2k_sdr流以及2k_hdr流)使用hevc被压缩的情况。电影长度、无损音频、压缩音频的比特率如下述那样。

电影长度:150min(7-9mbps)

无损音频:0-2语言(4.5mbps)

压缩音频:3-5语言(1.5mbps)

在该情况下,所需的盘容量的最大值(a)、中间值(b)、以及最小值(c)如以下那样。

(α)(9+4.5*2+1.5*5)mbps*(150*60)s/8=25.3gb

(β)(8+4.5*1+1.5*3)mbps*(150*60)s/8=19.1gb

(γ)(7+4.5*0+1.5*3)mbps*(150*60)s/8=12.9gb

在此,记录了使用hevc压缩的2k_hdr流和使用hevc压缩的2k_sdr流这双方的双流盘所需的盘容量通过上述(α)+(α)、(β)+(β)、以及(γ)+(γ)来求出。具体而言,成为最大值50.6gb、中间值38.2gb、以及最小值25.8gb。

除了以往的50gb以外,将66gb、100gb的盘作为对象,所以上述那样的双流盘在容量上也能够实现。

同样,记录了使用hevc压缩的4k_hdr流和使用hevc压缩的2k_sdr流这双方的双流盘所需的盘容量若基于上述(a)+(α)则为88.9gb,若基于上述(b)+(β)则为67.5gb,若基于上述(b)+(γ)则为61.3gb,若基于上述(c)+(γ)则为57.3gb。因此,这样的双流盘能够通过100gb的容量的盘或66gb的容量的盘来实现。

[20.盘的种类的细节1]

在bd中,更详细地说记录视频流和图形流(实施方式一的图形的流)。在此,图22是对于包含双流盘的各bd,表示各盘中记录的视频流和图形流的组合的一例的图。

图22考虑内容(bd)的制作的工夫,图形流与对应的视频流的分辨率无关,以分辨率为2k来记录。在2k_sdr流和4k_sdr流中,能够共享图形流。其中,图形流以与对应的视频流的亮度范围相应的亮度范围来记录。在视频流为hdr的情况下,记录hdr的图形流。在视频流为sdr的情况下,记录sdr的图形流。图形流从sdr向hdr的转换在制作内容时进行。

[21.盘的种类的细节2]

图23是对于包含双流盘的各bd,表示在各盘中记录的视频流和图形流的组合的其他的例子的图。

在图23中,考虑内容的制作的工夫,图形流与对应的视频流的分辨率以及亮度范围无关,以分辨率为2k且亮度范围为sdr来记录。在2k_sdr流、4k_sdr流、2k_hdr流、以及4k_hdr流全部中,能够共享图形流。在该情况下,图形流的分辨率从2k向4k的转换、以及图形流的亮度范围从sdr向hdr的转换都在蓝光设备中执行。

[22.盘的种类的细节3]

图24是对于包含双流盘的各bd,表示在各盘中记录的视频流和图形流的组合的再其他的例子的图。

图24中,在制作内容时,图形流的分辨率以及亮度范围与对应的视频流的分辨率以及亮度范围相应地记录,以使在蓝光设备中不需要图形流的转换。

[23.汇总]

再现对应于4k的bd或对应于hdr的bd的蓝光设备需要与对应于2k_sdr的tv、对应于2k_hdr的tv、对应于4k_sdr的tv、以及对应于4k_hdr的tv这四种tv对应。具体而言,蓝光设备需要支持3组hdmi/hdcp标准(hdmi1.4/hdcp1.4、hdmi2.0/hdcp2.1、hdmi2.1/hdcp2.2)。

进而,蓝光设备在进行4种蓝光盘(对应于2k_sdr的bd、对应于2k_hdr的bd、对应于4k_sdr的bd、以及对应于4k_hdr的bd)的再现的情况下,需要按每个该bd(内容)、以及所连接的每个显示装置(tv),选择适当的处理和hdmi/hdcp。进而,在对视频合成图形的情况下,也需要根据bd的种类以及所连接的显示装置(tv)的种类来改变处理。

因此,蓝光设备的内部处理变得非常复杂。在上述实施方式三中,提供了用于使蓝光设备内部处理比较简单的各种方法。

[1]在不对应于hdr的的tv中显示hdr信号的情况下,需要进行从hdr向sdr的转换。相对于此,在上述实施方式三中,为了使该转换在蓝光设备中成为可选,提出了双流盘(dualstreamsdisc)这样的bd的结构。

[2]此外,在上述实施方式三中,对图形流施加限制,减少了视频流和图形流的组合的种类。

[3]在上述实施方式三中,通过双流盘和图形流的限制,大幅减少蓝光设备内的复杂的处理的组合数。

[4]在上述实施方式三中,即使在导入了模拟hdr转换的情况下,对双流盘的处理也不产生矛盾,提示了内部处理以及hdmi处理。

在本申请的转换方法中,在sdrtv中显示hdr影像的情况下,利用所显示的sdrtv的峰值亮度超过100nit(通常200nit以上),不将hdr影像转换为100nit以下的sdr影像,而是以一定程度地保持超过100nit的区域的级别的方式进行转换,实现能够转换为接近于原来的hdr的模拟hdr影像而显示在sdrtv中的“hdr→模拟hdr转换处理”。

此外,在转换方法中,也可以根据sdrtv的显示器特性(最高亮度、输入输出特性、以及显示模式)来切换“hdr→模拟hdr转换处理”的转换方法。

作为显示器特性信息的取得方法,可以考虑(1)通过hdmi、网络自动取得,(2)使用户输入厂商名、产品编号等的信息从而生成,以及(3)使用厂商名、产品编号等信息从云端等取得。

此外,作为转换装置100的显示器特性信息的取得定时,可以考虑(1)在转换模拟hdr的紧前取得,以及(2)在与显示装置200(sdrtv等)初次连接时(连接确立时)取得。

此外,在转换方法中,也可以根据hdr影像的亮度信息(cal、cpl)来切换转换方法。

例如,作为转换装置100的hdr影像的亮度信息的取得方法,可以考虑(1)作为附带于hdr影像的元信息取得,(2)使用户输入内容的标题信息从而取得,以及(3)使用使用户输入的输入信息从云端等取得等。

此外,作为转换方法的细节,(1)以不超过dpl的方式进行转换,(2)以cpl成为dpl的方式进行转换,(3)不变更cal及其周边以下的亮度,(4)使用自然对数来转换,(5)通过dpl进行限幅处理。

此外,在转换方法中,为了提升模拟hdr的效果,还能够将sdrtv的显示模式、显示参数等显示设定发送至显示装置200来切换,例如,也可以将促使用户进行显示设定的消息显示在画面中。

[24.模拟hdr的必要性1]

接着,使用图25a~图25c说明模拟hdr的必要性。

图25a是表示在hdrtv内转换hdr信号并进行hdr显示的显示处理的一例的图。

如图25a所示,在显示hdr影像的情况下,存在即使显示装置为hdrtv,有时也不能原样显示hdr的亮度范围的最大值(峰值亮度(hpl(hdr峰值亮度:hdrpeakluminance):例1500nit))的情况。在该情况下,进行亮度转换,该亮度转换用于使进行了使用hdr的eotf的逆量化后的线性信号与该显示装置的亮度范围的最大值(峰值亮度(dpl(显示器峰值亮度:displaypeakiuminance):例750nit))相应。并且,通过将进行亮度转换从而得到的影像信号输入至显示装置,能够显示与作为该显示装置的极限的最大值的亮度范围相应的hdr影像。

图25b是表示使用对应于hdr的再现装置和sdrtv,进行hdr显示的显示处理的一例的图。

如图25b所示,在显示hdr影像的情况下,若显示装置为sdrtv,则利用所显示的sdrtv的亮度范围的最大值(峰值亮度(dpl:例300nit))超过100nit,通过图25b的对应于hdr的再现装置(蓝光设备)内的“hdr→模拟hdr转换处理”,进行在hdrtv内进行的“hdr的eotf转换”和使用了sdrtv的亮度范围的最大值即dpl(例:300nit)的“亮度转换”,若将进行“亮度转换”从而得到的信号直接输入至sdrtv的“显示装置”,则即使使用sdrtv,也能够实现与hdrtv相同的效果。

但是,在sdrtv中,没有用于将这样的信号从外部直接输入的手段,所以不能实现。

图25c是使用经由标准接口相互连接的对应于hdr的再现装置和sdrtv,进行hdr显示的显示处理的一例的图。

如图25c所示,通常需要使用sdrtv所具备的输入接口(hdmi等)将能够得到图25b的效果的信号输入至sdrtv。在sdrtv中,经由输入接口输入的信号依次经过“sdr的eotf转换”和“按每个模式的亮度转换”和“显示装置”,显示与该显示装置的最大值的亮度范围相应的影像。因此,在对应于hdr的蓝光设备内,生成能够取消在sdrtv中在输入接口的紧后经过的“sdr的eotf转换”和“按每个模式的亮度转换”的信号(模拟hdr信号)。也就是说,在对应于hdr的蓝光设备内,通过“hdr的eotf转换”和使用了sdrtv的峰值亮度(dpl)的“亮度转换”的紧后,进行“每个模式的逆亮度转换”和“逆sdr的eotf转换”,从而模拟地实现与将“亮度转换”紧后的信号输入至“显示装置”的情况(图25c的虚线箭头)相同的效果。

[25.模拟hdr的必要性2]

通常的sdrtv中输入信号为100nit,但具有与视听环境(较暗的房间:影院模式,明亮的房间:动态模式等)相应地能够进行200nit以上的影像表现的能力。但是,对sdrtv的输入信号的亮度上限被决定为100nit,所以不能直接使用其能力。

在sdrtv中显示hdr影像的情况下,利用所显示的sdrtv的峰值亮度超过100nit(通常200nit以上),不将hdr影像转换为100nit以下的sdr影像,而是进行“hdr→模拟hdr转换处理”,以一定程度地保持超过100nit的亮度范围的级别。因此,能够使sdrtv显示作为接近于原来的hdr的模拟hdr影像。

在将该“hdr→模拟hdr转换处理”技术应用于蓝光的情况下,如图26所示,在hdr盘中仅存放hdr信号,且在蓝光设备上连接了sdrtv的情况下,蓝光设备进行“hdr→模拟hdr转换处理”,将hdr信号转换为模拟hdr信号并传送至sdrtv。由此,sdrtv从所接收到的模拟hdr信号转换为亮度值,从而能够显示具有模拟的hdr效果的影像。像这样,在没有对应于hdr的tv的情况下,只要准备对应于hdr的bd和对应于hdr的蓝光设备,即使是sdrtv,也能够显示比sdr影像更高画质的模拟hdr影像。

因而,虽然以往认为为了观看hdr影像需要对应于hdr的tv,但能够以已有的sdrtv来观看能够实际感到hdr的效果的模拟hdr影像。由此,能够期待对应于hdr的蓝光普及。

[26.效果等]

对通过广播、蓝光等封装介质、ott等互联网分发被传送来的hdr信号进行hdr-模拟hdr转换处理,从而转换为模拟hdr信号。由此,能够将hdr信号作为模拟hdr影像在已有的sdrtv中显示。

[27.关于eotf]

在此,使用图27a以及图27b说明eotf。

图27a是表示与hdr以及sdr分别对应的eotf(电光传递函数:electro-opticaltransferfunction)的例子的图。

eotf一般而言被称为伽马曲线,表示码值与亮度值的对应,用于将码值转换为亮度值。也就是说,eotf是表示多个码值与亮度值的对应关系的关系信息。

此外,图27b是表示与hdr以及sdr分别对应的逆eotf的例子的图。

逆eotf表示亮度值与码值的对应,与eotf相反地用于将亮度值量化并转换为码值。也就是说,逆eotf是表示亮度值与多个码值的对应关系的关系信息。例如,在将对应于hdr的影像的亮度值以10比特的级别的码值来表现的情况下,至10000nit为止的hdr的亮度范围中的亮度值被量化,并映射到至0~1023的1024个整数值。也就是说,基于逆eotf进行量化,从而将至10000nit为止的亮度范围的亮度值(对应于hdr的影像的亮度值)转换为10比特的码值即hdr信号。在对应于hdr的eotf(以下称为“hdr的eotf”)或对应于hdr的逆eotf(以下称为“hdr的逆eotf”)中,能够表现比对应于sdr的eotf(以下称为“sdr的eotf”)或对应于sdr的逆eotf(以下称为“sdr的逆eotf”)高的亮度值,例如,在图27a以及图27b中,亮度的最大值(峰值亮度)为10000nit。也就是说,hdr的亮度范围包含sdr的全部亮度范围,hdr的峰值亮度比sdr的峰值亮度大。hdr的亮度范围是从sdr的亮度范围的最大值即100nit将最大值扩大至10000nit后的亮度范围。

例如,hdr的eotf以及hdr的逆eotf作为一例,存在由(美国)电影电视工程师协会(smpte)标准化的smpte2084。

另外,在以后的说明书中,有时将图27a以及图27b中记载的0nit至峰值亮度即100nit为止的亮度范围记作第一亮度范围。同样,有时将图27a以及图27b中记载的0nit至峰值亮度即10000nit为止的亮度范围记作第二亮度范围。

[28.转换装置以及显示装置]

图28是表示实施方式的转换装置以及显示装置的结构的框图。图29是表示由实施方式的转换装置以及显示装置所进行的转换方法以及显示方法的流程图。

如图28所示,转换装置100具备hdr的eotf转换部101、亮度转换部102、逆亮度转换部103、以及逆sdr的eotf转换部104。此外,显示装置200具备显示设定部201、sdr的eotf转换部202、亮度转换部203、以及显示部204。

关于转换装置100以及显示装置200的各结构要素的详细的说明,将在转换方法以及显示方法的说明中进行。

[29.转换方法以及显示方法]

使用图29说明转换装置100进行的转换方法。另外,转换方法包含以下说明的步骤s101~步骤s104。

首先,转换装置100的hdr的eotf转换部101取得进行逆hdr的eotf转换而得到的hdr影像。转换装置100的hdr的eotf转换部101对所取得的hdr影像的hdr信号实施hdr的eotf转换(s101)。由此,hdr的eotf转换部101将所取得的hdr信号转换为表示亮度值的线性信号。hdr的eotf例如存在smpte2084。

接着,转换装置100的亮度转换部102进行使用显示器特性信息和内容亮度信息对由hdr的eotf转换部101转换后的线性信号进行转换的第一亮度转换(s102)。在第一亮度转换中,将与hdr的亮度范围对应的亮度值(以下称为“hdr的亮度值”)转换为与显示器的亮度范围对应的亮度值(以下称为“显示器亮度值”)。细节在后面叙述。

根据上述,hdr的eotf转换部101作为取得部发挥作用,该取得部取得作为表示影像的亮度值被量化从而得到的码值的第一亮度信号的hdr信号。此外,hdr的eotf转换部101以及亮度转换部102作为转换部发挥作用,该转换部将由取得部取得的hdr信号所示的码值,转换为基于显示器(显示装置200)的亮度范围来决定的、与比hdr的亮度范围的最大值(hpl)小且比100nit大的最大值(dpl)的显示器的亮度范围对应的显示器亮度值。

更具体而言,hdr的eotf转换部101在步骤s101中,使用所取得的hdr信号和hdr的eotf,针对作为所取得的hdr信号所示的第一码值的hdr的码值,决定与hdr的码值在hdr的eotf中建立了关联的hdr的亮度值。另外,hdr信号表示使用将hdr的亮度范围中的亮度值和多个hdr的码值建立了关联的hdr的逆eotf、将影像(内容)的亮度值量化从而得到的hdr的码值。

此外,亮度转换部102在步骤s102中,针对在步骤s101中决定的hdr的亮度值,决定与该hdr的亮度值预先建立了关联的与显示器的亮度范围对应的显示器亮度值,进行将与hdr的亮度范围对应的hdr的亮度值转换为与显示器的亮度范围对应的显示器亮度值的第一亮度转换。

此外,转换装置100在步骤s102之前,取得包含影像(内容)的亮度的最大值(cpl:内容峰值亮度、contentpeakluminance)以及影像的平均亮度值(cal:内容平均亮度、contentaverageluminance)中的至少一方的内容亮度信息,作为与hdr信号相关的信息。cpl(第一最大亮度值)例如是与构成hdr影像的多个图像对应的亮度值之中的最大值。此外,cal例如是与构成hdr影像的多个图像对应的亮度值的平均即平均亮度值。

此外,转换装置100在步骤s102之前,从显示装置200取得显示装置200的显示器特性信息。另外,显示器特性信息是表示显示装置200能够显示的亮度的最大值(dpl)、显示装置200的显示模式(参照后述)、输入输出特性(显示装置所对应的eotf)等显示装置200的显示特性的信息。

此外,转换装置100也可以将推荐显示设定信息(参照后述,以下也称为“设定信息”)发送给显示装置200。

接着,转换装置100的逆亮度转换部103进行与显示装置200的显示模式相应的逆亮度转换。由此,逆亮度转换部103进行将与显示器的亮度范围对应的亮度值转换为与sdr的亮度范围(0~100〔nit〕)对应的亮度值的第二亮度转换(s103)。细节在后面叙述。也就是说,逆亮度转换部103针对在步骤s102中得到的显示器亮度值,决定与该显示器亮度值预先建立了关联的作为与以100nit为最大值的sdr的亮度范围对应的第三亮度值的对应于sdr的亮度值(以下称为“sdr的亮度值”),进行将与显示器的亮度范围对应的显示器亮度值转换为与sdr的亮度范围对应的sdr的亮度值的第二亮度转换。

并且,转换装置100的逆sdr的eotf转换部104通过进行逆sdr的eotf转换,生成模拟hdr影像(s104)。也就是说,逆sdr的eotf转换部104使用作为将hdr的亮度范围中的亮度值和多个第三码值建立了关联的第三关系信息的sdr(标准动态范围:standarddynamicrange)的逆eotf(电光传递函数:electro-opticaltransferfunction),对所决定的sdr的亮度值进行量化,决定通过量化得到的第三码值,将与sdr的亮度范围对应的sdr的亮度值转换为作为表示第三码值的第三亮度信号的sdr信号,从而生成模拟hdr信号。另外,第三码值是对应于sdr的码值,以下称为“sdr的码值”。也就是说,sdr信号被表示为:使用将sdr的亮度范围中的亮度值和多个sdr的码值建立了关联的sdr的逆eotf、将影像的亮度值量化从而得到的sdr的码值。并且,转换装置100将在步骤s104中生成的模拟hdr信号(sdr信号)输出至显示装置200。

转换装置100对将hdr信号逆量化从而得到的hdr的亮度值,进行第一亮度转换以及第二亮度转换,从而生成对应于模拟hdr的sdr的亮度值,将sdr的亮度值使用sdr的eotf进行量化,从而生成对应于模拟hdr的sdr信号。另外,sdr的亮度值是对应于sdr的0~100nit的亮度范围内的数值,但进行基于显示器的亮度范围的转换,所以是与对hdr的亮度值进行使用了hdr的eotf以及sdr的eotf的亮度转换从而得到的对应于sdr的0~100nit的亮度范围内的亮度值不同的数值。

接着,使用图29说明显示装置200进行的显示方法。另外,显示方法包含以下说明的步骤s105~步骤s108。

首先,显示装置200的显示设定部201使用从转换装置100取得的设定信息,设定显示装置200的显示设定(s105)。在此,显示装置200是sdrtv。设定信息是表示对显示装置推荐的显示设定的信息,是表示怎样对模拟hdr影像进行eotf、以怎样的设定来显示则能够显示美观的影像的信息(也就是说,用于将显示装置200的显示设定切换为最佳的显示设定的信息)。设定信息例如包含显示装置中的输出时的伽马曲线特性、客厅模式(正常模式)和动态模式等显示模式、背光(明亮度)的数值等。此外,也可以将促使用户通过手动操作来变更显示装置200的显示设定的消息显示在显示装置200(以下也称为“sdr显示器”)。细节在后面叙述。

另外,显示装置200在步骤s105之前,取得sdr信号(模拟hdr信号)、和表示在显示影像时对显示装置200推荐的显示设定的设定信息。

此外,显示装置200在步骤s106之前取得sdr信号(模拟hdr信号)即可,也可以在步骤s105之后取得。

接着,显示装置200的sdr的eotf转换部202对所取得的模拟hdr信号进行sdr的eotf转换(s106)。也就是说,sdr的eotf转换部202对sdr信号(模拟hdr信号),使用sdr的eotf来进行逆量化。由此,sdr的eotf转换部202将sdr信号所示的sdr的码值转换为sdr的亮度值。

并且,显示装置200的亮度转换部203进行与显示装置200中设定的显示模式相应的亮度转换。由此,亮度转换部203进行将与sdr的亮度范围(0~100〔nit〕)对应的sdr的亮度值转换为与显示器的亮度范围(0~dpl〔nit〕)对应的显示器亮度值的第三亮度转换(s107)。细节在后面叙述。

根据上述,显示装置200在步骤s106以及步骤s107中,将所取得的sdr信号(模拟hdr信号)所示的第三码值,使用在步骤s105中取得的设定信息,转换为与显示器的亮度范围(0~dpl〔nit〕)对应的显示器亮度值。

更具体而言,在从sdr信号(模拟hdr信号)向显示器亮度值的转换中,在步骤s106中,使用将sdr的亮度范围中的亮度值和多个第三码值建立了关联的eotf,针对所取得的sdr信号所示的sdr的码值,决定与sdr的码值在sdr的eotf中建立了关联的sdr的亮度值。

并且,在向显示器亮度值的转换中,在步骤s107中,决定与所决定的sdr的亮度值预先建立了关联的与显示器的亮度范围对应的显示器亮度值,进行将与sdr的亮度范围对应的sdr的亮度值转换为与显示器的亮度范围对应的显示器亮度值的第三亮度转换。

最后,显示装置200的显示部204基于转换后的显示器亮度值,将模拟hdr影像显示在显示装置200(s108)。

[30.第一亮度转换]

接着,使用图30a说明步骤s102的第一亮度转换(hpl→dpl)的细节。图30a是用于说明第一亮度转换的一例的图。

转换装置100的亮度转换部102进行第一亮度转换,该第一亮度转换使用显示器特性信息和hdr影像的内容亮度信息对在步骤s101中得到的线性信号(hdr的亮度值)进行转换。第一亮度转换将hdr的亮度值(输入亮度值)转换为不超过显示器峰值亮度(dpl)的显示器亮度值(输出亮度值)。dpl使用作为显示器特性信息的sdr显示器的最大亮度以及显示模式来决定。显示模式例如是在sdr显示器中较暗地显示的影院模式、较亮地显示的动态模式等的模式信息。显示模式例如在sdr显示器的最大亮度为1500nit,且显示模式为最大亮度的50%的明亮度的模式的情况下,dpl成为750nit。在此,dpl(第二最大亮度值)是在sdr显示器当前设定的显示模式中能够显示的亮度的最大值。也就是说,在第一亮度转换中,使用表示sdr显示器的显示特性的信息即显示器特性信息,决定作为第二最大亮度值的dpl。

此外,在第一亮度转换中,使用内容亮度信息之中的cal和cpl,将cal附近以下的亮度值在转换的前后设为相同,仅对cpl附近以上的亮度值变更亮度值。也就是说,如图30a所示,在第一亮度转换中,在该hdr的亮度值为cal以下的情况下,不转换该hdr的亮度值,而决定该hdr的亮度值作为显示器亮度值,在该hdr的亮度值为cpl以上的情况下,将作为第二最大亮度值的dpl决定为显示器亮度值。

此外,在第一亮度转换中,使用亮度信息之中的hdr影像的峰值亮度(cpl),在hdr的亮度值为cpl的情况下,决定dpl作为显示器亮度值。

另外,在第一亮度转换中,也可以如图30b那样,将在步骤s101中得到的线性信号(hdr的亮度值)以限幅为不超过dpl的值的方式进行转换。通过进行这样的亮度转换,能够简化转换装置100中的处理,实现装置的缩小化、低功率化、处理的高速化。另外,图30b是用于说明第一亮度转换的其他一例的图。

[31-1.第二亮度转换]

接着,使用图31说明步骤s103的第二亮度转换(dpl→100〔nit〕)的细节。图31是用于说明第二亮度转换的图。

转换装置100的逆亮度转换部103对通过步骤s102的第一亮度转换转换后的显示器的亮度范围(0~dpl〔nit〕)的显示器亮度值,实施与显示模式相应的逆亮度转换。逆亮度转换是用于使得在进行了与sdr显示器的显示模式相应的亮度转换处理(步骤s107)的情况下能够取得步骤s102处理后的显示器的亮度范围(0~dpl〔nit〕)的显示器亮度值的处理。也就是说,第二亮度转换是第三亮度转换的逆亮度转换。

通过上述的处理,第二亮度转换将显示器的亮度范围的显示器亮度值(输入亮度值)转换为sdr的亮度范围的sdr的亮度值(输出亮度值)。

在第二亮度转换中,根据sdr显示器的显示模式来切换转换式。例如,在sdr显示器的显示模式为正常模式的情况下,亮度转换为与显示器亮度值成正比例的正比例值。此外,在第二亮度转换中,在sdr显示器的显示模式是与正常模式相比使高亮度像素更亮且使低亮度像素更暗的动态模式的情况下,通过使用该逆函数,从而低亮度像素的sdr的亮度值被亮度转换为比与显示器亮度值成正比例的正比例值高的值,高亮度像素的sdr的亮度值被亮度转换为比与显示器亮度值成正比例的正比例值低的值。也就是说,在第二亮度转换中,针对在步骤s102中决定的显示器亮度值,使用与表示sdr显示器的显示特性的信息即显示器特性信息相应的亮度关系信息,决定与该显示器亮度值建立了关联的亮度值作为sdr的亮度值,根据显示器特性信息来切换亮度转换处理。在此,与显示器特性信息相应的亮度关系信息是例如图31所示的按sdr显示器的每个显示参数(显示模式)决定的、将显示器亮度值(输入亮度值)和sdr的亮度值(输出亮度值)建立了关联的信息。

[31-2.第三亮度转换]

接着,使用图32说明步骤s107的第三亮度转换(100→dpl〔nit〕)的细节。图32是用于说明第三亮度转换的图。

显示装置200的亮度转换部203将sdr的亮度范围(0~100〔nit〕)的sdr的亮度值根据在步骤s105中设定的显示模式转换为(0~dpl〔nit〕)。本处理以成为s103的每个模式的逆亮度转换的逆函数的方式进行处理。

在第三亮度转换中,根据sdr显示器的显示模式来切换转换式。例如,在sdr显示器的显示模式为正常模式的情况下(也就是说,所设定的显示参数为与正常模式对应的参数的情况下),显示器亮度值被亮度转换为与sdr的亮度值成正比例的正比例值。此外,在第三亮度转换中,在sdr显示器的显示模式是与正常模式相比使高亮度像素更亮且使低亮度像素更暗的动态模式的情况下,低亮度像素的显示器亮度值被亮度转换为比与sdr的亮度值成正比例的正比例值低的值,高亮度像素的显示器亮度值被亮度转换为比与sdr的亮度值成正比例的正比例值高的值。也就是说,在第三亮度转换中,针对步骤s106中决定的sdr的亮度值,使用与表示sdr显示器的显示设定的显示参数相应的亮度关系信息,决定与该sdr的亮度值预先建立了关联的亮度值作为显示器亮度值,根据显示参数切换亮度转换处理。在此,与显示参数相应的亮度关系信息例如是如图32所示的按sdr显示器的每个显示参数(显示模式)决定的、将sdr的亮度值(输入亮度值)和显示器亮度值(输出亮度值)建立了关联的信息。

[32.显示设定]

接着,使用图33说明步骤s105的显示设定的细节。图33是表示显示设定的详细的处理的流程图。

sdr显示器的显示设定部201在步骤s105中,进行下述的步骤s201~步骤s208的处理。

首先,显示设定部201使用设定信息,判定在sdr显示器中设定的eotf(sdr显示器用eotf)是否与在生成模拟hdr影像(sdr信号)时设想的eotf匹配(s201)。

显示设定部201在判定为在sdr显示器中设定的eotf与设定信息所示的eotf(与模拟hdr影像匹配的eotf)不同的情况下(s201中是),判定能否在系统侧切换sdr显示器用eotf(s202)。

显示设定部201在判定为能够切换的情况下,使用设定信息,将sdr显示器用eotf切换为适当的eotf(s203)。

根据步骤s201~步骤s203,在显示设定的设定(s105)中,将在sdr显示器中设定的eotf设定为与所取得的设定信息相应的推荐eotf。此外,由此,在步骤s105之后进行的步骤s106中,能够使用推荐eotf决定sdr的亮度值。

在判定为不能在系统侧切换的情况下(s202中否),将促使用户通过手动操作来变更eotf的消息显示在画面中(s204)。例如,将“请将显示伽马设定为2.4”这样的消息显示在画面中。也就是说,显示设定部201在显示设定的设定(s105)中不能切换在sdr显示器中设定的eotf的情况下,将用于促使用户将在sdr显示器中设定的eotf(sdr显示器用eotf)切换为推荐eotf的消息显示在sdr显示器上。

接着,在sdr显示器上,显示模拟hdr影像(sdr信号),但在显示之前使用设定信息判定sdr显示器的显示参数是否符合设定信息(s205)。

显示设定部201在判定为在sdr显示器中设定的显示参数与设定信息不同的情况下(s205中是),判定能否切换sdr显示器的显示参数(s206)。

显示设定部201在判定为能够切换sdr显示器的显示参数的情况下(s206中是),与设定信息相应地切换sdr显示器的显示参数(s207)。

根据步骤s204~步骤s207,在显示设定的设定(s105)中,将在sdr显示器中设定的显示参数设定为与所取得的设定信息相应的推荐显示参数。

在判定为不能在系统侧切换的情况下(s206中否),将促使用户通过手动操作来变更在sdr显示器中设定的显示参数的消息显示在画面中(s208)。例如,将“请将显示模式设为动态模式,将背光设为最大”这样的消息显示在画面中。也就是说,在设定(s105)中不能切换在sdr显示器中设定的显示参数的情况下,将用于促使用户将在sdr显示器中设定的显示参数切换为推荐显示参数的消息显示在sdr显示器上。

[33.变形例1]

以上那样,作为本申请中公开的技术的例示说明了实施方式。但是,本申请中的技术不限定于此,还能够应用于适当进行了变更、置换、附加、省略等之后的实施方式一。此外,还能够将上述实施方式中说明的各结构要素组合并设为新的实施方式。

因此,以下例示其他实施方式。

hdr影像例如是蓝光盘、dvd、互联网的动态图像分发站点、广播、hdd内的影像。

转换装置100(hdr→模拟hdr转换处理部)也可以存在于盘播放器、盘刻录机、机顶盒、电视、个人计算机、智能电话的内部。转换装置100也可以存在于互联网内的服务器装置的内部。

显示装置200(sdr显示部)例如是电视、个人计算机、智能电话。

关于转换装置100取得的显示器特性信息,也可以从显示装置200使用hdmi或其他通信协议经由hdmi线缆、lan线缆来取得。作为转换装置100取得的显示器特性信息,也可以经由互联网取得显示装置200的机型信息等中包含的显示器特性信息。此外,也可以是用户进行手动操作,将显示器特性信息设定至转换装置100。此外,取得转换装置100的显示器特性信息既可以在生成模拟hdr影像(步骤s101~s104)时的紧前,也可以在设备的初始设定时、连接显示器时的定时。例如,取得显示器特性信息既可以在向显示器亮度值转换的紧前进行,也可以在转换装置100通过hdmi线缆最初与显示装置200连接的定时进行。

此外,hdr影像的cpl、cal既可以针对一个内容存在一个,也可以按每个场景存在。也就是说,在转换方法中,也可以取得与影像的多个场景分别对应、并且按每个该场景包含与构成该场景的多个图像对应的亮度值之中的最大值即第一最大亮度值以及与构成该场景的多个图像对应的亮度值的平均即平均亮度值中的至少一方的亮度信息(cpl、cal),在第一亮度转换中,针对多个场景中的各个场景,根据与该场景对应的亮度信息来决定显示器亮度值。

此外,cpl以及cal既可以同捆于与hdr影像相同的介质(蓝光盘、dvd等),也可以是转换装置100从互联网取得等从与hdr影像不同的地点取得。也就是说,既可以将包含cpl以及cal的至少一方的亮度信息作为影像的元信息来取得,也可以经由网络来取得。

此外,在转换装置100的第一亮度转换(hpl→dpl)中,也可以不使用cpl、cal、以及显示器峰值亮度(dpl),而是使用固定值。此外,也可以设为能够从外部变更该固定值。此外,cpl、cal以及dpl也可以在几种间切换,例如,dpl也可以仅设为200nit、400nit、800nit这3种,也可以使用与显示器特性信息最接近的值。

此外,hdr的eotf也可以不是smpte2084,也可以使用其他种类的hdr的eotf。此外,hdr影像的最大亮度(hpl)也可以不是10000nit,例如也可以是4000nit或1000nit。

此外,码值的比特宽度例如也可以是16、14、12、10、8bit。

此外,逆sdr的eotf转换根据显示器特性信息来决定,但也可以使用(能够从外部进行变更的)固定的转换函数。逆sdr的eotf转换例如使用由rec.itu-rbt.1886规定的函数。此外,也可以将逆sdr的eotf转换的种类缩减为几种,选择与显示装置200的输入输出特性最接近的来使用。

此外,显示模式也可以设为使用固定的模式,也可以不被包含于显示器特性信息之中。

此外,转换装置100也可以不发送设定信息,也可以在显示装置200中设为固定的显示设定,也可以不变更显示设定。在该情况下,不需要显示设定部201。此外,设定信息也可以是表示是否为模拟hdr影像的标志信息,例如,也可以在是模拟hdr影像的情况下变更为显示得最亮的设定。也就是说,在显示设定的设定(s105)中,也可以在所取得的设定信息示出如下信号的情况下,将显示装置200的明亮度设定切换为显示得最亮的设定,该信号表示是使用dpl转换的模拟hdr影像。

[34.变形例2]

此外,转换装置100的第一亮度转换(hpl→dpl)例如通过下面的算式来转换。

在此,l表示被归一化为0~1的亮度值,s1、s2、a、b、m是基于cal、cpl以及dpl设定的值。ln是自然对数。v是被归一化为0~1的转换后的亮度值。在如图30a的例子那样,将cal设为300nit,将cpl设为2000nit,将dpl设为750nit,设为直至cal+50nit为止不转换,对350nit以上进行转换的情况下,各自的值例如成为如下的值。

s1=350/10000

s2=2000/10000

m=750/10000

a=0.023

b=s1-a*ln(s1)=0.112105

也就是说,在第一亮度转换中,sdr的亮度值在平均亮度值(cal)与第一最大亮度值(cpl)之间的情况下,使用自然对数来决定与该hdr的亮度值对应的显示器亮度值。

[35.效果等]

通过使用hdr影像的内容峰值亮度、内容平均亮度等信息来转换hdr影像,能够根据内容改变转换式,能够进行转换以使尽量保持hdr的级别。此外,能够抑制过暗、过亮这样的不良影响。具体而言,通过将hdr影像的内容峰值亮度映射到显示器峰值亮度,从而尽量保持级别。此外,通过不改变平均亮度附近以下的像素值,使得整体的明亮度不改变。

此外,通过使用sdr显示器的峰值亮度值以及显示模式来转换hdr影像,能够根据sdr显示器的显示环境来改变转换式,能够与sdr显示器的性能相应,将有hdr感的影像(模拟hdr影像)以与原来的hdr影像同样的级别、明亮度来显示。具体而言,通过sdr显示器的最大亮度以及显示模式来决定显示器峰值亮度,对hdr影像进行转换以使不超过该峰值亮度值,从而直至在sdr显示器中能够显示的明亮度为止基本不减少hdr影像的级别地进行显示,而对不能显示的明亮度降低亮度值直至能够显示的明亮度为止。

通过以上,削减不能显示的明亮度信息,而不降低能够显示的明亮度的级别,能够以与原来的hdr影像接近的形式来显示。例如,转换为抑制到峰值亮度1000nit的模拟hdr影像以用于峰值亮度1000nit的显示器,从而维持整体的明亮度,根据显示器的显示模式来转换亮度值。为此,根据显示器的显示模式,变更亮度的转换式。如果在模拟hdr影像中允许比显示器的峰值亮度大的亮度,则存在将该较大的亮度置换为显示器侧的峰值亮度并显示的情况,在该情况下与原来的hdr影像相比整体变暗。相反若将比显示器的峰值亮度小的亮度作为最大亮度转换,则将该较小的亮度置换为显示器侧的峰值亮度,与原来的hdr影像相比整体变亮。而且为了比显示器侧的峰值亮度小,无法最大限度使用与显示器的级别相关的性能。

此外,在显示器侧,使用设定信息来切换显示设定,从而能够更好地显示模拟hdr影像。例如,在将明亮度设定得较暗的情况下不能进行高亮度显示,所以损失hdr感。在该情况下变更显示设定或者显示促使变更的消息,从而最大限度发挥显示器的性能,能够显示高级别的影像。

(整体的汇总)

以上,基于实施方式说明了本申请的一个或多个方式所涉及的再现方法以及再现装置,但本申请不限定于本实施方式。只要不脱离本申请的主旨,将本领域技术人员想到的各种变形施加于本实施方式而得到的方式、将不同的实施方式中的结构要素组合来构筑的方式等,也可以被包含于本申请的一个或多个方式的范围内。

例如,在上述各实施方式中,也可以是各结构要素由电路等专用的硬件构成,或通过执行适于各结构要素的软件程序来实现。各结构要素也可以通过能够由cpu或处理器等程序执行部读出并执行在硬盘或半导体存储器等记录介质中记录的软件程序来实现。

工业实用性

本申请能够应用于内容数据生成装置、蓝光设备等影像流传输装置、或电视等影像显示装置。

标记说明

100转换装置

101eotf转换部

102亮度转换部

103逆亮度转换部

104逆sdr的eotf转换部

200显示装置

201显示设定部

202sdr的eotf转换部

203亮度转换部

204显示部

400数据输出装置

401视频解码部

402外部元取得部

403hdr元解释部

404hdr控制信息生成部

405dr转换部

406hdmi输出部

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1