由再现装置执行的方法以及再现装置与流程

专利2022-06-29  95


本申请是2015年6月18日提交的,中国专利申请号为201580019779.4(国际申请号pct/jp2015/003050),发明名称为“数据再现方法以及再现装置”的专利申请的分案申请。

本申请涉及数据再现方法以及再现装置。



背景技术:

以往,公开了用于改善能够显示的亮度级的图像信号处理装置(例如参照专利文献1)。

在先技术文献

专利文献

专利文献1:日本特开2008-167418号公报



技术实现要素:

本申请的一方式所涉及的由再现装置执行的方法,其特征在于,包括以下步骤:从记录介质取得包括菜单或字幕的第一亮度范围的图形;在显示所述第一亮度范围的影像时,通过使用用于所述第一亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第一图形,并且在所述第一亮度范围的所述影像上重叠所述第一图形并向显示器输出;在显示比所述第一亮度范围宽的第二亮度范围的影像时,通过使用用于所述第二亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第二图形,并且在所述第二亮度范围的所述影像上重叠所述第二图形并向所述显示器输出;所述第一亮度范围是sdr即标准动态范围,所述第二亮度范围是hdr即高动态范围。

本申请的一方式所涉及的再现装置,其特征在于,具备:一个或多个存储器;以及处理器,所述处理器执行:从记录介质取得包括菜单或字幕的第一亮度范围的图形;在显示所述第一亮度范围的影像时,通过使用用于所述第一亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第一图形,并且在所述第一亮度范围的所述影像上重叠所述第一图形并向显示器输出;在显示比所述第一亮度范围宽的第二亮度范围的影像时,通过使用用于所述第二亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第二图形,并且在所述第二亮度范围的所述影像上重叠所述第二图形并向所述显示器输出;所述第一亮度范围是sdr即标准动态范围,所述第二亮度范围是hdr即高动态范围。

本申请的一方式所涉及的数据再现方法在第一亮度范围的影像上重叠地显示图形,判定再现装置是否具有将比所述第一亮度范围窄的第二亮度范围的第一图形转换为所述第一亮度范围的第二图形的功能,在所述再现装置具有所述功能的情况下,通过所述再现装置将所述第一图形转换为所述第二图形,在所述影像上重叠地显示所述第二图形,在所述再现装置不具有所述功能的情况下,在所述影像上重叠地显示与所述第二图形不同的第三图形。

另外,这些概括性的或具体的方式也可以通过系统、方法、集成电路、计算机程序或计算机可读取的cd-rom等记录介质来实现,也可以通过系统、方法、集成电路、计算机程序或记录介质的任意的组合来实现。

附图说明

图1是用于说明影像技术的进步的图。

图2是表示eotf(电光传递函数:electro-opticaltransferfunction)的例子的图。

图3是在内容中存放的亮度信号的码值的决定方法、以及在再现时根据码值对亮度值进行复原的过程的说明图。

图4是关于bd(蓝光盘:blu-ray(注册商标,下同)disc)的制作、以及对bd进行再现的播放器的说明图。

图5a是将bd播放器和tv通过hdmi(注册商标,下同)连接的例子,是表示tv对应于hdr显示的情况的图。

图5b是将bd播放器和tv通过hdmi连接的例子,是表示tv不对应于hdr显示的情况的图。

图6是表示转换装置中的重映射处理部的结构的框图。

图7是表示转换装置中的重映射处理的流程的图。

图8是表示在内容内包含视频以及图形的流各一条的情况下的hdr以及sdr的组合例的图。

图9是表示使用与视频母盘共通的eotf来生成图形母盘的图。

图10a是用于说明在图形母盘的生成中,映射为sdr信号的情况的图。

图10b是用于说明在图形母盘的生成中,映射为hdr信号的情况的图。

图11是表示生成创作(authoring)的图形信号的生成部的结构的框图。

图12是表示创作的图形信号的生成方法的流程图。

图13是用于说明在内容中导入新的影像表现时的影像制作、分发方式、以及显示装置的关系的图。

图14是用于说明导入hdr时的母盘、分发方式、以及显示装置的关系的图。

图15a是用于说明sdrtv内的sdr显示处理的图。

图15b是用于说明峰值亮度为300nit的sdrtv内的sdr显示处理的图。

图16是用于说明从hdr向sdr的转换的图。

图17a是用于说明在hdr盘中仅存放有对应于hdr的hdr信号的状况1的图。

图17b是用于说明在hdr盘中存放有对应于hdr的hdr信号以及对应于sdr的sdr信号的状况2的图。

图18是用于说明从hdr向模拟hdr的转换处理的图。

图19a是表示与hdr以及sdr分别对应的eotf(电光传递函数:electro-opticaltransferfunction)的例子的图。

图19b是表示与hdr以及sdr分别对应的逆eotf的例子的图。

图20a是表示在hdrtv内,对hdr信号进行转换并进行hdr显示的显示处理的一例的图。

图20b是表示使用对应于hdr的再现装置和sdrtv进行hdr显示的显示处理的一例的图。

图20c是表示对经由标准接口相互连接的对应于hdr的再现装置和sdrtv进行hdr显示的显示处理的一例的图。

图21是表示实施方式的转换装置以及显示装置的结构的框图。

图22是表示通过实施方式的转换装置以及显示装置进行的转换方法以及显示方法的流程图。

图23a是用于说明第一亮度转换的图。

图23b是用于说明第一亮度转换的其他一例的图。

图24是用于说明第二亮度转换的图。

图25是表示显示设定的详细的处理的流程图。

图26是用于说明第三亮度转换的图。

图27是用于说明从hdr向模拟hdr的转换处理的图。

图28是用于说明双盘的再现动作的图。

图29是表示bd的种类的图。

图30是进一步详细示出bd的种类的图。

图31是表示在bd以及双流盘的各盘中记录的视频流和图形流的组合的一例的图。

图32是表示在bd以及双流盘的各盘中记录的视频流和图形流的组合的一例的图。

图33是表示图形流的一例的图。

图34是表示在bd以及双流盘的各盘中记录的视频流和图形流的组合的一例的图。

图35是表示图形流的一例的图。

图36是表示图形流的一例的图。

图37是表示在bd以及双流盘的各盘中记录的视频流和图形流的组合的一例的图。

图38是表示图形流的一例的图。

图39是表示再现装置的处理的流程图。

具体实施方式

本申请的一方式所涉及的数据再现方法在第一亮度范围的影像上重叠地显示图形,其中,判定再现装置是否具有将比所述第一亮度范围窄的第二亮度范围的第一图形转换为所述第一亮度范围的第二图形的功能;在所述再现装置具有所述功能的情况下,通过所述再现装置将所述第一图形转换为所述第二图形,在所述影像上重叠地显示所述第二图形;在所述再现装置不具有所述功能的情况下,在所述影像上重叠地显示与所述第二图形不同的第三图形。

据此,该数据再现方法能够根据再现装置是否具有对图形的亮度范围进行变更的功能来进行不同的动作。由此,该数据再现方法能进行与再现装置的功能相应的适当的动作。

例如,在所述再现装置不具有所述功能的情况下,使用所述第一亮度范围用的颜色转换表来生成所述第三图形。

据此,能够抑制图形影像难以视觉辨认的情况。

例如,所述第三图形也可以是所述第一图形。

例如,在所述判定中,也可以通过所述再现装置执行再现控制程序,从而判定所述再现装置是否具有所述功能。

例如,在所述判定中,也可以通过所述再现控制程序对存放有表示所述再现装置是否具有所述功能的信息的寄存器进行确认,从而判定所述再现装置是否具有所述功能。

此外,本申请的一方式所涉及的再现装置在第一亮度范围的影像上重叠地显示图形,其中,所述再现装置具备:判定部,判定是否具有将比所述第一亮度范围窄的第二亮度范围的第一图形转换为所述第一亮度范围的第二图形的功能;转换部,在所述再现装置具有所述功能的情况下,将所述第一图形转换为所述第二图形;以及显示部,在所述再现装置具有所述功能的情况下,在所述影像上重叠地显示所述第二图形,在所述再现装置不具有所述功能的情况下,在所述影像上重叠地显示与所述第二图形不同的第三图形。

据此,该再现装置能够根据该再现装置是否具有对图形的亮度范围进行变更的功能来进行不同的动作。由此,该再现装置能进行与该再现装置的功能相应的适当的动作。

另外,这些概括性的或具体的方式也可以通过系统、方法、集成电路、计算机程序或计算机可读取的cd-rom等记录介质来实现,也可以通过系统、方法、集成电路、计算机程序或记录介质的任意的组合来实现。

此外,关于上述特征,主要在[5-3.再现装置的动作]中进行说明。

此外,以下说明的实施方式都表示本申请的一具体例。以下的实施方式所示的数值、形状、材料、结构要素、结构要素的配置位置以及连接方式、步骤、步骤的顺序等是一例,意图不在于限定本申请。此外,关于以下的实施方式中的结构要素之中表示最上位概念的独立权利要求中没有记载的结构要素,作为任意的结构要素来说明。

以下参照附图,具体说明本申请的一方式所涉及的再现方法以及再现装置。

另外,以下说明的实施方式都表示本申请的一具体例。以下的实施方式所示的数值、形状、材料、结构要素、结构要素的配置位置以及连接方式,步骤、步骤的顺序等是一例,意图不在于限定本申请。此外,关于以下的实施方式中的结构要素之中表示最上位概念的独立权利要求中没有记载的结构要素,作为任意的结构要素来说明。

(实施方式一)

本申请涉及用于将作为亮度范围高的高亮度信号的hdr(高动态范围:highdynamicrange)信号,显示在与作为最大亮度值为100nit的亮度范围的通常亮度信号的sdr(标准动态范围:standarddynamicrange)信号对应的tv(电视)、投影仪、平板电脑、智能电话等显示装置的图像转换/再现方法、装置。

[1-1.背景]

首先,使用图1说明影像技术的变迁。图1是用于说明影像技术的进步的图。

此前,为了提高影像的画质,主要着眼于扩大显示像素数,从标准清晰度(standarddefinition)(sd)的720×480像素的影像,普及高清晰度(highdefinition)(hd)的1920×1080像素的所谓2k影像。

近年,致力于进一步提高影像的画质,开始导入超高清晰度(ultrahighdefinition)(uhd)的3840×1920像素、或4k的4096×1920像素的所谓4k影像。

并且,与通过导入4k提高影像的分辨率一起,研究了进行动态范围扩展、色域的扩大、或帧速率的追加、提高等,从而提高影像的画质。

其中,关于动态范围,作为维持以往的影像中的暗部级别,而且对应于为了将在现行的tv信号中不能表现的镜面反射光等明亮的光以更接近于现实的明亮度来表现而将最大亮度值扩大后的亮度范围的方式,关注hdr(高动态范围:highdynamicrange)。具体而言,此前的tv信号对应的亮度范围的方式被称为sdr(标准动态范围:standarddynamicrange),最大亮度值为100nit,相对于此,在hdr中设想将最大亮度值扩大到1000nit以上。hdr在smpte((美国)电影电视工程师协会:societyofmotionpicture&televisionengineers)、itu-r(国际电信联盟无线电通信组:internationaltelecommunicationsunionradiocommunicationssector)等中,正在进行标准化。

作为hdr的具体的应用之处,与hd、uhd同样,设想在广播、封装介质(蓝光盘等)、互联网分发等中使用。

另外,以下在对应于hdr的影像中,该影像的亮度由hdr的亮度范围的亮度值构成,将该影像的亮度值被量化从而得到的亮度信号称为hdr信号。在对应于sdr的影像中,该影像的亮度由sdr的亮度范围的亮度值构成,将该影像的亮度值被量化从而得到的亮度信号称为sdr信号。

[1-2.关于eotf]

在此,使用图2说明eotf。

图2是表示与hdr以及sdr分别对应的eotf(电光传递函数:electro-opticaltransferfunction)的例子的图。

eotf一般而言被称为伽马曲线,表示亮度值与码值的对应,是用于将亮度值量化并转换为码值的曲线。也就是说,eotf是表示亮度值与多个码值的对应关系的关系信息。例如,在将对应于sdr的影像的亮度值以8比特的级别(灰度)的码值来表现的情况下,100nit为止的亮度范围中的亮度值被量化而被映射到0-255这256个整数值。也就是说,基于eotf来量化,从而将100nit为止的亮度范围的亮度值(对应于sdr的影像的亮度值)转换为作为8比特的码值的sdr信号。在对应于hdr的eotf(以下称为“hdr的eotf”)中,能够表现比对应于sdr的eotf(以下称为“sdr的eotf”)高的亮度值,例如在图2中,亮度的最大值(峰值亮度)为1000nits。也就是说,hdr的亮度范围包含sdr的全部亮度范围,hdr的峰值亮度比sdr的峰值亮度大。hdr的亮度范围是从sdr的亮度范围的最大值即例如100nit将最大值扩大至1000nit后的亮度范围。此外,hdr信号例如以10比特的级别来表现。

[1-3.eotf的使用方法]

图3是在内容中存放的亮度信号的码值的决定方法、以及在再现时根据码值对亮度值进行复原的过程的说明图。

本例中的表示亮度的亮度信号是对应于hdr的hdr信号。调整(grading、调色)后的图像通过hdr的eotf的逆函数被量化,与该图像的亮度值对应的码值被决定。基于该码值来进行图像编码等,生成视频以及图形各自的基本流。在再现时,对于基本流的解码结果,基于hdr的eotf进行逆量化,由此每像素的亮度值被复原。

[1-4.bd的流结构]

之前叙述了在bd等光盘或广播等中有可能使用hdr的情况。以下使用图4说明作为利用hdr的介质的一例的bd。

图4是说明关于bd的制作、以及对bd进行再现的播放器的说明图。

如图4所示,制作过程包含创作蓝光(blu-ray)内容、制成存放了所创作的蓝光内容的bd等。在蓝光内容中,除了视频以及音频之外,还包含用于生成字幕、菜单的图形数据、以及用于提供菜单的显示、用户操作中的互动的脚本数据等。在脚本数据中,存在通过规定的指令来控制的被称为hdmv(高清电影:highdefinitionmovie)的形式、和通过java(注册商标,下同)程序来控制的被称为bd-j(blu-raydiscjava)的形式。在创作中,对视频以及音频进行编码,将这些编码流、和表示字幕、菜单等的图形数据复用到m2ts形式的传送流,且生成播放列表、ep映射等再现控制所需的管理信息。并且,由创作生成的数据被存放至bd。

在bd播放器中,参照管理信息将再现所需的视频以及音频的基本流与图形数据分离解码,并进行输出。在此,视频与字幕、菜单等图形在将相互的平面合成后被输出。在视频的分辨率和图形的分辨率不同的情况下,与视频的分辨率相应地将图形向上转换(upconversion)后,将视频和图形合成。

[1-5.装置的结构)]

在再现对应于hdr的内容(影像)时,tv等显示器接收来自bd播放器等的再现装置的输出信号并进行显示。以下将对应于hdr的影像的显示记作“hdr显示”,将对应于sdr的影像的显示记作“sdr显示”。此时,若显示器对应于hdr显示,则再现装置输出的输出信号是对应于hdr的hdr信号即可。另一方面,在显示器不对应于hdr显示的情况下,再现装置将输出信号转换为对应于sdr的sdr信号并进行输出。显示器不对应于hdr显示的情况是显示器仅对应于sdr显示的情况。

图5a以及图5b分别是将bd播放器200和tv300、310通过hdmi连接的例子,图5a示出tv300对应于hdr显示的情况,图5b示出tv310不对应于hdr显示的情况。另外,在图5a中的bd播放器200和图5b中的bd播放器200中,结构不同,但在图5a的情况下,是示出了不进行后述的重映射的情况的图,省略进行重映射的转换装置210的结构并进行图示。

在图5a中,bd播放器200从媒体100读入视频以及图形并进行解码。并且,bd播放器200将解码后的视频以及图形的hdr数据进行合成,将通过合成而生成的hdr信号通过hdmi输出至对应于hdr显示的tv300。

另一方面,在图5b中,tv310不对应于hdr显示,所以bd播放器200在合成视频以及图形前,使用hdr的eotf以及sdr的eotf,将视频以及图形的hdr数据分别重映射到sdr数据。并且,bd播放器200合成重映射后的视频以及图形的sdr数据,将通过合成而生成的sdr信号通过hdmi输出给不对应于hdr显示的tv310。

另外,重映射是在存在第一eotf以及第二eotf这2种eotf时,将第一eotf中的第一码值转换为第二eotf中的第二码值的处理。在图5b的情况下,重映射是在从hdr至sdr的转换中,将hdr的eotf的码值转换为sdr的eotf的码值的处理。

也就是说,在图5b的情况下,bd播放器200包含转换装置210,该转换装置210具备:取得部,取得与第一亮度范围(hdr)对应的第一亮度信号(hdr信号);转换部,使用hdr的eotf和sdr的eotf,根据由取得部取得的第一亮度信号所示的码值,决定通过针对第二亮度范围(sdr)的量化建立了对应的码值作为转换后码值,将第一亮度信号转换为表示转换后码值的第二亮度信号。更具体而言,转换部在向第二亮度信号的转换中,使用第一eotf和第二eotf,根据由取得部取得的第一亮度信号所示的码值,决定对应的第二码值作为转换后码值。另外,bd播放器200进行如下转换方法,该转换方法进行与转换装置210的各部对应的步骤。另外,在图5b中,例示了转换装置210将hdr信号转换为sdr信号并进行输出的情况,但也可以如后述那样,将sdr信号转换为hdr信号并进行输出。

在sdr中不能表现超过100nit的亮度,所以在转换装置210中进行的从hdr向sdr的转换处理中,至少需要基于预先定义的转换表、或与内容中的图像的亮度分布等相应的自适应处理,来将在hdr信号中超过100nit的亮度与对应于该亮度的sdr的码值建立对应。此外,在转换处理中,设想为:在如字幕那样亮度值离散的数据与视频中,需要不同的转换规则。此外,重映射以帧为单位发生,所以特别是在4k等高分辨率的图像中处理量大。进而,在重映射的前后亮度值变化,所以存在重映射后的图像成为印象与制作者的意图不同的图像的可能性。

在将对应于hdr的影像(内容)的hdr信号转换为sdr信号并进行输出时,关于图形也需要与视频同样的重映射。还设想如下课题:由于对视频和图形这双方进行重映射,因而重映射所花费的处理量变大,且有可能被转换为制作者意图之外的亮度值。

[1-6.转换方法、以及转换装置]

图6是表示转换装置中的重映射处理部的结构的框图。

重映射处理部220被包含于转换装置210。如图6所示,重映射处理部220具有eotf判定部221、处理对象判定部222、亮度值可变重映射部223、亮度值固定重映射部224、以及暂时对内容(影像)的流进行存储的存储部225。

eotf判定部221判定从媒体100读入的内容(视频以及图形)的信号所对应的eotf、与应向显示影像的tv300、310等显示器输出的输出信号所对应的eotf是否不同。另外,输出信号所对应的eotf在此是指tv等显示器所对应且能够显示的输出信号的eotf。

处理对象判定部222判定处理对象是视频、或不是视频(是图形)。

亮度值可变重映射部223将在存储部225中存储的流的信号通过亮度值可变重映射(第二重映射)转换为与输出信号的eotf对应的信号。

亮度值固定重映射部224将在存储部225中存储的流的信号通过亮度值固定重映射(第一重映射)转换为与输出信号的eotf对应的信号。

图7是表示转换装置中的重映射处理的流程的图。

如图7所示,在重映射处理中,首先,eotf判定部221判定所取得的内容(视频以及图形)的信号所对应的eotf、与应向显示器输出的输出信号所对应的eotf是否不同(步骤101)。若在步骤101中判定为“是”,则为了将内容的信号所对应的亮度范围的方式转换为输出信号所对应的eotf,进行步骤102~步骤104的处理。另一方面,若在步骤101中判定为“否”,则结束重映射处理,不进行重映射而是输出内容的信号。像这样,通过进行步骤101,输出信号的形式基于显示影像的tv等显示器是否对应于hdr显示来决定。另外,输出信号的形式也可以与正编等主视频相应地决定。

接着,处理对象判定部222判定处理对象是视频、或不是视频(是图形)(步骤102)。若在步骤102中判定为“是”,则亮度值可变重映射部223将内容的信号通过亮度值可变重映射(第二重映射)转换为与输出信号的eotf对应的信号(步骤103)。

另一方面,若在步骤102中判定为“否”,则亮度值固定重映射部224通过亮度值固定重映射(第一重映射)转换为与输出信号的eotf对应的信号(步骤104)。

像这样,在内容(影像)为视频的情况下,进行第二重映射,在内容(影像)为图形的情况下,进行第一重映射。

在步骤103的亮度值可变重映射和步骤104的亮度值固定重映射中,分别预先准备表示hdr以及sdr的亮度值的对应关系的表。在该表中,在hdr的eotf以及sdr的eotf中,也可以分别记述了码值与存在的亮度值之间的对应关系。通过这样,必然存在与重映射后的eotf的亮度值对应的码值,所以不需要在与亮度值对应的码值不存在的情况下,搜索具有与该亮度值最接近的亮度值的码值。

此外,也可以在亮度值可变重映射(第二重映射)中,基于图像内、或每个场景的亮度分布等,自适应地切换多个表、或按每个内容逐次制成最佳的表等。也就是说,例如,也可以在重映射后的亮度值即第二亮度值的决定中,从表示第一亮度范围中的亮度值与第二亮度表现中的亮度值的关系的多个关系信息(表)中,选择与影像的场景相应的关系信息,使用所选择的关系信息,根据所决定的第一亮度值决定第二亮度值。

在步骤103的亮度值可变重映射中,通过如下的步骤进行处理。在该情况下,设为从与第一eotf对应的第一亮度信号转换为与第二eotf对应的第二亮度信号。

(1)决定与第一eotf的码值对应的第一亮度值(重映射前的亮度值)。

(2)决定与在(1)中决定的第一亮度值对应的第二eotf的第二亮度值(重映射后的亮度值)。

(3)决定与在(2)中决定的第二亮度值对应的第二eotf的码值。

在步骤104的亮度值固定重映射中,通过如下的步骤进行处理。在该情况下,设为从与第一eotf对应的第一亮度信号转换为与第二eotf对应的第二亮度信号。

(1)决定与第一eotf的码值对应的亮度值。

(2)决定与在(1)中决定的亮度值对应的第二eotf的码值。

※在亮度值固定重映射的情况下,在重映射的前后亮度值不变化,所以不需要步骤103中的(2)的处理。

在步骤103以及步骤104的重映射处理完成后,转换装置210将视频以及图形合成并进行输出。也就是说,转换装置210进而,也可以通过进行第一重映射以及第二重映射,将被转换为第二亮度信号的视频以及图形合成并进行输出。

此外,也可以是转换装置210还在通过hdmi等接口输出至显示器时,将用于对输出信号的eotf进行识别的信息作为元信息来发送。也就是说,也可以是转换装置210进而将从所取得的第一亮度信号转换后的第二亮度信号,与用于对第二eotf进行识别的元信息一起进行输出。

[1-7.效果等]

在实施方式一中,在内容的再现中,根据影像的输出目的地是否对应于hdr,决定以hdr或sdr的哪个来输出,与输出形式相应,将影像和图形从sdr向hdr、或从hdr向sdr进行重映射处理。对于图形,应用在重映射的前后亮度值不变化的亮度固定重映射处理,对于影像,应用在重映射的前后亮度值可能变化的亮度可变重映射处理。

关于图形,在重映射的前后亮度不变化,所以能够保持制作者意图的画质。此外,不需要将转换前后eotf之间的亮度值建立对应,能够削减重映射所涉及的处理量。

(实施方式二)

[2-1.内容的生成方法]

在制成视频、图形的母盘时,为了反映制作者的意图,需要对由摄像机摄影的数字图像、胶片的扫描图像修正每个像素的亮度、配色,即图3所示的称为调整的工序,在调整中需要高级的技巧(know-how),且所需的工时也很庞大。从而,期望所生成的母盘的数目被抑制为最小限度。另一方面,在hdr和sdr中,峰值亮度不同,一般而言需要对各自生成不同的母盘。图8是表示在内容内包含视频以及图形的流各一条的情况下的hdr以及sdr的组合例的图。在该例中,存在4种组合,对视频以及图形分别需要hdr以及sdr的母盘。

另一方面,在影像内容中hdr的效果最大的是电影的正编等视频,关于字幕等图形若与视频进行比较则认为效果较小。虽然如此,对于图形也与视频同样地制成hdr以及sdr的母盘,这存在内容制作负荷大的课题。

因此,在本申请的图形的母盘生成中,如图9所示,将sdr以及hdr的母盘共通化。图9是表示使用与视频母盘共通的eotf生成图形母盘的图。因此,使图形的母盘中的亮度范围与sdr的亮度范围一致。即,图形母盘中的峰值亮度设为sdr的亮度范围的上限值以下。在将内容内的图形数据映射到对应于sdr的sdr信号的情况下,基于sdr的eotf决定每像素的码值,在映射到对应于hdr的hdr信号的情况下,基于hdr的eotf来决定每像素的码值。

图10a是用于说明在图形母盘的生成中映射到sdr信号的情况的图。在该情况下,由于sdr的亮度范围与图形的母盘的亮度范围一致,因此sdr的eotf中的码值的定义域全部成为有效。

图10b是用于说明在图形母盘的生成中映射到hdr信号的情况的图。在该情况下,仅相当于sdr的峰值亮度的码值以下的码值成为有效。

另外,在将图形母盘映射到hdr信号的情况下,也可以在基本流、或播放列表等管理信息中存放表示峰值亮度为sdr的亮度范围内的识别信息。在上述的重映射处理中,能够基于该识别信息决定应用亮度值固定重映射或亮度值可变重映射的哪个。此外,也可以在通过hdmi等接口进行输出时,存放该识别信息作为输出接口的元信息。

图形的eotf能够与视频相应地决定。即,若视频为hdr则图形数据也设为hdr,若视频为sdr则图形数据也设为sdr。或,图形数据也可以始终设为sdr。

另外,在存在多个视频时也能够应用同样的想法。例如,在存在相对于主视频重叠、或并排显示的副视频的情况下,能够使副视频的eotf与主视频相应等。

[2-2.数据生成方法、以及装置]

图11是表示生成创作的图形信号的生成部的结构的框图。

生成部400具备gfx调整部410、判定部420、hdr信号生成部430和sdr信号生成部440。

gfx调整部410对图形母盘进行调整以使亮度值成为sdr的峰值亮度以下。

判定部420判定与图形同时显示的视频是否是hdr。

hdr信号生成部430在由判定部420判定为与图形同时显示的视频是hdr的情况下,使用hdr的eotf将图形的亮度值转换为码值。

sdr信号生成部440在由判定部420判定为与图形同时显示的视频不是hdr(也就是说是sdr)的情况下,使用sdr的eotf将图形的亮度值转换为码值。

图12是表示创作的图形信号的生成方法的流程图。

首先,gfx调整部410对图形母盘进行调整以使亮度值成为sdr的峰值亮度以下(步骤201)。

接着,判定部420判定与图形同时显示的视频是否是hdr(步骤202)。

hdr信号生成部430在步骤202中判定为“是”的情况下,使用hdr的eotf将图形的亮度值转换为码值(步骤203)。

sdr信号生成部440在步骤202中判定为“否”的情况下,使用sdr的eotf将图形的亮度值转换为码值(步骤204)。

另外,在步骤202中,判定是否是与视频同时显示的图形,例如,若图形为字幕,则针对该字幕被重叠的视频进行判定。此外,关于菜单等不与视频同时显示的图形,也可以基于正编的视频是否是hdr等来判定。另外,为了使用与以往的面向2k的格式相同的图形,也可以设为始终使用sdr的eotf来转换,而不进行步骤202的判定处理,而是始终进行步骤204的处理。

像这样,将图形的亮度范围设为sdr的峰值亮度以下,从而存在如下优点:能够进行在重映射的前后使亮度值不变化地进行重映射的亮度值固定重映射。

另外,对hdr母盘的亮度进行调整以使其在sdr的范围内,这针对图形以外的数据也是可能的。此外,特别是在字幕等图形中,使用比sdr的峰值亮度高的亮度值的优点小。从而,在从sdr向hdr的重映射中,也可以与调整是否在sdr的范围内无关地应用亮度值固定重映射。

[2-3.效果等]

在本实施方式二所涉及的生成装置以及生成方法中,在创作除了视频之外还包含图形等影像数据的内容时,关于视频以外的影像数据,使用在hdr和sdr中共通的母盘。因此,进行调整以使母盘中的峰值亮度成为sdr的亮度范围内。

由此,能够使视频以外的母盘在hdr以及sdr中共通,所以能够削减生成母盘所涉及的工时。

(其他实施方式)

以上那样,作为在本申请中公开的技术的例示说明了实施方式。但是,本申请中的技术不限定于此,还能够应用于适当进行了变更、置换、附加、省略等而成的实施方式。此外,还能够将上述实施方式中说明的各结构要素组合并设为新的实施方式。

因此,以下例示其他实施方式。

例如,在上述的各实施方式中,作为从转换装置210输出的输出信号的形式,说明了hdr以及sdr这2种。在以hdmi等进行输出时,作为标准规格通过hdr或sdr的任一个进行输出,但例如在tv中内置了bd播放器的情况、在tv中接收广播并再现、或在平板电脑等中视听ott服务时,能够从转换装置210对显示设备直接输出信号。

此时,在hdr标准中的峰值亮度与显示设备中能够显示的峰值亮度不同的情况下,也可以针对对应于hdr的内容内的数据进行与显示设备的eotf相应的重映射处理。此外,关于对显示设备以hdmi输入的sdr、hdr的信号,也可以对与显示设备的峰值亮度相应的eotf再次进行重映射处理。也就是说,在该情况下,也可以对于所取得的第一亮度信号,使用第一eotf、以及将第二亮度信号的输出目的地的显示设备中能够显示的亮度范围设为第二亮度范围的第二eotf,进行向第二亮度信号的转换。

此外,在上述的各实施方式中没有提及,但在bd的创作中,能够指定以播放列表内的播放项目为单位再现的视频、音频、或图形。像这样,在指定了以播放项目为单位再现的视频、音频、或图形的情况下,在hdmi等接口中,如果以播放项目为单位切换hdr和sdr,则有时在播放项目的边界要进行复位处理,不能无缝地再现。从而,也可以是在无缝连接的播放项目间切换hdr和sdr的情况下,在bd播放器等中具备的转换装置中进行重映射处理,以使输出信号的eotf与紧前的播放项目相同。或在无缝连接的播放项目间,禁止eotf的切换,进而将表示不切换eotf的识别信息存放在播放列表等管理信息中。

此外,上述的各实施方式的创作或转换方法等不仅能够应用于光盘那样的封装介质,还能够应用于广播、ott(基于互联网:overthetop)服务中。例如,在广播中,除了广播节目的正编之外,还能够将通过广播传送的数据广播或经由通信网络取得的内容相对于正编的视频重叠显示。此时,预想正编的视频中hdr的节目与sdr的节目混合存在,对于与正编分别取得的内容中的图形、视频,也能够基于此前说明的方法限制峰值亮度并进行重映射处理。

(实施方式三)

[3-1.母盘生成、分发方式、以及显示装置的关系]

图13是用于说明向内容导入新的影像表现时的影像制作、分发方式、以及显示装置的关系的图。

在为了提高影像的画质而导入新的影像表现(像素数的增加等)的情况下,如图13所示,(1)需要变更影像制作侧的面向家庭娱乐的母盘。与其相应,(2)广播、通信、封装介质等分发方式,(3)显示该影像的tv、投影仪等显示装置也需要更新。

[3-2.导入hdr时的母盘、分发方式、以及显示装置的关系]

为了使用户在家庭内观赏与新的影像表现对应的内容(例如高亮度影像内容(hdr内容)),需要新导入对应于hdr的分发方式以及对应于hdr的显示装置这双方。也就是说,为了在家庭内观赏与新的影像表现对应的内容,用户需要准备与新的影像表现对应的分发方式以及显示装置。这在从sd的影像代替为hd的影像、从hd的影像代替为3d的影像、从hd的影像代替为uhd(4k)的影像时等导入新的影像表现的情况下也无法避免。

因此,向新的影像表现变更需要重新购买高价且在大小/重量等方面也不易于置换的tv,依赖于具有新功能的显示装置(例如tv)的普及。在介质侧、内容侧最初也都不能进行较大的投资,所以新的影像表现的普及大多变慢。

因此,如图14所示,关于hdr,为了完全发挥hdr本来的影像表现,预想需要重新购买与对应于hdr的影像的显示(以下称为“hdr显示”)对应的tv(以下称为“hdrtv”)。

[3-3.sdrtv]

仅与对应于sdr的影像的显示(以下称为“sdr显示”)对应的tv(以下称为“sdrtv”)通常被输入亮度值到100nit为止的输入信号。因此,若sdrtv的显示能力为100nit则足够表现输入信号的亮度值。但是,sdrtv实际上具有与视听环境(较暗的房间:影院模式,明亮的房间:动态模式等)相应地再现最佳的亮度值的影像的功能,sdrtv多具有能够表现200nit以上的影像的能力。也就是说,这样的sdrtv通过选择与视听环境相应的显示模式,能够显示直到显示能力的最大亮度(例如300nit)为止的影像。

但是,在被输入至sdrtv的sdr方式的输入信号中,输入信号的亮度上限被决定为100nit,所以只要如以往那样使用sdr方式的输入接口,就难以将sdrtv具有的超过100nit的高亮度的影像再现能力使用于hdr信号的再现(参照图15a以及图15b)。

[3-4.hdr→sdr转换]

设想如下情况:通过对应于hdr的广播、经由通信网络的动态图像分发、或对应于hdr的封装介质(例如对应于hdr的蓝光盘)等分发方式分发的高亮度影像内容(以下也称为“hdr内容”或“hdr影像”)经由对应于hdr的再现装置(例如通信stb(机顶盒:settopbox)、蓝光设备、iptv再现设备),通过sdrtv被输出。在sdrtv中再现hdr内容的情况下,实现将对应于hdr的hdr信号转换为以100nit为最大值的sdr亮度范围的sdr信号的“hdr→sdr转换”,以使在sdrtv中影像能够正确地显示。由此,sdrtv能够使用转换后的sdr信号,进行从hdr影像转换从而得到的sdr影像的显示(参照图16)。

其中,在该情况下,用户尽管购买了对应于hdr的内容(例如蓝光盘、hdriptv内容)和对应于hdr的再现装置(例如蓝光设备,对应于hdr的iptv再现设备),在sdrtv中也只能以sdr的影像表现(sdr表现)来观赏影像。也就是说,即使准备hdr内容和对应于hdr的再现设备,在没有对应于hdr的显示装置(例如hdrtv)而只有sdrtv的情况下,不能以hdr的影像表现(hdr表现)对影像进行视听。

因此,若用户不能准备hdrtv,即使购买hdr内容、传输介质(再现装置),也不能知道hdr的价值(也就是说hdr由于其高画质因而相对于sdr具有的优越性)。像这样,用户若没有hdrtv,就无法知道hdr的价值,所以可以说hdr内容、对应于hdr的分发方式的普及根据hdrtv的普及速度来决定。

[3-5.实现hdr→sdr转换的两个方式]

在使用蓝光盘(bd)将hdr信号传送给tv的情况下,能够如下述的图17a以及图17b所示那样设想两个状况。图17a是用于说明在对应于hdr的bd中仅存放有对应于hdr的hdr信号的状况1的图。图17b是用于说明在对应于hdr的bd中存放有对应于hdr的hdr信号以及对应于sdr的sdr信号的状况2的图。

如图17a所示,在状况1中,使hdrtv显示由蓝光设备再现了bd而得到的影像的情况下,在再现了对应于hdr的bd(以下称为“hdrbd”)时和在再现了对应于sdr的bd(以下称为“sdrbd”)时,蓝光设备都不对bd中存放的亮度信号进行转换,而是直接输出至hdrtv。并且,hdrtv对hdr信号和sdr信号都能够进行显示处理,所以进行与所输入的亮度信号相应的显示处理,显示hdr影像或sdr影像。

另一方面,在状况1中,在使sdrtv显示由蓝光设备再现了bd而得到的影像的情况下,在再现了hdrbd时,蓝光设备进行从hdr信号向sdr信号进行转换的转换处理,将通过转换处理得到的sdr信号输出至sdrtv。此外,在再现了sdrbd时,蓝光设备不会对bd中存放的sdr信号进行转换,而是直接输出至sdrtv。由此,sdrtv显示sdr影像。

此外,如图17b所示,在状况2中,在使hdrtv显示由蓝光设备再现了bd而得到的影像的情况下,与状况1同样。

另一方面,在状况2中,在使sdrtv显示由蓝光设备再现了bd而得到的影像的情况下,在再现了hdrbd时与再现了sdrbd时,蓝光设备都不对bd中存放的sdr信号进行转换,而是直接输出至sdrtv。

在状况1和状况2下即使购买了hdrbd和对应于hdr的蓝光设备,若没有hdrtv,则都只能观赏sdr影像。从而,用户为了观看hdr影像而需要hdrtv,预测对应于hdr的蓝光设备或hdrbd的普及花费时间。

[3-6.hdr→模拟hdr转换]

根据以上,可以说为了促进hdr的普及,能够不等待hdrtv的普及地推进hdr内容、分发方式的商业化是重要的。因此,如果能够在已有的sdrtv中,将hdr信号不是作为sdr影像,而是作为hdr影像或比sdr影像更靠近于hdr影像的模拟hdr影像来视听,则用户即使不购买hdrtv,也能够视听与sdr影像明显不同的接近于hdr影像的更高画质的影像。也就是说,用户如果能够以sdrtv视听模拟hdr影像,则即使不准备hdrtv,而只准备hdr内容、hdr分发设备,就能够视听比sdr影像更高画质的影像。总之,能够以sdrtv视听模拟hdr影像,可能成为用户购买hdr内容、hdr分发设备的动机(参照图18)。

为了实现使sdrtv显示模拟hdr影像,在以hdr分发方式连接了sdrtv的结构中再现了hdr内容时,为了能够以sdrtv正确地显示hdr内容的影像,需要替代将hdr信号转换为sdr影像信号,而是实现“hdr→模拟hdr转换处理”,该“hdr→模拟hdr转换处理”能够使用以sdrtv的100nit为最大值的影像信号的输入,生成用于显示sdrtv具有的显示能力的最大亮度、例如200nit以上的影像的模拟hdr信号,并将所生成的模拟hdr信号传送给sdrtv。

[3-7.关于eotf]

在此,使用图19a以及图19b说明eotf。

图19a是表示与hdr以及sdr分别对应的eotf(电光传递函数:electro-opticaltransferfunction)的例子的图。

eotf一般而言被称为伽马曲线,表示码值与亮度值的对应,用于将码值转换为亮度值。也就是说,eotf是表示多个码值与亮度值的对应关系的关系信息。

此外,图19b是表示与hdr以及sdr分别对应的逆eotf的例子的图。

逆eotf表示亮度值与码值的对应,与eotf相反地用于对亮度值进行量化并转换为码值。即,逆eotf是表示亮度值与多个码值的对应关系的关系信息。例如,在将对应于hdr的影像的亮度值以10比特的级别的码值来表现的情况下,到10000nit为止的hdr的亮度范围中的亮度值被量化并映射到0~1023为止的1024个整数值。也就是说,通过基于逆eotf来量化,将到10000nit为止的亮度范围的亮度值(对应于hdr的影像的亮度值)转换为10比特的码值即hdr信号。在对应于hdr的eotf(以下称为“hdr的eotf”)或对应于hdr的逆eotf(以下称为“hdr的逆eotf”)中,能够表现比对应于sdr的eotf(以下称为“sdr的eotf”)或对应于sdr的逆eotf(以下称为“sdr的逆eotf”)更高的亮度值,例如,在图19a以及图19b中,亮度的最大值(峰值亮度)为10000nit。也就是说,hdr的亮度范围包含sdr的全部亮度范围,hdr的峰值亮度比sdr的峰值亮度大。hdr的亮度范围是从sdr的亮度范围的最大值即100nit将最大值扩大至10000nit后的亮度范围。

例如,hdr的eotf以及hdr的逆eotf作为一例而存在由(美国)电影电视工程师协会(smpte)标准化的smpte2084。

另外,在以后的说明书中,在图19a以及图19b中记载的从0nit至作为峰值亮度的100nit为止的亮度范围有时被记作第一亮度范围。同样,在图19a以及图19b中记载的从0nit至作为峰值亮度的10000nit为止的亮度范围有时被记作第二亮度范围。

[3-8.模拟hdr的必要性]

接着,使用图20a~图20c说明模拟hdr的必要性。

图20a是表示在hdrtv内,转换hdr信号并进行hdr显示的显示处理的一例的图。

如图20a所示,在显示hdr影像的情况下,有时即使显示装置为hdrtv,也不能原样显示hdr的亮度范围的最大值(峰值亮度(hpl(hdrpeakluminance):例1500nit))。在该情况下,进行亮度转换,使得使用hdr的eotf进行逆量化后的线性信号与该显示装置的亮度范围的最大值(峰值亮度(dpl(displaypeakiuminance):例750nit))相应。并且,将进行亮度转换从而得到的影像信号输入至显示装置,从而能够显示与显示装置的极限即最大值的亮度范围相应的hdr影像。

图20b是表示使用对应于hdr的再现装置和sdrtv进行hdr显示的显示处理的一例的图。

如图20b所示,在显示hdr影像的情况下,若显示装置为sdrtv,则利用所显示的sdrtv的亮度范围的最大值(峰值亮度(dpl:例300nit))超过100nit的情况,通过图20b的对应于hdr的再现装置(蓝光设备)内的“hdr→模拟hdr转换处理”,进行在hdrtv内进行的“hdr的eotf转换”和使用了sdrtv的亮度范围的最大值即dpl(例:300nit)的“亮度转换”,只要能够将进行“亮度转换”从而得到的信号直接输入至sdrtv的“显示装置”,则即使使用sdrtv,也能够实现与hdrtv相同的效果。

但是,在sdrtv中,由于没有用于将这样的信号从外部直接输入的手段,所以不能实现。

图20c是表示使用经由标准接口相互连接的对应于hdr的再现装置和sdrtv,进行hdr显示的显示处理的一例的图。

如图20c所示,通常需要使用sdrtv所具备的输入接口(hdmi等),将能够得到图20b的效果的信号输入至sdrtv。在sdrtv中,经由输入接口输入的信号依次经过“sdr的eotf转换”和“按每个模式的亮度转换”和“显示装置”,显示与该显示装置的最大值的亮度范围相应的影像。因此,在对应于hdr的蓝光设备内,生成能够取消在sdrtv中在输入接口的紧后经过的“sdr的eotf转换”和“按每个模式的亮度转换”的信号(模拟hdr信号)。也就是说,在对应于hdr的蓝光设备内,在“hdr的eotf转换”和使用了sdrtv的峰值亮度(dpl)的“亮度转换”的紧后,进行“每个模式的逆亮度转换”和“逆sdr的eotf转换”,从而模拟地实现与将“亮度转换”紧后的信号输入至“显示装置”的情况(图20c的虚线箭头)相同的效果。

[3-9.转换装置以及显示装置]

图21是表示实施方式的转换装置以及显示装置的结构的框图。图22是表示由实施方式的转换装置以及显示装置进行的转换方法以及显示方法的流程图。

如图21所示,转换装置500具备hdr的eotf转换部501、亮度转换部502、逆亮度转换部503、以及逆sdr的eotf转换部504。此外,显示装置600具备显示设定部601、sdr的eotf转换部602、亮度转换部603、以及显示部604。

关于转换装置500以及显示装置600的各结构要素的详细的说明在转换方法以及显示方法的说明中进行。

[3-10.转换方法以及显示方法]

使用图22说明转换装置500进行的转换方法。另外,转换方法包含以下说明的步骤s101~步骤s104。

首先,转换装置500的hdr的eotf转换部501取得进行了逆hdr的eotf转换而得到的hdr影像。转换装置500的hdr的eotf转换部501对于所取得的hdr影像的hdr信号,实施hdr的eotf转换(s101)。由此,hdr的eotf转换部501将所取得的hdr信号转换为表示亮度值的线性信号。hdr的eotf例如有smpte2084。

接着,转换装置500的亮度转换部502对由hdr的eotf转换部501转换后的线性信号,进行使用显示器特性信息和内容亮度信息进行转换的第一亮度转换(s102)。在第一亮度转换中,将与hdr的亮度范围对应的亮度值(以下称为“hdr的亮度值”)转换为与显示器的亮度范围对应的亮度值(以下称为“显示器亮度值”)。细节在后面叙述。

根据上述,hdr的eotf转换部501作为取得部来发挥作用,取得作为表示影像的亮度值被量化从而得到的码值的第一亮度信号的hdr信号。此外,hdr的eotf转换部501以及亮度转换部502作为转换部来发挥作用,将由取得部取得的hdr信号所示的码值,转换为基于显示器(显示装置600)的亮度范围决定的、与小于hdr的亮度范围的最大值(hpl)且大于100nit的最大值(dpl)的显示器的亮度范围对应的显示器亮度值。

更具体而言,hdr的eotf转换部501在步骤s101中,使用所取得的hdr信号和hdr的eotf,针对作为所取得的hdr信号所示的第一码值的hdr的码值,决定与hdr的码值在hdr的eotf中建立了关联的hdr的亮度值。另外,hdr信号表示使用将hdr的亮度范围中的亮度值与多个hdr的码值建立了关联的hdr的逆eotf将影像(内容)的亮度值量化从而得到的hdr的码值。

此外,亮度转换部502在步骤s102中,针对在步骤s101中决定的hdr的亮度值,决定与该hdr的亮度值预先建立了关联的与显示器的亮度范围对应的显示器亮度值,进行将与hdr的亮度范围对应的hdr的亮度值转换为与显示器的亮度范围对应的显示器亮度值的第一亮度转换。

此外,转换装置500在步骤s102之前,取得包含影像(内容)的亮度的最大值(cpl:内容峰值亮度、contentpeakluminance)以及影像的平均亮度值(cal:内容平均亮度、contentaverageluminance)中的至少一方的内容亮度信息,作为与hdr信号相关的信息。cpl(第一最大亮度值)例如是与构成hdr影像的多个图像对应的亮度值之中的最大值。此外,cal例如是与构成hdr影像的多个图像对应的亮度值的平均即平均亮度值。

此外,转换装置500在步骤s102之前,从显示装置600取得显示装置600的显示器特性信息。另外,显示器特性信息是表示显示装置600能够显示的亮度的最大值(dpl)、显示装置600的显示模式(参照后述)、输入输出特性(显示装置所对应的eotf)等显示装置600的显示特性的信息。

此外,转换装置500也可以将推荐显示设定信息(参照后述,以下也称为“设定信息”)发送至显示装置600。

接着,转换装置500的逆亮度转换部503进行与显示装置600的显示模式相应的逆亮度转换。由此,逆亮度转换部503进行将与显示器的亮度范围对应的亮度值转换为与sdr的亮度范围(0~100〔nit〕)对应的亮度值的第二亮度转换(s103)。细节在后面叙述。也就是说,逆亮度转换部503针对在步骤s102中得到的显示器亮度值,决定与该显示器亮度值预先建立了关联的、作为与以100nit为最大值的sdr的亮度范围对应的第三亮度值的对应于sdr的亮度值(以下称为“sdr的亮度值”),进行将与显示器的亮度范围对应的显示器亮度值转换为与sdr的亮度范围对应的sdr的亮度值的第二亮度转换。

并且,转换装置500的逆sdr的eotf转换部504通过进行逆sdr的eotf转换来生成模拟hdr影像(s104)。也就是说,逆sdr的eotf转换部504使用作为将hdr的亮度范围中的亮度值与多个第三码值建立了关联的第三关系信息的sdr(标准动态范围:standarddynamicrange)的逆eotf(电光传递函数:electro-opticaltransferfunction),对所决定的sdr的亮度值进行量化,决定通过量化得到的第三码值,将与sdr的亮度范围对应的sdr的亮度值转换为作为表示第三码值的第三亮度信号的sdr信号,从而生成模拟hdr信号。另外,第三码值是对应于sdr的码值,以下称为“sdr的码值”。也就是说,使用将sdr的亮度范围中的亮度值与多个sdr的码值建立了关联的sdr的逆eotf,将影像的亮度值量化从而得到的sdr的码值来表示sdr信号。并且,转换装置500将在步骤s104中生成的模拟hdr信号(sdr信号)输出至显示装置600。

转换装置500针对将hdr信号逆量化从而得到的hdr的亮度值,进行第一亮度转换以及第二亮度转换,从而生成对应于模拟hdr的sdr的亮度值,使用sdr的eotf对sdr的亮度值进行量化,从而生成对应于模拟hdr的sdr信号。另外,sdr的亮度值是对应于sdr的0~100nit的亮度范围内的数值,但由于进行基于显示器的亮度范围的转换,所以是与对hdr的亮度值进行使用了hdr的eotf以及sdr的eotf的亮度转换从而得到的对应于sdr的0~100nit的亮度范围内的亮度值不同的数值。

接着,使用图22说明显示装置600进行的显示方法。另外,显示方法包含以下说明的步骤s105~步骤s108。

首先,显示装置600的显示设定部601使用从转换装置500取得的设定信息,设定显示装置600的显示设定(s105)。在此,显示装置600是sdrtv。设定信息是表示对显示装置推荐的显示设定的信息,是表示怎样对模拟hdr影像进行eotf、以怎样的设定来显示能够显示美观的影像的信息(也就是说,用于将显示装置600的显示设定切换为最佳的显示设定的信息)。设定信息例如包含显示装置中的输出时的伽马曲线特性、客厅模式(正常模式)和动态模式等显示模式、背光(明亮度)的数值等。此外,也可以将促使用户通过手动操作来变更显示装置600的显示设定的消息显示在显示装置600(以下也称为“sdr显示器”)上。细节在后面叙述。

另外,显示装置600在步骤s105之前,取得sdr信号(模拟hdr信号)、和表示在显示影像时对显示装置600推荐的显示设定的设定信息。

此外,显示装置600在步骤s106之前进行sdr信号(模拟hdr信号)的取得即可,也可以在步骤s105之后进行。

接着,显示装置600的sdr的eotf转换部602对所取得的模拟hdr信号进行sdr的eotf转换(s106)。也就是说,sdr的eotf转换部602使用sdr的eotf对sdr信号(模拟hdr信号)进行逆量化。由此,sdr的eotf转换部602将sdr信号所示的sdr的码值转换为sdr的亮度值。

并且,显示装置600的亮度转换部603进行与在显示装置600中设定的显示模式相应的亮度转换。由此,亮度转换部603进行将与sdr的亮度范围(0~100〔nit〕)对应的sdr的亮度值转换为与显示器的亮度范围(0~dpl〔nit〕)对应的显示器亮度值的第三亮度转换(s107)。细节在后面叙述。

根据上述,显示装置600在步骤s106以及步骤s107中,将所取得的sdr信号(模拟hdr信号)所示的第三码值,使用在步骤s105中取得的设定信息,转换为与显示器的亮度范围(0~dpl〔nit〕)对应的显示器亮度值。

更具体而言,在从sdr信号(模拟hdr信号)向显示器亮度值的转换中,在步骤s106中,使用将sdr的亮度范围中的亮度值与多个第三码值建立了关联的eotf,针对所取得的sdr信号所示的sdr的码值,决定与sdr的码值以sdr的eotf建立了关联的sdr的亮度值。

并且,在向显示器亮度值的转换中,在步骤s107中,决定与所决定的sdr的亮度值预先建立了关联的与显示器的亮度范围对应的显示器亮度值,进行将与sdr的亮度范围对应的sdr的亮度值转换为与显示器的亮度范围对应的显示器亮度值的第三亮度转换。

最后,显示装置600的显示部604基于转换后的显示器亮度值,将模拟hdr影像显示在显示装置600上(s108)。

[3-11.第一亮度转换]

接着,使用图23a说明步骤s102的第一亮度转换(hpl→dpl)的细节。图23a是用于说明第一亮度转换的一例的图。

转换装置500的亮度转换部502进行将步骤s101中得到的线性信号(hdr的亮度值)使用显示器特性信息和hdr影像的内容亮度信息进行转换的第一亮度转换。第一亮度转换将hdr的亮度值(输入亮度值)转换为不超过显示器峰值亮度(dpl)的显示器亮度值(输出亮度值)。使用作为显示器特性信息的sdr显示器的最大亮度以及显示模式来决定dpl。显示模式例如是在sdr显示器中较暗地显示的影院模式或较亮地显示的动态模式等的模式信息。在显示模式例如是sdr显示器的最大亮度为1500nit且显示模式成为最大亮度50%的明亮度的模式的情况下,dpl成为750nit。在此,dpl(第二最大亮度值)是在sdr显示器当前设定的显示模式中能够显示的亮度的最大值。也就是说,在第一亮度转换中,使用表示sdr显示器的显示特性的信息即显示器特性信息,决定作为第二最大亮度值的dpl。

此外,在第一亮度转换中,使用内容亮度信息之中的cal和cpl,cal附近以下的亮度值在转换的前后设为相同,仅对cpl附近以上的亮度值变更亮度值。也就是说,如图23a所示,在第一亮度转换中,在该hdr的亮度值为cal以下的情况下,不转换该hdr的亮度值,决定该hdr的亮度值作为显示器亮度值,在该hdr的亮度值为cpl以上的情况下,决定作为第二最大亮度值的dpl作为显示器亮度值。

此外,在第一亮度转换中,使用亮度信息之中的hdr影像的峰值亮度(cpl),在hdr的亮度值为cpl的情况下,决定dpl作为显示器亮度值。

另外,在第一亮度转换中,也可以如图23b那样,将在步骤s101中得到的线性信号(hdr的亮度值),以限幅为不超过dpl的值的方式进行转换。通过进行这样的亮度转换,能够简化转换装置500中的处理,实现装置的缩小化、低功率化、处理的高速化。另外,图23b是用于说明第一亮度转换的其他一例的图。

[3-12.第二亮度转换]

接着,使用图24说明步骤s103的第二亮度转换(dpl→100〔nit〕)的细节。图24是用于说明第二亮度转换的图。

转换装置500的逆亮度转换部503对通过步骤s102的第一亮度转换转换后的显示器的亮度范围(0~dpl〔nit〕)的显示器亮度值,实施与显示模式相应的逆亮度转换。逆亮度转换是用于在进行了与sdr显示器的显示模式相应的亮度转换处理(步骤s107)的情况下能够取得步骤s102处理后的显示器的亮度范围(0~dpl〔nit〕)的显示器亮度值的处理。也就是说,第二亮度转换是第三亮度转换的逆亮度转换。

通过上述的处理,第二亮度转换将显示器的亮度范围的显示器亮度值(输入亮度值)转换为sdr的亮度范围的sdr的亮度值(输出亮度值)。

在第二亮度转换中,通过sdr显示器的显示模式来切换转换式。例如,在sdr显示器的显示模式为正常模式的情况下,亮度转换为与显示器亮度值成正比例的正比例值。此外,在第二亮度转换中,在sdr显示器的显示模式是与正常模式相比使得高亮度像素更亮且使得低亮度像素更暗的动态模式的情况下,通过使用该逆函数,从而低亮度像素的sdr的亮度值亮度转换为比与显示器亮度值成正比例的正比例值高的值,高亮度像素的sdr的亮度值亮度转换为比与显示器亮度值成正比例的正比例值低的值。也就是说,在第二亮度转换中,针对在步骤s102中决定的显示器亮度值,使用与表示sdr显示器的显示特性的信息即显示器特性信息相应的亮度关系信息,决定与该显示器亮度值建立了关联的亮度值作为sdr的亮度值,根据显示器特性信息来切换亮度转换处理。在此,与显示器特性信息相应的亮度关系信息例如是如图24所示的按sdr显示器的每个显示参数(显示模式)决定的将显示器亮度值(输入亮度值)与sdr的亮度值(输出亮度值)建立了关联的信息。

[3-13.显示设定]

接着,使用图25说明步骤s105的显示设定的细节。图25是表示显示设定的详细的处理的流程图。

sdr显示器的显示设定部601在步骤s105中,进行下述的步骤s201~步骤s208的处理。

首先,显示设定部601使用设定信息,判定在sdr显示器中设定的eotf(sdr显示器用eotf)是否与在模拟hdr影像(sdr信号)的生成时设想的eotf匹配(s201)。

显示设定部601在判定为在sdr显示器中设定的eotf与设定信息所示的eotf(与模拟hdr影像匹配的eotf)不同的情况下(s201中是),判定是否能够在系统侧切换sdr显示器用eotf(s202)。

显示设定部601在判定为能够切换的情况下,使用设定信息,将sdr显示器用eotf切换为适当的eotf(s203)。

根据步骤s201~步骤s203,在显示设定的设定(s105)中,将在sdr显示器中设定的eotf设定为与所取得的设定信息相应的推荐eotf。此外,由此,在步骤s105之后进行的步骤s106中,能够使用推荐eotf来决定sdr的亮度值。

在判定为系统侧不能切换的情况下(s202中否),将促使用户通过手动操作来变更eotf的消息显示在画面中(s204)。例如,在画面中显示“请将显示伽马设定为2.4”这样的消息。也就是说,显示设定部601在显示设定的设定(s105)中,在不能切换在sdr显示器中设定的eotf的情况下,将用于促使用户将在sdr显示器中设定的eotf(sdr显示器用eotf)切换为推荐eotf的消息显示在sdr显示器上。

接着,在sdr显示器上,显示模拟hdr影像(sdr信号),但在显示之前使用设定信息来判定sdr显示器的显示参数是否符合设定信息(s205)。

显示设定部601在判定为在sdr显示器中设定的显示参数与设定信息不同的情况下(s205中是),判定是否能够切换sdr显示器的显示参数(s206)。

显示设定部601在判定为能够切换sdr显示器的显示参数的情况下(s206中是),与设定信息相应地切换sdr显示器的显示参数(s207)。

根据步骤s204~步骤s207,在显示设定的设定(s105)中,将在sdr显示器中设定的显示参数设定为与所取得的设定信息相应的推荐显示参数。

在判定为在系统侧不能切换的情况下(s206中否),将促使用户通过手动操作来变更在sdr显示器中设定的显示参数的消息显示在画面中(s208)。例如,在画面中显示“请将显示模式设为动态模式,使背光成为最大”这样的消息。也就是说,在设定(s105)中,在不能切换在sdr显示器中设定的显示参数的情况下,将用于促使用户将在sdr显示器中设定的显示参数切换为推荐显示参数的消息显示在sdr显示器上。

[3-14.第三亮度转换]

接着,使用图26说明步骤s107的第三亮度转换(100→dpl〔nit〕)的细节。图26是用于说明第三亮度转换的图。

显示装置600的亮度转换部603将sdr的亮度范围(0~100〔nit〕)的sdr的亮度值根据在步骤s105中设定的显示模式转换为(0~dpl〔nit〕)。本处理以成为s103的每个模式的逆亮度转换的逆函数的方式进行处理。

在第三亮度转换中,通过sdr显示器的显示模式来切换转换式。例如,在sdr显示器的显示模式为正常模式的情况下(也就是说,所设定的显示参数为与正常模式对应的参数的情况下),显示器亮度值被亮度转换为与sdr的亮度值成正比例的正比例值。此外,在第三亮度转换中,在sdr显示器的显示模式是与正常模式相比使高亮度像素更亮且使低亮度像素更暗的动态模式的情况下,低亮度像素的显示器亮度值被亮度转换为比与sdr的亮度值成正比例的正比例值低的值,高亮度像素的显示器亮度值亮度转换为比与sdr的亮度值成正比例的正比例值高的值。也就是说,在第三亮度转换中,针对在步骤s106中决定的sdr的亮度值,使用与表示sdr显示器的显示设定的显示参数相应的亮度关系信息,决定与该sdr的亮度值预先建立了关联的亮度值作为显示器亮度值,根据显示参数来切换亮度转换处理。在此,与显示参数相应的亮度关系信息例如是图26所示的按sdr显示器的每个显示参数(显示模式)决定的、将sdr的亮度值(输入亮度值)与显示器亮度值(输出亮度值)建立了关联的信息。

[3-15.效果等]

通常的sdrtv中输入信号为100nit,但具有能够与视听环境(较暗的房间:影院模式,明亮的房间:动态模式等)相应地进行200nit以上的影像表现的能力。但是,对sdrtv的输入信号的亮度上限被决定为100nit,所以不能直接使用该能力。

在将hdr影像以sdrtv来显示的情况下,利用所显示的sdrtv的峰值亮度超过100nit(通常200nit以上)的情况,不将hdr影像转换为100nit以下的sdr影像,而是进行“hdr→模拟hdr转换处理”,以便一定程度地保持超过100nit的亮度范围的级别。因此,能够使sdrtv显示接近于原来hdr的模拟hdr影像。

在将该“hdr→模拟hdr转换处理”技术应用于蓝光的情况下,如图27所示,在hdr盘中仅存放hdr信号,在蓝光设备上连接了sdrtv的情况下,蓝光设备进行“hdr→模拟hdr转换处理”,将hdr信号转换为模拟hdr信号并传送至sdrtv。由此,sdrtv根据所接收到的模拟hdr信号转换为亮度值,从而能够显示具有模拟的hdr效果的影像。像这样,在没有对应于hdr的tv的情况下,只要准备对应于hdr的bd和对应于hdr的蓝光设备,在sdrtv中,也能够显示比sdr影像更高画质的模拟hdr影像。

从而,以往认为为了观看hdr影像需要对应于hdr的tv,但能够以已有的sdrtv来观看能够实际感到hdr的效果的模拟hdr影像。由此,能够期待对应于hdr的蓝光的普及。

对通过广播、蓝光等封装介质、ott等互联网分发被传送来的hdr信号进行hdr-模拟hdr转换处理,从而转换为模拟hdr信号。由此,能够将hdr信号作为模拟hdr影像以已有的sdrtv来显示。

(实施方式四)

以上那样,作为本申请中公开的技术的例示说明了实施方式一。但是,本申请中的技术不限定于此,还能够应用于适当进行变更、置换、附加、省略等之后的实施方式一。此外,还能够将上述实施方式一中说明的各结构要素组合并设为新的实施方式。

因此,以下将其他实施方式作为实施方式二来例示。

hdr影像例如是蓝光盘、dvd、互联网的动态图像分发站点、广播、hdd内的影像。

转换装置500(hdr→模拟hdr转换处理部)也可以存在于盘播放器、盘刻录机、机顶盒、电视、个人计算机、智能电话的内部。转换装置500也可以存在于互联网内的服务器装置的内部。

显示装置600(sdr显示部)例如是电视、个人计算机、智能电话。

转换装置500取得的显示器特性信息也可以从显示装置600使用hdmi或其他通信协议经由hdmi线缆、lan线缆来取得。作为转换装置500取得的显示器特性信息,也可以经由互联网来取得显示装置600的机型信息等中包含的显示器特性信息。此外,也可以是用户进行手动操作,将显示器特性信息设定至转换装置500。此外,取得转换装置500的显示器特性信息既可以在生成模拟hdr影像(步骤s101~s104)时的紧前,也可以在设备的初始设定时、连接显示器时的定时。例如,取得显示器特性信息既可以在向显示器亮度值转换的紧前进行,也可以在转换装置500通过hdmi线缆最初与显示装置600连接的定时进行。

此外,hdr影像的cpl、cal既可以针对一个内容存在一个,也可以按每个场景存在。也就是说,在转换方法中,也可以取得与影像的多个场景分别对应、并且按每个该场景包含与构成该场景的多个图像对应的亮度值之中的最大值即第一最大亮度值以及与构成该场景的多个图像对应的亮度值的平均即平均亮度值中的至少一方的亮度信息(cpl、cal),在第一亮度转换中,针对多个场景中的各个场景,根据与该场景对应的亮度信息来决定显示器亮度值。

此外,cpl以及cal既可以同捆于与hdr影像相同的介质(蓝光盘、dvd等),也可以是转换装置500从互联网取得等从与hdr影像不同的地点取得。也就是说,既可以将包含cpl以及cal的至少一方的亮度信息作为影像的元信息来取得,也可以经由网络来取得。

此外,在转换装置500的第一亮度转换(hpl→dpl)中,也可以不使用cpl、cal、以及显示器峰值亮度(dpl),而是使用固定值。此外,也可以设为能够从外部变更该固定值。此外,cpl、cal以及dpl也可以在几种间切换,例如,dpl也可以仅设为200nit、400nit、800nit这3种,也可以设为使用与显示器特性信息最接近的值。

此外,hdr的eotf也可以不是smpte2084,也可以使用其他种类的hdr的eotf。此外,hdr影像的最大亮度(hpl)也可以不是10000nit,例如也可以是4000nit或1000nit。

此外,码值的比特宽度例如也可以是16、14、12、10、8bit。

此外,逆sdr的eotf转换根据显示器特性信息来决定,但也可以使用(还能够从外部变更的)固定的转换函数。逆sdr的eotf转换例如也可以使用由rec.itu-rbt.1886规定的函数。此外,也可以将逆sdr的eotf转换的种类缩减为几种,选择与显示装置600的输入输出特性最接近的来使用。

此外,显示模式也可以设为使用固定的模式,也可以不被包含于显示器特性信息之中。

此外,转换装置500也可以不发送设定信息,也可以在显示装置600中设为固定的显示设定,也可以不变更显示设定。在该情况下,不需要显示设定部601。此外,设定信息也可以是表示是否为模拟hdr影像的标志信息,例如,也可以在是模拟hdr影像的情况下变更为显示得最亮的设定。也就是说,在显示设定的设定(s105)中,也可以在所取得的设定信息示出如下信号的情况下,将显示装置600的明亮度设定切换为显示得最亮的设定,该信号表示是使用dpl转换的模拟hdr影像。

此外,转换装置500的第一亮度转换(hpl→dpl)例如通过下面的算式来转换。

在此,l表示归一化为0~1的亮度值,s1、s2、a、b、m是基于cal、cpl以及dpl设定的值。ln是自然对数。v是归一化为0~1的转换后的亮度值。如图23a的例子那样,将cal设为300nit,将cpl设为2000nit,将dpl设为750nit,设为直至cal 50nit为止不进行转换,对350nit以上进行转换的情况下,各自的值例如成为如下的值。

s1=350/10000

s2=2000/10000

m=750/10000

a=0.023

b=s1-a*ln(s1)=0.112105

也就是说,在第一亮度转换中,sdr的亮度值为平均亮度值(cal)与第一最大亮度值(cpl)之间的情况下,使用自然对数来决定与该hdr的亮度值对应的显示器亮度值。

通过使用hdr影像的内容峰值亮度、内容平均亮度等信息来转换hdr影像,能够根据内容来改变转换式,能够以尽量保持hdr的级别的方式进行转换。此外,能够抑制过暗、过亮那样的不良影响。具体而言,通过将hdr影像的内容峰值亮度映射到显示器峰值亮度,从而尽量保持级别。此外,通过不改变平均亮度附近以下的像素值,使得整体的明亮度不变。

此外,通过使用sdr显示器的峰值亮度值以及显示模式来转换hdr影像,能够根据sdr显示器的显示环境来改变转换式,能够与sdr显示器的性能相应,将有hdr感的影像(模拟hdr影像)以与原来的hdr影像同样的级别、明亮度来显示。具体而言,通过sdr显示器的最大亮度以及显示模式来决定显示器峰值亮度,以不超过该峰值亮度值的方式转换hdr影像,直至在sdr显示器中能够显示的明亮度为止基本不减少hdr影像的级别地进行显示,而对不能显示的明亮度降低亮度值直至能够显示的明亮度为止。

通过以上,削减不能显示的明亮度信息,而不降低能够显示的明亮度的级别,能够以与原来的hdr影像接近的形式来显示。例如,转换为抑制到峰值亮度1000nit的模拟hdr影像以用于峰值亮度1000nit的显示器,从而维持整体的明亮度,根据显示器的显示模式来转换亮度值。为此,根据显示器的显示模式,变更亮度的转换式。如果在模拟hdr影像中允许比显示器的峰值亮度大的亮度,则存在将该较大的亮度置换为显示器侧的峰值亮度并显示的情况,在该情况下与原来的hdr影像相比整体变暗。相反若将比显示器的峰值亮度小的亮度作为最大亮度转换,则将该较小的亮度置换为显示器侧的峰值亮度,与原来的hdr影像相比整体变亮。而且为了比显示器侧的峰值亮度小,无法最大限度使用与显示器的级别相关的性能。

此外,在显示器侧,使用设定信息来切换显示设定,从而能够更好地显示模拟hdr影像。例如,在将明亮度设定得较暗的情况下不能进行高亮度显示,所以损失hdr感。在该情况下变更显示设定或者显示促使变更的消息,从而最大限度发挥显示器的性能,能够显示高级别的影像。

在蓝光等内容中,视频信号与字幕、菜单等图形信号作为独立的数据复用。在再现时,分别单独解码,将解码结果合成并显示。具体而言,在视频的平面之上,重叠字幕、菜单的平面。

在此,即使视频信号为hdr,有时字幕、菜单等图形信号还是sdr。在视频信号的hpl→dpl转换中,能够进行下述的(a)以及(b)的2种转换。

(a)在合成图形后实施hpl→dpl转换的情况

1.将图形的eotf从sdr的eotf转换为hdr的eotf。

2.将eotf转换后的图形与视频合成。

3.对合成结果实施hpl→dpl转换。

(b)在合成图形前实施hpl→dpl转换的情况

1.将图形的eotf从sdr的eotf转换为hdr的eotf。

2.对视频实施hpl→dpl转换。

3.将eotf转换后的图形和dpl转换后的视频合成。

另外,(b)的情况1和2的顺序也可以交换。

在(a)以及(b)的任一个方式中,图形的峰值亮度都成为100nit,但例如在dpl为1000nit那样的高亮度的情况下,图形的亮度级为100nit的话,有时相对于hpl→dpl转换后的视频,图形的亮度降低。特别是,设想与视频重叠的字幕变暗等不利影响。从而,关于图形,也可以根据dpl的值来转换亮度。例如,关于字幕的亮度,也可以对设定为dpl值的几%的值等预先规定,基于设定值进行转换。关于菜单等字幕以外的图形也能够同样地进行处理。

以上,说明了仅存放hdr信号的hdr盘的再现动作。

接着,使用图28说明在存放了hdr信号和sdr信号这双方的双盘(dualdisk)中存放的复用数据。图28是用于说明在双盘中存放的复用数据的图。

在双盘中,如图28所示,hdr信号和sdr信号分别作为不同的复用流存放。例如,在蓝光等光盘中,通过被称为m2ts的基于mpeg-2ts的复用方式,视频、音频、字幕、图形等多个媒体的数据作为一条复用流存放。这些复用流根据播放列表等再现控制用的元数据被参照,在再现时播放器对元数据进行分析,从而选择要再现的复用流或在复用流中存放的各个语言的数据。在本例中,示出将hdr用和sdr用的播放列表单独存放,各自的播放列表参照hdr信号、或sdr信号的状况。此外,也可以另外示出表示存放了hdr信号和sdr信号这双方的识别信息等。

虽然也能够对同一复用流复用hdr信号和sdr信号这双方,但需要以满足mpeg-2ts中规定的t-std(系统目标解码器:systemtargetdecoder)等缓冲器模型的方式复用,特别是,在预先决定的数据的读出速率的范围内,难以将比特率高的两条视频复用。因此,优选分离复用流。

音频、字幕或图形等数据需要针对各自的复用流存放,与复用一条的情况相比数据量增加。其中,针对数据量的增加,能够使用压缩率高的视频编码方式来削减视频的数据量。例如,通过将在以往的蓝光中使用的mpeg-4avc改变为hevc(高效视频编码(highefficiencyvideocoding)),可期待压缩率提高1.6~2倍。此外,也可以是关于在双盘中存放的内容,禁止存放2k的hdr与sdr的组合、4k的sdr与2k的hdr的组合等设为两条2k的情况、或者禁止存放2k与4k的组合等设为两条4k的情况,从而仅允许光盘的容量以内的组合。

在本申请的转换方法中,在以sdrtv来显示hdr影像的情况下,利用所显示的sdrtv的峰值亮度超过100nit(通常200nit以上)的情况,不将hdr影像转换为100nit以下的sdr影像,而是以一定程度保持超过100nit的区域的级别的方式进行转换,能够实现转换为接近于原来的hdr的模拟hdr影像并显示在sdrtv中的“hdr→模拟hdr转换处理”。

此外,在转换方法中,也可以根据sdrtv的显示器特性(最高亮度、输入输出特性以及显示模式)来切换“hdr→模拟hdr转换处理”的转换方法。

作为显示器特性信息的取得方法,可以考虑(1)通过hdmi、网络自动取得,(2)使用户输入厂商名、产品编号等的信息从而生成,以及(3)使用厂商名、产品编号等的信息从云端等取得。

此外,作为转换装置500的显示器特性信息的取得定时,可以考虑(1)在进行模拟hdr转换的紧前取得,以及(2)在与显示装置600(sdrtv等)初次连接时(连接确立时)取得。

此外,在转换方法中,也可以根据hdr影像的亮度信息(cal、cpl)来切换转换方法。

例如,作为转换装置500的hdr影像的亮度信息的取得方法,可以考虑(1)作为附带于hdr影像的元信息来取得,(2)使用户输入内容的标题信息从而取得,以及(3)使用用户输入的输入信息从云端等取得等。

此外,作为转换方法的细节,(1)以不超过dpl的方式进行转换,(2)以cpl成为dpl的方式进行转换,(3)不变更cal及其周边以下的亮度,(4)使用自然对数进行转换,(5)以dpl进行限幅处理。

此外,在转换方法中,为了提升模拟hdr的效果,还能够将sdrtv的显示模式、显示参数等显示设定发送给显示装置600来切换,例如,也可以将促使用户进行显示设定的消息显示在画面中。

(实施方式五)

[5-1.盘的种类]

以下说明实施方式三。如上述那样,随着显示装置的分辨率以及亮度范围提高,提供与显示装置的规格相应的多个类别的蓝光盘。图29是表示bd的种类的图。图30是进一步详细示出bd的种类的图。再现装置(蓝光设备)对所插入的bd中记录的内容进行再现并显示在显示装置中。如图29以及图30所示,在以下的实施方式三中,记录了分辨率为第一分辨率且亮度范围为第一亮度范围的影像信号的bd记作对应于2k_sdr的bd(图30的(a))。分辨率为第一分辨率且亮度范围为第一亮度范围的影像信号在bd中作为流被存放。该流记作2k_sdr流。对应于2k_sdr的bd是以往的bd。

此外,记录了分辨率为第二分辨率且亮度范围为第一亮度范围的影像信号的bd记作对应于4k_sdr的bd。分辨率为第二分辨率且亮度范围为第一亮度范围的影像信号在bd中作为流被存放。该流记作4k_sdr流(图30的(b))。

同样,记录了分辨率为第一分辨率且亮度范围为第二亮度范围的影像信号的bd记作对应于2k_hdr的bd。分辨率为第一分辨率且亮度范围为第二亮度范围的影像信号在bd中作为流被存放。该流记作2k_hdr流(图30的(d))。

此外,记录了分辨率为第二分辨率且亮度范围为第二亮度范围的影像信号的bd记作对应于4k_hdr的bd。分辨率为第二分辨率且亮度范围为第二亮度范围的影像信号在bd中作为流被存放。该流记作4k_hdr流(图30的(e))。

另外,第一分辨率例如是所谓2k(1920x1080、2048x1080)的分辨率,但也可以是包含这样的分辨率的任意的分辨率。在实施方式三中,存在将第一分辨率简单地记作2k的情况。

此外,第二分辨率是所谓4k(3840x2160、4096x2160)的分辨率,但也可以是包含这样的分辨率的任意的分辨率。第二分辨率是比第一分辨率像素数多的分辨率。

另外,第一亮度范围例如是此前说明的sdr(峰值亮度为100nit的亮度范围)。第二亮度范围例如是此前说明的hdr(峰值亮度超过100nit的亮度范围)。第二亮度范围包含全部第一亮度范围,第二亮度范围的峰值亮度比第一亮度范围的峰值亮度大。

如图30的(c)、(f)、(g)、以及(h)所示,考虑以1张bd与多个影像表现对应的双流盘。双流盘是记录了用于对同一内容进行再现、并且分辨率以及亮度范围的至少一方不同的多个影像信号的bd。

具体而言,图30的(c)所示的双流盘是记录了4k_sdr流和2k_sdr流的bd。图30的(f)所示的双流盘是记录了2k_hdr流和2k_sdr流的bd。

图30的(g)所示的双流盘是记录了4k_hdr流和4k_sdr流的bd。图30的(h)所示的双流盘是记录了4k_hdr流和2k_sdr流的bd。

另外,图30的(c)所示的双流盘由于蓝光设备能够进行从4k至2k的分辨率的向下转换(downconversion)(以下也记作downconvert),因此不是必须的。

[5-2.盘的种类的详细]

图31是针对包含双流盘的各bd,表示在各盘中记录的视频流和图形流的组合的一例的图。

在图31中,考虑内容的制作的工夫,图形流与对应的视频流的分辨率以及亮度范围无关,以分辨率为2k且亮度范围为sdr来记录。在2k_sdr流、4k_sdr流、2k_hdr流、以及4k_hdr流全部中,能够共享图形流。在该情况下,图形流从分辨率2k向4k的转换、以及图形流从亮度范围sdr向hdr的转换都在蓝光设备中执行。

在该情况下,如图32所示,在蓝光设备中进行从sdr向hdr的转换,所以在java侧没有限制,可使用全部功能。

图33是表示图31所示的图形流的细节的图。在图33所示的例子中,对hdr视频流也使用sdr图形(pg、ig、java图形:javagraphics、java描绘:javadrawing)。在该情况下,包含java的描绘指令(javadrawing)的全部功能不受限制。具体而言,在蓝光设备中进行从sdr向hdr的转换,所以在java侧没有限制,能够使用全部功能。

图34是针对包含双流盘的各bd,表示在各盘中记录的视频流和图形流的组合的一例的图。

图34考虑内容(bd)的制作的工夫,图形流与对应的视频流的分辨率无关,以分辨率为2k来记录。在2k_sdr流和4k_sdr流中,能够共享图形流。但是,图形流以与对应的视频流的亮度范围相应的亮度范围来记录。在视频流为hdr的情况下,记录hdr的图形流。在视频流为sdr的情况下,记录sdr的图形流。图形流从sdr向hdr的转换在制作内容时进行。

图35是表示图34所示的图形流的细节的图。

在sdr的图形流和hdr的图形流中,图形流的基本规格是相同的,但在hdr的图形流中,存在java的颜色空间(4k用的bt2020)、eotf(hdr用的eotf)等限制。因此,不能直接使用java描绘指令。

也就是说,在对应于4k_sdr的bd、对应于2k_hdr的bd、以及对应于4k_hdr的bd中,需要抑制java描绘指令。

另外,在指定颜色以及亮度的值时,通过指定设想了eotf转换(sdr→hdr)、颜色空间(bt709→bt2020)转换等结果而得到的值,从而也能够利用java描绘指令。

在该情况下,根据视频流为sdr和hdr的哪个、或颜色空间为bt709和bt2020的哪个,需要制成不同的图形流,制作内容变得困难。因此,将菜单作为sdr,仅将正编以及字幕设为hdr是易于理解的。

也就是说,如图36所示,禁止字幕(pg)以外的使用,这样创作也变得轻松,用户也易于理解。但是,在该情况下,不能使用java进行通常显示,以及在视频流的再现中不能出现在影像上重叠地显示的弹出菜单。

此外,如图37所示,在2k_hdr图形流的情况下,在java侧有限制,所以仅存放字幕(pg)。

作为其他的例子,如图38所示,在再现hdr视频的情况下,也可以使用hdmv模式而不是java,以ig来显示弹出菜单。由此,虽然不能出现使用了java的弹出菜单,但能够以使用了hdmv模式的ig来显示弹出菜单。

[5-3.再现装置的动作]

以下说明作为再现装置(数据再现装置)存在如下两种类型的情况:一种类型具有将sdr信号的图形转换为hdr信号的图形并输出的功能,一种类型没有该功能。在这样的再现装置中,作为视频影像处理hdr信号,且关于与该视频重叠的菜单以及字幕等图形,处理sdr信号或hdr信号。

在该情况下,在没有转换输出功能的类型的再现装置(播放器)中,例如,图形仍以sdr信号被处理。由此,会产生再现影像品质变低、或菜单或字幕的亮度与内容制成者的意图不同,用户难以进行视觉辨认的课题。为了解决该课题,考虑在内容制作侧准备hdr信号的图形内容和sdr信号的图形内容这双方的图形内容,作为蓝光盘来提供。

另外,再现装置不限于bd设备等播放器,也可以是tv等显示装置。

图39是表示再现装置的处理的流程图。再现装置读出在盘内存储的由被称为bd-j(bd-java)或hdmv的再现控制编程语言记述的再现控制程序,执行该再现控制程序。通过该再现控制程序,执行图39所示的处理。

首先,再现控制程序再现菜单,向用户提示正编影像的再现选择菜单。在此在用户指定了再现hdr信号的正编影像的情况下,再现控制程序判断再现装置是否对应于hdr图形(是否具有对hdr图形进行处理的功能)(s401)。

在再现装置对应于hdr图形的情况下(s401中是),再现控制程序对hdr信号的图形内容进行再现(s403)。

另一方面,在再现装置不对应于hdr图形的情况下(s401中否),再现控制程序判定再现装置是否具有将sdr信号的图形转换为hdr信号的图形的功能(s402)。具体而言,再现控制程序确认再现装置的寄存器值。例如,通过播放器寄存器的第25个(被称为psr25的32比特长的寄存器),示出是否有将sdr信号图形转换为hdr信号图形并输出的功能。再现控制程序确认该寄存器的值,从而判定再现装置是否具有转换输出功能。

在具有转换输出功能的再现装置中(s402中是),再现控制程序对为了将sdr信号的图形转换为hdr信号的图形并进行输出而准备的播放列表#a进行再现。由此,再现装置一边将sdr信号的图形转换为hdr信号的图形,一边输出转换后的hdr信号的图形(s404)。

另一方面,在没有转换输出功能的再现装置中(s402中否),再现控制程序再现包含为了不需要该转换处理而准备的模拟的hdr信号图形信号的播放列表#b。具体而言,再现装置使用为了hdr信号而准备的clut对字幕和hdmv菜单进行再现(s405)。

在此,在蓝光盘中,能够利用字幕(演示图形:presentationgraphics)、基于bd-j的菜单等图形(bd-j图形:bd-jgraphics)、基于hdmv的菜单等图形(交互图形:interactivegraphics)这3种图形。如上述那样,根据有无转换输出功能来选择播放列表并进行再现的情况下,在面向没有转换输出功能的再现装置的播放列表中,对字幕(presentationgraphics)、以及基于hdmv的菜单(interactivegraphics)中使用的clut(定义了索引序号与颜色以及亮度的对应关系的颜色转换表)下工夫。具体而言,再现装置在输出sdr信号的图形的情况下,使用为了sdr信号而准备的clut,在输出hdr信号的图形的情况下,使用为了hdr信号而准备的其他的clut。也就是说,在java中有颜色空间的限制,所以不能容易地对应于hdr,但在字幕以及基于hdmv的菜单中,通过使用hdr用的clut,能够对应于hdr的亮度范围。由此,能够低成本地避免在不能将sdr信号图形向hdr信号图形进行转换处理的再现装置中难以视觉辨认菜单以及字幕的图形影像的问题。

以上那样,本实施方式所涉及的再现装置在第一亮度范围(hdr)的影像上重叠地显示图形。

再现装置判定该再现装置是否具有将比第一亮度范围(hdr)窄的第二亮度范围(sdr)的第一图形转换为第一亮度范围(hdr)的第二图形的功能(s402)。具体而言,通过再现装置执行再现控制程序,从而判定再现装置是否具有上述功能。此外,再现控制程序通过确认存放了表示再现装置是否具有上述功能的信息的寄存器,从而判定再现装置是否具有上述功能。此外,再现装置从盘取得第一亮度范围(hdr)的影像、第二亮度范围(sdr)的第一图形、以及再现控制程序。

再现装置在该再现装置具有上述功能的情况下,将第一图形转换为第二图形,在影像上重叠地显示第二图形(s404)。

此外,再现装置在再现装置不具有上述功能的情况下,在影像上重叠地显示与第二图形不同的第三图形。具体而言,再现装置使用第一亮度范围用的颜色转换表来生成第三图形(s405)。在此,在第一亮度范围(hdr)用的颜色转换表(clut)中,与各序号建立了对应的对应色被包含于第一亮度范围。换言之,该颜色转换表能够表现不包含于第二亮度范围(sdr)而且包含于第一亮度范围中的亮度值。

另外,再现装置在再现装置不具有上述功能的情况下,也可以不进行图形的转换处理,而是在影像上重叠地显示第二亮度范围(sdr)的第一图形。也就是说,上述第三图形也可以是第一图形。

如以上说明,在基本的2k且sdr影像的基础上,存在4k且sdr影像的情况、2k且hdr影像的情况、4k且hdr影像的情况这四个情况。由此,需要进行复杂的创作作业以及再现设备中的内部处理。

进而在存放了hdr影像的蓝光的情况下,若将字幕以及菜单用图形、java用图形、java用描绘处理等作为hdr内容来处理,则存在因为java中没有hdr的颜色空间的定义所以不能显示等各种限制。

在本实施方式中,分为再现装置(播放器)具有和不具有将图形从sdr转换为hdr的功能的情况,在再现装置具有转换功能的情况下,以sdr信号来进行全部的与图形关联的处理,将其结果从sdr转换为hdr,将所得到的hdr的图形与hdr的视频进行合成。由此,能够进行使用了java等的全部处理,且能够提供高质量的图形。

另一方面,在再现装置不具有转换功能的情况下,在hdr下不可能进行java的处理,所以不能进行弹出菜单等处理。因此,从java调用hdmv模式,以hdmv模式进行hdr图形(字幕、弹出菜单等)的处理,从而即使是hdr影像,也能够以简单的创作处理来实现与sdr相同的用户体验。

另外,在上述各实施方式中,也可以是各结构要素由专用的硬件构成,或通过执行适于各结构要素的软件程序来实现。各结构要素也可以通过cpu或处理器等程序执行部读出并执行在硬盘或半导体存储器等记录介质中记录的软件程序来实现。

以上,关于本申请的一个或多个方式所涉及的转换方法以及转换装置,基于实施方式进行了说明,但本申请不限定于本实施方式。只要不脱离本申请的主旨,将本领域技术人员想到的各种变形施加于本实施方式而得到的方式、将不同的实施方式中的结构要素组合来构筑的方式等,也可以被包含于本申请的一个或多个方式的范围内。

工业实用性

本申请能够应用于蓝光设备等再现装置。

标记说明

100媒体

200bd播放器

210转换装置

220重映射处理部

221判定部

222处理对象判定部

223亮度值可变重映射部

224亮度值固定重映射部

225存储部

300、310tv(电视)

400生成部

410调整部

420判定部

430hdr信号生成部

440sdr信号生成部

500转换装置

501eotf转换部

502亮度转换部

503逆亮度转换部

504逆sdr的eotf转换部

600显示装置

601显示设定部

602sdr的eotf转换部

603亮度转换部

604显示部


技术特征:

1.一种由再现装置执行的方法,其特征在于,包括以下步骤:

从记录介质取得包括菜单或字幕的第一亮度范围的图形;

在显示所述第一亮度范围的影像时,通过使用用于所述第一亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第一图形,并且在所述第一亮度范围的所述影像上重叠所述第一图形并向显示器输出;

在显示比所述第一亮度范围宽的第二亮度范围的影像时,通过使用用于所述第二亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第二图形,并且在所述第二亮度范围的所述影像上重叠所述第二图形并向所述显示器输出;

所述第一亮度范围是sdr即标准动态范围,所述第二亮度范围是hdr即高动态范围。

2.如权利要求1所述的方法,其特征在于,

用于所述第二亮度范围的所述颜色转换表表现不包含于所述第一亮度范围而且包含于所述第二亮度范围中的亮度值。

3.一种再现装置,其特征在于,具备:

一个或多个存储器;以及

处理器,

所述处理器执行:

从记录介质取得包括菜单或字幕的第一亮度范围的图形;

在显示所述第一亮度范围的影像时,通过使用用于所述第一亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第一图形,并且在所述第一亮度范围的所述影像上重叠所述第一图形并向显示器输出;

在显示比所述第一亮度范围宽的第二亮度范围的影像时,通过使用用于所述第二亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第二图形,并且在所述第二亮度范围的所述影像上重叠所述第二图形并向所述显示器输出;

所述第一亮度范围是sdr即标准动态范围,所述第二亮度范围是hdr即高动态范围。

技术总结
本申请的一方式所涉及的由再现装置执行的方法以及再现装置,从记录介质取得包括菜单或字幕的第一亮度范围的图形;在显示所述第一亮度范围的影像时,通过使用用于所述第一亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第一图形,并且在所述第一亮度范围的所述影像上重叠所述第一图形并向显示器输出;在显示比所述第一亮度范围宽的第二亮度范围的影像时,通过使用用于所述第二亮度范围的颜色转换表,从所述第一亮度范围的所述图形生成第二图形,并且在所述第二亮度范围的所述影像上重叠所述第二图形并向所述显示器输出;所述第一亮度范围是SDR即标准动态范围,所述第二亮度范围是HDR即高动态范围。

技术研发人员:远间正真;小塚雅之;矢羽田洋;西孝启;寺田健吾
受保护的技术使用者:松下知识产权经营株式会社
技术研发日:2015.06.18
技术公布日:2020.06.09

转载请注明原文地址: https://bbs.8miu.com/read-16973.html

最新回复(0)