买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明授权】发送装置、发送方法、接收装置和接收方法_索尼公司_201780009645.3 

申请/专利权人:索尼公司

申请日:2017-02-06

公开(公告)日:2021-07-16

公开(公告)号:CN108605152B

主分类号:H04N21/236(20060101)

分类号:H04N21/236(20060101);H04N19/30(20060101);H04N19/70(20060101);H04N21/2662(20060101);H04N21/434(20060101)

优先权:["20160209 JP 2016-023185"]

专利状态码:有效-授权

法律状态:2021.07.16#授权;2019.02.19#实质审查的生效;2018.09.28#公开

摘要:本发明的目的在于,在接收侧执行与解码能力对应的处理时提供便利。通过处理高帧率和超高分辨率图像数据,获得用于获得基本帧率和高分辨率图像的第一图像数据、与第一图像数据一起使用以获得高帧率和高分辨率图像的第二图像数据、与第一图像数据一起使用以获得基本帧率和超高分辨率图像的第三图像数据、以及与第一至第三图像数据一起使用以获得高帧率和超高分辨率图像的第四图像数据。发送包含具有第一至第四图像数据的编码图像数据的预定数量的视频流的容器。将与插入到预定数量的视频流的每一个中并涉及相应视频流所拥有的图像数据的信息相对应的信息插入容器中。

主权项:1.一种发送装置,包括:图像处理单元,处理高帧率超高清晰度图像数据,以获得用于获取基本帧率高清晰度图像的第一图像数据、用于与所述第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与所述第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与所述第一图像数据至所述第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据;发送单元,发送包括预定数量的视频流的容器,所述预定数量的视频流包括所述第一图像数据至所述第四图像数据的编码图像数据;以及信息插入单元,将与所述预定数量的视频流的每一个中包括的图像数据相关联的信息插入到所述容器中,其中,由所述发送单元发送的容器包括第一视频流和第二视频流,所述第一视频流包括所述第一图像数据的编码图像数据和所述第二图像数据的编码图像数据,所述第二视频流包括所述第三图像数据的编码图像数据和所述第四图像数据的编码图像数据,并且所述信息插入单元在所述第一视频流和所述第二视频流各自由两个轨道管理的状态下,将信息插入到所述容器中。

全文数据:发送装置、发送方法、接收装置和接收方法技术领域[0001]本发明涉及一种发送装置、一种发送方法、一种接收装置和一种接收方法,并且更具体地,涉及一种发送高帧率超高清晰度图像数据的发送装置等。背景技术[0002]考虑到在固定接收器和移动接收器共享相同的发送频带的接收环境中,与分别执行针对固定接收器的服务和针对移动接收器的服务的所谓的联播服务相比,可以通过在旨在用于其清晰度被视为高的固定接收器的图像服务视频服务与旨在用于其清晰度被视为适中的移动接收器的图像服务之间共享流,来降低整体位率。例如,专利文献1描述了可伸缩地执行媒体编码,以生成用于低清晰度图像服务的基本层的流和用于高清晰度图像服务的增强层的流,并且发送包括这些流的广播信号。[0003]引用列表[0004]专利文献[0005]专利文献1:日本专利申请国家公布第2008-543142号发明内容[0006]本发明要解决的问题[0007]本技术的目的在于,实现根据接收侧的解码能力来执行处理的便利性。[0008]问题的解决方案[0009]本技术的概念在于[0010]一种发送装置,包括:[0011]图像处理单元,处理高帧率超高清晰度图像数据,以获得用于获取基本帧率高清晰度图像的第一图像数据、用于与第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与第一图像数据至第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据;[0012]发送单元,发送包括预定数量的视频流的容器,预定数量的视频流包括第一至第四图像数据的编码图像数据;以及[0013]信息插入单元,将与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到容器中。[0014]在本技术中,由图像处理单元处理高帧率超高清晰度图像数据,并且获得第一至第四图像数据。第一图像数据是用于获取基本帧率高清晰度图像的图像数据。第二图像数据是与第一图像数据一起使用来获取高帧率高清晰度图像的图像数据。第三图像数据是与第一图像数据一起使用来获取基本帧率超高清晰度图像的图像数据。第四图像数据是与第一至第三图像数据一起使用来获取高帧率超高清晰度图像的图像数据。[0015]由发送单元发送包括预定数量的视频流的容器,预定数量的视频流包括第一至第四图像数据的编码图像数据。由信息发送单元将与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到容器中。[0016]例如,优选的是,由发送单元发送的容器包括第一视频流和第二视频流,第一视频流包括第一图像数据的编码图像数据和第二图像数据的编码图像数据,第二视频流包括第三图像数据的编码图像数据和第四图像数据的编码图像数据,并且信息插入单元在第一和第二视频流各自由一个轨道管理的状态下,将信息插入到容器中。在容器是MP4IS0BMFF的情况下,在与轨道对应地存在的“moof”块中,信息与在视频流中包含的两个图像数据的编码图像数据相关联地设置。[0017]在这种情况下,视频流文件的数量是两个,并且容器变得简单。基本帧率接收器例如,60P接收器)的容器分析单元多路分用器需要读取120P流并跳过不必要的图片。另一方面,高帧率接收器例如,120P接收器只需要对120P流的图片进行解码,而不需要做任何额外的处理。[0018]在这种情况下,例如,优选的是,信息插入单元在将信息插入容器中时,针对第一视频流,通过将与第一图像数据的编码图像数据相关联的信息和与第二图像数据的编码图像数据相关联的信息进行分组来执行插入,并且针对第二视频流,通过将与第三图像数据的编码图像数据相关联的信息和与第四图像数据的编码图像数据相关联的信息进行分组来执行插入。如上所述进行分组,由此可以在接收侧容易地确定每个信息与哪个编码图像数据相关。[0019]另外,在这种情况下,例如,优选的是,在第一视频流中交替地(即,按照时间顺序交替地)编码第一图像数据的图片和第二图像数据的图片,并且在第二视频流中交替地即,按照时间顺序交替地编码第三图像数据的图片和第四图像数据的图片。如上所述进行编码,由此可以在接收侧平滑地执行每个图片的解码处理。另外,如上所述,交替地执行编码,由此保证在仅解码第一图像数据或者仅解码第一图像数据和第三图像数据的接收器中,解码处理可以在解码能力的范围内。[0020]另外,例如,优选的是,由发送单元发送的容器包括第一视频流和第二视频流,第一视频流包括第一图像数据的编码图像数据和第二图像数据的编码图像数据,第二视频流包括第三图像数据的编码图像数据和第四图像数据的编码图像数据,并且信息插入单元在第一和第二视频流各自由两个轨道管理的状态下,将信息插入到容器中。在容器是MP4IS0BMFF的情况下,X寸于每个轨道,存在“moof”块,并且信息与在视频流中包含的两个图像数据的编码图像数据中的一个相关联地设置。[0021]在这种情况下,视频流文件的数量是两个,并且容器变得简单。基本帧率接收器例如,60P接收器的容器分析单元多路分用器需要读取12^流并跳过不必要的图片。另一方面,高帧率接收器例如,120P接收器只需要对120P流的图片进行解码,而不需要做任何额外的处理。[0022]在这种情况下,例如,优选的是,在第—视频流中交替地卿,按照时间顺序交替地编码第一图像数据的图片和第二图像数据的图片,并且在第二视频流中交替地(|卩,按照时间顺序交替地编码第三图像数据的图片和第四图像数据的图片。如上所述进行编码,由此可以在接收侧平滑地执行每个图片的解码处理。另外,如上所述,交替地执行编码,由此保证在仅解码第一图像数据或者仅解码第一图像数据和第三图像数据的接收器中,解码处理可以在解码能力的范围内。[0023]另外,例如,优选的是,由发送单元发送的容器包括:第一视频流,包括第一图像数据的编码图像数据;第二视频流,包括第二图像数据的编码图像数据;第三视频流,包括第三图像数据的编码图像数据;以及第四视频流,包括第四图像数据的编码图像数据,并且信息插入单元在第一至第四视频流各自由一个轨道管理的状态下,插入信息。在容器是MP4ISOBMFF的情况下,在与轨道对应地存在的“moof”块中,信息与在视频流中包含的一个图像数据的编码图像数据相关联地设置。[0024]在这种情况下,视频流(文件)的数量是四个。基本帧率接收器例如,60P接收器)保证了读取60P流并且将60P流传输到解码器而不需要任何额外的意识的所谓的向下兼容性。另一方面,高帧率接收器例如,120P接收器需要组合两个流,并按解码顺序构成一个流,以将该流传输到解码器。[0025]如上所述,在本技术中,信息被插入到容器中,该信息与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息相对应。因此,在接收侧,根据解码能力,基于该信息,通过从预定数量的流中包括的第一至第四图像数据中提取预定的编码图像数据,可以容易地执行解码处理。[0026]注意,在本技术中,例如,优选的是,高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的高动态范围光电转换特性的发送图像数据,并且信息插入单元进一步将指示高动态范围光电转换特性或与高动态范围光电转换特性对应的电光转换特性的转换特性信息插入到包括第一图像数据的编码图像数据的视频流中。例如,优选的是,高动态范围光电转换特性是混合对数伽玛特性。另外,例如,优选的是,高动态范围光电转换特性是PQ曲线特性。如上所述插入转换特性信息,由此在接收侧可以基于转换特性信息,容易地执行适当的电光转换。[0027]在这种情况下,例如,当高动态范围光电转换特性是PQ曲线特性时,优选的是,信息插入单元进一步将转换信息插入到包括第一图像数据的编码图像数据的视频流中,转换信息用于将基于PQ曲线特性的转换数据的值转换为基于标准动态范围光电转换特性的转换数据的值。如上所述插入转换信息,由此,在执行标准动态范围显示的情况下,在接收侧可以令人满意地获得显示图像数据。[0028]另外,本技术的另一概念在于[0029]一种接收装置,包括:[0030]接收单元,接收包括预定数量的视频流的容器,其中,[0031]预定数量的视频流包括通过处理高帧率超高清晰度图像数据而获得的用于获取基本帧率高清晰度图像的第一图像数据、用于与第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与第一至第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据,[0032]将与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到容器中,并且[0033]接收装置进一步包括处理单元,处理单元根据解码能力,基于插入到容器中的信息,通过从第一至第四图像数据的编码图像数据中选择性地提取预定的编码图像数据并执行解码处理,来获得图像数据。[0034]在本技术中,由接收单元接收包括预定数量的视频流的容器。预定数量的视频流包括通过处理高帧率超高清晰度图像数据而获得的第一至第四图像数据的编码图像数据。第一图像数据是用于获取基本帧率高清晰度图像的图像数据。第二图像数据是与第一图像数据一起使用来获取高帧率高清晰度图像的图像数据。第三图像数据是与第一图像数据一起使用来获取基本帧率超高清晰度图像的图像数据。第四图像数据是与第一至第三图像数据一起使用来获取高帧率超高清晰度图像的图像数据。[0035]信息被插入到容器中,该信息与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息相对应。由处理单元根据解码能力,基于插入到容器中的信息,从第一至第四图像数据的编码图像数据中选择性地提取预定的编码图像数据,执行解码处理,并且获得图像数据。[0036]如上所述,在本技术中,信息被插入到容器中,该信息与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息相对应,并且根据解码能力,基于插入到容器中的信息,从第一至第四图像数据的编码图像数据中选择性地提取预定的编码图像数据,并且执行解码处理。因此,可以根据解码能力容易地执行解码处理。[0037]注意,在本技术中,例如,优选的是,高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的高动态范围光电转换特性的发送图像数据,将指示高动态范围光电转换特性或与高动态范围光电转换特性对应的电光转换特性的转换特性信息插入到包括第一图像数据的编码图像数据的视频流中,并且处理单元通过基于转换特性信息对通过解码处理获得的图像数据执行电光转换,来获得显示图像数据。如上所述,基于转换特性信息执行电光转换,由此可以容易地执行适当的电光转换。[0038]另外,在本技术中,例如,优选的是,高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的高动态范围光电转换特性的发送图像数据,高动态范围光电转换特性是PQ曲线特性,将转换信息插入到包括第一图像数据的编码图像数据的视频流中,转换信息用于将基于PQ曲线特性的转换数据的值转换为基于标准动态范围光电转换特性的转换数据的值,并且处理单元在执行标准动态范围显示时,通过基于转换信息对通过解码处理获得的图像数据进行动态范围转换,来获得标准动态范围发送图像数据,并且通过对标准动态范围发送图像数据以标准动态范围电光转换特性执行电光转换,来获得显示图像数据。结果,可以在执行标准动态范围显示的情况下令人满意地获得显示图像数据。[0039]另外,本技术的另一概念在于[0040]—种发送装置,包括:[0041]图像处理单元,处理高帧率图像数据,以获得用于获取基本帧率图像的第一图像数据以及用于与第一图像数据一起使用来获取高帧率图像的第二图像数据;[0042]发送单元,发送包括至少一个视频流的容器,至少一个视频流包括第一和第二图像数据的编码图像数据;以及[0043]信息插入单元,在容器中,与第一图像数据的编码图像数据对应地插入与第一图像数据的编码图像数据对应的视频流的级别规范值,并且与第二图像数据的编码图像数据对应地插入通过组合第一和第二图像数据的编码图像数据而获得的视频流的级别规范值。[0044]在本技术中,由图像处理单元处理高帧率图像数据,并且获得用于获取基本帧率图像的第一图像数据以及用于与第一图像数据一起使用来获取高帧率图像的第二图像数据。由发送单元发送包括至少一个视频流的容器,至少一个视频流包括第一和第二图像数据的编码图像数据。[0045]然后,由信息插入单元在容器中与第一图像数据的编码图像数据对应地插入与第一图像数据的编码图像数据对应的视频流的级别规范值,并且与第二图像数据的编码图像数据对应地插入通过组合第一和第二图像数据的编码图像数据而获得的视频流的级别规范值。[0046]如上所述,在本技术中,视频流的级别规范值被插入到容器中,由此,可以根据解码能力,从第一和第二图像数据的编码图像数据中选择性地向解码器传输编码图像数据,并且在接收侧,基于视频流的级别规范值的信息,处理编码图像数据。[0047]另外,本技术的另一概念在于[0048]-种接收装置,包括:[0049]接收单元,接收包括至少一个视频流的容器,其中,[0050]至少一个视频流包括用于获取基本帧率图像的第一图像数据以及用于与第一图像数据一起使用来获取高帧率图像的第二图像数据,[0051]在容器中,与第一图像数据的编码图像数据对应地插入与第一图像数据的编码图像数据对应的视频流的级别规范值,并且与第二图像数据的编码图像数据对应地插入通过组合第一和第二图像数据的编码图像数据而获得的视频流的级别规范值,并且[0052]接收装置进一步包括处理单元,处理单元根据解码能力,基于插入到容器中的视频流的级别规范值,通过从第一和第二图像数据的编码图像数据中选择性地提取至少一个编码图像数据并执行解码处理,来获得图像数据。[0053]在本技术中,由接收单元接收包括至少一个视频流的容器。在此处,至少一个视频流包括用于获取基本帧率图像的第一图像数据以及用于与第一图像数据一起使用来获取高帧率图像的第二图像数据。[0054]另外,在容器中,与第一图像数据的编码图像数据对应地插入与第一图像数据的编码图像数据对应的视频流的级别规范值,并且与第二图像数据的编码图像数据对应地插入通过组合第一和第二图像数据的编码图像数据而获得的视频流的级别规范值。[0055]由处理单元根据解码能力,基于插入到容器中的视频流的级别规范值,从第一和第二图像数据的编码图像数据中选择性地提取至少一个编码图像数据,执行解码处理,并且获得图像数据。[0056]如上所述,在本技术中,基于插入到容器中的视频流的级别规范值的信息,根据解码能力,从第一和第二图像数据的编码图像数据中选择性地向解码器传输编码图像数据,并且在解码器中,可以有效地执行处理。本发明的效果[0057]利用本技术,在接收侧根据解码能力执行处理时,可以实现便利性。注意,在本说明书中描述的有益效果仅仅是示例,并且本技术的有利效果不限于此,并且可以包括额外效果。附图说明[0058]图1是示出基于MPEG-DASH的流分配系统的示例配置的框图。[0059]图2是示出在MPD文件中分层设置的结构之间的关系的示例的示图。[0060]图3是示出作为实施方式的发送接收系统的示例配置的框图。[0061]图4是示出通过通信网络发送路径或RF发送路径发送的MP4流的示例的示图。[0062]图5是示出服务发送系统和服务接收器中的编码解码处理的概述的示图。[0063]图6是用于描述包括在两个或四个视频流视频文件)中的第一至第四图像数据的示图。[0064]图7是示出情况1的发送中的MP4流文件的示例配置的示图。[0065]图8是示出SPSVPS元素的示例的示图。[0066]图9是示意性示出情况1的发送中的“m00fmoof0”框中的控制信息的示例的示图。[0067]图10是示意性示出情况1的发送中的“moofmoof1”框中的控制信息的示例的示图。[0068]图11是示出情况2的发送中的MP4流文件的示例配置的示图。[0069]图12是不意性地示出情况2的发送中的“moofmoof0”和“moofmoof1”的框中的控制信息的示例的示图。[0070]图13是不意性地示出情况2的发送中的“moofmoof2”和“moofmoof3”的框中的控制信息的示例的示图。[0071]图14是示出情况3的发送中的MP4流文件的示例配置的示图。[0072]图15是示出在发送双流配置的情况下(在情况1和情况2的情况下)的MfD文件的描述示例的示图。[0073]图16是不出“SupplementaryDescriptor”的“值”语义的不图。[0074]图17是示出在发送四流配置的情况下在情况1和情况2的情况下)的MPD文件的描述示例的示图。[0075]图18是示出服务发送系统的示例配置的框图。[0076]图19是用于描述HDR光电转换特性的示图。[0077]图20是用于描述动态范围转换的转换信息的示图。[0078]图21是示出在编码方法是HEVC的情况下在G0P的头部的访问单元的示图。[0079]图22是示出示例结构中的传递函数SEI消息的示例结构和主要信息的细节的示图。[0080]图23是示出动态范围转换SEI消息的示例结构的示图。[0081]图24是示出动态范围转换SEI消息的示例结构中的主要信息的细节的示图。[0082]图25是示出服务接收器的示例配置的框图。[0083]图26是用于描述动态范围转换的细节的示图。具体实施方式t〇〇84]下面是用于执行本发明的模式的描述在下文中称为“实施方式”)。注意,将按以下顺序进行描述。[0085]1、实施方式[0086]2、变形例[0087]”,指不当前流是HDR流。注意,可以描述“1”,而不是“HDR”,以指示是HDR流。注意,在指示是SDR流的情况下,描述“SDR”或“0”。[0255]通过描述“〈SupplementaryDescriptorschemeldUri=“urn:brdcst:video:transferfunction”value=“TFtype””,指不电光和光电转换特性(TF特性)。例如,在“BT•709-5传递函数”的情况下,在“TFtype”部分中描述“bt7〇9”或T。另外,例如,在“1〇位BT.2020传递函数”的情况下,在“TFtype”部分中描述“bt2〇2〇_10”或“I4”。另外,例如,在“SMPTE2084传递函数”的情况下,在“TFtype”部分中描述“st2〇84”或“16”。另外,例如,在“ARIBSTDB-67传递函数”的情况下,在“TFtype”部分中描述“arib-b67”或“18”。[0256]通过描述“〈SupplementaryDescriptorschemeldUri二“urn:brdcst:video:xyco1ourprimaries”value=“Co1orGamut””,指示颜色空间。例如,在“BT•709-5”的情况下,在“色域”部分描述“bt709”或“1”。另外,例如,在“BT.2020”的情况下,在“色域”部分中描述“bt2020”或“9”。另外,例如,在“SMPTE428或XYZ”的情况下,在“色域”部分中描述“st428”或“10”。[0257]在MPD文件中,存在与包括第一和第二图像数据的编码图像数据的第一视频流对应的第一表示,并且存在与包括第三和第四图像数据的第二视频流对应的第二表示。另外,在第一视频流的表示中,分别存在与第一和第二图像数据的编码图像数据对应的子表示。另外,在第二视频流的表示中,分别存在与第三和第四图像数据的编码图像数据对应的子表不。[0258]通过描述“videostreamBase.mp4”,第一视频流的位置被表示为\丨〇16031^61118336.11^4”。在与第一视频流的表示中的第一图像数据的编码图像数据对应的子表不中,描述了“width=“1920”height=“1080”frameRate=“60””、“codecs=“hev1•xx•xx•L123,xx””和“1eve1=“0””。通过描述,指示实现了2K60P流,给出级别“0”,作为标签信息,并且第一图像数据的编码图像数据的级别是“123”。[0259]在与第一视频流的表示中的第二图像数据的编码图像数据对应的子表示中,描述了“width=“1920”height=“1080”frameRate=“120””、“codecs=“hevl.xx.xx.L150,乂乂””、“]^61=“1””和“^611161^1^61=“0””。通过描述,指示通过增强在第一图像数据的编码图像数据上实现2K120P流,给出级别“1”,作为标签信息,并且第二和第一图像数据的编码图像数据的总体级别是“150”。[0260]另外,通过描述“〈BaseURLvideo_bitstreamScalable•mp4”,第二视频流的位置被表不为、116〇-13;^81^031118〇31313]^.11^4”。在与第二视频流的表示中的第三图像数据的编码图像数据对应的子表示中,描述了“width=“3840”height=“2160”frameRate=“60”,’、“codecs=“hevl.yy.yy.L153,yy,,,,、“level=“2,,,,和“dependencyLevel=。通过这些描述,指示通过增强在第一图像数据的编码图像数据上实现4K60P流,给出级别“2”,作为标签信息,并且第三和第一图像数据的编码图像数据的总体级别是“153”。[0261]在与第二视频流的表示中的第四图像数据的编码图像数据对应的子表示中,描述了“width=“3840”height=“2160”frameRate=“120””、“codecs=“hevl.yy.yy.L156,yy””、“level=“3””和“dependencyLevel=“0”,“1”,“2””。通过这些描述,指示通过增强在第一图像数据的编码图像数据上实现2K120P流,并且通过在流上添加增强分量来实现4K120P流,给出级别“3”,作为标签信息,并且第四至第一图像数据的编码图像数据的总体级别是“156”。[0262]图17示出了在发送四流配置的情况下在情况2的情况下)的MPD文件的描述示例。在此处,为了简化描述,示出了仅描述与视频流相关联的信息的示例;然而,实际上也描述了与视频流的其他媒体流相关联的信息。[0263]通过描述“〈AdaptationSetmimeType=“videomp4”codecs=“hevl•xx.xx.L123,xx,hevl.xx.xx.L150,xx,hevl.yy.yy.L153,yy,hevl.yy.yy.L156,yy””,指示具有视频流的自适应集,在MP4文件结构中提供视频流,并且具有级别为123、级另|J为150、级别为153和级别为156的HEVC编码图像数据。[0264]由于“〈SupplementaryDescriptorschemeIdUri="urn:brdcst:video:highdynamicrangevalue="HDR"〉’’、“”以及“”的描述与图15中的示例的那些相同,因此将省略其描述。[0265]在MPD文件中,存在分别对应于包括相应的第一、第二、第三和第四图像数据的编码图像数据的第一、第二、第三和第四视频流的第一、第二、第三和第四表示。[0266]在第一视频流的表示中,描述了“width=“1920”height=“1080”frameRate=“60””、“codecs=“hevl.xx.xx.L123,xx””和“level=“0”“。通过这些描述,指示实现了2K60P流,给出级别“0”,作为标签信息,并且第一图像数据的编码图像数据的级别是“123”。通过描述“〈88611此¥116〇-583613111313;[丨31^68111.11^4〈8861]此”,第一视频流的位置被表示为“video-base1subbitstream.mp4”。[0267]在第二视频流的表示中,描述了“width=“1920”height=“1080”frameRate=“120””、“codecs=“hevl.xx_xx.L150,xx””、“level=“1””和“dependencyLevel=“0,,,,。通过这些描述,指示通过增强在第一图像数据的编码图像数据上实现2K120P流,给出级别“1”,作为标签信息,并且第二和第一图像数据的编码图像数据的总体级别是“150”。通过描述“〈BaseURLvideo_base2subbitstream.mp4”,第二视频流的位置被表示为“vide〇-base2subbitstream.mp4”。[0268]在第三视频流的表示中,描述了“width=“3840”height=“2160”frameRate=“60””、“codecs=“hevl.yy.yy.L153,yy,,,,、“level=“2””和“dependencyLevel=〇通过这些描述,指示通过增强在第一图像数据的编码图像数据上实现4K60P流,给出级别“2”,作为标签信息,并且第三和第一图像数据的编码图像数据的总体级别是“153”。通过描述“〈BaseURLvideo_e1subbitstream.mp4”,第三视频流的位置被表示为“video_elsubbitstream.mp4”。[0269]在第四视频流的表示中,描述了“width=“3840”height=“2160”frameRate=“120””、“codecs=“hevl•yy•yy•L156,yy’’’’、“level=“3”’’和“dependencyLevel=“0”,“1”,“2””。通过描述,指示通过增强在第一图像数据的编码图像数据上实现2K120P流,并且通过在流上添加增强分量来实现4K120P流,给出级别“3”,作为标签信息,并且第四至第一图像数据的编码图像数据的总体级别是“156”。通过描述“〈BaseURL〉video-e2subset.mp4”,第四视频流的位置被表示为“vide〇-e2subset.mp4”。[0270]“服务发送系统的示例配置”[0271]图18示出了服务发送系统100的示例配置。服务发送系统100包括控制单元101、高动态范围HDR光电转换单元102、RGBYCbCr转换单元103、视频编码器104、容器编码器105和发送单元106。[0272]控制单元101包括中央处理单元(CPU,并且基于控制程序来控制服务发送系统100的每个单元的操作。HDR光电转换单元102通过将HDR光电转换特性应用于高帧率超高清晰度例如,4K120P和高动态范围⑽R图像数据视频数据Vh中来执行光电转换,来获得HDR发送图像数据VI4DR发送视频数据VI是作为具有HDR0ETF的图像而产生的视频材料。例如,作为HDR光电转换特性,应用STD-B67混合对数伽玛:HLG的特性、ST2084感知量化器曲线:PQ曲线的特性等。[0273]图19示出了标准动态范围(SDR和高动态范围HDR的光电转换特性的示例。在该图中,横轴表示输入亮度级,纵轴表示发送码值。虚线表示SDR光电转换特性BT.709:伽玛特性)。在SDR光电转换特性中,当输入亮度级别是SDR特性表示极限亮度SL时,发送码值是峰值级别MP。在此处,SL是100cdm2。[0274]实线b表示作为HDR光电转换特性的STD-B67HLG的特性。单点划线c表示作为HDR光电转换特性的ST2084PQ曲线)的特性。在HDR光电转换特性中,当输入亮度级别是峰值亮度PL时,发送码值是峰值级别MP。[0275]STD-B67HLG的特性包括与SDR光电转换特性(BT.709:伽玛特性兼容的区域。艮P,两个特性的曲线从输入亮度级别零到两个特性的兼容性极限值彼此一致。当输入亮度级别是兼容性极限值时,发送码值是兼容级别SPAT2084的特性PQ曲线)是对应于高亮度的量化步长的曲线,并且被认为与人类视觉特性兼容。[0276]返回参考图18,RGBYCbCr转换单元103将由HDR光电转换单元102获得的HDR发送视频数据VI从RGB域转换到YCbCr亮度和色度域。注意,这些颜色空间域不限于RGB域,并且亮度和色度域不限于YCbCr。[0277]视频编码器104对转换为YCbCr域的HDR发送视频数据VI应用例如MPEG4-AVC或HEVC等编码,以获得编码图像数据,并且生成包括编码图像数据的预定数量的视频流。[0278]g卩,在执行情况1和情况2的发送的情况下,生成包括第一和第二图像数据的编码图像数据的第一视频流和包括第三和第四图像数据的编码图像数据的第二视频流参见图6、图7和图11。另一方面,在情况3进行传输的情况下,生成包括第一图像数据的编码图像数据的第一视频流、包括第二图像数据的编码图像数据的第二视频流、包括第三图像数据的编码图像数据的第三视频流以及包括第四图像数据的编码图像数据的第四视频流参见图6和图14。[0279]此时,视频编码器104将指示HDR发送图像数据VI的光电转换特性或与光电转换特性对应的电光转换特性的转换特性信息传递函数插入到访问单元AU的SPSNAL单元的视频可用性信息(VUI区域中。注意,在HDR发送图像数据VI的光电转换特性是STD-B67HLG的情况下,将指示BT.709伽马特性)的转换特性信息插入到VUI的区域中。在这种情况下,指示STD-B67HLG的转换特性信息设置在插入到访问单元AU的“SEI”部分中的稍后描述的新定义的传递函数SEI消息transfer_functionSEI消息)中。[0280]另外,在应用ST2084PQ曲线)的特性,作为上述HDR光电转换单元102中的HDR光电转换特性的情况下,视频编码器104将包括动态范围转换的转换信息的稍后描述的新定义的动态范围转换SEI消息Dynamic_range_convSEI消息插入到访问单兀AU的“SEI”部分中。转换信息是用于将通过ST2084PQ曲线)的特性的转换数据的值转换为通过SDR光电转换特性的转换数据的值的转换信息。[0281]参考图20,将进一步描述动态范围转换的转换信息。实线a表示指示SDR光电转换特性的SDR0ETF曲线的示例。实线b表示作为HDR0ETF曲线的ST2084PQ曲线)的特性的示例。横轴表示输入亮度级别,P1表示与SDR峰值级别对应的输入亮度级别,P2表示与HDR最大级别对应的输入亮度级别。[0282]另外,纵轴表示归一化编码级别的发送码值或相对值。相对最大级另UM表示HDR最大级别和SDR最大级别。参考级别G表示在对应于SDR最大级别的输入亮度级别P1处的HDROETF的传输级别,这意味着所谓的参考白色级别,并且高于该级别的范围用于HDR特有的闪光表示。分支级别B表示SDR0ETF曲线和HDR0ETF曲线从相同轨迹分支的级别。Pf表示对应于分支级别的输入亮度级别。注意,分支级别B可以是大于或等于0的任意值。注意,在未指定分支级别的情况下,其近似于相应的分配操作方法,或者在接收侧总体上获得比率。[0283]动态范围转换的转换信息是用于将HDR发送图像数据中的相对最大级别M的分支级别B转换成SDR光电转换特性的转换数据的值的信息,并且是转换系数或转换表。在由转换表给出信息的情况下,通过参考转换表来进行动态范围转换。另一方面,在通过转换系数给出信息的情况下,通过使用转换系数进行计算来进行动态范围转换。例如,当转换系数为C时,可以通过以下等式1对相对最大级别G的分支级别B的输入数据执行转换。[0284]输出数据=分支级别B+输入数据-分支级别®*C.••1[0285]图21示出了在编码方法是HEVC的情况下在图片组GOP头部的访问单元。在HEVC编码方法的情况下,用于解码“Prefix_SEI”的SEI消息组设置在像素数据被编码的薄片之前,并且在薄片之后,设置用于显示“SEFIX_SEI”的SEI消息组。例如,如图所示,传递函数SEI消息和动态范围转换SEI消息被设置为SEI消息组“Sufnx_SEI”。[0286]图22的(a示出了传递函数SEI消息的示例结构(语法)。图22的⑹示出了示例结构中的主要信息的细节语义)。“传递函数”的8位字段表示发送视频数据VI的光电转换特性或与光电转换特性对应的电光转换特性。在该元素的值与VUI的“传递函数”的值不同的情况下,用该元素的值进行替换。[0287]例如,“1”表示“BT.709-5传递函数(SDR”,“14”表示“10位BT•2020传递函数SDR”,“ie”表示“SMPTE2084传递函数(HDR1”,“18”表示“ARIBSTDB-67传递函数⑽R2,,。[0288]“peakjuminance”的ie位字段表示最大亮度级别。例如,在程序或场景内,最大亮度级别指示内容的最大亮度级别。在接收侧,当创建适合于显示能力的显示图像时,该值可以用作参考值。“c〇l〇r_spaCe”的8位字段表示颜色空间信息。[0289]图23示出了动态范围转换SEI消息的示例结构语法)。图24示出了示例结构中的主要信息的细节语义)。“Dynamic—range—conv_cancel_flag”的1位标志信息指示是否要届撕“Dynamic—range—conv”的消息。“0”表示要刷新“Dynamic_range_conv”的消息。“1”表示不刷新“Dynamic_range_conv”的消息,g|],与前一消息保持原样。[0290]当“Dynamic—range—conv—cancel—flag”为“0”时,存在以下字段。“coded—data_bit—depth”的8位字段表示编码的像素位深度发送码值的位深度)。“reference_level”的14位字段指示参考亮度级别值,即,参考级别G参见图20。“ratio_—conversion_flag”的1位标志"[曰息表不执彳丁间单转换,即,存在转换系数。“conversion_table_flag”的1位标志信息表不转换基于转换表,即,存在转换表彳目息。“branchjevel”的16位字段表示分支级别B参见图20。[0291]当ratio一conversion—flag是“1”时,存在“levei—conversi〇n_rati〇”的8位字段《3该字段表示转换系数级别转换的比率)。当“conversi〇n_table_flag”是“1”时,存在“table_size”的8位字段。该字段表示转换表中的输入数量。然后,对于输入的数量,存在“level_R[i]”、“level—G[i]’’和“level—B[i]”的16位字段。“level—R[i]”的字段表示在转换红色分量红色分量之后的值。“leVel_G[i]”的字段表示在转换绿色分量红色分量之后的值。“level_B[i]”的字段表示在转换蓝色分量红色分量之后的值。[0292]注意,当编码的像素位深度是8位时,存在对应于输入数据的每个值的值。然而,当编码的像素位深度是10位、12位等时,仅存在与输入数据的高8位的相应值对应的值。在这种情况下,当在接收侧使用转换表时,插值用于其余的低位的值。[0293]返回参考图18,容器编码器105生成包含由视频编码器104生成的预定数量的视频流VS的容器,在此处是MP4流,作为分配流STM。[0294]即,在执行情况1和情况2的传输的情况下,生成包括包含第一和第二图像数据的编码图像数据的第一视频流的MP4流和包括包含第三和第四图像数据的编码图像数据的第二视频流的MP4流参见图6、图7和图11。[0295]另一方面,在执行情况3的传输的情况下,生成包括包含第一图像数据的编码图像数据的第一视频流的MP4流、包括包含第二图像数据的编码图像数据的第二视频流的MP4流、包括包含第三图像数据的编码图像数据的第三视频流的MP4流和包括包含第四图像数据的编码图像数据的第四视频流的MP4流参见图6和图14。[0296]发送单元106通过广播波或网络分组将由容器编码器105获得的MP4分配流STM传输到服务接收器200。[0297]将简要描述图18中所示的服务发送系统100的操作。向HDR光电转换单元102提供高帧率超高清晰度例如,4K120P和高动态范围HDR图像数据视频数据Vh。在HDR光电转换单元102中,通过HDR光电转换特性对HDR视频数据Vh进行光电转换,并且获得HDR发送视频数据,作为利用HDR0ETF作为图像产生的视频材料。例如,应用STD-B67HLG的特性、ST2084的特性PQ曲线等,作为HDR光电转换特性。[0298]由HDR光电转换单元102获得的HDR发送视频数据VI由RGBYCbCr转换单元103从RGB域转换成YCbCr域,然后,提供给视频编码器104。在视频编码器104中,例如,对转换为YCbCr域的HDR发送视频数据VI应用MPEG4-AVC或HEVC等编码,获得编码图像数据,并且生成预定数量的视频流,包括编码图像数据。[0299]S卩,在执行情况1和情况2的传输的情况下,生成包括第一和第二图像数据的编码图像数据的第一视频流和包括第三和第四图像数据的编码图像数据的第二视频流参见图6、图7和图11。另一方面,在执行情况3的传输的情况下,生成包括第一图像数据的编码图像数据的第一视频流、包括第二图像数据的编码图像数据的第二视频流、包括第三图像数据的编码图像数据的第三视频流以及包括第四图像数据的编码图像数据的第四视频流参见图6和图14。[0300]此时,在视频编码器104中,将指示HDR发送视频数据VI的光电转换特性或与光电转换特性对应的电光转换特性的转换特性信息传递函数插入访问单元AU的SPSNAL单元的VUI的区域中。注意,在HDR发送视频数据VI的光电转换特性是STD-B67HLG的情况下,将指示BT.709伽马特性)的转换特性信息插入到VUI的区域中。在这种情况下,指示STD-B67HLG的转换特性信息设置在插入访问单元AU的“SEI”部分的传递函数SEI消息中渗见图22。[0301]另外,此时,在HDR光电转换单元102中应用ST2084PQ曲线)的特性,作为HDR光电转换特性的情况下,在视频编码器104中,将包括动态范围转换的转换信息的动态范围转换SEI消息参见图23插入访问单元AU的“SEI”部分中。转换信息是用于将通过ST2084PQ曲线的特性的转换数据的值转换为通过SDR光电转换特性的转换数据的值的转换信息。[0302]将由视频编码器104生成的预定数量的视频流VS提供给容器编码器105。在容器编码器105中,生成包括预定数量的视频流VS的容器,在此处是MP4流,作为分配流STM。[0303]g卩,在执行情况1和情况2的传输的情况下,生成包括包含第一和第二图像数据的编码图像数据的第一视频流的MP4流和包括包含第三和第四图像数据的编码图像数据的第二视频流的MP4流渗见图6、图7和图11。[0304]另一方面,在执行情况3的传输的情况下,生成包括包含第一图像数据的编码图像数据的第一视频流的MP4流、包括包含第二图像数据的编码图像数据的第二视频流的MP4流、包括包含第三图像数据的编码图像数据的第三视频流的MP4流以及包括包含第四图像数据的编码图像数据的第四视频流的MP4流参见图6和图14。[0305]将由容器编码器105作为分配流STM生成的MP4流提供给发送单元106。在发送单元106中,通过广播波或网络分组将由容器编码器105获得的MP4分配流STM传输到服务接收器200〇[0306]“服务接收器的示例配置”[0307]图25示出了服务接收器200的示例配置。服务接收器200包括控制单元201、接收单元202、容器解码器203、视频解码器204、YCbCrRGB转换单元205、HDR电光转换单元206和SDR电光转换单元207。[0308]控制单元201包括中央处理单元CPU,并且基于控制程序来控制服务接收器200的每个单元的操作。接收单元202从服务发送系统100接收通过广播波或网络分组传输的MP4分配流STM。[0309]在控制单元201的控制下,根据接收器200的解码能力,容器解码器多路复用器)103基于“moof”块的信息等从接收单元202所接收的MP4分配流STM中选择性地提取所需图像数据的编码图像数据,并且将编码图像数据传输到视频解码器204。[0310]例如,当接收器200具有能够处理高帧率超高清晰度图像数据的解码能力时,容器解码器203提取全部第一至第四图像数据的编码图像数据,并将编码图像数据传输到视频解码器2〇4。另外,例如,当接收器200具有能够处理基本帧率超高清晰度图像数据的解码能力时,容器解码器203提取第一和第三图像的编码图像数据数据,并且将编码的图像数据传输到视频解码器204。[0311]另外,例如,当接收器200具有能够处理高帧率高清晰度图像数据的解码能力时,容器解码器2〇3提取第一图像数据和第二图像数据的编码图像数据,并且将编码图像数据传输到视频解码器204。另外,例如,当接收器200具有能够处理基本帧率高清晰度图像数据的解码能力时,容器解码器203提取第一图像数据的编码图像数据,并将编码图像数据传输给视频解码器204。[0312]例如,容器解码器203检查插入到容器中的级别值tlevel_idc,将级别值与视频解码器204的解码能力进行比较,并确定是否可以接收。此时,从“moof”块中的“tlevel_idc”检测到与接收到的视频流中的整个流的复杂度general_level_idc对应的值。[0313]然后,在检测值高于接收器的解码能力的情况下,容器解码器203检查与视频流中的另一元素(sublayer_level_idc的值对应的“moof”块中的“tlevel_idc”,确定解码是否可能在可应用的范围内,并且将对应的图像数据的编码图像数据传送到视频解码器204。[0314]另一方面,从“moof”块中的“t1evel_idc”检测到与接收到的视频流中的整个流的复杂度general_level_idc对应的值,并且在该值对应于接收器的解码能力的情况下,容器解码器203按照解码时间戳的顺序将包含在接收到的视频流中的所有图像数据的编码图像数据传送到视频解码器204。[0315]视频解码器204将解码处理应用于由容器解码器203选择性地提取的编码图像数据中,以获得HDR发送视频数据VI’。例如,当接收器200具有能够处理高帧率超高清晰度图像数据的解码能力时,HDR发送视频数据VI’变成用于显示高帧率超高清晰度图像的图像数据。另外,例如,当接收器200具有能够处理基本帧率超高清晰度图像数据的解码能力时,HDR发送视频数据VI’变成用于显示基本帧率超高清晰度图像的图像数据。[0316]另外,例如,当接收器200具有能够处理高帧率高清晰度图像数据的解码能力时,KR发送视频数据VI’变成用于显示高帧率高清晰度图像的图像数据。另外,例如,当接收器200具有能够处理基本帧率高清晰度图像数据的解码能力时,HDR发送视频数据VI’变成用于显示基本帧率高清晰度图像的图像数据。[0317]另外,视频解码器204提取参数集和插入到由容器解码器203选择性地提取的编码图像数据中的SEI消息,并将其发送到控制单元201。[0318]所提取的信息还包括指示插入到上述访问单元的SPSNAL单元的VUI的区域中的发送视频数据VI的光电转换特性或电光转换特性的转换特性信息传递函数)以及传递函数SEI消息参见图22。利用该信息,控制单元201识别应用于HDR发送视频数据VI’的HDR光电转换特性。[0319]另外,当应用于HDR发送视频数据VI’的HDR光电转换特性是ST2084PQ曲线)的特性时,所提取的信息还包括动态范围转换SEI消息参见图23。利用该信息,控制单元201识别动态范围转换信息转换表、转换系数。[0320]YCbCrRGB转换单元205将由视频解码器204获得的HDR发送视频数据VI’从YCbCr亮度和色度域转换到RGB域。HDR光电转换单元206通过将HDR电光转换特性应用于转换为RGB域的HDR发送视频数据VI’来获得用于显示HDR图像的显示视频数据Vhd。在这种情况下,控制单元201针对HDR光电转换单元206设置从VUI识别的HDR电光转换特性或传递函数SEI消息,即,与应用于发送侧的HDR电光转换特性对应的HDR光电转换特性。[0321]SDR光电转换单元207通过将SDR电光转换特性应用于转换为RGB域的HDR发送视频数据VI’来获得用于显示SDR图像的显示视频数据Vsd。在此处,当应用于HDR发送视频数据VI’的HDR光电转换特性是STD-B67HLG的特性时,SDR光电转换单元207通过将SDR电光转换特性显示直接施加到HDR发送视频数据VI’来获得用于显示SDR图像的显示视频数据Vsd。[0322]另一方面,当应用于HDR发送视频数据VI’的HDR光电转换特性是ST2084PQ曲线)的特性时,SDR光电转换单元207通过基于动态范围转换信息转换表、转换系数对fflR发送视频数据VI’执行动态范围转换,来获得SDR发送图像数据,并且通过将SDR电光转换特性应用于SDR发送图像数据来获得用于显示SDR图像的显示视频数据Vsd。[0323]参考图26,将描述基于动态范围转换信息的动态范围转换的示例。纵轴表示与图20中的横轴对应的输出亮度水平。另外,横轴表示与图2〇中的纵轴对应的发送码值。实线a是表示SDR电光转换特性的SDRE0TF曲线。SDRE0TF曲线对应于由图20中的实线指示的SDR0ETF曲线。实线b是表示HDR电光转换特性的HDRE0TF曲线。HDRE0TF曲线对应于作为由图20中的实线b指示的HDROETF曲线的ST2〇84PQ曲线)的特性。注意,P1’指示与低于参考级另IJG的预定级别H对应的输出亮度级别。[0324]在动态范围转换中,转换在HDR发送视频数据VI’中直到低于参考级别G的预定级另IJH的输入数据,以便与通过SDR光电转换特性的转换数据的值一致。小于分支级别B的输入数据被设置为按原样输出数据。[0325]另外,对于从级别H到级别M的输入数据,基于由单点划线指示的色调映射特性TM来进行动态范围级别转换。在这种情况下,例如,级别H被转换为级别H’,参考级别G被转换为级别G’,并且级别M照原样设置为级别M。如上所述,对从H级别到M级别的输入数据进行基于色调映射特性TM的级别转换,由此可以由于从参考级别G到相对最高级别M的级别饱和而降低图像质量劣化.。[0326]将简要描述图25中所示的服务接收器200的操作。在接收单元2〇2中,从服务发送系统100中接收通过广播波或者网络分组传输的MP4分配流STM。将分配流STM提供给容器解码器203。[0327]在容器解码器2〇3中,在控制单元201的控制下,根据接收器200的解码能力,基于“moof”块信息等,从由接收单元202接收的MP4分配流STM中选择性地提取所需图像数据的编码图像数据,并且将该数据提供给视频解码器204。[0328]例如,当接收器200具有能够处理高帧率超高清晰度图像数据的解码能力时,在容器解码器203中,提取所有第一至第四图像数据的编码图像数据,并且将该数据提供给视频解码器204。另外,例如,当接收器200具有能够处理基本帧率超高清晰度图像数据的解码能力时,在容器解码器203中,提取第一和第三图像数据的编码图像数据,并且将该数据提供给视频解码器204。[0329]另外,例如,当接收器200具有能够处理高帧率高清晰度图像数据的解码能力时,在容器解码器203中,提取第一和第二图像数据的编码图像数据,并且将该数据提供给视频解码器204。另外,例如,当接收器200具有能够处理基本帧率高清晰度图像数据的解码能力时,在容器解码器203中,提取第一图像数据的编码图像数据,并且将该数据提供给视频解码器204。[0330]在视频解码器204中,将解码处理应用于由容器解码器203选择性地提取的编码图像数据,并且获得fflR发送视频数据VI’。例如,当接收器200具有能够处理高帧率超高清晰度图像数据的解码能力时,HDR发送视频数据VI’是用于显示高帧率超高清晰度图像的图像数据。另外,例如,当接收器200具有能够处理基本帧率超高清晰度图像数据的解码能力时,HDR发送视频数据VI’是用于显示基本帧率超高清晰度图像的图像数据。[0331]另外,例如,当接收器200具有能够处理高帧率高清晰度图像数据的解码能力时,HDR发送视频数据VI’是用于显示高帧率高清晰度图像的图像数据。另外,例如,当接收器200具有能够处理基本帧率高清晰度图像数据的解码能力时,HDR发送视频数据VI’是用于显示基本帧率高清晰度图像的图像数据。[0332]另外,在视频解码器204中,提取插入到由容器解码器203选择性地提取的编码图像数据中的参数集和SEI消息,并且将其发送到控制单元201。[0333]在控制单元201中,基于指示插入到SPSNAL单元的VUI的区域中的发送视频数据VI的光电转换特性或与该光电转换特性对应的电光转换特性的转换特性信息传递函数)以及传递函数SEI消息(参见图22,识别应用于HDR发送视频数据VI’的HDR光电转换特性。另外,在控制单元201中,基于动态范围转换SEI消息(参见图23,识别动态范围转换信息转换表、转换系数。[0334]由视频解码器204获得的HDR发送视频数据VI’由YCbCrRGB转换单元205从YCbCr域转换到RGB域,然后,提供给HDR电光转换单元206或SDR电光转换单元207。[0335]在HDR光电转换单元206中,将HDR电光转换特性应用于转换为RGB域的HDR发送视频数据VI’,并且获得用于显示HDR图像的显示视频数据Vhd。在这种情况下,对于HDR光电转换单元206,在控制单元201的控制下,HDR电光转换特性被设置为从VUI或传递函数SEI消息中识别,即,HDR电光转换特性对应于在发送侧应用的HDR光电转换特性。[0336]在SDR电光转换单元207中,将SDR电光转换特性应用于转换为RGB域的HDR发送视频数据VI’,并且获得用于显示SDR图像的显示视频数据Vsd。在这种情况下,当应用于HDR发送视频数据VI’的HDR光电转换特性是STD-B67HLG的特性时,将SDR电光转换特性直接应用于HDR发送视频数据VI’。[0337]另外,在这种情况下,当应用于HDR发送视频数据VI’的HDR光电转换特性是ST2084PQ曲线的特性时,基于到HDR发送视频数据VI’的动态范围转换信息转换表、转换系数),执行动态范围转换,获得SDR发送图像数据参见图26,并且将SDR电光转换特性应用于SDR发送图像数据。[0338]如上所述,在图3所示的发送接收系统10中,将信息插入到容器MP4流的“moof”块)中,该信息对应于插入到预定数量的视频流的每一个中并且与包括在视频流中的图像数据相关联的信息SPS信息)。因此,在接收侧,根据解码能力,基于该信息,通过从预定数量的流中包括的第一至第四图像数据中提取预定的编码图像数据,可以容易地执行解码处理。[0339]另外,在图3所示的发送接收系统10中,将指示HDR光电转换特性或与HDR光电转换特性对应的电光转换特性的转换特性信息插入到包括第一图像数据的编码图像数据的视频流中。因此,在接收侧,基于转换特性信息,可以容易地进行适当的电光转换。[0340]另外,在图3所示的发送接收系统1〇中,当高动态范围光电转换特性是PQ曲线的特性时,将用于将通过PQ曲线的特性的转换数据的值转换成通过标准动态范围光电转换特性的转换数据的值的转换信息插入到包括第一图像数据的编码图像数据的视频流中。因此,当高动态范围光电转换特性是PQ曲线的特性时,在执行标准动态范围显示的情况下,可以在接收侧令人满意地获得显示图像数据。[0341]2、变形例〉[0342]注意,在上述实施方式中,己经进行了描述,假设在相应不同轨道上传输基本流和增强流的情况下增强流取决于提取器的配置。然而,这仅仅是一个示例,事实上,即使没有提取器,也可以管理增强流的解码时间。[0343]g卩,在相应不同轨道上传输基本流和增强流的情况下,关于包括增强流的轨道,在“moof”的轨道片段tfdt的解码时间(tfdt中的“baseMediaDecodeTime”框中描述至少轨道的第一偏移信息,作为以l2〇Hz为单位的延迟信息,由此增强流的解码时间相对于基本流的解码时间移位了(1120秒,并且可以实现类似的事情。[0344]另外,在上述实施方式中,已经描述了容器是MP4IS0BMFF的示例。然而,在本技术中,容器不限于MP4,并且本技术甚至可以类似地应用于诸如MPEG-2TS和MMT等其他格式的容器中。[0345]另外,本技术也可以体现在下面描述的配置中。[0346]1—种发送装置,包括:[0347]图像处理单元,处理高帧率超高清晰度图像数据,以获得用于获取基本帧率高清晰度图像的第一图像数据、用于与第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与第一图像数据至第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据;[0348]发送单元,发送包括预定数量的视频流的容器,预定数量的视频流包括第一至第四图像数据的编码图像数据;以及[0349]信息插入单元,将与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到容器中。[0350]⑵根据⑴所述的发送装置,其中,[0351]由发送单元发送的容器包括第一视频流和第二视频流,第一视频流包括第一图像数据的编码图像数据和第二图像数据的编码图像数据,第二视频流包括第三图像数据的编码图像数据和第四图像数据的编码图像数据,并且[0352]信息插入单元[0353]在第一和第二视频流各自由一个轨道管理的状态下,将信息插入到容器中。[0354]⑶根据⑵所述的发送装置,其中,[0355]信息插入单元,[0356]在将信息插入容器中时,[0357]针对第一视频流,通过将与第一图像数据的编码图像数据相关联的信息和与第二图像数据的编码图像数据相关联的信息进行分组来执行插入,并且[0358]针对第二视频流,通过将与第三图像数据的编码图像数据相关联的信息和与第四图像数据的编码图像数据相关联的信息进行分组来执行插入。[0359]⑷根据⑵或⑶所述的发送装置,其中,[0360]在第一视频流中交替地编码第一图像数据的图片和第二图像数据的图片,并且[0361]在第二视频流中交替地编码第三图像数据的图片和第四图像数据的图片。[0362]⑸根据⑴所述的发送装置,其中,[0363]由发送单元发送的容器包括第一视频流和第二视频流,第一视频流包括第一图像数据的编码图像数据和第二图像数据的编码图像数据,第二视频流包括第三图像数据的编码图像数据和第四图像数据的编码图像数据,并且[0364]信息插入单元[0365]在第一和第二视频流各自由两个轨道管理的状态下,将信息插入到容器中。[0366]⑹根据⑸所述的发送装置,其中,[0367]在第一视频流中交替地编码第一图像数据的图片和第二图像数据的图片,并且[0368]在第二视频流中交替地编码第三图像数据的图片和第四图像数据的图片。[0369]⑺根据⑴所述的发送装置,其中,[037°]由发送单元发送的容器包括:第一视频流,包括第一图像数据的编码图像数据;第二视频流,包括第二图像数据的编码图像数据;第三视频流,包括第三图像数据的编码图像数据;以及第四视频流,包括第四图像数据的编码图像数据,并且[0371]信息插入单元[0372]在第一至第四视频流各自由一个轨道管理的状态下,插入信息。[0373]⑻根据⑴至⑺中任一项所述的发送装置,其中,[0374]高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的高动态范围光电转换特性的发送图像数据,并且[0375]信息插入单元[Q376]进一步将指示高动态范围光电转换特性或与高动态范围光电转换特性对应的电光转换特性的转换特性信息插入到包括第一图像数据的编码图像数据的视频流中。[0377]⑼根据⑻所述的发送装置,其中,[0378]高动态范围光电转换特性是混合对数伽玛特性。[0379]10根据⑻所述的发送装置,其中,[0380]高动态范围光电转换特性是PQ曲线特性。[0381]11根据(10所述的发送装置,其中,[0382]信息插入单元[0383]进一步将转换信息插入到包括第一图像数据的编码图像数据的视频流中,转换信息用于将基于PQ曲线特性的转换数据的值转换为基于标准动态范围光电转换特性的转换数据的值。[0384]12—种发送方法,包括:[0385]图像处理步骤,由图像处理单元处理高帧率超高清晰度图像数据,以获得用于获取基本帧率高清晰度图像的第一图像数据、用于与第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与第一图像数据至第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据;[0386]发送步骤,由发送单元发送包括预定数量的视频流的容器,预定数量的视频流包括第一至第四图像数据的编码图像数据;以及[0387]信息插入步骤,由信息插入单元将与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到容器中。[0388]13—种接收装置,包括:[0389]接收单元,接收包括预定数量的视频流的容器,其中,[0390]$定数量的视频流包括通过处理高帧率超高清晰度图像数据而获得的用于获取基本帧率高清晰度图像的第一图像数据、用于与第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与第一至第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据,[0391]将与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到容器中,并且[0392]接收装置还包括处理单元,处理单元根据解码能力,基于插入到容器中的信息,通过从第一至第四图像数据的编码图像数据中选择性地提取预定的编码图像数据并执行解码处理,来获得图像数据。[0393]14根据(13所述的接收装置,其中,[0394]高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的高动态范围光电转换特性的发送图像数据,[0395]将指示高动态范围光电转换特性或与高动态范围光电转换特性对应的电光转换特性的转换特性信息插入到包括第一图像数据的编码图像数据的视频流中,并且[0396]处理单元[0397]通过基于转换特性信息对通过解码处理获得的图像数据进行电光转换,来获得显示图像数据。[0398]15根据13所述的接收装置,其中,[0399]高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的高动态范围光电转换特性的发送图像数据,[0400]高动态范围光电转换特性是PQ曲线特性,[0401]将转换信息插入到包括第一图像数据的编码图像数据的视频流中,转换信息用于将基于PQ曲线特性的转换数据的值转换为基于标准动态范围光电转换特性的转换数据的值,并且[0402]处理单元[0403]在执行标准动态范围显示时,[0404]通过基于转换信息对通过解码处理获得的图像数据执行动态范围转换,来获得标准动态范围发送图像数据,并且通过对标准动态范围发送图像数据以标准动态范围电光转换特性执行电光转换,来获得显示图像数据。[0405]16—种接收方法,包括:[0406]接收步骤,由接收单元接收包括预定数量的视频流的容器,其中,[0407]预定数量的视频流包括通过处理高帧率超高清晰度图像数据而获得的用于获取基本帧率高清晰度图像的第一图像数据、用于与第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与第一至第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据,[0408]将与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到容器中,并且[0409]接收方法进一步包括处理步骤:由处理单元根据解码能力,基于插入到容器中的信息,通过从第一至第四图像数据的编码图像数据中选择性地提取预定的编码图像数据并执行解码处理,来获得图像数据。[0410]本技术的主要特征在于,当发送包括与时空可伸缩性相关的预定数量的视频流的容器时,将信息插入到容器MP4流的“m〇〇f”±夬中,该信息与插入到预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息SPS信息对应,据此,促进了在接收侧根据解码能力,基于插入到容器中的信息,从包括在预定数量的视频流中的第一至第四图像数据中提取预定的编码图像数据,并执行解码处理参见图7、图11和图14。[0411]附图标记列表[0412]10发送接收系统[0413]30A、30B基于MPEG-DASH的流分配系统[0414]31DASH流文件服务器[0415]32DASHMPD服务器[0416]33、33-1到33-N服务接收器[0417]34CDN[0418]35、35-1到35-M服务接收器[0419]36广播发送系统[0420]100服务发送系统[0421]101控制单元[0422]102HDR光电转换单元[0423]103RGBYCbCr转换单元[0424]104视频编码器[0425]105容器编码器[0426]106发送单元[0427]200、200A、200B、200C、200D服务接收器[0428]201控制单元[0429]202接收单元[0430]203容器解码器[0431]204、204A、204B、204C、204D视频解码器[0432]205YCbCrRGB转换单元[0433]206HDR电光转换单元[0434]207SDR电光转换单元。

权利要求:1.一种发送装置,包括:图像处理单元,处理高帧率超高清晰度图像数据,以获得用于获取基本帧率高清晰度图像的第一图像数据、用于与所述第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与所述第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与所述第一图像数据至所述第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据;发送单元,发送包括预定数量的视频流的容器,所述预定数量的视频流包括所述第一图像数据至所述第四图像数据的编码图像数据;以及信息插入单元,将与插入到所述预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到所述容器中。2.根据权利要求1所述的发送装置,其中,由所述发送单元发送的容器包括第一视频流和第二视频流,所述第一视频流包括所述第一图像数据的编码图像数据和所述第二图像数据的编码图像数据,所述第二视频流包括所述第三图像数据的编码图像数据和所述第四图像数据的编码图像数据,并且所述信息插入单元在所述第一视频流和所述第二视频流各自由一个轨道管理的状态下,将信息插入到所述容器中。3.根据权利要求2所述的发送装置,其中,所述信息插入单元,在将信息插入到所述容器中时,针对所述第一视频流,通过将与所述第一图像数据的编码图像数据相关联的信息和与所述第二图像数据的编码图像数据相关联的信息进行分组来执行插入,并且针对所述第二视频流,通过将与所述第三图像数据的编码图像数据相关联的信息和与所述第四图像数据的编码图像数据相关联的信息进行分组来执行插入。4.根据权利要求2所述的发送装置,其中,在所述第一视频流中交替地编码所述第一图像数据的图片和所述第二图像数据的图片,并且在所述第二视频流中交替地编码所述第三图像数据的图片和所述第四图像数据的图片。5.根据权利要求1所述的发送装置,其中,由所述发送单元发送的容器包括第一视频流和第二视频流,所述第一视频流包括所述第一图像数据的编码图像数据和所述第二图像数据的编码图像数据,所述第二视频流包括所述第三图像数据的编码图像数据和所述第四图像数据的编码图像数据,并且所述信息插入单元在所述第一视频流和所述第二视频流各自由两个轨道管理的状态下,将信息插入到所述容器中。6.根据权利要求5所述的发送装置,其中,在所述第一视频流中交替地编码所述第一图像数据的图片和所述第二图像数据的图片,并且在所述第二视频流中交替地编码所述第三图像数据的图片和所述第四图像数据的图片。7.根据权利要求1所述的发送装置,其中,由所述发送单元发送的容器包括:第一视频流,包括所述第一图像数据的编码图像数据;第二视频流,包括所述第二图像数据的编码图像数据;第三视频流,包括所述第三图像数据的编码图像数据;以及第四视频流,包括所述第四图像数据的编码图像数据,并且所述信息插入单元在所述第一视频流至所述第四视频流各自由一个轨道管理的状态下,插入信息。8.根据权利要求1所述的发送装置,其中,所述高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的所述高动态范围光电转换特性的发送图像数据,并且所述信息插入单元进一步将指示所述高动态范围光电转换特性或与所述高动态范围光电转换特性对应的电光转换特性的转换特性信息插入到包括所述第一图像数据的编码图像数据的视频流中。9.根据权利要求8所述的发送装置,其中,所述高动态范围光电转换特性是混合对数伽玛特性。10.根据权利要求8所述的发送装置,其中,所述高动态范围光电转换特性是PQ曲线特性。11.根据权利要求10所述的发送装置,其中,所述信息插入单元进一步将转换信息插入到包括所述第一图像数据的编码图像数据的视频流中,所述转换信息用于将基于所述PQ曲线特性的转换数据的值转换为基于标准动态范围光电转换特性的转换数据的值。12.—种发送方法,包括:图像处理步骤,由图像处理单元处理高帧率超高清晰度图像数据,以获得用于获取基本帧率高清晰度图像的第一图像数据、用于与所述第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与所述第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与所述第一图像数据至所述第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据;发送步骤,由发送单元发送包括预定数量的视频流的容器,所述预定数量的视频流包括所述第一图像数据至所述第四图像数据的编码图像数据;以及信息插入步骤,由信息插入单元将与插入到所述预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到所述容器中。13.—种接收装置,包括:接收单元,接收包括预定数量的视频流的容器,其中,所述预定数量的视频流包括通过处理高帧率超高清晰度图像数据而获得的用于获取基本帧率高清晰度图像的第一图像数据、用于与所述第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与所述第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与所述第一图像数据至所述第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据,将与插入到所述预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到所述容器中,并且所述接收装置进一步包括处理单元,所述处理单元根据解码能力,基于插入到所述容器中的信息,通过从所述第一图像数据至所述第四图像数据的编码图像数据中选择性地提取预定的编码图像数据并执行解码处理,来获得图像数据。14.根据权利要求13所述的接收装置,其中,所述高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的所述高动态范围光电转换特性的发送图像数据,将指示所述高动态范围光电转换特性或与所述高动态范围光电转换特性对应的电光转换特性的转换特性信息插入到包括所述第一图像数据的编码图像数据的视频流中,并且所述处理单元通过基于所述转换特性信息对通过所述解码处理获得的图像数据执行电光转换,来获得显示图像数据。15.根据权利要求13所述的接收装置,其中,所述高帧率超高清晰度图像数据是具有通过对高动态范围图像数据以高动态范围光电转换特性执行光电转换而给出的所述高动态范围光电转换特性的发送图像数据,所述高动态范围光电转换特性是PQ曲线特性,将转换信息插入到包括所述第一图像数据的编码图像数据的视频流中,所述转换信息用于将基于所述PQ曲线特性的转换数据的值转换为基于标准动态范围光电转换特性的转换数据的值,并且所述处理单元在执行标准动态范围显示时,通过基于所述转换信息对通过所述解码处理获得的图像数据执行动态范围转换,来获得标准动态范围发送图像数据,并且通过对所述标准动态范围发送图像数据以标准动态范围电光转换特性执行电光转换,来获得显示图像数据。16.—种接收方法,包括:接收步骤,由接收单元接收包括预定数量的视频流的容器,其中,所述预定数量的视频流包括通过处理高帧率超高清晰度图像数据而获得的用于获取基本帧率高清晰度图像的第一图像数据、用于与所述第一图像数据一起使用来获取高帧率高清晰度图像的第二图像数据、用于与所述第一图像数据一起使用来获取基本帧率超高清晰度图像的第三图像数据、以及用于与从所述第一图像数据至所述第三图像数据一起使用来获取高帧率超高清晰度图像的第四图像数据,将与插入到所述预定数量的视频流的每一个中并与视频流中包括的图像数据相关联的信息对应的信息插入到所述容器中,并且所述接收方法进一步包括处理步骤:由处理单元根据解码能力,基于插入到所述容器中的信息,通过从所述第一图像数据至所述第四图像数据的编码图像数据中选择性地提取预定的编码图像数据并执行解码处理,来获得图像数据。17.—种发送装置,包括:图像处理单元,处理高帧率图像数据,以获得用于获取基本帧率图像的第一图像数据以及用于与所述第一图像数据一起使用来获取高帧率图像数据的第二图像数据;发送单元,发送包括至少一个视频流的容器,所述至少一个视频流包括所述第一图像数据和所述第二图像数据的编码图像数据;以及信息插入单元,在所述容器中,与所述第一图像数据的编码图像数据对应地插入与所述第一图像数据的编码图像数据对应的视频流的级别规范值,并且与所述第二图像数据的编码图像数据对应地插入通过组合所述第一图像数据和所述第二图像数据的编码图像数据而获得的视频流的级别规范值。18.—种发送方法,包括:图像处理步骤,由图像处理单元处理高帧率图像数据,以获得用于获取基本帧率图像的第一图像数据以及用于与所述第一图像数据一起使用来获取高帧率图像数据的第二图像数据;发送步骤,由发送单元发送包括至少一个视频流的容器,所述至少一个视频流包括所述第一图像数据和所述第二图像数据的编码图像数据;以及信息插入步骤,由信息插入单元在所述容器中与所述第一图像数据的编码图像数据对应地插入与所述第一图像数据的编码图像数据对应的视频流的级别规范值,并且与所述第二图像数据的编码图像数据对应地插入通过组合所述第一图像数据和所述第二图像数据的编码图像数据而获得的视频流的级别规范值。19.一种接收装置,包括:接收单元,接收包括至少一个视频流的容器,其中,所述至少一个视频流包括用于获取基本帧率图像的第一图像数据以及用于与所述第一图像数据一起使用来获取高帧率图像数据的第二图像数据,在所述容器中,与所述第一图像数据的编码图像数据对应地插入与所述第一图像数据的编码图像数据对应的视频流的级别规范值,并且与所述第二图像数据的编码图像数据对应地插入通过组合所述第一图像数据和所述第二图像数据的编码图像数据而获得的视频流的级别规范值,并且所述接收装置进一步包括处理单元,所述处理单元根据解码能力,基于插入到所述容器中的所述视频流的所述级别规范值,通过从所述第一图像数据和所述第二图像数据的编码图像数据中选择性地提取至少一个编码图像数据并执行解码处理,来获得图像数据。20.—种接收方法,包括:接收步骤,由接收单元接收包括至少一个视频流的容器,其中,所述至少一个视频流包括用于获取基本帧率图像的第一图像数据以及用于与所述第一图像数据一起使用来获取高帧率图像数据的第二图像数据,在所述容器中,与所述第一图像数据的编码图像数据对应地插入与所述第一图像数据的编码图像数据对应的视频流的级别规范值,并且与第二图像数据的编码图像数据对应地插入通过组合所述第一图像数据和所述第二图像数据的编码图像数据而获得的视频流的级别规范值,并且所述接收方法进一步包括处理步骤:由处理单元根据解码能力,基于插入到所述容器中的所述视频流的所述级别规范值,通过从所述第一图像数据和所述第二图像数据的编码图像数据中选择性地提取至少一个编码图像数据并执行解码处理,来获得图像数据。

百度查询: 索尼公司 发送装置、发送方法、接收装置和接收方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。