买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明授权】图像解码装置及方法、以及记录介质_夏普株式会社_201611227733.4 

申请/专利权人:夏普株式会社

申请日:2012-03-07

公开(公告)日:2021-04-27

公开(公告)号:CN107087179B

主分类号:H04N19/176(20140101)

分类号:H04N19/176(20140101);H04N19/70(20140101);H04N19/119(20140101);H04N19/46(20140101);H04N19/122(20140101);H04N19/61(20140101);H04N19/463(20140101)

优先权:["20110310 JP 2011-053611"]

专利状态码:有效-授权

法律状态:2021.04.27#授权;2017.09.15#实质审查的生效;2017.08.22#公开

摘要:一种图像解码装置及方法、图像编码装置及方法以及记录介质。通过按每个解码单位对包括编码量化变换系数的编码数据进行解码而解码图像,编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,变换单位通过层次性地分割编码单位而形成,图像解码装置包括:解码单元,对将变换单位进行分割而获得的尺寸为变换单位的尺寸以下的部分单位,估计表示在部分单位中是否包含非零变换系数的非零变换系数存否信息,或者从编码数据解码非零变换系数存否信息,在非零变换系数存否信息表示在部分单位内存在非零变换系数的情况下,从编码数据解码部分单位内的变换系数。

主权项:1.一种图像解码装置,通过按每个解码单位对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,上述变换单位通过层次性地分割编码单位而形成,上述图像解码装置包括:解码单元,对将上述变换单位进行分割而获得的尺寸小于该变换单位的尺寸的部分单位,估计表示在该部分单位中是否包含非零变换系数的非零变换系数存否信息,在该非零变换系数存否信息表示在该部分单位内存在非零变换系数的情况下,从上述编码数据解码该部分单位内的变换系数,上述解码单元在上述部分单位为对应的变换单位的处理顺序中最后的部分单位的情况下,对该部分单位估计为存在非零变换系数。

全文数据:图像解码装置及方法、图像编码装置及方法以及记录介质[0001]本申请是国际申请日为2012年3月7日、国际申请号为PCTJP2012055805、国家申请号为201280012467.7、发明名称为“图像解码装置、图像编码装置以及编码数据的数据构造”的发明专利申请的分案申请。技术领域[0002]本发明涉及对编码数据进行解码的图像解码装置以及生成编码数据的图像编码装置。此外,涉及由图像编码装置生成且由图像解码装置参照的编码数据的数据构造。背景技术[0003]为了高效地传输或者记录动态图像,使用通过对动态图像进行编码而生成编码数据的动态图像编码装置(图像编码装置)以及通过对该编码数据进行解码而生成解码图像的动态图像解码装置(图像解码装置)。作为具体的动态图像编码方式,例如可举出如下方式等:在作为H_264MPEG—4.AVC非专利文献l、VCEGVideoCodingExpertGroup,视频编码专家组)中的共同开发用编码解码器CODEC的KTA软件中采用的方式;在TMuCTestModelunderConsideration,考虑中的测试模型)软件中采用的方式;以及在作为其后续编码解码器CODEC的局效率视频编码工作草案1WorkingDraft1ofHigh-EfficiencyVideoCoding非专利文献2,以下,也称为HEVCWD1中采用的方式。[0004]在这样的编码方式中,构成动态图像的图像picture由层次构造管理,通常按每个块进行编码,该层次构造由通过分割图像而获得的片段、通过分割片段而获得的编码单位有时也被称为宏块或者编码单元CU:CodingUnit以及通过分割编码单位而获得的块及分区构成。[0005]此外,在这样的编码方式中,通常基于通过对输入图像进行编码解码而获得的局部解码图像而生成预测图像,从输入图像原图像减去该预测图像而获得的预测残差有时也称为“差分图像”或者“残差图像”)被进行编码。此外,作为预测图像的生成方法,可举出画面间预测(帧间预测(interprediction以及画面内预测(帧内预测(Intraprediction〇[0006]在帧间预测中,将已解码的帧作为参照帧,应用使用了运动矢量的运动补偿,从而解码中的帧内的预测图像按每个预测单位生成。[0007]另一方面,在帧内预测中,基于解码中的帧的已解码区域,解码中的帧内的预测图像按每个预测单位生成。作为在H.264MPEG—4.AVC中使用的帧内预测的一例,可举出如下方法:按每个预测单位例如分区),(1从预先确定的预测模式组中选择任一个预测模式,2将已解码区域的像素值沿着与选择的预测模式对应的外插方向(预测方向)进行外插,从而生成该预测单位上的像素值的方法有时也称为“基本预测”)。[0008]并且,在非专利文献2中,记载了如下技术:通过将在解码中使用的信息的一部分进行省略跳过SKIP或者估计合并MERGE,从而削减编码数据的码量的技术。更具体而言,在构成在对CU进行解码时使用的编码数据的各种信息中,将表示在⑶中包含的变换树TT:transformtree的信息、表示巾贞间预测中的预测单位PU:predictionunit的分割方法的信息作为跳过的对象。在变换树TT中包含与在CU内的各部分区域中应用的变换单位Tlhtransformunit有关的信息。此外,将表示在帧间预测中的预测单位PU的分割方法的信息作为合并的对象。[0009]此外,在构成在对上述预测单位PU:predictionunit进行解码时使用的编码数据的各种信息中,将表示帧间预测的类型的信息、表示进行帧间预测时的参照图像的信息以及表示运动矢量的信息作为跳过或者合并的对象。[0010]此外,在非专利文献3中,公开了将合并的对象从在对⑶进行解码时使用的编码数据中包含的各种信息变更为在对PU进行解码时使用的编码数据中包含的各种信息的技术。[0011]现有技术文献[0012]非专利文献[0013]非专利文献1:“RecommendationITU-TH•264”,Te1ecommunicationStandardizationSectorofITU,032009[0014]非专利文献2:“JCTVC-C403”JointCollaborativeTeamonVideoCodingJCT-VCofITU-TSG16WP3andIS0IECJTC1SC29WG11,3rdMeeting:Guangzhou,CN,7-150ctober,2010[0015]非专利文献3:“JCTVC-D441”,JointCollaborativeTeamonVideoCodingJCT-VCofITU-TSG16WP3andISOIECJTC1SC29WG11,4thMeeting:Daegu,KR,20-28January,2011发明内容[0016]发明要解决的课题[0017]但是,在上述现有的构成中,在编码数据中包含的各种信息中,只有一部分成为跳过或者合并的对象。此外,包含成为跳过或者合并的对象的各种信息的编码数据被限定于在对⑶进行解码时使用的编码数据以及在对PU进行解码时使用的编码数据。[0018]因此,在上述现有的构成中,不能充分地削减编码数据的编码量。[0019]本发明是鉴于上述问题点而完成的,其目的在于,实现一种能够进一步削减编码数据的编码量的图像编码装置等。[0020]为了解决课题的手段[0021]为了解决上述课题,本发明的图像解码装置,通过对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,上述图像解码装置包括:解码单元,对将上述变换单位进行分割而获得的部分单位,估计表示在该部分单位中是否包含非零变换系数的非零变换系数存否信息,或者从上述编码数据解码该非零变换系数存否信息,且在该非零变换系数存否信息表示在该部分单位内存在非零变换系数的情况下,从上述编码数据解码包含该部分单位的解码单位内的各变换系数。[0022]根据上述结构,对将变换单位分割的部分单位,估计或者解码非零变换系数存否信息,且在非零变换系数存否信息表示存在非零变换系数的情况下,对包含该部分单位的解码单位内的变换系数进行解码,所以能够以部分单位进行是否存在非零变换系数的判断。[0023]为了解决上述课题,本发明的图像解码装置,通过对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,上述图像解码装置包括:解码单元,在上述编码数据中包含将存否信息进行合并merge或者跳过skip的合并跳过信息的情况下,不解码上述存否信息,上述存否信息表示在上述量化变换系数中是否包含频域的变换系数;以及估计单元,在上述编码数据中包含将上述存否信息进行合并或者跳过的合并跳过信息的情况下,估计该存否信息,上述解码单元使用上述估计单元所估计的存否信息,解码上述编码量化变换系数。[0024]这里,合并是指,省略解码所需的预定的信息,基于处于既定或者指定的位置的信息而估计。此外,跳过是指,省略解码所需的预定的信息,代替地使用估计值或者既定值。[0025]根据上述结构,不传输表示频域的变换系数的存在的有无的信息,仅传输合并跳过信息,就能够进行解码。[0026]因此,不需要传输以往需要传输的表示频域的变换系数的存在的有无的信息,所以比以往还能够削减编码数据的码量。[0027]为了解决上述课题,本发明的图像解码装置,通过对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,在上述编码数据中,包含按每个上述变换单位将在上述变换中使用的变换信息进行了编码的编码变换信息,所述图像解码装置包括:估计单元,在上述编码数据中,包含有按每个上述变换单位将上述变换信息以及上述量化变换系数进行合并或者跳过的合并跳过信息的情况下,通过上述合并跳过信息所表示的方法,估计该变换单位的上述变换信息以及上述量化变换系数。[0028]根据上述结构,由于能够以变换单位进行合并或者跳过,所以能够进一步削减编码数据的码量。[0029]为了解决上述课题,本发明的图像编码装置,输出包含编码量化变换系数的编码数据,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变,并量化的量化变换系数进行了编码的系数,其特征在于,所述图像编码装置包括:编码单元f上述编码数据中包含将存否信息进行合并或者跳过的合并跳过信息,上述存否信息表示在上述量化变换系数中是否包含频域的变换系数。[0030]根据上述结构,输出不包含表示频域的变换系数的存在的有无的信息而仅包含合并跳过信息的编码数据。[0031]因此,不需要将以往需要输出的表示频域的变换系数的存在的有无的信息包含在编码数据中,所以比以往还能够削减编码数据的码量。[0032]为了解决上述课题,在本发明的编码数据的数据构造中,上述编码数据包含对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的编码量化变$系数,其特征在于,包含将存否信息进行合并或者跳过的合并跳过信息,上述存否信息表示在上述量化变换系数中是否包含频域的变换系数。[0033]根据上述结构,成为不包含表示频域的变换系数的存在的有无的信息而仅包含合升阳bU1曰尼、tfJ秋m。_4]因此,不需要将以往需要的表示频域酸换系数的存在的有无的信息包含在编码数据中,所以比以往还能够削减编码数据的码量。[0035]发明效果_6]以上臟,f发明的图像解码装置为如下结构,其包括:解码单元,在编酸据中包含将存否,息进行、會并或者跳过的合并跳过信息的情况下,不解码上述存否信息,上述存否信息表示在上述量化g换系数中是否包含频域的变换系数;以及估计单元,在上述编码数据中包含将上述存否信息进行合并或者跳过的合并跳过信息的情况下,估计该存否信息,上述解码单元使用上述估计单元所估计的存否信息,解码上述编码量化变换系数。[0037]因此,由于不需要传输以往需要传输的表示频域的变换系数的存在的有无的信息,所以起到比以往还能够削减编码数据的码量的效果。附图说明[0038]图1是表示本发明的一个实施方式的动态图像解码装置的主要部分结构的框图。[0039]图2是表示由动态图像编码装置生成且由上述动态图像解码装置参照的编码数据的数据构造的图,(a是表示编码数据的图像层的结构的图,(b是表示在图像层中包含的片段层的结构的图,(c是表示在片段层中包含的TBLK层的结构的图,(d是表示在TBLK层中包含的⑶的结构的图,(e是表示关于⑶的帧间预测信息的结构的图,(f是表示关于⑶的帧内预测信息的结构的图,(g是表示关于CU的变换树的结构的图。[0040]图3是表示由动态图像编码装置生成且由上述动态图像解码装置参照的图像的结构的图,(a是表示从图像分割片段以及TBLK的状态的图,⑹、(c是表示从TBLK分割⑶的状态的图。[0041]图4是表示由动态图像编码装置生成且由上述动态图像解码装置参照的图像的结构的图,(a是表示从⑶分割帧内预测单位的状态的图,(b是表示从CU分割帧间预测单位的状态的图,(c是表示从CU分割变换单位的状态的图。[0042]图5是表示上述动态图像解码装置的CU信息解码部的处理的内容的语法表syntaxtable〇[0043]图6是表示上述⑶信息解码部的处理内容的图,⑸、⑹是表示合并标记、合并等级和合并对象的关系的图。[0044]图7是表示上述动态图像解码装置的PT信息解码部的处理内容的语法表。[0045]图8是表示上述PT信息解码部的处理内容的图,(a、(b、(c是表示合并标记、合并等级和合并对象的关系的图。[0046]图9是表示上述动态图像解码装置的TT信息解码部的处理的内容的语法表。[0047]图10是表示上述TT信息解码部的处理的内容的图,(a是表示处理内容的语法表,⑹是用于说明语法表的内容的图。[0048]图11是表示上述TT信息解码部的处理的内容的语法表。[0049]图12是表示上述TT信息解码部的处理内容的图,(a、(b是表示合并标记、合并等级和合并对象的关系的图。[0050]图13是用于说明合并的例子的图。L〇〇51」图14是用于说明合并的例子的图。[0052]图I5是表示本实施方式的动态图像编码装置的主要部分结构的框图。[0053]图16是用于表现频域的变换系数的存在有无CTC的说明图,(a是表示分割为非正方区域而表现CTC的情况下的图,(b是表示使用参数而表现CTC的情况下的图,(c是表使用扫描顺序而表现CTC的情况下的图。'、[0054]图17是用于说^动态图像解码装置以及动态图像编码装置能够用于动态图像的发送接收的图,(a是表示搭载了动态图像编码装置的发送装置的结构的框图,(b是表示搭载了动态图像解码装置的接收装置的结构的框图。、[0055]图1S是用于说明动态图像解码装置以及动态图像编码装置能够用于动态图像的记^以及再现的图,(a是表示搭载了动态图像编码装置的记录装置的结构的框图,(b是表示搭载了动态图像解码装置的再现装置的结构的框图。具体实施方式[0056]若基于附图说明本发明的图像解码装置以及图像编码装置的实施方式,则如下。另外,本实施方式的图像解码装置是从编码数据解码动态图像的装置。因此,以下,将其称为“动态图像解码装置”。此外,本实施方式的图像编码装置是通过对动态图像进行编码而生成编码数据的装置。因此,以下,将其称为“动态图像编码装置,,。[0057]另外,在本实施方式中,记载各信息主要成为合并的对象的情况,但关于跳过也是相同的。合并是指,省略解码所需的预定的信息,基于处于既定或者指定的位置的信息而估计。此外,跳过是指,省略解码所需的预定的信息,作为代替使用估计值或者既定值。[0058]编码数据#1的结构)[0059]在本实施方式的动态图像解码装置(图像解码装置)1的说明之前,使用图2〜4说明由本实施方式的动态图像编码装置2生成且由动态图像解码装置1解码的编码数据#1的结构。编码数据#1包括片段以及构成片段的多个图像。[0060]图2表示编码数据#1中的图像层以下的层次的构造。图2的(a是表示规定图像pCT的图像层的构造的图。图2的⑹是表示规定片段S的片段层的构造的图。图2的c是表示规定树块TreeblockTBLK的树块层的构造的图。图2的d是表示规定在树块TBLK中包含的编码单位CU:CodingUnit的⑶层的构造的图。[0061]此外,图2的(e是表示关于预测树PT:predictiontree的信息并且是作为关于帧间预测(画面间预测分区的预测信息PTI的帧间预测信息PTI_Inter的构造的图。图2的f是表示关于预测树PT的信息并且是作为关于帧内预测(画面内预测)分区的预测信息PTI的帧内预测信息PTI_Intra的构造的图。图2的(g是表示作为关于在编码单位⑶中包含的变换树TT:transformtree的信息的变换单位信息TTI的构造的图。[0062]此外,图3、4是表示从图像PICT分割片段S、树块TBLK、预测单位PU、变换单位TU的状态的图。[0063]图像层)[00M]在图像层中,规定动态图像解码装置i为了解码处理对象的图像PICT以下,也称为对象图像而参照的数据的集合。如图2的a所示,图像PICT包括图像头PH以及片段Si〜SNSNS为在图像PICT中包含的片段的总|»。[0065]另外,以下,在不需要区分各个片段Si〜SNS的情况下,有时省略符号的下标而记述。此外,关于在以下说明的编码数据#1中包含的数据并且是标注下标的其他数据,也是相同的。[0066]在图像头PH中,包含为了决定对象图像的解码方法而动态图像解码装置1参照的编码参数组。例如表示动态图像编码装置2在编码时使用的可变长编码的模式的编码模式信息entropy_coding_mode_flag为在图像头PH中包含的编码参数的一例。[0067]在entr〇py_c〇ding_mode_flag为0的情况下,该图像PICT通过LCECLowComplexityEntropyCoding,低复杂度熵编码)或者CAVLCContext-basedAdaptiveVariableLengthCoding,基于上下文的自适应可变长编码进行编码。此外,在entropy_coding_mode_flag为1的情况下,该图像PICT通过CABACContext-basedAdaptiveBinaryArithmeticCoding,基于上下文的自适应二进制算术编码进行编码。[0068]另外,图像头PH也被称为图像参数集PPS:PictureParameterSet。[0069]片段层)[0070]在片段层中,规定动态图像解码装置1为了解码处理对象的片段s也称为对象片段而参照的数据的集合。如图2的⑹所示,片段S包含片段头SH以及树块TBLK^TBLKfcNC为在片段S中包含的树块的总数的片段。[0071]在片段头SH中,包含为了决定对象片段的解码方法而动态图像解码装置1参照的编码参数组。指定片段类型的片段类型指定信息Slice_type为在片段头SH中包含的编码参数的一例。[0072]作为可由片段类型指定信息指定的片段类型,可举出(1在编码时仅使用帧内预测的I片段、(2在编码时使用单方向预测或者帧内预测的P片段、(3在编码时使用单方向预测、双方向预测或者帧内预测的B片段等。[0073]此外,在片段头SH中,也可以包含由动态图像解码装置1具备的环路滤波器未图示参照的滤波器filter参数。[0074]此外,如图3的(a所示,片段S通过图像PICT被分割而形成。在图3的(a中,图像PICT301被分割而形成片段S302。[0075]树块层)[0076]在树块层中,规定动态图像解码装置1为了解码处理对象的树块TBLK以下,也称为对象树块而参照的数据的集合。[0077]树块TBLK包括树块头TBLKH和编码单位信息CUi〜CUnlNL为在树块TBLK中包含的编码单位信息的总数)。这里,首先,若说明树块TBLK和编码单位信息⑶的关系,则如下。[0078]树块TBLK被分割为用于确定巾贞内预测或者巾贞间预测以及用于变换的各处理的块尺寸的单元。[0079]树块TBLK的上述单元通过递归的4叉树分割而被分割。以下,将该通过递归的4叉树分割而获得的树构造称为编码树codingtree。[0080]以下,将与作为编码树的末端的节点的叶(leaf对应的单元,作为编码节点codingnode而参照。此外,由于编码节点成为编码处理的基本的单位,所以以下,也将编码节点称为编码单位CU。[0081]即,编码单位信息(以下,称为⑶信息CUi〜⑶NL为与将树块TBLK递归性地进行四叉树分割而获得的各编码节点编码单位对应的信息。[0082]此外,编码树的根root与树块TBLK相对应。换言之,树块TBLK与将多个编码节点递归性地包含的四叉树分割的树构造的最上位节点相对应。[0083]另外,各编码节点的尺寸都为该编码节点直接所属的编码节点(S卩,该编码节点的1层次上位的节点的单元的尺寸的纵横的一半。[0084]此外,各编码节点可取的尺寸依赖于在编码数据#1的片段参数集SPS中包含的、编码节点的尺寸指定信息以及最大层次深度maximumhierarchicaldepth。例如在树块TBLK的尺寸为64X64像素且最大层次深度为3的情况下,该树块TBLK以下的层次中的编码节点可取4种尺寸、即64X64像素、32X32像素、16X16像素以及8X8像素中的任一个。[0085]此外,作为块构造,如图3的a所示,片段S被分割而形成树块TBLK303。并且,如图3的⑹所示,树块TBLK303被分割而形成CU311。[0086]此外,图3的(c表示在最大层次深度为“2”的情况下,树块TBLK303进行四叉树分割的情况。如图3的(c所示,在最大层次深度为“2”且后述的CU分割标记Split_C〇ding_unit_flag的值在层次0中为“1”且在层次1中也为“i”的情况下,CU311b成为编码节点。另夕卜,在最大层次深度为“1”且⑶分割标记的值在层次〇中为“1”的情况下,⑶311a成为编码节点。[0087]树块头)[0088]在树块头TBLKH中,包含动态图像解码装置1为了决定对象树块的解码方法而参照的编码参数。具体而言,如图2的c所示,包含指定对象树块向各CU的分割模式的树块分割信息SP_TBLK以及指定量化步骤的大小的量化参数差分AqpqP_delta。[0089]树块分割信息SP_TBLK为表示用于分割树块的编码树的信息,具体而言,在对象树块中包含的各CU的形状、尺寸以及指定在对象树块内的位置的信息。[0090]另外,树块分割信息SP_TBLK也可以不明示性地包含⑶的形状或尺寸。例如,树块分割信息SP_TBLK也可以是表示是否将对象树块整体或者树块的部分区域进行四分割的标记split_coding_unit_flag的集合。此时,通过将树块的形状或尺寸并用,能够确定各⑶的形状或尺寸。[0091]此外,量化参数差分Aqp为,对象树块中的量化参数qp与就在该对象树块之前编码的树块中的量化参数qp’的差分qp—qp’。[0092]CU层)[0093]在CU层中,规定动态图像解码装置1为了解码处理对象的⑶以下,也称为对象CU而参照的数据的集合。[0094]这里,在⑶信息⑶中包含的数据的具体的内容的说明之前,说明在⑶中包含的数据的树构造。编码节点成为预测树PT以及变换树TT的根。若说明预测树以及变换树,则如下。[0095]在预测树中,编码节点被分割为一个或者多个预测块,且规定各预测块的位置和尺寸。若用其他表现表示,预测块是构成编码节点的一个或者多个不重复的区域。此外,预测树包含通过上述分割而获得的一个或者多个预测块。[0096]预测处理按该每个预测块进行。以下,将作为预测的单位的预测块也称为预测单位PU:predictionunit。[0097]此外,在变换树中,编码节点被分割为一个或者多个变换块,且规定各变换块的位置和尺寸。若用其他表现表示,变换块是构成编码节点的一个或者多个不重复的区域。此夕卜,变换树包含通过上述分割而获得的一个或者多个变换块。[0098]变换处理按该每个变换块进行。以下,将作为变换的单位的变换块也称为变换单位TU:transforinunit〇[0099]CU信息CU的数据构造)[0100]接着,参照图2的d说明在⑶信息⑶中包含的数据的具体的内容。如图2的(d所示,CU信息⑶包含跳过标记SKIP、合并标记MRGJ:U、指定对象⑶向各预测单位的分割模式的PU分割信息SP_PU、预测类型信息PType、PT信息PT1以及TT信息TTI。[0101]跳过标记SKIP是表示是否对对象的⑶应用跳过模式的标记,在跳过标记SKIP的值为1的情况下,即在对对象CU应用跳过模式的情况下,成为跳过的对象的各种信息被省略,在解码时使用既定值或者估计值。另外,关于成为对象的各种信息,在后面叙述。此外,跳过标记SKIP在I片段中被省略。[0102]合并标记MRG_CU是表示是否对对象的⑶应用合并模式的标记,在合并标记MRG_CU的值为1的情况下,即在对对象CU应用合并模式的情况下,成为合并的对象的各种信息被省略,在解码时使用估计值。另外,关于成为对象的各种信息,在后面叙述。[0103]PU分割信息SP_PU为在对象⑶中包含的各PU的形状、尺寸以及用于决定在对象⑶内的位置的信息。例如PU分割信息SP_PU能够通过从对象CU指定帧内(Intra分割的帧内分割标记(intra_split_flag以及从对象⑶指定巾贞间分割的帧间分割标记(inter_partitining_idc中的至少任一个实现。[0104]帧内分割标记为在对象⑶中包含的各帧内PU使用帧内预测的PU的形状、尺寸以及指定在对象CU内的位置的信息。[0105]帧间(Inter分割标记为在对象⑶中包含的各帧间PU使用帧间预测的PU的形状、尺寸以及指定在对象⑶内的位置的信息。[0106]预测类型信息PType是指定作为对于对象PU的预测图像生成方法而使用帧内预测还是使用帧间预测的信息。[0107]PT信息PTI为与在对象⑶中包含的PT有关的信息。换言之,PT信息PTI为与在PT中包含的一个或者多个PU分别有关的信息的集合,且在由动态图像解码装置1生成预测图像时参照。如图2的(e、(f所示,PT信息PTI根据预测类型信息PType指定哪种预测方法而由帧间预测信息PTI^Inter或者帧内预测信息PH+Intra构成。以下,也将应用帧内预测的PU称为帧内PU,也将应用帧间预测的PU称为帧间PU。[0108]TT信息TTI为与在对象⑶中包含的TT有关的信息。换言之,TT信息TTI为与在TT中包含的一个或者多个TU分别有关的信息的集合,且在由动态图像解码装置1解码残差数据时参照。[0109]巾贞间预测信息PTI_Inter[0110]在帧间预测信息PTI_Inter中,包含在动态图像解码装置1通过帧间预测而生成帧间预测图像时参照的编码参数。如图2的e所示,在帧间预测信息PTI_Inter中,包含关于各PU的帧间预测参数PP_Interl〜PP_InterNeNe为在对象CU中包含的帧间预测PU的总数。[0川]通过2NX2N像素(与对象OJ相同的尺寸)、2NxN像素、NX2N像素以及NXN像素的四个对称的分割symmetricsplittings对对象CU进行分割而生成帧间PU。[0112]具体而言,使用图4的⑹进行说明。如图4的⑹所示,若从CU311被分割为2NX2N像素则成为PU412a,被分割为2NXN像素则成为PU412b以及PU412c,被分割为NX2N像素则成为PU412d以及PU412e,被分割为NXN像素则成为RJ412f〜PU412i。[0113]巾贞间预测参数)[0114]如图2的(e所示,帧间预测参数pp—inter包括合并标记MRG_PU、帧间预测类型IPT、参照图像索引RI、估计运动矢量索引PMVI、运动矢量残差MVD。[0115]丨|1贞内预测信息PTI—Intra[0116]在巾贞内预测信息PTI_Intra中,包含在动态图像解码装置1通过巾贞内预测而生成帧内预测图像时参照的编码参数。如图2的f所示,在帧内预测信息PTI_Intra中,包含关于各PU的帧内预测参数PP__Intral〜PP_IntraNaNa为在对象⑶中包含的帧内预测PU的总数。[0117]若帧内分割标记为1,则通过将对象⑶对称地分割为四个FU而生成帧内PU,若帧内分割标记为0,则不分割对象CU,对象⑶本身作为PU而被处理。因此,若将对象⑶的尺寸设为2NX2N像素,则帧内PU可取2NX2N像素不分割)以及NXN像素4分割)中的任一个尺寸这里,N=2n,n为1以上的任意的整数)。例如若128X128像素,则对象⑶能够分割为128X128像素以及64X64像素的帧内PU。[0118]具体而言,使用图4的a进行说明。如图4的(a所示,若从⑶311被分割为2NX2N像素则成为PU411a,被分割为NXN像素则成为PU412b〜PU412e。[0119]帧内预测参数PP_Intra[0120]如图2的⑴所示,帧内预测参数PP_Intra包括合并标记MRG_PU、帧内预测模式IPM。[0121]TT信息HI[0122]如图2的g所示,TT信息TTI包含在对象⑶中包含的TU的总数个的合并标记MRG_TU、变换尺寸TTS、变换类型TTType、变换系数TTC、空间区域的变换系数的存在的有无CBP、频域的变换系数的存在的有无CTC、量化预测残差QD。[°123]这里,频域的变换系数的存在的有无CTC是包含表示在对象频域对象变换单位)中包含的各变换系数是否为0的信息、表示在将对象频域分割而获得的各部分单位中是否包含非零变换系数的信息非零变换系数存否信息的概念。[°124]另外,表示在对象频域中包含的各变换系数是否为0的信息有时也被称为significant_coeff_flag[xC][yC]这里,[xC][yC]表不对象频域中的各变换系数的位置),表示在将对象频域分割而获得的各部分单位中是否包含非零变换系数的信息有时也被称为3丨811丨;^〇111:_;〇6€;£'_81'〇叩_;£18|^€6][}^6]这里,1^06][700]表不对象频域中的各部分单位的位置。[0125]TU通过将对象⑶层次性地进行四叉树分割而形成,通过表示是否进行对象⑶或者对象⑶的部分区域的分割的信息split_transform_flag而决定尺寸。split_transform_flag基本上对四叉树的各节点进行编码,但也存在根据与变换尺寸有关的条件最大变换尺寸、最小变换尺寸、四叉树的最大层次深度被省略而估计的情况。[0126]图4的(c表示CU311被进行四叉树分割而形成TU的情况。如图4的(c所示,表示在层次〇以及层次1中进行节点的分割的情况下,PU413b成为TU。此外,在表示在层次0中进行节点的分割而在层次1中不进行节点的分割的情况下,PU413a成为TU。[0127]例如在最大层次深度为“2”且对象⑶的尺寸为64X64的情况下,在对象⑶中包含的TU可取64X64像素、32X32像素或者16X16像素的尺寸。[0128]量化预测残差QD为动态图像编码装置2对作为处理对象的块的对象块实施以下的处理1〜3而生成的编码数据。[0129]处理1:将从编码对象图像减去预测图像的预测残差进行DCT变换(DiscreteCosineTransform,离散余弦变换);[0130]处理2:将在处理1中获得的变换系数进行量化;[0131]处理3:将在处理2中量化的变换系数进行可变长编码;[0132]另外,上述量化参数qp表示在动态图像编码装置2对变换系数进行量化时使用的量化步骤QP的大小QP=2qp6。[0133]动态图像解码装置1[0134]接着,参照图1、5〜12说明动态图像解码装置1的构成。图1是表示动态图像解码装置1的主要部分结构的框图。如图1所示,动态图像解码装置1是包括TBLK解码部解码单元)10和帧存储器21的结构,在TBLK解码部10中,包括TBLK信息解码部11、CU信息解码部12、PT信息解码部13、TT信息解码部解码单元)14以及CU图像生成部15。此外,在⑶信息解码部12中包括⑶信息估计部31,在PT信息解码部13中包括PT信息估计部32,在TT信息解码部14中包括TT信息估计部估计单元33。[0135]若大致地说,动态图像解码装置1是通过对编码数据#1进行解码而生成解码图像#2并进行输出的装置。此外,动态图像解码装置1是在其一部分中使用在H.264MPEG—4AVC标准中采用的技术、在作为VCEGVideoCodingExpertGroup,视频编码专家组)中的共同开发用编码解码器(CODEC的KTA软件中采用的技术、在TMuCTestModelunderConsideration,考虑中的测试模型)软件中采用的技术以及在作为其后续编码解码器CODEC的高效率视频编码工作草案1WorkingDraft1ofHigh-EfficiencyVideoCodingHEVCWD1中采用的方式的动态图像解码装置。[0136]动态图像解码装置1是按每个预测单位生成预测图像,并通过将生成的预测图像和从编码数据#1解码的预测残差进行相加而生成解码图像#2并输出的装置。[0137]输入到动态图像解码装置1的编码数据#1输入到TBLK解码部10的TBLK信息解码部11。[0138]TBLK信息解码部11[0139]TBLK信息解码部11从输入的编码数据#1解码在树块头TBLKH中包含的树块分割信息SP_TBLK以及量化参数差分AqpTBLKH信息)。[0140]在树块分割信息中,包含在对象树块中包含的各CU的形状、尺寸以及指定对象树块内的位置的信息。并且,将包含所解码的TBLKH信息以及编码单位信息CU的分割信息#11输出到⑶信息解码部12。[0141]CU信息解码部12[0142]⑶信息解码部12从TBLK信息解码部11输入的分割信息#11解码CU信息CU而生成⑶觯妈1目心以1、CU解码彳目息#22、CU解码信息#23。并且,将CU解码信息#21输入到PT信息解码部13,将CU解码信息#22输入到TT信息解码部14,将CU解码信息哪输入到CU图像生成部15。[0143]若更具体地说明,则CU信息解码部12解码在⑶信息CU中包含的跳过标记SKIPskip_flag以及合并标记mrg一CUcu—merge—flag。并且,在合并标记MRG_CU的值为“丄”的情况下,进一步解码CU合并估计标记(cu_merge_left_flag和⑶合并等级标记(cu_merge—level〇[0144]这里,CU合并估计标记是表示用于估计值的参照目标的标记,cu合并等级标记是用于决定成为合并的对象的信息的标记。[0145]并且,⑶信息解码部I2的cu信息估计部31基于跳过标记SKIP、合并标记MRG_CU、⑶合并估计标记、CU合并等级标记,解码或者估计PU分割信息SP_PU的值以及预测类型信息PType的值。[0146]更详细而言,⑶信息估计部31根据CU合并估计标记cu_mergelag的值而决定成为参照对象的CU参照CU。并且,在参照⑶为帧内预测⑶的情况下(g卩,PredMode为MODE一INTRA,将参照⑶的帧内分割标记(intra_split_flag的值估计为对象⑶的巾贞内分割标记的值。[0147]此外,在参照CU为帧间预测CU的情况下(即,PredMode为M0DE_INTER,设定对象CU的帧内分割的值,使得成为最接近参照⑶内的PU并且是与和对象CU相邻的参照CU的边界的边相邻的中尺寸最小的的尺寸。[0148]并且,⑶信息解码部I2将包含所解码的跳过标记SKIP的值、合并标记MRG_⑶的值以及,在合并标记MRG_CU的值为“1”的情况下,所解码的⑶合并估计标记、CU合并等级标记的值)、解码或者估计的分割信息SP—PU的值、同样地解码或者估计的预测类型信息PType的值的⑶解码信息#21输出到PT信息解码部13。[0149]此外,⑶信息解码部12将包含所解码的跳过标记SKIP的值、合并标记MRG_CU的值以及,在合并标记MRG_CU的值为“1”的情况下,所解码的⑶合并估计标记、CU合并等级标记的值的⑶解码信息#22输出到TT信息解码部14。[0150]此外,CU信息解码部12将包含所解码或者估计的PU分割信息SP_PU的值以及预测类型信息PType的值的⑶解码信息#23输出到⑶图像生成部15。[0151]接着,参照图5、6说明⑶信息解码部12中的处理。图5是表示⑶信息解码部12中的处理的内容的语法表。此外,图6是用于说明CU信息解码部12中合并的对象的图,图6的a是表示合并标记以及⑶合并等级标记和解码对象的关系的图,图6的⑹是表示合并标记以及⑶合并等级标记和合并对象的关系的图。[0152]如图5所示,首先,⑶信息解码部12解码在编码单位信息⑶中包含的跳过标记SKIPskip_flagst501。并且,若跳过标记SKIP的值为“i”(st502,则进入预测单位PU中的处理(st503。[0153]另一方面,若跳过标记SKIP的值不是“i”,则解码合并标记MRG_CTcu_merge_flagst504。并且,若合并标记MRG_CT的值为“i”,则进一步解码⑶合并估计标记cu_merge_left_flag、QJ合并等级标记(cu_merge_levelst505。[0154]接着,CU信息估计部31解码或者估计预测类型信息PTypepredjnodest506。并且,在解码或者估计的预测类型信息PType表示帧内预测的情况下,解码或者估计帧内分割标记(intra_split_flagst507。[0155]另一方面,在解码或者估计的预测类型信息PType表示帧间预测的情况下,解码或者估计巾贞间分割标记inter_partitining_idcst508。[0156]然后,进入预测单位PU中的处理prediction_unit、st509、变换单位TU中的处理transform—tree、st510〇[0157]接着,参照图6的a,说明成为解码以及估计的对象的标记。在图6的a中,“〇”表示成为解码的对象,“inf表示使用估计值,“一”表示不需要。[0158]如图6的a所示,在合并标记MRG_CU的值为“0”的情况下,以⑶单位解码成为解码或者估计的对象的全部标记。此外,在合并标记MRG_CU的值为且合并等级标记的值为“0”的情况下,解码口^1_1110164代1;1_〇1;;1_011_1111:11:、1;抑113£〇;1:111_1;代6这三个,估计;1_111;抑_split—flag、inter_partitining—idc这两个。[0159]此外,在合并标记MRG_CU的值为“i”且合并等级标记的值也为“J_”的情况下,解码prediction_unit、transform_tree这两个,估计pred—mode、intra—split—flag、inter—partitining」dc这三个。[0160]此外,合并标记MRG_CU以及CU合并等级标记和合并对象的关系也可以成为如图6的⑹所示。即,也可以在合并标记MRG_CU的值为且⑶合并等级标记的值也为的情况下,预测单位prediction_unit以及变换单位transform_unittree这两个成为合并对象。此外,也可以在合并标记MRG_CT的值为且⑶合并等级标记的值为“0”的情况下,仅预测单位prediction_unit成为合并的对象。[0161]PT信息解码部13[0162]PT信息解码部13解码从⑶信息解码部12输入的⑶解码信息#21而生成PT解码信息#31。并且,将生成的PT解码信息#31输入到⑶图像生成部15。[0163]若更具体说明,则PT信息解码部13解码在PT信息PTI中包含的合并标记MRG_PUpu_merge_flag。并且,若合并标记MRG_PU的值为“i”,则解码PU合并估计标记(pu_merge_left_flag和PU合并等级标记pu__merge_level〇[0164]这里,PU合并估计标记是表示用于估计值的参照目标的标记,PU合并等级标记是用于决定成为合并的对象的信息的标记。[0165]并且,PT信息解码部13的PT信息估计部32基于合并标记MRG_⑶、CU合并估计标记、CU合并等级标记、合并标记MRG_PU、PU合并估计标记、PU合并等级标记,解码或者估计中贞内预测板式IPMprev_intra—luma_pred—flag、rem—intra_luma_pred_mode的值、帧间预测类型IPTinter_pred_idc的值、运动矢量估计方法MVPmvp_idx_lX的值、运动矢量残差MVDmvdjX的值、参照图像RIref_idx_lX的值、加权预测系数weighted_pred—param的值。[0166]更详细而言,PT信息估计部32根据PU合并估计标记pu_mergejeft_flag的值而决定成为参照对象的PU参照PU。并且,在参照PU属于帧内预测⑶的情况下,将参照PU的帧内预测模式intrajnode的值估计为对象PU的帧内预测模式的值。[0167]此外,在参照PU属于帧间预测⑶的情况下,将表示既定的帧内预测模式例如DC预测模式的值设定为对象PU的帧内预测模式的值。[0168]这里,帧内预测模式在编码数据中由表示帧内预测模式和估计值的一致的标记prev_intra_luma_pred_flag以及桢内预测模式的残差rem_intra_luma_pred_mode的组合而表现。在上述帧内预测模式的估计中,帧内预测模式既可以被直接估计,也可以通过估计prev—intra—luma_pred_flag和rem_intra_luma_pred_mode而被间接估计。[0169]并且,PT信息解码部13基于运动矢量估计方法MVP和运动矢量残差MVD而生成运动矢量MV。并且,PT信息解码部I3将包含帧内预测模式IPM、帧间预测类型IPT、运动矢量MV、参照图像RI、加权预测系数的PT解码信息#32输出到⑶图像生成部15。[0170]接着,参照图7、8说明PT信息解码部13中的处理。图7是表示PT信息解码部13中的处理的内容的语法表。此外,图8是用于说明在PT信息解码部13中合并的对象的图,图8的a是表示合并标记以及PU合并等级标记和解码对象的关系的图,图8的(b、(c是表示合并标记以及PU合并等级标记和合并对象的关系的图。[0171]如图7所示,PT信息解码部13若跳过标记SKIP的值为Tst701,则解码运动矢量估计方法MVPmv_preditorst7〇2。另外,mv_preditor为将mvp_idc_lX进行上位概念化的参数。_^[0172]另一方面,若跳过标记SKIP的值不是“j_”,则PT信息解码部13确认合并标记MRG_CU,若合并标记MRG_CU的值为Y,则将合并标记MRG_PU、PU合并估计标记的值设为与合并标记MRG_CU、⑶合并估计标记的值相同。此外,若预测类型信息PType为帧间预测,则将PU合并等级标记的值设为与⑶合并等级标记的值相同st703。[0173]此外,若合并标记MRG—CU的值不是“J_”,则解码合并标记MRG—PUpu_merge_flag3[0201]的情况下,按将该对象频域分割而获得的每个部分单位CGCoeffGroup解码或者估计变换系数的存在有无。[0202]2估计和解码按照以下的条件进行选择。[0203]a在对象部分单位中包含DC的情况下,或者⑹在对象部分单位为对象频域的处理顺序中最后的部分单位的情况下,或者c在对象部分单位的右侧相邻的部分单位以及对象部分单位的下侧相邻的部分单位的双方中包含非零变换系数的情况下,即满足[0204]i==numLastSubset||rightCGFlag+bottomCGFlag==2||i==0的情况下,在CTC中,对对象部分单位估计为存在非零变换系数,在除此之外的情况下,在CTC中,解码关于对象部分单位的非零变换系数存否信息。[0205]并且,TT信息解码部14将包含变换尺寸TTS、基于变换系数的存在有无的信息TTC、CBP而解码或者估计的变换系数的TT解码信息#41输出到⑶图像生成部15。[0206]接着,参照图9〜图12说明TT信息解码部14中的处理。[0207]图9〜11是表示TT信息解码部14中的处理的内容的语法表。此外,图12是用于说明在TT信息解码部14中合并或者跳过的对象的图,图12的a是表示合并标记以及PU合并等级标记和解码对象的关系的图,图12的(b是表示跳过标记TU_skip_flag以及跳过等级标记TU_skip_level和跳过对象的关系的图。[0208]如图9所示,TT信息解码部14在合并标记MRG_CT的值为“1”的情况下,将合并标记MRG_TU以及TU合并估计标记的值设为合并标记MRG_⑶以及⑶合并估计标记的值。此外,若预测类型信息PType为帧间预测,则将TU合并等级标记的值设为与⑶合并等级标记的值相同(st901。[0209]此外,若合并标记MRG_CU的值不是“i”,则解码合并标记MRG—TUtu_merge_flag。并且,若合并标记MRG_TU的值为“i”,则解码TU合并估计标记(tu_mergejeft:flag、TU合并等级标记(tu_merge_levelst902。[0210]接着,11'信息解码部14解码变换类型1'1^口61^1181^〇]:111_1}^3903,且根据编码模式信息而分为CABAC的情况st904和LCEC的情况st905。[0211]图10的a表示编码模式信息为CABAC的情况下的语法表。如图10的a所示,T1^息解码部14在帧内预测的情况下,解码表示是否具有每个空间区域的变换系数的变换系数存否信息CVno_resudual—data_flagstlOOl。并且,解码或者估计变换尺寸TTSstlO〇2,此外,解码或者估计空间区域的变换系数的存在有无CBP、频域的变换系数的存在有无CTCstl003。[0212]另外,在有如图10的(b所示的块且各块的变换系数的存在有无由f〇〜f3表现的情况下,频域的变换系数的存在有无CTCcoded_trans_coeff_pattern成为coded_trans_coeff_pattern=f0+f1Thk||relHkcntkThk?1:0[0262]在合并时,若relVkrelHk,则将参照的PU的位置设为上侧,若不是,则设为左侧不解码表示合并对象的位置的信息)。此外,在不满足条件的情况下,解码对应的标记。[0263]最后,对PU解码、kl彡k彡M执行以下的处理。[0264]1syntaxk在对象PU和上侧相邻PU中一致的情况下:relVk+=1[0265]2syntaxk在对象PU和左侧相邻RJ中一致的情况下:relHk+=1[0266]3cntk+=1[0267]备注事项4[0268]此外,也可以使用头发送要合并的对象。这既可以例如将对象明示性地传输,也可以从既定的组合中选择,也可以仅传输对于特定的等级的对象。[0269]备注事项5[0270]合并等级也可以在对象⑶、PU、TU的尺寸大于既定的尺寸的情况下传输。[0271]备注事项6[0272]此外,在上述实施方式中,将频域的变换系数的存在有无(以下,记载为CTC设为如图10的(b所示的表示在分割了频域的各部分频域中变换系数存在有无的标记的集合,但也可以是以下的表现。参照图16进行说明。图16是用于表现频域的变换系数的存在有无CTC的说明图,图16的a是表示分割为非正方区域而表现CTC的情况的图,图16的(b是表示使用参数而表现CTC的情况的图,图16的c是表示使用扫描顺序而表现CTC的情况的图。[0273]A非正方形区域的频域的分割的表现[0274]也可以将频域分割为非正方形的部分频域并对每个区域设定表示变换系数的存在有无的标记,并将汇集了该标记的信息设为CTC。例如,如图16的a所示,按DC部、水平边缘部水平频率分量大、垂直频率分量小的区域)、垂直边缘部垂直频率分量大、水平频率分量小的区域)、高频分量垂直水平频率分量都大的区域分割频域,并将各个区域中的变换系数的存在有无与标记fDC、f•H、fV、^•HF相关联,并设为CTC。在应用了这样的CTC的表现的情况下,合并处理中的估计能够通过复制表示所参照的TU中的对应的部分频域中的变换系数有无的标记而实现。此外,通过将被分割的频域不限制于正方形,能够更加灵活地设定变换系数的存在有无的标记。[0275]⑻参数表现[0276]也能够通过有关频率的参数来表现在频域内变换系数可存在的区域。如图16的b所示,定义参数k,并对CTC设定在水平频率分量为0以上且k以下、垂直频率分量为0以上且k以下的部分频域内包含变换系数这样的k的值。例如,在块尺寸为8X8像素的情况下,k=0意味着变换系数仅可存在于DC分量中,在k=7的情况下,意味着变换系数可存在于全部频率分量中。在应用了这样的CTC的表现的情况下,在将参照TU中的CTC的值设为V、将参照TU相对于对象TU的尺寸的比设为r的情况下,能够通过kzIntG^+r来导出合并处理中的对象TU中的CTC的值k的估计。这里,Int为取自变量的整数部分的函数。通过参数的表现,与单纯地分割频域的情况相比,能够以更细的精度来表现变换系数的存在有无。[0277]〇利用了扫描顺序的表现[0278]能够由在变换系数的扫描顺序中变换系数最后产生的位置last_C〇eff的可取范围来表现在频域内变换系数可存在的区域。如图16的(c所示,last_C〇eff被定义为,在频域中,变换系数按照箭头表示的顺序进行扫描时,最后产生了变换系数的位置。在TU的尺寸为8X8像素的情况下,取0〜63的值。由于变换系数在扫描顺序中只可能存在于0〜last_coeff的位置,所以通过决定last_coeff的范围,能够确定变换系数可存在的区域。若将参照TU中的last_coeff的值设为则合并处理中的对象TU中的last_C〇eff的可取范围能够估计为0〜minnZ+c^b—1。这里,a是表示last_coeff的位置的变化的值,例如设定TU的宽度。此外,b是在TU中包含的像素数。通过该方法,由于不变更扫描顺序就进行考虑了频域内的变换系数的存在有无的变换系数的编码,所以容易安装。[0279]本发明并不限定于上述实施方式,在权利要求所示的范围内可进行各种变形。即,将权利要求所示的范围适当地变形的技术手段组合而获得的实施方式也包含在本发明的技术的范围中。[0280]应用例)[0281]上述动态图像解码装置1以及动态图像编码装置2能够搭载到进行动态图像的发送、接收、记录、再现的各种装置中利用。另外,动态图像既可以是通过摄像机等拍摄的自然动态图像,也可以是通过计算机等生成的人工动态图像包括CG以及GUI。[0282]首先,参照图17说明能够将上述动态图像解码装置1以及动态图像编码装置2利用于动态图像的发送以及接收的例子。[0283]图17a是表示搭载了动态图像编码装置2的发送装置A的结构的框图。如图17a所示,发送装置A包括通过对动态图像进行编码而获得编码数据的编码部A1、使用编码部A1获得的编码数据对载波进行调制而获得调制信号的调制部A2、发送调制部A2获得的调制信号的发送部A3。上述动态图像编码装置2用作该编码部A1。[0284]发送装置A也可以作为对编码部A1输入的动态图像的供给源,还包括拍摄动态图像的摄像机A4、记录了动态图像的记录介质A5、用于从外部输入动态图像的输入端子A6以及生成或者加工图像的图像处理部A7。在图17a中,例示了发送装置A具备这些全部的结构,但也可以省略一部分。[0285]另外,记录介质A5既可以是记录了未被编码的动态图像的记录介质,也可以是记录了以与传输用的编码方式不同的记录用的编码方式编码的动态图像的记录介质。在后者的情况下,在记录介质A5和编码部A1之间介入将从记录介质A5读出的编码数据根据记录用的编码方式进行解码的解码部未图示即可。[0286]图17⑹是表示搭载了动态图像解码装置1的接收装置B的结构的框图。如图17⑹所示,接收装置B包括接收调制信号的接收部B1、通过对接收部B1接收到的调制信号进行解调而获得编码数据的解调部B2、通过对解调部B2获得的编码数据进行解码而获得动态图像的解码部B3。上述动态图像解码装置1用作该解码部B3。[0287]接收装置B也可以作为解码部B3输出的动态图像的供给目标,进一步包括显示动态图像的显示器B4、用于记录动态图像的记录介质B5以及用于将动态图像输出到外部的输出端子B6。在图17b中,例示了接收装置B具备这些全部的结构,但也可以省略一部分。[0288]另外,记录介质B5既可以是记录了未被编码的动态图像的记录介质,也可以是记录了以与传输用的编码方式不同的记录用的编码方式编码的记录介质。在后者的情况下,在解码部B3和记录介质B5之间介入将从解码部B3取得的动态图像根据记录用的编码方式进行编码的编码部未图示)即可。[0289]另外,传输调制信号的传输介质既可以是无线,也可以是有线。此外,传输调制信号的传输方式,既可以是广播这里是指没有预先确定发送目标的发送方式),也可以是通信这里是指预先确定发送目标的发送方式)。即,调制信号的传输也可以通过无线广播、有线广播、无线通信以及有线通信中的任一个实现。[0290]例如,地上数字广播的广播站广播设备等接收站电视接收机等为通过无线广播发送接收调制信号的发送装置A接收装置B的一例。此外,电缆电视广播的广播站广播设备等接收站(电视接收机等为通过有线广播发送接收调制信号的发送装置A接收装置B的一例。[0291]此外,使用了因特网的VODVideoOnDemand,视频点播服务或动态图像共享服务等的服务器工作站等客户机电视接收机、个人计算机、智能手机等为通过通信发送接收调制信号的发送装置A接收装置B的一例通常,在LAN中作为传输介质而使用无线或者有线中的任一个,在WAN中作为传输介质而使用有线)。这里,在个人计算机中,包含台式PC、便携式PC以及平板式PC。此外,在智能手机中,也包含多功能便携电话终端。[0292]另外,动态图像共享服务的客户机除了具有对从服务器下载的编码数据进行解码并显示在显示器中的功能之外,还具有对摄像机拍摄的动态图像进行编码并上载到服务器的功能。即,动态图像共享服务的客户机作为发送装置A以及接收装置B的双方起作用。[0293]接着,参照图18说明能够将上述动态图像解码装置1以及动态图像编码装置2利用于动态图像的记录以及再现的例子。[0294]图18a是表示搭载了上述动态图像解码装置1的记录装置C的结构的框图。如图18a所示,记录装置C包括通过对动态图像进行编码而获得编码数据的编码部C1、将编码部C1获得的编码数据写入记录介质M的写入部C2。上述动态图像编码装置2用作该编码部Cl〇[0295]另夕卜,记录介质M⑴既可以是如HDDHardDiskDrive,硬盘驱动器或SSDSolidStateDrive,固态驱动器等那样,在记录装置C中内置的类型的记录介质,⑵也可以是如SD存储卡或USBUniversalSerialBus,通用串行总线)闪速存储器等那样,连接到记录装置C的类型的记录介质,(3也可以是如DVDDigitalVersatileDisc,数字视频盘或BDBlu_rayDisc注册商标),蓝光盘等那样,在内置于记录装置C的驱动器装置未图示)中装填的记录介质。[0296]此外,记录装置C也可以作为对编码部C1输入的动态图像的供给源,进一步包括拍摄动态图像的摄像机C3、用于从外部输入动态图像的输入端子C4、用于接收动态图像的接收部C5以及生成或者加工图像的图像处理部C6。在图18a中,例示了记录装置C具备这些全部的结构,但也可以省略一部分。~[0297]另外,接收部C5既可以是接收未被编码的动态图像的接收部,也可以是接收以与记录用的编码方式不同的传输用的编码方式编码的编码数据的接收部。在后者的情况下,在接收部C5和编码部C1之间介入对以传输用的编码方式编码的编码数据进行解码的传输用解码部未图示即可。[0298]作为这样的记录装置C,例如可举出DVD播放器、BD播放器、HDHardDisk,硬盘播放器等此时,输入端子C4或者接收部C5成为动态图像的主要的供给源)。此外,手提摄像机此时,摄像机C3成为动态图像的主要的供给源)、个人计算机此时,接收部C5或者图像处理部C6成为动态图像的主要的供给源)、智能手机此时,摄像机C3或者接收部C5成为动态图像的主要的供给源等也为这样的记录装置C的一例。[0299]图lSb是表示搭载了上述动态图像解码装置1的再现装置D的结构的框图。如图l8b所示,再现装置D包括读出在记录介质M中写入的编码数据的读出部D1、通过对读出部D1读出的编码数据进行解码而获得动态图像的解码部D2。上述动态图像解码装置1用作该解码部D2。[0300]另外,记录介质M⑴既可以是如HDD或SSD等那样,在再现装置D中内置的类型的记录介质,(2也可以是如SD存储卡或USB闪速存储器等那样,连接到再现装置D的类型的记录介质,⑶也可以是如DVD或BD等那样,在内置于再现装置D的驱动器装置未图示)中装填的记录介质。[0301]此外,再现装置D也可以作为解码部D2输出的动态图像的供给目标,进一步包括显示动态图像的显示器D3、用于将动态图像输出到外部的输出端子D4以及发送动态图像的发送部D5。在图18b中,例示了再现装置D具备这些全部的结构,但也可以省略一部分。[0302]另外,发送部D5既可以是发送未被编码的动态图像的发送部,也可以是发送以与记录用的编码方式不同的传输用的编码方式编码的编码数据的发送部。在后者的情况下,在解码部D2和发送部D5之间介入以传输用的编码方式对动态图像进行编码的编码部未图示)即可。[0303]作为这样的再现装置D,例如可举出DVD播放器、BD播放器、HDD播放器等此时,电视接收机等所连接的输出端子D4成为动态图像的主要的供给目标)。此外,在电视接收机泚时,显示器D3成为动态图像的主要的供给目标)、台式PC此时,输出端子D4或者发送部D5成为动态图像的主要的供给目标)、便携式或者平板式PC此时,显示器D3或者发送部D5成为动态图像的主要的供给目标)、智能手机此时,显示器D3或者发送部D5成为动态图像的主要的供给目标)、数字标识也被称为电子广告牌或电子公告牌等,显示器〇3或者发送部D5成为动态图像的主要的供给目标等也为这样的再现装置D的一例。[0304]基于软件的构成)[0305]最后,动态图像解码装置1以及动态图像编码装置2的各模块既可以通过在集成电路(1C芯片)上形成的逻辑电路以硬件方式实现,也可以使用CPUcentralprocessingunit,中央处理单元以软件方式实现。[0306]在后者的情况下,动态图像解码装置1以及动态图像编码装置2包括执行用于实现各功能的控制程序的命令的CPU、存储了上述程序的ROMreadonlymemory,只读存储器)、展开上述程序的RAMrandomaccessmemory,随机存取存储器)、存储上述程序以及各种数据的存储器等存储装置记录介质)等。并且,通过将作为实现上述功能的软件的动态图像解码装置1以及动态图像编码装置2的控制程序的程序代码执行形式程序、中间代码程序、源程序)以计算机可读取地记录的记录介质提供给上述动态图像解码装置1以及动态图像编码装置2,且该计算机或者CPU或MPUmicroprocessorunit,微处理单兀)读出在记录介质中记录的程序代码而执行,也能够实现本发明的目的。[0307]作为上述记录介质,例如能够使用磁带或卡带等带类、包括软盘注册商标硬盘等磁盘或CD—ROMcompactdiscread-onlymemory,只读光盘)M0magneto-optical,磁光盘)MDMiniDisc,小型磁盘)DVDdigitalversatiledisk,数字视频光盘)CD—RCDRecordable,可记录式⑶等光盘的盘类、IC卡(包括存储卡光卡等卡类、掩模ROMEPROMerasableprogrammableread-onlymemory,可擦除可编程只读存储器)EEPR0Melectricallyerasableandprogrammableread-onlymemory,电可擦除可编程只读存储器闪速ROM等半导体存储器类、或者PLDProgrammablelogicdevice,可编程逻辑器件或FPGAFieldProgrammableGateArray,现场可编程门阵列)等逻辑电路类等。[0308]此外,也可以以能够与通信网络连接地构成动态图像解码装置1以及动态图像编码装置2,并经由通信网络提供上述程序代码。作为该通信网络,能够传输程序代码即可,并没有特别限定。例如能够利用因特网、内部网、夕卜联网、LANlocalareanetwork,局域网)、ISDNintegratedservicesdigitalnetwork,综合业务数字网)、VANvalue-addednetwork,增值网络)、CATVcommunityantennatelevision,有线电视网)通信网、虚拟专用网(virtualprivatenetwork、电话线路网、移动通信网、卫星通信网等。此外,作为构成该通信网络的传输介质,也可以是能够传输程序代码的介质即可,并不限定于特定的构成或者种类。例如在IEEEinstituteofelectricalandelectronicengineers,美国电气和电子工程师协会)1394、USB、电力线传输、电缆TV线路、电话线、ADSLasynchronousdigitalsubscriberloop,异步数字用户线)线路等的有线中也能够利用,在IrDAinfrareddataassociation,红外数据协会或遥控器那样的红外线、Bluetooth注册商标)、IEEE802_11无线、HDRhighdatarate,高数据速率)、NFCNearFieldCommunication,近距离无线通信)、DLNADigitalLivingNetworkAlliance,数码生活网络联盟)、便携电话网、卫星线路、地上波数字网等无线中也能够利用。另外,本发明通过上述程序代码以电子传输而具体化的、埋入载波中的计算机数据信号的形式也能够实现。[0309]备注事项7[0310]本发明也可以如下记载。[0311]本发明的图像解码装置,通过对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,上述图像解码装置包括:解码单元,在上述编码数据中包含将存否信息进行合并或者跳过的合并跳过信息的情况下,不解码上述存否信息,上述存否信息表示在上述量化变换系数中是否包含频域的变换系数;以及估计单元,在上述编码数据中包含将上述存否信息进行合并或者跳过的合并跳过信息的情况下,估计该存否信息,上述解码单元使用上述估计单元所估计的存否信息,解码上述编码量化变换系数。、3S里,s开Ter日,11略解码所需的预定的信息,基于处于既定或者指定的位置的信息而估计。此外,跳过是指,省略解码所需的预定的信息,以代替的方式使用估计值或者既定值。[0313]根据上述结构,不传输表示频域的变换系数的存在的有无的信息,仅传输合并跳过信息,就能够进行解码。[0314]因此,不需要传输以往需要传输的表示频域的变换系数的存在的有无的信息,所以比以往还能够削减编码数据的码量。[0315]在本发明的图像解码装置中,上述存否信息也可以是表示在上述量化变换系数中除了频率分量的直流分量之外的分量中是否包含非零变换系数的信息。[0316]根据上述结构,不传输表示在量化变换系数中除了频率分量的直流分量之外的分量中是否包含非零变换系数的信息,仅传输合并跳过信息,就能够进行解码。[0317]除了直流分量之外的分量中是否包含非零变换系数具有非常高的空间相关,能够准确地估计的可能性高。因此,能够削减编码数据的码量,且能够生成质量高的解码图像。[0318]在本发明的图像解码装置中,上述存否信息也可以是表示在上述量化变换系数中的频率分量的高频分量中是否包含非零变换系数的信息。[0319]根据上述结构,不传输表示在量化变换系数中的频率分量的高频分量中是否包含非零变换系数的信息,仅传输合并跳过信息,就能够进行解码。[0320]频率分量的高频分量中是否包含非零变换系数具有非常高的空间相关,能够准确地估计的可能性高。因此,能够削减编码数据的码量,且能够生成质量高的解码图像。[0321]在本发明的图像解码装置中,也可以在上述编码数据中,包含用于选择成为合并或者跳过的对象的信息的合并跳过等级信息。[0322]根据上述结构,能够根据合并跳过等级而决定成为合并或者跳过的对象的信息。因此,由于对每个信息决定是否进行合并或者跳过,所以能够根据局部特性而决定合并或者跳过的对象。[0323]在本发明的图像解码装置中,上述合并跳过等级信息也可以根据等级,成为合并或者跳过的对象的信息成为包含关系。[0324]根据上述结构,由于根据等级,成为合并或者跳过的对象的信息成为包含关系,所以能够容易安装。此外,能够将在编码装置中生成编码数据时的处理共通化。[0325]在本发明的图像解码装置中,也可以在上述合并跳过等级信息中,成为合并或者跳过的对象的信息的数目越多的等级则被分配越短的码。[0326]根据上述结构,由于成为对象的信息越多的等级则被分配越短的码,所以能够进一步削减编码数据的码量。[0327]也可以在本发明的图像解码装置中,进行上述预测图像的生成、变换、编码的单位分别不同,在上述编码数据中,按每个上述单位包含数据,上述合并跳过信息和上述合并跳过等级信息在上述单位中包含在不同的单位中。[0328]根据上述结构,由于合并跳过信息和上述合并跳过等级信息在不同的单位中传输,所以能够削减边信息的码量。i[0329]这里,边信息是指排除预测残差的全部信息。[0330]在本发明的图像解码装置中,上述估计单元也可以基于上述解码单元过去解码的解码结果,设定为了估计合并跳过的对象的信息而参照的参照变换单位。[0331]根据上述结构,估计单元使用过去的解码结果,设定参照变换单位。并且,过去的解码结果与当前相同的可能性高。因此,能够适当地设定参照变换单位。[0332]在本发明的图像解码装置中,也可以通过上述合并跳过信息,将表示成为合并或者跳过的对象的信息的对象信息存储在上述编码数据的头部分。[0333]根据上述结构,能够适当地设定合并或者跳过的对象。[0334]在本发明的图像解码装置中,上述合并跳过等级信息也可以只有在成为对象的信息所包含的上述单位的尺寸大于阈值的情况下,包含在上述编码数据中。[0335]根据上述结构,由于在单位的尺寸小的情况下,不传输合并跳过等级信息,所以能够防止单位的尺寸小的情况下的边尺寸增大的情况。[0336]本发明的图像解码装置,通过对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,在上述编码数据中,包含按每个上述变换单位将在上述变换中使用的变换信息进行了编码的编码变换信息,所述图像解码装置包括:估计单元,在上述编码数据中,包含有按每个上述变换单位将上述变换信息以及上述量化变换系数进行合并或者跳过的合并跳过信息的情况下,通过上述合并跳过信息所表示的方法,估计该变换单位的上述变换信息以及上述量化变换系数。[0337]根据上述结构,由于能够以变换单位进行合并或者跳过,所以能够进一步削减编码数据的码量。[0338]为了解决上述课题,本发明的图像编码装置,输出包含编码量化变换系数的编码数据,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,所述图像编码装置包括:编码单元,在上述编码数据中包含将存否信息进行合并或者跳过的合并跳过信息,上述存否信息表示在上述量化变换系数中是否包含频域的变换系数。[0339]根据上述结构,输出不包含表示频域的变换系数的存在的有无的信息而仅包含合并跳过信息的编码数据。[0340]因此,不需要将以往需要输出的表示频域的变换系数的存在的有无的信息包含在编码数据中,所以比以往还能够削减编码数据的码量。[0341]在本发明的编码数据的数据构造中,上述编码数据包含对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的编码量化变换^数,其特征在于,包含将存否信息进行合并或者跳过的合并跳过信息,上述存否信息表示在上述量化变换系数中是否包含频域的变换系数。[0342]根据上述结构,成为不包含表示频域的变换系数的存在的有无的信息而仅包含合并跳过信息的编码数据。[0343]因此,不需要将以往需要的表示频域的变换系数的存在的有无的信息包含在编码数据中,所以比以往还能够削减编码数据的码量。[0344]产业上的可利用性[0345]本发明能够适当地应用于对编码数据进行解码的解码装置以及生成编码数据的编码装置。此外,也能够适当地应用于由编码装置生成且由解码装置参照的编码数据的数据构造。[0346]符号说明[0347]1动态图像解码装置图像解码装置)[0348]2动态图像编码装置图像编码装置)[0349]1〇TBLK解码部(解码单元)[0350]11TBLK信息解码部[0351]12⑶信息解码部[0352]13PT信息解码部[0353]14TT信息解码部懈码单元)[0354]15⑶图像生成部[0355]16TBLK图像生成部[0356]31CU信息估计部[0357]32PT信息估计部[0358]33TT信息估计部估计单元)[0359]52TBLK编码部(编码单元)

权利要求:1.一种图像解码装置,通过按每个解码单位对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,上述变换单位通过层次性地分割编码单位而形成,上述图像解码装置包括:解码单元,对将上述变换单位进行分割而获得的尺寸为该变换单位的尺寸以下的部分单位,估计表示在该部分单位中是否包含非零变换系数的非零变换系数存否信息,或者从上述编码数据解码该非零变换系数存否信息,在该非零变换系数存否信息表示在该部分单位内存在非零变换系数的情况下,从上述编码数据解码该部分单位内的变换系数。2.—种图像解码方法,通过按每个解码单位对包括编码量化变换系数的编码数据进行解码而解码图像,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,上述变换单位通过层次性地分割编码单位而形成,上述图像解码方法包括:解码步骤,对将上述变换单位进行分割而获得的尺寸为该变换单位的尺寸以下的部分单位,估计表示在该部分单位中是否包含非零变换系数的非零变换系数存否信息,或者从上述编码数据解码该非零变换系数存否信息,在该非零变换系数存否信息表示在该部分单位内存在非零变换系数的情况下,从上述编码数据解码该部分单位内的变换系数。3.—种图像编码装置,输出包含编码量化变换系数的编码数据,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,上述变换单位通过层次性地分割编码单位而形成,所述图像编码装置包括:_编码单元,在上述编码数据中,包含对于将上述变换单位进行分割而获得的尺寸为该变换单位的尺寸以下的部分单位将非零变换系数存否信息进行合并或者跳过的合并跳过信息,上述非零变换系数存否信息表示在该部分单位中是否包含非零变换系数。4.一种图像编码方法,输出包含编码量化变换系数的编码数据,上述编码量化变换系数是对将从原图像减去预测图像的预测残差按每个变换单位进行变换并量化的量化变换系数进行了编码的系数,其特征在于,上述变换单位通过层次性地分割编码单位而形成,所述图像编码方法包括:_编码步骤,在上述编码数据中,包含对于将上述变换单位进行分割而获得的尺寸为该变换单位的尺寸以下的部分单位将非零变换系数存否信息进行合并或者跳过的合并跳过信息,上述非零变换系数存否信息表示在该部分单位中是否包含非零变换系数。5.—种记录介质,计算机能够读取,并记录有控制程序,其特征在于,所述控制程序是用于使计算机作为权利要求1所述的图像解码装置而发挥功能的控制程序,并且是用于使计算机作为上述解码单元而发挥功能的控制程序。6.—种记录介质,计算机能够读取,并记录有控制程序,其特征在于,所述控制程序是用于使计算机作为权利要求3所述的图像编码装置而发挥功能的控制程序,并且是用于使计算机作为上述解码单元而发挥功能的控制程序。

百度查询: 夏普株式会社 图像解码装置及方法、以及记录介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。