Nothing Special   »   [go: up one dir, main page]

CN106105203B - 块自适应颜色空间转换译码 - Google Patents

块自适应颜色空间转换译码 Download PDF

Info

Publication number
CN106105203B
CN106105203B CN201580013014.XA CN201580013014A CN106105203B CN 106105203 B CN106105203 B CN 106105203B CN 201580013014 A CN201580013014 A CN 201580013014A CN 106105203 B CN106105203 B CN 106105203B
Authority
CN
China
Prior art keywords
decoding unit
syntactic element
color space
decoding
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580013014.XA
Other languages
English (en)
Other versions
CN106105203A (zh
Inventor
张莉
陈建乐
马尔塔·卡切维奇
霍埃尔·索赖·罗哈斯
金佑植
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN106105203A publication Critical patent/CN106105203A/zh
Application granted granted Critical
Publication of CN106105203B publication Critical patent/CN106105203B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Abstract

本发明大体上描述用于使用颜色空间转换过程对视频块进行译码的技术。例如视频编码器或视频解码器等视频译码器可确定是否使用颜色空间转换用于译码单元，以及设定所述译码单元的语法元素的值以指示颜色空间转换的所述使用。所述视频译码器可在对所述译码单元进行编码中应用颜色空间变换过程。所述视频译码器可对所述译码单元的所述语法元素进行解码。所述视频译码器可确定所述语法元素的值是否指示所述译码单元是使用颜色空间转换经编码。所述视频译码器可响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码而在对所述译码单元进行解码中应用颜色空间逆变换过程。

Description

块自适应颜色空间转换译码
本申请案主张2014年3月14日申请的第61/953,573号美国临时申请案、2014年4月18日申请的第61/981,645号美国临时申请案以及2014年10月10日申请的第62/062,637号美国临时申请案的权益，以上申请案中的每一者的整个内容以引用的方式并入本文中。
技术领域
本发明涉及视频译码，并且更具体来说涉及使用颜色空间转换的视频译码。
背景技术
数字视频能力可以并入到多种多样的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子图书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话(所谓的“智能电话”)、视频电话会议装置、视频流式传输装置及其类似者。数字视频装置实施视频译码技术，例如由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分高级视频译码(AVC)定义的标准、目前正在开发的高效率视频译码(HEVC)标准及此类标准的扩展中所描述的视频译码技术。视频装置可通过实施这些视频译码技术而更有效率地发射、接收、编码、解码和/或存储数字视频信息。
视频译码技术包含空间(图片内)预测和/或时间(图片间)预测以减少或去除视频序列中固有的冗余。对于基于块的视频译码来说，视频切片(即，视频帧或视频帧的一部分)可以分割成视频块，视频块还可被称作树块、译码单元(CU)及/或译码节点。使用关于同一图片中的相邻块中的参考样本的空间预测对图片的经帧内译码(I)切片中的视频块进行编码。图片的经帧间编码(P或B)切片中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或相对于其它参考图片中的参考样本的时间预测。图片可被称作帧，且参考图片可被称作参考帧。
空间或时间预测产生待译码块的预测性块。残余数据表示待译码原始块与预测性块的间的像素差。经帧间译码块是根据指向形成预测块的参考样本块的运动向量和指示经译码块与预测块之间的差的残余数据编码的。根据帧内译码模式和残余数据来编码经帧内译码块。为了进一步压缩，可将残余数据从像素域变换到变换域，从而产生残余变换系数，可接着量化所述残余变换系数。可扫描一开始按二维阵列排列的经量化变换系数，以便产生变换系数的一维向量，且可应用熵译码以实现更多压缩。
发明内容
本发明大体上描述用于使用颜色空间转换过程对视频块进行译码的技术。例如视频编码器或视频解码器等视频译码器可确定是否使用颜色空间转换用于译码单元。视频译码器可设定译码单元的语法元素的值以指示颜色空间转换的使用。所述视频译码器可在对所述译码单元进行编码中应用颜色空间变换过程。视频译码器可对译码单元的所述语法元素进行解码，其中所述语法元素指示译码单元是否使用颜色空间转换经编码。所述视频译码器可确定所述语法元素的值是否指示所述译码单元是使用颜色空间转换经编码。所述视频译码器可响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码而在对所述译码单元进行解码中应用颜色空间逆变换过程。
在一个实例中，描述一种用于对视频数据进行解码的方法。所述方法包括对译码单元的语法元素进行解码，其中所述语法元素指示所述译码单元是否是使用颜色空间转换经编码。所述方法还包含确定所述语法元素的值是否指示所述译码单元是使用颜色空间转换经编码，以及响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码，在对所述译码单元进行解码中应用颜色空间逆变换过程。
在另一实例中，一种装置包含视频解码器，其经配置以对译码单元的语法元素进行解码，其中所述语法元素指示所述译码单元是否是使用颜色空间转换经编码。另外，所述装置还经配置以确定所述语法元素的值是否指示所述译码单元是使用颜色空间转换经编码，以及响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码，在对所述译码单元进行解码中应用颜色空间逆变换过程。
在另一实例中，一种装置包含：用于对译码单元的语法元素进行解码的装置，其中所述语法元素指示所述译码单元是否是使用颜色空间转换经编码；用于确定所述语法元素的值是否指示所述译码单元是使用颜色空间转换经编码的装置；以及用于响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码在对所述译码单元进行解码中应用颜色空间逆变换过程的装置。
在另一实例中，一种计算机可读存储媒体存储指令，所述指令当执行时致使处理器对译码单元的语法元素进行解码，其中所述语法元素指示所述译码单元是否是使用颜色空间转换经编码。所述指令当执行时还致使所述处理器确定所述语法元素的值是否指示所述译码单元是使用颜色空间转换经编码，以及响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码，在对所述译码单元进行解码中应用颜色空间逆变换过程。
在另一实例中，描述一种用于对视频数据进行编码的方法。所述方法包括：确定是否使用颜色空间转换用于译码单元；响应于确定使用颜色空间转换用于所述译码单元，设定所述译码单元的语法元素的值以指示颜色空间转换的所述使用；以及在对所述译码单元进行编码中应用颜色空间变换过程。
在另一实例中，一种装置包含视频编码器，其经配置以：确定是否使用颜色空间转换用于译码单元；响应于确定使用颜色空间转换用于所述译码单元，设定所述译码单元的语法元素的值以指示颜色空间转换的所述使用；以及在对所述译码单元进行编码中应用颜色空间变换过程。
在另一实例中，一种装置包含：用于确定是否使用颜色空间转换用于译码单元的装置；用于响应于确定使用颜色空间转换用于所述译码单元而设定所述译码单元的语法元素的值以指示颜色空间转换的所述使用的装置；以及用于在对所述译码单元进行编码中应用颜色空间变换过程的装置。
在另一实例中，一种计算机可读存储媒体存储指令，所述指令当执行时致使处理器：确定是否使用颜色空间转换用于译码单元；响应于确定使用颜色空间转换用于所述译码单元，设定所述译码单元的语法元素的值以指示颜色空间转换的所述使用；以及在对所述译码单元进行编码中应用颜色空间变换过程。
在附图和下文描述中陈述本发明的一或多个实例的细节。本发明的其它特征、目标和优点将从所述描述和图式以及权利要求书而显而易见。
附图说明
图1是说明可利用本发明中描述的技术的实例视频编码和解码系统的框图。
图2是说明可实施本发明中描述的技术的实例视频编码器的框图。
图3是说明可实施本发明中描述的技术的实例视频解码器的框图。
图4是说明根据本发明的一或多种技术的35个HEVC预测模式的概念图。
图5是说明根据本发明的一或多种技术用于合并和高级运动向量预测(AMVP)模式的空间相邻运动向量候选者的概念图。
图6是说明根据本发明的一或多种技术的帧内块复制(BC)实例的概念图。
图7是说明根据本发明的一或多种技术用于帧内8x8块的目标块和参考样本的实例的概念图。
图8是说明根据本发明的一或多种技术的编码技术的流程图。
图9是说明根据本发明的一或多种技术的解码技术的流程图。
具体实施方式
在一些实例中，本发明涉及屏幕内容译码，其中使用高色度取样格式4:4:4。在一些实例中，本发明也适用于范围扩展(RCEx)，包含对可能高位深度(超过8位)、高色度取样格式4:4:4的支持。在一些实例中，本发明也适用于其它颜色格式，例如色度取样格式是4:2:2。更具体来说，在本发明中，描述与颜色空间转换相关的许多不同技术。
视频译码标准包含ITU-T H.261、ISO/IEC MPEG-1视觉、ITU-T H.262或ISO/IECMPEG-2视觉、ITU-T H.263、ISO/IEC MPEG-4视觉和ITU-T H.264(也被称为ISO/IEC MPEG-4AVC)，包含其可缩放视频译码(SVC)和多视图视频译码(MVC)扩展。
已由ITU-T视频译码专家组(VCEG)和ISO/IEC动画专家组(MPEG)的视频译码联合协作小组(JCT-VC)完成新的视频译码标准(即，高效率视频译码(HEVC))的设计。
在HEVC中，切片中的最大译码单元称为译码树块(CTB)。CTB含有四叉树，所述四叉树的节点为译码单元。在HEVC主规范中CTB的大小可以在16x16到64x64的范围内变化，但也可支持8x8CTB大小。译码单元(CU)可为与CTB相同的大小且可小达8x8。每一CU以一个模式译码。当CU经帧间译码时，CU可进一步分割成两个预测单元(PU)或当进一步分区不适用时变为单个PU。当两个PU存在于一个CU中时，每一PU可为二分之一大小矩形或者具有等于所述CU的大小的1/4或3/4的大小的两个矩形。
当CU经帧间译码时，针对每一PU存在运动信息的一个集合。另外，每一PU是以独特帧间预测模式译码以导出所述运动信息集合。在HEVC中，最小PU大小为8x4及4x8。
HEVC指定具有4x4、8x8、16x16及32x32的大小的四个变换单元(TU)以对预测残余进行译码。CTB可递归地分割成4个或4个以上TU。TU使用类似于离散余弦变换(DCT)函数的基于整数的函数。另外，属于经帧内译码区的4x4明度变换块是使用从离散正弦变换(DST)函数导出的整数变换而变换的。色度使用与明度相同的TU大小。
在当前HEVC标准中，对于每一预测单元(PU)的明度分量，利用帧内预测方法，其具有33个角度预测模式(从2到34编索引)、DC模式(以1编索引)以及平面模式(以0编索引)，如下相对于图4所述。
除以上35个帧内模式之外，HEVC还采用被命名为‘I-PCM’的再一个模式。在I-PCM模式中，绕过预测、变换、量化及熵译码，同时通过预定义数目的位来对预测样本进行译码。I-PCM模式的主要目的是处置当其它模式无法对信号有效地进行译码时的情形。
在当前HEVC标准中，存在两个帧间预测模式可用。一个此类模式是合并模式(跳过视为合并的特殊情况)，且第二个此类模式是用于预测单元(PU)的高级运动向量预测(AMVP)模式。
在AMVP和合并模式中，为多个运动向量预测符维持运动向量(MV)候选者列表。当前PU的运动向量(以及合并模式中的参考索引)是通过从MV候选者列表获取一个候选者而产生。
MV候选者列表可含有用于合并模式的多达5个候选者和用于AMVP模式的仅两个候选者。合并候选者可含有运动信息集合，例如对应于两个参考图片列表(列表0和列表1)的运动向量和参考索引。如果通过合并索引来识别合并候选者，那么确定用于当前块的预测的参考图片以及相关联的运动向量。然而，在AMVP模式下，对于从列表0或列表1的每一潜在预测方向，需要明确地将参考索引连同对MV候选者列表的MVP索引一起用信号发送，这是因为AMVP候选者仅含有运动向量。在AMVP模式中，可进一步优化经预测运动向量。
合并候选者对应于运动信息的完整集合，而AMVP候选者可含有用于特定预测方向和参考索引的仅一个运动向量。以类似方式从相同空间及时间相邻块导出用于两个模式的候选者。
如下相对于图5所述，空间MV候选者是针对特定PU(PU0)从图5上展示的相邻块导出的。然而，从块产生候选者的方法针对合并和AMVP模式不同。
在合并模式中，以图5(a)上以数字展示的次序可导出多达四个空间MV候选者。次序如下：左(0)、上方(1)、右上方(2)、左下方(3)和左上方(4)，如图5(a)中示出。
在AMVP模式中，如图5(b)上所展示，相邻块被分成两个群组：包含块0及1的左群组及包含块2、3及4的上群组。对于每一群组，如用信号表示的参考索引所指示的参考同一参考图片的相邻块中的潜在候选者具有最高待选优先级，以形成所述群组的最终候选者。有可能所有相邻块均不含有指向同一参考图片的运动向量。因此，如果无法找到此类候选者，那么将按比例缩放第一可用候选者以形成最终候选者，因此可补偿时间距离差异。
如下相对于图6所述，帧内块复制(BC)已包含在SCC中。图6中展示帧内BC的实例，其中当前CU是从当前图片/切片的已经解码块预测的。当前帧内BC块大小可与CU大小一样大，范围为8x8至64x64，但在一些应用中，可应用其它约束。
在一些实例中，用于残余信号的环路内颜色空间变换过程可用于4:4:4色度格式中的序列。此方法将RGB/YUV色度格式中的预测误差信号变换为次最佳颜色空间中的那些预测误差信号。以此额外步骤，颜色分量之间的相关可进一步降低。变换矩阵是针对每一译码单元通过奇异值分解(SVD)从像素样本值导出的。颜色空间变换应用于帧内模式及帧间模式两者的预测误差。
在一些实例中，当颜色空间变换过程应用于帧间模式时，首先以导出的变换矩阵将残余转换到不同的域。在颜色空间转换之后，按次序执行常规译码步骤(例如DCT/DST、量化及熵译码)。
在一些实例中，当颜色空间变换过程应用于帧内模式时，首先以导出的变换矩阵分别将预测和当前块转换到不同的域。在颜色空间转换之后，进一步对当前块与其预测符之间的残余以DCT/DST进行变换、量化和熵译码。
在正向操作中，如下将颜色空间变换矩阵应用于三个平面G、B和R：
在HEVC规范的范围内削减所得值，因为在一些实例中，值放大多达倍。在方向操作中，如下将颜色空间变换矩阵应用于三个分量P'、Q'和R'：
如下相对于图7所述，变换矩阵可从参考样本值导出。不同参考样本可用于帧内情况和帧间情况。对于经帧内译码块的情况，图7中展示目标块和参考样本。在此实例中，目标块由8x8交叉影线样本组成，且参考样本是条纹和点线样本。
针对经帧间译码块的情况，用于矩阵导出的参考样本与用于运动补偿的参考样本相同。为了实现移位运算，AMP块中的参考样本经子取样以使得样本的数目变成二的幂。举例来说，12x16块中的参考样本的数目减少2/3。
根据本发明的技术，可针对每一CU应用颜色空间变换过程。因此，不需要用信号表示是否调用变换过程。另外，编码器和解码器侧都以同一方法导出变换矩阵以避免用于用信号表示变换矩阵的开销。
根据本发明的技术，使用颜色空间变换过程，例如颜色空间变换矩阵。一个此类矩阵是YCbCr变换矩阵，其为：
正向：
反向：
另一此类矩阵是YCoCg变换矩阵，其为：
正向：
反向：
另一此类矩阵为YCoCg-R矩阵，其为以因数2按比例缩放Co及Cg分量的YCoCg矩阵的经修正版本。通过使用提升技术，可通过以下方程式实现正向和反向转换：
正向：
反向：
在以上方程式和矩阵中，正向变换可在编码过程期间(例如，由视频编码器)执行，且反向变换可在解码过程中(例如，由视频解码器)执行。
在传统的视频译码中，假定图像具有连续色调且空间上平滑。基于这些假设，已经开发针对具有自然内容的视频已展示良好性能的各种工具(例如，基于块的变换、滤波等)。然而，在某些应用中(例如，远程桌面、合作性工作显示器和无线显示器)，计算机产生的屏幕内容可为待压缩的主要内容。此类型的内容趋向于具有离散色调，且以尖锐线及高对比度对象边界为特征。连续音调和平滑度的假设可能不再适用，并且因此传统的视频译码技术可能不有效地工作。
调色板模式译码可用以克服以上不足。调色板译码技术的实例在2013年4月10日申请的第61/810,649号美国临时申请案中描述。对于每一CU，可导出调色板，其包含当前CU中的最主要像素值。首先发射调色板的大小及元素。在发射之后，CU中的像素是根据某一扫描次序而编码。对于每一位置，首先发射例如旗标palette_flag等语法元素以指示像素值在调色板中(“运行模式”)还是不在调色板中(“像素模式”)。
在“运行模式”中，可用信号表示调色板索引，接着是“运行”。运行为指示具有与当前正经译码像素相同的调色板索引值的成扫描次序的连续像素的数目的语法元素。如果成扫描次序的即时连续中的多个像素具有相同调色板索引值，那么“运行模式”可由语法元素(例如，palette_flag)指示。可确定计数器值，其等于接续具有与当前像素相同的调色板索引值的当前像素的像素的数目，且运行经设定成等于计数器值。palette_flag或调色板索引都不需要针对由“运行”覆盖的随后位置发射，因为其全部具有相同像素值。在解码器侧，仅将解码当前像素的第一调色板索引值，且将在“运行”语法元素中指示的像素的“运行”中针对每一像素复制结果。
在“像素模式”中，针对此位置发射像素样本值。如果例如palette_flag的语法元素指示“像素模式”，那么仅针对正经解码的一个像素确定调色板索引值。
常规技术可经受各种问题。举例来说，可调用颜色变换变换，其不考虑序列特性和局部分集。因此，译码性能可为次最佳的。在另一实例中，在解码器处可需要变换矩阵的导出，这显著增加解码器复杂性。此外，可使用空间经重构像素或经帧间译码PU的预测符来导出变换矩阵。然而，当PU大小相对较小、预测不是很准确或相邻像素不可用时变换矩阵的效率可降低。本发明的技术可克服这些问题中的一或多者。
例如视频编码器20或视频解码器30等视频译码器可执行本发明中描述的技术。所述视频译码器可确定是否使用颜色空间转换用于译码单元。视频译码器可设定译码单元的语法元素的值以指示颜色空间转换的使用。所述视频译码器可在对译码单元进行编码中应用颜色空间变换矩阵。视频译码器可对译码单元的所述语法元素进行解码，其中所述语法元素指示译码单元是否使用颜色空间转换经编码。视频译码器可确定所述语法元素的值是否指示译码单元是使用颜色空间转换经编码。所述视频译码器可响应于确定所述语法元素指示译码单元是使用颜色空间转换经译码而在对所述译码单元进行解码中应用颜色空间逆变换矩阵。在解码器侧上，无论译码模式如何都不需要执行颜色空间正向变换过程。在一些实例中，颜色空间逆变换过程可为固定的。
本发明描述可改善环路内颜色空间变换的译码性能且可减少解码器复杂性的技术。图1是说明可利用用于屏幕内容译码的技术的实例视频编码和解码系统10的框图，其中使用高色度取样格式。如图1中所示，系统10包含提供稍后将由目的地装置14解码的经编码视频数据的源装置12。明确地说，源装置12经由计算机可读媒体16将视频数据提供到目的地装置14。源装置12及目的地装置14可包括多种多样的装置中的任一者，包含桌上型计算机、笔记型(即，膝上型)计算机、平板计算机、机顶盒、电话手持机(例如所谓的“智能”电话)、所谓的“智能”平板计算机、电视机、相机、显示装置、数字媒体播放器、视频游戏控制台、视频流式传输装置或类似者。在一些情况下，可装备源装置12和目的地装置14以用于无线通信。
目的地装置14可经由计算机可读媒体16接收待解码的经编码视频数据。计算机可读媒体16可包括能够将经编码的视频数据从源装置12移动到目的地装置14的任一类型的媒体或装置。在一个实例中，计算机可读媒体16可包括通信媒体以使源装置12能够实时地将经编码的视频数据直接传输到目的地装置14。可根据通信标准(例如，无线通信协议)调制经编码的视频数据，并将其发射到目的地装置14。通信媒体可包括任何无线或有线通信媒体，例如射频(RF)频谱或一或多个物理传输线。通信媒体可形成分组网络(例如，局域网、广域网或全球网络，例如因特网)的部分。通信媒体可包含路由器、交换器、基站或任何其它可用于促进从源装置12到目的地装置14的通信的设备。
在一些实例中，经编码数据可以从输出接口22输出到存储装置。类似地，经编码数据可通过输入接口从存储装置存取。存储装置可包含多种分布式或本地存取的数据存储媒体中的任一者，例如硬盘驱动器、蓝光光盘、DVD、CD-ROM、快闪存储器、易失性或非易失性存储器或任何其它用于存储经编码的视频数据的合适的数字存储媒体。在另一实例中，存储装置可对应于可保持由源装置12产生的经编码视频的文件服务器或另一中间存储装置。目的地装置14可从存储装置经由流式传输或下载来存取所存储的视频数据。文件服务器可为能够存储经编码视频数据且将经编码视频数据发射到目的地装置14的任何类型的服务器。实例文件服务器包含网络服务器(例如，用于网站)、FTP服务器、网络附接存储(NAS)装置或本地磁盘驱动器。目的地装置14可以通过任何标准数据连接(包含因特网连接)来存取经编码视频数据。这可包含无线信道(例如，Wi-Fi连接)、有线连接(例如，DSL、电缆调制解调器等)，或适合于存取存储在文件服务器上的经编码视频数据的两者的组合。经编码视频数据从存储装置的发射可能是流式传输发射、下载发射或其组合。
本发明的技术未必限于无线应用或设定。所述技术可以应用于视频译码并且支持多种多媒体应用中的任一者，例如空中协议电视广播、有线电视发射、卫星电视发射、因特网流式传输视频发射(例如动态自适应HTTP流式传输(DASH))、经编码到数据存储媒体上的数字视频，存储在数据存储媒体上的数字视频的解码，或其它应用。在一些实例中，系统10可经配置以支持单向或双向视频传输，以支持例如视频流式传输、视频重放、视频广播和/或视频电话等应用。
在图1的实例中，源装置12包含视频源18、视频编码器20及输出接口22。目的地装置14包含输入接口28、视频解码器30和显示装置32。根据本发明，源装置12的视频编码器20可经配置以应用用于使用颜色空间转换过程对视频块进行译码的技术。在其它实例中，源装置和目的地装置可包括其它组件或布置。举例来说，源装置12可从外部视频源18(例如外部相机)接收视频数据。同样，目的地装置14可与外部显示装置介接，而非包含集成式显示装置。
图1的说明的系统10只是一个实例。可通过任何数字视频编码及/或解码装置来执行用于使用颜色空间转换过程对视频块进行译码的技术。尽管本发明的技术一般通过视频编码装置来执行，但是所述技术还可通过视频编码器/解码器(通常被称作“编解码器”)来执行。此外，本发明的技术还可由视频预处理器执行。源装置12及目的地装置14仅为源装置12产生经译码视频数据用于发射至目的地装置14的所述译码装置的实例。在一些实例中，装置12、14可以实质上对称的方式操作，使得装置12、14中的每一者包含视频编码及解码组件。因此，系统10可支持视频装置12、14之间的单向或双向视频传输以例如用于视频流式传输、视频回放、视频广播或视频电话。
源装置12的视频源18可以包含视频俘获装置，例如摄像机、含有先前所俘获视频的视频存档和/或用于从视频内容提供者接收视频的视频馈送接口。作为另一替代方案，视频源18可产生基于计算机图形的数据作为源视频，或直播视频、存档视频与计算机产生的视频的组合。在一些情况下，如果视频源18为视频摄像机，那么源装置12和目的地装置14可形成所谓的摄像机电话或视频电话。然而，如上文所提及，本发明中所描述的技术可大体上适用于视频译码，且可应用于无线和/或有线应用。在每一情况下，俘获、预先俘获或计算机产生的视频可由视频编码器20编码。经编码视频信息可接着由输出接口22输出到计算机可读媒体16上。
计算机可读媒体16可包含瞬时媒体，例如无线广播或有线网络发射，或存储媒体(也就是说，非暂时性存储媒体)，例如硬盘、快闪驱动器、压缩光盘、数字视频光盘、蓝光光盘或其它计算机可读媒体。在一些实例中，网络服务器(未图示)可以从源装置12接收经编码视频数据，并且例如经由网络发射将经编码视频数据提供到目的地装置14。类似地，媒体生产设施(例如，光盘冲压设施)的计算装置可从源装置12接收经编码的视频数据且生产含有经编码的视频数据的光盘。因此，在各种实例中，计算机可读媒体16可以理解为包含各种形式的一或多个计算机可读媒体。
目的地装置14的输入接口28从计算机可读媒体16接收信息。计算机可读媒体16的信息可包含通过视频编码器20定义的语法信息，所述语法信息还由视频解码器30使用，包含描述块和其它经译码单元(例如GOP)的特性和/或处理的语法元素。显示装置32将经解码视频数据显示给用户，且可包括多种显示装置中的任一者，例如阴极射线管(CRT)、液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器或另一类型的显示装置。
视频编码器20和视频解码器30可根据一种视频译码标准(例如，目前正在开发的高效视频译码(HEVC)标准)来操作，且可符合HEVC测试模型(HM)。或者，视频编码器20和视频解码器30可根据其它专有或业界标准来操作，所述标准例如是ITU-T H.264标准，也被称为MPEG-4，第10部分，高级视频译码(AVC)，或此类标准的扩展。但是，本发明的技术不限于任何特定译码标准。视频译码标准的其它实例包含MPEG-2和ITU-T H.263。尽管图1中未图示，但在一些方面中，视频编码器20和视频解码器30可各自与音频编码器及解码器集成，且可包含适当多路复用器-多路分用器单元或其它硬件和软件以处置共同数据流或单独数据流中的音频和视频两者的编码。如果适用，则多路复用器-多路分用器单元可符合ITUH.223多路复用器协议，或例如用户数据报协议(UDP)等其它协议。
ITU-T H.264/MPEG-4(AVC)标准是作为被称为联合视频小组(JVT)的集体联盟的产品而由ITU-T视频译码专家组(VCEG)连同ISO/IEC移动图片专家组(MPEG)制定。在一些方面中，本发明中描述的技术可应用于一般符合H.264标准的装置。H.264标准描述于ITU-T研究组的日期为2005年3月的“ITU-T推荐H.264，用于通用视听服务的高级视频译码”(ITU-TRecommendation H.264,Advanced Video Coding for generic audiovisual services)中，其在本文中可称为H.264标准或H.264规范或H.264/AVC标准或规范。联合视频小组(JVT)继续致力于对H.264/MPEG-4AVC的扩展。
视频编码器20和视频解码器30各自可实施为多种合适的编码器电路中的任一者，例如一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件固件或其任何组合。当部分地用软件实施所述技术时，装置可将用于所述软件的指令存储在合适的非暂时性计算机可读媒体中且使用一或多个处理器用硬件执行所述指令以执行本发明的技术。视频编码器20及视频解码器30中的每一者可包含在一或多个编码器或解码器中，所述编码器或解码器中的任一者可集成为相应装置中的组合编码器/解码器(编解码器)的部分。
JCT-VC正在努力开发HEVC标准。所述HEVC标准化努力是基于被称作HEVC测试模型(HM)的视频译码器的进化的模型。HM假定视频译码器相对于根据例如ITU-T H.264/AVC的现有装置的若干额外能力。举例来说，尽管H.264提供了九个帧内预测编码模式，但HM可提供多达三十三种帧内预测编码模式。
一般来说，HM的工作模型描述视频帧或图片可以分成包含明度及色度样本两者的一连串树块或最大译码单元(LCU)。位流内的语法数据可以界定最大译码单元(LCU，其是就像素数目来说的最大译码单元)的大小。切片包含按译码次序的若干连续树块。视频帧或图片可以被分割成一或多个切片。每一树块可以根据四叉树分裂成译码单元(CU)。一般来说，四叉树数据结构包含每个CU一个节点，其中一个根节点对应于所述树块。如果一个CU分裂成四个子CU，那么对应于CU的节点包含四个叶节点，其中的每一者对应于所述子CU中的一者。
四叉树数据结构的每一节点可提供用于对应CU的语法数据。举例来说，四叉树中的节点可包含分裂旗标，其指示对应于所述节点的所述CU是否分裂成子CU。用于CU的语法元素可递归地定义，且可取决于CU是否分裂成子CU。如果CU未进一步分裂，那么将其称作叶CU。在本发明中，叶CU的四个子CU也将被称作叶CU，即使不存在原始叶CU的明确分裂时也是如此。举例来说，如果16x16大小的CU不进一步分裂，那么四个8x8子CU也将被称作叶CU，尽管16x16CU从未分裂。
CU具有与H.264标准的宏块类似的目的，除了CU不具有大小区别。举例来说，树块可分裂成四个子节点(也称为子CU)，且每一子节点又可为父节点且可分裂成另外四个子节点。最后未分裂的子节点(被称作四叉树的叶节点)包括译码节点，也被称作叶CU。与经译码位流相关联的语法数据可定义树块可分裂的最大次数，被称作最大CU深度，且还可定义译码节点的最小大小。因此，位流还可界定最小译码单元(SCU)。本发明使用术语“块”来指HEVC的上下文中的CU、PU或TU中的任一者，或者其它标准的上下文中的类似数据结构(例如，其在H.264/AVC中的宏块及子块)。
CU包含译码节点和与所述译码节点相关联的预测单元(PU)和变换单元(TU)。CU的大小对应于译码节点的大小并且形状必须是正方形。CU的大小范围可从8x8像素到具有64x64像素或更大像素的最大值的树块的大小。每一CU可以含有一或多个PU和一或多个TU。举例来说，与CU相关联的语法数据可描述CU分割成一或多个PU。分割模式可在CU被跳过还是经直接模式编码、帧内预测模式编码或帧间预测模式编码之间不同。PU可以分割成非正方形形状。举例来说，与CU相关联的语法数据还可描述CU根据四叉树到一或多个TU的分割。TU可为正方形或非正方形(例如，矩形)形状。
HEVC标准允许根据TU变换，TU可针对不同CU而有所不同。TU的大小通常是基于针对经分割LCU定义的给定CU内的PU的大小而确定，但是情况可能并不总是如此。TU通常与PU大小相同或小于PU。在一些实例中，对应于CU的残余样本可使用被称为“残余四叉树”(RQT)的四叉树结构细分成较小单元。RQT的叶节点可被称为变换单元(TU)。可以变换与TU相关联的像素差值以产生变换系数，所述变换系数可经量化。
叶CU可包含一或多个预测单元(PU)。一般来说，PU表示对应于相对应的CU的全部或一部分的空间区域，并且可包含用于检索PU的参考样本的数据。此外，PU包含与预测有关的数据。举例来说，当PU经帧内模式编码时，用于PU的数据可以包含在残余四叉树(RQT)中，残余四叉树可以包含描述用于对应于PU的TU的帧内预测模式的数据。作为另一实例，当PU经帧间模式编码时，PU可以包含定义PU的一或多个运动向量的数据。举例来说，定义PU的运动向量的数据可以描述运动向量的水平分量、运动向量的垂直分量、运动向量的分辨率(例如，四分之一像素精度或八分之一像素精度)、运动向量指向的参考图片及/或运动向量的参考图片列表(例如，列表0、列表1或列表C)。
具有一或多个PU的叶CU还可包含一或多个变换单元(TU)。变换单元可使用RQT(也称为TU四叉树结构)来指定，如上文所论述。举例来说，分裂旗标可以指示叶CU是否分裂成四个变换单元。接着，每一变换单元可进一步分裂成更多个子TU。当TU未进一步分裂时，其可被称作叶TU。总体上，对于帧内译码，所有属于一叶CU的叶TU共享相同的帧内预测模式。也就是说，一般应用相同的帧内预测模式来计算叶CU的所有TU的预测值。对于帧内译码，视频编码器可以使用帧内预测模式针对每一叶TU计算残余值，以作为CU的对应于TU的部分与原始块之间的差。TU不一定限于PU的大小。因此，TU可大于或小于PU。对于帧内译码，PU可与相同CU的对应叶TU处于相同位置。在一些实例中，叶TU的最大大小可以对应于对应的叶CU的大小。
此外，叶CU的TU还可与相应的四叉树数据结构(被称作残余四叉树(RQT))相关联。即，叶CU可包含指示叶CU如何分割成TU的四叉树。TU四叉树的根节点一般对应于叶CU，而CU四叉树的根节点一般对应于树块(或LCU)。未经分裂的RQT的TU被称作叶TU。一般来说，本发明分别使用术语CU和TU指代叶CU和叶TU，除非另有指出。
视频序列通常包含一系列视频帧或图片。图片群组(GOP)一般包括一系列一或多个视频图片。GOP可包含GOP的标头、一或多个图片的标头或其它地方中的语法数据，其描述GOP中包含的多个图片。图片的每一切片可包含描述用于相应的切片的编码模式的切片语法数据。视频编码器20通常对个别视频切片内的视频块进行操作以便对视频数据进行编码。视频块可与CU内的译码节点相对应。视频块可具有固定或变化的大小，并且根据指定译码标准可在大小上有所不同。
作为实例，HM支持各种PU大小的预测。假设特定CU的大小为2N×2N，那么HM支持2N×2N或N×N的PU大小的帧内预测，及2N×2N、2N×N、N×2N或N×N的对称PU大小的帧间预测。HM还支持用于2N×nU、2N×nD、nL×2N及nR×2N的PU大小中的帧间预测的不对称分割。在不对称分割中，不分割CU的一个方向，但是将另一方向分割成25％和75％。CU的对应于25％分割的部分由“n”其后接着“上(U)”、“下(D)”、“左(L)”或“右(R)”的指示来指示。因而，举例来说，“2NxnU”是指水平地分割的2Nx2N CU，其中上方有2Nx0.5N PU，而下方有2Nx1.5NPU。
在本发明中，“NxN”与“N乘N”可互换使用以指依据垂直尺寸和水平尺寸的视频块的像素尺寸，例如，16x16像素或16乘16像素。大体来说，16x16块将在垂直方向上具有16个像素(y＝16)，且在水平方向上具有16个像素(x＝16)。同样，NxN块总体上在垂直方向上具有N个像素，并且在水平方向上具有N个像素，其中N表示非负整数值。块中的像素可布置成行和列。此外，块未必需要在水平方向上与在竖直方向上具有相同数目个像素。举例来说，块可包括NxM个像素，其中M未必等于N。
在使用CU的PU进行帧内预测性或帧间预测性译码之后，视频编码器20可以计算用于CU的TU的残余数据。PU可包括描述在空间域(也称为像素域)中产生预测性像素数据的方法或模式的语法数据，并且TU可包括在对残余视频数据应用变换(例如离散余弦变换(DCT)、整数变换、小波变换或概念上类似的变换)之后变换域中的系数。所述残余数据可对应于未经编码图片的像素与对应于PU的预测值之间的像素差。视频编码器20可以形成包含用于CU的残余数据的TU，并且接着变换TU以产生用于CU的变换系数。
在任何用于产生变换系数的变换之后，视频编码器20可执行变换系数的量化。量化大体上指代对变换系数进行量化以可能减少用以表示系数的数据的量从而提供进一步压缩的过程。量化过程可以减少与系数中的一些或全部相关联的位深度。例如，n位值可在量化期间被下舍入到m位值，其中n大于m。
在量化之后，视频编码器可以扫描变换系数，从而从包含经量化的变换系数的二维矩阵产生一维向量。扫描可以经设计以将较高能量(并且因此较低频率)的系数放置在阵列的前面，并且将较低能量(并且因此较高频率)的系数放置在阵列的背面。在一些实例中，视频编码器20可利用预定义扫描次序来扫描经量化的变换系数以产生可被熵编码的串行化向量。在其它实例中，视频编码器20可以执行自适应扫描。在扫描经量化的变换系数以形成一维向量之后，视频编码器20可以例如根据上下文自适应可变长度译码(CAVLC)、上下文自适应二进制算术译码(CABAC)、基于语法的上下文自适应二进制算术译码(SBAC)、概率区间分割熵(PIPE)译码或另一熵编码方法编码一维向量。视频编码器20也可熵编码与经编码视频数据相关联的语法元素以供视频解码器30在解码视频数据时使用。
为了执行CABAC，视频编码器20可向待发射的符号指派上下文模型内的上下文。上下文可涉及(例如)符号的相邻值是否为非零。为了执行CAVLC，视频编码器20可选择用于待发射的符号的可变长度码。VLC中的码字可经构造使得相对较短码对应于更有可能符号，而较长码对应于不太可能符号。以此方式，使用VLC可例如实现优于针对待发射的每一符号使用等长度码字的位节省。概率确定可基于指派到符号的上下文。
根据本发明的技术，例如视频编码器20或视频解码器30等视频译码器可确定是否使用颜色空间转换用于译码单元。视频译码器可设定译码单元的语法元素的值以指示颜色空间转换的使用。所述视频译码器可在对译码单元进行编码中应用颜色空间变换过程。视频译码器可对译码单元的所述语法元素进行解码，其中所述语法元素指示译码单元是否使用颜色空间转换经编码。视频译码器可确定所述语法元素的值是否指示译码单元是使用颜色空间转换经编码。所述视频译码器可响应于确定所述语法元素指示译码单元是使用颜色空间转换经译码而在对所述译码单元进行解码中应用颜色空间逆变换过程。在解码器侧上，无论译码模式如何都不需要执行颜色空间正向变换过程。在一些实例中，颜色空间逆变换过程可为固定的。
例如视频编码器20或视频解码器30等视频译码器可执行关于图1到9描述的技术中的任一者。提出一种CU层级自适应颜色空间变换方案或颜色空间转换，其中每一CU可选择启用或停用颜色空间变换。另外，引入CU层级旗标以指示颜色空间转换的使用。可用信号表示所述旗标，且CU层级旗标的信令方法可取决于译码模式和其它信息。
可使用多种语法元素与本发明的技术对准。这些语法元素可包含：
表1
当语法元素color_transform_enabled_flag等于1时，在解码过程中可调用环路内颜色空间变换过程。当语法元素color_transform_enabled_flag等于0时，可不应用环路内颜色空间变换。当所述语法元素不存在时，语法元素color_transform_enabled_flag的值可推断为等于0。
当语法元素color_transform_flag[x0][y0]等于1时，当前译码单元可以颜色空间变换译码。当语法元素color_transform_flag[x0][y0]等于0时，当前译码单元不以颜色空间变换译码。当所述语法元素不存在时，语法元素color_transform_flag的值可推断为等于0。阵列索引x0和y0可指定相对于图片的左上方明度样本的所考虑译码块的左上方明度样本的位置(x0，y0)。
在一个实例中，可在编码和解码过程中应用经修改YCoCg变换。可如下界定经修改YCoCg变换：
正向：
反向：temp＝Y-Cg；
G＝(Y+Cg+偏移)>>2；
B＝(temp-Co+偏移)>>2；
R＝(temp+Co+偏移)>>2；其中偏移等于2。
替代地，可如下界定经修改YCoCg变换：
正向：
反向：temp＝Y-Cg；
G＝(Y+Cg+偏移)>>1；
B＝(temp-Co+偏移)>>1；
R＝(temp+Co+偏移)>>1；其中偏移等于1或0。
以颜色变换译码的CU或块所使用的对应量化参数可推断为等于(dQP+2)，而无颜色变换的CU或块所使用的对应量化参数可推断为等于dQP。同时，在量化和变换过程中位深度可进一步增加1。
替代地，在原始YCoCg变换不变加归一化过程的情况下应用两步骤正向/逆变换。对于正向变换，首先应用原始YCoCg正向变换。随后，对于每一分量i，即Y、Co和Cg，所述分量复位到(i*forward_factor+偏移)>>BIT_PRECISION，其中BIT_PRECISION是无符号整数且forward_factor取决于BIT_PRECISION。在一个实例中，forward_factor等于1/√6*(1<<BITS_TRANS)+0.5，BIT_PRECISION等于15，偏移等于(1<<(BIT_PRECISION-1))。
对于逆变换，首先应用原始YCoCg逆变换。随后，对于每一分量i，即Y、Co和Cg，所述分量复位到(i*backward_factor+偏移)>>BIT_PRECISION，其中BIT_PRECISION与正向变换中使用的相同，且backward_factor取决于BIT_PRECISION。在一个实例中，backward_factor等于√6/4*(1<<BITS_TRANS)+0.5)，偏移等于(1<<(BIT_PRECISION-1))。
替代地/此外，仅当三个颜色分量(即，cbf_luma、cbf_cb和cbf_cr)中的经译码块旗标中的至少一者等于1时可用信号表示CU层级旗标。替代地，可进一步修改在颜色空间变换之后的经修改残余以确保具有颜色空间变换的CU或块中的残余范围与无颜色空间变换的CU/块中的残余范围相同。在一个实例中，应用削减操作。
颜色空间变换矩阵可独立于经重构像素。实际上，其可取决于有损或无损译码模式。在一个实例中，当CU是以有损模式译码时，可应用YCoCg，而当CU是以无损模式译码时，应用YCoCg-R。此外，当应用YCoCg-R时，Co和Cg分量的位深度可增加1。在另一实例中，变换矩阵可取决于帧内、帧间/帧内BC模式。在此情况下，当CU层级旗标是1时根据译码模式可在编码器和解码器两者处指定用于每一模式的预定义矩阵，且可在编码器和解码器两者处使用同一矩阵。此外，仅当三个颜色分量(即，cbf_luma、cbf_cb和cbf_cr)中的经译码块旗标中的至少一者等于1时可用信号表示CU层级旗标。
本发明的技术还可包含变换矩阵导出和信令方法，例如帧层级中。在一个实例中，对于每一帧，可基于原始图像中的颜色分量上的统计数据导出变换矩阵。变换矩阵可经译码为位流且直接发射到解码器。替代地，可应用连续经译码帧之间的变换矩阵预测。举例来说，可发射一个旗标以指示所述矩阵是否与前一帧中使用的相同。替代地，可基于原始帧的集合导出变换矩阵且在位流中用信号表示。
在另一实例中，在例如PPS等高级语法中导出且用信号表示变换矩阵的集合。在一个实例中，基于特性将图像分类为多个区，且对于每一区，导出变换矩阵。可在高级语法中译码且用信号表示导出的矩阵。进一步在CU/TU/PU层级中用信号表示选定变换矩阵的索引。替代地，在切片标头中或针对每一瓦片区用信号表示选定变换矩阵的索引。替代地，可在切片标头中或针对每一瓦片区导出变换矩阵。
当明度和色度分量的位深度不同时，可首先将全部颜色分量的位深度修改为相同，接着然后可应用颜色变换。替代地，位流可符合如下约束：当明度和色度分量的位深度在经译码位流中不同时，将停用颜色变换(即color_transform_enabled_flag等于0)。
可将不同QP应用于具有或不具有颜色变换而译码的CU/块，和/或可由于此非归一化颜色变换而修改在量化和变换过程中使用的位深度。在一个实例中，当使用以上经修改YCoCg变换时，基于color_transform_flag进一步修改随后的步骤(即，在解块滤波过程之前的按比例缩放、变换和阵列构造过程)。
在一个实例中，当使用如上文所描述的经修改YCoCg变换时，相应地修改对应量化参数导出过程和逆变换过程。对此过程的输入可包含相对于当前图片的左上方明度样本指定当前明度译码块的左上方样本的明度位置(xCb，yCb)。在此过程中，可导出变量QpY、明度量化参数Qp'Y及色度量化参数Qp'Cb及Qp'Cr。明度位置(xQg,yQg)可指定相对于当前图像的左上方明度样本的当前量化群组的左上方明度样本。水平和垂直位置xQg和yQg可分别设定成等于xCb-(xCb&((1<<Log2MinCuQpDeltaSize)-1))和yCb-(yCb&((1<<Log2MinCuQpDeltaSize)-1))。量化群组的明度大小Log2MinCuQpDeltaSize可确定共享相同qPY_PRED的译码树块内的最小区域的明度大小。
可如下导出变量QpY：
QpY＝((qPY_PRED+CuQpDeltaVal+52+2*QpBdOffsetY)％(52+QpBdOffsetY))-QpBdOffsetY
可如下导出明度量化参数Qp'Y：
Qp′Y＝QpY+QpBdOffsetY
当语法元素ChromaArrayType不等于0时，以下可适用：
可如下导出变量qPiCb和qPiCr：
qPiCb＝Clip3(-QpBdOffsetC,57,QpY+pps_cb_qp_offset+slice_cb_qp_offset+CuQpAdjValCb)
qPiCr＝Clip3(-QpBdOffsetC,57,QpY+pps_cr_qp_offset+slice_cr_qp_offset+CuQpAdjValCr)
如果语法元素ChromaArrayType等于1，那么可如下表中指定基于分别等于qPiCb和qPiCr的索引qPi而将变量qPCb和qPCr设定成等于QpC的值。否则，基于分别等于qPiCb及qPiCr的索引qPi将变量qPCb及qPCr设定成等于Min(qPi,51)。
qPi <30 30 31 32 33 34 35 36 37 38 39 40 41 42 43 >43
QpC ＝qPi 29 30 31 32 33 33 34 34 35 35 36 36 37 37 ＝qPi-6
表2
可如下导出用于Cb及Cr分量Qp'Cb和Qp'Cr的色度量化参数：
Qp′Cb＝qPCb+QpBdOffsetC
Qp′Cr＝qPCr+QpBdOffsetC
当color_transform_flag等于1时，以下可适用：
Qp'Y＝(Qp'Y+8)
当ChromaArrayType≠0,Qp′Cb＝(Qp'cb+8)且Qp′Cr＝(Qp'cr+8)时
BitDepthY＝(BitDepthY+2)
BitDepthC＝(BitDepthC+2)
对此过程的输入可包含相对于当前图片的左上方明度样本指定当前明度变换块的左上方样本的明度位置(xTbY，yTbY)、指定当前变换块的大小的变量nTbS、指定当前块的颜色分量的变量cIdx，以及指定量化参数的变量qP。此过程的输出可包含具有元素d[x][y]的经按比例缩放变换系数的(nTbS)x(nTbS)阵列d。
可如下导出变量log2TransformRange、bdShift、coeffMin和coeffMax：
当color_transform_flag＝1时，以下适用：
CoeffCTMinY＝-(1<<(extended_precision_processing_flag？
Max(15,BitDepthY+6):15))
CoeffCTMinC＝-(1<<(extended_precision_processing_flag？
Max(15,BitDepthC+6):15))
CoeffCTMaxY＝(1<<(extended_precision_processing_flag？
Max(15,BitDepthY+6):15))-1
CoeffCTMaxC＝(1<<(extended_precision_processing_flag？
Max(15,BitDepthC+6):15))-1
如果cIdx＝0,
log2TransformRange＝extended_precision_processing_flag？
Max(15,BitDepthY+6):15
bdShift＝BitDepthY+Log2(nTbS)+10-log2TransformRange
coeffMin＝(color_transform_flag？CoeffCTMinY:CoeffMinY)
coeffMax＝(color_transform_flag？CoeffCTMaxY:CoeffMaxY)
否则，
log2TransformRange＝extended_precision_processing_flag？
Max(15,BitDepthC+6):15
bdShift＝BitDepthC+Log2(nTbS)+10-log2TransformRange
coeffMin＝(color_transform_flag？CoeffCTMinC:CoeffMinC)
coeffMax＝(color_transform_flag？CoeffCTMaxC:CoeffMaxC)
可将列表levelScale[]指定为levelScale[k]＝{40,45,51,57,64,72}，其中k＝0..5。
对于经按比例缩放变换系数d[x][y]的导出，其中x＝0..nTbS-1，y＝0..nTbS-1，以下可适用：
可如下导出按比例缩放因数m[x][y]：
如果以下条件中的一或多者为真，那么将m[x][y]设定成等于16：
scaling_list_enabled_flag＝0。
transform_skip_flag[xTbY][yTbY]＝1and nTbS>4。
否则以下适用：
m[x][y]＝ScalingFactor[sizeId][matrixId][x][y] (8-283)
当针对等于(nTbS)x(nTbS)的量化矩阵的大小指定语法元素sizeId且在表7-4中分别针对sizeId、CuPredMode[xTbY][yTbY]和cIdx指定matrixId时，则可如下导出经按比例缩放变换系数d[x][y]：
d[x][y]＝Clip3(coeffMin,coeffMax,((TransCoeffLevel[xTbY][yTbY][cIdx]
[x][y]*m[x][y]*levelScale[qP％6]<<(qP/6))+(1<<(bdShift-1)))>>bdShift)
当color_transform_flag等于1时，以下可适用：
BitDepthY＝BitDepthY-2
BitDepthC＝BitDepthC-2
在一个实例中，当颜色空间变换应用于帧内模式时，在经转换颜色空间域中导出残余。即，在调用帧内样本预测过程之前，可首先以经修改正向YCoCg或YCoCg-R变换将当前CU的相邻像素转换到另一次最佳颜色空间。经修改相邻像素接着可用以导出当前CU的预测符。在次最佳域中从当前CU和当前CU的相邻像素导出残余(即，预测误差)。以与例如分量间残余预测、变换、量化和熵译码等常规译码流相同的方式对残余进行译码。在熵译码之后，可以逆YCoCg或YCoCg-R进一步修改变换系数。接着可将经修改变换系数添加到预测符以导出当前CU的经重构像素。在调用重构过程之后，可将逆YCoCg或YCoCg-R变换应用于经修改相邻像素。因此，在解码器侧，在调用重构过程之前，可应用一个额外过程，其中将逆颜色空间变换应用于导出的变换系数。
替代地，当颜色空间变换应用于帧内模式时，并非通过从所转换颜色域中的当前块减去预测符而产生残余，而是可在颜色空间变换之前使用像素产生残余，随后是颜色空间变换。在此情况下，可将明度和色度帧内模式设定成相同模式。替代地，可跳过色度模式的信令。替代地，仅当明度和色度帧内模式相同时可用信号表示颜色变换旗标。
如上文所描述，在一些实例中，无损和有损译码方法可共享同一矩阵，例如YCoCg-R。另外或替代地，当YCoCg-R变换应用于有损译码时，具有颜色变换的块的色度分量的位深度与无颜色变换的块相比可增加1。具有颜色变换的块的明度分量QP可等于无颜色变换的块的明度分量减4。在一个实例中，具有颜色变换的块的两个色度分量QP可等于无颜色变换的块的色度/明度分量QP加2。在一个实例中，具有颜色变换的块的Cg色度分量QP可等于无颜色变换的块的明度/色度分量QP加2。具有颜色变换的块的Co色度分量QP可等于无颜色变换的块的明度/色度分量QP加3。
在此些实例中，当YCoCg-R用于有损和无损模式两者时，如果当前块经有损译码，那么明度和色度的位深度对于未启用自适应颜色变换而经译码的那些块可为相同的。在此情况下，当应用有损译码时，在YCoCg-R的正向变换之后，可通过N位右移而按比例缩放Co和Cg分量以减少由于正向YCoCg-R变换而增加的位深度，且使位深度精度与Y分量的位深度精度相同。另外，在执行反向YCoCg-R变换之前，可以N位左移修改Co和Cg分量。在一个实例中，N等于1。
在一个实例中，可假定明度和色度分量的输入位深度是相同的。对于有损译码模式，在正向变换之后且在逆变换之前可将移位操作应用于两个色度分量(即，Cg、Co)。在一个实例中，按次序应用以下过程：
1.正向YCoCg-R不变：
2.如果当前块是以有损模式经译码，那么以下可进一步适用：
Cg＝Cg>>1；
Co＝Co>>1；
在另一实例中，在右移过程中可考虑偏移。举例来说，以上突出显示的方程式可被以下代替：
Cg＝(Cg+1)>>1；
Co＝(Co+1)>>1；
在调用反向YCoCg-R变换之前，以下可适用：
如果当前块是以有损模式经译码，那么以下可适用：
Cg＝Cg<<1；
Co＝Co<<1；
且逆YCoCg-R可保持不变：
在此些实例中，当ChromaArrayType等于3时可调用使用自适应颜色变换的变换块的残余修改过程。对此过程的输入可包含指定块大小的变量blkSize、具有元素rY[x][y]的明度残余样本rY的(blkSize)x(blkSize)阵列、具有元素rCb[x][y]的色度残余样本rCb的(blkSize)x(blkSize)阵列，以及具有元素rCr[x][y]的色度残余样本rCr的(blkSize)x(blkSize)阵列。对此过程的输出可包含明度残余样本的经修改(blkSize)x(blkSize)阵列rY、色度残余样本的经修改(blkSize)x(blkSize)阵列rCb，以及色度残余样本的经修改(blkSize)x(blkSize)阵列rCr。
可如下修改残余样本rY、rCb和rCr的(blkSize)x(blkSize)阵列，其中x＝0..blkSize-1，y＝0..blkSize-1：
如果cu_transquant_bypass_flag＝0，rCb[x][y]＝rCb[x][y]<<1且rCr[x][y]＝rCr[x][y]<<1
tmp＝rY[x][y]-(rCb[x][y]>>1)
rY[x][y]＝tmp+rCb[x][y]
rCb[x][y]＝tmp-(rCr[x][y]>>1)
rCr[x][y]＝rCb[x][y]+rCr[x][y]
替代地，‘如果cu_transquant_bypass_flag等于0，rCb[x][y]＝rCb[x][y]<<1且rCr[x][y]＝rCr[x][y]<<1’可被‘rCb[x][y]＝rCb[x][y]<<(1-cu_transquant_bypass_flag)且rCr[x][y]＝rCr[x][y]<<(1-cu_transquant_bypass_flag)’代替。
在共享颜色变换矩阵的有损译码方法和无损译码方法的另一实例中，明度和色度分量的输入位深度可不同。在此实例中，当明度和色度分量的输入位深度不同且YCoCg-R用于有损和无损译码模式两者时，在逆变换之前，可首先将Y、Co、Cg分量的值中的至少一者移位N位以使全部三个分量具有相同位深度精度。另外，可对两个色度分量(即，Co和Cg)移位再一个位。在调用正向YCoCg-R变换之前可将全部三个分量的预测值中的至少一者修改为具有相同位深度精度。且在正向变换之后，可将所述两个色度分量右移1位。对于无损译码模式，可不考虑不同位深度，且因此可停用自适应颜色空间变换。在一个实例中，位流可包含如下约束：当明度和色度分量的位深度在经译码位流中不同时，将停用颜色变换(即color_transform_enabled_flag等于0)。
在此实例中，当ChromaArrayType等于3时可调用使用自适应颜色变换的变换块的残余修改过程。对此过程的输入可包含指定块大小的变量blkSize、具有元素rY[x][y]的明度残余样本rY的(blkSize)x(blkSize)阵列、具有元素rCb[x][y]的色度残余样本rCb的(blkSize)x(blkSize)阵列，以及具有元素rCr[x][y]的色度残余样本rCr的(blkSize)x(blkSize)阵列。对此过程的输出可包含明度残余样本的经修改(blkSize)x(blkSize)阵列rY、色度残余样本的经修改(blkSize)x(blkSize)阵列rCb，以及色度残余样本的经修改(blkSize)x(blkSize)阵列rCr。
可如下导出变量deltaBDY和deltaBDC：
BitDepthMax＝Max(BitDepthY,BitDepthC)
deltaBDY＝cu_transquant_bypass_flag？0:BitDepthMax-BitDepthY
deltaBDC＝cu_transquant_bypass_flag？0:BitDepthMax-BitDepthC
OY＝cu_transquant_bypass_flag||(BitDepthMax＝＝BitDepthY)？0:1<<(deltaBDY-1)
OC＝cu_transquant_bypass_flag||(BitDepthMax＝＝BitDepthc)？0:1<<(deltaBDc-1)
可如下修改残余样本rY、rCb和rCr的(blkSize)x(blkSize)阵列，其中x＝0..blkSize-1，y＝0..blkSize-1：
可如下修改残余样本rY[x][y]、rCb[x][y]和rCr[x][y]：
rY[x][y]＝rY[x][y]<<deltaBDY
rCb[x][y]＝rCb[x][y]<<(deltaBDC+1-cu_transquant_bypass_flag)
rCr[x][y]＝rCr[x][y]<<(deltaBDC+1-cu_transquant_bypass_flag)
tmp＝rY[x][y]-(rCb[x][y]>>1)
rY[x][y]＝tmp+rCb[x][y]
rCb[x][y]＝tmp-(rCr[x][y]>>1)
rCr[x][y]＝rCb[x][y]+rCr[x][y]
rY[x][y]＝(rY[x][y]+OY)>>deltaBDY
rCb[x][y]＝(rCb[x][y]+Oc)>>deltaBDC
rCr[x][y]＝(rCr[x][y]+Oc)>>deltaBDC
在上述实例中，函数Max可用以导出两个变量之间的较大值。替代地，舍入偏移OY和Oc中的至少一者可设定成等于0。
替代地，甚至对于无损译码，当明度和色度分量的位深度不同时，可在需要时将所述分量移位到相同位深度精度。在编码器侧，在正向变换之后，可不需要移位回到原始位深度精度。换句话说，所述三个分量的经译码残余可具有相同位深度以确保其为无损译码。不同于有损译码，在调用用于无损译码的后向YCoCg-R变换之前可不修改输入。可仍需要右移以确保输出在与原始输入相同的位深度中。
在此实例中，当ChromaArrayType等于3时可调用使用自适应颜色变换的变换块的残余修改过程。对此过程的输入可包含指定块大小的变量blkSize、具有元素rY[x][y]的明度残余样本rY的(blkSize)x(blkSize)阵列、具有元素rCb[x][y]的色度残余样本rCb的(blkSize)x(blkSize)阵列，以及具有元素rCr[x][y]的色度残余样本rCr的(blkSize)x(blkSize)阵列。对此过程的输出可包含明度残余样本的经修改(blkSize)x(blkSize)阵列rY、色度残余样本的经修改(blkSize)x(blkSize)阵列rCb，以及色度残余样本的经修改(blkSize)x(blkSize)阵列rCr。
可如下导出变量deltaBDY和deltaBDC：
BitDepthMax＝Max(BitDepthY,BitDepthC)
deltaBDY＝BitDepthMax-BitDepthY
deltaBDC＝BitDepthMax-BitDepthC
OY＝(BitDepthMax＝＝BitDepthY)？0:1<<(deltaBDY-1)
OC＝(BitDepthMax＝＝BitDepthc)？0:1<<(deltaBDc-1)
可如下修改残余样本rY、rCb和rCr的(blkSize)x(blkSize)阵列，其中x＝0..blkSize-1，y＝0..blkSize-1：
当cu transquant绕过旗标等于0时，可如下修改残余样本rY[x][y]、rCb[x][y]和rCr[x][y]：
rY[x][y]＝rY[x][y]<<deltaBDY
rCb[x][y]＝rCb[x][y]<<(deltaBDC+1-cu_transquant_bypass_flag)
rCr[x][y]＝rCr[x][y]<<(deltaBDC+1-cu_transquant_bypass_flag)
tmp＝rY[x][y]-(rCb[x][y]>>1)
rY[x][y]＝tmp+rCb[x][y]
rCb[x][y]＝tmp-(rCr[x][y]>>1)
rCr[x][y]＝rCb[x][y]+rCr[x][y]
rY[x][y]＝(rY[x][y]+OY)>>deltaBDY
rCb[x][y]＝(rCb[x][y]+Oc)>>deltaBDC
rCr[x][y]＝(rCr[x][y]+Oc)>>deltaBDC
替代地，OY和OC中的一者可等于0。
视频编码器20可例如在帧标头、块标头、切片标头或GOP标头中进一步将例如基于块的语法数据、基于帧的语法数据及基于GOP的语法数据等语法数据发送到视频解码器30。GOP语法数据可描述相应GOP中的数个帧，及帧语法数据可指示用以对对应帧进行编码的编码/预测模式。
视频编码器20和视频解码器30各自可实施为合适的多种合适的编码器或解码器电路中的任一者，例如一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑电路、软件、硬件、固件或其任何组合。视频编码器20和视频解码器30中的每一者可包含在一或多个编码器或解码器中，所述编码器或解码器中的任一者可集成为组合式视频编码器/解码器(编解码器)的部分。包含视频编码器20和/或视频解码器30的装置可包括集成电路、微处理器和/或无线通信装置，例如，蜂窝式电话。
图2是说明可使用颜色空间转换过程实施用于编码视频块的技术的视频编码器20的实例的框图。视频编码器20可执行视频切片内的视频块的帧内和帧间译码。帧内译码依赖于空间预测来减少或去除给定视频帧或图片内的视频中的空间冗余。帧间译码依赖于时间预测来减少或移除视频序列的邻近帧或图片内的视频中的时间冗余。帧内模式(I模式)可指代若干基于空间的译码模式中的任一者。例如单向预测(P模式)或双向预测(B模式)等帧间模式可指代若干基于时间的译码模式中的任一者。
如图2中所示，视频编码器20接收待编码的视频帧内的当前视频块。在图2的实例中，视频编码器20包含模式选择单元40、参考图片存储器64、求和器50、变换处理单元52、量化单元54和熵编码单元56。模式选择单元40又包含运动补偿单元44、运动估计单元42、帧内预测单元46及分割单元48。为了视频块重构，视频编码器20还包含逆量化单元58、逆变换单元60及求和器62。还可包含解块滤波器(图2中未图示)以对块边界进行滤波，从而从经重构视频移除成块假象。在需要时，解块滤波器将通常滤波求和器62的输出。除了解块滤波器外，还可使用额外滤波器(环路内或环路后)。为简洁起见未图示此些滤波器，但是必要时，此些滤波器可以对求和器50的输出进行滤波(作为环路内滤波器)。
在编码过程期间，视频编码器20接收待译码的视频帧或切片。所述帧或切片可以划分成多个视频块。运动估计单元42和运动补偿单元44可相对于一或多个参考帧中的一或多个块执行所接收视频块的帧间预测性译码以提供时间预测。帧内预测单元46可替代地相对于与待译码块相同的帧或切片中的一或多个相邻块执行对所接收的视频块的帧内预测性译码以提供空间预测。视频编码器20可执行多个译码遍次，例如，为了为每一视频数据块选择一种适当的译码模式。
此外，分割单元48可以基于前述译码遍次中的前述划分方案的评估将视频数据块分割成子块。举例来说，分割单元48最初可以将帧或切片分割成LCU，并且基于速率失真分析(例如，速率失真优化)将LCU中的每一者分割成子CU。模式选择单元40可以进一步产生指示将LCU分割成子CU的四叉树数据结构。四叉树的叶节点CU可以包含一或多个PU和一或多个TU。
模式选择单元40可以(例如)基于误差结果选择译码模式中的一者(帧内或帧间)，并且将所得的经帧内译码或经帧间译码块提供到求和器50以便产生残余块数据，并且提供到求和器62以便重构经编码块以用作参考帧。模式选择单元40还将语法元素(例如，运动向量、帧内模式指示符、分割信息和其它此类语法信息)提供给熵编码单元56。
运动估计单元42和运动补偿单元44可高度集成，但出于概念的目的分别加以说明。运动估计单元42执行的运动估计是产生运动向量的过程，所述过程估计视频块的运动。举例来说，运动向量可指示当前视频帧或图片内的视频块的PU相对于参考帧(或其它经译码单元)内的预测性块相对于当前帧(或其它经译码单元)内正被译码的当前块的位移。预测性块是被发现在像素差方面与待译码块紧密匹配的块，像素差可通过绝对差总和(SAD)、平方差总和(SSD)或其它差度量来确定。在一些实例中，视频编码器20可计算存储于参考图片存储器64中的参考图片的子整数像素位置的值。举例来说，视频编码器20可内插参考图片的四分之一像素位置、八分之一像素位置或其它分数像素位置的值。因此，运动估计单元42可相对于全像素位置和分数像素位置执行运动搜索并且输出具有分数像素精确度的运动向量。
运动估计单元42通过比较PU的位置与参考图片的预测性块的位置来计算用于经帧间译码切片中的视频块的PU的运动向量。参考图片可以选自第一参考图片列表(列表0)或第二参考图片列表(列表1)，其中的每一个识别存储在参考图片存储器64中的一或多个参考图片。运动估计单元42向熵编码单元56和运动补偿单元44发送计算出的运动向量。
由运动补偿单元44执行的运动补偿可涉及基于由运动估计单元42确定的运动向量来获取或产生预测性块。再次，在一些实例中，运动估计单元42与运动补偿单元44可在功能上集成。在接收到当前视频块的PU的运动向量后，运动补偿单元44可在参考图片列表中的一者中定位所述运动向量指向的预测块。求和器50通过从正经译码的当前视频块的像素值减去预测性块的像素值从而形成像素差值来形成残余视频块，如下文所论述。一般来说，运动估计单元42相对于明度分量执行运动估计，并且运动补偿单元44对于色度分量及明度分量两者使用基于明度分量计算的运动向量。模式选择单元40还可产生与视频块及视频切片相关联的语法元素以供视频解码器30在解码视频切片的视频块时使用。
作为对如上文所描述的由运动估计单元42和运动补偿单元44执行的帧间预测的替代方案，帧内预测单元46可帧内预测当前块。具体来说，帧内预测单元46可以确定用于对当前块进行编码的帧内预测模式。在一些实例中，帧内预测单元46可以(例如)在单独的编码编次期间使用各种帧内预测模式来编码当前块，并且帧内预测单元46(或在一些实例中为模式选择单元40)可以从所述测试模式中选择适当帧内预测模式来使用。
举例来说，帧内预测单元46可使用速率-失真分析计算针对各种测试的帧内预测模式的速率-失真值，且从所述测试的模式当中选择具有最好速率失真特性的帧内预测模式。速率失真分析一般确定经编码块与经编码以产生所述经编码块的原始的未经编码块之间的失真(或误差)的量，以及用于产生经编码块的位速率(也就是说，位数目)。帧内预测单元46可根据用于各种经编码块的失真和速率计算比率，以确定哪个帧内预测模式对于所述块展现最佳速率失真值。
在选择用于块的帧内预测模式后，帧内预测单元46可将指示用于块的选定帧内预测模式的信息提供到熵编码单元56。熵编码单元56可编码指示选定帧内预测模式的信息。视频编码器20在所发射的位流中可包含配置数据，其可包含多个帧内预测模式索引表和多个经修改的帧内预测模式索引表(也称为码字映射表)，对用于各种块的上下文进行编码的定义，以及对最可能帧内预测模式、帧内预测模式索引表和经修改的帧内预测模式索引表的指示以用于所述上下文中的每一者。
视频编码器20通过从正译码原始视频块减去来自模式选择单元40的预测数据而形成残余视频块。求和器50表示执行此减法运算的一或多个组件。变换处理单元52将例如离散余弦变换(DCT)或概念上类似的变换等变换应用于残余块，从而产生包括残余变换系数值的视频块。变换处理单元52可以执行概念上类似于DCT的其它变换。也可使用小波变换、整数变换、子带变换或其它类型的变换。在任何状况下，变换处理单元52向残余块应用所述变换，从而产生残余变换系数的块。所述变换可将残余信息从像素值域转换到变换域(例如，频域)。变换处理单元52可将所得变换系数发送到量化单元54。量化单元54可量化所述变换系数以进一步减小位速率。量化过程可以减少与系数中的一些或全部相关联的位深度。可通过调节量化参数来修改量化的程度。在一些实例中，量化单元54可以接着执行对包含经量化的变换系数的矩阵的扫描。替代地，熵编码单元56可执行扫描。
在量化后，熵编码单元56熵译码经量化变换系数。举例来说，熵编码单元56可执行上下文自适应可变长度译码(CAVLC)、上下文自适应二进制算术译码(CABAC)、基于语法的上下文自适应二进制算术译码(SBAC)、概率区间分割熵(PIPE)译码或另一熵译码技术。在基于上下文的熵译码的情况下，上下文可以基于相邻块。在熵编码单元56的熵译码之后，可以将经编码位流发射到另一装置(例如，视频解码器30)，或者将所述视频存档以用于稍后发射或检索。
根据本发明的技术，视频编码器20的熵编码单元56可执行本发明的一或多种技术。举例来说，视频编码器20的熵编码单元56可确定是否使用颜色空间转换用于译码单元。视频编码器20的熵编码单元56可进一步响应于确定使用颜色空间转换用于译码单元而设定译码单元的语法元素的值以指示颜色空间转换的使用。视频编码器20的熵编码单元56可进一步在对译码单元进行编码中应用颜色空间变换过程。
逆量化单元58及逆变换单元60分别应用逆量化和逆变换以在像素域中重构残余块，例如以供稍后用作参考块。运动补偿单元44可通过将残余块添加到参考图片存储器64的一个帧的预测性块来计算参考块。运动补偿单元44还可将一或多个内插滤波器应用于经重构的残余块来计算用于在运动估计中使用的次整数像素值。求和器62将经重构的残余块添加到由运动补偿单元44产生的经运动补偿的预测块，以产生经重构的视频块以用于存储于参考图片存储器64中。经重构的视频块可由运动估计单元42及运动补偿单元44用作参考块以对后续视频帧中的块进行帧间译码。
以此方式，视频编码器20的熵编码单元56可执行本发明的一或多种技术。举例来说，视频编码器20的熵编码单元56可确定是否使用颜色空间转换用于译码单元。视频编码器20的熵编码单元56可进一步响应于确定使用颜色空间转换用于译码单元而设定译码单元的语法元素的值以指示颜色空间转换的使用。在一些实例中，所述语法元素包括一位旗标。在一些实例中，当译码单元是使用除帧内脉码调制(IPCM)模式外的模式经译码时用信号表示所述语法元素。在其它实例中，仅当译码单元的变换单元中存在非零系数时用信号表示所述语法元素。在一些实例中，所述语法元素的1的值指示译码单元是使用颜色空间转换经编码。视频编码器20的熵编码单元56可进一步在对译码单元进行编码中应用颜色空间变换过程。
在一些实例中，可不用信号表示所述语法元素。举例来说，当译码单元经帧内译码时且当译码单元内的预测单元的明度预测模式和色度预测模式不同时可不用信号表示所述语法元素。在另一实例中，当译码单元是以调色板模式译码时可不用信号表示所述语法元素。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频编码器20的熵编码单元56可进一步确定是否使用颜色空间转换用于序列参数集。响应于确定使用颜色空间转换用于序列参数集，视频编码器20的熵编码单元可设定语法元素的值。所述第二语法元素可与所述序列参数集相关联且可经设定以指示颜色空间转换经启用以用于对应于所述序列参数集的视频数据。视频编码器20的熵编码单元可进一步将颜色空间变换过程应用于所述序列参数集的视频数据。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频编码器20的熵编码单元56可进一步确定是否使用颜色空间转换用于图片参数集。响应于确定使用颜色空间转换用于所述图片参数集，视频编码器20的熵编码单元可设定语法元素的值。所述第二语法元素可与所述图片参数集相关联且可经设定以指示颜色空间转换经启用以用于对应于所述图片参数集的视频数据。视频编码器20的熵编码单元可进一步将颜色空间变换过程应用于所述图片参数集的视频数据。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频编码器20的熵编码单元56可进一步确定是否使用颜色空间转换用于切片标头。响应于确定使用颜色空间转换用于所述切片标头，视频编码器20的熵编码单元可设定语法元素的值。所述第二语法元素可与所述切片标头相关联，且可经设定以指示颜色空间转换经启用以用于对应于所述切片标头的视频数据。视频编码器20的熵编码单元可进一步将颜色空间变换过程应用于所述切片标头的视频数据。
在一些实例中，视频编码器20的熵编码单元56可进一步对指示所述颜色空间变换过程的图片参数集的数据进行编码。在其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的序列参数集的数据进行编码。在又其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的切片标头的数据进行编码。在一些实例中，视频编码器20的熵编码单元56可导出用于所述译码单元的多个区中的每一者的所述颜色空间逆变换过程，其中所述区是基于高层级语法而划分。在一些实例中，颜色空间逆变换过程可为固定的。
在一些实例中，视频编码器20的熵编码单元56可在指示所述颜色空间变换过程的变换单元(TU)层级对数据进行编码。在其它实例中，视频编码器20的熵编码单元56可在指示所述颜色空间变换过程的预测单元(PU)层级对数据进行编码。在又其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的切片标头的数据进行编码。在其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的补充增强信息(SEI)消息的数据进行编码。
在一些实例中，所述语法元素是指示所述译码单元不是使用颜色空间转换经编码的第一语法元素。在此些实例中，视频编码器20的熵编码单元56可确定用于所述译码单元中的第一像素的调色板索引的值。视频编码器20的熵编码单元56可进一步确定按扫描次序立即接续所述第一像素的一或多个接下来的像素的调色板索引的值。确定调色板索引的值可包括确定调色板索引的值，直到像素具有的调色板索引的值不同于第一像素的调色板索引的值。视频编码器20的熵编码单元56可进一步确定针对接下来的像素确定的调色板索引值的数目。基于调色板索引值的数目，视频编码器20的熵编码单元56可使用第一模式或第二模式对调色板索引进行编码。当调色板索引值的数目大于一时，视频编码器20的熵编码单元56可设定第二语法元素的值以指示第一模式用以编码所述调色板索引，且将第三语法元素的值设定为等于调色板索引值的数目。当调色板索引值的数目小于或等于一时，视频编码器20的熵编码单元56可设定第二语法元素的值以指示第二模式用以编码所述调色板索引。在一些实例中，第一模式是运行模式，且第二模式是像素模式。
在一些实例中，编码所述语法元素可包括视频编码器20的熵编码单元56对指示译码单元是否使用颜色空间转换经编码的补充增强信息(SEI)消息的数据进行编码。在一些实例中，应用所述颜色空间逆变换过程可包括视频编码器20的熵编码单元56应用固定颜色空间逆变换矩阵。在一些实例中，所述固定颜色空间变换矩阵是YCoCg矩阵。在其它实例中，所述固定颜色空间变换矩阵是YCoCg-R矩阵。
在一些实例中，响应于确定使用颜色空间转换用于所述译码单元，视频编码器20的熵编码单元56可进一步在将颜色空间变换过程应用于视频数据之前使用一或多个分量的值产生残余块。在此些实例中，视频编码器20的熵编码单元56可进一步将所述颜色空间变换过程应用于所述视频数据的残余块。
图3是说明可实施用于解码视频块的技术的视频解码器30的实例的框图，所述视频块中的一些是使用颜色空间转换过程经编码。在图3的实例中，视频解码器30包含熵解码单元70、运动补偿单元72、帧内预测单元74、逆量化单元76、逆变换单元78、参考图片存储器82及求和器80。在一些实例中，视频解码器30可执行一般与相对于视频编码器20(图2)所描述的编码遍次互逆的解码遍次。运动补偿单元72可基于从熵解码单元70接收的运动向量产生预测数据，而帧内预测单元74可基于从熵解码单元70接收的帧内预测模式指示符产生预测数据。
在解码过程期间，视频解码器30从视频编码器20接收表示经编码视频切片的视频块和相关联的语法元素的经编码视频位流。视频解码器30的熵解码单元70熵解码位流以产生经量化系数、运动向量或帧内预测模式指示符和其它语法元素。熵解码单元70将运动向量及其它语法元素转发到运动补偿单元72。视频解码器30可在视频切片层级及/或视频块层级接收语法元素。
根据本发明的技术，视频解码器30的熵解码单元70可执行本发明的一或多种技术。举例来说，视频解码器30的熵解码单元70可对译码单元的语法元素进行解码。所述语法元素可指示译码单元是否是使用颜色空间转换经编码。视频解码器30的熵解码单元70可进一步确定所述语法元素的值是否指示译码单元是使用颜色空间转换经编码。视频解码器30的熵解码单元70可进一步响应于确定所述语法元素指示译码单元是使用颜色空间转换经译码而在对所述译码单元进行解码中应用颜色空间逆变换过程。在解码器侧上，无论译码模式如何都不需要执行颜色空间正向变换过程。在一些实例中，颜色空间逆变换过程可为固定的。
当视频切片经译码为经帧内译码(I)切片时，帧内预测单元74可以基于用信号表示的帧内预测模式及来自当前帧或图片的先前经解码块的数据产生用于当前视频切片的视频块的预测数据。当视频帧经译码为经帧间译码(例如，B、P或GPB)切片时，运动补偿单元72基于从熵解码单元70接收的运动向量及其它语法元素产生用于当前视频切片的视频块的预测性块。可以从参考图片列表中的一者内的参考图片中的一者产生预测性块。视频解码器30可基于存储在参考图片存储器82中的参考图片使用默认构造技术构造参考帧列表--列表0和列表1。运动补偿单元72通过剖析运动向量及其它语法元素确定用于当前视频切片的视频块的预测信息，并且使用所述预测信息产生用于正经解码的当前视频块的预测性块。举例来说，运动补偿单元72使用一些接收到的语法元素确定用于对视频切片的视频块进行译码的预测模式(例如，帧内预测或帧间预测)、帧间预测切片类型(例如，B切片、P切片或GPB切片)、切片的参考图片列表中的一或多者的构造信息、切片的每一经帧间编码的视频块的运动向量、切片的每一经帧间译码的视频块的帧间预测状态和用以对当前视频切片中的视频块进行解码的其它信息。
运动补偿单元72还可以基于内插滤波器执行内插。运动补偿单元72可以使用如视频编码器20在视频块的编码期间使用的内插滤波器来计算参考块的子整数像素的内插值。在此情况下，运动补偿单元72可根据接收的语法元素而确定由视频编码器20使用的内插滤波器并使用所述内插滤波器来产生预测性块。
逆量化单元76将在位流中提供且由熵解码单元70解码的经量化块系数逆量化，即解量化。逆量化过程可包含使用由视频解码器30针对视频切片中的每一视频块计算的量化参数QPY来确定应应用的量化程度和同样的逆量化程度。
逆变换处理单元78将逆变换(例如，逆DCT、逆整数变换或概念上类似的逆变换过程)应用于变换系数以便产生像素域中的残余块。
在运动补偿单元72基于运动向量及其它语法元素产生当前视频块的预测性块后，视频解码器30通过对来自逆变换处理单元78的残余块与由运动补偿单元72产生的对应预测性块求和而形成经解码的视频块。求和器80表示执行此求和运算的一或多个组件。视需要，还可应用解块滤波器以对经解码块进行滤波，以便移除成块假象。还可使用其它环路滤波器(在译码环路中或在译码环路之后)来使像素转变变平滑或者以其它方式改善视频质量。接着将给定帧或图片中的经解码视频块存储在参考图片存储器82中，所述参考图片存储器存储用于后续运动补偿的参考图片。参考图片存储器82还存储经解码视频以用于稍后呈现在显示装置(例如，图1的显示装置32)上。
以此方式，视频解码器30的熵解码单元70可执行本发明的一或多种技术。举例来说，视频解码器30的熵解码单元70可对译码单元的语法元素进行解码。所述语法元素可指示译码单元是否是使用颜色空间转换经编码。在一些实例中，所述语法元素可包括一位旗标。在一些实例中，译码单元是在除帧内脉码调制(IPCM)模式外的模式中经译码，且仅针对使用除IPCM模式外的模式的译码单元用信号表示所述语法元素。在一些实例中，所述语法元素指示当所述译码单元的变换单元中存在非零系数时所述译码单元是使用颜色空间转换经编码。在一些实例中，所述语法元素的1的值指示译码单元是使用颜色空间转换经编码。在解码器侧上，无论译码模式如何都不需要执行颜色空间正向变换过程。
视频解码器30的熵解码单元70可进一步确定所述语法元素的值是否指示译码单元是使用颜色空间转换经编码。视频解码器30的熵解码单元70可进一步响应于确定所述语法元素指示译码单元是使用颜色空间转换经译码而在对所述译码单元进行解码中应用颜色空间逆变换过程。在一些实例中，颜色空间逆变换过程可为固定的。
在一些实例中，所述语法元素可指示颜色空间转换不用于编码所述译码单元。举例来说，当译码单元经帧内译码时以及当所述译码单元内的预测单元的明度预测模式和色度预测模式不同时，所述语法元素可指示颜色空间转换不用于编码所述译码单元。在另一实例中，当译码单元是以调色板模式译码时，所述语法元素可指示颜色空间转换不用于编码所述译码单元。在这些实例中，所述语法元素可不存在于包括所述视频数据的所接收位流中，且解码所述语法元素可包括推断所述语法元素的值。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频解码器30的熵解码单元70可进一步对第二语法元素进行解码。所述第二语法元素可与序列参数集(SPS)相关联，且可指示颜色空间转换是否经启用以用于对应于所述SPS的视频数据。视频解码器30的熵解码单元70可确定所述第二语法元素的值是否指示颜色空间转换经启用以用于对应于所述SPS的视频数据。在此些实例中，对所述第一语法元素进行解码可包括视频解码器30的熵解码单元70经配置以响应于确定所述第二语法元素指示颜色空间转换经启用以用于对应于所述序列参数集的视频数据而对所述第一语法元素进行解码。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频解码器30的熵解码单元70可进一步对第二语法元素进行解码。所述第二语法元素可与图片参数集(PPS)相关联，且可指示颜色空间转换是否经启用以用于对应于所述PPS的视频数据。视频解码器30的熵解码单元70可确定所述第二语法元素的值是否指示颜色空间转换经启用以用于对应于所述PPS的视频数据。在此些实例中，对所述第一语法元素进行解码可包括视频解码器30的熵解码单元70经配置以响应于确定所述第二语法元素指示颜色空间转换经启用以用于对应于所述图片参数集的视频数据而对所述第一语法元素进行解码。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频解码器30的熵解码单元70可进一步对第二语法元素进行解码。所述第二语法元素可与切片标头相关联，且可指示颜色空间转换是否经启用以用于对应于所述切片标头的视频数据。视频解码器30的熵解码单元70可确定所述第二语法元素的值是否指示颜色空间转换经启用以用于对应于所述切片标头的视频数据。在此些实例中，对所述第一语法元素进行解码可包括视频解码器30的熵解码单元70经配置以响应于确定所述第二语法元素指示颜色空间转换经启用以用于对应于所述切片标头的视频数据而对所述第一语法元素进行解码。
在一些实例中，视频解码器30的熵解码单元70可进一步对指示所述颜色空间逆变换过程的图片参数集(PPS)的数据进行解码。在其它实例中，视频解码器30的熵解码单元70可对指示所述颜色空间逆变换过程的序列参数集(SPS)的数据进行解码。在又其它实例中，视频解码器30的熵解码单元70可对指示所述颜色空间逆变换过程的切片标头的数据进行解码。在一些实例中，视频解码器30的熵解码单元70可导出用于所述译码单元的多个区中的每一者的颜色空间逆变换过程，其中所述区是基于高层级语法而划分。
在一些实例中，视频解码器30的熵解码单元70可在指示所述颜色空间逆变换过程的变换单元(TU)层级对数据进行解码。在其它实例中，视频解码器30的熵解码单元70可在指示所述颜色空间逆变换过程的预测单元(PU)层级对数据进行解码。在一些其它实例中，视频解码器30的熵解码单元70可从切片标头的数据导出所述颜色空间逆变换过程。在又其它实例中，视频解码器30的熵解码单元70可对指示所述颜色空间逆变换过程的补充增强信息(SEI)消息的数据进行解码。
在一些实例中，所述语法元素是指示所述译码单元不是使用颜色空间转换经编码的第一语法元素。在此些实例中，视频解码器30的熵解码单元70可进一步确定第二语法元素的值。所述语法元素可指示第一模式或第二模式是否用于对所述译码单元中的像素的调色板索引进行解码。基于所述第二语法元素的所确定的值，视频解码器30的熵解码单元70可使用所述第一模式或第二模式对调色板索引进行解码。当使用所述第一模式时，视频解码器30的熵解码单元70可确定调色板索引的值，确定指示按扫描次序立即接续当前正解码的像素的像素的数目的第三语法元素的值，且重复确定按扫描次序的接下来N个像素的调色板索引的值的结果，其中N等于所述第三语法元素的值。在一些实例中，所述第一模式是运行模式。当使用所述第二模式时，视频解码器30的熵解码单元70可确定调色板索引的值且输出所述像素的像素样本值，其中所述像素样本值等于所述调色板索引的值。在一些实例中，所述第二模式是像素模式。
在一些实例中，解码所述语法元素包括视频解码器30的熵解码单元70经配置以对指示译码单元是否是使用颜色空间转换经编码的补充增强信息(SEI)消息的数据进行解码。在一些实例中，应用所述颜色空间逆变换过程包括视频解码器30的熵解码单元70经配置以应用固定颜色空间逆变换矩阵。在一些实例中，所述固定颜色空间变换矩阵是YCoCg矩阵。在其它实例中，所述固定颜色空间变换矩阵是YCoCg-R矩阵。
在一些实例中，响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码，视频解码器30的熵解码单元70可在将颜色空间逆变换过程应用于所述视频数据之前使用一或多个分量的值产生残余块。在此些实例中，视频解码器30的熵解码单元70可将所述颜色空间逆变换过程应用于所述视频数据的残余块。
图4是说明根据本发明的一或多种技术的35个HEVC预测模式的概念图。在当前HEVC中，对于每一预测单元(PU)的明度分量，以33个角度预测模式(从2到34编索引)、DC模式(以1编索引)和平面模式(以0编索引)利用帧内预测方法，如相对于图4所描述。
除以上35个帧内模式之外，HEVC还采用被命名为‘I-PCM’的再一个模式。在I-PCM模式中，绕过预测、变换、量化及熵译码，同时通过预定义数目的位来对预测样本进行译码。I-PCM模式的主要目的是处置当其它模式无法对信号有效地进行译码时的情形。
图5是说明根据本发明的一或多种技术用于合并和高级运动向量预测(AMVP)模式的空间相邻运动向量候选者的概念图。如相对于图5所描述，空间MV候选者是针对特定PU(PU0)从图5上展示的相邻块导出的，但从块产生候选者的方法对于合并和AMVP模式不同。
在合并模式中，可使用图5(a)上所示的具有数字的次序导出多达四个空间MV候选者，且次序如下：左(0)、上(1)、右上(2)、左下(3)及左上(4)，如图5(a)中所示。
在AMVP模式中，相邻块分成两个群组：由块0及1组成的左群组以及由块2、3及4组成的上群组，如图5(b)上所示。对于每一群组，如用信号表示的参考索引所指示的参考同一参考图片的相邻块中的潜在候选者具有最高待选优先级，以形成所述群组的最终候选者。有可能所有相邻块均不含有指向同一参考图片的运动向量。因此，如果无法找到此类候选者，那么将按比例缩放第一可用候选者以形成最终候选者，因此可补偿时间距离差异。
图6是说明根据本发明的一或多种技术的帧内块复制(BC)实例的概念图。如相对于图6所描述，帧内块复制(BC)已包含在RExt中。如图6中展示帧内BC的实例，其中当前CU是从当前图片/切片的已经解码块预测的。当前帧内BC块大小可与CU大小一样大，范围为8x8至64x64，但在一些应用中，可另外应用其它约束。
图7是说明根据本发明的一或多种技术用于帧内8x8块的目标块和参考样本的实例的概念图。如下相对于图7所述，变换矩阵是从参考样本值导出的。不同参考样本用于帧内情况和帧间情况。对于帧内块的情况，图7中展示目标块和参考样本。在此图中，目标块由8x8交叉影线样本组成，且参考是条纹和点线样本。
对于块间的情况，用于矩阵导出的参考样本与用于运动补偿的参考样本相同。为了实现移位运算，AMP块中的参考样本经子取样以使得样本的数目变成二的幂。举例来说，12x16块中的参考样本的数目减少到2/3。
根据本发明的一些技术，可应用颜色空间变换过程。在此些实例中，不需要用信号表示是否调用变换过程。另外，编码器和解码器侧都可以同一方法导出变换矩阵以避免用于用信号表示变换矩阵的开销。
图8是说明用于对当前块进行编码的实例方法的流程图。当前块可包括当前CU或当前CU的一部分。尽管相对于视频编码器20(图1及2)加以描述，但应理解，其它装置可经配置以执行类似于图8的方法的方法。
在此实例中，视频编码器20初始地预测当前块(150)。举例来说，视频编码器20可计算用于当前块的一或多个预测单元(PU)。视频编码器20接着可计算当前块的残余块，例如以产生变换单元(TU)(152)。为了计算残余块，视频编码器20可计算原始的未经译码的块与当前块的经预测块之间的差。视频编码器20的熵编码单元56可确定是否使用颜色空间转换(154)。基于视频编码器20是否确定使用颜色空间转换，视频编码器20的熵编码单元56可相应地设定语法元素的值(156)。在一些实例中，所述语法元素包括一位旗标。在一些实例中，当译码单元是使用除帧内脉码调制(IPCM)模式外的模式经译码时用信号表示所述语法元素。在其它实例中，仅当译码单元的变换单元中存在非零系数时用信号表示所述语法元素。在一些实例中，所述语法元素的1的值指示译码单元是使用颜色空间转换经编码。视频编码器20的熵编码单元56可将颜色空间变换过程应用于残余块(158)。视频编码器20可接着变换且量化残余块的系数(160)。接下来，视频编码器20可扫描残余块的经量化变换系数(162)。在扫描期间，或在扫描以后，视频编码器20可对所述系数进行熵编码(164)。举例来说，视频编码器20可使用CAVLC或CABAC对系数进行编码。视频编码器20可随后输出块的经熵译码数据(166)。
在一些实例中，可不用信号表示所述语法元素。举例来说，当译码单元经帧内译码时且当译码单元内的预测单元的明度预测模式和色度预测模式不同时可不用信号表示所述语法元素。在另一实例中，当译码单元是以调色板模式译码时可不用信号表示所述语法元素。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频编码器20的熵编码单元56可进一步确定是否使用颜色空间转换用于序列参数集。响应于确定使用颜色空间转换用于序列参数集，视频编码器20的熵编码单元可设定语法元素的值。所述第二语法元素可与所述序列参数集相关联且可经设定以指示颜色空间转换经启用以用于对应于所述序列参数集的视频数据。视频编码器20的熵编码单元可进一步将颜色空间变换过程应用于所述序列参数集的视频数据。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频编码器20的熵编码单元56可进一步确定是否使用颜色空间转换用于图片参数集。响应于确定使用颜色空间转换用于所述图片参数集，视频编码器20的熵编码单元可设定语法元素的值。所述第二语法元素可与所述图片参数集相关联且可经设定以指示颜色空间转换经启用以用于对应于所述图片参数集的视频数据。视频编码器20的熵编码单元可进一步将颜色空间变换过程应用于所述图片参数集的视频数据。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频编码器20的熵编码单元56可进一步确定是否使用颜色空间转换用于切片标头。响应于确定使用颜色空间转换用于所述切片标头，视频编码器20的熵编码单元可设定语法元素的值。所述第二语法元素可与所述切片标头相关联，且可经设定以指示颜色空间转换经启用以用于对应于所述切片标头的视频数据。视频编码器20的熵编码单元可进一步将颜色空间变换过程应用于所述切片标头的视频数据。
在一些实例中，视频编码器20的熵编码单元56可进一步对指示所述颜色空间变换过程的图片参数集的数据进行编码。在其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的序列参数集的数据进行编码。在又其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的切片标头的数据进行编码。在一些实例中，视频编码器20的熵编码单元56可导出用于所述译码单元的多个区中的每一者的所述颜色空间逆变换过程，其中所述区是基于高层级语法而划分。
在一些实例中，视频编码器20的熵编码单元56可在指示所述颜色空间变换过程的变换单元(TU)层级对数据进行编码。在其它实例中，视频编码器20的熵编码单元56可在指示所述颜色空间变换过程的预测单元(PU)层级对数据进行编码。在又其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的切片标头的数据进行编码。在其它实例中，视频编码器20的熵编码单元56可对指示所述颜色空间变换过程的补充增强信息(SEI)消息的数据进行编码。
在一些实例中，所述语法元素是指示所述译码单元不是使用颜色空间转换经编码的第一语法元素。在此些实例中，视频编码器20的熵编码单元56可确定用于所述译码单元中的第一像素的调色板索引的值。视频编码器20的熵编码单元56可进一步确定按扫描次序立即接续所述第一像素的一或多个接下来的像素的调色板索引的值。确定调色板索引的值可包括确定调色板索引的值，直到像素具有的调色板索引的值不同于第一像素的调色板索引的值。视频编码器20的熵编码单元56可进一步确定针对接下来的像素确定的调色板索引值的数目。基于调色板索引值的数目，视频编码器20的熵编码单元56可使用第一模式或第二模式对调色板索引进行编码。当调色板索引值的数目大于一时，视频编码器20的熵编码单元56可设定第二语法元素的值以指示第一模式用以编码所述调色板索引，且将第三语法元素的值设定为等于调色板索引值的数目。当调色板索引值的数目小于或等于一时，视频编码器20的熵编码单元56可设定第二语法元素的值以指示第二模式用以编码所述调色板索引。在一些实例中，第一模式是运行模式，且第二模式是像素模式。
在一些实例中，编码所述语法元素可包括视频编码器20的熵编码单元56对指示译码单元是否使用颜色空间转换经编码的补充增强信息(SEI)消息的数据进行编码。在一些实例中，应用所述颜色空间逆变换过程可包括视频编码器20的熵编码单元56应用固定颜色空间逆变换矩阵。在一些实例中，所述固定颜色空间变换矩阵是YCoCg矩阵。在其它实例中，所述固定颜色空间变换矩阵是YCoCg-R矩阵。
在一些实例中，响应于确定使用颜色空间转换用于所述译码单元，视频编码器20的熵编码单元56可进一步在将颜色空间变换过程应用于视频数据之前使用一或多个分量的值产生残余块。在此些实例中，视频编码器20的熵编码单元56可进一步将所述颜色空间变换过程应用于所述视频数据的残余块。
图9是说明用于对当前视频数据块进行解码的实例方法的流程图。当前块可包括当前CU或当前CU的一部分。尽管相对于视频解码器30(图1及3)加以描述，但应理解，其它装置可经配置以执行类似于图9的方法的方法。
视频解码器30可例如使用帧内或帧间预测模式预测当前块(200)以计算当前块的经预测块。视频解码器30还可接收当前块的经熵译码数据，例如对应于当前块的残余块的系数的经熵译码数据(202)。视频解码器30可对经熵译码数据进行熵解码以再生残余块的系数(204)。视频解码器30可接着逆扫描经再生系数(206)以产生经量化变换系数块。视频解码器30接着可逆变换和逆量化所述系数(208)。视频解码器30的熵解码单元70可对用于当前块的语法元素进行解码(210)。在一些实例中，所述语法元素可包括一位旗标。在一些实例中，译码单元是在除帧内脉码调制(IPCM)模式外的模式中经译码，且仅针对使用除IPCM模式外的模式的译码单元用信号表示所述语法元素。在一些实例中，所述语法元素指示当所述译码单元的变换单元中存在非零系数时所述译码单元是使用颜色空间转换经编码。在一些实例中，所述语法元素的1的值指示译码单元是使用颜色空间转换经编码。
视频解码器30的熵解码单元70可确定用于所述语法元素的值，且所述语法元素的值可指示当前块是否是使用颜色空间转换经编码(212)。响应于确定颜色空间转换在编码过程中使用，视频解码器30的熵解码单元70可应用颜色空间逆变换过程以再生残余块(214)。视频解码器30可最终通过组合经预测块与残余块而对当前块进行解码(216)。在解码器侧上，无论译码模式如何都不需要执行颜色空间正向变换过程。在一些实例中，颜色空间逆变换过程可为固定的。
在一些实例中，所述语法元素可指示颜色空间转换不用于编码所述译码单元。举例来说，当译码单元经帧内译码时以及当所述译码单元内的预测单元的明度预测模式和色度预测模式不同时，所述语法元素可指示颜色空间转换不用于编码所述译码单元。在另一实例中，当译码单元是以调色板模式译码时，所述语法元素可指示颜色空间转换不用于编码所述译码单元。在这些实例中，所述语法元素可不存在于包括所述视频数据的所接收位流中，且解码所述语法元素可包括推断所述语法元素的值。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频解码器30的熵解码单元70可进一步对第二语法元素进行解码。所述第二语法元素可与序列参数集(SPS)相关联，且可指示颜色空间转换是否经启用以用于对应于所述SPS的视频数据。视频解码器30的熵解码单元70可确定所述第二语法元素的值是否指示颜色空间转换经启用以用于对应于所述SPS的视频数据。在此些实例中，对所述第一语法元素进行解码可包括视频解码器30的熵解码单元70经配置以响应于确定所述第二语法元素指示颜色空间转换经启用以用于对应于所述序列参数集的视频数据而对所述第一语法元素进行解码。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频解码器30的熵解码单元70可进一步对第二语法元素进行解码。所述第二语法元素可与图片参数集(PPS)相关联，且可指示颜色空间转换是否经启用以用于对应于所述PPS的视频数据。视频解码器30的熵解码单元70可确定所述第二语法元素的值是否指示颜色空间转换经启用以用于对应于所述PPS的视频数据。在此些实例中，对所述第一语法元素进行解码可包括视频解码器30的熵解码单元70经配置以响应于确定所述第二语法元素指示颜色空间转换经启用以用于对应于所述图片参数集的视频数据而对所述第一语法元素进行解码。
在一些实例中，所述语法元素是第一语法元素且所述第一语法元素与所述译码单元相关联。在一些此类实例中，视频解码器30的熵解码单元70可进一步对第二语法元素进行解码。所述第二语法元素可与切片标头相关联，且可指示颜色空间转换是否经启用以用于对应于所述切片标头的视频数据。视频解码器30的熵解码单元70可确定所述第二语法元素的值是否指示颜色空间转换经启用以用于对应于所述切片标头的视频数据。在此些实例中，对所述第一语法元素进行解码可包括视频解码器30的熵解码单元70经配置以响应于确定所述第二语法元素指示颜色空间转换经启用以用于对应于所述切片标头的视频数据而对所述第一语法元素进行解码。
在一些实例中，视频解码器30的熵解码单元70可进一步对指示所述颜色空间逆变换过程的图片参数集(PPS)的数据进行解码。在其它实例中，视频解码器30的熵解码单元70可对指示所述颜色空间逆变换过程的序列参数集(SPS)的数据进行解码。在又其它实例中，视频解码器30的熵解码单元70可对指示所述颜色空间逆变换过程的切片标头的数据进行解码。在一些实例中，视频解码器30的熵解码单元70可导出用于所述译码单元的多个区中的每一者的颜色空间逆变换过程，其中所述区是基于高层级语法而划分。
在一些实例中，视频解码器30的熵解码单元70可在指示所述颜色空间逆变换过程的变换单元(TU)层级对数据进行解码。在其它实例中，视频解码器30的熵解码单元70可在指示所述颜色空间逆变换过程的预测单元(PU)层级对数据进行解码。在一些其它实例中，视频解码器30的熵解码单元70可从切片标头的数据导出所述颜色空间逆变换过程。在又其它实例中，视频解码器30的熵解码单元70可对指示所述颜色空间逆变换过程的补充增强信息(SEI)消息的数据进行解码。
在一些实例中，所述语法元素是指示所述译码单元不是使用颜色空间转换经编码的第一语法元素。在此些实例中，视频解码器30的熵解码单元70可进一步确定第二语法元素的值。所述语法元素可指示第一模式或第二模式是否用于对所述译码单元中的像素的调色板索引进行解码。基于所述第二语法元素的所确定的值，视频解码器30的熵解码单元70可使用所述第一模式或第二模式对调色板索引进行解码。当使用所述第一模式时，视频解码器30的熵解码单元70可确定调色板索引的值，确定指示按扫描次序立即接续当前正解码的像素的像素的数目的第三语法元素的值，且重复确定按扫描次序的接下来N个像素的调色板索引的值的结果，其中N等于所述第三语法元素的值。在一些实例中，所述第一模式是运行模式。当使用所述第二模式时，视频解码器30的熵解码单元70可确定调色板索引的值且输出所述像素的像素样本值，其中所述像素样本值等于所述调色板索引的值。在一些实例中，所述第二模式是像素模式。
在一些实例中，解码所述语法元素包括视频解码器30的熵解码单元70经配置以对指示译码单元是否是使用颜色空间转换经编码的补充增强信息(SEI)消息的数据进行解码。在一些实例中，应用所述颜色空间逆变换过程包括视频解码器30的熵解码单元70经配置以应用固定颜色空间逆变换矩阵。在一些实例中，所述固定颜色空间变换矩阵是YCoCg矩阵。在其它实例中，所述固定颜色空间变换矩阵是YCoCg-R矩阵。
在一些实例中，响应于确定所述语法元素指示所述译码单元是使用颜色空间转换经译码，视频解码器30的熵解码单元70可在将颜色空间逆变换过程应用于所述视频数据之前使用一或多个分量的值产生残余块。在此些实例中，视频解码器30的熵解码单元70可将所述颜色空间逆变换过程应用于所述视频数据的残余块。
应认识到，取决于实例，本文中所描述的技术中的任一者的某些动作或事件可用不同顺序来执行，可添加、合并或全部省略所述动作或事件(例如，实践所述技术未必需要所有所描述动作或事件)。此外，在某些实例中，可例如通过多线程处理、中断处理或多个处理器同时而非依序执行动作或事件。
在一或多个实例中，所描述功能可以硬件、软件、固件或其任何组合来实施。如果以软件实施，那么所述功能可以作为一或多个指令或代码在计算机可读媒体上存储或传输，并且由基于硬件的处理单元来执行。计算机可读媒体可包含计算机可读存储媒体，其对应于有形媒体，例如数据存储媒体，或包括任何促进将计算机程序从一处传送到另一处的媒体(例如，根据一种通信协议)的通信媒体。以此方式，计算机可读媒体通常可以对应于(1)有形计算机可读存储媒体，其是非暂时性的，或(2)通信媒体，例如信号或载波。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索用于实施本发明中描述的技术的指令、代码及/或数据结构的任何可用媒体。计算机程序产品可以包含计算机可读媒体。
借助于实例而非限制，此类计算机可读存储媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置、快闪存储器或可以用来存储指令或数据结构的形式的期望程序代码并且可以由计算机存取的任何其它媒体。并且，任何连接被恰当地称作计算机可读媒体。举例来说，如果使用同轴缆线、光纤缆线、双绞线、数字订户线(DSL)或例如红外线、无线电和微波等无线技术从网站、服务器或其它远程源传输指令，那么同轴缆线、光纤缆线、双绞线、DSL或例如红外线、无线电和微波等无线技术包含在媒体的定义中。然而，应理解，所述计算机可读存储媒体和数据存储媒体并不包含连接、载波、信号或其它暂时性媒体，而是实际上针对非暂时性的有形存储媒体。如本文中所使用，磁盘和光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软性磁盘和蓝光光盘，其中磁盘通常以磁性方式再现数据，而光盘利用激光以光学方式再现数据。以上各项的组合也应包含在计算机可读媒体的范围内。
可由例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等效集成或离散逻辑电路等一或多个处理器来执行指令。因此，如本文中所使用的术语“处理器”可指前述结构或适合于实施本文中所描述的技术的任一其它结构中的任一者。另外，在一些方面中，本文中所描述的功能性可以在经配置用于编码和解码的专用硬件和/或软件模块内提供，或者并入在组合编解码器中。而且，所述技术可完全实施于一或多个电路或逻辑元件中。
本发明的技术可在多种多样的装置或设备中实施，包含无线手持机、集成电路(IC)或IC集合(例如，芯片组)。本发明中描述各种组件、模块或单元是为了强调经配置以执行所公开的技术的装置的功能方面，但未必需要由不同硬件单元实现。实际上，如上文所描述，各种单元可以结合合适的软件及/或固件组合在编解码器硬件单元中，或者通过互操作硬件单元的集合来提供，所述硬件单元包含如上文所描述的一或多个处理器。
已描述本发明的各种实例。预期所描述的系统、操作或功能的任何组合。这些及其它实例属于所附权利要求书的范围内。

Claims (58)

1.一种对视频数据进行解码的方法，所述方法包括：
对视频数据序列的第一译码单元的第一语法元素进行解码，其中所述第一语法元素指示所述第一译码单元是否是使用颜色空间转换经编码，其中所述第一译码单元包括分割结构的第一节点，其中所述第一译码单元是在除帧内脉码调制IPCM模式外的模式中经译码，且其中仅针对使用除所述IPCM模式外的模式的译码单元用信号表示所述第一语法元素；
确定所述第一语法元素的值指示所述第一译码单元是使用颜色空间转换经编码；
响应于确定所述第一语法元素指示所述第一译码单元是使用颜色空间转换经译码，在对所述第一译码单元进行解码中应用颜色空间逆变换过程；
对所述视频数据序列的第二译码单元的第二语法元素进行解码，其中所述第二语法元素指示所述第二译码单元是否是使用颜色空间转换经编码，其中所述第二译码单元包括分割结构的第二节点，且其中所述第一译码单元不同于所述第二译码单元；
确定所述第二语法元素的值指示所述第二译码单元不是使用颜色空间转换经编码；以及
响应于确定所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经译码，不应用所述颜色空间逆变换过程来对所述第二译码单元进行解码。
2.根据权利要求1所述的方法，其中所述第一语法元素包括一位旗标。
3.根据权利要求1所述的方法，其中当所述第一译码单元的变换单元中存在非零系数时所述第一语法元素指示所述第一译码单元是使用颜色空间转换经编码。
4.根据权利要求1所述的方法，其中当所述第二译码单元经帧内译码时以及当所述第二译码单元内的预测单元的明度预测模式和色度预测模式不同时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
5.根据权利要求1所述的方法，其中当所述第二译码单元是以调色板模式译码时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
6.根据权利要求1所述的方法，其中所述第一语法元素的值1指示所述第一译码单元是使用颜色空间转换经编码。
7.根据权利要求1所述的方法，其中所述第一语法元素与所述第一译码单元相关联，所述方法进一步包括：
对第三语法元素进行解码，其中所述第三语法元素与图片参数集PPS相关联，其中所述第三语法元素指示颜色空间转换是否经启用以用于对应于所述PPS的视频数据；以及
确定所述第三语法元素的值是否指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据，
其中对所述第一语法元素进行解码包括响应于确定所述第三语法元素指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据而对所述第一语法元素进行解码。
8.根据权利要求1所述的方法，其中应用所述颜色空间逆变换过程包括应用固定颜色空间逆变换矩阵。
9.根据权利要求8所述的方法，其中所述固定颜色空间逆变换矩阵是YCoCg矩阵。
10.根据权利要求8所述的方法，其中所述固定颜色空间逆变换矩阵是YCoCg-R矩阵。
11.根据权利要求1所述的方法，其进一步包括响应于确定所述第一语法元素指示所述第一译码单元是使用颜色空间转换经译码而进行以下操作：
在将颜色空间逆变换过程应用于所述视频数据之前使用一或多个分量的值产生经帧内译码残余块；以及
将所述颜色空间逆变换过程应用于所述视频数据的所述经帧内译码残余块。
12.根据权利要求1所述的方法，其中所述第一节点和所述第二节点是同一分割结构的不同节点。
13.根据权利要求1所述的方法，其中所述第一节点和所述第二节点是不同分割结构的不同节点。
14.一种视频解码装置，其包括：
存储器，其经配置以存储视频数据；以及
一或多个处理器，其经配置以：
对视频数据序列的第一译码单元的第一语法元素进行解码，其中所述第一语法元素指示所述第一译码单元是否是使用颜色空间转换经编码，其中所述第一译码单元包括分割结构的第一节点，其中所述第一译码单元是在除帧内脉码调制IPCM模式外的模式中经译码，且其中仅针对使用除所述IPCM模式外的模式的译码单元用信号表示所述第一语法元素；
确定所述第一语法元素的值指示所述第一译码单元是使用颜色空间转换经编码；
响应于确定所述第一语法元素指示所述第一译码单元是使用颜色空间转换经译码，在对所述第一译码单元进行解码中应用颜色空间逆变换过程；
对所述视频数据序列的第二译码单元的第二语法元素进行解码，其中所述第二语法元素指示所述第二译码单元是否是使用颜色空间转换经编码，其中所述第二译码单元包括分割结构的第二节点，且其中所述第一译码单元不同于所述第二译码单元；
确定所述第二语法元素的值指示所述第二译码单元不是使用颜色空间转换经编码；以及
响应于确定所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经译码，不应用所述颜色空间逆变换过程来对所述第二译码单元进行解码。
15.根据权利要求14所述的视频解码装置，其中所述第一语法元素包括一位旗标。
16.根据权利要求14所述的视频解码装置，其中当所述第一译码单元的变换单元中存在非零系数时所述第一语法元素指示所述第一译码单元是使用颜色空间转换经编码。
17.根据权利要求14所述的视频解码装置，其中当所述第二译码单元经帧内译码时以及当所述第二译码单元内的预测单元的明度预测模式和色度预测模式不同时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
18.根据权利要求14所述的视频解码装置，其中当所述第二译码单元是以调色板模式译码时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
19.根据权利要求14所述的视频解码装置，其中所述第一语法元素的值1指示所述第一译码单元是使用颜色空间转换经编码。
20.根据权利要求14所述的视频解码装置，其中所述第一语法元素与所述第一译码单元相关联，其中所述一或多个处理器进一步经配置以：
对第三语法元素进行解码，其中所述第三语法元素与图片参数集PPS相关联，其中所述第三语法元素指示颜色空间转换是否经启用以用于对应于所述PPS的视频数据；以及
确定所述第三语法元素的值是否指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据，
其中所述一或多个处理器经配置以对所述第一语法元素进行解码包括所述一或多个处理器经配置以响应于确定所述第三语法元素指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据而对所述第一语法元素进行解码。
21.根据权利要求14所述的视频解码装置，其中所述一或多个处理器经配置以应用所述颜色空间逆变换过程包括所述一或多个处理器经配置以应用固定颜色空间逆变换矩阵。
22.根据权利要求21所述的视频解码装置，其中所述固定颜色空间逆变换矩阵是YCoCg矩阵。
23.根据权利要求21所述的视频解码装置，其中所述固定颜色空间逆变换矩阵是YCoCg-R矩阵。
24.根据权利要求14所述的视频解码装置，其中所述一或多个处理器进一步经配置以响应于确定所述第一语法元素指示所述第一译码单元是使用颜色空间转换经译码而进行以下操作：
在将颜色空间逆变换过程应用于所述视频数据之前使用一或多个分量的值产生残余块；以及
将所述颜色空间逆变换过程应用于所述视频数据的所述残余块。
25.一种视频解码设备，其包括：
用于对视频数据序列的第一译码单元的第一语法元素进行解码的装置，其中所述第一语法元素指示所述第一译码单元是否是使用颜色空间转换经编码，其中所述第一译码单元包括分割结构的第一节点，其中所述第一译码单元是在除帧内脉码调制IPCM模式外的模式中经译码，且其中仅针对使用除所述IPCM模式外的模式的译码单元用信号表示所述第一语法元素；
用于确定所述第一语法元素的值指示所述第一译码单元是使用颜色空间转换经编码的装置；以及
用于响应于确定所述语法元素指示所述第一译码单元是使用颜色空间转换经译码而在对所述第一译码单元进行解码中应用颜色空间逆变换过程的装置；
用于对所述视频数据序列的第二译码单元的第二语法元素进行解码的装置，其中所述第二语法元素指示所述第二译码单元是否是使用颜色空间转换经编码，其中所述第二译码单元包括分割结构的第二节点，且其中所述第一译码单元不同于所述第二译码单元；
用于确定所述第二语法元素的值指示所述第二译码单元不是使用颜色空间转换经编码的装置；以及
用于响应于确定所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经译码，不应用所述颜色空间逆变换过程来对所述第二译码单元进行解码的装置。
26.根据权利要求25所述的视频解码设备，其中当所述第一译码单元的变换单元中存在非零系数时所述第一语法元素指示所述第一译码单元是使用颜色空间转换经编码。
27.根据权利要求25所述的视频解码设备，其中当所述第二译码单元经帧内译码时以及当所述第二译码单元内的预测单元的明度预测模式和色度预测模式不同时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
28.根据权利要求25所述的视频解码设备，其中当所述第二译码单元是以调色板模式译码时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
29.根据权利要求25所述的视频解码设备，其中所述第一语法元素与所述第一译码单元相关联，所述设备进一步包括：
用于对第三语法元素进行解码的装置，其中所述第三语法元素与图片参数集PPS相关联，其中所述第三语法元素指示颜色空间转换是否经启用以用于对应于所述PPS的视频数据；以及
用于确定所述第三语法元素的值是否指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据的装置，
其中所述用于对所述第一语法元素进行解码的装置包括用于响应于确定所述第三语法元素指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据而对所述第一语法元素进行解码的装置。
30.根据权利要求25所述的视频解码设备，其中所述用于应用所述颜色空间逆变换过程的装置包括用于应用固定颜色空间逆变换矩阵的装置。
31.一种包括指令的非暂时性计算机可读存储媒体，所述指令当执行时致使视频解码装置的一或多个处理器：
对视频数据序列的第一译码单元的第一语法元素进行解码，其中所述第一语法元素指示所述第一译码单元是否是使用颜色空间转换经编码，其中所述第一译码单元包括分割结构的第一节点，其中所述第一译码单元是在除帧内脉码调制IPCM模式外的模式中经译码，且其中仅针对使用除所述IPCM模式外的模式的译码单元用信号表示所述第一语法元素；
确定所述第一语法元素的值指示所述第一译码单元是使用颜色空间转换经编码；
响应于确定所述第一语法元素指示所述第一译码单元是使用颜色空间转换经译码，在对所述第一译码单元进行解码中应用颜色空间逆变换过程；
对所述视频数据序列的第二译码单元的第二语法元素进行解码，其中所述第二语法元素指示所述第二译码单元是否是使用颜色空间转换经编码，其中所述第二译码单元包括分割结构的第二节点，且其中所述第一译码单元不同于所述第二译码单元；
确定所述第二语法元素的值指示所述第二译码单元不是使用颜色空间转换经编码；以及
响应于确定所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经译码，不应用所述颜色空间逆变换过程来对所述第二译码单元进行解码。
32.根据权利要求31所述的非暂时性计算机可读存储媒体，其中当所述第一译码单元的变换单元中存在非零系数时所述第一语法元素指示所述第一译码单元是使用颜色空间转换经编码。
33.根据权利要求31所述的非暂时性计算机可读存储媒体，其中当所述第二译码单元经帧内译码时以及当所述第二译码单元内的预测单元的明度预测模式和色度预测模式不同时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
34.根据权利要求31所述的非暂时性计算机可读存储媒体，其中当所述第二译码单元是以调色板模式译码时所述第二语法元素指示所述第二译码单元不是使用颜色空间转换经编码，其中所述第二语法元素不存在于包括所述视频数据的所接收位流中，且其中对所述第二语法元素进行解码包括推断所述第二语法元素的所述值。
35.根据权利要求31所述的非暂时性计算机可读存储媒体，其中所述第一语法元素与所述第一译码单元相关联，其中所述执行的指令进一步致使所述一或多个处理器：
对第三语法元素进行解码，其中所述第三语法元素与图片参数集PPS相关联，其中所述第三语法元素指示颜色空间转换是否经启用以用于对应于所述PPS的视频数据；以及
确定所述第三语法元素的值是否指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据，
其中致使所述一或多个处理器对所述第一语法元素进行解码的所述执行的指令包括当由所述一或多个处理器执行时致使所述一或多个处理器响应于确定所述第三语法元素指示颜色空间转换经启用以用于对应于所述PPS的所述视频数据而对所述第一语法元素进行解码的指令。
36.根据权利要求31所述的非暂时性计算机可读存储媒体，其中致使所述一或多个处理器应用所述颜色空间逆变换过程的所述执行的指令包括当由所述一或多个处理器执行时致使所述一或多个处理器应用固定颜色空间逆变换矩阵的指令。
37.一种对视频数据进行编码的方法，所述方法包括：
确定使用颜色空间转换用于视频数据序列的第一译码单元，其中所述第一译码单元包括分割结构的第一节点，且其中当所述第一译码单元是使用除帧内脉码调制IPCM模式外的模式经译码时用信号表示第一语法元素；
响应于确定使用颜色空间转换用于所述第一译码单元，设定所述第一译码单元的所述第一语法元素的值以指示颜色空间转换的所述使用；
在对所述第一译码单元进行编码中应用颜色空间变换过程；
确定不使用颜色空间转换用于所述视频数据序列的第二译码单元，其中所述第二译码单元包括分割结构的第二节点，且其中所述第一译码单元不同于所述第二译码单元；
响应于确定不使用颜色空间转换用于所述第二译码单元，设定所述第二译码单元的第二语法元素的值以指示所述颜色空间转换的未使用；以及
不应用所述颜色空间变换过程来对所述第二译码单元进行编码。
38.根据权利要求37所述的方法，其中所述第一语法元素包括一位旗标。
39.根据权利要求37所述的方法，其中仅当所述第一译码单元的变换单元中存在非零系数时用信号表示所述第一语法元素。
40.根据权利要求37所述的方法，其中当所述第二译码单元经帧内译码时以及当所述第二译码单元内的预测单元的明度预测模式和色度预测模式不同时不用信号表示所述第二语法元素。
41.根据权利要求37所述的方法，其中当所述第二译码单元是以调色板模式译码时不用信号表示所述第二语法元素。
42.根据权利要求37所述的方法，其中所述第一语法元素的值1指示所述第一译码单元是使用颜色空间转换经编码。
43.根据权利要求37所述的方法，其中所述第一语法元素与所述第一译码单元相关联，所述方法进一步包括：
确定是否使用颜色空间转换用于图片参数集；
响应于确定使用颜色空间转换用于所述图片参数集，设定第三语法元素的值，其中所述第三语法元素与所述图片参数集相关联，且其中所述第三语法元素经设定以指示颜色空间转换经启用以用于对应于所述图片参数集的视频数据；以及
将颜色空间变换过程应用于所述图片参数集的所述视频数据。
44.根据权利要求37所述的方法，其中应用所述颜色空间变换过程包括应用颜色空间变换矩阵。
45.根据权利要求44所述的方法，其中所述颜色空间变换矩阵是YCoCg矩阵。
46.根据权利要求44所述的方法，其中所述颜色空间变换矩阵是YCoCg-R矩阵。
47.根据权利要求37所述的方法，其进一步包括响应于确定使用颜色空间转换用于所述第一译码单元而进行以下操作：
在将颜色空间变换过程应用于所述视频数据之前使用一或多个分量的值产生残余块；以及
将所述颜色空间变换过程应用于所述视频数据的所述残余块。
48.一种视频编码装置，其包括：
存储器，其经配置以存储视频数据；以及
一或多个处理器，其经配置以：
确定使用颜色空间转换用于视频数据序列的第一译码单元，其中所述第一译码单元包括分割结构的第一节点，且其中当所述第一译码单元是使用除帧内脉码调制IPCM模式外的模式经译码时用信号表示第一语法元素；
响应于确定使用颜色空间转换用于所述第一译码单元，设定所述第一译码单元的所述第一语法元素的值以指示颜色空间转换的所述使用；
在对所述第一译码单元进行编码中应用颜色空间变换过程；
确定不使用颜色空间转换用于所述视频数据序列的第二译码单元，其中所述第二译码单元包括分割结构的第二节点，且其中所述第一译码单元不同于所述第二译码单元；
响应于确定不使用颜色空间转换用于所述第二译码单元，设定所述第二译码单元的第二语法元素的值以指示所述颜色空间转换的未使用；以及
不应用所述颜色空间变换过程来对所述第二译码单元进行编码。
49.根据权利要求48所述的视频编码装置，其中所述第一语法元素包括一位旗标。
50.根据权利要求48所述的视频编码装置，其中仅当所述第一译码单元的变换单元中存在非零系数时用信号表示所述第一语法元素。
51.根据权利要求48所述的视频编码装置，其中当所述第二译码单元经帧内译码时以及当所述第二译码单元内的预测单元的明度预测模式和色度预测模式不同时不用信号表示所述第二语法元素。
52.根据权利要求48所述的视频编码装置，其中当所述第二译码单元是以调色板模式译码时不用信号表示所述第二语法元素。
53.根据权利要求48所述的视频编码装置，其中所述第一语法元素的值1指示所述第一译码单元是使用颜色空间转换经编码。
54.根据权利要求48所述的视频编码装置，其中所述第一语法元素与所述第一译码单元相关联，其中所述一或多个处理器进一步经配置以：
确定是否使用颜色空间转换用于图片参数集；
响应于确定使用颜色空间转换用于所述图片参数集，设定第三语法元素的值，其中所述第三语法元素与所述图片参数集相关联，且其中所述第三语法元素经设定以指示颜色空间转换经启用以用于对应于所述图片参数集的视频数据；以及
将颜色空间变换过程应用于所述图片参数集的所述视频数据。
55.根据权利要求48所述的视频编码装置，其中所述一或多个处理器经配置以应用所述颜色空间变换过程包括所述一或多个处理器经配置以应用颜色空间变换矩阵。
56.根据权利要求55所述的视频编码装置，其中所述颜色空间变换矩阵是YCoCg矩阵。
57.根据权利要求55所述的视频编码装置，其中所述颜色空间变换矩阵是YCoCg-R矩阵。
58.根据权利要求48所述的视频编码装置，其中所述一或多个处理器进一步经配置以响应于确定使用颜色空间转换用于所述第一译码单元而进行以下操作：
在将颜色空间变换过程应用于所述视频数据之前使用一或多个分量的值产生残余块；以及
将所述颜色空间变换过程应用于所述视频数据的所述残余块。
CN201580013014.XA 2014-03-14 2015-03-13 块自适应颜色空间转换译码 Active CN106105203B (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201461953573P 2014-03-14 2014-03-14
US61/953,573 2014-03-14
US201461981645P 2014-04-18 2014-04-18
US61/981,645 2014-04-18
US201462062637P 2014-10-10 2014-10-10
US62/062,637 2014-10-10
US14/656,516 2015-03-12
US14/656,516 US9948933B2 (en) 2014-03-14 2015-03-12 Block adaptive color-space conversion coding
PCT/US2015/020514 WO2015138943A2 (en) 2014-03-14 2015-03-13 Block adaptive color-space conversion coding

Publications (2)

Publication Number Publication Date
CN106105203A CN106105203A (zh) 2016-11-09
CN106105203B true CN106105203B (zh) 2019-05-31

Family

ID=54070431

Family Applications (4)

Application Number Title Priority Date Filing Date
CN201580013107.2A Active CN106105205B (zh) 2014-03-14 2015-03-13 用于颜色空间转换译码的量化参数
CN201580012977.8A Active CN106105202B (zh) 2014-03-14 2015-03-13 通用颜色空间逆变换译码方法及装置
CN201580013061.4A Active CN106105204B (zh) 2014-03-14 2015-03-13 在颜色空间变换译码中修改位深度
CN201580013014.XA Active CN106105203B (zh) 2014-03-14 2015-03-13 块自适应颜色空间转换译码

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CN201580013107.2A Active CN106105205B (zh) 2014-03-14 2015-03-13 用于颜色空间转换译码的量化参数
CN201580012977.8A Active CN106105202B (zh) 2014-03-14 2015-03-13 通用颜色空间逆变换译码方法及装置
CN201580013061.4A Active CN106105204B (zh) 2014-03-14 2015-03-13 在颜色空间变换译码中修改位深度

Country Status (15)

Country Link
US (4) US9948933B2 (zh)
EP (4) EP3117611A1 (zh)
JP (4) JP6607862B2 (zh)
KR (4) KR102356419B1 (zh)
CN (4) CN106105205B (zh)
BR (3) BR112016021142B1 (zh)
CR (1) CR20160421A (zh)
DO (1) DOP2016000247A (zh)
ES (2) ES2975180T3 (zh)
GT (1) GT201600187A (zh)
HU (1) HUE041560T2 (zh)
MX (4) MX360862B (zh)
NI (1) NI201600136A (zh)
SV (1) SV2016005276A (zh)
WO (4) WO2015138957A2 (zh)

Families Citing this family (107)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9225988B2 (en) * 2013-05-30 2015-12-29 Apple Inc. Adaptive color space transform coding
US10182241B2 (en) 2014-03-04 2019-01-15 Microsoft Technology Licensing, Llc Encoding strategies for adaptive switching of color spaces, color sampling rates and/or bit depths
EP3114843B1 (en) * 2014-03-04 2019-08-07 Microsoft Technology Licensing, LLC Adaptive switching of color spaces
JP6368795B2 (ja) * 2014-03-14 2018-08-01 ヴィド スケール インコーポレイテッド Ｒｇｂビデオコーディングエンハンスメントのためのシステムおよび方法
US9948933B2 (en) 2014-03-14 2018-04-17 Qualcomm Incorporated Block adaptive color-space conversion coding
US9924183B2 (en) * 2014-03-20 2018-03-20 Nanjing Yuyan Information Technology Ltd. Fast HEVC transcoding
RU2648276C1 (ru) 2014-03-27 2018-03-23 МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи Корректировка квантования/масштабирования и обратного квантования/масштабирования при переключении цветовых пространств
US10142642B2 (en) 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
US10477204B2 (en) * 2014-06-20 2019-11-12 Sharp Kabushiki Kaisha Harmonized palette coding
BR112017004886A2 (pt) * 2014-09-12 2017-12-05 Vid Scale Inc dispositivo de codificação de vídeo e método de codificação de vídeo
EP3205098B1 (en) 2014-10-06 2020-01-08 Telefonaktiebolaget LM Ericsson (publ) Coding and deriving quantization parameters
WO2016054765A1 (en) 2014-10-08 2016-04-14 Microsoft Technology Licensing, Llc Adjustments to encoding and decoding when switching color spaces
US10158836B2 (en) * 2015-01-30 2018-12-18 Qualcomm Incorporated Clipping for cross-component prediction and adaptive color transform for video coding
JP6651005B2 (ja) 2015-09-23 2020-02-19 テレフオンアクチーボラゲット エルエム エリクソン（パブル） Ｑｐ値の決定
US10225561B2 (en) * 2015-10-08 2019-03-05 Mediatek Inc. Method and apparatus for syntax signaling in image and video compression
KR102390162B1 (ko) * 2015-10-16 2022-04-22 삼성전자주식회사 데이터 인코딩 장치 및 데이터 인코딩 방법
WO2017173593A1 (en) * 2016-04-06 2017-10-12 Mediatek Singapore Pte. Ltd. Separate coding secondary transform syntax elements for different color components
EP3457691A4 (en) * 2016-05-13 2019-03-20 Sharp Kabushiki Kaisha IMAGE DECODING DEVICE AND IMAGE ENCODING DEVICE
WO2018018486A1 (en) 2016-07-28 2018-02-01 Mediatek Inc. Methods of reference quantization parameter derivation for signaling of quantization parameter in quad-tree plus binary tree structure
CN106713921B (zh) * 2016-11-29 2019-07-23 西安万像电子科技有限公司 文字块的压缩方法和装置以及图像压缩方法和装置
WO2018142823A1 (en) 2017-01-31 2018-08-09 Sharp Kabushiki Kaisha Systems and methods for scaling transform coefficient level values
US10798420B2 (en) 2017-02-28 2020-10-06 Apple Inc. Lossless compression techniques for single-channel images
US20200036978A1 (en) 2017-03-22 2020-01-30 Industry-University Cooperation Foundation Hanyang University Image encoding/decoding method using pixel value range constituting image
US10362325B2 (en) 2017-06-04 2019-07-23 Apple Inc. Techniques for compressing multiple-channel images
US10362319B2 (en) 2017-06-04 2019-07-23 Apple Inc. Techniques for compressing multiple-channel images
JP6986868B2 (ja) * 2017-06-19 2021-12-22 キヤノン株式会社 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、プログラム
CN111742554B (zh) * 2018-02-01 2021-08-06 联发科技股份有限公司 具有视频数据自适应量化的视频编码或解码方法和装置
US10771781B2 (en) * 2018-03-12 2020-09-08 Electronics And Telecommunications Research Institute Method and apparatus for deriving intra prediction mode
US11153579B2 (en) * 2018-03-23 2021-10-19 Qualcomm Incorporated Deriving dynamic range adjustment (DRA) parameters for video coding
KR102667406B1 (ko) * 2018-04-01 2024-05-20 엘지전자 주식회사 양자화 파라미터 도출에 기초한 영상 코딩 장치 및 방법
WO2019192484A1 (en) * 2018-04-02 2019-10-10 Huawei Technologies Co., Ltd. Video coding with successive codecs
EP3550837A1 (en) * 2018-04-06 2019-10-09 Comcast Cable Communications LLC Method for generating quantization matrices based on viewing conditions
US11259023B2 (en) * 2018-04-12 2022-02-22 Qualcomm Incorporated Harmonization of transform-based quantization and dynamic range adjustment scale derivation in video coding
WO2019229683A1 (en) 2018-05-31 2019-12-05 Beijing Bytedance Network Technology Co., Ltd. Concept of interweaved prediction
CN115379211B (zh) * 2018-09-02 2024-06-04 Lg电子株式会社 对视频信号进行解码/编码的方法和计算机可读存储介质
WO2020103931A1 (en) * 2018-11-22 2020-05-28 Beijing Bytedance Network Technology Co., Ltd. Pulse code modulation technique in video processing
KR20210098967A (ko) 2019-01-01 2021-08-11 엘지전자 주식회사 이차 변환에 기반한 영상 코딩 방법 및 그 장치
CN113597760B (zh) 2019-01-02 2024-08-16 北京字节跳动网络技术有限公司 视频处理的方法
WO2020156515A1 (en) 2019-01-31 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Refined quantization steps in video coding
MX2021008916A (es) 2019-02-01 2021-08-24 Beijing Bytedance Network Tech Co Ltd Interacciones entre reformacion en bucle y herramientas de intercodificacion.
WO2020156529A1 (en) 2019-02-01 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Signaling of in-loop reshaping information using parameter sets
EP3925222A4 (en) 2019-02-20 2022-08-10 Beijing Dajia Internet Information Technology Co., Ltd. METHODS AND APPARATUS FOR ROUNDING, SHAPING AND STORING MOTION VECTOR FOR INTERPREDICTION BASED ON MANTISSA-EXPOSITOR REPRESENTATIONS
SG11202108938TA (en) * 2019-02-24 2021-09-29 Beijing Bytedance Network Technology Co Ltd Independent coding of palette mode usage indication
WO2020177663A1 (en) 2019-03-02 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Restrictions on partition structures
JP7277599B2 (ja) 2019-03-08 2023-05-19 北京字節跳動網絡技術有限公司 映像処理におけるモデルベース再整形に対する制約
CA3132394A1 (en) * 2019-03-12 2020-09-17 Tencent America LLC Method and apparatus for color transform in vvc
CN113574889B (zh) 2019-03-14 2024-01-12 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
WO2020192614A1 (en) 2019-03-23 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Restrictions on adaptive-loop filtering parameter sets
JP7405865B2 (ja) 2019-04-15 2023-12-26 北京字節跳動網絡技術有限公司 非線形適応ループフィルタにおけるパラメータの時間的予測
WO2020211810A1 (en) 2019-04-16 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. On adaptive loop filtering for video coding
EP3939260A4 (en) 2019-04-20 2022-07-06 Beijing Bytedance Network Technology Co., Ltd. SIGNALING OF SYNTAX ELEMENTS FOR CO-CODING OF CHROMINANCE RESIDUES
JP7260665B2 (ja) * 2019-04-20 2023-04-18 エルジー エレクトロニクス インコーポレイティド Ｂｄｐｃｍに基づく映像コーディング方法、及びその装置
KR20210154157A (ko) 2019-04-23 2021-12-20 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 다중 변환 행렬의 선택 및 컨텍스트 모델링
WO2020222484A1 (ko) * 2019-04-27 2020-11-05 주식회사 윌러스표준기술연구소 인트라 예측 기반 비디오 신호 처리 방법 및 장치
CN113796072B (zh) 2019-05-08 2023-10-03 北京字节跳动网络技术有限公司 跨分量编解码的适用性条件
EP4329309A3 (en) * 2019-05-10 2024-03-27 Beijing Bytedance Network Technology Co., Ltd. Selection of secondary transform matrices for video processing
BR112021022307A2 (pt) 2019-05-13 2021-12-28 Beijing Bytedance Network Tech Co Ltd Método de processamento de dados de vídeo, aparelho para processamento de dados de vídeo, meios de armazenamento e de gravação não transitórios legíveis por computador
CN113826398B (zh) * 2019-05-13 2022-11-29 北京字节跳动网络技术有限公司 变换跳过模式和其它编解码工具之间的交互
CN113875232B (zh) * 2019-05-16 2024-07-09 北京字节跳动网络技术有限公司 视频编解码中的自适应颜色格式转换
CN113853791B (zh) 2019-05-19 2023-11-14 字节跳动有限公司 数字视频中的变换旁路编解码残差块
CN113853787B (zh) 2019-05-22 2023-12-22 北京字节跳动网络技术有限公司 基于子块使用变换跳过模式
WO2020239119A1 (en) 2019-05-30 2020-12-03 Beijing Bytedance Network Technology Co., Ltd. Adaptive loop filtering for chroma components
CN114175641A (zh) * 2019-05-30 2022-03-11 北京达佳互联信息技术有限公司 在视频编解码中提高无损编解码效率
US11134275B2 (en) * 2019-06-04 2021-09-28 Tencent America LLC Method and apparatus for performing primary transform based on filtering of blocks
EP3967032A4 (en) 2019-06-07 2022-07-27 Beijing Bytedance Network Technology Co., Ltd. CONDITIONAL SIGNALING OF A REDUCED SECONDARY TRANSFORM FOR VIDEO BIANARY FLOWS
CN114009050B (zh) * 2019-06-21 2023-12-22 北京字节跳动网络技术有限公司 视频编解码的自适应环内颜色空间变换
CN113382254B (zh) * 2019-06-21 2022-05-17 杭州海康威视数字技术股份有限公司 一种编解码方法、装置、设备及存储介质
CN117395396A (zh) 2019-07-07 2024-01-12 北京字节跳动网络技术有限公司 色度残差缩放的信令通知
EP3987806A4 (en) 2019-07-20 2022-08-31 Beijing Bytedance Network Technology Co., Ltd. CONDITIONAL CODING OF PALETTE MODE USE INDICATION
CN114175632B (zh) 2019-07-26 2024-07-05 北京字节跳动网络技术有限公司 对视频编解码模式的块尺寸相关使用
WO2021018167A1 (en) 2019-07-29 2021-02-04 Beijing Bytedance Network Technology Co., Ltd. Palette mode coding in prediction process
EP3994887A4 (en) 2019-08-03 2022-09-28 Beijing Bytedance Network Technology Co., Ltd. MATRIX SELECTION FOR A REDUCED SECONDARY TRANSFORM IN VIDEO CODING
CN114223208B (zh) 2019-08-17 2023-12-29 北京字节跳动网络技术有限公司 为视频中的缩减二次变换的边信息的上下文建模
US11265581B2 (en) * 2019-08-23 2022-03-01 Tencent America LLC Method and apparatus for video coding
WO2021051044A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Quantization parameter offset for chroma deblocking filtering
KR20220062085A (ko) 2019-09-20 2022-05-13 알리바바 그룹 홀딩 리미티드 비디오 처리에서 양자화 파라미터 시그널링
CN114567786B (zh) * 2019-09-23 2023-08-29 北京达佳互联信息技术有限公司 以4:4:4色度格式进行视频编解码的方法和装置
WO2021072177A1 (en) 2019-10-09 2021-04-15 Bytedance Inc. Cross-component adaptive loop filtering in video coding
US11412235B2 (en) * 2019-10-10 2022-08-09 Tencent America LLC Color transform for video coding
WO2021072379A1 (en) * 2019-10-11 2021-04-15 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus of video coding in 4:4:4 chroma format
JP2022552338A (ja) * 2019-10-14 2022-12-15 バイトダンス インコーポレイテッド クロマ残差の共同コーディング及びビデオ処理におけるフィルタリング
WO2021086022A1 (ko) * 2019-10-28 2021-05-06 엘지전자 주식회사 적응적 색상 변환을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
EP4054189A4 (en) * 2019-10-28 2023-11-22 LG Electronics Inc. METHOD AND DEVICE FOR CODING/DECODING IMAGES USING COLOR SPACE CONVERSION AND METHOD FOR TRANSMITTING BIT STREAMS
WO2021086021A1 (ko) * 2019-10-28 2021-05-06 엘지전자 주식회사 적응적 변환을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
CN115066897A (zh) * 2019-11-14 2022-09-16 抖音视界有限公司 低位深度视觉媒体数据的编解码
KR20220080738A (ko) * 2019-11-22 2022-06-14 엘지전자 주식회사 무손실 색상 변환을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
CN111079738B (zh) * 2019-11-23 2023-09-29 中国科学院长春光学精密机械与物理研究所 一种图像处理方法、系统及终端设备
EP4068782A4 (en) * 2019-11-26 2023-01-25 Wilus Institute of Standards and Technology Inc. METHOD AND APPARATUS FOR PROCESSING VIDEO SIGNALS USING ADAPTIVE COLOR SPACE TRANSFORMATION
KR20220106116A (ko) 2019-12-09 2022-07-28 바이트댄스 아이엔씨 비디오 코딩에서 양자화 그룹 사용
CN114902680A (zh) 2019-12-19 2022-08-12 抖音视界(北京)有限公司 视频的自适应颜色变换和差分编解码的联合使用
US11140298B2 (en) * 2019-12-19 2021-10-05 City University Of Hong Kong Universal color coding system, and a system and a method of manipulating colors using such color coding system
WO2021133510A1 (en) * 2019-12-24 2021-07-01 Alibaba Group Holding Limited Method and apparatus for lossless coding of video data
CN114902657A (zh) 2019-12-31 2022-08-12 字节跳动有限公司 视频编解码中的自适应颜色变换
CN115348450A (zh) * 2019-12-31 2022-11-15 上海海思技术有限公司 编码方法及编码器
KR20230101946A (ko) * 2020-01-05 2023-07-06 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 4:4:4 크로마 포맷에서의 비디오 코딩의 방법들 및장치
KR20220115965A (ko) 2020-01-05 2022-08-19 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩을 위한 일반적인 제약 정보
CN114946187A (zh) * 2020-01-08 2022-08-26 抖音视界(北京)有限公司 色度残差的联合编解码和自适应颜色变换
WO2021145691A1 (ko) * 2020-01-14 2021-07-22 현대자동차주식회사 적응적 색상 변환을 이용하는 비디오 부호화 및 복호화
WO2021143896A1 (en) 2020-01-18 2021-07-22 Beijing Bytedance Network Technology Co., Ltd. Adaptive colour transform in image/video coding
WO2021150086A1 (ko) * 2020-01-25 2021-07-29 엘지전자 주식회사 Act 레지듀얼 기반 영상 또는 비디오 코딩
WO2021150085A1 (ko) * 2020-01-25 2021-07-29 엘지전자 주식회사 색상 공간 변환을 사용하는 레지듀얼을 위한 영상 또는 비디오 코딩
WO2021150084A1 (ko) * 2020-01-25 2021-07-29 엘지전자 주식회사 색상 공간 변환 기반 영상 또는 비디오 코딩
US11323732B2 (en) * 2020-04-13 2022-05-03 Tencent America LLC Method and apparatus for video coding
US11381820B2 (en) * 2020-04-13 2022-07-05 Tencent America LLC Method and apparatus for video coding
KR20210154812A (ko) * 2020-06-10 2021-12-21 텐센트 아메리카 엘엘씨 비디오 코딩을 위한 방법, 장치 및 매체
EP3972270A1 (en) 2020-09-17 2022-03-23 Lemon Inc. Picture dimension indication in decoder configuration record
CN116797897B (zh) * 2023-07-07 2024-03-12 中国人民解放军国防科技大学 基于时空特征融合的检测模型生成及红外小目标检测方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103098463A (zh) * 2010-04-12 2013-05-08 高通股份有限公司 视频压缩中的经译码块模式(cbp)的可变长度译码

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1538826A3 (en) 2003-12-05 2007-03-07 Samsung Electronics Co., Ltd. Color transformation method and apparatus
US20050259730A1 (en) * 2004-05-18 2005-11-24 Sharp Laboratories Of America, Inc. Video coding with residual color conversion using reversible YCoCg
KR100723408B1 (ko) 2004-07-22 2007-05-30 삼성전자주식회사 컬러영상의 변환/역변환 및 양자화/역양자화 방법 및장치와, 이를 이용한 컬러영상의 부호화/복호화 방법 및장치
CN1301003C (zh) * 2004-11-16 2007-02-14 浙江大学 用于压缩16位彩色图像的颜色空间变换的方法
US7903306B2 (en) 2005-07-22 2011-03-08 Samsung Electronics Co., Ltd. Sensor image encoding and/or decoding system, medium, and method
US20090123066A1 (en) * 2005-07-22 2009-05-14 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein,
CN101218831B (zh) 2005-09-20 2010-07-21 三菱电机株式会社 图像解码方法以及图像解码装置
WO2007079781A1 (en) * 2006-01-13 2007-07-19 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Picture coding using adaptive colour space transformation
KR101330630B1 (ko) 2006-03-13 2013-11-22 삼성전자주식회사 최적인 예측 모드를 적응적으로 적용하여 동영상을부호화하는 방법 및 장치, 동영상을 복호화하는 방법 및장치
CN100514366C (zh) 2006-11-30 2009-07-15 腾讯科技（深圳）有限公司 一种图像压缩方法和装置
CN101076125B (zh) * 2007-06-18 2010-07-28 山东经济学院 图像压缩中RGB与YCbCr转换计算的方法
US8145002B2 (en) 2007-06-28 2012-03-27 Mitsubishi Electric Corporation Image encoding device and image encoding method
JP5007259B2 (ja) 2008-03-27 2012-08-22 ルネサスエレクトロニクス株式会社 画像符号化装置
WO2010022002A1 (en) * 2008-08-19 2010-02-25 Marvell World Trade Ltd Systems and methods for perceptually lossless video compression
JP2011091732A (ja) * 2009-10-26 2011-05-06 Renesas Electronics Corp 動画像復号処理装置およびその動作方法
JP5520122B2 (ja) 2010-04-14 2014-06-11 キヤノン株式会社 データ変換装置
KR101668093B1 (ko) 2010-06-17 2016-10-21 삼성전자주식회사 데이터 인코딩 및 디코딩 방법 및 장치
JP5850214B2 (ja) 2011-01-11 2016-02-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP6310257B2 (ja) 2011-01-28 2018-04-11 アイ アイオー, リミテッド・ライアビリティ・カンパニーEye Io, Llc Ｈｖｓモデルに基づく色変換
EP2685719B1 (en) * 2011-03-09 2019-10-30 Panasonic Intellectual Property Corporation of America Video image decoding device
US9185424B2 (en) * 2011-07-05 2015-11-10 Qualcomm Incorporated Image data compression
TWI606718B (zh) * 2012-01-03 2017-11-21 杜比實驗室特許公司 規定視覺動態範圍編碼操作及參數
CN109218730B (zh) 2012-01-19 2023-07-28 华为技术有限公司 用于lm帧内预测的参考像素缩减
US9414054B2 (en) 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
US9883180B2 (en) 2012-10-03 2018-01-30 Avago Technologies General Ip (Singapore) Pte. Ltd. Bounded rate near-lossless and lossless image compression
US20140376611A1 (en) 2013-06-21 2014-12-25 Qualcomm Incorporated Adaptive color transforms for video coding
CN103458242B (zh) 2013-07-02 2016-12-28 京北方信息技术股份有限公司 基于颜色分类与聚类的图像压缩方法
US20150110181A1 (en) * 2013-10-18 2015-04-23 Samsung Electronics Co., Ltd. Methods for palette prediction and intra block copy padding
CN111526359B (zh) 2013-10-18 2023-01-06 Ge视频压缩有限责任公司 多分量图片或视频编码概念
US9648332B2 (en) 2013-10-28 2017-05-09 Qualcomm Incorporated Adaptive inter-color component residual prediction
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
US9948933B2 (en) 2014-03-14 2018-04-17 Qualcomm Incorporated Block adaptive color-space conversion coding
BR112017004886A2 (pt) 2014-09-12 2017-12-05 Vid Scale Inc dispositivo de codificação de vídeo e método de codificação de vídeo

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103098463A (zh) * 2010-04-12 2013-05-08 高通股份有限公司 视频压缩中的经译码块模式(cbp)的可变长度译码

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Adaptive Residue Transform and Sampling;Woo-Shi Kim;《Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG（ISO/IEC JTC1/SC29/WG11 and ITU-T SG16 Q.6）》;20040319;全文

Also Published As

Publication number Publication date
US20150264364A1 (en) 2015-09-17
US20150264402A1 (en) 2015-09-17
EP3117609B1 (en) 2023-09-27
EP3117614B1 (en) 2018-09-26
BR112016021142A8 (pt) 2021-07-06
EP3117609A2 (en) 2017-01-18
BR112016021144A8 (pt) 2021-07-06
CR20160421A (es) 2016-12-20
MX2016011211A (es) 2017-02-23
KR20160132866A (ko) 2016-11-21
DOP2016000247A (es) 2021-02-28
US20150264405A1 (en) 2015-09-17
CN106105204A (zh) 2016-11-09
JP2017513323A (ja) 2017-05-25
BR112016021144A2 (pt) 2017-07-15
WO2015138954A1 (en) 2015-09-17
JP2017513324A (ja) 2017-05-25
US20150264354A1 (en) 2015-09-17
BR112016021153B1 (pt) 2024-02-27
JP2017513322A (ja) 2017-05-25
CN106105205B (zh) 2019-05-31
EP3117611A1 (en) 2017-01-18
MX2016011210A (es) 2016-12-16
BR112016021153A2 (zh) 2017-08-15
ES2975180T3 (es) 2024-07-03
US10271052B2 (en) 2019-04-23
JP6591435B2 (ja) 2019-10-16
NI201600136A (es) 2016-11-18
KR102356419B1 (ko) 2022-01-26
ES2702950T3 (es) 2019-03-06
BR112016021142B1 (pt) 2022-09-20
MX361825B (es) 2018-12-18
BR112016021151A8 (pt) 2021-07-06
EP3117614A1 (en) 2017-01-18
US9948933B2 (en) 2018-04-17
GT201600187A (es) 2018-11-27
US9736481B2 (en) 2017-08-15
KR102346986B1 (ko) 2022-01-03
MX369561B (es) 2019-11-12
EP3117610B1 (en) 2024-02-28
US11070810B2 (en) 2021-07-20
MX2016011596A (es) 2016-12-12
JP6607862B2 (ja) 2019-11-20
JP6612767B2 (ja) 2019-11-27
BR112016021142A2 (pt) 2017-08-15
MX2016011589A (es) 2016-12-20
MX360862B (es) 2018-11-09
CN106105205A (zh) 2016-11-09
KR102348541B1 (ko) 2022-01-06
BR112016021151B1 (pt) 2024-02-27
KR102346989B1 (ko) 2022-01-03
JP6657110B2 (ja) 2020-03-04
CN106105204B (zh) 2019-06-28
MX363318B (es) 2019-03-20
WO2015138943A3 (en) 2015-11-26
CN106105202B (zh) 2019-06-25
KR20160132869A (ko) 2016-11-21
CN106105203A (zh) 2016-11-09
JP2017513315A (ja) 2017-05-25
WO2015138957A2 (en) 2015-09-17
WO2015138962A1 (en) 2015-09-17
BR112016021151A2 (pt) 2017-08-15
SV2016005276A (es) 2017-04-24
WO2015138943A2 (en) 2015-09-17
KR20160132870A (ko) 2016-11-21
EP3117610A2 (en) 2017-01-18
HUE041560T2 (hu) 2019-05-28
KR20160132867A (ko) 2016-11-21
CN106105202A (zh) 2016-11-09
WO2015138957A3 (en) 2015-11-05

Similar Documents

Publication Publication Date Title
CN106105203B (zh) 块自适应颜色空间转换译码
CN105723707B (zh) 用于视频译码的色彩残差预测
CN105532007B (zh) 在视频译码中用于非亮度分量的自适应解块滤波
CN105474645B (zh) 对视频数据进行解码的方法、对视频数据进行编码的方法、视频解码装置及视频编码装置
CN106105206B (zh) 用于使用置零系数的低复杂度正变换的系统和方法
CN103947207B (zh) 用于图片分割方案的统一设计
CN105493507B (zh) 用于帧内块复制的残余预测
CN106797476B (zh) 用于编码/解码视频数据的方法和视频解码装置
CN106797466B (zh) 一种处理视频数据的方法及装置
CN104704843B (zh) 视频性质的指示
CN106464918B (zh) 用信号表示用于位流分区的hrd参数
CN103959775B (zh) 一种视频数据编解码的方法及设备
CN104471942B (zh) 重新使用参数集用于视频译码
CN104685875B (zh) 用于视频译码的方法、设备、计算机可读存储媒体
CN104704833B (zh) 多视图或3维视频译码中的高级视图间残差预测
CN103931182B (zh) 帧内预测视频译码中的非正方形变换
CN105009588B (zh) 用于视频译码的并行处理
CN105874797B (zh) 视频数据的编解码方法、装置、设备和存储媒体
CN105075259B (zh) 用于视频译码预测的存储器减少
CN103563378B (zh) 存储器高效的上下文建模
CN104365106B (zh) 发信用于视频译码的长期参考图片的数据
CN110100439A (zh) 用于视频译码的帧内预测技术
CN103947205B (zh) 帧内模式译码中的参考模式选择
CN108353167A (zh) 译码视频数据的正负号信息
CN109716771A (zh) 用于视频译码的线性模型色度帧内预测

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant