Nothing Special   »   [go: up one dir, main page]

JP2017510115A - ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測 - Google Patents

ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測 Download PDF

Info

Publication number
JP2017510115A
JP2017510115A JP2016544442A JP2016544442A JP2017510115A JP 2017510115 A JP2017510115 A JP 2017510115A JP 2016544442 A JP2016544442 A JP 2016544442A JP 2016544442 A JP2016544442 A JP 2016544442A JP 2017510115 A JP2017510115 A JP 2017510115A
Authority
JP
Japan
Prior art keywords
current block
predictor
value
block
prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016544442A
Other languages
English (en)
Other versions
JP6355744B2 (ja
Inventor
ジュウ,リーホワ
サリヴァン,ゲイリー
シュイ,ジージュヨン
サンクラトリ,シュリダール
アニル クマール,ビー.
アニル クマール,ビー.
ウー,フオン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2017510115A publication Critical patent/JP2017510115A/ja
Application granted granted Critical
Publication of JP6355744B2 publication Critical patent/JP6355744B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

ブロックベクトル(“BV”)値の予測の分野におけるイノベーションが、イントラブロックコピー(“BC”)予測を用いてブロックのエンコーディング又はデコーディングを向上させる。例えば、イノベーションのいくつかが、非ゼロ値を有するデフォルトBV予測子の使用に関する。別のイノベーションが、現在のブロックのための複数のBV予測子候補のうち選択された1つの使用に関する。さらに別のイノベーションが、現在のイントラBC予測されたブロックが予測されたBV値を使用するスキップモードの使用に関する。

Description

エンジニアは、圧縮(ソースコーディング又はソースエンコーディングとも呼ばれる)を使用して、デジタルビデオのビットレートを低減させる。圧縮は、ビデオ情報をより低いビットレート形式にコンバートすることによって、該情報を記憶し及び送信することのコストを減らす。伸張(デコーディングとも呼ばれる)は、圧縮された形式から、元の情報のあるバージョンを再構成する。「コーデック」は、エンコーダ/デコーダシステムである。
この20年を通じて、様々なビデオコーデック標準が採用されてきており、ITU‐T H.261、H.262(MPEG‐2又はISO/IEC13818‐2)標準、H.263及びH.264(MPEG‐4AVC又はISO/IEC14496‐10)標準、MPEG‐1(ISO/IEC11172‐2)及びMPEG‐4Visual(ISO/IEC14496‐2)標準、SMPTE421M(VC‐1)標準が含まれる。最近では、HEVC標準(ITU‐T H.265又はISO/IEC23008‐2)が承認されている。HEVC標準に対するエクステンション(例えば、スケーラブルビデオコーディング/デコーディングのための、あるいはサンプルビット深度又はクロマサンプリングレートの観点においてより高い忠実度を有するビデオのコーディング/デコーディングのための、あるいはマルチビューコーディング/デコーディングのための)が、現在開発下にある。ビデオコーデック標準は典型的に、エンコードされるビデオビットストリームのシンタックスについてのオプションを定義し、特定の特徴がエンコーディング及びデコーディングにおいて使用されるときにビットストリームの中のパラメータを詳述する。多くの場合において、ビデオコーデック標準は、デコーディングにおいて合致する結果を達成するためにデコーダが実行すべきであるデコーディング動作に関する詳細をさらに提供する。コーデック標準の他に、様々な独自コーデックフォーマットが、エンコードされるビデオビットストリームのシンタックスと対応するデコーディング動作とについての他のオプションを定義している。
イントラブロックコピー(“BC”)は、HEVCエクステンションに関する開発下の予測モードである。イントラBC予測モードについて、ピクチャの現在のブロックのサンプル値は、同じピクチャの中の事前に再構成されたサンプル値を用いて予測される。ブロックベクトル(“BV”)が、予測に使用される事前に再構成されたサンプル値を含むピクチャの領域に対する、現在ブロックからの変位を示す。BVは、ビットストリーム内で信号伝達される。イントラBC予測は、ピクチャ内予測の一形態であり、ピクチャのブロックのイントラBC予測は、同じピクチャの中のサンプル値以外のいかなるサンプル値も使用しない。
現在、HEVC標準において規定され、HEVC標準に対するいくつかの参照ソフトウェアにおいて実装されるとおり、イントラBC予測モードはいくつかの問題を有する。具体的に、多くのシナリオにおいてBV値が効率的に信号伝達されず、予測可能なBC変位を有するブロックの符号化が効率的に取り扱われない。
要約すると、発明の詳細は、イントラブロックコピー(“BC”)予測を用いたブロックのエンコーディング又はデコーディングの間のブロックベクトル(“BV”)値の予測の分野におけるイノベーションを提示する。例えば、イノベーションのいくつかは、非ゼロ値を有するデフォルトBV予測子の使用に関する。別のイノベーションが、現在のブロックのための複数のBV予測子候補のうち選択された1つの使用に関する。さらに別のイノベーションが、現在のイントラBC予測されたブロックが予測されたBV値を使用するスキップモードの使用に関する。多くの状況において、本イノベーションは、BV値の符号化効率を向上させ、あるいはその他の方法で、イントラBC予測されたブロックの符号化効率を向上させる。
本明細書に説明されるイノベーションの第1の態様に従い、エンコーダが、ピクチャの現在のブロックのためのデフォルトBV予測子を決定する。デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む。例えば、デフォルトBV予測子の垂直BV成分及び水平BV成分のうち一方がゼロであり、他方が非ゼロ値を有する。エンコーダは、デフォルトBV予測子を用いて現在のブロックをエンコードする。例えば、エンコーダは、現在のブロックのためのBV値を用いてイントラブロックコピー(“BC”)予測を実行し、このBV値と現在のブロックのためのデフォルトBV予測子とを用いてBV差分を決定し、それからBV差分をエンコードする。あるいは、エンコーダは、デフォルトBV予測子を用いてイントラBC予測を単に実行する。
対応するデコーダは、ピクチャの現在のブロックのためのデフォルトBV予測子を決定する。デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む。例えば、デフォルトBV予測子の垂直BV成分及び水平BV成分のうち一方がゼロであり、他方が非ゼロ値を有する。デコーダは、デフォルトBV予測子を用いて現在のブロックをデコードする。例えば、デコーダは、現在のブロックのためのBV差分をデコードし、それから、デコードされたBV差分をデフォルトBV予測子と組み合わせて、現在のブロックのためのBV値を再構成する。デコーダは、このBV値を用いてイントラBC予測を実行する。あるいは、デコーダは、デフォルトBV予測子を用いてイントラBC予測を単に実行する。
エンコーダ又はデコーダは、ピクチャの前のブロックのための実際のBV値が利用可能であるかどうかに依存して、デフォルトBV予測子を条件付きで使用してもよい。例えば、エンコーダ/デコーダは、ピクチャの前のブロックのための実際のBV値が利用可能であるかどうかをチェックする。そうである場合、前のブロックのための実際のBV値が現在のブロックのためのBV予測子として使用される。そうでない場合、デフォルトBV予測子が現在のブロックのためのBV予測子として使用される。いくつかの実施において、前のブロックのための実際のBV値は、(1)前のブロックと現在のブロックとが所与の符号化ツリーユニットの一部であり、(2)前のブロックの予測モードがイントラBC予測モードである、場合に利用可能である。
本明細書に説明されるイノベーションの第2の態様に従い、エンコーダは、BV予測を使用して、ピクチャの現在のブロックのためのBV値を決定する。現在のブロックのためのBV値は、ピクチャ内の領域に対する変位を示す。エンコーダは、BV値(ここでは、BV予測子)と共にイントラBCを用いて現在のブロックをエンコードする。エンコーダは、現在のブロックがスキップモードにおいてエンコードされているとの指標をビットストリーム内に出力し、このビットストリームは、現在のブロックのためのBV差分及び残差データを欠く。
対応するデコーダは、ピクチャの現在のブロックがスキップモードにおいてエンコードされているとの指標をビットストリームから受信する。ビットストリームは、現在のブロックのためのBV差分及び残差データを欠く。デコーダは、BV予測を使用して、現在のブロックのためのBV値を決定する。それから、デコーダは、BV値(ここでは、BV予測子)と共にイントラブロックコピー予測を用いて現在のブロックをデコードする。
スキップされたブロックについて、ビットストリームは、現在のブロックのためのBV値(ここでは、BV予測子)として使用するための、複数のBV予測子候補のセットからの、BV予測子候補の選択を示すインデックス値を含むことができる。インデックス値は、フラグ値又は整数値であり得る。
本明細書に説明されるイノベーションの第3の態様に従い、エンコーダは、ピクチャの現在のブロックのための複数のBV予測子候補のセットを決定し、それから、現在のブロックに使用するための、BV予測子候補のうち1つを選択する。エンコーダは、選択されたBV予測子候補を用いて現在のブロックをエンコードし、ビットストリームの中に、選択された予測子候補を示すインデックス値を出力する。
対応するデコーダは、ビットストリームからインデック値を受信する。デコーダは、ピクチャの現在のブロックのための複数のBV予測子候補のセットを決定し、インデックス値に基づいて、現在のブロックに使用するための、BV予測子候補のうち1つを選択する。デコーダは、選択されたBV予測子候補を用いて現在のブロックをデコードする。
いくつかの場合において、ビットストリームは、現在のブロック(これは非スキップモードの、非マージモードブロックである)のためのBV差分を含む。BV差分は、選択されたBV予測子候補と現在のブロックのためのBV値とにおける差を示す。別の場合において、現在のブロックはマージモードブロックであり、ビットストリームは現在のブロックのためのBV差分を欠き、しかし現在のブロックのための残差データを含み得る。さらに別の場合において、ビットストリームの中の値が、現在のブロックがスキップモードブロックであると示す。上記の場合において、ビットストリームは、現在のブロックのためのBV差分を欠き、ビットストリームは現在のブロックのための残差データを欠く。
一般に、複数のBV予測子候補は、前のブロックの、最大でx個の実際のBV値を含む。前のブロックは、現在のブロックの周りの近隣における場所に少なくとも部分的に基づいて識別されることができる(例えば、現在のブロックの左、上、及び右上に対するブロック)。あるいは、前のブロックは、現在のブロックと比較したデコーディング順序に少なくとも部分的に基づいて識別されることができる(例えば、最後の3つのイントラBC予測されたブロック)。複数のBV予測子候補が、1つ以上のデフォルトBV予測子をさらに含むことができる。
BV予測のためのイノベーションは、方法の一部として、あるいは方法を実行するように適合されたコンピューティング装置の一部として、あるいはコンピューティング装置に方法を実行させるコンピュータ実行可能命令を記憶した有形コンピュータ可読媒体の一部として実施されることができる。様々なイノベーションが、組み合わせにおいて又は別個に使用されることができる。具体的に、BV予測のためのマージモードが、非ゼロの動きを有するデフォルトBV予測子及び/又はイントラBC予測されたブロックのためのスキップモードと関連して使用されることができる。イントラBC予測されたブロックのためのスキップモードは、非ゼロの動きを有するデフォルトBV予測子と関連して使用されることができる。
本発明に係る前述及び他の目的、特徴、及び利点は、添付図面を参照して進む下記の詳細な説明からより明らかになるであろう。
いくつかの説明される実施形態が実施されることが可能な一例示的なコンピューティングシステムの図である。 いくつかの説明される実施形態が実施されることが可能な例示的なネットワーク環境の図である。 いくつかの説明される実施形態が実施されることが可能な例示的なネットワーク環境の図である。 一例示的なエンコーダシステムの図であり、該エンコーダシステムと関連して、いくつかの説明される実施形態が実施されることができる。 一例示的なデコーダシステムの図であり、該デコーダシステムと関連して、いくつかの説明される実施形態が実施されることができる。 一例示的なビデオエンコーダを例示する図であり、該ビデオエンコーダと関連して、いくつかの説明される実施形態が実施されることができる。 一例示的なビデオエンコーダを例示する図であり、該ビデオエンコーダと関連して、いくつかの説明される実施形態が実施されることができる。 一例示的なビデオデコーダを例示する図であり、該ビデオデコーダと関連して、いくつかの説明される実施形態が実施されることができる。 ピクチャのブロックのためのイントラBC予測、ブロックのためのBV予測、デフォルト(0,0)BV予測子、及び非ゼロ値を有するBV予測子をそれぞれ例示する図である。 ピクチャのブロックのためのイントラBC予測、ブロックのためのBV予測、デフォルト(0,0)BV予測子、及び非ゼロ値を有するBV予測子をそれぞれ例示する図である。 ピクチャのブロックのためのイントラBC予測、ブロックのためのBV予測、デフォルト(0,0)BV予測子、及び非ゼロ値を有するBV予測子をそれぞれ例示する図である。 ピクチャのブロックのためのイントラBC予測、ブロックのためのBV予測、デフォルト(0,0)BV予測子、及び非ゼロ値を有するBV予測子をそれぞれ例示する図である。 非ゼロ値を有するデフォルトBV予測子の使用を含むエンコーディングの手法を例示するフローチャートである。 非ゼロ値を有するデフォルトBV予測子の使用を含むエンコーディングの手法を例示するフローチャートである。 非ゼロ値を有するデフォルトBV予測子の使用を含むデコーディングの手法を例示するフローチャートである。 非ゼロ値を有するデフォルトBV予測子の使用を含むデコーディングの手法を例示するフローチャートである。 イントラBC予測されたブロックのスキップモードを含むエンコーディング及びデコーディングの手法をそれぞれ例示するフローチャートである。 イントラBC予測されたブロックのスキップモードを含むエンコーディング及びデコーディングの手法をそれぞれ例示するフローチャートである ピクチャ内の前のブロックの実際のBV値間におけるBV予測子候補を例示する図である。 ピクチャ内の近隣のブロックの実際のBV値間におけるBV予測子候補を例示する図である。 複数のBV予測子候補間における選択を含むエンコーディングの手法を例示するフローチャートである。 複数のBV予測子候補間における選択を含むエンコーディングの手法を例示するフローチャートである。 複数のBV予測子候補間における選択を含むデコーディングの手法を例示するフローチャートである。 複数のBV予測子候補間における選択を含むデコーディングの手法を例示するフローチャートである。
本詳細な説明は、イントラブロックコピー(“BC”)予測を用いたブロックのエンコーディング又はデコーディングの間のブロックベクトル(“BV”)値の予測の分野におけるイノベーションを提示する。例えば、イノベーションのいくつかは、非ゼロ値を有するデフォルトBV予測子の使用に関する。別のイノベーションが、現在のブロックのための複数のBV予測子候補のうち選択された1つの使用に関する。さらに別のイノベーションが、現在のイントラBC予測されたブロックが予測されたBV値を使用するスキップモードの使用に関する。多くの状況において、本イノベーションは、BV値の符号化効率を向上させ、このことはビットレートを下げ、かつ/あるいは品質を向上させることが可能であり、あるいはその他の方法で、イントラBC予測されたブロックの符号化効率を向上させる。
本明細書に説明される動作は、所々で、ビデオエンコーダ又はデコーダにより実行されるものとして説明されるが、多くの場合において、上記動作は、別のタイプのメディア処理ツール(例えば、画像エンコーダ又はデコーダ)により実行されることが可能である。
本明細書に説明されるイノベーションのいくつかは、HEVC標準に固有のシンタックス要素及び動作を参照して例示される。例えば、HEVC標準のドラフトバージョンJCTVC‐O1005、“High Efficiency Video Coding(HEVC) Range Extensions Text Specification:Draft 5”、JCTVC‐O1005_v3、2013年11月に対して、参照が行われる。本明細書に説明されるイノベーションは、さらに、他の標準又はフォーマットのために実施されることが可能である。
より一般的に、本明細書に説明される例に対する様々な代替物があり得る。例えば、本明細書に説明される方法のいくつかは、特定の方法動作を分割し、繰り返し、又は省略することなどにより、説明される方法動作の順序付けを変更することによって変えられることが可能である。開示されるテクノロジーの様々な態様が、組み合わせにおいて又は別個に使用されることができる。種々の実施形態が、説明されるイノベーションの1つ以上を使用する。本明細書に説明されるイノベーションのいくつかは、背景技術において記された問題のうち1つ以上に対処する。典型的に、所与の手法/ツールは、すべての上記の問題を解決するものではない。
I.例示的なコンピューティングシステム
図1は、説明されるイノベーションのいくつかが実施され得る適切なコンピューティングシステム(100)の一般化された一例を例示する。イノベーションは、多様な汎用目的又は特別目的コンピューティングシステムにおいて実施され得るので、コンピューティングシステム(100)は、使用法又は機能性の範囲に関していかなる限定も示唆するものではない。
図1を参照すると、コンピューティングシステム(100)は、1つ以上の処理ユニット(110、115)、及びメモリ(120、125)を含む。処理ユニット(110、115)は、コンピュータ実行可能命令を実行する。処理ユニットは、汎用目的中央処理ユニット(“CPU”)、特定用途向け集積回路(“ASIC”)におけるプロセッサ、又は任意の他のタイプのプロセッサであり得る。マルチプロセシングシステムにおいて、複数の処理ユニットが、コンピュータ実行可能命令を実行して処理パワーを増大させる。例えば、図1は、中央処理ユニット(110)と、グラフィクス処理ユニット又はコプロセシングユニット(115)とを示す。有形メモリ(120、125)は、処理ユニットによりアクセス可能な揮発性メモリ(例えば、レジスタ、キャッシュ、RAM)、不揮発性メモリ(例えば、ROM、EEPROM、フラッシュメモリ等)、又は上記2つの何らかの組み合わせであり得る。メモリ(120、125)は、ブロックベクトル予測のための1つ以上のイノベーションを実施するソフトウェア(180)を、処理ユニットによる実行に適したコンピュータ実行可能命令の形式において記憶する。
コンピューティングシステムは、さらなる特徴を有し得る。例えば、コンピューティングシステム(100)は、記憶装置(140)、1つ以上の入力装置(150)、1つ以上の出力装置(160)、及び1つ以上の通信接続(170)を含む。相互接続メカニズム(図示されていない)、例えば、バス、コントローラ、又はネットワークなどが、コンピューティングシステム(100)のコンポーネントを相互接続する。典型的に、オペレーティングシステムソフトウェア(図示されていない)が、コンピューティングシステム(100)において実行される他のソフトウェアのための動作環境を提供し、コンピューティングシステム(100)のコンポーネントのアクティビティを調整する。
有形記憶装置(140)は、取外し可能又は取外し不能であることが可能であり、磁気ディスク、磁気テープ若しくはカセット、CD‐ROM、DVD、又は、情報を記憶することに使用されることが可能でありコンピューティングシステム(100)内でアクセスされることが可能である任意の他の媒体を含む。記憶装置(140)は、ブロックベクトル予測のための1つ以上のイノベーションを実施するソフトウェア(180)の命令を記憶する。
入力装置(150)は、キーボード、マウス、ペン、若しくはトラックボールなどのタッチ入力装置、音声入力装置、スキャニング装置、又は、コンピューティングシステム(100)に対する入力を提供する別の装置であり得る。ビデオについて、入力装置(150)は、カメラ、ビデオカード、TVチューナカード、若しくは、アナログ若しくはデジタル形式においてビデオ入力を受け入れる同様の装置、又は、コンピューティングシステム(100)へのビデオ入力を読み出すCD‐ROM若しくはCD‐RWであり得る。出力装置(160)は、ディスプレイ、プリンタ、スピーカー、CDライタ、又は、コンピューティングシステム(100)からの出力を提供する別の装置であり得る。
通信接続(170)は、通信媒体を通じて別のコンピューティングエンティティに対する通信を可能にする。通信媒体は、コンピュータ実行可能命令、オーディオ若しくはビデオの入力若しくは出力、又は他のデータなどの情報を、変調されたデータ信号において運ぶ。変調されたデータ信号は、その特性のうち1つ以上を、信号の中に情報をエンコードする仕方において設定させ又は変更させた信号である。限定ではなく例として、通信媒体は、電気、光、RF、又は他の搬送波を使用することができる。
イノベーションは、コンピュータ可読媒体の一般的文脈において説明されることができる。コンピュータ可読媒体は、コンピューティング環境内でアクセスされることが可能な任意の利用可能な有形媒体である。限定ではなく例として、コンピューティングシステム(100)において、コンピュータ可読媒体は、メモリ(120、125)、記憶装置(140)、及び上記のうち任意のものの組み合わせを含む。
イノベーションは、コンピューティングシステムにおいてターゲットの実プロセッサ又は仮想プロセッサ上で実行される、プログラムモジュールに含まれるものなどのコンピュータ実行可能命令の一般的文脈において説明されることができる。一般に、プログラムモジュールは、特定のタスクを実行し又は特定の抽象データタイプを実装するルーチン、プログラム、ライブラリ、オブジェクト、クラス、コンポーネント、データ構造等を含む。プログラムモジュールの機能性は、様々な実施形態において所望されるとおりにプログラムモジュール間で組み合わせられ又は分割されてもよい。プログラムモジュールのコンピュータ実行可能命令は、局所的な又は分散されたコンピューティングシステム内で実行されることが可能である。
用語「システム」及び「装置」は、本明細書において、交換可能に使用される。文脈が別段明確に示さない限り、いずれの用語も、コンピューティングシステム又はコンピューティング装置のタイプに対するいかなる限定も暗示しない。一般に、コンピューティングシステム又はコンピューティング装置は、局所的であるか又は分散されることが可能であり、本明細書に説明される機能性を実施するソフトウェアを有する特別目的ハードウェア及び/又は汎用目的ハードウェアの任意の組み合わせを含むことができる。
開示される方法は、さらに、開示される方法のうち任意のものを実行するように構成された専用のコンピューティングハードウェアを用いて実施されてもよい。例えば、開示される方法は、開示される方法のうち任意のものを実施するように特別に設計され又は構成された集積回路(例えば、ASIC(ASICデジタルシグナルプロセッサ(“DSP”)、グラフィクス処理ユニット(“GPU”)、又は、プログラマブルロジック装置(“PLD”)、例えば、フィールドプログラマブルゲートアレイ(“FPGA”)など)によって実施されることが可能である。
提示のために、本詳細な説明は、「決定する」及び「使用する」などの用語を用いて、コンピューティングシステムにおけるコンピュータ動作を説明する。上記用語は、コンピュータによって実行される動作の高レベル抽象化であり、人間によって実行される行為と混同されるべきではない。上記用語に対応する実際のコンピュータ動作は、実装に依存して変動する。
II.例示的なネットワーク環境
図2a及び図2bは、ビデオエンコーダ(220)及びビデオデコーダ(270)を含む例示的なネットワーク環境(201、202)を示す。エンコーダ(220)及びデコーダ(270)は、ネットワーク(250)を通じて適切な通信プロトコルを用いて接続される。ネットワーク(250)は、インターネット又は別のコンピュータネットワークを含み得る。
図2aに示されるネットワーク環境(201)において、各リアルタイム通信(“RTC”)ツール(210)が、双方向通信のためにエンコーダ(220)とデコーダ(270)との双方を含む。所与のエンコーダ(220)が、HEVC標準(H.265としても知られる)、SMPTE421M標準、ISO‐IEC14496‐10標準(H.264又はAVCとしても知られる)、別の標準、又は独自フォーマットの、バリエーション又はエクステンションに準拠した出力を生成することができ、対応するデコーダ(270)は、エンコーダ(220)からのエンコードされたデータを受け入れることができる。双方向通信は、ビデオ会議、ビデオ電話呼び出し、又は、他の2つのパーティ若しくはマルチパートの通信シナリオの一部であり得る。図2aにおけるネットワーク環境(201)は2つのリアルタイム通信ツール(210)を含むが、ネットワーク環境(201)は、代わって、マルチパーティ通信に参加する3つ又はそれ以上のリアルタイム通信ツール(210)を含んでもよい。
リアルタイム通信ツール(210)は、エンコーダ(220)によるエンコーディングを管理する。図3は、リアルタイム通信ツール(210)に含まれることが可能な一例示的なエンコーダシステム(300)を示す。別法として、リアルタイム通信ツール(210)は別のエンコーダシステムを使用する。リアルタイム通信ツール(210)は、さらに、デコーダ(270)によるデコーディングを管理する。図4は、一例示的なデコーダシステム(400)を示し、デコーダシステム(400)は、リアルタイム通信ツール(210)に含まれ得る。別法として、リアルタイム通信ツール(210)は別のデコーダシステムを使用する。
図2bに示されるネットワーク環境(202)において、エンコーディングツール(212)が、複数の再生ツール(214)に対する配信のためにビデオをエンコードするエンコーダ(220)を含み、上記再生ツール(214)は、デコーダ(270)を含む。ビデオ監視システム、ウェブカメラモニタリングシステム、リモートデスクトップ会議プレゼンテーション、又は他のシナリオに対して、単方向通信が提供されることが可能であり、これにおいて、ビデオはエンコードされて、ある場所から1つ以上の他の場所に送られる。図2bにおけるネットワーク環境(202)は2つの再生ツール(214)を含むが、ネットワーク環境(202)は、より多くの又はより少ない再生ツール(214)を含むことが可能である。一般に、再生ツール(214)はエンコーディングツール(212)と通信して、再生ツール(214)が受信すべきビデオのストリームを決定する。再生ツール(214)は、ストリームを受信し、受信されたエンコードデータを適切な期間の間バッファし(buffers)、デコーディング及び再生を始める。
図3は、エンコーディングツール(212)に含まれることが可能な一例示的なエンコーダシステム(300)を示す。別法として、エンコーディングツール(212)は別のエンコーダシステムを使用する。エンコーディングツール(212)は、1つ以上の再生ツール(214)との接続を管理するサーバ側コントローラロジックをさらに含み得る。図4は、一例示的なデコーダシステム(400)を示し、デコーダシステム400は、再生ツール(214)に含まれ得る。別法として、再生ツール(214)は別のデコーダシステムを使用する。再生ツール(214)は、エンコーディングツール(212)との接続を管理するクライアント側コントローラロジックをさらに含み得る。
III.例示的なエンコーダシステム
図3は、一例示的なエンコーダシステム(300)のブロック図であり、エンコーダシステム(300)と関連して、いくつかの説明される実施形態が実施され得る。エンコーダシステム(300)は、複数のエンコーディングモードのうち任意のもの、例えば、リアルタイム通信のための低レイテンシエンコーディングモード、トランスコーディングモード、及びファイル又はストリームから再生のためのメディアを生成するより高いレイテンシのエンコーディングモードなどにおいて動作することができる汎用目的エンコーディングツールであることが可能であり、あるいは、エンコーダシステム(300)は、上記のエンコーディングモードの1つに適合された特別目的エンコーディングツールであってもよい。エンコーダシステム(300)は、オペレーティングシステムモジュールとして、アプリケーションライブラリの一部として、あるいはスタンドアロンアプリケーションとして実装されることが可能である。全体的に見て、エンコーダシステム(300)は、ビデオソース(310)からソースビデオフレーム(311)のシーケンスを受信し、エンコードされたデータをチャネル(390)に対する出力として生成する。チャネルに対して出力される、エンコードされたデータは、本明細書において説明されるBV予測におけるイノベーションを用いてエンコードされたコンテンツを含み得る。
ビデオソース(310)は、カメラ、チューナカード、記憶媒体、又は他のデジタルビデオソースであり得る。ビデオソース(310)は、例えば30フレーム毎秒のフレームレートにおいて、ビデオフレームのシーケンスを生成する。本明細書において使用されるとき、用語「フレーム」は、ソースの、符号化され又は再構成された画像データを一般に参照する。プログレッシブスキャンビデオについて、フレームは、プログレッシブスキャンビデオフレームである。インターレースされたビデオについて、例示的な実施形態において、インターレースされたビデオフレームは、エンコーディングの前にインターレース解除される。別法として、2つの相補的なインターレースされたビデオフィールドが、単一のビデオフレームとして一緒にエンコードされ、あるいは2つの別個にエンコードされるフィールドとしてエンコードされる。プログレッシブスキャンビデオフレーム又はインターレーススキャンビデオフレームを示すことの他に、用語「フレーム」又は「ピクチャ」は、単一の非ペアのビデオフィールド、相補的なペアのビデオフィールド、所与の時間におけるビデオオブジェクトを表すビデオオブジェクトプレーン、又はより大きい画像における関心のある領域を示し得る。ビデオオブジェクトプレーン又は領域は、あるシーンの複数のオブジェクト又は領域を含むより大きい画像のうちの一部であり得る。
到着するソースフレーム(311)はソースフレーム一時メモリ記憶エリア(320)に記憶され、ソースフレーム一時メモリ記憶エリア(320)は複数のフレームバッファ記憶エリア(321、322、・・・、32n)を含む。フレームバッファ(321、322等)は、ソースフレーム記憶エリア(320)の中の1つのソースフレームを保持する。ソースフレーム(311)のうち1つ以上がフレームバッファ(321、322等)に記憶された後、フレーム選択器(330)が、ソースフレーム記憶エリア(320)から個々のソースフレームを選択する。エンコーダ(340)に対する入力のためにフレーム選択器(330)によってフレームが選択される順序は、ビデオソース(310)によってフレームが生成される順序とは異なってもよい。例えば、いくつかのフレームのエンコーディングが順序において遅らせられて、いくつかの後のフレームが最初にエンコードされることを可能にし、ゆえに時間的に後方の予測を容易にすることができる。エンコーダ(340)の前に、エンコーダシステム(300)はプリプロセッサ(図示されていない)を含んでもよく、プリプロセッサは、エンコーディングの前に選択されたフレーム(331)の前処理(例えば、フィルタリング)を実行する。前処理には、一次(例えば、ルマ)及び二次(例えば、赤に向かう及び青に向かうクロマ差分)成分への色空間コンバージョン、及び、エンコーディングのためのリサンプリング処理(例えば、クロマ成分の空間解像度を低減させるため)を含むことができる。典型的に、エンコーディングの前、ビデオはYUVなどの色空間にコンバートされており、これにおいて、ルマ(Y)成分のサンプル値は明るさ又は輝度値を表し、クロマ(U、V)成分のサンプル値は色差値を表す。クロマサンプル値は、より低いクロマサンプリングレートへ(例えば、YUV4:2:0フォーマットのために)サブサンプリングされ(sub-sampled)てもよく、あるいは、クロマサンプル値は、ルマサンプル値と同じ(例えば、YUV4:4:4フォーマットのための)解像度を有してもよい。あるいは、ビデオは別のフォーマット(例えば、RGB4:4:4フォーマット)においてエンコードされてもよい。
エンコーダ(340)は、選択されたフレーム(331)をエンコードして、符号化されたフレーム(341)を生成し、さらに、メモリ管理制御動作(“MMCO”)信号(342)又は参照ピクチャセット(“RPS”)情報を生成する。現在のフレームが、エンコードされている最初のフレームでない場合、そのエンコーディング処理を実行するとき、エンコーダ(340)は、デコード済みフレーム一時メモリ記憶エリア(360)に記憶されている1つ以上の事前にエンコードされた/デコードされたフレーム(369)を使用することができる。こうした記憶されているデコードされたフレーム(369)が、現在のソースフレーム(331)のコンテンツのフレーム間(inter-frame)予測のための参照フレームとして使用される。MMCO/RPS情報(342)は、デコーダに対して、どの再構成されたフレームが参照フレームとして使用されることが可能であり、したがってフレーム記憶エリアに記憶されるべきであるかを示す。
一般に、エンコーダ(340)は、エンコーディングタスク、例えば、タイルへの区分化、イントラ予測推定及び予測、動き推定及び補償、周波数変換、量子化、並びにエントロピー符号化などを実行する、複数のエンコーディングモジュールを含む。エンコーダ(340)により実行される正確な動作は、圧縮フォーマットに依存して変動し得る。出力されるエンコードされたデータのフォーマットは、HEVCフォーマット(H.265)、Windows Media Videoフォーマット、VC‐1フォーマット、MPEGxフォーマット(例えば、MPEG‐1、MPEG‐2、又はMPEG‐4)、H.26xフォーマット(例えば、H.261、H.262、H.263、H.264)、又は別のフォーマットの、バリエーション又はエクステンションであり得る。
エンコーダ(340)は、フレームを、同じサイズ又は異なるサイズの複数のタイルに区分することができる。例えば、エンコーダ(340)は、フレームをタイル行及びタイル列に沿って分割する。該タイル行及びタイル列は、フレーム境界を用いて、フレーム内のタイルの水平及び垂直の境界を定義し、各タイルは、長方形の領域である。タイルは、並列処理のオプションを提供するためにしばしば使用される。フレームは、さらに、1つ以上のスライスとして編成されてもよく、スライスは、フレーム全体又はフレームのうちの領域であり得る。スライスは、フレームの中の他のスライスから独立してデコードされることが可能であり、このことは誤り耐性を向上させる。スライス又はタイルのコンテンツは、エンコーディング及びデコーディングの目的で、ブロック又は、サンプルの他のセットにさらに区分される。
HEVC標準に従うシンタックスのために、エンコーダは、フレーム(又は、スライス若しくはタイル)のコンテンツを、符号化ツリーユニット(coding tree unit)に分割する。符号化ツリーユニット(“CTU”)は、ルマ符号化ツリーブロック(“CTB”)として編成されたルマサンプル値と、2つのクロマCTBとして編成された、対応するクロマサンプル値とを含む。CTU(及び、そのCTB)のサイズはエンコーダによって選択され、例えば、64×64、32×32、又は16×16サンプル値であり得る。CTUは1つ以上の符号化ユニットを含む。符号化ユニット(“CU”)は、ルマ符号化ブロック(“CB”)と、2つの対応するクロマCBとを有する。例えば、64×64ルマCTB及び2つの64×64クロマCTBを有するCTU(YUV4:4:4フォーマット)が4つのCUに分割されることが可能であり、これにおいて、各CUは32×32ルマCB及び2つの32×32クロマCBを含み、各CUは可能性として、より小さいCUにさらに分割される。あるいは、別の例として、64×64ルマCTB及び2つの32×32クロマCTBを有するCTU(YUV4:2:0フォーマット)が4つのCUに分割されることが可能であり、これにおいて、各CUは32×32ルマCB及び2つの16×16クロマCBを含み、各CUは可能性として、より小さいCUにさらに分割される。CUの最小許容可能サイズ(例えば、8×8、16×16)が、ビットストリームの中で信号伝達される(signaled)ことができる。
一般に、CUはインター又はイントラなどの予測モードを有する。CUは、予測情報(例えば、予測モード詳細、変位値等)及び/又は予測処理を信号伝達する目的で、1つ以上の予測ユニットを含む。予測ユニット(“PU”)は、ルマ予測ブロック(“PB”)と2つのクロマPBとを有する。イントラ予測されるCUについて、PUは、CUが最小サイズ(例えば、8×8)を有さない限り、CUと同じサイズを有する。上記の場合、CUのシンタックス要素により示されるとおり、CUが4つのより小さいPUに分割されてもよく(例えば、最小CUサイズが8×8である場合、各々4×4)、あるいは、PUが最小CUサイズを有してもよい。CUは、残差符号化/デコーディングの目的で1つ以上の変換ユニットをさらに有し、変換ユニット(“TU”)は、変換ブロック(“TB”)と2つのクロマTBとを有する。イントラ予測されるCUにおけるPUは、単一のTU(サイズにおいてPUに等しい)又は複数のTUを包含し得る。本明細書において使用されるとき、用語「ブロック」は、文脈に依存して、CB、PB、TB、又はサンプル値の他のセットを示すことがある。エンコーダは、ビデオを如何にしてCTU、CU、PU、TU等に区分するかを決める。
図3に戻ると、エンコーダは、ソースフレーム(331)のイントラ符号化されたブロックを、予測の観点において、フレーム(331)の中の他の事前に再構成されたサンプル値から表現する。イントラBC予測について、ピクチャ内推定器が、他の事前に再構成されたサンプル値に関して、ブロックの変位を推定する。フレーム内(intra-frame)予測参照領域は、ブロックのBC予測値を作り出すために使用されるフレームの中のサンプルの領域である。フレーム内予測領域は、ブロックベクトル(“BV”)値(BV推定において決定される)で示されることができる。ブロックのイントラ空間予測について、ピクチャ内推定器は、近隣の再構成されたサンプル値の、ブロックへの補外を推定する。ピクチャ内推定器は、予測情報(例えば、イントラBC予測のためのBV値、又はイントラ空間予測のための予測モード(方向)など)を出力することができ、これがエントロピー符号化される。フレーム内予測予測器が予測情報を適用して、イントラ予測値を決定する。
エンコーダ(340)は、ソースフレームのフレーム間符号化された予測されたブロックを、予測の観点において、参照フレームから表現する。動き推定器が、1つ以上の参照フレーム(369)に関して、ブロックの動きを推定する。複数の参照フレームが使用されるとき、この複数の参照フレームは、異なる時間方向又は同じ時間方向からであり得る。動き補償された予測参照領域は、現在のフレームのサンプル値のブロックについての動き補償された予測値を作り出すために使用される参照フレームの中のサンプル領域である。動き推定器は動きベクトル(“MV”)情報などの動き情報を出力し、これがエントロピー符号化される。動き補償器がMVを参照フレーム(369)に適用して、フレーム間予測のための動き補償された予測値を決定する。
エンコーダは、ブロックの予測値(イントラ又はインター)と対応する元の値とにおける差を(もしあれば)決定することができる。これら予測残差値は、周波数変換、量子化、及びエントロピーエンコーディングを用いて、さらにエンコードされる。例えば、エンコーダ(340)は、ピクチャ、タイル、スライス、及び/又はビデオの他の部分のための量子化パラメータ(“QP”)の値を設定し、これに従って、変換係数を量子化する。エンコーダ(340)のエントロピー符号器が、量子化された変換係数値と、特定の付帯情報(例えば、MV情報、BV予測子のインデックス値、BV差分、QP値、モード判断、パラメータ選択)とを圧縮する。典型的に、エントロピー符号化手法には、指数ゴロム(Exponential-Golomb)符号化、ゴロム・ライス符号化、算術符号化、差分符号化、ハフマン符号化、ランレングス符号化、可変長対可変長(“V2V”;variable-length-to-variable-length)符号化、可変長対固定長(“V2F”;variable-length-to-fixed-length)符号化、レンペル・ジブ(“LZ”)符号化、辞書符号化、確率間隔区分エントロピー符号化(“PIPE”;probability interval partitioning entropy coding)、及び上記の組み合わせが含まれる。エントロピー符号器は、異なる種類の情報に対して異なる符号化手法を使用することができ、複数の手法を組み合わせにおいて適用することができ(例えば、ゴロム・ライス符号化の後に算術符号化を適用することによって)、特定の符号化手法内の複数の符号テーブルの中から選ぶことができる。
適応的デブロッキングフィルタが、エンコーダ(340)の中の動き補償ループ内に含まれて、デコードされたフレームの中のブロック境界行及び/又は列にわたる不連続性を滑らかにする。別法として、又はさらに、他のフィルタリング(例えば、デリンギング(de-ringing)フィルタリング、適応ループフィルタリング(“ALF”)、又はサンプル適応オフセット(“SAO”)フィルタリングなど;図示されていない)がインループフィルタリング動作として適用されてもよい。
符号化されたフレーム(341)及びMMCO/RPS情報(342)(又は、MMCO/RPS情報(342)と同等の情報、なぜならば、フレームの依存性及び順序付け構造がエンコーダ(340)においてすでに知られているため)は、デコーディング処理エミュレータ(350)によって処理される。デコーディング処理エミュレータ(350)は、デコーダの機能性のうちいくつか、例えば、参照フレームを再構成するデコーディングタスクを実施する。MMCO/RPS情報(342)に準拠する仕方において、デコーディング処理エミュレータ(350)は、所与の符号化されたフレーム(341)が、エンコードされるべき後のフレームのフレーム間予測における参照フレームとしての使用のために再構成され及び記憶される必要があるかどうかを決定する。符号化されたフレーム(341)が記憶される必要がある場合、デコーディング処理エミュレータ(350)は、符号化されたフレーム(341)を受信して対応するデコードされたフレーム(351)を生成するデコーダによって指揮されるであろうデコーディング処理を、モデル化する。そのようにすることにおいて、エンコーダ(340)が、デコードされたフレームの記憶領域(360)に記憶されているデコードされたフレーム(369)を使用しているとき、デコーディング処理エミュレータ(350)は、デコーディング処理の一部として、記憶領域(360)から、デコードされたフレーム(369)をさらに使用する。
デコード済みフレーム一時メモリ記憶エリア(360)は、複数のフレームバッファ記憶エリア(361、362、・・・、36n)を含む。MMCO/RPS情報(342)に準拠する仕方において、デコーディング処理エミュレータ(350)は、記憶エリア(360)のコンテンツを管理して、エンコーダ(340)によって参照フレームとしての使用にもはや必要とされないフレームを有する任意のフレームバッファ(361、362等)を識別する。デコーディング処理をモデル化した後、デコーディング処理エミュレータ(350)は、上記の仕方において識別されたフレームバッファ(361、362等)に、新たにデコードされたフレーム(351)を記憶する。
符号化されたフレーム(341)及びMMCO/RPS情報(342)は、一時符号化済みデータエリア(370)にバッファされる。符号化済みデータエリア(370)に集められる符号化されたデータは、要素的な符号化されたビデオビットストリームのシンタックスの一部として、1つ以上のピクチャについてのエンコードされたデータを含む。符号化済みデータエリア(370)に集められる符号化されたデータは、符号化されたビデオデータに関するメディアメタデータを(例えば、1つ以上のサプリメンタルエンハンスメント情報(“SEI”;supplemental enhancement information)メッセージ又はビデオユーザビリティ情報(“VUI”;video usability information)メッセージの中の1つ以上のパラメータとして)さらに含み得る。
一時符号化済みデータエリア(370)からの集められたデータ(371)は、チャネルエンコーダ(380)によって処理される。チャネルエンコーダ(380)は、集められたデータを送信又は記憶のためにメディアストリームとして(例えば、ITU‐T H.222.0 | ISO/IEC13818‐1などのメディアプログラムストリーム若しくはトランスポートストリームフォーマット、又はIETF RFC3550などのインターネットリアルタイムトランスポートプロトコルフォーマットに従って)パケット化し、かつ/あるいは多重化することができる。上記の場合、チャネルエンコーダ(380)は、シンタックス要素をメディア送信ストリームのシンタックスの一部として追加することができる。あるいは、チャネルエンコーダ(380)は、集められたデータを記憶のためにファイルとして(例えば、ISO/IEC14496‐12などのメディアコンテナフォーマットに従って)編成することができ、この場合、チャネルエンコーダ(380)は、シンタックス要素をメディア記憶ファイルのシンタックスの一部として追加することができる。あるいは、より一般的に、チャネルエンコーダ(380)は、1つ以上のメディアシステム多重化プロトコル又はトランスポートプロトコルを実装することができ、この場合、チャネルエンコーダ(380)は、シンタックス要素をプロトコルのシンタックスの一部として追加することができる。チャネルエンコーダ(380)は、チャネルに対する出力を提供し、該チャネルは、記憶装置、通信接続、又は出力のための別のチャネルを表す。チャネルエンコーダ(380)又はチャネル(390)は、例えば、前方誤り訂正(“FEC”)エンコーディング及びアナログ信号変調のために、他の要素(図示されていない)をさらに含んでもよい。
IV.例示的なデコーダシステム
図4は、一例示的なデコーダシステム(400)のブロック図であり、デコーダシステム400と関連して、いくつかの説明される実施形態が実施され得る。デコーダシステム(400)は、複数のデコーディングモードのうち任意のもの、例えば、リアルタイム通信のための低レイテンシデコーディングモード、及びファイル又はストリームからのメディア再生のためのより高いレイテンシのデコーディングモードなどにおいて動作することができる汎用目的デコーディングツールであることが可能であり、あるいは、デコーダシステム(400)は、上記のデコーディングモードの1つに適合された特別目的デコーディングツールであってもよい。デコーダシステム(400)は、オペレーティングシステムモジュールとして、アプリケーションライブラリの一部として、あるいはスタンドアロンアプリケーションとして実装されることが可能である。全体的に見て、デコーダシステム(400)は、符号化されたデータをチャネル(410)から受信し、再構成されたフレームを出力として出力あて先(490)のために生成する。符号化されたデータは、本明細書において説明されるBV予測におけるイノベーションを用いてエンコードされたコンテンツを含み得る。
デコーダシステム(400)はチャネル(410)を含み、チャネル410は、記憶装置、通信接続、又は入力としての符号化されたデータのための別のチャネルを表し得る。チャネル(410)は、チャネル符号化されている符号化されたデータを生成する。チャネルデコーダ(420)は、符号化されたデータを処理することができる。例えば、チャネルデコーダ(420)は、(例えば、ITU‐T H.222.0 | ISO/IEC13818‐1などのメディアプログラムストリーム若しくはトランスポートストリームフォーマット、又はIETF RFC3550などのインターネットリアルタイムトランスポートプロトコルフォーマットに従って)メディアストリームとして送信又は記憶のために集められたデータをパケット化解除し(de-packetizes)、かつ/あるいは多重分離する(demultiplexes)。上記の場合、チャネルデコーダ(420)は、メディア送信ストリームのシンタックスの一部として追加されたシンタックス要素をパースする(parse)ことができる。あるいは、チャネルデコーダ(420)は、(例えば、ISO/IEC14496‐12などのメディアコンテナフォーマットに従って)ファイルとして記憶のために集められている符号化されたビデオデータを分離し、この場合、チャネルデコーダ(420)は、メディア記憶ファイルのシンタックスの一部として追加されたシンタックス要素をパースすることができる。あるいは、より一般的に、チャネルデコーダ(420)は、1つ以上のメディアシステム多重分離プロトコル又はトランスポートプロトコルを実装することができ、この場合、チャネルデコーダ(420)は、プロトコルのシンタックスの一部として追加されたシンタックス要素をパースすることができる。チャネル(410)又はチャネルデコーダ(420)は、例えば、FECデコーディング及びアナログ信号復調のために、他の要素(図示されていない)をさらに含んでもよい。
チャネルデコーダ(420)から出力される符号化されたデータ(421)は、十分な量のこうしたデータが受信されるまで、一時符号化済みデータエリア(430)に記憶される。符号化されたデータ(421)は、符号化されたフレーム(431)及びMMCO/RPS情報(432)を含む。符号化済みデータエリア(430)の中の符号化されたデータ(421)は、要素的な符号化されたビデオビットストリームのシンタックスの一部として、1つ以上のピクチャのための符号化されたデータを含む。符号化済みデータエリア(430)の中の符号化されたデータは、エンコードされたビデオデータに関するメディアメタデータを(例えば、1つ以上のSEIメッセージ又はVUIメッセージの中の1つ以上のパラメータとして)さらに含み得る。
一般に、符号化済みデータエリア(430)は、符号化されたデータ(421)を、こうした符号化されたデータ(421)がデコーダ(450)によって使用されるまで、一時的に記憶する。このポイントにおいて、符号化されたフレーム(431)及びMMCO/RPS情報(432)のための符号化されたデータ(421)は、符号化済みデータエリア(430)からデコーダ(450)に転送される。デコーディングが継続するとき、新しい符号化されたデータが、符号化済みデータエリア(430)に対して追加され、符号化済みデータエリア(430)に残っている最も古い符号化されたデータが、デコーダ(450)に転送される。
デコーダ(450)は、符号化されたフレーム(431)をデコードして、対応するデコードされたフレーム(451)を生成する。必要に応じて、デコーダ(450)は、そのデコーディング処理を実行するとき、1つ以上の事前にデコードされたフレーム(469)を参照フレームとしてフレーム間予測に使用してもよい。デコーダ(450)は、こうした事前にデコードされたフレーム(469)を、デコード済みフレーム一時メモリ記憶エリア(460)から読み出す。一般に、デコーダ(450)は、デコーディングタスク、例えば、エントロピーデコーディング、フレーム内予測、動き補償されたフレーム間予測、逆量子化、逆周波数変換、及びタイルをマージすることなどを実行する、複数のデコーディングモジュールを含む。デコーダ(450)により実行される正確な動作は、圧縮フォーマットに依存して変動し得る。
例えば、デコーダ(450)は、圧縮されたフレーム又はフレームのシーケンスのエンコードされたデータを受信し、デコードされたフレーム(451)を含む出力を生成する。デコーダ(450)において、バッファが、圧縮されたフレームのエンコードされたデータを受信し、適切な時間に、受信したエンコードされたデータをエントロピーデコーダに対して利用可能にする。エントロピーデコーダは、エントロピー符号化された量子化されたデータとエントロピー符号化された付帯情報とを、典型的にはエンコーダにおいて実行されたエントロピーエンコーディングの逆のことを適用することによって、エントロピーデコードする。動き補償器が、動き情報を1つ以上の参照フレームに適用して、再構成されるフレームの任意のインター符号化されたブロックについて、動き補償された予測値を形成する。フレーム内予測モジュールが、現在のブロックのサンプル値を、近隣の事前に再構成されたサンプル値から空間的に予測し、あるいは、イントラBC予測について、現在のブロックのサンプル値を、フレームの中のフレーム内予測領域の事前に再構成されたサンプル値を用いて予測することができる。フレーム内予測領域は、BV値を用いて示されることができる。デコーダ(450)は、予測残差値をさらに再構成する。逆量子化器が、エントロピーデコードされたデータを逆量子化する。例えば、デコーダ(450)は、ビットストリームの中のシンタックス要素に基づいて、ピクチャ、タイル、スライス、及び/又はビデオの他の部分についてのQPの値を設定し、これに従って、変換係数を逆量子化する。逆周波数変換器が、量子化された周波数ドメインデータを空間ドメインデータにコンバートする。フレーム間予測されたブロックについて、デコーダ(450)は、再構成された予測残差値を、動き補償された予測値と組み合わせる。デコーダ(450)は、同様に、予測残差値を、イントラ予測からの予測値と組み合わせてもよい。適応的デブロッキングフィルタがビデオデコーダ(450)の中の動き補償ループ内に含まれて、デコードされたフレーム(451)の中のブロック境界行及び/又は列にわたる不連続性を滑らかにする。別法として、又はさらに、他のフィルタリング(例えば、デリンギング(de-ringing)フィルタリング、ALF、又はSAOフィルタリングなど;図示されていない)がインループフィルタリング動作として適用されてもよい。
デコード済みフレーム一時メモリ記憶エリア(460)は、複数のフレームバッファ記憶エリア(461、462、・・・、46n)を含む。デコードされたフレームの記憶エリア(460)は、デコード済みピクチャバッファの一例である。デコーダ(450)は、MMCO/RPS情報(432)を使用して、デコードされたフレーム(451)をデコーダ(450)が記憶することができるフレームバッファ(461、462等)を識別する。デコーダ(450)は、上記フレームバッファの中にデコードされたフレーム(451)を記憶する。
出力シーケンサ(480)は、出力順序において生成される次のフレームがデコード済みフレーム記憶エリア(460)の中でいつ利用可能であるかを識別する。出力順序において生成される次のフレーム(481)が、デコード済みフレーム記憶エリア(460)において利用可能であるとき、該フレームは出力シーケンサ(480)によって読み出され、出力あて先(490)(例えば、ディスプレイ)に対して出力される。一般に、出力シーケンサ(480)によってデコード済みフレーム記憶エリア(460)からフレームが出力される順序は、デコーダ(450)によってフレームがデコードされる順序とは異なってもよい。
V.例示的なビデオエンコーダ
図5a及び図5bは、一般化されたビデオエンコーダ(500)のブロック図であり、ビデオエンコーダ(500)と関連して、いくつかの説明される実施形態が実施され得る。エンコーダ(500)は、入力ビデオ信号(505)として現在のピクチャを含むビデオピクチャのシーケンスを受信し、出力として符号化されたビデオビットストリーム(595)におけるエンコードされたデータを生成する。
エンコーダ(500)はブロックベースであり、実装に依存するブロックフォーマットを使用する。ブロックは、異なる段階において、例えば、予測、周波数変換、及び/又はエントロピーエンコーディング段階において、さらに細分されてもよい。例えば、ピクチャが、64×64ブロック、32×32ブロック、又は16×16ブロックに分けられることが可能であり、次に上記ブロックが、符号化及びデコーディングのためにサンプル値のより小さいブロックに分けられることが可能である。HEVC標準のエンコーディングの実施において、エンコーダは、ピクチャをCTU(CTB)、CU(CB)、PU(PB)、及びTU(TB)に区分する。
エンコーダ(500)は、ピクチャ内(intra-picture)符号化及び/又はピクチャ間(inter-picture)符号化を用いて、ピクチャを圧縮する。エンコーダ(500)のコンポーネントの多くは、ピクチャ内符号化及びピクチャ間符号化の双方に使用される。上記コンポーネントによって実行される正確な動作は、圧縮される情報のタイプに依存して変動し得る。
タイル化モジュール(tiling module)(510)が、場合により、ピクチャを、同じサイズ又は異なるサイズの複数のタイルに区分する。例えば、タイル化モジュール(510)は、ピクチャをタイル行及びタイル列に沿って分割する。該タイル行及びタイル列は、ピクチャ境界を用いて、ピクチャ内のタイルの水平及び垂直の境界を定義し、各タイルは、長方形の領域である。
一般エンコーディング制御(520)が、入力ビデオ信号(505)のピクチャと、エンコーダ(500)の様々なモジュールからのフィードバック(図示されていない)とを受信する。全体的に見て、一般エンコーディング制御(520)は、制御信号(図示されていない)を他のモジュール(例えば、タイル化モジュール(510)、変換器/スケーラ(scaler)/量子化器(530)、スケーラ/逆変換器(535)、ピクチャ内推定器(540)、動き推定器(550)、及びイントラ/インタースイッチなど)に提供して、エンコーディングの間の符号化パラメータを設定し及び変更する。具体的に、一般エンコーディング制御(520)は、エンコーディングの間にBV予測の態様(例えば、予測されたBV値を有するスキップモード、BV予測のためのマージモード)を使用するかどうかと如何にして使用するかとを決めることができる。一般エンコーディング制御(520)はさらに、エンコーディング、例えば、レート歪み分析を実行する間、中間結果を評価することができる。一般エンコーディング制御(520)は、エンコーディングの間に行われた判断を示す一般制御データ(522)を生成し、したがって、対応するデコーダが、一貫性のある判断を行うことができる。一般制御データ(522)は、ヘッダフォーマッタ(formatter)/エントロピー符号器(590)に提供される。
現在のピクチャがピクチャ間予測を用いて予測される場合、動き推定器(550)が、1つ以上の参照ピクチャに関して、入力ビデオ信号(505)の現在のピクチャのサンプル値のブロックの動きを推定する。デコード済みピクチャバッファ(570)が、1つ以上の再構成された事前に符号化されたピクチャを、参照ピクチャとしての使用のためにバッファする。複数の参照ピクチャが使用されるとき、この複数の参照ピクチャは、異なる時間方向又は同じ時間方向からであり得る。動き推定器(550)は、付帯情報として、動きデータ(552)、例えば、MVデータ、マージモードインデックス値、及び参照ピクチャ選択データなどを生成する。動きデータ(552)は、ヘッダフォーマッタ/エントロピー符号器(590)と動き補償器(555)とに対して提供される。
動き補償器(555)は、MVを、デコード済みピクチャバッファ(570)からの再構成された参照ピクチャに適用する。動き補償器(555)は、現在のピクチャの動き補償された予測を生成する。
エンコーダ(500)内の別個の経路において、ピクチャ内推定器(540)が、入力ビデオ信号(505)の現在のピクチャのサンプル値のブロックについて、ピクチャ内予測を如何にして実行するかを決定する。現在のピクチャは、ピクチャ内符号化を用いて、全体的に又は部分的に符号化されることが可能である。現在のピクチャの再構成(538)の値を用いて、イントラ空間予測について、ピクチャ内推定器(540)は、現在のピクチャの現在のブロックのサンプル値を、現在のピクチャについての近隣の事前に再構成されたサンプル値から如何にして空間的に予測するかを決定する。あるいは、BV値を用いるイントラBC予測について、ピクチャ内推定器(540)は、現在のピクチャ内の異なる候補領域に対する、現在のブロックのサンプル値の変位を推定する。
ピクチャ内推定器(540)は、付帯情報として、イントラ予測データ(542)、例えば、イントラ予測が空間予測又はイントラBC予測を使用するか(例えば、イントラブロックごとのフラグ値)、予測モード方向(イントラ空間予測のための)、及びBV値(イントラBC予測のための)を示す情報などを生成する。イントラ予測データ(542)は、ヘッダフォーマッタ/エントロピー符号器(590)とピクチャ内予測器(545)とに対して提供される。
イントラ予測データ(542)に従い、ピクチャ内予測器(545)は、現在のピクチャの現在のブロックのサンプル値を、現在のピクチャについての近隣の事前に再構成されたサンプル値から空間的に予測する。あるいは、イントラBC予測について、ピクチャ内予測器(545)は、現在のブロックのサンプル値を、フレーム内予測領域の事前に再構成されたサンプル値を用いて予測し、該フレーム内予測領域は、現在のブロックのBV値によって示される。いくつかの場合において(例えば、スキップモードブロック又はマージモードブロックのために)、BV値は、BV予測子(予測されたBV値)とすることができる。ピクチャのクロマデータが、ルマデータと同じ解像度を有するとき(例えば、フォーマットが、YUV4:4:4フォーマット又はRGB4:4:4フォーマットであるとき)、クロマブロックに適用されるBV値は、ルマブロックに適用されるBV値と同じであり得る。一方、ピクチャのクロマデータが、ルマデータに対して低減された解像度を有するとき(例えば、フォーマットが、YUV4:2:0フォーマットであるとき)、クロマブロックに適用されるBV値は、下方にスケール変更され(scaled)、可能性として丸められて、クロマ解像度における差に関して調整される(例えば、BV値の垂直及び水平の成分を2で除算することと、これらを整数値へと切り捨て又は丸めることとによって)。
イントラ/インタースイッチは、所与のブロックのための予測(558)としての使用のために、動き補償された予測又はピクチャ内予測の値を選択する。予測(558)のブロックと入力ビデオ信号(505)の元の現在のピクチャの対応する部分とにおける差が(もしあれば)、非スキップモードブロックについて、残差(518)の値を提供する。現在のピクチャの再構成の間、非スキップモードブロックについて、再構成された残差値は予測(558)と組み合わせられて、ビデオ信号(505)からの元のコンテンツの再構成(538)が生成される。しかしながら、不可逆圧縮において、いくつかの情報は、ビデオ信号(505)から依然として失われる。
変換器/スケーラ/量子化器(530)において、周波数変換器は、空間ドメインビデオ情報を周波数ドメイン(すなわち、スペクトルの、変換)データにコンバートする。ブロックベースのビデオ符号化について、周波数変換器は、離散コサイン変換(“DCT”)、その整数近似、又は別のタイプの前方ブロック変換(例えば、離散サイン変換又はその整数近似)を、予測残差データのブロック(又は、予測(558)がヌルである場合はサンプル値データ)に対して適用し、周波数変換係数のブロックを生成する。エンコーダ(500)はさらに、こうした変換ステップがスキップされることを示すことが可能であり得る。スケーラ/量子化器は、変換係数をスケール変更し、量子化する。例えば、量子化器は、デッドゾーンスケーラ量子化を、周波数ドメインデータに対して、フレーム単位基準、タイル単位基準、スライス単位基準、ブロック単位基準、周波数固有基準、又は他の基準で変動する量子化ステップサイズを用いて適用する。量子化された変換係数データ(532)は、ヘッダフォーマッタ/エントロピー符号器(590)に提供される。
スケーラ/逆変換器(535)において、スケーラ/逆量子化器は、量子化された変換係数に対して逆スケール変更及び逆量子化を実行する。逆周波数変換器が逆周波数変換を実行し、再構成された予測残差値又はサンプル値のブロックを生成する。非スキップモードブロックについて、エンコーダ(500)は、再構成された残差値を予測(558)の値(例えば、動き補償された予測値、ピクチャ内予測値)と組み合わせて、再構成(538)を形成する。スキップモードブロックについて、エンコーダ(500)は、予測(558)の値を再構成(538)として使用する。
ピクチャ内予測について、再構成(538)の値は、ピクチャ内推定器(540)及びピクチャ内予測器(545)にフィードバックされることができる。さらに、再構成(538)の値は、後のピクチャの動き補償された予測に使用されてもよい。再構成(538)の値は、さらにフィルタされてもよい。フィルタリング制御(560)が、ビデオ信号(505)の所与のピクチャについて、再構成(538)の値に対してデブロックフィルタリング及びSAOフィルタリングを如何にして実行するかを決定する。フィルタリング制御(560)はフィルタ制御データ(562)を生成し、これがヘッダフォーマッタ/エントロピー符号器(590)とマージ器/フィルタ(565)とに対して提供される。
マージ器/フィルタ(565)において、エンコーダ(500)は、異なるタイルからのコンテンツをピクチャの再構成されたバージョンにマージする。エンコーダ(500)は、デブロックフィルタリング及びSAOフィルタリングをフィルタ制御データ(562)に従って選択的に実行して、フレームの中の境界をわたる不連続性を適応的に滑らかにする。別法として、又はさらに、他のフィルタリング(例えば、デリンギングフィルタリング又はALFなど;図示されていない)が適用されてもよい。タイル境界は、エンコーダ(500)の設定に依存して、選択的にフィルタされ、あるいはまったくフィルタされないことが可能であり、エンコーダ(500)は、符号化されたビットストリーム内でシンタックスを提供して、上記のフィルタリングが適用されたか否かを示してもよい。デコード済みピクチャバッファ(570)は、再構成された現在のピクチャを、後の動き補償された予測における使用のためにバッファする。
ヘッダフォーマッタ/エントロピー符号器(590)は、一般制御データ(522)、量子化された変換係数データ(532)、イントラ予測データ(542)、動きデータ(522)、及びフィルタ制御データ(562)をフォーマットし、かつ/あるいはエントロピー符号化する。イントラ予測データ(542)について、ヘッダフォーマッタ/エントロピー符号器(590)は、例えば、コンテキスト適応バイナリ算術符号化を用いて、BV予測子インデックス値(イントラBC予測のための)を選択し、エントロピー符号化する。非スキップモード、非マージモードブロックについて、ヘッダフォーマッタ/エントロピー符号器(590)は、(BV値のBV予測子に相対した)BV値のBV差分を決定し、それから、例えば、コンテキスト適応バイナリ算術符号化を用いて、BV差分をエントロピー符号化する。スキップモードブロック又はマージモードブロックについて、BV差分は省略される。
ヘッダフォーマッタ/エントロピー符号器(590)は、符号化されたビデオビットストリーム(595)におけるエンコードされたデータを提供する。符号化されたビデオビットストリーム(595)のフォーマットは、HEVCフォーマット、Windows Media Videoフォーマット、VC‐1フォーマット、MPEG‐xフォーマット(例えば、MPEG‐1、MPEG‐2、又はMPEG‐4)、H.26xフォーマット(例えば、H.261、H.262、H.263、H.264)、又は別のフォーマットの、バリエーション又はエクステンションであり得る。
所望される実装及び圧縮のタイプに依存して、エンコーダのモジュールは、追加され、省略され、複数のモジュールに分割され、他のモジュールと組み合わせられ、かつ/あるいは同様のモジュールと置換されることができる。別の実施形態において、異なるモジュール及び/又はモジュールの他の構成を有するエンコーダが、所望される手法のうち1つ以上を実行する。エンコーダの具体的な実施形態は、典型的に、エンコーダ(500)のバリエーション又は補足されたバージョンを使用する。エンコーダ(500)内のモジュール間に示される関係はエンコーダにおける情報の一般的フローを示し、他の関係は簡潔さのために示されていない。
VI.例示的なビデオデコーダ
図6は、一般化されたデコーダ(600)のブロック図であり、デコーダ(600)と関連して、いくつかの説明される実施形態が実施され得る。デコーダ(600)は、符号化されたビットストリーム(605)におけるエンコードされたデータを受信し、再構成されたビデオ(695)のピクチャを含む出力を生成する。符号化されたビデオビットストリーム(605)のフォーマットは、HEVCフォーマット、Windows Media Videoフォーマット、VC‐1フォーマット、MPEG‐xフォーマット(例えば、MPEG‐1、MPEG‐2、又はMPEG‐4)、H.26xフォーマット(例えば、H.261、H.262、H.263、H.264)、又は別のフォーマットの、バリエーション又はエクステンションであり得る。
デコーダ(600)はブロックベースであり、実装に依存するブロックフォーマットを使用する。ブロックは、異なる段階においてさらに細分されてもよい。例えば、ピクチャが、64×64ブロック、32×32ブロック、又は16×16ブロックに分けられることが可能であり、次に上記ブロックが、サンプル値のより小さいブロックに分けられることが可能である。HEVC標準のデコーディングの実施において、ピクチャは、CTU(CTB)、CU(CB)、PU(PB)、及びTU(TB)に区分される。
デコーダ(600)は、ピクチャ内デコーディング及び/又はピクチャ間デコーディングを用いて、ピクチャを伸張する。デコーダ(600)のコンポーネントの多くは、ピクチャ内デコーディング及びピクチャ間デコーディングの双方に使用される。上記コンポーネントによって実行される正確な動作は、伸張される情報のタイプに依存して変動し得る。
バッファが、符号化されたビデオビットストリーム(605)におけるエンコードされたデータを受信し、受信したエンコードされたデータをパーサ/エントロピーデコーダ(610)に対して利用可能にする。パーサ/エントロピーデコーダ(610)は、典型的にはエンコーダ(500)において実行されたエントロピー符号化の逆のことを適用することによって(例えば、コンテキスト適応バイナリ算術デコーディング)、エントロピー符号化されたデータをエントロピーデコードする。パース及びエントロピーデコードの結果として、パーサ/エントロピーデコーダ(610)は、一般制御データ(622)、量子化された変換係数データ(632)、イントラ予測データ(642)、動きデータ(652)、及びフィルタ制御データ(662)を生成する。イントラ予測データ(642)について、パーサ/エントロピーデコーダ(610)は、(イントラBC予測のための)BV予測子インデックス値を、例えば、コンテキスト適応バイナリ算術デコーディングを用いて、エントロピーデコードする。非スキップモード、非マージモードブロックについて、パーサ/エントロピーデコーダ(610)は、(例えば、コンテキスト適応バイナリ算術デコーディングを用いて)BV値のBV差分をさらにエントロピーデコードし、それから、BV差分を対応するBV予測子と組み合わせて、BV値を再構成する。スキップモードブロック又はマージモードブロックについて、BV差分はビットストリームから省略され、BV値は単にBV予測子である(例えば、BV予測子インデックス値で示される)。
一般デコーディング制御(620)は一般制御データ(622)を受信し、制御信号(図示されていない)を他のモジュール(例えば、スケーラ/逆変換器(635)、ピクチャ内予測器(645)、動き補償器(655)、及びイントラ/インタースイッチ)に対して提供して、デコーディングの間のデコーディングパラメータを設定し及び変更する。
現在のピクチャがピクチャ間予測を用いて予測される場合、動き補償器(655)は、動きデータ(652)、例えば、MVデータ、参照ピクチャ選択データ、マージモードインデックス値などを受信する。動き補償器(655)は、MVを、デコード済みピクチャバッファ(670)からの再構成された参照ピクチャに適用する。動き補償器(655)は、現在のピクチャのインター符号化されたブロックについての動き補償された予測を生成する。デコード済みピクチャバッファ(670)は、1つ以上の事前に再構成されたピクチャを参照ピクチャとしての使用のために記憶する。
デコーダ(600)内の別の経路において、フレーム内予測予測器(645)が、イントラ予測データ(642)、例えば、イントラ予測が空間予測又はイントラBC予測を使用するか(例えば、イントラブロックごとのフラグ値)、予測モード方向(イントラ空間予測のための)、及びBV値(イントラBC予測のための)を示す情報などを受信する。イントラ空間予測について、現在のピクチャの再構成(638)の値を用いて、予測モードデータに従って、ピクチャ内予測器(645)は、現在のピクチャの現在のブロックのサンプル値を、現在のピクチャについての近隣の事前に再構成されたサンプル値から空間的に予測する。あるいは、BV値を用いるイントラBC予測について、ピクチャ内予測器(645)は、現在のブロックのサンプル値を、フレーム内予測領域の事前に再構成されたサンプル値を用いて予測し、該フレーム内予測領域は、現在のブロックのBV値によって示される。
イントラ/インタースイッチは、所与のブロックのための予測(658)としての使用のために、動き補償された予測又はピクチャ内予測の値を選択する。例えば、HEVCシンタックスが守られるとき、イントラ/インタースイッチは、イントラ予測されたCU及びインター予測されたCUを含み得るピクチャのCUのためにエンコードされたシンタックス要素に基づいて制御されることができる。非スキップモードブロックについて、デコーダ(600)は、予測(658)を再構成された残差値と組み合わせて、ビデオ信号からのコンテンツの再構成(638)を生成する。スキップモードブロックについて、デコーダ(600)は、予測(658)の値を再構成(638)として使用する。
非スキップモードブロックについて、残差を再構成するために、スケーラ/逆変換器(635)は、量子化された変換係数データ(632)を受信し、処理する。スケーラ/逆変換器(635)において、スケーラ/逆量子化器は、量子化された変換係数に対して逆スケール変更及び逆量子化を実行する。逆周波数変換器が逆周波数変換を実行し、再構成された予測残差値又はサンプル値のブロックを生成する。例えば、逆周波数変換器は逆ブロック変換を周波数変換係数に適用し、サンプル値データ又は予測残差データを生成する。逆周波数変換は、逆DCT、その整数近似、又は別のタイプの逆周波数変換(例えば、逆離散サイン変換又はその整数近似)であり得る。
ピクチャ内予測について、再構成(638)の値は、ピクチャ内予測器(645)に対してフィードバックされることができる。ピクチャ間予測について、再構成(638)の値はさらにフィルタされることができる。マージ器/フィルタ(665)において、デコーダ(600)は、異なるタイルからのコンテンツをピクチャの再構成されたバージョンにマージする。デコーダ(600)は、デブロックフィルタリング及びSAOフィルタリングを、フィルタ制御データ(662)及びフィルタ適応の規則に従って選択的に実行して、フレームの中の境界をわたる不連続性を適応的に滑らかにする。別法として、又はさらに、他のフィルタリング(例えば、デリンギングフィルタリング又はALFなど;図示されていない)が適用されてもよい。タイル境界は、デコーダ(600)の設定又はエンコードされたビットストリームデータ内のシンタックス指標に依存して、選択的にフィルタされ、あるいはまったくフィルタされないことが可能である。デコード済みピクチャバッファ(670)は、再構成された現在のピクチャを、後の動き補償された予測における使用のためにバッファする。
デコーダ(600)は、後処理(post-processing)フィルタをさらに含んでもよい。後処理フィルタ(608)は、デリンギングフィルタリング、適応ウィナー(Wiener)フィルタリング、フィルム粒子再現(film-grain reproduction)フィルタリング、SAOフィルタリング、又は別の種類のフィルタリングを含み得る。
所望される実装及び伸張のタイプに依存して、デコーダのモジュールは、追加され、省略され、複数のモジュールに分割され、他のモジュールと組み合わせられ、かつ/あるいは同様のモジュールと置換されることができる。別の実施形態において、異なるモジュール及び/又はモジュールの他の構成を有するデコーダが、所望される手法のうち1つ以上を実行する。デコーダの具体的な実施形態は、典型的に、デコーダ(600)のバリエーション又は補足されたバージョンを使用する。デコーダ(600)内のモジュール間に示される関係はデコーダにおける情報の一般的フローを示し、他の関係は簡潔さのために示されていない。
VII.ブロックベクトル予測におけるイノベーション
本セクションは、ブロックベクトル(“BV”)予測の様々な特徴を提示する。特徴のうちいくつかは、デフォルトBV予測子の使用に関し、特徴のうち別のものは、BV予測子のマージモード又はイントラブロックコピー(“BC”)予測のスキップモードに関する。こうした特徴が、レート歪み性能の観点においてより効率的であるイントラBC予測を容易にすることができる。
具体的に、説明されるイノベーションは、特定の「人工的に」作成されたビデオコンテンツ、例えば、スクリーンキャプチャコンテンツなどをエンコードするとき、レート歪み性能を向上させることができる。スクリーンキャプチャコンテンツは、繰り返される構造(例えば、グラフィクス、テキスト文字)を典型的に含み、このことは、イントラBC予測に関して性能を向上させる機会を提供する。スクリーンキャプチャコンテンツは、大抵、高いクロマサンプリング解像度を有するフォーマット(例えば、YUV4:4:4又はRGB4:4:4)においてエンコードされるが、さらに、より低いクロマサンプリング解像度(例えば、YUV4:2:0)を有するフォーマットにおいてエンコードされることもある。スクリーンキャプチャコンテンツのエンコーディング/デコーディングの一般的シナリオには、リモートデスクトップ会議、及び、自然のビデオ又は他の「ミックスされたコンテンツ」のビデオに対するグラフィカルなオーバーレイのエンコーディング/デコーディングが含まれる。
A.イントラBC予測モード、BV値、及びBV予測 ‐ 導入
イントラBC予測について、ピクチャの現在のブロックのサンプル値は、同じピクチャの中のサンプル値を用いて予測される。BVは、予測に使用されるサンプル値を含むピクチャの領域に対する、現在のブロックからの変位を示す。予測に使用されるサンプル値は、事前に再構成されたサンプル値である。BV値は、ビットストリームの中で信号伝達されることが可能であり、デコーダは、このBV値を使用して、予測に使用するためのピクチャの領域を決定することができ、これもまた、デコーダにおいて再構成される。イントラBC予測は、ピクチャ内予測(intra-picture prediction)の一形式であり、ピクチャのブロックのためのイントラBC予測は、同じピクチャの中のサンプル値以外のいかなるサンプル値も使用しない。
図7aは、現在のフレーム(710)の現在のブロック(760)についてのイントラBC予測を例示する。現在のブロックは、符号化ユニット(“CU”)の符号化ブロック(“CB”)、予測ユニット(“PU”)の予測ブロック(“PB”)、変換ユニット(“TU”)の変換ブロック(“TB”)、又は他のブロックであり得る。現在のブロックのサイズは、64×64、32×32、16×16、8×8、又は何らかの他のサイズであり得る。より一般的に、現在のブロックのサイズはm×nであり、これにおいて、m及びnの各々は自然数であり、m及びnは互いに等しくてもよく、あるいは異なる値を有してもよい。別法として、現在のブロックは、何らかの他の形状(例えば、非長方形の形状を有する符号化されたビデオオブジェクトのエリア)を有してもよい。
BV(761)は、現在のブロック(760)からの、予測に使用されるサンプル値を含むピクチャの領域(762)に対する変位(又は、オフセット)を示す。BV(761)によって示されるフレーム内予測領域(762)は、現在のブロック(760)のための「マッチングブロック」と称されることがある。マッチングブロックは、現在のブロック(760)と同一であってもよく、あるいは、現在のブロック(760)の近似であってもよい。現在のブロックの左上位置が現在のフレームにおける位置(x,y)にあると仮定し、フレーム内予測領域の左上位置が現在のフレームにおける位置(x,y)にあると仮定する。BVは、変位(x−x,y−y)を示す。例えば、現在のブロックの左上位置が位置(256,128)にあり、フレーム内予測領域の左上位置が位置(176,104)にある場合、BV値は(−80,−24)である。上記の例において、負の水平の変位は現在のブロックの左に対する位置を示し、負の垂直の変位は現在のブロックの上の位置を示す。
イントラBC予測は、BC動作を用いて冗長性(例えば、フレームの内側の繰り返されるパターンなど)を活用することによって符号化効率を向上させることができる。現在のブロックのサンプル値は、現在のブロックのサンプル値を直接エンコードすることに代わって、BV値を用いて表現される。現在のブロックのサンプル値が、BV値で示されるフレーム内予測領域のサンプル値に正確にマッチしないとしても、その差は無視可能である(知覚的に目立たない)可能性がある。あるいは、差が有意である(significant)場合、該差は、現在のブロックの元のサンプル値より効率的に圧縮されることが可能な残差値としてエンコードされることができる。
集合的に、イントラBC予測を用いてエンコードされるブロックのBV値は、相当数のビットを消費する可能性がある。BV値は、ビットレートを低減させるようにエントロピーエンコードされることができる。BV値のためのビットレートをさらに低減させるために、エンコーダは、BV値の予測を使用することができる。BV値は、冗長性をしばしば見せる。所与のブロックのためのBV値は、ピクチャの中の前のブロックのBV値としばしば類似し、あるいは同じでありさえする。BV予測について、所与のブロックのためのBV値は、BV予測子を用いて予測される。それから、所与のブロックのためのBV値とBV予測子とにおける差(又は、BV差分)がエントロピー符号化される。典型的には、BV差分は、BV値の水平及び垂直の成分とBV予測子とについて計算される。BV予測がうまく働くとき、BV差分は、効率的なエントロピー符号化をサポートする確率分布を有する。HEVC標準(JCTVC−O1005)の現在のドラフトバージョンにおいて、BV予測子は、現在のCTU内の最後の符号化されたCUのBV値(すなわち、現在のCTU内の前のイントラBC予測されたブロックのBV値)である。
図7bは、フレームの中の現在のブロック(760)のBV(761)と、フレーム(710)の中の前のブロック(750)のBV(751)を示す。前のブロック(750)のBV(751)は、現在のブロック(760)のBV(761)のためのBV予測子として使用される。例えば、BV値が(−80,−24)であり、BV予測子が(−80,−32)である場合、(0,8)のBV差分がエントロピー符号化される。
デコーダは、BV値のためのエントロピー符号化されたBV差分を受信し、エントロピーデコードする。デコーダは、さらに、BV値のためのBV予測子を決定する。デコーダによって決定されるBV予測子は、エンコーダによって決定されるBV予測子と同じである。デコーダは、BV予測子とデコードされたBV差分とを組み合わせて、BV値を再構成する。
HEVC標準(JCTVC−O1005_v3)の現在のドラフトバージョンにおいて、実際のBV値に基づくBV予測子は、いくつかの状況において利用可能でない。例えば、前の実際のBV値は、所与のCTUにおける最初のイントラBC予測されたブロックに対して利用可能でない。前の実際のBV値がBV予測子に利用可能でないとき(図7cに示されるとおり)、(0,0)のデフォルト値がBV予測子として使用される。実質上、このことは、CTUにおける前のイントラBC予測されたブロックについて利用可能であるBV値がないときに、BV予測がスキップされることを意味する。
B.非ゼロ成分を有するデフォルトBV予測子
本明細書に説明されるイノベーションの一態様に従い、前の実際のBV値が、現在のブロックのBV値のためのBV予測子としての使用に利用可能でないとき、エンコーダ及びデコーダは、非ゼロ成分を有するデフォルトBV予測子を使用する。ゼロ値デフォルトBV予測子と比べて、非ゼロ成分を有するデフォルトBV予測子は、現在のブロックのBV値により近くなる傾向があり、このことは、BV差分についてのより効率的なエントロピー符号化を結果としてもたらす。さらに、非ゼロ値を有するデフォルトBV予測子は、BV予測のためのスキップモード又はマージモードに使用可能なオプションを提供することができる。
1.例示的なデフォルトBV予測子
図7dに示されるとおり、現在のブロック(760)のBV値(761)について、デフォルトBV予測子(763)は、非ゼロ水平成分を有することができる。例えば、デフォルトBV予測子は水平ベクトル(BVx,0)である。水平BV成分BVxの値は、固定された非ゼロ値とすることができる。あるいは、BVxの値は、現在のブロックの幅であってもよく、これは、現在のブロックと参照領域とにおけるオーバーラップを回避する水平BV成分BVxの最小値である。
例えば、現在のブロックが幅W及び高さHを有するCUのCBであるとき、デフォルトBV予測子の水平BV成分BVxの値は、CUの幅Wに等しい負のオフセットであってもよい。すなわち、デフォルトBV予測子は(−W,0)とすることができる。デフォルトBV予測子(BVx,0)は、(前のブロックの実際のBV値に基づく)通常のBV予測子(BVx,0)が利用不能であるときいつでも、使用されることが可能である。あるいは、デフォルトBV予測子(BVx,0)は、現在のブロックのBV値に依存して条件付きで使用されてもよい。例えば、現在のブロックのBV値の垂直BV成分が−Hより小さい場合、デフォルトBV予測子は(−W,0)である。そうでない場合(現在のブロックのBV値の垂直BV成分が−Hより小さくない)、デフォルトBV予測子は(0,0)である。上記条件は、現在のブロックのBV値が有意な垂直BV成分を有するとき、(−W,0)のデフォルトBV予測子が適用されないことを確保する。別法として、非ゼロデフォルトBV予測子(BVx,0)は、別の条件に従って条件付きで適用される。
−Wの負のオフセットを有することに代わって、デフォルトBV予測子は、別の負のオフセットを有してもよい。例えば、デフォルトBV予測子は(−2*W,0)とすることができる。
別法として、デフォルトBV予測子は、垂直ベクトル(0,BVy)である。垂直BV成分BVyの値は固定された非ゼロ値であってもよく、あるいは、BVyの値は現在のブロックの高さであってもよく、これは現在のブロックと参照領域とにおけるオーバーラップを回避するBVyの最小値である。例えば、現在のブロックが幅W及び高さHを有するCUのCBであるとき、デフォルトBV予測子は(0,−H)とすることができる。デフォルトBV予測子(0,BVy)は、通常のBV予測子が利用不能であるときいつでも、使用されることが可能であり、あるいは、デフォルトBV予測子(0,BVy)は、現在のブロックのBV値に依存して条件付きで使用されてもよい。
別法として、デフォルトBV予測子は、非ゼロ水平成分及び非ゼロ垂直成分を有してもよい。
2.デフォルトBV予測子を用いた例示的なエンコーディング
図8は、エンコーディングの間に非ゼロ成分を有するデフォルトBV予測子を使用する一般化された手法(800)を示す。画像エンコーダ又はビデオエンコーダ、例えば、図3又は図5a〜図5bを参照して説明されるものなどが、手法(800)を実行することができる。
エンコーダは、ピクチャの現在のブロックのためのデフォルトBV予測子を決定する(830)。例えば、HEVC実装において、現在のブロックは、符号化ツリーユニットの符号化ユニットの一部である。デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む。例えば、非ゼロ値を有するBV予測子成分は、水平BV成分である。実装に依存して、非ゼロ水平BV成分は、固定値(現在のブロックのサイズから独立した)、現在のブロックの幅に等しい値、又は何らかの他の非ゼロ値を有することができる。あるいは、非ゼロ値を有するBV予測子成分は、垂直BV成分である。実装に依存して、非ゼロ垂直BV成分は、固定値(現在のブロックのサイズから独立した)、現在のブロックの高さに等しい値、又は何らかの他の非ゼロ値を有することができる。あるいは、デフォルトBV予測子は、非ゼロ水平BV成分及び非ゼロ垂直BV成分を含むことができる。デフォルトBV予測子は、セクションCに説明されるとおりのスキップモードのため、又はセクションDに説明されるとおりのマージモードのために組み立てられた(assembled)複数のBV予測子候補のセットの一部とすることができる。
エンコーダは、デフォルトBV予測子を用いて現在のブロックをエンコードする(850)。例えば、エンコーダは、(a)現在のブロックのためのBV値を用いてイントラBC予測を実行し、(b)現在のブロックのためのBV値とデフォルトBV予測子とを用いてBV差分を決定し、(c)BV差分をエンコードする。別法として、エンコーダは、デフォルトBV予測子を用いてイントラBC予測を単に実行する。
図9は、エンコーディングの間に非ゼロ成分を有するデフォルトBV予測子を使用する、より詳細化された例示的な手法(900)を示す。画像エンコーダ又はビデオエンコーダ、例えば、図3又は図5a〜図5bを参照して説明されるものなどが、手法(900)を実行することができる。
始め、エンコーダは、ピクチャの現在のブロックのためのBV値を識別する(910)。エンコーダは、任意の形式のBV推定を使用して、現在のブロックのためのBV値を識別することができる。HEVC実装において、現在のブロックは、符号化ツリーユニットの符号化ユニットの一部である。
エンコーダは、実際のBV値がBV予測子としての使用に利用可能であるかどうかをチェックする(920)。例えば、エンコーダは、ピクチャの前のブロックのための実際のBV値が利用可能であるかどうかをチェックする。HEVC実装において、前のブロックのための実際のBV値は、(1)前のブロックと現在のブロックとが同じCTUの一部であり、(2)前のブロックの予測モードがイントラBC予測モードである場合、利用可能である。前のブロックのための実際のBV値は、例えば、所与のCTUの最初のイントラBC予測されたブロックについて、利用可能でない。
実際のBVが、BV予測子としての使用に利用可能である場合、エンコーダは、BV予測子として実際のBVを使用する(940)。一方、いずれの前のブロックのための実際のBVも、BV予測子としての使用に利用可能でない場合、エンコーダは、現在のブロックのためのデフォルトBV予測子を決定する(930)。デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む。例えば、デフォルトBV予測子は、図8の動作(830)に関して上記で説明されたとおり、決定される。
エンコーダは、現在のブロックのためのBV値とBV予測子とにおけるBV差分を決定する(950)。エンコーダは、BV差分をエントロピー符号化する(960)。
3.デフォルトBV予測子を用いた例示的なデコーディング
図10は、デコーディングの間に非ゼロ成分を有するデフォルトBV予測子を使用する一般化された手法(1000)を示す。画像デコーダ又はビデオデコーダ、例えば、図4又は図6を参照して説明されるものなどが、手法(1000)を実行することができる。
デコーダは、ピクチャの現在のブロックのためのデフォルトBV予測子を決定する(1030)。例えば、HEVC実装において、現在のブロックは、符号化ツリーユニットの符号化ユニットの一部である。デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む。例えば、非ゼロ値を有するBV予測子成分は、水平BV成分である。実装に依存して、非ゼロ水平BV成分は、固定値(現在のブロックのサイズから独立した)、現在のブロックの幅に等しい値、又は何らかの他の非ゼロ値を有することができる。あるいは、非ゼロ値を有するBV予測子成分は、垂直BV成分である。実装に依存して、非ゼロ垂直BV成分は、固定値(現在のブロックのサイズから独立した)、現在のブロックの高さに等しい値、又は何らかの他の非ゼロ値を有することができる。あるいは、デフォルトBV予測子は、非ゼロ水平BV成分及び非ゼロ垂直BV成分を含むことができる。デフォルトBV予測子は、セクションCに説明されるとおりのスキップモードのため、又はセクションDに説明されるとおりのマージモードのために組み立てられた複数のBV予測子候補のセットの一部とすることができる。
デコーダは、デフォルトBV予測子を用いて現在のブロックをデコードする(1050)。例えば、デコーダは、(a)現在のブロックのためのBV差分をデコードし、(b)デコードされたBV差分をデフォルトBV予測子と組み合わせて現在のブロックのためのBV値を再構成し、(c)現在のブロックのためのBV値を用いてイントラBC予測を実行する。別法として、デコーダは、デフォルトBV予測子を用いてイントラBC予測を単に実行する。
図11は、デコーディングの間に非ゼロ成分を有するデフォルトBV予測子を使用する、より詳細化された例示的な手法(1100)を示す。画像デコーダ又はビデオデコーダ、例えば、図4又は図6を参照して説明されるものなどが、手法(1100)を実行することができる。
デコーダは、実際のBVが、ピクチャの現在のブロックのBV値のためのBV予測子としての使用に利用可能であるかどうかをチェックする(1120)。例えば、デコーダは、ピクチャの前のブロックのための実際のBV値が利用可能であるかどうかをチェックする。HEVC実装において、前のブロックの実際のBV値は、(1)前のブロックと現在のブロックとが同じCTUの一部であり、(2)前のブロックの予測モードがイントラBC予測モードである場合、利用可能である。前のブロックのための実際のBV値は、例えば、所与のCTUの最初のイントラBC予測されたブロックについて、利用可能でない。
実際のBVが、BV予測子としての使用に利用可能である場合、デコーダは、BV予測子として実際のBVを使用する(1140)。一方、いかなる前のブロックのための実際のBVもBV予測子としての使用に利用可能でない場合、デコーダは、現在のブロックのためのデフォルトBV予測子を決定する(1130)。デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む。例えば、デフォルトBV予測子は、図10の動作(1030)に関連して上記で説明されたとおり、決定される。
デコーダはさらに、現在のブロックのためのBV差分をエントロピーデコードする(1150)。それから、デコーダは、BV差分をBV予測子と組み合わせて(1160)、現在のブロックのためのBV値を再構成する。
4.代替物及びバリエーション
上記で説明されたデフォルトBV予測子の例において、デフォルトBV予測子の値は、現在のブロックの場所に依存して制約されない。別法として、デフォルトBV予測子の値は、現在のブロックの場所に依存して制約されてもよい。例えば、現在のブロックがピクチャの端部にあり、したがってデフォルトBV予測子がピクチャの外側の場所を指し示すことになる場合、デフォルトBV予測子はピクチャ内の場所を指し示すように制約され、あるいは、(0,0)BV予測子が使用される。あるいは、別の例として、BV値がCTUの何らかのセット(例えば、現在のCTU及び前のCTU)の中の場所を参照するように制約されるHEVC実装について、デフォルトBV予測子は、CTUの上記セット内の場所を参照するように制約される。あるいは、別の例として、ピクチャが複数のタイル又は複数のスライスを含むHEVC実装について、BV値(及び、デフォルトBV予測子)は、現在のタイル(及び/又は現在のスライス)を用いてある場所を参照するように制約されてもよい。
上記で説明されたデフォルトBV予測子の例において、デフォルトBV予測子の値は、現在のブロックの場所に依存して切り替わらない。別法として、デフォルトBV予測子の値は、現在のブロックの場所に依存して切り替わることができる。例えば、現在のブロックが、ピクチャ(又は、使用される場合、タイル、若しくはスライス)の左端を除くどこかにある場合、デフォルトBV予測子は、水平BV予測子(BVx,0)である。現在のブロックがピクチャ(又は、使用される場合、タイル、若しくはスライス)の左端にあり、あるいは、デフォルト水平BV予測子がその他の方法でピクチャ(又は、使用される場合、タイル、若しくはスライス)の外側の場所を参照することになる場合、デフォルトBV予測子は、垂直BV予測子(0,BVy)である。そして、現在のブロックがピクチャ(又は、使用される場合、タイル、若しくはスライス)の左上角にあり、あるいは、デフォルト水平BV予測子及び垂直BV予測子がその他の方法でピクチャ(又は、使用される場合、タイル、若しくはスライス)の外側の場所を参照することになる場合、デフォルトBV予測子は、(0,0)BV予測子である。
C.イントラBV予測のスキップモード
本明細書に説明されるイノベーションの別の態様に従い、エンコーダ及びデコーダは、特定のイントラBC予測されたブロックについて、スキップモードを使用する。スキップモードにおいて、イントラBC予測されたブロックは、予測されたBV値を使用し、ビットストリームの中に残差データを有さない。いくつかのシナリオにおいて、イントラBC予測されたブロックに対するスキップモードの使用は、レート歪み効率をかなり向上させることができる。
一般に、エンコーダは、現在のイントラBC予測されたブロックについて、スキップモードをいつ使用すべきかを決める。エンコーダは、イントラBC予測された領域が現在のブロックとどれほど近くマッチするかに基づいて、残差値の知覚的な重要さに基づいて、残差値のエンコーディングに利用可能なビットレートに基づいて、及び/又は他のファクタに基づいて、スキップモードを使用することを決めることができる。エンコーダは、エンコーディング速度が制約である特定のエンコーディングモード、例えば、リアルタイムエンコーディングにおいて、イントラBC予測されたブロックのスキップモードをより好むことができる。
図12は、イントラBC予測されたブロックに対するスキップモードを含むエンコーディングの一般化された手法(1200)を示す。画像エンコーダ又はビデオエンコーダ、例えば、図3又は図5a〜図5bを参照して説明されるものなどが、手法(1200)を実行することができる。
ピクチャの現在のブロックについて、現在のブロックが、スキップモードにおいてエンコードされた、イントラBC予測されたブロックである場合、エンコーダは、BV予測を使用して(1210)現在のブロックのためのBV値を決定する。現在のブロックのためのBV値は、ピクチャ内の領域に対する変位を示す。BV予測は、マージモード予測、最後に符号化されたイントラBC予測されたブロックのBV値を用いた予測、近隣のイントラBC予測されたブロックのBV値の成分観点での中央値を用いた予測、又は何らかの他の形式のBV予測を含むことができる。現在のブロックは、例えば、CTUのCUの一部である。
エンコーダは、BV値(ここでは、予測されたBV値)と共にイントラBC予測を用いて現在のブロックをエンコードする(1220)。エンコーダは、ビットストリーム内に、現在のブロックがスキップモードにおいてエンコードされているとの指標を出力する。ブロックがスキップモードにおいてエンコードされるので、ビットストリームは、現在のブロックのためのBV差分及び残差データを欠く。しかしながら、ビットストリームは、現在のブロックのためのBV値として使用するための、複数のBV予測子候補のセットからの、BV予測子候補の選択を示すインデックス値を含むことができる。例えば、複数のBV予測子候補のセットが2つのBV予測子候補を有するとき、インデックス値はフラグ値である。あるいは、複数のBV予測子候補のセットが3つ以上のBV予測子候補を有するとき、インデックス値は整数値である。インデックス値は、例えば算術符号化を用いて、エントロピー符号化されることができる。
図13は、イントラBC予測されたブロックに対するスキップモードを含むデコーディングの一般化された手法(1300)を示す。画像デコーダ又はビデオデコーダ、例えば、図4又は図6を参照して説明されるものなどが、手法(1300)を実行することができる。
ピクチャの現在のブロックについて、現在のブロックが、スキップモードにおいてエンコードされた、イントラBC予測されたブロックである場合、デコーダは、ビットストリームから、現在のブロックがスキップモードにおいてエンコードされているとの指標を受信する。ブロックがスキップモードにおいてエンコードされているので、ビットストリームは、現在のブロックのためのBV差分及び残差データを欠く。しかしながら、上記で説明されたとおり、ビットストリームは、現在のブロックのBV値として使用するための、複数のBV予測子候補のセットからの、BV予測子候補の選択を示すインデックス値を含むことができる。現在のブロックは、例えば、CTUのCUの一部である。
デコーダは、BV予測を使用して(1320)現在のブロックのためのBV値を決定する。BV予測は、エンコーダにおいて実行されるBV予測を一般に反映する。BV予測は、マージモード予測、最後に符号化されたイントラBC予測されたブロックのBV値を用いた予測、近隣のイントラBC予測されたブロックのBV値の成分観点での中央値を用いた予測、又は何らかの他の形式のBV予測を含むことができる。デコーダは、BV値(ここでは、予測されたBV値)と共にイントラBC予測を用いて現在のブロックをデコードする(1330)。
D.BV予測のマージモード
本明細書に説明されるイノベーションの別の態様に従い、エンコーダ及びデコーダは、BV予測について、マージモードを使用する。マージモードは、BV予測の品質をかなり向上させることができ、このことが今度は、ビットストリーム内でBV差分によって消費されるビットの量を低減させる。
マージモードについて、ブロックのためのBV予測子を決定するとき、エンコーダは、BV予測子候補のセットを組み立て、ブロックのBV予測子として使用するための、BV予測子候補うち1つを選択し、選択されたBV予測子候補を示すインデックス値をビットストリーム内で信号伝達する。デコーダは、BV予測子候補のセットを組み立て、信号伝達されたインデックス値に基づいて、ブロックのBV予測子として使用するための、BV予測子候補のうち1つを選択する。インデックス値はビットストリーム内のビットを消費するが、マージモードはBV予測をかなり向上させ、ゆえにBV差分によって消費されるビットを低減させて、ビットレートにおける全体的な低減を結果としてもたらすことが可能である。
例示的な実装において、BV予測に対するマージモードは、イントラBC予測されたブロックに対するスキップモードとの組み合わせにおいて使用される。別法として、BV予測に対するマージモードは、スキップモードがイントラBC予測されたブロックに対して有効にされない場合でさえ、使用されることが可能である。
1.例示的なBV予測子候補及びインデックス値
マージモードにおいてブロックのためのBV予測子を決定するとき、エンコーダ又はデコーダは、BV予測子候補のセットを組み立てる。BV予測子候補のセットの組成は実装に依存し、しかし、エンコーダ側とデコーダ側とにおいて同じである。
1つのアプローチにおいて、BV予測子候補は、ピクチャ内の事前に符号化されたブロックの実際のBV値の中から組み立てられる。一般に、エンコーダ及びデコーダは、ピクチャ内の前のブロックの、最大x個の実際のBV値を決定する。前のブロックは、ピクチャ内の事前に符号化されたイントラBC予測されたブロックである。具体的に、これらは、デコーディング順序において現在のブロックより早い、x個の最も近いイントラBC予測されたブロックである。xの値は実装に依存し、例えば、2、3、4、5、又は何らかの他の数とすることができる。より多くのBV予測子候補を使用することは、インデックス値のためのビットレートを増加させるが、BV予測の品質を向上させる傾向があり、このことが今度は、BV差分によって消費されるビットを低減させる。
前のイントラBC予測されたブロックは、現在のブロックの近隣である必要はない。実際のBV値を有する、xより少ない前のブロックが利用可能である場合、BV予測子のセットは、xより少ないBV予測子候補を含むことができる。
図14は、上記アプローチの一例を示す。図14において、3つの前のイントラBC予測されたブロック(1430、1440、1450)の3つのBV値(1431、1441、1451)が、現在のフレーム(1410)の現在のブロック(1460)のBV予測子に対するマージモードのためのBV予測子候補を提供する。前のブロック(1430、1440、1450)は図14の例において連続的であるが、前のブロックは連続的である必要はない(すなわち、BV予測子候補を提供する、前のイントラBC予測されたブロックは、ピクチャの中の他のイントラBC予測されていないブロックによって分離されることが可能である)。
BV予測子候補のセットは、1つ以上のデフォルトBV予測子をさらに含むことができる。図14の例において、BV予測子候補のセットは、水平変位を有するデフォルトBV予測子(BVx,0)と垂直変位を有するデフォルトBV予測子(0,BVy)とを含む。具体的に、水平変位及び垂直変位を有するデフォルトBV予測子は、純粋な水平又は垂直方向に一般に続く、テキストコンテンツに有用である傾向がある。
マージモードインデックス値は、それぞれのBV予測子候補に関連付けられる。典型的に、より小さいインデックス値は、選択される可能性がより大きいBV予測子候補に関連付けられ、より大きいインデックス値は、選択される可能性がより小さいBV予測子候補に関連付けられ、このことは、エントロピー符号化の後、インデックス値のビットレートを低減させる傾向がある。図14において、インデックス値idx0...idx4は、予期される選択の見込みに従って、BV値(1451、1441、1431)及びデフォルトBV予測子を有するBV予測子候補に割り当てられる。
例えば、いくつかの実施において、事前に符号化されたブロックについての2つの実際のBV値が、BV予測子候補BVcand0及びBVcand1として記憶される。新しいBV値が使用された後、より古いBV予測子候補BVcand1が、より新しいBV予測子候補BVcand0で置換され、より新しいBV予測子候補BVcand0は、ちょうど使用されたBV値で置換される。エンコーダ側において、現在のブロックについて、エンコーダは、BV予測子として使用するための、BVcand0及びBVcand1のうち1つを選択する。マージモードインデックス値として、エンコーダは、BVcand0及びBVcand1のうちいずれの1つがエンコーダにより使用されており、デコーダにより使用されるべきであるかを示すフラグ値を信号伝達する。デコーダ側において、デコーダはフラグ値を受信し、パースし、フラグ値に基づいて、ブロックのBV予測子として使用するための、BVcand0及びBVcand1のうち1つを選択する。上記アプローチにおいて、エンコーダ及びデコーダは各々、2つのBV予測子候補BVcand0及びBVcand1を記憶し、更新する。
別の例として、いくつかの他の実施において、事前に符号化されたブロックの1つの実際のBV値が、第1のBV予測子候補BVcand0として記憶され、デフォルトBV予測子が、第2のBV予測子候補BVcand1として記憶される。例えば、デフォルトBV予測子は(BVx,0)であり、ここで、BVxは、現在のブロックの幅Wに等しい負のオフセットであるか、あるいは何らかの他の非ゼロ値を有することが可能である。新しいBV値が使用された後、第1のBV予測子候補BVcand0は、ちょうど使用されたBV値で置換され、しかし、第2のBV予測子候補BVcand1は、変更されない。エンコーダ側において、現在のブロックについて、エンコーダは、BV予測子として使用するための、BVcand0及びBVcand1のうち1つを選択する。エンコーダは、BVcand0及びBVcand1のうちいずれの1つがエンコーダにより使用されており、デコーダにより使用されるべきであるかを示すフラグ値を信号伝達する。デコーダは、フラグ値を受信し、パースし、フラグ値に基づいて、ブロックのBV予測子として使用するための、BVcand0及びBVcand1のうち1つを選択する。上記アプローチにおいて、エンコーダ及びデコーダは各々、2つのBV予測子候補BVcand0及びBVcand1を記憶し、第1のBV予測子候補BVcand0は、エンコーディング又はデコーディングの間に更新される。
別のアプローチにおいて、BV予測子候補は、ピクチャ内の現在のブロックの近くにある事前に符号化されたブロックの実際のBV値の中から組み立てられる。エンコーダ及びデコーダは、近隣ブロックの、最大でx個の実際のBV値を決定する。近隣のブロックは、現在のブロックの左、現在のブロックの上、現在のブロックの右上などに対するピクチャ内の事前に符号化されたイントラBC予測されたブロックである。xの値は実装に依存し、例えば、2、3、4、5、又は何らかの他の数とすることができる。実際のBV値を有する、xより少ない近隣ブロックが利用可能である場合、BV予測子候補のセットは、xより少ないBV予測子候補を含むことができる。
図15は、上記アプローチの一例を示す。図15において、3つの近隣のイントラBC予測されたブロック(1530、1540、1550)の3つのBV値(1531、1541、1551)が、現在のフレーム(1510)の現在のブロック(1560)のBV予測子に対するマージモードのためのBV予測子候補を提供する。近隣のブロックのうち1つが利用可能でない場合(例えば、イントラBC予測されたブロックでない、あるいは、ピクチャ、タイル、又はスライスの外側である)、いくつかの場合において、別の近隣のブロックが追加されることが可能である(例えば、現在のブロックの左上に対するブロック)。図15に示されるとおり、BV予測子候補のセットは、1つ以上のデフォルトBV予測子を含むことができる(例えば、水平変位を有するデフォルトBV予測子(BVx,0)、及び垂直変位を有するデフォルトBV予測子(0,BVy)など)。図15において、インデックス値idx0....idx4は、予期される選択の見込みに従って、BV値(1541、1531、1551)及びデフォルトBV予測子を有するBV予測子候補に割り当てられる。
BV予測子候補間における冗長値の扱いは、実装に依存する。いくつかの実装において、マージモードのためのBV予測子候補のセットは、冗長値を含むことができる。すなわち、冗長なBV予測子が、除去又は置換されない。別の実装において、マージモードのためのBV予測子のセットを組み立てるとき、エンコーダ及びデコーダは、冗長なBV予測子値をセットに追加しない。このアプローチは、BV予測子候補のより小さいセットを結果としてもたらすことが可能であり、符号化されたインデックス値のビットレートを低減させることができる。さらに別の実装において、マージモードのためのBV予測子候補のセットを組み立てるとき、エンコーダ及びデコーダは、すでにセット内にあるBV予測子候補に対して冗長であることになるBV予測子候補を、異なるBV予測子候補(例えば、別の事前に符号化されたイントラBC予測されたブロックからの、別の近隣のイントラBC予測されたブロックからの、別のデフォルトBC予測子オプションからの)で置換する。例えば、第3の前のイントラBC予測されたブロックのBV値が、第1の前のイントラBC予測されたブロック又は第2の前のイントラBC予測されたブロックのBV値と同じである場合、エンコーダ/デコーダは、代わって、第4の前のイントラBC予測されたブロックのBV値をBV予測子候補のセットに追加する。このBV値が冗長であることになる場合、エンコーダ/デコーダは、代わって、第5、第6等の前のイントラBC予測されたブロックのBV値を追加する。あるいは、エンコーダ/デコーダは、別のデフォルトBV予測子を追加する。
2.選択されたBV予測子を用いた例示的なエンコーディング
図16aは、BV予測に対するマージモードを含むエンコーディングの一般化された手法(1600)を示す。画像エンコーダ又はビデオエンコーダ、例えば、図3又は図5a〜図5bを参照して説明されるものなどが、手法(1600)を実行することができる。
始め、エンコーダは、ピクチャの現在のイントラBC予測されたブロックのための複数のBC予測子候補のセットを決定する(1610)。現在のブロックは、例えば、CTUのCUの一部である。エンコーダは、図14及び図15を参照して説明されたアプローチのうち1つを用いて、又は別のアプローチを用いて、BV予測子候補のセットを決定することができる。一般に、BV予測子候補は、それぞれ、前のブロックについての最大x個の実際のBV値を含むことができ、ここで、xは実装に依存する(例えば、xは、2、3、4、5、又は何らかの他の数である)。x個の前のブロックは、現在のブロックの周りの近隣(neighborhood)における場所(例えば、図15を参照)及び/又は現在のブロックと比較したデコーディング順序(例えば、図14を参照)に少なくとも部分的に基づいて識別されることができる。BV予測子候補は、1つ以上のデフォルトBV予測子(例えば、各々が、非ゼロ値を有するBV予測子成分を有する)をさらに含むことができる。
エンコーダは、現在のイントラBC予測されたブロックに使用するための、複数のBV予測子候補のうち1つを選択する(1620)。例えば、現在のブロックが、選択されたBV予測子候補と共にイントラBC予測を用いてエンコードされることになるとき、エンコーダは、参照されるイントラ予測領域が何らかのメトリック(例えば、絶対差の和、平均二乗誤差)によって現在のブロックに最も近くマッチするためのBV予測子候補を選択する。あるいは、現在のブロックが、イントラBC予測に使用されることになるBV値(BV推定を通して識別される)を有するとき、エンコーダは、現在のブロックのためのBV値に最も近くマッチするBV予測子候補を選択する。上記選択は、最小のBV差分を結果としてもたらし、このことは、エントロピー符号化の効率を向上させる傾向がある。
エンコーダは、選択されたBV予測子候補を用いて、現在のイントラBC予測されたブロックをエンコードする(1630)。図16bは、例示的な実装における現在のブロックのエンコーディング(1630)の詳細を示す。エンコーダは、現在のブロックがスキップモードにおいてエンコードされているかどうかをチェックする(1632)。そうである場合、エンコーダは、選択されたBV予測子と共にイントラBC予測を用い、しかしいかなる残差データも用いずに、現在のブロックをエンコードする(1633)。そうでない場合(スキップモードでない)、エンコーダは、現在のブロックがマージモードにおいてエンコードされているかどうかをチェックする(1634)。そうである場合、エンコーダは、選択されたBV予測子と共にイントラBC予測を用いて現在のブロックをエンコードする(1635)。マージモードにおいて、エンコーダは、現在のブロックのための残差データを場合によりエンコードする。そうでない場合(マージモードでない)、エンコーダは、現在のブロックのためのBV値と共にイントラBC予測を用いて現在のブロックをエンコードし(1637)、場合により、現在のブロックのための残差データをエンコードする。
エンコーダは、選択されたBV予測子候補を示すインデックス値をビットストリーム内に出力する(1640)。BV予測子候補のセットが2つのBV予測子候補を含むとき、インデックス値はフラグとすることができる。あるいは、3つ以上のBV予測子候補が存在するとき、インデックス値は整数値とすることができる。インデックス値はエントロピー符号化され、あるいは固定長値として信号伝達されることが可能である。イントラBC予測モードシンタックス要素が、現在のブロックがイントラBC予測モードを用いてエンコードされていることを示す場合、インデックス値は、別個のシンタックス要素としてビットストリーム内で(条件付きで)信号伝達されることが可能である。あるいは、インデックス値は、別のシンタックス要素(例えば、現在のブロックがイントラBC予測モードを用いてエンコードされているかどうかを示すシンタックス要素)と共同でビットストリーム内で信号伝達されることが可能である。
エンコーダは、現在のブロックのための任意のエンコードされたデータをさらに出力する。ビットストリーム内の値が、現在のブロックがスキップモードにおいてエンコードされているかどうかを示すことができる。現在のブロックがスキップモードブロックである場合、ビットストリームは、現在のブロックのためのBV差分を欠き、現在のブロックのための残差データを欠く。現在のブロックがマージモードブロックである場合、ビットストリームは、現在のブロックのためのBV差分を欠き、しかし、現在のブロックのための残差データを含み得る。そうでない場合(現在のブロックが非スキップモードの、非マージモードのブロックである)、ビットストリームは、現在のブロックのためのBV差分(選択されたBV予測子候補と現在のブロックのためのBV値とにおける差を示す)を含み、さらに、現在のブロックのための残差データを含み得る。
エンコーダがデータ構造を使用して、前のイントラBC予測されたブロックに使用された実際のBV値を追跡するとき、エンコーダは、現在のブロックのためのBV値を用いて上記データ構造を更新することができる。
3.選択されたBV予測子を用いた例示的なデコーディング
図17aは、BV予測子に対するマージモードを含むデコーディングの一般化された手法(1700)を示す。画像デコーダ又はビデオデコーダ、例えば、図4又は図6を参照して説明されるものなどが、手法(1700)を実行することができる。
始め、デコーダは、ビットストリームから、ピクチャの現在のブロックのためのインデックス値を受信する(1710)。現在のブロックは、例えば、CTUのCUの一部である。インデックス値は、複数のBV予測子候補のセットの中から、選択されたBV予測子候補を示す。BV予測子候補セットが2つのBV予測子候補を含むとき、インデックス値はフラグとすることができる。あるいは、3つ以上のBV予測子候補が存在するとき、インデックス値は整数値とすることができる。インデックス値は、エントロピー符号化されることが可能であり、この場合にはデコーダはインデックス値をエントロピーデコードし、あるいは、固定長値として信号伝達されることが可能である。イントラBC予測モードシンタックス要素が、現在のブロックがイントラBC予測モードを用いてエンコードされたことを示す場合、インデックス値は、別個のシンタックス要素としてビットストリーム内で(条件付きで)信号伝達されることが可能である。あるいは、インデックス値は、別のシンタックス要素(例えば、現在のブロックがイントラBC予測モードを用いてエンコードされているかどうかを示すシンタックス要素)と共同でビットストリーム内で信号伝達されることが可能である。
デコーダは、現在のブロックのための任意のエンコードされたデータをさらに受信する。デコーダは、デコーディングの適切な段階において、エンコードされたデータをエントロピーデコードする。ビットストリームの中の値が、現在のブロックがスキップモードにおいてエンコードされたかどうかを示すことができる。現在のブロックがスキップモードブロックである場合、ビットストリームは、現在のブロックのためのBV差分を欠き、現在のブロックのための残差データを欠く。現在のブロックがマージモードブロックである場合、ビットストリームは、現在のブロックのためのBV差分を欠き、しかし、現在のブロックのための残差データを含み得る。そうでない場合(現在のブロックが非スキップモードの、非マージモードのブロックである)、ビットストリームは、現在のブロックのためのBV差分を含み、さらに、現在のブロックのための残差データを含み得る。
デコーダは、現在のブロックのための複数のBV予測子候補のセットを決定する(1720)。デコーダは、図14及び図15を参照して説明されたアプローチのうち1つを用いて、又は別のアプローチを用いて、BV予測子候補のセットを決定することができる。一般に、BV予測子候補は、前のブロックについての最大x個の実際のBV値を含むことができ、ここで、xは実装に依存する(例えば、xは、2、3、4、5、又は何らかの他の数である)。x個の前のブロックは、現在のブロックの周りの近隣における場所(例えば、図15を参照)及び/又は現在のブロックと比較したデコーディング順序(例えば、図14を参照)に少なくとも部分的に基づいて識別されることができる。BV予測子候補は、1つ以上のデフォルトBV予測子(例えば、各々が、非ゼロ値を有するBV予測子成分を有する)をさらに含むことができる。
インデックス値に基づいて、デコーダは、現在のブロックに使用するための、複数のBV予測子候補のうち1つを選択する(1730)。デコーダは、選択されたBV予測子候補を用いて、現在のブロックをデコードする(1740)。図17bは、例示的な実装における現在のブロックのデコーディング(1740)の詳細を示す。デコーダは、現在のブロックがスキップモードにおいてエンコードされたかどうかをチェックする(1742)。そうである場合、デコーダは、選択されたBV予測子と共にイントラBC予測を用い、しかしいかなる残差データも用いずに、現在のブロックをデコードする(1743)。そうでない場合(スキップモードでない)、デコーダは、現在のブロックがマージモードにおいてエンコードされたかどうかをチェックする(1744)。そうである場合、デコーダは、選択されたBV予測子と共にイントラBC予測を用いて現在のブロックをデコードする(1745)。マージモードにおいて、デコーダは、現在のブロックのための残差データを(存在する場合に)デコードする。そうでない場合(マージモードでない)、デコーダは、現在のブロックのためのBV値(選択されたBV予測子に相対したBV差分を用いてデコードされた)と共にイントラBC予測を用いて現在のブロックをデコードし(1747)、さらに、現在のブロックのための残差データを(存在する場合に)デコードする。
デコーダがデータ構造を使用して、前のイントラBC予測されたブロックに使用された実際のBV値を追跡するとき、デコーダは、現在のブロックのためのBV値を用いて上記データ構造を更新することができる。
4.マージモードの例示的な実装
HEVC実装において、CUのシンタックス及びセマンティクスは、BV予測に対するマージモード及び/又はイントラBC予測されたブロックに対するスキップモードのためのシンタックス要素を信号伝達するように、モディファイされることが可能である。
JCTVC−O1005_v3におけるドラフトHEVC仕様において、cu_skip_flag[x0][y0]は現在のCUがスキップされるかどうかを示し、しかし、このフラグは、現在のスライスが“P”スライス(predictive slice)又は“B”スライス(bi-predictive slice)である場合のみ信号伝達される。アレイインデックスx0、y0は、ピクチャの左上ルマサンプルに相対した、考慮されているCBの左上ルマサンプルの場所(x0,y0)を規定する。cu_skip_flag[x0][y0]が1である場合、現在のCUはスキップされ、CUのcu_skip_flag[x0][y0]の後、マージ候補インデックスmerge_idx[x0][y0]を除き、さらなるシンタックス要素はパースされない。cu_skip_flag[x0][y0]が0である場合、CUはスキップされない。cu_skip_flag[x0][y0]が存在しないとき、これは0であるように推論される。
1つのあり得るモディフィケーションに従い、cu_skip_flag[x0][y0]が、現在のスライスが“I”スライス(intra slice)である場合にさらに信号伝達される。イントラBC予測が(シーケンスパラメータセットの中のフラグintra_block_copy_enabled_flagに従って)有効にされるとき、cu_skip_flag[x0][y0]の値が1である場合、現在のCUはスキップされ、CUのcu_skip_flag[x0][y0]の後、BV予測子インデックス値idxを除き、さらなるシンタックス要素はパースされない。具体的に、現在のスキップされるCUについて、BV差が信号伝達されない。一方、cu_skip_flag[x0][y0]の値が0である場合、現在のCUはスキップされない。
JCTVC−O1005_v3におけるドラフトHEVC仕様において、intra_bc_flag[x0][y0]は、現在のCUがイントラBC予測モードにおいて符号化されるかどうかを示す。アレイインデックスx0、y0は、ピクチャの左上ルマサンプルに相対した、考慮されているCBの左上ルマサンプルの場所(x0,y0)を規定する。intra_bc_flag[x0][y0]が1である場合、現在のCUはイントラBC予測モードにおいて符号化される。intra_bc_flag[x0][y0]が0である場合、現在のCUはイントラ空間予測を用いて符号化される。存在しないとき、intra_bc_flagの値は0であるように推論される。
intra_bc_flag[x0][y0]に対する1つのあり得るモディフィケーションに従い、intra_bc_flag[x0][y0]が1であるとき、現在のCUのためのシンタックスが、BV予測子候補の選択を示すBV予測子インデックス値idxを含む。インデックス値idxは、2つのBV予測子候補間における選択を示すフラグ値であることが可能であり、あるいは、3つ以上のBV予測子候補間における選択を示す整数値であることが可能である。インデックス値は、例えば算術符号化を用いて、エントロピー符号化されることができる。
あるいは、intra_bc_flag[x0][y0]の別のあり得るモディフィケーションに従い、シンタックス要素は、2値フラグに代わって整数値である。intra_bc_flag[x0][y0]が0である場合、現在のCUは、JCTVC−O1005_v3にあるとおり、イントラ空間予測を用いて符号化される。一方、intra_bc_flag[x0][y0]が0より大きい場合、現在のCUはイントラBC予測モードにおいて符号化され、intra_bc_flag[x0][y0]はさらに、BV予測子インデックス値idxを示す。例えば、intra_bc_flag[x0][y0]が1である場合、idxは1であり、intra_bc_flag[x0][y0]が2である場合、idxは2である、などである。換言すると、BV予測子インデックス値idxは、単一のシンタックス要素において空間又はBC予測のための2成分値(binary value)を用いて共同で符号化される。
intra_bc_flag[x0][y0]をモディファイすることとインデックス値idxを信号伝達することとのいずれの方法についても、変数BvIntraPredictor[idx][compIdx]が、現在のCUのイントラBC予測に使用されることになるBV予測子候補を規定する。例えば、図14の例において、BvIntraPredictor[0][compIdx]、BvIntraPredictor[1][compIdx]、及びBvIntraPredictor[2][compIdx]が、最も最近の前のイントラBC予測されたブロックのうち最大で3つのBV値を記憶する。あるいは、図15の例において、BvIntraPredictor[0][compIdx]、BvIntraPredictor[1][compIdx]、及びBvIntraPredictor[2][compIdx]が、最大で3つの近隣のイントラBC予測されたブロックのBV値を記憶する。BvIntraPredictor[3][compIdx]及びBvIntraPredictor[4][compIdx]が、それぞれ、水平方向及び垂直方向におけるデフォルトBV予測子を記憶する。水平BV成分は、compIdx=0を割り当てられ、垂直BV成分は、compIdx=1を割り当てられる。
スキップモードブロック又はマージモードブロックについて、ブロックに対してBV差分は信号伝達されない。ブロックのBV値は、選択されたBV予測子候補である。
非スキップモードの、非マージモードのブロックについて、BV差分はビットストリーム内で信号伝達される。変数BvdIntra[x0][y0][compIdx]が、BV差分を規定する。アレイインデックスx0、y0は、ピクチャの左上ルマサンプルに相対した、考慮されているPBの左上ルマサンプルの場所(x0,y0)を規定する。水平BV差分成分は、compIdx=0を割り当てられ、垂直BV差分成分は、compIdx=1を割り当てられる。ブロックのBV値は、compIdx=0..1について、BvIntra[x0][y0][compIdx]=BvdIntra[x0][y0][compIdx]+BvIntraPredictor[idx][compIdx]である。
それから、変数BvIntraPredictor[idx][compIdx]は、現在のCUのためのBV値を含むように更新されることが可能である。
5.代替物及びバリエーション
現在のブロックが、BV推定を通して識別されたBV値を有するとき、エンコーダは、任意の形式のBV推定を使用して、現在のブロックのためのBV値を識別することができる。現在のブロックのためのBV推定の間、エンコーダは、現在のブロックに利用可能な1つ以上のBV予測子候補を評価することによって開始することができる。BV予測子候補と共にBV推定を開始することは、適切なBV値を迅速に識別するのに役立ち、他のBV値の評価を回避することができる。エンコーダは、必要に応じて、他のBV値を評価する。エンコーダは、データ構造を使用して、BV予測子候補を追跡することができる。BV値が、ブロックの異なるサイズに対して(例えば、32×32CU、16×16CU、8×8CU、又はより小さいTU若しくはCUに対して)適用されることができるとき、データ構造は、ブロックの異なるサイズに対して、異なるBV予測子候補を含むことができる(例えば、32×32CUのための1つ以上のBV予測子候補、16×16CUのための1つ以上のBV予測子候補、など)。現在のブロックについて、エンコーダは、現在のブロックのレベル(サイズ)のためのデータ構造に記憶されたBV予測子候補を最初評価し、それから、必要とされる場合、他のBV値の評価を進める。
開示された発明の原理が適用され得る多くのとり得る実施形態の観点から、例示された実施形態は本発明の好適な例に過ぎず、本発明の範囲を限定するものと解されるべきでないことが認識されるべきである。むしろ、本発明の範囲は、別記の請求項によって定義される。したがって、これら請求項の範囲及び主旨内に入るすべてを本発明として主張する。
開示された発明の原理が適用され得る多くのとり得る実施形態の観点から、例示された実施形態は本発明の好適な例に過ぎず、本発明の範囲を限定するものと解されるべきでないことが認識されるべきである。むしろ、本発明の範囲は、別記の請求項によって定義される。したがって、これら請求項の範囲及び主旨内に入るすべてを本発明として主張する。
上記の実施形態につき以下の付記を残しておく。
[付記1]
ビデオエンコーダ又は画像エンコーダを有するコンピューティング装置において、
ピクチャの現在のブロックのためのデフォルトブロックベクトル(“BV”)予測子を決定するステップであって、上記デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む、ステップと、
上記デフォルトBV予測子を用いて上記現在のブロックをエンコードするステップと、
を含む方法。
[付記2]
上記デフォルトBV予測子を用いて上記現在のブロックをエンコードするステップは、
上記現在のブロックのためのBV値を用いてイントラブロックコピー(“BC”)予測を実行することと、
上記現在のブロックのための上記BV値と上記現在のブロックのための上記デフォルトBV予測子とを用いて上記現在のブロックのためのBV差分を決定することと、
上記現在のブロックのための上記BV差分をエンコードすることと、
を含む、付記1に記載の方法。
[付記3]
上記デフォルトBV予測子を用いて上記現在のブロックをエンコードするステップは、上記デフォルトBV予測子を用いてイントラBC予測を実行することを含む、付記1に記載の方法。
[付記4]
ビデオデコーダ又は画像デコーダを有するコンピューティング装置において、
ピクチャの現在のブロックのためのデフォルトブロックベクトル(“BV”)予測子を決定するステップであって、上記デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む、ステップと、
上記デフォルトBV予測子を用いて上記現在のブロックをデコードするステップと、
を含む方法。
[付記5]
上記デフォルトBV予測子を用いて上記現在のブロックをデコードするステップは、
上記現在のブロックのためのBV差分をデコードすることと、
上記現在のブロックのための上記のデコードされたBV差分を、上記現在のブロックのための上記デフォルトBV予測子と組み合わせて、上記現在のブロックのためのBV値を再構成することと、
上記現在のブロックのための上記BV値を用いて、イントラブロックコピー(“BC”)予測を実行することと、
を含む、付記4に記載の方法。
[付記6]
上記デフォルトBV予測子を用いて上記現在のブロックをデコードするステップは、上記デフォルトBV予測子を用いてイントラBC予測を実行することを含む、付記4に記載の方法。
[付記7]
上記デフォルトBV予測子は、組み立てられた複数のBV予測子候補のセットの一部である、付記1乃至6のうちいずれか1項に記載の方法。
[付記8]
上記ピクチャの前のブロックのための実際のBV値が利用可能であるかをチェックするステップであって、上記現在のブロックのための上記デフォルトBV予測子は、上記ピクチャのいずれの前のブロックのための実際のBV値も利用可能でない場合のみ使用される、ステップ、
をさらに含む付記1乃至6のうちいずれか1項に記載の方法。
[付記9]
上記前のブロックのための上記実際のBV値は、(1)上記前のブロックと上記現在のブロックとが所与の符号化ツリーユニットの一部であり、(2)上記前のブロックの予測モードがイントラBC予測モードである、場合に利用可能である、付記8に記載の方法。
[付記10]
上記現在のブロックは符号化ユニットの一部である、付記1乃至9のうちいずれか1項に記載の方法。
[付記11]
上記非ゼロ値を有する上記BV予測子成分は、水平BV成分である、付記1乃至10のうちいずれか1項に記載の方法。
[付記12]
上記非ゼロ値を有する上記BV予測子成分は、垂直BV成分である、付記1乃至10のうちいずれか1項に記載の方法。
[付記13]
上記非ゼロ値は、上記現在のブロックの高さ又は幅である、付記1乃至10のうちいずれか1項に記載の方法。
[付記14]
上記非ゼロは、上記現在のブロックのサイズから独立した固定値である、付記1乃至10のうちいずれか1項に記載の方法。
[付記15]
ビデオエンコーダ又は画像エンコーダを有するコンピューティング装置において、
ブロックベクトル(“BV”)予測を使用して、ピクチャの現在のブロックのためのBV値を決定するステップであって、上記現在のブロックのための上記BV値は、上記ピクチャ内の領域に対する変位を示す、ステップと、
上記BV値と共にイントラブロックコピー予測を用いて上記現在のブロックをエンコードするステップと、
上記現在のブロックがスキップモードにおいてエンコードされている指標をビットストリーム内に出力するステップであって、上記ビットストリームは、上記現在のブロックのためのBV差分及び残差データを欠く、ステップと、
を含む方法。
[付記16]
ビデオデコーダ又は画像デコーダを有するコンピューティング装置において、
ビットストリームから、ピクチャの現在のブロックがスキップモードにおいてエンコードされている指標を受信するステップであって、上記ビットストリームは、上記現在のブロックのためのブロックベクトル(“BV”)差分及び残差データを欠く、ステップと、
BV予測を使用して、上記現在のブロックのためのBV値を決定するステップであって、上記現在のブロックのための上記BV値は、上記ピクチャ内の領域に対する変位を示す、ステップと、
上記BV値と共にイントラブロックコピー予測を用いて上記現在のブロックをデコードするステップと、
を含む方法。
[付記17]
上記ビットストリームは、上記現在のブロックの上記BV値として使用するための、複数のBV予測子候補のセットからの、BV予測子候補の選択を示すインデックス値を含む、付記15又は16に記載の方法。
[付記18]
上記インデックス値はフラグ値であり、上記複数のBV予測子候補のセットは2つのBV予測子候補を有する、付記17に記載の方法。
[付記19]
上記インデックス値は整数値であり、上記複数のBV予測子候補のセットは3つ以上のBV予測子候補を有する、付記17に記載の方法。
[付記20]
上記複数のBV予測子候補は1つ以上のデフォルトBV予測子を含み、上記1つ以上のデフォルトBV予測子の各々は、非ゼロ値を有するBV予測子成分を含む、付記19に記載の方法。
[付記21]
ビデオエンコーダ又は画像エンコーダを有するコンピューティング装置において、
ピクチャの現在のブロックのための、複数のブロックベクトル(“BV”)予測子候補のセットを決定するステップと、
上記現在のブロックに使用するための、上記複数のBV予測子候補のうち1つを選択するステップと、
上記の選択されたBV予測子候補を用いて上記現在のブロックをエンコードするステップと、
上記の選択されたBV予測子候補を示すインデックス値をビットストリーム内に出力するステップと、
を含む方法。
[付記22]
ビデオデコーダ又は画像デコーダを有するコンピューティング装置において、
ビットストリームから、インデックス値を受信するステップと、
ピクチャの現在のブロックのための、複数のブロックベクトル(“BV”)予測子候補のセットを決定するステップと、
上記インデックス値に基づいて、上記現在のブロックに使用するための、上記複数のBV予測子候補うち1つを選択するステップと、
上記の選択されたBV予測子候補を用いて上記現在のブロックをデコードするステップと、
を含む方法。
[付記23]
上記現在のブロックはマージモードブロックであり、上記ビットストリームは上記現在のブロックのためのBV差分を欠く、付記21又は22に記載の方法。
[付記24]
上記ビットストリームは上記現在のブロックのための残差データを欠く、付記23に記載の方法。
[付記25]
上記ビットストリームは上記現在のブロックのための残差データを含む、付記23に記載の方法。
[付記26]
上記ビットストリーム内の値が、上記現在のブロックがスキップモードブロックであると示し、上記ビットストリームは上記現在のブロックのためのBV差分を欠き、上記ビットストリームは上記現在のブロックのための残差データを欠く、付記21又は22に記載の方法。
[付記27]
上記ビットストリームは上記現在のブロックのためのBV差分を含み、上記BV差分は、上記の選択されたBV予測子候補と上記現在のブロックのためのBV値とにおける差を示す、付記21又は22に記載の方法。
[付記28]
上記インデックス値はフラグ値であり、上記複数のBV予測子候補のセットは2つのBV予測子候補を有する、付記21乃至27のうちいずれか1項に記載の方法。
[付記29]
上記インデックス値は整数値であり、上記複数のBV予測子候補のセットは、3つ以上のBV予測子候補を有する、付記21乃至27のうちいずれか1項に記載の方法。
[付記30]
上記複数のBV予測子候補は、前のブロックの、最大xの実際のBV値を含む、付記21乃至29のうちいずれか1項に記載の方法。
[付記31]
xは少なくとも2である、付記30に記載の方法。
[付記32]
上記前のブロックは、上記現在のブロックの周りの近隣における場所に少なくとも部分的に基づいて識別される、付記30に記載の方法。
[付記33]
上記前のブロックは、上記現在のブロックと比較したデコーディング順序に少なくとも部分的に基づいて識別される、付記30に記載の方法。
[付記34]
上記複数のBV予測子候補は1つ以上のデフォルトBV予測子を含み、上記1つ以上のデフォルトBV予測子の各々は、非ゼロ値を有するBV予測子成分を含む、付記21乃至33のうちいずれか1項に記載の方法。
[付記35]
上記インデックス値は、上記現在のブロックがイントラブロックコピー予測モードを用いてエンコードされているかを示すシンタックス要素の一部としてビットストリーム内で信号伝達される、付記21乃至34のうちいずれか1項に記載の方法。
[付記36]
イントラブロックコピー予測モードシンタックス要素が、上記現在のブロックがイントラブロックコピー予測モードを用いてエンコードされていると示す場合、上記インデックス値は、上記ビットストリーム内で条件付きで信号伝達される、付記21乃至34のうちいずれか1項に記載の方法。
[付記37]
前のブロックの実際のBV値を追跡することに使用されるデータ構造を更新するステップ、
をさらに含む付記21乃至36のうちいずれか1項に記載の方法。
[付記38]
付記1乃至37のうちいずれか1項に記載の方法を実行するように適合させたコンピューティング装置。
[付記39]
コンピュータ実行可能命令を記憶した1つ以上のコンピュータ可読媒体であって、上記コンピュータ実行可能命令によりプログラムされたコンピューティング装置に付記1乃至37のうちいずれか1項に記載の方法を実行させる、1つ以上のコンピュータ可読媒体。

Claims (39)

  1. ビデオエンコーダ又は画像エンコーダを有するコンピューティング装置において、
    ピクチャの現在のブロックのためのデフォルトブロックベクトル(“BV”)予測子を決定するステップであって、前記デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む、ステップと、
    前記デフォルトBV予測子を用いて前記現在のブロックをエンコードするステップと、
    を含む方法。
  2. 前記デフォルトBV予測子を用いて前記現在のブロックをエンコードするステップは、
    前記現在のブロックのためのBV値を用いてイントラブロックコピー(“BC”)予測を実行することと、
    前記現在のブロックのための前記BV値と前記現在のブロックのための前記デフォルトBV予測子とを用いて前記現在のブロックのためのBV差分を決定することと、
    前記現在のブロックのための前記BV差分をエンコードすることと、
    を含む、請求項1に記載の方法。
  3. 前記デフォルトBV予測子を用いて前記現在のブロックをエンコードするステップは、前記デフォルトBV予測子を用いてイントラBC予測を実行することを含む、請求項1に記載の方法。
  4. ビデオデコーダ又は画像デコーダを有するコンピューティング装置において、
    ピクチャの現在のブロックのためのデフォルトブロックベクトル(“BV”)予測子を決定するステップであって、前記デフォルトBV予測子は、非ゼロ値を有するBV予測子成分を含む、ステップと、
    前記デフォルトBV予測子を用いて前記現在のブロックをデコードするステップと、
    を含む方法。
  5. 前記デフォルトBV予測子を用いて前記現在のブロックをデコードするステップは、
    前記現在のブロックのためのBV差分をデコードすることと、
    前記現在のブロックのための前記のデコードされたBV差分を、前記現在のブロックのための前記デフォルトBV予測子と組み合わせて、前記現在のブロックのためのBV値を再構成することと、
    前記現在のブロックのための前記BV値を用いて、イントラブロックコピー(“BC”)予測を実行することと、
    を含む、請求項4に記載の方法。
  6. 前記デフォルトBV予測子を用いて前記現在のブロックをデコードするステップは、前記デフォルトBV予測子を用いてイントラBC予測を実行することを含む、請求項4に記載の方法。
  7. 前記デフォルトBV予測子は、組み立てられた複数のBV予測子候補のセットの一部である、請求項1乃至6のうちいずれか1項に記載の方法。
  8. 前記ピクチャの前のブロックのための実際のBV値が利用可能であるかをチェックするステップであって、前記現在のブロックのための前記デフォルトBV予測子は、前記ピクチャのいずれの前のブロックのための実際のBV値も利用可能でない場合のみ使用される、ステップ、
    をさらに含む請求項1乃至6のうちいずれか1項に記載の方法。
  9. 前記前のブロックのための前記実際のBV値は、(1)前記前のブロックと前記現在のブロックとが所与の符号化ツリーユニットの一部であり、(2)前記前のブロックの予測モードがイントラBC予測モードである、場合に利用可能である、請求項8に記載の方法。
  10. 前記現在のブロックは符号化ユニットの一部である、請求項1乃至9のうちいずれか1項に記載の方法。
  11. 前記非ゼロ値を有する前記BV予測子成分は、水平BV成分である、請求項1乃至10のうちいずれか1項に記載の方法。
  12. 前記非ゼロ値を有する前記BV予測子成分は、垂直BV成分である、請求項1乃至10のうちいずれか1項に記載の方法。
  13. 前記非ゼロ値は、前記現在のブロックの高さ又は幅である、請求項1乃至10のうちいずれか1項に記載の方法。
  14. 前記非ゼロは、前記現在のブロックのサイズから独立した固定値である、請求項1乃至10のうちいずれか1項に記載の方法。
  15. ビデオエンコーダ又は画像エンコーダを有するコンピューティング装置において、
    ブロックベクトル(“BV”)予測を使用して、ピクチャの現在のブロックのためのBV値を決定するステップであって、前記現在のブロックのための前記BV値は、前記ピクチャ内の領域に対する変位を示す、ステップと、
    前記BV値と共にイントラブロックコピー予測を用いて前記現在のブロックをエンコードするステップと、
    前記現在のブロックがスキップモードにおいてエンコードされている指標をビットストリーム内に出力するステップであって、前記ビットストリームは、前記現在のブロックのためのBV差分及び残差データを欠く、ステップと、
    を含む方法。
  16. ビデオデコーダ又は画像デコーダを有するコンピューティング装置において、
    ビットストリームから、ピクチャの現在のブロックがスキップモードにおいてエンコードされている指標を受信するステップであって、前記ビットストリームは、前記現在のブロックのためのブロックベクトル(“BV”)差分及び残差データを欠く、ステップと、
    BV予測を使用して、前記現在のブロックのためのBV値を決定するステップであって、前記現在のブロックのための前記BV値は、前記ピクチャ内の領域に対する変位を示す、ステップと、
    前記BV値と共にイントラブロックコピー予測を用いて前記現在のブロックをデコードするステップと、
    を含む方法。
  17. 前記ビットストリームは、前記現在のブロックの前記BV値として使用するための、複数のBV予測子候補のセットからの、BV予測子候補の選択を示すインデックス値を含む、請求項15又は16に記載の方法。
  18. 前記インデックス値はフラグ値であり、前記複数のBV予測子候補のセットは2つのBV予測子候補を有する、請求項17に記載の方法。
  19. 前記インデックス値は整数値であり、前記複数のBV予測子候補のセットは3つ以上のBV予測子候補を有する、請求項17に記載の方法。
  20. 前記複数のBV予測子候補は1つ以上のデフォルトBV予測子を含み、前記1つ以上のデフォルトBV予測子の各々は、非ゼロ値を有するBV予測子成分を含む、請求項19に記載の方法。
  21. ビデオエンコーダ又は画像エンコーダを有するコンピューティング装置において、
    ピクチャの現在のブロックのための、複数のブロックベクトル(“BV”)予測子候補のセットを決定するステップと、
    前記現在のブロックに使用するための、前記複数のBV予測子候補のうち1つを選択するステップと、
    前記の選択されたBV予測子候補を用いて前記現在のブロックをエンコードするステップと、
    前記の選択されたBV予測子候補を示すインデックス値をビットストリーム内に出力するステップと、
    を含む方法。
  22. ビデオデコーダ又は画像デコーダを有するコンピューティング装置において、
    ビットストリームから、インデックス値を受信するステップと、
    ピクチャの現在のブロックのための、複数のブロックベクトル(“BV”)予測子候補のセットを決定するステップと、
    前記インデックス値に基づいて、前記現在のブロックに使用するための、前記複数のBV予測子候補うち1つを選択するステップと、
    前記の選択されたBV予測子候補を用いて前記現在のブロックをデコードするステップと、
    を含む方法。
  23. 前記現在のブロックはマージモードブロックであり、前記ビットストリームは前記現在のブロックのためのBV差分を欠く、請求項21又は22に記載の方法。
  24. 前記ビットストリームは前記現在のブロックのための残差データを欠く、請求項23に記載の方法。
  25. 前記ビットストリームは前記現在のブロックのための残差データを含む、請求項23に記載の方法。
  26. 前記ビットストリーム内の値が、前記現在のブロックがスキップモードブロックであると示し、前記ビットストリームは前記現在のブロックのためのBV差分を欠き、前記ビットストリームは前記現在のブロックのための残差データを欠く、請求項21又は22に記載の方法。
  27. 前記ビットストリームは前記現在のブロックのためのBV差分を含み、前記BV差分は、前記の選択されたBV予測子候補と前記現在のブロックのためのBV値とにおける差を示す、請求項21又は22に記載の方法。
  28. 前記インデックス値はフラグ値であり、前記複数のBV予測子候補のセットは2つのBV予測子候補を有する、請求項21乃至27のうちいずれか1項に記載の方法。
  29. 前記インデックス値は整数値であり、前記複数のBV予測子候補のセットは、3つ以上のBV予測子候補を有する、請求項21乃至27のうちいずれか1項に記載の方法。
  30. 前記複数のBV予測子候補は、前のブロックの、最大xの実際のBV値を含む、請求項21乃至29のうちいずれか1項に記載の方法。
  31. xは少なくとも2である、請求項30に記載の方法。
  32. 前記前のブロックは、前記現在のブロックの周りの近隣における場所に少なくとも部分的に基づいて識別される、請求項30に記載の方法。
  33. 前記前のブロックは、前記現在のブロックと比較したデコーディング順序に少なくとも部分的に基づいて識別される、請求項30に記載の方法。
  34. 前記複数のBV予測子候補は1つ以上のデフォルトBV予測子を含み、前記1つ以上のデフォルトBV予測子の各々は、非ゼロ値を有するBV予測子成分を含む、請求項21乃至33のうちいずれか1項に記載の方法。
  35. 前記インデックス値は、前記現在のブロックがイントラブロックコピー予測モードを用いてエンコードされているかを示すシンタックス要素の一部としてビットストリーム内で信号伝達される、請求項21乃至34のうちいずれか1項に記載の方法。
  36. イントラブロックコピー予測モードシンタックス要素が、前記現在のブロックがイントラブロックコピー予測モードを用いてエンコードされていると示す場合、前記インデックス値は、前記ビットストリーム内で条件付きで信号伝達される、請求項21乃至34のうちいずれか1項に記載の方法。
  37. 前のブロックの実際のBV値を追跡することに使用されるデータ構造を更新するステップ、
    をさらに含む請求項21乃至36のうちいずれか1項に記載の方法。
  38. 請求項1乃至37のうちいずれか1項に記載の方法を実行するように適合させたコンピューティング装置。
  39. コンピュータ実行可能命令を記憶した1つ以上のコンピュータ可読媒体であって、前記コンピュータ実行可能命令によりプログラムされたコンピューティング装置に請求項1乃至37のうちいずれか1項に記載の方法を実行させる、1つ以上のコンピュータ可読媒体。
JP2016544442A 2014-01-03 2014-01-03 ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測 Active JP6355744B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2014/070072 WO2015100726A1 (en) 2014-01-03 2014-01-03 Block vector prediction in video and image coding/decoding

Publications (2)

Publication Number Publication Date
JP2017510115A true JP2017510115A (ja) 2017-04-06
JP6355744B2 JP6355744B2 (ja) 2018-07-11

Family

ID=53493035

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016544442A Active JP6355744B2 (ja) 2014-01-03 2014-01-03 ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測

Country Status (12)

Country Link
US (4) US10469863B2 (ja)
EP (2) EP3090553B1 (ja)
JP (1) JP6355744B2 (ja)
KR (2) KR102353787B1 (ja)
CN (1) CN105917650B (ja)
AU (1) AU2014376061B8 (ja)
BR (1) BR112016015080A2 (ja)
CA (1) CA2934699A1 (ja)
ES (1) ES2924392T3 (ja)
MX (1) MX360926B (ja)
RU (1) RU2669005C2 (ja)
WO (1) WO2015100726A1 (ja)

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015054811A1 (en) 2013-10-14 2015-04-23 Microsoft Corporation Features of intra block copy prediction mode for video and image coding and decoding
US11109036B2 (en) 2013-10-14 2021-08-31 Microsoft Technology Licensing, Llc Encoder-side options for intra block copy prediction mode for video and image coding
CA2925183C (en) 2013-10-14 2020-03-10 Microsoft Technology Licensing, Llc Features of base color index map mode for video and image coding and decoding
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
JP6355744B2 (ja) 2014-01-03 2018-07-11 マイクロソフト テクノロジー ライセンシング,エルエルシー ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
CN109889850A (zh) * 2014-02-21 2019-06-14 联发科技(新加坡)私人有限公司 视频编解码方法
JP6482191B2 (ja) * 2014-06-12 2019-03-13 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
US10785486B2 (en) 2014-06-19 2020-09-22 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
US9948949B2 (en) * 2014-06-20 2018-04-17 Qualcomm Incorporated Intra block copy block vector signaling for video coding
CN105392008B (zh) * 2014-08-22 2018-09-25 中兴通讯股份有限公司 一种预测编、解码方法和相应的编、解码器和电子设备
AU2014408228B2 (en) 2014-09-30 2019-09-19 Microsoft Technology Licensing, Llc Rules for intra-picture prediction modes when wavefront parallel processing is enabled
US9854237B2 (en) 2014-10-14 2017-12-26 Qualcomm Incorporated AMVP and merge candidate list derivation for intra BC and inter prediction unification
WO2016197314A1 (en) 2015-06-09 2016-12-15 Microsoft Technology Licensing, Llc Robust encoding/decoding of escape-coded pixels in palette mode
EP3499887B1 (en) * 2016-08-10 2021-10-20 Panasonic Intellectual Property Corporation of America Video coding method and device skipping arithmetic coding
FR3068557A1 (fr) 2017-07-05 2019-01-04 Orange Procede de codage et decodage d'images,dispositif de codage et decodage et programmes d'ordinateur correspondants
FR3068558A1 (fr) 2017-07-05 2019-01-04 Orange Procede de codage et decodage d'images,dispositif de codage et decodage et programmes d'ordinateur correspondants
FR3062010A1 (fr) 2017-07-05 2018-07-20 Orange Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'une sequence d'images
US10986349B2 (en) 2017-12-29 2021-04-20 Microsoft Technology Licensing, Llc Constraints on locations of reference blocks for intra block copy prediction
WO2019234606A1 (en) 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Interaction between ibc and atmvp
WO2019244118A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Component-dependent sub-block dividing
WO2019244117A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Unified constrains for the merge affine mode and the non-merge affine mode
KR20210024502A (ko) * 2018-06-29 2021-03-05 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Hmvp 후보를 병합/amvp에 추가할 때의 부분/풀 프루닝
TWI728388B (zh) 2018-06-29 2021-05-21 大陸商北京字節跳動網絡技術有限公司 Lut中的運動候選的檢查順序
WO2020003266A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Resetting of look up table per slice/tile/lcu row
JP7460617B2 (ja) * 2018-06-29 2024-04-02 北京字節跳動網絡技術有限公司 Lut更新条件
EP3791589A1 (en) * 2018-06-29 2021-03-17 Beijing Bytedance Network Technology Co. Ltd. Which lut to be updated or no updating
AU2019293670B2 (en) 2018-06-29 2023-06-08 Beijing Bytedance Network Technology Co., Ltd. Update of look up table: FIFO, constrained FIFO
CN110662053B (zh) 2018-06-29 2022-03-25 北京字节跳动网络技术有限公司 使用查找表的视频处理方法、装置和存储介质
EP3791586A1 (en) 2018-06-29 2021-03-17 Beijing Bytedance Network Technology Co. Ltd. Concept of using one or multiple look up tables to store motion information of previously coded in order and use them to code following blocks
JP7295231B2 (ja) * 2018-06-29 2023-06-20 北京字節跳動網絡技術有限公司 Lutとamvpの間の相互作用
TWI731365B (zh) 2018-07-02 2021-06-21 大陸商北京字節跳動網絡技術有限公司 Merge索引編碼
KR102491349B1 (ko) * 2018-07-04 2023-01-27 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 부호화 장치, 복호 장치, 부호화 방법 및 복호 방법
CN110719465B (zh) * 2018-07-14 2022-11-22 北京字节跳动网络技术有限公司 用时间信息扩展基于查找表的运动矢量预测
CN110858904B (zh) 2018-08-26 2023-04-18 北京字节跳动网络技术有限公司 基于多运动模型的视频编码和解码
CN111064961B (zh) 2018-09-12 2023-06-09 北京字节跳动网络技术有限公司 视频处理方法和装置
TW202025732A (zh) * 2018-09-19 2020-07-01 大陸商北京字節跳動網絡技術有限公司 用於幀內編碼的鄰近的相鄰塊的選擇
CN117768651A (zh) 2018-09-24 2024-03-26 北京字节跳动网络技术有限公司 处理视频数据的方法、装置、介质、以及比特流存储方法
US10764601B2 (en) * 2018-10-06 2020-09-01 Tencent America LLC Method and apparatus for video coding
CN112970262B (zh) 2018-11-10 2024-02-20 北京字节跳动网络技术有限公司 三角预测模式中的取整
WO2020141853A1 (ko) * 2019-01-01 2020-07-09 엘지전자 주식회사 인터 예측을 기반으로 비디오 신호를 처리하기 위한 방법 및 장치
JP7275286B2 (ja) 2019-01-10 2023-05-17 北京字節跳動網絡技術有限公司 Lut更新の起動
CN113383554B (zh) 2019-01-13 2022-12-16 北京字节跳动网络技术有限公司 LUT和共享Merge列表之间的交互
CN113330739A (zh) 2019-01-16 2021-08-31 北京字节跳动网络技术有限公司 Lut中的运动候选的插入顺序
KR102653088B1 (ko) 2019-02-02 2024-04-01 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩에서 인트라 블록 복사를 위한 버퍼 초기화
CN113383549A (zh) 2019-02-02 2021-09-10 北京字节跳动网络技术有限公司 使用用于视频编解码中的帧内块复制的帧内缓冲区样点的预测
WO2020177661A1 (en) 2019-03-01 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Order-based updating for intra block copy in video coding
CN113508597B (zh) 2019-03-01 2023-11-21 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的基于方向的预测
CN117640927A (zh) 2019-03-04 2024-03-01 北京字节跳动网络技术有限公司 视频编解码中的帧内块复制中的实施方式方面
US11012686B2 (en) * 2019-03-08 2021-05-18 Tencent America LLC Unified block vector prediction for intra picture block compensation
WO2020192611A1 (en) 2019-03-22 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Interaction between merge list construction and other tools
WO2020200236A1 (en) 2019-04-01 2020-10-08 Beijing Bytedance Network Technology Co., Ltd. Using interpolation filters for history based motion vector prediction
BR112021020026A2 (pt) 2019-04-12 2021-12-07 Beijing Bytedance Network Tech Co Ltd Método para processamento vídeo, aparelho para processar de dados de vídeo, meio de armazenamento e meio de gravação legíveis por computador não transitórios
EP3932070A4 (en) * 2019-04-28 2022-06-15 Beijing Bytedance Network Technology Co., Ltd. SYMMETRICAL MOTION VECTOR DIFFERENCE CODING
CN113924775B (zh) 2019-05-31 2023-11-14 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的限制的上采样
KR102662603B1 (ko) 2019-06-06 2024-04-30 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩을 위한 움직임 후보 리스트 구성
CN113950838A (zh) 2019-06-06 2022-01-18 北京字节跳动网络技术有限公司 基于子块的帧内块复制
US11039156B2 (en) * 2019-06-11 2021-06-15 Tencent America LLC Unified position dependent prediction combination process
CN113966612A (zh) 2019-06-16 2022-01-21 北京字节跳动网络技术有限公司 屏幕内容编解码根据与运动信息之间的相互作用
CN112118451B (zh) * 2019-06-20 2022-09-27 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
CN113382251B (zh) * 2019-06-21 2022-04-08 杭州海康威视数字技术股份有限公司 一种编解码方法、装置、设备及存储介质
WO2020259426A1 (en) 2019-06-22 2020-12-30 Beijing Bytedance Network Technology Co., Ltd. Motion candidate list construction for intra block copy mode
BR112022000187A2 (pt) 2019-07-06 2022-02-22 Beijing Bytedance Network Tech Co Ltd Método de processamento de dados de vídeo, aparelho para processar dados de vídeo, meio de armazenamento não transitório legível por computador, meio de gravação não transitório legível por computador
AU2020312053B2 (en) 2019-07-10 2023-09-14 Beijing Bytedance Network Technology Co., Ltd. Sample identification for intra block copy in video coding
CN114097221B (zh) 2019-07-11 2024-01-12 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的比特流一致性约束
CN114258674A (zh) * 2019-07-19 2022-03-29 Lg 电子株式会社 使用ibc的图像编码/解码方法和装置,以及发送比特流的方法
BR112022001279A2 (pt) 2019-07-26 2022-03-22 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeo, aparelho em um sistema de vídeo, e, produto de programa de computador
CN114270856A (zh) 2019-08-20 2022-04-01 北京字节跳动网络技术有限公司 视频处理中的备选插值滤波器的选择性使用
KR20220053580A (ko) * 2019-09-09 2022-04-29 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 블록 복제 코딩 및 디코딩
JP7448641B2 (ja) * 2019-09-27 2024-03-12 オッポ広東移動通信有限公司 現在のブロックの予測方法及び予測装置、デバイス、記憶媒体
US11516477B2 (en) * 2021-02-11 2022-11-29 Qualcomm Incorporated Intra block copy scratch frame buffer
CA3178206A1 (en) 2021-09-30 2023-03-30 Comcast Cable Communications, Llc Video compression using block vector predictor refinement
US11683509B1 (en) * 2021-10-28 2023-06-20 Meta Platforms, Inc. Prediction unit skip detection in encoder
US20230388513A1 (en) * 2022-05-25 2023-11-30 Tencent America LLC Subblock level temporal motion vector prediction with multiple displacement vector predictors and an offset
WO2024155106A1 (ko) * 2023-01-17 2024-07-25 주식회사 윌러스표준기술연구소 비디오 신호 처리 방법 및 이를 위한 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011048903A1 (ja) * 2009-10-20 2011-04-28 シャープ株式会社 動画像符号化装置、動画像復号装置、および、データ構造
WO2015035449A1 (en) * 2013-09-13 2015-03-19 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data

Family Cites Families (255)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2114404B (en) 1982-01-28 1986-07-02 British Broadcasting Corp Generating a colour video signal representative of a stored picture
JPH087553B2 (ja) 1988-10-27 1996-01-29 インターナショナル・ビジネス・マシーンズ・コーポレーション 色画像量子化方法及び装置
US5706290A (en) 1994-12-15 1998-01-06 Shaw; Venson Method and apparatus including system architecture for multimedia communication
US6389162B2 (en) 1996-02-15 2002-05-14 Canon Kabushiki Kaisha Image processing apparatus and method and medium
JPH10262258A (ja) 1997-03-19 1998-09-29 Sony Corp 画像符号化装置及び方法
JP2000102016A (ja) 1998-09-22 2000-04-07 Victor Co Of Japan Ltd 動き補償予測回路
JP2001251507A (ja) 2000-03-03 2001-09-14 Fujitsu Ltd 画像処理装置
US6701012B1 (en) 2000-07-24 2004-03-02 Sharp Laboratories Of America, Inc. Out-of-layer pixel generation for a decomposed-image layer
US6748116B1 (en) 2000-08-22 2004-06-08 Airzip, Inc. Apparatus and method for compressing and decompressing image files
DE10049571C1 (de) 2000-10-06 2002-06-13 Siemens Ag Verfahren und Anordnung zum Übertragen eines Vektors
US7023924B1 (en) 2000-12-28 2006-04-04 Emc Corporation Method of pausing an MPEG coded video stream
US6853755B2 (en) 2001-03-28 2005-02-08 Sharp Laboratories Of America, Inc. Method and apparatus for adaptive compression of scanned documents
WO2003023698A1 (en) 2001-09-12 2003-03-20 Idetic, Inc. Transformation to increase the lempel-ziv compressibility of images with minimal visual distortion
JP2004007379A (ja) 2002-04-10 2004-01-08 Toshiba Corp 動画像符号化方法及び動画像復号化方法
US7120196B2 (en) 2002-04-29 2006-10-10 Ess Technology, Inc. Intra-prediction using intra-macroblock motion compensation
RU2314656C2 (ru) 2002-06-11 2008-01-10 Нокиа Корпорейшн Внутреннее кодирование, основанное на пространственном прогнозировании
US7289674B2 (en) 2002-06-11 2007-10-30 Nokia Corporation Spatial prediction based intra coding
US7016547B1 (en) 2002-06-28 2006-03-21 Microsoft Corporation Adaptive entropy encoding/decoding for screen capture content
MXPA05007447A (es) 2003-01-10 2005-09-12 Thomson Licensing Sa Aparato de decodificador y metodo para suavizar artefactos creados durante el ocultamiento de error.
DE10301362B4 (de) 2003-01-16 2005-06-09 GEMAC-Gesellschaft für Mikroelektronikanwendung Chemnitz mbH Blockdatenkompressionssystem, bestehend aus einer Kompressionseinrichtung und einer Dekompressionseinrichtung, und Verfahren zur schnellen Blockdatenkompression mit Multi-Byte-Suche
US7373005B2 (en) 2003-04-10 2008-05-13 Micron Technology, Inc. Compression system for integrated sensor devices
US7609763B2 (en) 2003-07-18 2009-10-27 Microsoft Corporation Advanced bi-directional predictive coding of video frames
KR101089738B1 (ko) 2003-08-26 2011-12-07 톰슨 라이센싱 하이브리드 인트라-인터 코딩된 블록을 인코딩하기 위한 방법 및 장치
US7317839B2 (en) 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
KR101044934B1 (ko) 2003-12-18 2011-06-28 삼성전자주식회사 움직임 벡터 추정방법 및 부호화 모드 결정방법
JP4591657B2 (ja) 2003-12-22 2010-12-01 キヤノン株式会社 動画像符号化装置及びその制御方法、プログラム
US8036271B2 (en) 2004-02-24 2011-10-11 Lsi Corporation Method and apparatus for determining a second picture for temporal direct-mode block prediction
JP4338654B2 (ja) 2004-03-18 2009-10-07 三洋電機株式会社 動きベクトル検出装置及び方法、及びその動きベクトル検出装置を利用可能な画像符号化装置
US8116374B2 (en) 2004-05-07 2012-02-14 Broadcom Corporation Method and system for generating a transform size syntax element for video decoding
JP4418762B2 (ja) 2004-05-07 2010-02-24 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法、並びに、コンピュータプログラム及びコンピュータ可読記憶媒体
WO2006012383A2 (en) 2004-07-20 2006-02-02 Qualcomm Incorporated Method and apparatus for motion vector prediction in temporal video compression
JP2006140683A (ja) 2004-11-11 2006-06-01 Canon Inc 画像符号化装置
US7720154B2 (en) 2004-11-12 2010-05-18 Industrial Technology Research Institute System and method for fast variable-size motion estimation
JP2006140758A (ja) 2004-11-12 2006-06-01 Toshiba Corp 動画像符号化方法、動画像符号化装置および動画像符号化プログラム
KR100679035B1 (ko) 2005-01-04 2007-02-06 삼성전자주식회사 인트라 bl 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
US20060274070A1 (en) 2005-04-19 2006-12-07 Herman Daniel L Techniques and workflows for computer graphics animation system
US20060282855A1 (en) 2005-05-05 2006-12-14 Digital Display Innovations, Llc Multiple remote display system
KR100716999B1 (ko) 2005-06-03 2007-05-10 삼성전자주식회사 영상의 대칭성을 이용한 인트라 예측 방법, 이를 이용한영상의 복호화, 부호화 방법 및 장치
KR101211665B1 (ko) 2005-08-12 2012-12-12 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
JP2007053561A (ja) 2005-08-17 2007-03-01 Matsushita Electric Ind Co Ltd 画像符号化装置および画像符号化方法
EP1924970B1 (en) 2005-08-19 2009-03-11 TELEFONAKTIEBOLAGET LM ERICSSON (publ) Texture compression based on two hues with modified brightness
US7986844B2 (en) 2005-11-22 2011-07-26 Intel Corporation Optimized video compression using hashing function
US7956930B2 (en) 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
US8792555B2 (en) 2006-01-31 2014-07-29 Qualcomm Incorporated Methods and systems for resizing multimedia content
CN101026761B (zh) 2006-02-17 2010-05-12 中国科学院自动化研究所 一种具有最小误差的快速变尺寸块匹配的运动估计方法
US7668382B2 (en) 2006-02-24 2010-02-23 Microsoft Corporation Block-based fast image compression
US7616816B2 (en) 2006-03-20 2009-11-10 Sarnoff Corporation System and method for mission-driven visual information retrieval and organization
WO2007119198A1 (en) * 2006-04-14 2007-10-25 Nxp B.V. Motion estimation at image borders
US8457200B2 (en) 2006-07-07 2013-06-04 Telefonaktiebolaget Lm Ericsson (Publ) Video data management
DE102007035204A1 (de) 2006-07-28 2008-02-07 Mediatek Inc. Videoverarbeitungs- und - betriebsvorrichtung
US8472527B2 (en) 2006-09-13 2013-06-25 Texas Instruments Incorporated Hierarchical motion estimation using original frame for sub-sampled reference
BRPI0716540A2 (pt) 2006-09-22 2012-12-25 Thomson Licensing mÉtodo e aparelho para codificaÇço e decodificaÇço de vÍdeo de passos méltiplos
FR2906433B1 (fr) 2006-09-22 2009-02-27 Canon Kk Procedes et dispositifs de codage et de decodage d'images, programme d'ordinateur les mettant en oeuvre et support d'informaton permettant de les mettre en oeuvre
US20080084924A1 (en) 2006-10-05 2008-04-10 Donald Martin Monro Matching pursuits basis selection design
US8218641B2 (en) 2006-10-31 2012-07-10 Sony Computer Entertainment Inc. Picture encoding using same-picture reference for pixel reconstruction
US8218640B2 (en) * 2006-10-31 2012-07-10 Sony Computer Entertainment Inc. Picture decoding using same-picture reference for pixel reconstruction
JP2008154015A (ja) 2006-12-19 2008-07-03 Hitachi Ltd 復号化方法および符号化方法
US7907783B2 (en) 2007-01-24 2011-03-15 Samsung Electronics Co., Ltd. Apparatus and method of matching symbols in a text image coding and decoding system
CN100527842C (zh) 2007-01-26 2009-08-12 清华大学 基于背景的运动估计编码方法
US8472522B2 (en) 2007-02-23 2013-06-25 Nippon Telegraph And Telephone Corporation Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media which store the programs
US8160150B2 (en) * 2007-04-10 2012-04-17 Texas Instruments Incorporated Method and system for rate distortion optimization
JP2010525658A (ja) 2007-04-19 2010-07-22 トムソン ライセンシング イントラ予測のための適応参照画像データ生成
US7903873B2 (en) 2007-09-13 2011-03-08 Microsoft Corporation Textual image coding
CN101420606A (zh) 2007-10-23 2009-04-29 青岛海信电器股份有限公司 图像处理方法和装置
JP2009147807A (ja) 2007-12-17 2009-07-02 Fujifilm Corp 画像処理装置
CN101232619B (zh) 2008-01-25 2011-05-11 浙江大学 嵌入帧内编码块的视频编码方法
TWI375472B (en) 2008-02-04 2012-10-21 Ind Tech Res Inst Intra prediction method for luma block of video
CN101552924B (zh) 2008-03-31 2011-08-03 深圳市融创天下科技发展有限公司 一种用于视频编码的空间预测方法
CN102090062B (zh) 2008-04-11 2013-12-11 汤姆森特许公司 用于位移帧内预测和模板匹配的去块滤波
JP2009260473A (ja) 2008-04-14 2009-11-05 Canon Inc 色処理方法及び装置、プログラム、記録媒体
JP2010035137A (ja) 2008-07-01 2010-02-12 Sony Corp 画像処理装置および方法、並びにプログラム
WO2010017166A2 (en) 2008-08-04 2010-02-11 Dolby Laboratories Licensing Corporation Overlapped block disparity estimation and compensation architecture
US8213503B2 (en) 2008-09-05 2012-07-03 Microsoft Corporation Skip modes for inter-layer residual video coding and decoding
US8385404B2 (en) 2008-09-11 2013-02-26 Google Inc. System and method for video encoding using constructed reference frame
KR101306834B1 (ko) 2008-09-22 2013-09-10 에스케이텔레콤 주식회사 인트라 예측 모드의 예측 가능성을 이용한 영상 부호화/복호화 장치 및 방법
US8254704B2 (en) 2008-10-30 2012-08-28 Microsoft Corporation Remote computing platforms providing high-fidelity display and interactivity for clients
US8180165B2 (en) 2008-12-19 2012-05-15 Microsoft Corp. Accelerated screen codec
KR101359490B1 (ko) 2008-12-23 2014-02-10 에스케이 텔레콤주식회사 컬러 영상 부호화/복호화 방법 및 장치
TW201028018A (en) 2009-01-07 2010-07-16 Ind Tech Res Inst Encoder, decoder, encoding method and decoding method
WO2010085899A1 (en) 2009-02-02 2010-08-05 Calgary Scientific Inc. Image data transmission
RU2420021C2 (ru) 2009-03-24 2011-05-27 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ сжатия изображений и видеопоследовательностей
EP2249571A1 (en) 2009-05-04 2010-11-10 Thomson Licensing SA Method and device for encoding an image frame comprising macroblocks
JP5566455B2 (ja) 2009-06-22 2014-08-06 トムソン ライセンシング 画像系列のビデオデータを符号化する方法及びエンコーダ並びに現在のブロックを復号化する方法及びデコーダ
CN102077597A (zh) 2009-07-10 2011-05-25 松下电器产业株式会社 运动图像编码方法、装置、程序、以及集成电路
CN101626512A (zh) 2009-08-11 2010-01-13 北京交通大学 一种基于相关性优化准则的多描述视频编码方法及装置
KR101698499B1 (ko) 2009-10-01 2017-01-23 에스케이텔레콤 주식회사 분할 레이어를 이용한 영상 부호화/복호화 방법 및 장치
TWI566586B (zh) * 2009-10-20 2017-01-11 湯姆生特許公司 一序列形象的現時區塊之寫碼方法和重建方法
JP5321426B2 (ja) 2009-11-26 2013-10-23 株式会社Jvcケンウッド 画像符号化装置、画像復号化装置、画像符号化方法、及び画像復号化方法
KR101623124B1 (ko) 2009-12-03 2016-05-24 에스케이 텔레콤주식회사 비디오 인코딩 장치 및 그 인코딩 방법, 비디오 디코딩 장치 및 그 디코딩 방법, 및 거기에 이용되는 방향적 인트라 예측방법
WO2011095260A1 (en) * 2010-02-05 2011-08-11 Telefonaktiebolaget L M Ericsson (Publ) Managing predicted motion vector candidates
US20110194613A1 (en) 2010-02-11 2011-08-11 Qualcomm Incorporated Video coding with large macroblocks
JP5375676B2 (ja) 2010-03-04 2013-12-25 富士通株式会社 画像処理装置、画像処理方法、および画像処理プログラム
EP2553927B1 (fr) 2010-03-31 2018-11-28 Orange Procedes et dispositifs de codage et de decodage d'une sequence d'images mettant en oeuvre une prediction par compensation de mouvement avant, et programme d'ordinateur correspondant
US8619857B2 (en) 2010-04-09 2013-12-31 Sharp Laboratories Of America, Inc. Methods and systems for intra prediction
US8644375B2 (en) 2010-04-09 2014-02-04 Sharp Laboratories Of America, Inc. Methods and systems for intra prediction
KR101752418B1 (ko) * 2010-04-09 2017-06-29 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
KR101789634B1 (ko) 2010-04-09 2017-10-25 엘지전자 주식회사 비디오 데이터 처리 방법 및 장치
US20110261880A1 (en) 2010-04-27 2011-10-27 Sony Corporation Boundary adaptive intra prediction for improving subjective video quality
KR20110123651A (ko) 2010-05-07 2011-11-15 한국전자통신연구원 생략 부호화를 이용한 영상 부호화 및 복호화 장치 및 그 방법
CN103141091A (zh) 2010-06-21 2013-06-05 汤姆逊许可公司 图像数据编码/解码的方法及其设备
EP2942957A1 (en) 2010-07-02 2015-11-11 HUMAX Holdings Co., Ltd. Apparatus for decoding images for intra-prediction
KR101484281B1 (ko) 2010-07-09 2015-01-21 삼성전자주식회사 블록 병합을 이용한 비디오 부호화 방법 및 그 장치, 블록 병합을 이용한 비디오 복호화 방법 및 그 장치
MX367865B (es) 2010-07-14 2019-09-05 Ntt Docomo Inc Intrapredicción de baja complejidad para la codificación de video.
CN105227958B (zh) 2010-07-20 2019-06-25 Sk电信有限公司 用于解码视频信号的解码装置
RS62555B1 (sr) 2010-11-04 2021-12-31 Ge Video Compression Llc Kodiranje slike koje podražava objedinjavanje blokova i režim preskakanja
US8787459B2 (en) * 2010-11-09 2014-07-22 Sony Computer Entertainment Inc. Video coding methods and apparatus
KR101756442B1 (ko) 2010-11-29 2017-07-11 에스케이텔레콤 주식회사 인트라예측모드의 중복성을 최소화하기 위한 영상 부호화/복호화 방법 및 장치
US20120163457A1 (en) 2010-12-28 2012-06-28 Viktor Wahadaniah Moving picture decoding method, moving picture coding method, moving picture decoding apparatus, moving picture coding apparatus, and moving picture coding and decoding apparatus
US8767835B2 (en) 2010-12-28 2014-07-01 Mitsubishi Electric Research Laboratories, Inc. Method for coding videos using dictionaries
KR101739579B1 (ko) 2011-01-04 2017-05-24 에스케이 텔레콤주식회사 코딩 유닛 단위 병렬 인트라예측을 이용한 부호화/복호화 방법 및 장치
US8913662B2 (en) 2011-01-06 2014-12-16 Qualcomm Incorporated Indicating intra-prediction mode selection for video coding using CABAC
KR20120080122A (ko) * 2011-01-06 2012-07-16 삼성전자주식회사 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법
SI3554079T1 (sl) * 2011-01-07 2023-01-31 Lg Electronics Inc. Postopek za kodiranje video informacij, postopek za dekodiranje video informacij in dekodirna naprava za dekodiranje video informacij
EP2664146A1 (en) 2011-01-14 2013-11-20 Motorola Mobility LLC Joint spatial and temporal block merge mode for hevc
US9066104B2 (en) * 2011-01-14 2015-06-23 Google Inc. Spatial block merge mode
DK2768144T3 (da) 2011-01-14 2016-04-04 Ge Video Compression Llc Entropikodnings- og afkodningssystem
US9787981B2 (en) * 2011-01-19 2017-10-10 Renesas Electronics Corporation Image coding device and image decoding device
US8755437B2 (en) * 2011-03-17 2014-06-17 Mediatek Inc. Method and apparatus for derivation of spatial motion vector candidate and motion vector prediction candidate
US9532066B2 (en) 2011-01-21 2016-12-27 Qualcomm Incorporated Motion vector prediction
US8548057B2 (en) 2011-01-25 2013-10-01 Microsoft Corporation Video coding redundancy reduction
US9319716B2 (en) 2011-01-27 2016-04-19 Qualcomm Incorporated Performing motion vector prediction for video coding
US9288501B2 (en) 2011-03-08 2016-03-15 Qualcomm Incorporated Motion vector predictors (MVPs) for bi-predictive inter mode in video coding
US9788019B2 (en) 2011-03-09 2017-10-10 Hfi Innovation Inc. Method and apparatus of transform unit partition with reduced complexity
CN103392340B (zh) * 2011-03-14 2017-02-08 寰发股份有限公司 推导运动向量预测子的方法与装置
CN107979759B (zh) * 2011-03-21 2021-04-30 Lg 电子株式会社 选择运动矢量预测值的方法和使用其的设备
US8693547B2 (en) 2011-04-06 2014-04-08 Google Inc. Apparatus and method for coding using motion vector segmentation
MX354812B (es) 2011-04-21 2018-03-22 Samsung Electronics Co Ltd Método para cuantificar coeficientes de codificación predictiva lineal, método de codificación de sonido, método para decuantificar coeficientes de codificación predictiva lineal, método de decodificación de sonido y medio de grabación.
US20140050414A1 (en) 2011-04-29 2014-02-20 Telefonaktiebolaget L M Ericsson (Publ) Encoder, Decoder and Methods Thereof for Texture Compression
US20120281760A1 (en) * 2011-05-04 2012-11-08 Hyung Joon Kim Iterative Grid-Pattern Motion Search
US8971416B2 (en) 2011-05-05 2015-03-03 Vixs Systems, Inc Video decoder with vector processor and methods for use therewith
CN102137263B (zh) 2011-05-09 2013-07-03 松日数码发展(深圳)有限公司 基于cnm关键帧分类的分布式视频编码及解码方法
US20120294353A1 (en) 2011-05-16 2012-11-22 Mediatek Inc. Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components
JPWO2012157443A1 (ja) 2011-05-16 2014-07-31 ソニー株式会社 画像処理装置、及び、画像処理方法
CN102238391B (zh) 2011-05-25 2016-12-07 深圳市云宙多媒体技术有限公司 一种预测编码方法、装置
JP5727873B2 (ja) 2011-06-10 2015-06-03 日本放送協会 動きベクトル検出装置、符号化装置、及びこれらのプログラム
US9565428B2 (en) 2011-06-20 2017-02-07 Mediatek Singapore Pte. Ltd. Method and apparatus of chroma intra prediction with reduced line memory
EP2724538A4 (en) * 2011-06-24 2016-04-27 Mediatek Inc METHOD AND DEVICE FOR REMOVING REDUNDANCES IN MOTOR VECTOR PREDICTORS
EP2725793A4 (en) 2011-06-27 2014-12-03 Panasonic Ip Corp America IMAGE DECODING METHOD, IMAGE ENCODING METHOD, IMAGE DECODING DEVICE, IMAGE ENCODING DEVICE, AND IMAGE ENCODING / DECODING DEVICE
US9060173B2 (en) 2011-06-30 2015-06-16 Sharp Kabushiki Kaisha Context initialization based on decoder picture buffer
US9516349B2 (en) 2011-07-12 2016-12-06 Futurewei Technologies, Inc. Pixel-based intra prediction for coding in HEVC
CN102223541B (zh) 2011-07-14 2013-07-03 北京工业大学 一种混合图像的编码方法
US9232237B2 (en) 2011-08-05 2016-01-05 Texas Instruments Incorporated Block-based parallel deblocking filter in video coding
US9769472B2 (en) 2011-08-17 2017-09-19 Mediatek Singapore Pte. Ltd. Method and apparatus for Intra prediction using non-square blocks
MX351933B (es) 2011-08-29 2017-11-01 Ibex Pt Holdings Co Ltd Método para generar un bloque de predicción en modo de predicción de vector de movimiento avanzada (amvp).
US8804816B2 (en) 2011-08-30 2014-08-12 Microsoft Corporation Video encoding enhancements
US9578336B2 (en) 2011-08-31 2017-02-21 Texas Instruments Incorporated Hybrid video and graphics system with automatic content detection process, and other circuits, processes, and systems
AU2011379313A1 (en) * 2011-10-21 2014-05-22 Nokia Technologies Oy Method for video coding and an apparatus
GB2495990A (en) * 2011-10-28 2013-05-01 Canon Kk Motion compensated image coding with omission of coding mode cost calculation for a motion predictor in a set.
US9484952B2 (en) 2011-11-03 2016-11-01 Qualcomm Incorporated Context state and probability initialization for context adaptive entropy coding
US10390046B2 (en) 2011-11-07 2019-08-20 Qualcomm Incorporated Coding significant coefficient information in transform skip mode
US9774853B2 (en) 2011-11-08 2017-09-26 Google Technology Holdings LLC Devices and methods for sample adaptive offset coding and/or signaling
WO2013068564A1 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Effective wedgelet partition coding using spatial prediction
US20130121417A1 (en) 2011-11-16 2013-05-16 Qualcomm Incorporated Constrained reference picture sets in wave front parallel processing of video data
US9883203B2 (en) 2011-11-18 2018-01-30 Qualcomm Incorporated Adaptive overlapped block motion compensation
EP3739886A1 (en) 2011-11-18 2020-11-18 GE Video Compression, LLC Multi-view coding with efficient residual handling
KR102061214B1 (ko) 2011-11-25 2019-12-31 선 페이턴트 트러스트 화상 처리 방법 및 화상 처리 장치
RU2493670C2 (ru) 2011-12-15 2013-09-20 Федеральное государственное автономное образовательное учреждение высшего профессионального образования "Национальный исследовательский университет "МИЭТ" Способ блочной межкадровой компенсации движения для видеокодеков
CN104012092A (zh) 2011-12-20 2014-08-27 摩托罗拉移动有限责任公司 高效变换单元编码的方法和设备
US9762904B2 (en) 2011-12-22 2017-09-12 Qualcomm Incorporated Performing motion vector prediction for video coding
US20130163664A1 (en) 2011-12-22 2013-06-27 Qualcomm Incorporated Unified partition mode table for intra-mode coding
US9900615B2 (en) 2011-12-28 2018-02-20 Microsoft Technology Licensing, Llc Representative motion information for temporal motion prediction in video encoding and decoding
WO2013102293A1 (en) 2012-01-04 2013-07-11 Mediatek Singapore Pte. Ltd. Improvements of luma-based chroma intra prediction
US9451252B2 (en) 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
US9749661B2 (en) 2012-01-18 2017-08-29 Qualcomm Incorporated Sub-streams for wavefront parallel processing in video coding
JP2013150173A (ja) 2012-01-19 2013-08-01 Sony Corp 画像処理装置および方法
IN2014KN01699A (ja) 2012-01-20 2015-10-23 Fraunhofer Ges Forschung
US20130188718A1 (en) 2012-01-20 2013-07-25 Qualcomm Incorporated Motion prediction in svc without including a temporally neighboring block motion vector in a candidate list
JP2013150215A (ja) 2012-01-20 2013-08-01 Fujitsu Ltd 動画像復号装置、動画像符号化装置、動画像復号方法、動画像符号化方法、動画像復号プログラム及び動画像符号化プログラム
US9210438B2 (en) 2012-01-20 2015-12-08 Sony Corporation Logical intra mode naming in HEVC video coding
US10244246B2 (en) 2012-02-02 2019-03-26 Texas Instruments Incorporated Sub-pictures for pixel rate balancing on multi-core platforms
WO2013128010A2 (en) 2012-03-02 2013-09-06 Canon Kabushiki Kaisha Method and devices for encoding a sequence of images into a scalable video bit-stream, and decoding a corresponding scalable video bit-stream
US8737824B1 (en) 2012-03-09 2014-05-27 Google Inc. Adaptively encoding a media stream with compound prediction
US9503720B2 (en) 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
JP2015515806A (ja) 2012-03-26 2015-05-28 ユークリッド・ディスカバリーズ・エルエルシーEuclid Discoveries,Llc コンテキストベースの映像符号化及び映像復号化
US20130258052A1 (en) 2012-03-28 2013-10-03 Qualcomm Incorporated Inter-view residual prediction in 3d video coding
US9838684B2 (en) 2012-04-11 2017-12-05 Qualcomm Incorporated Wavefront parallel processing for video coding
US20130272409A1 (en) 2012-04-12 2013-10-17 Qualcomm Incorporated Bandwidth reduction in video coding through applying the same reference index
CN104170389B (zh) 2012-04-24 2018-10-26 联发科技股份有限公司 运动向量预测器的产生方法和装置及视点间运动向量预测器候选的产生方法
GB2501535A (en) 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9521410B2 (en) 2012-04-26 2016-12-13 Qualcomm Incorporated Quantization parameter (QP) coding in video coding
US9762903B2 (en) 2012-06-01 2017-09-12 Qualcomm Incorporated External pictures in video coding
CN102752595B (zh) 2012-06-29 2014-07-09 香港应用科技研究院有限公司 用于深度图编码和解码的混合型跳过模式
US9621905B2 (en) 2012-06-29 2017-04-11 Qualcomm Incorporated Tiles and wavefront parallel processing
US9716892B2 (en) 2012-07-02 2017-07-25 Qualcomm Incorporated Video parameter set including session negotiation information
US9264713B2 (en) 2012-07-11 2016-02-16 Qualcomm Incorporated Rotation of prediction residual blocks in video coding with transform skipping
US9549182B2 (en) 2012-07-11 2017-01-17 Qualcomm Incorporated Repositioning of prediction residual blocks in video coding
US9467692B2 (en) 2012-08-31 2016-10-11 Qualcomm Incorporated Intra prediction improvements for scalable video coding
US20140071235A1 (en) 2012-09-13 2014-03-13 Qualcomm Incorporated Inter-view motion prediction for 3d video
CN108769698B (zh) 2012-09-26 2021-07-02 威勒斯媒体国际有限公司 图像解码方法、图像编码方法、图像解码装置、图像编码装置及图像编解码装置
EP2903285A4 (en) * 2012-09-28 2016-06-01 Sharp Kk IMAGE DECODING DEVICE AND IMAGE CODING DEVICE
US9998755B2 (en) 2012-10-03 2018-06-12 Mediatek Inc. Method and apparatus for motion information inheritance in three-dimensional video coding
US9357214B2 (en) * 2012-12-07 2016-05-31 Qualcomm Incorporated Advanced merge/skip mode and advanced motion vector prediction (AMVP) mode for 3D video
US9615090B2 (en) 2012-12-28 2017-04-04 Qualcomm Incorporated Parsing syntax elements in three-dimensional video coding
US9826244B2 (en) 2013-01-08 2017-11-21 Qualcomm Incorporated Device and method for scalable coding of video information based on high efficiency video coding
CN103067716B (zh) 2013-01-10 2016-06-29 华为技术有限公司 深度图像的编解码方法和编解码装置
US9800857B2 (en) 2013-03-08 2017-10-24 Qualcomm Incorporated Inter-view residual prediction in multi-view or 3-dimensional video coding
US9516306B2 (en) 2013-03-27 2016-12-06 Qualcomm Incorporated Depth coding modes signaling of depth data for 3D-HEVC
US10904551B2 (en) * 2013-04-05 2021-01-26 Texas Instruments Incorporated Video coding using intra block copy
CN103237226B (zh) 2013-04-07 2016-08-03 宁波大学 一种立体视频宏块丢失错误隐藏方法
WO2014166104A1 (en) 2013-04-12 2014-10-16 Mediatek Singapore Pte. Ltd. Removal of parsing dependency for illumination compensation
US11323747B2 (en) 2013-06-05 2022-05-03 Qualcomm Incorporated Residual differential pulse code modulation (DPCM) extensions and harmonization with transform skip, rotation, and scans
CN103281538B (zh) 2013-06-06 2016-01-13 上海交通大学 基于滚动哈希和块级别帧内预测的帧内编码方法
CN111800640B (zh) 2013-06-13 2023-11-10 上海天荷电子信息有限公司 方向交替变换来回扫描串匹配的图像编码解码方法和装置
US9300967B2 (en) 2013-06-19 2016-03-29 Apple Inc. Sample adaptive offset control
US10015515B2 (en) * 2013-06-21 2018-07-03 Qualcomm Incorporated Intra prediction from a predictive block
GB2516422A (en) 2013-07-09 2015-01-28 Sony Corp Data encoding and decoding
US9558567B2 (en) 2013-07-12 2017-01-31 Qualcomm Incorporated Palette prediction in palette-based video coding
US20150016533A1 (en) 2013-07-12 2015-01-15 Qualcomm Incorporated Intra motion compensation extensions
US20150016516A1 (en) 2013-07-15 2015-01-15 Samsung Electronics Co., Ltd. Method for intra prediction improvements for oblique modes in video coding
EP3028466B1 (en) * 2013-07-24 2022-01-26 Qualcomm Incorporated Simplified advanced motion prediction for 3d-hevc
US9774879B2 (en) * 2013-08-16 2017-09-26 Sony Corporation Intra-block copying enhancements for HEVC in-range-extension (RExt)
CN112383780B (zh) 2013-08-16 2023-05-02 上海天荷电子信息有限公司 点匹配参考集和索引来回扫描串匹配的编解码方法和装置
US10313682B2 (en) 2013-08-26 2019-06-04 Qualcomm Incorporated Determining regions when performing intra block copying
US9503715B2 (en) 2013-08-30 2016-11-22 Qualcomm Incorporated Constrained intra prediction in video coding
CN104427338B (zh) 2013-09-07 2019-11-05 上海天荷电子信息有限公司 一种使用块匹配的图像编码以及图像解码的方法和装置
US20150071357A1 (en) 2013-09-12 2015-03-12 Qualcomm Incorporated Partial intra block copying for video coding
US10009629B2 (en) 2013-10-11 2018-06-26 Sony Corporation Video coding system with search range and method of operation thereof
US11109036B2 (en) 2013-10-14 2021-08-31 Microsoft Technology Licensing, Llc Encoder-side options for intra block copy prediction mode for video and image coding
WO2015054811A1 (en) 2013-10-14 2015-04-23 Microsoft Corporation Features of intra block copy prediction mode for video and image coding and decoding
CA2925183C (en) 2013-10-14 2020-03-10 Microsoft Technology Licensing, Llc Features of base color index map mode for video and image coding and decoding
US20150110181A1 (en) 2013-10-18 2015-04-23 Samsung Electronics Co., Ltd. Methods for palette prediction and intra block copy padding
US10291827B2 (en) * 2013-11-22 2019-05-14 Futurewei Technologies, Inc. Advanced screen content coding solution
CN110336999B (zh) 2013-12-18 2021-09-03 寰发股份有限公司 利用调色板编码的编码视频数据区块的方法和装置
TWI536811B (zh) * 2013-12-27 2016-06-01 財團法人工業技術研究院 影像處理方法與系統、解碼方法、編碼器與解碼器
JP6355744B2 (ja) 2014-01-03 2018-07-11 マイクロソフト テクノロジー ライセンシング,エルエルシー ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
US9883197B2 (en) 2014-01-09 2018-01-30 Qualcomm Incorporated Intra prediction of chroma blocks using the same vector
US20150271515A1 (en) 2014-01-10 2015-09-24 Qualcomm Incorporated Block vector coding for intra block copy in video coding
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
GB2522844A (en) 2014-01-29 2015-08-12 Sony Corp Data encoding and decoding
US9699468B2 (en) 2014-02-10 2017-07-04 Microsoft Technology Licensing, Llc Adaptive screen and video coding scheme
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
CN109889850A (zh) * 2014-02-21 2019-06-14 联发科技(新加坡)私人有限公司 视频编解码方法
US10567754B2 (en) 2014-03-04 2020-02-18 Microsoft Technology Licensing, Llc Hash table construction and availability checking for hash-based block matching
JP2017512026A (ja) 2014-03-04 2017-04-27 マイクロソフト テクノロジー ライセンシング,エルエルシー イントラブロックコピー予測におけるブロック反転及びスキップモード
EP3117608B1 (en) 2014-03-14 2021-05-12 HFI Innovation Inc. Method for palette management
CN106464888A (zh) 2014-03-17 2017-02-22 诺基亚技术有限公司 用于视频编码和解码的方法和技术设备
US20150264348A1 (en) 2014-03-17 2015-09-17 Qualcomm Incorporated Dictionary coding of video content
US10432928B2 (en) 2014-03-21 2019-10-01 Qualcomm Incorporated Using a current picture as a reference for video coding
US10477232B2 (en) 2014-03-21 2019-11-12 Qualcomm Incorporated Search region determination for intra block copy in video coding
AU2014202682A1 (en) * 2014-05-16 2015-12-03 Canon Kabushiki Kaisha Method, apparatus and system for copying a block of video samples
US11323733B2 (en) 2014-05-23 2022-05-03 Qualcomm Incorporated Predictor palette initialization in palette-based video coding
US10785486B2 (en) 2014-06-19 2020-09-22 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
CN111432220B (zh) * 2014-06-19 2022-05-06 Vid拓展公司 采用块向量导出的帧内块复制编码的方法和系统
US9948949B2 (en) * 2014-06-20 2018-04-17 Qualcomm Incorporated Intra block copy block vector signaling for video coding
KR101748620B1 (ko) * 2014-06-20 2017-07-04 성균관대학교산학협력단 영상의 부호화/복호화 방법 및 이를 이용하는 장치
US20150381994A1 (en) 2014-06-27 2015-12-31 Futurewei Technologies, Inc. Advanced screen content coding with improved palette table and index map coding methods
US10412387B2 (en) 2014-08-22 2019-09-10 Qualcomm Incorporated Unified intra-block copy and inter-prediction
AU2014408228B2 (en) 2014-09-30 2019-09-19 Microsoft Technology Licensing, Llc Rules for intra-picture prediction modes when wavefront parallel processing is enabled
US9591325B2 (en) 2015-01-27 2017-03-07 Microsoft Technology Licensing, Llc Special case handling for merged chroma blocks in intra block copy prediction mode
US10638140B2 (en) 2015-05-29 2020-04-28 Qualcomm Incorporated Slice level intra block copy and other video coding improvements
WO2017205621A1 (en) 2016-05-25 2017-11-30 Arris Enterprises Llc Jvet coding block structure with asymmetrical partitioning
JP2018032949A (ja) 2016-08-23 2018-03-01 キヤノン株式会社 動きベクトル検出装置およびその制御方法
US10817747B2 (en) 2019-03-14 2020-10-27 Ubicquia Iq Llc Homography through satellite image matching

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011048903A1 (ja) * 2009-10-20 2011-04-28 シャープ株式会社 動画像符号化装置、動画像復号装置、および、データ構造
WO2015035449A1 (en) * 2013-09-13 2015-03-19 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
DAVID FLYNN: "High Efficiency Video Coding (HEVC) Range Extensions text specification: Draft 5", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, JPN6017043665, 1 November 2013 (2013-11-01), pages 1 - 94, ISSN: 0003682279 *
村上 篤道 ほか2名, 高効率映像符号化技術 HEVC/H.265とその応用, vol. 第1版 第1刷, JPN6017043666, 25 February 2013 (2013-02-25), pages 117 - 118, ISSN: 0003682280 *

Also Published As

Publication number Publication date
US11910005B2 (en) 2024-02-20
WO2015100726A1 (en) 2015-07-09
AU2014376061A1 (en) 2016-07-07
KR102258427B1 (ko) 2021-06-01
ES2924392T3 (es) 2022-10-06
CA2934699A1 (en) 2015-07-09
KR102353787B1 (ko) 2022-01-19
EP4096221A1 (en) 2022-11-30
US11388433B2 (en) 2022-07-12
US20220295093A1 (en) 2022-09-15
CN105917650A (zh) 2016-08-31
AU2014376061A8 (en) 2019-05-30
AU2014376061B8 (en) 2019-05-30
MX360926B (es) 2018-11-22
EP3090553A4 (en) 2017-12-20
EP3090553B1 (en) 2022-07-06
KR20210060650A (ko) 2021-05-26
MX2016008784A (es) 2016-09-08
US20160330471A1 (en) 2016-11-10
RU2669005C2 (ru) 2018-10-05
EP3090553A1 (en) 2016-11-09
BR112016015080A2 (pt) 2017-08-08
RU2016125260A (ru) 2017-12-28
CN105917650B (zh) 2019-12-24
US10469863B2 (en) 2019-11-05
US20240146955A1 (en) 2024-05-02
US20200092579A1 (en) 2020-03-19
KR20160105510A (ko) 2016-09-06
JP6355744B2 (ja) 2018-07-11
AU2014376061B2 (en) 2019-04-11

Similar Documents

Publication Publication Date Title
US11910005B2 (en) Block vector prediction in video and image coding/decoding
US11778229B2 (en) Conditional signalling of reference picture list modification information
US20220132163A1 (en) Features of base color index map mode for video and image coding and decoding
KR102401946B1 (ko) 인트라 블록 카피 예측에서의 스킵 모드 및 블록 플립핑
KR20210040195A (ko) 파면 병렬 프로세싱이 인에이블되는 경우의 인트라 픽쳐 예측 모드에 대한 규칙
JP2017511620A (ja) オーバーラップエリア内の再構成されたサンプル値のブロックベクトル予測及び推定におけるイノベーション
JP2018088715A (ja) イントラブロックコピー予測におけるブロック反転及びスキップモード

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180219

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180515

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180612

R150 Certificate of patent or registration of utility model

Ref document number: 6355744

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250