Nothing Special   »   [go: up one dir, main page]

JP4235209B2 - 動きベクトル検出装置および動きベクトル検出方法 - Google Patents

動きベクトル検出装置および動きベクトル検出方法 Download PDF

Info

Publication number
JP4235209B2
JP4235209B2 JP2006033193A JP2006033193A JP4235209B2 JP 4235209 B2 JP4235209 B2 JP 4235209B2 JP 2006033193 A JP2006033193 A JP 2006033193A JP 2006033193 A JP2006033193 A JP 2006033193A JP 4235209 B2 JP4235209 B2 JP 4235209B2
Authority
JP
Japan
Prior art keywords
motion vector
image
picture
vector detection
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2006033193A
Other languages
English (en)
Other versions
JP2007214931A (ja
Inventor
雄一郎 小池
拓郎 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Electronics Corp
Original Assignee
NTT Electronics Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Electronics Corp filed Critical NTT Electronics Corp
Priority to JP2006033193A priority Critical patent/JP4235209B2/ja
Priority to US12/278,137 priority patent/US8126060B2/en
Priority to PCT/JP2007/051558 priority patent/WO2007091459A1/ja
Priority to CN2007800045208A priority patent/CN101379833B/zh
Priority to EP07713729.7A priority patent/EP1983761B1/en
Priority to TW96104304A priority patent/TWI404423B/zh
Publication of JP2007214931A publication Critical patent/JP2007214931A/ja
Application granted granted Critical
Publication of JP4235209B2 publication Critical patent/JP4235209B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/192—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
    • H04N19/194—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive involving only two passes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43—Hardware specially adapted for motion estimation or compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Analysis (AREA)

Description

本発明は、映像データの符号化に用いる動きベクトルを検出する動きベクトル検出装置および動きベクトル検出方法に関するものである。
近年、ＣＤやＤＶＤなどの記録媒体に映像データを記録し、必要に応じて読み出して再生することが多く行われている。
映像データはそのデータ量が膨大であるため、一般的に記録媒体に記録する際には符号化によるデータの圧縮が行われている。
映像データの符号化方法として、符号化対象画像とこの画像の時間的に前または後の画像とから検出される動きベクトルを利用して予測画像を生成し、符号化対象の画像とこの予測画像との差分をＭＰＥＧ規格により符号化するフレーム間予測符号化がある。
このフレーム間予測符号化で利用する動きベクトルを検出するための従来の技術について説明する。
図５は、従来の動きベクトル検出装置１０を示すブロック図である。図５において、動きベクトル検出装置１０は、データ入力Ｉ／Ｆ１１と、メモリＩ／Ｆ１２と、メモリ１３と、第１動きベクトル検出回路１４１を有する第１次動きベクトル検出部１４と、第２動きベクトル検出回路１５１を有する第２次動きベクトル検出部１５とを有する。
この動きベクトル検出装置１０で、インタレース画像の動きベクトルが検出される場合について説明する。
まず、ビデオカメラ等からデータ入力Ｉ／Ｆ１１に映像データが入力されると、メモリＩ／Ｆ１２を経由してメモリ１３に記録される。
次に、第１次動きベクトル検出部１４の第１動きベクトル検出回路１４１において、メモリ１３に記録された映像データから符号化対象画像データおよび動きベクトルを検出するために参照する参照画像データが取得される。
次に、第１動きベクトル検出回路１４１において、取得された符号化対象画像データと参照画像データとから、粗い画素精度（例えば２画素精度）で第１動きベクトルが検出される。
ここで、インタレース画像は１つの画像がトップフィールドとボトムフィールドとから構成されているため、符号化対象画像のトップフィールドとボトムフィールドとのそれぞれから、参照画像のトップフィールドとボトムフィールドとのそれぞれに対する第１動きベクトルが検出される。
つまり、予測画像としてＢピクチャが生成される場合は、符号化対象画像のトップフィールドとボトムフィールドとから前方参照画像のトップフィールドとボトムフィールドとが参照されて第１動きベクトルが検出されるとともに、符号化対象画像のトップフィールドとボトムフィールドとから後方参照画像のトップフィールドとボトムフィールドが参照されて第１動きベクトルが検出されるため、８個の第１動きベクトルが検出されることになる。
また、予測画像としてＰピクチャが生成される場合は、符号化対象画像のトップフィールドとボトムフィールドとから前方参照画像のトップフィールドとボトムフィールドとに対して第１動きベクトルが検出されるため、４個の第１動きベクトルが検出されることになる。
第１動きベクトル検出回路１４１で検出された各第１動きベクトルは、メモリＩ／Ｆ１２に出力される。
メモリＩ／Ｆ１２では、取得された各第１動きベクトルで示される参照画像の座標を原点とするマクロブロック参照画像データがそれぞれ取得され、符号化対象画像データとともに第２次動きベクトル検出部１５に出力される。
次に、第２次動きベクトル検出部１５の第２動きベクトル検出回路１５１において、取得されたマクロブロック参照画像データと符号化対象画像データとから高画素精度（例えば半画素精度）で第２動きベクトルの検出が行われる。
ここで、予測画像としてＢピクチャが生成される場合はブロック画像が８個取得されているため、高画素精度による第２動きベクトルも８個検出される。
また、予測画像としてＰピクチャが生成される場合はブロック画像が４個取得されているため、高画素精度による第２動きベクトルも４個検出される。
以上のようにして第２動きベクトルが検出されることにより、インタレース画像においてフレーム間予測符号化を行うことができる。
しかし、上述した動きベクトル検出装置１０では、検出されたすべての第１動きベクトルに基づいてマクロブロック参照画像データが切り出され、さらに第２動きベクトルが検出されていた。
そのため、第２次動きベクトル検出部１５に出力されるデータ量が膨大であるとともに第２次動きベクトル検出部１５における演算量が多く、動きベクトル検出装置１０の負担が大きいという問題があった。
この問題を解決するため、特許文献１には粗い画素精度で検出された複数の動きベクトルの中からディストーションの小さい動きベクトルを選択し、選択された動きベクトルを基に高画素精度での動きベクトルを検出する技術が記載されている。
この技術を利用することにより、フレーム間予測符号化においてＢピクチャを生成する場合は高画素精度での動きベクトルの検出は８個から４個に減らすことが可能になり、Ｐピクチャを生成する場合は４個から２個に減らすことが可能になる。
そのため、高画素精度の検出を行うために出力する画像のデータ量および第２動きベクトルを検出するための演算量を低減させることができ、動きベクトル検出装置の負担が軽減されるという効果がある。
特開平９−６５３４０号公報
しかし、フレーム間予測符号化を用いて特許文献１に記載の技術により第２動きベクトルを検出すると、参照するフィールドが少なくなるため画質が劣化する可能性があるという問題があった。
特に、予測画像としてＰピクチャが生成される場合は、第２動きベクトル検出回路１５１で参照されるフレーム数が２個になってしまい、画質の劣化が大きいという問題があった。
よって本発明の目的は、動きベクトル検出のための演算量を低減させるとともに画質の劣化を防ぐ動きベクトル検出装置および動きベクトル検出方法を提供することである。
上記課題を解決するために請求項１に記載の本発明の動きベクトル検出装置は、インタレース画像のフレーム間予測符号化に用いる予測画像を生成するための動きベクトルを検出する動きベクトル検出装置において、入力された画像から、１画素単位以上の精度で、符号化対象画像のトップフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のトップフィールドと参照画像のボトムフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のボトムフィールドとの動きベクトルとをそれぞれ第１動きベクトルとして検出する第１動きベクトル検出回路と、入力された画像のピクチャタイプがＰピクチャまたはＢピクチャであるときには常に、第１動きベクトル検出回路で検出された複数の第１動きベクトルの中から、符号化対象画像の同一フィールドから同一方向の参照画像のフィールドを参照した第１動きベクトルのうち、差分絶対値和が小さい第１動きベクトルを、予め設定された削減数に応じて抽出する第１動きベクトル抽出回路と、第１動きベクトル検出回路で検出された複数の第１動きベクトルと第１動きベクトル抽出回路で抽出された第１動きベクトルとのうち、入力された画像のピクチャタイプがＢピクチャであるときには第１動きベクトル抽出回路で抽出された第１動きベクトルを選択し、入力された画像のピクチャタイプがＰピクチャであるときには第１動きベクトル検出回路で検出された複数の第１動きベクトルを選択する選択回路と、選択回路で選択された第１動きベクトルを基に、さらに１画素単位未満の精度での動きベクトルを第２動きベクトルとして検出する第２動きベクトル検出回路とを備えることを特徴とする。
また、請求項２に記載の動きベクトル検出方法は、インタレース画像のフレーム間予測符号化に用いる予測画像を生成するための動きベクトルを検出する動きベクトル検出方法において、入力された画像から、動きベクトル検出装置が、１画素単位以上の精度で、符号化対象画像のトップフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のトップフィールドと参照画像のボトムフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のボトムフィールドとの動きベクトルとをそれぞれ第１動きベクトルとして検出する第１動きベクトル検出ステップと、入力された画像のピクチャタイプがＰピクチャまたはＢピクチャであるときには常に、第１動きベクトル検出ステップで検出された複数の第１動きベクトルの中から、符号化対象画像の同一フィールドから同一方向の参照画像のフィールドを参照した第１動きベクトルのうち、差分絶対値和が小さい第１動きベクトルを、予め設定された削減数に応じて抽出する第１動きベクトル抽出ステップと、第１動きベクトル検出ステップで検出された複数の第１動きベクトルと第１動きベクトル抽出ステップで抽出された第１動きベクトルとのうち、入力された画像のピクチャタイプがＢピクチャであるときには第１動きベクトル抽出ステップで抽出された第１動きベクトルを選択し、入力された画像のピクチャタイプがＰピクチャであるときには第１動きベクトル検出ステップで検出された複数の第１動きベクトルを選択する選択ステップと、選択ステップで選択された第１動きベクトルを基に、さらに１画素単位未満の精度での動きベクトルを第２動きベクトルとして検出する第２動きベクトル検出ステップとを備えることを特徴とする。
本発明の動きベクトル検出装置および動きベクトル検出方法によれば、画質の劣化を防止しつつ、動きベクトル検出のための演算量を低減させることができる。
本発明の一実施形態による動きベクトル検出装置は、フレーム間予測を用いてインタレース画像で構成された映像を符号化する際に、参照画像から予測画像を生成するための動きベクトルを検出するものである。
〈一実施形態による動きベクトル検出装置の構成〉
本実施形態による動きベクトル検出装置の構成を図１に示す。図１において、動きベクトル検出装置１は、データ入力Ｉ／Ｆ１１と、メモリＩ／Ｆ１２と、メモリ１３と、第１次動きベクトル検出部１４と、第２動きベクトル検出回路１５１を有する第２次動きベクトル検出部１５とを有する。
データ入力Ｉ／Ｆ１１は、外部のビデオカメラ等から受信した映像データを入力する。
メモリＩ／Ｆ１２は、データ入力Ｉ／Ｆ１１から入力した映像データをメモリ１３に出力するとともに、必要に応じてメモリ１３に記録されている映像データから所望の画像データを取得して第１次動きベクトル検出部１４または第２次動きベクトル検出部１５に出力する。
メモリ１３は、メモリＩ／Ｆ１２から取得した映像データを記録する。
第１次動きベクトル検出部１４の第１動きベクトル検出回路１４１は、メモリＩ／Ｆ１２を介してメモリ１３から符号化対象画像データおよび参照画像データを取得し、粗い画素精度（例えば２画素）で広い範囲の検出を行って動きベクトルを検出し、これを第１動きベクトルとして第１動きベクトル抽出回路１４２と選択回路１４３とに出力する。
本実施形態において、符号化対象画像および参照画像はインタレース画像であるため、第１動きベクトル検出回路１４１で検出される第１動きベクトルは、予測画像としてＢピクチャを生成する場合は８個、Ｐピクチャを生成する場合は４個である。
第１動きベクトル抽出回路１４２は、第１動きベクトル検出回路１４１から第１動きベクトルを取得して、取得した第１動きベクトルの中からＢピクチャを生成する場合は４個、Ｐピクチャを生成する場合は２個を抽出し、選択回路１４３に出力する。
選択回路１４３は、第１動きベクトル検出回路１４１および第１動きベクトル抽出回路１４２から第１動きベクトルを取得し、予測画像としてＢピクチャを生成する場合は第１動きベクトル抽出回路１４２から取得した４個の第１動きベクトルを選択し、Ｐピクチャを生成する場合は第１動きベクトル検出回路１４１から取得した４個の第１動きベクトルを選択する。また、選択した第１動きベクトルをメモリＩ／Ｆ１２に出力する。
第２次動きベクトル検出部１５の第２動きベクトル検出回路１５１は、メモリＩ／Ｆ１２を介してメモリ１３から符号化対象画像データおよび第１動きベクトルで示される座標を原点として切り出されたマクロブロック参照画像データを取得し、高画素精度（例えば半画素）で動きベクトルを検出する。また、検出された動きベクトルを第２動きベクトルとして出力する。
〈一実施形態による動きベクトル検出装置の動作〉
本実施形態による動きベクトル検出装置を用いて、入力された映像データを符号化するための動きベクトルを検出する動作を、図１〜４を参照して説明する。
まず、外部のビデオカメラ等から送信された映像データが、データ入力Ｉ／Ｆ１１から入力される（Ｓ１）。
データ入力Ｉ／Ｆ１１から入力された映像データは、メモリＩ／Ｆ１２を介してメモリ１３に記録される（Ｓ２）。
次に、映像データの中の符号化対象となる画像データがメモリＩ／Ｆ１２においてメモリ１３から読み出され、生成される予測画像がＢピクチャまたはＰピクチャの場合はさらに参照画像データがメモリ１３から読み出される。
メモリＩ／Ｆ１２で読み出された符号化対象画像データおよび参照画像データは、第１次動きベクトル検出部１４の第１動きベクトル検出回路１４１に出力される。
第１動きベクトル検出回路１４１では、取得した符号化対象画像データを基に粗い画素精度で参照画像データの広い範囲の検索が行われ、第１動きベクトルの検出が行われる（Ｓ３）。
ここで、本実施形態においては符号化対象画像および参照画像はインタレース画像であり、それぞれの画像がトップフィールドおよびボトムフィールドにより構成されているため、符号化対象画像を構成するトップフィールドとボトムフィールドとのそれぞれから参照画像を構成するトップフィールドとボトムフィールドとのそれぞれが参照されて第１動きベクトルが検出される。
予測画像としてＢピクチャが生成されるときの第１動きベクトルの検出について図３を参照して説明する。
Ｂピクチャが生成される際は、符号化対象画像により前方および後方の参照画像が参照されるため、図３に示すように、符号化対象画像のトップフィールド２１から前方参照画像のトップフィールド２３を参照した第１動きベクトルａと、符号化対象画像のトップフィールド２１から前方参照画像のボトムフィールド２４を参照した第１動きベクトルｂと、符号化対象画像のトップフィールド２１から後方参照画像のトップフィールド２５を参照した第１動きベクトルｃと、符号化対象画像のトップフィールド２１から後方参照画像のボトムフィールド２６を参照した第１動きベクトルｄとが検出される。
さらに、符号化対象画像のボトムフィールド２２から前方参照画像のトップフィールド２３を参照した第１動きベクトルｅと、符号化対象画像のボトムフィールド２２から前方参照画像のボトムフィールド２４を参照した第１動きベクトルｆと、符号化対象画像のボトムフィールド２２から後方参照画像のトップフィールド２５を参照した第１動きベクトルｇと、符号化対象画像のボトムフィールド２２から後方参照画像のボトムフィールド２６を参照した第１動きベクトルｈとが検出される。
これらの第１動きベクトルａ〜ｈが検出される際は、それぞれ参照するフィールドごとに差分絶対値和が最小となる動きベクトルが検出される。
このようにして、Ｂピクチャが生成されるときの第１動きベクトルは第１動きベクトルａ〜ｈの８個が検出され、第１動きベクトル抽出回路１４２および選択回路１４３に出力される。
第１動きベクトル抽出回路１４２では、第１動きベクトルａ〜ｈの８個の第１動きベクトルが取得されると、符号化対象画像の同一フィールドから同一方向の参照画像を参照した第１動きベクトルのうち、差分絶対値和が小さい第１動きベクトルが抽出される（Ｓ４）。
すなわち、第１動きベクトルａと第１動きベクトルｂの中から１つが抽出され、第１動きベクトルｃと第１動きベクトルｄの中から１つが抽出され、第１動きベクトルｅと第１動きベクトルｆの中から１つが抽出され、第１動きベクトルｇと第１動きベクトルｈの中から１つが抽出される。
このようにして、４個の第１動きベクトルが抽出される。抽出された４個の第１動きベクトルは、選択回路１４３に出力される。
次に、予測画像としてＰピクチャが生成されるときの第１動きベクトルの検出について図４を参照して説明する。
Ｐピクチャが生成される際は、符号化対象画像により前方の参照画像が参照されるため、図４に示すように、符号化対象画像のトップフィールド２７から参照画像のトップフィールド２９を参照した第１動きベクトルｉと、符号化対象画像のトップフィールド２７から参照画像のボトムフィールド３０を参照した第１動きベクトルｊとが検出される。
さらに、符号化対象画像のボトムフィールド２８から参照画像のトップフィールド２９を参照した第１動きベクトルｋと、符号化対象画像のボトムフィールド２８から参照画像のボトムフィールド３０を参照した第１動きベクトルｍとが検出される。
これらの第１動きベクトルｉ〜ｍが検出される際は、それぞれ参照するフィールドごとに差分絶対値和が最小となる動きベクトルが検出される。
このようにして、Ｐピクチャが生成されるときの第１動きベクトルは第１動きベクトルｉ〜ｍの４個が検出され、第１動きベクトル抽出回路１４２および選択回路１４３に出力される。
第１動きベクトル抽出回路１４２では、第１動きベクトルｉ〜ｍの４個の第１動きベクトルが取得されると、符号化対象画像の同一フィールドから参照画像を参照した第１動きベクトルのうち、差分絶対値和が小さい第１動きベクトルが抽出される（Ｓ４）。
すなわち、第１動きベクトルｉと第１動きベクトルｊの中から１つが抽出され、第１動きベクトルｋと第１動きベクトルｍの中から１つが抽出される。
このようにして、２個の第１動きベクトルが抽出される。抽出された２個の第１動きベクトルは、選択回路１４３に出力される。
選択回路１４３では、第１動きベクトル検出回路１４１および第１動きベクトル抽出回路１４２から取得された第１動きベクトルのうち、予測画像の生成に用いる第１動きベクトルが選択される（Ｓ５）。
具体的には、予測画像としてＢピクチャが生成されるときには、第１動きベクトル抽出回路１４２から取得された４個の第１動きベクトルが選択され、予測画像としてＰピクチャが生成されるときには、第１動きベクトル検出回路１４１から取得された４個の第１動きベクトルが選択される。
選択された第１動きベクトルには、第１動きベクトル検出回路１４１から取得された第１動きベクトルであるか第１動きベクトル抽出回路１４２から取得された第１動きベクトルであるかの第１動きベクトル取得元を示す１ビットの信号ｓが付加され、選択回路１４３からメモリＩ／Ｆ１２に出力される。
メモリＩ／Ｆ１２では、Ｂピクチャが生成される場合もＰピクチャが生成される場合も４個の第１動きベクトルが取得され、各第１動きベクトルにより示される座標を原点として参照画像の各フィールドから予め設定された大きさのマクロブロック参照画像データがそれぞれ切り出される。
ここでメモリＩ／Ｆ１２においては、選択回路１４３から取得した信号ｓを基に第１動きベクトルの数が判断される。
切り出された４個のマクロブロック参照画像データは、符号化対象画像データおよび信号ｓとともに第２次動きベクトル検出部１５の第２動きベクトル検出回路１５１に出力される。
第２動きベクトル検出回路１５１では信号ｓにより取得されるマクロブロック参照画像データの数が判断され、符号化対象画像データおよびマクロブロック参照画像データが取得される。
第２動きベクトル検出回路１５１で符号化対象画像データおよびマクロブロック参照画像データが取得されると、第１次動きベクトル検出部１４における動きベクトルの検出時よりも高画素精度（例えば半画素精度）でマクロブロック参照画像データごとに動きベクトルが検出される（Ｓ６）。
検出された４個の動きベクトルは、第２動きベクトルとして出力されＢピクチャまたはＰピクチャの生成に利用される。
以上の実施形態によれば、Ｐピクチャを生成するときには第２次ベクトル検出部に出力するマクロブロック参照画像データを従来どおり参照フィールド数が４個のままにし、Ｂピクチャを生成するときには従来は８個であったものを４個に削減して出力しているため、画質の劣化を防ぐことができるとともに、第２次動きベクトル検出部に出力するデータ量および第２次動きベクトル検出部における演算量を低減させることができ、動きベクトル検出装置の負担を低減させることができる。
また、本実施形態の選択回路においては、予測画像のピクチャタイプに基づいて画像ごとに第１動きベクトルを選択したが、これには限定されず、マクロブロックもしくはスライスごとに第１動きベクトル抽出回路から取得した第１動きベクトルまたは第１動きベクトル検出回路から取得した第１動きベクトルを選択するようにしてもよい。
また、本実施形態においては、第１動きベクトル検出回路１４１で検出された第１動きベクトルはすべて第１動きベクトル抽出回路１４２および選択回路１４３に出力したが、これには限定されず、第１動きベクトル検出回路１４１でＢピクチャを生成する場合とＰピクチャを生成する場合とを判別し、Ｂピクチャを生成する場合のみ第１動きベクトル抽出回路１４２および選択回路１４３に第１動きベクトルを出力し、Ｐピクチャを生成する場合には選択回路１４３のみに出力するようにしてもよい。
また、本実施形態の第１動きベクトル抽出回路においては、Ｂピクチャを生成する場合には８個の第１動きベクトルから４個の第１動きベクトルを抽出し、Ｐピクチャを生成する場合いは４個の第１動きベクトルから２個の第１動きベクトルを抽出したがこでには限定されず、抽出により第１動きベクトルの数が削減されれば何個でもよい。
本発明の一実施形態による動きベクトル検出装置の構成を示すブロック図である。 本発明の一実施形態による動きベクトル検出装置の動作を示すフローチャートである。 本発明の一実施形態による動きベクトル検出装置においてＢピクチャを生成する場合の符号化対象画像と参照画像との関係を示す説明図である。 本発明の一実施形態による動きベクトル検出装置においてＰピクチャを生成する場合の符号化対象画像と参照画像との関係を示す説明図である。 従来の動きベクトル検出装置の構成を示すブロック図である。
符号の説明
１…ベクトル検出装置
１１…データ入力Ｉ／Ｆ
１２…メモリＩ／Ｆ
１３…メモリ
１４…第１次動きベクトル検出部
１５…第２次動きベクトル検出部
２１、２３、２５、２７、２９…トップフィールド
２２、２４、２６、２８、３０…ボトムフィールド
１４１…第１動きベクトル検出回路
１４２…第１動きベクトル抽出回路
１４３…選択回路
１５１…第２動きベクトル検出回路

Claims (2)

  1. インタレース画像のフレーム間予測符号化に用いる予測画像を生成するための動きベクトルを検出する動きベクトル検出装置において、
    入力された画像から、１画素単位以上の精度で、符号化対象画像のトップフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のトップフィールドと参照画像のボトムフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のボトムフィールドとの動きベクトルとをそれぞれ第１動きベクトルとして検出する第１動きベクトル検出回路と、
    前記入力された画像のピクチャタイプがＰピクチャまたはＢピクチャであるときには常に、前記第１動きベクトル検出回路で検出された複数の第１動きベクトルの中から、符号化対象画像の同一フィールドから同一方向の参照画像のフィールドを参照した第１動きベクトルのうち、差分絶対値和が小さい第１動きベクトルを、予め設定された削減数に応じて抽出する第１動きベクトル抽出回路と、
    前記第１動きベクトル検出回路で検出された複数の第１動きベクトルと前記第１動きベクトル抽出回路で抽出された第１動きベクトルとのうち、前記入力された画像のピクチャタイプがＢピクチャであるときには前記第１動きベクトル抽出回路で抽出された第１動きベクトルを選択し、前記入力された画像のピクチャタイプがＰピクチャであるときには前記第１動きベクトル検出回路で検出された複数の第１動きベクトルを選択する選択回路と、
    前記選択回路で選択された第１動きベクトルを基に、さらに１画素単位未満の精度での動きベクトルを第２動きベクトルとして検出する第２動きベクトル検出回路と、
    を備えることを特徴とする動きベクトル検出装置。
  2. インタレース画像のフレーム間予測符号化に用いる予測画像を生成するための動きベクトルを検出する動きベクトル検出方法において、
    動きベクトル検出装置が、
    入力された画像から、１画素単位以上の精度で、符号化対象画像のトップフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のトップフィールドと参照画像のボトムフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のトップフィールドとの動きベクトルと、符号化対象画像のボトムフィールドと参照画像のボトムフィールドとの動きベクトルとをそれぞれ第１動きベクトルとして検出する第１動きベクトル検出ステップと、
    前記入力された画像のピクチャタイプがＰピクチャまたはＢピクチャであるときには常に、前記第１動きベクトル検出ステップで検出された複数の第１動きベクトルの中から、符号化対象画像の同一フィールドから同一方向の参照画像のフィールドを参照した第１動きベクトルのうち、差分絶対値和が小さい第１動きベクトルを、予め設定された削減数に応じて抽出する第１動きベクトル抽出ステップと、
    前記第１動きベクトル検出ステップで検出された複数の第１動きベクトルと前記第１動きベクトル抽出ステップで抽出された第１動きベクトルとのうち、前記入力された画像のピクチャタイプがＢピクチャであるときには前記第１動きベクトル抽出ステップで抽出された第１動きベクトルを選択し、前記入力された画像のピクチャタイプがＰピクチャであるときには前記第１動きベクトル検出ステップで検出された複数の第１動きベクトルを選択する選択ステップと、
    前記選択ステップで選択された第１動きベクトルを基に、さらに１画素単位未満の精度での動きベクトルを第２動きベクトルとして検出する第２動きベクトル検出ステップと、
    を備えることを特徴とする動きベクトル検出方法。
JP2006033193A 2006-02-10 2006-02-10 動きベクトル検出装置および動きベクトル検出方法 Active JP4235209B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2006033193A JP4235209B2 (ja) 2006-02-10 2006-02-10 動きベクトル検出装置および動きベクトル検出方法
US12/278,137 US8126060B2 (en) 2006-02-10 2007-01-31 Motion vector detection device and motion vector detecting method
PCT/JP2007/051558 WO2007091459A1 (ja) 2006-02-10 2007-01-31 動きベクトル検出装置および動きベクトル検出方法
CN2007800045208A CN101379833B (zh) 2006-02-10 2007-01-31 运动矢量检测装置以及运动矢量检测方法
EP07713729.7A EP1983761B1 (en) 2006-02-10 2007-01-31 Motion vector detecting device and motion vector detecting method
TW96104304A TWI404423B (zh) 2006-02-10 2007-02-06 Dynamic vector detection device and dynamic vector detection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006033193A JP4235209B2 (ja) 2006-02-10 2006-02-10 動きベクトル検出装置および動きベクトル検出方法

Publications (2)

Publication Number Publication Date
JP2007214931A JP2007214931A (ja) 2007-08-23
JP4235209B2 true JP4235209B2 (ja) 2009-03-11

Family

ID=38345062

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006033193A Active JP4235209B2 (ja) 2006-02-10 2006-02-10 動きベクトル検出装置および動きベクトル検出方法

Country Status (6)

Country Link
US (1) US8126060B2 (ja)
EP (1) EP1983761B1 (ja)
JP (1) JP4235209B2 (ja)
CN (1) CN101379833B (ja)
TW (1) TWI404423B (ja)
WO (1) WO2007091459A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100302451A1 (en) * 2007-12-04 2010-12-02 Panasonic Corporation Video signal processing device
TW201041404A (en) * 2009-03-06 2010-11-16 Sony Corp Image processing device and method
EP3531700B1 (en) * 2016-10-18 2022-04-06 Panasonic Intellectual Property Management Co., Ltd. Image coding method, transmission method and image coding device

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2938677B2 (ja) * 1992-07-09 1999-08-23 松下電器産業株式会社 動き補償予測方法
US5369449A (en) 1991-11-08 1994-11-29 Matsushita Electric Industrial Co., Ltd. Method for predicting move compensation
JP3201079B2 (ja) 1992-07-03 2001-08-20 ケイディーディーアイ株式会社 インターレース動画像信号の動き補償予測方法、符号化方法及び装置
US5412435A (en) 1992-07-03 1995-05-02 Kokusai Denshin Denwa Kabushiki Kaisha Interlaced video signal motion compensation prediction system
JPH0837662A (ja) * 1994-07-22 1996-02-06 Hitachi Ltd 画像符号化復号化装置
JP2941693B2 (ja) * 1995-08-23 1999-08-25 株式会社日立製作所 動きベクトル探索装置
JP2868445B2 (ja) * 1995-11-02 1999-03-10 株式会社グラフィックス・コミュニケーション・ラボラトリーズ 動画像圧縮方法および装置
KR0181069B1 (ko) * 1995-11-08 1999-05-01 배순훈 움직임 추정장치
JPH10262258A (ja) * 1997-03-19 1998-09-29 Sony Corp 画像符号化装置及び方法
JP4765194B2 (ja) * 2001-05-10 2011-09-07 ソニー株式会社 動画像符号化装置、動画像符号化方法、動画像符号化プログラム格納媒体及び動画像符号化プログラム
JP2005210321A (ja) * 2004-01-21 2005-08-04 Matsushita Electric Ind Co Ltd 動きベクトル検出方法

Also Published As

Publication number Publication date
JP2007214931A (ja) 2007-08-23
CN101379833A (zh) 2009-03-04
US20090174819A1 (en) 2009-07-09
EP1983761A1 (en) 2008-10-22
TWI404423B (zh) 2013-08-01
US8126060B2 (en) 2012-02-28
EP1983761A4 (en) 2012-07-25
TW200737991A (en) 2007-10-01
CN101379833B (zh) 2012-05-30
WO2007091459A1 (ja) 2007-08-16
EP1983761B1 (en) 2017-11-29

Similar Documents

Publication Publication Date Title
JP5197591B2 (ja) 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記録媒体
KR20100021574A (ko) 화상처리장치, 화상처리방법 및 프로그램
TW201909637A (zh) 影像預測解碼方法
US20150043646A1 (en) Image processing apparatus, image processing method, and program
JP2005354528A (ja) 動きベクトル検出装置及び方法
JP4887750B2 (ja) 画像処理装置、制御方法及びプログラム
JP2007124408A (ja) 動きベクトル検出装置および動きベクトル検出方法
JP4235209B2 (ja) 動きベクトル検出装置および動きベクトル検出方法
US11290740B2 (en) Image coding apparatus, image coding method, and storage medium
JP2006245932A (ja) 動画像処理装置、動画像処理方法、及び動画像処理プログラム
JP2007122232A (ja) 画像処理装置及びプログラム
JP2010258576A (ja) シーンチェンジ検出装置および映像記録装置
JP2008154072A (ja) 動画像符号化装置及び動画像符号化方法
JP2008263391A (ja) 映像処理装置
JP4523024B2 (ja) 画像符号化装置および画像符号化方法
JP4509809B2 (ja) ディジタル画像復号装置及び方法
JP2007221602A (ja) 動き補償器、動き補償処理方法、コンピュータプログラム及び記憶媒体
JP2015159519A (ja) 符号化装置、符号化方法および符号化プログラム
JP2020080479A (ja) 動画記録再生装置、動画伝送システムおよび方法
JP5147566B2 (ja) 動きベクトル検出装置及びその方法
JP2006246277A (ja) 再符号化装置、再符号化方法、および再符号化用プログラム
JP2006311603A (ja) 動画像符号化方法と装置及び動画像復号化方法と装置
JP2010288006A (ja) 動画像データ処理装置、撮像装置および動画像再生装置
JP2008118340A (ja) 動きベクトル検出装置及びビデオ信号処理装置
JP2007519335A (ja) ビデオ圧縮エンコーダのための３：２プルダウンスイッチオフ信号の生成装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070626

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070824

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080729

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080926

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20081008

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081118

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081212

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111219

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4235209

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111219

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111219

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121219

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131219

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250