Nothing Special   »   [go: up one dir, main page]

JP3197766B2 - Mpegオーディオデコーダ、mpegビデオデコーダおよびmpegシステムデコーダ - Google Patents

Mpegオーディオデコーダ、mpegビデオデコーダおよびmpegシステムデコーダ

Info

Publication number
JP3197766B2
JP3197766B2 JP31711494A JP31711494A JP3197766B2 JP 3197766 B2 JP3197766 B2 JP 3197766B2 JP 31711494 A JP31711494 A JP 31711494A JP 31711494 A JP31711494 A JP 31711494A JP 3197766 B2 JP3197766 B2 JP 3197766B2
Authority
JP
Japan
Prior art keywords
video
audio
circuit
stream
mpeg
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP31711494A
Other languages
English (en)
Other versions
JPH08212701A (ja
Inventor
茂之 岡田
英樹 山内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP31711494A priority Critical patent/JP3197766B2/ja
Priority to US08/387,581 priority patent/US5668601A/en
Priority to DE69512445T priority patent/DE69512445T2/de
Priority to EP95101997A priority patent/EP0668700B1/en
Priority to KR1019950002999A priority patent/KR100189512B1/ko
Publication of JPH08212701A publication Critical patent/JPH08212701A/ja
Application granted granted Critical
Publication of JP3197766B2 publication Critical patent/JP3197766B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341Demultiplexing of audio and video streams
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明はデコーダ,MPEG(Mo
ving Picture Expert Group )オーディオデコーダ,M
PEGビデオデコーダ,MPEGシステムデコーダに関
するものである。
【0002】
【従来の技術】マルチメディアで扱われる情報は、膨大
な量でかつ、多種多様であり、これらの情報を高速に処
理することがマルチメディアの実用化を図る上で必要と
なってくる。情報を高速に処理するためには、データの
圧縮・伸長技術が不可欠となる。そのようなデータの圧
縮・伸長技術として「MPEG」方式が挙げられる。こ
のMPEG方式は、ISO(International Organizati
on for Standardization)/IEC(Intarnational El
ectrotechnical Commission )傘下のMPEG委員会
(ISO/IEC JTC1/SC29/WG11)によって標準化されつつあ
る。
【0003】MPEGは3つのパートから構成されてい
る。パート1の「MPEGシステムパート」(ISO/IEC
IS 1172 Part1:Systems )では、ビデオデータとオーデ
ィオデータの多重化構造(マルチプレクス・ストラクチ
ャ)および同期方式が規定される。パート2の「MPE
Gビデオパート」(ISO/IEC IS 1172 Part2:Video )で
は、ビデオデータの高能率符号化方式、およびビデオデ
ータのフォーマットが規定される。パート3の「MPE
Gオーディオパート」(ISO/IEC IS 1172 Part3:Audio
)では、オーディオデータの高能率符号化方式、およ
びオーディオデータのフォーマットが規定される。
【0004】また、MPEGには主にエンコードレート
の違いにより、現在のところ、MPEG−1,MPEG
−2の2つの方式がある。MPEGビデオパートで取り
扱われるビデオデータは動画に関するものであり、その
動画は1秒間に数十個(例えば、30個)のフレームによ
って構成されている。ビデオデータは、シーケンス(Seq
uence)、GOP(Group Of Pictures )、ピクチャ、ス
ライス(Slice) 、マクロブロック(Macroblock)、ブロッ
クの順に6層の階層構造から成る。MPEG−1におい
てフレームはピクチャに対応している。MPEG−2に
おいては、フレーム又はフィールドをピクチャに対応さ
せることもできる。フィールドは、2個で1つのフレー
ムを構成している。ピクチャにフレームが対応している
構造はフレーム構造と呼ばれ、ピクチャにフィールドが
対応している構造はフィールド構造と呼ばれる。
【0005】MPEGでは、フレーム間予測と呼ばれる
圧縮技術を用いる。フレーム間予測は、フレーム間のデ
ータを時間的な相関に基づいて圧縮する。フレーム間予
測では、双方向予測が行われる。双方向予測とは、過去
の再生画像(又は、ピクチャ)から現在の再生画像を予
測する順方向予測と、未来の再生画像から現在の再生画
像を予測する逆方向予測とを併用することである。
【0006】この双方向予測は、Iピクチャ(Intra-Pi
cture ),Pピクチャ(Predictive-Picture),Bピク
チャ(Bidirectionally predictive-Picture)と呼ばれ
る3つのタイプのピクチャを規定している。Iピクチャ
は、過去や未来の再生画像とは無関係に、独立して生成
される。Pピクチャは順方向予測(過去のIピクチャま
たはPピクチャからの予測)により生成される。Bピク
チャは双方向予測により生成される。双方向予測におい
てBピクチャは、以下に示す3つの予測のうちいずれか
1つにより生成される。過去のIピクチャまたはPピ
クチャからの予測、未来のIピクチャまたはPピクチ
ャからの予測、過去および未来のIピクチャまたはP
ピクチャからの予測。そして、これらI,P,Bピクチ
ャがそれぞれエンコードされる。つまり、Iピクチャは
過去や未来のピクチャが無くても生成される。これに対
し、Pピクチャは過去のピクチャが無いと生成されず、
Bピクチャは過去または未来のピクチャが無いと生成さ
れない。
【0007】フレーム間予測では、まず、Iピクチャが
周期的に生成される。次に、Iピクチャよりも数フレー
ム先のフレームがPピクチャとして生成される。このP
ピクチャは、過去から現在への一方向(順方向)の予測
により生成される。続いて、Iピクチャの前、Pピクチ
ャの後に位置するフレームがBピクチャとして生成され
る。このBピクチャを生成するとき、順方向予測,逆方
向予測,双方向予測の3つの中から最適な予測方法が選
択される。一般的に連続した動画では、現在の画像とそ
の前後の画像とは良く似ており、異なっているのはその
一部分に過ぎない。そこで、前のフレーム(例えば、I
ピクチャ)と次のフレーム(例えば、Pピクチャ)とは
同じであると仮定し、両フレーム間に変化があればその
差分(Bピクチャ)のみを抽出して圧縮する。これによ
り、フレーム間のデータを時間的な相関に基づいて圧縮
することができる。
【0008】このようにMPEGビデオパートに準拠し
てエンコードされたビデオデータのデータ列(ビットス
トリーム)は、MPEGビデオストリーム(以下、ビデ
オストリームと略す)と呼ばれる。また、MPEGオー
ディオパートに準拠してエンコードされたオーディオデ
ータのデータ列は、MPEGオーディオストリーム(以
下、オーディオストリームと略す)と呼ばれる。そし
て、ビデオストリームとオーディオストリームは、MP
EGシステムパートに準拠して時分割多重化され、1本
のデータ列としてのMPEGシステムストリーム(以
下、システムストリームと略す)となる。システムスト
リームはマルチプレックスストリームとも呼ばれる。M
PEG−1は主にCD−ROM(Compact Disc-Read Onl
y Memory) などの蓄積メディアに対応しており、MPE
G−2はMPEG−1をも含む幅広い範囲のアプリケー
ションに対応している。
【0009】MPEGパートにおけるエンコードからデ
コードまでの流れは、以下のようになっている。MPE
Gシステムエンコーダ(以下、システムエンコーダと略
す)は、ビデオデータとオーディオデータのそれぞれを
連係を保ちながら別個にエンコードを行い、ビデオスト
リームとオーディオストリームを生成する。次に、MP
EGシステムエンコーダに装備されたマルチプレクサ
(Multiplexer )(MUX)は、伝送媒体または記録媒
体のフォーマットに適合するように、ビデオストリーム
とオーディオストリームの多重化を行い、システムスト
リームを生成する。そのシステムストリームは、伝送媒
体を介してMUXから伝送されるか、または記録媒体に
記録される。
【0010】MPEGシステムデコーダ(以下、システ
ムデコーダと略す)に装備されたデマルチプレクサ(De
multiplexer )(DMUX)は、システムストリームを
ビデオストリームとオーディオストリームに分離する。
次に、システムデコーダは各ストリームを個別にデコー
ドして、ビデオのデコード出力(以下、ビデオ出力とい
う)とオーディオのデコード出力(以下、オーディオ出
力という)を生成する。そして、ビデオ出力はディスプ
レイへ、オーディオ出力はD/A(Digital/Analog)コ
ンバータおよび低周波増幅器を介してスピーカへそれぞ
れ出力される。
【0011】システムストリームは複数のパック(Pac
k)で構成され、各パックは複数のパケット(Packet)
で構成される。各パケットの中には、複数のアクセスユ
ニットが存在している。アクセスユニットとはデコード
再生を行うときの単位で、ビデオストリームの場合は1
つのピクチャに対応し、オーディオストリームの場合は
1つのオーディオフレームに対応している。
【0012】システムエンコーダは、パックの先頭にパ
ックヘッダを付与し、パケットの先頭にパケットヘッダ
を付与する。パックヘッダは、SCR(System Clock R
eference)と呼ばれる同期再生用の基準時刻等の参照情
報を含む。ここで、再生とはビデオ出力とオーディオ出
力の外部への出力を意味する。
【0013】パケットヘッダは、続くデータがビデオデ
ータかオーディオデータかを識別するための情報や、タ
イムスタンプ(Time Stamp)(以下、TSと略す)と呼
ばれるデコード再生の時刻を管理するための情報を含
む。パケット長は、伝送媒体やアプリケーションに強く
依存し、例えば、ATM(Asynchronous Transfer Mod
e)のように、53バイトと短いものや、CD−ROMの
ように4096バイトと長いものがある。そして、パケット
長の上限は、64K バイトに定められている。
【0014】例えば、CD−ROMにおけるデータの記
録は、セクタ(Sector)単位で連続して行われ、そのデ
ータの読み出しは、CD−ROMプレーヤによって毎秒
75セクタの一定速度で行われる。CD−ROMにおい
て、各セクタはそれぞれ1つのパックに対応し、パック
とパケットは同じである。
【0015】システムエンコーダは、パケットの中にア
クセスユニットの先頭がある場合、パケットヘッダにそ
のアクセスユニットに対応するTSを付加し、パケット
の中にアクセスユニットの先頭がない場合、TSを付加
しない。また、システムエンコーダは、パケットの中に
2つ以上のアクセスユニットの先頭がある場合、パケッ
トヘッダに最初のアクセスユニットに対応するTSだけ
を付加する。
【0016】TSには、PTS(Presentation Time St
amp )とDTS(Decoding Time Stamp )の2種類があ
る。MPEGシステムパートは、STD(System Targe
t Decoder )と呼ばれる仮想的な基準デコーダによっ
て、デコードの標準を規定している。STDの基準クロ
ックとなるのは、STC(System Time Clock )とよば
れる同期信号である。
【0017】PTSは再生出力の時刻を管理するための
情報である。このPTSの精度は、90kHz のクロックで
計測した値が32ビット長で表される。システムデコーダ
はPTSとSTCが一致したときに、そのPTSが付加
されているアクセスユニットをデコードし、再生出力を
生成する。
【0018】前記したようにMPEGビデオパートでは
フレーム間予測技術を用いるため、IピクチャとPピク
チャはBピクチャよりも先行してビデオストリームとし
て送出される。このため、システムデコーダは、ビデオ
ストリームを受け取ると、そのビデオストリームの各ピ
クチャの先頭に付くピクチャヘッダに基づいて、ピクチ
ャの順番を元の順番に並び替えてデコードし、ビデオ出
力を生成する。DTSは、ピクチャの並び替え後のデコ
ード開始時刻を管理するための情報である。システムエ
ンコーダは、PTSとDTSが異なる場合にはその両方
をパケットヘッダに付加し、一致する場合にはPTSだ
けを付加する。具体的には、Bピクチャのあるビデオス
トリームにおいて、IピクチャとPピクチャが存在する
パケットにはPTSとDTSの両方が付加され、Bピク
チャが存在するパケットにはPTSだけが付加される。
また、BピクチャのないビデオストリームにおいてはP
TSだけが付加される。
【0019】SCRはSTCの値をシステムエンコーダ
で意図された値にセットしたり校正したりするための情
報である。このSCRの精度は、MPEG−1では90kH
z のクロックで計測した値が32ビット長で表され、MP
EG−2では27kHz のクロックで計測した値が42ビット
長で表される。SCRは、MPEG−1では5バイト
で、MPEG−2では6バイトで伝送され、システムデ
コーダは、その最終バイトの到着の瞬間にSCRの値に
応じてSTCをセットする。
【0020】図10(a)は、システムストリームの一
例を示す。1つのパックはパックヘッダH及び各パケッ
トV1,V2,A1…V6,V7から構成される。パケ
ットは、ビデオデータの各パケットV1〜V7とオーデ
ィオデータの各パケットA1〜A3とを含む。これらの
パケットは、ビデオデータ及びオーディオデータの一方
について見れば番号順に並べられているものの、ビデオ
データパケット及びオーディオデータパケットは相手の
中に混在している。例えば、ビデオデータのパケットV
1,V2の次にはオーディオデータのパケットA1が続
き、その次にはビデオデータのパケットV3が続き、更
にその後にはオーディオデータのパケットA2,A3が
続いている。ここで、パックヘッダHにはSCRが、パ
ケットV1のパケットヘッダにはPTS(V1)が、パケッ
トA1のパケットヘッダにはPTS(A1)が、パケットV
6のパケットヘッダにはPTS(V6)がそれぞれ付加され
ている。従って、図10(b)に示すように、各パケッ
トV1〜V5でアクセスユニットαが、図10(c)に
示すように各パケットA1〜A3でアクセスユニットβ
が、図10(d)に示すように各パケットV6,V7で
アクセスユニットγが構成される。この場合、アクセス
ユニットα,γはそれぞれ1つのピクチャに対応し、ア
クセスユニットβは1つのオーディオフレームに対応し
ている。尚、図10(a)〜図10(d)では、DTS
については省略してある。
【0021】図11は、従来のシステムデコーダ111
のブロック回路を示す。システムデコーダ111は、M
PEGオーディオデコーダ112、MPEGビデオデコ
ーダ113、及びオーディオビデオパーサ(AVパー
サ)114から構成される。AVパーサ114内にはデ
マルチプレクサ(Demultiplexer )(DMUX)115
が備えられている。
【0022】AVパーサ114は、外部から転送されて
きたシステムストリームを入力する。DMUX115
は、システムストリームのパケットヘッダに基づいて、
システムストリームをビデオストリームとオーディオス
トリームに分離する。すなわち、図10(a)に示すシ
ステムストリームは、ビデオデータの各パケットV1〜
V7から構成されるビデオストリームと、オーディオデ
ータの各パケットA1〜A3から構成されるオーディオ
ストリームとに分離される。
【0023】また、AVパーサ114は、システムスト
リームからSCR,オーディオのPTS(以下、PTS
(A) という),ビデオのPTS(以下、PTS(V) とい
う)をそれぞれ分離する。そして、AVパーサ114
は、オーディオストリーム,SCR,PTS(A) をそれ
ぞれオーディオデコーダ112へ出力し、ビデオストリ
ーム,SCR,PTS(V) をそれぞれビデオデコーダ1
13へ出力する。
【0024】オーディオデコーダ112は、オーディオ
ストリームをMPEGオーディオパートに準拠してデコ
ードし、オーディオ出力を生成する。ビデオデコーダ1
13は、ビデオストリームをMPEGビデオパートに準
拠してデコードし、ビデオ出力を生成する。ビデオ出力
はディスプレイ116へ、オーディオ出力はD/Aコン
バータおよび低周波増幅器を備えたオーディオ再生装置
117を介してスピーカ118へそれぞれ出力される。
【0025】ここで、オーディオデコーダ112及びビ
デオデコーダ113はそれぞれ、SCRとPTSに基づ
いてオーディオ出力とビデオ出力の同期再生を行う。す
なわち、オーディオデコーダ112は、SCRとPTS
(A) (PTS(A1))に基づいてオーディオ出力の再生時
刻(再生タイミング)を設定し、図10(d)に示すよ
うに、アクセスユニットγの再生を時刻t3で開始す
る。ビデオデコーダ113は、SCRとPTS(V) (P
TS(V1),PTS(V6))に基づいてビデオ出力の再生時
刻(再生タイミング)を設定し、図10(b)及び図1
0(c)に示すように、各アクセスユニットα,βの再
生を各時刻t1,t2で開始する。このとき、オーディ
オデコーダ112におけるオーディオ出力の再生時刻の
設定と、ビデオデコーダ113におけるビデオ出力の再
生時刻の設定とは、各PTS(A) ,PTS(V) に従って
それぞれ別個に行われる。
【0026】
【発明が解決しようとする課題】オーディオ出力とビデ
オ出力の同期再生においては、「リップシンク」を考慮
する必要がある。リップシンクとは、ディスプレイに映
し出される人物の口の動きと音声との同期がとれている
ことをいう。口の動きよりも音声の方が早くなったり、
逆に遅くなったりする状態を、リップシンクにずれがあ
るという。リップシンクのずれは、人間の聴覚の検知限
界以下であれば問題とはならない。しかし、検知限界以
上であると視聴者は違和感を覚える。一般に、リップシ
ンクのずれの検知限界は、約数ミリ秒であるといわれて
いる。
【0027】図11に示す従来のシステムデコーダ11
1では、リップシンクを十分に達成することができな
い。この原因は、STD(基準デコーダ)のデコード処
理時間、すなわちSTDの内部遅延時間を零と仮定して
いるためである。実際のオーディオデコーダ112およ
びビデオデコーダ113のデコード処理時間は極めて短
いが0ではない。そのデコード処理時間(内部遅延時
間)は、各デコーダ112,113で異なる上に、処理
されるアクセスユニットのデータ量によっても異なる。
例えば、図10(b)〜図10(d)に示すような各ア
クセスユニットα〜γを構成するパケットの数は、通常
異なる上に、各パケットのパケット長も必ずしも同一で
はない。従って、通常各アクセスユニットα〜γのデー
タ量は異なったものになる。
【0028】そこで、上記のような欠点を克服するため
に、PTS(V) とPTS(A) の差分の算出結果に応じて
ビデオ出力またはオーディオ出力のいずれか一方を遅延
させることにより、両者の同期を図る方法が提案されて
いる。しかし、この方法は、ビデオ出力またはオーディ
オ出力を遅延させるための遅延メモリを必要とする。こ
のことは回路規模の拡大化及びコストの増大を招く。さ
らに、遅延メモリの正確な制御は困難であると考えられ
ている。仮に、その制御をAVパーサ114が行うとす
れば、AVパーサ114に対するソフトウェア的な負荷
を重くし、AVパーサ114の動作に支障をきたす。
【0029】本発明は上記問題点を解決するためになさ
れたものであり、以下の目的を有するものである。 1〕オーディオ出力の再生されるタイミングを正確に得
ることが可能なMPEGオーディオデコーダを提供す
る。
【0030】2〕ビデオ出力の再生されるタイミングを
正確に得ることが可能なMPEGビデオデコーダを提供
する。 3〕オーディオ出力とビデオ出力の同期を十分にとるこ
とが可能なデコーダおよびMPEGシステムデコーダを
提供する。
【0031】
【課題を解決するための手段】請求項1に記載の発明
は、オーディオストリームを順次蓄積するビットバッフ
ァと、ビットバッファから読み出されたオーディオスト
リームをMPEGオーディオパートに準拠してデコード
し、オーディオ出力を生成するデコードコア回路とを備
え、ビットバッファからオーディオストリームが読み出
されるのに要する時間と、デコードコア回路におけるデ
コード処理時間と、外部から転送されてきたSCRおよ
びオーディオのタイムスタンプとに基づいてオーディオ
出力の再生タイミングを計算し、その再生タイミングに
従ってオーディオ出力を生成することをその要旨とす
る。
【0032】請求項2に記載の発明は、ビデオストリー
ムを順次蓄積するビットバッファと、ビットバッファか
ら読み出されたビデオストリームをMPEGビデオパー
トに準拠してデコードし、ビデオ出力を生成するデコー
ドコア回路とを備え、ビットバッファからビデオストリ
ームが読み出されるのに要する時間と、デコードコア回
路におけるデコード処理時間と、外部から転送されてき
たSCRおよびビデオのタイムスタンプとに基づいてビ
デオ出力の再生タイミングを計算し、その再生タイミン
グに従ってビデオ出力を生成することをその要旨とす
る。
【0033】請求項3に記載の発明は、外部から転送さ
れてきたMPEGシステムストリームについて、MPE
Gシステムストリームのパケットヘッダに基づき、MP
EGシステムストリームをMPEGビデオストリームと
MPEGオーディオストリームに分離するデマルチプレ
クサと、MPEGシステムストリームからSCRとオー
ディオのタイムスタンプとビデオのタイムスタンプとを
それぞれ分離する分離手段と、オーディオストリームを
順次蓄積するオーディオビットバッファと、オーディオ
ビットバッファから読み出されたオーディオストリーム
をMPEGオーディオパートに準拠してデコードし、オ
ーディオ出力を生成するオーディオデコードコア回路と
を備え、オーディオビットバッファからオーディオスト
リームが読み出されるのに要する時間と、オーディオデ
コードコア回路におけるデコード処理時間と、外部から
転送されてきたSCRおよびオーディオのタイムスタン
プとに基づいてオーディオ出力の再生タイミングを計算
し、その再生タイミングに従ってオーディオ出力を生成
するMPEGオーディオデコーダと、ビデオストリーム
を順次蓄積するビデオビットバッファと、ビデオビット
バッファから読み出されたビデオストリームをMPEG
ビデオパートに準拠してデコードし、ビデオ出力を生成
するビデオデコードコア回路とを備え、ビットバッファ
からビデオストリームが読み出されるのに要する時間
と、ビデオデコードコア回路におけるデコード処理時間
と、外部から転送されてきたSCRおよびビデオのタイ
ムスタンプとに基づいてビデオ出力の再生タイミングを
計算し、その再生タイミングに従ってビデオ出力を生成
するMPEGビデオデコーダとを備えたことをその要旨
とする。
【0034】請求項4に記載の発明は、オーディオのタ
イムスタンプを順次蓄積するレジスタと、オーディオス
トリームを順次蓄積するビットバッファと、ビットバッ
ファから読み出されたオーディオストリームをMPEG
オーディオパートに準拠してデコードし、オーディオ出
力を生成するデコードコア回路と、ビットバッファから
オーディオストリームが読み出されるのに要する時間
と、デコードコア回路におけるデコード処理時間と、
部から転送されてきたSCRと、レジスタから読み出さ
れたオーディオのタイムスタンプとに基づいてオーディ
オ出力の再生タイミングを計算し、その再生タイミング
に従ってデコードコア回路を制御する制御回路とを備え
たことをその要旨とする。
【0035】請求項5に記載の発明は、ビデオのタイム
スタンプを順次蓄積するレジスタと、ビデオストリーム
を順次蓄積するビットバッファと、ビットバッファから
読み出されたビデオストリームをMPEGビデオパート
に準拠してデコードし、ビデオ出力を生成するデコード
コア回路と、ビットバッファからビデオストリームが読
み出されるのに要する時間と、デコードコア回路におけ
るデコード処理時間と、外部から転送されてきたSCR
と、レジスタから読み出されたビデオのタイムスタンプ
とに基づいてビデオ出力の再生タイミングを計算し、そ
の再生タイミングに従ってデコードコア回路を制御する
制御回路とを備えたことをその要旨とする。
【0036】請求項6に記載の発明は、外部から転送さ
れてきたオーディオのタイムスタンプを順次蓄積するレ
ジスタと、外部から転送されてきたオーディオストリー
ムを順次蓄積するビットバッファと、ビットバッファか
ら読み出されたオーディオストリームをMPEGオーデ
ィオパートに準拠してデコードし、オーディオ出力を生
成するデコードコア回路と、ビットバッファからオーデ
ィオストリームが読み出されるのに要する時間と、デコ
ードコア回路におけるデコード処理時間と、外部から転
送されてきたSCRと、レジスタから読み出されたオー
ディオのタイムスタンプとに基づいてオーディオ出力の
再生タイミングを計算し、その再生タイミングに従って
デコードコア回路を制御する制御回路とを備えたことを
その要旨とする。
【0037】請求項7に記載の発明は、外部から転送さ
れてきたビデオのタイムスタンプを順次蓄積するレジス
タと、外部から転送されてきたビデオストリームを順次
蓄積するビットバッファと、ビットバッファから読み出
されたビデオストリームをMPEGビデオパートに準拠
してデコードし、ビデオ出力を生成するデコードコア回
路と、ビットバッファからビデオストリームが読み出さ
れるのに要する時間と、デコードコア回路におけるデコ
ード処理時間と、外部から転送されてきたSCRと、レ
ジスタから読み出されたビデオのタイムスタンプとに基
づいてビデオ出力の再生タイミングを計算し、その再生
タイミングに従ってデコードコア回路を制御する制御回
路とを備えたことをその要旨とする。
【0038】請求項8に記載の発明は、外部から転送さ
れてきたMPEGシステムストリームについて、MPE
Gシステムストリームのパケットヘッダに基づき、MP
EGシステムストリームをMPEGビデオストリームと
MPEGオーディオストリームに分離するデマルチプレ
クサと、MPEGシステムストリームからSCRとオー
ディオのタイムスタンプとビデオのタイムスタンプとを
それぞれ分離する分離手段と、オーディオレジスタとオ
ーディオビットバッファとオーディオデコードコア回路
とオーディオ制御回路とから構成されるMPEGオーデ
ィオデコーダと、ビデオレジスタとビデオビットバッフ
ァとビデオデコードコア回路とビデオ制御回路とから構
成されるMPEGビデオデコーダとを備えたMPEGシ
ステムデコーダであり、前記オーディオレジスタは、分
離手段から転送されてきたオーディオのタイムスタンプ
を順次蓄積し、前記オーディオビットバッファは、デマ
ルチプレクサから転送されてきたオーディオストリーム
を順次蓄積し、前記オーディオデコードコア回路は、ビ
ットバッファから読み出されたオーディオストリームを
MPEGオーディオパートに準拠してデコードし、オー
ディオ出力を生成し、前記オーディオ制御回路は、オー
ディオビットバッファからオーディオストリームが読み
出されるのに要する時間と、オーディオデコードコア回
路におけるデコード処理時間と、分離手段から転送され
てきたSCRと、レジスタから読み出されたオーディオ
のタイムスタンプとに基づいてオーディオ出力の再生タ
イミングを計算し、その再生タイミングに従ってオーデ
ィオデコードコア回路を制御し、前記ビデオレジスタ
は、分離手段から転送されてきたビデオのタイムスタン
プを順次蓄積し、前記ビデオビットバッファは、デマル
チプレクサから転送されてきたビデオストリームを順次
蓄積し、前記ビデオデコードコア回路は、ビットバッフ
ァから読み出されたビデオストリームをMPEGビデオ
パートに準拠してデコードし、ビデオ出力を生成し、前
記ビデオ制御回路は、ビデオビットバッファからビデオ
ストリームが読み出されるのに要する時間と、ビデオデ
コードコア回路におけるデコード処理時間と、分離手段
から転送されてきたSCRと、レジスタから読み出され
たビデオのタイムスタンプとに基づいてビデオ出力の再
生タイミングを計算し、その再生タイミングに従って
デオデコードコア回路を制御することをその要旨とす
る。
【0039】請求項9に記載の発明は、FIFO構成
で、外部から転送されてきたオーディオのタイムスタン
プを順次蓄積するレジスタと、FIFO構成のRAMか
ら成り、外部から転送されてきたオーディオストリーム
を順次蓄積するビットバッファと、ビットバッファから
読み出されたオーディオストリームをMPEGオーディ
オパートに準拠してデコードし、オーディオ出力を生成
するデコードコア回路と、ビットバッファからオーディ
オストリームが読み出されるのに要する時間と、デコー
ドコア回路におけるデコード処理時間とからMPEGオ
ーディオデコーダにおけるデコード処理時間を計算し、
そのデコード処理時間と、外部から転送されてきたSC
Rと、レジスタから読み出されたオーディオのタイムス
タンプとに基づいてオーディオ出力の再生タイミングを
計算し、その再生タイミングに従ってデコードコア回路
を制御する制御回路とを備えたことをその要旨とする。
【0040】請求項10に記載の発明は、FIFO構成
で、外部から転送されてきたビデオのタイムスタンプを
順次蓄積するレジスタと、FIFO構成のRAMから成
り、外部から転送されてきたビデオストリームを順次蓄
積するビットバッファと、ビットバッファから読み出さ
れたビデオストリームをMPEGビデオパートに準拠し
てデコードし、ビデオ出力を生成するデコードコア回路
と、ビットバッファからビデオストリームが読み出され
るのに要する時間と、デコードコア回路におけるデコー
ド処理時間とからMPEGビデオデコーダにおけるデコ
ード処理時間を計算し、そのデコード処理時間と、外部
から転送されてきたSCRと、レジスタから読み出され
たビデオのタイムスタンプとに基づいてビデオ出力の再
生タイミングを計算し、その再生タイミングに従ってデ
コードコア回路を制御する制御回路とを備えたことをそ
の要旨とする。
【0041】請求項11に記載の発明は、外部から転送
されてきたMPEGシステムストリームについて、MP
EGシステムストリームのパケットヘッダに基づき、M
PEGシステムストリームをMPEGビデオストリーム
とMPEGオーディオストリームに分離するデマルチプ
レクサと、MPEGシステムストリームからSCRとオ
ーディオのタイムスタンプとビデオのタイムスタンプと
をそれぞれ分離する分離手段と、オーディオレジスタと
オーディオビットバッファとオーディオデコードコア回
路とオーディオ制御回路とから構成されるMPEGオー
ディオデコーダと、ビデオレジスタとビデオビットバッ
ファとビデオデコードコア回路とビデオ制御回路とから
構成されるMPEGビデオデコーダとを備えたMPEG
システムデコーダであり、前記オーディオレジスタは、
FIFO構成で、分離手段から転送されてきたオーディ
オのタイムスタンプを順次蓄積し、前記オーディオビッ
トバッファはFIFO構成のRAMから成り、デマルチ
プレクサから転送されてきたオーディオストリームを順
次蓄積し、前記オーディオデコードコア回路は、オーデ
ィオビットバッファから読み出されたオーディオストリ
ームをMPEGオーディオパートに準拠してデコード
し、オーディオ出力を生成し、前記オーディオ制御回路
は、オーディオビットバッファからオーディオストリー
ムが読み出されるのに要する時間と、オーディオデコー
ドコア回路におけるデコード処理時間とからMPEGオ
ーディオデコーダにおけるデコード処理時間を計算し、
そのデコード処理時間と、分離手段から転送されてきた
SCRと、レジスタから読み出されたオーディオのタイ
ムスタンプとに基づいてオーディオ出力の再生タイミン
グを計算し、その再生タイミングに従ってオーディオ
コードコア回路を制御し、前記ビデオレジスタは、FI
FO構成で、分離手段から転送されてきたビデオのタイ
ムスタンプを順次蓄積し、前記ビデオビットバッファは
FIFO構成のRAMから成り、デマルチプレクサから
転送されてきたビデオストリームを順次蓄積し、前記ビ
デオデコードコア回路は、ビデオビットバッファから読
み出されたビデオストリームをMPEGビデオパートに
準拠してデコードし、ビデオ出力を生成し、前記ビデオ
制御回路は、ビデオビットバッファからビデオストリー
ムが読み出されるのに要する時間と、ビデオデコードコ
ア回路におけるデコード処理時間とからMPEGビデオ
デコーダにおけるデコード処理時間を計算し、そのデコ
ード処理時間と、分離手段から転送されてきたSCR
と、レジスタから読み出されたビデオのタイムスタンプ
とに基づいてビデオ出力の再生タイミングを計算し、そ
の再生タイミングに従ってビデオデコードコア回路を制
御することをその要旨とする。
【0042】請求項12に記載の発明は、オーディオス
トリームを順次蓄積するオーディオビットバッファと、
オーディオビットバッファから読み出されたオーディオ
ストリームをMPEGオーディオパートに準拠してデコ
ードし、オーディオ出力を生成するオーディオデコード
コア回路と、ビデオストリームを順次蓄積するビデオビ
ットバッファと、ビデオビットバッファから読み出され
たビデオストリームをMPEGビデオパートに準拠して
デコードし、ビデオ出力を生成するビデオデコードコア
回路とを備え、オーディオビットバッファおよびオーデ
ィオデコードコア回路の各内部遅延時間と、ビデオビッ
トバッファおよびビデオデコードコア回路の各内部遅延
時間とに基づいて、MPEGオーディオデコーダから出
力されるオーディオ出力の再生されるタイミングを調整
することをその要旨とする。
【0043】請求項13に記載の発明は、MPEGオー
ディオデコーダおよびMPEGビデオデコーダの内部遅
延時間に基づいて、MPEGビデオデコーダから出力さ
れるビデオ出力をスキップまたはリピートさせることを
その要旨とする。
【0044】請求項14に記載の発明は、請求項8また
は請求項11に記載のMPEGシステムデコーダにおい
て、前記MPEGオーディオデコーダは、オーディオビ
ットバッファの内部遅延時間とオーディオデコードコア
回路の内部遅延時間とオーディオレジスタから読み出さ
れたオーディオのタイムスタンプとに基づいて第2のタ
イムスタンプを生成し、前記ビデオ制御回路は、ビデオ
のタイムスタンプとピクチャとのマッピングを行い、ビ
デオデコードコア回路の内部遅延時間とビデオレジスタ
から読み出されたビデオのタイムスタンプと第2のタイ
ムスタンプとに基づいて、ビデオデコードコア回路にス
キップ動作またはリピート動作を行わせることをその要
旨とする。
【0045】請求項15に記載の発明は、請求項8また
は請求項11に記載のMPEGシステムデコーダにおい
て、前記MPEGオーディオデコーダは、オーディオビ
ットバッファの内部遅延時間とオーディオデコードコア
回路の内部遅延時間とオーディオレジスタから読み出さ
れたオーディオのタイムスタンプとに基づいて、オーデ
ィオのタイムスタンプから各内部遅延時間の和を減算し
て第2のタイムスタンプを生成し、前記ビデオ制御回路
は、ビデオのタイムスタンプとピクチャとのマッピング
を行い、ビデオデコードコア回路の内部遅延時間とビデ
オレジスタから読み出されたビデオのタイムスタンプと
第2のタイムスタンプとに基づいて、ビデオデコードコ
ア回路にスキップ動作またはリピート動作を行わせるた
めの制御信号を生成し、前記ビデオデコードコア回路で
は、スキップ動作において、ビデオビットバッファから
転送されてくるピクチャが廃棄され、その廃棄されたピ
クチャについてはデコードが行われず、リピート動作に
おいて、ビデオビットバッファから転送されてきたピク
チャのビデオ出力が引き続き出力されることをその要旨
とする。
【0046】請求項16に記載の発明は、請求項8また
は請求項11に記載のMPEGシステムデコーダにおい
て、前記MPEGオーディオデコーダは、遅延時間算出
回路とオーディオ減算回路とを備えたタイムスタンプ生
成回路を備え、前記遅延時間算出回路は、オーディオビ
ットバッファの内部遅延時間を算出し、前記オーディオ
減算回路は、オーディオビットバッファの内部遅延時間
とオーディオデコードコア回路の内部遅延時間とオーデ
ィオレジスタから読み出されたオーディオのタイムスタ
ンプとに基づいて、オーディオのタイムスタンプから各
内部遅延時間の和を減算して第2のタイムスタンプを生
成し、前記ビデオ制御回路は、ライトアドレス検出回路
とリードアドレス検出回路とピクチャヘッダ検出回路と
マッピング回路と第2のレジスタと同期判定回路と第1
および第2の比較処理回路とビデオ減算回路とを備え、
前記ライトアドレス検出回路は、外部から転送されてき
たビデオストリームにおけるビデオのタイムスタンプが
付加されていたパケットがビデオビットバッファに書き
込まれるときに、そのパケットのビデオビットバッファ
におけるアドレスを検出し、前記ビデオレジスタは、ラ
イトアドレス検出回路によって検出されたアドレスとビ
デオのタイムスタンプとを対応付けて順次蓄積し、前記
リードアドレス検出回路は、ビデオビットバッファから
読み出されたビデオストリームのアドレスを検出し、前
記ピクチャヘッダ検出回路は、ビデオビットバッファに
書き込まれたビデオストリームの各ピクチャの先頭に付
くピクチャヘッダを検出し、そのピクチャヘッダに規定
されているピクチャのタイプを検出し、前記第1の比較
処理回路は、ビデオビットバッファから読み出されたビ
デオストリームのアドレスと、ビデオレジスタから読み
出されたビデオのタイムスタンプに対応するアドレスと
を比較し、両アドレスが一致するかどうかを検出し、前
記マッピング回路は、第1の比較処理回路およびピクチ
ャヘッダ検出回路の検出結果とに基づいて、ビデオのタ
イムスタンプとピクチャとのマッピングを行い、前記第
2のレジスタは、フレーム間予測技術に従い、ピクチャ
ヘッダ検出回路によって検出されたピクチャのタイプに
基づいて、IピクチャまたはPピクチャに対応するビデ
オのタイムスタンプを、Bピクチャに対応するビデオの
タイムスタンプと入れ替え、前記ビデオ減算回路は、ビ
デオデコードコア回路の内部 遅延時間と第2のレジスタ
から読み出されたビデオのタイムスタンプとタイムスタ
ンプ生成回路から生成された第2のタイムスタンプとに
基づいて、第2のタイムスタンプからビデオデコードコ
ア回路の内部遅延時間とビデオのタイムスタンプとを減
算した値を生成し、前記第2の比較処理回路は、所定値
とビデオ減算回路の生成した値を比較し、前記同期判定
回路は、マッピング回路によってビデオのタイムスタン
プとピクチャとのマッピングが行われると、第2の比較
処理回路の比較結果に基づいて、ビデオデコードコア回
路にスキップ動作またはリピート動作を行わせるための
制御信号を生成し、前記ビデオデコードコア回路では、
スキップ動作において、ビデオビットバッファから転送
されてくるピクチャが廃棄され、その廃棄されたピクチ
ャについてはデコードが行われず、リピート動作におい
て、ビデオビットバッファから転送されてきたピクチャ
のビデオ出力が引き続き出力されることをその要旨とす
る。
【0047】請求項17に記載の発明は、請求項8また
は請求項11に記載のMPEGシステムデコーダにおい
て、前記MPEGオーディオデコーダは、遅延時間算出
回路とオーディオ減算回路と加算回路とサンプリング周
波数検出回路とを備えたタイムスタンプ生成回路を備
え、前記遅延時間算出回路は、オーディオビットバッフ
ァの内部遅延時間を算出し、前記オーディオ減算回路
は、オーディオビットバッファの内部遅延時間とオーデ
ィオデコードコア回路の内部遅延時間とオーディオレジ
スタから読み出されたオーディオのタイムスタンプとに
基づいて、オーディオのタイムスタンプから各内部遅延
時間の和を減算した値を生成し、前記サンプリング周波
数検出回路は、オーディオストリームからオーディオデ
ータのサンプリング周波数を検出し、そのサンプリング
周波数に対応したクロックを生成し、前記加算回路は、
オーディオ減算回路の生成した値と前記クロックを加算
して第2のタイムスタンプを生成し、前記ビデオ制御回
路は、ライトアドレス検出回路とリードアドレス検出回
路とピクチャヘッダ検出回路とマッピング回路と第2の
レジスタと同期判定回路と第1および第2の比較処理回
路と第1および第2のビデオ減算回路とを備え、前記ラ
イトアドレス検出回路は、外部から転送されてきたビデ
オストリームにおけるビデオのタイムスタンプが付加さ
れていたパケットがビデオビットバッファに書き込まれ
るときに、そのパケットのビデオビットバッファにおけ
るアドレスを検出し、前記ビデオレジスタは、ライトア
ドレス検出回路によって検出されたアドレスとビデオの
タイムスタンプとを対応付けて順次蓄積し、前記リード
アドレス検出回路は、ビデオビットバッファから読み出
されたビデオストリームのアドレスを検出し、前記ピク
チャヘッダ検出回路は、ビデオビットバッファに書き込
まれたビデオストリームの各ピクチャの先頭に付くピク
チャヘッダを検出し、そのピクチャヘッダに規定されて
いるピクチャのタイプを検出し、前記第1の比較処理回
路は、ビデオビットバッファから読み出されたビデオス
トリームのアドレスと、ビデオレジスタから読み出され
たビデオのタイムスタンプに対応するアドレスとを比較
し、両アドレスが一致するかどうかを検出し、前記マッ
ピング回路は、第1の比較処理回路およびピクチャヘッ
ダ検出回路の検出結果とに基づいて、ビデオのタイムス
タンプとピクチャとのマッピング を行い、前記第2のレ
ジスタは1段のスタックで構成され、フレーム間予測技
術に従い、ピクチャヘッダ検出回路によって検出された
ピクチャのタイプに基づいて、IピクチャまたはPピク
チャに対応するビデオのタイムスタンプを、Bピクチャ
に対応するビデオのタイムスタンプと入れ替え、前記第
1のビデオ減算回路は、ビデオデコードコア回路の内部
遅延時間と外部から指定された第1の値と第2のレジス
タから読み出されたビデオのタイムスタンプとに基づい
て、ビデオのタイムスタンプから、内部遅延時間と外部
から指定された第1の値の和を減算した値を生成し、前
記第2のビデオ減算回路は、タイムスタンプ生成回路か
ら生成された第2のタイムスタンプから第1のビデオ減
算回路の生成した値を減算した値を生成し、前記第2の
比較処理回路は、外部から指定された第2の値と第2の
ビデオ減算回路の生成した値を比較し、前記同期判定回
路は、マッピング回路によってビデオのタイムスタンプ
とピクチャとのマッピングが行われると、第2の比較処
理回路の比較結果に基づいて、ビデオデコードコア回路
にスキップ動作またはリピート動作を行わせるための制
御信号を生成し、前記ビデオデコードコア回路では、ス
キップ動作において、ビデオビットバッファから転送さ
れてくるピクチャが廃棄され、その廃棄されたピクチャ
についてはデコードが行われず、リピート動作におい
て、ビデオビットバッファから転送されてきたピクチャ
のビデオ出力が引き続き出力されることをその要旨とす
る。
【0048】
【作用】
【0049】請求項1,4,6,9のいずれか1項に記
載の発明によれば、オーディオ出力の再生タイミングを
計算し、その再生タイミングに従ってオーディオ出力を
生成することにより、正確な再生タイミングを得ること
ができる。
【0050】請求項2,5,7,10のいずれか1項に
記載の発明によれば、ビデオ出力の再生タイミングを計
算し、その再生タイミングに従ってビデオ出力を生成す
ることにより、正確な再生タイミングを得ることができ
る。
【0051】請求項3,8,11のいずれか1項に記載
の発明によれば、オーディオ出力の再生タイミングを計
算し、その再生タイミングに従ってオーディオ出力を生
成すると共に、ビデオ出力の再生タイミングを計算し、
その再生タイミングに従ってビデオ出力を生成すること
により、各出力の同期を十分にとることができる。
【0052】請求項12に記載の発明によれば、各デコ
ーダの内部遅延時間が変化しても、各出力の同期を十分
にとることができる。
【0053】請求項13に記載の発明によれば、ビデオ
出力をスキップまたはリピートさせることにより、各デ
コーダの内部遅延時間が変化しても、各出力の同期を十
分にとることができる。
【0054】請求項14〜17のいずれか1項に記載の
発明によれば、MPEGオーディオデコーダの内部遅延
時間は、オーディオビットバッファの内部遅延時間とオ
ーディオデコードコア回路の内部遅延時間とによって規
定される。
【0055】そして、各遅延時間とオーディオのタイム
スタンプとに基づいて第2のタイムスタンプが生成され
る。MPEGビデオデコーダでは、その第2のタイムス
タンプとMPEGビデオデコーダの内部遅延時間とに基
づいて、ビデオデコードコア回路にスキップ動作または
リピート動作を行わせる。
【0056】その結果、各デコーダの内部遅延時間が変
化しても、各出力の同期を十分にとることができる。
【0057】請求項15または請求項16に記載の発明
によれば、スキップ動作において、ビデオビットバッフ
ァから転送されてくるピクチャが廃棄され、その廃棄さ
れたピクチャについてはデコードが行われないため、デ
ィスプレイでは再生画面が数コマ分だけ飛ぶスキップ再
生が行われる。
【0058】また、リピート動作において、ビデオビッ
トバッファから転送されてきたピクチャのビデオ出力が
引き続き出力されるため、ディスプレイでは同じ再生画
面が続くリピート再生が行われる。
【0059】請求項17に記載の発明によれば、外部か
ら指定された第1の値を調整することにより、オーディ
オ出力の位相とビデオ出力の位相とを任意にずらすこと
ができる。
【0060】また、外部から指定された第2の値を調整
することにより、オーディオ出力とビデオ出力の同期の
精度を任意に設定することができる。
【0061】
【実施例】
(第1実施例)本発明の一実施例に従うMPEGシステ
ムデコーダを図面を参照しつつ説明する。図1は、本実
施例のMPEGシステムデコーダ1のブロック回路を示
す。
【0062】システムデコーダ1は、MPEGオーディ
オデコーダ2、MPEGビデオデコーダ3、オーディオ
ビデオパーサ(AVパーサ)4を備えている。AVパー
サ4は、デマルチプレクサ(Demultiplexer )(DMU
X)5を備えており、外部機器(例えば、ビデオCDプ
レーヤ)から転送されてきたMPEGシステムストリー
ムを入力する。DMUX5は、システムストリームのパ
ケットヘッダに従いシステムストリームをMPEGビデ
オストリームとMPEGオーディオストリームに分離す
る。AVパーサ4は、システムストリームからSCR,
オーディオのPTS(以下、PTS(A) という),ビデ
オのPTS(以下、PTS(V) という)をそれぞれ分離
する。オーディオストリーム,SCR,PTS(A) は、
それぞれオーディオデコーダ2へ出力され、ビデオスト
リーム,SCR,PTS(V) は、それぞれビデオデコー
ダ3へ出力される。
【0063】オーディオデコーダ2は、レジスタ11,
ビットバッファ12,デコードコア回路13,制御回路
14を備えている。レジスタ11はFIFO(First-In
-First-Out)構成で、PTS(A) を順次蓄積する。ビッ
トバッファ12はFIFO構成のRAM(Random Acces
s Memory)から成り、オーディオストリームを順次蓄積
する。デコードコア回路13は、ビットバッファ12か
ら供給されたオーディオストリームをMPEGオーディ
オパートに準拠してデコードし、オーディオ出力を生成
する。制御回路14は、オーディオデコーダ2における
デコード処理時間すなわち、オーディオデコーダ2の内
部遅延時間と、SCRおよびPTS(A)とを基にオーデ
ィオ出力の再生時刻(再生タイミング)を計算し、その
計算結果に従ってデコードコア回路13を制御する。
【0064】ビデオデコーダ3は、レジスタ21,ビッ
トバッファ22,デコードコア回路23,制御回路24
を備えている。レジスタ21はFIFO構成で、PTS
(V)を順次蓄積する。ビットバッファ22はFIFO構
成のRAMから成り、ビデオストリームを順次蓄積す
る。デコードコア回路23は、ビットバッファ22から
供給されたビデオストリームをMPEGビデオパートに
準拠してデコードし、ビデオ出力を生成する。制御回路
24は、ビデオデコーダ3におけるデコード処理時間、
すなわちビデオデコーダ3の内部遅延時間と、SCRお
よびPTS(V) とを基にビデオ出力の再生時刻を計算
し、その計算結果に従ってデコードコア回路23を制御
する。
【0065】そして、ビデオ出力はディスプレイ25
へ、オーディオ出力はD/Aコンバータ(図示略)およ
び低周波増幅器(図示略)を備えたオーディオ再生装置
26を介してスピーカ27へそれぞれ出力される。
【0066】AVパーサ4は、外部から転送されてきた
図10Aに示すような構成のシステムストリームを入力
すると、ビデオデータの各パケットV1〜V7から構成
されるビデオストリームと、オーディオデータの各パケ
ットA1〜A3から構成されるオーディオストリームと
に分離する。
【0067】オーディオデコーダ2は、オーディオデコ
ーダ2の内部遅延時間と、SCRおよびPTS(A) (P
TS(A1))とを基にオーディオ出力の再生時刻を設定
し、図10Bに示すように、アクセスユニットγの再生
を時刻t3で開始する。更に詳しく説明すると、制御回
路14はレジスタ11からPTS(A1)を読み出し、ビッ
トバッファ12からオーディオストリームを読み出して
デコードコア回路13へ転送する。このとき、制御回路
14は、オーディオデコーダ2の内部遅延時間と、SC
RおよびPTS(A1)とを基にオーディオ出力の再生時刻
を計算する。デコードコア回路13は、MPEGオーデ
ィオパートに準拠してオーディオストリームの各パケッ
トA1〜A3をデコードして、オーディオ出力を生成す
る。制御回路14は、計算された再生時刻(外部への出
力時刻)に従ってオーディオ出力が再生されるようにデ
コードコア回路13を制御する。
【0068】ところで、オーディオデコーダ2の内部遅
延時間は、ビットバッファ12からオーディオストリー
ムが読み出されるのに要する時間(ビットバッファ12
の内部遅延時間)と、デコードコア回路13におけるデ
コード処理時間(デコードコア回路13の内部遅延時
間)との和である。ビットバッファ12の内部遅延時間
は、ビットバッファ12におけるオーディオストリーム
の占有量によって変化し、その占有量が大きいほど内部
遅延時間も大きくなる。デコードコア回路13の内部遅
延時間は一定である。レジスタ11からPTS(A) が読
み出されるのに要する時間は、ビットバッファ12の内
部遅延時間に比べて小さく、制御回路14における信号
処理時間と合わせても無視できる程度である。
【0069】ビデオデコーダ3は、ビデオデコーダ3の
内部遅延時間と、SCRおよびPTS(V) (PTS(V
1),PTS(V6))とを基にビデオ出力の再生時刻を設定
し、図10B,図10Cに示すように、各アクセスユニ
ットα,βの再生を各時刻t1,t2で開始する。詳し
く説明すると、制御回路24はPTS(V1),PTS(V6)
をそれぞれレジスタ21から読み出し、ビットバッファ
22からビデオストリームを読み出してデコードコア回
路23へ転送する。制御回路24は、ビデオデコーダ3
の内部遅延時間と、SCRおよび各PTS(A1),PTS
(V6)とを基にビデオ出力の再生時刻を計算する。デコー
ドコア回路23は、MPEGビデオパートに準拠してビ
デオストリームの各パケットV1〜V7をデコードし、
ビデオ出力を生成する。制御回路24は、計算された再
生時刻(外部への出力時刻)に従ってビデオ出力が再生
されるようにデコードコア回路23を制御する。
【0070】ところで、ビデオデコーダ3の内部遅延時
間は、ビットバッファ22からビデオストリームが読み
出されるのに要する時間(ビットバッファ22の内部遅
延時間)と、デコードコア回路23におけるデコード処
理時間(デコードコア回路23の内部遅延時間)との和
である。ビットバッファ22の内部遅延時間は、ビット
バッファ22におけるビデオストリームの占有量によっ
て変化し、その占有量が大きいほど内部遅延時間も大き
くなる。デコードコア回路23の内部遅延時間は一定値
である。制御回路24は、PTS(V) が読み出されるの
に要する時間がビットバッファ22の内部遅延時間と同
一になるようにレジスタ21を制御する。
【0071】オーディオデコーダ2におけるオーディオ
出力の再生時刻の設定と、ビデオデコーダ3におけるビ
デオ出力の再生時刻の設定とは、各PTS(A) ,PTS
(V)に従ってそれぞれ別個に行われる。
【0072】このように、本実施例においては、SCR
およびPTSだけでなく、各デコーダ2,3の内部遅延
時間も考慮してオーディオ出力およびビデオ出力の再生
時刻が設定される。このことは、オーディオ出 とビデ
オ出力の同期(リップシンク)を十分にとることを可能
にする。このことは、ビデオ出力及びオーディオ出力の
うちいずれか一方を遅延させるための遅延メモリを設け
る必要をなくし、遅延メモリを設けることによる回路規
模およびコストの増大を回避することを可能にする。
【0073】(第2実施例)本発明の第2実施例を図2
〜図5に従って説明する。尚、本実施例において、第1
実施例と同じ構成部材については符号を等しくしてその
詳細な説明を省略する。
【0074】図2は、本実施例のMPEGシステムデコ
ーダ31のブロック回路を示す。システムデコーダ31
は、MPEGオーディオデコーダ32、MPEGビデオ
デコーダ33、及びAVパーサ4を備えている。AVパ
ーサ4はデマルチプレクサ(DMUX)5を備えてい
る。
【0075】AVパーサ4は分離したオーディオストリ
ーム,SCR,PTS(A) をそれぞれオーディオデコー
ダ32へ出力し、ビデオストリーム,PTS(V) をそれ
ぞれビデオデコーダ33へ出力する。ここで、本実施例
では、第1実施例と異なり、AVパーサ4はビデオデコ
ーダ33へSCRを提供しない。
【0076】オーディオデコーダ32は、レジスタ1
1,ビットバッファ12,デコードコア回路13,制御
回路14,及びタイムスタンプ生成回路41を備えてい
る。タイムスタンプ生成回路41は、後記するように、
タイムスタンプA2-PTS(以下、A2-PTSと略す)
を生成する。制御回路14は、レジスタ11,ビットバ
ッファ12及びデコードコア回路13と同様に、タイム
スタンプ生成回路41も制御する。尚、制御回路14
は、SCRおよびPTS(A) を基にオーディオ出力の再
生時刻(再生タイミング)を計算し、オーディオデコー
ダ32の内部遅延時間については考慮しない。
【0077】ビデオデコーダ33は、レジスタ21,ビ
ットバッファ22,デコードコア回路23,及び制御回
路42を備えている。制御回路42は、ビデオ出力の再
生時刻を計算し、その計算結果に従ってデコードコア回
路23を制御する。その再生時刻は、タイムスタンプ生
成回路41から生成されたA2-PTSと、ビデオデコー
ダ33のデコード処理時間、すなわちビデオデコーダ3
3の内部遅延時間(以下、ビデオデコード遅延時間とい
う)D(t) と、PTS(V) とを基に計算される。ビデオ
デコード遅延時間D(t) は、ビットバッファ22の内部
遅延時間VDと、デコードコア回路23の内部遅延時間
ΔVとの和である。
【0078】図3は、タイムスタンプ生成回路41のブ
ロック回路を示す。タイムスタンプ生成回路41は、遅
延時間算出回路51、減算回路52、サンプリング周波
数検出回路53、及び加算回路54を備えている。遅延
時間算出回路51は、ビットバッファ12の内部遅延時
間ADを算出する。内部遅延時間ADはビットバッファ
12におけるオーディオストリームの占有量によって変
化し、占有量が大きいほど内部遅延時間ADも大きくな
る。減算回路52は、レジスタ11から読み出されたP
TS(A) から内部遅延時間AD及びデコードコア回路1
3の内部遅延時間ΔAの和を減算し、A1-PTSを生成
する。すなわち、以下の式に従ってA1-PTSが生成さ
れる。
【0079】A1-PTS=PTS(A) −AD−ΔA 従って、A1-PTSには、PTS(A) に対して各内部遅
延時間AD,ΔAの影響が加味される。内部遅延時間Δ
Aは一定値である。
【0080】サンプリング周波数検出回路53は、オー
ディオストリームからオーディオデータのサンプリング
周波数を検出し、そのサンプリング周波数に対応したク
ロック信号CKを生成する。このサンプリング周波数
は、CD(Compact Disc)の規格では44.1kHz に定められ
ている。加算回路54は、A1-PTSとクロックCKを
加算してA2-PTSを生成する。ここで、A1-PTSに
クロックCKを加算するのは、リアルタイムにA2-PT
Sを生成するためである。前記したように、PTS(A)
は、パケットの中にオーディオフレーム(又は、アクセ
スユニット)の先頭がある場合、そのパケットのパケッ
トヘッダに付加される。しかし、パケットの中にオーデ
ィオフレームの先頭がない場合、PTS(A) は付加され
ない。パケットの中に2つ以上のオーディオフレームの
先頭がある場合、最初のオーディオフレームに対応する
PTS(A) だけが、そのパケットのパケットヘッダに付
加される。パケットの中にオーディオフレームの先頭が
ある場合でも、そのパケットのパケットヘッダに必ずP
TS(A) が付加されているとは限らない。このようにP
TS(A) が付加されることにより、レジスタ11からは
PTS(A) が間欠的にしか読み出されない。従って、タ
イムスタンプ生成回路41は、レジスタ11からPTS
(A) が読み出されないとき、前に読み出されたPTS
(A) からA1-PTSを生成し、そのA1-PTSにクロッ
クCKを加算してA2-PTSを生成する。これにより、
タイムスタンプ生成回路41は、リアルタイムにA2-P
TSを生成する。そのA2-PTSは、レジスタ11から
新たなPTS(A) が読み出される度に、それ以前に生成
されたA2-PTSとは関係なく、新たに生成される。
【0081】このように、タイムスタンプ生成回路41
は、オーディオデコーダ32の内部遅延時間(=AD+
ΔA)と、オーディオデータのサンプリング周波数に対
応したクロックCKとを基にA2-PTSを生成する。従
って、A2-PTSには、PTS(A) に対して各内部遅延
時間AD,ΔAおよびクロックCKの影響が加味され
る。
【0082】図4は、ビデオデコーダ33のブロック回
路を示す。制御回路42は、ライトアドレス検出回路6
1、リードアドレス検出回路62、ピクチャヘッダ検出
回路63、マッピング回路64、レジスタ65、同期判
定回路66、第1及び第2比較処理回路67,70、第
1及び第2減算回路68,69、及び各回路61〜70
を制御する制御コア回路71を備えている。制御コア回
路71は、ビットバッファ22及びデコードコア回路2
3も制御する。
【0083】ライトアドレス検出回路61は、ビットバ
ッファ22にビデオストリームが蓄積されるとき、PT
S(V) が付加されていたパケットのアドレスAddを検出
する。詳しく説明すると、AVパーサ4は、ビデオスト
リームからPTS(V) を分離し、ビットバッファ22が
そのビデオストリームを蓄積し、レジスタ21がそのP
TS(V) を蓄積する。このとき、ライトアドレス検出回
路61は、PTS(V)が分離されることなく、それを付
加したビデオストリームがビットバッファ22に書き込
まれたものとして、PTS(V) が付加されていたパケッ
トのアドレスAddを検出する。このことは、その検出さ
れたアドレスAddが、PTS(V) のアドレスに対応して
いることを意味する。このように、パケットのアドレス
AddをPTS(V) のアドレスに対応させることが可能な
のは、以下の理由による。パケットのデータ量に比べて
PTS(V) のデータ量は十分に小さく、ビデオストリー
ムにPTS(V) を含ませても、ビットバッファ22に蓄
積されるパケットのアドレスは変化しない。
【0084】制御コア回路71は、検出されたアドレス
AddをPTS(V) と対応付けてレジスタ21に順次蓄積
する。レジスタ21は例えば、(n+1)段のスタック
で構成されている。レジスタ21には、ビデオストリー
ムから順次分離された(n+1)個の各PTS(Vm ) 〜
PTS(Vm+n ) が、対応する各アドレスAddm 〜Add
m+n とワンセットで順次蓄積される。リードアドレス検
出回路62は、ビットバッファ22から読み出されたビ
デオストリームのアドレスを検出する。ピクチャヘッダ
検出回路63は、ビットバッファ22に書き込まれたビ
デオストリームの各ピクチャの先頭に付くピクチャヘッ
ダを検出し、その各ピクチャヘッダに規定されているピ
クチャのタイプ(I,P,B)をそれぞれ検出する。制
御コア回路71は、その検出結果に従って、ビットバッ
ファ22から一定の周期毎に1つのピクチャ分のビデオ
ストリームを読み出す。
【0085】第1比較処理回路67は、ビットバッファ
22から読み出されたビデオストリームのアドレスと、
レジスタ21から読み出されたPTS(V) (PTS
(Vm ) )に対応するアドレスAdd(Addm )とを比較
し、両アドレスが一致するかどうかを判定する。マッピ
ング回路64は、第1比較処理回路67の判定結果とピ
クチャヘッダ検出回路63の検出結果に従って、PTS
(V) とピクチャとのマッピングを行う。このマッピング
については以下に説明する。
【0086】この各回路62〜64,67の動作を、図
5(a),図5(b)に示すビデオストリームの一例に
従って説明する。図5(a)に示すように、ビデオスト
リームは、2つのパケットP,Qから構成され、各パケ
ットP,QのパケットヘッダにはPTS(Vm ) ,PTS
(Vm+1 ) がそれぞれ付加されている。パケットPは3つ
のBピクチャB1,B2,B3を含んでいる。このBピ
クチャB1の先頭は、パケットPの中にはない。パケッ
トQはBピクチャB3、IピクチャI1、及びPピクチ
ャP1を含んでいる。このBピクチャB3の先頭は、パ
ケットQの中にはない。つまり、PTS(Vm ) はBピク
チャB2,B3に対応したPTS(V) であり、PTS(V
m+1 ) はIピクチャI1,PピクチャP1に対応したP
TS(V)である。そして、各PTS(Vm ) ,PTS(V
m+1 ) には各アドレスAddm ,Add m+1 が対応し、各P
TS(Vm ) ,PTS(Vm+1 ) および各アドレスAddm
Add m+1 はレジスタ21に蓄積されている。図5(a)
に示すビデオストリームは、ビットバッファ22内で
は、図5(b)に示すように、各PTS(Vm ) ,PTS
(Vm+1 ) が除かれた状態で蓄積される。
【0087】ビットバッファ22からビデオストリーム
が読み出されると、リードアドレス検出回路62はその
ビデオストリームのアドレスを検出し、第1比較処理回
路67はそのアドレスと、レジスタ21に蓄積されてい
るアドレスAddm とを比較する。ピクチャヘッダ検出回
路63は、読み出されたビデオストリームのピクチャの
先頭に付くピクチャヘッダを検出する。第1比較処理回
路67がその両アドレスが一致していると判定すると、
マッピング回路64は、検出されたピクチャヘッダが先
頭に付くピクチャ(この場合、BピクチャB2)が、ア
ドレスAddm (すなわち、PTS(Vm ) )に対応してい
ると判定する。具体的には、図5(a)に示すように、
マッピング回路64は、PTS(Vm ) に対応するのはB
ピクチャB1ではなくBピクチャB2であり、PTS(V
m+1 ) に対応するのはBピクチャB3ではなくIピクチ
ャI1であることを判定する。この判定動作がマッピン
グである。
【0088】このように、本実施例においては、各回路
62〜64,67がビットバッファ22の内部遅延時間
VDを算出するのと同等の動作を行う。すなわち、ビッ
トバッファ22からデコードコア回路にビデオストリー
ムが提供されるときに、各ピクチャとPTS(V) の対応
付けを行うことが、内部遅延時間VDの算出に相当す
る。そのため、レジスタ21から読み出されたPTS
(V) には、レジスタ21に書き込まれたときのPTS
(V) に対して、ビットバッファ22の内部遅延時間VD
の影響が加味されている。ビデオデコーダ33における
各回路62〜64,67の動作は、オーディオデコーダ
32における遅延時間算出回路51の動作に対応する。
その内部遅延時間VDは、ビットバッファ22のビデオ
ストリームの占有量によって変化し、その占有量が大き
いほど内部遅延時間VDも大きくなる。
【0089】レジスタ65は1段のスタックで構成さ
れ、フレーム間予測技術に従う動作を行う。その動作
は、ピクチャヘッダ検出回路63によって検出されたピ
クチャのタイプ(I,P,B)に応じて、Iピクチャま
たはPピクチャに対応するPTS(V) と、Bピクチャに
対応するPTS(V) とを入れ替える。
【0090】第1減算回路68は、レジスタ65から読
み出されたPTS(V) からデコードコア回路23の内部
遅延時間ΔVと、図2に示す外部の入力装置43にて設
定された値xとの和を減算し、V1-PTSを生成する。
すなわち、以下の式に従ってV1-PTSが生成される。
【0091】V1-PTS=PTS(V) −ΔV−x ここで、レジスタ65から読み出されたPTS(V) に
は、内部遅延時間VDの影響が反映されている。そのた
め、V1-PTSには、レジスタ21に書き込まれたPT
S(V) に対して、ビデオデコード遅延時間D(t) (=V
D+ΔV)および値xの影響が反映されている。内部遅
延時間ΔVは一定の値である。値xはユーザが入力装置
43を操作することにより設定される。
【0092】第2減算回路69は、タイムスタンプ生成
回路41から生成されたA2-PTSからV1-PTSを減
算し、V2-PTSを生成する。すなわち、以下の式に従
ってV2-PTSが生成される。
【0093】V2-PTS=A2-PTS−V1-PTS=A
2-PTS−PTS(V) +ΔV+x ここで、A2-PTSはリアルタイムに生成されている。
従って、V1-PTSがどのようなタイミングで生成され
ても、V2-PTSは確実(又は、リアルタイム)に生成
される。
【0094】第2比較処理回路70は、図2に示す外部
の入力装置44にて設定された値yとV2-PTSを比較
する。値yは、ユーザが入力装置44を操作することに
より設定され、1つのピクチャが再生されている時間の
半分よりも大きくなるように設定される。同期判定回路
66は、マッピング回路64によってPTS(V) とピク
チャとのマッピングが行われると、第2比較処理回路7
0の比較結果に従って、各制御信号SS ,Sn ,SR を
生成する。同期判定回路66は、V2-PTS<−yの場
合は制御信号SS を生成する。同期判定回路66は、−
y≦V2-PTS≦y(即ち、|V2-PTS|≦y)の場
合は制御信号Sn を生成し、y<V2-PTSの場合は制
御信号SR をそれぞれ生成する。
【0095】同期判定回路66は、A2-PTSおよびV
1-PTSに比べて値yが十分に小さいとき、以下の各場
合に応じて各制御信号SS ,Sn ,SR を生成する。同
期判定回路66は、A2-PTS<V1-PTSの場合は制
御信号SS を生成する。同期判定回路66は、A2-PT
S=V1-PTSの場合は制御信号Sn を生成し、A2-P
TS>V1-PTSの場合は制御信号SR をそれぞれ生成
する。その各制御信号SS ,Sn ,SR はデコードコア
回路23に入力され、そのデコードコア回路23を制御
する。
【0096】デコードコア回路23は、ビットバッファ
22から読み出されたビデオストリームをデコードし、
各ピクチャ毎にビデオ出力を生成する。ここで、制御信
号SS が生成されているとき、デコードコア回路23は
スキップ動作を行う。詳しく説明すると、デコードコア
回路23は、制御信号SS が生成されている間、ビット
バッファ22から転送されてくるピクチャを廃棄し、そ
の廃棄されたピクチャについてはデコードを行わない。
そして、制御信号SS の生成が停止されると、デコード
コア回路23は通常の動作に戻る。その結果、ディスプ
レイ25では、再生画面が数コマ分だけ飛ぶスキップ再
生が行われる。
【0097】制御信号Sn が生成されているとき、デコ
ードコア回路23は通常の動作を行い、ディスプレイ2
5では通常の再生が行われる。制御信号SR が生成され
ているとき、デコードコア回路23はリピート動作を行
う。詳しく説明すると、デコードコア回路23は、制御
信号SR が生成されている間、その制御信号SR が生成
される前にビットバッファ22から転送されたピクチャ
のビデオ出力の出力を引き続き行う。そして、制御信号
SR の生成が停止されると、デコードコア回路23は通
常の動作に戻る。その結果、ディスプレイ25では、同
じ再生画面が続くリピート再生が行われる。
【0098】例えば、A2-PTSおよびV1-PTSに比
べて値yが十分に小さいとき、デコードコア回路23
は、A2-PTS<V1-PTSの場合はスキップ動作を行
い、A 2-PTS=V1-PTSの場合は通常の動作を行
い、更にA2-PTS>V1-PTSの場合はリピート動作
をそれぞれ行う。
【0099】ところで、入力装置44で値yを指定でき
るようにしてあるのは、A2-PTSとV1-PTSとが完
全に一致することは稀であるためである。デコードコア
回路23は、A2-PTSとV1-PTSとが完全に一致し
た場合(A2-PTS=V1-PTS)に通常の動作を行
う。従って、A2-PTSおよびV1-PTSに比べて値y
が十分に小さいとき、デコードコア回路23は稀にしか
通常の動作を行わないことになる。そこで、視聴者(又
は、ユーザー)が値yを適宜に設定することにより、A
2-PTSとV1-PTSとが完全には一致していなくて
も、ほぼ一致していればデコードコア回路23は通常の
動作を行う。つまり、入力装置44で値yを指定できる
ようにしてあるのは、A2-PTSとV1-PTSとの一致
条件に許容範囲をもたせるためである。
【0100】また、入力装置43で値xを指定できるよ
うにしてあるのは、デコードコア回路23に対して任意
にスキップ動作またはリピート動作を行わせるためであ
る。視聴者が値xを調整することにより、V1-PTSが
変化する。デコードコア回路23は、そのV1-PTSの
変化に応じて各動作を行う。
【0101】このように、本実施例において制御回路4
2は、オーディオデコーダ32の内部遅延時間(=AD
+ΔA)を基に生成されたA2-PTSと、ビデオデコー
ド遅延時間D(t) (=VD+ΔV)と、値xとを基にP
TS(V) を補正して、V2-PTSを生成する。そして、
制御回路42は、V2-PTSと値yとの比較結果に従っ
て、制御信号SS ,Sn ,SR のいずれかを生成し、ス
キップ動作,通常の動作,リピート動作のいずれかを行
うようにデコードコア回路23を制御する。
【0102】従って、制御回路42は、ビデオデコーダ
33の内部遅延時間だけでなく、オーディオデコーダ3
2の内部遅延時間をも基にデコードコア回路23を制御
する。すなわち、制御回路42は、ビデオデコーダ33
の内部遅延時間だけでなく、オーディオデコーダ32の
内部遅延時間をも考慮に入れてビデオ出力の再生時刻を
設定する。言い換えれば、オーディオ出力の再生タイミ
ングに合わせてビデオ出力の再生タイミングが調整され
る。このことは、オーディオ出力とビデオ出力の同期を
第1実施例よりもさらに確実にとることを可能する。
【0103】例えば、オーディオ出力の再生タイミング
よりもビデオ出力の再生タイミングが遅れている場合、
制御回路42はデコードコア回路23にスキップ動作を
行わせて、ディスプレイ25がスキップ再生を行う。こ
の結果、ビデオ出力の再生タイミングがオーディオ出力
の再生タイミングに追いつくようになる。逆に、オーデ
ィオ出力の再生タイミングよりもビデオ出力の再生タイ
ミングが進んでいる場合、制御回路42はデコードコア
回路23にリピート動作を行わせて、ディスプレイ25
がリピート再生を行う。この結果、ビデオ出力の再生タ
イミングがオーディオ出力の再生タイミングに合うよう
になる。
【0104】このように、ビデオ出力の再生タイミング
の方をオーディオ出力の再生タイミングに合わせるの
は、以下の理由による。人間はディスプレイ25に映し
出される動画が数コマ分ずれても、そのずれを検知でき
ないのに対し、スピーカ27から出される音声がずれた
ときには、そのずれを耳につきやすいノイズとして敏感
に検知できる。
【0105】ユーザが値yを調整することは、オーディ
オ出力とビデオ出力の同期の精度を任意に設定すること
を可能にする。値yを大きく設定するほど、A2-PTS
とV 1-PTSとの一致条件の許容範囲が大きくなり、そ
の結果、オーディオ出力とビデオ出力の同期の精度は低
くなる。このように、オーディオ出力とビデオ出力の同
期の精度が設定可能にされているのは、システムストリ
ームによってはPTS(PTS(A) および PTS(V)
)が正確に付加されていない場合があるためである。
例えば、現在市販されている、いわゆるビデオCDで
は、PTSが正確に付加されていないものが稀に存在す
る。値yが、1つのピクチャが再生されている時間の半
分よりも大きくなるように設定したのは、それより小さ
く設定しても、オーディオ出力とビデオ出力の同期の精
度は変化しないからである。
【0106】ユーザが値xを調整することは、オーディ
オ出力の位相とビデオ出力の位相とを意図的にずらすこ
とを可能にする。この機能は、本実施例をCD−ROM
などの蓄積メディアから読み出されたシステムストリー
ムに適用する場合に好適となる。例えば、ユーザが動画
を通常の再生速度よりも高速で再生させたときに、オー
ディオ出力とビデオ出力の同期ずれが生じ、その同期ず
れを補正する際にその機能を発揮させることができる。
動画を通常の再生速度よりも高速で再生させる場合と
は、ユーザが短時間に動画を見るために早送り再生を行
う場合や、見たい動画を検索するために早送り再生また
は早送り逆転再生を行う場合などであり、その場合にオ
ーディオ出力も再生される。
【0107】(第3実施例)本発明の第3実施例を図6
〜図9に従って説明する。本実施例において、第2実施
例と同じ構成部材については符号を等しくしてその詳細
な説明を省略する。
【0108】図6は、本実施例のMPEGシステムデコ
ーダ81のブロック回路を示す。システムデコーダ81
は、オーディオデコーダ32、MPEGビデオデコーダ
82、及びAVパーサ4を備えている。AVパーサ4は
DMUX5を備えている。AVパーサ4はオーディオス
トリーム,SCR,PTS(A) をそれぞれオーディオデ
コーダ31へ出力し、ビデオストリーム,PTS(V) を
それぞれビデオデコーダ82へ出力する。
【0109】ビデオデコーダ82は、レジスタ21,ビ
ットバッファ22,デコードコア回路23,及び制御回
路83を備えている。制御回路83は、A2-PTSと、
ビデオデコーダ82のデコード処理時間と、PTS(V)
とを基にビデオ出力の再生時刻を計算し、その計算結果
を補正する。そして、その補正結果に従ってデコードコ
ア回路23を制御する。ビデオデコーダ82の内部遅延
時間は、第2実施例のビデオデコーダ33の内部遅延時
間と同じであり、以下、ビデオデコード遅延時間D(t)
という。
【0110】図7は、ビデオデコーダ82のブロック回
路を示す。制御回路83は、ライトアドレス検出回路6
1、リードアドレス検出回路62、ピクチャヘッダ検出
回路63、マッピング回路64、レジスタ65、同期判
定回路66、第1及び第2比較処理回路67,70、第
1及び第2減算回路68,69、リピート判定回路8
4、スキップ判定回路85、及び各回路61〜70,8
4,85を制御する制御コア回路72を備えている。制
御コア回路72は、ビットバッファ22及びデコードコ
ア回路23も制御する。
【0111】リピート判定回路84は、同期判定回路6
6から生成された各制御信号Sn ,SR と、図6に示す
入力装置86,87で設定された値z1,z2とを基
に、制御信号SRmを生成する。スキップ判定回路85
は、同期判定回路66から生成された各制御信号Sn ,
SS と、図6に示す入力装置88,89で設定された値
w1,w2と、ピクチャヘッダ検出回路63の検出結果
に従って、制御信号SSmを生成する。
【0112】デコードコア回路23は、各制御信号SS
,Sn ,SR ではなく、各制御信号SSm,Sn ,SRm
に従って動作する。制御信号SSmが生成されていると
き、デコードコア回路23はスキップ動作を行う。制御
信号Sn が生成されているとき、デコードコア回路23
は通常の動作を行う。更に、制御信号SRmが生成されて
いるとき、デコードコア回路23はリピート動作を行
う。
【0113】図8は、リピート判定回路84のブロック
回路を示す。リピート判定回路84は、カウンタ91,
92、第1〜第3比較処理回路93〜95、オア(O
R)回路96を備えている。カウンタ91は制御信号S
R が生成される度に、そのカウント値をインクリメント
しつつカウント動作する。第1比較処理回路93は、カ
ウンタ91のカウント値と値z1を比較し、カウント値
の方が大きい場合に、制御信号SRmを生成する。OR回
路96は、各制御信号Sn ,SRmのうち少なくともいず
れか一方が生成されると、カウンタ91にリセット信号
を出力する。カウンタ91はそのリセット信号に応答し
てカウント値をリセットする。
【0114】第2比較処理回路94は、カウンタ91の
カウント値が零よりも大きい場合に、カウンタ92へカ
ウント開始信号を出力する。カウンタ92は、カウント
開始信号に応答してカウント動作を開始し、一定の時間
毎にカウント値をインクリメントする。第3比較処理回
路95は、カウンタ92のカウント値と値z2を比較
し、カウント値の方が大きい場合に、制御信号SRmを生
成し、カウンタ92にリセット信号を出力する。カウン
タ92はそのリセット信号に応答してカウント値をリセ
ットする。
【0115】第1比較処理回路93はカウンタ91のカ
ウンタ値により、制御信号SR が値z1よりも多い回数
だけ連続して生成されたとき、制御信号SRmを生成す
る。従って、制御信号SR が値z1よりも多い回数だけ
連続して生成されないと、デコードコア回路23はリピ
ート動作を行わない。このようにするのは、オーディオ
出力の再生タイミング(又は、再生時期)よりもビデオ
出力の再生タイミングが進んでいない場合でも、同期判
定回路66が制御信号SR を誤って生成して、デコード
コア回路23がリピート動作を行うことがあるためであ
る。例えば、PTS(A) またはPTS(V) が誤っている
場合や、動画が通常の再生速度よりも高速で再生された
場合などにおいて、同期判定回路66が制御信号SR を
誤って生成することがある。
【0116】そこで、リピート判定回路84は、同期判
定回路66が制御信号SR を連続してある一定の回数
(=z1)よりも多く生成したときに、その制御信号S
R が正しいものと判定し、制御信号SRmを生成する。デ
コードコア回路23はその制御信号SRmに従ってリピー
ト動作を行う。このように制御信号SRmを生成すること
は、誤った制御信号SR に従ってデコードコア回路23
がリピート動作を行うのを未然に防止する。
【0117】制御信号SR が1回生成されると、カウン
タ92はカウント動作を開始し、その一定時間後には、
その時点におけるカウンタ91のカウント値に関係な
く、第3比較処理回路95は制御信号SRmを生成する。
この一定時間は、カウンタ92のインクリメント速度と
値z2によって決定される。従って、同期判定回路66
が制御信号SR を生成してから一定時間が経過すると、
デコードコア回路23はリピート動作を行う。このよう
にするのは、制御信号SR が正しい場合でも、制御信号
SR が連続してある一定の回数(=z1)よりも多く生
成されるとは限らないからである。そこで、リピート判
定回路84は、制御信号SR が生成されてから一定時間
が経過したとき、その制御信号SR を正しい信号と判定
し、制御信号SRmを生成する。デコードコア回路23
は、その制御信号SRmに従ってリピート動作を行う。こ
のような第2及び第3比較処理回路94,95並びにカ
ウンタ92による動作は、カウンタ91と第1比較処理
回路93とOR回路96による動作を補完して、制御信
号SRmを確実に生成する。
【0118】図9は、スキップ判定回路85のブロック
回路を示す。スキップ判定回路85は、カウンタ10
1,102、第1〜第3比較処理回路103〜105、
オア(OR)回路106,Bピクチャ優先処理回路10
7を備えている。
【0119】カウンタ101は制御信号SS が生成され
る度に、そのカウント値をインクリメントする。第1比
較処理回路103は、カウンタ101のカウント値と値
w1とを比較し、カウント値の方が大きい場合に、制御
信号SSpを生成する。第2比較処理回路104は、カウ
ンタ101のカウント値が零よりも大きい場合に、カウ
ンタ102へカウント開始信号を出力する。カウンタ1
02はカウント開始信号に応答してカウント動作を開始
し、一定の時間毎にカウント値をインクリメントする。
第3比較処理回路105は、カウンタ102のカウント
値と値w2とを比較し、カウント値の方が大きい場合
に、制御信号SSpを生成する。
【0120】Bピクチャ優先処理回路107は、制御信
号SSpとピクチャヘッダ検出回路63によって検出され
たピクチャのタイプ(I,P,B)に従って、制御信号
SSmを生成する。この制御信号SSmは、デコードコア回
路23がIピクチャまたはPピクチャよりもBピクチャ
を優先してスキップ動作する信号である。OR回路10
6は、各制御信号Sn ,SSmのうち少なくともいずれか
一方が生成されると、カウンタ101にリセット信号を
出力する。カウンタ101はそのリセット信号に応答し
てカウント値をリセットする。カウンタ102は、制御
信号SSmが生成されるとカウンタ値をリセットする。第
1比較処理回路103は、カウンタ101のカウンタ値
に応じて、制御信号SS が値w1よりも多い回数だけ連
続して生成されたとき、制御信号SSpを生成する。Bピ
クチャ優先処理回路107は、その制御信号SSpとピク
チャのタイプ(I,P,B)に従って制御信号SSmを生
成する。従って、制御信号SS が値w1よりも多い回数
だけ連続して生成されないと、デコードコア回路23は
スキップ動作を行わない。このようにするのは、オーデ
ィオ出力の再生タイミングよりもビデオ出力の再生タイ
ミングが進んでいない場合でも、同期判定回路66が制
御信号SS を誤って生成することがあるためである。例
えば、PTS(A) またはPTS(V) が誤っている場合
や、動画が通常の再生速度よりも高速で再生された場合
などにおいて、同期判定回路66が制御信号SS を誤っ
て生成することがある。
【0121】そこで、スキップ判定回路85は、同期判
定回路66が制御信号SS を連続してある一定の回数
(=w1)よりも多く生成したときに、その制御信号S
S を正しいものと判定して、制御信号SSpを生成する。
デコードコア回路23はその制御信号SSpに従ってスキ
ップ動作を行う。このように制御信号SSpを生成するこ
とは、誤った制御信号SS に従ってデコードコア回路2
3がスキップ動作を行うのを未然に防止する。
【0122】ところで、Bピクチャは双方向予測によっ
て生成されるため、データ量は少なく、その重要度はI
ピクチャやPピクチャに比べて低くなる。従って、重要
度の低いBピクチャを優先してスキップ再生させること
は、再生される動画に生じるコマ落ちを少なくする。
【0123】制御信号SS が1回生成されると、カウン
タ102はカウント動作を開始し、その一定時間後に
は、その時点におけるカウンタ101のカウント値に関
係なく、第3比較処理回路105は制御信号SSpを生成
する。この一定時間は、カウンタ102のインクリメン
ト速度と値w2によって決定される。従って、同期判定
回路66が制御信号SS を生成してから一定時間が経過
すると、デコードコア回路23はスキップ動作を行う。
このようにするのは、制御信号SS が正しい場合でも、
制御信号SS が連続してある一定の回数(=w1)より
も多く生成されるとは限らないからである。そこで、ス
キップ判定回路85は、制御信号SS が生成されてから
一定時間が経過したとき、その制御信号SS を正しい信
号と判定し、制御信号SSpを生成する。デコードコア回
路23、その制御信号SSpに従ってスキップ動作を行
う。このように第2及び第3比較処理回路104,10
5並びにカウンタ102の動作は、カウンタ101と第
1比較処理回路103とOR回路106の動作を補完し
て、制御信号SSpを確実に生成する。
【0124】本実施例においては、何らかの原因によっ
て誤った各制御信号SR ,SS が生成された場合でも、
各判定回路84,85が各制御信号SR ,SS を補正し
て、各制御信号SRm,SSmを生成する。デコードコア回
路23は各制御信号SRm,SSmに従って動作(スキップ
動作,リピート動作)する。このことは、誤った各制御
信号SR ,SS が生成された場合でも、オーディオ出力
とビデオ出力の同期を確実にとることを可能にする。
【0125】ユーザが各値z1,z2,w1,w2を入
力装置86〜89でそれぞれ設定することは、各判定回
路84,85における各制御信号SR ,SS の補正の度
合いの調整を可能にする。スキップ再生を行う場合に重
要度の低いBピクチャをIピクチャやPピクチャよりも
優先してスキップ再生させることは、再生される動画に
生じるコマ落ちを少なくし、かつ動画の動きを滑らかな
ものにして、その結果、画質を向上させることができ
る。
【0126】尚、上記各実施例は以下のように変更して
もよい。 (1)第2,3実施例において、サンプリング周波数検
出回路53および加算回路54を省く。この場合には、
@PTSをリアルタイムに生成することができなくなる
ため、#PTSの生成精度は低下する。しかし、この場
合でも、オーディオ出力とビデオ出力の同期を第1実施
例よりもさらに確実にとることができる。そして、オー
ディオストリームに多くのPTS(A) が付加されている
場合には、第2,3実施例と同程度の性能を得ることも
できる。
【0127】(2)第2,3実施例において、@PTS
の代わりにPTS(A) から[V] PTSを減算した値を減
算回路69から生成させる。この場合には、PTS(A)
と、ビデオデコード遅延時間D(t) と、値xとに基づい
てPTS(V) が補正され、#PTSが生成される。この
場合には、オーディオデコーダ32の内部遅延時間に基
づいてデコードコア回路23の動作を制御することがで
きなくなるが、オーディオ出力の再生タイミングに合わ
せてビデオ出力の再生タイミングが制御されることに変
わりはない。そのため、オーディオデコーダ32の内部
遅延時間が小さい場合には、第2,3実施例と同程度の
性能を得ることもできる。但し、この場合、制御回路1
4は、第1実施例と同様に、オーディオデコーダ32の
内部遅延時間とSCRおよびPTS(A) とを基にオーデ
ィオ出力の再生時刻(再生タイミング)を計算し、その
計算結果に従ってデコードコア回路13を制御する。
【0128】(3)第2,3実施例において、値xを省
く。また、値yを固定にする。この場合には、各値x,
yに関係する機能が省かれるだけで、その他の作用およ
び効果については上記各実施例と同じである。
【0129】(4)第3実施例において、リピート判定
回路84から各比較処理回路94,95およびカウンタ
92を省く。この場合には、各回路94,95,92に
関係する機能が省かれるだけで、その他の作用および効
果については上記実施例と同じである。
【0130】(5)第3実施例において、スキップ判定
回路85から各比較処理回路104,105およびカウ
ンタ102を省く。また、スキップ判定回路85からB
ピクチャ優先処理回路107を省く。この場合には、各
回路104,105,102,107に関係する機能が
省かれるだけで、その他の作用および効果については上
記実施例と同じである。
【0131】(6)第2,3実施例において、レジスタ
21を1段のスタックで構成する。この場合、レジスタ
21のスタック段数が多くなるほど利用できるPTS
(V) も多くなるが、レジスタ21の容量も増えることに
なる。従って、レジスタ21のスタック段数は、回路規
模およびコストと要求される性能とに基づいて、適宜に
設定すればよい。
【0132】(7)第3実施例において、各比較処理回
路94,104は、各カウンタ91,101のカウント
値が零以上の所定値よりも大きい場合に、各カウンタ9
2、102のカウント動作をスタートさせる。
【0133】(8)PTSをDTSに置き代え、上記実
施例と同様に実施する。この場合にも、上記実施例と同
様の作用および効果を得ることができる。以上、各実施
例について説明したが、各実施例から把握できる請求項
以外の技術的思想について、以下にそれらの効果と共に
記載する。
【0134】(イ)請求項21〜23のいずれか1項に
記載のMPEGシステムデコーダにおいて、前記MPE
Gビデオ制御回路から生成されるビデオデコードコア回
路にスキップ動作またはリピート動作を行わせるための
制御信号の誤りを判定して補正するスキップ判定回路ま
たはリピート判定回路を備えたMPEGシステムデコー
ダ。
【0135】このようにすれば、制御信号の誤りを判定
して補正することにより、各出力の同期をさらに正確に
とることができる。 (ロ)請求項21〜23のいずれか1項に記載のMPE
Gシステムデコーダにおいて、前記MPEGビデオ制御
回路から生成されるビデオデコードコア回路にスキップ
動作を行わせるための制御信号が、一定回数以上連続し
て生成されたときに、その制御信号を有効化する第1の
スキップ有効化手段を備えたMPEGシステムデコー
ダ。
【0136】(ハ)請求項21〜23のいずれか1項に
記載のMPEGシステムデコーダにおいて、前記MPE
Gビデオ制御回路から生成されるビデオデコードコア回
路にリピート動作を行わせるための制御信号が、一定回
数以上連続して生成されたときに、その制御信号を有効
化する第1のリピート有効化手段を備えたMPEGシス
テムデコーダ。
【0137】(ロ)または(ハ)のようにすれば、制御
信号が一定回数以上連続して生成されないと、その制御
信号は有効化されない。すなわち、制御信号が一定回数
未満しか連続して生成されない場合、その制御信号は誤
りであると判定されて補正される。その結果、各出力の
同期をさらに正確にとることができる。
【0138】(ニ)請求項21〜23のいずれか1項に
記載のMPEGシステムデコーダにおいて、前記MPE
Gビデオ制御回路から生成されるビデオデコードコア回
路にスキップ動作を行わせるための制御信号が生成され
てから一定時間後に、その制御信号を有効化する第2の
スキップ有効化手段を備えたMPEGシステムデコー
ダ。
【0139】(ホ)請求項21〜23のいずれか1項に
記載のMPEGシステムデコーダにおいて、前記MPE
Gビデオ制御回路から生成されるビデオデコードコア回
路にリピート動作を行わせるための制御信号が生成され
てから一定時間後に、その制御信号を有効化する第2の
リピート有効化手段を備えたMPEGシステムデコー
ダ。
【0140】(ニ)または(ホ)のようにすれば、制御
信号が生成されてから一定時間後でないと、その制御信
号は有効化されない。その結果、各出力の同期をさらに
正確にとることができる。
【0141】(ヘ)請求項21〜23のいずれか1項に
記載のMPEGシステムデコーダにおいて、前記MPE
Gビデオ制御回路から生成されるビデオデコードコア回
路にスキップ動作を行わせるための制御信号が一定回数
以上連続して生成されたときに、その制御信号を有効化
し、その制御信号が所定の回数連続して生成されていれ
ば、最初に生成されてから一定時間後に、その制御信号
を有効化するスキップ判定回路を備えたMPEGシステ
ムデコーダ。
【0142】(ト)請求項21〜23のいずれか1項に
記載のMPEGシステムデコーダにおいて、前記MPE
Gビデオ制御回路から生成されるビデオデコードコア回
路にリピート動作を行わせるための制御信号が一定回数
以上連続して生成されたときに、その制御信号を有効化
し、その制御信号が所定の回数連続して生成されていれ
ば、最初に生成されてから一定時間後に、その制御信号
を有効化するリピート判定回路を備えたMPEGシステ
ムデコーダ。
【0143】(ヘ)または(ト)のようにすれば、
(ロ)と(ハ)または(ニ)と(ホ)を併用することに
より、両発明の相乗作用によりさらに効果を高めること
ができる。
【0144】(チ)請求項19〜23のいずれか1項に
記載のMPEGシステムデコーダにおいて、前記ビデオ
デコードコア回路のスキップ動作はBピクチャに対して
優先的に行われるMPEGシステムデコーダ。
【0145】このようにすれば、優先度の低いBピクチ
ャをIピクチャやPPピクチャよりも優先してスキップ
することにより、再生される動画に生じるコマ落ちが少
なくなり、動画の動きが滑らかなものになる。
【0146】(リ)請求項23に記載のMPEGシステ
ムデコーダにおいて、前記外部から指定された第2の値
は、1つのピクチャの再生されている時間の半分よりも
大きくなるように設定されているMPEGシステムデコ
ーダ。
【0147】このようにすれば、各出力の同期を最適に
調整することができる。 (ヌ)請求項23に記載のMPEGシステムデコーダに
おいて、前記サンプリング周波数は44.1kHz であるMP
EGシステムデコーダ。
【0148】このようにすれば、可聴周波数帯域を十分
にカバーすることができる。 (ル)請求項12または請求項15に記載のMPEGシ
ステムデコーダにおいて、前記ビデオ制御回路は、ビデ
オのタイムスタンプとピクチャとのマッピングを行い、
ビデオデコードコア回路の内部遅延時間とビデオレジス
タから読み出されたビデオのタイムスタンプとオーディ
オのタイムスタンプとに基づいて、ビデオデコードコア
回路にスキップ動作またはリピート動作を行わせるMP
EGシステムデコーダ。
【0149】このようにすれば、上記(2)に述べた実
施例を具体化することができる。ところで、本明細書に
おいて、発明の構成に係る部材は以下のように定義され
るものとする。
【0150】(a)分離手段はオーディオビデオパーサ
から構成されるものとする。 (b)第1のリピート有効化手段は、カウンタ91、比
較処理回路93、OR回路96から構成される。
【0151】(c)第2のリピート有効化手段は、カウ
ンタ92、比較処理回路94,95から構成される。 (d)第1のスキップ有効化手段は、カウンタ101、
比較処理回路103、OR回路106から構成される。
【0152】(e)第2のスキップ有効化手段は、カウ
ンタ102、比較処理回路104,105から構成され
る。 (f)第1の値は値xであり、第2の値は値yである。
【0153】(g)第2のレジスタはレジスタ65、第
1の比較処理回路は比較処理回路67、第2の比較処理
回路は比較処理回路70、第1の減算回路は減算回路6
8、第2の減算回路は減算回路69である。
【0154】(h)タイムスタンプは、PTSだけでな
くDTSをも含むものとする。
【0155】
【発明の効果】
1〕オーディオ出力の再生されるタイミングを正確に得
ることが可能なMPEGオーディオデコーダを提供する
ことができる。
【0156】2〕ビデオ出力の再生されるタイミングを
正確に得ることが可能なMPEGビデオデコーダを提供
することができる。 3〕オーディオ出力とビデオ出力の同期を十分にとるこ
とが可能なデコーダおよびMPEGシステムデコーダを
提供することができる。
【図面の簡単な説明】
【図1】第1実施例のブロック回路図。
【図2】第2実施例のブロック回路図。
【図3】第2実施例の要部ブロック回路図。
【図4】第2実施例の要部ブロック回路図。
【図5】第2実施例を説明するための説明図。
【図6】第3実施例のブロック回路図。
【図7】第3実施例の要部ブロック回路図。
【図8】第3実施例の要部ブロック回路図。
【図9】第3実施例の要部ブロック回路図。
【図10】MPEGシステムストリームを説明するため
の説明図。
【図11】従来例のブロック回路図。
【符号の説明】
1,31 MPEGシステムデコーダ 2,32 MPEGオーディオデコーダ 3,33,82 MPEGビデオデコーダ 4 オーディオビデオパーサ 5 DMUX 11,21 レジスタ 12,22 ビットバッファ 13,23 デコードコア回路 14,24,42,83 制御回路 41 タイムスタンプ生成回路 84 リピート判定回路 85 スキップ判定回路
───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.7,DB名) G11B 20/10 H04L 7/00 H04N 5/93

Claims (17)

    (57)【特許請求の範囲】
  1. 【請求項1】 オーディオストリームを順次蓄積するビ
    ットバッファと、ビットバッファから読み出されたオー
    ディオストリームをMPEGオーディオパートに準拠し
    てデコードし、オーディオ出力を生成するデコードコア
    回路とを備え、ビットバッファからオーディオストリー
    ムが読み出されるのに要する時間と、デコードコア回路
    におけるデコード処理時間と、外部から転送されてきた
    SCRおよびオーディオのタイムスタンプとに基づいて
    オーディオ出力の再生タイミングを計算し、その再生タ
    イミングに従ってオーディオ出力を生成するMPEGオ
    ーディオデコーダ。
  2. 【請求項2】 ビデオストリームを順次蓄積するビット
    バッファと、ビットバッファから読み出されたビデオス
    トリームをMPEGビデオパートに準拠してデコード
    し、ビデオ出力を生成するデコードコア回路とを備え、
    ビットバッファからビデオストリームが読み出されるの
    に要する時間と、デコードコア回路におけるデコード処
    理時間と、外部から転送されてきたSCRおよびビデオ
    のタイムスタンプとに基づいてビデオ出力の再生タイミ
    ングを計算し、その再生タイミングに従ってビデオ出力
    を生成するMPEGビデオデコーダ。
  3. 【請求項3】 外部から転送されてきたMPEGシステ
    ムストリームについて、MPEGシステムストリームの
    パケットヘッダに基づき、MPEGシステムストリーム
    をMPEGビデオストリームとMPEGオーディオスト
    リームに分離するデマルチプレクサと、 MPEGシステムストリームからSCRとオーディオの
    タイムスタンプとビデオのタイムスタンプとをそれぞれ
    分離する分離手段と、オーディオストリームを順次蓄積するオーディオビット
    バッファと、オーディオビットバッファから読み出され
    たオーディオストリームをMPEGオーディオパートに
    準拠してデコードし、オーディオ出力を生成するオーデ
    ィオデコードコア回路とを備え、オーディオビットバッ
    ファからオーディオストリームが読み出されるのに要す
    る時間と、オーディオデコードコア回路におけるデコー
    ド処理時間と、 外部から転送されてきたSCRおよびオ
    ーディオのタイムスタンプとに基づいてオーディオ出力
    の再生タイミングを計算し、その再生タイミングに従っ
    てオーディオ出力を生成するMPEGオーディオデコー
    ダと、ビデオストリームを順次蓄積するビデオビットバッファ
    と、ビデオビットバッファから読み出されたビデオスト
    リームをMPEGビデオパートに準拠してデコードし、
    ビデオ出力を生成するビデオデコードコア回路とを備
    え、ビットバッファからビデオストリームが読み出され
    るのに要する時間と、ビデオデコードコア回路における
    デコード処理時間と、 外部から転送されてきたSCRお
    よびビデオのタイムスタンプとに基づいてビデオ出力の
    再生タイミングを計算し、その再生タイミングに従って
    ビデオ出力を生成するMPEGビデオデコーダとを備え
    たMPEGシステムデコーダ。
  4. 【請求項4】 オーディオのタイムスタンプを順次蓄積
    するレジスタと、 オーディオストリームを順次蓄積するビットバッファ
    と、 ビットバッファから読み出されたオーディオストリーム
    をMPEGオーディオパートに準拠してデコードし、オ
    ーディオ出力を生成するデコードコア回路と、ビットバッファからオーディオストリームが読み出され
    るのに要する時間と、デコードコア回路におけるデコー
    ド処理時間と、 外部から転送されてきたSCRと、レジ
    スタから読み出されたオーディオのタイムスタンプとに
    基づいてオーディオ出力の再生タイミングを計算し、そ
    の再生タイミングに従ってデコードコア回路を制御する
    制御回路とを備えたMPEGオーディオデコーダ。
  5. 【請求項5】 ビデオのタイムスタンプを順次蓄積する
    レジスタと、 ビデオストリームを順次蓄積するビットバッファと、 ビットバッファから読み出されたビデオストリームをM
    PEGビデオパートに準拠してデコードし、ビデオ出力
    を生成するデコードコア回路と、ビットバッファからビデオストリームが読み出されるの
    に要する時間と、デコードコア回路におけるデコード処
    理時間と、 外部から転送されてきたSCRと、レジスタ
    から読み出されたビデオのタイムスタンプとに基づいて
    ビデオ出力の再生タイミングを計算し、その再生タイミ
    ングに従ってデコードコア回路を制御する制御回路とを
    備えたMPEGビデオデコーダ。
  6. 【請求項6】 外部から転送されてきたオーディオのタ
    イムスタンプを順次蓄積するレジスタと、 外部から転送されてきたオーディオストリームを順次蓄
    積するビットバッファと、 ビットバッファから読み出されたオーディオストリーム
    をMPEGオーディオパートに準拠してデコードし、オ
    ーディオ出力を生成するデコードコア回路と、ビットバッファからオーディオストリームが読み出され
    るのに要する時間と、デコードコア回路におけるデコー
    ド処理時間と、 外部から転送されてきたSCRと、レジ
    スタから読み出されたオーディオのタイムスタンプとに
    基づいてオーディオ出力の再生タイミングを計算し、そ
    の再生タイミングに従ってデコードコア回路を制御する
    制御回路とを備えたMPEGオーディオデコーダ。
  7. 【請求項7】 外部から転送されてきたビデオのタイム
    スタンプを順次蓄積するレジスタと、 外部から転送されてきたビデオストリームを順次蓄積す
    るビットバッファと、 ビットバッファから読み出されたビデオストリームをM
    PEGビデオパートに準拠してデコードし、ビデオ出力
    を生成するデコードコア回路と、ビットバッファからビデオストリームが読み出されるの
    に要する時間と、デコードコア回路におけるデコード処
    理時間と、 外部から転送されてきたSCRと、レジスタ
    から読み出されたビデオのタイムスタンプとに基づいて
    ビデオ出力の再生タイミングを計算し、その再生タイミ
    ングに従ってデコードコア回路を制御する制御回路とを
    備えたMPEGビデオデコーダ。
  8. 【請求項8】 外部から転送されてきたMPEGシステ
    ムストリームについて、MPEGシステムストリームの
    パケットヘッダに基づき、MPEGシステムストリーム
    をMPEGビデオストリームとMPEGオーディオスト
    リームに分離するデマルチプレクサと、 MPEGシステムストリームからSCRとオーディオの
    タイムスタンプとビデオのタイムスタンプとをそれぞれ
    分離する分離手段と、 オーディオレジスタとオーディオビットバッファとオー
    ディオデコードコア回路とオーディオ制御回路とから構
    成されるMPEGオーディオデコーダと、 ビデオレジスタとビデオビットバッファとビデオデコー
    ドコア回路とビデオ制御回路とから構成されるMPEG
    ビデオデコーダとを備えたMPEGシステムデコーダで
    あり、 前記オーディオレジスタは、分離手段から転送されてき
    たオーディオのタイムスタンプを順次蓄積し、 前記オーディオビットバッファは、デマルチプレクサか
    ら転送されてきたオーディオストリームを順次蓄積し、 前記オーディオデコードコア回路は、ビットバッファか
    ら読み出されたオーディオストリームをMPEGオーデ
    ィオパートに準拠してデコードし、オーディオ出力を生
    成し、 前記オーディオ制御回路は、オーディオビットバッファ
    からオーディオストリームが読み出されるのに要する時
    間と、オーディオデコードコア回路におけるデコード処
    理時間と、分離手段から転送されてきたSCRと、レジ
    スタから読み出されたオーディオのタイムスタンプとに
    基づいてオーディオ出力の再生タイミングを計算し、そ
    の再生タイミングに従ってオーディオデコードコア回路
    を制御し、 前記ビデオレジスタは、分離手段から転送されてきたビ
    デオのタイムスタンプを順次蓄積し、 前記ビデオビットバッファは、デマルチプレクサから転
    送されてきたビデオストリームを順次蓄積し、 前記ビデオデコードコア回路は、ビットバッファから読
    み出されたビデオストリームをMPEGビデオパートに
    準拠してデコードし、ビデオ出力を生成し、 前記ビデオ制御回路は、ビデオビットバッファからビデ
    オストリームが読み出されるのに要する時間と、ビデオ
    デコードコア回路におけるデコード処理時間と、分離手
    段から転送されてきたSCRと、レジスタから読み出さ
    れたビデオのタイムスタンプとに基づいてビデオ出力の
    再生タイミングを計算し、その再生タイミングに従って
    ビデオデコードコア回路を制御するMPEGシステムデ
    コーダ。
  9. 【請求項9】 FIFO構成で、外部から転送されてき
    たオーディオのタイムスタンプを順次蓄積するレジスタ
    と、 FIFO構成のRAMから成り、外部から転送されてき
    たオーディオストリームを順次蓄積するビットバッファ
    と、 ビットバッファから読み出されたオーディオストリーム
    をMPEGオーディオパートに準拠してデコードし、オ
    ーディオ出力を生成するデコードコア回路と、 ビットバッファからオーディオストリームが読み出され
    るのに要する時間と、デコードコア回路におけるデコー
    ド処理時間とからMPEGオーディオデコーダにおける
    デコード処理時間を計算し、そのデコード処理時間と、
    外部から転送されてきたSCRと、レジスタから読み出
    されたオーディオのタイムスタンプとに基づいてオーデ
    ィオ出力の再生タイミングを計算し、その再生タイミン
    グに従ってデコードコア回路を制御する制御回路とを備
    えたMPEGオーディオデコーダ。
  10. 【請求項10】 FIFO構成で、外部から転送されて
    きたビデオのタイムスタンプを順次蓄積するレジスタ
    と、 FIFO構成のRAMから成り、外部から転送されてき
    たビデオストリームを順次蓄積するビットバッファと、 ビットバッファから読み出されたビデオストリームをM
    PEGビデオパートに準拠してデコードし、ビデオ出力
    を生成するデコードコア回路と、 ビットバッファからビデオストリームが読み出されるの
    に要する時間と、デコードコア回路におけるデコード処
    理時間とからMPEGビデオデコーダにおけるデコード
    処理時間を計算し、そのデコード処理時間と、外部から
    転送されてきたSCRと、レジスタから読み出されたビ
    デオのタイムスタンプとに基づいてビデオ出力の再生タ
    イミングを計算し、その再生タイミングに従ってデコー
    ドコア回路を制御する制御回路とを備えたMPEGビデ
    オデコーダ。
  11. 【請求項11】 外部から転送されてきたMPEGシス
    テムストリームについて、MPEGシステムストリーム
    のパケットヘッダに基づき、MPEGシステムストリー
    ムをMPEGビデオストリームとMPEGオーディオス
    トリームに分離するデマルチプレクサと、 MPEGシステムストリームからSCRとオーディオの
    タイムスタンプとビデオのタイムスタンプとをそれぞれ
    分離する分離手段と、 オーディオレジスタとオーディオビットバッファとオー
    ディオデコードコア回路とオーディオ制御回路とから構
    成されるMPEGオーディオデコーダと、 ビデオレジスタとビデオビットバッファとビデオデコー
    ドコア回路とビデオ制御回路とから構成されるMPEG
    ビデオデコーダとを備えたMPEGシステムデコーダで
    あり、 前記オーディオレジスタは、FIFO構成で、分離手段
    から転送されてきたオーディオのタイムスタンプを順次
    蓄積し、 前記オーディオビットバッファはFIFO構成のRAM
    から成り、デマルチプレクサから転送されてきたオーデ
    ィオストリームを順次蓄積し、 前記オーディオデコードコア回路は、オーディオビット
    バッファから読み出されたオーディオストリームをMP
    EGオーディオパートに準拠してデコードし、オーディ
    オ出力を生成し、 前記オーディオ制御回路は、オーディオビットバッファ
    からオーディオストリームが読み出されるのに要する時
    間と、オーディオデコードコア回路におけるデコード処
    理時間とからMPEGオーディオデコーダにおけるデコ
    ード処理時間を計算し、そのデコード処理時間と、分離
    手段から転送されてきたSCRと、レジスタから読み出
    されたオーディオのタイムスタンプとに基づいてオーデ
    ィオ出力の再生タイミングを計算し、その再生タイミン
    グに従ってオーディオデコードコア回路を制御し、 前記ビデオレジスタは、FIFO構成で、分離手段から
    転送されてきたビデオのタイムスタンプを順次蓄積し、 前記ビデオビットバッファはFIFO構成のRAMから
    成り、デマルチプレクサから転送されてきたビデオスト
    リームを順次蓄積し、 前記ビデオデコードコア回路は、ビデオビットバッファ
    から読み出されたビデオストリームをMPEGビデオパ
    ートに準拠してデコードし、ビデオ出力を生成し、 前記ビデオ制御回路は、ビデオビットバッファからビデ
    オストリームが読み出されるのに要する時間と、ビデオ
    デコードコア回路におけるデコード処理時間とからMP
    EGビデオデコーダにおけるデコード処理時間を計算
    し、そのデコード処理時間と、分離手段から転送されて
    きたSCRと、レジスタから読み出されたビデオのタイ
    ムスタンプとに基づいてビデオ出力の再生タイミングを
    計算し、その再生タイミングに従ってビデオデコードコ
    ア回路を制御するMPEGシステムデコーダ。
  12. 【請求項12】 オーディオストリームを順次蓄積する
    オーディオビットバッファと、オーディオビットバッフ
    ァから読み出されたオーディオストリームをMPEGオ
    ーディオパートに準拠してデコードし、オーディオ出力
    を生成するオーディオデコードコア回路と、ビデオスト
    リームを順次蓄積するビデオビットバッファと、ビデオ
    ビットバッファから読み出されたビデオストリームをM
    PEGビデオパートに準拠してデコードし、ビデオ出力
    を生成するビデオデコードコア回路とを備え、 オーディオビットバッファおよびオーディオデコードコ
    ア回路の各内部遅延時間と、ビデオビットバッファおよ
    びビデオデコードコア回路の各内部遅延時間と に基づい
    て、MPEGオーディオデコーダから出力されるオーデ
    ィオ出力の再生されるタイミングを調整するMPEGシ
    ステムデコーダ。
  13. 【請求項13】 MPEGオーディオデコーダおよびM
    PEGビデオデコーダの内部遅延時間に基づいて、MP
    EGビデオデコーダから出力されるビデオ出力をスキッ
    プまたはリピートさせるMPEGシステムデコーダ。
  14. 【請求項14】 請求項8または請求項11に記載のM
    PEGシステムデコーダにおいて、 前記MPEGオーディオデコーダは、オーディオビット
    バッファの内部遅延時間とオーディオデコードコア回路
    の内部遅延時間とオーディオレジスタから読み出された
    オーディオのタイムスタンプとに基づいて第2のタイム
    スタンプを生成し、 前記ビデオ制御回路は、ビデオのタイムスタンプとピク
    チャとのマッピングを行い、ビデオデコードコア回路の
    内部遅延時間とビデオレジスタから読み出されたビデオ
    のタイムスタンプと第2のタイムスタンプとに基づい
    て、ビデオデコードコア回路にスキップ動作またはリピ
    ート動作を行わせるMPEGシステムデコーダ。
  15. 【請求項15】 請求項8または請求項11に記載のM
    PEGシステムデコーダにおいて、 前記MPEGオーディオデコーダは、オーディオビット
    バッファの内部遅延時間とオーディオデコードコア回路
    の内部遅延時間とオーディオレジスタから読み出された
    オーディオのタイムスタンプとに基づいて、オーディオ
    のタイムスタンプから各内部遅延時間の和を減算して第
    2のタイムスタンプを生成し、 前記ビデオ制御回路は、ビデオのタイムスタンプとピク
    チャとのマッピングを行い、ビデオデコードコア回路の
    内部遅延時間とビデオレジスタから読み出されたビデオ
    のタイムスタンプと第2のタイムスタンプとに基づい
    て、ビデオデコードコア回路にスキップ動作またはリピ
    ート動作を行わせるための制御信号を生成し、 前記ビデオデコードコア回路では、スキップ動作におい
    て、ビデオビットバッファから転送されてくるピクチャ
    が廃棄され、その廃棄されたピクチャについてはデコー
    ドが行われず、リピート動作において、ビデオビットバ
    ッファから転送されてきたピクチャのビデオ出力が引き
    続き出力されるMPEGシステムデコーダ。
  16. 【請求項16】 請求項8または請求項11に記載のM
    PEGシステムデコーダにおいて、 前記MPEGオーディオデコーダは、遅延時間算出回路
    とオーディオ減算回路とを備えたタイムスタンプ生成回
    路を備え、 前記遅延時間算出回路は、オーディオビットバッファの
    内部遅延時間を算出し、 前記オーディオ減算回路は、オーディオビットバッファ
    の内部遅延時間とオーディオデコードコア回路の内部遅
    延時間とオーディオレジスタから読み出されたオーディ
    オのタイムスタンプとに基づいて、オーディオのタイム
    スタンプから各内部遅延時間の和を減算して第2のタイ
    ムスタンプを生成し、 前記ビデオ制御回路は、ライトアドレス検出回路とリー
    ドアドレス検出回路とピクチャヘッダ検出回路とマッピ
    ング回路と第2のレジスタと同期判定回路と第1および
    第2の比較処理回路とビデオ減算回路とを備え、 前記ライトアドレス検出回路は、外部から転送されてき
    たビデオストリームにおけるビデオのタイムスタンプが
    付加されていたパケットがビデオビットバッファに書き
    込まれるときに、そのパケットのビデオビットバッファ
    におけるアドレスを検出し、 前記ビデオレジスタは、ライトアドレス検出回路によっ
    て検出されたアドレスとビデオのタイムスタンプとを対
    応付けて順次蓄積し、 前記リードアドレス検出回路は、ビデオビットバッファ
    から読み出されたビデオストリームのアドレスを検出
    し、 前記ピクチャヘッダ検出回路は、ビデオビットバッファ
    に書き込まれたビデオストリームの各ピクチャの先頭に
    付くピクチャヘッダを検出し、そのピクチャヘッダに規
    定されているピクチャのタイプを検出し、 前記第1の比較処理回路は、ビデオビットバッファから
    読み出されたビデオストリームのアドレスと、ビデオレ
    ジスタから読み出されたビデオのタイムスタンプに対応
    するアドレスとを比較し、両アドレスが一致するかどう
    かを検出し、 前記マッピング回路は、第1の比較処理回路およびピク
    チャヘッダ検出回路の検出結果とに基づいて、ビデオの
    タイムスタンプとピクチャとのマッピングを行い、 前記第2のレジスタは、フレーム間予測技術に従い、ピ
    クチャヘッダ検出回路によって検出されたピクチャのタ
    イプに基づいて、IピクチャまたはPピクチャに対応す
    るビデオのタイムスタンプを、Bピクチャに対応するビ
    デオのタイムスタンプと入れ替え、 前記ビデオ減算回路は、ビデオデコードコア回路の内部
    遅延時間と第2のレジスタから読み出されたビデオのタ
    イムスタンプとタイムスタンプ生成回路から生成された
    第2のタイムスタンプとに基づいて、第2のタイムスタ
    ンプからビデオデコードコア回路の内部遅延時間とビデ
    オのタイムスタンプとを減算した値を生成し、 前記第2の比較処理回路は、所定値とビデオ減算回路の
    生成した値を比較し、 前記同期判定回路は、マッピング回路によってビデオの
    タイムスタンプとピクチャとのマッピングが行われる
    と、第2の比較処理回路の比較結果に基づいて、ビデオ
    デコードコア回路にスキップ動作またはリピート動作を
    行わせるための制御信号を生成し、 前記ビデオデコードコア回路では、スキップ動作におい
    て、ビデオビットバッファから転送されてくるピクチャ
    が廃棄され、その廃棄されたピクチャについてはデコー
    ドが行われず、リピート動作において、ビデオビットバ
    ッファから転送されてきたピクチャのビデオ出力が引き
    続き出力されるMPEGシステムデコーダ。
  17. 【請求項17】 請求項8または請求項11に記載のM
    PEGシステムデコーダにおいて、 前記MPEGオーディオデコーダは、遅延時間算出回路
    とオーディオ減算回路と加算回路とサンプリング周波数
    検出回路とを備えたタイムスタンプ生成回路を備え、 前記遅延時間算出回路は、オーディオビットバッファの
    内部遅延時間を算出し、 前記オーディオ減算回路は、オーディオビットバッファ
    の内部遅延時間とオーディオデコードコア回路の内部遅
    延時間とオーディオレジスタから読み出されたオーディ
    オのタイムスタンプとに基づいて、オーディオのタイム
    スタンプから各内部遅延時間の和を減算した値を生成
    し、 前記サンプリング周波数検出回路は、オーディオストリ
    ームからオーディオデータのサンプリング周波数を検出
    し、そのサンプリング周波数に対応したクロックを生成
    し、 前記加算回路は、オーディオ減算回路の生成した値と前
    記クロックを加算して第2のタイムスタンプを生成し、 前記ビデオ制御回路は、ライトアドレス検出回路とリー
    ドアドレス検出回路とピクチャヘッダ検出回路とマッピ
    ング回路と第2のレジスタと同期判定回路と第1および
    第2の比較処理回路と第1および第2のビデオ減算回路
    とを備え、 前記ライトアドレス検出回路は、外部から転送されてき
    たビデオストリームにおけるビデオのタイムスタンプが
    付加されていたパケットがビデオビットバッファに書き
    込まれるときに、そのパケットのビデオビットバッファ
    におけるアドレスを検出し、 前記ビデオレジスタは、ライトアドレス検出回路によっ
    て検出されたアドレスとビデオのタイムスタンプとを対
    応付けて順次蓄積し、 前記リードアドレス検出回路は、ビデオビットバッファ
    から読み出されたビデオストリームのアドレスを検出
    し、 前記ピクチャヘッダ検出回路は、ビデオビットバッファ
    に書き込まれたビデオストリームの各ピクチャの先頭に
    付くピクチャヘッダを検出し、そのピクチャヘッダに規
    定されているピクチャのタイプを検出し、 前記第1の比較処理回路は、ビデオビットバッファから
    読み出されたビデオストリームのアドレスと、ビデオレ
    ジスタから読み出されたビデオのタイムスタンプに対応
    するアドレスとを比較し、両アドレスが一致するかどう
    かを検出し、 前記マッピング回路は、第1の比較処理回路およびピク
    チャヘッダ検出回路の検出結果とに基づいて、ビデオの
    タイムスタンプとピクチャとのマッピングを行い、 前記第2のレジスタは1段のスタックで構成され、フレ
    ーム間予測技術に従い、ピクチャヘッダ検出回路によっ
    て検出されたピクチャのタイプに基づいて、Iピクチャ
    またはPピクチャに対応するビデオのタイムスタンプ
    を、Bピクチャに対応するビデオのタイムスタンプと入
    れ替え、 前記第1のビデオ減算回路は、ビデオデコードコア回路
    の内部遅延時間と外部から指定された第1の値と第2の
    レジスタから読み出されたビデオのタイムスタンプとに
    基づいて、ビデオのタイムスタンプから、内部遅延時間
    と外部から指定された第1の値の和を減算した値を生成
    し、 前記第2のビデオ減算回路は、タイムスタンプ生成回路
    から生成された第2のタイムスタンプから第1のビデオ
    減算回路の生成した値を減算した値を生成し、 前記第2の比較処理回路は、外部から指定された第2の
    値と第2のビデオ減算回路の生成した値を比較し、 前記同期判定回路は、マッピング回路によってビデオの
    タイムスタンプとピクチャとのマッピングが行われる
    と、第2の比較処理回路の比較結果に基づいて、ビデオ
    デコードコア回路にスキップ動作またはリピート動作を
    行わせるための制御信号を生成し、 前記ビデオデコードコア回路では、スキップ動作におい
    て、ビデオビットバッファから転送されてくるピクチャ
    が廃棄され、その廃棄されたピクチャについてはデコー
    ドが行われず、リピート動作において、ビデオビットバ
    ッファから転送されてきたピクチャのビデオ出力が引き
    続き出力されるMPEGシステムデコーダ。
JP31711494A 1994-02-17 1994-12-20 Mpegオーディオデコーダ、mpegビデオデコーダおよびmpegシステムデコーダ Expired - Lifetime JP3197766B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP31711494A JP3197766B2 (ja) 1994-02-17 1994-12-20 Mpegオーディオデコーダ、mpegビデオデコーダおよびmpegシステムデコーダ
US08/387,581 US5668601A (en) 1994-02-17 1995-02-13 Audio/video decoding system
DE69512445T DE69512445T2 (de) 1994-02-17 1995-02-14 Audio-Video Dekodierungssystem und Verfahren
EP95101997A EP0668700B1 (en) 1994-02-17 1995-02-14 Audio/video decoding system and method
KR1019950002999A KR100189512B1 (ko) 1994-02-17 1995-02-17 Mpeg 오디오 디코더, mpeg 비디오 디코더, mpeg 시스템 디코더

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2065394 1994-02-17
JP6-297346 1994-11-30
JP6-20653 1994-11-30
JP29734694 1994-11-30
JP31711494A JP3197766B2 (ja) 1994-02-17 1994-12-20 Mpegオーディオデコーダ、mpegビデオデコーダおよびmpegシステムデコーダ

Publications (2)

Publication Number Publication Date
JPH08212701A JPH08212701A (ja) 1996-08-20
JP3197766B2 true JP3197766B2 (ja) 2001-08-13

Family

ID=27283125

Family Applications (1)

Application Number Title Priority Date Filing Date
JP31711494A Expired - Lifetime JP3197766B2 (ja) 1994-02-17 1994-12-20 Mpegオーディオデコーダ、mpegビデオデコーダおよびmpegシステムデコーダ

Country Status (5)

Country Link
US (1) US5668601A (ja)
EP (1) EP0668700B1 (ja)
JP (1) JP3197766B2 (ja)
KR (1) KR100189512B1 (ja)
DE (1) DE69512445T2 (ja)

Families Citing this family (108)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2298951B (en) * 1995-03-17 1999-10-27 Olivetti Res Ltd Addition of time information
US5898695A (en) * 1995-03-29 1999-04-27 Hitachi, Ltd. Decoder for compressed and multiplexed video and audio data
US5982459A (en) * 1995-05-31 1999-11-09 8×8, Inc. Integrated multimedia communications processor and codec
FR2735320B1 (fr) * 1995-06-09 1997-09-05 Sgs Thomson Microelectronics Procede et dispositif de synchronisation d'informations visuelles avec des informations audio
US5703877A (en) * 1995-11-22 1997-12-30 General Instrument Corporation Of Delaware Acquisition and error recovery of audio data carried in a packetized data stream
DE19547109A1 (de) * 1995-12-16 1997-06-19 Sel Alcatel Ag Verfahren zum Aufbau einer Mehrkanalverbindung sowie Vermittlungseinrichtungen, Kommunikationsnetz, sendeseitige und empfangsseitige Zugangseinrichtung zu einem Kommunikationsnetz
FR2743248B1 (fr) * 1995-12-29 1998-03-20 Sgs Thomson Microelectronics Dispositif de demultiplexage d'informations codees selon une norme mpeg
US6055271A (en) * 1996-01-18 2000-04-25 Sony Corporation Signal encoding method and apparatus and signal transmission method and apparatus involving the use of a number of pseudo access units
JP3130464B2 (ja) * 1996-02-02 2001-01-31 ローム株式会社 データ復号装置
US6157674A (en) * 1996-03-21 2000-12-05 Sony Corporation Audio and video data transmitting apparatus, system, and method thereof
US5822326A (en) * 1996-05-10 1998-10-13 Tektronix, Inc. Synchronizing digital audio signals
CA2204828C (en) * 1996-05-10 2004-11-23 Ray Nuber Error detection and recovery for high rate isochronous data in mpeg-2 data streams
EP1225770B1 (en) * 1996-05-10 2005-03-30 General Instrument Corporation Error detection and recovery for high rate isochronous data in mpeg-2 data streams
WO1997043855A1 (fr) * 1996-05-16 1997-11-20 Kabushiki Kaisha Infocity Procede de transmission et d'affichage d'informations et dispositif d'affichage d'informations
US6018367A (en) * 1996-09-30 2000-01-25 Apple Computer, Inc. Frame display dilation in video decoding
US6041067A (en) * 1996-10-04 2000-03-21 Matsushita Electric Industrial Co., Ltd. Device for synchronizing data processing
US6369855B1 (en) * 1996-11-01 2002-04-09 Texas Instruments Incorporated Audio and video decoder circuit and system
US5951690A (en) * 1996-12-09 1999-09-14 Stmicroelectronics, Inc. Synchronizing an audio-visual stream synchronized to a clock with a video display that is synchronized to a different clock
US6262776B1 (en) * 1996-12-13 2001-07-17 Microsoft Corporation System and method for maintaining synchronization between audio and video
JP3763172B2 (ja) * 1996-12-16 2006-04-05 ソニー株式会社 ディジタル信号復号方法及び装置、並びにディジタル信号再生装置
JP3454653B2 (ja) * 1996-12-27 2003-10-06 矢崎総業株式会社 データ送信装置、データ受信装置、データ通信装置、及びデータ通信方法
US6008856A (en) * 1997-03-07 1999-12-28 Advanced Micro Devices Inc. Method of using an audio transmission signal to transmit video data
JPH10262208A (ja) * 1997-03-19 1998-09-29 Sony Corp 同期ずれ制御装置及び方法
US6803964B1 (en) * 1997-03-21 2004-10-12 International Business Machines Corporation Method and apparatus for processing digital data
US5964849A (en) * 1997-04-01 1999-10-12 Sony Corporation Controlling video devices
IL120612A (en) * 1997-04-06 1999-12-31 Optibase Ltd Method for compressing an audio-visual signal
US6101195A (en) * 1997-05-28 2000-08-08 Sarnoff Corporation Timing correction method and apparatus
JPH114446A (ja) 1997-06-12 1999-01-06 Sony Corp 情報信号デコード方法及び装置
US6191822B1 (en) * 1997-06-20 2001-02-20 Sony Corporation Method of and apparatus for separating audio and video data from a combined audio/video stream of data
US5959684A (en) * 1997-07-28 1999-09-28 Sony Corporation Method and apparatus for audio-video synchronizing
EP0917147A3 (de) * 1997-11-11 1999-12-22 Deutsche Thomson-Brandt Gmbh Verfahren und Vorrichtung zur Steuerung eines Daten-Zwischenspeichers
EP0917142A1 (en) * 1997-11-11 1999-05-19 Deutsche Thomson-Brandt Gmbh Method and apparatus for controlling the buffering of a data stream
EP0917143B1 (en) * 1997-11-11 2004-01-02 Deutsche Thomson-Brandt Gmbh Method and apparatus for controlling the buffering of a data stream
US6373821B2 (en) * 1998-02-20 2002-04-16 Apple Computer, Inc. Method for setting time stamp in SYT field of packet headers for IEEE-1394 devices
US6249319B1 (en) * 1998-03-30 2001-06-19 International Business Machines Corporation Method and apparatus for finding a correct synchronization point within a data stream
JP3104681B2 (ja) 1998-06-10 2000-10-30 日本電気株式会社 オーディオ・ビデオ同期再生方法および装置
US6119091A (en) * 1998-06-26 2000-09-12 Lsi Logic Corporation DVD audio decoder having a direct access PCM FIFO
US6091742A (en) * 1998-08-17 2000-07-18 Gilant Satellite Networks Ltd. Bi-directional communications protocol
JP4059410B2 (ja) * 1998-10-07 2008-03-12 株式会社バンダイナムコゲームス ゲーム装置及び情報記憶媒体
KR100657237B1 (ko) * 1998-12-16 2006-12-18 삼성전자주식회사 데이터열간의 연속 재생을 보장하기 위한 부가 정보 생성 방법
JP3169009B2 (ja) 1999-02-17 2001-05-21 日本電気株式会社 Mpegデコーダ、mpegシステムデコーダ及びmpegビデオデコーダ
WO2000049803A1 (fr) 1999-02-18 2000-08-24 Kabushiki Kaisha Toshiba Support d'enregistrement pour flux de donnees, procede d'enregistrement et procede de reproduction associes
EP1089482A4 (en) * 1999-04-16 2005-11-02 Sony Corp METHOD AND DEVICE FOR MESSAGE TRANSMISSION AND RECORDING MEDIUM
JP2001005499A (ja) * 1999-04-23 2001-01-12 Matsushita Electric Ind Co Ltd 音楽データ情報伝送方法および装置
US7184450B1 (en) * 1999-04-28 2007-02-27 National Semiconductor Corporation System and method for decoding audio/video data such as DVD or/and DVB data
WO2000072591A1 (en) * 1999-05-20 2000-11-30 Koninklijke Philips Electronics N.V. Method and arrangement for transmitting and receiving encoded images
DE19930824C2 (de) * 1999-07-03 2001-05-31 Grundig Ag Bild- und Tonwiedergabegerät und Verfahren für dessen Betrieb
US6621817B1 (en) 1999-07-06 2003-09-16 Texas Instruments Incorporated Transport packet parser
KR100644562B1 (ko) * 1999-08-20 2006-11-13 삼성전자주식회사 오디오/비디오 신호 동기 장치 및 그 방법
KR100357241B1 (ko) * 1999-11-11 2002-10-18 박규진 디지털 오디오 플레이어에서의 반복재생구간 설정제어방법 및 이것을 이용한 파일재생장치 및 저장매체
DE19956913C2 (de) * 1999-11-26 2001-11-29 Grundig Ag Verfahren und Vorrichtung zur Anpassung der Laufzeitdifferenz von Video- und Audiosignal in einem Fernsehgerät
KR20010061942A (ko) * 1999-12-31 2001-07-07 윤종용 오디오 데이터에 연관된 부가 데이터가 편집가능한데이터구조로 기록된 기록매체, 그 기록/재생방법 및 장치
GB0000873D0 (en) * 2000-01-14 2000-03-08 Koninkl Philips Electronics Nv Interconnection of audio/video devices
GB0000874D0 (en) * 2000-01-14 2000-03-08 Koninkl Philips Electronics Nv Latency handling for interconnected devices
EP1183687A4 (en) * 2000-02-23 2004-10-27 Havin Co Ltd APPARATUS AND METHOD FOR RECORDING A DIGITAL AUDIO DATA FILE
US6954499B2 (en) * 2000-03-15 2005-10-11 Victor Company Of Japan, Ltd Moving picture coding, coded-moving picture bitstream conversion and coded-moving picture bitstream multiplexing
KR20010090176A (ko) * 2000-03-23 2001-10-18 이계철 엠펙 오디오 디코더의 합성필터
US7046588B2 (en) 2000-04-27 2006-05-16 Samsung Electronics Co., Ltd. Method and apparatus for recording and reproducing audio highlight portion and recording medium for storing additional information for the same
US6718507B1 (en) 2000-09-12 2004-04-06 At&T Corp. System and method for representing compressed information
JP4612171B2 (ja) 2000-10-27 2011-01-12 株式会社東芝 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置
US6618445B1 (en) * 2000-11-09 2003-09-09 Koninklijke Philips Electronics N.V. Scalable MPEG-2 video decoder
US7038690B2 (en) * 2001-03-23 2006-05-02 Microsoft Corporation Methods and systems for displaying animated graphics on a computing device
US7239324B2 (en) * 2001-03-23 2007-07-03 Microsoft Corporation Methods and systems for merging graphics for display on a computing device
JP2002290932A (ja) * 2001-03-27 2002-10-04 Toshiba Corp デジタル放送受信装置とその制御方法
JP3591493B2 (ja) * 2001-07-25 2004-11-17 ソニー株式会社 ネットワークシステム、およびネットワークシステムの同期方法
KR20010102899A (ko) * 2001-10-23 2001-11-17 박영남 Mpeg2파일 재생시스템에 있어서 mpeg2파일의 멀티디스플레이 구현장치 및 방법
JP3823044B2 (ja) * 2001-10-31 2006-09-20 パナソニック モバイルコミュニケーションズ株式会社 タイムスタンプ値制御装置
US7120168B2 (en) * 2001-11-20 2006-10-10 Sony Corporation System and method for effectively performing an audio/video synchronization procedure
US6906755B2 (en) * 2002-01-04 2005-06-14 Microsoft Corporation Method and apparatus for synchronizing audio and video data
US7379653B2 (en) * 2002-02-20 2008-05-27 The Directv Group, Inc. Audio-video synchronization for digital systems
KR100509723B1 (ko) * 2002-03-23 2005-08-23 주식회사 레인콤 비디오 시디의 오디오 패킷을 독립적으로 재생하기 위한방법 및 장치
KR100490403B1 (ko) * 2002-05-04 2005-05-17 삼성전자주식회사 오디오 스트림의 버퍼링 제어 방법 및 그 장치
JP2004289295A (ja) * 2003-03-19 2004-10-14 Fujitsu Ltd データ処理システム、データ処理装置及びデータ処理方法
KR100542441B1 (ko) 2003-09-02 2006-01-11 한국전자통신연구원 2 이상의 채널을 처리하기 위한 스케줄링 방법, 보이스오버 패킷 시스템, 및 기록 매체
JP2005136464A (ja) * 2003-10-28 2005-05-26 Pioneer Electronic Corp データ出力装置、データ送信装置、データ処理システム、データ出力方法、データ送信方法、データ処理方法、それらのプログラム、および、それらのプログラムを記録した記録媒体
KR20060127170A (ko) * 2004-03-03 2006-12-11 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 비디오 스트림 처리 회로 및 방법
JP4285307B2 (ja) * 2004-04-02 2009-06-24 株式会社日立製作所 データ処理装置およびその方法
US7400653B2 (en) 2004-06-18 2008-07-15 Dolby Laboratories Licensing Corporation Maintaining synchronization of streaming audio and video using internet protocol
KR100619041B1 (ko) * 2004-07-22 2006-09-01 삼성전자주식회사 비디오 동기화 장치 및 비디오 동기화 방법
KR100651894B1 (ko) * 2004-07-23 2006-12-06 엘지전자 주식회사 영상기기 및 그 제어방법
US20060024024A1 (en) * 2004-07-27 2006-02-02 Cheng-Che Chen Playback device capable of synchronizing playback of video signal portion and audio signal portion of av signal and method thereof
EP1715612B1 (en) * 2004-09-09 2011-08-10 Panasonic Corporation Transmitting apparatus, relaying apparatus, receiving apparatus and network system including these apparatus
KR101103150B1 (ko) 2005-01-14 2012-01-04 엘지전자 주식회사 비디오 및 오디오 데이터 동기화 장치 및 방법
US7480315B2 (en) * 2004-12-31 2009-01-20 Microsoft Corporation Method and apparatus for synchronizing clocks
JP4595653B2 (ja) * 2005-04-27 2010-12-08 日本ビクター株式会社 映像・音声処理装置
US7843974B2 (en) * 2005-06-30 2010-11-30 Nokia Corporation Audio and video synchronization
JP4311570B2 (ja) * 2005-07-01 2009-08-12 株式会社ソニー・コンピュータエンタテインメント 再生装置、ビデオ復号装置および同期再生方法
JP2007124090A (ja) * 2005-10-26 2007-05-17 Renesas Technology Corp 情報機器
KR100746076B1 (ko) * 2005-11-07 2007-08-06 엘지전자 주식회사 멀티미디어 신호의 시간정보 전송방법
JP2007259313A (ja) * 2006-03-24 2007-10-04 Toshiba Corp ストリーム再生方法及び再生装置
CN100450163C (zh) * 2006-11-30 2009-01-07 中兴通讯股份有限公司 一种移动多媒体广播视音频同步播放的方法
US20080178243A1 (en) * 2007-01-19 2008-07-24 Suiwu Dong Multimedia client/server system with audio synchronization and methods for use therewith
CA2924651C (en) * 2008-04-25 2020-06-02 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Flexible sub-stream referencing within a transport data stream
JP5178375B2 (ja) * 2008-07-30 2013-04-10 パナソニック株式会社 デジタル放送再生装置およびデジタル放送再生方法
US8041848B2 (en) * 2008-08-04 2011-10-18 Apple Inc. Media processing method and device
US8451907B2 (en) * 2008-09-02 2013-05-28 At&T Intellectual Property I, L.P. Methods and apparatus to detect transport faults in media presentation systems
US8325764B2 (en) * 2009-02-24 2012-12-04 Verivue, Inc. Canonical scheduling for heterogeneous content delivery
KR101547697B1 (ko) 2009-03-24 2015-08-26 엘지전자 주식회사 모바일 방송수신기의 신호 동기화 장치 및 그 방법
US9819840B2 (en) * 2010-01-11 2017-11-14 Bryan Nunes Audio device that extracts the audio of a multimedia stream and serves the audio on a network while the video is displayed
US9094564B2 (en) * 2010-05-07 2015-07-28 Microsoft Technology Licensing, Llc Clock synchronization for shared media playback
US9191686B2 (en) 2011-07-22 2015-11-17 Honeywell International Inc. System and method of implementing synchronized audio and video streaming
US9819604B2 (en) * 2013-07-31 2017-11-14 Nvidia Corporation Real time network adaptive low latency transport stream muxing of audio/video streams for miracast
JP6149588B2 (ja) * 2013-08-05 2017-06-21 ヤマハ株式会社 コンテンツ再生方法、装置及びプログラム
US10063907B1 (en) * 2017-06-06 2018-08-28 Polycom, Inc. Differential audio-video synchronization
US10992336B2 (en) 2018-09-18 2021-04-27 Roku, Inc. Identifying audio characteristics of a room using a spread code
US10931909B2 (en) 2018-09-18 2021-02-23 Roku, Inc. Wireless audio synchronization using a spread code
US10958301B2 (en) 2018-09-18 2021-03-23 Roku, Inc. Audio synchronization of a dumb speaker and a smart speaker using a spread code
CA3151412A1 (en) * 2019-09-17 2021-03-25 Carl Adrian Woffenden System and method for talking avatar

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0235886A (ja) * 1988-07-26 1990-02-06 Fujitsu Ltd 最適遅延制御方式
DE69032361T2 (de) * 1989-03-16 1998-10-29 Fujitsu Ltd Video/audiomultiplexübertragungssystem
US5323272A (en) * 1992-07-01 1994-06-21 Ampex Systems Corporation Time delay control for serial digital video interface audio receiver buffer
US5287182A (en) * 1992-07-02 1994-02-15 At&T Bell Laboratories Timing recovery for variable bit-rate video on asynchronous transfer mode (ATM) networks
JP3255308B2 (ja) * 1992-12-18 2002-02-12 ソニー株式会社 データ再生装置
AU672070B2 (en) * 1993-02-26 1996-09-19 Sony Corporation Synchronization of audio/video information
US5396497A (en) * 1993-02-26 1995-03-07 Sony Corporation Synchronization of audio/video information
JP3427416B2 (ja) * 1993-05-25 2003-07-14 ソニー株式会社 多重化データ分離装置および方法
US5430485A (en) * 1993-09-30 1995-07-04 Thomson Consumer Electronics, Inc. Audio/video synchronization in a digital transmission system

Also Published As

Publication number Publication date
US5668601A (en) 1997-09-16
KR950035449A (ko) 1995-12-30
KR100189512B1 (ko) 1999-06-01
EP0668700A3 (en) 1996-06-26
DE69512445D1 (de) 1999-11-04
EP0668700B1 (en) 1999-09-29
DE69512445T2 (de) 2000-05-18
EP0668700A2 (en) 1995-08-23
JPH08212701A (ja) 1996-08-20

Similar Documents

Publication Publication Date Title
JP3197766B2 (ja) Mpegオーディオデコーダ、mpegビデオデコーダおよびmpegシステムデコーダ
US7076156B2 (en) Recording apparatus and method, playback apparatus and method, and recording medium therefor
JP3215087B2 (ja) オーディオとビデオの同期方法及びデジタルビデオプロセッサ
US7054546B2 (en) Data multiplexing method, data recorded medium, data recording apparatus and data recording program
US7881584B2 (en) Reproducing apparatus and method, and recording medium
JP3133630B2 (ja) Mpegシステムデコーダ
KR101014664B1 (ko) 복수의 데이터 스트림 간의 연속 재생을 보장하는 재생방법 및 그 재생 장치
JP4294660B2 (ja) 再生装置、再生方法及びその記録媒体
US20050004940A1 (en) Information processing apparatus and method
JP4288549B2 (ja) 記録装置および方法、並びに再生装置および方法
JP4254007B2 (ja) 再生装置および方法、並びに記録媒体
JP2008176918A (ja) 再生装置、再生方法及びその記録媒体
JP4284574B2 (ja) 記録装置および方法、並びに記録媒体
US8428117B2 (en) Image encoder and image encoding method
JPH1083632A (ja) ディジタル信号符号化方法および装置、ディジタル信号伝送方法、並びに信号記録媒体
WO2004095844A1 (ja) 画像符号化装置および画像符号化方法

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080608

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090608

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090608

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100608

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110608

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110608

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120608

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130608

Year of fee payment: 12

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term