JP3846671B2 - Multimedia storage device and multimedia transmission device - Google Patents
Multimedia storage device and multimedia transmission device Download PDFInfo
- Publication number
- JP3846671B2 JP3846671B2 JP13213999A JP13213999A JP3846671B2 JP 3846671 B2 JP3846671 B2 JP 3846671B2 JP 13213999 A JP13213999 A JP 13213999A JP 13213999 A JP13213999 A JP 13213999A JP 3846671 B2 JP3846671 B2 JP 3846671B2
- Authority
- JP
- Japan
- Prior art keywords
- packet
- program
- time
- packets
- storage device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Description
【0001】
【発明の属する技術分野】
この発明は、マルチメディア蓄積装置に関するものであり、デジタル放送などのデジタル動画を収録・再生する方法、時刻指定による制御方法、擬似的に生放送を停止・再開するための方法、番組名などと蓄積データの関連付けに関するものである。以降、「動画」を映像と音声の混合映像、「映像」と「音声」はそれぞれ視覚としての映像、聴覚としての音声を表す。
【0002】
【従来の技術】
図7は例えば、従来のPC(Personal Computer)による動画蓄積・再生方法であり、61はPC本体を示し、62は復号ボード用のドライバと符号化ボード用のドライバを駆動し、ファイルに蓄積されたデータを復号ボードに転送したり、符号化ボードから出力されるデータをファイル化するためのアプリケーションプログラムであり、65は復号ボード、63は映像を出力するためのモニタ、66は符号化ボード、64は符号化ボードにVTR(Video Tape Recorder)装置など動画のアナログ信号を入力するための入力手段、67はハードディスクなどの映像蓄積手段である。
【0003】
図8は家庭用VTRで録画・再生を行う方法であり、71はVTR本体を示し、72は再生、停止などの操作を行うスイッチによりテープへの再生、停止、録画を行うための制御モジュールであり、73は映像の出力手段でありテレビなどに接続する端子などを示し、74は入力手段であり外部からの信号入力やチューナーに相当し、75は動画を表示するテレビであり、76は動画信号を記録する蓄積手段であり記録媒体の代表例としてはビデオテープがある。
【0004】
図9は家庭用テレビでテレビ放送を視聴する方法であり、81はテレビ本体を示し、82はチャンネル変更などを行うスイッチによりチューナーで選択するチャンネルの変更などを行うための制御モジュールであり、83は動画を表示するためのブラウン管などの表示手段、84は動画の入力手段であり外部からの信号入力端子やチューナーに相当する。
【0005】
次に動作について説明する。
PC61上での動画蓄積は、動画信号の入力手段64により符号化ボード66に映像信号が入力され、符号化ボード66により符号化された動画データをアプリケーションプログラム62によりそのままの形態でディスクなどの蓄積装置67に蓄積し、再生時にはアプリケーションプログラム62により符号化された動画データを蓄積手段67から読み込み、コンピュータに内蔵した復号ボード65の復号状況に応じて復号ボード65にその符号化されたデータを順次転送するだけであり、符号化された動画データの内部を変更することはない。また、復号ボード65は、動画として復号したデータを表示するものである。
【0006】
VTRでの動画蓄積は、入力手段74により入力された動画を利用者のスイッチ操作などの指示に従って制御モジュール72を動作させ録画を行い、蓄積手段76に動画を録画する。蓄積手段76に記録された動画は、利用者のスイッチ操作などの指示に従って制御モジュール72を動作させ再生を行い、蓄積手段76に記録されている動画を再生し、出力手段73を介してテレビ75に動画を表示する。
テレビは、テレビ放送をチューナーで受信したり、VTRからの入力により入力手段84で得られる動画を制御モジュール82により切り替え表示手段83に表示するものである。
【0007】
【発明が解決しようとする課題】
従来コンピュータに収録していた動画は、映像と音声を一対とした単一の動画が主流であり、かつ、符号化されたデータをそのまま収録するため、目的の映像、音声を再生するために不要なデータ、例えば復号同期のために挿入されるNULLパケットやその他復号に直接必要ではない情報用のパケットなども同時に収録してしまうため有限の蓄積手段を不要データの分だけ無駄に使用しており、この無駄を無くし、効率的に不揮発性記憶装置などの蓄積手段を使用する必要があった。
【0008】
また、コンピュータで扱う映像は、一般的にコンピュータ上で表示可能な転送レートの低いものであり、仮に多重化された動画を扱う場合には一般的には分離せずに復号装置への設定によってどのマルチメディアデータを復号するか決定する必要があり多重化されている動画をリアルタイムに分離することができないという問題点があった。
【0009】
本装置をVTRとして見た場合、一般的に従来のVTRは、録画か再生を選択的に実行するように構成されており、両者を同時に行うことができない。すなわち、生放送を録画しながら、その録画中の動画の先頭部分を再生するといった、複合動作は不可能である。したがって、VTRは見たいテレビ番組の放送時間に留守にするためそのテレビ放送を録画する、又は見たい番組が2つ同じ時間帯に放送されるので裏番組を録画するといった用途に利用される。また、一台のVTRで同時に録画できる番組は一つに限定されるため、同じ時間帯に録画したい番組が2つある場合、利用者はどちらかを選択しなければならないという問題があった。
さらに本装置をテレビとして見た場合、従来のテレビは現在放送されている番組でもう一度見たい場面や、見逃した場面をリプレイして見ることができないという問題点があった。
【0010】
この発明は上記のような問題点を解決するためになされたもので、多重化されて送信される符号化された複数のHDTV(High Definition TV)映像などの広帯域な動画を含むマルチメディアデータを同時に別々の動画として蓄積したり(同一時間帯に放送される異なるチャンネルの番組の同時録画)、蓄積途中の動画を蓄積しつつ同時に再生する(番組開始時間より遅れ、かつ、その番組が放送中であっても番組冒頭から視聴することが可能)ことを可能とし、さらに不揮発性記憶装置を効率的に使用する方法を解決し、動画データのバイト位置と再生時刻を相互に対応づける方法を解決して時刻により再生位置を指定可能とすることなどにより、利用者の利便性をより一層向上することを目的とする。
【0011】
【課題を解決するための手段】
この発明は、パケット単位に多重化されたマルチメディアデータを入力する入力手段と、この入力したマルチメディアデータより所定のパケットを選択し出力する制御手段と、この出力されたパケットを蓄積する蓄積手段とを備えたものである。ここで、請求項において「出力」とは、選択したパケットを制御手段から蓄積手段に送信することをいい、「送出」とは、制御手段が蓄積手段から取り出したデータを外部に送り出すことをいう。
【0012】
また、この発明は、上記マルチメディアデータより所定のパケットを抽出し、音声又は映像データが格納されたパケットを選択するとともに、テキスト又は静止画が格納されたパケットよりテキスト又は静止画の実データのみを抽出する制御手段を備えたものである。
【0013】
また、この発明は、関連するパケットの組み毎に、多重化されているパケットの格納状態を示す制御情報をコピーし、各関連するパケットの組み毎に上記パケットを寄せ集める制御手段と、上記関連するパケットの組み毎に、上記寄せ集められたパケットを蓄積する蓄積手段を備えたものである。
【0014】
また、この発明は、パケット単位に多重化されたマルチメディアデータから所定のパケットを選択し、選択されなかったパケットを削除し、この削除パケットの削除情報を選択したパケットに付加して出力する制御手段を備えたものである。
【0015】
また、この発明は、上記蓄積手段に蓄積されたパケットより、映像データや音声データなど時間軸を持ったパケットを入力し、削除されたパケット位置にNULLパケットを挿入して送出する制御手段を備えたものである。
【0016】
また、この発明は、上記蓄積手段に蓄積されたパケットより所定のパケットを選択して送出する制御手段を備えたものである。
【0017】
また、この発明は、上記所定のパケットを選択し出力するとともに、上記蓄積手段に蓄積中にすでに蓄積されたパケットを入力し送出する制御手段を備えたものである。
【0018】
また、この発明は、上記選択されたパケットに、このパケットの蓄積時刻を付加して出力する制御手段を備えたものである。
【0019】
また、この発明は、上記蓄積手段に蓄積されたパケットの蓄積時刻と、利用者により指定された再生開始時刻とに基づき再生開始位置を求め、この再生開始位置からのパケットを上記蓄積手段より入力して送出する制御手段を備えたものである。
【0020】
また、この発明は、関連するパケットの組み毎に蓄積データの総蓄積時間を出力し上記蓄積手段に蓄積させるとともに、利用者により指定された再生開始時刻と上記総蓄積時間とから再生開始位置を求め、この再生開始位置からのパケットを上記蓄積手段より入力して送出する制御手段を備えたものである。
【0021】
また、この発明は、上記選択したパケットの蓄積時刻と蓄積位置とを含む関連情報を所定間隔で出力し上記蓄積手段に蓄積させるとともに、利用者により指定された再生開始時刻と上記関連情報とから再生開始位置を求め、この再生開始位置からのパケットを送出する制御手段を備えたものである。
【0022】
また、この発明は、上記蓄積手段に蓄積されたパケットの蓄積時間と蓄積バイトサイズとを所定間隔で出力し上記蓄積手段に蓄積させるとともに、上記蓄積手段に蓄積中にすでに蓄積されたパケットを入力し、利用者により指定された再生開始時刻と上記蓄積時間と上記蓄積バイトサイズとに基づき再生開始位置を求め、この再生開始位置からのパケットを上記蓄積手段より入力して送出する制御手段を備えたものである。
【0023】
また、この発明は、上記蓄積手段への上記パケット蓄積中にすでに蓄積されたパケットより、利用者による所定の操作が行われた時点のパケットの位置を求め、この利用者による所定の操作が行われた時点のパケットの位置からパケットを上記蓄積手段より入力して送出する制御手段を備えたものである。
【0024】
また、この発明は、所定チャンネルのパケットを上記蓄積手段に蓄積中に利用者によるチャンネル切替え操作が行われたとき、切り替えたチャンネルのパケットを上記蓄積手段に出力する制御手段を備えたものである。
【0025】
また、この発明は、上記蓄積手段に蓄積されたパケットのアクセス頻度又は作成日時に基づき所定時間間隔で上記蓄積パケットの要否を判断し、不要なパケットを削除する制御手段を備えたものである。
【0026】
また、この発明は、上記蓄積手段に蓄積されたパケットの送出中にこの送出が停止されその後送出再開した際に、停止位置から所定時間までさかのぼった位置のパケットより送出を再開する制御手段を備えたものである。
【0027】
また、この発明は、蓄積されたパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を含む番組情報を蓄積する蓄積手段と、上記番組情報を入力し所定のパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を取り出す制御手段を備えたものである。
【0028】
また、この発明は、番組ジャンルなどの抽象的な番組指定により所定の番組を特定し、所定の時間になると所定の番組の内容に相当するパケットの組の蓄積を自動的に開始する制御手段を備えたものである。
【0029】
また、この発明は、デジタル放送に含まれる電子番組表を監視し、番組編成が変更された場合に既に録画予約されている番組の情報を変更することによって上記録画予約されている番組を録画可能とする制御手段を備えたものである。
【0030】
また、この発明は、あらかじめ設定された所定の定期的に放送される番組を、毎回必ず録画するための制御手段を備えたものである。
【0031】
また、この発明は、所定の番組の新しい内容に相当するパケットの組みを蓄積する際には、上記所定の番組の古い内容に相当するパケットの組みを廃棄することで蓄積メディアの肥大や蓄積不能を防止するための制御手段を備えたものである。
【0032】
また、この発明は、ハードディスク、DVD(Digital Versatile Disc)やテープなどの記録媒体の中から、使用者からの指示や、蓄積対象のパケットの属性情報により、パケットを蓄積する記録媒体を決定するための制御手段を備えたものである。
【0033】
また、この発明は、さらに、ネットワーク接続された記録媒体をも選択対象とし、使用者からの指示や、蓄積対象のパケットの属性情報により、内蔵した装置とネットワーク上の装置の中からパケットを蓄積するメディアを決定するための制御手段を備えたものである。
【0034】
また、この発明は、さらに、いくつかの関連するパケットの組みを定期的に蓄積する際に、視聴していない番組の内容に相当するパケットの組みのうち、最も古いパケットの組みを高機能な記録媒体に蓄積し、それ以外のパケットの組みは高機能な記録媒体より安価な記録媒体に蓄積するための制御手段を備えたものである。
【0035】
また、この発明は、さらに、視聴していない番組の内容に相当するパケットの組みのうち、最も古いパケットの組みが高機能な記録媒体に存在し、それ以外のパケットの組みは高機能な記録媒体より安価な記録媒体に存在する状態において、視聴していない番組の内容に相当するパケットの組みのうち最も古いパケットの組みを再生して視聴を開始した時に、次に視聴すべきパケットの組みを高機能な記録媒体にコピーするための制御手段を備えたものである。
【0036】
また、この発明は、蓄積されたパケットを所定間隔で所定量を繰り返し送出することにより、再生と飛び越しを繰り返し実行するための制御手段を備えたものである。
【0037】
この発明は、さらに、蓄積された番組情報から番組タイトル、出演者、番組ジャンル、放送日時などの検索キーワードに合致するものだけを送出するために番組情報の検索機能を持つ制御手段を備えたものである。
【0038】
また、この発明は、蓄積されたパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を含む番組情報を蓄積する蓄積手段と、上記番組情報を入力し所定のパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を所定のグラフィック情報として取り出す制御手段を備えたものである。
【0039】
また、この発明は、さらに、蓄積された番組情報から番組タイトル、出演者、番組ジャンル、放送日時などの検索キーワードに合致するものだけを送出するために番組情報の検索機能を持ち、検索結果を所定のグラフィック情報として取り出す制御手段を備えたものである。
【0040】
【発明の実施の形態】
実施の形態1.
この実施の形態の入力ボード(入力ボードは入力手段の一例である。)は以下の機能を有する。
(1)パケット単位に多重化されたマルチメディアデータを入力する。
また、ストリーム制御プログラムは以下の機能を有する。ここで、ストリーム制御プログラムは制御手段の一例である。
(1)入力したマルチメディアデータより所定のパケットを選択し出力する。
(2)マルチメディアデータより所定のパケットを抽出し、音声又は映像データが格納されたパケットを選択するとともに、テキスト又は静止画が格納されたパケットよりテキスト又は静止画の実データのみを抽出する。
(3)パケット単位に多重化されたマルチメディアデータから所定のパケットを選択し、選択されなかったパケットを削除し、この削除情報を付加して出力する。
(4)記憶装置に蓄積されたパケットより、映像データや音声データなど時間軸を持ったパケットを入力し、削除されたパケット位置にNULLパケットを挿入して送出する。
また、記憶装置は以下の機能を有する。ここで、記憶装置は蓄積手段の一例である。
(1)出力されたパケットを蓄積する。
以下図面に基づいて説明を行う。
【0041】
図1は、この発明のマルチメディア蓄積装置の構成図である。
図において、太い線はハードウエアを、破線はソフトウエアを示し、1はコンピュータ、2はこのコンピュータのマルチメディア蓄積装置としての機能を制御するためのソフトウエアで、アプリケーション又はRS232CやLANなど外部I/Fからのコマンド受信やそのコマンドによる動画データの送受信制御を行うストリーム制御プログラムである。3は復号装置、4は符号化装置又は多重化装置など動画データを出力する動画データ出力装置であり、これらはコンピュータに内蔵されていても外付けでも良い。
【0042】
5,6は符号化された動画データを転送レートに従って復号装置へ送り出す又はコンピュータに取りいれるためのそれぞれ出力ボード、入力ボードであり、図では入出力を別々のボードとしているが、同一のボードで入出力を兼ねても良い。7はストリーム制御プログラム2に対してコマンドを送付するためのアプリケーションである。ストリーム制御プログラム2のコマンド受信I/Fはこのようにマルチメディア蓄積装置上に設けても良いし、他のI/Fを設けても良いし、両者を併設しても良い。8は、RS232CあるいはLANのような外部との通信を行うための外部通信ボードである。この外部通信ボードが十分な転送能力を有していれば、5,6に示した入力ボード、出力ボードと共用することも可能である。このようなボードには例えばIEEE1394ボードが挙げられる。このようにストリーム制御プログラム2にコマンドを送信する部分を外部のコンピュータあるいはコマンド送信専用のハードウエアなどとして、外部よりマルチメディア蓄積装置を制御することも可能である。
【0043】
9は、受信された動画を蓄積するための蓄積手段であり、HDD(Hard Disc Drive)に代表される不揮発性の記憶装置である。記憶装置9は、HDDでも良いし、広帯域の動画の入出力が可能な速度をもつものであればCD−ROMやDVD、MO(Magneto−Optical Disc)なども考えられる。特に書き込みをできる必要も無く、取り外し可能な記録媒体をここに設置し、再生専用の記憶装置として用いることも可能である。接続数量、種類も特に限定しない。さらに、本発明によるマルチメディア蓄積装置は、コンピュータとしてモニタと別に存在しても良いし、全体をモニタの中に内蔵しても良い。
【0044】
図2は、映像Aと音声Aで構成された第1の動画と映像Bと音声Bで構成された第2の動画の2つの動画が多重化された動画データから、第1の動画だけを蓄積し、再生する際のパケット構成を示した図である(図中映A、Bは映像A、Bを、音A、Bは音声A、Bを表す。以下、図4、5とも同様である。)。これは、例えば1チャンネルと3チャンネルのテレビ放送が多重化されて送られてきており、その中から1チャンネルの番組だけを収録する動作を表している。ここで、パケットの一単位とは図2に示す各「映A」、「音A」、「PMT」等をいう。
【0045】
次に図3のフローチャートを用いて動作について説明する。
まず、図2の入力データ21に示すような形式で動画データ出力装置4において生成された、パケット単位で多重化された動画データが、動画の入力ボード6を介してストリーム制御プログラム2に入力される(ステップS1)。
【0046】
アプリケーション7又は外部より外部通信ボード8を介して利用者から蓄積開始の指示を行う(ステップS2)。指示を受けるとコマンド送受信I/Fを介してストリーム制御プログラム2に入力される。ストリーム制御プログラム2は入力データを蓄積手段9に蓄積する際に、入力データ21のデータから1パケットを取得し(ステップS3)、必要なパケットかどうか判断して(ステップS4)、必要な動画Aのパケットであればこれまでに削除したパケットの数をパケット内又は各パケットにデータを付加しそこに書き込んだ上でこのパケットを蓄積し、削除したパケットの数を0にリセットする(ステップS6)。
【0047】
不必要な動画Bのデータすなわち、映像Bおよび音声BのパケットとNULLパケットであればこのパケットを蓄積せず、削除したパケットの数に1を加算する(ステップS5)。ステップS3からステップS6の動作は蓄積の終了を示す指示が発行されるまで継続され(ステップS7)、蓄積終了指示が発行されると蓄積完了となる(ステップS8)。ステップS6で削除情報を書き込むパケットは、削除したパケットの前のパケットでも後ろのパケットでも良いが、本実施形態では後ろのパケットに書き込む形式を取っている。図2で示した蓄積データ22の各パケットのうち、○印で囲んだパケットが、0以外の削除情報を持ち、映Aは3つのパケット、PATは2つのパケットを削除した情報を持つ。
【0048】
利用者から動画Aを再生する指示が発行されると(ステップS9)、ストリーム制御プログラム2で蓄積データ22の各パケットを順次読み込み(ステップS10)、各パケットの削除情報に記録されているパケットの数だけNULLパケットを挿入し(ステップ11)、その後に取得したパケットを出力する(ステップ12)。ステップ10からステップ12までの動作を未出力のデータが無くなるまで(ステップ13)繰り返すことによって、出力データ23のような形態で蓄積データを出力することができ、入力データ21と同等のタイミングで第1の動画を再生するために必要なパケット(PAT、PMT、映A、音A)を送信することが可能となる。本実施例ではステップS13において蓄積した全てのデータを出力するように記述しているが、利用者からの停止コマンドによって任意の場所で停止させることも可能である。
【0049】
以上のように本実施の形態によれば、蓄積する際に必要なデータを例えばMPEG2−TSで言えばPID(Packet Identification)により選択するようにしているので、入力データに比べて蓄積するデータをさらに圧縮することができる。また、再生時には削除情報に従ってNULLパケットを挿入しながら順にパケット送信をすれば入力データと同じタイミングで動画を再生することができる。さらに、多重化されるデータは動画のみとは限らず、あらゆるマルチメディアデータが考えられ、その場合には再生同期の問題は無いので、削除情報を書き込まずに必要な部分だけを取り出すよう選択すれば良い。マルチメディアデータには、映像、音声の他にテレビ番組表、静止画、テキスト、データベース等のバイナリデータも考えられる。このため、蓄積したデータを用いることにより、番組表等を作成することができる。
【0050】
実施の形態2.
実施の形態1では、蓄積したい動画を第1の動画に決定した上で不要なデータを削除し、削除情報を蓄積データ中に残すようにしたものであるが、同時に2つの動画を収録したい時に、コンピュータの性能などの制限によって同時に収録プログラムを複数動作できない場合がある。本実施の形態は、同時に2つの動画を収録する場合の動画の蓄積方式について説明する。
【0051】
この実施の形態の制御手段は以下の機能を有する。
(1)マルチメディアデータより所定のパケットを抽出し、音声又は映像データが格納されたパケットを選択するとともに、テキスト又は静止画が格納されたパケットよりテキスト又は静止画の実データのみを抽出する。
(2)記憶装置に蓄積されたパケットより所定のパケットを選択して送出する。 以下図面に基づいて説明を行う。
【0052】
図4は、入力データ31に対して同時に2つの動画を蓄積し、再生する場合のパケット構成を示した図である。蓄積データ32は、第1の動画および第2の動画すなわち映像A、音声A、映像B、音声Bと管理パケットPAT(Programmable Asociation Table)、PMT(Programmable Map Table)を蓄積するように指示したものである。蓄積データ32で、〇印で囲んだ部分は削除情報を持つパケットを示す。ここではNULLパケットのみの削除で圧縮比率が少ないように見えるが、実際には第1の動画、第2の動画以外に他の動画やその他のマルチメディアデータが多重化されている場合もあり、さらに圧縮して蓄積することが可能である。
【0053】
このように蓄積されたデータから、第1の動画あるいは第2の動画のパケットのみを出力データ33あるいは出力データ34の形式で復号装置3に送信する場合には、蓄積時に不要なパケットを削除して蓄積するのと逆に必要なパケットのみを選択して送信する。選択されていないパケットに関しては同期のためのNULLパケットに置き換えて送信すれば良い。
【0054】
以上のように本実施の形態によれば、第1の動画と第2の動画を多重化した状態で蓄積し、再生の際にどちらの動画を再生するか選択することが可能である。また、上記多重化された蓄積データを入力として、第1の動画と第2の動画を別々のデータ列として蓄積後に分割することも可能である。すなわち、コンピュータの能力により同時に動作可能な収録プログラムの数が制限された場合でも、その制限に関係なく複数の番組を収録できる。また、PAT、PMTなどを共通して利用できるため、その分だけ第1の動画、第2の動画を別々に蓄積するよりもディスク容量を少なくすることができる。
【0055】
実施の形態3.
実施の形態1、2では、不要なデータを削除し、削除情報を蓄積データ中に残すようにし、ただひとつの蓄積データを生成するものであるが、本実施の形態では多重化されたデータを同時に分離しながら蓄積する場合について説明する。
【0056】
この実施の形態の制御手段は以下の機能を有する。
(1)関連するパケットの組み毎に、多重化されているパケットの格納状態を示す制御情報をコピーし、各関連するパケットの組み毎にパケットを寄せ集め、記憶装置は関連するパケットの組み毎に、寄せ集められたパケットを蓄積する。ここで、パケットの組みとは、パケットを複数組み合わせたものをいい、例えば、図2に示す入力データ21や蓄積データ22等がある。また、関連するパケットの組みとは互いに組み合わせることにより一つの動画(一つの番組の内容を表す場合も含む。)、映像、音声などを構成するパケットの組みをいう。例えば、図2において映A、音Aがある番組の内容を表し、映B、音Bが別番組の内容を表すとすると入力データ21は関連するパケットの組みではない。一方、蓄積データ22は、関連するパケットの組みということになる。さらに制御情報とは、目的に適合するように対象となっているものに所定の操作を加えるための情報をいう。具体的には、パケット単位に分割された動画データを再生等できるようにするための情報をいう。
以下図面に基づいて説明を行う。
【0057】
図5は、このような場合の、蓄積方式であり、入力データ41に対して同時に3つの蓄積データ42、43、44を蓄積する場合のパケット構成図である。蓄積データ42は、第1の動画すなわち映像Aと音声Aおよび管理パケットPATとPMTを蓄積するように指示したものであり、蓄積データ43は、第2の動画すなわち映像Bと音声Bおよび管理パケットPATとPMTを蓄積するように指示したものであり、蓄積データ44は、第1の動画の音声のみである音声Aと管理パケットPAT、PMTを蓄積するように指示したものである。蓄積データ42、43、44で、○印で囲んだ部分は削除情報を持つパケットを示す。
【0058】
蓄積データ42、43、44で共通するパケットである、PATとPMTは3つに複製してそれぞれの蓄積データとして蓄積する。蓄積データ42、44のみで共通する音声Aのパケットは、2つに複製してそれぞれに蓄積する。このように、それぞれの蓄積データで共通して使用するものは複製することにより、それぞれの蓄積データは独立して再生することが可能となるため、不要となった場合にはその蓄積データを削除しても他の蓄積データに影響はない。
【0059】
これは、実施の形態2で説明した、多重化したままで蓄積する形態を取った場合、例えば第1の動画と第2の動画を多重化して蓄積した場合、第1の動画のみが不要となっても第2の動画が必要ならばこの蓄積データを不要とすることができず、第2の動画が不要となるまで第1の動画の分だけディスク容量が無駄となってしまうことを未然に防止する。
【0060】
以上のように本実施の形態によれば、多重化された第1の動画と第2の動画を同時に分離蓄積することが可能である。それぞれの蓄積データに独立性があるので、それぞれの動画などが不要となれば対応する蓄積データを削除するだけで良く、蓄積データと番組名などを一意に対応させることができ、管理し易くなる。
【0061】
実施の形態4.
実施の形態1、2、3では、ディスク容量を少なくして目的の動画などを蓄積、再生するものである。入力データのパケットをすべて蓄積すれば蓄積データの先頭からの再生時間の指定による再生個所を転送レートから正確に特定することが可能であるが、不要なパケットは削除してしまうため、正確に再生開始時刻を指定したジャンプ再生ができない。
そこで動画など時間軸を持つ蓄積データに関して、蓄積データの先頭からのバイト位置と時刻を対応づける方法に関しての実施の形態を示す。実施の形態1、2、3での蓄積データの生成時に削除情報の他にタイムスタンプを設け、全てのパケットに蓄積時刻をスタンプしておくものとする。
【0062】
この実施の形態の制御手段は以下の機能を有する。
(1)選択されたパケットに、このパケットの蓄積時刻を付加して出力する。
(2)記憶装置に蓄積されたパケットの蓄積時刻と、利用者により指定された再生開始時刻とに基づき再生開始位置を求め、この位置からのパケットを記憶装置より入力して送出する。ここで、蓄積時刻とは、選択したパケットを蓄積する時刻をいう。
以下この実施の形態について説明を行う。
【0063】
まず、蓄積データの最初のパケットのタイムスタンプを確認し、その時刻を記憶する。次に蓄積データのタイムスタンプを順に走査し、走査したタイムスタンプと先頭パケットの時刻の差を計算し、データの先頭からの時刻を知る。これにより、正確に指定された再生開始時刻(蓄積データの先頭からの相対時刻)に対するバイト位置を決定することができる。全てのパケットを確認すると走査時間が長くなることが考えられるが、指定された再生開始時刻と現在の位置により、目的の位置まで非常に長い場合には例えば1000パケット毎に走査を実施し、目的の位置が近づいてきたらさらに詳細、例えば100パケットや10パケットずつの走査を行うなどして、時間短縮を図ることが可能である。
【0064】
実施の形態5.
実施の形態4は、パケット内もしくはパケットに付加したタイムスタンプによって指定された時刻位置を発見するものであるが、本実施の形態ではタイムスタンプのような付加情報無しで、ファイルの属性として総蓄積時間を記録することにより時刻位置を発見する。
【0065】
この実施の形態の制御手段は以下の機能を有する。
(1)所定のパケットを選択し出力するとともに、記憶装置に蓄積中にここまで蓄積されたパケットを入力し送出する。
(2)関連するパケットの組み毎に蓄積データの総蓄積時間を出力し記憶装置に蓄積させるとともに、利用者により指定された再生開始時刻と総蓄積時間とから再生開始位置を求め、この再生開始位置からのパケットを記憶装置より入力して送出する。
(3)選択したパケットの蓄積時刻と蓄積位置とを含む関連情報を所定間隔で出力し記憶装置に蓄積させるとともに、利用者により指定された再生開始時刻と関連情報とから再生開始位置を求め、この再生開始位置からのパケットを送出する。ここで、総蓄積時間とは、蓄積データの蓄積開始時刻と蓄積終了時刻との差時間をいう。また、関連情報とは、パケットの蓄積時刻と蓄積位置に関する情報を含んだ情報をいう。
以下この実施の形態について説明を行う。
【0066】
まず、蓄積の際に蓄積開始時刻を記憶し、次に蓄積終了時に蓄積終了時刻を記憶する。この両者の差分から総蓄積時間を算出し、蓄積データの属性情報の一つとして記憶する。ファイルシステムなどによって蓄積データの総蓄積バイトサイズは既に記憶されている。
同一の蓄積データであり、総蓄積時間に対する指定時刻の比率は、総蓄積バイトサイズに対する指定時刻のバイト位置と同じものであるため、
求めるバイト位置=指定時刻/総蓄積時間*総蓄積バイトサイズ
によって算出することが可能となる。これにより、即座に指定時刻に対するバイト位置を求めることができるので、次に蓄積データの読み出し位置を算出したバイト位置に合わせれば良い。
【0067】
マルチメディア蓄積装置は蓄積と同時に再生することができるが、本実施の形態により時刻位置とバイト位置の関連付けを行うためには、それまでの蓄積バイトサイズが必要になる。しかし、OSの書き込み処理の遅延や、クローズ処理を行うまでファイルサイズが決定できないなどの影響によってそれまでの蓄積実績が正確に把握できない場合がある。そこでストリーム制御プログラム2の内部で蓄積中は蓄積するバッファ単位毎にそれまでの蓄積時間と蓄積バイトサイズを記憶しておき、それまでの蓄積実績を総蓄積時間、総蓄積バイトサイズとして上記計算式にあてはめ、バイト位置を求める。
なお、本実施の形態にて精度が必要な場合には、本実施の形態によってバイト位置を算出した後、実施の形態4と同様にしてパケットのタイムスタンプを走査すればより正確な時刻位置を発見することができる。
【0068】
実施の形態6.
実施の形態5は、ファイルの属性として総蓄積時間を記録することにより時刻位置を計算して発見するものであるが、本実施の形態では任意の単位毎に時刻とバイト位置をインデックスとして属性とする場合について示す。
【0069】
この実施の形態の制御手段は以下の機能を有する。
(1)蓄積されたパケットの蓄積時間と蓄積バイトサイズとを所定間隔で出力し記憶装置に蓄積させるとともに、利用者により指定された再生開始時刻と蓄積時間及び蓄積バイトサイズとから再生開始位置を求め、この再生開始位置からのパケットを送出する。
以下この実施の形態について説明を行う。
【0070】
まず、蓄積の際には任意の単位時間毎に蓄積開始時刻から測定時刻までの蓄積時間と蓄積バイトサイズを関連付けて蓄積データのインデックス情報として持つ。こうしておけば、蓄積データの先頭からの相対時刻を指定された時に容易に最も近い場所を発見することが可能となる。本実施の形態においても、さらに精度が必要な場合には、タイムスタンプを全てのパケットに記憶させ、インデックス情報によって最も近い時刻のバイト位置を発見した後、パケットのタイムスタンプを走査して正確な位置を得る。ここで、蓄積時間とはあるパケットの蓄積時刻と別のパケットの蓄積時刻との差時間をいう。また、蓄積バイトサイズとは、蓄積時間の間に蓄えられた蓄積データのデータ量をいう。
【0071】
なお、この単位時間は、人間がわかりやすいように秒単位でも良いが、動画データの圧縮方式に準じたものとしても良い。例えばMPEGにはGOP(Group of Picture)と呼ばれる動画の再生・編集単位があり、GOPの先頭はパケット内部のフラグで判別可能である。蓄積時にこのフラグを走査しておけば再生時にはインデックス情報によって得たバイト位置から再生を開始することにより復号装置の再生遅延などの影響を少なくすることができ、編集にも応用可能であり、編集が容易にできる利点がある。
【0072】
実施の形態7.
上記実施の形態による蓄積方法、時刻指定による再生開始位置発見方法を利用し、生放送動画のリプレイや停止、再開といった動作を行う実施の形態を示す。
【0073】
この実施の形態の制御手段は以下の機能を有する。
(1)記憶装置へのパケット蓄積中にすでに蓄積されたパケットより、利用者による所定の操作が行われた時点のパケットの位置を求め、この位置からのパケットを記憶装置より入力して送出する。
(2)所定チャンネルのパケットを記憶装置に蓄積中に利用者によるチャンネル切替え操作が行われたとき、切り替えたチャンネルのパケットを記憶装置に出力する。
(3)記憶装置に蓄積されたパケットのアクセス頻度又は作成日時に基づき所定時間間隔で蓄積パケットの要否を判断し、不要なパケットを削除する。
(4)蓄積されたパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を含む番組情報を蓄積し、ストリーム制御プログラムは番組情報を入力し所定のパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を取り出す。
以下この実施の形態について説明を行う。
【0074】
利用者が生放送(現在の放送)の番組を選択すると、モニタには現在放送されている番組が表示される。この利用者の番組選択をトリガとして、マルチメディア蓄積装置は自動的に該当番組の蓄積を開始する。例えば利用者がリモコンなどにより現在視聴中の番組を停止すると、マルチメディア蓄積装置は現在蓄積中の番組に対する再生を、現在の総蓄積時間を再生開始時刻として指定して実行し、直後に停止命令を実行する。これにより、現在視聴中の番組は現在収録中の蓄積データの再生に置き換えられ、かつ、画面は停止する。この間も、蓄積は継続しており、現在放送中の番組は記憶装置に蓄積している。
【0075】
利用者が再生を再開すると、マルチメディア蓄積装置は再生を実行し、停止後の動画を続けて視聴することができる。実際には、現在の放送とは時間差ができているが、利用者にとっては現在の放送を視聴している感覚を継続できる。例えば現在放送中のドラマを視聴中に電話やトイレなどで中座しなければならない場面は一般的に多数存在するが、本実施の形態ではそういった場合に利用者から見ると現在の放送を停止できる効果があり、見たかった番組は最後まで見ることが可能となる。
【0076】
このように、利用者の操作は意識して現在の放送と再生の画面を切り替えるものではなく、マルチメディア蓄積装置の内部で自動的に行うものである。したがって、自動収録を行うため、有限のディスク容量は徐々に圧迫されていく。そこで、マルチメディア蓄積装置が自動的に収録した蓄積データに関してはディスク容量を圧迫する恐れが生じた時に自動的に削除していく必要がある。削除する優先度に関しては、a)アクセス頻度(最後にいつ視聴したか)や、b)作成日時、c)利用者によるロック指定などにより決定する。このように、自動的に蓄積し利用された後、自動的に削除することにより、利用者はディスク容量をほとんど意識することなく擬似的に生放送の操作を行うことを可能とし、コンピュータの知識が無くとも容易に利用できるマルチメディア蓄積装置を実現する。
【0077】
デジタル放送はEventIDと呼ばれるIDにより番組内容や放送時間を管理する方式が一般的である。したがって、現在視聴中の番組のEventID、放送局のチャンネル番号と蓄積を開始した蓄積データの名前として管理し、現在収録済みのEventID、チャンネル番号に対応した番組名や、放送時間などのテーブルをハードディスクなどの不揮発性の記憶装置に常に保持し、いつでもマルチメディア蓄積装置に蓄積されている蓄積データを利用者にわかりやすいチャンネル番号、番組名、放送日時、蓄積時間などの番組情報として取り出せるようにしておく。
これにより、利用者から見れば、番組名や放送時間などのインデックスとしてみることができ、蓄積データを再生するための選択や不要な蓄積データの削除などを容易に実施することが可能となる。
【0078】
ここで、蓄積データが数多くなってくると、これらの中から所望の番組を探すのは困難である。そこで、番組情報を任意のキーワードで検索できるようにしておく。これにより、番組情報が膨大量になっても、利用者が放送日やチャンネル、番組名といったキーワードを指定して取り出す番組情報を限定することにより、所望の番組情報だけを取り出すことが可能となる。
【0079】
上記番組情報の取り出しに際しては、基本的に個々の蓄積データに関連する番組情報を1つ以上同時に取り出すことを想定している。これらの情報を表示する表示形式は、表示を行う機器に任される。したがって、この方法は極めて一般的なものである。マルチメディア蓄積装置の使用形態としては、受信機等の放送ストリームを受け取る機器との接続が想定され、受信機は一般的に多くのグラフィック機能を持たない。そこで、受信機の負荷を軽減するために、テレビ画面に表示するためのグラフィック情報に変換する機能を蓄積手段または制御手段に設け、番組情報をグラフィック情報として取り出す手段を設ける。これにより受信機は表示する機能だけを持てば良く、取り出した番組情報を変換する必要が無い。
【0080】
実施の形態8.
実施の形態7により、蓄積データの再生、停止、再開といった動作を繰り返す場合、一時的にパケットの流れが停止し、動画データの連続性が失われるため、復号装置によってはエラーが発生し再生画面がエラー復帰までの間凍結する場合がある。これにより、利用者はマルチメディア蓄積装置から復号装置へのデータ送信が再開されてから実際に画面に動画が表示されるまでの時間に相当する動画を視聴できない状況が発生する。この状況を緩和し、少なくとも利用者が蓄積データのすべての動画を視聴できるようにするための実施の形態を示す。
【0081】
この実施の形態の制御手段は以下の機能を有する。
(1)記憶手段に蓄積されたパケットの送出中にこの送出が停止されその後送出再開した際に、停止位置から所定時間までさかのぼった位置のパケットより送出を再開する。
以下本実施の形態について説明を行う。
【0082】
図6は動画データの転送が途切れた場合に、データの転送が再開されてから実際に画面に動画が表示されるまでに数秒を要する復号装置を使用した場合において、従来の方法によりデータ転送を行った場合の従来方式51と、本実施の形態により復号装置のエラーが復帰できる程度のデータを再送する場合である本願方式52を示したものである。
【0083】
従来方式51では、利用者の操作によってデータ転送が停止すると、次にデータ転送を再開する時には停止した直後のデータからデータ転送を再開するものであり、利用者は斜線で示した部分の動画を見ることができない。これを見るためには、利用者自ら復号装置のエラー復帰を考慮した再生開始位置を再設定して再生をしなければならない。
【0084】
一方本願方式52では、利用者の操作によってデータ転送が停止すると、マルチメディア蓄積装置が自動的に再生再開位置を復号装置のエラーを復帰するに充分な位置まで戻しておき、再生再開時には利用者が意識すること無くこれまで見てきた動画の続きとして視聴を再開することが可能となる。この復号装置のエラーが復帰するに充分な位置(時間)は、マルチメディア蓄積装置のハードディスクなどの不揮発性の記憶領域にあらかじめ記憶しておく。
これにより、現在テレビ放送で良く実施されているように、CM直前の動画をCM後に再び流し、利用者から見た番組の感覚的な連続性を保つ効果がある。
【0085】
実施の形態9.
これまでの実施の形態では、利用者の操作によって録画を開始、停止することを前提としてきたが、本実施の形態では自動的に録画をする方式に関して、利用者の利便性を追求した実施の形態を示す。
【0086】
この実施の形態の制御手段は以下の機能を有する。
(1)利用者から指定された番組タイトルなどから、番組を特定してその放送時間やパケットの組みの識別子などを検索する番組詳細情報の検索機能
(2)放送される番組情報を常に解析し、番組編成に変更があった場合それを検知できる機能
(3)マルチメディア蓄積装置に接続されている様々な種類の蓄積メディアを識別および、記録媒体の残り容量などの情報を監視する機能
以下本願方式の実施の形態について説明を行う。
【0087】
従来、例えば家庭用VTR装置では録画予約は録画する時間をあらかじめ指定することにより、VTR装置がその時間になると録画を開始する単純な構造である。現在はGコードと呼ばれる、コードを入力する方法があるが、これもコード番号を元にチャンネルや録画時間を指定するだけのものであり、録画予約完了後の変更は利用者が手操作で行う必要があり、また、放送時間が変更されるとそれに伴って予約時間を変更しなければならないなどの問題があった。
【0088】
一方、本願方式では、番組タイトルや番組ジャンル、出演者といった抽象的、感覚的なキーワードを指定する。マルチメディア蓄積装置はキーワードを元に、電子番組表から1つ以上の番組を検索し、録画予約を行う。この時、マルチメディア蓄積装置により検索された1つ以上予約候補に関しては利用者に表示することも可能であるし、また、対話的に利用者が選択する手段も考えられる。
録画予約の録画制御は録画開始時刻の数秒前に開始され、その後の録画処理は実施形態1,2,3で記述した内容と同じである。
【0089】
実際のテレビ放送では、野球中継の放送時間の延長や緊急特別番組などの挿入により、予約されていた番組の放送時間が変更になる場合がある。マルチメディア蓄積装置では、常に現在の電子番組表を監視して、以前のものと変更があった番組を発見すると、その番組が録画予約されているかどうか検索し、予約されているならば、番組変更の情報を反映する。マルチメディア蓄積装置の予約録画においては、録画制御が開始されるまで、予約された録画の情報はメモリまたは不揮発性の記憶装置に記憶された状態となる。この情報を変更することにより、録画制御の開始時刻が変更となるため、結果として番組を確定的に録画することが可能となる。
【0090】
次に、利用者の指定により自動的に最新の番組を録画し、古い動画を削除する、自動更新とも呼ぶべき機能に関して説明する。この機能は、利用者にとって最新の情報が意味を持つ番組、例えば天気予報やニュースを自動的に更新し、最新のもの以外、あるいは最新のものと過去2回分の放送以外といった指定により過去の動画を自動的に削除するものである。連続ドラマに適用する場合には、「視聴が完了したら削除する」など、削除方法に関しては色々と考えられる。
この自動更新の機能は、「ニュース」「天気」というジャンルから定期的に録画することを自動的に認識し、かつ、設定条件により自動的に削除する機能を組み合わせることにより、本機能が記録媒体の不足に陥ることを防止する。したがって、マルチメディア蓄積装置は常に最新のニュースや天気を確定的に録画することが可能となる。
【0091】
本機能を利用者の利便性の観点から見れば、利用者は放送時間に左右されることなく、利用者の都合の良い時間に視聴することができる効果がある。
【0092】
実施の形態10.
実施の形態1では、基本的な構成として図1について説明したが、ネットワークを用いた構成として図10のような構成も考えられる。
本実施形態では、このように様々な種類の記憶装置を内蔵、あるいはネットワーク上に実装した場合に、蓄積先を決定する方法について一実施例を説明する。
【0093】
図10において、1から8は、図1の同一符号の説明と同等である。10は8の外部通信ボードを他の機器と接続するためネットワークケーブルであり、11はネットワーク上の記憶装置であり、この記憶装置はネットワークによる通信が可能であれば図1の9と同様の種類が考えられる。また12はハードディスクなどの高速ランダムアクセス記憶装置である。
【0094】
この実施の形態の制御手段は実施形態1の制御手段に加えて以下の機能を有する。
(1)マルチメディア蓄積装置に接続されている様々な種類の蓄積メディアを識別および、記録媒体の残り容量、ネットワーク回線の負荷などの情報を監視する機能
以下本願方式の実施の形態について説明を行う。
【0095】
図11は最適蓄積形態の一実施例を示す図である。111は高機能高性能であり、収録と同時に再生したり、再生時の応答速度が速い記憶装置、例えばハードディスク装置を示す。112は再生時の応答速度などは111に比べて劣るが、安価で取り外し可能な記録媒体を持つ記憶装置を示す。113は111と112を接続するケーブルを示し、内蔵の場合はマルチメディア蓄積装置の内部でSCSIケーブルなどで接続され、ネットワーク接続の場合には、図10の10で示したネットワークケーブルで接続されているものである。
【0096】
今、マルチメディア蓄積装置として管理している動画は両者に蓄積した動画すべてであるが、なぜこのような形態で蓄積するのかを説明する。最新のニュース、最新の天気に関しては、実施形態9で説明した通りであり、常に最新のニュースをいつでも視聴可能な状態としている。また、過去のニュースには、最新のニュースでは視聴できない内容も含まれている可能性があるため、図の112に示すように、安価な記録媒体の方に蓄積する。
また、それぞれの動画には視聴済や未試聴などの状態を示す属性情報を自動的に付加している。
【0097】
例えば連続ドラマなど毎週連続して録画しなければ全体のストーリ展開がわからない番組など動画の連続性が重要な番組に関しては、見ていない動画の中で最も古いものだけをハードディスク上に置く。これまで5回の放送を録画した場合、2回目まで視聴したとすると、次に視聴すべき3回目のドラマだけをいつでもすぐに視聴可能なハードディスク上に置き、その他の週に放送された動画は、テープやDVDなど112に示した記憶装置に蓄積する。この時、連続性が重要なドラマなどに関しては、視聴済や未試聴を示す属性情報を自動的に設定する。これにより、再生を実行した際の応答性能やハードディスクの利用効率を高めるだけでなく、必要な番組だけをハードディスク上に録画するため内蔵するハードディスクの容量を少なくでき、装置をより安価にすることができる。
なお、DVD装置はランダムアクセスであるため、ハードディスクと同様の使用方法ができると考えられるが、性能面からHDTVのような高精細映像に関してはハードディスクを使用した方が望ましいなどの条件があり、こういった条件に関してもマルチメディア蓄積装置は個々のデバイスの性能を管理することによって自動的に判別できる。
【0098】
さらに、図10に示すようなネットワークを介して接続されている記憶装置に動画を蓄積させることもある。この場合、ネットワークの負荷が大きい記憶装置に動画を蓄積させると時間がかかる。しかし、実施の形態10に係るマルチメディア装置はネットワークの負荷についての情報を監視する機能を有する。したがって、ネットワークを介して接続されている記憶装置に動画を蓄積させる場合、ネットワーク回線の負荷を考慮し、負荷の小さな回線に接続されている記憶装置を選んで動画を蓄積することができる。
【0099】
続いて、上記録画時の実施例で蓄積した図11の状態において、ドラマ3を再生する場合の実施例を図12について説明する。図12は、図11の状態でドラマ3の視聴を開始した後の状態を示すものであり、121は111と、122は112と、123は113とそれぞれ同一である。
連続して毎週録画されているドラマ番組で、5回目まで既に録画されており、現在の状態が図11の状態であるとする。今、3回目の視聴を開始すると、次に視聴すべき動画はドラマ4であるため、マルチメディア蓄積は自動的に4回目のドラマをテープ装置からハードディスク装置に読み込みを開始し、次のドラマの視聴に備える。3回目のドラマは、視聴が終了すると属性情報を視聴済に変更した上でハードディスク上から削除する。利用者の希望によって長期保存する必要がある場合でテープやDVDに存在しない場合はテープやDVDなどの安価なデバイスにコピーした上でハードディスク上の動画を削除する。
【0100】
本実施形態によれば、ハードディスクなど比較的高価な記憶装置の容量を減らすことが可能である。本実施形態で説明した図11の蓄積事例でも、ドラマ1回につき1時間の放送があるとすると、すべてをハードディスク上に蓄積すれば5時間分の容量が必要となるが、本願実施形態によればハードディスク装置は1時間分だけで良い。このように、ハードディスクなどの高性能な記憶装置を使用するがゆえに実現可能な高機能(同一動画に対する複数再生、瞬時アクセス、瞬時再生位置移動、瞬時頭出しなど)をこれから視聴すると予想される動画のみに割り当てることにより、マルチメディア蓄積装置全体の蓄積容量に対するコストを安価にすることが可能であり、また、他の装置に持ち運ぶことも可能となる。
【0101】
実施の形態11.
従来のVTRでは、録画した内容を確認する際には、早送り再生や巻き戻し再生などで録画した内容をすべて見るか、早送り、巻き戻しと再生を繰り返し操作することによって飛び飛びに再生しなから確認するのが一般的である。
本実施形態では、録画した動画の内容を確認する際に再生と飛び越しを繰り返す方法について一実施例を説明する。
【0102】
図13について説明する。この図は、1つの蓄積されたパケットの組み、すなわち1つの録画された動画を示す。この中で、131で示された空白の部分を飛び越し、斜線で示した132の3つの部分だけを連続的に再生する。
従来のVTRでは、見ない部分を飛び越すためにはテープを早送りしなければならず、その分だけ時間がかかっていた。また、操作が多くなればその分だけスイッチボタンを押下する回数が増え、その回数は動画全体の長さが長くなるほど多くなるという特徴を持つ。マルチメディア蓄積装置は、ハードディスクなどの高機能な記憶装置を主たる記憶装置としている。この特徴を利用し、1つの操作によりあらかじめ設定した時間あるいは、番組の特徴部分を示す番組インデックスなどを利用して、再生と飛び越しを繰り返すものである。
これにより、番組の内容を確認するための時間が飛躍的に向上し、また、ボタン操作などの手間も不要となるため、利用者の利便性が向上する。
【0103】
【発明の効果】
この発明は、以上説明したように構成されているので、以下に示すような効果を奏する。
【0104】
この発明では、入力されたパケット単位に多重化されたマルチメディアデータより所定のパケットを選択し出力し、この出力されたパケットを蓄積することにより、入力データに比べて蓄積するデータをさらに圧縮することができる。
【0105】
また、この発明では、マルチメディアデータより所定のパケットを抽出し、音声又は映像データが格納されたパケットを選択するとともに、テキスト又は静止画が格納されたパケットよりテキスト又は静止画の実データのみを抽出することにより、必要なデータを取り出すことができる。
【0106】
また、この発明では、関連するパケットの組み毎に、多重化されているパケットの格納状態を示す制御情報をコピーし、各関連するパケットの組み毎に上記パケットを寄せ集め、上記関連するパケットの組み毎に、上記寄せ集められたパケットを蓄積することにより、複数の関連するデータを同時に分離蓄積することができる。
【0107】
また、この発明では、パケット単位に多重化されたマルチメディアデータから所定のパケットを選択し、選択されなかったパケットを削除し、この削除パケットの削除情報を付加して出力することにより、入力データに比べて蓄積するデータをさらに圧縮することができる。
【0108】
また、この発明では、蓄積手段に蓄積されたパケットより、映像データや音声データなど時間軸を持ったパケットを入力し、削除されたパケット位置にNULLパケットを挿入して送出することにより、入力と同様の送出タイミングで出力することができる。
【0109】
また、この発明では、蓄積手段に蓄積されたパケットより所定のパケットを選択して送出することにより、蓄積データから任意に指定したパケットのみを選択して送信することができる。
【0110】
また、この発明では、所定のパケットを選択し出力するとともに、蓄積手段に蓄積中にすでに蓄積されたパケットを入力し送出することにより、これまでのVTR装置のように収録の終了を待たずに現在までの蓄積データを再生することができる。
【0111】
また、この発明では、選択されたパケットに、このパケットの蓄積時刻を付加し
て出力することにより、任意のパケットの蓄積時刻を認識することができる。
【0112】
また、この発明では、蓄積手段に蓄積されたパケットの蓄積時刻と、利用者により指定された再生開始時刻とに基づき再生開始位置を求め、この位置からのパケットを上記蓄積手段より入力して送出することにより、再生開始位置を指定することができる。
【0113】
また、この発明では、関連するパケットの組み毎に蓄積データの総蓄積時間を出力し蓄積手段に蓄積させるとともに、利用者により指定された再生開始時刻と上記総蓄積時間とから再生開始位置を求め、この再生開始位置からのパケットを上記蓄積手段より入力して送出することにより、ランダムにかつ高速に再生開始位置を指定することができる。
【0114】
また、この発明では、所定間隔でパケットの収録時刻と蓄積位置とを含む関連情報を出力し蓄積手段に蓄積させるとともに、利用者により指定された再生開始時刻と上記関連情報とから再生開始位置を求め、この再生開始位置からのパケットを送出することから、ランダムにかつ高速に再生開始位置をファイルの先頭からの相対時刻により指定することを可能とした。
【0115】
また、この発明では、蓄積手段に蓄積されたパケットの蓄積時間と蓄積バイトサイズとを所定間隔で出力し上記蓄積手段に蓄積させるとともに、上記蓄積手段に蓄積中にすでに蓄積されたパケットを入力し、利用者により指定された再生開始時刻と上記蓄積時間と上記蓄積バイトサイズとに基づき再生開始位置を求めることから、蓄積途中であっても再生開始位置を指定することができる。
【0116】
また、この発明では、蓄積手段へのパケット蓄積中にすでに蓄積されたパケットより、利用者による所定の操作が行われた時点のパケットの位置を求め、この位置からのパケットを上記蓄積手段より入力して送出することにより、モニタ上に出力されている映像を再生映像と瞬時に置き換え、生放送を停止、再開、リプレイといった擬似的な生放送に対する操作ができる。
【0117】
また、この発明では、所定チャンネルのパケットを蓄積手段に蓄積中に利用者によるチャンネル切替え操作が行われたとき、切り替えたチャンネルのパケットを上記蓄積手段に出力することにより、モニタ上に出力されている映像を再生映像と瞬時に置き換え、生放送を停止、再開、リプレイといった擬似的な生放送に対する操作ができる。
【0118】
また、この発明では、蓄積手段に蓄積されたパケットのアクセス頻度又は作成日時に基づき所定時間間隔で蓄積パケットの要否を判断し、不要なパケットを削除することにより、ディスク容量不足による蓄積不能を自動的に解消する。
【0119】
また、この発明では、蓄積手段に蓄積されたパケットの送出中に、この送出が停止されその後送出再開した際に、停止位置から所定時間までさかのぼった位置のパケットより送出を再開することにより、モニタ上で蓄積した全ての映像を漏れなく視聴することができる。
【0120】
また、この発明では、蓄積されたパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を含む番組情報を蓄積し、これらの番組情報を取り出すことにより、これらの番組情報を利用者が理解できる表示方法で管理できる。
【0121】
また、この発明は、従来は新聞や雑誌によって番組の存在を知り、録画予約を実施していた操作を、連続ドラマ、出演者の名前といった抽象的な指定によってあらかじめ番組の存在さえ知ることなく好みの自動的に録画予約を行うことができる。
【0122】
また、この発明は、録画予約された番組の放送時間が変更になった時、その番組変更に追従して録画予約の内容も変更することによって、一度録画予約した番組は必ず録画されることを保証するものである。
【0123】
また、この発明は、例えばニュースや天気予報などの主として最新の情報に価値がある番組について、自動的に最新の番組を録画することによって、視聴者の都合に合わせていつでも最新のニュースや天気予報を視聴することを可能とするものである。
【0124】
また、この発明は、さらに、自動的に録画された動画により、記録装置が満杯になるのを防ぐことができる。例えば、自動更新は必ず最新の1世代分だけを記録装置に残す、あるいは過去3回分を記録装置に残すといった具合である。通常の録画や録画予約により蓄積された映像においても、利用者の指定により削除可能、削除不可を指定できるようにすることで、利用者が明示的に削除機能を使って削除しなくても本発明の自動削除機能によって定期的に一括削除できるようになる。
【0125】
また、この発明は、動画の種類や利用者の好み、蓄積した動画の連続性などによってすぐに再生できる必要があるかどうか判断し、マルチメディア蓄積装置に内蔵された装置のうち、どの記録媒体を使用するか決定することにより、動画が占める単位容量に対する記録媒体の価格を安価にするものである。
【0126】
また、この発明は、動画の種類や利用者の好み、蓄積した動画の連続性などによってすぐに再生できる必要があるかどうか判断し、マルチメディア蓄積装置に内蔵された装置とネットワークに接続された記憶装置のうち、どの記録媒体を使用するか決定することにより、動画が占める単位容量に対する記録媒体の価格を安価にするとともに、マルチメディア蓄積装置に内蔵する記憶装置を最小に抑えることによって装置の価格を安価にすることができ、ネットワーク上に記憶装置を接続することにより、マルチメディア蓄積装置で使用可能な記憶装置を簡単に増加させることが可能になる。
【0127】
また、この発明は、連続するドラマをすべて録画する場合には、即時に再生可能な記録媒体にこれから視聴すべき週のドラマを録画しておき、その他の週の動画に関しては、他の記録媒体に録画しておくことにより、限られた高機能な記録媒体を効率的に使用する。
【0128】
また、この発明は、即時に再生可能な記録媒体に録画されているこれから視聴すべき週のドラマを再生した場合、再生と併行して他の記録媒体に録画してある次に視聴すべき動画を即時に再生可能な記録媒体にコピーする。これにより、利用者から見れば、連続したドラマを順番に再生していく際に、連続ドラマがすべて即時再生可能な記録媒体に録画されているのと同等の機能をより安価に提供することができる。
【0129】
また、この発明は、さらに、マルチメディア蓄積装置の判断により録画予約をした場合や利用者が試しに録画した番組など、利用者がその内容を飛び飛びに見ていくことによって、より早く番組の内容を把握し、視聴するか否か決定できる効果があり、従来に比べて視聴者の利便性が飛躍的に向上する。
【0130】
また、この発明では、利用者が、番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時などのキーワードを指定し、その検索結果のみを表示する。これにより、表示される内容がマルチメディア蓄積装置全体でなく、一部になることから、特に収録された動画の数が多くなった場合、利用者は目的の収録済みの番組をより早く発見できる。
【0131】
また、この発明では、蓄積されたパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を含む番組情報を蓄積し、これらの番組情報をグラフィック情報を取り出すことを可能とする。これにより、受信機では番組情報を解析する必要が無く、受信機のコストを安価にすることができる。
【0132】
また、この発明では、利用者が、番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時などのキーワードを指定し、その検索結果のみをグラフィック情報として取り出すことを可能とする。番組情報の解析機能を持たない安価な受信機でも、マルチメディア蓄積装置の検索機能を利用することが可能となる。
【図面の簡単な説明】
【図1】 実施の形態1のマルチメディア蓄積装置の構成図。
【図2】 実施の形態1において動画を蓄積、再生する際のパケット構成図。
【図3】 実施の形態1においてマルチメディア蓄積装置の動作を説明するフローチャート。
【図4】 実施の形態2において動画を蓄積、再生する際のパケット構成図。
【図5】 実施の形態3において動画を蓄積、再生する際のパケット構成図。
【図6】 実施の形態8において送信停止した動画データの再送信動作の説明図。
【図7】 従来例のPCでの動画蓄積装置。
【図8】 従来例のVTRでの動画蓄積装置。
【図9】 従来例の家庭用テレビ。
【図10】 実施の形態10におけるマルチメディア蓄積装置の構成図。
【図11】 実施の形態10における蓄積形態の一実施例。
【図12】 実施の形態10における再生時の動作の一実施例。
【図13】 実施の形態11における飛び越し再生の概念図。
【符号の説明】
1 コンピュータ、2 ストリーム制御プログラム、3 復号装置、4 動画データ出力装置、5 出力ボード、6 入力ボード、7 アプリケーション、8 外部通信ボード、9 記憶装置、10 ネットワークケーブル、11 ネットワーク上の記憶装置、12 高速ランダムアクセス記憶装置。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a multimedia storage device, and a method for recording / reproducing digital moving images such as digital broadcasting, a control method by time designation, a method for artificially stopping / resuming live broadcasting, a program name, and the like It relates to data association. Hereinafter, “moving image” represents a mixed image of video and audio, and “video” and “sound” represent visual video and audio as hearing, respectively.
[0002]
[Prior art]
FIG. 7 shows a moving picture storage / playback method using a conventional PC (Personal Computer), for example, 61 indicates a PC main body, 62 drives a driver for a decoding board and a driver for a coding board, and is stored in a file. Is an application program for transferring the data to the decoding board or file the data output from the encoding board, 65 is a decoding board, 63 is a monitor for outputting video, 66 is an encoding board, Reference numeral 64 denotes an input means for inputting a moving image analog signal such as a VTR (Video Tape Recorder) device to the encoding board, and 67 denotes a video storage means such as a hard disk.
[0003]
FIG. 8 shows a method for recording / playback on a home VTR. 71 indicates a VTR main body, 72 is a control module for performing playback, stop, and recording on a tape by a switch for performing playback, stop, etc. Yes, 73 is a video output means, which indicates a terminal connected to a television or the like, 74 is an input means and corresponds to an external signal input or tuner, 75 is a television for displaying a video, 76 is a video A video tape is a typical example of a recording medium that is a storage means for recording signals.
[0004]
FIG. 9 shows a method of viewing a television broadcast on a home television, 81 shows a television main body, 82 is a control module for changing a channel selected by a tuner by a switch for changing the channel, etc. 83 Is a display means such as a cathode ray tube for displaying a moving image, and 84 is a moving image input means, which corresponds to an external signal input terminal or a tuner.
[0005]
Next, the operation will be described.
In the moving image storage on the PC 61, a video signal is input to the
[0006]
In the video storage in the VTR, the video input by the
The TV receives a TV broadcast by a tuner or displays a moving image obtained by the input means 84 by the input from the VTR on the switching display means 83 by the
[0007]
[Problems to be solved by the invention]
Conventionally, moving images that have been recorded on a computer are mainly a single moving image that consists of video and audio, and since the encoded data is recorded as it is, it is not necessary to reproduce the desired video and audio. Data such as NULL packets inserted for decoding synchronization and other information packets that are not directly required for decoding are recorded at the same time, so finite storage means are wasted for unnecessary data. Therefore, it is necessary to eliminate this waste and to efficiently use storage means such as a nonvolatile memory device.
[0008]
In addition, video handled by a computer generally has a low transfer rate that can be displayed on a computer, and when handling a multiplexed video, it is generally not separated and set according to the setting in the decoding device. There is a problem in that it is necessary to determine which multimedia data is to be decoded, and it is impossible to separate multiplexed moving images in real time.
[0009]
When this apparatus is viewed as a VTR, a conventional VTR is generally configured to selectively execute recording or playback, and cannot perform both at the same time. That is, it is impossible to perform a combined operation such as playing a live broadcast while playing back the beginning of the moving image being recorded. Therefore, the VTR is used for such purposes as recording the television broadcast in order to be absent during the broadcast time of the television program to be viewed, or recording the back program because two programs to be viewed are broadcast in the same time zone. Also, since there is only one program that can be recorded simultaneously by one VTR, there is a problem that when there are two programs to be recorded in the same time period, the user must select one of them.
Further, when this apparatus is viewed as a television, there is a problem that the conventional television cannot replay a scene that the user wants to see again or misses in a currently broadcast program.
[0010]
The present invention has been made to solve the above-described problems. Multimedia data including a wideband moving image such as a plurality of encoded HDTV (High Definition TV) images transmitted in a multiplexed manner is provided. Simultaneously accumulate as separate videos (simultaneous recording of programs of different channels broadcasted in the same time zone), or simultaneously play back videos while accumulating them (lagging behind the program start time and broadcasting the program) Can be viewed from the beginning of the program), and a method for efficiently using the non-volatile storage device is solved, and a method for correlating the byte position of the video data with the playback time is solved. Thus, it is an object of the present invention to further improve the convenience for the user by making it possible to specify the playback position according to the time.
[0011]
[Means for Solving the Problems]
This invention An input unit for inputting multimedia data multiplexed in packet units, a control unit for selecting and outputting a predetermined packet from the input multimedia data, and an accumulating unit for storing the output packet. It is a thing. Here, in the claims, “output” means that the selected packet is transmitted from the control means to the storage means, and “send” means that the control means sends out the data extracted from the storage means to the outside. .
[0012]
In addition, this invention Is a control that extracts a predetermined packet from the multimedia data, selects a packet in which audio or video data is stored, and extracts only text or still image actual data from a packet in which text or still image is stored. Means are provided.
[0013]
In addition, this invention The control means for copying the control information indicating the storage state of the multiplexed packet for each set of related packets, and collecting the packets for each set of related packets, and the set of the related packets Each has a storage means for storing the collected packets.
[0014]
In addition, this invention Comprises control means for selecting a predetermined packet from multimedia data multiplexed in packet units, deleting a packet that has not been selected, and adding deletion information of the deleted packet to the selected packet for output. Is.
[0015]
In addition, this invention Is provided with a control means for inputting a packet having a time axis such as video data and audio data from the packet stored in the storage means, and inserting and sending a NULL packet at the deleted packet position. .
[0016]
In addition, this invention Is provided with control means for selecting and sending a predetermined packet from the packets stored in the storage means.
[0017]
In addition, this invention Includes a control unit that selects and outputs the predetermined packet, and inputs and sends out the packet already stored in the storage unit during storage.
[0018]
In addition, this invention Is provided with control means for adding the accumulated time of the packet to the selected packet and outputting it.
[0019]
In addition, this invention Obtains the reproduction start position based on the accumulation time of the packet accumulated in the accumulation means and the reproduction start time designated by the user, and inputs and transmits the packet from the reproduction start position from the accumulation means. Control means are provided.
[0020]
In addition, this invention Outputs the total accumulation time of the accumulated data for each set of related packets and accumulates it in the accumulation means, obtains the reproduction start position from the reproduction start time designated by the user and the total accumulation time, Control means for inputting a packet from the start position from the storage means and sending it out is provided.
[0021]
In addition, this invention Outputs the related information including the storage time and storage position of the selected packet at a predetermined interval and stores it in the storage means, and determines the playback start position from the playback start time specified by the user and the related information. The control means for obtaining and transmitting the packet from the reproduction start position is provided.
[0022]
In addition, this invention Outputs the accumulated time and accumulated byte size of the packet accumulated in the accumulating means at predetermined intervals and accumulates them in the accumulating means, and inputs the packets already accumulated during accumulation in the accumulating means, And a control means for obtaining a reproduction start position on the basis of the reproduction start time specified by the above, the accumulation time, and the accumulated byte size, and inputting and transmitting a packet from the reproduction start position from the accumulation means. .
[0023]
In addition, this invention Obtains the position of the packet at the time when a predetermined operation is performed by the user from the packets already accumulated during the accumulation of the packet in the accumulation means, and at the time when the predetermined operation by the user is performed. Control means for inputting the packet from the storage means and sending it out from the position of the packet is provided.
[0024]
In addition, this invention Is provided with control means for outputting a packet of the switched channel to the storage means when a channel switching operation is performed by the user while packets of a predetermined channel are being stored in the storage means.
[0025]
In addition, this invention Includes a control unit that determines whether or not the stored packet is necessary at predetermined time intervals based on the access frequency or creation date and time of the packet stored in the storage unit, and deletes unnecessary packets.
[0026]
In addition, this invention Is provided with control means for resuming transmission from a packet at a position going back from the stop position to a predetermined time when the transmission is stopped during transmission of the packet stored in the storage means and then restarted. .
[0027]
In addition, this invention Is a storage means for storing program information including a program identification number, a channel number, a recording time (accumulation time), a program name, a program genre, a performer or a broadcast date and time of the set of stored packets, and the program information is input. And a control means for extracting a program identification number, a channel number, a recording time (accumulation time), a program name, a program genre, a performer or a broadcast date and time of a predetermined packet set.
[0028]
In addition, this invention Is provided with control means for identifying a predetermined program by specifying an abstract program such as a program genre, and automatically starting accumulation of a set of packets corresponding to the content of the predetermined program at a predetermined time. is there.
[0029]
In addition, this invention Is a control means for monitoring the electronic program guide included in the digital broadcast and enabling recording of the program reserved for recording by changing the information of the program already reserved for recording when the program organization is changed. It is equipped with.
[0030]
In addition, this invention Is provided with a control means for always recording a preset regularly broadcasted program every time.
[0031]
In addition, this invention When storing a set of packets corresponding to the new contents of a predetermined program, the set of packets corresponding to the old contents of the predetermined program is discarded to prevent the storage medium from being enlarged or unable to be stored. The control means is provided.
[0032]
In addition, this invention Is a control means for deciding a recording medium for storing packets from a recording medium such as a hard disk, a DVD (Digital Versatile Disc) or a tape according to an instruction from a user or attribute information of a packet to be stored. It is provided.
[0033]
In addition, this invention Is further In order to determine the media to store packets from the built-in devices and devices on the network, based on the instructions from the user and the attribute information of the packets to be stored, as well as the network-connected recording media Control means are provided.
[0034]
In addition, this invention Is further When storing several related packet sets on a regular basis, the oldest packet set among the packet sets corresponding to the contents of the program not being viewed is stored in a high-performance recording medium. Other packet sets are provided with control means for storing in a recording medium that is less expensive than a high-performance recording medium.
[0035]
In addition, this invention Is further Of the set of packets corresponding to the contents of the program that is not viewed, the oldest set of packets exists on a high-performance recording medium, and the other set of packets is recorded on a cheaper recording medium than the high-performance recording medium. When a packet set corresponding to the contents of a program that has not been viewed in the existing state is reproduced and playback is started, the next packet set to be viewed is recorded on a high-performance recording medium. Control means for copying is provided.
[0036]
In addition, this invention Includes a control means for repeatedly executing reproduction and skipping by repeatedly transmitting a predetermined amount of accumulated packets at predetermined intervals.
[0037]
This invention Is further, Control means having a program information search function is provided in order to send out only those that match search keywords such as program title, performer, program genre, broadcast date and time from the stored program information.
[0038]
In addition, this invention Is a storage means for storing program information including a program identification number, a channel number, a recording time (accumulation time), a program name, a program genre, a performer or a broadcast date and time of the set of stored packets, and the program information is input. And a control means for extracting the program identification number, channel number, recording time (accumulation time), program name, program genre, performer or broadcast date and time of a predetermined packet set as predetermined graphic information.
[0039]
In addition, this invention Is further, Control means that has a program information search function to send out only those that match the search keyword such as program title, performer, program genre, broadcast date and time from the stored program information, and retrieves the search result as predetermined graphic information It is equipped with.
[0040]
DETAILED DESCRIPTION OF THE INVENTION
The input board of this embodiment (an input board is an example of input means) has the following functions.
(1) Input multimedia data multiplexed in packet units.
The stream control program has the following functions. Here, the stream control program is an example of a control unit.
(1) Select and output a predetermined packet from the input multimedia data.
(2) A predetermined packet is extracted from the multimedia data, a packet storing audio or video data is selected, and only text or still image actual data is extracted from a packet storing text or still image.
(3) A predetermined packet is selected from the multimedia data multiplexed in packet units, a packet not selected is deleted, and this deletion information is added and output.
(4) A packet having a time axis, such as video data or audio data, is input from the packet stored in the storage device, and a NULL packet is inserted at the deleted packet position and transmitted.
The storage device has the following functions. Here, the storage device is an example of storage means.
(1) Accumulate output packets.
The following description is based on the drawings.
[0041]
FIG. 1 is a block diagram of a multimedia storage device according to the present invention.
In the figure, thick lines indicate hardware, broken lines indicate software, 1 is a computer, 2 is software for controlling the function of the computer as a multimedia storage device, and an application or external I / O such as RS232C or LAN This is a stream control program for receiving a command from / F and performing transmission / reception control of moving image data by the command.
[0042]
[0043]
[0044]
FIG. 2 shows only the first moving image from moving image data in which two moving images, a first moving image composed of video A and audio A and a second moving image composed of video B and audio B, are multiplexed. It is the figure which showed the packet constitution at the time of accumulating and reproducing | regenerating (in the figure A and B represent the image | video A and B, and the sound A and B represent the audio | voice A and B. Hereinafter, it is the same also in FIG. is there.). This represents, for example, an operation of recording only 1-channel programs out of 1-channel and 3-channel television broadcasts being multiplexed and sent. Here, one unit of packet means each of “movie A”, “sound A”, “PMT”, etc. shown in FIG.
[0045]
Next, the operation will be described with reference to the flowchart of FIG.
First, the video data multiplexed in units of packets generated in the video
[0046]
An instruction to start accumulation is given from the user via the
[0047]
If it is unnecessary video B data, that is, video B and audio B packets and a NULL packet, this packet is not accumulated, and 1 is added to the number of deleted packets (step S5). The operation from step S3 to step S6 is continued until an instruction indicating the end of storage is issued (step S7), and when the storage end instruction is issued, the storage is completed (step S8). The packet in which the deletion information is written in step S6 may be a packet before or after the deleted packet, but in the present embodiment, the packet is written in the subsequent packet. Among the packets of the accumulated
[0048]
When the user issues an instruction to reproduce the moving image A (step S9), the
[0049]
As described above, according to the present embodiment, data necessary for storage is selected by, for example, PID (Packet Identification) in MPEG2-TS, so that data to be stored is compared with input data. Further compression is possible. In addition, at the time of reproduction, a moving image can be reproduced at the same timing as the input data by sequentially transmitting packets while inserting a NULL packet according to the deletion information. Furthermore, the data to be multiplexed is not limited to moving images, and any multimedia data can be considered. In this case, there is no problem with playback synchronization, so it is selected to extract only the necessary part without writing deletion information. It ’s fine. As multimedia data, in addition to video and audio, binary data such as television program guides, still images, texts, and databases can be considered. Therefore, a program guide or the like can be created by using the accumulated data.
[0050]
In the first embodiment, the moving image to be stored is determined as the first moving image, and unnecessary data is deleted and the deletion information is left in the stored data. However, when two moving images are to be recorded at the same time. In some cases, it may not be possible to run multiple recording programs at the same time due to computer performance limitations. In this embodiment, a moving image accumulation method when two moving images are recorded simultaneously will be described.
[0051]
The control means of this embodiment has the following functions.
(1) A predetermined packet is extracted from multimedia data, a packet storing audio or video data is selected, and only text or still image actual data is extracted from a packet storing text or still image.
(2) A predetermined packet is selected from the packets stored in the storage device and transmitted. The following description is based on the drawings.
[0052]
FIG. 4 is a diagram showing a packet configuration in the case where two moving images are simultaneously stored in the input data 31 and reproduced. The stored
[0053]
When only the packets of the first moving image or the second moving image are transmitted from the accumulated data to the
[0054]
As described above, according to the present embodiment, the first moving image and the second moving image are stored in a multiplexed state, and it is possible to select which moving image is to be reproduced during reproduction. It is also possible to divide the first moving image and the second moving image after accumulation as separate data strings by using the multiplexed accumulated data as an input. That is, even when the number of recording programs that can be operated simultaneously is limited due to the ability of the computer, a plurality of programs can be recorded regardless of the limitation. Also, since PAT, PMT, etc. can be used in common, the disk capacity can be reduced by that amount compared to storing the first moving image and the second moving image separately.
[0055]
In the first and second embodiments, unnecessary data is deleted and deletion information is left in the stored data to generate only one stored data. In the present embodiment, multiplexed data is stored. A case where data are stored while being separated simultaneously will be described.
[0056]
The control means of this embodiment has the following functions.
(1) For each set of related packets, the control information indicating the storage state of the multiplexed packet is copied, the packets are collected for each set of related packets, and the storage device stores each set of related packets. The collected packets are accumulated. Here, the combination of packets refers to a combination of a plurality of packets, and includes, for example, input data 21 and accumulated
The following description is based on the drawings.
[0057]
FIG. 5 shows an accumulation method in such a case, and is a packet configuration diagram in the case of accumulating three accumulated
[0058]
The PAT and PMT, which are packets common to the accumulated
[0059]
This is because, in the case of taking the form of storing while being multiplexed as described in the second embodiment, for example, when the first moving picture and the second moving picture are multiplexed and stored, only the first moving picture is unnecessary. Even if the second moving image is necessary, the accumulated data cannot be made unnecessary, and the disk capacity corresponding to the first moving image is wasted until the second moving image becomes unnecessary. To prevent.
[0060]
As described above, according to the present embodiment, the multiplexed first moving image and second moving image can be separated and accumulated simultaneously. Since each piece of stored data is independent, it is only necessary to delete the corresponding stored data if each video is no longer needed, and the stored data can be uniquely associated with the program name, making management easier. .
[0061]
In the first, second, and third embodiments, the target moving image or the like is stored and reproduced by reducing the disk capacity. If all input data packets are stored, it is possible to accurately specify the playback location from the transfer rate by specifying the playback time from the beginning of the stored data. However, unnecessary packets are deleted, so playback is accurate. Jump playback with a specified start time is not possible.
Therefore, an embodiment relating to a method of associating the byte position from the head of the accumulated data with the time for the accumulated data having a time axis such as a moving image will be described. It is assumed that a time stamp is provided in addition to the deletion information when the accumulated data is generated in the first, second, and third embodiments, and the accumulation time is stamped on all packets.
[0062]
The control means of this embodiment has the following functions.
(1) The packet accumulation time is added to the selected packet and output.
(2) A reproduction start position is obtained based on the accumulation time of the packet accumulated in the storage device and the reproduction start time designated by the user, and a packet from this position is input from the storage device and transmitted. Here, the accumulation time refers to the time at which the selected packet is accumulated.
This embodiment will be described below.
[0063]
First, the time stamp of the first packet of accumulated data is confirmed and the time is stored. Next, the time stamps of the accumulated data are sequentially scanned, the time difference between the scanned time stamp and the head packet is calculated, and the time from the head of the data is known. This makes it possible to determine the byte position with respect to the correctly specified reproduction start time (relative time from the beginning of the accumulated data). If all the packets are confirmed, the scanning time may be longer. However, if the target position is very long depending on the designated reproduction start time and the current position, scanning is performed every 1000 packets, for example. The time can be shortened by further scanning, for example, by scanning 100 packets or 10 packets each time the position of is approaching.
[0064]
In the fourth embodiment, the time position specified in the packet or by the time stamp added to the packet is found. In this embodiment, there is no additional information such as the time stamp, and the total accumulation is performed as the file attribute. The time position is found by recording the time.
[0065]
The control means of this embodiment has the following functions.
(1) Select and output a predetermined packet, and input and transmit the packet accumulated so far during accumulation in the storage device.
(2) The total accumulation time of the accumulated data is output for each set of related packets and accumulated in the storage device, and the reproduction start position is obtained from the reproduction start time and the total accumulation time designated by the user, and this reproduction start is started. The packet from the position is input from the storage device and transmitted.
(3) Output related information including the storage time and storage position of the selected packet at a predetermined interval and store it in the storage device, and obtain a playback start position from the playback start time and the related information specified by the user, A packet from the reproduction start position is transmitted. Here, the total accumulation time refers to the time difference between the accumulation start time and accumulation end time of accumulated data. The related information refers to information including information on the packet storage time and storage position.
This embodiment will be described below.
[0066]
First, the accumulation start time is stored at the time of accumulation, and then the accumulation end time is stored at the end of accumulation. The total accumulation time is calculated from the difference between the two and stored as one piece of attribute information of accumulated data. The total accumulated byte size of the accumulated data is already stored by the file system or the like.
Because it is the same accumulated data, the ratio of the specified time to the total accumulated time is the same as the byte position of the specified time relative to the total accumulated byte size.
Byte position to be calculated = specified time / total storage time * total storage byte size
It becomes possible to calculate by. As a result, the byte position with respect to the specified time can be obtained immediately, so that the read position of the stored data can be matched with the calculated byte position.
[0067]
The multimedia storage device can play back simultaneously with the storage, but in order to associate the time position with the byte position according to the present embodiment, the storage byte size up to that point is required. However, there are cases where the accumulated performance up to that point cannot be accurately grasped due to the delay in the writing process of the OS and the influence that the file size cannot be determined until the closing process is performed. Therefore, during accumulation in the
When accuracy is required in this embodiment, after calculating the byte position according to this embodiment, a more accurate time position can be obtained by scanning the packet time stamp as in the fourth embodiment. Can be found.
[0068]
In the fifth embodiment, the time position is calculated and found by recording the total accumulation time as the file attribute. In this embodiment, the time and byte position are used as an index for each unit as an attribute. The case where it does is shown.
[0069]
The control means of this embodiment has the following functions.
(1) The accumulated time and accumulated byte size of the accumulated packet are output at predetermined intervals and accumulated in the storage device, and the reproduction start position is determined from the reproduction start time, accumulation time and accumulated byte size specified by the user. The packet from this reproduction start position is transmitted.
This embodiment will be described below.
[0070]
First, at the time of accumulation, the accumulation time from the accumulation start time to the measurement time and the accumulation byte size are associated with each other and stored as index information of accumulated data. In this way, it is possible to easily find the nearest place when the relative time from the head of the accumulated data is designated. Also in this embodiment, if more accuracy is required, the time stamp is stored in all packets, the byte position of the closest time is found by the index information, and then the time stamp of the packet is scanned to obtain an accurate Get position. Here, the accumulation time refers to the time difference between the accumulation time of one packet and the accumulation time of another packet. The accumulated byte size refers to the amount of accumulated data accumulated during the accumulation time.
[0071]
The unit time may be in seconds so that it is easy for humans to understand. However, the unit time may be in accordance with the compression method of moving image data. For example, MPEG has a moving image playback / editing unit called GOP (Group of Pictures), and the head of the GOP can be identified by a flag inside the packet. If this flag is scanned at the time of accumulation, the reproduction is started from the byte position obtained by the index information at the time of reproduction, so that the influence of the reproduction delay of the decoding device can be reduced. There is an advantage that can be easily.
[0072]
An embodiment in which operations such as replaying, stopping, and restarting a live broadcast moving image are performed using the accumulation method according to the above embodiment and the reproduction start position finding method by specifying a time will be described.
[0073]
The control means of this embodiment has the following functions.
(1) The position of the packet at the time when a predetermined operation by the user is performed is obtained from the packets already accumulated during packet accumulation in the storage device, and the packet from this position is input from the storage device and transmitted. .
(2) When a channel switching operation is performed by the user while a packet of a predetermined channel is stored in the storage device, the packet of the switched channel is output to the storage device.
(3) Based on the access frequency or creation date and time of the packet stored in the storage device, the necessity of the stored packet is determined at predetermined time intervals, and unnecessary packets are deleted.
(4) Accumulate program information including program identification number, channel number, recording time (accumulation time), program name, program genre, performer or broadcast date and time of the set of accumulated packets, and the stream control program stores the program information. A program identification number, a channel number, a recording time (accumulation time), a program name, a program genre, a performer, or a broadcast date and time of a predetermined packet set are input.
This embodiment will be described below.
[0074]
When the user selects a live broadcast (current broadcast) program, the currently broadcast program is displayed on the monitor. With this user program selection as a trigger, the multimedia storage device automatically starts storing the corresponding program. For example, when a user stops a program that is currently being viewed with a remote controller or the like, the multimedia storage device executes playback for the currently stored program, specifying the current total storage time as the playback start time, and Execute. As a result, the currently viewed program is replaced with the reproduction of the stored data currently being recorded, and the screen is stopped. During this time, accumulation continues and programs currently being broadcast are accumulated in the storage device.
[0075]
When the user resumes playback, the multimedia storage device executes playback and can continue to view the stopped moving image. Actually, there is a time difference from the current broadcast, but the user can continue to feel that the current broadcast is being viewed. For example, there are generally many scenes where you have to sit down on the telephone or toilet while watching a drama that is currently being broadcast, but in this embodiment you can stop the current broadcast when viewed from the user There is an effect, and the program you want to watch can be watched to the end.
[0076]
In this way, the user's operation is not consciously switched between the current broadcast and playback screens, but is automatically performed within the multimedia storage device. Therefore, in order to perform automatic recording, the finite disc capacity is gradually pressed. Therefore, the stored data automatically recorded by the multimedia storage device needs to be automatically deleted when there is a risk of squeezing the disk capacity. The priority to be deleted is determined by a) access frequency (when the viewer last viewed), b) creation date and time, c) lock designation by the user, or the like. In this way, after being automatically stored and used, it is automatically deleted, so that the user can perform a pseudo-live broadcast operation with little awareness of the disk capacity, and computer knowledge is reduced. Realize a multimedia storage device that can be easily used without it.
[0077]
In digital broadcasting, a method of managing program contents and broadcast time by an ID called EventID is generally used. Therefore, the event ID of the program currently being viewed, the channel number of the broadcasting station, and the name of the stored data that has started to be stored are managed, and the table of the currently recorded Event ID, the program name corresponding to the channel number, the broadcast time, and the like are stored on the hard disk. It is always stored in a non-volatile storage device such as, and the stored data stored in the multimedia storage device can be taken out as program information such as channel number, program name, broadcast date and time, storage time, etc. that can be easily understood by users. .
Thus, from the viewpoint of the user, it can be viewed as an index such as a program name or a broadcast time, and it becomes possible to easily perform selection for reproducing stored data, deletion of unnecessary stored data, and the like.
[0078]
Here, when the accumulated data increases, it is difficult to search for a desired program from these. Therefore, program information can be searched with an arbitrary keyword. As a result, even if the program information becomes enormous, only desired program information can be extracted by limiting the program information to be extracted by the user specifying keywords such as broadcast date, channel, and program name. .
[0079]
When retrieving the program information, basically, it is assumed that one or more program information related to each accumulated data is retrieved simultaneously. The display format for displaying these pieces of information is left to the display device. This method is therefore very common. As a usage form of the multimedia storage device, connection with a device such as a receiver that receives a broadcast stream is assumed, and the receiver generally does not have many graphic functions. Therefore, in order to reduce the load on the receiver, a function for converting to graphic information to be displayed on the television screen is provided in the storage means or the control means, and means for extracting the program information as graphic information is provided. As a result, the receiver need only have a display function, and it is not necessary to convert the extracted program information.
[0080]
According to the seventh embodiment, when operations such as reproduction, stop, and restart of stored data are repeated, the flow of packets is temporarily stopped and the continuity of moving image data is lost. May freeze until error recovery. As a result, a situation occurs in which the user cannot view the moving image corresponding to the time from when the data transmission from the multimedia storage device to the decoding device is resumed until the moving image is actually displayed on the screen. An embodiment for mitigating this situation and enabling at least a user to view all moving images of stored data will be described.
[0081]
The control means of this embodiment has the following functions.
(1) When the transmission is stopped during the transmission of the packet stored in the storage means and the transmission is resumed after that, the transmission is resumed from the packet at the position going back from the stop position to a predetermined time.
This embodiment will be described below.
[0082]
FIG. 6 shows the case where the transfer of video data is interrupted and the data transfer is performed by the conventional method when a decoding device that takes several seconds from when the data transfer is resumed until the video is actually displayed on the screen is used. This shows the conventional method 51 when it is performed and the present method 52 which is a case of retransmitting data to such an extent that an error of the decoding device can be recovered by this embodiment.
[0083]
In the conventional method 51, when the data transfer is stopped by the user's operation, the data transfer is restarted from the data immediately after the stop when the data transfer is restarted next. I can't see it. In order to see this, the user has to reset the playback start position in consideration of error recovery of the decoding apparatus and perform playback.
[0084]
On the other hand, in the method 52 of the present application, when data transfer is stopped by the user's operation, the multimedia storage device automatically returns the playback restart position to a position sufficient to recover from the error of the decoding device. It becomes possible to resume watching as a continuation of the video that has been seen so far without being conscious. A position (time) sufficient for recovery from the error of the decoding device is stored in advance in a non-volatile storage area such as a hard disk of the multimedia storage device.
As a result, as is often practiced in television broadcasts, there is an effect of maintaining the sensuous continuity of the program viewed from the user by replaying the video immediately before the CM after the CM.
[0085]
In the previous embodiments, it was assumed that the recording was started and stopped by the user's operation. However, in the present embodiment, the automatic recording is performed in pursuit of the convenience of the user. The form is shown.
[0086]
The control means of this embodiment has the following functions.
(1) A program detail information search function for specifying a program from a program title designated by a user and searching for an identifier of a broadcast time or a set of packets.
(2) A function that constantly analyzes broadcast program information and detects any changes in program organization
(3) Functions for identifying various types of storage media connected to the multimedia storage device and monitoring information such as the remaining capacity of the recording media
Hereinafter, an embodiment of the present system will be described.
[0087]
Conventionally, for example, in a home VTR device, the recording reservation has a simple structure in which recording time is designated in advance, and recording starts when the VTR device reaches that time. Currently, there is a method of inputting a code called G code, but this is also only for specifying the channel and recording time based on the code number, and the change after completion of recording reservation is performed manually by the user. In addition, there is a problem that, if the broadcast time is changed, the reservation time must be changed accordingly.
[0088]
On the other hand, in the present application system, abstract and sensory keywords such as a program title, a program genre, and a performer are designated. Based on the keyword, the multimedia storage device searches for one or more programs from the electronic program guide and makes a recording reservation. At this time, one or more reservation candidates retrieved by the multimedia storage device can be displayed to the user, and means for the user to select interactively is also conceivable.
The recording control of the recording reservation is started several seconds before the recording start time, and the subsequent recording processing is the same as the contents described in the first, second, and third embodiments.
[0089]
In actual television broadcasting, the broadcast time of a reserved program may be changed by extending the broadcast time of a baseball broadcast or inserting an emergency special program. The multimedia storage device always monitors the current electronic program guide, finds a program that has changed from the previous one, searches whether the program is reserved for recording, and if it is reserved, Reflect the change information. In the reserved recording of the multimedia storage device, the reserved recording information is stored in the memory or the nonvolatile storage device until the recording control is started. By changing this information, the start time of the recording control is changed. As a result, the program can be recorded deterministically.
[0090]
Next, a function that automatically records the latest program according to the user's designation and deletes old moving images, which should be called automatic update, will be described. This function automatically updates programs for which the latest information is meaningful to the user, such as weather forecasts and news, and past videos can be specified by specifying other than the latest ones, or other than the latest ones and the past two broadcasts. Is automatically deleted. When applying to a series drama, there are various methods for deleting such as “delete when viewing is completed”.
This automatic update function combines the functions of automatically recognizing periodic recording from the genre of “news” and “weather” and automatically deleting it according to the setting conditions. To avoid falling short of. Therefore, the multimedia storage device can always deterministically record the latest news and weather.
[0091]
From the viewpoint of user convenience, this function has an effect that the user can watch at a time convenient to the user without being influenced by the broadcast time.
[0092]
Although the first embodiment has been described with reference to FIG. 1 as a basic configuration, a configuration as illustrated in FIG. 10 may be considered as a configuration using a network.
In the present embodiment, an example of a method for determining a storage destination when various types of storage devices are built in or mounted on a network will be described.
[0093]
In FIG. 10, 1 to 8 are equivalent to the description of the same reference numerals in FIG. 10 is a network cable for connecting the
[0094]
The control means of this embodiment has the following functions in addition to the control means of the first embodiment.
(1) Function for identifying various types of storage media connected to the multimedia storage device and monitoring information such as the remaining capacity of the recording medium and the load on the network line
Hereinafter, an embodiment of the present system will be described.
[0095]
FIG. 11 is a diagram showing an embodiment of the optimum accumulation form.
[0096]
Now, the moving images managed as the multimedia storage device are all the moving images stored in both, and the reason why the moving images are stored in such a form will be described. The latest news and the latest weather are as described in the ninth embodiment, and the latest news is always available for viewing at any time. In addition, since past news may include contents that cannot be viewed in the latest news, as shown in FIG. 112, it is stored in an inexpensive recording medium.
In addition, attribute information indicating the state of viewing or not listening is automatically added to each moving image.
[0097]
For programs that are important for the continuity of the movie, such as a program in which the entire story development is not understood unless the continuous drama is recorded continuously every week, for example, only the oldest unviewed movie is placed on the hard disk. If you have recorded 5 broadcasts so far, if you have watched up to 2 times, only the 3rd drama to be watched next is placed on a hard disk that can be watched immediately, and the videos broadcast in other weeks The data is stored in the storage device indicated by 112 such as a tape or a DVD. At this time, with respect to dramas and the like where continuity is important, attribute information indicating watching or untrialized is automatically set. This not only enhances the response performance and hard disk usage efficiency when playback is performed, but also records the necessary programs on the hard disk, reducing the capacity of the built-in hard disk and making the device cheaper. it can.
In addition, since the DVD device is random access, it can be used in the same way as a hard disk. However, there is a condition that it is preferable to use a hard disk for high-definition video such as HDTV in terms of performance. Even in such a condition, the multimedia storage device can automatically discriminate by managing the performance of each device.
[0098]
Furthermore, the moving image may be stored in a storage device connected via a network as shown in FIG. In this case, it takes time to store moving images in a storage device with a heavy network load. However, the multimedia apparatus according to the tenth embodiment has a function of monitoring information about the load on the network. Therefore, when a moving image is stored in a storage device connected via a network, it is possible to select a storage device connected to a line with a small load and store the moving image in consideration of the load on the network line.
[0099]
Next, an example in which the
It is assumed that the drama program is continuously recorded every week and has already been recorded up to the fifth time, and the current state is the state of FIG. Now, when the third viewing is started, the next video to be viewed is
[0100]
According to this embodiment, the capacity of a relatively expensive storage device such as a hard disk can be reduced. Even in the storage example of FIG. 11 described in the present embodiment, if there is one hour of broadcasting per drama, if all are stored on the hard disk, a capacity of 5 hours is required. For example, a hard disk device needs only one hour. In this way, movies that are expected to be viewed in the future are capable of being realized by using a high-performance storage device such as a hard disk (multiple playback, instantaneous access, instantaneous playback position movement, instantaneous cueing, etc. for the same movie). By assigning only to the storage capacity, the cost for the storage capacity of the entire multimedia storage device can be reduced, and it can also be carried to another device.
[0101]
With conventional VTRs, when you check the recorded content, you can check all the recorded content by fast-forward playback, rewind playback, etc., or check by skipping fast-forwarding, rewinding and playback repeatedly. It is common to do.
In the present embodiment, an example will be described with respect to a method of repeating reproduction and skipping when confirming the contents of a recorded moving image.
[0102]
FIG. 13 will be described. This figure shows one stored packet set, ie one recorded video. Among these, the blank portion indicated by 131 is skipped, and only the three portions 132 indicated by oblique lines are continuously reproduced.
In the conventional VTR, it is necessary to fast-forward the tape in order to skip over the part that is not seen, and it takes much time. In addition, as the number of operations increases, the number of times the switch button is pressed increases, and the number of times increases as the length of the entire moving image increases. The multimedia storage device is mainly a high-performance storage device such as a hard disk. Using this feature, reproduction and jumping are repeated using a preset time by one operation or a program index indicating a characteristic part of the program.
As a result, the time for confirming the contents of the program is drastically improved, and troubles such as button operations are not required, so that convenience for the user is improved.
[0103]
【The invention's effect】
Since the present invention is configured as described above, the following effects can be obtained.
[0104]
This invention Then, by selecting and outputting a predetermined packet from multimedia data multiplexed in units of input packets, and storing the output packets, the stored data can be further compressed compared to the input data. it can.
[0105]
In addition, this invention Then, by extracting a predetermined packet from multimedia data, selecting a packet storing audio or video data, and extracting only actual data of text or still image from a packet storing text or still image , Can retrieve the necessary data.
[0106]
In addition, this invention Then, for each set of related packets, the control information indicating the storage state of the multiplexed packet is copied, the packets are collected for each set of related packets, and for each set of related packets, By accumulating the collected packets, a plurality of related data can be separated and accumulated simultaneously.
[0107]
In addition, this invention Then, by selecting a predetermined packet from the multimedia data multiplexed on a packet basis, deleting the unselected packet, adding the deletion information of this deleted packet, and outputting it, it accumulates compared to the input data Data to be compressed can be further compressed.
[0108]
In addition, this invention Then, a packet having a time axis such as video data and audio data is input from the packet stored in the storage means, and a NULL packet is inserted into the deleted packet position and transmitted, so that the same transmission timing as input is performed. Can be output.
[0109]
In addition, this invention Then, by selecting and transmitting a predetermined packet from the packets stored in the storage means, it is possible to select and transmit only the arbitrarily designated packet from the stored data.
[0110]
In addition, this invention Then, by selecting and outputting a predetermined packet and inputting and sending out a packet already accumulated during accumulation in the accumulation means, accumulation up to the present without waiting for the end of recording as in the case of a conventional VTR device. Data can be played back.
[0111]
In addition, this invention Then, the accumulated time of this packet is added to the selected packet.
Output, the accumulation time of an arbitrary packet can be recognized.
[0112]
In addition, this invention Then, the reproduction start position is obtained based on the accumulation time of the packet accumulated in the accumulation means and the reproduction start time designated by the user, and the packet from this position is input from the accumulation means and transmitted. The playback start position can be specified.
[0113]
In addition, this invention Then, for each set of related packets, the total accumulation time of the accumulated data is output and accumulated in the accumulation means, and the reproduction start position is obtained from the reproduction start time designated by the user and the total accumulation time. By inputting the packet from the position from the storage means and sending it out, the reproduction start position can be designated at random and at high speed.
[0114]
In addition, this invention Then, the related information including the packet recording time and the storage position is output at a predetermined interval and stored in the storage means, and the playback start position is obtained from the playback start time specified by the user and the related information, and this playback is performed. Since the packet from the start position is transmitted, the playback start position can be specified at a high speed randomly and at a relative time from the beginning of the file.
[0115]
In addition, this invention Then, the accumulation time and accumulated byte size of the packet accumulated in the accumulation means are output at a predetermined interval and accumulated in the accumulation means, and the packet already accumulated during accumulation is input to the accumulation means, Since the reproduction start position is obtained based on the designated reproduction start time, the accumulation time, and the accumulated byte size, the reproduction start position can be designated even during the accumulation.
[0116]
In addition, this invention Then, the position of the packet at the time when a predetermined operation by the user is performed is obtained from the packets already accumulated during the packet accumulation in the accumulation means, and the packet from this position is input from the accumulation means and transmitted. As a result, it is possible to instantaneously replace the video output on the monitor with the reproduced video, and perform operations on the pseudo live broadcast such as stopping, restarting, and replaying the live broadcast.
[0117]
In addition, this invention Then, when the channel switching operation is performed by the user while the packet of the predetermined channel is being stored in the storage unit, the packet output on the monitor is reproduced by outputting the packet of the switched channel to the storage unit. You can instantly replace it with video and perform operations on pseudo live broadcasts such as stopping, restarting, and replaying live broadcasts.
[0118]
In addition, this invention Then, based on the access frequency or creation date and time of the packet stored in the storage means, it is determined whether or not the stored packet is necessary at a predetermined time interval, and unnecessary packets are deleted to automatically eliminate the storage failure due to insufficient disk capacity To do.
[0119]
In addition, this invention Then, during the transmission of the packet stored in the storage means, when this transmission is stopped and then restarted, it is stored on the monitor by restarting the transmission from the packet back to the predetermined time from the stop position. All videos can be viewed without omission.
[0120]
In addition, this invention Then, by accumulating program information including the program identification number, channel number, recording time (accumulation time), program name, program genre, performer or broadcast date and time of the set of accumulated packets, and extracting these program information The program information can be managed by a display method that can be understood by the user.
[0121]
In addition, this invention In the past, operations that used to know the existence of a program by means of newspapers and magazines and reserved recordings were automatically performed according to abstract designations such as serial dramas and names of performers without knowing the existence of the program in advance. Recording reservations can be made.
[0122]
In addition, this invention This guarantees that a program once reserved for recording will always be recorded by changing the contents of the recording reservation following the program change when the broadcast time of the program reserved for recording is changed. is there.
[0123]
In addition, this invention Can watch the latest news and weather forecast at any time according to the convenience of the viewer by automatically recording the latest program, such as news and weather forecast, which is mainly valuable for the latest information Is possible.
[0124]
In addition, this invention Is further, The automatically recorded moving image can prevent the recording device from becoming full. For example, the automatic update always leaves only the latest one generation in the recording device, or leaves the past three times in the recording device. Even if the video is recorded by normal recording or recording reservation, it can be deleted or not can be specified by the user's specification, so that even if the user does not delete it explicitly using the delete function The automatic deletion function of the invention enables periodic batch deletion.
[0125]
In addition, this invention Judges whether it is necessary to be able to play immediately depending on the type of video, user preferences, continuity of the stored video, etc., and which recording medium to use among the devices built in the multimedia storage device By determining, the price of the recording medium with respect to the unit capacity occupied by the moving image is reduced.
[0126]
In addition, this invention Determines whether it needs to be immediately playable depending on the type of video, user preferences, continuity of the stored video, etc., and the device built in the multimedia storage device and the storage device connected to the network By deciding which recording medium to use, the price of the recording medium with respect to the unit capacity occupied by the moving image is reduced, and the price of the apparatus is reduced by minimizing the storage device built in the multimedia storage device By connecting storage devices on the network, it is possible to easily increase the storage devices that can be used in the multimedia storage device.
[0127]
In addition, this invention When recording all the series of dramas, record the dramas of the week to be watched on a recording medium that can be played immediately, and record the videos of other weeks on other recording media. Thus, a limited high-performance recording medium is efficiently used.
[0128]
In addition, this invention When a drama of the week to be watched is recorded that is recorded on a recording medium that can be played back immediately, the next video that is recorded on another recording medium is played back at the same time as the playback. Copy to a possible recording medium. As a result, from the user's perspective, when playing a series of dramas in sequence, it is possible to provide a function equivalent to being recorded on a recording medium that can be played back immediately, all at a lower cost. it can.
[0129]
In addition, this invention Is further, Whether or not the content of the program can be grasped and watched earlier by allowing the user to jump through the contents, such as when recording reservations are made at the discretion of the multimedia storage device, or programs that the user has recorded for trial The convenience of the viewer is dramatically improved compared to the conventional case.
[0130]
Also in this invention The user designates keywords such as a program identification number, channel number, recording time (accumulation time), program name, program genre, performer or broadcast date and time, and displays only the search results. As a result, the displayed content becomes a part rather than the entire multimedia storage device, so that the user can find the target recorded program sooner, especially when the number of recorded videos increases. .
[0131]
In addition, this invention Then, the program information including the program identification number, channel number, recording time (accumulation time), program name, program genre, performer or broadcast date and time of the set of accumulated packets is accumulated, and these program information is converted into graphic information. It can be taken out. Thereby, it is not necessary for the receiver to analyze the program information, and the cost of the receiver can be reduced.
[0132]
In addition, this invention Allows users to specify keywords such as program identification number, channel number, recording time (accumulation time), program name, program genre, performer, broadcast date and time, and retrieve only the search results as graphic information And Even with an inexpensive receiver having no program information analysis function, the search function of the multimedia storage device can be used.
[Brief description of the drawings]
FIG. 1 is a configuration diagram of a multimedia storage device according to a first embodiment.
FIG. 2 is a packet configuration diagram when accumulating and reproducing a moving image in the first embodiment.
FIG. 3 is a flowchart for explaining the operation of the multimedia storage device in the first embodiment.
FIG. 4 is a packet configuration diagram when accumulating and reproducing moving images in the second embodiment.
FIG. 5 is a packet configuration diagram when accumulating and reproducing a moving image in the third embodiment.
6 is an explanatory diagram of a re-transmission operation of moving image data whose transmission has been stopped in
FIG. 7 shows a moving image storage apparatus in a conventional PC.
FIG. 8 shows a moving image storage apparatus in a conventional VTR.
FIG. 9 is a conventional home television.
10 is a block diagram of a multimedia storage device in
FIG. 11 shows an example of a storage form according to the tenth embodiment.
12 shows an example of an operation during reproduction in
FIG. 13 is a conceptual diagram of interlaced playback in the eleventh embodiment.
[Explanation of symbols]
1 Computer, 2 Stream control program, 3 Decoding device, 4 Video data output device, 5 Output board, 6 Input board, 7 Application, 8 External communication board, 9 Storage device, 10 Network cable, 11 Network storage device, 12 High-speed random access storage device.
Claims (20)
上記制御手段は、関連するパケットの組み毎に、多重化されているパケットの格納状態を示す制御情報をコピーし、各関連するパケットの組み毎に上記パケットを寄せ集め、上記蓄積手段は上記関連するパケットの組み毎に、上記寄せ集められたパケットを蓄積する
ことを特徴とするマルチメディア蓄積装置。Input means for inputting multimedia data multiplexed in packet units, control means for selecting and outputting a predetermined packet from the input multimedia data, and storage means for storing the output packet,
The control means copies control information indicating the storage state of multiplexed packets for each set of related packets, collects the packets for each set of related packets, and the storage means stores the related information. A multimedia storage device that stores the collected packets for each set of packets to be processed.
上記蓄積手段は、上記制御手段が出力した上記蓄積時刻を付加したパケットを蓄積し、
上記制御手段は、上記蓄積手段に蓄積されたパケットの蓄積時刻と、利用者により指定された再生開始時刻とに基づき再生開始位置を求め、この再生開始位置からのパケットを上記蓄積手段より入力して送出する
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means adds the accumulated time of the packet to the selected packet and outputs it,
The accumulation means accumulates the packet with the accumulation time output from the control means,
The control means obtains the reproduction start position based on the accumulation time of the packet accumulated in the accumulation means and the reproduction start time designated by the user, and inputs the packet from the reproduction start position from the accumulation means. The multimedia storage device according to claim 1, wherein the multimedia storage device transmits the data.
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means outputs the total accumulation time of the accumulated data for each set of related packets and accumulates it in the accumulation means, and obtains the reproduction start position from the reproduction start time designated by the user and the total accumulation time. 2. A multimedia storage apparatus according to claim 1, wherein a packet from the reproduction start position is input from said storage means and transmitted.
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means outputs the related information including the storage time and storage position of the selected packet at a predetermined interval and stores it in the storage means, and reproduces it from the reproduction start time designated by the user and the related information. 2. The multimedia storage apparatus according to claim 1 , wherein a start position is obtained and a packet from the reproduction start position is transmitted.
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means outputs the accumulated time and accumulated byte size of the packet accumulated in the accumulating means at predetermined intervals and accumulates them in the accumulating means, and inputs the packets already accumulated during accumulation to the accumulating means. The reproduction start position is obtained based on the reproduction start time designated by the user, the accumulation time, and the accumulated byte size, and packets from the reproduction start position are input from the accumulation means and transmitted. The multimedia storage device according to claim 1 .
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means obtains the position of the packet at the time when a predetermined operation is performed by the user from the packets already accumulated during the accumulation of the packet in the accumulation means, and the predetermined operation by the user is performed. 2. The multimedia storage device according to claim 1, wherein the packet is input from the storage means and transmitted from the position of the packet at the time point.
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 2. The control unit according to claim 1, wherein when a channel switching operation is performed by a user while a packet of a predetermined channel is stored in the storage unit, a packet of the switched channel is output to the storage unit. multimedia storage device.
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control unit determines the necessity of the stored packets at predetermined time intervals based on the access frequency or the creation date of the packets accumulated in said storage means, according to claim 1, characterized in that to remove unwanted packets multimedia storage device.
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means sends out the packet stored in the storage means, and when the transmission is stopped during the transmission of the packet stored in the storage means and then restarted, the position goes back from the stop position to a predetermined time. 2. The multimedia storage device according to claim 1 , wherein transmission is resumed from the packet of the first .
上記制御手段は、上記番組情報を入力し所定のパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を取り出す
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The accumulation means accumulates program information including a program identification number, a channel number, a recording time (accumulation time), a program name, a program genre, a performer, or a broadcast date and time of a set of accumulated packets,
Said control means, said program information input set of program identification number of a given packet, channel number, Duration (storage time), program name, program genre, claims, characterized in that retrieving the cast or broadcast date Item 5. The multimedia storage device according to Item 1 .
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means monitors a program schedule called an electronic program guide (EPG) included in the digital broadcast, and changes the program information already reserved for recording when the program organization is changed. 2. The multimedia storage device according to claim 1 , wherein a program can be recorded.
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The control means always outputs a set of packets corresponding to the contents of the predetermined program to the storage means, and outputs the set of packets corresponding to the new contents of the predetermined program to the storage means when the storage means is stored. 2. The multimedia storage device according to claim 1, wherein a set of packets corresponding to old contents of the predetermined program stored in the means is deleted.
上記制御手段は、ハードディスクなどのランダムアクセス可能な記録媒体とDVDやテープなど取り外しが可能な記録媒体とから、所定の形式で設定した使用者の好み情報と、番組内容の連続性とのいずれかの要因を条件としてパケットを出力する記録媒体を決定する
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The storage means comprises a randomly accessible recording medium such as a hard disk and a removable recording medium such as a DVD or tape,
The control means is one of user preference information set in a predetermined format and continuity of program contents from a randomly accessible recording medium such as a hard disk and a removable recording medium such as a DVD or a tape. 2. The multimedia storage device according to claim 1, wherein a recording medium for outputting a packet is determined on the condition of the above factor.
上記制御手段は、ネットワークを介して存在する記録媒体にアクセス可能であり、ネットワークの負荷という要因を条件としてパケットを出力する記録媒体を決定する
ことを特徴とする請求項13記載のマルチメディア蓄積装置。The storage means includes a recording medium connected to the control means via a network,
14. The multimedia storage device according to claim 13, wherein the control means determines a recording medium that can access a recording medium existing via a network and outputs a packet on the condition of a factor of a network load. .
ことを特徴とする請求項13又は14のいずれかに記載のマルチメディア蓄積装置。The control means identifies at least one of the type and performance of a device having a storable recording medium, and a used recording medium, and is viewed when periodically outputting a set of related packets to the storage means. If the oldest set of packets corresponding to the contents of a program that has not been recorded is stored on a high-performance recording medium such as a hard disk so that it can be viewed immediately, the set of packets to be stored will be 15. The multimedia storage device according to claim 13, wherein the storage is performed on a recording medium that is less expensive than a high-performance recording medium.
ことを特徴とする請求項15記載のマルチメディア蓄積装置。The control means identifies at least one of the type and performance of a device having a storable recording medium, and a used recording medium, and a hard disk or the like among a set of packets corresponding to the contents of a program that is not currently being viewed When viewing the oldest set of packets stored in a high-performance recording medium, packets corresponding to the content of the next program to be viewed stored in a recording medium that is less expensive than a high-performance recording medium such as a hard disk 16. The multimedia storage device according to claim 15, wherein the set is copied to a high-performance recording medium.
こと特徴とする請求項10記載のマルチメディア蓄積装置。The control means has a program information search function, and sends program information that matches a search keyword such as a program title, performer, program genre, and broadcast date from the program information stored by the storage means. The multimedia storage device according to claim 10.
上記制御手段は、上記番組情報を入力し所定のパケットの組の番組識別番号、チャンネル番号、収録時間(蓄積時間)、番組名、番組ジャンル、出演者又は放送日時を所定のグラフィック情報として取り出す
ことを特徴とする請求項1記載のマルチメディア蓄積装置。 The accumulation means accumulates program information including a program identification number, a channel number, a recording time (accumulation time), a program name, a program genre, a performer, or a broadcast date and time of a set of accumulated packets,
The control means inputs the program information and takes out a program identification number, a channel number, a recording time (accumulation time), a program name, a program genre, a performer, or a broadcast date and time of a predetermined packet set as predetermined graphic information. The multimedia storage device according to claim 1 .
ことを特徴とする請求項18記載のマルチメディア蓄積装置。The control means has a program information search function, and sends program information that matches a search keyword such as a program title, performer, program genre, and broadcast date as predetermined graphic information from the program information stored by the storage means. The multimedia storage device according to claim 18, wherein:
上記制御手段は、関連するパケットの組み毎に上記パケットを寄せ集め、上記入力されたマルチメディアデータに含まれるパケットの制御情報を上記各関連するパケットの組み毎に付加して送出するThe control means gathers the packets for each set of related packets, adds packet control information included in the input multimedia data, and transmits the packet for each set of related packets.
ことを特徴とするマルチメディア送出装置。A multimedia sending device characterized by the above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP13213999A JP3846671B2 (en) | 1998-05-20 | 1999-05-13 | Multimedia storage device and multimedia transmission device |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10-138474 | 1998-05-20 | ||
JP13847498 | 1998-05-20 | ||
JP13213999A JP3846671B2 (en) | 1998-05-20 | 1999-05-13 | Multimedia storage device and multimedia transmission device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000041066A JP2000041066A (en) | 2000-02-08 |
JP3846671B2 true JP3846671B2 (en) | 2006-11-15 |
Family
ID=26466776
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP13213999A Expired - Fee Related JP3846671B2 (en) | 1998-05-20 | 1999-05-13 | Multimedia storage device and multimedia transmission device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3846671B2 (en) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69935704T2 (en) | 1998-12-24 | 2007-12-27 | Matsushita Electric Industrial Co., Ltd., Kadoma | Recording / playback system and method for digital television broadcasting |
JP2001101839A (en) * | 1999-10-01 | 2001-04-13 | Kenwood Corp | Information reproducing and recording system, broadcast receiving and recording system, information reproducing and recording method, and broadcast receiving and recording method |
US6771657B1 (en) * | 1999-12-09 | 2004-08-03 | General Instrument Corporation | Non real-time delivery of MPEG-2 programs via an MPEG-2 transport stream |
KR100752482B1 (en) * | 2001-07-07 | 2007-08-28 | 엘지전자 주식회사 | Apparatus and method for recording and reproducing a multichannel stream |
US7783159B2 (en) | 2002-06-24 | 2010-08-24 | Lg Electronics Inc. | Recording medium having data structure for managing reproduction of multiple reproduction path video data for at least a segment of a title recorded thereon and recording and reproducing methods and apparatuses |
US7889968B2 (en) | 2002-06-24 | 2011-02-15 | Lg Electronics Inc. | Recording medium having data structure for managing reproduction of multiple reproduction path video data for at least a segment of a title recorded thereon and recording and reproducing methods and apparatuses |
KR20040000290A (en) | 2002-06-24 | 2004-01-03 | 엘지전자 주식회사 | Method for managing multi-path data stream of high density optical disc |
BR0305211A (en) | 2002-06-24 | 2005-06-28 | Lg Electronics Inc | Recording medium having data structure for playback management of multi-track path video data recorded therein and recording and playback apparatus and methods |
WO2004003908A1 (en) | 2002-06-28 | 2004-01-08 | Lg Electronics Inc. | Recording medium having data structure for managing recording and reproduction of multiple path data recorded thereon and recording and reproducing methods and apparatus |
KR100554768B1 (en) | 2002-06-28 | 2006-02-22 | 엘지전자 주식회사 | Recording medium having data structure for managing reproduction of multiple playback path video data recorded thereon and recording and reproducing methods and apparatuses |
KR100620332B1 (en) | 2002-11-08 | 2006-09-13 | 엘지전자 주식회사 | Method and apparatus for recording a multi-component stream and a high-density recording medium having a multi-component stream recorded theron and reproducing method and apparatus of said recording medium |
US7720356B2 (en) | 2002-11-12 | 2010-05-18 | Lg Electronics Inc | Recording medium having data structure for managing reproduction of multiple reproduction path video data recorded thereon and recording and reproducing methods and apparatuses |
US7783160B2 (en) | 2002-11-20 | 2010-08-24 | Lg Electronics Inc. | Recording medium having data structure for managing reproduction of interleaved multiple reproduction path video data recorded thereon and recording and reproducing methods and apparatuses |
US7809775B2 (en) | 2003-02-27 | 2010-10-05 | Lg Electronics, Inc. | Recording medium having data structure for managing playback control recorded thereon and recording and reproducing methods and apparatuses |
WO2004077417A1 (en) | 2003-02-28 | 2004-09-10 | Lg Electronics Inc. | Recording medium having data structure for managing random/shuffle reproduction of video data recorded thereon and recording and reproducing methods and apparatuses |
JP4206833B2 (en) | 2003-05-07 | 2009-01-14 | ソニー株式会社 | Program recording apparatus and program recording method |
JP2005051493A (en) | 2003-07-28 | 2005-02-24 | Toshiba Corp | Video recording and reproducing device and video recording and reproducing method |
JP2005057692A (en) | 2003-08-07 | 2005-03-03 | Canon Inc | Recorder, its control method, program and recording medium |
JP2008152892A (en) * | 2006-12-20 | 2008-07-03 | Toshiba Corp | Recording and reproducing device |
JP4569567B2 (en) * | 2006-12-28 | 2010-10-27 | 株式会社日立製作所 | Recording device |
JP5203033B2 (en) * | 2008-05-01 | 2013-06-05 | 京セラ株式会社 | Broadcast receiver |
US9185335B2 (en) * | 2009-12-28 | 2015-11-10 | Thomson Licensing | Method and device for reception of video contents and services broadcast with prior transmission of data |
CN108712677B (en) * | 2018-05-31 | 2019-07-16 | 杭州视在数科信息技术有限公司 | TS method for stream processing and application to intelligent algorithm close friend |
-
1999
- 1999-05-13 JP JP13213999A patent/JP3846671B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2000041066A (en) | 2000-02-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3846671B2 (en) | Multimedia storage device and multimedia transmission device | |
US10462530B2 (en) | Systems and methods for providing a multi-perspective video display | |
JP4396878B2 (en) | Method for storing content | |
JP3615486B2 (en) | Multimedia time warping system | |
JP4448273B2 (en) | Broadcast program content control | |
KR100982165B1 (en) | System and method for providing videomarks for a video program | |
US8873929B1 (en) | Digital recording and playback | |
EP1214842B1 (en) | Closed caption tagging system | |
JP4081099B2 (en) | Program selection apparatus, program recording apparatus and method thereof | |
US20140056572A1 (en) | Digital Video Recording System | |
US20080155581A1 (en) | Method and Apparatus for Providing Commercials Suitable for Viewing When Fast-Forwarding Through a Digitally Recorded Program | |
JP4351927B2 (en) | Video playback device, playback script generation device, and video cutout device | |
US20080159709A1 (en) | Recording apparatus, recording/reproducing system, recording method | |
JP3794257B2 (en) | Video signal playback device | |
CA2398200C (en) | System and method for providing multi-perspective instant replay | |
US20050232610A1 (en) | User automated content deletion | |
WO2001095620A1 (en) | Broadcast recording method, device, and recording medium | |
JPH10243348A (en) | Multichannel recording device and multichannel reproducing device | |
JP2005018925A (en) | Recording and reproducing device, and recording and reproducing method | |
JP4628494B2 (en) | Program selection device, program selection method, and program | |
JP4593609B2 (en) | Program selection device, program selection method, and program | |
US7725003B2 (en) | Digital broadcast recorder and recording method thereof | |
JP2007288300A (en) | Video audio reproducing apparatus | |
US20040151473A1 (en) | Audio/video data recording/reproduction apparatus, system, and method, recording medium recorded by them, audio/video data reproduction apparatus, and data structure | |
JP3967909B2 (en) | Stream transmission method, transmission device, reception device, and reception program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040401 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20040520 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20041014 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051220 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060418 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060614 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060816 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060817 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090901 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100901 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110901 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110901 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120901 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130901 Year of fee payment: 7 |
|
LAPS | Cancellation because of no payment of annual fees |