JP4851909B2 - 映像記録装置及びプログラム - Google Patents

Description

この発明は、デジタル映像データを順次記録する映像記録装置及びプログラムに関する。

従来、テレビ放送を受信して記録したり、その記録内容を再生出力する技術としては、例えば、テレビ放送を受信して記録したのち、この録画内容から重要シーンを抽出してハイライト再生する技術が知られている（特許文献１参照）。また、テレビ放送を受信して記録したのち、この記録内容に含まれる字幕をインデックスとした字幕一覧を表示出力させ、この字幕一覧画面から任意に選択された字幕の対応個所からその映像を再生する技術が知られている（特許文献２参照）。更に、テレビ放送を受信して記録したのち、この記録内容を再生出力する際に、ユーザが任意に指定したキーワードが字幕に含まれている映像にジャンプしながら再生する技術が知られている（特許文献３参照）。
特開２００６−１８０３０６号公報 特開２００４−８０４７６号公報 特開平１０−２８５５２８号公報

しかしながら、上述した特許文献１の技術にあっては、録画内容を順次解析し、例えば、音量の大きな部分、動きの大きい映像部分、特定キーワードを含む映像部分を重要シーンとして抽出するものであり、録画内容の解析に時間と消費電力の増大を招く。また、上述した特許文献２及び３の技術にあっては、再生時にユーザが所望する個所にジャンプさせるために字幕部分を利用したもので、再生ジャンプ後は通常の再生動作に戻されるため、次の希望シーンを直ちに視聴したい場合には、ユーザ自らがジャンプ指示を行う必要があり、操作の煩雑化を招く。

この発明の課題は、デジタル映像データを順次記録する場合に、字幕が挿入されている映像部分をその字幕と共に順次記録するダイジェスト記録を実現できるようにすることである。

請求項１記載の発明は、デジタル映像データを順次記録する映像記録装置であって、前記映像データから分離された字幕データに基づいて字幕が挿入される動画の映像データの部分を字幕部分として順次特定する特定手段と、この特定手段によって字幕部分が順次特定されるごとに、この字幕部分に相当する字幕データ及び静止画の映像データを取得する取得手段と、前記特定手段が特定した字幕部分の動画の映像データから静止画の映像データを生成するほか、この静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定する決定手段と、前記取得手段によって字幕部分ごとに得られた字幕データと映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて前記決定手段が決定した表示時間を記録する記録手段と、記録用のメモリ残量を検出する残量検出手段と、所定の情報に基づいて記録方式を選択し、選択した記録方式に応じた記録動作を実行する記録方式選択手段と、を備え、前記記録手段は、動画の映像データとその字幕データとを逐次記録する第１の記録方式と、この動画の映像データの中から各字幕部分ごとにその映像データと字幕データとを対応付けて記録する第２の記録方式と、を有し、前記記録方式選択手段は、前記残量検出手段によって検出されたメモリ残量に応じて、前記第１の記録方式に代わって前記第２の記録方式を選択して当該方式に応じた記録動作を実行する、ことを特徴とする。
請求項２記載の発明は、デジタル映像データを順次記録する映像記録装置であって、前記映像データから分離された字幕データに基づいて字幕が挿入される動画の映像データの部分を字幕部分として順次特定する特定手段と、この特定手段によって字幕部分が順次特定されるごとに、この字幕部分に相当する字幕データ及び静止画の映像データを取得する取得手段と、前記特定手段が特定した字幕部分の動画の映像データから静止画の映像データを生成するほか、この静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定する決定手段と、前記取得手段によって字幕部分ごとに得られた字幕データと映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて前記決定手段が決定した表示時間を記録する記録手段と、所定の情報に基づいて記録方式を選択し、選択した記録方式に応じた記録動作を実行する記録方式選択手段と、を備え、前記記録手段は、動画の映像データとその字幕データとを逐次記録する第１の記録方式と、この動画の映像データの中から各字幕部分ごとにその映像データと字幕データとを対応付けて記録する第２の記録方式と、を有し、前記記録方式選択手段は、前記第１の記録方式によって記録された記録内容に対して前記第２の記録方式に応じた記録動作を実行することによって当該記録内容の書き換えを行う、ことを特徴とする。
更に、コンピュータに対して、上述した請求項１及び２記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項７及び８記載の発明）。

上記映像記録装置において、前記特定手段は、字幕データが重畳されているデジタル放送を受信して動画録画する際に、当該受信内容から動画の映像データと字幕データとを分離しながら字幕部分を順次特定してもよい（請求項３記載の発明）。

上記映像記録装置において、選択指示を受け付ける選択指示受付手段をさらに備え、前記選択指示受付手段が第１の選択指示を受け付けた場合、前記決定手段は、前記特定手段が特定した字幕部分の動画の映像データから静止画の映像データを生成し、生成した静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定し、前記記録手段は、前記取得手段によって字幕部分ごとに得られた字幕データと静止画の映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて、決定した表示時間を記録し、前記選択指示受付手段が第２の選択指示を受け付けた場合、前記取得手段は、前記字幕部分の動画の映像データを取得し、前記記録手段は、前記取得手段によって字幕部分ごとに得られた字幕データと動画の映像データを対応付けて記録してもよい（請求項４記載の発明）。

請求項２記載の発明において、前記記録方式選択手段は、前記第１の記録方式によって記録された記録内容を前記第２の記録方式に応じた記録内容に書き換える場合に、その書き換え対象を映像種別に基づいて選択するようにしてもよい（請求項５記載の発明）。また、前記記録方式選択手段は、前記第１の記録方式によって記録された記録内容を前記第２の記録方式に応じた記録内容に書き換える場合に、その書き換え対象を記録日時に基づいて選択するようにしてもよい（請求項６記載の発明）。

この発明は、デジタルデータとしての映像データから分離された字幕データに基づいて字幕が挿入される映像データの部分を字幕部分として順次特定するごとに、この字幕部分から字幕データ及び映像データを取得して字幕データと映像データとを対応付けて記録することにより、字幕が挿入されている映像部分をその字幕と共に順次記録するダイジェスト記録が可能となり、全体映像を逐次記録しなくても、その再生時には全体を容易に把握することが可能となる。

以下、図１〜図１２を参照して本発明の実施例を説明する。
この実施例は、映像再生装置としてテレビ受信機能付きの携帯電話装置に適用した場合を例示したもので、図１は、このテレビ受信録画再生機能付き携帯電話装置の基本的な構成要素を示したブロック図である。
この携帯電話装置には、通話機能、メール機能、インターネット接続機能（Ｗｅｂアクセス機能）などのほか、デジタルテレビ放送を受信するテレビ受信機能、受信したテレビ放送を録画（録音を含む）する録画機能、テレビ放送の録画内容やインターネットなどから外部供給された録画コンテンツを再生出力する再生機能などが備えられている。

ＣＰＵ１は、記憶部２内の各種のプログラムに応じてこの携帯電話装置の全体動作を制御する中核的な中央演算処理装置である。記憶部２は、内部メモリであり、プログラム領域とデータ領域とを有し、このプログラム領域には、後述する図９〜図１２に示す動作手順に応じて本実施例を実現するためのプログラムが格納されており、また、そのデータ領域には、後述する静止画テーブルＴＡ、文字数テーブルＴＢ、ジャンル別テーブルＴＣ、動画コンテンツＭＣなどが格納されている。外部記録メディア３は、着脱自在な可搬型メモリで、録画コンテンツなど、各種のデータ・プログラムを外部供給するもので、例えば、ＳＤカード、ＩＣカードなどによって構成されている。メモリ４は、ワーク領域を有する内部メモリであり、必要に応じてメモリ４内の各種のデータは、記憶部２にセーブされる。

電話通信部５は、無線部を構成するアンテナに接続された送受信部（ベースバンド部）の受信側から信号を取り込んで受信ベースバンド信号に復調したのちに、音響制御部６を介して受話スピーカ７から音声出力させる。また、電話通信部５は、送話マイク８から入力された音声データを音響制御部６から取り込み、送信ベースバンド信に符号化したのちに送受信部の送信側に与えられてアンテナから発信出力させる。一方、インターネット接続機能などによって電話通信部５を介して受信取得した映像コンテンツは、表示制御部９を介してＬＣＤ（液晶表示装置）などのメイン表示部１０に与えられて表示出力される。サブ表示部１１は現在日時、簡易なメッセージ、アイコンなどを表示する。

表示部１０は、テレビ放送を高画質に表示可能なＬＣＤ（液晶表示装置）などであり、キー操作部１２は、ダイヤル入力、文字入力、コマンド入力などを行うもので、テレビオン／オフキー、録画開始／停止キーなどが設けられており、ＣＰＵ１は、キー操作部１２からのキー入力信号に応じた処理を実行する。テレビ放送受信部１３は、携帯電話などの携帯受信機向けの地上波デジタルテレビ放送を受信するもので、テレビ映像及び音声情報以外にも電子番組表(ＥＰＧ)なども含めて受信可能となっており、テレビ映像データ及び文字データは、表示部１０から表示出力され、また、テレビ音声データは、サウンドスピーカ１４から出力される。

テレビ放送受信部１３は、図２に示す構成となっている。テレビ放送受信部１３は、テレビアンテナ（図示せず）に接続され、ユーザ操作に応じて受信チャンネルを選局して当該局の放送信号を抽出するチューナ１３Ａと、受信した放送信号をＯＦＤＭ（直交周波数分割多重）復調したり、多重化されている放送信号から映像、音声、データ（文字データ）に分離する多重化信号分離部１３Ｂ、この多重化信号分離部１３Ｂによって分離された映像信号、音声信号、文字信号を解析しながら復号化したり、圧縮データの解凍などを行う映像信号デコーダ部１３Ｃ、音声信号デコーダ部１３Ｄ、文字信号デコーダ部１３Ｅを有する構成となっている。

テレビ放送の予約録画などの録画指示を受けた場合、ＣＰＵ１は、この録画指示に応じて放送受信内容を録画する録画動作を実行し、記憶部２あるいは外部記録メディア３に動画録画ファイル（動画コンテンツ）として格納するようにしている。ここで、字幕付きの放送を受信した場合には、字幕部分以外の受信内容をジャンプして録画する録画方式「ダイジェスト録画」が指示されたか、それ以外の通常の録画方式「通常録画」が指示されたかをチェックし、「通常録画」が指示された場合には、放送受信内容をそのまま逐次録画する録画動作を実行するが、「ダイジェスト録画」が指示された場合には、放送受信内容から字幕部分を特定すると共に、この字幕部分ごとにその字幕データ及び映像データを録画するダイジェスト録画を実行するようにしている。

すなわち、字幕データが重畳されているデジタル放送を受信して動画録画する際に、ダイジェスト録画が指定されている場合には、映像データから分離された字幕データに基づいて字幕が挿入される映像データの部分を字幕部分として順次特定すると共に、この字幕部分の字幕データと映像データとを対応付けて記録するもので、ダイジェスト録画には、２種類の録画方式として、図３に示す「静止画ダイジェスト」と図４に示す「動画ダイジェスト」が設けられている。「静止画ダイジェスト」は、字幕部分が特定されるごとにその字幕部分に含まれている動画映像から生成された静止画映像を記録する録画方式である。なお、図３において斜線部分は、特定された字幕部分を示し、（１）、（２）、‥‥は、その特定順を示している。

この場合、テレビ放送受信部１３において、受信した映像信号は、動画圧縮方式（ＭＰＥＧ）によって圧縮符号化された信号であり、多重化信号分離部１３Ｂによって放送信号から分離された映像信号をフレームごとにデコードする際に、映像信号デコーダ部１３Ｃは、特定フレーム、例えば、字幕部分において最初に出現するＩフレーム（１枚の画像が単独圧縮されたフレーム）を抽出して静止画映像を生成するようにしている。この場合、字幕部分に含まれる複数のＩフレームを抽出してもよいが、この実施例では字幕部分の最初に出現する静止画映像（字幕挿入開始シーンの静止画映像）を抽出するようにしている。

「動画ダイジェスト」は、字幕部分が特定されるごとにその字幕部分に含まれている動画映像をその字幕データと共に順次記録する録画方式である。なお、図４において斜線部分は、特定された字幕部分を示し、（１）、（２）、‥‥は、その特定順を示している。ここで、ＣＰＵ1は、放送受信内容から字幕部分が特定されるごとに、それに含まれている動画映像と共にその字幕データを抽出して順次録画するためその録画量は（１）、（２）、‥‥となり、「通常録画」の場合に比べて大幅にコンパクト化される。

図５は、静止画テーブルＴＡを説明するための図である。
この静止画テーブルＴＡは、「静止画ダイジェスト」の録画指示に応じて作成されたテーブルであり、字幕部分ごとに「静止画映像データ」、「字幕データ」、「再生時間」を順次記憶する構成となっている。「静止画映像データ」は、字幕部分が特定されるごとにその字幕部分に含まれている動画映像から生成された静止画映像である。「字幕データ」は、字幕部分が特定されるごとにその字幕部分に含まれている文字列データである。「再生時間」は、字幕部分の映像データと字幕データを継続表示させるための時間であり、その字幕を構成する文字数に応じた時間がセットされる。なお、字幕部分が特定されるごとに、静止画テーブルＴＡには「静止画映像データ」、「字幕データ」、「再生時間」が順次格納される。

図６は、文字数テーブルＴＢを説明するための図である。
文字数テーブルＴＢは、静止画テーブルＴＡの「再生時間」を求める場合に参照されるテーブルであり、「字幕文字数」と「再生時間」とを対応付けて記憶する構成となっている。すなわち、「字幕文字数」が“１〜１０”のときには「再生時間」として“２秒”が設定され、“１１〜２０”のときには “４秒”、“２１〜３０”のときには “６秒”、‥‥、が設定されている。この場合、ＣＰＵ１は、静止画映像データを静止画テーブルＴＡに格納する際に、その「字幕データ」を構成する文字数を計数し、この計数値（字幕文字数）に基づいて文字数テーブルＴＢを検索して対応する「再生時間」を当該「字幕データ」と「静止画映像データ」の表示時間として決定するようにしている。

図７は、動画コンテンツＭＣを説明するための図である。
この動画コンテンツＭＣは、テレビ放送受信部１３から受信した放送内容を通常録画（逐次録画）することによって生成された録画内容あるいは外部供給された動画内容であり、記憶部２あるいは外部記録メディア３内の録画用メモリ（図示せず）に格納されている。この動画コンテンツＭＣには、動画映像データ、音声データ、文字（字幕）データごとに対応するデータ領域に区分されて記憶管理されている。なお、記憶部２あるいは外部記録メディア３に保存されている各種の動画コンテンツＭＣのうち、それを保存してから所定期間以上（例えば、２週間以上）経過した古い動画コンテンツＭＣについては、静止画ダイジェスト化（コンパクト化）するようにしている。つまり、通常録画された動画コンテンツＭＣの内容を静止画ダイジェスト化することでその録画量を大幅にコンパクト化するようにしている。

図８は、ジャンル別テーブルＴＣを説明するための図である。
このジャンル別テーブルＴＣは、保存されている動画コンテンツＭＣをそのジャンルに応じて静止画ダイジェスト化（コンパクト化）するか否かを決定する場合に参照されるもので、各ジャンルに対応してコンパクト化の可否を示す情報を記憶する構成となっている。例えば、図中、「○」は、コンパクト化を肯定する場合、「×」はそれを否定する場合で、「ドラマ」、「スポーツ」、「ニュース」に対応して「○」がセットされ、「映画」に対応して「×」がセットされている。

次にこの実施例における携帯電話装置の動作概念を図９〜図１２に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体のほかに、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施例特有の動作を実行することもできる。なお、図９〜図１２は、携帯電話装置の全体動作のうち、本実施例の特徴部分の動作概要を示したフローチャートであり、この図９〜図１２のフローから抜けた際には、全体動作のフロー（図示省略）に戻る。

図９及び図１０は、テレビ放送の録画を指示する指示操作に応じて実行開始される録画アプリケーション処理を示したフローチャートである。
先ず、ＣＰＵ１は、録画指示に応答して録画メニューを表示出力させる（ステップＡ１）。この録画メニュー画面は、録画方式を示すメニュー項目として「１：通常」、「２：静止画ダイジェスト」、「３：動画ダイジェスト」を一覧表示するもので、その中から任意のメニュー項目が選択指定されると（ステップＡ２）、その選択メニューを判別し、「１：通常」が選択されたかをチェックする（ステップＡ３）。

いま、「１：通常」のメニュー項目が選択されて通常録画が指定された場合には（ステップＡ３でＹＥＳ）、予め取得しておいた電子番組表(ＥＰＧ)を参照して、録画対象番組の放送時間を求めるほか、録画用のメモリ残量（例えば、標準的な画質で録画する場合の録画可能時間）を検出し、この放送時間とメモリ残量（録画可能時間）とを比較し（ステップＡ４）、今回の放送番組をその終了まで全て録画することができるか、つまり、フル録画が可能かをチェックする（ステップＡ５）。

ここで、フル録画が可能であれば、テレビ放送受信部１３で受信した放送内容を録画する録画動作を開始したのち（ステップＡ６）、録画終了を指示する終了操作あるいは当該番組の終了を指示する終了指示の有無をチェックしたり（ステップＡ７）、メモリ残量なしかをチェックし（ステップＡ８）、終了操作／終了指示があるまで（ステップＡ７でＹＥＳ）、残量なしが検出されるまで（ステップＡ８でＹＥＳ）、放送内容を逐次録画する録画動作が繰り返される。

一方、現在のメモリ残量ではフル録画が不可能であれば（ステップＡ５でＮＯ）、録画方式を再確認する確認メッセージを表示出力させて録画メニューを表示出力させる（ステップＡ９）。このメニュー画面の中から任意のメニュー項目が選択指定されると（ステップＡ１０）、その選択メニューを判別し、「１：通常」が選択されたかをチェックし（ステップＡ１１）、「１：通常」のメニュー項目が選択されて通常録画が指定された場合には（ステップＡ１１でＹＥＳ）、録画動作を開始させたのち（ステップＡ６）、終了指示あるいは残量なしが検出されるまで放送内容を録画する動作を行う（ステップＡ７、Ａ８）。

また、「１：通常」以外のメニューが選択された場合には（ステップＡ３あるいはＡ１１でＮＯ）、図１０のフローに移り、「２：静止画ダイジェスト」、「３：動画ダイジェスト」の何れが選択されたかを調べ（ステップＡ１２）、「２：静止画ダイジェスト」のメニュー項目が選択されて静止画ダイジェスト録画が指定された場合には、テレビ放送受信部１３で受信した放送内容が順次デコードされるごとに、そのデコード結果をチェックする（ステップＡ１３）。

この場合、テレビ放送受信部１３側において、多重化信号分離部１３Ｂは放送信号を映像、音声、文字データに分離し、映像信号デコーダ部１３Ｃ、音声信号デコーダ部１３Ｄ、文字信号デコーダ部１３Ｅは、分離された映像信号、音声信号、文字信号をデコードする動作を開始するが、その際、ＣＰＵ１は、放送受信内容から分離された文字（字幕）データに基づいて字幕の挿入開始シーン（字幕部分の先頭シーン）であるかをチェックする（ステップＡ１４）。この場合、文字データを解析しながら文字データの有無を調べ、文字が出現したシーンを字幕挿入開始シーンとして特定する。

ここで、字幕挿入開始シーンでなければ、ステップＡ１７に移るが、字幕挿入開始シーンであれば（ステップＡ１４でＹＥＳ）、そのシーンの「静止画映像データ」と「字幕データ」とを対応付けて静止画テーブルＴＡに記録する（ステップＡ１５）。そして、この字幕データを構成する文字数を計数すると共に、この計数値（字幕文字数）に基づいて文字数テーブルＴＢを検索し、字幕文字数対応の「再生時間」を決定し、この再生時間をその「字幕データ」及び「静止画映像データ」に対応付けて静止画テーブルＴＡに記録する（ステップＡ１６）。以下、録画終了を指示する終了操作あるいは当該番組の終了を指示する終了指示があるかを調べ（ステップＡ１７）、終了操作あるいは終了指示があるまでステップＡ１３に戻り、字幕挿入開始シーンを検出するごとに、この「静止画映像データ」及び「字幕データ」と共にその「再生時間」を静止画テーブルＴＡに記録する動作を繰り返す。

また、「３：動画ダイジェスト」のメニュー項目が選択されて動画ダイジェスト録画が指定された場合には（ステップＡ１２でＮＯ）、上述の場合と同様に、テレビ放送受信部１３で受信した放送内容が順次デコードしてその内容をチェックし（ステップＡ１８）、字幕挿入開始シーン（字幕部分の最初のシーン）であれば（ステップＡ１９でＹＥＳ）、このシーンから録画動作を開始する（ステップＡ２０）。更に、受信内容を順次デコードして、その内容をチェックし（ステップＡ２１）、字幕挿入終了シーン（字幕部分の末尾シーン）であれば（ステップＡ２２でＹＥＳ）、録画動作を停止させる（ステップＡ２３）。以下、録画終了を指示する終了操作あるいは当該番組の終了を指示する終了指示があるかを調べ（ステップＡ２４）、終了操作あるいは終了指示があるまでステップＡ１８に戻り、字幕部分を検出するごとに、その字幕挿入開始シーンから終了シーンまでの動画映像を記録する動作を繰り返す。

図１１は、動画コンテンツＭＣをコンパクト化（静止画ダイジェスト化）する場合の動作を示したフローチャートである。
先ず、動画コンテンツＭＣのコンパクト化を指示する指示操作に応答してＣＰＵ１は、記憶部２あるいは外部記録メディア３に保存されている各種の動画コンテンツＭＣのうち、それを保存してから所定期間以上（例えば、２週間以上）経過した古い動画コンテンツＭＣが存在しているかを判別し（ステップＢ１）、古い動画コンテンツＭＣがあれば、その何れかを該当コンテンツとして指定する（ステップＢ２）。

そして、指定コンテンツに付加されている種別に基づいてジャンル別テーブルＴＣを参照し、コンパクト化（ダイジェスト化）の可否を判別し（ステップＢ３）、不可であれば、ステップＢ５に移り、他の該当コンテンツがあることを条件にそのコンテンツを指定したのち（ステップＢ２）、この指定コンテンツの種別に基づいてコンパクト化の可否を判別し（ステップＢ３）、コンパクト化が可能なジャンルであれば、この指定コンテンツをコンパクト化対象コンテンツとして特定する（ステップＢ４）。以下、全ての該当コンテンツを指定し終わるまで（ステップＢ５）、上述の動作を繰り返す。

このようにして特定されたコンパクト化対象コンテンツのうち、その何れかを指定したのち（ステップＢ１０）、この指定コンテンツの内容をチェックし（ステップＢ１１）、字幕挿入開始シーンであるかを調べる（ステップＢ１２）。この場合、指定コンテンツの内容（文字データ）を解析しながら文字データの有無を調べ、文字が出現したシーンを字幕挿入開始シーンとして特定する。ここで、字幕挿入開始シーンでなければ、ステップＢ１５に移るが、字幕挿入開始シーンであれば（ステップＢ１２でＹＥＳ）、このシーンの「静止画映像データ」と「字幕データ」とを対応付けて静止画テーブルＴＡに記録する（ステップＢ１３）。そして、この字幕データを構成する文字数を計数すると共に、この計数値（字幕文字数）に基づいて文字数テーブルＴＢを検索し、字幕文字数対応の「再生時間」を決定し、この再生時間をその「字幕データ」及び「静止画映像データ」に対応付けて静止画テーブルＴＡに記録する（ステップＢ１４）。

以下、当該指定コンテンツの終了位置に達したかを調べ（ステップＢ１５）、終了位置に達するまでステップＢ１１に戻り、字幕挿入開始シーンを検出するごとに、この「静止画映像データ」及び「字幕データ」と共にその「再生時間」を静止画テーブルＴＡに記録する動作を繰り返す。これによって１つの動画コンテンツＭＣをコンパクト化（静止画ダイジェスト化）したのちは、他の対象コンテンツの有無を調べ（ステップＢ１６）、全ての対象コンテンツをコンパクト化するまでステップＢ１０に戻り、上述の動作を繰り返す。

一方、保存してから所定期間以上（例えば、２週間以上）経過した古い動画コンテンツＭＣが存在しているかを判別した結果（ステップＢ１）、古い動画コンテンツＭＣがなければ、ステップＢ６に移り、動画コンテンツＭＣに付加されている種別に基づいてジャンル別テーブルＴＣを参照し、コンパクト化が可能なコンテンツがあるかを調べる。この結果、１つも該当するコンテンツが存在していなければ、コンパクト化の不可を示す案内メッセージを表示出力させるが（ステップＢ１７）、該当するコンテンツが存在していれば（ステップＢ６でＹＥＳ）、そのコンテンツ名と共に、その種別を一覧表示させる（ステップＢ７）。

そして、この一覧画面の中から任意のコンテンツが選択指定されたかを調べ（ステップＢ８）、コンテンツの選択がなければ、全ての動画コンテンツＭＣをそのままの状態で保存することが指定されたもの判断して、ステップＢ１７に移り、コンパクト化の不可を示す案内メッセージを表示出力させるが、何れかのコンテンツが選択された場合には（ステップＢ８でＹＥＳ）、この選択コンテンツをコンパクト化対象のコンテンツとして指定したのち（ステップＢ９）、以下、上述の動作を繰り返す（ステップＢ１０〜Ｂ１６）。これによって任意に選択した動画コンテンツＭＣがコンパクト化（静止画ダイジェスト化）される。

図１２は、コンテンツ再生処理を示したフローチャートである。
先ず、ＣＰＵ１は、記憶部２あるいは外部記録メディア３に保存されている動画コンテンツＭＣのほか、静止画ダイジェスト、動画ダイジェストを含めたコンテンツメニューを表示出力させたのち（ステップＣ１）、このメニュー画面の中から何れかのコンテンツが再生対象として選択指定されると（ステップＣ２）、この選択コンテンツは動画であるかをチェックする（ステップＣ３）。すなわち、選択コンテンツは、動画コンテンツＭＣあるいは動画ダイジェストであるかを調べ、再生対象が動画であれば、その内容を逐次再生する動画再生を開始する（ステップＣ４）。そして、再生終了を指示する終了操作あるいは当該コンテンツの終了指示があるまで（ステップＣ５）、その動画再生を継続する。

また、再生対象として選択されたコンテンツが静止画ダイジェストであれば（ステップＣ３でＮＯ）、その静止画テーブルＴＡの先頭位置から「字幕データ」、「静止画映像データ」を読み出して表示出力させる（ステップＣ６）。このように字幕付き映像のダイジェスト再生を開始したのち、その「再生時間」が経過したかを調べ（ステップＣ７）、再生時間が経過する前に送り操作が行われたときには（ステップＣ８でＹＥＳ）、静止画テーブルＴＡをアクセスして次の静止画映像の有無を調べる（ステップＣ９）。

すなわち、静止画テーブルＴＡの内容を全て表示させたかを調べ、次の静止画映像が未表示あれば、この静止画映像を指定したのち（ステップＣ１０）、上述のステップＣ６に戻り、その「字幕データ」と共に表示出力させる。また、「再生時間」の経過が検出されたときには（ステップＣ７でＹＥＳ）、上述のステップＣ９に移り、次の静止画映像の有無を調べ、静止画テーブルＴＡの内容を全て表示出力させるまで上述の動作を繰り返す。

以上のように、この実施例においては、テレビ放送受信部１３によって受信した映像データに重畳されている字幕データが映像データから分離されると共に、この字幕データが挿入される映像部分が字幕部分として順次特定されるごとに、ＣＰＵ１は、この字幕部分から字幕データ及び映像データを取得して記録することにより、字幕が付いている部分の映像を字幕と共に順次記録するダイジェスト録画が可能となり、全体映像を逐次記録しなくても、その再生時には全体を容易に把握することが可能となる。この場合、再生時に録画内容自体を解析することによって重要部分を特定するのではなく、映像から分離された文字から字幕部分を特定することによってその特定を迅速かつ正確に行うことが可能となり、また、ユーザ操作に依存することなく、各字幕部分の連続的な再生が可能となる。

この場合、字幕部分ごとの映像データは、この字幕部分の動画映像から得られた静止画映像であり、録画内容のコンパクト化が可能となるほか、再生時には静止画テーブルＴＡから読み出して再生表示するだけでよく、能率のよい再生が可能となる。
また、字幕部分の動画映像から静止画映像を生成する際に、字幕検出後に最初に出現するＩフレームを静止画映像として抽出することによって動画映像から静止画映像を生成することにより、動画映像から静止画映像への変換を効率良く行うことができる。また、字幕付きの静止画を再生表示する再生時間は、この字幕データを構成する文字数に基づいて決定された時間であり、文字数に比例して再生時間を長くすることができ、実状に即したものとなる。

また、テレビ番組を通常録画している際に、現在のメモリ残量では、その番組内容を最後まで録画することができない場合に、録画方式として「通常録画」から「ダイジェスト録画」に切り替えることができ、メモリ残量が少ない場合でも番組の全体概要を録画することができる。また、各種の動画コンテンツＭＣの中から保存期間の長い動画コンテンツＭＣについては、静止画ダイジェスト化（コンパクト化）することによってその書き換えを行うことにより、その記憶容量の削減が可能となる。この場合、保存期間の長い動画コンテンツＭＣのうち、特定ジャンルの動画コンテンツＭＣをコンパクト化の対象とすることができ、古い動画コンテンツＭＣであっても特定ジャンル以外の動画コンテンツＭＣについては、そのまま保存することができる。

また、デジタル放送を受信して動画録画する際に、その録画方式として「通常」、「静止画ダイジェスト」、「動画ダイジェスト」をメニュー表示し、その中から任意の録画方式を選択可能とすることにより、ユーザの希望に応じた録画が可能となる。
また、静止画ダイジェストの再生時には「再生時間」に応じて字幕付き映像が順次切り替え表示されるが、その際、送り操作が行われた場合には、次の字幕付き映像に切り替え表示されるので、ユーザにとって不要な字幕部分の再生をジャンプすることができる。

なお、上述した実施例においては、予約録画については、言及していないが、予約日時に達した際に、ユーザ操作による録画の場合と同様の動作が行うようにすればよい。また、音声についても、特に言及していないが、静止画ダイジェストの録画時には、録音をカットしてもよく、また、動画ダイジェストの録画時には、字幕部分ごとに録音を行うようにしてもよい。

また、上述した実施例においては、字幕を構成する文字数からその字幕部分の「再生時間」を決定するようにしたが、字幕部分の時間的な長さに応じてその部分の「再生時間」を決定するようにしてもよい。すなわち、同一の文字列の挿入時間に比例して「再生時間」を決定するようにしてもよい。更には、字幕部分ごとの再生時間を一定時間としてもよい。

上述した実施例においては、デジタル放送を受信してダイジェスト録画する場合を例示したが、デジタル放送の録画に限らず、インターネットあるいは外部記録メディア３から外部供給された映画コンテンツを録画する場合にも、上述と同様に、映像データから分離された文字データから字幕部分を特定し、その部分の「映像データ」と「字幕データ」とを対応付けて静止画テーブルＴＡに記憶するようにしてもよい。

また、上述した実施例においては、録画メニュー画面の中から「１：通常」が選択された場合、現在のメモリ残量ではフル録画が不可能であれば、録画方式を再確認する確認メッセージを表示出力させたが、通常録画から動画ダイジェスト録画に切り替えるようにしてもよい。この場合、通常録画から動画ダイジェスト録画に切り替える旨を案内表示してもよい。また、録画メニュー画面の中から「３：動画ダイジェスト」が選択された場合、現在のメモリ残量が所定量以下の場合には、動画ダイジェスト録画から静止画ダイジェスト録画に切り替えるようにしてもよい。

上述した実施例においては、静止画ダイジェスト録画する場合に、字幕部分の動画映像から１枚の静止画映像を得るようにしたが、字幕部分ごとに複数ごとの静止画映像を得るようにしてもよい。また、上述した実施例においては、動画コンテンツＭＣをコンパクト化する場合に、静止画ダイジェスト化するようにしたが、動画ダイジェスト化するようにしてもよい。
その他、映像記録機能付きの携帯電話装置に限らず、例えば、映像記録機能付きのＰＤＡ・電子カメラ・電子腕時計などの携帯端末装置であっても同様に適用可能であり、更に、携帯端末装置に限らず、据え置型の映像記録装置であってもよい。

映像記録装置として適用したテレビ受信録画再生機能付き携帯電話装置の基本的な構成要素を示したブロック図。 テレビ放送受信部１３の構成を示したブロック図。 録画方式としての「静止画ダイジェスト」を説明するための図。 録画方式としての「動画ダイジェスト」を説明するための図。 静止画テーブルＴＡを説明するための図。 文字数テーブルＴＢを説明するための図。 動画コンテンツＭＣを説明するための図。 ジャンル別テーブルＴＣを説明するための図。 テレビ放送の録画を指示する指示操作に応じて実行開始される録画アプリケーション処理を示したフローチャート。 図９に続く、フローチャート。 動画コンテンツＭＣをコンパクト化（静止画ダイジェスト化）する場合の動作を示したフローチャート。 コンテンツ再生処理を示したフローチャート。

符号の説明

１ ＣＰＵ
２ 記憶部
３ 外部記録メディア
９ 表示制御部
１０ メイン表示部
１２ キー操作部
１３ テレビ放送受信部
１３Ａ チューナ
１３Ｂ 多重化信号分離部
１３Ｃ 映像信号デコーダ部
１３Ｄ 音声信号デコーダ部
１３Ｅ 文字信号デコーダ部
１４ サウンドスピーカ
ＴＡ 静止画テーブル
ＴＢ 文字数テーブル
ＴＣ ジャンル別テーブル
ＭＣ 動画コンテンツ

Claims (8)

1. デジタル映像データを順次記録する映像記録装置であって、
   前記映像データから分離された字幕データに基づいて字幕が挿入される動画の映像データの部分を字幕部分として順次特定する特定手段と、
   この特定手段によって字幕部分が順次特定されるごとに、この字幕部分に相当する字幕データ及び静止画の映像データを取得する取得手段と、
   前記特定手段が特定した字幕部分の動画の映像データから静止画の映像データを生成するほか、この静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定する決定手段と、
   前記取得手段によって字幕部分ごとに得られた字幕データと映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて前記決定手段が決定した表示時間を記録する記録手段と、
   記録用のメモリ残量を検出する残量検出手段と、
   所定の情報に基づいて記録方式を選択し、選択した記録方式に応じた記録動作を実行する記録方式選択手段と、を備え、
   前記記録手段は、
   動画の映像データとその字幕データとを逐次記録する第１の記録方式と、
   この動画の映像データの中から各字幕部分ごとにその映像データと字幕データとを対応付けて記録する第２の記録方式と、を有し、
   前記記録方式選択手段は、
   前記残量検出手段によって検出されたメモリ残量に応じて、前記第１の記録方式に代わって前記第２の記録方式を選択して当該方式に応じた記録動作を実行する、
   ことを特徴とする映像記録装置。
2. デジタル映像データを順次記録する映像記録装置であって、
   前記映像データから分離された字幕データに基づいて字幕が挿入される動画の映像データの部分を字幕部分として順次特定する特定手段と、
   この特定手段によって字幕部分が順次特定されるごとに、この字幕部分に相当する字幕データ及び静止画の映像データを取得する取得手段と、
   前記特定手段が特定した字幕部分の動画の映像データから静止画の映像データを生成するほか、この静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定する決定手段と、
   前記取得手段によって字幕部分ごとに得られた字幕データと映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて前記決定手段が決定した表示時間を記録する記録手段と、
   所定の情報に基づいて記録方式を選択し、選択した記録方式に応じた記録動作を実行する記録方式選択手段と、を備え、
   前記記録手段は、
   動画の映像データとその字幕データとを逐次記録する第１の記録方式と、
   この動画の映像データの中から各字幕部分ごとにその映像データと字幕データとを対応付けて記録する第２の記録方式と、を有し、
   前記記録方式選択手段は、
   前記第１の記録方式によって記録された記録内容に対して前記第２の記録方式に応じた記録動作を実行することによって当該記録内容の書き換えを行う、
   ことを特徴とする映像記録装置。
3. 前記特定手段は、字幕データが重畳されているデジタル放送を受信して動画録画する際に、当該受信内容から動画の映像データと字幕データとを分離しながら字幕部分を順次特定する、
   ことを特徴とする請求項１又は２に記載の映像記録装置。
4. 選択指示を受け付ける選択指示受付手段をさらに備え、
   前記選択指示受付手段が第１の選択指示を受け付けた場合、
   前記決定手段は、前記特定手段が特定した字幕部分の動画の映像データから静止画の映像データを生成し、生成した静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定し、
   前記記録手段は、前記取得手段によって字幕部分ごとに得られた字幕データと静止画の映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて、決定した表示時間を記録し、
   前記選択指示受付手段が第２の選択指示を受け付けた場合、
   前記取得手段は、前記字幕部分の動画の映像データを取得し、
   前記記録手段は、前記取得手段によって字幕部分ごとに得られた字幕データと動画の映像データを対応付けて記録する、
   ことを特徴とする請求項１乃至３のいずれか１項に記載の映像記録装置。
5. 前記記録方式選択手段は、
   前記第１の記録方式によって記録された記録内容を前記第２の記録方式に応じた記録内容に書き換える場合に、その書き換え対象を映像種別に基づいて選択する、
   ことを特徴とする請求項２に記載の映像記録装置。
6. 前記記録方式選択手段は、
   前記第１の記録方式によって記録された記録内容を前記第２の記録方式に応じた記録内容に書き換える場合に、その書き換え対象を記録日時に基づいて選択する、
   ことを特徴とする請求項２に記載の映像記録装置。
7. コンピュータに、
   デジタル映像データから分離された字幕データに基づいて字幕が挿入される動画の映像データの部分を字幕部分として順次特定する処理と、
   字幕部分が順次特定されるごとに、この字幕部分に相当する字幕データ及び静止画の映像データを取得する処理と、
   特定した字幕部分の動画の映像データから静止画の映像データを生成するほか、この静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定する処理と、
   字幕部分ごとに得られた字幕データと映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて決定した表示時間を記録する処理と、
   記録用のメモリ残量を検出する処理と、
   検出されたメモリ残量に応じて、動画の映像データとその字幕データとを逐次記録する第１の記録方式に代わってこの動画の映像データの中から各字幕部分ごとにその映像データと字幕データとを対応付けて記録する第２の記録方式を選択して当該方式に応じた記録動作を実行する処理と、
   を実行させるプログラム。
8. コンピュータに、
   デジタル映像データから分離された字幕データに基づいて字幕が挿入される動画の映像データの部分を字幕部分として順次特定する処理と、
   字幕部分が順次特定されるごとに、この字幕部分に相当する字幕データ及び静止画の映像データを取得する処理と、
   特定した字幕部分の動画の映像データから静止画の映像データを生成するほか、この静止画の映像データを再生表示する際の表示時間をその字幕データのデータ量に応じて決定する処理と、
   字幕部分ごとに得られた字幕データと映像データを対応付けて記録し、また、字幕部分ごとに前記静止画の映像データに対応付けて決定した表示時間を記録する処理と、
   動画の映像データとその字幕データとを逐次記録する第１の記録方式によって記録された記録内容に対して、この動画の映像データの中から各字幕部分ごとにその映像データと字幕データとを対応付けて記録する第２の記録方式に応じた記録動作を実行することによって当該記録内容の書き換えを行う処理と、
   を実行させるプログラム。

Images