JP2008118237A - 映像編集装置 - Google Patents

Abstract

【課題】
映像の切り替えがあっても、フレーム又はフィールドに固有の付加情報を映像と適切に対応付けする。
【解決手段】
映像信号切替えスイッチ１２は、映像信号３２，３６のいずれか一方を選択する。選択された映像信号は、タイムコード分離装置１６及び復号化装置１８を介してフレームバッファ２０に格納される。制御回路２５は、復号化装置１８の動作状況に従い、フレームバッファ２０から読み出すべき映像信号と、タイムコード生成装置２４の生成するタイムコードを制御する。フレームバッファ２０は、リファレンス信号生成装置２２からのリファレンス信号に同期して、指定された映像信号を読み出す。信号重畳装置２６は、フレームバッファ２０からの映像信号に、タイムコード生成装置２４からのタイムコードを重畳する。
【選択図】 図１

Description

本発明は、ＤＶＣ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｃａｍｅｒａ）等の撮像装置からの映像信号を入力する映像編集装置に関し、より具体的には、フィールドまたはフレーム単位で映像信号及び付加情報を同期させる映像編集装置に関する。

近年、高精細画像対応大画面テレビの普及に伴い、撮影も高精細画質で行いたいというニーズが高まっている。また、複数のＤＶＣで撮影を行ない、簡易なシステムで編集を行いたいという要求があり、様々な編集形態、手法が提案されている。

例えば、特許文献１には、メモリを用いて時間軸補正等を行なうビデオ信号処理装置が記載されている。メモリから読み出されたビデオ信号の同期信号を基準同期信号に置換する場合に、垂直帰線期間におけるデータが失われないようにする。
特開平０５−１３０５６８号公報

放送局及びスタジオ等で映像機器間の映像信号の伝送には、ＳＤＩ（Ｓｅｒｉａｌ Ｄｅｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ）信号が広く用いられている。放送局及びスタジオ等では、ハウスシンク信号を利用し、編集作業を行う際の時刻の同期を取っている。編集機等はフレームシンクロナイズ機能を有し、映像信号の同期を取って、ＳＤＩ信号を伝送する。符号化された映像信号を扱う編集機のデコーダもまた、フレームシンクロナイズ機能を有する。

デコーダに入力される映像信号にＶＩＴＣ（Ｖｅｒｔｉｃａｌ Ｉｎｔｅｒｖａｌ Ｔｉｍｅ Ｃｏｄｅ）等のフレーム又はフィールドに固有の付加情報が重畳されている場合、デコーダにより復号化された映像信号に対しても、フレーム又はフィールドに対応付けられた付加情報が重畳されなければならない。

しかし、ハウスシンク信号を利用して時刻の同期を取る場合、復号化処理で１フレーム飛ばしたり、同一のフレームを繰り返して出力する処理が行われたときに、復号化された映像信号に対して正確にフレーム又はフィールドに固有の付加情報を対応付けすることが難しかった。

本発明は、上記の問題点に鑑み、フレーム又はフィールドに固有の付加情報を映像と適切に対応付けできる簡易な構成の映像編集装置を提供することを目的とする。

上記の目的を達成するために、本発明に係る映像編集装置は、入力される複数の映像から１つを選択する映像選択手段と、当該映像選択手段で選択された映像を処理する映像処理手段と、当該映像処理手段で処理された映像を記憶する映像バッファと、フレームまたはフィールドに固有の付加情報を生成する付加情報生成手段と、当該付加情報生成手段で生成される付加情報を、当該映像バッファから読み出された映像に重畳する重畳手段と、当該映像処理手段の処理状況に応じて、当該付加情報生成手段の生成する付加情報を制御する制御手段とを具備することを特徴とする。

本発明によれば、映像の切り替えがあっても、フレーム又はフィールドに固有の適切な付加情報を重畳して、映像を連続的に出力できる。

以下、図面を参照して、本発明の実施例を詳細に説明する。

図1は、本発明の一実施例である映像編集装置の概略構成ブロック図である。映像編集装置１０には、撮像装置３０から映像信号３２が入力し、撮像装置３４から映像信号３６が入力する。映像信号３２，３６は、例えば、符号化されたエレメンタリーストリーム（ＥＳ）である。

映像編集装置１０の映像信号切替えスイッチ１２は、撮像装置３０からの映像信号３２と撮像装置３４からの映像信号３６のいずれか一方を選択する。そして、選択した映像信号をビデオ信号検出装置１４とタイムコード分離装置１６に供給する。

垂直同期検出装置１４は、映像信号切替えスイッチ１２で選択された映像信号３２又は３６からフレームパルス（ＩＮＰＵＴ＿Ｆｒａｍｅ）又は垂直同期信号Ｖｓｙｎｃを検出する。垂直同期検出装置１４は、検出したフレームパルスをフレームバッファ２０に印加する。詳細は後述するが、フレームバッファ２０は、垂直同期検出装置１４からのフレームパルスＶｓｙｎｃに同期して、復号化装置１８の出力データを取り込む。

タイムコード分離装置１６は、映像信号切替えスイッチ１２で選択された映像信号３２又は３６から、各フレーム又はフィールドに付加されている付加情報としてのタイムコードを分離、即ち削除する。タイムコード分離装置１６は、タイムコードを除去した映像信号を復号化装置１８に供給する。このようにして、スイッチ１２によりどちらの映像信号３２，３６を選択しようと、復号化装置１８には、付加情報を除去した符号化映像信号が入力する。復号化装置１８が符号化映像信号の復号化の際に付加情報を無視する場合には、タイムコード分離装置１６は不要である。

復号化装置１８は、タイムコード分離装置１６からの符号化された映像信号を、その符号化方式に応じた方法で復号化し、復号化により復元された映像信号をフレームバッファ２０に印加する。フレームバッファ２０は、垂直同期検出装置１４からのフレームパルスＶｓｙｎｃに従い、復号化装置１８の出力映像信号を取り込む。フレームバッファ２０は、数フレーム分の映像信号を記憶可能な容量を具備する。

リファレンス信号生成装置２２は、自走する発振器を内蔵しており、基準となる垂直同期信号、即ち垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆを生成し、フレームバッファ２０と、タイムコード生成装置２４に印加する。

タイムコード生成装置２４は、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆに同期して、フレーム毎又はフィールド毎に固有のタイムコードを生成し、信号重畳装置２６に印加する。制御回路２５は、復号化装置１８における復号化状態を監視し、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの立ち上がり時点の復号化装置１８の復号化状態に応じて、タイムコード生成装置２４の生成するタイムコードを制御する。即ち、タイムコード生成装置２４が生成するタイムコードは、入力映像信号３２，３６に付加されているタイムコードとは無関係であるが、復号化装置１８の復号化状態に依存する。この詳細は、具体例に即して、後述する。

フレームバッファ２０は、リファレンス信号生成装置２２からの垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆに従い、記憶する映像信号を信号重畳装置２６に読み出す。

信号重畳装置２６は、フレームバッファ２０からの映像信号に、タイムコード生成装置２４からのタイムコードを重畳する。信号重畳装置２６の重畳結果が、映像編集装置１０の出力４０として外部に出力される。

映像編集装置１０のフレームシンクロナイズ機能を説明する。説明の便宜上、復号化装置１８の復号化処理による遅延が1フレームであるとする。図２乃至図５において、映像信号３２のフレームをＦａ１〜Ｆａ７で示し、映像信号３６のフレームをＦｂ１〜Ｆｂ７で示す。１〜７はフレーム番号である。

先ず、図２乃至図５を参照して、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの周期が映像信号３２，３６のフレームパルス周期よりも若干短い場合の動作を説明する。

図２は、継続的に映像信号３２を選択した場合のタイミングチャートを示す。図２（１）は、垂直同期検出装置１４により検出されるフレームパルスＶｓｙｎｃである。同（２）は、スイッチ１２により選択される映像信号（のフレーム）である。同（３）は復号化装置１８の出力映像信号（のフレーム）である。同（４）はリファレンス信号生成装置２２の出力する垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆである。同（５）は、フレームバッファ２０から読み出される映像信号（のフレーム）である。同（６）は、タイムコード生成装置２４の生成するタイムコードである。

図２に示す例では、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの周期が、選択された映像信号３２の垂直同期信号の周期よりも若干短くなる。このことから、フレームＦａ３をフレームバッファ２０から読み出した後の、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの立ち上がり時点で、フレームバッファ２０に、次のフレームＦａ４が存在しない。この事実を、制御回路２５は、復号化装置１８の動作状態を継続的に監視することで、認識できる。この状況を検出すると、制御回路２５は、フレームメモリ２０からフレームＦａ３を再度、読み出すことを指示し、タイムコード生成回路２４には、同じタイムコード値の繰り返し出力を指示する。この結果、図２（５）に示すように、出力フレームとして、フレームＦａ３が2回繰り返され、図２（６）に示すように、この２つの同じフレームＦａ３に対して、同じタイムコード”３”が付加される。

図３は、復号化装置１８が映像信号３２のフレームＦａ４の復号化を開始する前又は復号化途中に、切替えスイッチ１２をユーザの指示に応じて即座に映像信号３２から映像信号３６に切り替えた場合のタイミングチャートを示す。図３（１）は、垂直同期検出装置１４により検出されるフレームパルスＶｓｙｎｃである。同（２）は、スイッチ１２により選択される映像信号（のフレーム）である。同（３）は復号化装置１８の出力映像信号（のフレーム）である。同（４）はリファレンス信号生成装置２２の出力する垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆである。同（５）は、フレームバッファ２０から読み出される映像信号（のフレーム）である。同（６）は、タイムコード生成装置２４の生成するタイムコードである。

図３の例では、最初のフレームＦａ３がフレームバッファ２０から読み出された後に、次のフレームＦａ４も、切り替え後の映像信号のフレームＦｂ１もフレームバッファ２０に格納されていない。従って、制御回路２５は、切替え前の映像信号３２の最後のフレームＦａ３の再読み出しを指示し、タイムコード生成回路２４には、同じタイムコード値の繰り返し出力を指示する。この動作を、切り替え後の映像信号のフレームＦｂ１もフレームバッファ２０に格納されているときまで、繰り返す。

結局、フレームＦａ３をフレームバッファ２０から読み出した後の、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの３回の立ち上がり時点で、フレームバッファ２０に、映像信号３２の次のフレームＦａ４も、切替え後の映像信号３６のフレームＦｂ１も存在しないことになる。このようにして、図３に示す例では、切替え前の映像信号のフレームＦａ３が４回繰り返して出力され、これらのフレームには同じタイムコード”３”が付加される。その後、切替え後の映像信号３６のフレームＦｂ１，Ｆｂ２が、それぞれタイムコード”１”，”２”を付加されて、順に出力される。

図４は、映像信号３２から映像信号３６へのユーザ切替指示に対して、映像信号３２の最後のフレームＦａ４の復号化処理を完了して、フレームバッファ２０に格納した後に、切替えスイッチ１２が映像信号３２から映像信号３６に切り替わった場合のタイミングチャートを示す。図３との相違は、映像信号３２のフレームＦａ４を出力できる点であり、これに応じて、タイムコード生成装置２４の生成するタイミングコードも更新される。図４（１）は、垂直同期検出装置１４により検出されるフレームパルスＶｓｙｎｃである。同（２）は、スイッチ１２により選択される映像信号（のフレーム）である。同（３）は復号化装置１８の出力映像信号（のフレーム）である。同（４）はリファレンス信号生成装置２２の出力する垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆである。同（５）は、フレームバッファ２０から読み出される映像信号（のフレーム）である。同（６）は、タイムコード生成装置２４の生成するタイムコードである。

図４に示す例では、最初のフレームＦａ３がフレームバッファ２０から読み出された後に、次のフレームＦａ４も切り替え後の映像信号３６のフレームＦｂ１もフレームバッファ２０に格納されていない。よって、フレームＦａ３が同じタイムコード”３”を付加されて、繰り返し出力される。

この後の垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの立ち上がり時点で、フレームバッファ２０に映像信号３２の次のフレームＦａ４が格納されており、切り替え後の映像信号３６のフレームＦｂ１が格納されていない。このときは、切替え前の映像信号のフレームＦａ４が、タイムコード”４”を付加されて出力される。

更に次の垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの立ち上がり時点で、フレームバッファ２０に切り替え後の映像信号３６の次のフレームＦａ４が格納されており、切り替え後の映像信号３６のフレームＦｂ１が格納されていない。このときは、切替え前の映像信号３２のフレームＦａ４が再び、タイムコード”４”を付加されて出力される。

フレームＦａ４が２回、出力された後では、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの立ち上がり時点で、フレームバッファ２０に切り替え後の映像信号３６の次のフレームＦｂ１が格納されている。このとき、制御回路２５は、フレームＦｂ１の読み出しをフレームバッファ２０に指示し、タイムコードの更新をタイムコード生成回路２４に指示する。

このようにして、図４に示す例では、切り替え前の映像信号３２のフレームＦａ３が２回、フレームＦａ４が２回、出力された後に、切り替え後の映像信号３６のフレームＦｂ１が出力される。複数回出力されるフレームＦａ３，Ｆａ４には、それぞれに同じタイムコードが付加され、切り替え後の映像信号には、フレーム毎に異なる固有のタイムコードが付加される。

同じフレームを繰り返し出力する場合、同じフレームに同じタイムコードを付与せずに、異なるタイムコードを付与しても良い。図５は、図４に示すのと同じ例で、同じフレームＦａ３，Ｆａ４に異なるタイムコードを付与する場合のタイミングチャートを示す。図５（１）は、垂直同期検出装置１４により検出されるフレームパルスＶｓｙｎｃである。同（２）は、スイッチ１２により選択される映像信号（のフレーム）である。同（３）は復号化装置１８の出力映像信号（のフレーム）である。同（４）はリファレンス信号生成装置２２の出力する垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆである。同（５）は、フレームバッファ２０から読み出される映像信号（のフレーム）である。同（６）は、タイムコード生成装置２４の生成するタイムコードである。

図５に示す例では、制御回路２５は、同じフレームの出力に対し、タイミングコード生成装置２４にタイムコードの更新を指示する。

図６及び図７を参照して、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの周期が映像信号３２，３６のフレームパルス周期よりも若干長い場合の動作を説明する。

図６は、継続的に映像信号３２を選択する場合のタイミングチャートを示す。図６（１）は、垂直同期検出装置１４により検出されるフレームパルスＶｓｙｎｃである。同（２）は、スイッチ１２により選択される映像信号（のフレーム）である。同（３）は復号化装置１８の出力映像信号（のフレーム）である。同（４）はリファレンス信号生成装置２２の出力する垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆである。同（５）は、フレームバッファ２０から読み出される映像信号（のフレーム）である。同（６）は、タイムコード生成装置２４の生成するタイムコードである。

図６に示す例では、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの３回目の立ち上がり及び２回目の立ち上がりでは、フレームＦａ４の復号化が開始されており、フレームバッファ２０から読み出しに対応できる。そこで、図６（５）に示すように、フレームＦａ２の読み出しの後、フレームＦａ３をスキップして、フレームＦａ４をフレームバッファ２０から読み出す。

このように、図６に示す例では、垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆの周期が長い分、適宜に、間引きを行う。但し、タイムコードについては、元の映像の連続性を尊重し、間引きを考慮して、タイムコードもスキップさせる。即ち、制御回路２５は、フレームバッファ２０から読み出すフレームをスキップする場合、タイムコード生成装置２４にも、同様にスキップしたタイムコードを生成させる。

図７は、継続的に映像信号３２を選択する場合で、フレームのスキップがあっても、タイムコードをスキップしないようにした例のタイミングチャートを示す。図７（１）は、垂直同期検出装置１４により検出されるフレームパルスＶｓｙｎｃである。同（２）は、スイッチ１２により選択される映像信号（のフレーム）である。同（３）は復号化装置１８の出力映像信号（のフレーム）である。同（４）はリファレンス信号生成装置２２の出力する垂直同期リファレンス信号Ｖｓｙｎｃ−ｒｅｆである。同（５）は、フレームバッファ２０から読み出される映像信号（のフレーム）である。同（６）は、タイムコード生成装置２４の生成するタイムコードである。

図７に示す例では、制御回路２５は、フレームバッファ２０から読み出すフレームをスキップするかしないかに関わらず、タイムコード生成装置２４に、フレーム毎に異なるタイムコードを生成させる。

フレームに付加する情報として、タイムコードを例示したが、フレームに固有となるべきその他の情報が、本発明の付加情報となりうる。

本発明の一実施例の概略構成ブロック図である。 本実施例の第１動作例のタイミングチャートである。 本実施例の第２動作例のタイミングチャートである。 本実施例の第３動作例のタイミングチャートである。 本実施例の第４動作例のタイミングチャートである。 本実施例の第５動作例のタイミングチャートである。 本実施例の第６動作例のタイミングチャートである。

符号の説明

１０ 映像編集装置
１２ 映像信号切替えスイッチ
１４ 垂直同期検出装置
１６ タイムコード分離装置
１８ 復号化装置
２０ フレームバッファ
２２ リファレンス信号生成装置
２４ タイムコード生成装置
２５ 制御装置
２６ 信号重畳装置

Claims (3)

1. 入力される複数の映像から１つを選択する映像選択手段（１２）と、
   当該映像選択手段で選択された映像を処理する映像処理手段（１８）と、
   当該映像処理手段で処理された映像を記憶する映像バッファ（２０）と、
   フレームまたはフィールドに固有の付加情報を生成する付加情報生成手段（２４）と、
   当該付加情報生成手段で生成される付加情報を、当該映像バッファから読み出された映像に重畳する重畳手段（２６）と、
   当該映像処理手段の処理状況に応じて、当該付加情報生成手段の生成する付加情報を制御する制御手段（２５）
   とを具備することを特徴とする映像編集装置。
2. 当該付加情報は、タイムコードであることを特徴とする請求項１に記載の映像編集装置。
3. 当該制御手段は、当該映像処理手段の処理状況に応じて、さらに当該映像バッファからの映像の読み出しを制御することを特徴とする請求項１または２に記載の映像編集装置。

Images