JP3039380B2

JP3039380B2 - マルチメディア通信端末装置

Info

Publication number: JP3039380B2
Application number: JP8174499A
Authority: JP
Inventors: 聡長谷川
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 1996-07-04
Filing date: 1996-07-04
Publication date: 2000-05-08
Anticipated expiration: 2016-07-04
Also published as: AU2849397A; EP0817490A2; EP0817490A3; AU739220B2; JPH1022999A; US6088724A

Description

【発明の詳細な説明】

【発明の属する技術分野】本発明は、通信回線を通して
送られる娯楽用や教育用ソフトウェアの再生を行うマル
チメディア通信端末装置に関する。

【０００１】

【従来の技術】現在、ケーブルテレビ（ＣＡＴＶ）等の
通信回線を利用したＶＯＤ（ＶｉｄｅｏＯｎＤｅｍ
ａｎｄ：ビデオオンデマンド・要求に応じたテレビ）と
呼ばれるテレビサービスの実現が進められている。この
サービスでは、例えば特開平４−３２４７８４号公報に
示されるように、伝送ラインの一端は、ヘッドエンド装
置と呼ばれるマルチメディアデータの供給及び供給の制
御を行う記録媒体もしくは記録装置等と接続されてい
る。また伝送ラインの他端は個々の加入社宅にそれぞれ
設置された、複数台のセットトップボックス（ＳＴＢ）
と呼ばれるマルチメディア通信端末装置に接続されてい
る。このＳＴＢは、ディスプレイ及びインタフェースを
有するテレビセットあるいはテレビ受信機にて構成さ
れ、ＶＯＤサービスの受信を行う。現在、これらの装置
の開発が各方面で進められており、娯楽用や教育用とし
ての使用が期待されている。

【０００２】このような通信回線を用いたマルチメディ
ア通信システムでは、データ送信側の上位装置から、マ
ルチメディア通信端末装置に対して、コマンド信号が割
り込みとして入力された場合に、現在再生している映像
と音声の欠落や乱れを防止する必要がある。このため
に、特開昭６３−２０９２４３号公報は、上位装置から
現在送信されているマルチメディアデータの送出をポー
ズモードとし、割り込み処理の終了と共にポーズモード
を解除し、再びマルチメディアデータの送信を開始する
ことを開示している。

【０００３】また、マルチメディア通信端末装置に再生
モードのコマンドが、その使用者から入力された場合、
再生モードの変更に伴った画像の乱れを防止する必要が
ある。特にスロー再生やコマ送り再生など、再生速度が
通常再生と比較して遅い場合には、この乱れが生じるこ
とがある。上位装置から送信されるマルチメディアデー
タの送信量を制御し、マルチメディア通信端末装置から
データ送信の要求が上位装置に対し発行される毎に、あ
る一定量のマルチメディアデータを送信するような方法
が考えられる。

【０００４】

【発明が解決しようとする課題】従来、通信回線を利用
したマルチメディア通信サービスにおける、マルチメデ
ィア通信端末装置ではその使用者からマルチメディアデ
ータの再生状態に関するコマンドを、短時間の間に連続
して入力された場合、再生画像や音声に乱れが生じた
り、使用者の意図しない映像や音声が出力されるなどの
状態が発生しうる。また、映像と音声の同期処理が、使
用者から入力された再生状態に関するコマンドの処理に
含まれている場合には、再生映像と音声の間の同期にず
れが生じてしまうなどの障害が発生することがある。

【０００５】そこで、マルチメディア通信端末装置が、
使用者からコマンドが短時間の間に連続して入力された
場合でも画像の乱れ等の生じないコマンドの制御が必要
となってきた。

【０００６】

【課題を解決するための手段】上記課題を達成するた
め、第１の本発明は、センターからマルチメディアデー
タを受信し、前記マルチメディアデータを映像データと
音声データとに分離する分離手段と、前記映像データと
前記音声データとをそれぞれ復号する復号手段と、復号
された前記映像データと復号された前記音声データとを
同期させ出力する出力手段と、制御部とを有するマルチ
メディア通信端末装置において、前記センターが第１の
送信状態でマルチメディアデータを送信中に、前記第１
の送信状態から前記出力手段による同期処理を必要とす
る第２の送信状態に変更する要求を前記制御部が外部か
ら受けると、前記制御部は、前記外部からの新たな送信
状態の変更要求の受付けを禁止するとともに、マルチメ
ディアデータの送信を停止する命令を前記センターに送
信し、前記復号手段による復号処理を一時停止させ、分
離および復号された前記第２の送信状態で送信されるマ
ルチメディアデータに対し同期処理を行うよう前記出力
手段に指示した後、前記センターに前記第２の送信状態
に変更するための命令を送信し、前記第２の送信モード
で送信されるマルチメディアデータが特定量復号される
と、前記変更要求の受付の禁止を解除することを特徴と
する。また、第２の本発明は、センターからマルチメデ
ィアデータを受信し、前記マルチメディアデータを映像
データと音声データとに分離する分離手段と、前記映像
データと前記音声データとをそれぞれ復号する復号手段
と、復号された前記映像データと復号された前記音声デ
ータとを同期させ出力する出力手段と、制御部とを有す
るマルチメディア通信端末装置において、前記センター
が第１の送信状態でマルチメディアデータを送信中に、
前記第１の送信状態から前記出力手段による同期処理を
必要とする第２の送信状態に変更する要求を前記制御部
が外部から受けると、前記制御部は、前記外部からの新
たな送信状態の変更要求の受付けを禁止するとともに、
マルチメディアデータの送信の停止および前記第２の送
信状態に変更するための準備を前記センターに指示し、
前記分離手段による分離処理を一時停止させ、分離およ
び復号された前記第２の送信状態で送信されるマルチメ
ディアデータに対し同期処理を行うよう前記出力手段に
指示し、前記センターに前記第２の送信状態に変更する
ための命令を送信し、前記第２の送信モードで送信され
るマルチメディアデータが特定量復号されると、前記変
更要求の受付の禁止を解除することを特徴とする。

【０００７】

【発明の実施の形態】本発明の実施形態について図面を
参照して、説明する。

【０００８】図１は、本発明におけるマルチメディア通
信端末装置を、ケーブルテレビ（ＣＡＴＶ）等の通信回
線を利用したシステムで使用した場合の一接続例を示
す。マルチメディア通信端末装置１はマルチメディアデ
ータの供給及び供給の制御を行う記録媒体もしくは記録
装置等であるヘッドエンド装置２１と、マルチメディア
データの伝送を行う伝送ライン２２及び制御信号の受け
渡しを行う制御信号線２３とで接続される。

【０００９】図２は、本発明におけるマルチメディア通
信端末装置１の一構成例を示すブロック図である。

【００１０】図２を参照すると、マルチメディア通信端
末装置１は、伝送ライン２１から送られてきたマルチメ
ディアデータの入力を行う入力端２と、複数のチャンネ
ルから希望のチャンネルを選択するチューナ４と、入力
されたマルチメディアデータを映像データと音声データ
とその他のデータに分離する入力信号システム処理部５
と、入力信号システム処理部からの映像データの復号処
理を行う映像データ処理部８と、復号された映像データ
の表示を行うモニタ１０と、映像データ処理部８で復号
された映像データをモニタ１０で表示するための処理を
行う表示回路９と、入力信号システム処理部からの音声
データの復号処理を行う音声データ処理部１３と、復号
された音声データを発生するスピーカ１５と、音声デー
タ処理部１３で復号された音声データをスピーカ１５で
発生させるための信号増幅を行う増幅回路１４と、プロ
グラム制御により各モジュールの動作制御等を行うＣＰ
Ｕ１６と、ＣＰＵ１６からの動作制御信号を各モジュー
ルに伝えるバス１７と、キーボード等の入力装置１９
と、制御信号線２３を介してヘッドエンド装置との制御
信号の受け渡しを行う通信回路１８と、制御信号線２３
と接続される制御入出力端３とから構成される。

【００１１】映像データ処理部８は、入力信号システム
処理部５で分離された映像データの一時保存を行う映像
データバッファメモリ６と、映像データの復号処理を行
う映像データ復号部７とを備えている。映像データ復号
部７は、映像が１枚（１ピクチャ）復号される毎にカウ
ントを行い、そのカウント値をＣＰＵ１６内で動作する
ソフトウェアがその値を参照できるようなデコードカウ
ンタ２０を備えている。

【００１２】音声データ処理部１３は、入力信号システ
ム処理部５で分離された音声データの一時保存を行う音
声データバッファＲＡＭ１１と、音声データの復号処理
を行う音声データ復号部１２とを備える。

【００１３】図３は、本発明におけるマルチメディア通
信端末装置内のＣＰＵ１６で動作する制御ソフトウェア
の一構成例を示すブロック図である。図３を参照する
と、制御ソフトウェア２５は、オペレーティングシステ
ム２７を中心として、アプリケーション２６とデバイス
ドライバ２８から構成される。

【００１４】アプリケーション２６は、主にマルチメデ
ィア通信端末装置１の使用者２４からの操作情報を受信
し、その情報をオペレーティングシステム２７を通し、
デバイスドライバ２８に情報を与えたり、もしくは通信
系のバス１７にメッセージを与える機能を持つ。

【００１５】デバイスドライバ２８は、オペレーティン
グシステム２７を介してアプリケーション２６から与え
られる情報を基に、制御系のバス１７を通し、各信号処
理系のハードウェアに対して指示を与える。またデバイ
スドライバ２８は、各信号処理系のハードウェアからの
情報をバス１７を通して取得し、その情報を元にデバイ
スドライバ２８内で処理を行ったり、アプリケーション
２６にその情報を与える事が出来る。

【００１６】次に、マルチメディア通信端末装置でジャ
ンプ再生を行った場合、そのジャンプ再生を要求するコ
マンドが、マルチメディア通信端末装置の使用者から連
続して入力された場合の実施例の動作について図１、図
２、図３及び図４を参照して説明する。

【００１７】現在通常再生中であった場合に、マルチメ
ディア通信端末装置１の使用者２４からジャンプ再生要
求コマンドが入力装置１９を介してアプリケーション２
６に入力されると、アプリケーション２６は、使用者か
らのコマンド入力を禁止した状態で、上位装置であるヘ
ッドエンド装置２１に対し、現在送信されているデータ
の送信を停止する要求を送信する。

【００１８】その応答がヘッドエンド装置２１からアプ
リケーション２６へ戻ると、アプリケーション２６はデ
バイスドライバ２８に対し、信号処理系のハードウェア
でジャンプ処理を行うように、ジャンプ処理要求を行
う。するとデバイスドライバ２８は信号処理系ハードウ
ェアに対して、新たに送信されるデータ、すなわち、ジ
ャンプ先データにおける、映像と音声の同期を合わせる
ような処理を行うように指示を与える。

【００１９】ここで、コンスタントレートで送信される
マルチメディアデータの、映像と音声の同期を取る場
合、マルチメディア通信端末装置内に存在するバッファ
メモリ６，１１内の一定期間の最新格納データをクリア
し、新たに送信されてくるデータ、すなわち、ジャンプ
先データのある一定単位毎に付加されているヘッダを解
読し、一データの開始を示すコードを認識した時点で同
期がかかるような方式を取っているものとする。

【００２０】つまり、アプリケーション２６は、デバイ
スドライバ２８から映像と音声の同期処理準備の完了に
ともなう応答を受けると、上位装置であるヘッドエンド
装置２１に対し、ジャンプ先データの送信要求を行う。

【００２１】従来は、アプリケーション２６が、本ジャ
ンプ先データ要求に対する応答をヘッドエンド装置２１
から受けた時点で、使用者からのコマンド入力を許可し
ていた。この状態で、ジャンプ先データがマルチメディ
ア通信端末装置１に到達する前にアプリケーションが次
のコマンド入力を許可してしまう場合が発生していた。
したがって、ヘッドエンド装置２１からは既に送信さ
れ、伝送ライン上にデータが存在する場合があり、この
ような場合には、データ送信タイミングと映像／音声同
期処理タイミングがずれる事となり、映像と音声の同期
がずれたり、不要な映像や乱れた映像が表示されたりす
る不具合が発生していた。従って、この状態で使用者か
らのコマンド入力を許可せず、以降の処理を行う事で本
問題を回避できる。

【００２２】このジャンプ先データ要求に対する応答を
ヘッドエンド装置２１から受けた後、ヘッドエンド装置
２１からジャンプ先データが伝送ライン２２を通してマ
ルチメディア通信端末装置１に到達すると、映像データ
復号部７で画像の復号が開始される。

【００２３】映像データ復号部７で新しい画像の復号が
確認されると、ＣＰＵ１６に対して割り込みが発生す
る。その割り込みを制御ソフトウェア２５内のデバイス
ドライバ２８が確認すると、デバイスドライバ２８はア
プリケーション２６に対して新しい映像がデコードされ
た事を通知するメッセージを渡す。アプリケーション
は、本メッセージを受けると、それまで禁止していた使
用者からのコマンド入力を再び許可する。

【００２４】このような処理により、ジャンプ処理が完
全に終了し、そのコマンドに対する画像の復号処理が行
われるまでは、次のコマンドを受け付けないため、連続
コマンド入力に対し、マルチメディア通信端末装置側で
の画像の乱れが生じないような入力コマンドの制御が出
来る。

【００２５】また、本実施形態では映像と音声の同期処
理を行うために、上位装置であるヘッドエンド装置１に
対し現在送信しているデータの送信停止を要求する場合
を例に説明したが、マルチメディア通信端末装置１上
で、ヘッドエンド装置２１から送信されるデータの処理
を停止する事で、映像と音声の同期処理を行うこともで
きる。この実施形態を、図１、図２、図３及び図５を参
照して説明する。

【００２６】現在通常再生中であった場合に、マルチメ
ディア通信端末装置１の使用者２４からジャンプ再生要
求コマンドが入力装置１９を介してアプリケーション２
６に入力されると、アプリケーション２６は、使用者か
らのコマンド入力を禁止した状態で、上位装置であるヘ
ッドエンド装置２１に対し、現在送信されているデータ
の送信を停止し、続けてジャンプ先のデータをサーチ
後、後述する同期処理準備の完了後に送信を開始する要
求を送信する。

【００２７】その応答がヘッドエンド装置２１からアプ
リケーション２６へ戻ると、アプリケーション２６はデ
バイスドライバ２８に対し、信号処理系のハードウェア
でジャンプ処理を行うように、ジャンプ処理要求を行
う。

【００２８】デバイスドライバ２８は入力信号システム
処理部５に対し、入力されるマルチメディアデータの映
像データと音声データへの分離処理を停止するように指
示を与える。そして、信号処理系ハードウェアに対し
て、新たに送信されるデータ、すなわちジャンプ先デー
タにおける、映像と音声の同期を合わせるような処理を
行うように指示を与える。映像と音声の同期処理準備の
完了後、入力信号システム処理部５に対して、入力され
るマルチメディアデータの映像データと音声データへの
分離処理を再び開始するように指示を与えた後、デバイ
スドライバ２８はアプリケーション２６に対し、応答を
返す。

【００２９】この実施形態の場合、上位装置であるヘッ
ドエンド装置２１で、ジャンプ先データのサーチを行う
際に伴うサーチ時間内で、マルチメディア通信端末装置
１内の映像と音声の同期処理を行うものであり、従って
映像と音声の同期処理準備の完了後に、ヘッドエンド装
置からジャンプ先のデータが送信される事となる。

【００３０】従来は、アプリケーション２６のデバイス
ドライバ２８へのジャンプ処理要求に対する応答を受け
た時点で使用者からのコマンド入力を許可していた。し
たがって、使用者２４から連続してジャンプコマンドを
入力された場合、ヘッドエンド装置２１から送信される
ジャンプ先データのタイミングと、入力コマンドに対す
るマルチメディア通信端末装置１での内部処理タイミン
グにずれが生じ、使用者２４の要求に応じた画面及び音
声の出力が行われなくなる不具合が生じていた。従っ
て、この状態で使用者からのコマンド入力を許可せず、
以降の処理を行う事で本問題を回避できる。

【００３１】このジャンプ処理要求に対する応答をデバ
イスドライバ２８から受けた後、ヘッドエンド装置２１
からジャンプ先データが伝送ライン２２を通してマルチ
メディア通信端末装置１に到達し、映像データ復号部７
で画像の復号が開始される。

【００３２】その映像データ復号部７で新しい画像の復
号が確認されると、ＣＰＵ１６に対して割り込みが発生
する。

【００３３】その割り込みを制御ソフトウェア２５内の
デバイスドライバ２８が確認すると、デバイスドライバ
２８はアプリケーション２６に対して新しい映像がデコ
ードされた事を通知するメッセージを渡す。アプリケー
ションは、本メッセージを受ける事で、禁止していた使
用者からのコマンド入力を再び許可する。

【００３４】このようにこの実施形態においても、ジャ
ンプ処理が完全に終了し、そのコマンドに対する画像の
復号処理が行われるまでは、次のコマンドを受け付けな
いため、連続コマンド入力に対し、マルチメディア通信
端末装置側での入力コマンドの制御が出来る。

【００３５】以上、ジャンプコマンドの連続入力に関し
て実施形態を２つ示したが、ジャンプコマンドに限らず
他の再生モードコマンドにおける連続入力及び複数の再
生モードコマンドの連続入力にも対応が出来る柔軟性を
も合わせ持つ。

【００３６】

【発明の効果】以上説明したように、本発明では、使用
者から短時間に連続して入力された場合、使用者から入
力された再生コマンドに対する受付処理が終了した時点
では、使用者からの次の入力コマンドを受付けを許可せ
ずに、上位装置からその再生コマンドに対するマルチメ
ディアデータが送信され、特に映像のデコードが開始さ
れた事に対する割り込みが、ＣＰＵに対して発行された
事を確認してから、使用者からの次の入力コマンドを受
け付けるようにしている。

【００３７】また、映像と音声の同期合わせを行う処理
を伴う場合には、上位装置から確実に使用者の要求した
データを受信する事が出来る。したがって、上位装置か
らのデータ送信タイミングと、マルチメディア通信端末
装置における映像／音声同期処理タイミングにずれが生
じ、再生映像と音声の同期がずれたり、不要な映像や乱
れた映像が表示されたりする現象を回避する事が出来、
また使用者の要求に応じた画面及び音声の出力が行われ
なくなる現象も、同時に回避できる。

【００３８】また、本発明によりマルチメディア通信シ
ステム全体としての動作が安定するため、使用者のシス
テムに対する信頼度を向上させる効果も合わせ持つ。

【図面の簡単な説明】

【図１】マルチメディア通信端末装置の一接続例を示し
たブロック図である。

【図２】マルチメディア通信端末装置の一構成例を示し
たブロック図である。

【図３】ＣＰＵ上で動作する制御ソフトウェアの一構成
例を示したブロック図である。

【図４】本発明における一実施例を示したシーケンスチ
ャートである。

【図５】本発明における一実施例を示したシーケンスチ
ャートである。

【符号の説明】

１マルチメディア通信端末装置２入力端３制御入出力端４チューナ５入力信号システム処理部６映像データバッファメモリ７映像データ復号部８映像データ処理部９表示回路１０モニタ１１音声データバッファメモリ１２音声データ復号部１３音声データ処理部１４増幅回路１５スピーカ１６ＣＰＵ１７バス１８通信回路１９入力装置２０デコードカウンタ２１ヘッドエンド装置２２伝送ライン２３制御信号線２４使用者２５制御ソフトウェア２６アプリケーション２７オペレーティングシステム２８デバイスドライバ

Claims

(57)【特許請求の範囲】

【請求項１】センターからマルチメディアデータを受
信し、前記マルチメディアデータを映像データと音声デ
ータとに分離する分離手段と、前記映像データと前記音
声データとをそれぞれ復号する復号手段と、復号された
前記映像データと復号された前記音声データとを同期さ
せ出力する出力手段と、制御部とを有するマルチメディ
ア通信端末装置において、前記センターが第１の送信状態でマルチメディアデータ
を送信中に、前記第１の送信状態から前記出力手段によ
る同期処理を必要とする第２の送信状態に変更する要求
を前記制御部が外部から受けると、前記制御部は、前記外部からの新たな送信状態の変更要
求の受付けを禁止するとともに、マルチメディアデータ
の送信を停止する命令を前記センターに送信し、前記復
号手段による復号処理を一時停止させ、分離および復号
された前記第２の送信状態で送信されるマルチメディア
データに対し同期処理を行うよう前記出力手段に指示し
た後、前記センターに前記第２の送信状態に変更するた
めの命令を送信し、前記第２の送信モードで送信される
マルチメディアデータが特定量復号されると、前記変更
要求の受付の禁止を解除することを特徴とするマルチメ
ディア通信端末装置。
【請求項２】センターからマルチメディアデータを受
信し、前記マルチメディアデータを映像データと音声デ
ータとに分離する分離手段と、前記映像データと前記音
声データとをそれぞれ復号する復号手段と、復号された
前記映像データと復号された前記音声データとを同期さ
せ出力する出力手段と、制御部とを有するマルチメディ
ア通信端末装置において、前記センターが第１の送信状態でマルチメディアデータ
を送信中に、前記第１の送信状態から前記出力手段によ
る同期処理を必要とする第２の送信状態に変更する要求
を前記制御部が外部から受けると、前記制御部は、前記外部からの新たな送信状態の変更要
求の受付けを禁止するとともに、マルチメディアデータ
の送信の停止および前記第２の送信状態に変更するため
の準備を前記センターに指示し、前記分離手段による分
離処理を一時停止させ、分離および復号された前記第２
の送信状態で送信されるマルチメディアデータに対し同
期処理を行うよう前記出力手段に指示し、前記センター
に前記第２の送信状態に変更するための命令を送信し、
前記第２の送信モードで送信されるマルチメディアデー
タが特定量復号されると、前記変更要求の受付の禁止を
解除することを特徴とするマルチメディア通信端末装
置。