JPH05242166A - マルチメディアデータ編集／提示方式 - Google Patents

Abstract

(57)【要約】 【目的】 データを提示させながら編集することがで
き、編集したデータの再生時には、順次自動的な提示を
行うと共に、任意の時点で再生を停止して、手動による
提示操作ができるようにすること。 【構成】 操作装置６から提示，入力操作を行いなが
ら、操作記録部１１でその操作内容とカウンタ８のカウ
ント値とを操作内容蓄積部１２に蓄積させていくことに
より編集を行う。編集したデータの再生時には、操作再
生部１５で現在のカウンタ８の値と、前記操作内容蓄積
部１２に蓄積されたカウント値とを比較しながら、前記
操作内容蓄積部１２に蓄積された操作内容を順次再生
し、データ処理部３に与える。また、再生を停止させた
時には、上記操作装置６の操作内容を上記データ処理部
３に与える。そして、該データ処理部３では、与えられ
た操作内容に従って、前記データ蓄積部に蓄積されたマ
ルチメディアデータの提示を行う。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、マルチメディアデータ
の蓄積，提示，入力，編集を行うマルチメディアシステ
ムにおいて、自動提示を可能にするマルチメディアデー
タ編集／提示方式に関するものである。

【０００２】

【従来の技術】近年、テキスト，静止画，動画，音声等
のマルチメディアデータを電子記録媒体に記録し、コン
ピュータでそれらを編集し、提示することが行われるよ
うになっている。

【０００３】（第１従来例）図１２は、第１従来例のマ
ルチメディアデータ編集／提示方式の概要を示すブロッ
ク図である。図１２において、１は入力装置、２は提示
装置、３はデータ処理部、４はデータベース、５は処理
起動部、６は操作装置、７は操作内容抽出部、８はカウ
ンタ、３０は提示記録部、３１は提示内容蓄積部、３２
は提示再生部である。

【０００４】各メディアデータは、入力装置１から入力
され、データ処理部３を介して、ノードというデータの
アクセス単位毎に、データベース４に蓄積されている。
マルチメディアデータの編集は、複数の関連するノード
について、提示するノード名、提示形式及び提示するタ
イミングを記述したタイムテーブルを作成し、それを提
示内容蓄積部３１に記録させることにより行う。その提
示内容蓄積部３１へのタイムテーブルの記録は、提示記
録部３０からの手動入力により行う。

【０００５】編集したマルチメディアデータを提示する
時は、操作装置６により、提示させるための操作を行
う。操作内容抽出部７は、その操作内容（例、マウスで
座標（ｘ，ｙ）を左クリック）を処理起動部５及び提示
再生部３２に伝える。提示再生部３２では、それを受け
て、カウンタ８の現在のカウント値と、提示内容蓄積部
３１のタイムテーブルに記録されている提示タイミング
とを比較しながら、該提示タイミングに対応するノード
名，提示形式等のデータを読み出していく。一方、処理
起動部５は、データ処理部３を起動させ、提示再生部３
２から送られてくるデータに従って、データベース４に
格納されているものの中から該当するノードを順次提示
装置２に送って、提示していく（自動的な提示）。

【０００６】この方式によれば、タイムテーブルによ
り、タイミングを取りながらノードを順次提示できるの
で、あるストーリーに従ってノードを提示する場合や、
動画，音声等の時間に依存するノードと他のノードとを
同期して提示する場合などに有効となる。しかし、タイ
ムテーブルを提示内容蓄積部３１へ記録するのに、提示
するノード名，提示形式及び提示するタイミングを、い
ちいちストップウォッチ等で時間を計りながら入力して
いかなければならず、その作業が非常に面倒である。ま
た、提示途中で利用者が、現在提示中のノードについて
より詳しい情報を知りたくなっても、タイムテーブルに
組み入れられているもの以外のノードを提示することは
できない。

【０００７】（第２従来例）これに対して、あるノード
から、それと関連のある他のノードへアクセスするため
の情報を各ノードのリンク情報として記録しておき、利
用者がリンク情報を対話的に選択して提示する方法もあ
る（対話的な提示）。これによれば、利用者があるノー
ドにアクセスした場合、それに関連する情報が知りたけ
れば、メニューに基づきリンク情報を選択すると、関連
ノードを提示することができる。しかし、この方式で
は、自動的に一連の関連ノードを提示することはできな
い。

【０００８】（第３従来例）そこで、第１従来例と同様
に、順次ノード提示を行うと共に、各ノードのリンク情
報もタイミングを計ってメニューとして表示し、メニュ
ーが表示されている間、利用者の選択入力を受け付ける
ことにより、自動的な提示方式と、対話的な提示方式と
を組み合わせてマルチメディアデータの提示ができるよ
うにしたものが開発されている。

【０００９】図１３は、第３従来例を説明するためのタ
イムチャートである。図１３において、Ｎ_A ，Ｎ_B は、
順次提示されるノードであり、Ｎ_a ，Ｎ_b は、それぞれ
ノードＮ_A ，Ｎ_B にリンクされた関連ノードである。関
連ノードＮ_a ，Ｎ_b は、それぞれ、予め編集されたリン
ク情報によってノードＮ_A ，Ｎ_B とリンクされている。
例えば、ノードＮ_A のリンク情報は、ノードＮ_A の提示
時間（Ｔ₁ −Ｔ₀ ）内に設定されるリンク有効時区間
（ｔ₁ 〜ｔ₂ ），関連ノードＮ_a ，リンクメニューの表
示位置等のデータから成る。

【００１０】ノードの提示については、例えば、ノード
Ｎ_A ，ノードＮ_B の順に提示するようにデータ提示命令
があった時、時刻Ｔ₀ からノードＮ_A の提示が始まる。
そして、それからｔ₁ 秒間経過した時、画面にリンクメ
ニューが表示される。そして、リンクメニューが表示さ
れている時、関連ノードを提示するように指示すれば、
ノードＮ_A の提示を中止して関連ノードＮ_a の提示に切
り換わる。しかし、その指示がなければ、ノードＮ_A が
引き続き提示され、その後、時刻Ｔ₀ からｔ₂秒間経過
するまでに関連ノードを提示する指示がないと、それ以
降は、ノードＮ_A から関連ノードＮ_a に切り換えること
はできなくなる。時刻Ｔ₁ になってノードＮ_A の提示が
終了すると、引き続いてノードＮ_B の提示が始まる。そ
の時も、ノードＮ_A の場合と同様に関連ノードＮ_b を対
話的に選択できる。

【００１１】なお、このようなマルチメディアデータ編
集／提示方式に関する従来の文献としては、特開平３−
９３９３号公報がある。

【００１２】

【発明が解決しようとする課題】

（問題点）しかしながら、前記した第３従来例には、次
のような問題点があった。第１の問題点は、自動的な提
示を行うために第１従来例と同様なタイムテーブルが必
要であるが、前述したように、その入力作業が非常に面
倒であるという点である。第２の問題点は、関連ノード
の提示を選択する時間に制限があるという点である。

【００１３】（問題点の説明）まず第１の問題点につい
て説明する。第１従来例のところでも説明したように、
提示内容蓄積部３１へのタイムテーブルの記録は、提示
するノード名，提示形式及び提示するタイミングを、い
ちいちストップウォッチ等で時間を計りながら、手動入
力により行わなければならない。例えば、動画中に、あ
るタイミングでテキスト表示を行う場合、そのタイミン
グを設定するためには、先ず、動画を提示させて、スト
ップウォッチ等でテキスト表示をすべき箇所が現れるま
での時間をいちいち計測し、その結果に基づいて設定を
行わなければならない。そのように、いちいち時間を計
測して行うのは非常に手間のかかることである。また、
いちいち提示するノード名，提示形式等を入力するのも
手間がかかることである。

【００１４】次に第２の問題点について説明する。第３
従来例では、先に説明したように、関連ノードの提示を
選択できる時期は、リンク有効時区間内に限られてい
る。そのため、リンク有効時区間が経過した後に、思い
直して関連情報を見ようとしても、見ることができな
い。本発明は、以上のような問題点を解決することを課
題とするものである。

【００１５】

【課題を解決するための手段】前記課題を解決するた
め、本発明のマルチメディアデータ編集／提示方式で
は、マルチメディアデータを入力する入力手段と、マル
チメディアデータを提示する提示手段と、マルチメディ
アデータを蓄積するデータ蓄積手段と、マルチメディア
データの提示，入力を操作する操作手段と、前記操作手
段による操作が行われた時点を計測するカウンタと、前
記操作手段による操作内容と前記カウンタの値とを蓄積
する操作内容蓄積手段と、該操作内容蓄積手段への記録
動作を制御する記録制御手段と、現在のカウンタの値と
前記操作内容蓄積手段に蓄積されたカウンタの値とを比
較しながら前記操作内容蓄積手段に蓄積された操作内容
を順次再生する操作再生手段と、該操作再生手段の再生
動作を制御する再生制御手段と、上記操作再生手段の動
作時には該操作再生手段から与えられ、上記操作再生手
段の停止時には上記操作手段から与えられる操作内容に
従って前記データ蓄積手段に蓄積されたマルチメディア
データの提示及び前記入力手段からの入力を行うデータ
処理手段とを具備させることとした。

【００１６】

【作 用】従来、提示内容蓄積部３１へのタイムテー
ブルの記録は、提示記録部３０からの手動入力で行って
いた。また、タイムテーブルとして記録するデータは、
提示するノード名、提示形式及び提示するタイミング等
であった。それに対して、本発明では、操作内容蓄積手
段に記録するデータは、操作手段による操作内容と、操
作が行われた時点とであるが、操作内容を示すデータは
操作手段から直接得られるし、操作が行われた時点を示
すデータは、操作が行われた時点を自動的に計測するカ
ウンタから直接得られる。したがって、操作内容，操作
が行われた時点共、何ら手を加えること無く、記録制御
手段により自動的に、操作内容蓄積手段に記録すること
ができる。その結果、編集時に、いちいちストップウォ
ッチ等で時間を計る必要はなく、データを提示させなが
ら自動的にタイムテーブルを記録していくことができ、
従来のような入力作業の面倒さは解消される。例えば、
動画中に、あるタイミングでテキスト表示を行う場合、
実際に動画を提示させながら、テキストを表示する箇所
にきたら、その時点でテキスト表示を行うための操作を
すれば、その操作内容がカウンタの値と共に自動的に記
録される。

【００１７】また、再生は、再生制御手段により任意の
時点で一時停止又は終了させることができ、しかも、再
生の一時停止時や終了時には、いままで、操作内容を操
作再生手段からデータ処理手段に与えていたのを、操作
手段から直接データ処理手段に与えるように切り換える
ようにした。その結果、操作内容蓄積手段に記録された
タイムテーブルを再生することによって、自動的な提示
を行うと共に、任意の時点で自動的な提示を停止して、
操作手段による対話的な提示ができる。このように、自
動的な提示と対話的な提示とが任意に選択できるとい
う、柔軟性のある提示が可能となる。したがって、ある
画面を見終わった後、しばらくして思い直してその関連
情報が知りたくなった場合等でも、再生を一時停止し
て、その関連情報を提示させることができる。

【００１８】

【実施例】以下、本発明の実施例を図面に基づいて詳細
に説明する。 （構成の概要）図１は、本発明のマルチメディアデータ
編集／提示方式の概要を示すブロック図である。符号は
図１２のものに対応し、３−１はデータ提示部、３−２
はデータ入力部、３−３はデータ編集部、４−１はデー
タ蓄積部、４−２はノード情報管理部、４−３はリンク
情報管理部、９は記録制御指示部、１０は記録制御部、
１１は操作記録部、１２は操作内容蓄積部、１３は再生
制御指示部、１４は再生制御部、１５は操作再生部であ
る。

【００１９】入力装置１は、キーボード，マウス，イメ
ージスキャナ，ビデオカメラ，マイク等のテキスト，画
像，音声等のデータを入力するための装置である。提示
装置２は、ディスプレイ，スピーカ等、テキストや画像
を表示したり、音声を出力したりする装置である。デー
タ処理部３は、データを提示するための処理を行うデー
タ提示部３−１と、データを入力するための処理を行う
データ入力部３−２と、リンク情報等を編集するための
処理を行うデータ編集部３−３から成り、これらの構成
は、従来のものと変わらない。

【００２０】データベース４は、入力装置１から入力さ
れた各メディアデータをノード毎に蓄積するデータ蓄積
部４−１と、データ蓄積部４−１に蓄積されている各ノ
ードの属性を示すノード情報を記憶・管理するノード情
報管理部４−２と、各ノードの関連を示すリンク情報を
記憶・管理するリンク情報管理部４−３から成る。処理
起動部５は、操作内容抽出部７又は操作再生部１５から
の操作内容を受けて、データ処理部３の各部を起動する
ためのものである。操作装置６は、マウスやキーボード
等から成り、操作内容を入力するためのものである。マ
ウスやキーボードは、データの入力装置１と操作装置６
とを兼ねることになる。操作内容抽出部７は、操作装置
６で入力された操作内容を抽出する。抽出された操作内
容は、処理起動部５，記録制御指示部９，操作記録部１
１及び再生制御指示部１３に与えられる。カウンタ８は
操作装置６が操作された時点を計測するためのものであ
る。

【００２１】記録制御指示部９は、操作装置６での操作
が操作内容の記録に関するもの（例、記録の開始，記録
の終了，記録の一時停止等）であった時、それを実行す
るように記録制御部１０に指示を与える。記録制御部１
０は、記録制御指示部９からの指示に基づいて、操作記
録部１１を制御する。操作記録部１１は、操作内容抽出
部７から出力される操作内容を、カウンタ８のカウント
値と共に、操作内容蓄積部１２のタイムテーブルに記録
する。

【００２２】再生制御指示部１３は、操作装置６での操
作が操作内容蓄積部１２に記録されたタイムテーブルの
再生に関するもの（例、再生の開始，再生の終了，再生
の一時停止等）であった時、その内容を実行するように
再生制御部１４に指示を与える。再生制御部１４は、再
生制御指示部１３からの指示に基づいて、操作再生部１
５を制御する。操作再生部１５は、操作内容蓄積部１２
に記録されているタイムテーブルのカウント値とカウン
タ８の現在のカウント値とを比較し、両者が等しくなっ
たらタイムテーブルの該カウント値に対応して記録され
ている操作内容を、処理起動部５に伝達する。

【００２３】（ノード情報，リンク情報）以上が本発明
のマルチメディアデータ編集／提示方式の概要である
が、ここで、前記ノード情報管理部４−２で記憶・管理
されるノード情報と、リンク情報管理部４−３で記憶・
管理されるリンク情報について説明する。図２は、ノー
ド情報の一例を示す図である。図２において、「ノード
番号」は、各ノード毎に付けられた番号である。「提示
方式」は、各ノードを提示する方式である。「提示領
域」は、各ノードを提示する表示画面上の領域である。
そして、「データ名」は、各ノードに付けられているデ
ータ名である。ノード情報は、このような形式でノード
情報管理部４−２に予め記憶され、管理される。

【００２４】図３は、リンク情報の一例を示す図であ
る。図３において、「リンク番号」は、各リンク情報に
付けられている番号である。「親ノード番号」は、子ノ
ードがリンクされているノード（即ち、親ノード）の番
号である。「リンク領域」は、ここをマウスでクリック
等をすると、親ノードにリンクされている情報（即ち、
子ノードの情報）が提示されるように設定された、表示
画面上の領域である。そして、「子ノード番号」は、子
ノードに付けられた番号である。リンク情報は、このよ
うな形式でリンク情報管理部４−３に予め記憶され、管
理される。

【００２５】（画面表示）図４は、画面表示の一例を示
す図である。図４において、２０は表示画面、２１〜２
３はマルチメディアウインドウ、２４は制御パネルであ
る。図４において、マルチメディアウインドウ２１は、
例えば、図３に示されるリンク情報における親ノードに
対応し、その中に表示されているテキスト１，動画１，
図形１，・・・が子ノードに対応する。すなわち、親ノ
ード番号Ｎ₀ のノードの情報を使って、マルチメディア
ウインドウ２１の枠及び制御パネル２４を表示し、子ノ
ード番号Ｎ_1,Ｎ_2,・・・のノードの情報を使って、内部
のテキスト１，動画１，・・・を表示している。

【００２６】なお、図４では、テキスト１，動画１，・
・・を同時に表示しているが、必ずしも同時に表示する
とは限らない。また、テキスト１，動画１，・・・をマ
ルチメディアウインドウ２１の枠内に表示しているが、
必ずしもこの枠内に入れる必要はなく、図２のノード情
報の提示領域を適宜設定することにより、表示画面２０
内のどの位置にも表示可能である。制御パネル２４は、
画面上に表示させた仮想的なパネルで、マウスにより各
ボタンをクリックすることにより、所定の指示を与える
ことができるようになっている。

【００２７】図５は、制御パネルの一例を示す図であ
る。図５において、２４−１〜２４−１４は制御ボタン
である。その内、２４−１〜２４−７は、操作内容を操
作内容蓄積部１２に記録したり、操作内容蓄積部１２か
ら操作内容を取り出して再生する際に、それらの指示を
与えるためのボタンである。例えば、２４−５は記録開
始ボタン、２４−６は再生開始ボタン、２４−３は記
録，再生終了ボタン、２４−４は一時停止ボタンであ
る。２４−８〜２４−１４は、図３に示されるリンク情
報のリンク領域に対応させたボタンで、例えば、ボタン
２４−８は、リンク番号Ｌ₁ のリンク領域に対応し、点
（ｘ_l11,ｙ_l11 ）がボタン２４−８の左上隅に当たり、
点（ｘ_l12,ｙ_l12 ）がボタン２４−８の右下隅に当た
る。

【００２８】（編集処理）次に、本発明における処理の
手順をフローチャートを使って説明する。図６は、マル
チメディアデータ編集手順を示すフローチャートであ
る。 ステップ１…操作装置６により、記録制御に関する記
録制御操作、提示するノードを指定するための提示操
作、あるいは、入力装置１からデータを入力させるた
めの入力操作を行う。例えば、記録制御操作を行う場合
には、マウスにより、記録開始を指示する図５の制御ボ
タン２４−５をクリックしたり、記録終了を指示する制
御ボタン２４−３をクリックしたりする。提示操作を行
う場合には、制御パネル２４の２４−８〜２４−１４の
内から、指定しようとするノードに割り当てられたボタ
ンをマウスでクリックする。また、入力操作を行う場合
には、入力装置を指定するコード（例、ビデオカメラは
“ｖ”）をキーボードで入力する。

【００２９】ステップ２…操作内容抽出部７で、ステッ
プ１において入力された操作内容を抽出する。 ステップ３…操作内容が記録制御なのか、それともそう
でないのか（例、データの提示とか入力）を判別する。 ステップ４…記録制御であれば、記録制御部１０で操作
記録部１１を制御し、記録動作の開始や終了等を行う。
なお、記録制御部１０は、記録開始を指示された時、操
作内容蓄積部１２をクリアし、カウンタ８をリセットす
る。 ステップ５…記録制御でなければ、入力された操作内容
に対応させて、処理起動部５により、データ処理部３を
起動させ、その操作内容（例、データの提示，データの
入力等）を実行する。 ステップ６…操作記録部１１が記録動作中であるか否か
を判別し、記録動作中でなければ、ステップ１に戻る。

【００３０】ステップ７…記録動作中であれば、入力さ
れた操作内容が入力操作か否かを判別し、入力操作であ
ればステップ８に進み、そうでなければステップ９に進
む。 ステップ８…入力操作であれば、後述する入力操作−提
示操作変換テーブルに基づいて、入力操作を、データを
提示する場合の提示操作に変換する。 ステップ９…ステップ７で入力操作でない場合には、操
作記録部１１により、操作内容とカウンタ８のカウント
値とを、操作内容蓄積部１２に記録させる。 ステップ１０…操作が終了したか否かを判別し、終了し
たら処理を終了させ、そうでなければ、ステップ１に戻
る。

【００３１】（提示処理）図７は、マルチメディアデー
タ提示手順を示すフローチャートである。その内、図７
（ａ）は、操作処理手順を示し、図７（ｂ）は、再生処
理手順を示している。先ず、図７（ａ）の操作処理手順
から説明する。 ステップ１…操作装置６により、再生制御に関する再生
制御操作、あるいは、再生停止中に提示するノードを指
定するための提示操作を行う。操作入力の例を挙げる
と、再生制御操作を行う場合には、マウスにより、再生
開始を指示する図５の制御ボタン２４−６をクリックし
たり、再生の一時停止を指示する制御ボタン２４−４を
クリックしたりする。再生停止中に提示するノードを指
定する場合には、制御パネル２４の２４−８〜２４−１
４の内から、指定しようとするノードに割り当てられた
ボタンをマウスでクリックする。

【００３２】ステップ２…操作内容抽出部７で、ステッ
プ１において入力された操作内容を抽出する。 ステップ３…操作内容が、再生制御か否かを判別する。 ステップ４…再生制御であれば、再生制御部１４で操作
再生部１５を制御し、再生動作の開始，停止及び終了を
行う。なお、再生制御部１４は、再生動作の開始を指示
された時、操作内容蓄積部１２に記録されているタイム
テーブルの読み出し位置を再生開始位置にセットし、カ
ウンタ８をリセットする。

【００３３】ステップ５…ステップ３で再生制御でない
場合には、操作再生部１５が再生動作中であるか否かを
判別する。 ステップ６…再生動作中でなければ、操作装置６から入
力された操作内容を処理起動部５に与え、その操作を実
行すべくデータ処理部３を起動させる。 ステップ７…操作が終了したか否かを判別し、終了した
ら処理を終了させ、そうでなければ、ステップ１に戻
る。

【００３４】次に、図７（ｂ）の再生処理手順を説明す
る。再生処理は、上記ステップ４で再生開始が指示され
たときに開始される。 ステップ８…操作再生部１５が再生動作中であるか否か
を判別する。 ステップ９…ステップ８で再生動作中である場合には、
カウンタ８の現在の値と、操作内容蓄積部１２に記録さ
れているタイムテーブル中の、次に再生すべきレコード
のカウンタの値とを比較する。両者が等しくなったらス
テップ１０に進み、そうでなければステップ８に戻る。

【００３５】ステップ１０…操作内容蓄積部１２に記録
されているタイムテーブル中の、次に再生すべきレコー
ドの操作内容を処理起動部５に与え、処理起動部５は、
操作装置６から入力される通常の操作と全く同様にデー
タ処理部３を起動する。 ステップ１１…操作内容蓄積部１２に記録されているタ
イムテーブル中に、次に再生すべきレコードがあるか否
かを判別する。次に再生すべきレコードがあれば、ステ
ップ８に戻り、無ければ再生動作を終了する。

【００３６】図８は、タイムテーブルの一例を示す図で
ある。図８において、「レコード番号」は、各レコード
毎に付された番号である。ここで、「レコード」とは、
テーブルの各行に対応するもので、時刻，操作装置，コ
ード，カーソル座標，次項番号及び前項番号のデータの
組合せを指す。その内、「時刻」は、記録操作が開始さ
れてから計測した、操作が成された時点である。「操作
装置」は、操作された装置である。「コード」は、入力
されたコードである。「カーソル座標」は、コードが入
力された画面上の座標である。「次項番号」は、そのレ
コードの次に続くレコード番号であり、「前項番号」
は、そのレコードの前のレコード番号である。なお、レ
コード番号１の操作は、キーボードで、コード“ａ”
を、カーソル座標（ｘ_1,ｙ₁ ）に入力することを示して
いる。

【００３７】（編集の例）次に、静止画１、テキスト
２、動画１の順に提示するように編集する場合を例にと
って、編集の仕方を説明する。ここで、ノード情報管理
部４−２及びリンク情報管理部４−３には、それぞれ図
２及び図３に示されるようなデータが記憶されているも
のとする。また、編集された結果として、図８に示され
るようなタイムテーブルが、操作内容蓄積部１２に記録
されるものとする。そして、図８のレコード番号０のレ
コードは、静止画１の提示操作を記録し、レコード番号
１のレコードは、テキスト２の提示操作を記録し、レコ
ード番号２のレコードは、動画１の提示操作を記録して
いるものとする。

【００３８】操作者は、先ず、図５に示される制御パネ
ルの記録開始ボタン２４−５をマウスでクリックする。
記録制御指示部９は、記録制御部１０に以後の操作内容
を記録するように指示する。記録制御部１０は、操作内
容蓄積部１２をクリアし、カウンタ８をリセットしてか
ら、操作記録部１１の記録動作を開始させる。

【００３９】続いて、静止画１を提示させるため、予め
静止画１に割り当てられている制御パネル上の制御ボタ
ン２４─１３をマウスで左クリックする。処理起動部５
は、データ処理部３のデータ提示部３−１を起動する。
データ提示部３−１は、データベース４のリンク情報管
理部４−３のリンク情報から静止画１のノード番号Ｎ₇
を得て（図２参照）、ノード情報管理部４−２のノード
番号Ｎ₇ のノード情報を探し当てる。そして、該ノード
情報に基づいて、データベース４のデータ蓄積部４−１
から静止画１のデータを読み出すと共に、図２に示され
る提示領域（ｘ_N71,ｙ_N71 ）−（ｘ_N72,ｙ_N72 ）及び提
示方式（「静止画」）に従って静止画１を提示する。

【００４０】それと同時に、操作記録部１１は、その操
作内容（マウス，左クリック，カーソル座標（ｘ₀ ，ｙ
₀ ））をカウンタ８の値（１０秒）と共に、操作内容蓄
積部１２のタイムテーブルに記録する。以下同様にし
て、テキスト２，動画１の提示操作をタイムテーブルに
記録していく。

【００４１】（入力操作を組み入れた編集の例）次に、
データ蓄積部４−１に既に記憶されているデータだけで
なく、データ蓄積部４−１に未だ記憶されていない新た
なデータを入力して、再生時にそのデータも組み入れて
提示できるように編集する場合を説明する。例えば、動
画１のデータをビデオカメラから入力して、図８の場合
のレコード番号２のレコードを記録する場合を例にとっ
て説明する。レコード番号１のテキスト１の提示操作が
終了した後、ビデオカメラから入力する旨の操作を行
う。例えば、所定の制御ボタンをマウスでクリックす
る。あるいは、マウスでクリックする代わりに、所定の
カーソル位置に、キーボードにより、例えば“ｖ”のよ
うなコードを入力してもよい。

【００４２】入力操作が行われると、処理起動部５は、
データ処理部３のデータ入力部３−２を起動する。デー
タ入力部３−２はビデオカメラから入力した動画のデー
タをデータ蓄積部４−１に入力する。そこへ入力するに
は、先ず、データベース４のリンク情報管理部４−３内
に予め記憶されているリンク情報（図２）から、動画１
のノード番号Ｎ₂ を得、ついでノード情報管理部４−２
から、そのＮ₂ に対応するノード情報を得る。そのノー
ド情報のデータ名「動画１」を付して、ビデオカメラか
ら入力した動画データをデータベース４のデータ蓄積部
４−１に入力する。

【００４３】一方、操作記録部１１では、ビデオカメラ
からの入力操作を、入力操作−提示操作変換テーブルに
より、提示操作に変換し、カウンタ８の値と共に操作内
容蓄積部１２のタイムテーブルに記録する。図９は、入
力操作−提示操作変換テーブルの一例を示す図である。
図９において、「データ」は、入力されるデータの種類
である。「入力装置」は、入力するための装置である。
「コード」は、入力操作を行う場合に入力されるコード
である。「入力座標」は、入力する位置の座標である。
「操作装置」は、それぞれのデータの提示操作を行う場
合の操作装置である。「コード」は、提示操作を行う場
合に入力されるコードである。そして、「提示座標」
は、提示操作として再生される際に、この位置で、マウ
スによるクリックとか、キーボードによるコード入力と
かが行われたと見做される位置の座標である。なお、こ
のテーブルは、操作記録部１１の中に格納されている。

【００４４】例えば、図９の第１行のように、キーボー
ドでビデオカメラを意味するコード“ｖ”を所定の位置
（ｘ，ｙ）に入力するという入力操作が行われると、そ
の入力操作を、マウスで座標（ｘ，ｙ）を 左クリック
するという動画の提示操作に変換する。そして、操作内
容蓄積部１２には、入力操作を記録するのではなく、変
換された提示操作の方を記録する。

【００４５】（提示の例）次に、操作内容が伝達される
経路を切換制御する機構について説明しながら、提示の
例を説明する。図１０は、操作内容の伝達経路制御機構
の一例を示すブロック図である。符号は図１に対応し、
５−１はマルチプレクサ、Ａ，Ｂは操作内容伝達経路で
ある。マルチプレクサ５−１は、処理起動部５の中に設
けられ、再生制御部１４からの制御信号に基づいて、操
作内容伝達経路Ａ，Ｂを切り換える。そして、操作内容
伝達経路Ａに切り換えた時には、操作内容は、操作内容
抽出部７から処理起動部５に与えられ、また、操作内容
伝達経路Ｂに切り換えた時には、操作再生部１５から処
理起動部５に与えられる。なお、図１０は、図１に示さ
れる部分の内、再生時における、操作内容の伝達経路に
関係する部分のみを示しており、説明上必要のない部分
は省略している。

【００４６】図１１は、マルチプレクサの動作を説明す
る図である。図１１において、「再生制御部」の欄は、
再生制御部１４の動作状態を示している。「操作再生
部」の欄は、操作再生部１５の動作状態を示している。
「制御信号」の欄は、再生制御部１４からマルチプレク
サ５−１に与えられる制御信号の状態を示している。そ
して、「マルチプレクサ」の欄は、マルチプレクサ５−
１の動作状態を示している。

【００４７】上記伝達経路制御機構の動作を、タイムテ
ーブルの再生中に、操作装置６にて一時停止の操作をし
て、再生を一時停止させ、停止している間、タイムテー
ブルに組み入れられているもの以外のデータの提示を行
い、停止解除後、再生を再開させる場合を例にとって説
明する。再生は、例えば、マウスで、図５に示される制
御パネルの再生開始ボタン２４−６をクリックすること
により開始される。そして、一時停止の操作は、同様
に、マウスで、一時停止ボタン２４−４をクリックする
ことにより行う。一時停止の操作が行われると、再生制
御部１４は、再生を一時停止させると共に、マルチプレ
クサ５−１への制御信号を１から０に切り換える。制御
信号が０になると、マルチプレクサ５−１は、操作内容
伝達経路ＡをＯＮさせ、操作内容伝達経路ＢをＯＦＦさ
せる。

【００４８】そのような状態で、操作装置６からある指
定されたデータの提示操作を入力すると、その操作内容
が処理起動部５に伝達され、処理起動部５は、データ処
理部３のデータ提示部３−１を起動させる。データ提示
部３−１は、指定されたデータを、図１に示すデータベ
ース４のデータ蓄積部４−１から読み出して、提示装置
２に提示させる。

【００４９】その提示が終了したら、再びマウスで、図
５に示される制御パネルの一時停止ボタン２４−４をク
リックすることにより、一時停止を解除する。一時停止
が解除されると、再生制御部１４は、マルチプレクサ５
−１への制御信号を０から１に切り換える。制御信号が
１になると、マルチプレクサ５−１は、操作内容伝達経
路ＡをＯＦＦさせ、操作内容伝達経路ＢをＯＮさせる。
それと同時に、再生制御部１４は、操作再生部１５に再
生を再開させる。

【００５０】

【発明の効果】以上述べた如く、本発明のマルチメディ
アデータ編集／提示方式によれば、次のような効果を奏
する。本発明において、操作内容蓄積手段に記録するデ
ータは、操作手段による操作内容と、操作が行われた時
点とであり、その内、操作内容を示すデータは操作手段
から直接得られるし、操作が行われた時点を示すデータ
は、操作が行われた時点を自動的に計測するカウンタか
ら直接得られる。したがって、操作内容，操作が行われ
た時点共、何ら手を加えること無く、記録制御手段によ
り自動的に、操作内容蓄積手段に記録することができ
る。その結果、編集時に、いちいちストップウォッチ等
で時間を計る必要はなく、データを提示させながら自動
的にタイムテーブルを記録していくことができ、従来の
ような入力作業の面倒さは解消される。

【００５１】また、再生は、再生制御手段により任意の
時点で一時停止又は終了させることができ、しかも、再
生の一時停止時や終了時には、いままで、操作再生手段
からデータ処理手段に操作内容を与えていたのを、操作
手段から直接データ処理手段に与えるように切り換える
ようにした。その結果、操作内容蓄積手段に記録された
タイムテーブルを再生することによって、自動的な提示
を行うと共に、任意の時点で自動的な提示を停止して、
操作手段による対話的な提示ができる。このように、自
動的な提示と対話的な提示とが任意に選択できるように
なった。

【図面の簡単な説明】

【図１】 本発明のマルチメディアデータ編集／提示方
式の概要を示すブロック図

【図２】 ノード情報の一例を示す図

【図３】 リンク情報の一例を示す図

【図４】 画面表示の一例を示す図

【図５】 制御パネルの一例を示す図

【図６】 マルチメディアデータ編集手順を示すフロー
チャート

【図７】 マルチメディアデータ提示手順を示すフロー
チャート

【図８】 タイムテーブルの一例を示す図

【図９】 入力操作−提示操作変換テーブルの一例を示
す図

【図１０】 操作内容の伝達経路制御機構の一例を示す
ブロック図

【図１１】 マルチプレクサの動作を説明する図

【図１２】 第１従来例のマルチメディアデータ編集／
提示方式の概要を示すブロック図

【図１３】 第３従来例を説明するためのタイムチャー
ト

【符号の説明】

１…入力装置、２…提示装置、３…データ処理部、３−
１…データ提示部、３−２…データ入力部、３−３…デ
ータ編集部、４…データベース、４−１…データ蓄積
部、４−２…ノード情報管理部、４−３…リンク情報管
理部、５…処理起動部、５−１…マルチプレクサ、６…
操作装置、７…操作内容抽出部、８…カウンタ、９…記
録制御指示部、１０…記録制御部、１１…操作記録部、
１２…操作内容蓄積部、１３…再生制御指示部、１４…
再生制御部、１５…操作再生部、２０…表示画面、２
１，２２，２３…マルチメディアウインドウ、２４…制
御パネル、２４−１〜１４…制御ボタン、３０…提示記
録部、３１…提示内容蓄積部、３２…提示再生部

Claims (1)

【特許請求の範囲】
1. 【請求項１】 マルチメディアデータを入力する入力手
   段と、マルチメディアデータを提示する提示手段と、マ
   ルチメディアデータを蓄積するデータ蓄積手段と、マル
   チメディアデータの提示，入力を操作する操作手段と、
   前記操作手段による操作が行われた時点を計測するカウ
   ンタと、前記操作手段による操作内容と前記カウンタの
   値とを蓄積する操作内容蓄積手段と、該操作内容蓄積手
   段への記録動作を制御する記録制御手段と、現在のカウ
   ンタの値と前記操作内容蓄積手段に蓄積されたカウンタ
   の値とを比較しながら前記操作内容蓄積手段に蓄積され
   た操作内容を順次再生する操作再生手段と、該操作再生
   手段の再生動作を制御する再生制御手段と、上記操作再
   生手段の動作時には該操作再生手段から与えられ、上記
   操作再生手段の停止時には上記操作手段から与えられる
   操作内容に従って前記データ蓄積手段に蓄積されたマル
   チメディアデータの提示及び前記入力手段からの入力を
   行うデータ処理手段とを具備することを特徴とするマル
   チメディアデータ編集／提示方式。