JP7272432B2

JP7272432B2 - 情報提示装置、方法およびプログラム

Info

Publication number: JP7272432B2
Application number: JP2021525484A
Authority: JP
Inventors: 雅也田丸; 真一郎永徳; 晃鈴木
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 2019-06-12
Filing date: 2019-06-12
Publication date: 2023-05-12
Anticipated expiration: 2039-06-12
Also published as: US20220237828A1; WO2020250353A1; JPWO2020250353A1

Description

本発明の実施形態は、情報提示装置、方法およびプログラムに関する。

オリジナル映像が表示される画面上に文字情報などの追加情報を重ね合わせることによる映像合成を行なう手法は一般的に用いられており、テレビ放送だけでなく、インターネットの動画配信サービスでも利用されている。
近年は、透明ディスプレイを利用して、映像ではなく実際の背景に情報を重ね合わせる拡張現実（AR(Augmented Reality)）の技術の普及が進んでいる。

既存の技術として、オリジナル映像に合成される追加情報の視認性を向上させる技術として、合成される情報の色を調整する技術がある（例えば非特許文献１を参照）。

SmartColor: Real-Time Color Correction and Contrast for Optical See-Through Head-Mounted Displays：http://hci.cs.umanitoba.ca/publications/details/smartcolor-real-time-color-correction-and-contrast-for-optical-see-through

オリジナル映像に追加情報が合成される際、または透明ディスプレイ越しの実際の背景に追加情報が合成される際、画面上でユーザが参照したいオブジェクトと、オリジナル映像に追加で重ね合わせる追加情報との一部または全部が重なり合い、ユーザが本来参照したいオブジェクトが追加情報に隠れてしまうことがある。このため、ユーザが参照したいオブジェクトの一部または全部、および追加情報の一部または全部の視認性が低下するケースがある。

そのため、参照したいオブジェクトの出現に合わせて、追加情報の表示位置を事前に手動で適宜設定する必要があり、ユーザ側の負担が大きくなる。

この発明は、上記事情に着目してなされたもので、その目的とするところは、映像の表示画面上におけるオブジェクトの適切な視認性、および映像に合成される情報の適切な視認性を実現することができるようにした情報提示装置、方法およびプログラムを提供することにある。

上記目的を達成するために、この発明の一態様に係る情報提示装置は、プロセッサを有し、前記プロセッサは、映像が表示された表示画面においてオブジェクトが表示される領域を抽出する第１の抽出処理を行ない、前記表示画面における、前記第１の抽出処理により抽出された領域以外の領域から、一定以上の面積を有する条件、前記第１の抽出処理により抽出された領域同士に挟まれない条件、又は前記表示画面のいずれかの縁に接する条件の少なくとも１つを満たす領域であって、前記映像に合成する合成情報を表示させる領域の候補である複数の表示候補領域を抽出する第２の抽出処理を行ない、前記第２の抽出処理により抽出された領域のうち所定の位置に最も近い領域を、前記表示画面における、前記合成情報を表示させる領域として選択する選択処理を行ない、前記表示画面における、前記選択処理により選択された領域に前記合成情報を表示する表示処理を行なう、ように構成される。

本発明の一態様に係る情報提示方法は、プロセッサを具備する情報提示装置が行なう方法であって、前記プロセッサは、映像が表示された表示画面においてオブジェクトが表示される領域を抽出する第１の抽出処理を行ない、前記プロセッサは、前記表示画面における、前記第１の抽出処理により抽出された領域以外の領域から、一定以上の面積を有する条件、前記第１の抽出処理により抽出された領域同士に挟まれない条件、又は前記表示画面のいずれかの縁に接する条件の少なくとも１つを満たす領域であって、前記映像に合成する合成情報を表示させる領域の候補である複数の表示候補領域を抽出する第２の抽出処理を行ない、前記プロセッサは、前記第２の抽出処理により抽出された領域のうち所定の位置に最も近い領域を、前記表示画面における、前記合成情報を表示させる領域として選択する選択処理を行ない、前記プロセッサは、前記表示画面における、前記選択処理により選択された領域に前記合成情報を表示する表示処理を行なう。

本発明によれば、映像の表示画面上におけるオブジェクトの適切な視認性、および映像に合成される情報の適切な視認性を実現することができる。

図１は、本発明の一実施形態に係る情報提示装置の適用例を示す図である。図２は、情報提示装置のハードウェア構成の一例を示す図である。図３は、本発明の一実施形態に係る情報提示装置による処理動作の一例を示すフローチャートである。図４は、入力されたオリジナル映像、およびオブジェクトの一例を示す図である。図５は、合成情報表示可能領域の一例を示す図である。図６は、合成情報表示候補領域の一例を示す図である。図７は、合成情報表示領域の抽出の一例を示す図である。図８は、合成情報表示候補領域に係る修正の一例を示す図である。図９は、画面上のオブジェクトの位置の移動に伴う合成情報表示候補領域の更新の一例を示す図である。図１０は、画面上のオブジェクトの移動前における合成情報表示候補領域の一例を示す図である。図１１は、画面上のオブジェクトの移動後における、更新された合成情報表示候補領域の一例を示す図である。図１２は、更新後の合成情報表示候補領域における、最大の面積を有する領域の一例を示す図である。

以下、図面を参照しながら、この発明に係わる一実施形態を説明する。
図１は、本発明の一実施形態に係る情報提示装置の適用例を示す図である。
図１に示すように、情報提示装置１００は、映像入力部１０、制御部２０、合成情報データベース（ＤＢ）３０、および情報表示部４０を有する。
制御部２０は、オブジェクト抽出部２１、映像出力部２２、動的位置決定部２３、および合成情報出力部２４を有する。
動的位置決定部２３は、合成情報表示領域抽出部２３ａおよび合成情報位置決定部２３ｂを有する。

図２は、情報提示装置１００のハードウェア構成の一例を示す図である。図２に示すように、情報提示装置１００は、ハードウェアとして、ＣＰＵ（Central Processing Unit）５０１、ＲＡＭ（Random Access Memory）５０２、プログラムメモリ５０３、補助記憶装置５０４、通信インタフェース５０５、入出力インタフェース５０６、及びバス５０７を備える。ＣＰＵ５０１は、バス５０７を介して、ＲＡＭ５０２、プログラムメモリ５０３、補助記憶装置５０４、通信インタフェース５０５、及び入出力インタフェース５０６と通信する。

ＣＰＵ５０１は、汎用ハードウェアプロセッサの一例である。ＲＡＭ５０２は、ワーキングメモリとしてＣＰＵ５０１により使用される。ＲＡＭ５０２は、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）などの揮発性メモリを含む。プログラムメモリ５０３は、制御部２０による処理プログラムを含む種々のプログラムを記憶する。プログラムメモリ５０３として、例えば、ＲＯＭ（Read-Only Memory）、補助記憶装置５０４の一部、又はその組み合わせが使用される。補助記憶装置５０４は、データを非一時的に記憶する。補助記憶装置５０４は、ハードディスクドライブ（ＨＤＤ）又はソリッドステートドライブ（ＳＳＤ）などの不揮発性メモリを含む。補助記憶装置５０４は、制御部２０による処理における各種データを記憶する。

通信インタフェース５０５は、外部の通信装置と通信するためのインタフェースである。通信インタフェース５０５は、例えば、有線ＬＡＮ端子を備え、ＬＡＮケーブルによって、インターネットを含み得る通信ネットワークに接続される。入出力インタフェース５０６は、入力装置及び出力装置を接続するための複数の端子を備える。入力装置の例は、キーボード、マウス、マイクロフォンなどを含む。出力装置の例は、表示装置、スピーカなどを含む。

プログラムメモリ５０３に記憶される各プログラムはコンピュータ実行可能命令を含む。プログラム（コンピュータ実行可能命令）は、ＣＰＵ５０１により実行されると、所定の処理をＣＰＵ５０１に実行させる。例えば、情報提示装置１００内の各部の機能を実現するプログラムは、ＣＰＵ５０１により実行されると、情報提示装置１００内の各部に関して説明される一連の処理をＣＰＵ５０１に実行させる。

プログラムは、コンピュータで読み取り可能な記憶媒体に記憶された状態で情報提示装置１００に提供されてよい。この場合、例えば、情報提示装置１００は、記憶媒体からデータを読み出すドライブ（図示せず）をさらに備え、記憶媒体からプログラムを取得する。記憶媒体の例は、磁気ディスク、光ディスク（ＣＤ－ＲＯＭ、ＣＤ－Ｒ、ＤＶＤ－ＲＯＭ、ＤＶＤ－Ｒなど）、光磁気ディスク（ＭＯなど）、半導体メモリを含む。また、プログラムを通信ネットワーク上のサーバに格納し、情報提示装置１００が通信インタフェース５０５を使用してサーバからプログラムをダウンロードするようにしてもよい。

実施形態において説明される処理は、ＣＰＵ５０１などの汎用プロセッサがプログラムを実行することにより行われることに限らず、ＡＳＩＣ（Application Specific Integrated Circuit）などの専用プロセッサにより行われてもよい。図２に示す例では、ＣＰＵ５０１、ＲＡＭ５０２、及びプログラムメモリ５０３を用いて処理回路（processing circuitry）を実現できる。処理回路は、少なくとも１つの汎用ハードウェアプロセッサ、少なくとも１つの専用ハードウェアプロセッサ、又は少なくとも１つの汎用ハードウェアプロセッサと少なくとも１つの専用ハードウェアプロセッサとの組み合わせ、のいずれかを含む。また、映像入力部１０、情報表示部４０は、入出力インタフェース５０６を用いて実現でき、合成情報データベース（ＤＢ）３０は補助記憶装置５０４を用いて実現できる。

なお、情報提示装置１００は１つのコンピュータ（情報処理装置）により実施されることに限定されない。情報提示装置１００は複数のコンピュータにより実施されてもよい。例えば、情報提示装置１００は、映像入力部１０及び制御部２０として機能するコンピュータと、合成情報データベース（ＤＢ）３０及び情報表示部４０として機能するコンピュータと、で構成されてよい。

図３は、本発明の一実施形態に係る情報提示装置による処理動作の一例を示すフローチャートである。
この処理動作では、情報提示装置の初回起動時において、制御部２０の映像出力部２２は、初期のオブジェクトを含むオリジナル映像を情報表示部４０に出力し、この映像が情報表示部４０により画面上に表示されているとする。

情報提示装置１００の映像入力部１０は、外部からのオリジナル映像を入力する（Ｓ１１）。
図４は、入力されたオリジナル映像、およびオブジェクトの一例を示す図である。
図４に示した例では、映像入力部１０により入力されたオリジナル映像の画面の左上付近に、やや横長の楕円状のオブジェクトＡ－１が表示され、オリジナル映像の画面の中央付近に縦長の楕円状のオブジェクトＡ－２が表示され、オリジナル映像の画面の下部に数字「０１２３４５６７８９０」を示すオブジェクトＢ－１が表示される。

次に、制御部２０のオブジェクト抽出部２１は、オリジナル映像から、このオリジナル映像で表示される１つまたは複数のオブジェクトを検出し、オリジナル映像の画面における、オブジェクト、例えば図４に示すオブジェクトＡ－１，Ａ－２，Ｂ－１が占める領域であるオブジェクト領域を抽出する（Ｓ１２）。
オブジェクト抽出部２１は、抽出されたオブジェクト領域を示す座標の情報を内部メモリに記録する（Ｓ１３）。

この記録された、オブジェクトが占める領域の座標に変更が生じたとき、つまり画面上のオブジェクトの位置が移動した、オブジェクト自体が変更された、または新たなオブジェクトが追加されたときは（Ｓ１４のＹＥＳ）、動的位置決定部２３の合成情報表示領域抽出部２３ａは、画面上における、オリジナル映像の全領域から、オブジェクトが示す領域を除いた領域を、オリジナル映像に合成（追加）される情報である合成情報を表示可能な領域である合成情報表示可能領域として抽出し、この合成情報表示可能領域の座標を内部メモリに記録する（Ｓ１５）。この合成情報表示可能領域は、実際の合成情報の表示先の大枠の候補であり、実際の合成情報の表示先は、この合成情報表示可能領域から絞り込まれた領域である。

図５は、合成情報表示可能領域の一例を示す図である。
図５に示した例では、オリジナル映像の全領域から、オブジェクトＡ－１，Ａ－２，Ｂ－１が示す領域以外の領域ｒが合成情報表示可能領域である。
合成情報表示領域抽出部２３ａは、Ｓ１５で抽出された合成情報表示可能領域から、合成情報を表示させる領域の候補である、合成情報表示候補領域を抽出する（Ｓ１６）。

Ｓ１６の具体例として、合成情報表示領域抽出部２３ａは、合成情報表示可能領域において、ｘ軸に平行かつオブジェクトと交差しない２本の線と、ｙ軸に平行かつオブジェクトと交差しない２本の線とで囲まれ、かつオブジェクトが示す領域を含まない長方形または正方形をなす領域を合成情報表示候補領域として抽出する。

本実施形態では、実際の合成情報の表示先の候補として適切な領域が抽出されるように、例えば、一定以上の面積を有するとの条件、オブジェクト同士に挟まれないとの条件、又は画面上のいずれかの縁に接するとの条件、などの各種条件の少なくとも１つを満たす領域が、合成情報表示候補領域として抽出されてもよい。また、上記条件を満たす複数の合成情報表示候補領域同士の一部が画面上で重なる場合に、これらの領域のうち面積が広い領域のみが合成情報表示候補領域として抽出されてもよい。

合成情報表示領域抽出部２３ａは、抽出された合成情報表示候補領域の座標を、初期状態をゼロとする合成情報表示候補領域リストへ追加する（Ｓ１７）。このリストは、合成情報表示領域抽出部２３ａの内部メモリに記録される。

Ｓ１７の後、合成情報表示領域抽出部２３ａは、上記の合成情報表示可能領域から、他の合成情報表示候補を抽出できる、つまり上記の合成情報表示可能領域のうち、未だ抽出されていない合成情報表示候補があれば（Ｓ１８のＹＥＳ）、Ｓ１６以降の処理を再度行なう。これにより他の合成情報表示候補の抽出がなされる。

図６は、合成情報表示候補領域の一例を示す図である。
図６に示した例では、Ｓ１６，Ｓ１７が複数回にわたり実行されることで、以下の６つの領域Ｃ_１～Ｃ_６が合成情報表示候補領域として抽出される。
（１）合成情報表示可能領域における左上の角部、上辺、左辺、オブジェクトＡ－１の上端部、およびオブジェクトＡ－２の左上付近の端部にそれぞれ接する横長の長方形をなす領域Ｃ_１
（２）合成情報表示可能領域における左上および左下の角部、左辺、上辺、下辺、およびオブジェクトＡ－１の左端部にそれぞれ接する縦長の長方形をなす領域Ｃ_２
（３）合成情報表示可能領域における左辺、オブジェクトＡ－１の下端部、およびオブジェクトＡ－２の左下付近の端部にそれぞれ接する横長の長方形をなす領域Ｃ_３
（４）合成情報表示可能領域における右上の角部、上辺、右辺、オブジェクトＡ－２の右端部、オブジェクトＢ－１の上辺、およびオブジェクトＢ－１の右上の角部にそれぞれ接する正方形状の領域Ｃ_４
（５）合成情報表示可能領域における左下の角部、左辺、下辺、オブジェクトＡ－１の下端部、およびオブジェクトＢ－１の左端付近にそれぞれ接する正方形状の領域Ｃ_５
（６）合成情報表示可能領域における右上および右下の角部、上辺、下辺、右辺、およびオブジェクトＢ－１の右端付近にそれぞれ接する縦長の長方形をなす領域Ｃ_６

図７は、合成情報表示領域の抽出の一例を示す図である。
次に、合成情報位置決定部２３ｂは、ここまで抽出された合成情報表示候補領域のうち、最大の面積を有する領域を、合成情報を実際に表示させる、最終的かつ最適な１つの領域である合成情報表示領域として、上記の合成情報表示候補領域リストから選択する（Ｓ１９）。合成情報表示領域としては、最大の面積を有する領域に限らず、例えば、上記抽出された合成情報表示候補領域における所定の位置に最も近い領域などが選択されてもよい。

図７に示した例では、Ｃ_１～Ｃ_６において、Ｃ_ｉ（ｉ＝１，…，６）の左下座標を（ｘ_ｉ１,ｙ_ｉ２）、右下座標を（ｘ_ｉ２,ｙ_ｉ２）、左上座標を（ｘ_ｉ１,ｙ_ｉ１）、右上座標を（ｘ_ｉ２,ｙ_ｉ１）としたときに、Ｃ_ｉの面積Ｓ_ｉを以下のように定義する。
Ｓ_ｉ＝（ｘ_ｉ２－ｘ_ｉ１）×（ｙ_ｉ１－ｙ_ｉ２） … 式（１）
このうち、合成情報位置決定部２３ｂは、Ｓ_ｉが最大となるＣ_ｉ（図７の場合はＣ_４）を合成情報表示領域として選択する。

図８は、合成情報表示候補領域に係る修正の一例を示す図である。
ここで、Ｓ１９での選択に先立ち、画面上でオブジェクトと合成情報とが一定距離だけ離れて位置するように、合成情報位置決定部２３ｂは、合成情報表示候補領域リストに示される合成情報表示候補領域の各辺のうちｙ軸方向の辺であってオブジェクトと接する辺の位置が、このオブジェクトから離れた当該領域の内側に修正されるように、当該辺のｘ軸方向の座標を修正してもよい。

同様に、合成情報位置決定部２３ｂは、合成情報表示候補領域リストに示される、上記合成情報表示候補領域の各辺のうちｘ軸方向の辺であってオブジェクトと接する辺の位置が、このオブジェクトから離れた当該領域の内側に修正されるように、当該辺のｙ軸方向の座標を修正してもよい。
各辺の座標の修正は、合成情報表示候補領域リストに示される合成情報表示候補領域の各々についてなされる。

図８に示した例では、修正対象の合成情報表示候補領域である領域Ｃ_ｉについて、ｙ軸方向の辺であってオブジェクトと接する辺のｘ軸方向の座標がｘ_ｉ１からｘ_ｉ１＋αに修正され、ｘ軸方向の辺であってオブジェクトと接する辺のｙ軸方向の座標がｙ_ｉ２からｙ_ｉ２＋βに修正される。
この修正により、修正前の領域Ｃ_ｉは、当該領域Ｃ_ｉより小さい領域Ｃ’_ｉに修正される。

このように座標の修正がなされたときのＳ１９の処理では、修正後の座標で示される各合成情報表示候補領域の各面積のうち最大の面積を有する領域が、上記の合成情報表示候補から選択される。

合成情報位置決定部２３ｂは、Ｓ１９で選択された領域を示す情報ととともに、合成情報データベース３０に記憶される合成情報を合成情報出力部２４に出力する。合成情報出力部２４は、この合成情報を、情報表示部４０により表示されるオリジナル映像の画面上における、Ｓ１９で選択された領域に該当する位置に表示させる（Ｓ２０）。
ここでは、オリジナル映像の画面上における、Ｓ１９で選択された領域に該当する位置に、図４に示した文字情報「ＡＢＣＤＥＦＧＨＩＪＫＬＭＮＯＰＱＵＳＴＵＶＷＸＹＺ」を示す合成情報Ｍなどを表示できる。
合成情報の表示においては、当該合成情報のサイズがＳ１９で選択された領域のサイズ以内となるように、合成情報出力部２４は、当該合成情報のサイズを所定の標準のサイズより小さいサイズに修正してもよい。

Ｓ２０の後、または、上記記録された、オブジェクトが占める領域の座標に変更が生じていないときで（Ｓ１４のＮＯ）、オリジナル映像の入力が継続されていれば（Ｓ２１のＹＥＳ）、Ｓ１１に戻り、オリジナル映像の入力が継続されていなければ（Ｓ２１のＮＯ）、一連の処理が終了する。

次に、画面上のオブジェクトの位置の移動に伴う合成情報表示候補領域リストの更新について説明する。図９は、画面上のオブジェクトの位置の移動に伴う合成情報表示候補領域の更新の一例を示す図である。
画面上にオブジェクトＡ－１，Ａ－２，Ｂ－１および合成情報Ｍがそれぞれ表示されている状態で、オブジェクトの位置が移動した場合、例えば図９に示すように、画面左側に位置するオブジェクトＡ－１，Ａ－２が画面右側にそれぞれ移動したとき、この移動したオブジェクトを含む各オブジェクトと、画面右側に位置する合成情報とが画面上で重ならないように、合成情報の位置を移動させる必要がある。このため、合成情報位置決定部２３ｂは、合成情報表示候補領域リストを動的に更新する。

図１０は、画面上のオブジェクトの移動前における合成情報表示候補領域の一例を示す図である。図１０に示した例では、画面上のオブジェクトの移動前では、図６に示した領域Ｃ_１、Ｃ_４、Ｃ_５が合成情報表示候補領域として抽出されているとする。

図１１は、画面上のオブジェクトの移動後における、更新された合成情報表示候補領域の一例を示す図である。
図１１に示した例では、画面左側に位置していたオブジェクトＡ－１，Ａ－２が画面右側にそれぞれ移動したとき、合成情報表示領域抽出部２３ａは、合成情報表示候補領域リストで示される合成情報表示候補領域の座標を、当該領域が移動後のオブジェクトの領域に重ならないように、合成情報表示候補領域、例えば図１１に示す領域Ｃ_１ｒ、Ｃ_４ｒ、およびＣ_５ｒを改めて抽出する。これにより、合成情報表示候補領域が更新される。

図１１に示した領域Ｃ_１ｒは、図１０に示した領域Ｃ_１から更新された領域であり、合成情報表示候補領域の左上および左上の角部、上辺、左辺、移動後のオブジェクトＡ－１の左端部、およびオブジェクトＢ－１の上辺、左上の角部にそれぞれ接する、やや横長の長方形をなす領域である。

図１１に示した領域Ｃ_４ｒは、図１０に示した領域Ｃ_４から更新された領域であり、合成情報表示可能領域の右上および右下の角部、上辺、下辺、右辺および移動後のオブジェクトＡ－２の右端部にそれぞれ接する、縦長の長方形をなす領域である。

図１１に示した領域Ｃ_５ｒは、図１０に示した領域Ｃ_５から更新された領域であり、合成情報表示候補領域の左上および左下の角部、上辺、下辺、左辺、およびオブジェクトＢ－１の左端付近にそれぞれ接する、縦長の長方形をなす領域である。

図１２は、更新後の合成情報表示候補領域における、最大の面積を有する合成情報表示候補領域の一例を示す図である。
図１２に示した例では、更新後の合成情報表示候補領域Ｃ_１ｒ、Ｃ_４ｒ、Ｃ_５ｒのうち、最大の面積を有する領域Ｃ_１ｒが、新たな合成情報表示領域として合成情報位置決定部２３ｂにより選択される。
これにより、画面上のオブジェクトの位置が移動しても、合成情報表示領域が適切な領域に更新される。

以上説明したように、本発明の一実施形態に係る情報提示装置は、オリジナル映像に合成する合成情報を、画面上に表示されているオブジェクトに重なり合わずに表示する事が可能となる。

また、本発明の一実施形態に係る情報提示装置は、オリジナル映像におけるオブジェクトの領域に応じて、合成情報を表示させる領域を動的に定めることができるので、合成情報の表示位置を事前に静的に設定しておく必要が無くなる。
よって、本実施形態では、合成情報の視認性の向上、およびオリジナル映像に表示されるオブジェクトの視認性の向上をそれぞれ実現する事ができる。

なお、本願発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。

１０…映像入力部
２０…制御部
２１…オブジェクト抽出部
２２…映像出力部
２３…動的位置決定部
２３ａ…合成情報表示領域抽出部
２３ｂ…合成情報位置決定部
２４…合成情報出力部
３０…合成情報データベース
４０…情報表示部
１００…情報提示装置
５０１…ＣＰＵ
５０２…ＲＡＭ
５０３…プログラムメモリ
５０４…補助記憶装置
５０５…通信インタフェース
５０６…入出力インタフェース
５０７…バス

Claims

プロセッサを有し、
前記プロセッサは、
映像が表示された表示画面においてオブジェクトが表示される領域を抽出する第１の抽出処理を行ない、
前記表示画面における、前記第１の抽出処理により抽出された領域以外の領域から、一定以上の面積を有する条件、前記第１の抽出処理により抽出された領域同士に挟まれない条件、又は前記表示画面のいずれかの縁に接する条件の少なくとも１つを満たす領域であって、前記映像に合成する合成情報を表示させる領域の候補である複数の表示候補領域を抽出する第２の抽出処理を行ない、
前記第２の抽出処理により抽出された領域のうち所定の位置に最も近い領域を、前記表示画面における、前記合成情報を表示させる領域として選択する選択処理を行ない、
前記表示画面における、前記選択処理により選択された領域に前記合成情報を表示する表示処理を行なう、ように構成される、
情報提示装置。
前記プロセッサは、
前記選択処理として、
前記第２の抽出処理により抽出された領域のうち最大の面積を有する領域を、前記表示画面における、前記合成情報を表示させる領域として選択する、ように構成される、
請求項１に記載の情報提示装置。
前記プロセッサは、
前記第２の抽出処理として、
前記表示画面における、前記オブジェクトが表示される領域から一定距離だけ離れた領域を、前記第１の抽出処理により抽出された領域以外の領域から前記表示候補領域として抽出する、ように構成される、
請求項１に記載の情報提示装置。
前記プロセッサは、
前記第２の抽出処理として、
前記複数の表示候補領域が抽出された後に、前記第１の抽出処理により抽出された、前記オブジェクトが表示される領域が変更されたときに、前記表示画面における前記変更された領域以外の領域から前記複数の表示候補領域を再度抽出する、ように構成される、
請求項１に記載の情報提示装置。
プロセッサを具備する情報提示装置が行なう情報提示方法であって、
前記プロセッサは、映像が表示された表示画面においてオブジェクトが表示される領域を抽出する第１の抽出処理を行ない、
前記プロセッサは、前記表示画面における、前記第１の抽出処理により抽出された領域以外の領域から、一定以上の面積を有する条件、前記第１の抽出処理により抽出された領域同士に挟まれない条件、又は前記表示画面のいずれかの縁に接する条件の少なくとも１つを満たす領域であって、前記映像に合成する合成情報を表示させる領域の候補である複数の表示候補領域を抽出する第２の抽出処理を行ない、
前記プロセッサは、前記第２の抽出処理により抽出された領域のうち所定の位置に最も近い領域を、前記表示画面における、前記合成情報を表示させる領域として選択する選択処理を行ない、
前記プロセッサは、前記表示画面における、前記選択処理により選択された領域に前記合成情報を表示する表示処理を行なう、
情報提示方法。
前記プロセッサは、
前記選択処理として、
前記第２の抽出処理により抽出された領域のうち最大の面積を有する領域を、前記表示画面における、前記合成情報を表示させる領域として選択する、
請求項５に記載の情報提示方法。
前記プロセッサは、
前記第２の抽出処理として、
前記表示画面における、前記オブジェクトが表示される領域から一定距離だけ離れた領域を、前記第１の抽出処理により抽出された領域以外の領域から前記表示候補領域として抽出する、
請求項５に記載の情報提示方法。
請求項１乃至４のいずれか１項に記載の情報提示装置の前記各処理として前記プロセッサを機能させる情報提示処理プログラム。