JP2014090386A - 情報処理システム、情報処理装置、およびプログラム - Google Patents

Abstract

【課題】現在位置に対応するコンテンツを通知することが可能な情報処理システム、情報処理装置、およびプログラムを提供する。
【解決手段】所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースと、現在位置を特定する位置特定部と、前記データベースに、前記現在位置に対応するコンテンツが有るか否かを判断する判断部と、前記判断部により前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、
前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部と、を備える、情報処理システム。
【選択図】図１

Description

本開示は、情報処理システム、情報処理装置、およびプログラムに関する。

近年、モバイル端末の通信速度や、記憶容量、表示画面の精密度等の技術が格段と進歩し、映画やドラマ等のビデオコンテンツを手軽にモバイル端末にダウンロードして閲覧を楽しめるようになった。このようなビデオコンテンツの管理に関する技術として例えば次のような技術が開示されている。

例えば、下記特許文献１では、既に上映または放映された映画やテレビ番組をデータベース化することによって、プロが作成した映画やテレビ番組の高画質・高音質のデータを利用することが提案されている。より具体的には、特許文献１に記載のダウンロードシステムでは、ユーザは映像作品の任意の一部の音声データや動画データにアクセスしてダウンロードすることが可能となり、これを通信端末の待受画面や着信用メロディ等に利用できる。

また、下記特許文献２では、シーンコンテンツデータと関連するリンク情報を自動的に含ませる技術が開示されている。また、シーンコンテンツデータ（撮影画像）とＧＰＳ位置情報（撮影場所情報）とをリンクすることも記載されている。

特開２００２−３２５２４１号公報 特表２００７−５２８０５６号公報

しかしながら、上記いずれの特許文献においても、映像コンテンツを閲覧する場所については特に限定されておらず、映像コンテンツの名場面や名シーンの世界を、実世界とリンクさせてユーザに提供することについては何ら言及されていなかった。

そこで、本開示では、現在位置に対応するコンテンツを通知することが可能な、新規かつ改良された情報処理システム、情報処理装置、およびプログラムを提案する。

本開示によれば、所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースと、現在位置を特定する位置特定部と、前記データベースに、前記現在位置に対応するコンテンツが有るか否かを判断する判断部と、前記判断部により前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部と、を備える、情報処理システムを提案する。

本開示によれば、現在位置を特定する位置特定部と、所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースを有するサーバにより、当該データベースに前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部と、を備える、情報処理装置を提案する。

本開示によれば、コンピュータに、現在位置を特定する位置特定部と、所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースを有するサーバにより、当該データベースに前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部、として機能させるための、プログラムを提案する。

以上説明したように本開示によれば、現在位置に対応するコンテンツを通知することが可能となる。

本開示の一実施形態による通知システムの概要を説明するための図である。 第１の実施形態によるＨＭＤの内部構成例を示すブロック図である。 第１の実施形態による動作制御部の構成を示すブロック図である。 第１の実施形態によるサーバの構成を示すブロック図である。 第１の実施形態によるコンテンツＤＢに格納されているデータの一例を示す図である。 第１の実施形態のＨＭＤによる通知処理を示すフローチャートである。 第１の実施形態による該当シーンのリスト取得処理を示すフローチャートである。 第１の実施形態によるＡＲ表示の具体例を示す図である。 視線入力により該当シーンの再生を開始する場合について説明するための図である。 第２の実施形態による動作制御部の構成を示すブロック図である。 第２の実施形態のＨＭＤによる通知処理を示すフローチャートである。 第２の実施形態による優先順位決定処理を示すフローチャートである。 第２の実施形態によるＡＲ表示の具体例を示す図である。 音声入力により所望の該当シーンの再生を開始する場合について説明するための図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による通知システムの概要
２．各実施形態
２−１．第１の実施形態
２−１−１．ＨＭＤの内部構成例
２−１−２．サーバの構成
２−１−３．通知処理
２−２．第２の実施形態
３．まとめ

＜＜１．本開示の一実施形態による通知システムの概要＞＞
図１は、本開示の一実施形態による通知システム（情報処理システム）の概要を説明するための図である。図１に示すように、本実施形態による通知システムは、ユーザ端末の一例であるＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）１およびサーバ３０を含む。

図１に示すＨＭＤは、眼鏡型ディスプレイまたはシースルーＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）と称される。具体的には、ＨＭＤ１は、例えば両側頭部から後頭部にかけて半周回するようなフレームの構造の装着ユニットを持ち、図１に示すように両耳殻にかけられることでユーザに装着される。そしてこのＨＭＤ１は、図１に示すような装着状態において、ユーザの両眼の直前、即ち通常の眼鏡におけるレンズが位置する場所に、左眼用と右眼用の一対の表示部２ａ、２ｂが配置される構成とされている。この表示部２（表示部２ａ、２ｂ）には、例えば液晶パネルが用いられ、ＨＭＤ１は、液晶パネルの透過率を制御することで、図１に示すようなスルー状態、即ち透明または半透明の状態とできる。表示部２がスルー状態とされることで、ＨＭＤ１を眼鏡のようにユーザが常時装着していても、通常の生活には支障がない。

さらに、表示部２は、透明または半透明の状態のまま、テキストや図等の画像を表示することで、現実空間の風景にＡＲ（拡張現実）情報を重畳表示することができる。

また、表示部２は、撮像レンズ３ａで撮像された現実空間の撮像画像を表示部２に表示し、当該現実空間の撮像画像にＡＲ（拡張現実）情報を重畳表示することも可能である。また、表示部２は、ＨＭＤ１が外部機器から受信したコンテンツや、ＨＭＤ１の記憶媒体に記憶されるコンテンツを再生表示することも可能である。外部機器とは、図１に示すサーバ３０の他、デジタルカメラ、デジタルビデオカメラ、または携帯電話端末、スマートフォン、パーソナルコンピュータ等の情報処理装置などである。

表示部２に再生表示されるコンテンツとしては、例えば映画やビデオクリップなどの動画コンテンツ、デジタルスチルカメラ等で撮像された静止画コンテンツ、電子書籍等のデータであってもよい。また、かかるコンテンツは、ユーザがパーソナルコンピュータ等で作成した画像データ、テキストデータ、表計算データ等のコンピュータユースのデータ、ゲームプログラムに基づくゲーム画像など、表示対象となるあらゆるデータが想定される。

また、ユーザが装着した状態において、ユーザが視認する方向を被写体方向として撮像するように、前方に向けて撮像レンズ３ａが配置されている。また撮像レンズ３ａによる撮像方向に対して照明を行う発光部４ａが設けられる。発光部４ａは例えばＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）により形成される。

また、図１では左耳側しか示されていないが、装着状態でユーザの右耳孔および左耳孔に挿入できる一対のイヤホンスピーカ５ａが設けられる。

また右眼用の表示部２ａの右方と、左眼用の表示部２ｂの左方に、外部音声を集音するマイクロホン６ａ、６ｂが配置される。

なお図１に示すＨＭＤ１の外観は一例であり、ＨＭＤ１をユーザが装着するための構造は多様に考えられる。ＨＭＤ１は、一般に眼鏡型、あるいは頭部装着型とされる装着ユニットで形成されればよく、少なくとも本実施の形態としては、ユーザの眼の前方に近接して表示部２が設けられていればよい。また表示部２は、両眼に対応して一対設けられる他、片側の眼に対応して１つ設けられる構成でもよい。

またイヤホンスピーカ５ａは、左右のステレオスピーカとせずに、一方の耳にのみ装着するために１つ設けられるのみでもよい。またマイクロホンも、マイクロホン６ａ、６ｂのうちの一方でもよい。

また、マイクロホン６ａ、６ｂやイヤホンスピーカ５ａを備えない構成も考えられる。また発光部４ａを設けない構成も考えられる。

ここで、上述したように、特許文献１、２に記載のシステムでは、映像コンテンツを閲覧する場所は特に限定されておらず、映像コンテンツの名場面や名シーンの世界を、実世界とリンクさせてユーザに提供することについては何ら言及されていなかった。

しかしながら、実際に現在ユーザが居る場所（実世界）と、映像コンテンツの名場面や名シーンの世界をリンクさせてユーザに提供することができれば、映像コンテンツのエンターテインメント性がより向上する。

そこで、上記事情を一着眼点にして本開示の各実施形態による通知システムを創作するに至った。本開示の各実施形態による通知システムでは、ＨＭＤ１の現在位置を特定し、現在位置に対応するコンテンツをＨＭＤ１においてユーザに通知することができる。また、ＨＭＤ１は、この通知に対するユーザのアクションに応じて、コンテンツを再生制御することができる。これにより、ユーザは、実世界とリンクされた映像コンテンツの名場面や名シーンを楽しむことができる。

以下、このような本開示の各実施形態について順次説明する。なお、図１に示す例では、ユーザ端末（情報処理装置）の一例としてメガネ型ディスプレイ（シースルーＨＭＤ）を用いたが、本開示によるユーザ端末はこれに限定されない。例えば、ユーザ端末は、メガネ型以外のＨＭＤ、デジタルカメラ、デジタルビデオカメラ、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、ノートＰＣ、タブレット端末、携帯電話端末、スマートフォン、携帯用音楽再生装置、携帯用映像処理装置または携帯用ゲーム機器等であってもよい。

＜＜２．各実施形態＞＞
＜２−１．第１の実施形態＞
［２−１−１．ＨＭＤの内部構成例］
図２は、図１に示すＨＭＤ１の内部構成例を示すブロック図である。図２に示すように、ＨＭＤ１は、表示部２、撮影部３、照明部４、音声出力部５、音声入力部６、システムコントローラ１０、撮像制御部１１、表示画像処理部１２、表示駆動部１３、表示制御部１４、撮像信号処理部１５、音声信号処理部１６、画像解析部１７、照明制御部１８、周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、ストレージ部２５、通信部２６、画像入出力コントロール２７、音声入出力コントロール２８、および音声合成部２９を有する。

（システムコントローラ）
システムコントローラ１０は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、不揮発性メモリ、インタフェース部を備えたマイクロコンピュータにより構成され、ＨＭＤ１の各構成を制御する。

また、システムコントローラ１０は、図２に示すように、ＨＭＤ１の位置を特定する位置特定部１０ａ、ＨＭＤ１の動作を制御する動作制御部１０ｂとして機能する。

・位置特定部
位置特定部１０ａは、ＧＰＳ受信部２１、画像解析部１７、または音声信号処理部１６から出力されるデータに基づいて、ＨＭＤ１の現在位置（現在地）を特定する。具体的には、例えば位置特定部１０ａは、ＧＰＳ受信部２１から実時間で受信される現在位置情報（緯度経度等）を現在位置として特定する。また、位置特定部１０ａは、実時間で撮影部３により撮影され、画像解析部１７により解析された撮影画像を現在位置として特定してもよい。また、位置特定部１０ａは、実時間で音声入力部６により集音され、音声信号処理部１６により処理された音声で示された名称を現在位置として特定してもよい。なお、名称とは、住所、地名、施設名（公園名含む）、または建物名等である。

・動作制御部１０ｂ
動作制御部１０ｂは、ＨＭＤ１の各動作を制御する。以下、図３を参照して動作制御部１０ｂの機能構成について説明する。

図３は、図２に示す動作制御部１０ｂの機能構成を示すブロック図である。図３に示すように、動作制御部１０ｂは、該当シーン取得部１００、通知部１１０、および再生制御部１２０として機能する。

該当シーン取得部１００は、位置特定部１０ａにより特定されたＨＭＤ１の現在位置に対応するコンテンツ（該当シーン）をサーバ３０から取得する。現在位置に対応するコンテンツとは、その場所で撮影された動画（映画、ドラマ、ＣＭ、ミュージックビデオ等の映像）や静止画、その場所が舞台（モデル）となっている映像やアニメーション、小説等である。また、該当シーン取得部１００は、現在位置に対応するコンテンツをサーバ３０から取得してもよい。この際、該当シーン取得部１００は、位置特定部１０ａに特定された現在位置をサーバ３０に送信してまず該当シーンのリストを取得し、ユーザによる再生コマンドが入力された場合に再生指示された該当シーンをサーバ３０からダウンロードしてもよい。

通知部１１０は、サーバ３０により該当シーンがあると判断された場合、現在位置に対応するコンテンツがあることをユーザに通知する。サーバ３０により該当シーンがあると判断された場合とは、該当シーンがある旨の判断結果をサーバ３０から受信した場合、または該当シーン取得部１００により、該当シーンリストや該当シーンのデータをサーバ３０から取得した場合を含む。また、通知部１１０による具体的な通知方法は、例えば画面表示、音声、振動、圧力、発光、または温度変化による通知が挙げられる。

例えば通知部１１０は、該当シーンの１フレーム、または該当シーンが含まれる映像作品のタイトルやオープニング画面を表示部２の一部に表示したり、該当シーンが含まれる映像作品のメインテーマ曲を音声出力部５から再生したりする。また、通知部１１０は、アラーム音や着信音を音声出力部５から再生してもよい。また、通知部１１０は、振動部（不図示）によりＨＭＤ１を振動させたり、圧電素子（不図示）をたわませることで両耳殻にかけられるフレーム部分を歪ませてユーザの頭部に圧力をかけたりしてもよい。

また、通知部１１０は、表示部２や、ユーザの視界に入るようＨＭＤ１に配置されたＬＥＤ（不図示）または発光部４ａを点滅させることで、ユーザに通知してもよい。また、通知部１１０は、ＨＭＤ１の両耳殻にかけられるフレーム部分等、ユーザに接触する部分の温度を変化させるために設けられた温熱／冷却素材を制御して、温度変化を生じさせ、ユーザに通知してもよい。

再生制御部１２０は、通知部１１０による通知に対するユーザのアクションに応じて、現在位置に対応する該当シーンの再生を開始する。ユーザのアクションとは、例えば視線入力、音声入力、ジェスチャ入力、またはボタン／スイッチ操作である。

視線入力は、ＨＭＤ１の内側にユーザの眼を撮影するよう配置された撮像レンズ（不図示）により検出され得る。ユーザは、瞬きをしたり、表示部２の一部に表示された該当シーンのサムネイル画像等に視線を向けたりすることで、再生指示を行うことができる。カメラによる視線の検出では、瞳孔の動きを追跡して視線の向きを算出することで、ユーザがどこを見つめているか特定する。

また、音声入力は、音声入力部６により集音され、音声信号処理部１６において音声認識されることで検出され得る。例えば、ユーザは、「再生開始」等と発声することで再生指示を行うことができる。

また、ジェスチャ入力は、ユーザの手によるジェスチャを撮像レンズ３ａで撮影し、画像解析部１７でジェスチャ認識されることで検出され得る。または、ユーザの頭部ジェスチャが、ＨＭＤ１に設けられた加速度センサやジャイロにより検出されてもよい。

また、ボタン／スイッチ操作は、ＨＭＤ１に設けられた物理的なボタン／スイッチ（不図示）により検出され得る。ユーザは、確定ボタン／スイッチを押下することで、再生指示を行うことができる。

（撮像部）
撮影部３は、撮像レンズ３ａ、絞り、ズームレンズ、及びフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）センサアレイや、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサアレイにより実現されてもよい。撮像レンズ３ａは、図１に示すように、ＨＭＤ１をユーザが装着した状態において、ユーザが視認する方向を被写体方向として撮像するよう前方に向けて配置されているので、ユーザが表示部２を介して見える範囲（視界）を含む範囲を撮像することができる。

（撮像信号処理部）
撮像信号処理部１５は、撮影部３の固体撮像素子によって得られる信号に対するゲイン調整や波形整形を行うサンプルホールド／ＡＧＣ(Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ)回路や、ビデオＡ／Ｄ（アナログ／デジタル）コンバータを備える。これにより、撮像信号処理部１５は、デジタルデータとしての撮像信号を得る。また、撮像信号処理部１５は、撮像信号に対してホワイトバランス処理、輝度処理、色信号処理、ぶれ補正処理なども行う。

（撮像制御部）
撮像制御部１１は、システムコントローラ１０からの指示に基づいて、撮影部３及び撮像信号処理部１５の動作を制御する。例えば撮像制御部１１は、撮影部３、撮像信号処理部１５の動作のオン／オフを制御する。また撮像制御部１１は撮影部３に対して、オートフォーカス、自動露出調整、絞り調整、ズームなどの動作を実行させるための制御（モータ制御）を行うものとされる。また撮像制御部１１はタイミングジェネレータを備え、固体撮像素子及び撮像信号処理部１５のサンプルホールド／ＡＧＣ回路、ビデオＡ／Ｄコンバータに対しては、タイミングジェネレータにて生成されるタイミング信号により信号処理動作を制御する。また、このタイミング制御により撮像フレームレートの可変制御も可能とされる。

さらに撮像制御部１１は、固体撮像素子及び撮像信号処理部１５における撮像感度や信号処理の制御を行う。例えば撮像感度制御として固体撮像素子から読み出される信号のゲイン制御を行ったり、黒レベル設定制御や、デジタルデータ段階の撮像信号処理の各種係数制御、ぶれ補正処理における補正量制御などを行うことができる。撮像感度に関しては、特に波長帯域を考慮しない全体的な感度調整や、例えば赤外線領域、紫外線領域など、特定の波長帯域の撮像感度を調整する感度調整（例えば特定波長帯域をカットするような撮像）なども可能である。波長に応じた感度調整は、撮像レンズ系における波長フィルタの挿入や、撮像信号に対する波長フィルタ演算処理により可能である。これらの場合、撮像制御部１１は、波長フィルタの挿入制御や、フィルタ演算係数の指定等により、感度制御を行うことができる。

（画像入出力コントロール）
上記撮影部３で撮像され、撮像信号処理部１５で処理された撮像信号（撮像による画像データ）は画像入出力コントロール２７に供給される。画像入出力コントロール２７は、システムコントローラ１０の制御に応じて、画像データの転送を制御する。即ち撮像系（撮像信号処理部１５）、表示系（表示画像処理部１２）、ストレージ部２５、通信部２６の間の画像データの転送を制御する。

例えば画像入出力コントロール２７は、撮像信号処理部１５で処理された撮像信号としての画像データを、表示画像処理部１２に供給したり、ストレージ部２５に供給したり、通信部２６に供給する動作を行う。

また画像入出力コントロール２７は、例えばストレージ部２５から再生された画像データを、表示画像処理部１２に供給したり、通信部２６に供給する動作を行う。また画像入出力コントロール２７は例えば通信部２６で受信された画像データを、表示画像処理部１２に供給したり、ストレージ部２５に供給する動作を行う。

（表示画像処理部）
表示画像処理部１２は、例えばいわゆるビデオプロセッサとされ、供給された画像データに対して各種表示処理を実行できる部位とされる。例えば画像データの輝度レベル調整、色補正、コントラスト調整、シャープネス（輪郭強調）調整などを行うことができる。

（表示駆動部）
表示駆動部１３は、表示画像処理部１２から供給される画像データを、例えば液晶ディスプレイとされる表示部２において表示させるための画素駆動回路で構成されている。即ち表示部２においてマトリクス状に配置されている各画素について、それぞれ所定の水平／垂直駆動タイミングで映像信号に基づく駆動信号を印加し、表示を実行させる。また表示駆動部１３は、表示部２の各画素の透過率を制御して、スルー状態とすることもできる。さらに、表示駆動部１３は、表示部２をスルー状態とし、表示部２の一部にＡＲ情報を表示させてもよい。

（表示制御部）
表示制御部１４は、システムコントローラ１０の制御に応じて、表示画像処理部１２の処理動作や表示駆動部１３の動作を制御する。具体的には、表示制御部１４は、表示画像処理部１２に対して、上述した画像データの輝度レベル調整等を行うよう制御する。また、表示制御部１４は、表示駆動部１３に対して、表示部２のスルー状態、画像表示状態の切り換えを行うように制御する。

（音声入力部）
音声入力部６は、図１に示したマイクロホン６ａ、６ｂと、そのマイクロホン６ａ、６ｂで得られた音声信号を増幅処理するマイクアンプ部やＡ／Ｄ変換器を有し、音声データを音声入出力コントロール２８に出力する。

（音声入出力コントロール）
音声入出力コントロール２８は、システムコントローラ１０の制御に応じて、音声データの転送を制御する。具体的には、音声入出力コントロール２８は、音声入力部６、音声信号処理部１６、ストレージ部２５、通信部２６の間の音声信号の転送を制御する。例えば音声入出力コントロール２８は、音声入力部６で得られた音声データを、音声信号処理部１６に供給したり、ストレージ部２５に供給したり、通信部２６に供給する動作を行う。

また音声入出力コントロール２８は例えばストレージ部２５で再生された音声データを、音声信号処理部１６に供給したり、通信部２６に供給する動作を行う。また音声入出力コントロール２８は例えば通信部２６で受信された音声データを、音声信号処理部１６に供給したり、ストレージ部２５に供給する動作を行う。

（音声信号処理部）
音声信号処理部１６は、例えばデジタルシグナルプロセッサ、Ｄ／Ａ変換器などからなる。この音声信号処理部１６には、音声入力部６で得られた音声データや、ストレージ部２５、あるいは通信部２６からの音声データが、音声入出力コントロール２８を介して供給される。音声信号処理部１６は、供給された音声データに対して、システムコントローラ１０の制御に応じて、音量調整、音質調整、音響エフェクト等の処理を行う。そして処理した音声データをアナログ信号に変換して音声出力部５に供給する。なお、音声信号処理部１６は、デジタル信号処理を行う構成に限られず、アナログアンプやアナログフィルタによって信号処理を行うものでも良い。

（音声出力部）
音声出力部５は、図１に示した一対のイヤホンスピーカ５ａと、そのイヤホンスピーカ５ａに対するアンプ回路を有する。また、音声出力部５は、いわゆる骨伝導スピーカとして構成されてもよい。ユーザは、音声出力部５により、外部音声を聞いたり、ストレージ部２５で再生された音声を聞いたり、通信部２６で受信された音声を聞くことができる。

（ストレージ部）
ストレージ部２５は、所定の記録媒体に対してデータの記録再生を行う部位とされる。ストレージ部２５は、例えばＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）として実現される。もちろん記録媒体としては、フラッシュメモリ等の固体メモリ、固定メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなど各種考えられ、ストレージ部２５としては採用する記録媒体に応じて記録再生を実行できる構成とされればよい。

ストレージ部２５には、撮影部３で撮像され、撮像信号処理部１５で処理された撮像信号としての画像データや、通信部２６で受信した画像データが、画像入出力コントロール２７を介して供給される。また、ストレージ部２５には、音声入力部６で得られた音声データや、通信部２６で受信した音声データが、音声入出力コントロール２８を介して供給される。

ストレージ部２５は、システムコントローラ１０の制御に従って、供給された画像データや音声データに対して、記録媒体への記録のためのエンコード処理を行い、記録媒体に記録する。またストレージ部２５は、システムコントローラ１０の制御に従って、記録媒体から画像データや音声データを再生する。再生した画像データは画像入出力コントロール２７へ出力し、また再生した音声データは音声入出力コントロール２８へ出力する。

（通信部）
通信部２６は外部機器との間でのデータの送受信を行う。通信部２６は、外界情報を取得するための構成の一例である。通信部２６は、無線ＬＡＮ、ブルートゥースなどの方式で、例えばネットワークアクセスポイントに対する近距離無線通信を介してネットワーク通信を行う構成としても良いし、対応する通信機能を備えた外部機器との間で直接無線通信を行うものでもよい。

外部機器としては、コンピュータ機器、ＰＤＡ、携帯電話端末、スマートフォン、ビデオ機器、オーディオ機器、チューナ機器など、情報処理及び通信機能を備えたあらゆる機器が想定される。またインターネット等のネットワークに接続された端末装置、サーバ装置なども通信対象の外部機器として想定される。さらには、ＩＣチップを内蔵した非接触通信ＩＣカード、ＱＲコード（登録商標）等の二次元バーコード、ホログラムメモリなどを外部機器とし、通信部２６はこれらの外部機器から情報を読み取る構成とすることも考えられる。さらには他のＨＭＤ１も外部機器として想定される。

通信部２６には、撮影部３で撮像され、撮像信号処理部１５で処理された撮像信号としての画像データや、ストレージ部２５で再生した画像データが、画像入出力コントロール２７を介して供給される。また、通信部２６には、音声入力部６で得られた音声データや、ストレージ部２５で再生された音声データが、音声入出力コントロール２８を介して供給される。

通信部２６は、システムコントローラ１０の制御に従って、供給された画像データや音声データに対して、送信のためのエンコード処理、変調処理等を行い、外部機器に送信する。また通信部２６は外部機器からのデータ受信動作を行う。受信復調した画像データは画像入出力コントロール２７へ出力し、また受信復調した音声データは音声入出力コントロール２８へ出力する。

また、本実施形態による通信部２６には、位置特定部１０ａにより特定された現在位置のデータが供給され、通信部２６は、現在位置のデータを外部機器であるサーバ３０に送信し、現在位置に対応するコンテンツを問い合わせる。また、通信部２６は、サーバ３０から現在位置に対応するコンテンツを受信する。

（音声合成部）
音声合成部２７は、システムコントローラ１０の制御に応じて音声合成を行い、音声信号を出力する。音声合成部２７から出力された音声信号は、音声入出力コントロール２８を介して音声信号処理部１６に供給されて処理された後、音声出力部５に供給され、ユーザに対して音声出力される。

（照明部、照明制御部）
照明部４は、図１に示した発光部４ａとその発光部４ａ（例えばＬＥＤ）を発光させる発光回路から成る。照明制御部１８は、システムコントローラ１０の制御に応じて、照明部４に発光動作を実行させる。照明部４における発光部４ａが図１に示したように前方に対する照明を行うものとして取り付けられていることで、照明部４はユーザの視界方向に対する照明動作を行うことになる。

（周囲環境センサ）
周囲環境センサ１９は、外界情報を取得するための構成の一例である。周囲環境センサ１９としては、具体的には例えば照度センサ、温度センサ、湿度センサ、気圧センサ等が想定され、ＨＭＤ１の周囲環境として、周囲の明るさ、温度、湿度、或いは天候等を検出するための情報を得るセンサとされる。

（撮像対象センサ）
撮像対象センサ２０は、外界情報を取得するための構成の一例である。具体的には、撮像対象センサ２０は、撮影部３での撮像動作の被写体となっている撮像対象に関する情報を検出するセンサである。例えばＨＭＤ１から撮像対象までの距離の情報を検出する測距センサや、焦電センサなどの赤外線センサのように、撮像対象が発する赤外線の特定の波長などの情報やエネルギーを検出するセンサなどが想定される。焦電センサの場合、例えば撮像対象が人や動物などの生体であるか否かの検出が可能となる。さらに、各種ＵＶ（Ｕｌｔｒａ Ｖｉｏｌｅｔ）センサのように、撮像対象が発する紫外線の特定の波長などの情報やエネルギーを検出するセンサも想定される。この場合、例えば撮像対象が蛍光物質や蛍光体であるか否かの検出や、日焼け対策に必要な外界の紫外線量の検出が可能となる。

（ＧＰＳ受信部）
ＧＰＳ受信部２１は、外界情報を取得するための構成の一例である。具体的には、ＧＰＳ受信部２１は、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）の衛星からの電波を受信し、現在位置としての緯度・経度の情報を出力する。

（日時計数部）
日時計数部２２は、外界情報を取得するための構成の一例である。日時計数部２２は、いわゆる時計部として、日時（年月日時分秒）を計数し、現在日時情報を出力する。

（画像解析部）
画像解析部１７は、外界情報を取得するための構成の一例である。具体的には、画像解析部１７は、画像データを解析し、画像データに含まれる画像の情報を得る。画像解析部１７には、画像入出力コントロール２７を介して画像データが供給される。画像解析部１７において画像解析の対象となる画像データとは、撮影部３、撮像信号処理部１５により得られた撮像画像としての画像データや、通信部２６で受信された画像データ、あるいはストレージ部２５で記録媒体から再生された画像データである。

以上、本実施形態によるＨＭＤ１の内部構成について詳細に説明した。なお、外界情報を取得するための構成として周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、及び通信部２６を示したが、これらは必ずしも全てを備える必要はない。また、周囲の音声を検知・解析する音声解析部など、他のセンサが設けられても良い。

［２−１−２．サーバの構成］
次に、サーバ３０の構成について図４を参照して説明する。図４は、本実施形態によるサーバ３０の構成を示すブロック図である。図４に示すように、サーバ３０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３１、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）３２、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３３、判断部３４、コンテンツＤＢ３５、および通信部３６を有する。

（コンテンツＤＢ）
コンテンツＤＢ３５は、所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースである。より具体的には、特定の映像コンテンツ、写真コンテンツ、テキストコンテンツ等が、その映像や写真が撮影された場所や、そのコンテンツが舞台（モデル）となっている場所と関連付けられている。ここで、図５に、コンテンツＤＢ３５に格納されているデータの一例を示す。図５に示すように、例えば様々な映像コンテンツ（映画やドラマ等）の名場面や名シーン（シーン１〜シーン４）が、そのシーンが撮影された場所を特定する位置情報（位置情報１〜位置情報４）、名称（名称１〜名称４）、画像（画像１〜画像４）と関連付けられている。なお、場所を特定する位置情報とは、例えば緯度経度情報である。また、場所を特定する名称とは、例えば住所、地名、施設名、または建物名である。また、場所を特定する画像とは、その場所の撮影画像、またはその場所周辺の特徴的な建物や風景の撮影画像である。

さらに、各シーンには、そのシーンを含む映像コンテンツのタイトルや、タイトル画面、またはメインテーマ曲等が関連付けられていてもよい。

（判断部）
判断部３４は、ＨＭＤ１から送信された現在位置に対応するコンテンツが、コンテンツＤＢ３５に有るか否かを判断する。具体的には、判断部３４は、ＨＭＤ１から送信された現在位置を示す緯度経度情報や、撮影画像、または名称等を、コンテンツＤＢ３５に格納されている各シーン（映像コンテンツ）に関連付けられた特定の場所を示す位置情報や、画像、または名称と比較する。そして、現在位置と特定の場所が一致する場合、判断部３４は、ＨＭＤ１の現在位置に対応するコンテンツがコンテンツＤＢ３５に有ると判断する。判断部３４は、判断結果を通信部３６からＨＭＤ１に送信する。

（通信部）
通信部３６は、ＨＭＤ１との間でデータの送受信を行うための通信モジュールである。例えば、本実施形態による通信部３６は、ＨＭＤ１から現在位置のデータを受信する。また、通信部３６は、判断部３４による判断結果や、ＣＰＵ３１によりコンテンツＤＢ３５から抽出された、ＨＭＤ１の現在位置に対応するコンテンツをＨＭＤ１に送信する。

（ＣＰＵ、ＲＯＭ、およびＲＡＭ）
ＣＰＵ１０は、サーバ３０の各構成を制御する制御部である。ＣＰＵ１０は、ＲＯＭ１１に記憶されているソフトウェアプログラムに従って、各構成を制御する。より具体的には、ＣＰＵ１０は、例えば判断部３４により、現在位置に対応するコンテンツがコンテンツＤＢ３５に有ると判断された場合、コンテンツＤＢ３５から該当コンテンツ（該当シーン）を抽出し、通信部３６からＨＭＤ１に送信するよう制御する。

また、ＲＯＭ１１には、ＣＰＵ１０が各制御を実行するためソフトウェアプログラム等が記憶されている。また、ＲＡＭ１２は、ＣＰＵ１０がＲＯＭ１１に記憶されているソフトウェアプログラムに従って各制御を実行する際に、ワークエリアとして用いられる。

［２−１−３．通知処理］
続いて、本実施形態のＨＭＤ１による通知処理について図６〜図９を参照して説明する。本実施形態では、現在位置に対応する１のコンテンツを通知し、ユーザのアクションに応じて再生する場合の動作処理について説明する。

図６は、本実施形態のＨＭＤ１による通知処理を示すフローチャートである。図６に示すように、まず、ステップＳ１００において、ＨＭＤ１の該当シーン取得部１００は、現在位置に対応する該当シーンのリストをサーバ３０から取得する。かかる処理の詳細は、図７に示す。図７は、本実施形態による該当シーンのリスト取得処理を示すフローチャートである。

図７に示すように、ステップＳ１０３において、ＨＭＤ１の位置特定部１０ａは、現在位置を特定する。また、ＨＭＤ１は、特定した現在位置のデータをサーバ３０に送信して現在位置に対応する該当シーンを要求する。

次に、ステップＳ１０６において、サーバ３０の判断部３４は、ＨＭＤ１から受信した現在位置のデータに基づいて、コンテンツＤＢ３５を照合し、現在位置に対応する該当シーンが有るか否かを判断する。

次いで、判断部３４により該当シーンがあると判断された場合（Ｓ１０９／ＹＥＳ）、ステップＳ１１２において、ＣＰＵ３１は、該当シーンのリスト作成を行う。具体的には、ＣＰＵ３１は、該当シーンのリストとして、１以上の該当シーンのサムネイル画像一覧や、１以上の該当シーンを含む映像のタイトル画像一覧を作成してもよい。また、ＣＰＵ３１は、作成した該当シーンのリストを通信部３６からＨＭＤ１に送信する。

一方、判断部３４により該当シーンがないと判断された場合（Ｓ１０９／ＮＯ）、ステップＳ１１５において、ＣＰＵ３１は、該当シーンのリストが無いことをＨＭＤ１に通知してもよい。

そして、ステップＳ１１８において、ＨＭＤ１は、動作終了の指示があるまで、継続的にＳ１０３〜Ｓ１１５の処理を繰り返す。

以上、現在位置に対応する該当シーンのリスト取得処理について詳述した。なお、ここでは一例として該当シーンのリストの取得を挙げているが、ＨＭＤ１の該当シーン取得部１００は、該当シーンのリストの他、例えば該当シーンが有ることを示す判断結果の取得や、該当シーンのデータ自体の取得であってもよい。

次に、図６のステップＳ１２３において、ＨＭＤ１は、該当シーンのリストを取得するまで、上記Ｓ１００の処理を繰り返す。

次いで、該当シーンのリストを取得できた場合（Ｓ１２３／ＹＥＳ）、ＨＭＤ１の通知部１１０は、現在位置に対応するコンテンツ（該当シーン）があることをユーザに通知する。ユーザへの通知方法は上述したように、画面表示、音声、振動、または圧力による通知等が挙げられるが、ここでは一例として音声および画面表示による通知を行う。具体的には、ステップＳ１２６において、通知部１１０は、例えば該当シーンを含む作品のメインテーマ曲を音声出力部５から低音量で再生してもよい。これにより、ユーザがＨＭＤ１を装着して街を歩き、あるドラマの撮影地を通ると、そのドラマの主題歌が音声出力部５から聞こえてきて、ユーザは現在居る場所で撮影されたドラマが有ることが分かる。

次いで、ステップＳ１２９において、通知部１１０は、例えば該当シーンのサムネイル画像や、該当シーンを含む作品のタイトル画像を、表示部２の一部に実空間に重ねてＡＲ表示し、ユーザに通知してもよい。ここで、図８に、本実施形態によるＡＲ表示の具体例を示す。図８では、ＨＭＤ１を装着するユーザの視線方向に見える景色を図示している。図８の上側の図に示すように、ＨＭＤ１の表示部２がスルー状態である場合、ユーザは、実空間の景色を表示部２を介して見ることができるので、ＨＭＤ１を眼鏡のように常時装着することが可能である。そして、ＨＭＤ１を装着したまま移動し、あるドラマの撮影地を通ると、図８の下側の図に示すように、現在地が撮影地のドラマのタイトル画像２００が表示部２にＡＲ表示される。これにより、ユーザは、現在居る場所で撮影されたドラマが有ることが分かる。

次に、Ｓ１３２において、ＨＭＤ１の再生制御部１２０は、通知部１１０による通知に対するユーザのアクションを受け付け、再生コマンド（再生指示）を検出する。ユーザのアクションは、上述したように、視線入力、音声入力、またはボタン／スイッチ操作が挙げられるが、ここでは、例えば視線入力により該当シーンを再生する場合について図９を参照して説明する。

図９は、視線入力により該当シーンの再生を開始する場合について説明するための図である。ユーザの視線検出は、上述したように、ＨＭＤ１の内側にユーザの眼を撮影するよう配置された撮像レンズ（不図示）により検出される。

そして、図９の上側の図に示すように、ＨＭＤ１は、表示部２に、ユーザの視線検出の結果をマークＥとして表示する。ユーザは、表示部２に表示された現在位置に対応するコンテンツのタイトル画像２００を所定時間見つめることで、再生コマンドを入力する。すなわち、ＨＭＤ１の再生制御部１２０は、視線検出の結果であるマークＥが表示部２にＡＲ表示されたタイトル画像２００に所定時間以上重なった場合、再生コマンドとして検出する。

次いで、再生コマンドが検出された場合（Ｓ１３２／ＹＥＳ）、Ｓ１３５において、ＨＭＤ１の再生制御部１２０は、現在位置に対応する該当シーンを再生する。例えば、図９の下側の図に示すように、再生制御部１２０は、現在位置で撮影されたドラマの１シーン（動画像２１０）を表示部２に再生するよう制御する。また、再生制御部１２０は、かかる１シーンの音声を、音声出力部５から大音量で再生してもよい。

そして、ステップＳ１３８において、動作終了指示があるまで、上記Ｓ１００〜Ｓ１３５の処理が繰り返される。

一方、再生コマンドが検出されない場合（Ｓ１３２／ＮＯ）、ステップＳ１００に戻る。再生コマンドが検出されない場合とは、通知後、ユーザのアクションが所定時間無かった場合や、キャンセルコマンドが検出された場合である。キャンセルコマンドは様々考え得るが、例えば、手を前方に払うジェスチャや、口で吹くジェスチャ（例えば音声認識により検出され得る）であってもよい。この場合、再生制御部１２０は、通知した該当シーンの再生は行わない。また、動作制御部１０ｂは、通知部１１０によりＡＲ表示された該当シーンのタイトル画像２００が、キャンセルコマンドに応じて遠くに飛ばされるアニメーションを提示して、キャンセルコマンドを受け付けたことを明示してもよい。

以上、第１の実施形態による通知処理について詳細に説明した。なお、図９に示す例では、再生コマンドを視線入力のみで入力しているが、本実施形態はこれに限定されず、視線入力と、ジェスチャまたはボタン操作等、複数の操作入力方法を組み合わせてもよい。例えば、再生制御部１２０は、ユーザの視線検出の結果として表示されるマークＥが、所望のタイトル画像２００に重なり、かつジェスチャやボタン操作により確定指示があった場合、再生コマンドとして検出してもよい。

また、図９に示す例では、タイトル画像２００をＡＲ表示しているが、通知部１１０は、この他、例えばタイトルをテキスト表示してもよい。

また、ユーザが該当シーンを視聴中であっても、ユーザが移動して新たな現在位置が特定され、当該現在位置に対応するコンテンツが有る場合、通知部１１０は、ユーザに通知を行う。例えば、再生する該当シーンの音声に、通知する該当シーンの音声（メインテーマ曲等）を重畳させてもよいし、再生する該当シーンの表示に、通知する該当シーンの表示（タイトル画面等）を重畳させてもよい。

＜２−２．第２の実施形態＞
上述した第１の実施形態では、現在位置に対応する１のコンテンツを通知する場合について説明したが、本開示はこれに限定されず、例えば複数のコンテンツを通知することも可能である。以下、第２の実施形態として、複数のコンテンツを通知する場合の動作処理について図１０〜図１４を参照して説明する。

［２−１−１．動作制御部の構成］
第２の実施形態によるＨＭＤの構成は、システムコントローラ１０が動作制御部１０ｂ’を有する点以外は、図１および図２を参照して説明した第１の実施形態によるＨＭＤ１の構成と同様である。以下、図１０を参照して第２の実施形態による動作制御部１０ｂ’の構成について説明する。

図１０は、第２の実施形態による動作制御部１０ｂ’の構成を示す図である。図１０に示すように、動作制御部１０ｂ’は、該当シーン取得部１００、通知部１１０、再生制御部１２０、および優先順位決定部１３０を有する。

該当シーン取得部１００は、第１の実施形態と同様に、位置特定部１０ａにより特定されたＨＭＤ１の現在位置に対応するコンテンツである該当シーンをサーバ３０から取得する。また、該当シーン取得部１００は、取得した該当シーンを通知部１１０と優先順位決定部１３０に出力する。

優先順位決定部１３０は、該当シーンが複数ある場合、各該当シーンの優先順位を決定する。具体的には、例えば優先順位決定部１３０は、予めストレージ部２５に記憶されたユーザの嗜好情報に基づいて、ユーザの好みに合う該当シーンから順に優先順位を決定してもよい。または、優先順位決定部１３０は、ユーザの視聴履歴に基づいて、ユーザがまだ視聴していない該当シーンから順に優先順位を決定してもよい。

または、優先順位決定部１３０は、ユーザの嗜好情報および視聴履歴に基づいて、ユーザがまだ視聴していない該当シーンから順に優先順位を決定してもよい。例えば、優先順位決定部１３０は、ユーザが好きな俳優が出演していて、まだ視聴していないドラマや映画を、より高い優先順位としてもよい。

そして、優先順位決定部１３０は、決定した優先順位のデータを通知部１１０に出力する。

通知部１１０は、第１の実施形態と同様に、サーバ３０により該当シーンがあると判断された場合（該当シーン取得部１００により該当シーンを取得した場合を含む）、現在位置に対応するコンテンツがあることをユーザに通知する。ここで、複数の該当シーンがある場合、通知部１１０は、優先順位決定部１３０により決定された優先順位に従って、優先順位上位の（優先順位が高い）該当シーンから順にユーザに通知してもよい。

再生制御部１２０は、第１の実施形態と同様に、通知部１１０による通知に対するユーザのアクションに応じて、現在位置に対応する該当シーンの再生を開始する。また、再生制御部１２０は、ユーザのアクションに応じて、現在位置に対応する複数の該当シーンを、優先順位が高いものから順に再生してもよい。

以上、本実施形態によるＨＭＤ１の動作制御部１０ｂ’について詳細に説明した。なお、本実施形態によるサーバは、図４を参照して説明した第１の実施形態によるサーバ３０と同様である。続いて、第２の実施形態による通知処理について図１１〜図１４を参照して説明する。

［２−１−２．通知処理］
図１１は、第２の実施形態によるＨＭＤ１による通知処理を示すフローチャートである。図１１に示すように、まずステップＳ１００およびＳ１２３において、図６に示す同ステップの処理を行う。

次いで、ステップＳ２００において、ＨＭＤ１の優先順位決定部１３０は、複数の該当シーンの優先順位を決定する。優先順位決定処理の詳細は、図１２に示す。図１２は、本実施形態による優先順位決定処理を示すフローチャートである。

図１２に示すように、ステップＳ２０３において、ＨＭＤ１の優先順位決定部１３０は、該当シーン取得部１００から、該当シーンのリストを取得する。

次に、ステップＳ２０６において、優先順位決定部１３０は、リストに含まれる複数の該当シーンの優先順位を決定するために、ユーザの嗜好情報または視聴履歴を照合する。なお、ユーザの嗜好情報および視聴履歴は、ＨＭＤ１のストレージ部２５に記憶されているデータでもよいし、外部機器から取得したデータでもよい。

そして、ステップＳ２０９において、優先順位決定部１３０は、リストに含まれる複数の該当シーンの優先順位を決定する。また、優先順位決定部１３０は、決定した優先順位のデータを通知部１１０に出力する。

次いで、図１１のステップＳ１２７およびＳ１３０において、ＨＭＤ１の通知部１１０は、現在位置に対応する複数の該当シーンを優先順位に従ってユーザに通知する。具体的には、ステップＳ１２７において、例えば通知部１１０は、優先順位上位の該当シーンを含む各作品のメインテーマ曲を、音声出力部５から低音量で順に再生してもよい。

また、ステップＳ１３０において、通知部１１０は、複数の該当シーンの各サムネイル画像や、複数の該当シーンを含む各作品のタイトル画像を、表示部２の一部に実空間に重ねてＡＲ表示し、ユーザに通知する。ここで、図１３に、本実施形態によるＡＲ表示の具体例を示す。図１３では、図８および図９と同様に、ＨＭＤ１を装着するユーザの視線方向に見える景色を図示している。図１３の上側の図に示すように、ＨＭＤ１の表示部２がスルー状態である場合、ユーザは、実空間の景色を表示部２を介して見ることができるので、ＨＭＤ１を眼鏡のように常時装着することが可能である。そして、ＨＭＤ１を装着したまま移動すると、図１３の下側の図に示すように、現在地が撮影地の複数のドラマや映画、ＣＭ（Ｃｏｍｍｅｒｃｉａｌ Ｍｅｓｓａｇｅ）等のタイトル画像２００Ａ〜２００Ｃが表示部２にＡＲ表示される。これにより、ユーザは、現在居る場所で撮影されたドラマや映画、ＣＭ等が有ることが分かる。

なお、この際、通知部１１０は、優先順位決定部１３０により決定された各該当シーンの優先順位に従って、優先順位の上位所定数の該当シーンの通知を行う。図１３に示す例では、上位３つの該当シーンのタイトル画像２００Ａ〜２００Ｃが表示されている。

また、通知部１１０は、ユーザにより次の該当シーンの通知を指示された場合、または自動的に、次に優先順位が高い該当シーンを通知してもよい。

続いて、ステップＳ１３２において、ＨＭＤ１の再生制御部１２０は、通知部１１０による通知に対するユーザのアクションを受け付け、再生コマンド（再生指示）を検出する。ここでは、例えば音声入力により所望の該当シーンを再生する場合について図１４を参照して説明する。

図１４は、音声入力により所望の該当シーンの再生を開始する場合について説明するための図である。ユーザの音声は、ＨＭＤ１の音声入力部６により集音され、音声入出力コントロール２８を介して音声信号処理部１６に出力され、音声信号処理部１６において処理される。ここで、音声信号処理部１６は、ユーザの音声を認識し、コマンドとして検出することができる。

したがって、図１４の上側の図に示すように、ＨＭＤ１の通知部１１０が、表示部２に複数の該当シーンのタイトル画像２００Ａ〜２００Ｃを表示している場合に、ユーザが、例えば「３番を再生」と発声することで、再生コマンドを入力することができる。すなわち、ＨＭＤ１の再生制御部１２０は、音声入力部６により集音されたユーザの音声を、音声信号処理部１６において音声認識した結果、特定の該当シーンの再生指示が認識された場合、再生コマンドとして検出する。

次いで、再生コマンドが検出された場合（Ｓ１３２／ＹＥＳ）、Ｓ１３５において、ＨＭＤ１の再生制御部１２０は、現在位置に対応する該当シーンを再生する。例えば、図１４の下側の図に示すように、再生制御部１２０は、ユーザに指示された３番（タイトル画像２００Ｃ）の、現在位置で撮影されたＣＭ（動画像２２０）を表示部２に再生するよう制御する。また、再生制御部１２０は、かかるＣＭの音声を、音声出力部５から大音量で再生してもよい。

そして、ステップＳ１３８において、動作終了指示があるまで、上記Ｓ１００〜Ｓ１３５の処理が繰り返される。

一方、再生コマンドが検出されない場合（Ｓ１３２／ＮＯ）、ステップＳ１００に戻る。再生コマンドが検出されない場合とは、通知後、ユーザのアクションが所定時間無かった場合や、キャンセルコマンドが検出された場合である。

以上、第２の実施形態による通知処理について詳細に説明した。なお、上記Ｓ１３２において、ユーザが「連続再生」と発声し、これが再生コマンドとして検出された場合、再生制御部１２０は、上記Ｓ１３５において、通知した複数の該当シーンを、優先順位に従って順に連続して再生してもよい。

また、図１４に示す例では、再生コマンドを音声入力する場合について説明したが、ユーザによる再生コマンドの入力方法（ユーザのアクション）はこれに限定されず、図９に示す例のように、再生コマンドを視線入力してもよい。また、この場合、再生制御部１２０は、ユーザの視線検出の結果として表示されるマークＥが、所望のタイトル画像２００に重なり、かつジェスチャやボタン操作により確定指示があった場合、再生コマンドとして検出してもよい。

＜＜３．まとめ＞＞
上述したように、本実施形態による通知システム（情報処理システム）では、ＨＭＤ１（ユーザ端末）の現在位置と、特定の場所と関連付けられたコンテンツ（動画、静止画、テキスト等）を照合することで、現在位置に対応するコンテンツを通知することができる。また、これにより、実際に現在ユーザが居る場所（実世界）と、映像コンテンツの名場面や名シーンの世界をリンクさせてユーザに提供することができるので、映像コンテンツのエンターテインメント性がより向上する。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、本実施形態によるＨＭＤ１は、近隣に、名シーンや名場面等のコンテンツが関連付けられている特定の場所がある場合、その特定の場所の方向を表示部２にＡＲ表示してユーザを誘導してもよい。

また、ＨＭＤ１は、撮像レンズ３ａにより実空間の写真撮影が行われた場合、撮影した場所（現在位置）に対応するコンテンツをサーバ３０に問い合わせて、ユーザに通知してもよい。

また、ＨＭＤ１の通知部１１０が、振動または圧力等によりユーザに通知した場合、再生制御部１２０は、ユーザによるアクションに応じて該当シーンの再生を開始してもよいし、一旦該当シーンを明示した後、再生コマンドが入力された場合に再生を開始してもよい。該当シーンの明示とは、例えば該当シーンの作品のタイトルを表示したり、該当シーンの作品のメインテーマ曲を再生することである。

また、ＨＭＤ１は、該当シーンの通知後または該当シーンの再生後に、コンテンツ配信サービスへアクセスしたり、コンテンツ配信サービスへのアクセスをユーザに提示することで、該当シーンの作品（映像コンテンツ等）の購入を促すことができる。

また、ＨＭＤ１は、ユーザの視界が、現在位置に対応する該当シーンの画角に近付くよう、ユーザを誘導することも可能である。具体的には、例えばＨＭＤ１が、ＧＰＳ受信部２１により取得された現在位置情報（緯度経度高度）や、撮像レンズ３ａによりユーザの視線方向を撮影した撮影画像に基づいて、該当シーンの画角に近付くよう、音声やＡＲ表示により誘導する。音声やＡＲ表示による誘導は、誘導方向（前後、左右、上下）を示す誘導の他、該当シーンに写る主要な建物等の輪郭線を表示部２にＡＲ表示してもよい。ユーザは、表示部２にＡＲ表示された輪郭線を、実空間の対象建物の輪郭に合うよう自ら動くことで、該当シーンの画角に近付くことができる。

また、ＨＭＤ１は、現在位置を、撮影画像のみならず、位置情報や名称等で現在位置を特定できるので、現在では消失した街並みや、変化した街並みで、昔撮影された映画やドラマの名シーン等を通知することができる。

また、上記各実施形態では、現在位置に対応するコンテンツとして、現在位置で撮影されたコンテンツ（映像、写真、テキスト）、または現在位置が舞台となっているコンテンツを通知するが、本開示による通知処理はこれに限定されない。例えば、ＨＭＤ１は、現在位置で撮影予定のコンテンツがある場合、当該コンテンツ（タイトル等）をユーザに通知してもよい。

また、上述した各実施形態では、ＨＭＤ１とサーバ３０を有する通知システムについて説明しているが、本開示による通知システムはこれに限定されず、ＨＭＤ１が、さらにサーバ３０の主要構成を有して、本開示による通知システムを実行してもよい。すなわち、ＨＭＤ１が、判断部３４およびコンテンツＤＢ３５をさらに有することで、特に外部機器からコンテンツを取得する必要なく、現在位置に対応するコンテンツの通知処理を行うことができる。

なお、本技術は以下のような構成も取ることができる。
（１）
所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースと、
現在位置を特定する位置特定部と、
前記データベースに、前記現在位置に対応するコンテンツが有るか否かを判断する判断部と、
前記判断部により前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、
前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部と、
を備える、情報処理システム。
（２）
前記制御部は、前記現在位置に関連付けられたコンテンツの少なくとも一のシーンを再生させる、前記（１）に記載の情報処理システム。
（３）
前記制御部は、前記現在位置に関連付けられたコンテンツの複数のシーンを連続的に再生させる、前記（１）または（２）に記載の情報処理システム。
（４）
前記制御部は、ユーザの視聴履歴または嗜好情報の少なくともいずれかに応じて、複数のシーンに各々優先順位を付け、優先順位が高いシーンから順に再生させる、前記（１）〜（３）のいずれか１項に記載の情報処理システム。
（５）
前記通知部は、前記制御部により前記コンテンツが再生中であっても、前記位置特定部により特定された新たな現在位置に対応するコンテンツが有る場合、当該新たな現在位置に対応するコンテンツが有ることをユーザに通知する、前記（１）〜（４）のいずれか１項に記載の情報処理システム。
（６）
前記コンテンツは、動画、静止画、またはテキストである、前記（１）〜（５）のいずれか１項に記載の情報処理システム。
（７）
前記位置特定部は、現在地の名称、位置情報、および画像のうち少なくともいずれか一つにより現在位置を特定する、前記（１）〜（６）のいずれか１項に記載の情報処理システム。
（８）
前記名称は、住所、地名、施設名、または建物名である、前記（７）に記載の情報処理システム。
（９）
前記位置情報は、ＧＰＳを利用して測位される、前記（７）に記載の情報処理システム。
（１０）
前記画像は、撮影部により撮影された撮影画像である、前記（７）に記載の情報処理システム。
（１１）
前記通知部は、画面表示、音声、振動、圧力、発光、または温度変化により通知する、前記（１）〜（１０）のいずれか１項に記載の情報処理システム。
（１２）
前記通知に対するユーザのアクションは、視線入力、音声入力、ジェスチャ入力、またはボタン／スイッチ操作である、前記（１）〜（１１）のいずれか１項に記載の情報処理システム。
（１３）
前記情報処理システムは、サーバおよびユーザ端末を備え、
前記サーバは、前記データベースおよび前記判断部を有し、
前記ユーザ端末は、前記位置特定部、前記通知部、および前記制御部を有する、前記（１）〜（１２）のいずれか１項に記載の情報処理システム。
（１４）
前記ユーザ端末は、携帯電話端末、スマートフォン、携帯ゲーム装置、タブレット端末、ＰＤＡ、ノートＰＣ、デジタルカメラ、またはデジタルビデオカメラである、前記（１３）に記載の情報処理システム。
（１５）
前記ユーザ端末は、ヘッドマウントディスプレイ、または眼鏡型ディスプレイである、前記（１３）に記載の情報処理システム。
（１６）
現在位置を特定する位置特定部と、
所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースを有するサーバにより、当該データベースに前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、
前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部と、
を備える、情報処理装置。
（１７）
コンピュータに、
現在位置を特定する位置特定部と、
所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースを有するサーバにより、当該データベースに前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、
前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部、
として機能させるための、プログラム。

１ ＨＭＤ（ヘッドマウンドディスプレイ）
２ 表示部
３ 撮像部
４ 照明部
５ 音声出力部
６ 音声入力部
１０ システムコントローラ
１０ａ 位置特定部
１０ｂ、１０ｂ’ 動作制御部
１００ 該当シーン取得部
１１０ 通知部
１２０ 再生制御部
１３０ 優先順位決定部
１１ 撮像制御部
１２ 表示画像処理部
１３ 表示駆動部
１４ 表示制御部
１５ 撮像信号処理部
１６ 音声信号処理部
１７ 画像解析部
１８ 照明制御部
１９ 周囲環境センサ
２０ 撮像対象センサ
２１ ＧＰＳ受信部
２２ 日時計数部
２５ ストレージ部
２６ 通信部
２７ 画像入出力コントロール
２８ 音声入出力コントロール
２９ 音声合成部
３０ サーバ
３１ ＣＰＵ
３２ ＲＯＭ
３３ ＲＡＭ
３４ 判断部
３５ コンテンツＤＢ
３６ 通信部

Claims (17)

1. 所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースと、
   現在位置を特定する位置特定部と、
   前記データベースに、前記現在位置に対応するコンテンツが有るか否かを判断する判断部と、
   前記判断部により前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、
   前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部と、
   を備える、情報処理システム。
2. 前記制御部は、前記現在位置に関連付けられたコンテンツの少なくとも一のシーンを再生させる、請求項１に記載の情報処理システム。
3. 前記制御部は、前記現在位置に関連付けられたコンテンツの複数のシーンを連続的に再生させる、請求項１に記載の情報処理システム。
4. 前記制御部は、ユーザの視聴履歴または嗜好情報の少なくともいずれかに応じて、複数のシーンに各々優先順位を付け、優先順位が高いシーンから順に再生させる、請求項１に記載の情報処理システム。
5. 前記通知部は、前記制御部により前記コンテンツが再生中であっても、前記位置特定部により特定された新たな現在位置に対応するコンテンツが有る場合、当該新たな現在位置に対応するコンテンツが有ることをユーザに通知する、請求項１に記載の情報処理システム。
6. 前記コンテンツは、動画、静止画、またはテキストである、請求項１に記載の情報処理システム。
7. 前記位置特定部は、現在地の名称、位置情報、および画像のうち少なくともいずれか一つにより現在位置を特定する、請求項１に記載の情報処理システム。
8. 前記名称は、住所、地名、施設名、または建物名である、請求項７に記載の情報処理システム。
9. 前記位置情報は、ＧＰＳを利用して測位される、請求項７に記載の情報処理システム。
10. 前記画像は、撮影部により撮影された撮影画像である、請求項７に記載の情報処理システム。
11. 前記通知部は、画面表示、音声、振動、圧力、発光、または温度変化により通知する、請求項１に記載の情報処理システム。
12. 前記通知に対するユーザのアクションは、視線入力、音声入力、ジェスチャ入力、またはボタン／スイッチ操作である、請求項１に記載の情報処理システム。
13. 前記情報処理システムは、サーバおよびユーザ端末を備え、
    前記サーバは、前記データベースおよび前記判断部を有し、
    前記ユーザ端末は、前記位置特定部、前記通知部、および前記制御部を有する、請求項１に記載の情報処理システム。
14. 前記ユーザ端末は、携帯電話端末、スマートフォン、携帯ゲーム装置、タブレット端末、ＰＤＡ、ノートＰＣ、デジタルカメラ、またはデジタルビデオカメラである、請求項１３に記載の情報処理システム。
15. 前記ユーザ端末は、ヘッドマウントディスプレイ、または眼鏡型ディスプレイである、請求項１３に記載の情報処理システム。
16. 現在位置を特定する位置特定部と、
    所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースを有するサーバにより、当該データベースに前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、
    前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部と、
    を備える、情報処理装置。
17. コンピュータに、
    現在位置を特定する位置特定部と、
    所定の場所を特定する名称、位置情報、および画像のうち少なくともいずれか一つと、特定のコンテンツとが関連付けられたデータベースを有するサーバにより、当該データベースに前記現在位置に対応するコンテンツが有ると判断されたとき、前記現在位置に対応するコンテンツが有ることをユーザに通知する通知部と、
    前記通知部による通知に対するユーザのアクションに応じて、前記コンテンツの再生を開始する制御部、
    として機能させるための、プログラム。
    
    

Images