JP2024073077A - 情報処理装置および情報処理方法 - Google Patents

Abstract

【課題】ユーザごとに応じた適切なＸＲコンテンツの提供を行うことができる情報処理装置および情報処理方法を提案する。【解決手段】情報処理装置は、ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた制御部を備える。制御部は、撮像装置が第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を撮像装置から取得し、撮像装置によるユーザの軌跡情報と端末装置が示すユーザの軌跡情報とを照合することによってユーザ情報と端末装置を紐付け、端末装置が提示部に提示するＸＲコンテンツの態様をユーザ情報に応じて端末装置に変更させる。【選択図】図１

Description

本開示は、情報処理装置および情報処理方法に関する。

従来、ＶＲ（Virtual Reality）やＡＲ（Augmented Reality）といった、仮想空間と現実空間を融合させる画像処理技術であるＸＲ（Extended Reality、Cross Reality）が知られている。

このＸＲを用いたＸＲコンテンツは、ユーザが携帯するスマートフォンや、ユーザが頭部に装着するＨＭＤ（Head Mounted Display）などのＸＲ端末を介してユーザへ提供される。

ＸＲ端末は、ディスプレイとカメラとを有し、カメラを通して見たあるいは画像処理を施したＸＲ空間に対し、現実空間に存在する実物体に対応する仮想オブジェクトや現実空間には存在しない物体の仮想オブジェクトを表示させる。

なお、このようなＸＲコンテンツの提供にあたり、実物体に対応する仮想オブジェクトについては、カメラ画像における実物体の位置および姿勢の認識の安定度に応じて表示の乱れを抑制することで品質を高める技術が提案されている（例えば、特許文献１参照）。

特開２０１２－２２１２５０号公報

しかしながら、上述した従来技術には、ユーザごとに応じた適切なＸＲコンテンツの提供を行ううえで、さらなる改善の余地がある。

例えば、上述した従来技術は、別の言い方をすればカメラ画像における実物体の位置および姿勢に応じて仮想オブジェクトの表示を切り替えるものである。しかし、ＸＲコンテンツは、例えばＸＲ端末の位置および姿勢に応じても適切に仮想オブジェクトの表示を切り替えることが望ましい。

そして、ＸＲ端末の位置および姿勢は、例えばＸＲ端末を利用するユーザの身長や挙動といったユーザごとの特徴に左右されやすい。この点、上述した従来技術は、カメラ画像における実物体の位置および姿勢を精度よく認識しようとするものに過ぎず、ユーザごとの特徴までも認識するものではない。

そこで、本開示では、ユーザごとに応じた適切なＸＲコンテンツの提供を行うことができる情報処理装置および情報処理方法を提案する。

上記の課題を解決するために、本開示に係る一形態の情報処理装置は、ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、前記端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた制御部を備える。前記制御部は、前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得し、前記撮像装置によるユーザの軌跡情報と前記端末装置が示すユーザの軌跡情報とを照合することによって前記ユーザ情報と前記端末装置を紐付け、前記端末装置が前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させる。

本開示の実施形態に係る情報処理方法の概要説明図（その１）である。 本開示の実施形態に係る情報処理方法の概要説明図（その２）である。 本開示の実施形態に係る情報処理方法の概要説明図（その３）である。 本開示の実施形態に係る情報処理システムの構成例を示す図である。 本開示の実施形態に係るＸＲ端末の構成例を示すブロック図である。 本開示の実施形態に係る施設カメラの構成例を示すブロック図である。 本開示の実施形態に係るサーバ装置の構成例を示すブロック図である。 本開示の実施形態に係る情報処理システムが実行する処理シーケンスを示す図である。 変形例に係る情報処理システムのイメージ図である。 変形例に係る情報処理システムが実行する処理シーケンスを示す図である。 サーバ装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。

以下に、本開示の実施形態について図面に基づいて詳細に説明する。なお、以下の各実施形態において、同一の部位には同一の符号を付することにより重複する説明を省略する。

また、本明細書および図面において、実質的に同一または類似の機能構成を有する複数の構成要素を、同一の符号の後に「－ｎ」（ｎは自然数）の形式で異なる数字を付して区別する場合がある。ただし、実質的に同一または類似の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一の符号のみを付する。

また、以下では、「ＸＲ空間」は、ＶＲにおける仮想現実空間、ＡＲにおける拡張現実空間、ＭＲ（Mixed Reality）における複合現実空間、ＳＲ（Substitutional Reality）における代替現実空間など、仮想空間と現実空間を融合させる画像処理技術における各種空間を総称するものとする。

また、「ＸＲコンテンツ」は、ＸＲ空間に対し、現実空間に存在する実物体や現実空間には存在しない物体にそれぞれ対応する各種の仮想オブジェクトを提示し、ユーザにＸＲ空間における疑似体験を提供するコンテンツであるものとする。

また、以下では、本開示の実施形態（以下、適宜「本実施形態」と言う）に係る情報処理システム１が、美術館や博物館などの各種施設において、ユーザが利用するＸＲ端末に対しＸＲコンテンツを提供する例を挙げる。

また、以下に示す項目順序に従って本開示を説明する。
１．概要
２．情報処理システムの構成
３．ＸＲ端末の構成
４．施設カメラの構成
５．サーバ装置の構成
６．処理手順
７．変形例
８．ハードウェア構成
９．むすび

＜＜１．概要＞＞
図１～図３は、本開示の実施形態に係る情報処理方法の概要説明図（その１）～（その３）である。図１に示すように、本実施形態に係る情報処理システム１は、ＸＲ端末１０と、施設カメラ３０と、サーバ装置１００とを含む。

ＸＲ端末１０は、ユーザＵがＸＲコンテンツを楽しむためのアプリケーションソフトウェア（以下、「ＸＲアプリ」と言う）を実行する端末装置である。ＸＲ端末１０は、「端末装置」の一例に相当する。ＸＲ端末１０は、例えばスマートフォンやＨＭＤのほか、タブレット端末や、ＰＣ（Personal Computer）や、ＰＤＡ（Personal Digital Assistant）などによって実現される。ＸＲ端末１０がＨＭＤである場合、側頭部の全周を回るバンドや頭頂部を通るバンドを用いたヘッドバンド型のＨＭＤや、バイザー部分がディスプレイに相当するヘルメット型のＨＭＤや、レンズ部分がディスプレイに相当する眼鏡型のＨＭＤ等であってもよい。

なお、図１には、ＸＲ端末１０がスマートフォンであり、ユーザＵ－１がＸＲ端末１０－１を利用し、ユーザＵ－２がＸＲ端末１０－２を利用している例を示している。また、ユーザＵ－１およびユーザＵ－２は例えば親子であり、ユーザＵ－１がユーザＵ－２よりも高身長であるものとする。

施設カメラ３０は、ＸＲ施設３に１以上設けられる。施設カメラ３０は、「撮像装置」の一例に相当する。ＸＲ施設３は、ユーザＵにＸＲコンテンツを提供可能な現実空間を有する施設である。ＸＲ施設３は、美術館や博物館など、ユーザＵが屋内空間を移動しながらＸＲコンテンツを楽しめる施設であってもよいし、遊園地や街頭など、ユーザＵが屋外空間を移動しながらＸＲコンテンツを楽しめる施設であってもよい。

施設カメラ３０は、ＣＰＵ（Central Processing Unit）等のプロセッサを搭載するインテリジェントカメラ（スマートカメラとも言う）である。施設カメラ３０は、撮像画像に基づくユーザＵの検知処理、検知したユーザＵの属性の推定処理、検知したユーザＵの追跡処理等の各種の情報処理を実行可能に設けられる。なお、図１には、ＸＲ施設３に少なくとも２台の施設カメラ３０－１，３０－２が設けられている例を示している。

サーバ装置１００は、ＸＲ端末１０および施設カメラ３０を含むＸＲ施設３内の各種装置と通信可能に設けられ、これら各種装置を管理・制御するコンピュータである。サーバ装置１００は、ＸＲ施設３の内部に設けられてもよいし、外部に設けられてもよい。また、サーバ装置１００は、１以上のコンピュータからなるパブリッククラウドサーバとして実現されてもよい。なお、以下では、サーバ装置１００が実行する情報処理につき、仮想的に１台のサーバ装置１００が行うものとして説明するが、サーバ装置１００の物理的な台数を限定するものではない。例えばサーバ装置１００がパブリッククラウドサーバとして実現される場合、サーバ装置１００が実行する情報処理は、実際には１以上のコンピュータによって適宜分散して実行されてもよい。

サーバ装置１００は、例えばＸＲ端末１０および施設カメラ３０から取得した各種情報に基づいてユーザＵとＸＲ端末１０とを紐付ける。また、サーバ装置１００は、その紐付け結果に基づいて、ユーザＵごとに応じた適切なＸＲコンテンツをＸＲ端末１０に提示させる。

具体的には、本実施形態に係る情報処理方法では、サーバ装置１００が、施設カメラ３０が当該施設カメラ３０の撮像画像に基づいて推定したユーザＵの属性を含むユーザ情報および当該ユーザＵの軌跡を示す軌跡情報を施設カメラ３０から取得し、施設カメラ３０によるユーザＵの軌跡情報とＸＲ端末１０が示すユーザＵの軌跡情報とを照合することによってユーザ情報とＸＲ端末１０を紐付け、ＸＲ端末１０が提示するＸＲコンテンツの態様をユーザ情報に応じてＸＲ端末１０に変更させる。

より具体的には、図１に示すように、本実施形態に係る情報処理方法では、まず施設カメラ３０が、当該施設カメラ３０の撮像画像に基づいてユーザＵの属性を含むユーザ情報を推定するとともに、ユーザＵの軌跡情報を記録する（ステップＳ１）。

ユーザＵの属性は、例えばユーザＵの身長などの外形的属性のほか、年齢や性別といったデモグラフィック属性を含む。ユーザＵの軌跡情報は、ＸＲ施設３におけるユーザＵごとの軌跡を示す情報である。

そして、サーバ装置１００は、施設カメラ３０によるユーザＵの軌跡情報とＸＲ端末１０が示すユーザＵの軌跡情報とを照合し、施設カメラ３０が推定したユーザ情報とＸＲ端末１０を紐付ける（ステップＳ２）。

ステップＳ２では、図２に示すように、サーバ装置１００は、施設カメラ３０によるユーザＵの軌跡情報とＸＲ端末１０が示す軌跡情報とを照合し、ＸＲ施設３における軌跡が近いものを同一ユーザとして紐付ける。ＸＲ端末１０が示す軌跡情報は、例えばＶＰＳ（Visual Positioning Service）を利用して推定されるＸＲ端末１０の位置および姿勢を含むユーザ位置情報のログである。

なお、ＸＲ端末１０が示す軌跡情報は、ＶＰＳを利用したものではなく、ＸＲ端末１０から取得したＧＰＳ（Groval Positioning System）位置情報のログであってもよいし、ＸＲ施設３に１以上設けられたビーコン端末を利用したＸＲ端末１０の位置情報のログであってもよい。本実施形態は、ＶＰＳを利用するものとする。

図１の説明に戻る。そして、サーバ装置１００は、各ＸＲ端末１０に対し、ステップＳ２で紐付けたユーザ情報を送信し、このユーザ情報に応じて表示するＸＲコンテンツを自動的に変更させる（ステップＳ３）。

ステップＳ３では、図３に示すように、サーバ装置１００は、例えば同じＸＲコンテンツの特定箇所に表示される仮想的なポスターＸＰにつき、ユーザＵ－２に比べて高身長であるユーザＵ－１のＸＲ端末１０－１に対してはこのポスターＸＰを位置Ｐ２よりも高位置である位置Ｐ１に表示させる。

一方、サーバ装置１００は、同じポスターＸＰにつき、ユーザＵ－１に比して低身長であるユーザＵ－２のＸＲ端末１０－２に対しては、このポスターＸＰを位置Ｐ１よりも低位置である位置Ｐ２に表示させる。すなわち、サーバ装置１００は、同じＸＲコンテンツであってもユーザＵそれぞれの身長に応じた高さでポスターＸＰが表示されるように、仮想オブジェクトの表示を切り替える。

なお、このとき、ポスターＸＰの位置だけでなく、ユーザＵ－１に対しては大人向けの、ユーザＵ－２に対しては子供向けのポスターＸＰが表示されるように、ユーザＵの年齢に応じて内容までも含めた仮想オブジェクトの表示の切り替えを行うようにしてもよい。この年齢や性別といったユーザＵのデモグラフィック属性に応じた切り替えを行う変形例については、図９および図１０を用いて後述する。

このように、本実施形態に係る情報処理方法では、サーバ装置１００が、施設カメラ３０が当該施設カメラ３０の撮像画像に基づいて推定したユーザＵの属性を含むユーザ情報および当該ユーザＵの軌跡を示す軌跡情報を施設カメラ３０から取得し、施設カメラ３０によるユーザＵの軌跡情報とＸＲ端末１０が示すユーザＵの軌跡情報とを照合することによってユーザ情報とＸＲ端末１０を紐付け、ＸＲ端末１０が提示するＸＲコンテンツの態様をユーザ情報に応じてＸＲ端末１０に変更させる。

したがって、本実施形態に係る情報処理方法によれば、ユーザＵごとに応じた適切なＸＲコンテンツの提供を行うことができる。以下、本実施形態に係る情報処理方法を適用した情報処理システム１の構成例について、より具体的に説明する。

＜＜２．情報処理システムの構成＞＞
次に、図４は、本開示の実施形態に係る情報処理システム１の構成例を示す図である。なお、図４および後に示す図５～７を用いた説明では、既に説明済みの構成要素については、説明を簡略するか、省略する場合がある。

図４に示すように、情報処理システム１は、１以上のＸＲ端末１０と、１以上の施設カメラ３０と、サーバ装置１００とを含む。

ＸＲ端末１０は、既に述べた通り、ユーザＵが利用する端末装置である。ＸＲ端末１０は、１以上のＸＲアプリがインストールされる。ＸＲ端末１０は、ユーザＵによって実行したいＸＲアプリが選択された場合に、当該アプリを起動し、実行する。

ＸＲ端末１０と、施設カメラ３０と、サーバ装置１００とは、インターネットや携帯電話回線網等であるネットワークＮを介して相互に通信可能に接続される。なお、少なくともＸＲ端末１０とサーバ装置１００とは、所定の認証処理を経て認証済みである場合にのみ相互に通信可能となるようにしてもよい。

＜＜３．ＸＲ端末の構成＞＞
次に、図５は、本開示の実施形態に係るＸＲ端末１０の構成例を示すブロック図である。なお、図５および後に示す図６，７では、本実施形態の特徴を説明するために必要な構成要素のみを表しており、一般的な構成要素についての記載を省略している。

換言すれば、図５～図７に図示される各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。例えば、各ブロックの分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することが可能である。

図５に示すように、ＸＲ端末１０は、センサ部１１と、ＨＭＩ（Human Machine Interface）部１２と、通信部１３と、記憶部１４と、制御部１５とを備える。

センサ部１１は、ＸＲ端末１０の周囲の状況やＸＲ端末１０の状態に関する各種のセンサ情報を取得するセンサ群である。センサ部１１は、端末カメラ１１ａと、慣性センサ１１ｂとを含む。

端末カメラ１１ａは、ユーザＵの前方に位置する被写体（すなわち、現実空間および現実空間に存在する実物体）を撮像する。端末カメラ１１ａは、「第１カメラ」の一例に相当する。

慣性センサ１１ｂは、ＸＲ端末１０の加速度および角速度を計測するＩＭＵ（Inertial Measurement Unit）としての機能を有する。慣性センサ１１ｂは、図示略の加速度センサおよび角速度センサを含み、ＸＲ端末１０の加速度および角速度を計測する。

ＨＭＩ部１２は、ユーザＵに対する入力および出力に関するインターフェイス部品を提供する構成要素である。ＨＭＩ部１２は、「提示部」の一例に相当する。ＨＭＩ部１２は、ユーザＵからの入力操作を受け付ける入力インターフェイスを含む。入力インターフェイスは、例えばタッチパネルによって実現される。なお、入力インターフェイスは、キーボードや、マウスや、ペンタブレットや、マイク等によって実現されてもよい。また、入力インターフェイスは、ソフトウェア部品によって実現されてもよい。

また、ＨＭＩ部１２は、ユーザＵに対して画像情報や音声情報を提示する出力インターフェイスを含む。出力インターフェイスは、例えばディスプレイやスピーカー等によって実現される。なお、ＨＭＩ部１２は、入力インターフェイスおよび出力インターフェイスが一体となったタッチパネルディスプレイによって実現されてもよい。

通信部１３は、ネットワークアダプタ等によって実現される。通信部１３は、無線でネットワークＮを介してサーバ装置１００と接続され、サーバ装置１００との間で各種情報の送受信を行う。

記憶部１４は、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ（Flash Memory）等の記憶デバイスによって実現される。記憶部１４は、図５の例では、アプリ情報１４ａと、ＸＲコンテンツ情報１４ｂとを記憶する。

アプリ情報１４ａは、１以上のＸＲアプリのプログラムや、ＸＲアプリ以外のアプリのプログラムや、ＸＲ端末１０が実行する本実施形態に係るプログラムや、これらプログラムの実行中に用いられる各種のパラメータ等を含む情報である。

ＸＲコンテンツ情報１４ｂは、サーバ装置１００から取得するユーザ位置情報に応じてＸＲ空間に表示されるべき仮想オブジェクト群が設定された情報である。また、ＸＲコンテンツ情報１４ｂは、サーバ装置１００から取得するユーザＵのユーザ情報に応じて切り替えられるＸＲコンテンツの表示モードごとの仮想オブジェクトの表示の態様が設定された情報である。

制御部１５は、いわゆるコントローラ（Controller）やプロセッサ（Processor）に相当する。制御部１５は、例えば、ＣＰＵやＭＰＵ（Micro Processing Unit）、ＧＰＵ（Graphics Processing Unit）等によって、記憶部１４に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、制御部１５は、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現することができる。

制御部１５は、アプリ実行部１５ａと、抽出部１５ｂと、送信部１５ｃと、取得部１５ｄと、表示制御部１５ｅとを有し、以下に説明する情報処理の機能や作用を実現または実行する。

アプリ実行部１５ａは、ユーザＵによってＨＭＩ部１２を介して選択されたＸＲアプリをアプリ情報１４ａから読み込んで実行する。

抽出部１５ｂは、ＸＲアプリの実行中において端末カメラ１１ａによって撮像された撮像画像を取得する。また、抽出部１５ｂは、取得した撮像画像における特徴点を抽出する。

送信部１５ｃは、通信部１３を介し、抽出部１５ｂによって抽出された特徴点群を特徴点情報としてサーバ装置１００へ送信する。

取得部１５ｄは、通信部１３を介し、サーバ装置１００が特徴点情報に基づいて推定したＸＲ端末１０の位置および姿勢を含むユーザ位置情報をサーバ装置１００から取得する。また、取得部１５ｄは、通信部１３を介し、サーバ装置１００が施設カメラ３０による軌跡情報およびＸＲ端末１０が示す軌跡情報を照合することによって特定したユーザ情報をサーバ装置１００から取得する。

表示制御部１５ｅは、取得部１５ｄによって取得されたユーザ位置情報に基づいて、当該ユーザ位置情報に応じた仮想オブジェクトを含むＸＲコンテンツをＸＲ空間に表示する。また、表示制御部１５ｅは、取得部１５ｄによって取得されたユーザ情報に基づいてＸＲコンテンツ情報１４ｂにおけるＸＲコンテンツの表示モードを設定する。また、表示制御部１５ｅは、設定した表示モードに応じた表示の態様でＸＲコンテンツをＸＲ空間に表示する。

＜＜４．施設カメラの構成＞＞
次に、施設カメラ３０の構成例について説明する。図６は、本開示の実施形態に係る施設カメラ３０の構成例を示すブロック図である。図６に示すように、施設カメラ３０は、カメラ３１と、通信部３３と、記憶部３４と、制御部３５とを備える。

カメラ３１は、ＸＲ施設３における所定の撮像領域を撮像可能に設けられる。カメラ３１は、第１カメラ（端末カメラ１１ａ）と同空間内に配置された「第２カメラ」の一例に相当する。

通信部３３は、ネットワークアダプタ等によって実現される。通信部３３は、有線または無線でネットワークＮを介してサーバ装置１００と接続され、サーバ装置１００との間で各種情報の送受信を行う。

記憶部３４は、例えば、ＲＡＭ、ＲＯＭ、フラッシュメモリ等の記憶デバイスによって実現される。記憶部３４は、図６の例では、プログラム情報３４ａと、推定モデル情報３４ｂと、推定情報３４ｃとを記憶する。

プログラム情報３４ａは、施設カメラ３０が実行する本実施形態に係るプログラムや、このプログラムの実行中に用いられる各種のパラメータ等を含む情報である。

推定モデル情報３４ｂは、後述する推定部３５ｂが実行するカメラ３１の撮像画像に基づくユーザＵの属性の推定処理において用いられる推定モデルを含む情報である。この推定モデルは、例えば深層学習のアルゴリズムを用いて生成されたＤＮＮ（Deep Neural Network）モデルである。

推定情報３４ｃは、推定部３５ｂによって推定された属性を含むユーザＵごとのユーザ情報が格納される。各ユーザ情報には、ユーザＵを一意に識別する識別子であるユーザＩＤ（以下、「ＵＩＤ」と言う）が付与される。

また、推定情報３４ｃは、前述の施設カメラ３０による軌跡情報（図２参照）がＵＩＤごとに格納される。この軌跡情報は、後述する追跡部３５ｃが実行する追跡処理によって記録される。

制御部３５は、いわゆるコントローラやプロセッサに相当する。制御部３５は、例えば、ＣＰＵやＭＰＵ、ＧＰＵ等によって、記憶部３４に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、制御部３５は、例えば、ＡＳＩＣやＦＰＧＡ等の集積回路により実現することができる。

制御部３５は、取得部３５ａと、推定部３５ｂと、追跡部３５ｃと、送信部３５ｄとを有し、以下に説明する情報処理の機能や作用を実現または実行する。

取得部３５ａは、カメラ３１からカメラ３１の撮像画像を取得する。推定部３５ｂは、推定モデル情報３４ｂを用いつつ、取得部３５ａによって取得された撮像画像に基づいてＸＲ施設３を利用する各ユーザＵを検知するとともに、検知した各ユーザＵの属性を含むユーザ情報を推定する。

また、推定部３５ｂは、推定したユーザ情報を推定情報３４ｃへ格納する。このとき、推定部３５ｂは、各ユーザ情報へＵＩＤを付与する。

追跡部３５ｃは、推定部３５ｂによって検知された各ユーザＵをカメラ３１の撮像画像に基づいて追跡する追跡処理を実行する。また、追跡部３５ｃは、この追跡処理の結果に基づいて前述の施設カメラ３０による軌跡情報をＵＩＤごとに推定情報３４ｃへ記録する。

送信部３５ｄは、通信部３３を介し、推定情報３４ｃへ記録されたＸＲ施設３を利用中の各ユーザＵのユーザ情報および軌跡情報をサーバ装置１００へ送信する。

＜＜５．サーバ装置の構成＞＞
次に、サーバ装置１００の構成例について説明する。図７は、本開示の実施形態に係るサーバ装置１００の構成例を示すブロック図である。図７に示すように、サーバ装置１００は、通信部１０１と、記憶部１０２と、制御部１０３とを備える。

通信部１０１は、ネットワークアダプタ等によって実現される。通信部１０１は、有線または無線でネットワークＮを介してＸＲ端末１０および施設カメラ３０と接続され、ＸＲ端末１０および施設カメラ３０との間で各種情報の送受信を行う。

記憶部１０２は、例えば、ＲＡＭ、ＲＯＭ、フラッシュメモリ、ハードディスク装置等の記憶デバイスによって実現される。記憶部１０２は、図７の例では、３Ｄ（three-dimensional）マップ情報１０２ａと、端末側軌跡情報１０２ｂと、施設カメラ側軌跡情報１０２ｃと、照合情報１０２ｄとを記憶する。

３Ｄマップ情報１０２ａは、ＸＲ施設３の３Ｄマップを含む情報である。端末側軌跡情報１０２ｂは、前述のＸＲ端末１０が示す軌跡情報（図２参照）が格納される。この軌跡情報は、後述する追跡部１０３ｄが実行する追跡処理によって記録される。

施設カメラ側軌跡情報１０２ｃは、施設カメラ３０から送信される前述の施設カメラ３０による軌跡情報（図２参照）が格納される。この軌跡情報は、後述する取得部１０３ａによって記録される。

照合情報１０２ｄは、後述する照合部１０３ｅが実行する端末側軌跡情報１０２ｂおよび施設カメラ側軌跡情報１０２ｃの照合処理による照合結果が格納される。この照合結果は、ＸＲ端末１０に対応するとして特定されたＵＩＤおよび当該ＵＩＤに紐付くユーザ情報を含む。

また、図示は略しているが、記憶部１０２は、サーバ装置１００が実行する本実施形態に係るプログラムを記憶する。

制御部１０３は、いわゆるコントローラやプロセッサに相当する。制御部１０３は、例えば、ＣＰＵやＭＰＵ、ＧＰＵ等によって、記憶部１０２に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、制御部１０３は、例えば、ＡＳＩＣやＦＰＧＡ等の集積回路により実現することができる。

制御部１０３は、取得部１０３ａと、推定部１０３ｂと、送信部１０３ｃと、追跡部１０３ｄと、照合部１０３ｅとを有し、以下に説明する情報処理の機能や作用を実現または実行する。

取得部１０３ａは、通信部１０１を介し、ＸＲ端末１０から送信される前述の特徴点情報を取得する。また、取得部１０３ａは、通信部１０１を介し、施設カメラ３０から送信されるＸＲ施設３を利用中の各ユーザＵのユーザ情報および軌跡情報を取得する。また、取得部１０３ａは、施設カメラ３０から取得した施設カメラ３０側の軌跡情報を施設カメラ側軌跡情報１０２ｃへ記録する。

推定部１０３ｂは、取得部１０３ａによって取得されたＸＲ端末１０からの特徴点情報および３Ｄマップ情報１０２ａに基づき、ＶＰＳを利用してＸＲ施設３におけるＸＲ端末１０の位置および姿勢を含む前述のユーザ位置情報を推定する。また、推定部１０３ｂは、送信部１０３ｃに対し、推定したユーザ位置情報をＸＲ端末１０へ送信させる。

送信部１０３ｃは、通信部１０１を介し、推定部１０３ｂによって推定されたユーザ位置情報をＸＲ端末１０へ送信する。また、送信部１０３ｃは、通信部１０１を介し、後述する照合部１０３ｅが実行する照合処理によって特定されるＵＩＤに紐付くユーザ情報をＸＲ端末１０へ送信する。

追跡部１０３ｄは、推定部１０３ｂによって推定されるユーザ位置情報を追跡し、その追跡結果であるユーザ位置情報のログをＸＲ端末１０側の軌跡情報として端末側軌跡情報１０２ｂへ記録する。

照合部１０３ｅは、端末側軌跡情報１０２ｂおよび施設カメラ側軌跡情報１０２ｃの照合処理（図２参照）を実行し、ＸＲ端末１０に対応するＵＩＤを特定することで、施設カメラ３０によって推定されたユーザ情報とＸＲ端末１０を紐付ける。また、照合部１０３ｅは、送信部１０３ｃに対し、特定したＵＩＤに紐付くユーザ情報をＸＲ端末１０へ送信させる。

＜＜６．処理手順＞＞
次に、情報処理システム１が実行する処理手順について、図８を用いて説明する。図８は、本開示の実施形態に係る情報処理システム１が実行する処理シーケンスを示す図である。

図８に示すように、まずＸＲ端末１０においてＸＲアプリが起動されると（ステップＳ１０１）、ＸＲ端末１０の端末カメラ１１ａが撮像を開始する（ステップＳ１０２）。そして、ＸＲ端末１０は、端末カメラ１１ａの撮像画像から特徴点を抽出し（ステップＳ１０３）、抽出した特徴点群である特徴点情報をサーバ装置１００へ送信する（ステップＳ１０４）。

サーバ装置１００は、ＸＲ端末１０から送信された特徴点情報に基づいてＸＲ端末１０の位置および姿勢を含むユーザ位置情報を推定する（ステップＳ１０５）。そして、サーバ装置１００は、推定したユーザ位置情報をＸＲ端末１０へ送信する（ステップＳ１０６）。

ＸＲ端末１０は、サーバ装置１００から送信されたユーザ位置情報を取得すると（ステップＳ１０７）、このユーザ位置情報に応じた仮想オブジェクトを含むＸＲコンテンツをＸＲ空間に表示する（ステップＳ１０８）。

なお、サーバ装置１００は、ステップＳ１０４からステップＳ１０６を繰り返しつつ、ユーザ位置情報のログを端末側の軌跡情報として記録する（ステップＳ１０９）。

一方、施設カメラ３０は、撮像画像に基づいてＸＲ施設３を利用するユーザＵを検知すると（ステップＳ１１０）、検知したユーザＵの属性を含むユーザ情報を推定する（ステップＳ１１１）。そして、施設カメラ３０は、ユーザ情報ごとにＵＩＤを付与する（ステップＳ１１２）。

また、施設カメラ３０は、検知したユーザＵを追跡し、ＵＩＤに紐付けて軌跡情報を記録する（ステップＳ１１３）。そして、施設カメラ３０は、軌跡情報を含むユーザ情報をサーバ装置１００へ送信する（ステップＳ１１４）。

サーバ装置１００は、施設カメラ３０から送信された施設カメラ側の軌跡情報を取得すると（ステップＳ１１５）、端末側および施設カメラ側の軌跡情報を照合してＸＲ端末１０のＵＩＤを特定する（ステップＳ１１６）。

そして、サーバ装置１００は、特定したＵＩＤに紐付くユーザ情報をＸＲ端末１０へ送信する（ステップＳ１１７）。

ＸＲ端末１０は、サーバ装置１００から送信されたユーザ情報に基づいてＸＲコンテンツの表示モードを切り替える（ステップＳ１１８）。そして、ＸＲ端末１０は、切り替えた表示モードに応じてＸＲコンテンツをＸＲ空間に表示する（ステップＳ１１９）。

＜＜７．変形例＞＞
ところで、上述してきた本開示の実施形態には、いくつかの変形例を挙げることができる。

上述した本実施形態では、一例として、ユーザＵの身長に応じて自動的にポスターＸＰを表示する高さを切り替える例を挙げたが、変形例としてユーザＵの年齢や性別といった属性に応じて自動的にＸＲコンテンツの表示を切り替えるようにしてもよい。

図９は、変形例に係る情報処理システム１Ａのイメージ図である。情報処理システム１Ａは、図９に示すように、例えばＸＲ空間における特定の場所にユーザＵが到達した場合に、ＸＲ空間に仮想的なドアであるＸＲドアＤを表示させる。

ここで、この情報処理システム１Ａが提供するＸＲコンテンツをユーザＵ－３およびユーザＵ－４が利用しているものとする。また、ユーザＵ－３は女性であり、ユーザＵ－４は男性であるものとする。

そして、情報処理システム１Ａは、例えばユーザＵ－３がＸＲ空間においてＸＲドアＤを通過すると、ユーザＵ－３の性別に応じた第１のＶＲ空間をユーザＵ－３のＸＲ端末１０に自動的に表示させる。また、情報処理システム１Ａは、例えばユーザＵ－４がＸＲ空間においてＸＲドアＤを通過すると、ユーザＵ－４の性別に応じた第１のＶＲ空間とは異なる第２のＶＲ空間をユーザＵ－４のＸＲ端末１０に自動的に表示させる。

なお、ここではユーザＵの性別によってＸＲコンテンツの表示を切り替える例を挙げたが、ユーザＵの性別によって表示を切り替えてもよい。また、年齢や性別といったデモグラフィック属性に限らず、例えばライフスタイルや嗜好といったサイコグラフィック属性によって表示を切り替えるようにしてもよい。

これは、ユーザＵの属性を推定する推定モデルが、例えばカメラ３１の撮像画像におけるユーザＵの服装やヘアスタイル、所持品等からサイコグラフィック属性を推定可能となるように学習されることで実現可能である。

なお、情報処理システム１Ａが実行する処理手順についても説明しておく。図１０は、変形例に係る情報処理システム１Ａが実行する処理シーケンスを示す図である。図１０は既に示した図８に対応しているため、ここでは図８と異なる点についてのみ説明する。

図１０に示すように、情報処理システム１Ａでは、ＸＲ端末１０がステップＳ１０８でサーバ装置１００からのユーザ位置情報に基づいてＸＲコンテンツをＸＲ空間に表示した後、ＸＲ端末１０は、ユーザＵが到達した特定の場所でＸＲドアＤを表示する（ステップＳ２０１）。

そして、ＸＲ端末１０は、このＸＲドアＤを表示したことを示す表示情報をサーバ装置１００へ送信する（ステップＳ２０２）。すると、サーバ装置１００は、このＸＲ端末１０からの表示情報の取得をトリガとして、図８にも示した端末側および施設カメラ側の軌跡情報を照合してＸＲ端末１０のＵＩＤを特定する処理を実行する（ステップＳ１１６）。そして、以降は、図８と同様にステップＳ１１７～ステップＳ１１９が実行されることとなる。

また、上述した本実施形態では、主にＸＲコンテンツの表示の態様を切り替える例を挙げたが、切り替えの対象は表示の態様に限られない。例えば、ＸＲコンテンツが音声情報や触覚情報等の提示を伴うものであれば、音声出力や触覚出力の態様をユーザＵごとのユーザ情報に応じて自動的に切り替えるようにしてもよい、すなわち、本実施形態に係る情報処理方法は、ユーザＵの属性を含むユーザ情報に応じてＸＲコンテンツの提示の態様を自動的に切り替えるものであってよい。

また、上述した本実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部又は一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部又は一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。

また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部又は一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。

例えば、上述した本実施形態では、ＸＲ端末１０の記憶部１４がＸＲコンテンツ情報１４ｂを記憶する例を挙げたが、サーバ装置１００の記憶部１０２が記憶してもよい。この場合、ＸＲ端末１０は、専らサーバ装置１００の指示に基づいてＸＲコンテンツの提示の態様を切り替えるエッジデバイスとして機能する。すなわち、この場合、ユーザＵの属性を含むユーザ情報に応じてＸＲコンテンツの提示の態様をＸＲ端末１０に切り替えさせる（変更させる）判断は、サーバ装置１００側で完結することとなる。

また、上述した本実施形態は、処理内容を矛盾させない領域で適宜組み合わせることが可能である。

＜＜８．ハードウェア構成＞＞
上述してきた本実施形態に係るＸＲ端末１０、施設カメラ３０およびサーバ装置１００は、例えば図１１に示すような構成のコンピュータ１０００によって実現される。サーバ装置１００を例に挙げて説明する。図１１は、サーバ装置１００の機能を実現するコンピュータ１０００の一例を示すハードウェア構成図である。コンピュータ１０００は、ＣＰＵ１１００、ＲＡＭ１２００、ＲＯＭ１３００、二次記憶装置１４００、通信インターフェイス１５００、及び入出力インターフェイス１６００を有する。コンピュータ１０００の各部は、バス１０５０によって接続される。

ＣＰＵ１１００は、ＲＯＭ１３００又は二次記憶装置１４００に格納されたプログラムに基づいて動作し、各部の制御を行う。例えば、ＣＰＵ１１００は、ＲＯＭ１３００又は二次記憶装置１４００に格納されたプログラムをＲＡＭ１２００に展開し、各種プログラムに対応した処理を実行する。

ＲＯＭ１３００は、コンピュータ１０００の起動時にＣＰＵ１１００によって実行されるＢＩＯＳ（Basic Input Output System）等のブートプログラムや、コンピュータ１０００のハードウェアに依存するプログラム等を格納する。

二次記憶装置１４００は、ＣＰＵ１１００によって実行されるプログラム、及び、かかるプログラムによって使用されるデータ等を非一時的に記録する、コンピュータが読み取り可能な記録媒体である。具体的には、二次記憶装置１４００は、プログラムデータ１４５０の一例である本開示に係るプログラムを記録する記録媒体である。

通信インターフェイス１５００は、コンピュータ１０００が外部ネットワーク１５５０（例えばインターネット）と接続するためのインターフェイスである。例えば、ＣＰＵ１１００は、通信インターフェイス１５００を介して、他の機器からデータを受信したり、ＣＰＵ１１００が生成したデータを他の機器へ送信したりする。

入出力インターフェイス１６００は、入出力デバイス１６５０とコンピュータ１０００とを接続するためのインターフェイスである。例えば、ＣＰＵ１１００は、入出力インターフェイス１６００を介して、キーボードやマウス等の入力デバイスからデータを受信する。また、ＣＰＵ１１００は、入出力インターフェイス１６００を介して、ディスプレイやスピーカーやプリンタ等の出力デバイスにデータを送信する。また、入出力インターフェイス１６００は、所定の記録媒体（メディア）に記録されたプログラム等を読み取るメディアインターフェイスとして機能してもよい。メディアとは、例えばＤＶＤ（Digital Versatile Disc）、ＰＤ（Phase change rewritable Disk）等の光学記録媒体、ＭＯ（Magneto-Optical disk）等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。

例えば、コンピュータ１０００が本実施形態に係るサーバ装置１００として機能する場合、コンピュータ１０００のＣＰＵ１１００は、ＲＡＭ１２００上にロードされたプログラムを実行することにより、制御部１０３の機能を実現する。また、二次記憶装置１４００には、本開示に係るプログラムや、記憶部１０２内のデータが格納される。なお、ＣＰＵ１１００は、プログラムデータ１４５０を二次記憶装置１４００から読み取って実行するが、他の例として、外部ネットワーク１５５０を介して、他の装置からこれらのプログラムを取得してもよい。

＜＜９．むすび＞＞
以上説明したように、本開示の一実施形態によれば、サーバ装置１００（「情報処理装置」の一例に相当）は、ＸＲコンテンツをユーザＵに提示するＨＭＩ部１２（「提示部」の一例に相当）と端末カメラ１１ａ（「第１カメラ」の一例に相当）とを有するＸＲ端末１０（「端末装置」の一例に相当）、および、ＸＲ端末１０と同空間内に配置されたカメラ３１（「第２カメラ」の一例に相当）を有する施設カメラ３０（「撮像装置」の一例に相当）と通信可能に設けられた制御部１０３を備える。制御部１０３は、施設カメラ３０がカメラ３１の撮像画像に基づいて推定したユーザＵの属性を含むユーザ情報および当該ユーザＵの軌跡を示す軌跡情報を施設カメラ３０から取得し、施設カメラ３０によるユーザＵの軌跡情報とＸＲ端末１０が示すユーザＵの軌跡情報とを照合することによってユーザ情報とＸＲ端末１０を紐付け、ＸＲ端末１０がＨＭＩ部１２に提示するＸＲコンテンツの態様をユーザ情報に応じてＸＲ端末１０に変更させる。これにより、ユーザごとに応じた適切なＸＲコンテンツの提供を行うことができる。

以上、本開示の各実施形態について説明したが、本開示の技術的範囲は、上述の各実施形態そのままに限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。また、異なる実施形態及び変形例にわたる構成要素を適宜組み合わせてもよい。

また、本明細書に記載された各実施形態における効果はあくまで例示であって限定されるものでは無く、他の効果があってもよい。

なお、本技術は以下のような構成も取ることができる。
（１）
ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、前記端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた制御部を備え、
前記制御部は、
前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得し、
前記撮像装置によるユーザの軌跡情報と前記端末装置が示すユーザの軌跡情報とを照合することによって前記ユーザ情報と前記端末装置を紐付け、
前記端末装置が前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させる、
情報処理装置。
（２）
前記制御部は、
前記端末装置が前記提示部に表示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させる、
前記（１）に記載の情報処理装置。
（３）
前記撮像装置は、
前記第２カメラの撮像画像に基づいて身長を含むユーザの外形的属性を推定し、
前記制御部は、
前記身長に応じてＸＲコンテンツを表示する高さを前記端末装置に変更させる、
前記（２）に記載の情報処理装置。
（４）
前記撮像装置は、
前記第２カメラの撮像画像に基づいて年齢および性別を含むユーザのデモグラフィック属性を推定し、
前記制御部は、
前記デモグラフィック属性に応じて表示するＸＲコンテンツの内容を前記端末装置に変更させる、
前記（２）または（３）に記載の情報処理装置。
（５）
前記撮像装置は、
前記第２カメラの撮像画像に基づいてライフスタイルおよび嗜好を含むユーザのサイコグラフィック属性を推定し、
前記制御部は、
前記サイコグラフィック属性に応じて表示するＸＲコンテンツの内容を前記端末装置に変更させる、
前記（４）に記載の情報処理装置。
（６）
前記制御部は、
ＸＲ空間における特定の場所にユーザが到達した場合に、前記ＸＲ空間に仮想的なドアを表示させ、
ユーザが前記ドアを通過後に表示するＸＲコンテンツの内容を前記デモグラフィック属性または前記サイコグラフィック属性に応じて前記端末装置に変更させる、
前記（５）に記載の情報処理装置。
（７）
前記制御部は、
前記端末装置が抽出した前記第１カメラの撮像画像における特徴点を前記端末装置から取得し、
前記特徴点および前記同空間の３Ｄ（three-dimensional）マップに基づいて前記同空間における前記端末装置の位置および姿勢を含むユーザ位置情報を推定する、
前記（１）～（６）のいずれか一つに記載の情報処理装置。
（８）
前記制御部は、
前記ユーザ位置情報のログを前記端末装置が示すユーザの軌跡情報として記録する、
前記（７）に記載の情報処理装置。
（９）
前記制御部は、
前記端末装置が測位したＧＰＳ位置情報を前記端末装置から取得し、
前記ＧＰＳ位置情報のログを前記端末装置が示すユーザの軌跡情報として記録する、
前記（１）～（６）のいずれか一つに記載の情報処理装置。
（１０）
前記制御部は、
前記同空間に１以上設けられたビーコン端末を利用した前記端末装置の位置情報のログを前記端末装置が示すユーザの軌跡情報として記録する、
前記（１）～（６）のいずれか一つに記載の情報処理装置。
（１１）
サーバ装置と通信可能に設けられた制御部と、ＸＲコンテンツをユーザに提示する提示部と、第１カメラと、を備える情報処理装置であって、
前記サーバ装置は、
前記情報処理装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられ、
前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得し、
前記制御部は、
前記サーバ装置が前記撮像装置によるユーザの軌跡情報と前記情報処理装置が示すユーザの軌跡情報とを照合することによって当該情報処理装置と紐付けた前記ユーザ情報を前記サーバ装置から取得し、
前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて変更する、
情報処理装置。
（１２）
ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、前記端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた情報処理装置が実行する情報処理方法であって、
前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得することと、
前記撮像装置によるユーザの軌跡情報と前記端末装置が示すユーザの軌跡情報とを照合することによって前記ユーザ情報と前記端末装置を紐付けることと、
前記端末装置が前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させることと、
を含む、情報処理方法。
（１３）
ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、前記端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた情報処理装置であるコンピュータに、
前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得すること、
前記撮像装置によるユーザの軌跡情報と前記端末装置が示すユーザの軌跡情報とを照合することによって前記ユーザ情報と前記端末装置を紐付けること、
前記端末装置が前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させること、
を実行させる、プログラム。
（１４）
ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、前記端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた情報処理装置であるコンピュータに、
前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得すること、
前記撮像装置によるユーザの軌跡情報と前記端末装置が示すユーザの軌跡情報とを照合することによって前記ユーザ情報と前記端末装置を紐付けること、
前記端末装置が前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させること、
を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。

１，１Ａ 情報処理システム
３ ＸＲ施設
１０ ＸＲ端末
１１ センサ部
１１ａ 端末カメラ
１１ｂ 慣性センサ
１２ ＨＭＩ部
１３ 通信部
１４ 記憶部
１５ 制御部
３０ 施設カメラ
３１ カメラ
３３ 通信部
３４ 記憶部
１００ サーバ装置
１０１ 通信部
１０２ 記憶部
１０３ 制御部
Ｕ ユーザ

Claims (12)

1. ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、前記端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた制御部を備え、
   前記制御部は、
   前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得し、
   前記撮像装置によるユーザの軌跡情報と前記端末装置が示すユーザの軌跡情報とを照合することによって前記ユーザ情報と前記端末装置を紐付け、
   前記端末装置が前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させる、
   情報処理装置。
2. 前記制御部は、
   前記端末装置が前記提示部に表示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させる、
   請求項１に記載の情報処理装置。
3. 前記撮像装置は、
   前記第２カメラの撮像画像に基づいて身長を含むユーザの外形的属性を推定し、
   前記制御部は、
   前記身長に応じてＸＲコンテンツを表示する高さを前記端末装置に変更させる、
   請求項２に記載の情報処理装置。
4. 前記撮像装置は、
   前記第２カメラの撮像画像に基づいて年齢および性別を含むユーザのデモグラフィック属性を推定し、
   前記制御部は、
   前記デモグラフィック属性に応じて表示するＸＲコンテンツの内容を前記端末装置に変更させる、
   請求項２に記載の情報処理装置。
5. 前記撮像装置は、
   前記第２カメラの撮像画像に基づいてライフスタイルおよび嗜好を含むユーザのサイコグラフィック属性を推定し、
   前記制御部は、
   前記サイコグラフィック属性に応じて表示するＸＲコンテンツの内容を前記端末装置に変更させる、
   請求項４に記載の情報処理装置。
6. 前記制御部は、
   ＸＲ空間における特定の場所にユーザが到達した場合に、前記ＸＲ空間に仮想的なドアを表示させ、
   ユーザが前記ドアを通過後に表示するＸＲコンテンツの内容を前記デモグラフィック属性または前記サイコグラフィック属性に応じて前記端末装置に変更させる、
   請求項５に記載の情報処理装置。
7. 前記制御部は、
   前記端末装置が抽出した前記第１カメラの撮像画像における特徴点を前記端末装置から取得し、
   前記特徴点および前記同空間の３Ｄ（three-dimensional）マップに基づいて前記同空間における前記端末装置の位置および姿勢を含むユーザ位置情報を推定する、
   請求項１に記載の情報処理装置。
8. 前記制御部は、
   前記ユーザ位置情報のログを前記端末装置が示すユーザの軌跡情報として記録する、
   請求項７に記載の情報処理装置。
9. 前記制御部は、
   前記端末装置が測位したＧＰＳ（Groval Positioning System）位置情報を前記端末装置から取得し、
   前記ＧＰＳ位置情報のログを前記端末装置が示すユーザの軌跡情報として記録する、
   請求項１に記載の情報処理装置。
10. 前記制御部は、
    前記同空間に１以上設けられたビーコン端末を利用した前記端末装置の位置情報のログを前記端末装置が示すユーザの軌跡情報として記録する、
    請求項１に記載の情報処理装置。
11. サーバ装置と通信可能に設けられた制御部と、ＸＲコンテンツをユーザに提示する提示部と、第１カメラと、を備える情報処理装置であって、
    前記サーバ装置は、
    前記情報処理装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられ、
    前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得し、
    前記制御部は、
    前記サーバ装置が前記撮像装置によるユーザの軌跡情報と前記情報処理装置が示すユーザの軌跡情報とを照合することによって当該情報処理装置と紐付けた前記ユーザ情報を前記サーバ装置から取得し、
    前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて変更する、
    情報処理装置。
12. ＸＲコンテンツをユーザに提示する提示部と第１カメラとを有する端末装置、および、前記端末装置と同空間内に配置された第２カメラを有する撮像装置と通信可能に設けられた情報処理装置が実行する情報処理方法であって、
    前記撮像装置が前記第２カメラの撮像画像に基づいて推定したユーザの属性を含むユーザ情報および当該ユーザの軌跡を示す軌跡情報を前記撮像装置から取得することと、
    前記撮像装置によるユーザの軌跡情報と前記端末装置が示すユーザの軌跡情報とを照合することによって前記ユーザ情報と前記端末装置を紐付けることと、
    前記端末装置が前記提示部に提示するＸＲコンテンツの態様を前記ユーザ情報に応じて前記端末装置に変更させることと、
    を含む、情報処理方法。

Images