JP7471999B2 - 情報処理装置 - Google Patents

Description

本発明は、情報処理装置に関する。

特許文献１には、ユーザによって描かれた図形を認識し、認識した図形に対応する命令を実行する情報処理装置が開示されている。

特開２００７－４２０５０号公報

ところで、ユーザは、部屋等の空間内で快適に過ごすため、又は空間内を装飾するため、空間内の所望した位置に、照明光の照射、又は、画像の投写等の物理的な作用を与えることを所望することがある。しかしながら、従来技術では、ユーザが所望した位置に、物理的な作用を与えることができなかった。

以上の課題を解決するために、本開示の好適な態様にかかる情報処理装置は、作用面に対して物理的な作用を与える作用装置を制御可能な情報処理装置であって、前記作用装置の処理の種別を示す識別情報と、前記処理の種別に対応する図形を示す識別図形情報とを対応付けて記憶する記憶装置と、前記作用面に対する指示体の位置を示す位置情報を検出する検出部と、前記位置情報に基づいて、前記指示体の位置の軌跡を示す軌跡画像に含まれる図形が、前記識別図形情報が示す図形に類似するか否かを判定する判定部と、前記判定部の判定結果が肯定である場合、前記識別図形情報に対応付けられた識別情報が示す処理を、前記作用装置に実行させる特定処理として決定する処理決定部と、前記位置情報に基づいて、前記作用面のうち前記特定処理により生じる前記作用を受ける作用位置を決定する位置決定部と、前記作用位置に前記作用を与える前記特定処理を、前記作用装置に実行させる実行部と、を備える。

本発明によれば、ユーザが所望した位置に、物理的な作用を与えることができる。

第１実施形態にかかる作用提供システム１を例示する模式図。 作用提供システム１の構成を示す説明図。 第１図形情報Ｚ１Ｉの内容の一例を示す図。 照射処理図形ＳＰＬの一例を示す図。 軌跡画像ＴＰを作用面ＳＣに投写した例を示す図。 作用提供システム１の動作を示すフローチャートを示す図。 第２実施形態にかかる作用提供システム１ａを例示する模式図。 作用提供システム１ａの構成を示す説明図。 風景画像ＰＰＬＡの一例を示す図。 アプリ生成画像ＰＰＡＬの一例を示す図。 第１図形情報Ｚ１Ｉａの内容の一例を示す図。 風景表示図形ＳＰＬＡの一例を示す図。 アプリ表示図形ＳＰＡＬの一例を示す図。 風景画像ＰＰＬＡを含む投写画像ＰＲＪの投写例を示す図。 アプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪの投写例を示す図。 作用提供システム１ａの動作を示すフローチャートを示す図。 作用提供システム１ａの動作を示すフローチャートを示す図。 第１変形例における作用提供システム１ｂの構成を示す説明図。 第１図形情報Ｚ１Ｉｂの内容の一例を示す図。 送風処理図形ＳＰＷの一例を示す図。 第２変形例における作用提供システム１ｃの構成を示す説明図。 第１図形情報Ｚ１Ｉｃの内容の一例を示す図。 定位処理図形ＳＰＳの一例を示す図。 第３変形例における作用提供システム１ｄの構成を示す説明図。 第４変形例における作用提供システム１ｅの構成を示す説明図。 第２図形情報Ｚ２Ｉの内容の一例を示す図。 第１大きさ図形ＳＰ１の一例を示す図。 第２大きさ図形ＳＰ２の一例を示す図。 軌跡画像ＴＰの一例を示す図。 第５変形例における作用提供システム１ｆの構成を示す説明図。 一覧画像情報ＤＰＩが示す一覧画像ＤＰの一例を示す図。 判定部２４の判定結果が否定である場合の軌跡画像ＴＰの一例を示す図。 追加部３１による追加後の第１図形情報Ｚ１Ｉの内容の一例を示す図。 第６変形例における作用提供システム１ｇの構成を示す説明図。 メモ帳表示処理図形ＳＰＭＭの一例を示す図。 軌跡画像ＴＰの一例を示す図。 作用面ＳＣに投写されたメモ帳画像ＰＰＭＭの一例を示す図。

１．第１実施形態
図１は、第１実施形態にかかる作用提供システム１を例示する模式図である。作用提供システム１は、ユーザが所望する位置に、物理的な作用を与える。作用提供システム１は、情報処理装置１０と、指示体１５と、投写装置４０と、作用装置とを有する。作用提供システム１は、例えば、ホテルのある客室ＲＭ内に設けられる。作用装置は、客室ＲＭ内の内壁面に物理的な作用を直接的又は間接的に与える。以下、客室ＲＭ内の内壁面を、作用面ＳＣと称する。作用面ＳＣに与える物理的な作用とは、作用面ＳＣに、例えば、可視光、音、熱、振動、及び、風のうち少なくともいずれか１つを与えることである。また、物理的な作用を直接的に与えるとは、作用装置そのものが、作用面ＳＣに働きかけることを意味する。物理的な作用を直接的に与える作用装置としては、例えば、照明装置、投写装置、音響装置、冷暖房装置、振動装置、及び送風装置などが該当する。物理的な作用を間接的に与えるとは、作用装置そのものが作用面ＳＣに働きかけるのではなく、何らかの装置を介して作用面ＳＣに物理的な作用を与えることを意味する。物理的な作用を間接的に与える作用装置としては、例えば、環境の明るさに応じて照明装置の照射光の明るさを指定する装置、投写装置が投写する画像を示す画像情報を生成する生成装置、音響装置が放音する音を生成する装置、環境の温度に応じて冷暖房装置の目標温度を指定する装置、振動装置の振動の大きさを指定する装置、及び送風装置の風量を指定する装置などが該当する。第１実施形態では、作用装置が、作用面ＳＣに対して照明光を照射する照明装置５０である例を用いて説明する。

情報処理装置１０は、作用提供システム１を制御する。情報処理装置１０は、任意の情報処理装置（例えば、サーバ、若しくはパーソナルコンピュータ等の据置型の情報機器、又は、スマートフォン、ノートパソコン、ウェアラブル端末及びタブレット端末等の可搬型の情報端末）である。投写装置４０は、情報処理装置１０の制御のもと、作用面ＳＣに画像を投写する。照明装置５０は、情報処理装置１０の制御のもと、作用面ＳＣに対して照明光を照射する。指示体１５は、ペン型又は棒形状の操作デバイスである。指示体１５は、ユーザによって操作され、作用面ＳＣの上の任意の位置を指し示すために用いられる。

１．１．作用提供システム１の構成
図２は、作用提供システム１の構成を示す説明図である。作用提供システム１は、図１に示した情報処理装置１０、投写装置４０、及び、照明装置５０に加えて、赤外光撮像装置４５を有する。赤外光撮像装置４５は、赤外光を透過し、かつ、可視光を遮断した状態で、作用面ＳＣを撮像する。赤外光撮像装置４５は、撮像して得られた撮像情報を、情報処理装置１０に送信する。ただし、作用提供システム１は、赤外光撮像装置４５を用いて指示体１５の位置を検出するが、これに限らない。作用提供システム１は、赤外光撮像装置４５以外を有さず、他のハードウェアを用いて指示体１５の位置を検出してもよい。例えば、作用提供システム１は、作用面ＳＣ上に張られた、電気伝導性の透過膜を有してもよい。作用提供システム１は、指示体１５によって透過膜が押下された場合に発生する電気的変化に基づいて指示体１５の位置を検出する。

情報処理装置１０は、処理装置２０と、通信装置３２と、記憶装置３５と、を備える。情報処理装置１０の各要素は、情報を通信するための単体又は複数のバス３８により相互に接続される。なお、本明細書における「装置」という用語は、回路、デバイス又はユニット等の他の用語に読替えてもよい。また、情報処理装置１０の各要素は、単数又は複数の機器で構成され、情報処理装置１０の一部の要素は省略されてもよい。

照明装置５０は、光源５２と、駆動機構５４と、通信装置５６とを有する。照明装置５０の各要素は、情報を通信するための単体又は複数のバス５８により相互に接続される。光源５２は、情報処理装置１０の制御のもと、照明光を照射する。光源５２は、例えば、キセノンランプ、超高圧水銀ランプ、ＬＥＤ（Light Emitting Diode）、又はレーザー光源等から形成される。駆動機構５４は、情報処理装置１０の制御のもと、光源５２から照射される照明光の向きを制御する。通信装置５６は、他の装置と通信を行うためのハードウェア（送受信デバイス）である。通信装置５６は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。

処理装置２０は、情報処理装置１０の全体を制御するプロセッサであり、例えば、単数又は複数のチップで構成される。処理装置２０は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置（ＣＰＵ：Central Processing Unit）で構成される。なお、処理装置２０の機能の一部又は全部を、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）等のハードウェアによって実現してもよい。処理装置２０は、各種の処理を並列的又は逐次的に実行する。

通信装置３２は、他の装置と通信を行うためのハードウェア（送受信デバイス）である。通信装置３２は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。

記憶装置３５は、処理装置２０が読取可能な記録媒体であり、処理装置２０が実行する制御プログラムＰＲを含む複数のプログラム、第１図形情報Ｚ１Ｉ、及び、処理装置２０が使用する各種の情報などを記憶する。記憶装置３５は、例えば、ＲＯＭ、ＥＰＲＯＭ（Erasable Programmable ＲＯＭ）、ＥＥＰＲＯＭ（Electrically Erasable Programmable ＲＯＭ）、ＲＡＭ（Random Access Memory）等の少なくとも１つによって構成されてもよい。記憶装置３５は、レジスタ、キャッシュ、メインメモリ（主記憶装置）等と呼ばれてもよい。

図３は、第１図形情報Ｚ１Ｉの内容の一例を示す図である。第１図形情報Ｚ１Ｉは、識別情報ＺＡＩと、識別図形情報ＺＰＩとを互いに対応付けた情報である。識別情報ＺＡＩは、照明装置５０の処理の種別を示す。識別情報ＺＡＩは、例えば、照明装置５０の処理の種別を示す識別子、又は文字列である。照明装置５０の処理の種別は、例えば、照明光を照射する照射処理と、照明光の照射を停止する消灯処理とがある。第１実施形態において、第１図形情報Ｚ１Ｉに登録されている識別情報ＺＡＩは、照射処理を示す「照射処理」文字列である。

識別図形情報ＺＰＩは、作用装置の処理に対応する図形を示す。第１実施形態において、識別図形情報ＺＰＩは、照射処理に対応する照射処理図形情報ＳＰＬＩである。以下、照射処理図形情報ＳＰＬＩが示す図形を、「照射処理図形ＳＰＬ」と称する。

図４は、照射処理図形ＳＰＬの一例を示す図である。ユーザが照射処理図形ＳＰＬを記憶するため、照射処理図形ＳＰＬは、照射処理を連想できる図形であることが好ましい。照射処理図形ＳＰＬは、例えば、一般的な照明器具の形状を簡略化した図形である。又は、照射処理図形ＳＰＬは、太陽及び電球等、照射する物体の形状を模式化した図形でもよい。図４の例では、照射処理図形ＳＰＬが、スタンド照明器具の形状を簡略化した図形を示す。

説明を図２に戻す。処理装置２０は、制御プログラムＰＲを読み取り、制御プログラムＰＲを実行することにより、検出部２１、生成部２２、第１投写制御部２３、判定部２４、処理決定部２５、位置決定部２６、及び実行部２７として機能する。

検出部２１は、作用面ＳＣに対する指示体１５の位置を示す位置情報ＰＩを検出する。具体的には、指示体１５は、赤外光領域の光を発する光源を有する。検出部２１は、赤外光撮像装置４５から出力された撮像情報に基づいて、指示体１５が指示する作用面ＳＣ内の位置情報ＰＩを検出する。位置情報ＰＩには、例えば、作用面ＳＣの付近に指示体１５が所在する期間における指示体１５の一連の座標情報が含まれる。この座標情報は、作用面ＳＣを２次元座標系とした場合の指示体１５の座標を示す。

生成部２２は、位置情報ＰＩに基づいて、軌跡画像ＴＰを示す軌跡情報ＴＩを生成する。軌跡画像ＴＰは、指示体１５の位置の軌跡を示す。

第１投写制御部２３は、軌跡情報ＴＩに基づいて、軌跡画像ＴＰを投写装置４０に投写させる。図５は、軌跡画像ＴＰを作用面ＳＣに投写した例を示す図である。

判定部２４は、軌跡情報ＴＩに基づいて、軌跡画像ＴＰに含まれる図形が、識別図形情報ＺＰＩが示す照射処理図形ＳＰＬに類似するか否かを判定する。例えば、判定部２４は、軌跡画像ＴＰを、軌跡が連続する１以上の図形に区分する。以下、区分された図形を、「区分図形」と称する。判定部２４は、１以上の区分図形のそれぞれについて、１つの区分図形と照射処理図形ＳＰＬとの類似度を算出する。類似度は、類似の程度を示す度合いである。２つの図形の類似度は、公知の様々な技術を適用することにより算出できる。例えば、判定部２４は、１つの区分図形の特徴点の周辺画像に含まれる複数の画素の画素値と照射処理図形ＳＰＬの特徴点の周辺画像に含まれる複数の画素の画素値との差分の合計を、類似度として算出する。特徴点は、例えば、コーナー点、及び、交点である。類似度が小さい程、１つの区分図形と、照射処理図形ＳＰＬとが類似すると言える。２つの図形の類似度は、上述の方法に限らず、例えば、判定部２４は、ディープラーニング等による機械学習を用いて、類似度を算出してもよい。判定部２４は、類似度が所定の閾値未満である場合、判定結果が肯定であると出力する。類似度が所定の閾値以上である場合、判定部２４は、他の１つの区分図形と照射処理図形ＳＰＬとの類似度を算出し、この類似度が所定の閾値未満か否かを判定する。１以上の区分図形のそれぞれについて類似度が所定の閾値以上である場合、判定部２４は、判定結果が否定であると出力する。以下では、説明の簡略化のため、特に説明のない限り、軌跡画像ＴＰに含まれる図形は、１つであることを前提に説明する。

処理決定部２５は、判定部２４の判定結果が肯定である場合、照射処理を照明装置５０に実行させる特定処理として決定する。第１実施形態において、照射処理は、照射処理図形ＳＰＬに対応付けられた識別情報ＺＡＩが示す処理である。

位置決定部２６は、軌跡情報ＴＩに基づいて、作用面ＳＣのうち特定処理により生じる物理的な作用を受ける作用位置を決定する。例えば、位置決定部２６は、軌跡情報ＴＩの重心を、作用位置として決定する。重心とは、対象となる形状において断面１次モーメントの総和がゼロになる地点である。

実行部２７は、作用位置に作用を与える特定処理を、照明装置５０に実行させる。具体的には、第１に、実行部２７は、駆動機構５４に、光源５２から照射される照明光の向きを、作用位置を向く向きに設定する指示を通知する。第２に、実行部２７は、光源５２に照明光を照射させる指示を通知する。この２つの指示により、照明装置５０は、作用位置に照明光を照射する処理を実行する。

１．２．作用提供システム１の動作
図６を用いて、作用提供システム１の動作を説明する。

図６は、作用提供システム１の動作を示すフローチャートである。情報処理装置１０が有する処理装置２０は、指示体１５から受信した撮像情報に基づいて、位置情報ＰＩを検出する（ステップＳ２）。ステップＳ２の処理が、検出部２１に相当する。ステップＳ２の処理終了後、処理装置２０は、位置情報ＰＩに基づいて、軌跡画像ＴＰを示す軌跡情報ＴＩを生成する（ステップＳ４）。ステップＳ４の処理が生成部２２に相当する。ステップＳ４の処理終了後、処理装置２０は、軌跡画像ＴＰを投写装置４０に投写させる投写指示を、投写装置４０に送信する（ステップＳ６）。ステップＳ６の処理が、第１投写制御部２３に相当する。投写指示には、軌跡情報ＴＩが含まれる。投写指示を受信した場合、投写装置４０は、軌跡画像ＴＰを作用面ＳＣに投写する（ステップＳ８）。

ステップＳ６の処理終了後、処理装置２０は、軌跡画像ＴＰが、照射処理を示す照射処理図形ＳＰＬに類似するか否かを判定する（ステップＳ１２）。ステップＳ１２の処理が、判定部２４に相当する。ステップＳ１２の判定結果が肯定である場合、処理装置２０は、照射処理を特定処理として決定する（ステップＳ１４）。ステップＳ１４の処理が、処理決定部２５に相当する。ステップＳ１４の処理終了後、処理装置２０は、軌跡情報ＴＩに基づいて、作用位置を決定する（ステップＳ１６）。ステップＳ１６の処理が、位置決定部２６に相当する。ステップＳ１６の処理終了後、処理装置２０は、作用位置に照射処理を実行する照射指示を、照明装置５０に送信する（ステップＳ１８）。ステップＳ１８の処理が、実行部２７に相当する。照射指示を受信した場合、照明装置５０は、作用位置に、照明光を照射する（ステップＳ２０）。ステップＳ２０の処理終了後、作用提供システム１は、図６に示す一連の処理を終了する。ステップＳ１２の判定結果が否定である場合も、作用提供システム１は、図６に示す一連の処理を終了する。処理装置２０は、ステップＳ１８の処理が終了した場合、又は、ステップＳ１２の判定結果が否定である場合、作用提供システム１は、軌跡画像ＴＰを作用面ＳＣに投写し続ける。又は、ステップＳ１８の処理が終了した場合又はステップＳ１２の判定結果が否定である場合、処理装置２０が軌跡画像ＴＰを作用面ＳＣに投写することを停止する指示を、投写装置４０に送信してもよい。

１．３．第１実施形態のまとめ
以上、第１実施形態における情報処理装置１０は、作用面ＳＣに対して照明光を照射する照明装置５０（「作用面に対して物理的な作用を与える作用装置」の一例）を制御可能な情報処理装置１０である。情報処理装置１０は、処理装置２０と、記憶装置３５とを有する。記憶装置３５は、照明装置５０の処理を示す識別情報ＺＡＩと、処理に対応する図形を示す識別図形情報ＺＰＩとを対応付けて記憶する。処理装置２０は、検出部２１、判定部２４、処理決定部２５、位置決定部２６、及び実行部２７として機能する。検出部２１は、作用面ＳＣに対する指示体１５の位置を示す位置情報ＰＩを検出する。判定部２４は、軌跡情報ＴＩ（「位置情報」の一例）に基づいて、指示体１５の位置の軌跡を示す軌跡画像ＴＰに含まれる図形が、識別図形情報ＺＰＩが示す図形に類似するか否かを判定する。処理決定部２５は、判定部２４の判定結果が肯定である場合、識別図形情報ＺＰＩに対応付けられた識別情報ＺＡＩが示す処理を、照明装置５０に実行させる特定処理として決定する。位置決定部２６は、軌跡情報ＴＩ（「位置情報」の一例）に基づいて、作用面ＳＣのうち特定処理により生じる作用を受ける作用位置を決定する。実行部２７は、作用位置に作用を与える特定処理を、照明装置５０に実行させる。
第１実施形態によれば、作用提供システム１は、作用面ＳＣ内のユーザが所望する位置に、照明光を照射させることができる。ユーザは、ユーザが所望する位置に照明装置５０が配置されたような感覚を得ることができる。

また、第１実施形態では、作用装置は、作用面ＳＣに対して照明光を照射する照明装置５０である。識別情報ＺＡＩが、照明光を照射する照射処理を示し、識別図形情報ＺＰＩが、照射処理に対応する図形を示す。軌跡画像ＴＰに含まれる図形が照射処理を示す照射処理図形ＳＰＬに類似する場合、処理決定部２５は、照射処理を特定処理として決定し、実行部２７は、作用位置に照明光を照射する照射処理を、照明装置５０に実行させる。
第１実施形態によれば、作用提供システム１は、作用面ＳＣ内のユーザが所望する位置に、照明光を照射させることができる。例えば、ユーザは、作用面ＳＣのうちユーザが所在しやすい付近の位置に照射処理図形ＳＰＬを描画する。ユーザは、ユーザが所在しやすい付近の位置に照射された照射光によって、仕事をしたり、勉強をしたり、又は読書をしたりできる。

２．第２実施形態
第１実施形態では、作用装置が照明装置５０であったが、第２実施形態では、作用装置が、投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する生成装置６０である点が、第１実施形態と相違する。以下、第２実施形態について説明する。

図７は、第２実施形態にかかる作用提供システム１ａを例示する模式図である。作用提供システム１ａは、情報処理装置１０の替わりに情報処理装置１０ａを有し、且つ、照明装置５０の替わりに生成装置６０を有する点で作用提供システム１と異なる。生成装置６０は、投写装置４０により作用面ＳＣに投写される投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する。

２．１．作用提供システム１ａの構成
図８は、作用提供システム１ａの構成を示す説明図である。生成装置６０は、任意の情報処理装置（例えば、サーバ、若しくはパーソナルコンピュータ等の据置型の情報機器、又は、スマートフォン、ノートパソコン、ウェアラブル端末及びタブレット端末等の可搬型の情報端末）である。生成装置６０は、処理装置６２と、記憶装置６４と、通信装置６６とを有する。生成装置６０の各要素は、情報を通信するための単体又は複数のバス６８により相互に接続される。

処理装置６２は、生成装置６０の全体を制御するプロセッサであり、例えば、単数又は複数のチップで構成される。処理装置６２は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置で構成される。なお、処理装置６２の機能の一部又は全部を、ＤＳＰ、ＡＳＩＣ、ＰＬＤ、ＦＰＧＡ等のハードウェアによって実現してもよい。処理装置６２は、各種の処理を並列的又は逐次的に実行する。

記憶装置６４は、処理装置６２が読取可能な記録媒体であり、処理装置６２が実行する複数のアプリケーションプログラム、風景画像情報ＰＰＬＡＩ、アプリ生成画像情報ＰＰＡＬＩ、及び、処理装置６２が使用する各種の情報などを記憶する。記憶装置６４は、例えば、ＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ等の少なくとも１つによって構成されてもよい。記憶装置６４は、レジスタ、キャッシュ、メインメモリ（主記憶装置）等と呼ばれてもよい。処理装置６２は、複数のアプリケーションプログラムを実行可能である。以下、「アプリケーションプログラム」を、「アプリ」と称する。複数のアプリは、例えば、メールアプリ、Ｗｅｂアプリ、及び、ＳＮＳ（Social Networking Service）アプリ等である。風景画像情報ＰＰＬＡＩは、風景画像ＰＰＬＡを示す。アプリ生成画像情報ＰＰＡＬＩは、アプリ生成画像ＰＰＡＬを示す。アプリ生成画像情報ＰＰＡＬＩは、複数のアプリのうち特定のアプリによって生成される。特定のアプリは、ユーザが、生成装置６０に実行させるアプリである。第２実施形態では、特定のアプリが、メールアプリである場合の例を用いて説明する。処理装置６２は、インターネットを介して通信した他の装置から、複数のアプリ及び風景画像情報ＰＰＬＡＩ等を取得し、記憶装置６４に記憶させてもよい。

図９は、風景画像ＰＰＬＡの一例を示す図である。風景画像ＰＰＬＡは、例えば、客室ＲＭに仮に窓がある場合に窓から見られるであろう風景を示す画像、又は、風光明媚な場所で撮像された画像等である。

図１０は、アプリ生成画像ＰＰＡＬの一例を示す図である。図１０に示すアプリ生成画像ＰＰＡＬは、メールの一覧画面を示す。

説明を図８に戻す。通信装置６６は、他の装置と通信を行うためのハードウェア（送受信デバイス）である。通信装置６６は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。

情報処理装置１０ａは、処理装置２０ａと、通信装置３２と、記憶装置３５ａと、を備える。

記憶装置３５ａは、処理装置２０ａが実行する制御プログラムＰＲａを含む複数のプログラム、第１図形情報Ｚ１Ｉａ、及び、処理装置２０ａが使用する各種の情報などを記憶する。

図１１は、第１図形情報Ｚ１Ｉａの内容の一例を示す図である。第１図形情報Ｚ１Ｉａは、識別情報ＺＡＩａと、識別図形情報ＺＰＩａとを互いに対応付けた情報である。識別情報ＺＡＩａは、例えば、生成装置６０の処理を示す識別子、又は文字列である。識別情報ＺＡＩａは、投写画像ＰＲＪに含まれる所定画像を表示する表示処理の種別を示す。第２実施形態において、所定画像は、２種類の画像があり、表示処理も、２つの所定画像のそれぞれに１対１に対応する。所定画像の一例は、図９に例示した風景画像ＰＰＬＡと、図１０に例示したアプリ生成画像ＰＰＡＬとである。識別情報ＺＡＩａは、風景画像ＰＰＬＡを表示する風景表示処理を示す「風景表示処理」文字列と、アプリ生成画像ＰＰＡＬを表示するアプリ画像表示処理を示す「アプリ画像表示処理」文字列とである。以下の記載において、表示処理は、風景表示処理と、アプリ画像表示処理との総称である。

識別図形情報ＺＰＩａは、作用装置の処理に対応する図形を示す。第２実施形態において、識別図形情報ＺＰＩａは、表示処理に対応する図形を示す情報である。以下、表示処理を示す図形を、「表示処理図形」と称する。第２実施形態では、表示処理図形は、風景表示処理を示す風景表示図形ＳＰＬＡと、アプリ画像表示処理を示すアプリ表示図形ＳＰＡＬとがある。従って、第２実施形態において、識別図形情報ＺＰＩａは、風景表示図形ＳＰＬＡを示す風景表示図形情報ＳＰＬＡＩと、アプリ表示図形ＳＰＡＬを示すアプリ表示図形情報ＳＰＡＬＩとである。

図１２は、風景表示図形ＳＰＬＡの一例を示す図である。ユーザが風景表示図形ＳＰＬＡを記憶するため、照射処理図形ＳＰＬと同様に、風景表示図形ＳＰＬＡは、風景表示処理を連想できる図形であることが好ましい。図１２の例では、風景表示図形ＳＰＬＡは、窓枠を示す画像である。

図１３は、アプリ表示図形ＳＰＡＬの一例を示す図である。ユーザがアプリ表示図形ＳＰＡＬを記憶するため、照射処理図形ＳＰＬと同様に、アプリ表示図形ＳＰＡＬは、アプリ画像表示処理を連想できる図形であることが好ましい。図１３の例では、アプリ表示図形ＳＰＡＬは、メールアプリのアイコンを示す画像である。

説明を図８に戻す。処理装置２０ａは、制御プログラムＰＲａを読み取り、制御プログラムＰＲａを実行することで、検出部２１、生成部２２、第１投写制御部２３、判定部２４ａ、処理決定部２５ａ、位置決定部２６ａ、及び実行部２７ａとして機能する。

判定部２４ａは、軌跡画像ＴＰが、表示処理を示す図形に類似するか否かを判定する。例えば、判定部２４ａは、軌跡画像ＴＰが、風景表示図形ＳＰＬＡに類似するか否かを判定し、軌跡画像ＴＰが、風景表示図形ＳＰＬＡに類似する場合、判定結果が肯定であると出力する。軌跡画像ＴＰが風景表示図形ＳＰＬＡに類似しない場合、判定部２４ａは、軌跡画像ＴＰが、アプリ表示図形ＳＰＡＬに類似するか否かを判定する。軌跡画像ＴＰが、アプリ表示図形ＳＰＡＬに類似する場合、判定結果が肯定であると出力する。軌跡画像ＴＰがアプリ表示図形ＳＰＡＬに類似しない場合、判定部２４ａは、判定結果が否定であると出力する。

処理決定部２５ａは、判定部２４ａの判定結果が肯定である場合、投写情報ＰＲＪＩを生成する処理を特定処理として決定する。より具体的には、軌跡画像ＴＰが風景表示図形ＳＰＬＡに類似する場合、処理決定部２５ａは、風景画像ＰＰＬＡを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する処理を、特定処理として決定する。また、軌跡画像ＴＰがアプリ表示図形ＳＰＡＬに類似する場合、処理決定部２５ａは、アプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する処理を、特定処理として決定する。

軌跡画像ＴＰが風景表示図形ＳＰＬＡに類似する場合、位置決定部２６ａは、軌跡画像ＴＰの外縁に対する内側の領域を、作用位置として決定する。

実行部２７ａは、所定画像の位置が作用位置である投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する生成指示と、投写情報ＰＲＪＩを投写装置４０に出力する出力指示とを生成装置６０に通知することによって、所定画像を作用面ＳＣに表示する。具体的には、軌跡画像ＴＰが風景表示図形ＳＰＬＡに類似する場合、生成指示によって生成される投写情報ＰＲＪＩが示す投写画像ＰＲＪは、軌跡画像ＴＰに含まれる図形の外縁に対する内側の領域に、風景画像ＰＰＬＡが位置する画像である。

図１４は、風景画像ＰＰＬＡを含む投写画像ＰＲＪの投写例を示す図である。図１４の例では、ユーザが、作用面ＳＣの中央右側に、風景表示図形ＳＰＬＡに類似する軌跡画像ＴＰを描画したことを想定する。生成装置６０は、風景画像ＰＰＬＡを、軌跡画像ＴＰの外縁に対する内側の領域に重畳させた投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する。なお、投写画像ＰＲＪに、軌跡画像ＴＰが含まれなくてよいし、軌跡画像ＴＰの替わりに、風景表示図形ＳＰＬＡが含まれてもよい。

説明を図８に戻す。軌跡画像ＴＰがアプリ表示図形ＳＰＡＬに類似する場合、実行部２７ａは、特定のアプリを実行する実行指示と、特定のアプリによって生成されたアプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する生成指示と、投写情報ＰＲＪＩを投写装置４０に出力する出力指示と、を生成装置６０に通知する。

図１５は、アプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪの投写例を示す図である。図１５の例では、ユーザが、作用面ＳＣの中央右側に、アプリ表示図形ＳＰＡＬに類似する軌跡画像ＴＰを描画したことを想定する。生成装置６０は、アプリ生成画像ＰＰＡＬを中央右側に配置した投写画像ＰＲＪを、作用面ＳＣに投写する。

２．２．作用提供システム１ａの動作
図１６及び図１７を用いて、作用提供システム１ａの動作を説明する。

図１６及び図１７は、作用提供システム１ａの動作を示すフローチャートである。ステップＳ２、Ｓ４、Ｓ６、及び、Ｓ８の処理は、図６に示すステップと同一の処理であるため、説明を省略する。

処理装置２０ａは、軌跡画像ＴＰが、風景表示処理を示す風景表示図形ＳＰＬＡに類似するか否かを判定する（ステップＳ３２）。ステップＳ３２の判定結果が肯定である場合、処理装置２０ａは、風景画像ＰＰＬＡを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する処理を、特定処理として決定する（ステップＳ３４）。次に、処理装置２０ａは、軌跡画像ＴＰの外縁に対する内側の領域を、作用位置として決定する（ステップＳ３６）。風景画像ＰＰＬＡの位置が作用位置である投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する生成指示と、投写情報ＰＲＪＩを投写装置４０に出力する出力指示とを生成装置６０に通知する（ステップＳ３８）。ステップＳ３８の処理終了後、処理装置２０ａは、図１６及び図１７に示す一連の処理を終了する。

生成装置６０が有する処理装置６２は、投写情報ＰＲＪＩの生成指示と投写情報ＰＲＪＩの出力指示とを受信したかを判定する（ステップＳ４０）。ステップＳ４０の判定結果が肯定である場合、処理装置６２は、投写情報ＰＲＪＩの生成指示に従って、風景画像ＰＰＬＡの位置が作用位置である投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する（ステップＳ４２）。そして、処理装置６２は、投写情報ＰＲＪＩの出力指示に従って、投写情報ＰＲＪＩを投写装置４０に出力する（ステップＳ４４）。

ステップＳ３２の判定結果が否定である場合、処理装置２０ａは、軌跡画像ＴＰが、アプリ画像表示処理を示すアプリ表示図形ＳＰＡＬに類似するか否かを判定する（ステップＳ５２）。ステップＳ５２の判定結果が肯定である場合、処理装置２０ａは、アプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する処理を、特定処理として決定する（ステップＳ５４）。次に、処理装置２０ａは、軌跡情報ＴＩに基づいて、作用位置を決定する（ステップＳ５６）。そして、処理装置２０ａは、特定のアプリを実行する実行指示と、特定のアプリによって生成されたアプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する生成指示と、投写情報ＰＲＪＩを投写装置４０に出力する出力指示と、を生成装置６０に通知する（ステップＳ５８）。ステップＳ５８の処理終了後、処理装置２０ａは、図１６及び図１７に示す一連の処理を終了する。また、ステップＳ５２の判定結果が否定である場合、処理装置２０ａは、図１６及び図１７に示す一連の処理を終了する。

ステップＳ４４の処理終了後、又は、ステップＳ４０の判定結果が否定である場合、処理装置６２は、特定のアプリの実行指示と投写情報ＰＲＪＩの生成指示と投写情報ＰＲＪＩの出力指示とを受信したかを判定する（ステップＳ６０）。ステップＳ６０の判定結果が肯定である場合、処理装置６２は、特定のアプリの実行指示に従って、特定のアプリを実行する（ステップＳ６２）。次に、処理装置６２は、投写情報ＰＲＪＩの生成指示に従って、特定のアプリによって生成されたアプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する（ステップＳ６４）。そして、処理装置６２は、投写情報ＰＲＪＩの出力指示に従って、投写情報ＰＲＪＩを投写装置４０に出力する（ステップＳ６６）。ステップＳ６６の処理終了後、処理装置６２は、図１６及び図１７に示す一連の処理を終了する。また、ステップＳ６０の判定結果が否定である場合、処理装置６２は、図１６及び図１７に示す一連の処理を終了する。

投写装置４０は、投写情報ＰＲＪＩを受信したか否かを判定する（ステップＳ７０）。ステップＳ７０の判定結果が肯定である場合、投写装置４０は、投写情報ＰＲＪＩが示す投写画像ＰＲＪを作用面ＳＣに投写する（ステップＳ７２）。例えば、投写装置４０が、ステップＳ４４の処理において投写情報ＰＲＪＩを受信した場合、作用面ＳＣに投写される投写画像ＰＲＪは、風景画像ＰＰＬＡを含む。一方、投写装置４０が、ステップＳ６６の処理において投写情報ＰＲＪＩを受信した場合、作用面ＳＣに投写される投写画像ＰＲＪは、アプリ生成画像ＰＰＡＬを含む。ステップＳ７２の処理終了後、投写装置４０は、図１６及び図１７に示す一連の処理を終了する。また、ステップＳ７０の判定結果が否定である場合、投写装置４０は、図１６及び図１７に示す一連の処理を終了する。

なお、図１６及び図１７では省略しているが、生成装置６０が特定のアプリを実行している場合、処理装置２０ａは、位置情報ＰＩを生成装置６０に通知する。処理装置６２は、受信した位置情報ＰＩに基づいて、アプリ生成画像ＰＰＡＬを更新し、更新したアプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを投写装置４０に出力する。投写装置４０は、更新されたアプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを、作用面ＳＣに投写する。

２．３．第２実施形態のまとめ
第２実施形態において、作用装置は、作用面ＳＣに画像を投写する投写装置４０により作用面ＳＣに投写される投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する生成装置６０である。識別情報ＺＡＩａが、投写画像ＰＲＪに含まれる所定画像を表示する表示処理を示し、識別図形情報ＺＰＩａが、表示処理に対応する図形を示す。軌跡画像ＴＰに含まれる図形が表示処理を示す図形に類似する場合、処理決定部２５ａは、投写情報ＰＲＪＩを生成する処理を特定処理として決定する。実行部２７は、所定画像の位置が作用位置である投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する指示と、投写情報ＰＲＪＩを投写装置４０に出力する指示とを生成装置６０に通知することによって、所定画像を作用面ＳＣに表示する。
第２実施形態によれば、作用提供システム１ａは、作用面ＳＣ内のユーザが所望する位置に、所定画像を表示できる。

また、第２実施形態において、軌跡画像ＴＰに含まれる画像が、風景表示処理（「表示処理」の一例）を示す風景表示図形ＳＰＬＡに類似する場合、位置決定部２６ａは、軌跡画像ＴＰに含まれる図形の外縁に対する内側の領域を、作用位置として決定し、実行部２７ａは、前述の領域に風景画像ＰＰＬＡ（「所定画像」の一例）が位置する投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する指示と、投写情報ＰＲＪＩを投写装置４０に出力する指示とを、生成装置６０に通知する。
第２実施形態によれば、作用提供システム１ａは、ユーザが所望する位置に、風景画像ＰＰＬＡを表示できる。例えば、ユーザは、ユーザが見えやすい位置に風景表示図形ＳＰＬＡを描画することにより、風景画像ＰＰＬＡを見ることが容易になる。ユーザは、風景画像ＰＰＬＡを見ることにより、例えば、リラックスできる。更に、軌跡画像ＴＰに含まれる図形の外縁に対する内側の領域に、風景画像ＰＰＬＡが位置することにより、ユーザが描画した窓枠の内側に風景画像ＰＰＬＡが表示される。ユーザは、ユーザが所望する位置に窓が設けられたような感覚を得ることができる。

また、第２実施形態において、生成装置６０は、複数のプログラムを実行可能である。アプリ生成画像ＰＰＡＬ（「所定画像」の一例）を示すアプリ生成画像情報ＰＰＡＬＩは、複数のアプリ（「複数のプログラム」の一例）のうち特定のアプリ（「特定のプログラム」の一例）によって生成される。軌跡画像ＴＰに含まれる画像が、アプリ画像表示処理（「表示処理」の一例）を示すアプリ表示図形ＳＰＡＬに類似する場合、実行部２７ａは、特定のアプリを実行する指示と、特定のアプリによって生成されたアプリ生成画像ＰＰＡＬを含む投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する指示と、投写情報ＰＲＪＩを投写装置４０に出力する指示とを生成装置６０に通知する。
第２実施形態によれば、作用提供システム１ａは、ユーザが所望する位置に、アプリ生成画像ＰＰＡＬを表示できる。例えば、作用面ＳＣに、時計、又は、紙のメモ等、ユーザにとって、アプリ生成画像ＰＰＡＬに重畳させたくない物体が取り付けられていると想定する。ユーザが、作用面ＳＣのうち前述の物体が取り付けられていない位置に、アプリ表示図形ＳＰＡＬを描画することにより、作用提供システム１ａは、前述の物体がアプリ生成画像ＰＰＡＬに重畳させずに、アプリ生成画像ＰＰＡＬを表示できる。ユーザは、例えば、時計又は紙のメモを見ながら、特定のアプリを操作できる。

３．変形例
本開示は、以上に例示した実施形態に限定されない。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様を併合してもよい。

３．１．第１変形例
第１実施形態において、作用提供システム１は、照明装置５０を有したが、照明装置５０の替わりに、送風装置７０を有してもよい。

３．１．１．第１変形例における作用提供システム１ｂの機能
図１８は、第１変形例における作用提供システム１ｂの構成を示す説明図である。作用提供システム１ｂは、情報処理装置１０の替わりに情報処理装置１０ｂを有し、且つ、照明装置５０の替わりに送風装置７０を有する点で作用提供システム１と異なる。送風装置７０は、作用面ＳＣに対して送風する。送風装置７０は、例えば、エアーコンディショナ、扇風機、及び、サーキュレータである。

送風装置７０は、送風ファン７２と、駆動機構７４と、通信装置７６とを有する。送風装置７０の各要素は、情報を通信するための単体又は複数のバス７８により相互に接続される。送風ファン７２は、情報処理装置１０ｂの制御のもと、回転運動することにより空気に運動エネルギーを与え、運動エネルギーを受けた空気を風として送り出す。駆動機構７４は、情報処理装置１０ｂの制御のもと、送風ファン７２から送り出される風の向きを制御する。通信装置７６は、他の装置と通信を行うためのハードウェア（送受信デバイス）である。通信装置７６は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。

情報処理装置１０ｂは、処理装置２０ｂと、通信装置３２と、記憶装置３５ｂと、を有する。

記憶装置３５ｂは、処理装置２０ｂが実行する制御プログラムＰＲｂを含む複数のプログラム、第１図形情報Ｚ１Ｉｂ、及び、処理装置２０ｂが使用する各種の情報などを記憶する。

図１９は、第１図形情報Ｚ１Ｉｂの内容の一例を示す図である。第１図形情報Ｚ１Ｉｂは、識別情報ＺＡＩｂと、識別図形情報ＺＰＩｂとを互いに対応付けた情報である。識別情報ＺＡＩｂは、送風装置７０の処理の種別を示す。識別情報ＺＡＩｂは、例えば、送風装置７０の処理の種別を示す識別子、又は文字列である。第１変形例において、識別情報ＺＡＩｂは、送風する送風処理を示す「送風処理」文字列である。

識別図形情報ＺＰＩｂは、作用装置の処理に対応する図形を示す。第１変形例において、識別図形情報ＺＰＩｂは、送風処理に対応する送風処理図形情報ＳＰＷＩである。以下、送風処理図形情報ＳＰＷＩが示す図形を、「送風処理図形ＳＰＷ」と称する。

図２０は、送風処理図形ＳＰＷの一例を示す図である。ユーザが送風処理図形ＳＰＷを記憶するため、送風処理図形ＳＰＷは、送風処理を連想できる図形であることが好ましい。送風処理図形ＳＰＷは、例えば、送風装置７０の一例であるエアーコンディショナの形状、扇風機の形状、又は、サーキュレータの形状を簡略化した図形である。又は、送風処理図形ＳＰＷは、風を模式化した図形でもよい。図２０の例では、送風処理図形ＳＰＷが、風を模式化した図形を示す。

説明を図１８に戻す。処理装置２０ｂは、制御プログラムＰＲｂを読み取り、制御プログラムＰＲｂを実行することにより、検出部２１、生成部２２、第１投写制御部２３、判定部２４ｂ、処理決定部２５ｂ、位置決定部２６、及び実行部２７ｂとして機能する。

判定部２４ｂは、軌跡画像ＴＰが、送風処理図形ＳＰＷに類似するか否かを判定する。判定部２４ｂの判定結果が肯定である場合、処理決定部２５ｂは、送風処理を、特定処理として決定する。

実行部２７ｂは、作用位置に送風する送風処理を、送風装置７０に実行させる。具体的には、第１に、実行部２７ｂは、駆動機構７４に、送風ファン７２から送り出される風の向きを、作用位置を向きに設定する指示を通知する。第２に、実行部２７ｂは、送風ファン７２を回転させる指示を通知する。この２つの指示により、送風装置７０は、作用位置に送風する送風処理を実行する。

３．１．２．第１変形例のまとめ
以上、第１変形例において、作用装置は、作用面ＳＣに対して送風する送風装置７０であり、識別情報ＺＡＩｂが、送風する送風処理を示し、識別図形情報ＺＰＩｂが、送風処理に対応する送風処理図形ＳＰＷを示す。軌跡画像ＴＰに含まれる画像が、送風処理を示す図形に類似する場合、処理決定部２５ｂは、送風処理を特定処理として特定し、実行部２７は、作用位置に送風する送風処理を、送風装置７０に実行させる。
第１変形例によれば、作用提供システム１ｂは、ユーザが所望する位置に送風できる。例えば、ユーザは、乾燥させたい物体付近に送風処理図形ＳＰＷを描画することにより、作用提供システム１ｂは、乾燥させたい物体に効率よく送風できる。

３．２．第２変形例
第１実施形態において、作用提供システム１は、照明装置５０を有したが、照明装置５０の替わりに、音響装置８０を有してもよい。

３．２．２．第２変形例における作用提供システム１ｃの機能
図２１は、第２変形例における作用提供システム１ｃの構成を示す説明図である。作用提供システム１ｃは、情報処理装置１０の替わりに情報処理装置１０ｃを有し、且つ、照明装置５０の替わりに音響装置８０を有する点によって作用提供システム１と異なる。音響装置８０は、音像を定位させる位置を調整可能である。音像の定位とは、人間が知覚する音の位置である。音像の定位の調整は、複数のスピーカを用いて実現できる。

音響装置８０は、スピーカ８２と、スピーカ８４と、制御装置８６と、通信装置８７とを有する。照明装置５０の各要素は、情報を通信するための単体又は複数のバス８８により相互に接続される。スピーカ８２及びスピーカ８４は、音を放射する。制御装置８６は、ステレオ信号を受け付けて、スピーカ８２により放射される音を示す第１音響信号と、スピーカ８４により放射される音を示す第２音響信号とを生成する。制御装置８６は、音像の定位を変更するため、例えば、第１音響信号及び第２音響信号の一方又は両方に、音量を変更させる処理、及び、位相差を加える処理等を実行する。スピーカ８２は、図示しないＤＡ変換器によって第１音響信号が変換されたアナログ信号によって、音を放射する。同様に、スピーカ８４は、図示しないＤＡ変換器によって第２音響信号が変換されたアナログ信号によって、音を放射する。通信装置８７は、他の装置と通信を行うためのハードウェア（送受信デバイス）である。通信装置８７は、例えば、ネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュール等とも呼ばれる。第２変形例では、音響装置８０は、スピーカ８２とスピーカ８４という２つのスピーカを有するが、３つ以上のスピーカを有してもよい。

情報処理装置１０ｃは、処理装置２０ｃと、通信装置３２と、記憶装置３５ｃと、を有する。記憶装置３５ｃは、処理装置２０ｃが実行する制御プログラムＰＲｃを含む複数のプログラム、音声情報ＳＩ、第１図形情報Ｚ１Ｉｃ、及び、処理装置２０ｂが使用する各種の情報などを記憶する。音声情報ＳＩは、何らかの楽曲の音声を示す左右２チャネルのステレオ信号を有する。例えば、音声情報ＳＩは、客室ＲＭに流れるＢＧＭ（BackGround Music）の音声を示す。

図２２は、第１図形情報Ｚ１Ｉｃの内容の一例を示す図である。第１図形情報Ｚ１Ｉｃは、識別情報ＺＡＩｃと、識別図形情報ＺＰＩｃとを対応付けた情報である。識別情報ＺＡＩｃは、音像を定位させる処理を示す。以下、音像を定位させる処理を、「定位処理」と称する。識別情報ＺＡＩｂは、例えば、定位処理を示す識別子、又は文字列である。第２変形例において、識別情報ＺＡＩｃは、定位処理を示す「定位処理」文字列である。

識別図形情報ＺＰＩｃは、作用装置の処理に対応する図形を示す。第２変形例において、識別図形情報ＺＰＩｃは、定位処理に対応する定位処理図形情報ＳＰＳＩである。以下、定位処理図形情報ＳＰＳＩが示す図形を、「定位処理図形ＳＰＳ」と称する。

図２３は、定位処理図形ＳＰＳの一例を示す図である。ユーザが定位処理図形ＳＰＳを記憶するため、定位処理図形ＳＰＳは、定位処理を連想できる図形であることが好ましい。定位処理図形ＳＰＳは、例えば、音響装置８０の形状、又は、音響装置８０に含まれるスピーカ８２の形状を簡略化した図形である。図２３の例では、定位処理図形ＳＰＳは、スピーカ８２の形状を簡略化した図形である。

説明を図２１に戻す。処理装置２０ｃは、制御プログラムＰＲｃを読み取り、制御プログラムＰＲｃを実行することによって、検出部２１、生成部２２、第１投写制御部２３、判定部２４ｃ、処理決定部２５ｃ、位置決定部２６、及び実行部２７ｃとして機能する。

判定部２４ｃは、軌跡画像ＴＰが、定位処理図形ＳＰＳに類似するか否かを判定する。判定部２４ｃの判定結果が肯定である場合、処理決定部２５ｃは、定位処理を、特定処理として決定する。

実行部２７ｃは、定位処理を、音響装置８０に実行させる。具体的には、実行部２７ｃは、制御装置８６に、入力されるステレオ信号に対して、作用位置に音像が定位するような遅延処理を実行する指示を通知する。第２に、実行部２７ｃは、音声情報ＳＩを音響装置８０に送信する。以上により、音響装置８０は、作用位置に音像を定位させる定位処理を実行する。

３．２．２．第２変形例のまとめ
以上、第２変形例において、作用装置は、音像を定位させる位置を調整可能な音響装置８０であり、識別情報ＺＡＩｃは、音像を定位させる処理を示し、識別図形情報ＺＰＩｃは、音像を定位させる処理に対応する定位処理図形ＳＰＳを示す。軌跡画像ＴＰに含まれる画像が、音像を定位させる処理を示す定位処理図形ＳＰＳに類似する場合、処理決定部２５ｃは、音像を定位させる処理を特定処理として特定する。実行部２７ｃは、作用位置に音像を定位させる定位処理を、音響装置８０に実行させる。
第２変形例によれば、作用提供システム１ｃは、ユーザが所望する位置に音像を定位できる。

３．３．第３変形例
作用提供システム１は、ユーザによって、作用面ＳＣに与える物理的な作用の大きさを設定できてもよい。

３．３．１．第３変形例における作用提供システム１ｄの機能
図２４は、第３変形例における作用提供システム１ｄの構成を示す説明図である。図２４に示す図では、図面の煩雑化を防ぐため、投写装置４０と、赤外光撮像装置４５と、照明装置５０と、作用面ＳＣと、指示体１５との図示を省略する。作用提供システム１ｄは、情報処理装置１０の替わりに情報処理装置１０ｄを有する点において作用提供システム１と異なる。

情報処理装置１０ｄは、処理装置２０ｄと、通信装置３２と、記憶装置３５ｄと、を有する。記憶装置３５ｄは、処理装置２０ｄが実行する制御プログラムＰＲｄを含む複数のプログラム、第１図形情報Ｚ１Ｉ、及び、処理装置２０ｄが使用する各種の情報などを記憶する。

処理装置２０ｄは、制御プログラムＰＲｄを読み取り、制御プログラムＰＲｄを実行することで、検出部２１、生成部２２、第１投写制御部２３、判定部２４、処理決定部２５、位置決定部２６、大きさ決定部２８、及び実行部２７ｄとして機能する。

大きさ決定部２８は、軌跡画像ＴＰの大きさに応じて、照明装置５０が作用面ＳＣに与える物理的な作用の大きさを決定する。照明装置５０が作用面ＳＣに与える物理的な作用の大きさは、第３変形例では、照明装置５０が照射する照射光の光量である。軌跡画像ＴＰの大きさは、例えば、軌跡画像ＴＰの面積、又は、軌跡画像ＴＰ内の最大の幅である。大きさ決定部２８は、軌跡画像ＴＰの大きさが増加することに応じて、照明光の光量を単調に増加させる。

実行部２７ｄは、作用位置に大きさ決定部２８が決定した大きさによる作用を与える特定処理を、照明装置５０に実行させる。

３．３．２．第３変形例のまとめ
以上、第３変形例において、処理装置２０ｄは、軌跡画像ＴＰの大きさに応じて、作用装置が作用面ＳＣに与える物理的な作用の大きさを決定する大きさ決定部２８としても機能する。実行部２７は、作用位置に大きさ決定部２８が決定した大きさによる作用を与える特定処理を照明装置５０に実行させる。
第３変形例によれば、ユーザは、作用面ＳＣに与える物理的な作用の大きさを指定する図形を描画しなくても、作用面ＳＣに与える物理的な作用の大きさを指定できる。また、ユーザは、作用面ＳＣに与える物理的な作用の大きさを、直感的に指定できる。

なお、第３変形例は、照明装置５０を作用装置の一例として説明したが、これに限らない。作用装置は、生成装置６０、又は、送風装置７０でもよい。作用装置が生成装置６０である場合、大きさ決定部２８は、軌跡画像ＴＰの大きさが増加することに応じて、所定画像の大きさを単調に増加させる。また、作用装置が送風装置７０である場合、大きさ決定部２８は、軌跡画像ＴＰの大きさが増加することに応じて、送風の速度を単調に増加させる。

３．４．第４変形例
作用提供システム１は、第３変形例とは異なる方法によって、作用面ＳＣに与える物理的な作用の大きさを設定できてもよい。なお、上述では、軌跡画像ＴＰに含まれる図形は、１つであることを前提に説明したが、第４変形例では、軌跡画像ＴＰに含まれる図形が２以上存在することを前提として説明する。

図２５は、第４変形例における作用提供システム１ｅの構成を示す説明図である。図２５に示す図では、図面の煩雑化を防ぐため、投写装置４０と、赤外光撮像装置４５と、照明装置５０と、作用面ＳＣと、指示体１５との図示を省略する。作用提供システム１ｅは、情報処理装置１０の替わりに情報処理装置１０ｅを有する点で作用提供システム１と異なる。

情報処理装置１０ｅは、処理装置２０ｅと、記憶装置３５ｅと、通信装置３２とを有する。記憶装置３５ｅは、処理装置２０ｅが実行する制御プログラムＰＲｅを含む複数のプログラム、第１図形情報Ｚ１Ｉ、第２図形情報Ｚ２Ｉ、及び、処理装置２０ｅが使用する各種の情報などを記憶する。

図２６は、第２図形情報Ｚ２Ｉの内容の一例を示す図である。第２図形情報Ｚ２Ｉは、大きさ情報ＺＢＩと、大きさ図形情報ＺＱＩとを互いに対応付けた情報である。大きさ情報ＺＢＩは、作用面ＳＣに照明装置５０が与える作用の大きさを示す。第４変形例において、大きさ情報ＺＢＩは、照明装置５０が照射する照射光の光量がｘカンデラであることを示す「ｘカンデラ」文字列と、照明装置５０が照射する照射光の光量がｙカンデラであることを示す「ｙカンデラ」文字列とである。カンデラは、光量を表す単位である。ｘ及びｙは実数であり、ｙはｘより大きい。

大きさ図形情報ＺＱＩは、作用の大きさに対応する図形を示す。大きさ図形情報ＺＱＩは、作用の大きさを連想する図形であることが好ましい。第４変形例では、「ｘカンデラ」文字列に、第１大きさ図形情報ＳＰ１Ｉが対応しており、「ｙカンデラ」文字列に、第２大きさ図形情報ＳＰ２Ｉが対応している。第１大きさ図形情報ＳＰ１Ｉは、第１大きさ図形ＳＰ１を示す。第２大きさ図形情報ＳＰ２Ｉは、第２大きさ図形ＳＰ２を示す。

図２７は、第１大きさ図形ＳＰ１の一例を示す図である。図２８は、第２大きさ図形ＳＰ２の一例を示す図である。第１大きさ図形ＳＰ１及び第２大きさ図形ＳＰ２は、一般的な音響機器に取り付けられた音量調節つまみ、又は、一般的なアプリ内で使用されるスクロールバーを模した図形である。第１大きさ図形ＳＰ１内のつまみＳＬは、第２大きさ図形ＳＰ２内のつまみＳＬと比較して下方に位置しており、照明装置５０が照射する光量が少ないことを意味する。

説明を図２５に戻す。処理装置２０ｅは、制御プログラムＰＲｅを読み取り、制御プログラムＰＲｅを実行することで、検出部２１、生成部２２、第１投写制御部２３、判定部２４、処理決定部２５、位置決定部２６、大きさ決定部２８ｅ、及び実行部２７ｅとして機能する。

大きさ決定部２８ｅは、軌跡画像ＴＰに含まれる画像が大きさ図形情報ＺＱＩが示す図形に類似する場合、大きさ図形情報ＺＱＩに対応付けられた大きさ情報ＺＢＩが示す作用の大きさを、照明装置５０が作用面ＳＣに与える物理的な作用の大きさとして決定する。図２９を用いて、大きさ決定部２８ｅの具体的な処理について説明する。

図２９は、軌跡画像ＴＰの一例を示す図である。図２９に示す軌跡画像ＴＰは、区分図形ＴＰＳ－１と、区分図形ＴＰＳ－２とを含む。判定部２４が、区分図形ＴＰＳ－１が照射処理図形ＳＰＬに類似すると判定したと想定する。大きさ決定部２８ｅは、軌跡画像ＴＰのうち、判定部２４が照射処理図形ＳＰＬに類似すると判定した区分図形以外の残余の区分図形が、大きさ図形情報ＺＱＩが示す図形に類似するか否かを判定する。具体的には、大きさ決定部２８ｅは、区分図形ＴＰＳ－２が、第１大きさ図形ＳＰ１に類似するかを判定する。図２９の例では、大きさ決定部２８ｅは、区分図形ＴＰＳ－２が、第１大きさ図形ＳＰ１に類似しないと判定したと想定する。次に、大きさ決定部２８ｅは、区分図形ＴＰＳ－２が、第１大きさ図形ＳＰ２に類似するかを判定する。図２９の例では、大きさ決定部２８ｅは、区分図形ＴＰＳ－２が、第２大きさ図形ＳＰ２に類似すると判定したと想定する。大きさ決定部２８ｅは、第２大きさ図形ＳＰ２に対応付けられた「ｙカンデラ」文字列が示すｙカンデラを、照明装置５０が作用面ＳＣに与える物理的な作用の大きさとして決定する。

説明を図２７に戻す。実行部２７ｅは、作用位置に大きさ決定部２８ｅが決定した大きさによる作用を与える照射処理を照明装置５０に実行させる。例えば、軌跡画像ＴＰに含まれる画像が第１大きさ図形ＳＰ１に類似する場合、実行部２７ｅは、ｘカンデラの光量により照射する照射処理を照明装置５０に実行させる。また、軌跡画像ＴＰに含まれる画像が第２大きさ図形ＳＰ２に類似する場合、実行部２７ｅは、ｙカンデラの光量により照射する照射処理を照明装置５０に実行させる。

３．４．２．第４変形例のまとめ
以上、第４変形例において、記憶装置３５ｅは、作用の大きさを示す大きさ情報ＺＢＩと、作用の大きさに対応する図形を示す大きさ図形情報ＺＱＩとを、更に記憶する。処理装置２０ｅは、軌跡画像ＴＰに含まれる画像が大きさ図形情報ＺＱＩが示す図形に類似する場合、大きさ図形情報ＺＱＩに対応付けられた大きさ情報ＺＢＩが示す作用の大きさを、照明装置５０が作用面ＳＣに与える物理的な作用の大きさとして決定する大きさ決定部２８としても機能する。実行部２７ｅは、作用位置に大きさ決定部２８が決定した大きさによる作用を与える特定処理を照明装置５０に実行させる。
第３変形例では、ユーザは、作用面ＳＣに与える物理的な作用の大きさを大きく指定しようとすると、軌跡画像ＴＰを大きく描画する必要があり、ユーザにかかる負担が大きくなる。一方、第４変形例によれば、作用面ＳＣに与える物理的な作用の大きさを大きく指定する場合であっても軌跡画像ＴＰを大きく描画する必要がない。従って、ユーザは、作用面ＳＣに与える物理的な作用の大きさを大きく指定する場合であっても、第３変形例と比較して容易に指定できる。

３．５．第５変形例
作用提供システム１は、軌跡画像ＴＰが識別図形情報ＺＰＩが示す図形に類似しない場合に、軌跡画像ＴＰに対応する作用装置の処理を追加してもよい。

３．５．１．作用提供システム１ｆの構成
図３０は、第５変形例における作用提供システム１ｆの構成を示す説明図である。作用提供システム１ｆは、情報処理装置１０の替わりに情報処理装置１０ｆを有する点で作用提供システム１と異なる。図３０に示す図では、図面の煩雑化を防ぐため、投写装置４０と、赤外光撮像装置４５と、照明装置５０と、作用面ＳＣと、指示体１５との図示を省略する。

情報処理装置１０ｆは、処理装置２０ｆと、通信装置３２と、記憶装置３５ｆと、を有する。記憶装置３５ｆは、処理装置２０ｆが実行する制御プログラムＰＲｆを含む複数のプログラム、第１図形情報Ｚ１Ｉ、一覧画像情報ＤＰＩ、及び、処理装置２０ｆが使用する各種の情報などを記憶する。

図３１は、一覧画像情報ＤＰＩが示す一覧画像ＤＰの一例を示す図である。一覧画像ＤＰは、照明装置５０の処理の種別を示す文字列を含む。図３１に例示する通り、一覧画像ＤＰは、照明装置５０の処理として、「照射処理」文字列と、「消灯処理」文字列とを含む。

説明を図２９に戻す。処理装置２０ｆは、制御プログラムＰＲｆを読み取り、制御プログラムＰＲｆを実行することで、検出部２１、生成部２２、第１投写制御部２３、判定部２４、処理決定部２５、位置決定部２６、実行部２７、第２投写制御部２９、及び、追加部３１として機能する。

第２投写制御部２９は、判定部２４の判定結果が否定である場合、一覧画像ＤＰを投写装置４０に投写させる。

追加部３１は、一覧画像ＤＰからユーザが選択した処理の種別を示す識別情報を、軌跡画像ＴＰを示す情報に対応付けて第１図形情報Ｚ１Ｉに追加する。ユーザが選択した処理は、例えば、一覧画像ＤＰのうち、指示体１５が位置する文字列に対応する処理である。図３１及び図３２を用いて、追加部３１の処理を説明する。

図３２は、判定部２４の判定結果が否定である場合の軌跡画像ＴＰの一例を示す図である。図３２の例では、ユーザは、照射処理図形ＳＰＬに類似する図形を描画した上で、斜めの線分を描画することにより、照射処理とは反対の処理、すなわち、消灯処理に対応する図形を描画している。

図３３は、追加部３１による追加後の第１図形情報Ｚ１Ｉの内容の一例を示す図である。図３２の例では、ユーザは、「消灯処理」を選択したことを想定する。追加部３１は、軌跡画像ＴＰを示す軌跡情報ＴＩを、消灯処理図形情報として記憶装置３５に追加する。更に、追加部３１は、「消灯処理」を消灯処理図形情報に対応付けて第１図形情報Ｚ１Ｉに追加する。

３．５．２．第５変形例のまとめ
以上、第５変形例において、処理装置２０ｆは、第２投写制御部２９（「投写制御部」の一例）と、追加部３１としても機能する。第２投写制御部２９は、判定部２４の判定結果が否定である場合、作用装置の処理の種別を示す文字列を含む一覧画像ＤＰを、投写装置４０に投写させる。追加部３１は、一覧画像ＤＰからユーザが選択した処理の種別を示す識別情報を、軌跡画像ＴＰに含まれる図形を示す情報に対応付けて第１図形情報Ｚ１Ｉ（「記憶装置」の一例）に追加する。
第５変形例によれば、ユーザは、作用装置の処理に対応付けられた図形を追加できる。例えば、作用装置の処理の種別に対応付けられた識別図形情報ＺＰＩが存在しなくても、ユーザは、作用装置の処理の種別に対応付けられた識別図形情報ＺＰＩを追加できる。また、ユーザは、第１図形情報Ｚ１Ｉに予め含まれる識別図形情報ＺＰＩが示す図形を記憶できなくても、ユーザ自身が覚えやすい図形を第１図形情報Ｚ１Ｉに追加できる。

３．６．第６変形例
上述の各態様では、処理装置２０は、第１投写制御部２３として機能したが、第１投写制御部２３として機能しなくてもよい。

図３４は、第６変形例における作用提供システム１ｇの構成を示す説明図である。作用提供システム１ｇは、情報処理装置１０の替わりに情報処理装置１０ｇを有し、投写装置４０を有さない点で作用提供システム１と異なる。

情報処理装置１０ｇは、処理装置２０ｇと、通信装置３２と、記憶装置３５ｇと、を有する。記憶装置３５ｇは、処理装置２０ｇが実行する制御プログラムＰＲｇを含む複数のプログラム、第１図形情報Ｚ１Ｉ、及び、処理装置２０ｇが使用する各種の情報などを記憶する。

処理装置２０ｇは、制御プログラムＰＲｇを読み取り、制御プログラムＰＲｇを実行することで、検出部２１、生成部２２、判定部２４、処理決定部２５、位置決定部２６、及び、実行部２７として機能する。すなわち、処理装置２０ｇは、第１投写制御部２３として機能しない点で、処理装置２０と異なる。

第６変形例においても、第１実施形態と同様に、作用面ＳＣ内のユーザが所望する位置に、物理的な作用を与える。軌跡画像ＴＰを作用面ＳＣに投写しなくても、第１図形情報Ｚ１Ｉに含まれる識別図形情報ＺＰＩが示す図形が簡素であれば、ユーザは、識別図形情報ＺＰＩが示す図形を描画できる。

３．７．第７変形例
第２実施形態において、表示処理の一例として、風景表示処理及びアプリ画像表示処理を説明したが、表示処理は、風景表示処理及びアプリ画像表示処理に限らない。例えば、表示処理は、メモ帳を表示するメモ帳表示処理でもよい。第７変形例において、識別図形情報ＺＰＩは、メモ帳表示処理を示すメモ帳表示処理図形ＳＰＭＭを示す情報である。所定画像は、メモ帳を示すメモ帳画像ＰＰＭＭである。

図３５は、メモ帳表示処理図形ＳＰＭＭの一例を示す図である。ユーザがメモ帳表示処理図形ＳＰＭＭを記憶するため、照射処理図形ＳＰＬと同様に、メモ帳表示処理図形ＳＰＭＭは、メモ帳表示処理を連想できる図形であることが好ましい。図３５の例では、メモ帳表示処理図形ＳＰＭＭは、メモ帳を示す画像である。

図３６は、軌跡画像ＴＰの一例を示す図である。図３６では、ユーザが、メモ帳表示処理図形ＳＰＭＭを描画した例を示す。更に、図３６では、メモ帳表示処理図形ＳＰＭＭの中に、ユーザが日本語で記載した手書きの文字列ＳＴ１が含まれる。文字列ＳＴ１は、「部屋を掃除して下さい」である。

第７変形例において、実行部２７は、メモ帳表示処理図形ＳＰＭＭに文字列が含まれる場合、この文字列の第１言語とは異なる第２言語に翻訳する。第２言語は、例えば、客室ＲＭを清掃する清掃員の母国語である。第７変形例では、第２言語が、英語であるとして説明する。メモ帳画像ＰＰＭＭの位置が作用位置である投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する生成指示と、投写情報ＰＲＪＩを投写装置４０に出力する出力指示とを生成装置６０に通知することによって、メモ帳画像ＰＰＭＭを作用面ＳＣに表示する。更に、このメモ帳画像ＰＰＭＭには、第２言語に翻訳した文字列が含まれる。

図３７は、作用面ＳＣに投写されたメモ帳画像ＰＰＭＭの一例を示す図である。メモ帳画像ＰＰＭＭには、文字列ＳＴ１を英語に翻訳した文字列ＳＴ２が含まれる。文字列ＳＴ２は、「Please make up this room.」である。

第７変形例によれば、例えば、ユーザは、ユーザとは母国語が異なる清掃員にメッセージを伝えることができる。

３．８．第８変形例
第２実施形態において、風景画像ＰＰＬＡは、客室ＲＭに仮に窓がある場合に窓から見られるであろう風景を示す画像、又は、風光明媚な場所で撮像された画像であると記載したが、これに限らない。例えば、記憶装置６４は、風景画像情報ＰＰＬＡＩとして、いずれかの場所を朝の時間帯に撮像した画像を示す情報と、当該場所を昼の時間帯に撮像した画像を示す情報と、当該場所を夜の時間帯に撮像した画像を示す情報とを記憶してもよい。いずれかの場所とは、いずれの場所でもよく、例えば、客室ＲＭの外、又は、風光明媚な場所等である。実行部２７ａは、投写情報ＰＲＪＩの生成指示と、投写情報ＰＲＪＩの出力指示とを生成装置６０に通知する。この生成指示は、所定画像として、現在時刻に対応する時間帯に撮像した画像の位置が作用位置である投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する指示である。
また、客室ＲＭに仮に窓がある場合に窓から見られるであろう風景を示す画像は、複数あってもよい。例えば、作用面ＳＣが、客室ＲＭを中心として東側の内壁面と南側の内壁面とである場合、記憶装置６４は、風景画像情報ＰＰＬＡＩとして、客室ＲＭの東側に仮に窓がある場合に窓から見られるであろう風景を示す画像と、客室ＲＭの南側に仮に窓がある場合に窓から見られるであろう風景を示す画像とを記憶してもよい。実行部２７ａは、投写情報ＰＲＪＩの生成指示と、投写情報ＰＲＪＩの出力指示とを生成装置６０に通知する。この生成指示は、所定画像として、作用位置に対応する画像の位置が作用位置である投写画像ＰＲＪを示す投写情報ＰＲＪＩを生成する指示である。作用位置に対応する画像とは、作用位置が東側の内壁面内である場合、客室ＲＭの東側に仮に窓がある場合に窓から見られるであろう風景を示す画像であり、作用位置が南側の内壁面内である場合、客室ＲＭの南側に仮に窓がある場合に窓から見られるであろう風景を示す画像である。

３．９．第９変形例
上述の各態様において、判定部２４は、軌跡情報ＴＩに基づいて、識別図形情報ＺＰＩが示す図形が軌跡画像ＴＰに含まれる図形に類似するか否かを判定するが、これに限らない。判定部２４は、軌跡情報ＴＩの基情報である位置情報ＰＩに基づいて、識別図形情報ＺＰＩが示す図形が軌跡画像ＴＰに含まれる図形に類似するか否かを判定してもよい。例えば、判定部２４は、位置情報ＰＩのうち、期間が連続する３つの位置を結ぶ２つの線分を特定する。この線分は、軌跡情報ＴＩが示す軌跡の一部分である。判定部２４は、この軌跡の一部分に含まれる交点と、識別図形情報ＺＰＩが示す図形の頂点とを特徴点として比較することにより、識別図形情報ＺＰＩが示す図形が軌跡画像ＴＰに含まれる図形に類似するか否かを判定する。

３．１０．第１０変形例
上述の各態様において、作用提供システム１は、１つの作用装置を有したが、複数の作用装置を有してもよい。例えば、作用提供システム１は、照明装置５０と、送風装置７０とを有してもよい。判定部２４は、軌跡画像ＴＰが照射処理図形ＳＰＬに類似するか否かを判定する。軌跡画像ＴＰが照射処理図形ＳＰＬに類似する場合、処理決定部２５は、照射処理を特定処理として決定する。軌跡画像ＴＰが照射処理図形ＳＰＬに類似しない場合、判定部２４は、軌跡画像ＴＰが送風処理図形ＳＰＷに類似するか否かを判定する。軌跡画像ＴＰが送風処理図形ＳＰＷに類似する場合、処理決定部２５は、送風処理を特定として決定する。

３．１１．第１１変形例
上述の各態様にいて、位置決定部２６は、軌跡情報ＴＩに基づいて、作用位置を決定したが、これに限らない。例えば、位置決定部２６は、位置情報ＰＩに基づいて、作用位置を決定してもよい。具体的には、位置決定部２６は、位置情報ＰＩに含まれる一連の座標情報が示すそれぞれの座標値を平均した値が示す位置を、作用位置として決定する。

３．１２．第１２変形例
上述の各態様では、情報処理装置１０は、客室ＲＭ内に設けられていたが、投写装置４０とアクセスできればよく、客室ＲＭ内に設けられなくてもよい。生成装置６０も投写装置４０と同様である。

３．１３．第１３変形例
上述の各態様において、情報処理装置１０と投写装置４０とは、一体でもよい。また、情報処理装置１０と赤外光撮像装置４５とは、一体でもよい。更に、情報処理装置１０と生成装置６０は、一体でもよい。

３．１４．第１４変形例
作用提供システム１は、ホテルの客室ＲＭ内に設けられたが、自宅の部屋に設けられてもよい。また、作用提供システム１は、屋外に設けられてもよい。

３．１５．第１５変形例
指示体１５は、操作デバイスに限らず、ユーザの指でもよい。指示体１５がユーザの指である場合、作用提供システム１は、赤外光撮像装置４５の替わりに、可視光を透過した状態で作用面ＳＣを撮像する撮像装置を有する。検出部２１は、撮像装置から得られた画像情報に基づいて、ユーザの指先を特定する。検出部２１は、特定したユーザの指先の位置を示す情報を、位置情報ＰＩとして検出する。

３．１６．その他の変形例
（１）上述した各態様の説明に用いたブロック図は、機能単位のブロックを示している。これらの機能ブロック（構成部）は、ハードウェア及び／又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び／又は論理的に結合した１つの装置により実現されてもよいし、物理的及び／又は論理的に分離した２つ以上の装置を直接的及び／又は間接的に(例えば、有線及び／又は無線)で接続し、これら複数の装置により実現されてもよい。

（２）上述した各態様における処理手順、シーケンス、フローチャートなどは、矛盾のない限り、順序を入れ替えてもよい。例えば、本明細書で説明した方法については、例示的な順序で様々なステップの要素を提示しており、提示した特定の順序に限定されない。

（３）上述した各態様において、入出力された情報等は特定の場所(例えば、メモリ)に保存されてもよいし、管理テーブルで管理してもよい。入出力される情報等は、上書き、更新、又は追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。

（４）上述した各態様において、判定は、１ビットで表される値（０か１か）によって行われてもよいし、真偽値（Boolean：true又はfalse）によって行われてもよいし、数値の比較（例えば、所定の値との比較）によって行われてもよい。

（５）上述した各態様では、記憶装置３５は、処理装置２０が読取可能な記録媒体であり、ＲＯＭ及びＲＡＭなどを例示したが、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ－ｒａｙ（登録商標）ディスク)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、キードライブ)、ＣＤ－ＲＯＭ（Compact Disc－ＲＯＭ）、レジスタ、リムーバブルディスク、ハードディスク、フロッピー（登録商標）ディスク、磁気ストリップ、データベース、サーバその他の適切な記憶媒体である。また、プログラムは、ネットワークから送信されても良い。また、プログラムは、電気通信回線を介して通信網から送信されても良い。

（６）上述した各態様は、ＬＴＥ（Long Term Evolution）、ＬＴＥ－Ａ（LTE-Advanced）、ＳＵＰＥＲ ３Ｇ、ＩＭＴ－Ａｄｖａｎｃｅｄ、４Ｇ、５Ｇ、ＦＲＡ（Future Radio Access）、Ｗ－ＣＤＭＡ（登録商標）、ＧＳＭ（登録商標）、ＣＤＭＡ２０００、ＵＭＢ（Ultra Mobile Broadband）、ＩＥＥＥ ８０２．１１（Ｗｉ－Ｆｉ）、ＩＥＥＥ ８０２．１６（ＷｉＭＡＸ）、ＩＥＥＥ ８０２．２０、ＵＷＢ（Ultra-WideBand）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、その他の適切なシステムを利用するシステム及び／又はこれらに基づいて拡張された次世代システムに適用されてもよい。

（７）上述した各態様において、説明した情報及び信号などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上述の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。
なお、本明細書で説明した用語及び／又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。

（８）図２、図８、図１８、図２１、図２４、図２５、図３０、及び、図３４に例示された各機能は、ハードウェア及びソフトウェアの任意の組み合わせによって実現される。また、各機能は、単体の装置によって実現されてもよいし、相互に別体で構成された２個以上の装置によって実現されてもよい。

（９）上述した各実施形態で例示したプログラムは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード又はハードウェア記述言語と呼ばれるか、他の名称によって呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順又は機能等を意味するよう広く解釈されるべきである。
また、ソフトウェア、命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線（ＤＳＬ）などの有線技術及び／又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び／又は無線技術は、伝送媒体の定義内に含まれる。

（１０）上述した各実施形態において、情報、パラメータなどは、絶対値で表されてもよいし、所定の値からの相対値で表されてもよいし、対応する別の情報で表されてもよい。

（１１）上述したパラメータに使用する名称はいかなる点においても限定的なものではない。更に、これらのパラメータを使用する数式等は、本明細書で明示的に開示したものと異なる場合もある。

（１２）上述した各実施形態において、情報処理装置１０は、移動局である場合が含まれる。移動局は、当業者によって、加入者局、モバイルユニット、加入者ユニット、ワイヤレスユニット、リモートユニット、モバイルデバイス、ワイヤレスデバイス、ワイヤレス通信デバイス、リモートデバイス、モバイル加入者局、アクセス端末、モバイル端末、ワイヤレス端末、リモート端末、ハンドセット、ユーザエージェント、モバイルクライアント、クライアント、又はいくつかの他の適切な用語で呼ばれる場合もある。

（１３）上述した各実施形態において、「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。

（１４）本明細書で使用する「第１」、「第２」などの呼称を使用した要素へのいかなる参照も、それらの要素の量又は順序を全般的に限定するものではない。これらの呼称は、２つ以上の要素間を区別する便利な方法として本明細書で使用され得る。従って、第１及び第２の要素への参照は、２つの要素のみがそこで採用され得ること、又は何らかの形で第１の要素が第２の要素に先行しなければならないことを意味しない。

（１５）上述した各実施形態において「含む(ｉｎｃｌｕｄｉｎｇ)」、「含んでいる（ｃｏｍｐｒｉｓｉｎｇ）」、及びそれらの変形が、本明細書あるいは特許請求の範囲で使用されている限り、これら用語は、用語「備える」と同様に、包括的であることが意図される。更に、本明細書あるいは特許請求の範囲において使用されている用語「又は（or）」は、排他的論理和ではないことが意図される。

（１６）本願の全体において、例えば、英語におけるa、an及びtheのように、翻訳によって冠詞が追加された場合、これらの冠詞は、文脈から明らかにそうではないことが示されていなければ、複数を含む。

（１７）本発明が本明細書中に説明した実施形態に限定されないことは当業者にとって明白である。本発明は、特許請求の範囲の記載に基づいて定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施できる。従って、本明細書の記載は、例示的な説明を目的とし、本発明に対して何ら制限的な意味を有さない。また、本明細書に例示した態様から選択された複数の態様を組み合わせてもよい。

１，１ａ，１ｂ，１ｃ，１ｄ，１ｅ，１ｆ，１ｇ…作用提供システム、１０，１０ａ，１０ｂ，１０ｃ，１０ｄ，１０ｅ，１０ｆ，１０ｇ…情報処理装置、２１…検出部、２２…生成部、２３…第１投写制御部、２４，２４ａ，２４ｂ，２４ｃ…判定部、２５，２５ａ，２５ｂ，２５ｃ…処理決定部、２６，２６ａ…位置決定部、２７，２７ａ，２７ｂ，２７ｃ，２７ｄ，２７ｅ…実行部、２８，２８ｅ…大きさ決定部、２９…第２投写制御部、３１…追加部、３５，３５ａ，３５ｂ，３５ｃ，３５ｄ，３５ｅ，３５ｆ，３５ｇ…記憶装置、４０…投写装置、５０…照明装置、６０…生成装置、７０…送風装置、８０…音響装置、ＤＰ…一覧画像、ＤＰＩ…一覧画像情報、ＰＩ…位置情報、ＰＰＡＬ…アプリ生成画像、ＰＰＡＬＩ…アプリ生成画像情報、ＰＰＬＡ…風景画像、ＰＰＬＡＩ…風景画像情報、ＰＲＪ…投写画像、ＰＲＪＩ…投写情報、ＳＣ…作用面、ＳＰ１…第１大きさ図形、ＳＰ１Ｉ…第１大きさ図形情報、ＳＰ２…第２大きさ図形、ＳＰ２Ｉ…第２大きさ図形情報、ＳＰＡＬ…アプリ表示図形、ＳＰＡＬＩ…アプリ表示図形情報、ＳＰＬ…照射処理図形、ＳＰＬＡ…風景表示図形、ＳＰＬＡＩ…風景表示図形情報、ＳＰＬＩ…照射処理図形情報、ＳＰＳ…定位処理図形、ＳＰＳＩ…定位処理図形情報、ＳＰＷ…送風処理図形、ＳＰＷＩ…送風処理図形情報、ＴＩ…軌跡情報、ＴＰ…軌跡画像、Ｚ１Ｉ，Ｚ１Ｉａ，Ｚ１Ｉｂ，Ｚ１Ｉｃ…第１図形情報、Ｚ２Ｉ…第２図形情報、ＺＡＩ，ＺＡＩａ，ＺＡＩｂ，ＺＡＩｃ…識別情報、ＺＰＩ，ＺＰＩａ，ＺＰＩｂ，ＺＰＩｃ…識別図形情報。

Claims (10)

1. 作用面に対して物理的な作用を与える作用装置を制御可能な情報処理装置であって、
   前記作用装置の処理の種別を示す識別情報と、前記処理の種別に対応する図形を示す識別図形情報とを対応付けて記憶する記憶装置と、
   前記作用面に対する指示体の位置を示す位置情報を検出する検出部と、
   前記位置情報に基づいて、前記指示体の位置の軌跡を示す軌跡画像に含まれる図形が、前記識別図形情報が示す図形に類似するか否かを判定する判定部と、
   前記判定部の判定結果が肯定である場合、前記識別図形情報に対応付けられた識別情報が示す処理を、前記作用装置に実行させる特定処理として決定する処理決定部と、
   前記位置情報に基づいて、前記作用面のうち前記特定処理により生じる前記作用を受ける作用位置を決定する位置決定部と、
   前記作用位置に前記作用を与える前記特定処理を、前記作用装置に実行させる実行部と、
   を備える情報処理装置。
2. 前記作用装置は、前記作用面に対して照明光を照射する照明装置であり、
   前記識別情報が、前記照明光を照射する照射処理を示し、
   前記識別図形情報が、前記照射処理に対応する図形を示し、
   前記軌跡画像に含まれる図形が前記照射処理に対応する図形に類似する場合、
   前記処理決定部は、前記照射処理を前記特定処理として決定し、
   前記実行部は、前記作用位置に前記照射処理を、前記照明装置に実行させる、
   請求項１に記載の情報処理装置。
3. 前記作用装置は、前記作用面に画像を投写する投写装置により前記作用面に投写される投写画像を示す投写情報を生成する生成装置であり、
   前記識別情報が、前記投写画像に含まれる所定画像を表示する表示処理を示し、
   前記識別図形情報が、前記表示処理に対応する図形を示し、
   前記軌跡画像に含まれる図形が前記表示処理に対応する図形に類似する場合、
   前記処理決定部は、前記投写情報を生成する処理を前記特定処理として決定し、
   前記実行部は、前記所定画像の位置が前記作用位置である前記投写画像を示す前記投写情報を生成する指示と、前記投写情報を前記投写装置に出力する指示とを前記生成装置に通知することによって、前記所定画像を前記作用面に表示する、
   請求項１に記載の情報処理装置。
4. 前記軌跡画像に含まれる画像が、前記表示処理に対応する図形に類似する場合、
   前記位置決定部は、前記軌跡画像に含まれる図形の外縁に対する内側の領域を、前記作用位置として決定し、
   前記実行部は、前記領域に前記所定画像が位置する前記投写画像を示す前記投写情報を生成する指示と、前記投写情報を前記投写装置に出力する指示とを、前記生成装置に通知する、
   請求項３に記載の情報処理装置。
5. 前記生成装置は、複数のプログラムを実行可能であり、
   前記所定画像を示す情報は、前記複数のプログラムのうち特定のプログラムによって生成され、
   前記軌跡画像に含まれる画像が、前記表示処理に対応する図形に類似する場合、
   前記実行部は、前記特定のプログラムを実行する指示と、前記特定のプログラムによって生成された前記所定画像を含む前記投写画像を示す前記投写情報を生成する指示と、前記投写情報を前記投写装置に出力する指示とを前記生成装置に通知する、
   請求項３に記載の情報処理装置。
6. 前記作用装置は、前記作用面に対して送風する送風装置であり、
   前記識別情報は、送風する送風処理を示し、
   前記識別図形情報は、前記送風処理に対応する図形を示し、
   前記軌跡画像に含まれる画像が、前記送風処理に対応する図形に類似する場合、
   前記処理決定部は、前記送風処理を前記特定処理として特定し、
   前記実行部は、前記作用位置に送風する前記送風処理を、前記送風装置に実行させる、
   請求項１に記載の情報処理装置。
7. 前記作用装置は、音像を定位させる位置を調整可能な音響装置であり、
   前記識別情報は、音像を定位させる処理を示し、
   前記識別図形情報は、前記音像を定位させる処理に対応する図形を示し、
   前記軌跡画像に含まれる画像が、音像を定位させる処理に対応する図形に類似する場合、
   前記処理決定部は、前記音像を定位させる処理を前記特定処理として特定し、
   前記実行部は、前記作用位置に音像を定位させる処理を、前記音響装置に実行させる、
   請求項１に記載の情報処理装置。
8. 前記軌跡画像の大きさに応じて、前記作用装置が前記作用面に与える物理的な作用の大きさを決定する大きさ決定部を備え、
   前記実行部は、前記作用位置に前記大きさ決定部が決定した大きさによる作用を与える前記特定処理を前記作用装置に実行させる、
   請求項１から７のいずれか１項に記載の情報処理装置。
9. 前記記憶装置は、更に、前記作用の大きさを示す大きさ情報と、前記作用の大きさに対応する図形を示す大きさ図形情報とを対応付けて記憶し、
   前記軌跡画像に含まれる画像が前記大きさ図形情報が示す図形に類似する場合、前記大きさ図形情報に対応付けられた大きさ情報が示す作用の大きさを、前記作用装置が作用面に与える物理的な作用の大きさとして決定する大きさ決定部を、備え、
   前記実行部は、前記作用位置に前記大きさ決定部が決定した大きさによる作用を与える前記特定処理を前記作用装置に実行させる、
   請求項１から７のいずれか１項に記載の情報処理装置。
10. 前記判定部の判定結果が否定である場合、前記作用装置の処理の種別を示す文字列を含む一覧画像を、前記作用面に画像を投写する投写装置に投写させる投写制御部と、
    前記一覧画像からユーザが選択した処理の種別を示す識別情報を、前記軌跡画像に含まれる図形を示す情報に対応付けて前記記憶装置に追加する追加部と、を備える、
    請求項１から８のいずれか１項に記載の情報処理装置。

Images