JP2012253736A - 車両用表示装置および情報表示システム - Google Patents

Abstract

【課題】携帯端末と車両用表示装置とを接続して車両用表示装置側で携帯端末の機能を利用可能とする場合のユーザにとっての使い勝手を、より向上させることを可能にする。
【解決手段】車両用タッチパネル部２４に対してスライド操作が行われた場合に、車両用表示装置２の車両側制御部２５において、当該スライド操作を検知するとともに当該スライド操作の終点の位置を検知し、検知した終点の位置をもとに、表示の座標変換の種類および方向を決定する。そして、決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が携帯タッチパネル部１４に行われたと仮定した場合の携帯タッチパネル部１４での操作位置の変化を示す情報である擬似操作情報を生成し、その擬似操作情報をスマートフォン１に送信する。
【選択図】図９

Description

本発明は、車両用表示装置および情報表示システムに関するものである。

タッチパネルへのジェスチャー入力によって各種の操作を行うことができるタッチパネル式携帯電話機やタブレット型端末等の携帯端末が知られている。ジェスチャー入力の一例としては、指をタッチパネル上でスライドさせることによる入力があり、この入力により画面上の表示が平行移動する。一般的に表示の移動量は、指をタッチパネル上でスライドさせた操作量に応じたものとなっている。

また、近年では、タッチ位置を複数点検知できるタッチパネル（以下、マルチタッチパネル）を備えた携帯端末も知られてきている。マルチタッチパネルでは、ユーザの複数の指によるジェスチャー入力が認識可能となるため、例えば特許文献１に開示されているように、複数の指によるジェスチャー入力によって画面上の表示の拡大・縮小、回転といった指示を与えることが可能となっている。一般的に表示の拡大・縮小の量は、２本の指の各タッチ位置を変化させた操作量に応じたものとなる。また、表示の回転量は、２本の指の各タッチ位置のうちの固定した指のタッチ位置を中心に他方の指のタッチ位置を画面上に回転させた操作量に応じたものとなる。

さらに、近年では、タッチパネルを備えた車両用表示装置とタッチパネルを備えた携帯端末とを接続し、これらの機器を連携させることによって車両用表示装置側で携帯端末の機能を利用可能とするターミナルモードと呼ばれる技術が知られている。ターミナルモードでは、車両用表示装置のタッチパネル（以下、車両用タッチパネル）に携帯端末のタッチパネル（以下、携帯タッチパネル）の画面を表示させるとともに、車両用タッチパネルに対するタッチ操作によって、携帯タッチパネルをタッチ操作したのと同様の処理を携帯端末で行わせることが可能となる。

詳しくは、ターミナルモードでは、携帯端末からは画素毎の色情報（以下、画素情報）を車両用表示装置に送信し、車両用表示装置がこの画素情報をもとに、車両用タッチパネルに携帯タッチパネルの画面を表示する。また、車両用表示装置からは車両用タッチパネルのタッチ位置についての位置情報を携帯端末に送信し、携帯端末は、この位置情報をもとに、携帯タッチパネルがタッチ操作されたのと同様の処理を行う。

特開２００１−２９０５８５号公報

従来の技術では、ターミナルモードにおいて、平行移動、拡大・縮小、回転等の座標変換を行わせるためのジェスチャー入力（以下、座標変換ジェスチャー入力）を行って画面上の表示の座標変換を行うことが可能な携帯端末の機能を車両用表示装置で利用しようとした場合に、ユーザにとっての使い勝手が悪くなるという問題点があった。詳しくは、以下に述べる通りである。

車両用タッチパネルに表示される携帯端末の画面上の表示の座標変換を行わせようとする場合には、車両用タッチパネルに対しての座標変換ジェスチャー入力時のタッチ位置の変化に応じた位置情報を車両用表示装置から携帯端末に送信し、携帯タッチパネルに対して座標変換ジェスチャー入力が行われたのと同様の座標変換を携帯端末側で行わせる必要がある。

前述したように、従来、携帯タッチパネルの画面上の表示の座標変換の量は、ジェスチャー入力時のタッチ位置の変化量（つまり、タッチ操作の操作量）に応じたものとなっている。よって、車両用タッチパネルに表示される携帯端末の画面上の表示をユーザが目的とする量だけ座標変換させるためには、車両用タッチパネルの画面上の表示の変化を確認しながらタッチ操作の操作量を調整しなければならないことになる。しかしながら、車両の運転への集中を妨げないようにするためには車両用タッチパネルを注視し続ける訳にはいかないので、目的とする量だけ座標変換を行うのが容易でなく、ユーザにとっての使い勝手が悪くなる。

本発明は、上記従来の問題点に鑑みなされたものであって、その目的は、携帯端末と車両用表示装置とを接続して車両用表示装置側で携帯端末の機能を利用可能とする場合のユーザにとっての使い勝手を、より向上させることを可能にする車両用表示装置および情報表示システムを提供することにある。

請求項１の車両用表示装置においては、車両用タッチパネルに対して、スライド操作が行われた場合に、当該スライド操作を検知するとともに当該スライド操作により変化した操作位置を検知する変化検知手段と、変化検知手段で検知したスライド操作をもとに、表示の座標変換の種類を決定するとともに、変化検知手段で検知した操作位置をもとに、表示の座標変換の方向を決定する変換態様決定手段と、変換態様決定手段で決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が携帯端末のタッチパネルに行われたと仮定した場合の当該タッチパネルでの操作位置の変化を示す情報（以下、擬似操作情報）を生成する擬似操作情報生成手段とを備え、擬似操作情報生成手段で生成した擬似操作情報を携帯端末に送信することになる。

これによれば、スライド操作を１回行うごとに、表示の座標変換の種類および方向を変換態様決定手段で決定するとともに、擬似操作情報を擬似操作情報生成手段で生成して携帯端末に送信することになる。擬似操作情報は、前述したように、変換態様決定手段で決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が携帯端末のタッチパネルに行われたと仮定した場合の当該タッチパネルでの操作位置の変化を示す情報である。よって、擬似操作情報を受信した携帯端末では、この擬似操作情報を受信するごとに、携帯端末のタッチパネルに表示させる画面の表示に当該座標変換を一定量行うことができる。

また、車両用表示装置では、携帯端末の画面を車両用タッチパネルに表示するので、スライド操作を１回行うごとに、車両用タッチパネルの画面上の表示に対して、当該スライド操作に応じて決定される種類および方向で、一定量の座標変換を行う。スライド操作の操作量に関わらず座標変換の量は一定となるので、ユーザは１回ごとのスライド操作の操作量を調整することなしに、スライド操作の回数を調整することで、目的とする量の座標変換が行われることになる。スライド操作の操作量を調整するためには車両用タッチパネルをユーザが注視する必要があるのに対し、スライド操作の回数の調整は車両用タッチパネルをユーザが注視する必要がない。従って、請求項１の構成によれば、携帯端末と車両用表示装置とを接続して車両用表示装置側で携帯端末の機能を利用可能とする場合のユーザにとって、使い勝手をより向上させることが可能になる。

請求項２のように、車両用タッチパネルとして、複数の操作位置を同時に検知可能なタッチパネルを用いる態様としてもよい。

請求項３のように、変換態様決定手段が、タッチ操作の操作位置を１箇所だけ検知していた場合であって、且つ、スライド操作を検知した場合に、座標変換の種類を平行移動と決定するとともに、当該スライド操作により変化した操作位置をもとに、当該スライド操作により操作位置が変化した方向をその平行移動の方向と決定する態様としてもよい。これによれば、車両用タッチパネルに対してスライド操作を繰り返すことで、スライド操作を行った方向へユーザが目的とする量だけ車両用タッチパネルの画面上の表示を平行移動させることが可能になる。

請求項４のように、変換態様決定手段が、タッチ操作の操作位置を同時に２箇所検知していた場合であって、且つ、その２箇所の操作位置の両方についてスライド操作を検知した場合であって、当該スライド操作による各操作位置間の距離の変化を検知した場合に、座標変換の種類をスケール変換と決定するとともに、当該スライド操作による各操作位置間の距離の変化に応じて当該スケール変換の方向を拡大もしくは縮小と決定する態様としてもよい。これによれば、車両用タッチパネルに対して２箇所の操作位置のスライド操作を繰り返すことで、ユーザが目的とする量だけ車両用タッチパネルの画面上の表示を拡大や縮小させることが可能になる。

請求項５の構成によれば、変換態様決定手段が、タッチ操作の操作位置を同時に２箇所検知していた場合であって、且つ、その２箇所の操作位置の一方のみについてスライド操作を検知した場合に、座標変換の種類を回転と決定するとともに、当該スライド操作により変化した操作位置をもとに、当該回転の方向を決定する態様としてもよい。これによれば、車両用タッチパネルに対して２箇所の操作位置の一方のみのスライド操作を繰り返すことで、ユーザが目的とする量だけ車両用タッチパネルの画面上の表示を回転させることが可能になる。

請求項６の車両用表示装置においては、擬似操作情報生成手段は、擬似操作情報として、画面上の表示に一定量の座標変換を行うための操作が携帯端末のタッチパネルに行われたと仮定した場合の操作開始点および仮想的な操作終点の座標を生成するとともに、操作開始点から当該操作終点までの間の仮想的な操作中間点の座標も生成する。そして、擬似操作情報生成手段で生成した擬似操作情報を携帯端末に送信する場合に、操作開始点の座標を送信した後に、操作開始点に近い操作中間点の座標から順番に操作終点の座標まで逐次送信する。

これによれば、操作開始点に近い操作中間点の座標から順番に操作終点の座標までを逐次受信する携帯端末では、上記座標を受信するごとに、携帯端末のタッチパネルに表示させる画面の表示に座標変換を行って、最終的には一定量の座標変換を行うことになる。従って、擬似操作情報をもとに行われる携帯端末の画面変化が滑らかになる。

請求項７の車両用表示装置においては、タッチ操作後の再度のタッチ操作を検知するとともに、先行するタッチ操作の操作位置からその再度のタッチ操作により変化した操作位置を検知する変化検知手段と、１回目のタッチ操作が行われた場合に、表示の座標変換の種類および方向をユーザが指定するためのアイコンを車両用タッチパネルの画面に重畳表示させる第１重畳表示手段と、変化検知手段で検知した操作位置をもとに、ユーザに選択されたアイコンに対応する座標変換の種類および方向を、表示の座標変換の種類および方向として決定する変換態様決定手段とを備えることになる。

これによれば、タッチ操作を行って、表示の座標変換の種類および方向をユーザが指定するためのアイコンを車両用タッチパネルの画面に重畳表示させた後は、そのアイコンの表示位置をタッチ操作することで、ユーザが目的とする種類および方向の座標変換を当該画面の表示に一定量だけ行わせることが可能となる。よって、携帯端末においては画面に対して２箇所を同時に操作することで可能となる座標変換についても、車両用タッチパネルでは、当該アイコンの表示位置の１箇所をタッチ操作することで実行可能とすることができる。従って、車両用タッチパネルが複数の操作位置を同時に検知可能なタッチパネルでなくても、携帯端末においては画面に対して２箇所を同時に操作することで可能となる座標変換を当該車両用タッチパネルの操作で実行可能とすることが可能となり、汎用性が向上する。

請求項７のようにする場合には、請求項８のように、第１重畳表示手段は、１回目のタッチ操作が行われた場合に、当該タッチ操作の操作位置を中心としてアイコンを配置し、車両用タッチパネルの画面に重畳表示させるものであって、車両用タッチパネルの画面上でのアイコンの表示位置と当該アイコンの示す座標変換の種類および方向との対応関係を格納する格納手段と、当該中心に対するアイコンの配置位置と当該アイコンの示す座標変換の種類および方向との対応関係を予め規定して記憶している規定記憶手段とをさらに備え、格納手段は、規定記憶手段に記憶している対応関係をもとに、車両用タッチパネルの画面上でのアイコンの表示位置と当該アイコンの示す座標変換の種類および方向との対応関係を格納する態様としてもよい。これによれば、タッチ操作を行った操作位置を中心に、表示の座標変換の種類および方向をユーザが指定するためのアイコンが表示されるため、その後のアイコンの選択が行いやすく、使い勝手がさらに向上する。

請求項９のように、第１重畳表示手段は、表示の平行移動の方向をユーザが指定するためのアイコン、表示の拡大縮小をユーザが指定するためのアイコン、および表示の回転方向をユーザが指定するためのアイコンの少なくともいずれかを車両用タッチパネルの画面に重畳表示させる態様としてもよい。これによれば、表示の平行移動や拡大縮小や回転をアイコンの表示位置に対するタッチ操作で行うことが可能になる。

請求項１０の車両用表示装置においては、タッチ操作後の再度のタッチ操作を検知するとともに、１回目のタッチ操作の操作位置から再度のタッチ操作により変化した操作位置を検知する変化検知手段と、１回目のタッチ操作が行われた場合に、当該タッチ操作の操作位置を包囲する所定の枠を車両用タッチパネルの画面に重畳表示させる第２重畳表示手段と、変化検知手段で検知した操作位置および枠の配置位置をもとに、変化検知手段で検知した操作位置の枠に対する位置関係を判断し、その判断結果に応じて、表示の座標変換の種類および方向を決定する変換態様決定手段とを備えることになる。

これによれば、タッチ操作を行って、当該タッチ操作の操作位置を中心とする所定の枠を車両用タッチパネルの画面に重畳表示させた後は、その枠が表示後の画面に対してタッチ操作を行うことで、ユーザが目的とする種類および方向の座標変換を当該画面の表示に一定量だけ行わせることが可能となる。よって、携帯端末においては画面上の２箇所に対して同時に操作することで可能となる座標変換についても、車両用タッチパネルでは、所定の枠が表示後の画面に対して１箇所をタッチ操作することで実行可能とすることができる。従って、車両用タッチパネルが複数の操作位置を同時に検知可能なタッチパネルでなくても、携帯端末においては画面に対して２箇所を同時に操作することで可能となる座標変換を当該車両用タッチパネルの操作で実行可能とすることが可能となり、汎用性が向上する。

請求項１０のようにする場合に、請求項１１のように、変換態様決定手段が、操作位置が枠上であると判断した場合には、座標変換の種類を平行移動と決定するとともに、先行するタッチ操作の操作位置に対する変化検知手段で検知した操作位置の方向をその平行移動の方向と決定し、当該操作位置が枠よりも内側であると判断した場合には、座標変換の種類をスケール変換と決定するとともに、当該スケール変換の方向を縮小と決定し、当該操作位置が枠よりも外側であると判断した場合には、座標変換の種類をスケール変換と決定するとともに、当該スケール変換の方向を拡大と決定する態様としてもよい。

請求項１２のように、変換態様決定手段で決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が携帯端末のタッチパネルに行われたと仮定した場合の当該タッチパネルでの操作位置の変化を示す擬似操作情報を、前記擬似操作情報生成手段で生成する場合の当該一定量の値を、ユーザの操作によって設定する態様としてもよい。これによれば、当該一定量の値をユーザの所望の値に変更することが可能になる。

請求項１３の情報表示システムによれば、タッチパネルを備えた携帯端末と、前記のいずれかの車両用表示装置とを含み、車両用表示装置から送信される擬似操作情報を携帯端末で受信して、擬似操作情報に従って、変換態様決定手段で決定した種類および方向の座標変換を携帯端末のタッチパネルの画面上の表示に一定量行うことになるので、携帯端末と車両用表示装置とを接続して車両用表示装置側で携帯端末の機能を利用可能とする場合のユーザにとっての使い勝手をより向上させることが可能になる。

情報表示システム１００の概略的な構成を示すブロック図である。 スマートフォン１の概略的な構成を示すブロック図である。 車両用表示装置２の概略的な構成を示すブロック図である。 （ａ）は、車両用タッチパネル部２４の画面上のスマホ表示エリアと携帯タッチパネル部１４の画面との比率を説明するための模式図であり、（ｂ）は、車両用タッチパネル部２４の画面上の操作位置の座標と携帯タッチパネル部１４の画面上の座標との対応関係を説明するための模式図である。 操作対象位置の特定を可能にするための初期設定の処理の一例を示すシーケンス図である。 通常操作モードにおける車両側制御部２５での処理のフローの一例を示すフローチャートである。 車両側制御部２５での通常操作モードと簡易操作モードとの切り替えの処理のフローの一例を示すフローチャートである。 車両側制御部２５での簡易操作モードにおける各種設定処理のフローの一例を示すフローチャートである。 ターミナルモード使用中における車両側制御部２５での処理のフローの一例を示すフローチャートである。 （ａ）は、拡大時用のスライド操作が行われた場合について説明するための模式図であり、（ｂ）は、簡易入力用の終点座標の算出についての説明を行うための模式図であり、（ｃ）は、拡大時用の処理における操作対象位置の特定について説明を行うための模式図である。 （ａ）は、縮小時用のスライド操作が行われた場合について説明するための模式図であり、（ｂ）は、簡易入力用の終点座標の算出についての説明を行うための模式図であり、（ｃ）は、縮小時用の処理における操作対象位置の特定について説明を行うための模式図である。 ターミナルモード使用中における車両側制御部２５での処理のフローの一例を示すフローチャートである。 ターミナルモード使用中における携帯側制御部１５でのフローの一例を示すフローチャートである。 （ａ）は、車両用タッチパネル部２４に操作量の比較的小さいピンチアウトの操作を行う場合の操作位置の変化を示す模式図であり、（ｂ）は、車両用タッチパネル部２４に操作量の比較的大きいピンチアウトの操作を行う場合の操作位置の変化を示す模式図であり、（ｃ）は、車両用表示装置２から送信される位置情報および擬似操作情報をもとにスマートフォン１側で検知されるスライド操作の操作位置の変化を示す模式図である。 変形例１におけるターミナルモード使用中の車両側制御部２５での処理のフローの一例を示すフローチャートである。 座標変換指定アイコンの一例を示すための模式図である。 （ａ）〜（ｃ）は、座標変換指定アイコンへのタッチ操作が行われた場合のスマートフォン１側で検知されるスライド操作の操作位置の変化を示す模式図である。 変形例２におけるターミナルモード使用中の車両側制御部２５での処理のフローの一例を示すフローチャートである。 座標変換指定用枠の一例を示すための模式図である。 （ａ）〜（ｃ）は、座標変換指定用枠の配置位置に対する後続タッチ操作の操作位置の位置関係に応じてスマートフォン１側で検知されるスライド操作の操作位置の変化を示す模式図である。

以下、本発明の実施形態について図面を用いて説明する。図１は、本発明が適用された情報表示システム１００の概略的な構成を示すブロック図である。図１に示す情報表示システム１００は、スマートフォン１および車両用表示装置２を含んでいる。情報表示システム１００では、スマートフォン１の画面に表示させるためにスマートフォン１で生成した画面データを車両用表示装置２に送信し、車両用表示装置２でその画面データが示す画面を表示したり、車両用表示装置２への操作入力によってスマートフォン１を操作したりする。

スマートフォン１は、タッチパネルを用いて操作入力を行う所謂タッチパネル式携帯電話機（つまり、操作部分を画面に集約したタッチパネルを搭載したスマートフォン）であって、一般的なタッチパネル式携帯電話機と同様に通話機能やメール機能や音楽機能や地図機能等を有しているものである。スマートフォン１は、請求項の携帯端末に相当する。

本実施形態では、請求項の携帯端末としてタッチパネル式携帯電話機を用いる場合を例に挙げて説明を行うが、必ずしもこれに限らない。請求項の携帯端末としては、車両用表示装置２との通信機能を有するとともにタッチパネルを備えているものであれば他のものを用いる構成としてもよい。例えば、ＰＤＡ（Personal Digital Assistants）やタブレット型コンピュータ等を用いる構成としてもよい。

ここで、図２を用いてスマートフォン１の概略的な構成について説明を行う。なお、便宜上、一般的なタッチパネル式携帯電話機が有している機能に関する構成のうち、本発明の説明に不要なものについては説明を省略する。図２は、スマートフォン１の概略的な構成を示すブロック図である。図２に示すようにスマートフォン１は、携帯側通信部１１、携帯側表示部１２と携帯側操作検知部１３とからなる携帯タッチパネル部１４、および携帯側制御部１５を備えている。

携帯側通信部１１は、車両用表示装置２との間で例えばＢｌｕｅｔｏｏｔｈ（登録商標）に従った通信（以下ＢＴ通信）を行う。スマートフォン１と車両用表示装置２との間での通信は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）に従って行う他にも、ＺｉｇＢｅｅ（登録商標）等の近距離無線通信規格やＩＥＥＥ８０２．１１等の無線ＬＡＮ規格などに従って行う構成としてもよい。また、スマートフォン１と車両用表示装置２との間の通信は、必ずしも無線通信で行う構成に限らず、ＵＳＢ接続等による有線通信によって行う構成としてもよい。

携帯側表示部１２は、スマートフォン１の各種アプリケーションプログラム（以下、アプリケーション）に応じた画面等を表示するものであって、例えばフルカラー表示が可能なものであり、液晶ディスプレイ、有機ＥＬディスプレイ、プラズマディスプレイ等を用いて構成することができる。

携帯側操作検知部１３は、携帯側表示部１２と一体になったタッチセンサが用いられ、携帯側表示部１２の画面上のどの位置に対して押下操作（以下、タッチ操作）が行われたかを検知し、その操作位置の座標を携帯側制御部１５に入力する。

携帯タッチパネル部１４は、携帯側表示部１２と携帯側操作検知部１３とが一体化したものであって、携帯側制御部１５の指示に従って画面を携帯側表示部１２に表示させる。また、携帯タッチパネル部１４は、画面に対する操作が行われた場合には、画面上の操作位置を携帯側操作検知部１３で検知し、その操作位置の座標を携帯側制御部１５に入力する。携帯タッチパネル部１４が請求項の携帯端末のタッチパネルに相当する。

携帯タッチパネル部１４は、画面上の複数の操作位置を同時に検知可能な所謂マルチタッチパネルであっても、画面上の複数の操作位置を同時に検知することができないタッチパネルであってもよいが、本実施形態ではマルチタッチパネルであるものとして以降の説明を続ける。また、携帯タッチパネル部１４は、静電容量方式によるものであってもよいし、抵抗膜方式によるものであってもよいし、光学式によるものであってもよいし、他の方式によるものであってもよいが、本実施形態では静電容量方式によるものであるとする。

携帯側制御部１５は、通常のコンピュータとして構成されており、内部には例えば周知のＣＰＵ、ＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、Ｉ／Ｏ及びこれらの構成を接続するバスライン（いずれも図示せず）等が備えられている。携帯側制御部１５は、携帯側通信部１１、携帯タッチパネル部１４から入力された各種情報に基づき、各種処理を実行する。

例えば、携帯側制御部１５は、アプリケーションプログラム（以下、アプリケーション）を実行し、アプリケーションに従った画面を携帯タッチパネル部１４に表示させるための画面データを生成し、その画面データに従った画面を携帯タッチパネル部１４に表示させる。アプリケーションについては、ＲＯＭに予め記憶されている構成としてもよいし、図示しない通信手段によって携帯電話網等の通信網を介してサーバからダウンロードする構成としてもよい。

また、携帯側制御部１５は、携帯タッチパネル部１４から入力される座標をもとに、携帯タッチパネル部１４に表示中の画面上のどの位置に対して操作が行われたかを判断し、操作が行われた位置（以下、操作位置）に応じた処理を実行する。例えば、操作位置にボタン表示がされている場合には、そのボタン表示に応じた処理を実行する。

他にも、携帯側制御部１５は、携帯タッチパネル部１４から入力される座標をもとに、操作位置の数やユーザからのスライド操作を検知し、画面上の地図や写真等の画像やボタン表示以外のオブジェクトの表示の平行移動やスケール変換（つまり、拡大縮小）や回転等の座標変換を行う処理を実行する。例えば、操作位置に画像やボタン表示以外のオブジェクトの表示がされている場合には、その画像やオブジェクトの座標変換を行う処理を実行する構成とする。

以下では、検知される操作位置の数や検知されるスライド操作をもとに、画面上の画像の表示の平行移動やスケール変換や回転といった座標変換を行う処理（以下、座標変換処理）について説明を行う。まず、操作位置の検知とスライド操作の検知についての説明を行う。

携帯タッチパネル部１４にタッチ操作が行われた場合に、タッチ操作が行われた操作位置の座標が携帯タッチパネル部１４から入力されてくる。例えば、タッチ操作が１箇所のみに行われた場合には１箇所についての座標が入力され、タッチ操作が同時に２箇所で行われた場合には２箇所についての座標が入力されることになる。携帯側制御部１５では、入力されてくる座標の数をもとに、操作位置の数を検知するものとする。

携帯側制御部１５は、携帯側操作検知部１３から継続的に座標の入力が行われている場合には、タッチ操作が継続しているものと判断する。一例としては、座標の入力のない状態が一定時間以上続かない限りはタッチ操作が継続しているものと判断する構成とすればよい。ここで言うところの一定時間とは、任意に設定可能な時間である。

また、携帯側制御部１５は、タッチ操作が継続していると判断している状態、且つ、操作位置の数の増加を検知していない状態において、所定時間内に逐次異なる座標が入力されてくる場合には、携帯タッチパネル部１４にスライド操作が行われているものと検知する。ここで言うところのスライド操作とは、携帯タッチパネル部１４にタッチ操作を行ったまま操作位置をスライドさせる入力方法を示している。また、所定時間とは、任意の設定可能な時間であって、例えば１秒等とすればよい。

さらに、携帯側制御部１５は、タッチ操作が開始された操作位置の座標を始点とし、例えば最も距離の近い座標同士を組み合わせていくことで操作位置の移動の軌跡を検知するとともに、スライド操作の終点を検知する。例えば、タッチ操作が解除されて座標の入力が一定時間以上続かなくなる直前まで検知していた軌跡の終点をスライド操作の終点として検知する構成とすればよい。他にも、軌跡の終点の位置が一定時間以上変化しなかった場合に、その終点をスライド操作の終点として検知する構成としてもよい。なお、操作位置の数が複数であった場合には、最も距離の近い座標同士を組み合わせていくことで複数の操作位置の各々について、操作位置の移動の軌跡を検知することになる。

続いて、座標変換処理について一例を挙げて説明を行う。携帯側制御部１５では、検知した操作位置の数が１箇所だけであって、その操作位置を始点とするスライド操作を検知した場合に、スライド操作の操作方向および操作量に応じた平行移動を画面上の画像の表示に行う。詳しくは、スライド操作の始点の座標を終点の座標へ変換させるのと同様の変換を当該画像の表示に行う。

また、携帯側制御部１５では、検知した操作位置の数が２箇所であって、その両方の操作位置をそれぞれ始点とするスライド操作を検知した場合に、スライド操作による両操作位置の接近離間およびその接近離間による両操作位置間の距離の変化の度合いに応じたスケール変換を画面上の画像の表示に行う。詳しくは、各スライド操作の始点の座標をもとに始点間の距離を算出するとともに、各スライド操作の終点の座標をもとに終点間の距離を算出する。続いて、始点間の距離に対する終点間の距離の比率を算出し、その比率だけ画面上の画像の表示を拡大や縮小する変換を行う。具体的には、当該比率が１よりも大きい場合には画面上の画像の表示を拡大する変換を行うことになり、当該比率が１よりも小さい場合には画面上の画像の表示を縮小する変換を行うことになる。

なお、スケール変換時において、各スライド操作の終点間の中心の座標を画面の中心の座標へ変換するのと同様の変換を画面上の画像の表示に行い、スライド操作の終点間の中心を画面上の中心に平行移動させる構成としてもよい。以下では、携帯側制御部１５において、スケール変換時にこの平行移動も行わせるものとして説明を続ける。

また、携帯側制御部１５では、検知した操作位置の数が２箇所であって、一方の操作位置のみを始点とするスライド操作を検知した場合に、固定されている操作位置に対するスライド操作による操作位置の操作方向および操作量に応じた回転を画面上の画像の表示に行う。詳しくは、固定されている操作位置の座標を中心として、スライド操作の始点の座標を終点の座標へ変換させるのと同様の変換を当該画像の表示に行う。

さらに、携帯側制御部１５は、車両用表示装置２と携帯側通信部１１を介してＢＴ通信を行うことができるように、ペアリング処理を行う。そして、スマートフォン１と車両用表示装置２とのＢＴ通信が確立し、ターミナルモードが使用されることになった場合には、携帯タッチパネル部１４に表示させるために生成した画面データや表示領域情報を携帯側通信部１１から車両用表示装置２へ送信させる。

ここで言うところの画面データは、例えば画素毎の色情報であるものとする。表示領域情報は画面サイズ＝幅（Ｗピクセル）×高さ（Ｈピクセル）や解像度などであるものとする。また、ここで言うところのターミナルモードとは、スマートフォン１の画面を車両用表示装置２で表示させるとともに、車両用表示装置２への操作入力によってスマートフォン１を操作するモードである。ターミナルモードは、例えば携帯タッチパネル部１４へのユーザからの操作入力によって使用の可否を選択可能な構成となっていてもよいし、スマートフォン１と車両用表示装置２とのＢＴ通信が確立してスマートフォン１と車両用表示装置２とが接続された場合に自動的に使用される構成となっていてもよい。

後に詳述するが、前述のターミナルモードを選択中の場合には、携帯側制御部１５は、携帯側通信部１１を介して車両用表示装置２から入力される位置情報や擬似操作情報に従って、携帯タッチパネル部１４に表示中の画面上のどの位置に対して操作が行われたかを判断し、操作が行われた位置に応じた処理を実行する。

図１に戻って、車両用表示装置２は、自動車等の車両に固定、或いは、持ち運び可能に搭載され、車両内で使用されるものであって、画像を表示するものである。車両用表示装置２としては、例えば車両用のディスプレイ装置や車両用ナビゲーション装置や所謂ディスプレイオーディオ等を利用することができる。ディスプレイオーディオとは、表示機能やオーディオ再生機能、スマートフォン１との通信機能といった基礎的な機能のみを実装し、スマートフォン１と連携することで多機能化する車両用表示装置を指している。なお、車両用ナビゲーション装置を利用する場合には、ディスプレイと一体となった車両用ナビゲーション装置を車両用表示装置２として用いてもよいし、ディスプレイを含まない車両用ナビゲーション装置とディスプレイとの組を車両用表示装置２として用いてもよいものとする。本実施形態では、一例として車両用表示装置２はディスプレイオーディオであるものとして以降の説明を行う。

ここで、図３を用いて車両用表示装置２の概略的な構成について説明を行う。なお、便宜上、車両用表示装置２が有している機能に関する構成のうち、本発明の説明に不要なものについては説明を省略する。図３は、車両用表示装置２の概略的な構成を示すブロック図である。図３に示すように車両用表示装置２は、車両側通信部２１、車両側表示部２２と車両側操作検知部２３とからなる車両用タッチパネル部２４、および車両側制御部２５を備えている。

車両側通信部２１は、スマートフォン１との間で例えばＢＴ通信を行う。なお、車両用表示装置２とスマートフォン１との間での通信は、前述したように無線通信によるものであってもよいし、有線通信によるものであってもよい。車両側通信部２１は、携帯側通信部１１から送信された表示領域情報や画面データを受信して車両側制御部２５に入力する。また、車両側通信部２１は、車両側制御部２５からの指示に従って、車両側制御部２５から出力される位置情報や擬似操作情報を携帯側通信部１１に送信する。

車両側表示部２２は、車両側制御部２５の指示に従った画面等を表示するものであって、例えばフルカラー表示が可能なものであり、液晶ディスプレイ、有機ＥＬディスプレイ、プラズマディスプレイ等を用いて構成することができる。車両側操作検知部２３は、車両側表示部２２と一体になったタッチセンサが用いられ、車両側表示部２２の画面上のどの位置にタッチ操作が行われたかを検知し、その操作位置の座標を車両側制御部２５に入力する。

車両用タッチパネル部２４は、車両側表示部２２と車両側操作検知部２３とが一体化したものであって、車両側制御部２５の指示に従って画面を車両側表示部２２に表示させる。また、車両用タッチパネル部２４は、画面に対する操作が行われた場合には、画面上の操作位置を車両側操作検知部２３で検知し、その操作位置の座標を車両側制御部２５に入力する。車両用タッチパネル部２４が請求項の車両用タッチパネルに相当する。

車両用タッチパネル部２４は、画面上の複数の操作位置を同時に検知可能な所謂マルチタッチパネルであるものとして以降の説明を続ける。また、車両用タッチパネル部２４は、例えば静電容量方式によるものであるとする。

車両側制御部２５は、通常のコンピュータとして構成されており、内部には例えば周知のＣＰＵ、ＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、Ｉ／Ｏ及びこれらの構成を接続するバスライン（いずれも図示せず）等が備えられている。車両側制御部２５は、車両側通信部２１、車両側操作検知部２３から入力された各種情報に基づき、各種処理を実行する。

車両側制御部２５は、車両側通信部２１を介してスマートフォン１から送信された画面データ（以下、携帯由来画面データ）の入力を受け付けた場合に、その携帯由来画面データに従った画像（以下、車両側生成画像）を生成して車両側表示部２２に出力し、その携帯由来画面データが示す画面を車両側表示部２２で表示させる。車両側制御部２５は、例えばスマートフォン１から送信された表示領域情報をもとに、携帯由来画面データのサイズや解像度を、車両側表示部２２の画面のサイズや解像度に変換した車両側生成画像を生成するものとする。

なお、本実施形態では、スマートフォン１から送信された表示領域情報をもとに、携帯由来画面データのサイズや解像度を、車両側表示部２２の画面のサイズや解像度に変換する構成を示したが、必ずしもこれに限らない。例えば、携帯由来画面データのサイズや解像度の変換の比率を固定値として予め車両側制御部２５のＲＯＭ等の不揮発性メモリで保持しておき、この固定値に従って変換を行う構成としてもよい。この場合には、スマートフォン１から表示領域情報を送信する構成としなくてもよい。

車両側制御部２５は、車両用タッチパネル部２４から入力される座標をもとに、車両用タッチパネル部２４に表示中の画面上のどの位置に対して操作が行われたかを判断し、操作位置に応じた処理を実行する。車両側制御部２５は、車両用タッチパネル部２４から入力される座標をもとに、操作位置の数の検知やスライド操作の検知やスライド操作の終点の検知を行う。操作位置の数の検知やスライド操作の検知やスライド操作の終点の検知については、携帯側制御部１５と同様にして行うものとする。よって、車両側制御部２５が請求項の変化検知手段に相当する。

また、車両側制御部２５は、ターミナルモードを選択中の場合には、操作位置の数やスライド操作の検知結果に応じた位置情報や擬似操作情報を、車両側通信部２１を介してスマートフォン１に送信する。

例えば、タッチ操作の検知時には、そのタッチ操作の操作位置の座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標を操作対象位置として特定する。操作対象位置の特定方法としては、携帯由来画面データのサイズを変換して車両側生成画像を生成したときの変換と逆の変換を行うことで特定する構成とすればよい。

ここで、図４（ａ）および図４（ｂ）を用いて、操作対象位置の特定の詳細について説明を行う。図４（ａ）は、車両用タッチパネル部２４の画面上のスマホ表示エリアと携帯タッチパネル部１４の画面との比率を説明するための模式図である。なお、スマホ表示エリアとは、車両用タッチパネル部２４の画面上に、携帯タッチパネル部１４の画面に表示する画像を表示するための領域を示している。図４（ｂ）は、車両用タッチパネル部２４の画面上の操作位置の座標と携帯タッチパネル部１４の画面上の座標との対応関係を説明するための模式図である。

ここでは、車両用タッチパネル部２４の画面上のスマホ表示エリアと携帯タッチパネル部１４の画面とのアスペクト比を同一とする場合を例に挙げて説明を行う。例えば、図４（ａ）に示すように、車両用タッチパネル部２４の画面（図中のＡ）上の矩形のスマホ表示エリア（図中の破線の四角）の縦幅（図中のαｙ）は、携帯タッチパネル部１４の矩形の画面（図中のＢ）の縦幅（図中のｙ）のα倍であるものとする。また、車両用タッチパネル部２４の画面上のスマホ表示エリアの横幅（図中のαｘ）は、携帯タッチパネル部１４の画面の横幅（図中のｘ）のα倍であるものとする。αは、携帯タッチパネル部１４の画面の実際の縦幅および横幅に対する車両用タッチパネル部２４のスマホ表示エリアの実際の縦幅および横幅の比率である。

続いて、携帯タッチパネル部１４の画面に対する車両用タッチパネル部２４のスマホ表示エリアの比率が図４（ａ）に示すような比率である場合における、車両用タッチパネル部２４の画面上の操作位置の座標と携帯タッチパネル部１４の画面上の座標との対応関係について図４（ｂ）を用いて説明を行う。

本実施形態では、車両用タッチパネル部２４の矩形の画面の左下隅の座標を（０，０）、左上隅の座標を（０，ｍ２）、右上隅の座標を（ｍ１，ｍ２）、右下隅の座標を（ｍ１，０）として以降の説明を行う。また、車両用タッチパネル部２４の矩形のスマホ表示エリアの左下隅の座標を（β，γ）、右上隅の座標を（Ｑ，Ｓ）とする。βは、スマホ表示エリアの左端線の車両用タッチパネル部２４の画面の左端線からのオフセット値であり、γは、スマホ表示エリアの下端線の車両用タッチパネル部２４の画面の下端線からのオフセット値である。また、携帯タッチパネル部１４の矩形の画面の左下隅の座標を（０，０）、左上隅の座標を（０，ｓ２）、右上隅の座標を（ｓ１，ｓ２）、右下隅の座標を（ｓ１，０）とする。

例えば、車両用タッチパネル部２４のスマホ表示エリア上の点（ｍａ，ｍｂ）がタッチ操作されたことを検知した場合には、前述の操作対象位置の座標を（（ｍａ−β）／α，（ｍｂ−γ）／α）と特定する。つまり、スマホ表示エリア上の点を、スマホ表示エリアの車両用タッチパネル部２４の画面に対するオフセット値分だけずらすとともに、携帯タッチパネル部１４の画面に対するスマホ表示エリアの比率分だけ縮小した点を操作対象位置として特定する。

続いて、図５を用いて、操作対象位置の特定を可能にするための初期設定の処理についての説明を行う。図５は、操作対象位置の特定を可能にするための初期設定の処理の一例を示すシーケンス図である。上記初期設定の処理は、例えばスマートフォン１と車両用表示装置２とが接続され、ターミナルモードの使用が開始されたときに開始されるものとする。

まず、スマートフォン１から車両用表示装置２に表示領域情報を送信する（ｔ１）。例えば、携帯タッチパネル部１４の画面の解像度が８００×４８０ドットであった場合には、表示領域情報として、解像度８００×４８０ドットの情報を送信する。なお、携帯タッチパネル部１４の画面の解像度が８００×４８０ドットの場合には、画面上の（８００、０）の座標は図４（ｂ）の（ｓ１，０）の座標に対応し、（０，４８０）の座標は図４（ｂ）の（０，ｓ２）の座標に対応する。

表示領域情報を受信した車両用表示装置２（詳しくは車両側制御部２５）では、車両用タッチパネル部２４のスマホ表示エリアを設定する（ｔ２）。スマホ表示エリアは、スマホ表示エリアに表示されるスマートフォン１の画面をなるべく見易く、且つ、操作し易くなるサイズとなるように設定する。例えば、スマートフォン１の解像度ごとに上記サイズが予め定められており、スマートフォン１の解像度に応じて設定する構成としてもよい。なお、車両用表示装置２とスマートフォン１との解像度が同一（例えば、ＷＶＧＡ：８００×４８０）であり、携帯タッチパネル部１４の画面を車両用タッチパネル部２４の画面全体で表示するという場合であっても、ドットピッチサイズが異なる場合には、表示サイズは異なる。

続いて、スマートフォン１から車両用表示装置２に、スマートフォン１の画面の座標情報を送信する（ｔ３）。スマートフォン１の画面の座標情報は、携帯タッチパネル部１４の画面の４隅の座標を推定可能な情報であればよく、例えば携帯タッチパネル部１４の画面の左下隅の座標（０，０）および右上隅の座標（ｓ１，ｓ２）であってもよいし、右上隅の座標（ｓ１，ｓ２）のみであってもよい。

スマートフォン１の画面の座標情報を受信した車両用表示装置２（詳しくは車両側制御部２５）では、操作対象位置の特定を行うための換算係数α、β、γを算出する（ｔ４）。換算係数α、β、γを算出するために、車両側制御部２５は、スマホ表示エリアの左下隅と右上隅とに対応する車両用タッチパネル部２４の画面上の座標を取得する。本実施形態の例では、左下隅の座標（β，γ）及び右上隅の座標（Ｑ，Ｓ）を取得する。

本実施形態の例では、左下隅の座標（β，γ）のｘ座標の値βを換算係数βと算出し、左下隅の座標（β，γ）のｙ座標の値γを換算係数γと算出する。また、スマホ表示エリアの右上隅の座標（Ｑ，Ｓ）とスマートフォン１の画面の右上隅の座標（ｓ１，ｓ２）とをもとに、（Q−β）／ｓ１＝（Ｓ−γ）／ｓ２＝αの式を演算することで換算係数αを算出する。換算係数α、β、γを算出したところで初期設定の処理は終了する（ｔ５）。

なお、初期設定の処理が終了した後は、スマートフォン１から車両用表示装置２に、携帯タッチパネル部１４に表示させるために生成した画面データを送信する（ｔ６）。上記画面データ（つまり、前述の携帯由来画面データ）を受信した車両用表示装置２では、その携帯由来画面データに従った車両側生成画像を生成して、その携帯由来画面データが示す画面をスマホ表示エリアに表示させることになる。

ターミナルモードを選択中の場合には、通常操作モードと簡易操作モードとの２種類の操作モードがあるものとする。通常操作モードは、車両用タッチパネル部２４の画面に対する操作量の大小に応じた量だけ、携帯タッチパネル部１４の画面上の画像の表示の座標変換を行うモードである。これは、車両用表示装置２側で特定した前述の操作対象位置（つまり、車両用タッチパネル部２４の画面上の操作位置の座標に対応する携帯タッチパネル部１４の画面上の座標）をスマートフォン１に逐次送信することで実現する。

なお、通常操作モードでは、操作位置が車両用タッチパネル部２４のスマホ表示エリア内である限り、特定した操作対象位置をスマートフォン１へ送信するものとする。つまり、本実施形態の例では、０≦ｍａ≦ｍ１、および０≦ｍｂ≦ｍ２であって、且つ、β≦ｍａ≦Ｑ、およびγ≦ｍｂ≦Ｓである場合に、特定した操作対象位置をスマートフォン１へ送信する。

また、操作位置が車両用タッチパネル部２４の画面上の、スマホ表示エリア外の領域であった場合には、スマホ表示エリア外処理を行う。スマホ表示エリア外処理では、例えばスマホ表示エリア外の領域に割り当てられている車両用表示装置２側の動作を行わせる構成とすればよい。また、上記領域がスマートフォン１のハードスイッチの動作指示に対して割り当てられている場合は、その領域を操作したことを示す位置情報をスマートフォン１に送信する構成とすればよい。

ここで、図６を用いて、通常操作モードにおける車両用表示装置２での処理の流れについての説明を行う。図６は、通常操作モードにおける車両側制御部２５での処理のフローの一例を示すフローチャートである。図６のフローは、通常操作モードが開始されたときに開始されるものとする。なお、前述の初期設定の処理は完了しているものとして説明を行う。

まず、ステップＳ１０１では、車両用タッチパネル部２４の画面に対するタッチ操作の検知を行うとともに、タッチ操作の操作位置の数の検知を行う。そして、当該タッチ操作を検知した場合（ステップＳ１０１でＹＥＳ）には、ステップＳ１０２に移る。本実施形態の例では、座標（ｍａ，ｍｂ）で示される１箇所がタッチ操作されたものとして以降の説明を続ける。また、当該タッチ操作を検知しなかった場合（ステップＳ１０１でＮＯ）には、ステップＳ１０１に戻ってフローを繰り返す。

ステップＳ１０２では、タッチ操作の操作位置がスマホ表示エリア内であるか否かを判定する。本実施形態の例では、検知した操作位置の座標が、０≦ｍａ≦ｍ１、および０≦ｍｂ≦ｍ２であって、且つ、β≦ｍａ≦Ｑ、およびγ≦ｍｂ≦Ｓである場合に、スマホ表示エリア内であると判定する。そして、スマホ表示エリア内であると判定した場合（ステップＳ１０２でＹＥＳ）には、ステップＳ１０３に移る。また、スマホ表示エリア内でないと判定した場合（ステップＳ１０２でＮＯ）には、ステップＳ１０７に移る。

ステップＳ１０３では、操作対象位置（つまり、車両用タッチパネル部２４の画面上の操作位置の座標に対応する携帯タッチパネル部１４の画面上の座標）を特定する。操作対象位置の特定は、前述の初期設定で算出した換算係数α、β、γを用いて、車両用タッチパネル部２４の画面上の操作位置の座標を携帯タッチパネル部１４の画面上の座標位置に換算することで特定する。詳しくは、座標（ｍａ，ｍｂ）を座標（（ｍａ−β）／α，（ｍｂ−γ）／α）に換算することで操作対象位置を特定する。

ステップＳ１０４では、操作対象位置として特定した座標の情報を位置情報として、車両側通信部２１からスマートフォン１に送信し、ステップＳ１０５に移る。なお、操作位置を複数箇所（例えば２箇所とする）検知していた場合には、この２箇所の操作位置の座標にそれぞれ対応する操作対象位置の座標が位置情報として送信されることになる。

ステップＳ１０５では、タッチ操作が終了した（つまり、タッチオフ）か否かを判定する。例えば、車両用タッチパネル部２４でタッチ操作を検知しなくなったときにタッチオフと判定する構成とすればよい。そして、タッチオフと判定した場合（ステップＳ１０５でＹＥＳ）には、ステップＳ１０６に移る。また、タッチオフでないと判定した場合（ステップＳ１０５でＮＯ）には、ステップＳ１０２に戻ってフローを繰り返す。

なお、タッチ操作が継続していると車両側制御部２５で判断される場合、つまり、タッチ操作が終了されることなく、タッチ操作に継続して車両用タッチパネル部２４にスライド操作が行われたことを車両側制御部２５が検知した場合には、継続しているタッチ操作の操作位置についての操作対象位置を定期的に特定する。そして、特定した操作対象位置の座標をスマートフォン１に逐次送信する。スライド操作時に定期的に行われる操作対象位置の特定の時間間隔は、任意に設定可能な値である。例えば、上記時間間隔は、表示や反応速度の自然さと処理能力とを考慮して予め設定される構成とすればよい。時間間隔は、例えば１００ｍｓや１５ｆｐｓ（Frames Per Second）とすればよい。

ステップＳ１０６では、タッチオフした操作位置についての操作対象位置を特定し、特定した操作対象位置の座標をタッチ操作の終点の位置情報（つまり、オフデータ）として、タッチ操作が終了したことを示すオフ信号とともに、車両側通信部２１からスマートフォン１に送信する。そして、ステップＳ１０１に戻ってフローを繰り返す。スライド操作が行われていた場合には、タッチオフした操作位置がスライド操作の終点にあたる。また、ステップＳ１０７では、前述のスマホ表示エリア外処理を行い、ステップＳ１０１に戻ってフローを繰り返す。

一方、簡易操作モードは、車両用タッチパネル部２４の画面に対する操作量の大小に関わらず、設定された定量分だけ、携帯タッチパネル部１４の画面上の画像の表示の座標変換を行うモードである。

例えば、車両用表示装置２を搭載した車両が停車中である場合には通常操作モードとする一方、当該車両が走行中である場合には自動的に簡易操作モードに切り替える構成としてもよい。車両が停車中か走行中かについては、図示しない車速センサの信号をもとに、車両が所定の速度以上である場合に走行中、車両が所定の速度以上でない場合に停車中と車両側制御部２５で判定する構成とすればよい。ここで言うところの所定の速度としては、車速センサで検出可能な最低速度（例えば５ｋｍ／ｈなど）を設定する構成とすればよい。また、ターミナルモードを選択中は、常に簡易操作モードとする構成としてもよい。

また、ユーザによる通常操作モードと簡易操作モードとの切り替え設定に応じて、通常操作モードと簡易操作モードとを切り替える構成としてもよい。ここで、図７を用いて、通常操作モードと簡易操作モードとの切り替えの処理の一例についての説明を行う。図７は、車両側制御部２５での通常操作モードと簡易操作モードとの切り替えの処理のフローの一例を示すフローチャートである。図７のフローは、例えばターミナルモードの使用が開始されたときに開始され、ターミナルモードの使用が終了したときに終了するものとする。

まず、ステップＳ２０１では、車両用表示装置２を搭載した車両が停車中か走行中かを判定する。車両が停車中か走行中かについては、前述したように、車両が所定の速度以上である場合に走行中と判定し、車両が所定の速度以上でない場合に停車中であると判定する構成とすればよい。そして、車両が停車中と判定した場合（ステップＳ２０１でＹＥＳ）には、ステップＳ２０２に移る。また、車両が走行中と判定した場合（ステップＳ２０１でＮＯ）には、ステップＳ２０４に移る。

ステップＳ２０２では、簡易操作モード設定がオンになっているか否かを判定する。停車時の簡易操作モード設定は、例えば車両用タッチパネル部２４を介してユーザによりオンとオフとの設定が行われるものとし、オンの設定が予め行われていた場合に、簡易操作モード設定がオンになっていると判定する構成とすればよい。また、オフの設定が予め行われていた場合には、簡易操作モード設定がオフになっていると判定する構成とすればよい。

そして、簡易操作モード設定がオンになっていると判定した場合（ステップＳ２０２でＹＥＳ）には、ステップＳ２０４に移る。また、簡易操作モード設定がオフになっていると判定した場合（ステップＳ２０２でＮＯ）には、ステップＳ２０３に移る。ステップＳ２０３では、通常操作モードを採用し、ステップＳ２０１に戻ってフローを繰り返す。また、ステップＳ２０４では、簡易操作モードを採用し、ステップＳ２０１に戻ってフローを繰り返す。

また、簡易操作モードでは、タッチ操作に継続して車両用タッチパネル部２４にスライド操作が行われたことを車両側制御部２５が検知した場合には、操作位置の数およびスライド操作の始点・終点の座標をもとに、画面上の表示の座標変換の種類および方向を決定する。よって、車両側制御部２５が請求項の変換態様決定手段に相当する。なお、スライド操作の始点については、スライド操作の開始時点の操作位置を始点とすればよい。座標変換の種類および方向の決定の詳細については後述する。

車両側制御部２５は、座標変換の種類および方向の決定を行った場合には、決定した種類および方向の座標変換をスライド操作の始点の座標に定量分（つまり、一定量）行った座標（以下、変換後座標）を特定する。ここで言うところの一定量とは、固定値であって任意に設定可能な量である。そして、変換後座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標を特定し、特定した座標の情報を生成して、車両側通信部２１からスマートフォン１に送信する。本実施形態では、特定した座標の情報を擬似操作情報と呼ぶものとする。よって、車両側制御部２５が請求項の擬似操作情報生成手段に相当する。なお、上述の一定量は、座標変換の種類ごとにそれぞれ異なった固定値が設定されている構成としてもよいし、座標変換の種類ごとにそれぞれ異なった固定値をユーザが設定可能な構成としてもよい。

ここで、図８を用いて、簡易操作モードにおける座標変換量の設定についての説明を行う。図８は、車両側制御部２５での簡易操作モードにおける各種設定処理のフローの一例を示すフローチャートである。図８のフローは、例えば車両用タッチパネル部２４を介してユーザにより、簡易操作モード時の設定を行うメニューが選択された場合に開始されるものとする。

まず、ステップＳ３０１では、停車時の簡易操作モード設定（以下、単に簡易操作モード設定）を行うための設定画面を車両用タッチパネル部２４に表示させ、車両用タッチパネル部２４を介してユーザから行われる入力に応じて、簡易操作モード設定を行う。例えば、簡易操作モード設定をオンにすることを選択する入力が行われた場合には、簡易操作モード設定をオンにし、簡易操作モード設定をオフにすることを選択する入力が行われた場合には、簡易操作モード設定をオフにする。そして、ステップＳ３０２に移る。

ステップＳ３０２では、座標変換として拡大や縮小を行う場合の変換量（以下、拡大縮小量）Ｚ１の設定を行うための設定画面を車両用タッチパネル部２４に表示させ、車両用タッチパネル部２４を介してユーザから行われる入力に応じて、拡大縮小量Ｚ１の設定を行う。そして、ステップＳ３０３に移る。例えば、拡大縮小量Ｚ１は０．１〜１．０までの値を設定可能であるものとする。

ステップＳ３０２では、座標変換として平行移動を行う場合の変換量（以下、移動量）Ｍ１の設定を行うための設定画面を車両用タッチパネル部２４に表示させ、車両用タッチパネル部２４を介してユーザから行われる入力に応じて、移動量Ｍ１の設定を行う。そして、フローを終了する。例えば、移動量Ｍ１は０．１〜１．０までの値を設定可能であるものとする。よって、車両側制御部２５が請求項の設定手段に相当する。

なお、本実施形態では、簡易操作モード設定、拡大縮小量Ｚ１の設定、移動量Ｍ１の設定の順に処理を行う構成を示したが、必ずしもこれに限らず、これ以外の順番で処理を行う構成としてもよい。さらに、座標変換として回転を行う場合の変換量（以下、回転量）の設定を行うための設定画面を車両用タッチパネル部２４に表示させ、車両用タッチパネル部２４を介してユーザから行われる入力に応じて、回転量の設定も行う構成としてもよい。

また、変換後座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標の特定は、操作対象位置の特定と同様にして、携帯由来画面データのサイズを変換して車両側生成画像を生成したときの変換と逆の変換を行うことで特定する構成とすればよい。つまり、前述の換算係数α、β、γを用いて、車両用タッチパネル部２４の画面上の変換後座標を携帯タッチパネル部１４の画面上の座標位置に換算することで操作対象位置を特定すればよい。詳しくは、変換後座標が（ｍａ４，ｍｂ４）であった場合には、座標（（ｍａ４−β）／α，（ｍｂ４−γ）／α）に換算する。

例えば２箇所の操作位置の両方についてスライド操作を検知していた場合には、各スライド操作の終点の座標に対応する擬似操作情報が送信される。また、２箇所の操作位置の一方のみについてスライド操作を検知していた場合には、スライド操作の終点の座標に対応する擬似操作情報だけでなく、固定されている操作位置の座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標の情報も擬似操作情報として送信されるものとする。

本実施形態の擬似操作情報は、車両側制御部２５で決定した種類および方向の座標変換を画面上の表示に一定量行うためのスライド操作が携帯タッチパネル部１４に行われたと仮定した場合の携帯タッチパネル部１４でのスライド操作の終点の座標の情報に相当する。従って、擬似操作情報を受信したスマートフォン１の携帯側制御部１５では、擬似操作情報が示す座標を終点とするスライド操作が行われたものと判断して、そのスライド操作に応じた座標変換を一定量だけ携帯タッチパネル部１４の画面上の画像の表示に行うことになる。そして、一定量だけの座標変換が行われた画面が車両用タッチパネル部２４の画面にも反映されることになる。

次に、図９を用いて、ターミナルモード使用中における車両用表示装置２およびスマートフォン１での画面上の画像の表示の座標変換の処理の流れの一例についての説明を行う。図９は、ターミナルモード使用中における車両側制御部２５での処理のフローの一例を示すフローチャートである。図９のフローは、スマートフォン１から送信された携帯由来画面データの入力を、車両側通信部２１を介して受け付け、この携帯由来画面データが示す画面を車両側表示部２２に表示させたときに開始されるものとする。

まず、ステップＳ１では、前述のステップＳ１０１と同様にして、車両用タッチパネル部２４の画面に対するタッチ操作の検知を行うとともに、タッチ操作の操作位置の数の検知を行う。そして、当該タッチ操作を検知した場合（ステップＳ１でＹＥＳ）には、ステップＳ２に移る。また、当該タッチ操作を検知しなかった場合（ステップＳ１でＮＯ）には、ステップＳ１に戻ってフローを繰り返す。

ステップＳ２では、前述のステップＳ１０２と同様にして、タッチ操作の操作位置がスマホ表示エリア内であるか否かを判定する。そして、スマホ表示エリア内であると判定した場合（ステップＳ２でＹＥＳ）には、ステップＳ３に移る。また、スマホ表示エリア内でないと判定した場合（ステップＳ２でＮＯ）には、ステップＳ１８に移る。ステップＳ３では、前述のステップＳ１０３と同様にして、換算係数α、β、γを用いて座標（ｍａ，ｍｂ）を座標（（ｍａ−β）／α，（ｍｂ−γ）／α）に換算することで操作対象位置を特定する。そして、ステップＳ４に移る。

ステップＳ４では、ステップＳ１０４と同様にして、操作対象位置として特定した座標の情報を車両側通信部２１からスマートフォン１に送信する。そして、ステップＳ５に移る。ステップＳ４では、タッチ操作の操作位置を１箇所だけ検知していた場合には、その１箇所に対応する位置情報を送信し、タッチ操作の操作位置を２箇所検知していた場合には、その２箇所に対応する位置情報をそれぞれ送信することになる。

ステップＳ５では、前述のステップＳ１０５と同様にして、タッチ操作が終了した（つまり、タッチオフ）か否かを判定する。そして、タッチオフと判定した場合（ステップＳ５でＹＥＳ）には、ステップＳ６に移る。また、タッチオフでないと判定した場合（ステップＳ５でＮＯ）には、ステップＳ１に戻ってフローを繰り返す。

ステップＳ６では、マルチタッチか否かを判定する。詳しくは、ステップＳ１で検知したタッチ操作の操作位置の数が複数であった場合には、マルチタッチと判定する。一方、ステップＳ１で検知したタッチ操作の操作位置の数が１箇所であった場合には、シングルタッチと判定する。

本実施形態では、一例として、ステップＳ１で検知したタッチ操作の操作位置の数が２箇所であった場合にマルチタッチと判定するものとして以降の説明を続ける。そして、マルチタッチであると判定した場合（ステップＳ６でＹＥＳ）には、ステップＳ７に移る。また、シングルタッチであると判定した場合（ステップＳ６でＮＯ）には、ステップＳ１２に移る。

ステップＳ７では、ステップＳ１で検知したタッチ操作後にタッチ操作が終了されることなく継続したスライド操作の検知を行う。そして、当該スライド操作を検知した場合（ステップＳ７でＹＥＳ）には、ステップＳ８に移る。また、当該スライド操作を検知しなかった場合（ステップＳ７でＮＯ）には、ステップＳ３に戻って操作位置についての操作対象位置を特定し、フローを繰り返す。

ステップＳ８では、拡大縮小時座標点算出処理を行って、ステップＳ９に移る。拡大縮小時座標点算出処理では、検知したスライド操作のスライド方向をまず決定する。スライド方向は、ステップＳ１で検知した各タッチ操作の操作位置（以下、初期ポイント）の座標と、各タッチ操作に続くスライド操作によって変化した操作位置の座標とから決定する構成とすればよい。スライド操作によって変化した操作位置の座標は、タッチ操作の操作位置により近い座標を選択して用いる構成とすればよい。

なお、スライド操作によって変化した操作位置の座標は、タッチオフ直前の操作位置の座標ではなく、初期ポイントからスライド操作によって最初に変化した操作位置の座標を用いるものとする。以降についても同様とする。

続いて、拡大縮小時座標点算出処理では、決定したスライド方向をもとに、２箇所の初期ポイントからお互いに離れる方向にそれぞれスライド操作が行われたと判定した場合に、拡大時用の処理を行う。なお、２箇所の初期ポイントからお互いに離れる方向にそれぞれスライド操作が行われたことは、例えば２箇所の初期ポイント間の距離よりもスライド操作によって変化した２種類の操作位置間の距離の方が大きいことから判定する構成とすればよい。以下では図１０（ａ）および図１０（ｂ）を用いて、拡大時用の処理についての説明を行う。

図１０（ａ）は、拡大時用のスライド操作が行われた場合について説明するための模式図である。なお、図中の破線の四角で示した領域がスマホ表示エリアを表しており、図中の矢印が実際のスライド操作のスライド方向を示している。また、図中のＣ、Ｄが初期ポイントを表しており、Ｅ、Ｆがスライド操作によって変化した操作位置を表している。なお、図中に示した初期ポイント等の座標点は、説明のために便宜的に示すものであって、実際には表示されない。図１０（ａ）に示すように、２箇所の初期ポイント（図１０（ａ）のＣ、Ｄ参照）からお互いに離れる方向にそれぞれスライド操作が行われたと判定した場合に、拡大時用の処理を行う。

まず、拡大時用の処理では、初期ポイントからスマホ表示エリアの端部までの距離（以下、表示エリア端距離）を算出する。詳しくは、決定したスライド方向に向けて、初期ポイントの座標からスマホ表示エリアの端部まで直線を引いた場合の当該直線の距離を算出する。２箇所のマルチタッチの場合には、２箇所の初期ポイントのそれぞれについて、表示エリア端距離を算出する。

そして、算出した表示エリア端距離のうちの長い方の距離に対して、予め設定しておいた拡大縮小量Ｚ１を乗算し、簡易操作モードにおける変換量を算出する。例えば、Ｚ１=０．５の場合には、表示エリア端距離に０．５を乗算することで変換量を算出する。

変換量を算出した後は、算出した変換量と決定したスライド方向と初期ポイントの座標とから、簡易入力用の終点座標（つまり、前述の変換後座標）を算出する。ここで、簡易入力用の終点座標の算出について図１０（ｂ）を用いて説明を行う。図１０（ｂ）は、簡易入力用の終点座標の算出についての説明を行うための模式図である。なお、図中の破線の四角で示した領域がスマホ表示エリアを表しており、図中の矢印が表示エリア端距離を表している。また、初期ポイントはＣstart、Ｄstartの２箇所であり、Ｃstartについての表示エリア端距離の方がＤstartについての表示エリア端距離よりも長いものとする。

Ｃstartについての表示エリア端距離の方が、Ｄstartについての表示エリア端距離よりも長いので、Ｃstartについての表示エリア端距離にＺ１（例えば０．５とする）を乗算した値を変換量として算出する。そして、Ｃstartについて決定したスライド方向に向けて、Ｃstartの座標から上記変換量にあたる距離だけ直線を延ばした位置の座標を算出することで、Ｃstartについての簡易入力用の終点座標（Ｃendとする）を算出する。また、Ｄstartについて決定したスライド方向に向けて、Ｄstartの座標から上記変換量にあたる距離だけ直線を延ばした位置の座標を算出することで、Ｄstartについての簡易入力用の終点座標（Ｄendとする）を算出する。

また、拡大縮小時座標点算出処理では、決定したスライド方向をもとに、２箇所の初期ポイントからお互いに近付く方向にそれぞれスライド操作が行われたと判定した場合には、縮小時用の処理を行う。以下では縮小時用の処理についての説明を行う。なお、２箇所の初期ポイントからお互いに近付く方向にそれぞれスライド操作が行われたことは、例えば２箇所の初期ポイント間の距離よりもスライド操作によって変化した２種類の操作位置間の距離の方が小さいことから判定する構成とすればよい。以下では図１１（ａ）および図１１（ｂ）を用いて、縮小時用の処理についての説明を行う。

図１１（ａ）は、縮小時用のスライド操作が行われた場合について説明するための模式図である。なお、図中の破線の四角で示した領域がスマホ表示エリアを表しており、図中の矢印が実際のスライド操作のスライド方向を示している。また、図中のＣ、Ｄが初期ポイントを表しており、Ｅ、Ｆがスライド操作によって変化した操作位置を表している。なお、図中に示した初期ポイント等の座標点は、説明のために便宜的に示すものであって、実際には表示されない。図１１（ａ）に示すように、２箇所の初期ポイント（図１１（ａ）のＣ、Ｄ参照）からお互いに近付く方向にそれぞれスライド操作が行われたと判定した場合に、縮小時用の処理を行う。

まず、縮小時用の処理では、２箇所の初期ポイントの座標をもとに両初期ポイント間の距離（以下、初期ポイント間距離）を算出する。そして、算出した初期ポイント間距離の半分の距離に対して、予め設定しておいた拡大縮小量Ｚ１を乗算し、簡易操作モードにおける変換量を算出する。例えば、Ｚ１=０．５の場合には、初期ポイント間距離の半分量に０．５を乗算することで変換量を算出する。

変換量を算出した後は、算出した変換量と決定したスライド方向と初期ポイントの座標とから、簡易入力用の終点座標（つまり、前述の変換後座標）を算出する。ここで、簡易入力用の終点座標の算出について図１１（ｂ）を用いて説明を行う。図１１（ｂ）は、簡易入力用の終点座標の算出についての説明を行うための模式図である。なお、図中の破線の四角で示した領域がスマホ表示エリアを表しており、図中の矢印が初期ポイント間距離を表している。また、初期ポイントはＣstart、Ｄstartの２箇所であるものとする。

ＣstartおよびＤstartのいずれについても、初期ポイント間距離にＺ１（例えば０．５とする）を乗算した値が変換量として算出される。そして、Ｃstartについての決定したスライド方向に向けて、Ｃstartの座標から上記変換量にあたる距離だけ直線を延ばした位置の座標を算出することで、Ｃstartについての簡易入力用の終点座標（Ｃendとする）を算出する。また、Ｄstartについての決定したスライド方向に向けて、Ｄstartの座標から上記変換量にあたる距離だけ直線を延ばした位置の座標を算出することで、Ｄstartについての簡易入力用の終点座標（Ｄendとする）を算出する。

図９に戻って、ステップＳ９では、拡大縮小時操作対象位置特定処理を行って、ステップＳ１０に移る。拡大縮小時操作対象位置特定処理では、まず初期ポイントから簡易入力用の終点座標までの擬似スライドデータを生成する。ここで言うところの擬似スライドデータとは、初期ポイントと簡易入力用の終点座標とを結ぶ線上に挿入される仮想的な操作位置（以下、仮想変化座標点）の座標である。擬似スライドデータは、例えば初期ポイントと仮想変化座標点と簡易入力用の終点座標とが等間隔に並ぶように生成する。

擬似スライドデータは、仮想変化座標点がスマホ表示エリアを越えることになる場合には生成しないものとする。また、仮想変化座標点がスマホ表示エリアを越えることになる場合には、例えば初期ポイントと簡易入力用の終点座標とを結ぶ線がスマホ表示エリアの端部に交わる点の座標を新たな簡易入力用の終点座標に決定し直す構成としてもよい。

なお、擬似スライドデータの数は、拡大縮小量Ｚ１の値が大きいほど多い数に決定される構成とすればよい。他にも、例えば初期ポイントから簡易入力用の終点座標まで距離が大きくなるほど多い数に決定される構成としてもよいし、予め設定された固定数に決定される構成としてもよい。本実施形態では、擬似スライドデータは各初期ポイントに対して２つずつであるものとして以降の説明を続ける。

続いて、拡大縮小時操作対象位置特定処理では、初期ポイント、擬似スライドデータ、および簡易入力用の終点座標について、操作対象位置（つまり、車両用タッチパネル部２４の画面上の操作位置の座標に対応する携帯タッチパネル部１４の画面上の座標）を特定する。詳しくは、前述の初期設定で算出した換算係数α、β、γを用いて、初期ポイント、擬似スライドデータ、および簡易入力用の終点座標を換算することで特定する。

ここで、図１０（ｃ）および図１１（ｃ）を用いて、拡大時用の処理と縮小時用の処理とのそれぞれにおける操作対象位置の特定についての説明を行う。まず、図１０（ｃ）を用いて、拡大時用の処理における操作対象位置の特定について説明を行う。図１０（ｃ）は、拡大時用の処理における操作対象位置の特定について説明を行うための模式図である。

なお、図１０（ｃ）中のＣ１、Ｄ１が初期ポイント(つまり、前述のＣstart、Ｄstartに該当)を表しており、Ｃ４、Ｄ４が簡易入力用の終点座標（つまり、前述のＣend、Ｄendに該当）を表している。また、Ｃ２、Ｃ３、Ｄ２、Ｄ３が仮想変化座標点を表している。さらに、Ｃ１については、スライド方向（図中の破線で示す矢印参照）にＣ１、Ｃ２、Ｃ３、Ｃ４の順に並んでおり、Ｄ１については、スライド方向（図中の破線で示す矢印参照）にＤ１、Ｄ２、Ｄ３、Ｄ４の順に並んでいるものとする。

またＣ１の座標が（ｍａ１，ｍｂ１）、以下、Ｃ２（ｍａ２，ｍｂ２）、Ｃ３（ｍａ３，ｍｂ３）、Ｃ４（ｍａ４，ｍｂ４）、Ｄ１（ｍａ５，ｍｂ５）、Ｄ２（ｍａ６，ｍｂ６）、Ｄ３（ｍａ７，ｍｂ７）、Ｄ４（ｍａ８，ｍｂ８）であるとして説明を行う。

この場合、Ｃ１〜Ｃ４の操作対象位置は、前述したように換算係数α、β、γを用いて換算を行うことで、（（ｍａ１−β）／α，（ｍｂ１−γ）／α）、（（ｍａ２−β）／α，（ｍｂ２−γ）／α）、（（ｍａ３−β）／α，（ｍｂ３−γ）／α）、（（ｍａ４−β）／α，（ｍｂ４−γ）／α）と特定される。また、Ｄ１〜Ｄ４の操作対象位置は、（（ｍａ５−β）／α，（ｍｂ５−γ）／α）、（（ｍａ６−β）／α，（ｍｂ６−γ）／α）、（（ｍａ７−β）／α，（ｍｂ７−γ）／α）、（（ｍａ８−β）／α，（ｍｂ８−γ）／α）と特定される。

続いて、図１１（ｃ）を用いて、縮小時用の処理における操作対象位置の特定について説明を行う。図１１（ｃ）は、縮小時用の処理における操作対象位置の特定について説明を行うための模式図である。なお、図１１（ｃ）中のＣ４、Ｄ４が初期ポイント(つまり、前述のＣstart、Ｄstartに該当)を表しており、Ｃ１、Ｄ１が簡易入力用の終点座標（つまり、前述のＣend、Ｄendに該当）を表している。また、Ｃ３、Ｃ２、Ｄ３、Ｄ２が仮想変化座標点を表している。さらに、Ｃ４については、スライド方向（図中の破線で示す矢印参照）にＣ４、Ｃ３、Ｃ２、Ｃ１の順に並んでおり、Ｄ４については、スライド方向（図中の破線で示す矢印参照）にＤ４、Ｄ３、Ｄ２、Ｄ１の順に並んでいるものとする。

またＣ４の座標が（ｍａ４，ｍｂ４）、以下、Ｃ３（ｍａ３，ｍｂ３）、Ｃ２（ｍａ２，ｍｂ２）、Ｃ１（ｍａ１，ｍｂ１）、Ｄ４（ｍａ８，ｍｂ８）、Ｄ３（ｍａ７，ｍｂ７）、Ｄ２（ｍａ６，ｍｂ６）、Ｄ１（ｍａ５，ｍｂ５）であるとして説明を行う。

この場合、Ｃ４〜Ｃ１の操作対象位置は、前述したように換算係数α、β、γを用いて換算を行うことで、（（ｍａ４−β）／α，（ｍｂ４−γ）／α）、（（ｍａ３−β）／α，（ｍｂ３−γ）／α）、（（ｍａ２−β）／α，（ｍｂ２−γ）／α）、（（ｍａ１−β）／α，（ｍｂ１−γ）／α）と特定される。また、Ｄ４〜Ｄ１の操作対象位置は、（（ｍａ８−β）／α，（ｍｂ８−γ）／α）、（（ｍａ７−β）／α，（ｍｂ７−γ）／α）、（（ｍａ６−β）／α，（ｍｂ６−γ）／α）、（（ｍａ５−β）／α，（ｍｂ５−γ）／α）と特定される。

図９に戻って、ステップＳ１０では、拡大縮小時操作対象位置特定処理で特定した座標を擬似操作情報として、車両側通信部２１からスマートフォン１に送信し、ステップＳ１１に移る。詳しくは、初期ポイントについての擬似操作情報、仮想変化座標点についての擬似操作情報、簡易入力用の終点座標についての擬似操作情報の順に所定の時間間隔をおいて逐次送信する。ここで言うところの所定の時間間隔とは、任意に設定可能な時間間隔であって、例えばスマートフォン１での表示や反応速度の自然さと処理能力とを考慮して予め設定される構成とすればよい。時間間隔は、例えば１００ｍｓや１５ｆｐｓ（Frames Per Second）とすればよい。

なお、初期ポイントについての操作対象位置が請求項の操作開始点に相当し、仮想変化座標点についての擬似操作情報が請求項の操作中間点の座標に相当し、簡易入力用の終点座標についての擬似操作情報が請求項の操作終点の座標に相当する。

前述した拡大時用の処理における例では、Ｃ１についての擬似操作情報である（（ｍａ１−β）／α，（ｍｂ１−γ）／α）と、Ｄ１についての擬似操作情報である（（ｍａ５−β）／α，（ｍｂ５−γ）／α）と、タッチ操作が継続されていることを示すオン信号とを最初にスマートフォン１に送信する。続いて、所定の時間間隔をおいて、Ｃ２についての擬似操作情報である（（ｍａ２−β）／α，（ｍｂ２−γ）／α）と、Ｄ２についての擬似操作情報である（（ｍａ６−β）／α，（ｍｂ６−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。

さらに、所定の時間間隔をおいて、Ｃ３についての擬似操作情報である（（ｍａ３−β）／α，（ｍｂ３−γ）／α）と、Ｄ３についての擬似操作情報である（（ｍａ７−β）／α，（ｍｂ７−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。そして最後に、所定の時間間隔をおいて、Ｃ４についての擬似操作情報である（（ｍａ４−β）／α，（ｍｂ４−γ）／α）と、Ｄ４についての擬似操作情報である（（ｍａ８−β）／α，（ｍｂ８−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。

一方、前述した縮小時用の処理における例では、Ｃ４についての擬似操作情報である（（ｍａ４−β）／α，（ｍｂ４−γ）／α）と、Ｄ４についての擬似操作情報である（（ｍａ８−β）／α，（ｍｂ８−γ）／α）と、タッチ操作が継続されていることを示すオン信号とを最初にスマートフォン１に送信する。続いて、所定の時間間隔をおいて、Ｃ３についての擬似操作情報である（（ｍａ３−β）／α，（ｍｂ３−γ）／α）と、Ｄ３についての擬似操作情報である（（ｍａ７−β）／α，（ｍｂ７−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。

さらに、所定の時間間隔をおいて、Ｃ２についての擬似操作情報である（（ｍａ２−β）／α，（ｍｂ２−γ）／α）と、Ｄ２についての擬似操作情報である（（ｍａ６−β）／α，（ｍｂ６−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。そして最後に、所定の時間間隔をおいて、Ｃ１についての擬似操作情報である（（ｍａ１−β）／α，（ｍｂ１−γ）／α）と、Ｄ１についての擬似操作情報である（（ｍａ５−β）／α，（ｍｂ５−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。

ステップＳ１１では、オフ信号を車両側通信部２１からスマートフォン１に送信してステップＳ１に戻り、フローを繰り返す。詳しくは、前述した拡大時用の処理における例では、Ｃ４についての擬似操作情報である（（ｍａ４−β）／α，（ｍｂ４−γ）／α）と、Ｄ４についての擬似操作情報である（（ｍａ８−β）／α，（ｍｂ８−γ）／α）と、タッチ操作が終了したことを示すオフ信号とをスマートフォン１に送信する。一方、前述した縮小時用の処理における例では、Ｃ１についての擬似操作情報である（（ｍａ１−β）／α，（ｍｂ１−γ）／α）と、Ｄ１についての擬似操作情報である（（ｍａ５−β）／α，（ｍｂ５−γ）／α）と、タッチ操作が終了したことを示すオフ信号とをスマートフォン１に送信する。

ステップＳ１２では、ステップＳ１で検知したタッチ操作に継続したスライド操作の検知を行う。そして、当該スライド操作を検知した場合（ステップＳ１２でＹＥＳ）には、ステップＳ１３に移る。また、当該スライド操作を検知しなかった場合（ステップＳ１２でＮＯ）には、ステップＳ３に戻って操作位置についての操作対象位置を特定し、フローを繰り返す。

ステップＳ１４では、平行移動時座標点算出処理を行って、ステップＳ１５に移る。平行移動時座標点算出処理では、拡大縮小時座標点算出処理の場合と同様にして、検知したスライド操作のスライド方向を決定する。また、平行移動時座標点算出処理では、初期ポイントからスマホ表示エリアの端部までの距離（つまり、表示エリア端距離）を算出する。詳しくは、決定したスライド方向に向けて、初期ポイントの座標からスマホ表示エリアの端部まで直線を引いた場合の当該直線の距離を算出する。そして、算出した表示エリア端距離に対して、予め設定しておいた平行移動量Ｍ１を乗算し、簡易操作モードにおける変換量を算出する。例えば、Ｍ１=０．５の場合には、表示エリア端距離に０．５を乗算することで変換量を算出する。

変換量を算出した後は、前述した拡大時用の処理の場合と同様にして、算出した変換量と決定したスライド方向と初期ポイントの座標とから、簡易入力用の終点座標（つまり、前述の変換後座標）を算出する。

なお、スライド操作によって変化した操作位置の座標は、タッチオフ直前の操作位置の座標ではなく、初期ポイントからスライド操作によって最初に変化した操作位置の座標を用いるものとする。以降についても同様とする。

ステップＳ１５では、平行移動時操作対象位置特定処理を行って、ステップＳ１６に移る。平行移動時操作対象位置特定処理では、平行移動時操作対象位置特定処理の場合と同様にして、初期ポイントから簡易入力用の終点座標までの擬似スライドデータを生成する。なお、擬似スライドデータの数は、平行移動量Ｍ１の値が大きいほど多い数に決定される構成とすればよい。他にも、例えば初期ポイントから簡易入力用の終点座標まで距離が大きくなるほど多い数に決定される構成としてもよいし、予め設定された固定数に決定される構成としてもよい。

続いて、平行移動時操作対象位置特定処理では、平行移動時操作対象位置特定処理の場合と同様にして、初期ポイント、擬似スライドデータ、および簡易入力用の終点座標について、操作対象位置（つまり、車両用タッチパネル部２４の画面上の操作位置の座標に対応する携帯タッチパネル部１４の画面上の座標）を特定する。詳しくは、前述の初期設定で算出した換算係数α、β、γを用いて、初期ポイント、擬似スライドデータ、および簡易入力用の終点座標を換算することで特定する。

例えば、Ｃ１が初期ポイント、Ｃ２、Ｃ３が仮想変化座標点、Ｃ４が簡易入力用の終点座標であって、各座標がＣ１（ｍａ１，ｍｂ１）、Ｃ２（ｍａ２，ｍｂ２）、Ｃ３（ｍａ３，ｍｂ３）、Ｃ４（ｍａ４，ｍｂ４）であるとした場合には、以下のように特定される。Ｃ１については（（ｍａ１−β）／α，（ｍｂ１−γ）／α）、Ｃ２については（（ｍａ２−β）／α，（ｍｂ２−γ）／α）、Ｃ３については（（ｍａ３−β）／α，（ｍｂ３−γ）／α）、Ｃ４については（（ｍａ４−β）／α，（ｍｂ４−γ）／α）と特定される。

ステップＳ１６では、平行移動時操作対象位置特定処理で特定した座標を擬似操作情報として、車両側通信部２１からスマートフォン１に送信し、ステップＳ１７に移る。詳しくは、初期ポイントについての擬似操作情報、仮想変化座標点についての擬似操作情報、簡易入力用の終点座標についての擬似操作情報の順に所定の時間間隔をおいて逐次送信する。ここで言うところの所定の時間間隔とは、任意に設定可能な時間間隔であって、例えばスマートフォン１での表示や反応速度の自然さと処理能力とを考慮して予め設定される構成とすればよい。

例えば上述した例では、Ｃ１についての擬似操作情報である（（ｍａ１−β）／α，（ｍｂ１−γ）／α）と、タッチ操作が継続されていることを示すオン信号とを最初にスマートフォン１に送信する。続いて、所定の時間間隔をおいて、Ｃ２についての擬似操作情報である（（ｍａ２−β）／α，（ｍｂ２−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。さらに、所定の時間間隔をおいて、Ｃ３についての擬似操作情報である（（ｍａ３−β）／α，（ｍｂ３−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。そして最後に、所定の時間間隔をおいて、Ｃ４についての擬似操作情報である（（ｍａ４−β）／α，（ｍｂ４−γ）／α）と、タッチ操作が継続されていることを示すオン信号とをスマートフォン１に送信する。

ステップＳ１７では、オフ信号を車両側通信部２１からスマートフォン１に送信してステップＳ１に戻り、フローを繰り返す。詳しくは、上述した例では、Ｃ４についての擬似操作情報である（（ｍａ４−β）／α，（ｍｂ４−γ）／α）と、タッチ操作が終了したことを示すオフ信号とをスマートフォン１に送信する。また、ステップＳ１８では、前述のスマホ表示エリア外処理を行い、ステップＳ１に戻ってフローを繰り返す。

なお、図９のフローでは、表示の座標変換として拡大縮小や平行移動を行う場合についての説明を行ったが、必ずしもこれに限らない。例えば、表示の回転を行う場合についても同様にして行う構成としてもよい。例えば、表示の回転を行う場合には、２箇所のタッチ操作を検知し、一方のみのスライド操作を検知した場合に表示の回転を行うための処理を行うものとすればよい。この場合、固定されているタッチ操作位置（以下固定点）を中心にしてスライド操作の初期ポイントを予め設定された設定量（例えば角度）だけ回転させた位置の座標を、簡易入力用の終点座標とすればよい。そして、初期ポイントから簡易入力用の終点座標までの擬似スライドデータを生成する構成とすればよい。この場合の擬似スライドデータとしては、固定点を中心とした弧によって初期ポイントと簡易入力用の終点座標とを結んだ曲線上に挿入される仮想的な操作位置の座標を用いる構成とすればよい。

また、図９のフローに示したようにして送信される擬似操作情報をスマートフォン１で受信した場合、スマートフォン１の携帯側制御部１５では、擬似操作情報に従って、携帯タッチパネル部１４に表示中の画面上のどの位置に対して操作が行われたかを判断し、操作が行われた位置に応じた処理を実行する。詳しくは、上述のオン信号とともに送信されてきた擬似操作情報については、擬似操作情報が示す座標がタッチ操作されているとして処理を行い、上述のオフ信号とともに送信されてきた擬似操作情報については、擬似操作情報が示す座標においてタッチオフされたとして処理を行う。

これにより、スマートフォン１では、携帯タッチパネル部１４に対して操作が行われているのと同様にして、擬似操作情報をもとに拡大縮小や平行移動等の表示の座標変換を行うことが可能になる。また、本実施形態によれば、初期ポイントや簡易入力用の終点座標だけでなく、擬似スライドデータについての擬似操作情報もスマートフォン１で受信される。よって、スマートフォン１では、初期ポイントや簡易入力用の終点座標に対応する位置がタッチ操作されたとして処理を行うだけでなく、初期ポイントから簡易入力用の終点座標までの間の点でもタッチ操作がされたとして処理を行うことが可能になる。従って、スマートフォン１では、携帯タッチパネル部１４に対してスライド操作が行われているかのように、表示の滑らかな拡大縮小や平行移動を行うことが可能になる。

以上、ターミナルモード使用中における車両用表示装置２およびスマートフォン１での画面上の画像の表示の座標変換の処理の流れの一例について説明を行ったが、次のような処理としてもよい。以下では、ターミナルモード使用中における車両用表示装置２およびスマートフォン１での画面上の画像の表示の座標変換の処理の流れの他の例について、図１２および図１３を用いて説明を行う。まず、図１２を用いて、ターミナルモード使用中における車両用表示装置２での処理の流れの一例についての説明を行う。図１２は、ターミナルモード使用中における車両側制御部２５での処理のフローの一例を示すフローチャートである。図１２のフローは、スマートフォン１から送信された携帯由来画面データの入力を、車両側通信部２１を介して受け付け、この携帯由来画面データが示す画面を車両側表示部２２に表示させたときに開始されるものとする。

まず、ステップＳ２１では、車両用タッチパネル部２４に表示中の画面に対するタッチ操作の検知を行うとともに、タッチ操作の操作位置の数の検知を行う。そして、当該タッチ操作を検知した場合（ステップＳ２１でＹＥＳ）には、ステップＳ２２に移る。また、当該タッチ操作を検知しなかった場合（ステップＳ２１でＮＯ）には、ステップＳ２１に戻ってフローを繰り返す。

ステップＳ２２では、検知したタッチ操作の操作位置の座標に対応する前述の操作対象位置を特定し、ステップＳ２３に移る。操作対象位置は、タッチ操作の操作位置の座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標である。

ステップＳ２３では、ステップＳ２２で操作対象位置として特定した座標の情報（つまり、前述の位置情報）を車両側通信部２１からスマートフォン１に送信させ、ステップＳ２４に移る。ステップＳ２３では、タッチ操作の操作位置を１箇所だけ検知していた場合には、その１箇所に対応する位置情報を送信し、タッチ操作の操作位置を２箇所検知していた場合には、その２箇所に対応する位置情報をそれぞれ送信することになる。

ステップＳ２４では、ステップＳ２１で検知したタッチ操作に継続したスライド操作の検知を行う。そして、当該スライド操作を検知した場合（ステップＳ２４でＹＥＳ）には、ステップＳ２５に移る。タッチ操作の操作位置を２箇所検知していた場合には、２箇所の操作位置のいずれかについてスライド操作を検知した場合に、ステップＳ２５に移るものとする。また、当該スライド操作を検知しなかった場合（ステップＳ２４でＮＯ）には、フローを終了する。

ステップＳ２５では、スライド操作の終点の検知を行う。そして、スライド操作の終点を検知した場合（ステップＳ２５でＹＥＳ）には、ステップＳ２６に移る。また、スライド操作の終点を検知しなかった場合（ステップＳ２５でＮＯ）には、ステップＳ２５のフローを繰り返す。２箇所の操作位置についてのスライド操作をそれぞれ検知していた場合には、それぞれのスライド操作の終点の検知を行うまでは、ステップＳ２５のフローを繰り返すものとする。

ステップＳ２６では、操作位置の数およびスライド操作の始点・終点の座標をもとに、座標変換の種類および方向を決定し、ステップＳ２７に移る。車両側制御部２５では、座標変換の種類および方向の決定を例えば以下のようにして行うものとする。

まず、操作位置の数を１箇所だけ検知していた場合には、座標変換の種類を平行移動と決定し、スライド操作の始点に対するスライド操作の終点の位置する方向をその平行移動の方向と決定する。

続いて、操作位置の数を２箇所検知していた場合であって、且つ、その２箇所の操作位置の両方についてスライド操作を検知した場合には、座標変換の種類をスケール変換と決定する。そして、各スライド操作の始点間の距離に対する終点間の距離の比率が１よりも大きい場合にはスケール変換の方向を拡大と決定し、比率が１よりも小さい場合にはスケール変換の方向を縮小と決定する。

また、操作位置の数を２箇所検知していた場合であって、且つ、その２箇所の操作位置の一方のみについてスライド操作を検知した場合には、座標変換の種類を回転と決定する。そして、固定されている操作位置（以下、固定操作位置）とスライド操作の始点とを結ぶ線の角度（以下、変化前角度）に対する固定操作位置とスライド操作の終点とを結ぶ線の角度（以下、変化後角度）の変化に応じて回転方向を決定する。例えば、固定操作位置を通る横軸に対する角度を用いるとした場合には、変化前角度よりも変化後角度が小さくなったときに回転方向を右回りと決定し、変化前角度よりも変化後角度が大きくなったときに回転方向を左回りと決定する。

ステップＳ２７では、車両側制御部２５で決定した種類および方向に応じた前述の擬似操作情報を生成し、ステップＳ２８に移る。ステップＳ２８では、ステップＳ２７で生成した擬似操作情報を車両側通信部２１からスマートフォン１に送信させ、フローを終了する。

前述したように、２箇所の操作位置の両方についてスライド操作を検知していた場合には、各スライド操作の終点の座標に対応する擬似操作情報が送信される。また、２箇所の操作位置の一方のみについてスライド操作を検知していた場合には、スライド操作の終点の座標に対応する擬似操作情報だけでなく、固定されている操作位置の座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標の情報も送信される。

なお、図１２のフローにおいても、図９のフローと同様に、初期ポイント、スライド操作の終点の座標（つまり、簡易入力用の終点座標）、擬似スライドデータについての操作対象位置を特定し、特定した操作対象位置を擬似操作情報としスマートフォン１に送信する構成としてもよい。

続いて、図１３を用いて、ターミナルモード使用中におけるスマートフォン１での、車両用表示装置２から送信されてくる情報に応じた、画面上の画像の表示の座標変換に関する処理の流れについての説明を行う。図１３は、ターミナルモード使用中における携帯側制御部１５でのフローの一例を示すフローチャートである。図１３のフローは、携帯タッチパネル部１４に表示させるために生成した画面データや表示領域情報を車両用表示装置２に送信したときに開始され、ターミナルモードの使用が終了したときに終了されるものとする。

まず、ステップＳ３１では、車両用表示装置２から送信される位置情報を受信したか否かを判定する。車両用表示装置２から送信される位置情報を受信したか否かは、携帯側通信部１１から位置情報の入力が行われたか否かに応じて判定する構成とすればよい。そして、位置情報を受信したと判定した場合（ステップＳ３１でＹＥＳ）には、ステップＳ３２に移る。また、位置情報を受信したと判定しなかった場合（ステップＳ３１でＮＯ）には、ステップＳ３１のフローを繰り返す。

ステップＳ３２では、車両用表示装置２から送信される擬似操作情報を受信したか否かを判定する。車両用表示装置２から送信される擬似操作情報を受信したか否かは、携帯側通信部１１から擬似操作情報の入力が行われたか否かに応じて判定する構成とすればよい。そして、擬似操作情報を受信したと判定した場合（ステップＳ３２でＹＥＳ）には、ステップＳ３３に移る。また、擬似操作情報を受信したと判定しなかった場合（ステップＳ３２でＮＯ）には、ステップＳ３４に移る。

ステップＳ３３では、スライド操作時処理を実行し、ステップＳ３１に戻ってフローを繰り返す。スライド操作時処理では、車両用表示装置２から受信した位置情報と擬似操作情報とに従って、携帯タッチパネル部１４の画面上に表示させる画像に平行移動やスケール変換や回転といった座標変換を行う。

ここで、スライド操作時処理の詳細について説明を行う。スライド操作時処理では、車両用表示装置２から受信した位置情報が示す座標を始点の座標として用いるとともに、車両用表示装置２から受信した擬似操作情報が示す座標を終点の座標として用いる。また、スライド操作時処理では、位置情報が示す座標の数から操作位置の数を検知し、位置情報が示す座標と擬似操作情報が示す座標とからスライド操作を検知する。操作位置の数およびスライド操作の検知については、携帯タッチパネル部１４にタッチ操作が行われた場合の操作位置の数およびスライド操作の検知と同様にして行うものとする。

さらに、スライド操作時処理では、検知される操作位置の数や検知されるスライド操作をもとに、前述した座標変換処理と同様にして、携帯タッチパネル部１４の画面上に表示させる画像の表示の平行移動やスケール変換や回転といった一定量の座標変換を行う。ここで言うところの一定量の座標変換では、スライド操作の始点の座標については、車両用タッチパネル部２４の画面に対する実際の操作位置に対応する位置の座標を用いる一方、スライド操作の終点の座標については、車両用タッチパネル部２４の画面に対する実際の操作位置に対応する位置の座標から変更した座標（始点から一定量の座標変換を行った位置の座標）を用いる。つまり、操作の始点の座標は変更せず、操作の終点の座標について、座標を変更することを指している。また、スライド操作時処理では、画像の表示に座標変換を行った後、当該座標変換後の画面を表示させるための画面データを携帯側通信部１１から車両用表示装置２へ送信させる。

ステップＳ３４では、ステップＳ１１で位置情報を受信したと判断してからの経過時間が所定の時間を越えた（つまり、タイムアウト）か否かを判定する。ここで言うところの所定の時間とは、任意に設定可能な時間であって、例えば数秒とすればよい。また、当該経過時間は、図示しないタイマ回路等によってカウントする構成とすればよい。そして、タイムアウトと判定した場合（ステップＳ３４でＹＥＳ）には、ステップＳ３５に移る。また、タイムアウトと判定しなかった場合（ステップＳ３４でＮＯ）には、ステップＳ３２に戻ってフローを繰り返す。

ステップＳ３５では、非スライド操作時処理を実行し、ステップＳ３１に戻ってフローを繰り返す。非スライド操作時処理では、車両用表示装置２から受信した位置情報に従って、携帯タッチパネル部１４に表示中の画面上のどの位置に対して操作が行われたかを判断し、操作が行われた位置に応じた処理を実行する。例えばボタン表示がされている場合には、そのボタン表示に応じた処理を実行する。非スライド操作時処理では、処理に応じて新たな画面を表示させることになった場合には、その画面を表示させるための画面データを携帯側通信部１１から車両用表示装置２へ送信させる。

また、前述の実施形態では、画面上の画像の表示の座標変換を行う構成を示したが、画面上のオブジェクトの表示の座標変換を行う場合も同様にして行う構成とすればよい。

以上の構成によれば、擬似操作情報を受信したスマートフォン１では、この擬似操作情報を受信するごとに、携帯タッチパネル部１４に表示させる画面上の表示に、車両用タッチパネル部２４へのスライド操作に応じて車両側制御部２５で決定した種類および方向の座標変換を、当該スライド操作の操作量に関わらず一定量行うことができる。

例えば、２箇所の操作位置の両方を離間させる方向にスライド操作（以下、ピンチアウトの操作）を行って画面上の表示の拡大を行わせる場合について、図１４（ａ）〜図１４（ｃ）を用いて説明を行う。図１４（ａ）は、車両用タッチパネル部２４に操作量の比較的小さいピンチアウトの操作を行う場合の操作位置の変化を示す模式図である。図１４（ｂ）は、車両用タッチパネル部２４に操作量の比較的大きいピンチアウトの操作を行う場合の操作位置の変化を示す模式図である。図１４（ｃ）は、車両用表示装置２から送信される位置情報および擬似操作情報をもとにスマートフォン１側で検知されるスライド操作の操作位置の変化を示す模式図である。図１４（ａ）および図１４（ｂ）中の破線の円が車両用表示装置２側で検知される操作位置を示しており、図１４（ｃ）中の破線の円がスマートフォン１側で検知される操作位置を示している。なお、図１４（ａ）および図１４（ｂ）のいずれの例でも始点となる操作位置は同じであるものとする。

本実施形態の構成によれば、車両用タッチパネル部２４に操作量の比較的小さいピンチアウトの操作を行った場合（図１４（ａ）参照）であっても、操作量の比較的大きいピンチアウトの操作を行った場合（図１４（ｂ）参照）であっても、車両用表示装置２からは同じ擬似操作情報が送信されるので、スマートフォン１側で検知されるスライド操作の操作位置の変化はピンチアウトの操作の操作量に関わらず一定となる（図１４（ｃ）参照）。従って、画像の拡大率はピンチアウトの操作量に関わらず固定倍率となる。このように、本実施形態の構成では、スライド操作の操作量に関わらず一定量の座標変換が行われることになる。

また、車両用表示装置２では、ターミナルモード使用中においては、スマートフォン１の画面を車両用タッチパネル部２４に表示するので、車両用タッチパネル部２４にスライド操作を１回行うごとに、当該スライド操作に応じて決定される種類および方向の座標変換を当該スライド操作の操作量に関わらずに一定量行うことができることになる。

スライド操作の操作量に関わらず座標変換の量は一定となるので、ユーザは１回ごとのスライド操作の操作量を調整することなしに、スライド操作の回数の調整だけで、目的とする量の座標変換を行うことができる。スライド操作の操作量を調整するためには車両用タッチパネル部２４の画面をユーザが注視する必要があるのに対し、スライド操作の回数の調整については当該画面をユーザが注視する必要がない。従って、以上の構成によれば、スマートフォン１と車両用表示装置２とを接続して車両用表示装置２側でスマートフォン１の機能を利用可能とする場合のユーザにとっての使い勝手をより向上させることが可能になる。

なお、前述の実施形態では、携帯タッチパネル部１４と車両用タッチパネル部２４とのいずれもがマルチタッチパネルである構成を示したが、必ずしもこれに限らない。例えば、車両用タッチパネル部２４が、画面上の複数の操作位置を同時に検知することができないタッチパネル（以下、シングルタッチパネル）である構成としてもよい。以下では、この次の実施形態（以下、変形例１）について図面を用いて説明を行う。なお、説明の便宜上、前述の実施形態の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。

車両用タッチパネル部２４としてシングルタッチパネルを用いる構成とする場合には、車両用タッチパネル部２４に平行移動の方向や拡大や縮小や回転を指定するためのアイコンを表示させ、そのアイコンに対するタッチ操作に応じた擬似操作情報をスマートフォン１に送信することで、平行移動やスケール変換や回転といった座標変換を画像に行うようにする。

ここで、図１５を用いて、変形例１におけるターミナルモード使用中の車両用表示装置２での処理の流れについての説明を行う。図１５は、変形例１におけるターミナルモード使用中の車両側制御部２５での処理のフローの一例を示すフローチャートである。図１５のフローは、スマートフォン１から送信された携帯由来画面データの入力を、車両側通信部２１を介して受け付け、この携帯由来画面データが示す画面を車両側表示部２２に表示させたときに開始されるものとする。

まず、ステップＳ４１では、車両用タッチパネル部２４に表示中の画面に対するタッチ操作の検知を行う。そして、当該タッチ操作を検知した場合（ステップＳ４１でＹＥＳ）には、ステップＳ４２に移る。また、当該タッチ操作を検知しなかった場合（ステップＳ４１でＮＯ）には、ステップＳ４１に戻ってフローを繰り返す。

ステップＳ４２では、ステップＳ４１で検知したタッチ操作の操作位置の座標に対応する前述の操作対象位置を特定し、ステップＳ４３に移る。操作対象位置は、タッチ操作の操作位置の座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標である。ステップＳ４３では、ステップＳ４２で操作対象位置として特定した座標の情報（つまり、前述の位置情報）を車両側通信部２１からスマートフォン１に送信させ、ステップＳ４４に移る。

ステップＳ４４では、スマートフォン１から新規の画面データを受信したか否かを判定する。スマートフォン１から送信される新規の画面データを受信したか否かは、車両側通信部２１から新規の画面データの入力が行われたか否かに応じて判定する構成とすればよい。そして、新規の画面データを受信したと判定した場合（ステップＳ４４でＹＥＳ）には、画面上のボタン表示に対してタッチ操作が行われたことによって画面が遷移したものとして、ステップＳ４１に戻ってフローを繰り返す。また、新規の画面データを受信したと判定しなかった場合（ステップＳ４４でＮＯ）には、画面上のボタン表示以外のオブジェクトや画像に対してタッチ操作が行われたものとして、ステップＳ４５に移る。

ステップＳ４５では、ステップＳ４１で検知したタッチ操作の操作位置の座標を中心として、画面上の画像の表示の座標変換の種類および方向をユーザが指定するためのアイコン（以下、座標変換指定アイコン）を、車両用タッチパネル部２４の画面に重畳表示させ、ステップＳ４６に移る。よって、車両側制御部２５が請求項の第１重畳表示手段に相当する。また、この場合のステップＳ４１で検知したタッチ操作が請求項の１回目のタッチ操作に相当する。ここで言うところの１回目のタッチ操作とは、後述する座標変換指定アイコンへのタッチ操作に先行するタッチ操作であって、座標変換指定アイコンが重畳表示されていない状態において、画面上のボタン表示以外のオブジェクトや画像に対して行われるタッチ操作を示している。

座標変換指定アイコンは、例えば平行移動の方向や拡大や縮小や回転方向ごとに表示されるものとする。なお、重畳表示した座標変換指定アイコンの下層の表示が見えなくならないように、座標変換指定アイコンは透過表示させることが好ましい。

また、各座標変換指定アイコンの中心に対する各座標変換指定アイコンの配置位置と各座標変換指定アイコンの示す座標変換の種類および方向との対応関係は予め規定されており、その対応関係（以下、配置位置決定用対応関係）は例えば車両側制御部２５のＥＥＰＲＯＭ等の不揮発性メモリに格納されているものとする。よって、車両側制御部２５が請求項の規定記憶手段に相当する。

車両側制御部２５では、上述の配置位置決定用対応関係をもとに、検知したタッチ操作の操作位置の座標を中心とした場合の各座標変換指定アイコンの配置位置を決定し、各座標変換指定アイコンを表示させる。また、車両側制御部２５では、この配置位置決定用対応関係をもとに、決定した各座標変換指定アイコンの配置位置と各座標変換指定アイコンの示す座標変換の種類および方向との対応関係を求め、この対応関係（以下、選択アイコン特定用対応関係）をＲＡＭ等の一時保存メモリに格納する。よって、車両側制御部２５が請求項の格納手段に相当する。

本実施形態では、座標変換指定アイコンとして、図１６に示すように、平行移動の方向を指定する上方向、右上方向、右方向、右下方向、下方向、左下方向、左方向、左上方向の８種類の方向についての座標変換指定アイコンと、拡大および縮小をそれぞれ指定するための２種類の座標変換指定アイコンとを重畳表示させるものとして以降の説明を続ける。なお、図１６中の矢印の表示が平行移動の方向を指定する座標変換指定アイコンを示しており、図１６中の「＋」マークが拡大、「−」マークが縮小を指定する座標変換指定アイコンを示している。

図１５に戻って、ステップＳ４６では、座標変換指定アイコンへのタッチ操作（つまり、選択）が行われたか否かを判定する。座標変換指定アイコンの選択が行われたか否かは、ステップＳ４１で検知したタッチ操作後の再度の（タッチ操作が終了されることは必須ではない）タッチ操作の操作位置が、前述の選択アイコン特定用対応関係で対応付けられている座標変換指定アイコンの配置位置に相当するか否かに応じて判定する。そして、座標変換指定アイコンの選択が行われたと判定した場合（ステップＳ４６でＹＥＳ）には、ステップＳ４７に移る。また、座標変換指定アイコンの選択が行われたと判定しなかった場合（ステップＳ４６でＮＯ）には、ステップＳ５２に移る。なお、タッチ操作の操作位置が、座標変換指定アイコンの配置位置の所定範囲内である近傍にある場合も、タッチ操作の操作位置が、座標変換指定アイコンの配置位置に相当すると判定しても良い。この場合、座標変換指定アイコンの表示サイズを大きくすることなく（換言すると、座標変換指定アイコン後方の情報表示を見難くすることなく）、座標変換指定アイコンの選択操作を容易にすることが出来る。

ステップＳ４７では、座標変換の種類および方向の決定を行って、ステップＳ４８に移る。座標変換の種類および方向の決定は、タッチ操作の操作位置をもとに、選択アイコン特定用対応関係を参照することで行う。詳しくは、タッチ操作の操作位置に相当する配置位置に対応付けられている座標変換の種類および方向に決定する。

一例としては、右方向を指定する座標変換指定アイコンが選択された場合には、座標変換の種類は平行移動と決定され、方向は右方向と決定される。また、拡大を指定する座標変換指定アイコンが選択された場合には、座標変換の種類はスケール変換と決定され、方向は拡大と決定される。さらに、縮小を指定する座標変換指定アイコンが選択された場合には、座標変換の種類はスケール変換と決定され、方向は縮小と決定される。

ステップＳ４８では、ステップＳ４７で決定した座標変換の種類および方向の座標変換を画面上の表示に一定量行うためのスライド操作が携帯タッチパネル部１４に行われたと仮定した場合の携帯タッチパネル部１４でのスライド操作の始点・終点の座標の情報を生成し、ステップＳ４９に移る。変形例１では、この始点・終点の座標の情報を擬似操作情報と呼ぶものとする。ここで言うところの一定量も、固定値であって任意に設定可能な量である。また、ここで言うところの一定量として、座標変換の種類ごとにそれぞれ異なった固定値が設定されている構成としてもよい。

例えば、座標変換の種類が平行移動、且つ、座標変換の方向が右方向と決定された場合には、ステップＳ４１で検知したタッチ操作の操作位置座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標を始点の座標として擬似操作情報を生成する。また、当該始点の座標から右方向に一定量移動した座標を終点の座標として擬似操作情報を生成する。座標変換の方向が右方向以外の場合についても同様にして擬似操作情報を生成するものとする。座標変換の種類が平行移動の場合には、擬似操作情報として始点の座標の情報と終点の座標の情報とをそれぞれ１種類ずつ生成することになる。

座標変換の種類がスケール変換、且つ、座標変換の方向が拡大と決定された場合には、ステップＳ４１で検知したタッチ操作の操作位置座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標（以下、基準座標）を中心としてお互いが第１の距離だけ離れた２点の座標を始点の座標として擬似操作情報を生成する。ここで言うところの第１の距離とは、後述する第２の距離より短い距離であって任意に設定可能な値である。また、基準座標を中心としてお互いが第２の距離だけ離れた２点の座標を終点の座標として擬似操作情報を生成する。ここで言うところの第２の距離とは、第１の距離より短い距離であって任意に設定可能な値であり、第１の距離と第２の距離との比率は、固定値となっている。

座標変換の種類がスケール変換、且つ、座標変換の方向が縮小と決定された場合には、基準座標を中心としてお互いが第２の距離だけ離れた２点の座標を始点の座標として擬似操作情報を生成する。また、基準座標を中心としてお互いが第１の距離だけ離れた２点の座標を終点の座標として擬似操作情報を生成する。座標変換の種類がスケール変換の場合には、擬似操作情報として始点の座標の情報と終点の座標の情報とをそれぞれ２種類ずつ生成することになる。

なお、本実施形態では、詳細な説明を省くが、座標変換の種類が回転と決定された場合には、基準座標を１つの始点の座標とするとともに、基準座標から例えば右方向に所定の距離だけ離れた座標をもう１つの始点の座標として擬似操作情報を生成する。また、基準座標を１つの終点の座標とするとともに、基準座標から例えば右上方向（方向が左回転の場合）もしくは右下方向（方向が右回転の場合）に所定の距離だけ離れた座標をもう１つの終点の座標として擬似操作情報を生成する。

ステップＳ４９では、ステップＳ４８で生成した擬似操作情報を車両側通信部２１からスマートフォン１に送信させ、ステップＳ５０に移る。ステップＳ４９では、擬似操作情報を送信する場合に、始点の座標の情報を先に送信した後に、所定の時間間隔をおいて終点の座標の情報を送信するものとする。ここで言うところの所定の時間間隔とは、任意に設定可能な時間間隔であって、例えば１秒以下の時間間隔を設定するなどすればよい。

また、変形例１においても、前述の実施形態と同様に、始点の座標（つまり、初期ポイント）、終点の座標（つまり、簡易入力用の終点座標）、擬似スライドデータについての操作対象位置を特定し、特定した操作対象位置を擬似操作情報としスマートフォン１に送信する構成としてもよい。この場合には、視点の座標についての擬似操作情報、擬似スライドデータについての擬似操作情報、終点の座標についての擬似操作情報の順番に、所定の時間間隔をおいて送信することになる。なお、所定の時間間隔とは、任意に設定可能な時間間隔であって、例えばスマートフォン１での表示や反応速度の自然さと処理能力とを考慮して予め設定される構成とすればよい。

ステップＳ５０では、スマートフォン１から新規の画面データを受信したか否かを判定する。スマートフォン１から送信される新規の画面データを受信したか否かは、車両側通信部２１から新規の画面データの入力が行われたか否かに応じて判定する構成とすればよい。そして、新規の画面データを受信したと判定した場合（ステップＳ５０でＹＥＳ）には、新規の画面データに従った画面を車両用タッチパネル部２４の画面に表示させ、ステップＳ５１に移る。また、新規の画面データを受信したと判定しなかった場合（ステップＳ５０でＮＯ）には、ステップＳ５０のフローを繰り返す。

ステップＳ５１では、車両用タッチパネル部２４に新たに表示された画面に対しても、ステップＳ４５で重畳表示を行ったのと同じ位置に座標変換指定アイコンを重畳表示させ、座標変換指定アイコンの重畳表示を維持する。そして、ステップＳ４６に戻ってフローを繰り返す。

ステップＳ５２では、座標変換指定アイコンを車両用タッチパネル部２４の画面に表示させてからの経過時間が所定の時間を越えた（つまり、タイムアウト）か否かを判定する。座標変換指定アイコンを車両用タッチパネル部２４の画面に表示させてからの経過時間とは、ステップＳ５１で座標変換指定アイコンを重畳表示し直した場合には、重畳表示をし直してからの経過時間となる。ここで言うところの所定の時間とは、任意に設定可能な時間であって、例えば数秒とすればよい。また、当該経過時間は、図示しないタイマ回路等によってカウントする構成とすればよい。そして、タイムアウトと判定した場合（ステップＳ５２でＹＥＳ）には、フローを終了する。また、タイムアウトと判定しなかった場合（ステップＳ５２でＮＯ）には、ステップＳ４６に戻ってフローを繰り返す。

スマートフォン１では、擬似操作情報を受信した場合には、擬似操作情報が示す始点の座標の数から操作位置の数を検知し、当該始点の座標と擬似操作情報が示す終点の座標とからスライド操作を検知する。操作位置の数およびスライド操作の検知については、携帯タッチパネル部１４にタッチ操作が行われた場合の操作位置の数およびスライド操作の検知と同様にして行うものとする。そして、スマートフォン１では、検知した操作位置の数およびスライド操作に応じて、前述した座標変換処理と同様にして、携帯タッチパネル部１４の画面上に表示させる画像の表示の平行移動やスケール変換や回転といった座標変換を行う。

以上の構成によれば、擬似操作情報を受信したスマートフォン１では、この擬似操作情報を受信するごとに、携帯タッチパネル部１４に表示させる画面上の表示に、車両用タッチパネル部２４の画面に重畳表示させた座標変換指定アイコンの表示位置へのタッチ操作に応じて車両側制御部２５で決定した種類および方向の座標変換を一定量行うことができる。

ここで、座標変換指定アイコンの表示位置へのタッチ操作を行って携帯タッチパネル部１４の画面に表示させる画像の座標変換を行わせる場合について、図１６および図１７（ａ）〜図１７（ｃ）を用いて説明を行う。図１６は、座標変換指定アイコンの一例を示すための模式図である。図１７（ａ）〜図１７（ｃ）は、座標変換指定アイコンへのタッチ操作が行われた場合のスマートフォン１側で検知されるスライド操作の操作位置の変化を示す模式図である。

図１７（ａ）は、右方向への平行移動を指定する座標変換指定アイコンへのタッチ操作が行われた場合の一例である。また、図１７（ｂ）は、拡大を指定する座標変換指定アイコンへのタッチ操作が行われた場合の一例であって、図１７（ｃ）は、縮小を指定する座標変換指定アイコンへのタッチ操作が行われた場合の一例である。なお、図１７（ａ）〜図１７（ｃ）中の破線の円がスマートフォン１側で検知される操作位置を示している。また、図１７（ａ）〜図１７（ｃ）中の破線の矢印が画面上の画像の移動方向を示している。

なお、拡大縮小といったスケール変換時において、検知される各スライド操作の終点間の中心の座標を画面の中心の座標へ変換するのと同様の変換を画面上の画像の表示に行い、スライド操作の終点間の中心を画面上の中心に平行移動させる処理も行われるものとして以下の説明を行う。

変形例１の構成によれば、右方向への平行移動を指定する座標変換指定アイコンへのタッチ操作が行われた場合、スマートフォン１側では、画面の右方向への一定量のスライド操作が検知されることになる（図１７（ａ）参照）。これにより、スマートフォン１では、携帯タッチパネル部１４の画面に表示させる画像の位置を右方向に移動させることになる。

また、拡大を指定する座標変換指定アイコンへのタッチ操作が行われた場合、２箇所の操作位置の両方を離間させる方向への一定量のスライド操作が検知されることになる（図１７（ｂ）参照）。これにより、スマートフォン１では、携帯タッチパネル部１４の画面に表示させる画像を拡大させるとともに、スライド操作の終点間の中心が画面の中心となるように画像を移動させることになる。

さらに、縮小を指定する座標変換指定アイコンへのタッチ操作が行われた場合、２箇所の操作位置の両方を接近させる方向への一定量のスライド操作が検知されることになる（図１７（ｃ）参照）。これにより、スマートフォン１では、携帯タッチパネル部１４の画面に表示させる画像を縮小させるとともに、スライド操作の終点間の中心が画面の中心となるように画像を移動させることになる。よって、平行移動の移動量や画像の拡大縮小率は、座標変換指定アイコンへの１回のタッチ操作につき一定値となる。

このように、変形例１の構成では、座標変換指定アイコンへの１回のタッチ操作につき一定量の座標変換が行われることになるので、座標変換指定アイコンへのタッチ操作の回数の調整だけで、目的とする量の座標変換を行うことができる。座標変換指定アイコンへのタッチ操作の回数の調整については、車両用タッチパネル部２４の画面をユーザが注視しなくても行うことができる。従って、以上の構成によっても、スマートフォン１と車両用表示装置２とを接続して車両用表示装置２側でスマートフォン１の機能を利用可能とする場合のユーザにとっての使い勝手をより向上させることが可能になる。

また、以上の構成によれば、スマートフォン１においては画面上の２箇所に対して同時にスライド操作することで可能となる座標変換についても、車両用タッチパネル部２４では、座標変換指定アイコンの表示位置の１箇所をタッチ操作することで実行可能とすることができる。従って、車両用タッチパネル部２４がシングルタッチパネルであっても、スマートフォン１においては画面上の２箇所に対して同時に操作することで可能となる座標変換を当該車両用タッチパネル部２４の操作で実行可能とすることが可能となり、汎用性が向上する。

さらに、以上の構成によれば、座標変換指定アイコンの選択を行ってから所定の時間以上の間隔が空かない場合には、座標変換指定アイコンを画面上の同じ位置に重畳表示させ続けることになる。よって、座標変換指定アイコンへのタッチ操作を繰り返すことで目的とする量の座標変換を行う場合に、タッチ操作が行い易くなり、ユーザにとっての使い勝手がさらに向上する。

なお、変形例１では、車両用タッチパネル部２４の画面上のタッチ操作を検知した位置を中心として座標変換指定アイコンを重畳表示させる構成を示したが、必ずしもこれに限らない。例えば、タッチ操作の操作位置に関わらず、車両用タッチパネル部２４の画面上の所定の位置に座標変換指定アイコンを配置させる構成としてもよい。この場合には、前述の配置位置決定用対応関係を用いない構成とすればよい。

また、車両用タッチパネル部２４としてシングルタッチパネルを用いる構成とする場合には、車両用タッチパネル部２４に所定の枠を表示させ、その枠に対するタッチ操作の操作位置の位置関係に応じた擬似操作情報をスマートフォン１に送信することで、平行移動やスケール変換といった座標変換を画像に行う構成としてもよい。以下では、この実施形態（以下、変形例２）について図面を用いて説明を行う。なお、説明の便宜上、前述の実施形態の説明に用いた図に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。

ここで、図１８を用いて、変形例２におけるターミナルモード使用中の車両用表示装置２での処理の流れについての説明を行う。図１８は、変形例２におけるターミナルモード使用中の車両側制御部２５での処理のフローの一例を示すフローチャートである。図１８０のフローは、スマートフォン１から送信された携帯由来画面データの入力を、車両側通信部２１を介して受け付け、この携帯由来画面データが示す画面を車両側表示部２２に表示させたときに開始されるものとする。

まず、ステップＳ６１では、車両用タッチパネル部２４に対するタッチ操作の検知を行う。そして、当該タッチ操作を検知した場合（ステップＳ６１でＹＥＳ）には、ステップＳ６２に移る。また、当該タッチ操作を検知しなかった場合（ステップＳ６１でＮＯ）には、ステップＳ６１に戻ってフローを繰り返す。

ステップＳ６２では、検知したタッチ操作の操作位置の座標に対応する前述の操作対象位置を特定し、ステップＳ６３に移る。操作対象位置は、タッチ操作の操作位置の座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標である。ステップＳ６３では、ステップＳ６２で操作対象位置として特定した座標の情報（つまり、前述の位置情報）を車両側通信部２１からスマートフォン１に送信させ、ステップＳ６４に移る。

ステップＳ６４では、スマートフォン１から新規の画面データを受信したか否かを判定する。そして、新規の画面データを受信したと判定した場合（ステップＳ６４でＹＥＳ）には、画面上のボタン表示に対してタッチ操作が行われたことによって画面が遷移したものとして、ステップＳ６１に戻ってフローを繰り返す。また、新規の画面データを受信したと判定しなかった場合（ステップＳ６４でＮＯ）には、画面上のボタン表示以外のオブジェクトや画像に対してタッチ操作が行われたものとして、ステップＳ６５に移る。

ステップＳ６５では、検知したタッチ操作の操作位置の座標を中心として、所定の枠を車両用タッチパネル部２４の画面に重畳表示させ、ステップＳ６６に移る。よって、車両側制御部２５が請求項の第２重畳表示手段に相当する。以下では所定の枠を座標変換指定用枠と呼ぶものとする。

また、座標変換指定用枠の中心に対する座標変換指定用枠の配置位置（つまり、枠を構成する線の描画位置）は予め規定されており、座標変換指定用枠の中心に対する座標変換指定用枠の配置位置の情報（以下、枠配置位置情報）は、例えば車両側制御部２５のＥＥＰＲＯＭ等の不揮発性メモリに格納されているものとする。車両側制御部２５では、この枠配置位置情報をもとに、検知したタッチ操作の操作位置の座標を中心とした場合の座標変換指定用枠の配置位置を決定し、座標変換指定用枠を表示させる。

本実施形態では、座標変換指定用枠として、図１９に示すように、破線で示される矩形の枠を重畳表示させるものとして以降の説明を続ける。なお、図１９中の破線で示す円がタッチ操作の操作位置を示している。なお、座標変換指定用枠は、矩形以外にも円形であっても、他の形状であってもよいが、本実施形態では矩形であるものとして説明を続ける。

図１８に戻って、ステップＳ６６では、ステップＳ６１で検知したタッチ操作（以下、先行タッチ操作）に続く再度のタッチ操作（以下、後続タッチ操作）が行われたか否かを判定する。そして、後続タッチ操作が行われたと判定した場合（ステップＳ６６でＹＥＳ）には、ステップＳ６７に移る。また、後続タッチ操作が行われたと判定しなかった場合（ステップＳ６６でＮＯ）には、ステップＳ７２に移る。

また、先行タッチ操作は、請求項の１回目のタッチ操作に相当する。ここで言うところの１回目とは、後続タッチ操作に先行するタッチ操作であって、座標変換指定用枠が重畳表示されていない状態において、画面上のボタン表示以外のオブジェクトや画像に対して行われるタッチ操作を示している。

ステップＳ６７では、座標変換の種類および方向の決定を行って、ステップＳ６８に移る。座標変換の種類および方向の決定は、後続タッチ操作の操作位置と枠配置位置情報とをもとに、後続タッチ操作の操作位置の座標変換指定用枠の配置位置に対する位置関係を判断することで行う。詳しくは、後続タッチ操作の操作位置が座標変換指定用枠の枠上であると判断した場合には、座標変換の種類を平行移動と決定するとともに、先行タッチ操作の操作位置に対する後続タッチ操作の操作位置の方向をその平行移動の方向と決定する。また、後続タッチ操作の操作位置が座標変換指定用枠の枠よりも内側であると判断した場合には、座標変換の種類をスケール変換と決定するとともに、スケール変換の方向を縮小と決定する。さらに、後続タッチ操作の操作位置が座標変換指定用枠の枠よりも外側であると判断した場合には、座標変換の種類をスケール変換と決定するとともに、スケール変換の方向を拡大と決定する。なお、タッチ操作の操作位置が、座標変換指定用枠の枠上の所定範囲内である近傍にある場合も、タッチ操作の操作位置が、座標変換指定用枠の枠上に位置すると判定しても良い。この場合、座標変換指定用枠の枠線のサイズを大きく（太く）することなく（換言すると、枠線後方の情報表示を見難くすることなく）、座標変換指定用枠に対するタッチ操作（詳しくは位置決め操作）を容易にすることが出来る。

ステップＳ６８では、ステップＳ６７で決定した座標変換の種類および方向の座標変換を画面上の表示に一定量行うためのスライド操作が携帯タッチパネル部１４に行われたと仮定した場合の携帯タッチパネル部１４でのスライド操作の始点・終点の座標の情報を生成し、ステップＳ６９に移る。変形例２でも、この始点・終点の座標の情報を擬似操作情報と呼ぶものとする。ここで言うところの一定量も、固定値であって任意に設定可能な量である。また、ここで言うところの一定量として、座標変換の種類ごとにそれぞれ異なった固定値が設定されている構成としてもよい。

例えば、座標変換の種類が平行移動、且つ、座標変換の方向が上下方向への移動を含まない右方向のみへの移動と決定された場合には、ステップＳ６１で検知したタッチ操作の操作位置座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標を始点の座標として擬似操作情報を生成する。また、当該始点の座標から上下方向への移動を含まない右方向のみに一定量移動した座標を終点の座標として擬似操作情報を生成する。座標変換の種類が平行移動であって、座標変換の方向が他の方向であった場合についても、同様にして擬似操作情報を生成するものとする。座標変換の種類が平行移動の場合には、擬似操作情報として始点の座標の情報と終点の座標の情報とをそれぞれ１種類ずつ生成することになる。

座標変換の種類がスケール変換、且つ、座標変換の方向が拡大と決定された場合には、先行タッチ操作の操作位置座標に対応するスマートフォン１の携帯タッチパネル部１４の画面上の座標（以下、基準座標）を中心としてお互いが第１の距離だけ離れた２点の座標を始点の座標として擬似操作情報を生成する。ここで言うところの第１の距離とは、後述する第２の距離より短い距離であって任意に設定可能な値である。また、基準座標を中心としてお互いが第２の距離だけ離れた２点の座標を終点の座標として擬似操作情報を生成する。ここで言うところの第２の距離とは、第１の距離より短い距離であって任意に設定可能な値であり、第１の距離と第２の距離との比率は、固定値となっている。

座標変換の種類がスケール変換、且つ、座標変換の方向が縮小と決定された場合には、基準座標を中心としてお互いが第２の距離だけ離れた２点の座標を始点の座標として擬似操作情報を生成する。また、基準座標を中心としてお互いが第１の距離だけ離れた２点の座標を終点の座標として擬似操作情報を生成する。座標変換の種類がスケール変換の場合には、擬似操作情報として始点の座標の情報と終点の座標の情報とをそれぞれ２種類ずつ生成することになる。

ステップＳ６９では、ステップＳ５８で生成した擬似操作情報を車両側通信部２１からスマートフォン１に送信させ、ステップＳ７０に移る。ステップＳ６９では、擬似操作情報を送信する場合に、始点の座標の情報を先に送信した後に、所定の時間間隔をおいて終点の座標の情報を送信するものとする。ここで言うところの所定の時間間隔とは、任意に設定可能な時間間隔であって、例えば１秒以下の時間間隔を設定するなどすればよい。

また、変形例２においても、前述の実施形態と同様に、始点の座標（つまり、初期ポイント）、終点の座標（つまり、簡易入力用の終点座標）、擬似スライドデータについての操作対象位置を特定し、特定した操作対象位置を擬似操作情報としスマートフォン１に送信する構成としてもよい。この場合には、視点の座標についての擬似操作情報、擬似スライドデータについての擬似操作情報、終点の座標についての擬似操作情報の順番に、所定の時間間隔をおいて送信することになる。なお、所定の時間間隔とは、任意に設定可能な時間間隔であって、例えばスマートフォン１での表示や反応速度の自然さと処理能力とを考慮して予め設定される構成とすればよい。

ステップＳ７０では、スマートフォン１から新規の画面データを受信したか否かを判定する。そして、新規の画面データを受信したと判定した場合（ステップＳ７０でＹＥＳ）には、新規の画面データに従った画面を車両用タッチパネル部２４の画面に表示させ、ステップＳ７１に移る。また、新規の画面データを受信したと判定しなかった場合（ステップＳ７０でＮＯ）には、ステップＳ７０のフローを繰り返す。

ステップＳ７１では、車両用タッチパネル部２４に新たに表示された画面に対しても、ステップＳ６５で重畳表示を行ったのと同じ位置に座標変換指定用枠を重畳表示させ、座標変換指定用枠の重畳表示を維持する。そして、ステップＳ６６に戻ってフローを繰り返す。

ステップＳ７２では、座標変換指定用枠を車両用タッチパネル部２４の画面に表示させてからの経過時間が所定の時間を越えた（つまり、タイムアウト）か否かを判定する。座標変換指定用枠を車両用タッチパネル部２４の画面に表示させてからの経過時間とは、ステップＳ７１で座標変換指定用枠を重畳表示し直した場合には、重畳表示をし直してからの経過時間となる。ここで言うところの所定の時間とは、任意に設定可能な時間であって、例えば数秒とすればよい。また、当該経過時間は、図示しないタイマ回路等によってカウントする構成とすればよい。そして、タイムアウトと判定した場合（ステップＳ７２でＹＥＳ）には、フローを終了する。また、タイムアウトと判定しなかった場合（ステップＳ７２でＮＯ）には、ステップＳ６６に戻ってフローを繰り返す。

スマートフォン１では、擬似操作情報を受信した場合には、擬似操作情報が示す始点の座標の数から操作位置の数を検知し、当該始点の座標と擬似操作情報が示す終点の座標とからスライド操作を検知する。操作位置の数およびスライド操作の検知については、携帯タッチパネル部１４にタッチ操作が行われた場合の操作位置の数およびスライド操作の検知と同様にして行うものとする。そして、スマートフォン１では、検知した操作位置の数およびスライド操作に応じて、前述した座標変換処理と同様にして、携帯タッチパネル部１４の画面上に表示させる画像の表示の平行移動やスケール変換や回転といった座標変換を行う。

以上の構成によれば、擬似操作情報を受信したスマートフォン１では、この擬似操作情報を受信するごとに、携帯タッチパネル部１４に表示させる画面上の表示に、車両用タッチパネル部２４の画面に重畳表示させた座標変換指定用枠の配置位置に対する後続タッチ操作の操作位置の位置関係に応じて車両側制御部２５で決定した種類および方向の座標変換を一定量行うことができる。

ここで、座標変換指定用枠の配置位置に対する後続タッチ操作の操作位置の位置関係に応じて携帯タッチパネル部１４の画面に表示させる画像の座標変換を行わせる場合について、図１９および図２０（ａ）〜図２０（ｃ）を用いて説明を行う。図１９は、座標変換指定用枠の一例を示すための模式図である。図２０（ａ）〜図２０（ｃ）は、座標変換指定用枠の配置位置に対する後続タッチ操作の操作位置の位置関係に応じてスマートフォン１側で検知されるスライド操作の操作位置の変化を示す模式図である。

図２０（ａ）は、座標変換指定用枠の枠上で後続タッチ操作が行われた場合の一例である。また、図２０（ｂ）は、座標変換指定用枠の枠外で後続タッチ操作が行われた場合の一例であって、図２０（ｃ）は、座標変換指定用枠の枠内で後続タッチ操作が行われた場合の一例である。なお、図２０（ａ）〜図２０（ｃ）中の破線の円がスマートフォン１側で検知される操作位置を示している。また、図２０（ａ）〜図２０（ｃ）中の破線の矢印が画面上の画像の移動方向を示している。

なお、拡大縮小といったスケール変換時において、検知される各スライド操作の終点間の中心の座標を画面の中心の座標へ変換するのと同様の変換を画面上の画像の表示に行い、スライド操作の終点間の中心を画面上の中心に平行移動させる処理も行われるものとして以下の説明を行う。

変形例２の構成によれば、座標変換指定用枠の枠上、且つ、先行タッチ操作の操作位置の右方向であって上下方向において同じ位置で後続タッチ操作が行われた場合、スマートフォン１側では、画面の上下方向への移動のない右方向のみへの一定量のスライド操作が検知されることになる（図２０（ａ）参照）。これにより、スマートフォン１では、携帯タッチパネル部１４の画面に表示させる画像の位置を上下方向への移動のない右方向のみに移動させることになる。

また、座標変換指定用枠の枠外で後続タッチ操作が行われた場合、２箇所の操作位置の両方を離間させる方向への一定量のスライド操作が検知されることになる（図２０（ｂ）参照）。これにより、スマートフォン１では、携帯タッチパネル部１４の画面に表示させる画像を拡大させるとともに、スライド操作の終点間の中心が画面の中心となるように画像を移動させることになる。

さらに、座標変換指定用枠の枠内でタッチ操作が行われた場合、２箇所の操作位置の両方を接近させる方向への一定量のスライド操作が検知されることになる（図２０（ｃ）参照）。これにより、スマートフォン１では、携帯タッチパネル部１４の画面に表示させる画像を縮小させるとともに、スライド操作の終点間の中心が画面の中心となるように画像を移動させることになる。よって、平行移動の移動量や画像の拡大縮小率は、１回の後続タッチ操作につき一定値となる。

このように、変形例２の構成では、１回の後続タッチ操作につき一定量の座標変換が行われることになるので、後続タッチ操作の回数の調整だけで、目的とする量の座標変換を行うことができる。後続タッチ操作の回数の調整については、車両用タッチパネル部２４の画面をユーザが注視しなくても行うことができる。従って、以上の構成によっても、スマートフォン１と車両用表示装置２とを接続して車両用表示装置２側でスマートフォン１の機能を利用可能とする場合のユーザにとっての使い勝手をより向上させることが可能になる。

また、以上の構成によれば、スマートフォン１においては画面上の２箇所を同時にスライド操作することで可能となる座標変換についても、車両用タッチパネル部２４では、座標変換指定用枠の重畳表示後に画面上の１箇所をタッチ操作することで実行可能とすることができる。従って、車両用タッチパネル部２４がシングルタッチパネルであっても、スマートフォン１においては画面上の２箇所を同時に操作することで可能となる座標変換を当該車両用タッチパネル部２４の操作で実行可能とすることが可能となり、汎用性が向上する。

さらに、以上の構成によれば、座標変換指定用枠の重畳表示後のタッチ操作を行ってから所定の時間以上の間隔が空かない場合には、座標変換指定用枠を画面上の同じ位置に重畳表示させ続けることになる。よって、例えば座標変換指定用枠の枠上でタッチ操作を繰り返すことで目的とする量の座標変換を行う場合に、タッチ操作が行い易くなり、ユーザにとっての使い勝手がさらに向上する。

なお、本発明は、上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。

１ スマートフォン（携帯端末）、２ 車両用表示装置、１１ 携帯側通信部、１２ 携帯側表示部、１３ 携帯側操作検知部、１４ 携帯タッチパネル部（携帯端末のタッチパネル）、１５ 携帯側制御部、２１ 車両側通信部、２２ 車両側表示部、２３ 車両側操作検知部、２４ 車両用タッチパネル部（車両用タッチパネル）、２５ 車両側制御部（変化検知手段、変換態様決定手段、擬似操作情報生成手段、第１重畳表示手段、規定記憶手段、格納手段、第２重畳表示手段、設定手段）、１００ 情報表示システム

Claims (13)

1. タッチパネルを備えた携帯端末と通信によって接続されるとともに、車両内で使用される車両用タッチパネルを備え、
   前記携帯端末の画面に表示させるために前記携帯端末で生成された画面データを前記携帯端末から受信し、受信した画面データが示す画面を前記車両用タッチパネルに表示するとともに、当該車両用タッチパネルに対してユーザからのタッチ操作が行われた場合に、タッチ操作が行われた当該車両用タッチパネルの画面上の位置に対応する前記携帯端末のタッチパネルの画面上での位置を特定して、特定した位置を示す情報を前記携帯端末に送信する車両用表示装置であって、
   前記車両用タッチパネルに対して、前記タッチ操作を行ったまま操作位置をスライドさせるスライド操作が行われた場合に、当該スライド操作を検知するとともに当該スライド操作により変化した操作位置を検知する変化検知手段と、
   前記変化検知手段で検知したスライド操作をもとに、表示の座標変換の種類を決定するとともに、前記変化検知手段で検知した操作位置をもとに、表示の座標変換の方向を決定する変換態様決定手段と、
   前記変換態様決定手段で決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が前記携帯端末のタッチパネルに行われたと仮定した場合の当該タッチパネルでの操作位置の変化を示す情報である擬似操作情報を生成する擬似操作情報生成手段とを備え、
   前記擬似操作情報生成手段で生成した擬似操作情報を前記携帯端末に送信することを特徴とする車両用表示装置。
2. 請求項１において、
   前記車両用タッチパネルは、複数の操作位置を同時に検知可能なタッチパネルであることを特徴とする車両用表示装置。
3. 請求項２において、
   前記変換態様決定手段は、前記タッチ操作の操作位置を１箇所だけ検知していた場合であって、且つ、前記スライド操作を検知した場合に、前記座標変換の種類を平行移動と決定するとともに、当該スライド操作により変化した操作位置をもとに、当該スライド操作により操作位置が変化した方向をその平行移動の方向と決定することを特徴とする車両用表示装置。
4. 請求項２または３において、
   前記変換態様決定手段は、前記タッチ操作の操作位置を同時に２箇所検知していた場合であって、且つ、その２箇所の操作位置の両方について前記スライド操作を検知した場合であって、当該スライド操作による各操作位置間の距離の変化を検知した場合に、前記座標変換の種類をスケール変換と決定するとともに、当該スライド操作による各操作位置間の距離の変化に応じて当該スケール変換の方向を拡大もしくは縮小と決定することを特徴とする車両用表示装置。
5. 請求項２〜４のいずれか１項において、
   前記変換態様決定手段は、前記タッチ操作の操作位置を同時に２箇所検知していた場合であって、且つ、その２箇所の操作位置の一方のみについて前記スライド操作を検知した場合に、前記座標変換の種類を回転と決定するとともに、当該スライド操作により変化した操作位置をもとに、当該回転の方向を決定することを特徴とする車両用表示装置。
6. 請求項１〜５のいずれか１項において、
   前記擬似操作情報生成手段は、前記擬似操作情報として、前記画面上の表示に一定量の座標変換を行うための操作が前記携帯端末のタッチパネルに行われたと仮定した場合の操作開始点および仮想的な操作終点の座標を生成するとともに、操作開始点から当該操作終点までの間の仮想的な操作中間点の座標も生成するものであって、
   前記擬似操作情報生成手段で生成した擬似操作情報を前記携帯端末に送信する場合に、前記操作開始点の座標を送信した後に、前記操作開始点に近い前記操作中間点の座標から順番に前記操作終点の座標まで逐次送信することを特徴とする車両用表示装置。
7. タッチパネルを備えた携帯端末と通信によって接続されるとともに、車両内で使用される車両用タッチパネルを備え、
   前記携帯端末の画面に表示させるために前記携帯端末で生成された画面データを前記携帯端末から受信し、受信した画面データが示す画面を前記車両用タッチパネルに表示するとともに、当該車両用タッチパネルに対してユーザからのタッチ操作が行われた場合に、タッチ操作が行われた当該車両用タッチパネルの画面上の位置に対応する前記携帯端末のタッチパネルの画面上での位置を特定して、特定した位置を示す情報を前記携帯端末に送信する車両用表示装置であって、
   前記車両用タッチパネルに対して、前記タッチ操作後の再度のタッチ操作が行われた場合に、当該再度のタッチ操作を検知するとともに、１回目のタッチ操作の操作位置から当該再度のタッチ操作により変化した操作位置を検知する変化検知手段と、
   前記１回目のタッチ操作が行われた場合に、表示の座標変換の種類および方向をユーザが指定するためのアイコンを前記車両用タッチパネルの画面に重畳表示させる第１重畳表示手段と、
   前記変化検知手段で検知した操作位置をもとに、前記アイコンがユーザに選択されたか否かを判断し、アイコンが選択されたと判断した場合、ユーザに選択された前記アイコンに対応する座標変換の種類および方向を、表示の座標変換の種類および方向として決定する変換態様決定手段と、
   前記変換態様決定手段で決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が前記携帯端末のタッチパネルに行われたと仮定した場合の当該タッチパネルでの操作位置の変化を示す情報である擬似操作情報を生成する擬似操作情報生成手段とを備え、
   前記擬似操作情報生成手段で生成した擬似操作情報を前記携帯端末に送信することを特徴とする車両用表示装置。
8. 請求項７において、
   前記第１重畳表示手段は、前記１回目のタッチ操作が行われた場合に、当該タッチ操作の操作位置を中心として前記アイコンを、前記車両用タッチパネルの画面に重畳表示させるものであって、
   前記車両用タッチパネルの画面上での前記アイコンの表示位置と当該アイコンの示す座標変換の種類および方向との対応関係を格納する格納手段と、
   前記中心に対する前記アイコンの配置位置と当該アイコンの示す座標変換の種類および方向との対応関係を予め規定して記憶している規定記憶手段とをさらに備え、
   前記格納手段は、前記規定記憶手段で規定している対応関係をもとに、前記車両用タッチパネルの画面上での前記アイコンの表示位置と当該アイコンの示す座標変換の種類および方向との対応関係を格納し、
   前記変換態様決定手段は、前記格納手段に格納されている対応関係を参照し、前記表示の座標変換の種類および方向を決定することを特徴とする車両用表示装置。
9. 請求項７または８において、
   前記第１重畳表示手段は、表示の平行移動の方向をユーザが指定するためのアイコン、表示の拡大縮小をユーザが指定するためのアイコン、および表示の回転方向をユーザが指定するためのアイコンの少なくともいずれかを前記車両用タッチパネルの画面に重畳表示させることを特徴とする車両用表示装置。
10. タッチパネルを備えた携帯端末と通信によって接続されるとともに、車両内で使用される車両用タッチパネルを備え、
    前記携帯端末の画面に表示させるために前記携帯端末で生成された画面データを前記携帯端末から受信し、受信した画面データが示す画面を前記車両用タッチパネルに表示するとともに、当該車両用タッチパネルに対してユーザからのタッチ操作が行われた場合に、タッチ操作が行われた当該車両用タッチパネルの画面上の位置に対応する前記携帯端末のタッチパネルの画面上での位置を特定して、特定した位置を示す情報を前記携帯端末に送信する車両用表示装置であって、
    前記車両用タッチパネルに対して、前記タッチ操作後の再度のタッチ操作が行われた場合に、当該再度のタッチ操作を検知するとともに、１回目のタッチ操作の操作位置から当該再度のタッチ操作により変化した操作位置を検知する変化検知手段と、
    前記１回目のタッチ操作が行われた場合に、当該タッチ操作の操作位置を包囲する所定の枠を前記車両用タッチパネルの画面に重畳表示させる第２重畳表示手段と、
    前記変化検知手段で検知した操作位置および前記枠の配置位置をもとに、前記変化検知手段で検知した操作位置の前記枠に対する位置関係を判断し、その判断結果に応じて、表示の座標変換の種類および方向を決定する変換態様決定手段と、
    前記変換態様決定手段で決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が前記携帯端末のタッチパネルに行われたと仮定した場合の当該タッチパネルでの操作位置の変化を示す情報である擬似操作情報を生成する擬似操作情報生成手段とを備え、
    前記擬似操作情報生成手段で生成した擬似操作情報を前記携帯端末に送信することを特徴とする車両用表示装置。
11. 請求項１０において、
    前記変換態様決定手段は、
    当該操作位置が枠上であると判断した場合には、前記座標変換の種類を平行移動と決定するとともに、前記先行するタッチ操作の操作位置に対する前記変化検知手段で検知した操作位置の方向をその平行移動の方向と決定し、
    当該操作位置が枠よりも内側であると判断した場合には、前記座標変換の種類をスケール変換と決定するとともに、当該スケール変換の方向を縮小と決定し、
    当該操作位置が枠よりも外側であると判断した場合には、前記座標変換の種類をスケール変換と決定するとともに、当該スケール変換の方向を拡大と決定することを特徴とする車両用表示装置。
12. 請求項１〜１１のいずれか１項において、
    前記変換態様決定手段で決定した種類および方向の座標変換を画面上の表示に一定量行うための操作が前記携帯端末のタッチパネルに行われたと仮定した場合の当該タッチパネルでの操作位置の変化を示す擬似操作情報を、前記擬似操作情報生成手段で生成する場合の当該一定量の値を、ユーザの操作によって設定する設定手段を備えることを特徴とする車両用表示装置。
13. タッチパネルを備えた携帯端末と、
    請求項１〜１２のいずれか１項に記載の車両用表示装置とを含み、
    前記車両用表示装置から送信される前記擬似操作情報を前記携帯端末で受信して、前記擬似操作情報に従って、前記変換態様決定手段で決定した種類および方向の座標変換を前記携帯端末のタッチパネルの画面上の表示に一定量行うことを特徴とする情報表示システム。

Images