JP6574939B2 - 表示制御装置、表示制御方法、表示制御システムおよび頭部装着ディスプレイ - Google Patents

Description

本開示は、表示制御装置、表示制御方法、表示制御システムおよび頭部装着ディスプレイに関する。

ユーザが装着して使用するウェアラブル端末の１つとして、ヘッドマウントディスプレイ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ、頭部装着ディスプレイ；以下「ＨＭＤ」とする。）がある。ＨＭＤは、ユーザの頭部に装着して使用する表示装置であり、近年、ＡＶ機器やコンピュータゲーム等の表示装置の他、作業環境において作業しながらユーザが情報を確認するための表示装置としても使用されている。

例えば、医療現場において、内視鏡の映像を映し出すための表示装置としてＨＭＤが使用されている。術者は、ＨＭＤを装着し、ＨＭＤに映し出された映像を見ながら手術を行う。これまで内視鏡の映像は術者の近くに設置されたモニタに表示されるのが一般的であったため、術者はモニタと患部との間で視線を頻繁に動かす必要があった。内視鏡の映像をＨＭＤに映し出すことにより、術者は視線を大きく動かすことなくＨＭＤの表示部に表示された内視鏡の映像と患部とを確認することが可能となる。

ここで、手術室内で複数のユーザがＨＭＤを使用する場合、各ユーザの担当や好みに応じてＨＭＤの表示部に表示する表示内容や表示設定が異なる。表示部の表示設定は、通常ＨＭＤを装着する毎に都度設定することはできるが、手間がかかる。そこで、表示設定情報として予め記憶しておき、ＨＭＤを使用するユーザのパスワードが識別された際、当該パスワードに関連付けられた表示設定情報に基づいて自動的にＨＭＤの表示設定を行うことも提案されている（例えば、特許文献１）。

特開平０９−９３５１３号公報

しかし、上記特許文献１に記載の技術では、そのＨＭＤに記憶されているユーザの表示設定情報に基づいて表示設定を行うため、ユーザにとって自動で表示設定がなされるＨＭＤは固定されていた。また、複数のユーザでＨＭＤの表示設定を同一にしたい場合も、各ＨＭＤで表示設定を行う必要があった。

そこで、本開示では、複数のＨＭＤの表示設定をそれぞれ容易に行うことが可能な、新規かつ改良された表示制御装置、表示制御方法、表示制御システムおよび頭部装着ディスプレイを提案する。

本開示によれば、複数の頭部装着ディスプレイそれぞれについて、取得されたユーザ識別情報に関連付けられた表示設定情報に基づいて、頭部装着ディスプレイの表示設定を行う表示制御部を備える、表示制御装置が提供される。

また、本開示によれば、複数の頭部装着ディスプレイそれぞれについて、取得されたユーザ識別情報に関連付けられた表示設定情報に基づいて、頭部装着ディスプレイの表示設定を行う、表示制御方法が開示される。

さらに、本開示によれば、複数の頭部装着ディスプレイと、頭部装着ディスプレイのそれぞれについて表示設定を行う表示制御装置と、からなり、頭部装着ディスプレイは、少なくともユーザ識別情報を取得するリーダ部を備え、表示制御装置は、各頭部装着ディスプレイからユーザ識別情報が入力される入力部と、ユーザ識別情報に関連付けられた表示設定情報に基づいて、頭部装着ディスプレイの表示設定を行う表示制御部と、を備える、表示制御システムが提供される。

また、本開示によれば、少なくともユーザ識別情報を取得するリーダ部と、リーダ部により取得された情報を、表示制御装置に出力する出力部と、を備える、頭部装着ディスプレイが提供される。

以上説明したように本開示によれば、複数のＨＭＤの表示設定をそれぞれ容易に行うことが可能となる。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。

本開示の第１の実施形態に係る内視鏡システムの一構成例を示すシステム構成図である。 同実施形態に係るＨＭＤの表示設定時のユーザの動作を説明する説明図である。 同実施形態に係る表示制御システムを構成するＨＭＤおよびプロセッサユニットの機能構成を示す機能ブロック図である。 ＨＭＤの表示設定情報の１つである映像の表示の向きを説明する説明図である。 ＨＭＤの表示設定情報の１つである映像の配置を説明する説明図である。 同実施形態に係る表示制御システムにおける表示設定情報に基づく表示処理を示すフローチャートである。 プロセッサユニットにユーザ名を表示させる例を示す説明図である。 プロセッサユニットにユーザＩＤを表示させる例を示す説明図である。 プロセッサユニットにＨＭＤに表示されている画像を表示させる例を示す説明図である。 外部のディスプレイに通知オブジェクトを表示させる例を示す説明図である。 本開示の第２の実施形態に係る表示制御システムを構成するＨＭＤおよびプロセッサユニットの機能構成を示す機能ブロック図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．第１の実施形態（プロセッサユニットにて表示設定情報を保持する場合）
１．１．システム構成
１．２．表示設定方法
（１）概要
（２）機能構成
（３）表示設定処理
２．第２の実施形態（ＩＣカードにて表示設定情報を保持する場合）
３．まとめ

＜１．第１の実施形態＞
［１．１．システム構成］
まず、図１を参照して、本開示の第１の実施形態に係るＨＭＤを使用したシステムの一例として、内視鏡システムについて説明する。なお、図１は、本実施形態に係る内視鏡システム１の一構成例を示すシステム構成図である。

本実施形態に係る内視鏡システム１は、内視鏡手術において用いられるシステムであり、術者はＨＭＤを装着して内視鏡装置により撮像された患部の様子を視認しながら手術する。内視鏡システム１は、図１に示すように、ＨＭＤ１００（１００Ａ、１００Ｂ）と、ディスプレイ３００と、外部機器４００（４００Ａ、４００Ｂ）とが、プロセッサユニット２００に接続されて構成されている。

ＨＭＤ１００は、外部機器４００からの入力映像等の情報を表示する表示装置である。ＨＭＤ１００は、例えばゴーグル形状の非透過型のＨＭＤであって、ユーザが頭部に装着した状態で使用される。ＨＭＤ１００は、当該ＨＭＤ１００の装着者に情報を提示する表示部を備える本体部と、本体部を頭部に固定させるための上部固定部および後部固定部とからなる。固定部で装着者の頭部に固定されると、本体部の表示部が装着者の左右の眼の前に位置するようになる。

本体部は、装着者の両眼を覆う部位である。本体部は、例えば装着者の左右のこめかみ付近まで覆うように構成されてもよい。このような形状とすることで、装着時に装着者の眼前をほぼ完全に被覆することができ、装着者の眼に外光が入射せずより画像を見やすくすることができる。本体部の外表面には、例えば周辺環境を撮影するための撮像部を備えてもよい。これにより、ＨＭＤ１００の装着者は、プロセッサユニット２００を介して外部機器４００等から提供される情報以外に、ＨＭＤ１００を装着していないときに見える周辺環境の情報も認識できるようになる（ビデオシースルー）。

また、本実施形態に係るＨＭＤ１００は、例えば本体部には、ユーザ固有の情報であるユーザ識別情報を読み取るためのリーダ部（図２の符号１７０）が設けられている。リーダ部は、例えばＮＦＣ（Near field communication；近距離無線通信）によりＮＦＣ対応デバイスから情報を取得可能に構成される。

本体部の内部には、第１の表示部に左眼用画像を提示する第１の表示素子（図３の符号１６５）と、第２の表示部に右眼用画像を提示する第２の表示素子（図３の符号１６６）とが設けられている。各表示素子は、例えばプロセッサユニット２００より提供される内視鏡装置の画像や、本体部の撮像部により撮像された画像等を提示する。なお、ＨＭＤ１００の表示部に表示される画像の表示制御処理については、後述する。また、本体部には、プロセッサユニット２００との情報の送受信を行うため、プロセッサユニット２００に接続されるケーブル１４０（１４０Ａ、１４０Ｂ）が設けられている。本実施形態では、ＨＭＤ１００とプロセッサユニット２００は有線接続されているが、本開示はかかる例に限定されず、機器間での情報通信は無線通信により行ってもよい。

このＨＭＤ１００の表示部に表示される情報は、リモートコントローラ１０２（１０２Ａ、１０２Ｂ）によって切り替えるようにしてもよい。リモートコントローラ１０２は、１つのＨＭＤ１００と対となって設けられる。例えばリモートコントローラは装着者が足で踏み入力操作を行うフットスイッチであってもよい。リモートコントローラ１０２からの入力情報は、プロセッサユニット２００へ出力される。

プロセッサユニット２００は、接続された機器を制御する制御装置である。本実施形態においては、プロセッサユニット２００は、図１に示すように、ＨＭＤ１００（１００Ａ、１００Ｂ）と、ディスプレイ３００と、外部機器４００（４００Ａ、４００Ｂ）とを制御する。具体的には、プロセッサユニット２００は、外部機器４００から入力された情報を、ＨＭＤ１００の表示部やディスプレイ３００に表示可能な情報に処理し、各表示装置へ出力する。また、プロセッサユニット２００は、各ＨＭＤ１００のリモートコントローラ１０２からの操作入力に基づいて、ＨＭＤ１００の表示部に表示する情報を切り替える。

ディスプレイ３００は、不特定のユーザが情報を見るための外部の表示装置である。ディスプレイ３００は、主として、ＨＭＤ１００の装着者とともに作業する、ＨＭＤ１００の非装着者が情報を見るために用いられる。ディスプレイ３００には、外部機器４００からの入力情報やその他の情報を表示することができる。ディスプレイ３００に表示される情報は、装着者、非装着者、あるいはプロセッサユニット２００によって設定される。

外部機器４００は、ＨＭＤ１００やディスプレイ３００等の表示装置に表示する情報を出力する機器である。本実施形態の内視鏡システム１においては、例えば外部機器Ａ４００Ａは内視鏡装置であって、内視鏡装置のカメラにより撮像された映像がプロセッサユニット２００へ出力される。

このような内視鏡システム１では、外部機器４００から入力された情報がプロセッサユニット２００により処理され、ＨＭＤ１００やディスプレイ３００等の表示装置に表示される。

［１．２．表示設定方法］
次に、図２〜図１０に基づいて、本実施形態に係る各ＨＭＤ１００の表示設定方法について説明する。

（１）概要
まず、図２に基づいて、本実施形態に係るＨＭＤ１００の表示設定方法の概要を説明する。なお、図２は、本実施形態に係るＨＭＤ１００の表示設定時のユーザの動作を説明する説明図である。

本実施形態において、ＨＭＤ１００の表示部の表示設定は、ＨＭＤ１００に設けられた情報を取得するリーダ部１７０によりユーザ識別情報を取得することにより行われる。ユーザ識別情報は、ユーザＩＤ等のユーザ固有の情報であって、例えば図２に示すように、ユーザが保持しているＩＤカード５００等から取得される。ＩＤカード５００はＮＦＣ対応のカードであり、ユーザＩＤおよびユーザ名、ユーザの所属（部署）等が記憶されている。ＩＤカード５００をＨＭＤ１００のリーダ部１７０に近接させることで、リーダ部１７０はＩＤカード５００に記憶されているユーザ識別情報を読み取ることができるようになる。

医療現場においては、衛生上、ＨＭＤ１００に手で触れることができない場合も多い。そこで、ＮＦＣ対応カードのような非接触型ＩＣカードを用いることで、例えば手術着の下にＩＤカード５００を装着した状態でも、ユーザは手を使わずにＨＭＤ１００のリーダ部１７０でユーザ識別情報を読み取ることが可能となる。なお、ＩＤカード５００以外にも、ＮＦＣ対応のデバイス等からユーザ識別情報を取得してもよい。

また、ＩＤカード５００から取得されたユーザ識別情報は、ユーザの属性の判別にも利用することができる。例えば、ユーザ識別情報にユーザが医療従事者であるかを示す属性が関連付けられているとする。この場合、リーダ部１７０によりユーザ識別情報が読み取られた際に、そのユーザ識別情報のユーザが医療従事者であるかが判定され、医療従事者である場合のみＨＭＤ１００が使用可能となるようにしてもよい。

ＨＭＤ１００のリーダ部１７０にて取得されたユーザ識別情報は、ケーブル１４０を介してプロセッサユニット２００に入力される。プロセッサユニット２００は、ＨＭＤ１００の表示部の表示設定情報をユーザ識別情報と関連付けて記憶している。プロセッサユニット２００は、ＨＭＤ１００から入力されたユーザ識別情報に対応する表示設定情報を取得し、取得した表示設定情報に基づいてそのＨＭＤ１００の表示設定を行う。これにより、ユーザが毎回異なるＨＭＤ１００を使用しても、ユーザが予め設定した表示設定情報で画像を表示させることができる。また、複数ユーザのＨＭＤ１００の表示設定を同一にしたい場合には、設定したい表示設定となっているユーザのＩＤカード５００を他のユーザが使用するＨＭＤ１００のリーダ部１７０にて読み取らせるだけで、複数ユーザのＨＭＤ１００の表示設定を同一にできる。

このように、本実施形態に係るＨＭＤ１００の表示設定方法では、それぞれのユーザについて、ＨＭＤ１００の表示部の表示設定を容易に行うことができ、ユーザが使用するＨＭＤ１００を固定する必要もなくなる。また、複数ユーザの表示設定を同一にする場合にも特別な操作をする必要もなく、設定の手間を省略することができる。

（２）機能構成
次に、図３〜図５に基づいて、本実施形態に係る表示制御システムを構成するＨＭＤ１００およびプロセッサユニット２００の機能構成について説明する。なお、図３は、本実施形態に係る表示制御システムを構成するＨＭＤ１００およびプロセッサユニット２００の機能構成を示す機能ブロック図である。図４は、ＨＭＤ１００の表示設定情報の１つである映像の表示の向きを説明する説明図である。図５は、ＨＭＤ１００の表示設定情報の１つである映像の配置を説明する説明図である。

なお、図３では、ＨＭＤ１００の表示部の表示制御を行う際に機能する機能部を示しており、実際には、他の機能部を備えているものとする。プロセッサユニット２００は、ＩＤカード５００から取得されたユーザ識別情報に関連付けられた表示設定情報に基づき、ＨＭＤ１００の表示制御を行う表示制御装置として機能する。

まず、ＨＭＤ１００の表示処理機能についてみると、図３に示すように、ＨＭＤ１００は、ディスプレイポート１６２と、画像生成部１６４と、表示素子１６５、１６６と、リーダ部１７０とを備える。

ディスプレイポート１６２は、プロセッサユニット２００からの入力情報を受けるインタフェースである。ディスプレイポート１６２には、プロセッサユニット２００との情報通信を可能にするケーブル１４０が接続される。ディスプレイポート１６２には、例えば表示素子１６５、１６６へそれぞれ出力する画像信号や、ＨＭＤ１００の装着者が視認している情報が入力される。ディスプレイポート１６２から入力された情報は、画像生成部１６４へ出力される。

画像生成部１６４は、プロセッサユニット２００を介して取得された情報に基づき、表示素子１６５、１６６へそれぞれ出力する画像信号を生成する。装着者に提示する画像が３Ｄ画像である場合には、画像生成部１６４は、第１の表示素子１６５へ出力される左眼用画像信号と第２の表示素子１６６へ出力される右眼用画像信号とにずれを生じさせるずらし処理を行う。ずらし処理では、例えば表示素子１６５、１６６と装着者の眼との距離や装着者の眼の間隔、虚像位置等に応じて、左眼用画像信号と右眼用画像信号とのずらし量が決定される。画像生成部１６４は、生成した画像信号を、第１の表示素子１６５および第２の表示素子１６６へ出力する。

表示素子１６５、１６６は、画像生成部１６４から入力される画像信号に基づいて、表示部に向かって画像光を出射する。表示素子１６５、１６６は、例えばＨＭＤ１００の装着時に装着者の顔の前後方向に表示部と対向するように配置される。これにより、表示素子１６５、１６６から出射される画像光の光軸は、装着者が正面を向いたときの視線の方向と略平行になる。

表示素子１６５、１６６は、例えば有機ＥＬ（Electroluminescence）素子で構成される。表示素子１６５、１６６として有機ＥＬ素子を採用することで、小型で、高コントラスト、迅速な応答性等を実現することができる。表示素子１６５、１６６は、例えば複数の赤色有機ＥＬ素子、緑色有機ＥＬ素子、青色有機ＥＬ素子等がマトリクス状に配置された構成を有する。これらの各素子は、アクティブマトリクス型、あるいはパッシブマトリクス型等の駆動回路によって駆動されることで、それぞれ所定のタイミング、輝度等にて自発光する。この駆動回路が画像生成部１６４で生成された画像信号に基づいて制御されることで、表示素子１６５、１６６には全体として所定の画像が表示され、表示部を介して装着者に画像が提供される。

なお、表示素子１６５、１６６と表示部との間には、光学系として、例えば複数の接眼レンズ（図示せず。）をそれぞれ配置させてもよい。これらの接眼レンズと装着者の眼とを所定距離で対向させることにより、装着者に対し、画像が所定位置（虚像位置）に表示されるように見える虚像を観察させることが可能となる。このような虚像を提示することで、３Ｄ画像を提供することができる。なお、虚像位置及び虚像の大きさは、表示素子１６５、１６６及び光学系の構成等によって設定される。

リーダ部１７０は、ＩＤカード５００からユーザ識別情報を読み取る機器である。リーダ部１７０は、例えば図２に示すように本体部の外表面に設けられている。リーダ部１７０は、ＮＦＣにより、当該リーダ部１７０に所定の距離以上近づけられたＩＤカード５００等からユーザ識別情報を取得し、プロセッサユニット２００へ送信する。

次いで、プロセッサユニット２００の表示処理機能についてみる。プロセッサユニット２００は、図３に示すように、画像入力部２１１と、画像処理部２１２と、入力部２１３と、表示制御部２１４と、出力部２１５と、操作入力部２１６と、設定記憶部２１７と、を備える。

画像入力部２１１は、外部機器４００からプロセッサユニット２００に入力される画像を受けるインタフェースである。図３の例では、外部機器４００として内視鏡装置１０が示されており、このとき画像入力部２１１には、内視鏡装置１０のカメラ（図示せず。）により撮像された画像が入力される。画像入力部２１１は、入力された画像を画像処理部２１２へ出力する。

画像処理部２１２は、プロセッサユニット２００に入力された画像を、ＨＭＤ１００に表示させるための画像に処理する。画像処理部２１２では、例えば、内視鏡装置１０のカメラにより撮像された画像から、ＨＭＤ１００の第１の表示部に表示させる左眼用画像と第２の表示部に表示させる右眼用画像とを生成する。画像処理部２１２により画像処理された画像は、表示制御部２１４へ出力される。

入力部２１３は、ＨＭＤ１００のリーダ部１７０にて取得されたユーザ識別情報が入力されるインタフェースである。入力部２１３に入力されたユーザ識別情報は、表示制御部２１４へ出力される。

表示制御部２１４は、ＨＭＤ１００の表示部に表示させる情報を制御する。表示制御部２１４は、リモートコントローラ１０２からの表示切替指示に基づき、指示された情報を表示するように制御する。また、表示制御部２１４は、入力部２１３から入力されたユーザ識別情報に基づいて対応する表示設定情報を取得し、取得された表示設定情報に基づいて、表示設定を行う。表示制御部２１４は、各ＨＭＤ１００に表示させる情報およびその表示設定を決定すると、出力部２１５を介して当該情報を各ＨＭＤ１００へ出力する。

操作入力部２１６は、ＨＭＤ１００の装着者からの操作入力を受ける入力部である。本実施形態において、ＨＭＤ１００の表示部に表示される情報は、リモートコントローラ１０２によって切替可能である。リモートコントローラ１０２に対する操作入力は操作入力部２１６へ出力され、操作入力部２１５はこの操作入力情報を表示制御部２１４に出力する。表示制御部２１４は、リモートコントローラ１０２からの表示切替指示に基づき、指示された情報を、出力部２１５を介してＨＭＤ１００へ出力する。

設定記憶部２１７は、各ユーザ識別情報に対応するＨＭＤ１００の表示設定情報を記憶する記憶部である。設定記憶部１２７に記憶されている表示設定情報は、例えば、画質や画像の向き、画像の配置等の各種設定情報を含んで構成される。例えば、画質の設定情報は、画像の明るさや色合い等の設定値を表す情報である。画像の向きの情報は、表示部に表示される画像の表示向きを表す情報である。ここで、画像の表示向きとは、基準とする画像の表示状態に対する変化を表す。

例えば、図４に示すように、４人のユーザＰ１〜Ｐ４が作業している状況しており、各ユーザＰ１〜Ｐ４が装着しているＨＭＤ１００の表示部には、それぞれユーザＰ１が操作しているカメラにより撮影されている画像が表示されているとする。ユーザＰ１の装着するＨＭＤ１００の表示部には、図４右側に示す通常モードの画像が表示されている。この通常モードの画像を基準とする。ここで、撮影対象をユーザＰ１〜Ｐ４が囲んでいるとき、ユーザの立ち位置によって撮影対象の見え方が異なる。例えば、撮影対象を挟んでユーザＰ１と対向する位置にいるユーザＰ３、Ｐ４は、画像を通常モードから１８０°回転させた状態で画像を表示させた方が実際の見え方に近くなる。また、ユーザＰ１の隣にいるユーザＰ２に対しては、画像を通常モードから左右反転モードで表示させた方がよい場合もある。

各ユーザＰ１〜Ｐ４の立ち位置は、ユーザの作業時の役割によって決まることが多い。そこで、頻繁に変更される設定情報ではない場合には、各ユーザのユーザ識別情報に関連付けて画像の表示向きの設定を予め記憶しておくことで、ユーザの表示設定の負荷を軽減することができる。

また、画像の配置の情報は、ＰｉｎＰ機能により表示領域内に１または複数の画像を同時に表示させることが可能な場合に、どの画像をどのように配置して表示するかを表す情報である。例えば、図５に示す例では、ユーザＰ１は、ＨＭＤ１００の表示部の全体にメイン画面を表示させ、メイン画面の右上にサブ画面を小さく表示させるように設定している。例えば、メイン画像を内視鏡カメラの映像とし、サブ画像をＣＴスキャン画像とすると、メイン画面に内視鏡カメラの映像が大きく表示され、その右上にＣＴスキャン画像が表示されるようになる。

また、ユーザＰ３は、ＨＭＤ１００の表示部の左側にメイン画面を表示させ、メイン画面の右側に２つのサブ画面を小さく表示させるように設定している。例えば、メイン画像を内視鏡カメラの映像とし、サブ画像をレントゲン写真および外部視野画像（ビデオシースルー画像）とすると、メイン画面に内視鏡カメラの映像が表示され、その右側にレントゲン写真とビデオシースルー画像とが上下に並んで表示される。このように、各ユーザが見たい画像を見やすい配置で提示することができる。

設定記憶部２１７には、このようなＨＭＤ１００の表示部に表示される画像の表示設定情報が、ユーザ識別情報に関連付けられて記憶される。なお、設定記憶部２１７に記憶されている表示設定情報は、ユーザが設定を変更した場合には変更後の設定を記憶させるようにしてもよい。

（３）表示設定処理
図６〜図９に基づいて、本実施形態に係る表示制御システムにおける表示設定情報に基づく表示処理について説明する。なお、図６は、本実施形態に係る表示制御システムにおける表示設定情報に基づく表示処理を示すフローチャートである。図７〜図９は、プロセッサユニット２００に表示設定の状態を表示させる例を示す説明図である。

本実施形態に係る表示制御システムにおいて、ＨＭＤ１００の表示部の表示設定を行うには、まず、設定するＨＭＤ１００のリーダ部１７０にユーザ識別情報を取得させる（Ｓ１００）。ユーザは、例えば図２に示したように、ＨＭＤ１００のリーダ部１７０に対して、ユーザ識別情報を保持しているＩＤカード５００近づけて、ユーザ識別情報を取得させる。リーダ部１７０により取得されたユーザ識別情報は、ケーブル１４０を介してプロセッサユニット２００へ出力される。

次いで、ＨＭＤ１００からユーザ識別情報の入力を受けたプロセッサユニット２００は、表示制御部２１４により、ユーザ識別情報に対応する表示設定情報を設定記憶部２１７から取得する（Ｓ１１０）。そして、表示制御部２１４は、ユーザ識別情報に関連付けられた表示設定情報を取得すると、その表示設定情報に基づいて、画像処理部２１２により画像処理された画像がＨＭＤ１００に表示されるよう制御する（Ｓ１２０）。例えば表示制御部２１４は、画像の明るさや色合い、画像の表示の向き、表示させる画像数とその配置等を、表示設定情報に設定されている内容に基づき設定する。なお、表示設定情報にて指定されていない表示設定情報については、予め設定された所定の値が設定される。

表示制御部２１４により、表示設定情報に基づく画像とされると、出力部２１５を介してＨＭＤ１００に画像データが出力される。このとき、表示制御部２１４は、ＨＭＤ１００の表示設定がどのユーザ識別情報に基づくものであるかをプロセッサユニット２００に設けられた通知部に表示させるようにしてもよい（Ｓ１３０）。

プロセッサユニット２００には、当該プロセッサユニット２００に接続されたＨＭＤ１００の設定状態を示す各種通知部や、ＨＭＤ１００を操作する各種操作ボタンが設けられている。例えば、図７に示すように、それぞれ２つのＨＭＤ１００が接続されたプロセッサユニット２００−１、２００−２には、操作通知部２３０がＨＭＤ１００それぞれに対して設けられている。

操作通知部２３０には、図７に示すように、例えば、ＨＭＤ１００へ出力する画像の入力信号選択ボタン２３１や、ＨＭＤ１００に出力されている画像を通知する入力画像通知部２３２、サブ画面の表示のオン／オフを切り替えるＰｉｎＰボタン２３３がある。さらに、操作通知部２３０には、表示されている画像の向きを表す反転表示インジケータ２３４や、表示されている画像の向きを切り替える反転表示切替ボタン２３５も等が設けられている。さらに、操作通知部２３０に、本実施形態のように、ユーザ識別情報に基づいてＨＭＤ１００の表示部の設定を自動的に行った場合にどのユーザ（ユーザ識別情報）に基づき表示設定が行われたかを通知する設定通知部２３６を設けてもよい。

設定通知部２３６は、例えば情報を表示可能な表示パネル等により構成することができる。設定通知部２３６に表示される内容は、例えば図７に示すように、表示設定情報に関連付けられたユーザ識別情報を有するユーザ名（例えば、「ＡＡ医師」等）を表示してもよい。あるいは、図８に示すように、ユーザ識別情報であるユーザＩＤ（「Ａ０１」、「Ｂ０１」等）を設定通知部２３６に表示してもよく、図９に示すように、ＨＭＤ１００に表示されている画像を設定通知部２３６に表示させてもよい。

このように、プロセッサユニット２００に、ＨＭＤ１００の表示設定の状態を表示させることで、例えば第３者がＨＭＤ１００に表示させる画像を変更する際に、誤って他のＨＭＤ１００の表示設定を変更してしまうといった誤操作を防止することができる。さらに、プロセッサユニット２００の設定通知部２３６に表示された内容を、当該設定がされているＨＭＤ１００にも表示するようにしてもよい。これにより、ＨＭＤ１００を装着しているユーザの周囲の人が、より確実に、各ＨＭＤ１００の表示設定がどのようになっているかを認識することができるようになる。

また、プロセッサユニット２００は、各ＨＭＤ１００の表示設定の状態を、外部のディスプレイ３００に表示させてもよい。例えば図１０に示すように、あるユーザのＨＭＤ１００に表示されている画像６００とともに、そのＨＭＤ１００を使用するユーザ識別情報を示す通知オブジェクト６１０をディスプレイ３００に表示させてもよい。通知オブジェクト６１０には、図１０に示すようなユーザＩＤやユーザ名等が表示される。これにより、各ＨＭＤ１００の表示設定がどのユーザ識別情報に基づき行われているかを、ＨＭＤ１００の装着者以外の人に通知することができる。

また、外部のディスプレイ３００の表示面がタッチパネル等で構成されている場合には、ディスプレイ３００に表示されている表示設定の状態を表すオブジェクトを操作して、その設定を調整可能に構成することもできる。例えば、ユーザ識別情報の１つであるユーザＩＤを変更することでＨＭＤ１００の表示設定をまとめて変更できるようにしてもよく、表示設定情報に含まれる各種設定状態を変更できるようにしてもよい。これにより、例えば、看護師等の、ＨＭＤ１００の装着者以外の人も、容易にＨＭＤ１００の表示設定の切り替え等の操作を行うことが可能となる。

以上、本実施形態に係る表示制御システムにおける表示設定処理について説明した。本実施形態によれば、ＨＭＤ１００のリーダ部１７０によってＩＤカード５００等から取得されたユーザ識別情報に基づいて、予め設定された表示設定情報を取得し、ＨＭＤ１００の表示設定を行う。これにより、ユーザは、使用するＨＭＤ１００を固定する必要がなく、使用するＨＭＤ１００の表示設定も容易に行うことができる。また、あるユーザの表示設定を複数ユーザで共有することも容易に行うことができる。

＜２．第２の実施形態＞
図１１に基づいて、本開示の第２の実施形態に係る表示制御システムについて説明する。なお、図１１は、本実施形態に係る表示制御システムを構成するＨＭＤおよびプロセッサユニットの機能構成を示す機能ブロック図である。ここでも、第１の実施形態と同様、内視鏡システム２へ本実施形態に係る表示制御システムを適用した場合について説明する。本実施形態に係る表示制御システムは、第１の実施形態に係る表示制御システムと比較して、各ユーザのＨＭＤ１００ｐの表示設定情報がＩＤカード５００ｐに記憶されている点で相違する。以下では、第１の実施形態との相違点について説明し、第１の実施形態と同様の機能部についての詳細な説明は省略する。

まず、ＨＭＤ１００ｐの表示処理機能についてみると、図１１に示すように、ＨＭＤ１００ｐは、ディスプレイポート１６２と、画像生成部１６４と、表示素子１６５、１６６と、リーダ部１７０とを備える。これらの機能構成は、第１の実施形態に係るＨＭＤ１００と同一である。

本実施形態において、リーダ部１７０は、ＩＤカード５００ｐからユーザ識別情報に加え、ＨＭＤ１００ｐの表示設定情報も取得する。ＩＤカード５００ｐは設定記憶部５２０を記憶するメモリを備えており、設定記憶部５２０には予め各ユーザが設定したＨＭＤ１００ｐの表示設定情報が記憶されているものとする。リーダ部１７０は、取得したユーザ識別情報および表示設定情報を、プロセッサユニット２００ｐへ送信する。

一方、プロセッサユニット２００ｐの表示処理機能は、図１１に示すように、プロセッサユニット２００は、画像入力部２１１と、画像処理部２１２と、入力部２１３と、表示制御部２１４と、出力部２１５と、操作入力部２１６と、を備える。これらの機能構成は、第１の実施形態に係るプロセッサユニット２００と同一である。なお、本実施形態に係るプロセッサユニット２００ｐには、表示設定情報を記憶する設定記憶部は設けられていなくてもよい。

本実施形態に係る入力部２１３は、ＨＭＤ１００ｐのリーダ部１７０にて取得されたユーザ識別情報および表示設定情報が入力されるインタフェースである。入力部２１３に入力されたこれらの情報は、表示制御部２１４へ出力される。

表示制御部２１４は、ＨＭＤ１００ｐの表示部に表示させる情報を制御する。表示制御部２１４は、リモートコントローラ１０２からの表示切替指示に基づき、指示された情報を表示するように制御する。また、表示制御部２１４は、入力部２１３から入力された表示設定情報に基づいて、ＨＭＤ１００ｐの表示設定を行い、画像処理部２１２から入力された画像を、出力部２１５を介して各ＨＭＤ１００ｐへ出力する。

このように、ＨＭＤ１００ｐの表示設定情報を、ユーザ識別情報とともに保持しておくことで、プロセッサユニット２００ｐ内に各ユーザの表示設定情報を保持する必要がなくなる。したがって、ユーザが初めて使用するＨＭＤ１００ｐ、プロセッサユニット２００ｐに対しても、ユーザの所望の表示設定でＨＭＤ１００ｐに画像を表示することができる。なお、本実施形態においても、第１の実施形態と同様、ＨＭＤ１００ｐの表示設定の状態をＨＭＤ１００ｐや外部のディスプレイ３００に表示させるようにしてもよい。

＜３．まとめ＞
以上、本開示の実施形態に係る表示制御システムの構成とこれによる表示設定処理について説明した。上述の実施形態によれば、ＨＭＤ１００に設けられたリーダ部１７０により、少なくともユーザを特定するユーザ識別情報を取得する。そして、ユーザ識別情報に関連付けられたＨＭＤ１００の表示設定情報に基づき、当該ユーザ識別情報を取得したＨＭＤ１００の表示設定が行われる。これにより、ユーザは、使用するＨＭＤ１００を固定する必要がなく、容易に所望の表示設定を行うことができる。また、ＨＭＤ１００のリーダ部１７０にＩＤカード５００をかざせばそのＨＭＤ１００の表示設定を行うことができるので、あるユーザの表示設定情報を複数ユーザで共有することも容易に行うことができる。

また、上述の実施形態では、提案する表示制御システムを内視鏡システムへ適用した場合について説明したが、本開示はかかる例に限定されない。例えば、表示制御システムを、内視鏡以外の、他の医療機器により取得された生体内画像の表示設定へ適用することが考えられる。例えば、アンギオグラフィー（血管造影検査検査法）での血管観察やその際に行われる治療等においてＨＭＤを用いる場合や、脳外科手術にて光学系顕微鏡画像をＨＭＤで見る場合等において、その表示設定を上記表示制御システムにて行ってもよい。さらに、超音波検査等の暗い箇所での作業時にＨＭＤを用いて超音波映像や他の画像を同時に見るような場合や、拡大鏡を用いた開腹手術時にＨＭＤを用いる場合にも、上記表示制御システムにてＨＭＤの表示設定を行うこともできる。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、上記実施形態では、ユーザ識別情報の読み取るリーダ部１７０は、ＮＦＣにより情報を取得するものとしたが、本技術はかかる例に限定されない。例えば、ＨＭＤ１００の装着者の生体情報をユーザ識別情報として取得するリーダ部であってもよい。このとき、ユーザ識別情報は、例えば眼の虹彩や指紋等としてもよい。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
複数の頭部装着ディスプレイそれぞれについて、取得されたユーザ識別情報に関連付けられた表示設定情報に基づいて、頭部装着ディスプレイの表示設定を行う表示制御部を備える、表示制御装置。
（２）
前記頭部装着ディスプレイからの情報が入力される入力部と、
前記表示設定情報を記憶する設定記憶部と、
を備え、
前記入力部は、表示設定を行う前記頭部装着ディスプレイに設けられたリーダ部により取得された前記ユーザ識別情報の入力を受け、
前記表示制御部は、前記入力部に入力された前記ユーザ識別情報に基づいて、前記設定記憶部から前記ユーザ識別情報に関連付けられた前記表示設定情報を取得する、前記（１）に記載の表示制御装置。
（３）
前記頭部装着ディスプレイからの情報が入力される入力部を備え、
前記入力部は、表示設定を行う前記頭部装着ディスプレイに設けられたリーダ部により取得された前記ユーザ識別情報および前記表示設定情報の入力を受け、
前記表示制御部は、前記入力部に入力された前記表示設定情報に基づいて、頭部装着ディスプレイの表示設定を行う、前記（１）に記載の表示制御装置。
（４）
前記各頭部装着ディスプレイの表示設定の状態を通知する通知部を備える、前記（１）〜（３）のいずれか１項に記載の表示制御装置。
（５）
前記表示制御部は、前記頭部装着ディスプレイに対する表示設定の状態を、外部の表示装置に表示させる、前記（１）〜（４）のいずれか１項に記載の表示制御装置。
（６）
前記表示制御部は、前記各頭部装着ディスプレイの前記ユーザ識別情報を、外部の表示装置に表示させる、前記（１）〜（５）のいずれか１項に記載の表示制御装置。
（７）
前記表示設定情報は、少なくとも画質、画像の配置、画像の表示方向のうち、少なくともいずれか１つである、前記（１）〜（６）のいずれか１項に記載の表示制御装置。
（８）
前記ユーザ識別情報は、非接触型ＩＣカードに記憶されたユーザ固有の情報である、前記（１）〜（７）のいずれか１項に記載の表示制御装置。
（９）
前記表示設定情報は、前記頭部装着ディスプレイに対する生体内画像の表示に関する情報である、請求項（１）〜（８）のいずれか１項に記載の表示制御装置。
（１０）
複数の頭部装着ディスプレイそれぞれについて、取得されたユーザ識別情報に関連付けられた表示設定情報に基づいて、頭部装着ディスプレイの表示設定を行う、表示制御方法。
（１１）
複数の頭部装着ディスプレイと、
前記頭部装着ディスプレイのそれぞれについて表示設定を行う表示制御装置と、
からなり、
前記頭部装着ディスプレイは、少なくともユーザ識別情報を取得するリーダ部を備え、
前記表示制御装置は、
前記各頭部装着ディスプレイからユーザ識別情報が入力される入力部と、
前記ユーザ識別情報に関連付けられた表示設定情報に基づいて、前記頭部装着ディスプレイの表示設定を行う表示制御部と、
を備える、表示制御システム。
（１２）
少なくともユーザ識別情報を取得するリーダ部と、
前記リーダ部により取得された情報を、表示制御装置に出力する出力部と、
を備える、頭部装着ディスプレイ。

１ 内視鏡システム
１００ ＨＭＤ
１０２ リモートコントローラ
１６２ ディスプレイポート
１６４ 画像生成部
１６５ 第１の表示素子
１６６ 第２の表示素子
１７０ リーダ部
２００ プロセッサユニット
２１１ 画像入力部
２１２ 画像処理部
２１３ 入力部
２１４ 表示制御部
２１５ 出力部
２１６ 操作入力部
２１７ 設定記憶部（プロセッサユニット）
３００ ディスプレイ
４００ 外部機器
５００ ＩＤカード
５２０ 設定記憶部（ＩＤカード）

Claims (11)

1. 複数の頭部装着ディスプレイそれぞれから取得されたユーザ識別情報が入力される入力部と、
   前記ユーザ識別情報に基づいて前記複数の頭部装着ディスプレイの表示部に表示される画像の表示向きを表す情報を含む表示設定情報を取得し、該表示設定情報に基づいて前記複数の頭部装着ディスプレイの前記表示部に表示される画像の表示向きに関する表示設定を行うとともに、前記ユーザ識別情報に基づく通知情報を前記複数の頭部装着ディスプレイとは異なる外部の表示装置に表示させる表示制御部と、
   を備え、
   前記表示制御部は、前記複数の頭部装着ディスプレイのうち、少なくとも一の頭部装着ディスプレイについて、当該頭部装着ディスプレイに表示されている画像と前記通知情報とを、前記表示装置に表示させるとともに、前記複数の頭部装着ディスプレイに、前記表示設定をした前記画像の表示向きを示す情報を表示させる、表示制御装置。
2. 前記表示設定情報を記憶する設定記憶部と、
   を備え、
   前記入力部は、表示設定を行う前記頭部装着ディスプレイに設けられたリーダ部により取得された前記ユーザ識別情報の入力を受け、
   前記表示制御部は、前記入力部に入力された前記ユーザ識別情報に基づいて、前記設定記憶部から前記ユーザ識別情報に関連付けられた前記表示設定情報を取得する、請求項１に記載の表示制御装置。
3. 前記入力部は、表示設定を行う前記頭部装着ディスプレイに設けられたリーダ部により取得された前記ユーザ識別情報および前記表示設定情報の入力を受け、
   前記表示制御部は、前記入力部に入力された前記表示設定情報に基づいて、頭部装着ディスプレイの表示設定を行う、請求項１に記載の表示制御装置。
4. 前記表示設定情報は、少なくとも画質、画像の配置、画像の表示方向のうち、少なくともいずれか１つである、請求項１〜３のいずれか１項に記載の表示制御装置。
5. 前記ユーザ識別情報は、非接触型ＩＣカードに記憶されたユーザ固有の情報である、請求項１〜４のいずれか１項に記載の表示制御装置。
6. 前記表示設定情報は、前記頭部装着ディスプレイに対する生体内画像の表示に関する情報である、請求項１〜５のいずれか１項に記載の表示制御装置。
7. 複数の頭部装着ディスプレイそれぞれから取得されたユーザ識別情報が入力されること、
   前記ユーザ識別情報に基づいて前記複数の頭部装着ディスプレイの表示部に表示される画像の表示向きを表す情報を含む表示設定情報を取得すること、
   取得した前記表示設定情報に基づいて前記複数の頭部装着ディスプレイの前記表示部に表示される画像の表示向きに関する表示設定を行うこと、
   前記ユーザ識別情報に基づく通知情報を前記複数の頭部装着ディスプレイとは異なる外部の表示装置に表示させること、
   とを含み、
   前記複数の頭部装着ディスプレイのうち、少なくとも一の頭部装着ディスプレイについて、当該頭部装着ディスプレイに表示されている画像と前記通知情報とを、前記表示装置に表示させるとともに、前記複数の頭部装着ディスプレイに、前記表示設定をした前記画像の表示向きを示す情報を表示させる、表示制御方法。
8. 複数の頭部装着ディスプレイと、
   前記頭部装着ディスプレイのそれぞれについて表示設定を行う表示制御装置と、
   からなり、
   前記頭部装着ディスプレイは、少なくともユーザ識別情報を取得するリーダ部を備え、
   前記表示制御装置は、
   前記各頭部装着ディスプレイから取得されたユーザ識別情報が入力される入力部と、
   前記ユーザ識別情報に基づいて前記複数の頭部装着ディスプレイの表示部に表示される画像の表示向きを表す情報を含む表示設定情報を取得し、該表示設定情報に基づいて前記複数の頭部装着ディスプレイの前記表示部に表示される画像の表示向きに関する表示設定を行うとともに、前記ユーザ識別情報に基づく通知情報を前記複数の頭部装着ディスプレイとは異なる外部の表示装置に表示させる表示制御部と、
   を備え、
   前記表示制御部は、前記複数の頭部装着ディスプレイのうち、少なくとも一の頭部装着ディスプレイについて、当該頭部装着ディスプレイに表示されている画像と前記通知情報とを、前記表示装置に表示させるとともに、前記複数の頭部装着ディスプレイに、前記表示設定をした前記画像の表示向きを示す情報を表示させる、表示制御システム。
9. 少なくともユーザ識別情報を取得するリーダ部と、
   前記リーダ部により取得された情報を、表示制御装置に出力する出力部と、
   を備え、
   請求項１〜６のいずれか１項に記載の表示制御装置により制御される、頭部装着ディスプレイ。
10. 医療用撮像装置と、
    前記医療用撮像装置で撮像された画像を表示する複数の頭部装着ディスプレイと、
    前記頭部装着ディスプレイのそれぞれについて表示設定を行う表示制御装置と、
    からなり、
    前記表示制御装置は、
    前記各頭部装着ディスプレイから取得されたユーザ識別情報が入力される入力部と、
    前記ユーザ識別情報に基づいて前記複数の頭部装着ディスプレイの表示部に表示される画像の表示向きを表す情報を含む表示設定情報を取得し、該表示設定情報に基づいて前記複数の頭部装着ディスプレイの前記表示部に表示される画像の表示向きに関する表示設定を行うとともに、前記ユーザ識別情報に基づく通知情報を前記複数の頭部装着ディスプレイとは異なる外部の表示装置に表示させる表示制御部と、
    を備え、
    前記表示制御部は、前記複数の頭部装着ディスプレイのうち、少なくとも一の頭部装着ディスプレイについて、当該頭部装着ディスプレイに表示されている画像と前記通知情報とを、前記表示装置に表示させるとともに、前記複数の頭部装着ディスプレイに、前記表示設定をした前記画像の表示向きを示す情報を表示させる、表示制御システム。
11. 前記医療用撮像装置は、内視鏡装置である、請求項１０に記載の表示制御システム。

Images