JP5817091B2 - Display device, image processing device, and program - Google Patents
Display device, image processing device, and program Download PDFInfo
- Publication number
- JP5817091B2 JP5817091B2 JP2010160026A JP2010160026A JP5817091B2 JP 5817091 B2 JP5817091 B2 JP 5817091B2 JP 2010160026 A JP2010160026 A JP 2010160026A JP 2010160026 A JP2010160026 A JP 2010160026A JP 5817091 B2 JP5817091 B2 JP 5817091B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- eye image
- eye
- unit
- viewer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 24
- 230000008859 change Effects 0.000 claims description 52
- 208000003464 asthenopia Diseases 0.000 claims description 13
- 230000004424 eye movement Effects 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 6
- 230000006854 communication Effects 0.000 description 14
- 238000000034 method Methods 0.000 description 13
- 238000004891 communication Methods 0.000 description 11
- 239000011521 glass Substances 0.000 description 9
- 230000004888 barrier function Effects 0.000 description 8
- 210000001747 pupil Anatomy 0.000 description 7
- 238000012546 transfer Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000007423 decrease Effects 0.000 description 3
- 230000010365 information processing Effects 0.000 description 2
- 230000010287 polarization Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
本発明は、表示装置、画像処理装置およびプログラムに関する。 The present invention relates to a display device, an image processing device, and a program.
視差を有する右眼用画像および左眼用画像を用いた立体的画像表示に関する技術が知られている（例えば、特許文献１参照）。
特許文献１ 特開２００６−１８４４４７号公報
A technique related to stereoscopic image display using a right-eye image and a left-eye image having parallax is known (see, for example, Patent Document 1).
Japanese Patent Application Laid-Open No. 2006-184447
しかし、視差を有する右眼用画像および左眼用画像を用いて立体的画像を観視させると、観視者の両眼の視線が交差する位置（輻輳位置）と、両眼のピントが合う調節位置とが一致せず、観視者に違和感を与える。このため、このような立体的画像を長時間観視させると、観視者に疲労が蓄積してしまう。 However, when a stereoscopic image is viewed using a right-eye image and a left-eye image having parallax, the position at which the eyes of both eyes of the viewer intersect (convergence position) is in focus with both eyes. The adjustment position does not match, giving the viewer a sense of discomfort. For this reason, when such a stereoscopic image is viewed for a long time, the viewer accumulates fatigue.
上記課題を解決するために、本発明の第１の態様においては、視差を有する右眼用画像および左眼用画像を観視者に表示する表示装置であって、右眼用画像および左眼用画像を表示する表示部と、観視者の状態を示す状態情報を取得する状態取得部と、状態取得部が検出した状態情報に基づいて、表示部が表示する右眼用画像および左眼用画像の間の視差量を調整する画像調整部と、異なる視差量を有する複数の画像要素を含む右眼用画像および左眼用画像を取得するステレオ画像取得部と、入力される二次元画像の全体をシフトして右眼用画像および左眼用画像を生成するシフト画像生成部とを備え、画像調整部は、表示部においてステレオ画像取得部が取得した右眼用画像および左眼用画像を表示している状態で、状態取得部が検出した状態情報で示される観視者の状態と、予め定められた状態との間の変化量が第１閾値を超えた場合に、表示部にシフト画像生成部が生成した右眼用画像および左眼用画像を表示させる表示装置を提供する。本発明の第２の態様においては、視差を有する右眼用画像および左眼用画像を観視者に表示する表示装置であって、右眼用画像および左眼用画像を表示する表示部と、観視者の状態を示す状態情報を取得する状態取得部と、状態取得部が検出した状態情報に基づいて、表示部が表示する右眼用画像および左眼用画像の間の視差量を調整する画像調整部とを備え、表示部は、異なる位置にいる観視者毎に右眼用画像および左眼用画像を表示し、状態取得部は、観視者毎に状態情報を取得し、画像調整部は、それぞれの観視者の状態情報に基づいて、対応する左眼用画像および右眼用画像の間の視差量を調整する表示装置を提供する。本発明の第３の態様においては、視差を有する右眼用画像および左眼用画像を観視者に表示する表示装置であって、右眼用画像および左眼用画像を表示する表示部と、観視者の状態を示す状態情報を取得する状態取得部と、状態取得部が検出した状態情報に基づいて、表示部が表示する右眼用画像および左眼用画像の間の視差量を調整する画像調整部とを備え、表示部は動画像を表示し、状態取得部は、直前の予め定められた期間内において表示部に表示した右眼用画像および左眼用画像の特性を示す情報を含む状態情報を取得し、状態取得部は、表示部に表示した右眼用画像および左眼用画像のフレーム間における、各被写体の視差量の変化、輝度の変化、および、コントラストの変化の少なくとも一つに基づいて、状態情報を取得する表示装置を提供する。
In order to solve the above-described problem, in the first aspect of the present invention, there is provided a display device that displays a right-eye image and a left-eye image having parallax to a viewer, the right-eye image and the left-eye image. A display unit that displays an image for use, a state acquisition unit that acquires state information indicating the state of the viewer, and an image for the right eye and a left eye that the display unit displays based on the state information detected by the state acquisition unit An image adjustment unit that adjusts the amount of parallax between the images for use, a stereo image acquisition unit that acquires a right-eye image and a left-eye image including a plurality of image elements having different amounts of parallax, and an input two-dimensional image And a shift image generation unit that generates an image for the right eye and an image for the left eye, and the image adjustment unit is an image for the right eye and an image for the left eye acquired by the stereo image acquisition unit in the display unit Detected by the status acquisition unit When the amount of change between the viewer state indicated by the state information and the predetermined state exceeds the first threshold, the right-eye image and the left eye generated by the shift image generation unit on the display unit Provided is a display device for displaying a business image . In a second aspect of the present invention, a display device that displays a right-eye image and a left-eye image having parallax to a viewer, a display unit that displays a right-eye image and a left-eye image; A parallax amount between the right-eye image and the left-eye image displayed by the display unit based on the state information detected by the state acquisition unit and the state information detected by the state acquisition unit. An image adjustment unit for adjustment , the display unit displays a right eye image and a left eye image for each viewer at different positions, and the state acquisition unit acquires state information for each viewer. The image adjustment unit provides a display device that adjusts the amount of parallax between the corresponding left-eye image and right-eye image based on the state information of each viewer . According to a third aspect of the present invention, there is provided a display device that displays a right-eye image and a left-eye image having parallax to a viewer, and a display unit that displays a right-eye image and a left-eye image; A parallax amount between the right-eye image and the left-eye image displayed by the display unit based on the state information detected by the state acquisition unit and the state information detected by the state acquisition unit. An image adjustment unit for adjustment , the display unit displays a moving image, and the state acquisition unit indicates characteristics of the right-eye image and the left-eye image displayed on the display unit within a predetermined period immediately before. The state acquisition unit acquires state information including information, and the state acquisition unit changes a parallax amount, a luminance change, and a contrast change of each subject between frames of the right-eye image and the left-eye image displayed on the display unit. Table at least one on the basis, obtains the status information of the To provide a device.
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。 It should be noted that the above summary of the invention does not enumerate all the necessary features of the present invention. In addition, a sub-combination of these feature groups can also be an invention.
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。 Hereinafter, the present invention will be described through embodiments of the invention, but the following embodiments do not limit the invention according to the claims. In addition, not all the combinations of features described in the embodiments are essential for the solving means of the invention.
図１は、視差を有する右眼用画像および左眼用画像を観視者２００に表示する表示装置１００の構成例を示す。表示装置１００は、表示部１０および画像処理装置２０を備える。表示部１０は、例えば液晶ディスプレイ等の表示デバイスに、右眼用画像および左眼用画像を表示する。表示部１０は、動画像を表示してよく、静止画像を表示してもよい。
FIG. 1 shows a configuration example of a
表示部１０は、右眼用画像および左眼用画像を同時に表示してよい。この場合、表示部１０は、右眼用画像からの光を観視者２００の右眼位置に集光させ、左眼用画像からの光を観視者２００の左眼位置に集光させてよい。例えば表示部１０は、パララックスバリア方式、または、レンチキュラ方式により、右眼用画像および左眼用画像の光を観視者２００の右眼位置および左眼位置に集光させる。また、表示部１０は、右眼用画像および左眼用画像からの光の偏光方向を異ならせてよい。この場合、表示装置１００は、観視者２００の右眼に対して右眼用画像の光を通過させ、観視者２００の左眼に対して左眼用画像の光を通過させる偏光メガネを更に有する。当該偏光メガネは観視者２００に装着される。
The
また、表示部１０は、右眼用画像および左眼用画像を時分割で交互に表示してもよい。この場合、表示装置１００は、観視者２００に装着され、観視者２００の右眼および左眼に対して交互に光を通過させるシャッタ付メガネを更に備える。当該シャッタ付メガネは、表示部１０が右眼用画像を表示するタイミングで観視者２００の右眼に対して光を通過させ、且つ、左眼に対しては光を通過させない。また、当該シャッタ付メガネは、表示部１０が左眼用画像を表示するタイミングで観視者２００の右眼に対して光を通過させず、且つ、左眼に対して光を通過させる。
The
画像処理装置２０は、右眼用画像および左眼用画像の画像データを表示部１０に供給する。画像処理装置２０は、画像調整部３０および状態取得部４０を有する。状態取得部４０は、観視者２００の状態を示す状態情報を取得する。状態取得部４０は、観視者２００の眼の疲労を示す状態情報、または、観視者２００の眼の状態が通常とは異なることを示す状態情報を取得してよい。また、状態取得部４０は、観視者２００の疲労の状態を示す状態情報を取得してもよい。
The
状態取得部４０は、観視者２００の眼の画像のように、観視者２００の状態を直接的に示す状態情報を取得してよい。また、状態取得部４０は、観視者２００に観視させた画像の履歴、観視者２００に画像を観視させた時間の長さ等のように、観視者２００の状態を間接的に示す状態情報を取得してもよい。
The
画像調整部３０は、状態取得部４０が検出した状態情報に基づいて、表示部１０が表示する右眼用画像および左眼用画像の間の視差量を調整する。例えば画像調整部３０は、状態取得部４０が検出した状態情報で示される観視者２００の疲労度がより大きい場合に、当該視差量をより小さくしてよい。左右画像間の視差量を小さくすることで、輻輳位置および調節位置の差を小さくすることができ、観視者２００に与える違和感を低減することができる。
The
図２は、右眼用画像１２Ｒおよび左眼用画像１２Ｌの一例を示す。右眼用画像１２Ｒおよび左眼用画像１２Ｌにおいて、同一の被写体についての画像要素１４Ｒ、１４Ｌが、視差Ｄを有して配置される。当該視差Ｄは、画像内の当該被写体が、奥行き方向のどの位置に存在するように観視者２００に感知させるべきかにより定まる。
FIG. 2 shows an example of the right-
画像調整部３０は、表示部１０が表示する右眼用画像１２Ｒおよび左眼用画像１２Ｌにおいて対応する画像要素間の視差Ｄを調整する。例えば画像調整部３０は、右眼用画像１２Ｒおよび左眼用画像１２Ｌの組み合わせを、視差量を異ならせて複数組取得する。そして、画像調整部３０は、状態取得部４０が取得した状態情報に対応する視差量を有する右眼用画像１２Ｒおよび左眼用画像１２Ｌの組み合わせを選択して、表示部１０に供給してよい。
The
また、画像調整部３０は、与えられる右眼用画像１２Ｒおよび左眼用画像１２Ｌを画像処理することで、右眼用画像１２Ｒおよび左眼用画像１２Ｌにおいて対応する画像要素間の視差Ｄを調整してもよい。例えば画像調整部３０は、右眼用画像１２Ｒおよび左眼用画像１２Ｌにおいて対応する画像要素を抽出して、当該画像要素を右眼用画像１２Ｒおよび左眼用画像１２Ｌの画像内において移動させることで、当該画像要素間の視差量を調整する。このとき、当該画像要素の移動元の領域が空白となってしまうことを避けるべく、画像調整部３０は、空白領域に隣接する領域の画像パターンを、当該空白領域にコピーしてよい。
The
図３は、表示装置１００の他の構成例を示す。本例の表示装置１００は、図１に関連して説明した表示装置１００の構成に対して、画像処理装置２０の構成が異なる。本例の表示部１０は、図１に関連して説明した表示部１０と同一であってよい。
FIG. 3 shows another configuration example of the
本例の画像処理装置２０は、画像調整部３０、状態取得部４０、選択部５０、ステレオ画像取得部６０、および、シフト画像生成部７０を有する。状態取得部４０は、図１に関連して説明した状態取得部４０と同一であってよい。
The
ステレオ画像取得部６０は、観視者２００に感知させるべき奥行き方向の位置に応じて異なる視差量を有する、複数の画像要素を含む右眼用画像および左眼用画像を取得する。例えばステレオ画像取得部６０は、同一の領域を、異なる位置から撮像した右眼用画像および左眼用画像を取得する。当該異なる位置は、例えば人間の眼間距離（一例として６．５ｃｍ）に応じて離間した位置を指す。
The stereo
シフト画像生成部７０は、入力される二次元画像の全体をシフトして右眼用画像および左眼用画像を生成する。シフト画像生成部７０は、二次元画像の全体を、水平方向において人間の眼間距離に応じたシフト量でシフトさせて、右眼用画像および左眼用画像を生成してよい。
The shift
シフト画像生成部７０が生成する右眼用画像および左眼用画像に含まれる各画像要素の視差量は、右眼用画像および左眼用画像のシフト量に応じた均一の視差量となる。このような処理により、観視者２００に、臨場感のある画像を表示することができる。例えば、当該シフト量が人間の眼間距離と同一の場合、観視者２００は、各画像要素が無限遠に存在するように感知するので、窓から風景を見ているような臨場感を与えることができる。なお、シフト画像生成部７０は、ステレオ画像取得部６０が取得する右眼用画像および左眼用画像の一方を、二次元画像として受け取ってよい。
The parallax amount of each image element included in the right-eye image and the left-eye image generated by the shift
選択部５０は、ステレオ画像取得部６０およびシフト画像生成部７０のいずれかを選択して、選択した方が出力する右眼用画像および左眼用画像を表示部１０に供給する。画像調整部３０は、選択部５０がステレオ画像取得部６０およびシフト画像生成部７０のいずれを選択するかを制御する。
The
画像調整部３０は、ステレオ画像取得部６０が取得した右眼用画像および左眼用画像を、表示部１０が表示している間に、状態取得部４０が検出した状態情報で示される観視者２００の状態と、予め定められた基準状態との間の変化量が第１閾値を超えた場合に、シフト画像生成部７０が出力する画像を選択部５０に選択させる。
The
つまり、画像調整部３０は、当該変化量が第１閾値を超えた場合に、表示部１０にシフト画像生成部７０が生成した右眼用画像および左眼用画像を表示させる。これにより、観視者２００の疲労が蓄積した場合に、表示部１０が表示する左右画像における各画像要素の視差量を一定値に調整することができる。この場合、観視者２００が注目する画像要素によって輻輳位置および調節位置の差が変化しないので、観視者２００に与える負担を軽減しつつ、臨場感のある画像を提供できる。
That is, the
状態情報は、観視者２００の眼疲労を示す情報であってよい。例えば状態情報は、所定期間内における観視者２００のまばたき回数等の情報を含む。この例では、状態情報で示されるまばたき回数と、予め定められた基準値との間の差が第１閾値を超えた場合に、画像調整部３０は、表示部１０にシフト画像生成部７０が生成した右眼用画像および左眼用画像を表示させる。これにより、観視者２００の眼疲労が一定以上蓄積したと判断される場合に、観視者２００に対する負担が比較的に少ない画像を表示部１０に表示することができる。
The state information may be information indicating eye fatigue of the
状態情報の例としては、所定期間内における、観視者２００のまばたき回数の情報、観視者２００の眼の開口面積の情報、または、観視者２００の瞳孔面積の変化速度の情報、輻輳角の変化速度の情報等を含んでよい。状態取得部４０は、観視者２００の眼の画像を解析することで、これらの情報を取得してよい。
Examples of state information include information on the number of blinks of the
なお状態取得部４０は、表示部１０が表示する画像が予め定められた条件を満たしたときに、当該状態情報を取得してよい。例えば状態取得部４０は、表示部１０が表示する画像の輝度の変化が所定の範囲内である期間において、観視者２００のまばたき回数を測定する。表示部１０が表示する画像の輝度は、表示部１０の表示面の全面における平均値を指してよく、表示面の中央部における輝度を指してもよく、その他の方法で測定される輝度を指してもよい。一般に、眼疲労が蓄積するほどまばたき回数は増加するので、画像調整部３０は、観視者２００のまばたき回数が、基準値に比べてどれだけ増加したかにより、観視者２００の眼疲労を推定できる。画像調整部３０は、状態情報で示されるまばたき回数から基準値を減じた値を、第１閾値と比較する。
Note that the
また、状態取得部４０は、表示部１０が表示する画像の輝度が予め定められた範囲内にあるときの、観視者２００の眼の開口面積の情報を取得してよい。一般に、眼疲労が蓄積するほど眼の開口面積は減少するので、画像調整部３０は、観視者２００の眼の開口面積が、基準値に比べてどれだけ減少したかにより、観視者２００の眼疲労を推定できる。画像調整部３０は、基準値から、状態情報で示される眼の開口面積を減じた値を、第１閾値と比較する。
Further, the
また、状態取得部４０は、表示部１０が表示する画像の輝度が、第１の値から第２の値に変化したときの、観視者２００の瞳孔面積の変化速度を取得してよい。一般に、眼疲労が蓄積するほど瞳孔面積の追従速度が低下するので、画像調整部３０は、観視者２００の瞳孔面積の変化速度が、基準値に比べてどれだけ減少したかにより、観視者２００の眼疲労を推定できる。画像調整部３０は、基準値から、状態情報で示される瞳孔面積の変化速度を減じた値を、第１閾値と比較する。
Further, the
また、状態取得部４０は、所定の画像要素の左右画像間の視差量が、第１の値から第２の値に変化したときの、観視者２００の両眼の輻輳角の変化速度を取得してよい。一般に、眼疲労が蓄積するほど輻輳角の追従速度が低下するので、画像調整部３０は、観視者２００の輻輳角の変化速度が、基準値に比べてどれだけ減少したかにより、観視者２００の眼疲労を推定できる。画像調整部３０は、基準値から、状態情報で示される輻輳角の変化速度を減じた値を、第１閾値と比較する。
In addition, the
また上述したように、状態取得部４０は、観視者２００の眼の画像以外の情報を、状態情報として取得してもよい。表示部１０が動画像を表示する場合において、状態取得部４０は、直前の予め定められた期間内において表示部１０が表示した右眼用画像および左眼用画像の特性を示す情報を含む状態情報を取得する。画像の特性とは、画像のフレーム間における、各被写体（画像要素）の視差量の変化、輝度の変化、および、コントラストの変化の少なくとも一つを含んでよい。
Further, as described above, the
また、状態取得部４０は、当該期間における当該変化量の絶対値の積分値を、状態情報として取得してもよい。例えば、当該期間内において、表示部１０が点滅するような画像を表示する場合、輝度の変化の積分値が大きくなり、観視者２００の眼疲労の蓄積が大きいと評価される。また、状態取得部４０は、直前の所定期間内において表示部１０が表示した画像の輝度の平均値、または、表示部１０が画像を連続して表示している期間等の情報を状態情報として取得してもよい。
Moreover, the
また、状態取得部４０は、観視者２００の生体情報を、状態情報として取得してもよい。生体情報とは、例えば体温、脈拍数等を指す。これらの生体情報は、観視者２００に装着されるシャッタ付メガネまたは偏光メガネ等に設けられる測定手段が測定してよい。画像調整部３０は、表示部１０が画像表示を開始した直後における生体情報に対する、直近の生体情報の変化割合に基づいて、左眼用画像および右眼用画像の間の視差量を調整してよい。
Further, the
図４は、シフト画像生成部７０の動作例を説明する。上述したように、シフト画像生成部７０は、取得した二次元画像の全体を、水平方向にシフトして右眼用画像および左眼用画像を生成する。ここで水平方向とは、表示部１０にこれらの画像が表示された状態における水平方向を指す。
FIG. 4 illustrates an operation example of the shift
シフト画像生成部７０は、二次元画像の全体を、水平方向における左側に、例えばシフト量Ｌ／２だけシフトして左眼用画像を生成する。また、シフト画像生成部７０は、二次元画像の全体を、水平方向における右側に、例えばシフト量Ｌ／２だけシフトして右眼用画像を生成する。ここでシフト量Ｌは、右眼用画像および左眼用画像が有するべき相対シフト量を指す。シフト量Ｌは、人間の眼間距離に応じて定められてよい。
The shift
なお表示部１０は、右眼用画像および左眼用画像において重複する領域を表示してよい。上述した例では、表示部１０は、左眼用画像の左端における幅Ｌの領域と、右眼用画像の右端における幅Ｌの領域は、表示しなくてよい。
The
また、表示部１０に表示する右眼用画像および左眼用画像を、ステレオ画像取得部６０が出力する画像からシフト画像生成部７０が出力する画像に切り替える場合において、シフト画像生成部７０は、複数のフレームに渡って右眼用画像および左眼用画像の間のシフト量を変化させてよい。例えば、選択部５０における選択を切り替える直前にステレオ画像取得部６０が出力する画像における所定画像要素の視差量と、選択部５０における選択を切り替えた直後にシフト画像生成部７０が出力する画像における当該画像要素の視差量とは、必ずしも一致しない。
In addition, when the right-eye image and the left-eye image displayed on the
このため、選択部５０における選択の切替前後において、所定画像要素の視差量の変化が大きいと、観視者２００に違和感を与えてしまう。シフト画像生成部７０は、画像に含まれる予め定められた画像要素について、単位時間あたりの視差の変化量が予め定められた変化量以下となるように、複数のフレームに渡って右眼用画像および左眼用画像の間のシフト量を変化させることが好ましい。
For this reason, if the change in the parallax amount of the predetermined image element is large before and after the selection switching in the
当該予め定められた画像要素は、観視者２００が注目している、または、注目していることが予測される画像要素であってよい。また、当該予め定められた画像要素は、表示部１０の中央に最も近い画像要素であってよく、人物を示す画像要素であってよく、その他の方法で指定される画像要素であってもよい。
The predetermined image element may be an image element that the
また、シフト画像生成部７０は、フレーム間における右眼用画像および左眼用画像のシフト量の変化が、予め定められた変化量以下となるように、右眼用画像および左眼用画像の間のシフト量を変化させてよい。なおフレームとは、複数の静止画を連続して表示することで動画像を表示する場合において、１つの静止画が表示される期間を指す。
In addition, the shift
一例として、選択部５０における選択を切り替える直前にステレオ画像取得部６０が出力する画像における所定画像要素の視差量をＤとし、シフト画像生成部７０が定常時に出力する左右画像間のシフト量をＬとする。また、フレーム間で許容される視差の変化量の上限をＣとする。シフト画像生成部７０は、視差量Ｄおよびシフト量Ｌの差が上限値Ｃより大きい場合、選択部５０における選択を切り替えた直後のフレームにおける左右画像間のシフト量と、視差量Ｄとの差が上限値Ｃとなるように、右眼用画像および左眼用画像を生成する。そして、シフト画像生成部７０は、右眼用画像および左眼用画像のシフト量がＬになるまで、フレーム毎に当該シフト量を徐々に変化させる。このとき、フレーム間でのシフト量の変化が上限値Ｃ以下となるように、シフト画像生成部７０は、各フレームにおける右眼用画像および左眼用画像を生成する。
As an example, the parallax amount of a predetermined image element in the image output from the stereo
図５は、表示装置１００の他の構成例を示す。本例の表示装置１００は、図１に関連して説明した表示装置１００の構成に対して、画像処理装置２０の構成が異なる。本例の表示部１０は、図１に関連して説明した表示部１０と同一であってよい。
FIG. 5 shows another configuration example of the
本例の画像処理装置２０は、画像調整部３０、状態取得部４０、および、シフト画像生成部７０を有する。状態取得部４０およびシフト画像生成部７０は、図３に関連して説明した状態取得部４０およびシフト画像生成部７０と同一であってよい。表示部１０は、シフト画像生成部７０が生成する右眼用画像および左眼用画像を表示する。
The
画像調整部３０は、状態取得部４０が検出する状態情報に応じて、シフト画像生成部７０における右眼用画像および左眼用画像の間のシフト量を制御する。画像調整部３０は、状態取得部４０が検出する状態情報に含まれる観視者２００の眼の状態の、予め定められた基準状態に対する変化量がより大きい場合に、シフト画像生成部７０における右眼用画像および左眼用画像の間のシフト量Lをより小さくする。この場合においても、シフト画像生成部７０は、画像に含まれる予め定められた画像要素について、単位時間あたりの視差の変化量が予め定められた変化量以下となるように、複数のフレームに渡って右眼用画像および左眼用画像の間のシフト量を変化させることが好ましい。
The
画像調整部３０は、当該変化量が予め定められた第２閾値を超えた場合に、シフト画像生成部７０における右眼用画像および左眼用画像の間のシフト量Ｌを零にしてよい。この場合、観視者２００には、通常の二次元画像が提供される。なお、図３に示した画像調整部３０も、本例の画像調整部３０と同様に、状態取得部４０が検出する状態情報に応じて、シフト画像生成部７０における右眼用画像および左眼用画像の間のシフト量を制御してよい。
The
図６は、表示部１０の構成例を示す。本例において画像処理装置２０は、図１から図５に関連して説明したいずれかの構成を有してよい。本例の表示部１０は、異なる位置にいる観視者２００毎に、独立して右眼用画像および左眼用画像を表示する。本例では、二人の観視者２００の各眼（右眼１、左眼１、右眼２、左眼２）に、対応する右眼用画像および左眼用画像を表示する場合を説明する。
FIG. 6 shows a configuration example of the
表示部１０は、表示デバイス１３およびバリア部１５を含む。表示デバイス１３は、観視者２００の各眼（右眼１、左眼１、右眼２、左眼２）に対応する、右眼用画像Ｒ１、左眼用画像Ｌ１、右眼用画像Ｒ２、左眼用画像Ｌ２の各画素列を、所定の順序で水平方向に配列した画像を表示する。例えば、表示デバイス１３は、左眼１に対応する左眼用画像Ｌ１の画素列、右眼１に対応する右眼用画像Ｒ１の画素列、左眼２に対応する左眼用画像Ｌ２の画素列、右眼２に対応する右眼用画像Ｒ２の画素列を、この順序で配列した画像を表示する。
The
バリア部１５は、表示デバイス１３の画像表示面に対向して配置される。バリア部１５は、複数の通過部１８と、複数の遮蔽部１６を有する。バリア部１５は、パララックスバリアであってよい。
The
複数の遮蔽部１６は、複数の通過部１８が、水平方向において所定の周期で配列されるように設けられる。ここで、水平方向とは、通過部１８及び遮蔽部１６が交互に配列される配列方向を指す。例えば、それぞれの通過部１８の横方向の幅をＷとして、視点数をＮとすると、複数の通過部１８は、Ｗ×Ｎの周期で配列されてよい。図６に示すように、通過部１８の横方向の幅が１画素分であり、視点数が４の場合、通過部１８は、横方向において４画素毎に配置される。それぞれの通過部１８の間には、遮蔽部１６が設けられる。
The plurality of shielding
このような構成により、複数の通過部１８は、各視点に対して、表示デバイス１３が表示した複数の画素列のうち対応する画素列からの光を通過して表示させる。一方、複数の遮蔽部１６は、各視点に対して、表示デバイス１３が表示した複数の画素列のうち対応しない画素列からの光を遮蔽する。
With such a configuration, the plurality of
例えば、左眼１の位置からは、対応する画素列Ｌ１を観察することができるが、それ以外の画素列Ｌ２、Ｒ１、Ｒ２は遮蔽部１６によって遮られ、観察することはできない。他の視点からも同様に、対応する画素列を観察することができるが、それ以外の画素列を観察することができない。このような構成により、複数の観視者２００に対して、それぞれの右眼用画像および左眼用画像を提供できる。
For example, the corresponding pixel column L1 can be observed from the position of the left eye 1, but the other pixel columns L2, R1, and R2 are blocked by the shielding
なお表示部１０の構成は、当該構成に限定されない。例えば表示部１０は、バリア部１５に代えてレンチキュラーレンズを用いることによっても、複数の観視者２００に対して、それぞれの右眼用画像および左眼用画像を提供することができる。
The configuration of the
また、表示部１０が左眼用画像Ｌ１、右眼用画像Ｒ１、左眼用画像Ｌ２および右眼用画像Ｒ２を時分割で表示して、それぞれの観視者２００に装着されるシャッタ付メガネにより対応する画像を各観視者２００に観視させることによっても、複数の観視者２００に対して、それぞれの右眼用画像および左眼用画像を提供できる。また、表示部１０が、それぞれの画像について偏光方向を異ならせて表示して、それぞれの観視者２００に装着される偏光メガネにより対応する画像を各観視者２００に観視させることによっても、複数の観視者２００に対して、それぞれの右眼用画像および左眼用画像を提供できる。
Further, the
本例において状態取得部４０は、観視者２００毎に状態情報を取得することが好ましい。本例において画像調整部３０は、それぞれの観視者２００の状態情報に基づいて、対応する左眼用画像および右眼用画像の間の視差量を調整する。本例の表示装置１００は、観視者２００毎に、右眼用画像および左眼用画像を表示するので、それぞれの観視者２００の眼疲労に応じて、対応する画像の視差量を調整することができる。
In this example, it is preferable that the
なお、複数の観視者２００に対して画像を表示する場合において、状態取得部４０は、それぞれの観視者２００について予め定められたパラメータを測定する。そして画像調整部３０は、それぞれの観視者２００のパラメータの変化と、複数の観視者２００のパラメータの変化の平均とに基づいて、それぞれの観視者２００に対する左眼用画像および右眼用画像の間の視差量を調整してよい。
In addition, when displaying an image with respect to the plurality of
例えば状態取得部４０は、画像表示を開始した直後の所定期間内におけるまばたき回数に対する、直近の所定期間内におけるまばたき回数の増加割合を、それぞれの観視者２００について測定する。画像調整部３０は、全ての観視者２００における当該増加割合の平均値を算出する。そして、画像調整部３０は、それぞれの観視者２００における当該増加割合が、当該増加割合の全観視者２００の平均値に対してどれだけ乖離しているかを算出する。画像調整部３０は、当該乖離の度合いに応じて、対応する左眼用画像および右眼用画像の間の視差量を調整する。
For example, the
図７は、画像調整部３０の構成例を示す。画像調整部３０は、基準格納部４２および疲労測定部４６を有する。基準格納部４２は、状態取得部４０から受け取る状態情報と比較すべき基準情報を格納する。
FIG. 7 shows a configuration example of the
疲労測定部４６は、状態取得部４０から取得した状態情報と、基準格納部４２が格納した基準情報とを比較して、観視者２００の疲労を測定する。疲労測定部４６は、測定した疲労に基づいて、表示部１０が表示する右眼用画像および左眼用画像の間の視差量を調整する。
The
例えば、状態取得部４０が、表示部１０が表示した画像を観視している観視者２００の眼の動作の画像を、状態情報として出力する場合、基準格納部４２は、それぞれの観視者２００について、基準となる眼の動作の基準画像を予め格納してよい。また、状態取得部４０が、直近の所定期間における、観視者２００のまばたき回数、眼の開口面積の平均値、瞳孔面積の変化速度等のパラメータを、状態情報として画像調整部３０に送信する場合、基準格納部４２は、これらのパラメータの基準値を格納する。
For example, when the
基準格納部４２には、疲労が蓄積していない観視者２００において測定した基準情報を格納することが好ましい。例えば、基準格納部４２は、表示部１０が予め定められた期間以上、画像を表示していないことを条件として、観視者２００の眼の動作の基準画像を撮像してよい。
The
また、基準格納部４２は、表示部１０が画像表示を開始した直後における、観視者２００の眼の画像を、基準画像として撮像してもよい。また、表示装置１００は、観視者２００により視聴することが指定された画像を表示する前に、基準情報を取得するための画像を表示してもよい。当該画像は、例えば輝度値、輝度値の変化パターン、コントラスト等の特性が予め定められた画像である。
Further, the
また、基準格納部４２は、疲労が蓄積した状態の観視者２００において測定した基準情報を格納してもよい。例えば、基準格納部４２は、過去において、表示部１０が予め定められた期間以上画像を表示した後に撮像した観視者２００の眼の動作の基準画像を格納する。
Moreover, the reference |
また、基準格納部４２は、観視者２００が長時間画像を観視して、観視者２００のまばたき回数の増大、瞳孔面積の変化速度の劣化等が飽和した状態でのこれらの状態情報を、基準情報として取得してもよい。基準格納部４２は、撮像した基準画像、または、当該基準画像から測定される各パラメータを、状態情報として出力する。
The
図８は、コンピュータ１９００のハードウェア構成の一例を示す。コンピュータ１９００は、図１から図７に関連して説明した画像処理装置２０として機能する。コンピュータ１９００は、ホスト・コントローラ２０８２により相互に接続されるＣＰＵ２０００、ＲＡＭ２０２０、グラフィック・コントローラ２０７５、及び表示装置２０８０を有するＣＰＵ周辺部と、入出力コントローラ２０８４によりホスト・コントローラ２０８２に接続される通信インターフェイス２０３０、ハードディスクドライブ２０４０、及びＤＶＤドライブ２０６０を有する入出力部と、入出力コントローラ２０８４に接続されるＲＯＭ２０１０、フレキシブルディスク・ドライブ２０５０、及び入出力チップ２０７０を有するレガシー入出力部とを備える。
FIG. 8 shows an exemplary hardware configuration of the
ホスト・コントローラ２０８２は、ＲＡＭ２０２０と、高い転送レートでＲＡＭ２０２０をアクセスするＣＰＵ２０００及びグラフィック・コントローラ２０７５とを接続する。ＣＰＵ２０００は、ＲＯＭ２０１０及びＲＡＭ２０２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ２０７５は、ＣＰＵ２０００等がＲＡＭ２０２０内に設けたフレーム・バッファ上に生成する画像データを取得し、表示装置２０８０上に表示させる。これに代えて、グラフィック・コントローラ２０７５は、ＣＰＵ２０００等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。
The
入出力コントローラ２０８４は、ホスト・コントローラ２０８２と、比較的高速な入出力装置である通信インターフェイス２０３０、ハードディスクドライブ２０４０、ＤＶＤドライブ２０６０を接続する。通信インターフェイス２０３０は、ネットワークを介して他の装置と通信する。ハードディスクドライブ２０４０は、コンピュータ１９００内のＣＰＵ２０００が使用するプログラム及びデータを格納する。ＤＶＤドライブ２０６０は、ＤＶＤ−ＲＯＭ２０９５からプログラム又はデータを読み取り、ＲＡＭ２０２０を介してハードディスクドライブ２０４０に提供する。
The input /
また、入出力コントローラ２０８４には、ＲＯＭ２０１０と、フレキシブルディスク・ドライブ２０５０、及び入出力チップ２０７０の比較的低速な入出力装置とが接続される。ＲＯＭ２０１０は、コンピュータ１９００が起動時に実行するブート・プログラム、及び／又は、コンピュータ１９００のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ２０５０は、フレキシブルディスク２０９０からプログラム又はデータを読み取り、ＲＡＭ２０２０を介してハードディスクドライブ２０４０に提供する。入出力チップ２０７０は、フレキシブルディスク・ドライブ２０５０を入出力コントローラ２０８４へと接続すると共に、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を入出力コントローラ２０８４へと接続する。
The input /
ＲＡＭ２０２０を介してハードディスクドライブ２０４０に提供されるプログラムは、フレキシブルディスク２０９０、ＤＶＤ−ＲＯＭ２０９５、又はＩＣカード等の記録媒体に格納されて利用者によって提供される。プログラムは、記録媒体から読み出され、ＲＡＭ２０２０を介してコンピュータ１９００内のハードディスクドライブ２０４０にインストールされ、ＣＰＵ２０００において実行される。
A program provided to the
コンピュータ１９００にインストールされ、コンピュータ１９００を画像処理装置２０として機能させるプログラムは、画像調整モジュール、状態取得モジュール、選択モジュール、ステレオ画像取得モジュールおよびシフト画像生成モジュールのうちの少なくともひとつを備える。これらのプログラム又はモジュールがコンピュータ１９００に読込まれることにより、当該プログラムおよびコンピュータ１９００の各ハードウェアは、画像調整部３０、状態取得部４０、選択部５０、ステレオ画像取得部６０およびシフト画像生成部７０として機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ１９００の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の画像処理装置２０が構築される。
A program installed in the
一例として、コンピュータ１９００と外部の装置等との間で通信を行う場合には、ＣＰＵ２０００は、ＲＡＭ２０２０上にロードされた通信プログラムを実行し、通信プログラムに記述された処理内容に基づいて、通信インターフェイス２０３０に対して通信処理を指示する。通信インターフェイス２０３０は、ＣＰＵ２０００の制御を受けて、ＲＡＭ２０２０、ハードディスクドライブ２０４０、フレキシブルディスク２０９０、又はＤＶＤ−ＲＯＭ２０９５等の記憶装置上に設けた送信バッファ領域等に記憶された送信データを読み出してネットワークへと送信し、もしくは、ネットワークから受信した受信データを記憶装置上に設けた受信バッファ領域等へと書き込む。このように、通信インターフェイス２０３０は、ＤＭＡ（ダイレクト・メモリ・アクセス）方式により記憶装置との間で送受信データを転送してもよく、これに代えて、ＣＰＵ２０００が転送元の記憶装置又は通信インターフェイス２０３０からデータを読み出し、転送先の通信インターフェイス２０３０又は記憶装置へとデータを書き込むことにより送受信データを転送してもよい。
As an example, when communication is performed between the
また、ＣＰＵ２０００は、ハードディスクドライブ２０４０、ＤＶＤドライブ２０６０（ＤＶＤ−ＲＯＭ２０９５）、フレキシブルディスク・ドライブ２０５０（フレキシブルディスク２０９０）等の外部記憶装置に格納されたファイルまたはデータベース等の中から、全部または必要な部分をＤＭＡ転送等によりＲＡＭ２０２０へと読み込ませ、ＲＡＭ２０２０上のデータに対して各種の処理を行う。そして、ＣＰＵ２０００は、処理を終えたデータを、ＤＭＡ転送等により外部記憶装置へと書き戻す。このような処理において、ＲＡＭ２０２０は、外部記憶装置の内容を一時的に保持するものとみなせるから、本実施形態においてはＲＡＭ２０２０および外部記憶装置等をメモリ、記憶部、または記憶装置等と総称する。本実施形態における各種のプログラム、データ、テーブル、データベース等の各種の情報は、このような記憶装置上に格納されて、情報処理の対象となる。なお、ＣＰＵ２０００は、ＲＡＭ２０２０の一部をキャッシュメモリに保持し、キャッシュメモリ上で読み書きを行うこともできる。このような形態においても、キャッシュメモリはＲＡＭ２０２０の機能の一部を担うから、本実施形態においては、区別して示す場合を除き、キャッシュメモリもＲＡＭ２０２０、メモリ、及び／又は記憶装置に含まれるものとする。
In addition, the
また、ＣＰＵ２０００は、ＲＡＭ２０２０から読み出したデータに対して、プログラムの命令列により指定された、本実施形態中に記載した各種の演算、情報の加工、条件判断、情報の検索・置換等を含む各種の処理を行い、ＲＡＭ２０２０へと書き戻す。例えば、ＣＰＵ２０００は、条件判断を行う場合においては、本実施形態において示した各種の変数が、他の変数または定数と比較して、大きい、小さい、以上、以下、等しい等の条件を満たすかどうかを判断し、条件が成立した場合（又は不成立であった場合）に、異なる命令列へと分岐し、またはサブルーチンを呼び出す。
In addition, the
また、ＣＰＵ２０００は、記憶装置内のファイルまたはデータベース等に格納された情報を検索することができる。例えば、第１属性の属性値に対し第２属性の属性値がそれぞれ対応付けられた複数のエントリが記憶装置に格納されている場合において、ＣＰＵ２０００は、記憶装置に格納されている複数のエントリの中から第１属性の属性値が指定された条件と一致するエントリを検索し、そのエントリに格納されている第２属性の属性値を読み出すことにより、所定の条件を満たす第１属性に対応付けられた第２属性の属性値を得ることができる。
Further, the
以上に示したプログラム又はモジュールは、外部の記録媒体に格納されてもよい。記録媒体としては、フレキシブルディスク２０９０、ＤＶＤ−ＲＯＭ２０９５の他に、ＤＶＤ又はＣＤ等の光学記録媒体、ＭＯ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、専用通信ネットワーク又はインターネットに接続されたサーバシステムに設けたハードディスク又はＲＡＭ等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムをコンピュータ１９００に提供してもよい。
The program or module shown above may be stored in an external recording medium. As the recording medium, in addition to the
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。 As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。 The order of execution of each process such as operations, procedures, steps, and stages in the apparatus, system, program, and method shown in the claims, the description, and the drawings is particularly “before” or “prior to”. It should be noted that the output can be realized in any order unless the output of the previous process is used in the subsequent process. Regarding the operation flow in the claims, the description, and the drawings, even if it is described using “first”, “next”, etc. for convenience, it means that it is essential to carry out in this order. It is not a thing.
１０・・・表示部、１２・・・画像、１３・・・表示デバイス、１４・・・画像要素、１５・・・バリア部、１６・・・遮蔽部、１８・・・通過部、２０・・・画像処理装置、３０・・・画像調整部、４０・・・状態取得部、４２・・・基準格納部、４６・・・疲労測定部、５０・・・選択部、６０・・・ステレオ画像取得部、７０・・・シフト画像生成部、１００・・・表示装置、２００・・・観視者、１９００・・・コンピュータ、２０００・・・ＣＰＵ、２０１０・・・ＲＯＭ、２０２０・・・ＲＡＭ、２０３０・・・通信インターフェイス、２０４０・・・ハードディスクドライブ、２０５０・・・フレキシブルディスク・ドライブ、２０６０・・・ＤＶＤドライブ、２０７０・・・入出力チップ、２０７５・・・グラフィック・コントローラ、２０８０・・・表示装置、２０８２・・・ホスト・コントローラ、２０８４・・・入出力コントローラ、２０９０・・・フレキシブルディスク、２０９５・・・ＤＶＤ−ＲＯＭ
DESCRIPTION OF
Claims (15)
前記右眼用画像および前記左眼用画像を表示する表示部と、
前記観視者の状態を示す状態情報を取得する状態取得部と、
前記状態取得部が検出した前記状態情報に基づいて、前記表示部が表示する前記右眼用画像および前記左眼用画像の間の視差量を調整する画像調整部と、
異なる視差量を有する複数の画像要素を含む前記右眼用画像および前記左眼用画像を取得するステレオ画像取得部と、
入力される二次元画像の全体をシフトして前記右眼用画像および前記左眼用画像を生成するシフト画像生成部と
を備え、
前記画像調整部は、前記表示部において前記ステレオ画像取得部が取得した前記右眼用画像および前記左眼用画像を表示している状態で、前記状態取得部が検出した前記状態情報で示される前記観視者の状態と、予め定められた状態との間の変化量が第１閾値を超えた場合に、前記表示部に前記シフト画像生成部が生成した前記右眼用画像および前記左眼用画像を表示させる表示装置。 A display device that displays a right-eye image and a left-eye image having parallax to a viewer,
A display unit for displaying the right-eye image and the left-eye image;
A state acquisition unit that acquires state information indicating the state of the viewer;
An image adjustment unit that adjusts a parallax amount between the right-eye image and the left-eye image displayed by the display unit based on the state information detected by the state acquisition unit;
A stereo image acquisition unit that acquires the right-eye image and the left-eye image including a plurality of image elements having different amounts of parallax;
A shift image generation unit that shifts the entire input two-dimensional image to generate the right-eye image and the left-eye image;
The image adjustment unit is indicated by the state information detected by the state acquisition unit in a state where the right-eye image and the left-eye image acquired by the stereo image acquisition unit are displayed on the display unit. When the amount of change between the state of the viewer and a predetermined state exceeds a first threshold, the right-eye image and the left-eye generated by the shift image generation unit on the display unit A display device that displays an image.
請求項１に記載の表示装置。 In the case where the right-eye image and the left-eye image displayed on the display unit are switched from an image output from the stereo image acquisition unit to an image output from the shift image generation unit, the shift image generation unit includes: Shift between the right-eye image and the left-eye image over a plurality of frames so that the amount of change in parallax per unit time is less than or equal to a predetermined amount of change for a predetermined image element The display device according to claim 1, wherein the amount is changed.
請求項１または２に記載の表示装置。 The image adjustment unit controls a shift amount between the right-eye image and the left-eye image in the shift image generation unit according to the state information detected by the state acquisition unit. The display device described in 1.
請求項３に記載の表示装置。 The display device according to claim 3, wherein the image adjustment unit further reduces a shift amount between the right-eye image and the left-eye image in the shift image generation unit when the change amount is larger.
請求項４に記載の表示装置。 The image adjustment unit sets a shift amount between the right-eye image and the left-eye image in the shift image generation unit to zero when the change amount exceeds a predetermined second threshold value. Item 5. The display device according to Item 4.
請求項１から５のいずれか一項に記載の表示装置。 The display device according to claim 1, wherein the shift image generation unit receives one of the right-eye image and the left-eye image acquired by the stereo image acquisition unit as the two-dimensional image. .
前記右眼用画像および前記左眼用画像を表示する表示部と、
前記観視者の状態を示す状態情報を取得する状態取得部と、
前記状態取得部が検出した前記状態情報に基づいて、前記表示部が表示する前記右眼用画像および前記左眼用画像の間の視差量を調整する画像調整部と
を備え、
前記表示部は、異なる位置にいる前記観視者毎に前記右眼用画像および前記左眼用画像を表示し、
前記状態取得部は、前記観視者毎に前記状態情報を取得し、
前記画像調整部は、それぞれの前記観視者の前記状態情報に基づいて、対応する前記左眼用画像および前記右眼用画像の間の視差量を調整する表示装置。 A display device that displays a right-eye image and a left-eye image having parallax to a viewer,
A display unit for displaying the right-eye image and the left-eye image;
A state acquisition unit that acquires state information indicating the state of the viewer;
An image adjusting unit that adjusts a parallax amount between the right-eye image and the left-eye image displayed by the display unit based on the state information detected by the state acquisition unit;
The display unit displays the right-eye image and the left-eye image for each viewer at different positions,
The state acquisition unit acquires the state information for each viewer,
The display device that adjusts a parallax amount between the corresponding left-eye image and the right-eye image based on the state information of each viewer.
請求項１から７のいずれか一項に記載の表示装置。 The display device according to claim 1, wherein the state acquisition unit acquires the state information indicating a state of the eye of the viewer.
前記画像調整部は、
前記観視者について、眼の動作の基準画像を予め格納する基準格納部と、
前記状態取得部が取得した前記状態情報と、前記基準格納部が格納した前記基準画像とを比較して、前記観視者の眼の疲労を測定し、測定した疲労に基づいて、前記表示部が表示する前記右眼用画像および前記左眼用画像の間の視差量を調整する疲労測定部と
を有する請求項８に記載の表示装置。 The state acquisition unit acquires, as the state information, an image of the eye movement of the viewer who is viewing the image displayed by the display unit,
The image adjustment unit
For the viewer, a reference storage unit that stores in advance a reference image of eye movement;
Comparing the state information acquired by the state acquisition unit with the reference image stored by the reference storage unit to measure eye fatigue of the viewer, and based on the measured fatigue, the display unit The display device according to claim 8, further comprising: a fatigue measurement unit that adjusts an amount of parallax between the right-eye image and the left-eye image displayed by.
前記右眼用画像および前記左眼用画像を表示する表示部と、
前記観視者の状態を示す状態情報を取得する状態取得部と、
前記状態取得部が検出した前記状態情報に基づいて、前記表示部が表示する前記右眼用画像および前記左眼用画像の間の視差量を調整する画像調整部と
を備え、
前記表示部は動画像を表示し、
前記状態取得部は、前記観視者の眼の画像以外の情報であって、直前の予め定められた期間内において前記表示部に表示した複数のフレームにおける前記右眼用画像および前記左眼用画像の特性を示す情報を含む前記状態情報を取得し、
前記状態取得部は、前記期間内において前記表示部に表示した前記右眼用画像および前記左眼用画像の各々のフレーム間における、各被写体の視差量の変化、輝度の変化、および、コントラストの変化の少なくとも一つに基づいて、前記状態情報を取得する表示装置。 A display device that displays a right-eye image and a left-eye image having parallax to a viewer,
A display unit for displaying the right-eye image and the left-eye image;
A state acquisition unit that acquires state information indicating the state of the viewer;
An image adjusting unit that adjusts a parallax amount between the right-eye image and the left-eye image displayed by the display unit based on the state information detected by the state acquisition unit;
The display unit displays a moving image,
The state acquisition unit is information other than the image of the eye of the viewer, and the right-eye image and the left-eye image in a plurality of frames displayed on the display unit within a predetermined period immediately before Obtaining the state information including information indicating the characteristics of the image;
The state acquisition unit includes a change in parallax amount, a change in luminance, and a contrast between each frame of the right-eye image and the left-eye image displayed on the display unit during the period. A display device that acquires the state information based on at least one of the changes.
前記画像調整部は、それぞれの前記観視者の前記パラメータの変化と、複数の前記観視者の前記パラメータの変化の平均とに基づいて、それぞれの前記観視者に対する前記左眼用画像および前記右眼用画像の間の視差量を調整する
請求項７に記載の表示装置。 The state acquisition unit measures a predetermined parameter for each viewer,
The image adjustment unit, based on a change in the parameter of each viewer and an average of a change in the parameters of a plurality of viewers, The display device according to claim 7, wherein a parallax amount between the right-eye images is adjusted.
前記観視者の状態を示す状態情報を取得する状態取得部と、
前記状態取得部が検出した前記状態情報に基づいて、前記右眼用画像および前記左眼用画像の間の視差量を調整して前記表示部に供給する画像調整部と、
異なる視差量を有する複数の画像要素を含む前記右眼用画像および前記左眼用画像を取得するステレオ画像取得部と、
入力される二次元画像の全体をシフトして前記右眼用画像および前記左眼用画像を生成するシフト画像生成部と
を備え、
前記画像調整部は、前記表示部において前記ステレオ画像取得部が取得した前記右眼用画像および前記左眼用画像を表示している状態で、前記状態取得部が検出した前記状態情報で示される前記観視者の状態と、予め定められた状態との間の変化量が第１閾値を超えた場合に、前記表示部に前記シフト画像生成部が生成した前記右眼用画像および前記左眼用画像を表示させる画像処理装置。 An image processing apparatus that outputs the right-eye image and the left-eye image supplied to a display device including a display unit that displays a right-eye image and a left-eye image having parallax to a viewer,
A state acquisition unit that acquires state information indicating the state of the viewer;
An image adjustment unit that adjusts a parallax amount between the right-eye image and the left-eye image based on the state information detected by the state acquisition unit and supplies the parallax amount to the display unit;
A stereo image acquisition unit that acquires the right-eye image and the left-eye image including a plurality of image elements having different amounts of parallax;
A shift image generation unit that shifts the entire input two-dimensional image to generate the right-eye image and the left-eye image;
The image adjustment unit is indicated by the state information detected by the state acquisition unit in a state where the right-eye image and the left-eye image acquired by the stereo image acquisition unit are displayed on the display unit. When the amount of change between the state of the viewer and a predetermined state exceeds a first threshold, the right-eye image and the left-eye generated by the shift image generation unit on the display unit Image processing apparatus for displaying an image for use.
前記観視者の状態を示す状態情報を取得する状態取得部と、
前記状態取得部が検出した前記状態情報に基づいて、前記右眼用画像および前記左眼用画像の間の視差量を調整して前記表示部に供給する画像調整部と
を備え、
前記表示部は、異なる位置にいる前記観視者毎に前記右眼用画像および前記左眼用画像を表示し、
前記状態取得部は、前記観視者毎に前記状態情報を取得し、
前記画像調整部は、それぞれの前記観視者の前記状態情報に基づいて、対応する前記左眼用画像および前記右眼用画像の間の視差量を調整する画像処理装置。 An image processing apparatus that outputs the right-eye image and the left-eye image supplied to a display device including a display unit that displays a right-eye image and a left-eye image having parallax to a viewer,
A state acquisition unit that acquires state information indicating the state of the viewer;
An image adjustment unit that adjusts a parallax amount between the right-eye image and the left-eye image based on the state information detected by the state acquisition unit and supplies the parallax amount to the display unit,
The display unit displays the right-eye image and the left-eye image for each viewer at different positions,
The state acquisition unit acquires the state information for each viewer,
The image adjustment unit adjusts a parallax amount between the corresponding image for the left eye and the image for the right eye based on the state information of each viewer.
前記観視者の状態を示す状態情報を取得する状態取得部と、
前記状態取得部が検出した前記状態情報に基づいて、前記右眼用画像および前記左眼用画像の間の視差量を調整して前記表示部に供給する画像調整部と
を備え、
前記表示部は動画像を表示し、
前記状態取得部は、前記観視者の眼の画像以外の情報であって、直前の予め定められた期間内において前記表示部に表示した複数のフレームにおける前記右眼用画像および前記左眼用画像の特性を示す情報を含む前記状態情報を取得し、
前記状態取得部は、前記期間内において前記表示部に表示した前記右眼用画像および前記左眼用画像の各々のフレーム間における、各被写体の視差量の変化、輝度の変化、および、コントラストの変化の少なくとも一つに基づいて、前記状態情報を取得する画像処理装置。 An image processing apparatus that outputs the right-eye image and the left-eye image supplied to a display device including a display unit that displays a right-eye image and a left-eye image having parallax to a viewer,
A state acquisition unit that acquires state information indicating the state of the viewer;
An image adjustment unit that adjusts a parallax amount between the right-eye image and the left-eye image based on the state information detected by the state acquisition unit and supplies the parallax amount to the display unit,
The display unit displays a moving image,
The state acquisition unit is information other than the image of the eye of the viewer, and the right-eye image and the left-eye image in a plurality of frames displayed on the display unit within a predetermined period immediately before Obtaining the state information including information indicating the characteristics of the image;
The state acquisition unit includes a change in parallax amount, a change in luminance, and a contrast between each frame of the right-eye image and the left-eye image displayed on the display unit during the period. An image processing apparatus that acquires the state information based on at least one of changes.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010160026A JP5817091B2 (en) | 2010-07-14 | 2010-07-14 | Display device, image processing device, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010160026A JP5817091B2 (en) | 2010-07-14 | 2010-07-14 | Display device, image processing device, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012023567A JP2012023567A (en) | 2012-02-02 |
| JP5817091B2 true JP5817091B2 (en) | 2015-11-18 |
Family
ID=45777455
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010160026A Active JP5817091B2 (en) | 2010-07-14 | 2010-07-14 | Display device, image processing device, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5817091B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5664356B2 (en) * | 2011-03-09 | 2015-02-04 | 富士通株式会社 | Generation apparatus and generation method |
| JP6115561B2 (en) * | 2012-03-07 | 2017-04-19 | 富士通株式会社 | Stereoscopic image display apparatus and program |
| JP2023046886A (en) * | 2021-09-24 | 2023-04-05 | 株式会社Ｊｖｃケンウッド | Image generation device |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4713054B2 (en) * | 2002-09-27 | 2011-06-29 | シャープ株式会社 | Stereo image display device, stereo image encoding device, stereo image decoding device, stereo image recording method, and stereo image transmission method |
| JP2004333661A (en) * | 2003-05-02 | 2004-11-25 | Nippon Hoso Kyokai <Nhk> | Stereoscopic image display device, stereoscopic image display method, and stereoscopic image display program |
| JP4022173B2 (en) * | 2003-06-02 | 2007-12-12 | 株式会社ソフィア | Game machine |
| JP4730120B2 (en) * | 2005-02-28 | 2011-07-20 | 日本ビクター株式会社 | Video data processing device, video playback device, video data processing method, video playback method, program for executing these methods by computer, and recording medium |
| KR100739764B1 (en) * | 2005-11-28 | 2007-07-13 | 삼성전자주식회사 | Stereo image signal processing apparatus and method |
| JP5011842B2 (en) * | 2006-06-22 | 2012-08-29 | 株式会社ニコン | Image playback device |
| JP4755565B2 (en) * | 2006-10-17 | 2011-08-24 | シャープ株式会社 | Stereoscopic image processing device |
-
2010
- 2010-07-14 JP JP2010160026A patent/JP5817091B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012023567A (en) | 2012-02-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11200870B2 (en) | Homography transformation matrices based temperature calibration of a viewing system | |
| JP5515301B2 (en) | Image processing apparatus, program, image processing method, recording method, and recording medium | |
| US11256328B2 (en) | Three-dimensional (3D) rendering method and apparatus for user' eyes | |
| CN106303498B (en) | Video display control method and device, display equipment | |
| KR20120075829A (en) | Apparatus and method for rendering subpixel adaptively | |
| JP2011082829A (en) | Image generation apparatus, image generation method, and program | |
| US8872902B2 (en) | Stereoscopic video processing device and method for modifying a parallax value, and program | |
| WO2012157177A1 (en) | Vergence performance determination device and method therefor | |
| JP5396877B2 (en) | Image processing apparatus, program, image processing method, and recording method | |
| JP2011205195A (en) | Image processing device, program, image processing method, chair, and appreciation system | |
| JP5817091B2 (en) | Display device, image processing device, and program | |
| JP2010245844A (en) | Image presentation system, image processing device, image presentation method, and program | |
| JP2011081630A (en) | Image generating apparatus, image generating method, and program | |
| Terzic et al. | Causes of discomfort in stereoscopic content: a review | |
| JP5402070B2 (en) | Image presentation system, image processing apparatus, program, and image presentation method | |
| JP2010259006A (en) | Image presentation system, program, and image presentation method | |
| CN106303315B (en) | Video display control method and device, display equipment | |
| JP2011082698A (en) | Image generation device, image generation method, and program | |
| JP5428723B2 (en) | Image generating apparatus, image generating method, and program | |
| US11740478B2 (en) | Display device, control method thereof, and recording medium | |
| WO2016141851A1 (en) | Display control methods and apparatuses | |
| JP2012220874A (en) | Imaging device and program | |
| JP2006287813A (en) | Three-dimensional image display device | |
| JP2010259022A (en) | Display device, display method, and display program | |
| CN106303499B (en) | Video display control method and device, display equipment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130520 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131220 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140107 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140226 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140624 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140825 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141216 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150213 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150901 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150914 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5817091 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |