JP2016208273A - Video display system - Google Patents
Video display system Download PDFInfo
- Publication number
- JP2016208273A JP2016208273A JP2015087763A JP2015087763A JP2016208273A JP 2016208273 A JP2016208273 A JP 2016208273A JP 2015087763 A JP2015087763 A JP 2015087763A JP 2015087763 A JP2015087763 A JP 2015087763A JP 2016208273 A JP2016208273 A JP 2016208273A
- Authority
- JP
- Japan
- Prior art keywords
- optical element
- holographic optical
- element surface
- imaging device
- display system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 claims abstract description 42
- 230000003287 optical effect Effects 0.000 claims abstract description 40
- 238000012545 processing Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 5
- 239000003086 colorant Substances 0.000 description 3
- 238000000034 method Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Holo Graphy (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
本発明は、テレビ電話やテレビ会議システムに利用される映像表示システムに関する。 The present invention relates to a video display system used for a video phone or a video conference system.
昨今、テレビ電話システム、テレビ会議システムが普及しつつある（例えば、非特許文献１、非特許文献２）。非特許文献１のテレビ電話システムは、送話側（受話側）の映像、音声をテレビ用カメラ、マイクで収録して、インターネットに接続可能なテレビと専用のアプリケーションとを用いて受話側（送話側）で再生することにより実現される。非特許文献２のテレビ会議システムも同様に、送話側（受話側）の映像、音声を専用のカメラ、マイクで収録して受話側（送話側）のモニタやプロジェクタで再生することでテレビ会議を実現する。
In recent years, videophone systems and video conference systems are spreading (for example, Non-Patent
上述のテレビ電話システムや、テレビ会議システムではモニタ、テレビ、スクリーンなどに映る受話者（送話者）の顔の位置と、送話者（受話者）の顔面を撮影するカメラの位置とがずれているために、受話者と送話者の視線が合わず、受話者と送話者の自然なコミュニケーションの妨げとなっていた。そこで本発明では、利用者がデバイスを意識せずに自然にコミュニケーションできるテレビ電話やテレビ会議システムを実現する映像表示システムを提供することを目的とする。 In the above-described videophone system and videoconferencing system, the position of the face of the receiver (speaker) reflected on the monitor, TV, screen, etc. is not aligned with the position of the camera that captures the face of the speaker (listener). As a result, the line of sight of the receiver and the transmitter is not aligned, which hinders natural communication between the receiver and the transmitter. Therefore, an object of the present invention is to provide a video display system that realizes a videophone or a video conference system in which a user can communicate naturally without being aware of the device.
本発明の映像表示システムは、第１のホログラフィック光学素子面と、撮影装置と、第２のホログラフィック光学素子面と、投影装置を含む。 The video display system of the present invention includes a first holographic optical element surface, a photographing device, a second holographic optical element surface, and a projection device.
撮影装置は、第１のホログラフィック光学素子面からの反射光を撮影して受話側の投影装置に送信する。第２のホログラフィック光学素子面は、第１のホログラフィック光学素子面と平行に配置される。撮影装置の撮像素子上で結像した光が反射および屈折せずに第１、第２のホログラフィック光学素子面を透過して、仮想の撮影装置の撮像素子上で結像するものと仮定した場合の仮想の撮影装置の位置を表す点を点Ｔと定義し、投影装置は、点Ｔを頂点とし第１のホログラフィック光学素子面の境界をその側面に含む錐体の外側に配置され、受話側の撮影装置にて撮影された映像を第２のホログラフィック光学素子面に投影する。 The photographing apparatus photographs the reflected light from the first holographic optical element surface and transmits it to the receiving-side projection apparatus. The second holographic optical element surface is disposed in parallel with the first holographic optical element surface. It is assumed that the light imaged on the imaging device of the imaging device passes through the first and second holographic optical element surfaces without being reflected and refracted, and forms an image on the imaging device of the virtual imaging device. A point representing the position of the virtual imaging device in the case is defined as a point T, and the projection device is arranged outside the cone including the boundary of the first holographic optical element surface on the side surface with the point T as a vertex, An image photographed by the photographing device on the receiving side is projected onto the second holographic optical element surface.
本発明の映像表示システムによれば、利用者がデバイスを意識せずに自然にコミュニケーションできるテレビ電話やテレビ会議システムを実現することができる。 According to the video display system of the present invention, it is possible to realize a videophone or a video conference system in which a user can communicate naturally without being aware of the device.
以下、本発明の実施の形態について、詳細に説明する。なお、同じ機能を有する構成部には同じ番号を付し、重複説明を省略する。 Hereinafter, embodiments of the present invention will be described in detail. In addition, the same number is attached | subjected to the structure part which has the same function, and duplication description is abbreviate | omitted.
以下、図１、図２、図３を参照して実施例１の映像表示システムの構成、および動作を説明する。図１は、本実施例の映像表示システム１の構成を示す概略斜視図である。図２は、本実施例の映像表示システム１の構成を示す概略側面図である。図３は、本実施例の映像表示システム１の動作を示すフローチャートである。本実施例の映像表示システム１は受話側と送話側に同じ構成要件を備える。以下、利用者９−１と利用者９−２が本システムを利用して対話する場面を前提に説明を進める。
Hereinafter, the configuration and operation of the video display system according to the first embodiment will be described with reference to FIGS. 1, 2, and 3. FIG. 1 is a schematic perspective view showing a configuration of a
本実施例の映像表示システム１は、利用者９−１が利用する設備として撮影装置１０−１と、第１のホログラフィック光学素子面１１−１（以下、第１ＨＯＥ面１１−１ともいう）と、第２のホログラフィック光学素子面１２−１（以下、第２ＨＯＥ面１２−１ともいう）と、投影装置１３−１を含む。また本実施例の映像表示システム１は、利用者９−２が利用する設備として上述と同様の撮影装置１０−２と、第１のホログラフィック光学素子面１１−２（以下、第１ＨＯＥ面１１−２ともいう）と、第２のホログラフィック光学素子面１２−２（以下、第２ＨＯＥ面１２−２ともいう）と、投影装置１３−２を含む。なお図示を省略したが、映像表示システム１には撮影装置１０−１（１０−２）と、投影装置１３−１（１３−２）を制御する制御装置（典型的にはコンピュータ）を含んでもよいし、撮影装置１０−１（１０−２）、投影装置１３−１（１３−２）の何れかに本システムを制御する機能が組み込まれていてもよい。なお上述したように利用者９−２側の設備は利用者９−１側の設備と全く同じであるため、利用者９−２側の設備の説明は適宜省略し、主に利用者９−１側の設備について説明する。
The
図１に示すように、第１ＨＯＥ面１１−１は例えば横長の長方形の面とすることができる。以下の説明では、第１ＨＯＥ面１１−１の四つの頂点を利用者９−１からみて左上の頂点から順に時計回りにＶ１、Ｖ２、Ｖ３、Ｖ４と呼ぶ。第１ＨＯＥ面１１−１はこれ以外の形状、例えば円形、楕円形の面などであっても良い。 As shown in FIG. 1, the first HOE surface 11-1 can be a horizontally long rectangular surface, for example. In the following description, the four vertices of the first HOE surface 11-1 are referred to as V1, V2, V3, and V4 in the clockwise order from the top left vertex when viewed from the user 9-1. The first HOE surface 11-1 may have a shape other than this, for example, a circular or elliptical surface.
第１ＨＯＥ面１１−１は入射光を所定の角度に反射、集光する（Ｓ１）。利用者９−１から発せられる光のうち、所定の角度で第１ＨＯＥ面１１−１に入射した光の所定の波長成分は、選択的に第１ＨＯＥ面１１−１上で反射し、撮影装置１０−１のレンズに集光される。この光の軌跡を破線で表した。なお撮影装置１０−１は、利用者９−１の視界を妨げず、利用者９−２が観察する映像に映り込まないように、利用者９−１の頭上、例えば天井付近などに設置される。 The first HOE surface 11-1 reflects and collects incident light at a predetermined angle (S1). Of the light emitted from the user 9-1, a predetermined wavelength component of light incident on the first HOE surface 11-1 at a predetermined angle is selectively reflected on the first HOE surface 11-1, and the photographing apparatus 10. -1 is focused on the lens. The trajectory of this light is represented by a broken line. Note that the photographing device 10-1 is installed above the user 9-1, for example, near the ceiling, so as not to interfere with the field of view of the user 9-1 and to be reflected in the video observed by the user 9-2. The
前述したように第１ＨＯＥ面１１−１はホログラフィック光学素子（ホログラム）である。ホログラムには波面再現性、波長選択性があることが知られている。波面再現性とは、ホログラム露光時の光の経路を再現する性質のことである。波長選択性とは、ホログラム露光時の波長光のみを屈折、反射し、それ以外の波長光については透過させる性質のことである。従って、第１ＨＯＥ面１１−１の反射特性は、入射光の向きや波長成分を選択するように設計することができる。第１ＨＯＥ面１１−１の反射特性を適切に設計することにより、撮影装置１０−１の撮像素子上で利用者９−１やその周辺の像を結像させることができる。撮影装置１０−１は、第１ＨＯＥ面１１−１からの反射光を撮影し、受話側の投影装置である投影装置１３−２に送信する（Ｓ２）。第２ＨＯＥ面１２−１は、第１ＨＯＥ面１１−１と平行に配置される。図１に示すように、第２ＨＯＥ面１２−１は第１ＨＯＥ面１１−１よりも、利用者からみて奥側に配置することができる。図１の例に限らず、第２ＨＯＥ面１２−１を利用者からみて手前側に配置してもよい。第２ＨＯＥ面１２−１は第１ＨＯＥ面１１−１と同じように、横長の長方形の面とすることができるし、これ以外の形状、例えば円形、楕円形、あるいはそれ以外の形状の面であっても良い。第２ＨＯＥ面１２−１は、一般的には第１ＨＯＥ面１１−１と同程度のサイズ、形状とされるが、これに限らず、例えば第１ＨＯＥ面１２−１よりも大きなサイズとしても良いし、第１ＨＯＥ面１２−１と異なる形状としても良い。第２ＨＯＥ面１２−１は、第１ＨＯＥ面１１−１と同様に入射光の向きや波長成分を選択して反射するように設計されている。投影装置１３−１は、撮影装置１０−２が撮影した映像を受信する。投影装置１３−１は、第２ＨＯＥ面１２−１に、撮影装置１０−２から受信した映像を投影する（Ｓ３）。利用者９−１は、投影装置１３−１が第２ＨＯＥ面１２−１に投影した像（例えば利用者９−２の像Ｐ−２や利用者９-２の周辺環境）を視認することができる。なお、第２ＨＯＥ面１２−１は、その反射光が利用者９−１から視認でき、撮影装置１０−１に入射しない方向に制御できる光学材料であればよく、ホログラフィック光学素子以外であってもよい。第２ＨＯＥ面１２−１は例えばフレネルレンズに代替することもできる。この場合、フレネルレンズは、入射光をレンズ設計により予め定められた角度に反射する。投影装置１３−１が投影した映像光を、撮影装置１０−１の方向や、投影装置１３−１の方向に反射しないように制御すれば、投影装置１３−１が投影した映像が撮影装置１０−１に写り込まないだけではなく、利用者９−１に拡散反射（壁など）の場合に比べて明るい映像を視認させることが可能となる。 As described above, the first HOE surface 11-1 is a holographic optical element (hologram). It is known that a hologram has wavefront reproducibility and wavelength selectivity. Wavefront reproducibility is the property of reproducing the light path during hologram exposure. The wavelength selectivity is a property in which only wavelength light at the time of hologram exposure is refracted and reflected, and other wavelength light is transmitted. Therefore, the reflection characteristic of the first HOE surface 11-1 can be designed so as to select the direction and wavelength component of the incident light. By appropriately designing the reflection characteristics of the first HOE surface 11-1, an image of the user 9-1 and its surroundings can be formed on the imaging device of the imaging apparatus 10-1. The imaging device 10-1 captures the reflected light from the first HOE surface 11-1 and transmits it to the projection device 13-2 that is the receiving side projection device (S2). The second HOE surface 12-1 is disposed in parallel with the first HOE surface 11-1. As shown in FIG. 1, the 2nd HOE surface 12-1 can be arrange | positioned in the back | inner side seeing from a user rather than the 1st HOE surface 11-1. The second HOE surface 12-1 is not limited to the example in FIG. Similarly to the first HOE surface 11-1, the second HOE surface 12-1 may be a horizontally long rectangular surface, and may have a shape other than this, for example, a circular shape, an elliptical shape, or another shape. May be. The second HOE surface 12-1 is generally the same size and shape as the first HOE surface 11-1, but is not limited to this. For example, the second HOE surface 12-1 may be larger than the first HOE surface 12-1. The shape may be different from that of the first HOE surface 12-1. Similar to the first HOE surface 11-1, the second HOE surface 12-1 is designed to select and reflect the direction and wavelength component of incident light. The projection device 13-1 receives the video imaged by the imaging device 10-2. The projection device 13-1 projects the video received from the imaging device 10-2 onto the second HOE surface 12-1 (S3). The user 9-1 can visually recognize an image (for example, an image P-2 of the user 9-2 or a surrounding environment of the user 9-2) projected by the projection device 13-1 on the second HOE surface 12-1. it can. The second HOE surface 12-1 may be any optical material whose reflected light is visible to the user 9-1 and can be controlled in a direction not incident on the photographing apparatus 10-1, and is other than a holographic optical element. Also good. The second HOE surface 12-1 can be replaced with, for example, a Fresnel lens. In this case, the Fresnel lens reflects incident light at an angle predetermined by the lens design. If the image light projected by the projection device 13-1 is controlled so as not to be reflected in the direction of the imaging device 10-1 or the direction of the projection device 13-1, the image projected by the projection device 13-1 is captured by the imaging device 10. In addition to not being reflected in -1, it is possible for the user 9-1 to visually recognize a brighter image than in the case of diffuse reflection (such as a wall).
＜投影装置１３−１の配置＞
投影装置１３−１はシステムの利用上、妨げになりにくい位置に配置される。具体的には、投影装置１３−１は、仮想の撮影装置（図中、破線で表示）の位置を表す点である点Ｔを頂点とし、第１ＨＯＥ面１１−１の境界をその側面に含む錐体（図１の例では、辺Ｖ１Ｖ２、Ｖ２Ｖ３、Ｖ３Ｖ４、Ｖ４Ｖ１をその側面に含む四角錐）の外側に配置される（図２参照）。仮想の撮影装置の位置とは、撮影装置１０−１の撮像素子上で結像した光が反射および屈折せずに第１、第２ＨＯＥ面１１−１、１２−１を透過して、仮想の撮影装置の撮像素子上で結像するものと仮定した場合の、仮想の撮影装置の位置のことである。投影装置１３−１を上述の位置に配置することにより、投影装置１３−１から発せられる光が第１ＨＯＥ面１１−１で反射して、撮影装置１０−１に入射することを防止することができ、利用者９−２からみて映像が不自然な印象となることを防止することができる。
<Arrangement of Projector 13-1>
The projection device 13-1 is arranged at a position that is not likely to be obstructed in using the system. Specifically, the projection device 13-1 has a point T, which is a point representing the position of a virtual imaging device (shown by a broken line in the figure), as a vertex, and includes the boundary of the first HOE surface 11-1 on its side surface. It is arranged outside the cone (in the example of FIG. 1, a quadrangular pyramid including sides V1V2, V2V3, V3V4, V4V1 on its side surface) (see FIG. 2). The position of the virtual imaging device means that the light imaged on the imaging device of the imaging device 10-1 passes through the first and second HOE surfaces 11-1 and 12-1 without being reflected and refracted, and the virtual imaging device 10-1 This is the position of the virtual imaging device when it is assumed that an image is formed on the imaging device of the imaging device. By disposing the projection device 13-1 at the above-described position, it is possible to prevent the light emitted from the projection device 13-1 from being reflected by the first HOE surface 11-1 and entering the imaging device 10-1. It is possible to prevent the image from being unnatural when viewed from the user 9-2.
＜投影装置１３−１＞
図１に示すように、投影装置１３−１は好ましくは短焦点型のプロジェクタとする。短焦点型のプロジェクタは、超短焦点型のプロジェクタと表記される場合もある。超短焦点型のプロジェクタと呼ばれるものには、スクリーンから１０ｃｍ程度の距離で映像を投影できるものも存在する。投影装置１３−１に短焦点型、超短焦点型のプロジェクタを用いることにより、利用者９−１から発せられて第１ＨＯＥ面１１−１に入射する光と、投影装置１３−１から出力されて第１ＨＯＥ面１１−１に入射する光（図１に光線の軌跡を二点鎖線で表した）の角度を異ならせることができる。投影装置１３−１に短焦点型、超短焦点型のプロジェクタを用いることなどにより、光線の角度を異ならせることができれば、正面方向からの光（例えば入射角１０度以下の所定方向からの光）については、撮影装置１０−１に反射、集光し、それ以外の方向からの光はすべて透過するように、第１ＨＯＥ面１１−１の反射特性を設計することにより、利用者９−１およびその周辺から発せられた光と、投影装置１３−１が出力した光とを良好に分別することができる。これにより、投影装置１３−１の出力光が撮影装置１０−１に入射して、映像の視認性を悪化させる現象を防止できる。また投影装置１３−１を短焦点型、あるいは超短焦点型のプロジェクタとすれば、利用者９−１が投影面に近づいたとしても、利用者９−１が投影装置１３−１と投影面の間に割り込んでしまう可能性が少なくなるため、利用者９−１によって、投影装置１３−１からの出力光が遮られる可能性が少なくなる。
<Projector 13-1>
As shown in FIG. 1, the projection device 13-1 is preferably a short focus type projector. The short focus type projector may be referred to as an ultra short focus type projector. Some so-called ultra-short focus projectors can project an image at a distance of about 10 cm from a screen. By using a short focus type or ultra short focus type projector as the projection device 13-1, light emitted from the user 9-1 and incident on the first HOE surface 11-1 and output from the projection device 13-1. Thus, the angle of the light incident on the first HOE surface 11-1 (the trajectory of the light beam in FIG. 1 is represented by a two-dot chain line) can be varied. If the angle of the light beam can be varied by using a short focus type or ultra short focus type projector for the projection device 13-1, light from the front direction (for example, light from a predetermined direction with an incident angle of 10 degrees or less). ) For the user 9-1 by designing the reflection characteristics of the first HOE surface 11-1 so that the light is reflected and collected by the photographing apparatus 10-1 and all the light from other directions is transmitted. And the light emitted from the periphery and the light which the projector 13-1 output can be distinguished favorably. As a result, it is possible to prevent a phenomenon in which the output light of the projection device 13-1 enters the photographing device 10-1 and deteriorates the visibility of the video. Further, if the projection device 13-1 is a short focus type or ultra short focus type projector, even if the user 9-1 approaches the projection surface, the user 9-1 can connect the projection device 13-1 and the projection surface. Therefore, the possibility that the output light from the projection device 13-1 is blocked by the user 9-1 is reduced.
＜第１、第２ＨＯＥ面における波長選択＞
以下、図４を参照して第１、第２ＨＯＥ面における波長選択について説明する。図４は、本実施例の映像表示システム１の第１ＨＯＥ面１１−１と第２ＨＯＥ面１２−１の波長毎の反射率を異ならせた例を説明する図である。図４に実線で示すように、第１ＨＯＥ面１１−１と第２ＨＯＥ面１２−１の何れか一方の面において、波長Ｂ１、Ｇ１、Ｒ１を中心とする狭帯域の波長領域（それぞれ青色、緑色、赤色として視認される狭帯域の波長領域）のみで高い反射率を有するように設計し、他方の面において、波長Ｂ１、Ｇ１、Ｒ１をそれぞれ波長正方向にシフトした波長Ｂ２、Ｇ２、Ｒ２を中心とする狭帯域の波長領域（上述の青色、緑色、赤色よりも長波長側にシフトした青色、緑色、赤色として視認される狭帯域の波長領域）のみで高い反射率を有するように設計することにより、映像の品質をさらに向上させることができる。上述したように、第１ＨＯＥ面１１−１で反射される光と透過される光とは、その光線の向きを異ならせることにより第１ＨＯＥ面１１−１でフィルタリング可能であるため、撮像系と投影系の光は概ね弁別される。ここで図４に示すように、第１ＨＯＥ面１１−１で反射して撮影装置１０−１に入射する光の三原色と第１ＨＯＥ面１１−１を透過して第２ＨＯＥ面１１−２に投影されて利用者９−１に視認される光の三原色とを異ならせることにより撮像系と投影系の光をさらに高精度に弁別することが可能となる。
<Wavelength selection on the first and second HOE surfaces>
Hereinafter, wavelength selection in the first and second HOE planes will be described with reference to FIG. FIG. 4 is a diagram illustrating an example in which the reflectance for each wavelength of the first HOE surface 11-1 and the second HOE surface 12-1 of the
図４のように反射光の三原色をシフトさせた場合には、表示映像のカラーバランスをソフトウェアで補正する必要がある。 When the three primary colors of the reflected light are shifted as shown in FIG. 4, it is necessary to correct the color balance of the displayed image by software.
＜変形例＞
撮影装置１０−１は例えばスマートフォンのカメラとしてもよい。また、撮像系と投影系の光をさらに高精度に弁別するため、撮影装置１０−１と投影装置１３−１を同期させ、撮影装置１０−１のレンズにシャッターを設け、撮影装置１０−１の撮影タイミングと、投影装置１３−１の投影タイミングを高速に切替える時分割操作を実行してもよい。すなわち、投影装置１３−１による映像投影と撮影装置１０−１による撮影とを所定のフレームレートで切り替えながら交互に実行してもよい。同期操作、時分割操作は、前述の制御装置が実行してもよいし、撮影装置１０−１と投影装置１３−１の何れかに制御機能を持たせて実行させてもよい。切替のレートを例えば１２０Ｈｚとすれば、撮影と投影にそれぞれ６０Ｈｚを割り振ることができ、撮影、投影ともに十分なフレームレートを確保することができる。
<Modification>
The imaging device 10-1 may be a smartphone camera, for example. Further, in order to discriminate between the light of the imaging system and the projection system with higher accuracy, the imaging device 10-1 and the projection device 13-1 are synchronized, a shutter is provided on the lens of the imaging device 10-1, and the imaging device 10-1. A time-sharing operation for switching between the imaging timing and the projection timing of the projection device 13-1 at high speed may be executed. That is, the image projection by the projection device 13-1 and the photographing by the photographing device 10-1 may be alternately executed while switching at a predetermined frame rate. The synchronization operation and the time-sharing operation may be executed by the above-described control device, or may be executed with either the photographing device 10-1 or the projection device 13-1 having a control function. If the switching rate is set to 120 Hz, for example, 60 Hz can be allocated to shooting and projection, and a sufficient frame rate can be ensured for both shooting and projection.
＜効果＞
本実施例の映像表示システム１によれば、ホログラフィック光学素子を利用することにより、利用者から発せられる光をあたかも正面から撮影するかのように撮影でき、かつ相手の利用者からの映像を第１ＨＯＥ面に映り込ませずに、第２ＨＯＥ面上で投影して、利用者の正面に映し出すことができるため、利用者同士の視線が合わないという従来の課題を解決することができ、利用者がデバイスを意識せずに自然にコミュニケーションすることができる。また、映像の表示に投影装置を用いることにより従来のテレビ電話システム、テレビ会議システムで表示される映像よりも大画面の映像をローコストで実現することができる。
<Effect>
According to the
＜補記＞
本発明の装置は、例えば単一のハードウェアエンティティとして、キーボードなどが接続可能な入力部、液晶ディスプレイなどが接続可能な出力部、ハードウェアエンティティの外部に通信可能な通信装置（例えば通信ケーブル）が接続可能な通信部、ＣＰＵ（Central Processing Unit、キャッシュメモリやレジスタなどを備えていてもよい）、メモリであるＲＡＭやＲＯＭ、ハードディスクである外部記憶装置並びにこれらの入力部、出力部、通信部、ＣＰＵ、ＲＡＭ、ＲＯＭ、外部記憶装置の間のデータのやり取りが可能なように接続するバスを有している。また必要に応じて、ハードウェアエンティティに、ＣＤ−ＲＯＭなどの記録媒体を読み書きできる装置（ドライブ）などを設けることとしてもよい。このようなハードウェア資源を備えた物理的実体としては、汎用コンピュータなどがある。
<Supplementary note>
The apparatus of the present invention includes, for example, a single hardware entity as an input unit to which a keyboard or the like can be connected, an output unit to which a liquid crystal display or the like can be connected, and a communication device (for example, a communication cable) capable of communicating outside the hardware entity. Can be connected to a communication unit, a CPU (Central Processing Unit, may include a cache memory or a register), a RAM or ROM that is a memory, an external storage device that is a hard disk, and an input unit, an output unit, or a communication unit thereof , A CPU, a RAM, a ROM, and a bus connected so that data can be exchanged between the external storage devices. If necessary, the hardware entity may be provided with a device (drive) that can read and write a recording medium such as a CD-ROM. A physical entity having such hardware resources includes a general-purpose computer.
ハードウェアエンティティの外部記憶装置には、上述の機能を実現するために必要となるプログラムおよびこのプログラムの処理において必要となるデータなどが記憶されている（外部記憶装置に限らず、例えばプログラムを読み出し専用記憶装置であるＲＯＭに記憶させておくこととしてもよい）。また、これらのプログラムの処理によって得られるデータなどは、ＲＡＭや外部記憶装置などに適宜に記憶される。 The external storage device of the hardware entity stores a program necessary for realizing the above functions and data necessary for processing the program (not limited to the external storage device, for example, reading a program) It may be stored in a ROM that is a dedicated storage device). Data obtained by the processing of these programs is appropriately stored in a RAM or an external storage device.
ハードウェアエンティティでは、外部記憶装置（あるいはＲＯＭなど）に記憶された各プログラムとこの各プログラムの処理に必要なデータが必要に応じてメモリに読み込まれて、適宜にＣＰＵで解釈実行・処理される。その結果、ＣＰＵが所定の機能（上記、…部、…手段などと表した各構成要件）を実現する。 In the hardware entity, each program stored in an external storage device (or ROM or the like) and data necessary for processing each program are read into a memory as necessary, and are interpreted and executed by a CPU as appropriate. . As a result, the CPU realizes a predetermined function (respective component requirements expressed as the above-described unit, unit, etc.).
本発明は上述の実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更が可能である。また、上記実施形態において説明した処理は、記載の順に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されるとしてもよい。 The present invention is not limited to the above-described embodiment, and can be appropriately changed without departing from the spirit of the present invention. In addition, the processing described in the above embodiment may be executed not only in time series according to the order of description but also in parallel or individually as required by the processing capability of the apparatus that executes the processing. .
既述のように、上記実施形態において説明したハードウェアエンティティ（本発明の装置）における処理機能をコンピュータによって実現する場合、ハードウェアエンティティが有すべき機能の処理内容はプログラムによって記述される。そして、このプログラムをコンピュータで実行することにより、上記ハードウェアエンティティにおける処理機能がコンピュータ上で実現される。 As described above, when the processing functions in the hardware entity (the apparatus of the present invention) described in the above embodiments are realized by a computer, the processing contents of the functions that the hardware entity should have are described by a program. Then, by executing this program on a computer, the processing functions in the hardware entity are realized on the computer.
この処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体としては、例えば、磁気記録装置、光ディスク、光磁気記録媒体、半導体メモリ等どのようなものでもよい。具体的には、例えば、磁気記録装置として、ハードディスク装置、フレキシブルディスク、磁気テープ等を、光ディスクとして、ＤＶＤ（Digital Versatile Disc）、ＤＶＤ−ＲＡＭ（Random Access Memory）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、ＣＤ−Ｒ（Recordable）／ＲＷ（ReWritable）等を、光磁気記録媒体として、ＭＯ（Magneto-Optical disc）等を、半導体メモリとしてＥＥＰ−ＲＯＭ（Electronically Erasable and Programmable-Read Only Memory）等を用いることができる。 The program describing the processing contents can be recorded on a computer-readable recording medium. As the computer-readable recording medium, for example, any recording medium such as a magnetic recording device, an optical disk, a magneto-optical recording medium, and a semiconductor memory may be used. Specifically, for example, as a magnetic recording device, a hard disk device, a flexible disk, a magnetic tape or the like, and as an optical disk, a DVD (Digital Versatile Disc), a DVD-RAM (Random Access Memory), a CD-ROM (Compact Disc Read Only). Memory), CD-R (Recordable) / RW (ReWritable), etc., magneto-optical recording medium, MO (Magneto-Optical disc), etc., semiconductor memory, EEP-ROM (Electronically Erasable and Programmable-Read Only Memory), etc. Can be used.
また、このプログラムの流通は、例えば、そのプログラムを記録したＤＶＤ、ＣＤ−ＲＯＭ等の可搬型記録媒体を販売、譲渡、貸与等することによって行う。さらに、このプログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することにより、このプログラムを流通させる構成としてもよい。 The program is distributed by selling, transferring, or lending a portable recording medium such as a DVD or CD-ROM in which the program is recorded. Furthermore, the program may be distributed by storing the program in a storage device of the server computer and transferring the program from the server computer to another computer via a network.
このようなプログラムを実行するコンピュータは、例えば、まず、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、一旦、自己の記憶装置に格納する。そして、処理の実行時、このコンピュータは、自己の記録媒体に格納されたプログラムを読み取り、読み取ったプログラムに従った処理を実行する。また、このプログラムの別の実行形態として、コンピュータが可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することとしてもよく、さらに、このコンピュータにサーバコンピュータからプログラムが転送されるたびに、逐次、受け取ったプログラムに従った処理を実行することとしてもよい。また、サーバコンピュータから、このコンピュータへのプログラムの転送は行わず、その実行指示と結果取得のみによって処理機能を実現する、いわゆるＡＳＰ（Application Service Provider）型のサービスによって、上述の処理を実行する構成としてもよい。なお、本形態におけるプログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるもの（コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータ等）を含むものとする。 A computer that executes such a program first stores, for example, a program recorded on a portable recording medium or a program transferred from a server computer in its own storage device. When executing the process, the computer reads a program stored in its own recording medium and executes a process according to the read program. As another execution form of the program, the computer may directly read the program from a portable recording medium and execute processing according to the program, and the program is transferred from the server computer to the computer. Each time, the processing according to the received program may be executed sequentially. Also, the program is not transferred from the server computer to the computer, and the above-described processing is executed by a so-called ASP (Application Service Provider) type service that realizes the processing function only by the execution instruction and result acquisition. It is good. Note that the program in this embodiment includes information that is used for processing by an electronic computer and that conforms to the program (data that is not a direct command to the computer but has a property that defines the processing of the computer).
また、この形態では、コンピュータ上で所定のプログラムを実行させることにより、ハードウェアエンティティを構成することとしたが、これらの処理内容の少なくとも一部をハードウェア的に実現することとしてもよい。 In this embodiment, a hardware entity is configured by executing a predetermined program on a computer. However, at least a part of these processing contents may be realized by hardware.
Claims (6)
前記第１のホログラフィック光学素子面からの反射光を撮影して受話側の投影装置に送信する撮影装置と、
前記第１のホログラフィック光学素子面と平行に配置された第２のホログラフィック光学素子面と、
前記撮影装置の撮像素子上で結像した光が反射および屈折せずに前記第１、第２のホログラフィック光学素子面を透過して、仮想の撮影装置の撮像素子上で結像するものと仮定した場合の前記仮想の撮影装置の位置を表す点を点Ｔと定義し、
前記点Ｔを頂点とし前記第１のホログラフィック光学素子面の境界をその側面に含む錐体の外側に配置され、前記受話側の撮影装置にて撮影された映像を前記第２のホログラフィック光学素子面に投影する投影装置と、
を含む映像表示システム。 A first holographic optical element surface;
A photographing device for photographing reflected light from the first holographic optical element surface and transmitting it to a receiving-side projection device;
A second holographic optical element surface disposed parallel to the first holographic optical element surface;
The light imaged on the imaging device of the imaging device passes through the first and second holographic optical element surfaces without being reflected and refracted, and forms an image on the imaging device of the virtual imaging device. A point representing the position of the virtual photographing device when assumed is defined as a point T,
The second holographic optics is an image captured by the receiving device, which is arranged outside the cone having the point T as an apex and including the boundary of the first holographic optical element surface on its side surface. A projection device for projecting onto the element surface;
Including video display system.
前記第１のホログラフィック光学素子面からの反射光を撮影して受話側の投影装置に送信する撮影装置と、
前記第１のホログラフィック光学素子面と平行に配置されたフレネルレンズと、
前記撮影装置の撮像素子上で結像した光が反射および屈折せずに前記第１のホログラフィック光学素子面、前記フレネルレンズを透過して、仮想の撮影装置の撮像素子上で結像するものと仮定した場合の前記仮想の撮影装置の位置を表す点を点Ｔと定義し、
前記点Ｔを頂点とし前記第１のホログラフィック光学素子面の境界をその側面に含む錐体の外側に配置され、前記受話側の撮影装置にて撮影された映像を前記フレネルレンズに投影する投影装置と、
を含む映像表示システム。 A first holographic optical element surface;
A photographing device for photographing reflected light from the first holographic optical element surface and transmitting it to a receiving-side projection device;
A Fresnel lens disposed parallel to the first holographic optical element surface;
Light that forms an image on the imaging device of the imaging device passes through the first holographic optical element surface and the Fresnel lens without being reflected or refracted, and forms an image on the imaging device of the virtual imaging device A point representing the position of the virtual photographing device when it is assumed to be a point T,
A projection that is arranged outside the cone that has the point T as an apex and includes the boundary of the first holographic optical element surface on its side surface, and projects an image shot by the receiving-side imaging device onto the Fresnel lens. Equipment,
Including video display system.
前記第１のホログラフィック光学素子面は所定の波長領域の入射光を反射してそれ以外の波長領域の入射光を透過させ、前記第２のホログラフィック光学素子面は、前記第１のホログラフィック光学素子面が反射する波長領域とは異なる波長領域の入射光を反射してそれ以外の波長領域の入射光を透過させる
映像表示システム。 The video display system according to claim 1,
The first holographic optical element surface reflects incident light in a predetermined wavelength region and transmits incident light in other wavelength regions, and the second holographic optical element surface transmits the first holographic optical surface. An image display system that reflects incident light in a wavelength region different from the wavelength region reflected by the optical element surface and transmits incident light in other wavelength regions.
前記第１のホログラフィック光学素子面は所定の波長領域の入射光を反射してそれ以外の波長領域の入射光を透過させ、前記フレネルレンズは、入射光を所定の角度に反射する
映像表示システム。 The video display system according to claim 2,
The first holographic optical element surface reflects incident light in a predetermined wavelength region and transmits incident light in other wavelength regions, and the Fresnel lens reflects incident light at a predetermined angle. .
前記投影装置は、短焦点型のプロジェクタである
映像表示システム。 The video display system according to any one of claims 1 to 4,
The projection apparatus is a video display system which is a short focus type projector.
前記投影装置による映像投影と前記撮影装置による撮影を所定のフレームレートで切り替えながら交互に実行する
映像表示システム。 The video display system according to any one of claims 1 to 5,
An image display system that alternately executes image projection by the projection device and imaging by the imaging device while switching at a predetermined frame rate.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015087763A JP6424133B2 (en) | 2015-04-22 | 2015-04-22 | Video display system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015087763A JP6424133B2 (en) | 2015-04-22 | 2015-04-22 | Video display system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016208273A true JP2016208273A (en) | 2016-12-08 |
| JP6424133B2 JP6424133B2 (en) | 2018-11-14 |
Family
ID=57490127
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015087763A Active JP6424133B2 (en) | 2015-04-22 | 2015-04-22 | Video display system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6424133B2 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106997616A (en) * | 2017-03-01 | 2017-08-01 | 天津大学 | A kind of three-D imaging method and pyramid three-dimensional image forming apparatus |
| WO2022045294A1 (en) * | 2020-08-28 | 2022-03-03 | 大日本印刷株式会社 | Aerial image forming device, aerial input device, display device with aerial image forming device, mobile object, and hologram imaging lens |
| CN115361521A (en) * | 2022-08-17 | 2022-11-18 | 上海华万通信科技有限公司 | Holographic image video conference system |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05328336A (en) * | 1992-05-15 | 1993-12-10 | Nippon Telegr & Teleph Corp <Ntt> | Display/image pickup device |
| JPH08340520A (en) * | 1995-06-14 | 1996-12-24 | Sharp Corp | Video equipment |
| JPH10213776A (en) * | 1997-01-29 | 1998-08-11 | Asahi Glass Co Ltd | Display image pickup device |
| JP2000075129A (en) * | 1998-08-27 | 2000-03-14 | Nippon Telegr & Teleph Corp <Ntt> | Display photographing device and remote interactive device |
| JP2001359064A (en) * | 2000-06-09 | 2001-12-26 | Canon Inc | Video phone and method for controlling the video phone |
| US6882358B1 (en) * | 2002-10-02 | 2005-04-19 | Terabeam Corporation | Apparatus, system and method for enabling eye-to-eye contact in video conferences |
| JP2005115158A (en) * | 2003-10-09 | 2005-04-28 | Nikon Corp | Imaging apparatus and camera having the same |
| JP2005520188A (en) * | 2002-03-13 | 2005-07-07 | ザ ユニバーシティ オブ ブリティッシュ コロンビア | High dynamic range display device |
| JP2007295187A (en) * | 2006-04-24 | 2007-11-08 | Canon Inc | Projector |
| JP2014071282A (en) * | 2012-09-28 | 2014-04-21 | Dainippon Printing Co Ltd | Reflective screen and video image display system |
| JP2014176042A (en) * | 2013-03-13 | 2014-09-22 | Ricoh Co Ltd | Communication device, and voice input/output unit control method |
-
2015
- 2015-04-22 JP JP2015087763A patent/JP6424133B2/en active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05328336A (en) * | 1992-05-15 | 1993-12-10 | Nippon Telegr & Teleph Corp <Ntt> | Display/image pickup device |
| JPH08340520A (en) * | 1995-06-14 | 1996-12-24 | Sharp Corp | Video equipment |
| JPH10213776A (en) * | 1997-01-29 | 1998-08-11 | Asahi Glass Co Ltd | Display image pickup device |
| JP2000075129A (en) * | 1998-08-27 | 2000-03-14 | Nippon Telegr & Teleph Corp <Ntt> | Display photographing device and remote interactive device |
| JP2001359064A (en) * | 2000-06-09 | 2001-12-26 | Canon Inc | Video phone and method for controlling the video phone |
| JP2005520188A (en) * | 2002-03-13 | 2005-07-07 | ザ ユニバーシティ オブ ブリティッシュ コロンビア | High dynamic range display device |
| US6882358B1 (en) * | 2002-10-02 | 2005-04-19 | Terabeam Corporation | Apparatus, system and method for enabling eye-to-eye contact in video conferences |
| JP2005115158A (en) * | 2003-10-09 | 2005-04-28 | Nikon Corp | Imaging apparatus and camera having the same |
| JP2007295187A (en) * | 2006-04-24 | 2007-11-08 | Canon Inc | Projector |
| JP2014071282A (en) * | 2012-09-28 | 2014-04-21 | Dainippon Printing Co Ltd | Reflective screen and video image display system |
| JP2014176042A (en) * | 2013-03-13 | 2014-09-22 | Ricoh Co Ltd | Communication device, and voice input/output unit control method |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106997616A (en) * | 2017-03-01 | 2017-08-01 | 天津大学 | A kind of three-D imaging method and pyramid three-dimensional image forming apparatus |
| CN106997616B (en) * | 2017-03-01 | 2020-01-21 | 天津大学 | Three-dimensional imaging method and pyramid three-dimensional imaging device |
| WO2022045294A1 (en) * | 2020-08-28 | 2022-03-03 | 大日本印刷株式会社 | Aerial image forming device, aerial input device, display device with aerial image forming device, mobile object, and hologram imaging lens |
| JP2022039582A (en) * | 2020-08-28 | 2022-03-10 | 大日本印刷株式会社 | Aerial imaging device, aerial input device, display device with aerial imaging device, vehicle, and holographic imaging lens |
| JP7216925B2 (en) | 2020-08-28 | 2023-02-02 | 大日本印刷株式会社 | Aerial imaging device, aerial input device, display device with aerial imaging device, moving body and hologram imaging lens |
| CN115361521A (en) * | 2022-08-17 | 2022-11-18 | 上海华万通信科技有限公司 | Holographic image video conference system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6424133B2 (en) | 2018-11-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20220005279A1 (en) | Immersive content production system with multiple targets | |
| US7118228B2 (en) | Image display system | |
| US9264630B2 (en) | Method and apparatus for creating exposure effects using an optical image stabilizing device | |
| CN102821238B (en) | Wide-field ultra-high-resolution imaging system | |
| CN100437339C (en) | Display device and display method | |
| KR20150068299A (en) | Method and system of generating images for multi-surface display | |
| CN103945117A (en) | Photographing unit, cooperative photographing method, and recording medium having recorded program | |
| CN102821285A (en) | Digital film playing method and digital film playing system as well as digital film optimizing device | |
| US20140085422A1 (en) | Image processing method and device | |
| CN105739067A (en) | Optical lens accessory for wide-angle photographing | |
| JP6424133B2 (en) | Video display system | |
| US10444704B2 (en) | Dynamic display using holographic recorded pixels | |
| CN102572469A (en) | Image processing device, image processing method, and program | |
| CN1848917B (en) | Camera system with pip in viewfinder | |
| CN116055696A (en) | Projection equipment and projection method | |
| JP6529108B2 (en) | Image processing apparatus, image processing method and image processing program | |
| JP2008536159A (en) | Non-stereoscopic three-dimensional observation apparatus that does not require a three-dimensional imaging camera and glasses | |
| Tsuchiya et al. | An optical design for avatar-user co-axial viewpoint telepresence | |
| JP4747616B2 (en) | Image presentation system and image presentation program | |
| US20050001920A1 (en) | Methods and apparatuses for managing and presenting content through a spherical display device | |
| CN110493621B (en) | Double-arc-screen projection system and broadcast control system | |
| US7480001B2 (en) | Digital camera with a spherical display | |
| Tsuchiya et al. | Aerial Imaging by Retro-Reflection for Mid-Air Image Display and Camera Viewpoint Transfer | |
| US10686991B2 (en) | Techniques for improving photograph quality for fouled lens or sensor situations | |
| CN114615435A (en) | Processing method and device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180202 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180905 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180911 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180925 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181016 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181022 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6424133 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |