JP5125561B2 - Projection apparatus and projection control method - Google Patents
Projection apparatus and projection control method Download PDFInfo
- Publication number
- JP5125561B2 JP5125561B2 JP2008025526A JP2008025526A JP5125561B2 JP 5125561 B2 JP5125561 B2 JP 5125561B2 JP 2008025526 A JP2008025526 A JP 2008025526A JP 2008025526 A JP2008025526 A JP 2008025526A JP 5125561 B2 JP5125561 B2 JP 5125561B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- projection
- light emitting
- unit
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 14
- 230000003287 optical effect Effects 0.000 claims description 41
- 238000005259 measurement Methods 0.000 claims description 14
- 230000015572 biosynthetic process Effects 0.000 claims description 4
- 230000010355 oscillation Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 238000012937 correction Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 239000003086 colorant Substances 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000001678 irradiating effect Effects 0.000 description 3
- 101000621511 Potato virus M (strain German) RNA silencing suppressor Proteins 0.000 description 2
- 101000831940 Homo sapiens Stathmin Proteins 0.000 description 1
- 102100024237 Stathmin Human genes 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004907 flux Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 229910052753 mercury Inorganic materials 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Transforming Electric Information Into Light Information (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Measurement Of Optical Distance (AREA)
- Projection Apparatus (AREA)
Description
本発明は、データプロジェクタ等に好適な投影装置及び投影制御方法に関する。 The present invention relates to a projection apparatus and a projection control method suitable for a data projector or the like.
従来、パーソナルコンピュータと接続し、各種画像をスクリーン上に大きく投影してプレゼンテーション等を行なうデータプロジェクタ装置で、予め決定された角度で出射したレーザポインタの照射位置を撮影し、撮影画像中のポインタ位置により、投影対象となるスクリーンまでの距離を測定するようにした技術が考えられている。(例えば、特許文献1)
上記特許文献1では、レーザポインタが投射レンズの光軸と平行な方向にレーザ光を投射するものとして記載されているが、レーザポインタと投射レンズは異なる光学系を用いるものであるので、両光軸を正確に一致させるのは困難である。加えて、測距精度を向上するべく、レーザポインタ及び投射レンズと同一面内でなるべく離れた位置に撮像レンズを設け、この撮影レンズを介して得た撮影画像中に写り込んでいるポイント位置からパララックスを利用して距離を測定するものとしている。したがって、プロジェクタの装置としての小型化を図った場合には、必然的にレーザポインタ及び投射レンズと撮影レンズとの距離も小さくなるため、測距精度も低下するものと考えられる。
In the
本発明は上記のような実情に鑑みてなされたもので、その目的とするところは、装置の小型化に寄与し、より簡易な構成で高い精度の測距を実行することが可能な投影装置及び投影制御方法を提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is to contribute to the miniaturization of the apparatus and to perform highly accurate distance measurement with a simpler configuration. And providing a projection control method.
請求項1記載の発明は、光源と、アレイ状に配列された複数の微小ミラーの上記光源からの光に対する各傾斜角度を制御して反射光により光像を形成するミラー素子を駆動し、入力される画像信号に対応した光像を光学レンズ系を介して投影対象に向けて投影する投影手段と、上記光源とは別に設けられ、上記光学レンズ系を介して光を出射させるように配置した発光手段と、上記光学レンズ系を介して出射された上記発光手段の発光のうち、上記投影対象から得られる反射光を受信する受光手段と、上記発光手段での発光と上記受光手段で受信した反射光の時間差を検出することにより上記投影対象までの距離を測定する測距手段と、上記測距手段で得た距離により上記投影手段での投影条件を制御する制御手段とを具備したことを特徴とする。
請求項2記載の発明は、上記請求項1記載の発明において、上記発光手段は、上記ミラー素子の微小ミラーが光源からの光を上記光学レンズ系の外部に反射させる傾斜角度にある状態で、前記微小ミラーへ光を入射させ、その反射光を上記光学レンズ系を介して出射させることを特徴とする。
請求項3記載の発明は、上記請求項1または2記載の発明において、上記発光手段は、変調された光を入射させ、上記測距手段は、上記発光手段での発光と上記受光手段で受信した反射光の反射光の位相差から時間差を検出することにより上記投影対象までの距離を測定することを特徴とする。
According to the first aspect of the present invention, a light source and a mirror element that forms a light image by reflected light by controlling each inclination angle of the plurality of micromirrors arranged in an array with respect to the light from the light source are input. A projection unit that projects a light image corresponding to the image signal to be projected onto a projection target through an optical lens system and the light source are provided separately from each other and arranged to emit light through the optical lens system. light emitting means, of the light emission of the light emitting means is emitted through the upper Symbol optical lens system, a light receiving means for receiving reflected light obtained from the projection target, received in the light-emitting and the light-receiving unit in the light emitting means A distance measuring means for measuring a distance to the projection object by detecting a time difference of the reflected light, and a control means for controlling a projection condition in the projection means based on the distance obtained by the distance measuring means. With features That.
The invention according to claim 2 is the invention according to
According to a third aspect of the present invention, in the first or second aspect of the present invention, the light emitting means makes the modulated light incident, and the distance measuring means receives the light emitted from the light emitting means and received by the light receiving means. The distance to the projection object is measured by detecting the time difference from the phase difference of the reflected light of the reflected light.
請求項4記載の発明は、上記請求項1乃至3のいずれか一項記載の発明において、上記発光手段は、上記ミラー素子の異なる微小ミラー位置へ入射させる複数の発光部を有し、上記測距手段は、上記発光手段の複数の発光部での発光と上記受光手段での受光の時間差を検出することにより上記投影対象の複数位置までの各距離を測定することを特徴とする。 According to a fourth aspect of the present invention, in the invention according to any one of the first to third aspects, the light-emitting means includes a plurality of light-emitting portions that are incident on different micromirror positions of the mirror element. The distance unit measures each distance to a plurality of positions of the projection target by detecting a time difference between light emitted from the plurality of light emitting units of the light emitting unit and light received by the light receiving unit.
請求項5記載の発明は、上記請求項1乃至4のいずれか一項記載の発明において、上記投影手段の光学レンズ系は、投影画角を可変するズーム機能を有し、上記発光手段は、上記光学レンズ系による複数の投影画角でそれぞれ発光部により発光させ、上記測距手段は、上記光学レンズ系による複数の投影画角で上記発光手段の発光部での発光と上記受光手段での受光の時間差を検出することにより上記投影対象の複数位置までの各距離を測定することを特徴とする。 According to a fifth aspect of the present invention, in the invention according to any one of the first to fourth aspects, the optical lens system of the projection unit has a zoom function of varying a projection angle of view, and the light emitting unit includes: The light emitting unit emits light at each of a plurality of projection angles of view by the optical lens system, and the distance measuring unit emits light from the light emitting unit of the light emitting unit and emits light at the light receiving unit at a plurality of projection angles of view of the optical lens system. Each distance to a plurality of positions of the projection target is measured by detecting a time difference of light reception.
請求項6記載の発明は、上記請求項1乃至5のいずれか一項記載の発明において、上記発光手段は、レーザ光を発振するレーザ発振部と発振されたレーザ光を平行光に変換するコリメータレンズとを有することを特徴とする。 According to a sixth aspect of the present invention, in the invention according to any one of the first to fifth aspects, the light emitting means includes a laser oscillation unit that oscillates laser light and a collimator that converts the oscillated laser light into parallel light. And a lens.
請求項7記載の発明は、上記請求項1乃至6のいずれか一項記載の発明において、上記制御手段は、上記発光手段での発光時に上記ミラー素子による光像の形成を一時的に停止させることを特徴とする。
The invention according to
請求項8記載の発明は、上記請求項1乃至6のいずれか一項記載の発明において、上記制御手段は、上記発光手段での発光時に、上記ミラー素子を構成する複数の微小ミラー中、上記発光手段からの発光が照射される位置にある微小ミラーのみ光像の形成を一時的に停止させることを特徴とする。
Invention of claim 8, wherein, in the invention according to one of the
請求項9記載の発明は、光源と、アレイ状に配列された複数の微小ミラーの上記光源からの光に対する各傾斜角度を制御して反射光により光像を形成するミラー素子を駆動し、入力される画像信号に対応した光像を光学レンズ系を介して投影対象に向けて投影する投影部とを備えた投影装置での制御方法であって、上記光源とは別に設けられ、上記光学レンズ系を介して光を出射させるように配置した発光部を駆動する発光工程と、上記光学レンズ系を介して出射された上記発光手段の発光のうち、上記投影対象から得られる反射光を受信する受光工程と、上記発光工程での発光と上記受光工程で受信した反射光の時間差を検出することにより上記投影対象までの距離を測定する測距工程と、上記測距工程で得た距離により上記投影部での投影条件を制御する制御工程とを有したことを特徴とする。 The invention described in claim 9 drives a mirror element that forms an optical image by reflected light by controlling each inclination angle of the light source and a plurality of micromirrors arranged in an array with respect to the light from the light source. And a projection unit that projects a light image corresponding to an image signal to a projection target via an optical lens system, the control method being provided separately from the light source, a light emitting step of driving a light-emitting portion arranged to emit light through the system, of light emission of the light emitting means is emitted through the upper Symbol optical lens system, receives the reflected light obtained from the projection target A light receiving step, a distance measuring step for measuring the distance to the projection target by detecting a time difference between the light emission in the light emitting step and the reflected light received in the light receiving step, and the distance obtained in the distance measuring step. Throw in the above projection unit Characterized in that a control step of controlling the condition.
本発明によれば、装置の小型化に寄与し、より簡易な構成で高い精度の測距を実行することが可能となる。 According to the present invention, it is possible to reduce the size of the apparatus and to perform highly accurate distance measurement with a simpler configuration.
以下本発明をDLP(Digital Light Processing)(登録商標)方式のデータプロジェクタ装置に適用した場合の一実施形態について図面を参照して説明する。 An embodiment in which the present invention is applied to a data projector apparatus of DLP (Digital Light Processing) (registered trademark) system will be described below with reference to the drawings.
図1は、同実施形態に係るデータプロジェクタ装置10の外観構成を示す。同図で、データプロジェクタ装置10は、直方体状の本体ケーシング11の前面に投影レンズ部12、レーザ受光部13、及びIr受光部14を配設する。
FIG. 1 shows an external configuration of a
また、同本体ケーシング11の上面には、スピーカ部15、インジケータ部16、及びキー操作部17を配設する。
In addition, a
投影レンズ部12は、内部で作成された光像を拡大して投影対象となるスクリーン等に投影するものであり、合焦位置及びズーム位置(投影画角)を任意に可変できるものとする。
The
レーザ受光部13は、投影レンズ部12の近傍に設置され、後述するレーザ光が投影レンズ部12を介して投影対象に投射された場合、その反射光を受信する。
The laser
Ir受光部14は、このデータプロジェクタ装置10の図示しないリモートコントローラからの赤外線変調信号を受信する部位であり、同様の受信部をこのデータプロジェクタ装置10の背面側にも配設する。
The Ir
スピーカ部15は、画像信号と共に入力される音声信号や予めデータプロジェクタ装置10内に記憶されている音声メッセージ、ビープ音等を拡声放音する。
The
インジケータ部16は、電源の投入/切断状態、後述する光源ランプの温度が異常となった場合などを内部に設けたLED(発光ダイオード)の点灯/点滅などで表示する。
The
キー操作部17は、直接ユーザのキー操作を受付けて各種投影動作を制御するためのもので、例えば電源キー、入力切換えキー、ズームアップ/ダウンキー、AFK(Auto Focus/automatic Keystone correction:自動合焦/自動台形補正)キー、メニューキー、カーソルキー(「↑」「↓」「←」「→」)、エンターキー、キャンセルキー等を備える。
The
また、データプロジェクタ装置10の下面前端側の左右両端部には一対の調整脚部18A,18Bが設けられる。図示はしないが、データプロジェクタ装置10の下面後端側中央にはもう1本の固定脚部が設けられるもので、計3本の脚部によりデータプロジェクタ装置10を支持すると共に、前側に位置する上記調整脚部18A,18Bの各脚長を個別に調整することにより、投影レンズ部12の投影光軸の仰角、及び投影画像の左右の傾きを調整可能となる。
In addition, a pair of
なお、ここでは図示しないが、本体ケーシング11の背面には各種画像信号を入出力するためのコネクタ部、盗難防止金具取付部、上記Ir受光部14と同様のIr受光部等を備える。
Although not shown here, the back surface of the
図2は、上記データプロジェクタ装置10が備える電子回路の機能構成を示すブロック図である。
同図で、21は上記本体ケーシング11の背面側に設けられる入出力コネクタ部であり、例えばピンジャック(RCA)タイプのビデオ入力端子、D−sub15のRGB入力端子、及びUSB端子からなる。
FIG. 2 is a block diagram showing a functional configuration of an electronic circuit provided in the
In the figure, reference numeral 21 denotes an input / output connector portion provided on the back side of the
入出力コネクタ部21より入力される各種規格の画像信号は、入出力インタフェース(I/F)22、システムバスSBを介して画像変換部23に送られる。画像変換部23は、一般にスケーラとも称されるもので、送られてきた画像信号の解像度数、階調数等を含む所定のフォーマットの画像信号に統一された後に、投影画像処理部24へ送る。
Image signals of various standards input from the input / output connector unit 21 are sent to the
この際、OSD(On Screen Display)用の文字画像やポインタ等の記号も必要に応じて画像信号上に重畳加工された状態で投影画像処理部24へ送られる。
At this time, a character image for OSD (On Screen Display) and a symbol such as a pointer are also sent to the projection
投影画像処理部24は、送られてきた画像信号をビデオRAM25に展開して記憶させた上でこのビデオRAM25の記憶内容からビデオ信号を生成する。
The projection
投影画像処理部24は、このビデオ信号のフレームレート、例えば60[フレーム/秒]と色成分の分割数、及び表示階調数を乗算した、より高速な時分割駆動により、空間的光変調素子(SOM)であるマイクロミラー素子26を表示駆動する。
The projected
このマイクロミラー素子26は、アレイ状に配列された複数、例えばXGA(横1024×縦768ドット)分の微小ミラーの各傾斜角度をオン/オフ動作制御することでその反射光により光像を形成する。
The
一方で、リフレクタ27内に配置された、例えば高圧水銀灯を用いた光源ランプ28が高輝度の白色光を出射する。光源ランプ28の出射した白色光は、カラーホイール29を介して時分割で原色に着色され、ここでは図示しないインテグレータで輝度分布が均一な光束とされた後にミラー30で全反射して上記マイクロミラー素子26に照射される。
On the other hand, a
しかして、マイクロミラー素子26での反射光で光像が形成され、形成された光像が上記投影レンズ部12を介して、投影対象となるここでは図示しないスクリーンに投影表示される。
Thus, an optical image is formed by the reflected light from the
上述した如く投影レンズ部12は、合焦位置及びズーム位置(投影画角)を任意に可変できる。すなわち、投影レンズ部12を構成する複数の光学レンズ中、図示しないフォーカスレンズ及びズームレンズはそれぞれ光軸方向に沿って前後に移動することで制御されるもので、それらレンズはステッピングモータ(M)31の回動駆動により移動する。
As described above, the
また、上記マイクロミラー素子26と投影レンズ部12との空間を挟んで上記ミラー30と対峙するように3個のレーザ発光部32A〜32Cが設けられる。これらレーザ発光部32A〜32Cは、いずれもレーザダイオードとコリメータレンズとを組み合わせて構成され、例えば20[MHz]でAM変調したスポット状の平行光によるレーザ光をマイクロミラー素子26に照射する。
Further, three laser
すなわち、レーザ発光部32A〜32Cは、本来マイクロミラー素子26の各微小ミラーがオフ位置、すなわち光源ランプ28からの光を投影レンズ部12を外すように反射する傾斜角度となっている状態で、マイクロミラー素子26へスポット状のレーザ光を照射することで、その反射光が投影レンズ部12を介して投影対象となるここでは図示しないスクリーンに照射するものとなる。
That is, the laser
そして、上記光源ランプ28の点灯駆動、上記カラーホイール29用のモータ(M)33の回転駆動、上記ステッピングモータ24の回動駆動、上記レーザ発光部32A〜32Cの発光駆動、及び上記レーザ受光部13での受光をいずれも投影光処理部34が実行する。
The
投影光処理部34では、後述する如くレーザ発光部32A〜32Cを時分割で発光駆動し、各発光に対してレーザ受光部13でその反射光が受光された際の出射光との位相差から時間差を算出した後に、得られた時間差の半値を光速度を除数として除算することで、投影対象までの距離を算出する。
In the projection
なお、この投影光処理部34は、レーザ発光部32A〜32Cとレーザ受光部13の駆動のみを行ない、その発光光と受光光の位相差から距離値を算出する演算は後述するCPU35が行なうものとしても良い。
The projection
上記各回路の動作すべてをCPU35が制御する。このCPU35は、DRAMで構成されたメインメモリ36、動作プログラムや各種定型データ等を記憶した電気的書換可能な不揮発性メモリでなるプログラムメモリ37を用いてこのデータプロジェクタ装置10内の制御動作を実行する。
The
上記CPU35は、操作部38からのキー操作信号に応じて各種投影動作を実行する。この操作部38は、データプロジェクタ装置10の本体に設けられる上記キー操作部17と、このデータプロジェクタ装置10専用の図示しないリモートコントローラからの赤外光を受信する上記レーザ受光部13を含み、ユーザが直接またはリモートコントローラを介して操作したキーに基づくキー操作信号をCPU35へ直接出力する。
The
上記CPU35はさらに、上記システムバスSBを介して上記インジケータ部16及び音声処理部39と接続される。
The
音声処理部39は、PCM音源等の音源回路を備え、投影動作時に与えられる音声データをアナログ化し、上記スピーカ部15を駆動して拡声放音する一方で、必要によりビープ音等を発生させる。
The
次に上記実施形態の動作について説明する。
図3は、電源スイッチを操作して電源を投入してから後の基本的な動作と、キー操作部17またはリモートコントローラの「AFK」キー操作に対応した処理内容について示すものである。この図3で示す動作制御は、すべてCPU32がプログラムメモリ34に記憶された動作プログラムを読出してメインメモリ33に展開しながら実行する。
Next, the operation of the above embodiment will be described.
FIG. 3 shows the basic operations after the power is turned on by operating the power switch and the processing contents corresponding to the “AFK” key operation of the
処理中、まず入出力コネクタ部21より画像信号の入力があるか否かを判断する(ステップS101)。ここで入力があると判断した場合にのみ、その入力された画像信号に対応した画像をマイクロミラー素子26で表示することで、ミラー30を介して送られてきた光源光を投射し、その反射光で光像を形成して投影レンズ部12により投影対象に向けて出射する(ステップS104)。
During processing, first, it is determined whether or not an image signal is input from the input / output connector unit 21 (step S101). Only when it is determined that there is an input, an image corresponding to the input image signal is displayed on the
図4(A)は、画像投影時のマイクロミラー素子26を構成する個々の微小ミラー26a,26a,‥‥の傾斜角度を例示するものである。このとき、各微小ミラー26a,26a,‥‥は個体(画素)単位で選択的にオン/オフ制御される。
FIG. 4A illustrates the inclination angles of the
オンとなった個体(画素)の微小ミラー26aでは、光源光を投影レンズ部12方向に反射する。一方で、オフとなった個体(画素)の微小ミラー26aは、光源光を投影レンズ部12から外れる方向に反射する。
The individual (pixel)
なお、各画素の階調は、オンとなる時間幅で調整される。例えば、カラーホイール29がR,G,Bの3原色のカラーフィルタを有する場合、画像1フレームを構成するR,G,Bの各原色光がマイクロミラー素子26に照射される期間中、いずれもオンの状態を維持することで、そのフレームの当該画素はR,G,Bの各原色成分共フル階調で表現され、結果として当該画素が白で投影されることとなる。
Note that the gradation of each pixel is adjusted by the time width during which the pixel is turned on. For example, when the
反対に、画像1フレームを構成するR,G,Bの各原色光がマイクロミラー素子26に照射される期間中、いずれもオフの状態を維持することで、そのフレームの当該画素は黒で投影されることとなる。
On the contrary, by maintaining the OFF state during the period when the R, G, and B primary color lights constituting one frame of the image are irradiated on the
その他の色に関しては、画像1フレームを構成するR,G,Bの各原色光がマイクロミラー素子26に照射される期間それぞれにおいて、オンとなる状態とオフとなる状態の時間幅を例えば8ビット中で調整することで、そのフレームの当該画素が約1677万色で中間階調表現されて投影されることとなる。
For the other colors, the time width between the on state and the off state is set to, for example, 8 bits in each of the periods in which the R, G, and B primary color lights constituting one frame of the image are irradiated on the
その後、合わせて操作部38から自動合焦と自動台形補正とを指示する「AFK」キーの操作信号があったか否かを判断し(ステップS102)、操作信号がないと判断すると、次に操作部38から電源の切断を指示する電源キーの操作があったか否かを判断する(ステップS103)。 Thereafter, it is determined whether or not there is an operation signal of the “AFK” key for instructing automatic focusing and automatic keystone correction from the operation unit 38 (step S102). It is determined whether or not an operation of a power key for instructing power-off is performed from 38 (step S103).
電源キーの操作がないと判断すると、上記ステップS101に戻り、以後上記ステップS101〜S103を繰返し実行する過程で、画像信号の入力があればそれを随時投影レンズ部12より投影しながら、「AFK」キーと電源キーの操作を待機する。
If it is determined that there is no operation of the power key, the process returns to step S101. Thereafter, in the process of repeatedly executing steps S101 to S103, if there is an input of an image signal, it is projected from the
しかして、投影動作途中で「AFK」キーが操作された場合、ステップS102において操作部38からのキー操作信号でこれを判断すると、それまでの画像信号に対応したマイクロミラー素子26の駆動を一時的に停止し、マイクロミラー素子26を構成するすべての微小ミラー26a,26a,‥‥を揃ってオフ状態となるように設定する(ステップS105)。
Therefore, when the “AFK” key is operated during the projection operation, when this is determined by the key operation signal from the
当然ながらこの時点で光源ランプ28からの光はすべて投影レンズ部12から外れる方向に反射され、投影レンズ部12からは一切の光が出射されない。
Of course, at this time, all the light from the
このマイクロミラー素子26の全面オフ状態で、投影光処理部34により上記レーザ発光部32A〜32C中の1つ、例えばレーザ発光部32Aを用いて短時間レーザ光をAM変調して発光駆動するとともに、発射されたレーザ光が微小ミラー26a,26a,‥‥のいずれかで反射された投影レンズ部12内を通り、投影対象のスクリーンで反射して上記レーザ受光部13で受光された際の発光光と受光光との位相差から、その時間差を算出する。
When the entire surface of the
図4(B)は、マイクロミラー素子26の微小ミラー26a,26a,‥‥がオフ状態で、レーザ発光部32A〜32Cのいずれか1つがレーザ光を発し、そのレーザ光が微小ミラー26a,26a,‥‥の1つで反射されて投影レンズ部12内に導入され、同投影レンズ部12から投影対象に向けて出射している状態を例示する。
4B shows a state in which the
レーザ発光部32A〜32Cはいずれも、発射したレーザ光をオフ状態の微小ミラー26a,26a,‥‥のうちの一部に投射することで、その反射光が投影レンズ部12内を通って投影対象に向けて出射する如く位置及び方向を固定的に設定されているものとする。
Each of the laser
加えて、レーザ発光部32A〜32Cがレーザ光を投射するマイクロミラー素子26の微小ミラー26a,26a,‥‥に対する位置は、それぞれ異なるように設定される。
図5は、レーザ発光部32A〜32Cのマイクロミラー素子26に対する配設位置及び配設方向と、投影レンズ部12を介して実際にスクリーンSCR上に照射される位置との概念を示すものである。
In addition, the positions of the
FIG. 5 shows the concept of the arrangement position and the arrangement direction of the laser
同図はスクリーンSCR上の投影レンズ部12による投影範囲のみを抽出した形で示すものであり、投影範囲内でなるべく3つのレーザ光の照射位置が離れるように、マイクロミラー素子26に対するレーザ発光部32A〜32Cの配設位置及び方向を予め設定しておく。各レーザ光の照射によるスクリーンSCRからの反射光は、いずれもレーザ受光部13で受光される。
This figure shows a form in which only the projection range by the
しかるに、上記レーザ発光部32Aでの発光とレーザ受光部13での受光との位相差から時間差、すなわち光の飛行時間を測定すると、投影光処理部34においてその時間差の半値を光速度を除数として除算することで、その商が投影レンズ部12とスクリーンSCRとの距離となる(ステップS106)。
However, when the time difference, that is, the flight time of light, is measured from the phase difference between the light emission from the laser
この場合、正確には投影レンズ部12とレーザ受光部13との配設位置が異なるので、レーザ光は投影レンズ部12からスクリーンSCR、スクリーンSCRからレーザ受光部13と3角状の軌跡を有するものであるが、上述した如く投影レンズ部12とレーザ受光部13とは本体ケーシング11の前面側で隣接して配置するものとしたので、スクリーンSCRまでの距離に比してそれらの間の距離は殆ど誤差として無視できるものとする。
In this case, since the arrangement positions of the
同様に、時分割でレーザ発光部32B,32Cでのレーザ光の発光、及び受光による測距を連続して実行する(ステップS107,S108)。
Similarly, laser light emission by the laser
こうしてレーザ発光部32A〜32Cの時分割発光駆動によりスクリーンSCR上の3点までの距離を測定すると、3次元空間内で投影レンズ部12と平面であるスクリーンとの相対的な位置関係、具体的には投影レンズ部12の光軸に対するスクリーンまでの距離及びスクリーンの傾きを演算により算出する(ステップS109)。
Thus, when the distance to three points on the screen SCR is measured by the time-division emission driving of the
その算出結果に基づき、上記3点の中心位置までの距離に基づくAF(自動合焦)処理として上記投影レンズ部12の一部を構成するフォーカスレンズをステッピングモータ31の駆動により移動させると共に、スクリーン平面の傾きの角度及び方向に対応した自動台形補正処理としてマイクロミラー素子26で表示する画像を意図的に変形させる各種設定を実行する(ステップS110)。
Based on the calculation result, the focus lens constituting a part of the
その後、それまでのマイクロミラー素子26の全面オフ状態を解除して、再び入力される画像信号に対応するように設定し(ステップS111)、以上で「AFK」キーの操作に応じた一連の処理を終了するものとして、上記ステップS103からの処理に進む。
Thereafter, the entire off state of the
また、上記ステップS103で操作部38から電源の切断を指示する電源キーの操作があったと判断した場合には、その時点で投影動作を終了するものとして、上記光源ランプ28の消灯、投影画像処理部24のリセット等を含む所定の電源オフ処理を行なった後(ステップS112)、以上でこの図3の処理を終了する。
If it is determined in step S103 that the power key for instructing power-off is operated from the
なお、上記実施形態にあっては、レーザ発光部32A〜32Cが時分割で順次マイクロミラー素子26に対してレーザ光の照射を行なう位置は、例えば矩形の投影画像の上部中央の1点と、下部両端の2点の計3点に対応する位置であるものとする。
In the above embodiment, the laser
図6は、上述したようなレーザ発光部32A〜32Cによる投影範囲内へのレーザ光の照射状態を例示する図である。同図に示すように、比較的投影画角の小さい投影範囲PR11でのレーザ光の照射位置をP11〜P13とする。
FIG. 6 is a diagram illustrating the irradiation state of the laser light into the projection range by the laser
これに対して、投影レンズ部12のズーム機能により投影画角を大きくして投影範囲PR12としたときのレーザ光の照射位置をP21〜P23とする。
各投影範囲に対するレーザ光の照射位置は相対的に同一ではあるが、当然ながら投影範囲PR12とした場合の方が各レーザ光の照射位置の間隔が絶対的に大きいため、それらの反射光をレーザ受光部13で受信して時間差から距離を算出する場合、投影画角が大きい方が距離の算出精度は向上する。
On the other hand, the irradiation positions of the laser light when the projection angle of view is increased by the zoom function of the
Although the irradiation position of the laser beam with respect to each projection range is relatively the same, of course, when the projection range is PR12, the interval between the irradiation positions of the respective laser beams is absolutely larger. When the distance is calculated from the time difference received by the
また、一般にこの種のプロジェクタ装置では、プロジェクタ装置の設置位置に対してスクリーンの投影位置の方が高く、投影光軸が水平方向より上向きとなるように設置される可能性がより高い。 In general, this type of projector apparatus is more likely to be installed such that the projection position of the screen is higher than the installation position of the projector apparatus, and the projection optical axis is higher than the horizontal direction.
そのため、本来矩形の投影範囲は、台形補正を行なわない状態では上辺がより広い逆台形状となることが多く、この点を考慮すると、同じ3点のレーザ光の照射を行なう場合でも、上述したような矩形の投影画像の上部中央の1点と下部両端の2点の計3点ではなく、上部両端の2点と下部中央の1点の逆三角形状の計3点で測距を行なった方が、上部両端の2点がより広がった状態で測距を行なう可能性が高いため、測距精度をより向上させることが可能となる。 Therefore, the original rectangular projection range often has an inverted trapezoidal shape with a wider upper side in a state where trapezoid correction is not performed. In consideration of this point, even when the same three points of laser light irradiation are performed, Ranging was performed with a total of three inverted triangles consisting of two points at the upper ends and one point at the lower center, instead of a total of three points at the upper center and two points at the lower ends of the rectangular projection image. However, it is more likely that the distance measurement is performed in a state where the two points at both ends of the upper part are further spread, and therefore the distance measurement accuracy can be further improved.
さらに、上述したように1つの投影範囲内で計3点の測距を行なうのではなく、投影レンズ部12がズーム機能を有していることを利用して、ズーム機能により投影画角を可変しながら合計で3点以上の照射位置までの距離を測定し、投影対象のスクリーン平面までの距離と傾きとを検出することも可能である。
Further, as described above, the projection angle of view can be varied by the zoom function by utilizing the fact that the
図7は、そのような他の動作例を示すものである。ここでは、まず比較的投影画角の小さい投影範囲PR21の上部両端の2点P31,P32でレーザ光の照射を行なって当該位置の測距を行なう。その後、投影レンズ部12でのズーム機能により投影画角を大きくした投影範囲PR22の上部両端の2点P41,P42でレーザ光の照射を行なって当該位置の測距を行なう。
FIG. 7 shows another example of such an operation. In this case, first, laser light is irradiated at two points P31 and P32 at both upper ends of the projection range PR21 having a relatively small projection angle of view to measure the distance at that position. Thereafter, the laser beam is irradiated at two points P41 and P42 at both upper ends of the projection range PR22 in which the projection angle of view is increased by the zoom function of the
こうして得た点位置P31,P32,P41,P42の計4点の距離値により、投影対象となるスクリーン平面までの距離と傾きとを検出することが可能となる。 It is possible to detect the distance to the screen plane to be projected and the inclination based on the distance values of the total four points of the point positions P31, P32, P41, and P42 thus obtained.
このように、投影レンズ部12がズーム機能を有していることを利用して、一投影範囲あたりで測距する点位置の数を減らすことができ、結果としてレーザ発光部の構成をより簡略化することができる。
原理的には、レーザ発光部が1系統のみで構成され、1つの投影範囲に対してただ1点の照射位置のみ測距可能であるとしても、投影レンズ部12のズーム機能により投影範囲をその後に2回変更して計3回、異なる3点の照射測距を行なえば、投影対象であるスクリーンまでの距離のみならず、投影光軸に対する相対的な傾きの角度と方向とを検出することができる。
In this way, by utilizing the fact that the
In principle, even if the laser light emitting unit is composed of only one system and only one irradiation position can be measured with respect to one projection range, the projection range is subsequently reduced by the zoom function of the
さらに動作も簡略化して、1回の投影画角の変更で計2点までの照射による測距を行なうだけでも、当該2点を結ぶ直線方向に沿った傾きの方向と大きさは検出することができる。 Furthermore, the operation is simplified, and the direction and magnitude of the inclination along the straight line connecting the two points can be detected even by performing distance measurement by irradiating up to a total of two points by changing the projection angle of view once. Can do.
以上詳記した如く本実施形態によれば、マイクロミラー素子26を構成する微小ミラー26a,26a,‥‥がオフとなる状態で投影レンズ部12方向にレーザ光を反射するようにレーザ発光部32A〜32Cを配設し、投影レンズ部12を介して投影範囲内の測距を行なうものとしたので、装置の小型化に寄与し、より簡易な構成で高い精度の測距を実行することが可能となる。
As described above in detail, according to the present embodiment, the laser
加えて、本実施形態では、複数の発光部から構成されるレーザ発光部32A〜32Cを備え、これらを用いて1つの投影範囲内で複数の点位置までの距離を測定可能としたため、投影対象となるスクリーンまでの距離のみならず、投影光軸に対するスクリーン平面の傾きの方向と大きさとを検出することができ、投影内容に反映して高い画質の投影を実現できる。
In addition, in the present embodiment, the laser
また、上述した如く投影レンズ部12がズーム機能を有するものとし、複数の投影画角でそれぞれ発光部により発光させることで、結果として投影対象の複数位置までの各距離を測定することにより、発光部の構成をより簡略化しながらも、投影光軸に対する投影対象のスクリーンの傾きを検出することが可能となる。
Further, as described above, the
なお、上記実施形態では発光部の構成として、レーザ光を発振するレーザ発振部と発振されたレーザ光を平行光に変換するコリメータレンズとを有するものを用いた。 In the above embodiment, the configuration of the light emitting unit is a unit having a laser oscillation unit that oscillates laser light and a collimator lens that converts the oscillated laser light into parallel light.
これにより、高輝度LED等を発光部に用いる場合に比べて、エネルギー密度の高いレーザ光が略平行光の状態で投影対象に照射されるので、その反射光を受信する受光部での検出をより確実にし、安定した測距動作を実現できる。 As a result, compared with the case where a high-intensity LED or the like is used for the light emitting unit, laser light having a high energy density is irradiated onto the projection target in a substantially parallel light state. More reliable and stable ranging operation can be realized.
なお、上記実施形態では、測距動作時にマイクロミラー素子26を構成する全微小ミラー26a,26a,‥‥を一時的にオフ動作させるものとした。これにより、レーザ発光部32A〜32Cによる微小ミラー26a,26a,‥‥に対する照射位置をそれほど精密に設定せずとも確実に測距を行なうことが可能となる。
In the above embodiment, all the
反対に、レーザ発光部32A〜32Cによる微小ミラー26a,26a,‥‥に対する照射位置を精密に設定するものとし、通常の入力される画像信号に対応した投影動作を実行しながら、レーザ発光部32A〜32Cのレーザ光が照射される位置に該当する微小ミラー26a,26a,‥‥のみを画素単位で一時的にオフ動作させることも可能である。
On the contrary, the irradiation positions of the laser
この場合、投影画像の画質を損なうかどうかはその動作時間と投影範囲内での画素位置とにもよるが、投影動作を続行したままで投影対象までの測距動作を実行することができ、投影画像を見る者に違和感を感じさせないで測距動作を実現できる。 In this case, whether or not the image quality of the projected image is impaired depends on the operation time and the pixel position within the projection range, but the distance measurement operation to the projection target can be performed while continuing the projection operation. Ranging operation can be realized without making the viewer of the projected image feel uncomfortable.
また、上記実施形態では、レーザ受光部13は1つであって、レーザ発光部32A〜32Cを順次発光させて測距を行なったが、レーザ発光部32A〜32Cそれぞれに対応するレーザ受光部13を3つ備えていれば、レーザ発光部32A〜32Cを同時に発光させ、測距を行なうことも実現できる。
In the above embodiment, the number of the laser
さらに、上記実施形態では、光線の1つであるレーザ光線を利用してスクリーンとの距離測定を行なったが、レーザ光線に限らず、目標物に対して、所定の周波数で発信する基準信号を用いて変調された光線を照射し、戻ってくる受光した受光信号と基準信号との位相差を検出することで、目標物までの距離を測定できる光線であればよい。これは例えば、LEDなどの発光素子であっても出力光を変調して照射できれば可能である。 Furthermore, in the above embodiment, the distance to the screen is measured using a laser beam that is one of the light beams. However, the reference signal is not limited to the laser beam and is transmitted to the target at a predetermined frequency. Any light beam that can measure the distance to the target by irradiating the modulated light beam and detecting the phase difference between the received light-receiving signal and the reference signal that has returned. For example, even a light emitting element such as an LED can be used as long as the output light can be modulated and irradiated.
また、上記実施形態では、反射光が受光されるまでの時間差を計測した後に、得られた時間差の半値を光速度を除数として除算することで、投影対象までの距離を算出しているが、予め、受光した受光信号と基準信号との位相差から距離が分かるような算出テーブルを記憶しておけば、計算しなくても簡単に距離を求めることが可能である。 In the above embodiment, after measuring the time difference until the reflected light is received, the half-value of the obtained time difference is divided by the light speed as a divisor to calculate the distance to the projection target. If a calculation table in which the distance is known from the phase difference between the received light reception signal and the reference signal is stored in advance, the distance can be easily obtained without calculation.
その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件により適宜の組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。 In addition, the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the invention in the implementation stage. In addition, the functions executed in the above-described embodiments may be implemented in appropriate combination as much as possible. The above-described embodiment includes various stages, and various inventions can be extracted by an appropriate combination according to a plurality of disclosed structural requirements. For example, even if several constituent requirements are deleted from all the constituent requirements shown in the embodiment, if an effect is obtained, a configuration from which the constituent requirements are deleted can be extracted as an invention.
10…データプロジェクタ装置、11…本体ケーシング、12…投影レンズ部、13…レーザ受光部、14…Ir受光部、15…スピーカ部、16…インジケータ部、17…キー操作部、18A,18B…調整脚部、21…入出力コネクタ部、22…入出力インタフェース(I/F)、23…画像変換部、24…投影画像処理部、25…ビデオRAM、26…マイクロミラー素子、26a…微小ミラー、27…リフレクタ、28…光源ランプ、29…カラーホイール、30…ミラー、31…ステッピングモータ(M)、32A〜32C…レーザ発光部、33…モータ(M)、34…投影光処理部、35…CPU、36…メインメモリ、37…プログラムメモリ、38…操作部、39…音声処理部、SB…システムバス、SCR…スクリーン。
DESCRIPTION OF
Claims (9)
アレイ状に配列された複数の微小ミラーの上記光源からの光に対する各傾斜角度を制御して反射光により光像を形成するミラー素子を駆動し、入力される画像信号に対応した光像を光学レンズ系を介して投影対象に向けて投影する投影手段と、
上記光源とは別に設けられ、上記光学レンズ系を介して光を出射させるように配置した発光手段と、
上記光学レンズ系を介して出射された上記発光手段の発光のうち、上記投影対象から得られる反射光を受信する受光手段と、
上記発光手段での発光と上記受光手段で受信した反射光の時間差を検出することにより上記投影対象までの距離を測定する測距手段と、
上記測距手段で得た距離により上記投影手段での投影条件を制御する制御手段と
を具備したことを特徴とする投影装置。 A light source;
A mirror element that forms an optical image with reflected light is controlled by controlling the inclination angle of the light from the light source of a plurality of micromirrors arranged in an array, and an optical image corresponding to the input image signal is optically generated. Projection means for projecting toward a projection object via a lens system;
A light emitting means provided separately from the light source and arranged to emit light through the optical lens system;
Among the light emission of the light emitting means is emitted through the upper Symbol optical lens system, a light receiving means for receiving reflected light obtained from the projection target,
Ranging means for measuring the distance to the projection target by detecting the time difference between the light emitted by the light emitting means and the reflected light received by the light receiving means;
A projection apparatus comprising: control means for controlling a projection condition of the projection means based on a distance obtained by the distance measurement means.
上記測距手段は、上記発光手段での発光と上記受光手段で受信した反射光の反射光の位相差から時間差を検出することにより上記投影対象までの距離を測定する
ことを特徴とする請求項1または2記載の投影装置。 The light emitting means makes the modulated light incident,
The distance measuring means measures the distance to the projection target by detecting a time difference from the phase difference between the light emitted from the light emitting means and the reflected light received by the light receiving means. The projection apparatus according to 1 or 2.
上記測距手段は、上記発光手段の複数の発光部での発光と上記受光手段での受光の時間差を検出することにより上記投影対象の複数位置までの各距離を測定する
ことを特徴とする請求項1乃至3のいずれか一項記載の投影装置。 The light emitting means includes a plurality of light emitting portions that are incident on different mirror positions of the mirror element,
The distance measuring unit 130, claims and measuring the respective distances to the plurality of positions of the projection target by detecting a time difference between receiving at the emission and the light-receiving means in a plurality of light emitting portions of the light emitting means Item 4. The projection device according to any one of Items 1 to 3 .
上記発光手段は、上記光学レンズ系による複数の投影画角でそれぞれ発光部により発光させ、
上記測距手段は、上記光学レンズ系による複数の投影画角で上記発光手段の発光部での発光と上記受光手段での受光の時間差を検出することにより上記投影対象の複数位置までの各距離を測定する
ことを特徴とする請求項1乃至4のいずれか一項記載の投影装置。 The optical lens system of the projection means has a zoom function for varying the projection angle of view,
The light emitting means causes each light emitting unit to emit light at a plurality of projection angles of view by the optical lens system,
The distance measuring means detects distances between light emitted from the light emitting unit of the light emitting means and light received by the light receiving means at a plurality of projection angles of view by the optical lens system, thereby detecting each distance to the plurality of positions of the projection target. The projection apparatus according to any one of claims 1 to 4, wherein the projection device is measured.
上記光源とは別に設けられ、上記光学レンズ系を介して光を出射させるように配置した発光部を駆動する発光工程と、
上記光学レンズ系を介して出射された上記発光手段の発光のうち、上記投影対象から得られる反射光を受信する受光工程と、
上記発光工程での発光と上記受光工程で受信した反射光の時間差を検出することにより上記投影対象までの距離を測定する測距工程と、
上記測距工程で得た距離により上記投影部での投影条件を制御する制御工程と
を有したことを特徴とする投影制御方法。 Light corresponding to an input image signal by driving a mirror element that forms an optical image by reflected light by controlling each inclination angle with respect to light from the light source of a light source and a plurality of micromirrors arranged in an array A control method in a projection apparatus comprising a projection unit that projects an image toward a projection target via an optical lens system,
A light emitting step that is provided separately from the light source and drives a light emitting unit arranged to emit light through the optical lens system;
Among the light emission of the light emitting means is emitted through the upper Symbol optical lens system, a light receiving step of receiving the reflected light obtained from the projection target,
A distance measuring step of measuring a distance to the projection target by detecting a time difference between the light emission in the light emitting step and the reflected light received in the light receiving step;
And a control step of controlling a projection condition in the projection unit based on the distance obtained in the distance measuring step.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008025526A JP5125561B2 (en) | 2008-02-05 | 2008-02-05 | Projection apparatus and projection control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008025526A JP5125561B2 (en) | 2008-02-05 | 2008-02-05 | Projection apparatus and projection control method |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2009186678A JP2009186678A (en) | 2009-08-20 |
JP2009186678A5 JP2009186678A5 (en) | 2011-03-10 |
JP5125561B2 true JP5125561B2 (en) | 2013-01-23 |
Family
ID=41069996
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008025526A Expired - Fee Related JP5125561B2 (en) | 2008-02-05 | 2008-02-05 | Projection apparatus and projection control method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5125561B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011046035A1 (en) * | 2009-10-15 | 2011-04-21 | 日本電気株式会社 | Image projection device, image protection method, distance measuring device and distance measuring method |
KR101601810B1 (en) * | 2014-04-08 | 2016-03-09 | 에스케이텔레콤 주식회사 | Method for calibrating image distortion and apparatus thereof |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000010196A (en) * | 1998-06-23 | 2000-01-14 | Toshiba Corp | Projection image display |
JP4535714B2 (en) * | 2003-11-19 | 2010-09-01 | Necディスプレイソリューションズ株式会社 | projector |
JP2007003355A (en) * | 2005-06-23 | 2007-01-11 | Shinku Rei:Kk | Instrument for measuring propagation time of pulse light, and application device such as virtual mouse |
US7494230B2 (en) * | 2005-06-23 | 2009-02-24 | Hewlett-Packard Development Company, Lp | Reflecting non-visible light off one or more mirrors |
JP2007324643A (en) * | 2006-05-30 | 2007-12-13 | Matsushita Electric Ind Co Ltd | Image projection apparatus, image projection screen, and image display system |
-
2008
- 2008-02-05 JP JP2008025526A patent/JP5125561B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2009186678A (en) | 2009-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7070283B2 (en) | Projection apparatus, projection method and recording medium recording the projection method | |
KR100785146B1 (en) | Projector apparatus, projection method, and recording medium storing projection method | |
JP7008244B2 (en) | Projection type image display device | |
JP2009063379A (en) | Distance measuring device and projector including this distance measuring device | |
JP2008233550A (en) | Projector apparatus, projection control method and program | |
JP5504781B2 (en) | projector | |
WO2013121712A2 (en) | Projector and method of controlling projector | |
JP5246467B2 (en) | Distance measuring device and projector | |
JP2014059513A (en) | Projector | |
JP5125561B2 (en) | Projection apparatus and projection control method | |
JP2013083985A (en) | Projection device, projection method, and program | |
JP2008292570A (en) | Projection type image display device | |
JP4480387B2 (en) | Projector, projector focus automatic adjustment system, projector focus automatic adjustment method | |
KR101601810B1 (en) | Method for calibrating image distortion and apparatus thereof | |
JP6197322B2 (en) | Projection device, image output device, projection method, and projection program | |
JP5055806B2 (en) | Projection apparatus, projection method, and program | |
JP5630799B2 (en) | Projection apparatus, projection method, and program | |
JP5504697B2 (en) | Projection system, projection apparatus, audio control method, and program | |
JP2007065542A (en) | Image projection device | |
JP2016061916A (en) | Projector, image projection method and program | |
JP4792790B2 (en) | Color wheel device and projection device | |
JP2009008752A (en) | Projection device, method and program | |
US12075200B2 (en) | Projecting system, projecting method, and storage medium | |
JP2006235073A (en) | Projector, projection method and program | |
JP2007264334A (en) | Projection apparatus, projection method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110119 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110119 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120626 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120627 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120824 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121002 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121015 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5125561 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151109 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |