JP5293950B2 - 個人認証装置及び電子機器 - Google Patents
個人認証装置及び電子機器 Download PDFInfo
- Publication number
- JP5293950B2 JP5293950B2 JP2008321400A JP2008321400A JP5293950B2 JP 5293950 B2 JP5293950 B2 JP 5293950B2 JP 2008321400 A JP2008321400 A JP 2008321400A JP 2008321400 A JP2008321400 A JP 2008321400A JP 5293950 B2 JP5293950 B2 JP 5293950B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- eye image
- shift
- shift amount
- registration
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 150000001875 compounds Chemical class 0.000 claims abstract description 169
- 238000012937 correction Methods 0.000 claims abstract description 111
- 238000003860 storage Methods 0.000 claims abstract description 108
- 238000012545 processing Methods 0.000 claims description 173
- 238000003384 imaging method Methods 0.000 claims description 95
- 238000003702 image correction Methods 0.000 claims description 84
- 238000000034 method Methods 0.000 claims description 72
- 230000003287 optical effect Effects 0.000 claims description 41
- 230000008569 process Effects 0.000 claims description 40
- 230000015556 catabolic process Effects 0.000 claims description 7
- 238000006731 degradation reaction Methods 0.000 claims description 7
- 239000010409 thin film Substances 0.000 claims description 4
- 210000003462 vein Anatomy 0.000 abstract description 77
- 210000000158 ommatidium Anatomy 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 20
- 239000000284 extract Substances 0.000 description 12
- 230000006866 deterioration Effects 0.000 description 10
- 238000004364 calculation method Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000009467 reduction Effects 0.000 description 6
- 238000011946 reduction process Methods 0.000 description 6
- 230000001105 regulatory effect Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 239000011347 resin Substances 0.000 description 4
- 229920005989 resin Polymers 0.000 description 4
- 238000000465 moulding Methods 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 238000005498 polishing Methods 0.000 description 2
- 102000001554 Hemoglobins Human genes 0.000 description 1
- 108010054147 Hemoglobins Proteins 0.000 description 1
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 238000001723 curing Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005530 etching Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000000016 photochemical curing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000007740 vapor deposition Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/12—Fingerprints or palmprints
- G06V40/13—Sensors therefor
- G06V40/1312—Sensors therefor direct reading, e.g. contactless acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Image Input (AREA)
- Collating Specific Patterns (AREA)
Description
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像から、該複眼像について前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンと登録時に前記シフト量推定手段により推定された画像シフト量とを対応付けて記憶する登録パターン記憶手段、
前記登録パターン記憶手段から読み出した画像シフト量と、認証時に前記シフト推定手段により推定された画像シフト量とから決定した倍率で、認証時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴ベクトルのサイズ補正を行うサイズ補正手段、
前記サイズ補正手段によりサイズ補正された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像から、該複眼像について前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンと、登録時に前記シフト量推定手段により推定された画像シフト量とを対応付けて記憶する登録パターン記憶手段、
前記登録パターン記憶手段から読み出した画像シフト量と、認証時に前記シフト推定手段により推定された画像シフト量とから決定した倍率で、前記登録パターン記憶手段から読み出した登録パターンのサイズ補正を行うサイズ補正手段、
前記サイズ補正手段によりサイズ補正された登録パターンと認証時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像に対し、前記シフト推定手段により推定された画像シフト量と予め定められた所定の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置の変動に対する補正として前記個眼像の画像を拡大または縮小する画像補正処理を施す画像補正手段、
前記画像補正手段により拡大または縮小した後の前記複数の個眼像から、前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時において前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時において前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像に対し、
前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記複数の個眼像から、前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時に、前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
登録時に、前記複数の個眼像から再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンを前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量とを対応付けて記憶する登録パターン記憶手段、
前記画像取得手段により取得された複眼像中の複数の個眼像に対し、認証時に前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量及び前記登録パターン記憶手段より読み出した登録時の複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記複数の個眼像から、前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により推定された画像シフト量と予め定められた所定の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置の変動に対する補正として前記個眼像の画像を拡大または縮小する画像補正処理を施す画像補正手段、
登録時に、前記画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時に前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
登録時に、前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時に前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
登録時に、前記画像取得手段により取得された複眼像中の1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを前記シフト推定手段により推定された画像シフト量と対応付けて記憶する登録パターン記憶手段、
認証時に、前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により推定された画像シフト量及び前記登録パターン記憶手段より読み出した登録時の画像シフト量を用いて算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置の変動に対する補正として前記個眼像の画像を拡大または縮小する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
登録時に、前記画像取得手段により取得された複眼像中の1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量と対応付けて記憶する登録パターン記憶手段、
前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量及び前記登録パターン記憶手段より読み出した登録時の複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置である。
(1)指等の生体のレンズ光軸方向における位置や傾きの違いの影響を補償した精度の良い個人認証が可能な個人認証装置を実現可能である。被写体距離の変動等の影響が補償されるため、生体の位置を規制するたのガイド部材等を備える必要がなく、非接触型の個人認証装置を実現可能である。また、ガイド部材等を備える必要がなく、画像取得手段は薄型化・小型化・低コスト化の容易な構成であり、また、格別複雑な演算処理を必要としないこと等から、全体として薄型・小型の個人認証装置を低コストで実現可能である。
(2)個人認証装置に登録処理手段を備えることにより、外部の装置を用いることなく静脈パターン又はその特徴量ベクトルの登録処理が可能であり、この点で個人用のノートPCや携帯電話等の電子機器に組み込む用途に好適である。
(3)生体に光を照射する光源を備えることにより、静脈パターンを撮像するための光量が不足するような環境においても、必要な光量を確保し良好な静脈パターンの撮像が可能である。生体を透過するが静脈で吸収される近赤外光を照射する光源とすることにより、より鮮明な静脈パターンの撮像が可能になる。フィルタを設けることにより、外部光等の静脈パターン撮像に不利となる波長の光の影響を排除し、より鮮明な静脈パターンの撮像が可能になる。フィルタとしてレンズアレイに形成した光学薄膜を用いることにより、独立したフィルタ部材を設ける場合に比べ画像取得手段の薄型化・小型化に有利である。
(4)レンズアレイのレンズの少なくとも撮像手段側を凸面とすることにより、高精度な組付け装置を用いなくても容易にレンズアレイと遮光部材との正確な位置合わせが可能になり、組立てコストを削減できる。
(5)レンズアレイのレンズを撮像手段側に凸の平凸レンズとするため、両面凸のレンズの場合に比べレンズアレイの製造コストを削減できる。また、物体側凸の平凸レンズに比べ、広い画角に渡って良好な結像性能を得ることができる。
(6)光学系による像劣化を補償する像劣化補償手段を備えることにより、コントラストが改善された鮮明な静脈パターンを取得可能である。特に、レンズアレイのレンズを撮像手段側に凸の平凸レンズとした場合には、画角によらずMTFがほぼ一定で高い空間周波数でもMTF曲線がゼロにならないため、ウィーナフィルタ等を利用し低コストで像劣化補償を行うことができる。
(7)単一像の再構成に利用される個眼像の個数が可変であるため、要求される認証精度が低いときには利用する個眼像の個数を少なくすることにより再構成等の処理量を減らして処理を高速化し、要求させる認証精度が高いときには利用する個眼像の個数を多くすることにより再構成される単一像の解像度を高めて認証精度を上げることができる。
(8)推定された画像シフト量が規定範囲内であるか判定することにより、指等の位置や姿勢を規制するためのガイド部材を設けることなく、撮像時の被写体距離や指等の傾きを適切な範囲に規制し、高精度な認証のために適した複眼像を利用可能となる。個眼像に生体の輪郭が含まれるように画像シフト量の規定範囲を設定することにより、画像シフト量の推定精度を向上させることができる、等々の効果を得られる。
(x、y)と算出された場合、隣接する個眼像間の横方向、縦方向の画像シフト量はそれぞれにx/(M−1)、y/(N−1)と計算することができるので、全ての個眼像についての画像シフト量を容易に求めることができる。このように、シフト推定演算を1組の個眼像間に限定し、算出した画像シフト量に基づいて残りの個眼像についての画像シフト量を求める手法を採ると、シフト推定のための演算時間を短縮することができる。
そして、各個眼像18の各画素を、個眼像について推定された画像シフト量に基づいて決定したデジタル画像領域17上の位置に再配置していくことにより、デジタル画像領域17上に静脈パターンの単一像を再構成する。
前記実施例1では、被認証者の静脈パターンに対してサイズ補正処理を行ったが、図7に示すようにサイズ補正部11を登録パターン記憶部8と認証処理部9との間に設け、登録パターン記憶部8より読み出された登録パターンに対してサイズ補正処理を行い、サイズ補正後の登録パターンと、サイズ補正をしない被認証者の静脈パターンとのパターンマッチング又は特徴ベースマッチングにより個人認証を行うようにしてもよい。登録パターンに対するサイズ補正倍率は、s’/so又はLo/L’となる。
前記実施例2では、登録パターン(特徴量ベクトル)に対してサイズ補正処理を行ったが、再構成部7と認証処理部9の間にサイズ補正部を配置し、被認証者の静脈パターンに対しサイズ補正処理を行うようにしてもよく、この場合のサイズ補正倍率は、s’/so又はLo/L’とする。
図12の(a)と(b)に物体側凸の平凸レンズの光学レイアウトとMTF特性を示す。
図11の(b)及び図12の(b)には異なった複数の画角でのMTF曲線が示されてい
る。
前記実施例1,2又はその変形例において、本実施例と同様のレンズアレイを用い、またシフト推定部の前段に劣化補償部を追加した実施形態も可能である。
以上に説明した画像補正処理では、単純な被写体距離の変化に対する補正のみであったが、指の傾きの変化に対する補正にも対応可能である。いま、認証時に図23に示すように指が傾いている場合を考える。指先では被写体距離は登録時と同じLaで、指の付け根では被写体距離がLbとする。このときに撮影される複眼像は例えば図24のようになり、指先より遠い指の付け根のほうが細く写っており、シフト量も指先に比べて付け根のほうが小さい。このような画像を、指の傾きのない図18の像と同様のものに補正するために以下の処理を行う。
R’/Rとなる。ここで、y”は次の連立方程式を解くことで得ることができる。
2 可視光カットフィルタ
3 レンズアレイ
4 遮光部材
5 撮像手段
6 画像メモリ
7 画像再構成部
8 登録パターン記憶部
9 認証処理部
10 シフト推定部
11 サイズ補正部
12 手指又は手のひら
13 静脈(被写体)
14 登録処理部
15 劣化補償部
101 制御部
102 動作選択スイッチ
103 開始スイッチ
104 認証精度指定手段
111 画像補正部
Claims (21)
- 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像から、該複眼像について前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンと登録時に前記シフト量推定手段により推定された画像シフト量とを対応付けて記憶する登録パターン記憶手段、
前記登録パターン記憶手段から読み出した画像シフト量と、認証時に前記シフト推定手段により推定された画像シフト量とから決定した倍率で、認証時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴ベクトルのサイズ補正を行うサイズ補正手段、
前記サイズ補正手段によりサイズ補正された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像から、該複眼像について前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンと、登録時に前記シフト量推定手段により推定された画像シフト量とを対応付けて記憶する登録パターン記憶手段、
前記登録パターン記憶手段から読み出した画像シフト量と、認証時に前記シフト推定手段により推定された画像シフト量とから決定した倍率で、前記登録パターン記憶手段から読み出した登録パターンのサイズ補正を行うサイズ補正手段、
前記サイズ補正手段によりサイズ補正された登録パターンと認証時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像に対し、前記シフト推定手段により推定された画像シフト量と予め定められた所定の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置の変動に対する補正として前記個眼像の画像を拡大または縮小する画像補正処理を施す画像補正手段、
前記画像補正手段により拡大または縮小した後の前記複数の個眼像から、前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時において前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時において前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の複数の個眼像に対し、前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記複数の個眼像から、前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
登録時に、前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時に前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
登録時に、前記複数の個眼像から再構成された単一像又は該単一像から抽出した特徴量ベクトルである登録パターンを前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量とを対応付けて記憶する登録パターン記憶手段、
前記画像取得手段により取得された複眼像中の複数の個眼像に対し、認証時に前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量及び前記登録パターン記憶手段より読み出した登録時の複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記複数の個眼像から、前記シフト推定手段により推定された画像シフト量を利用して単一像を再構成する画像再構成手段、
前記画像再構成手段により再構成された単一像又は該単一像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により推定された画像シフト量と予め定められた所定の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置の変動に対する補正として前記個眼像の画像を拡大または縮小する画像補正処理を施す画像補正手段、
登録時に、前記画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時に前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
登録時に、前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを記憶する登録パターン記憶手段、
認証時に前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を推定するシフト推定手段、
登録時に、前記画像取得手段により取得された複眼像中の1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを前記シフト推定手段により推定された画像シフト量と対応付けて記憶する登録パターン記憶手段、
認証時に、前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により推定された画像シフト量及び前記登録パターン記憶手段より読み出した登録時の画像シフト量を用いて算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置の変動に対する補正として前記個眼像の画像を拡大または縮小する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 2以上のレンズからなるレンズアレイと、該レンズアレイにかざされた生体の、該レンズアレイの各レンズにより結像される像の集合を複眼像として撮像する撮像手段とを含む画像取得手段、
前記画像取得手段により取得された複眼像中の個眼像間の画像シフト量を複数の画像領域について推定するシフト推定手段、
登録時に、前記画像取得手段により取得された複眼像中の1の個眼像又は該個眼像から抽出した特徴量ベクトルである登録パターンを前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量と対応付けて記憶する登録パターン記憶手段、
前記画像取得手段により取得された複眼像中の1の個眼像に対し、前記シフト推定手段により前記複数の画像領域について推定された複数の画像シフト量及び前記登録パターン記憶手段より読み出した登録時の複数の画像シフト量から算出された倍率に基づいて、前記レンズアレイのレンズ光軸方向における前記生体の位置及び傾きの変動に対する補正として前記個眼像の画像を射影変形する画像補正処理を施す画像補正手段、
前記画像補正手段により画像補正処理を施された後の前記1の個眼像又は該個眼像から抽出した特徴量ベクトルと前記登録パターン記憶手段より読み出した登録パターンとの照合を行う認証処理手段、
を有することを特徴とする個人認証装置。 - 前記画像取得手段は、前記生体に光を照射する光源を備えることを特徴とする請求項1乃至9のいずれか1項に記載の個人認証装置。
- 前記光源は近赤外光を照射するものであることを特徴とする請求項10に記載の個人認証装置。
- 前記画像取得手段は、特定の波長域の光のみを透過するフィルタを備えることを特徴とする請求項10又は11に記載の個人認証装置。
- 前記フィルタは可視光カットフィルタであることを特徴とする請求項12に記載の個人認証装置。
- 前記フィルタは前記レンズアレイに形成された光学薄膜からなることを特徴とする請求項12に記載の個人認証装置。
- 前記画像取得手段は前記レンズアレイと前記撮像手段との間に前記レンズアレイのレンズ間の光線のクロストークを防止する遮光部材を有し、前記レンズアレイの各レンズは少なくとも前記撮像手段側が凸面であり、該凸面のレンズ径と前記遮光部材の開口部の径とが一致していることを特徴とする請求項1乃至9のいずれか1項に記載の個人認証装置。
- 前記レンズアレイの各レンズが前記撮像手段側に凸の平凸レンズであることを特徴とする請求項1乃至9のいずれか1項に記載の個人認証装置。
- 前記画像取得手段により取得された複眼像に対し、光学系による像劣化を補償する劣化補償手段をさらに有することを特徴とする請求項1又は2に記載の個人認証装置。
- 画像再構成部による単一像の再構成に利用される個眼像の個数が可変であることを特徴とする請求項1乃至5のいずれか1項に記載の個人認証装置。
- 前記シフト推定手段により推定されたシフト量が規定範囲内であるか判定する手段を有し、前記画像取得手段により取得された複眼像より推定された画像シフト量が前記規定範囲内であると判定されたときのみ、該複眼像を有効な複眼像として利用することを特徴とする請求項1乃至9のいずれか1項に記載の個人認証装置。
- 複眼像より推定された画像シフト量が前記規定範囲内であるときに該複眼像中の個眼像に生体の輪郭が含まれるように前記規定範囲を設定したことを特徴とする請求項19に記載の個人認証装置。
- 請求項1乃至20のいずれか1項に記載の個人認証装置を内蔵し、生体をかざすための窓部を有し、前記窓部の内側に前記個人認証装置の画像取得手段が配置されたことを特徴とする電子機器。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008321400A JP5293950B2 (ja) | 2008-03-04 | 2008-12-17 | 個人認証装置及び電子機器 |
EP09716270.5A EP2247239A4 (en) | 2008-03-04 | 2009-03-03 | PERSONAL AUTHENTICATION DEVICE AND ELECTRONIC DEVICE |
PCT/JP2009/054368 WO2009110626A1 (en) | 2008-03-04 | 2009-03-03 | Personal authentication device and electronic device |
US12/735,927 US8611614B2 (en) | 2008-03-04 | 2009-03-03 | Personal authentication device and electronic device |
CN2009801076537A CN101959457B (zh) | 2008-03-04 | 2009-03-03 | 个人认证装置和电子装置 |
TW098106976A TWI365063B (en) | 2008-03-04 | 2009-03-04 | Personal authentication device and electronic device |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008053711 | 2008-03-04 | ||
JP2008053711 | 2008-03-04 | ||
JP2008321400A JP5293950B2 (ja) | 2008-03-04 | 2008-12-17 | 個人認証装置及び電子機器 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009238205A JP2009238205A (ja) | 2009-10-15 |
JP5293950B2 true JP5293950B2 (ja) | 2013-09-18 |
Family
ID=41056174
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008321400A Expired - Fee Related JP5293950B2 (ja) | 2008-03-04 | 2008-12-17 | 個人認証装置及び電子機器 |
Country Status (6)
Country | Link |
---|---|
US (1) | US8611614B2 (ja) |
EP (1) | EP2247239A4 (ja) |
JP (1) | JP5293950B2 (ja) |
CN (1) | CN101959457B (ja) |
TW (1) | TWI365063B (ja) |
WO (1) | WO2009110626A1 (ja) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5326792B2 (ja) * | 2009-05-14 | 2013-10-30 | ソニー株式会社 | 静脈撮像装置、位置ズレ補間方法およびプログラム |
US9320437B2 (en) | 2009-12-22 | 2016-04-26 | Genial Light Co., Ltd. | Intravital observation device |
US8922342B1 (en) * | 2010-02-15 | 2014-12-30 | Noblis, Inc. | Systems, apparatus, and methods for continuous authentication |
JP5870510B2 (ja) | 2010-09-14 | 2016-03-01 | 株式会社リコー | ステレオカメラ装置、校正方法およびプログラム |
JP5828371B2 (ja) | 2011-04-07 | 2015-12-02 | セイコーエプソン株式会社 | 画像取得装置、生体認証装置、電子機器 |
JP6071374B2 (ja) * | 2012-09-21 | 2017-02-01 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラムならびに画像処理装置を備えた撮像装置 |
US20160041311A1 (en) * | 2013-03-26 | 2016-02-11 | Konica Minolta, Inc. | Compound Eye Optical System And Imaging Device |
JP2015049551A (ja) * | 2013-08-30 | 2015-03-16 | 日立オムロンターミナルソリューションズ株式会社 | 生体認証装置 |
JP6340838B2 (ja) * | 2014-03-10 | 2018-06-13 | 富士通株式会社 | 生体認証装置、生体認証方法及びプログラム |
JP6369078B2 (ja) * | 2014-03-20 | 2018-08-08 | 富士通株式会社 | 画像補正装置、画像補正方法及び画像補正用コンピュータプログラム |
DE102014212104A1 (de) | 2014-06-24 | 2015-12-24 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und verfahren zur relativen positionierung einer multiaperturoptik mit mehreren optischen kanälen relativ zu einem bildsensor |
US9699393B2 (en) * | 2014-06-26 | 2017-07-04 | Semiconductor Components Industries, Llc | Imaging systems for infrared and visible imaging with patterned infrared cutoff filters |
JP2017022200A (ja) * | 2015-07-08 | 2017-01-26 | ソニーセミコンダクタソリューションズ株式会社 | イメージセンサ、および電子機器 |
JP6065083B2 (ja) * | 2015-10-22 | 2017-01-25 | セイコーエプソン株式会社 | 画像取得装置、生体認証装置、電子機器 |
JP6699136B2 (ja) | 2015-11-10 | 2020-05-27 | 富士通株式会社 | 画像処理装置、画像処理プログラムおよび画像処理方法 |
JP6583025B2 (ja) * | 2016-02-01 | 2019-10-02 | 富士通株式会社 | 生体情報処理装置、生体情報処理方法、生体情報処理プログラム、および距離検知装置 |
JPWO2017159443A1 (ja) * | 2016-03-16 | 2019-02-28 | 株式会社リコー | スクリーン部材及び画像表示装置 |
CN107438170B (zh) * | 2016-05-25 | 2020-01-17 | 杭州海康威视数字技术股份有限公司 | 一种图像透雾方法及实现图像透雾的图像采集设备 |
JP2019525290A (ja) * | 2016-06-09 | 2019-09-05 | インサイト システムズ | 生物学的特性を感知するための統合された発光ディスプレイおよびセンサ |
CN107590425A (zh) * | 2016-07-08 | 2018-01-16 | 北京日立北工大信息系統有限公司 | 静脉认证装置及其静脉认证方法 |
US11883183B2 (en) * | 2016-10-07 | 2024-01-30 | Panasonic Intellectual Property Management Co., Ltd. | Cognitive function evaluation device, cognitive function evaluation method, and recording medium |
KR102057568B1 (ko) * | 2017-08-17 | 2019-12-19 | 주식회사 하이딥 | 지문인식센서가 결합된 디스플레이 장치 |
WO2020243936A1 (zh) * | 2019-06-05 | 2020-12-10 | 深圳市汇顶科技股份有限公司 | 屏下生物特征识别装置和电子设备 |
JP7513451B2 (ja) * | 2020-07-22 | 2024-07-09 | 株式会社日立製作所 | 生体認証装置および生体認証方法 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2780296B2 (ja) * | 1988-12-23 | 1998-07-30 | 日本電気株式会社 | 画像処理方法 |
JPH10134188A (ja) * | 1996-11-01 | 1998-05-22 | Yamatake Honeywell Co Ltd | 顔画像照合装置 |
JP3150126B2 (ja) * | 1999-02-03 | 2001-03-26 | 静岡日本電気株式会社 | 指紋入力装置 |
JP3821614B2 (ja) * | 1999-08-20 | 2006-09-13 | 独立行政法人科学技術振興機構 | 画像入力装置 |
JP4235539B2 (ja) * | 2003-12-01 | 2009-03-11 | 独立行政法人科学技術振興機構 | 画像構成装置及び画像構成方法 |
JP2005334402A (ja) * | 2004-05-28 | 2005-12-08 | Sanyo Electric Co Ltd | 認証方法および認証装置 |
JP4601380B2 (ja) | 2004-10-08 | 2010-12-22 | 富士通株式会社 | 生体認証システムの登録方法、生体認証システム及びそのプログラム |
DE602005027373D1 (de) * | 2004-10-14 | 2011-05-19 | Lightron Co Ltd | Verschlechterungsinformations-wiederherstellungsverfahren und -einrichtung |
JP2006135823A (ja) * | 2004-11-09 | 2006-05-25 | Canon Inc | 画像処理装置、撮像装置および画像処理プログラム |
CN100520822C (zh) * | 2005-01-20 | 2009-07-29 | 松下电器产业株式会社 | 透镜阵列和包括透镜阵列的图像传感器 |
JP2006236244A (ja) | 2005-02-28 | 2006-09-07 | Toshiba Corp | 顔認証装置および入退場管理装置 |
JP4640582B2 (ja) * | 2005-03-09 | 2011-03-02 | ソニー株式会社 | 照合装置、登録装置、画像補正方法及びプログラム |
JP2007000219A (ja) | 2005-06-22 | 2007-01-11 | Hitachi Ltd | 個人認証装置 |
JP4807986B2 (ja) * | 2005-09-05 | 2011-11-02 | 株式会社リコー | 画像入力装置 |
JP4704185B2 (ja) * | 2005-10-27 | 2011-06-15 | 富士通株式会社 | 生体認証システム及び生体認証方法 |
JP4673202B2 (ja) | 2005-12-06 | 2011-04-20 | 株式会社リコー | 画像入力装置 |
US9736346B2 (en) * | 2006-05-09 | 2017-08-15 | Stereo Display, Inc | Imaging system improving image resolution of the system with low resolution image sensor |
JP2007304525A (ja) * | 2006-05-15 | 2007-11-22 | Ricoh Co Ltd | 画像入力装置および電子機器および画像入力方法 |
JP5007082B2 (ja) | 2006-08-04 | 2012-08-22 | 日立マクセル株式会社 | 撮像装置および生体認証装置 |
US7728902B2 (en) * | 2006-08-04 | 2010-06-01 | Hitachi Maxell, Ltd. | Imaging device and biometrics authentication apparatus |
KR20080018052A (ko) * | 2006-08-23 | 2008-02-27 | 동부일렉트로닉스 주식회사 | 반도체 소자 및 그 제조방법 |
JP4864632B2 (ja) | 2006-10-12 | 2012-02-01 | 株式会社リコー | 画像入力装置、画像入力方法、個人認証装置及び電子機器 |
-
2008
- 2008-12-17 JP JP2008321400A patent/JP5293950B2/ja not_active Expired - Fee Related
-
2009
- 2009-03-03 US US12/735,927 patent/US8611614B2/en not_active Expired - Fee Related
- 2009-03-03 WO PCT/JP2009/054368 patent/WO2009110626A1/en active Application Filing
- 2009-03-03 EP EP09716270.5A patent/EP2247239A4/en not_active Withdrawn
- 2009-03-03 CN CN2009801076537A patent/CN101959457B/zh not_active Expired - Fee Related
- 2009-03-04 TW TW098106976A patent/TWI365063B/zh not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
WO2009110626A1 (en) | 2009-09-11 |
TW201010672A (en) | 2010-03-16 |
CN101959457A (zh) | 2011-01-26 |
US20110001814A1 (en) | 2011-01-06 |
US8611614B2 (en) | 2013-12-17 |
TWI365063B (en) | 2012-06-01 |
EP2247239A1 (en) | 2010-11-10 |
JP2009238205A (ja) | 2009-10-15 |
EP2247239A4 (en) | 2013-06-05 |
CN101959457B (zh) | 2012-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5293950B2 (ja) | 個人認証装置及び電子機器 | |
KR101027455B1 (ko) | 화상 입력 장치, 화상 입력 방법, 개인 인증 장치 및 전자기기 | |
CN109766876B (zh) | 非接触式指纹采集装置和方法 | |
US10380421B2 (en) | Iris recognition via plenoptic imaging | |
KR102001678B1 (ko) | Dfd 이미징 시스템 및 방법 | |
US9536127B2 (en) | Apparatus and method for contactless high resolution handprint capture | |
US20150347833A1 (en) | Noncontact Biometrics with Small Footprint | |
US20080101664A1 (en) | Non-Contact Optical Means And Method For 3D Fingerprint Recognition | |
JP6369078B2 (ja) | 画像補正装置、画像補正方法及び画像補正用コンピュータプログラム | |
US20090304237A1 (en) | Biometric Authentication Apparatus | |
EP2660773A1 (en) | Biometric authentication device, biometric authentication method, and biometric authentication program | |
JP5556663B2 (ja) | 照合装置、照合方法、及びプログラム | |
JP4465619B2 (ja) | 登録装置、照合装置、画像補正方法及びプログラム | |
US20200074132A1 (en) | Contactless rolled fingerprints | |
CN106254752B (zh) | 对焦方法和装置、图像采集设备 | |
US11734948B2 (en) | Device and method for contactless fingerprint acquisition | |
JP4953292B2 (ja) | 画像入力装置、個人認証装置及び電子機器 | |
JP2016125995A (ja) | 三次元形状測定装置、三次元形状測定方法、及び、プログラム | |
JP5299632B2 (ja) | 個人認証装置、プログラム及び記録媒体 | |
JP4803676B2 (ja) | 画像入力装置及び個人認証装置 | |
CN117115870A (zh) | 手掌信息测量方法、装置、设备、介质及系统 | |
Santos-Villalobos et al. | Iris recognition via plenoptic imaging |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111019 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130318 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130515 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130528 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20130802 |
|
A072 | Dismissal of procedure [no reply to invitation to correct request for examination] |
Free format text: JAPANESE INTERMEDIATE CODE: A072 Effective date: 20131203 |
|
LAPS | Cancellation because of no payment of annual fees |