CN101027678B - 基于单个图像的多生物统计系统及方法 - Google Patents
基于单个图像的多生物统计系统及方法 Download PDFInfo
- Publication number
- CN101027678B CN101027678B CN2005800260898A CN200580026089A CN101027678B CN 101027678 B CN101027678 B CN 101027678B CN 2005800260898 A CN2005800260898 A CN 2005800260898A CN 200580026089 A CN200580026089 A CN 200580026089A CN 101027678 B CN101027678 B CN 101027678B
- Authority
- CN
- China
- Prior art keywords
- single image
- skin
- recognition method
- face
- face recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 230000001815 facial effect Effects 0.000 claims description 76
- 238000004458 analytical method Methods 0.000 claims description 35
- 230000036548 skin texture Effects 0.000 claims description 19
- 230000008878 coupling Effects 0.000 claims description 10
- 238000010168 coupling process Methods 0.000 claims description 10
- 238000005859 coupling reaction Methods 0.000 claims description 10
- 210000001747 pupil Anatomy 0.000 claims description 8
- 239000011148 porous material Substances 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 4
- 230000037303 wrinkles Effects 0.000 claims description 4
- 238000013459 approach Methods 0.000 abstract description 3
- 239000007933 dermal patch Substances 0.000 description 11
- 230000008569 process Effects 0.000 description 8
- 238000001514 detection method Methods 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 4
- 230000004927 fusion Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 210000001331 nose Anatomy 0.000 description 3
- 238000007619 statistical method Methods 0.000 description 3
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 2
- 241000405217 Viola <butterfly> Species 0.000 description 2
- 238000001574 biopsy Methods 0.000 description 2
- 230000000875 corresponding effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000007500 overflow downdraw method Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 208000037656 Respiratory Sounds Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 210000001061 forehead Anatomy 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003703 image analysis method Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 208000016339 iris pattern Diseases 0.000 description 1
- 210000000088 lip Anatomy 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 206010037833 rales Diseases 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
- G06F18/254—Fusion techniques of classification results, e.g. of results related to same input data
- G06F18/256—Fusion techniques of classification results, e.g. of results related to same input data of results relating to different input data, e.g. multimodal recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
- G06V10/809—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of classification results, e.g. where the classifiers operate on the same input data
- G06V10/811—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of classification results, e.g. where the classifiers operate on the same input data the classifiers operating on different input data, e.g. multi-modal recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Ophthalmology & Optometry (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Collating Specific Patterns (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本发明阐述用于将面部、皮肤及虹膜识别相结合以提供一种用于辨认个体的具有空前准确度的生物统计系统的方法。此方法的一引人注目的特征在于其只需要单个描绘人脸的数字图像作为源数据。
Description
相关申请案交叉参考
本申请案主张基于2004年6月21日提出申请的第60/581,496号美国专利申请案的权利,该申请案以引用方式并入本文中。
技术领域
本发明涉及用于整合面部、皮肤及虹膜识别以提供一用于识别个体的具有空前准确度的生物统计系统的方法。此方法的一引人注目的特征在于其只需要单个描绘人脸的数字图像作为源数据。
背景技术
不同的参考文献公开了涉及通常图像处理的一些特征。例如,Takata EP102811公开了一种用于个人识别的系统和方法。所述系统和方法较佳地基于虹膜识别,并包括相机,其用于获得一呈现的个人的一呈现的图像;以及计算机装置,其将所述呈现的图像转换为呈现的图像度量。所述计算装置将所述呈现的图像度量与预定布置的多个已知个人的参考图像度量进行比较,以将所述呈现的个人识别为所述已知个人中的一者。所述呈现的图像度量与所述多个参考度量均被格式化以代表所述个人的详细身体特征,包括虹膜特征和其它身体特征。而且,所述多个参考图像度量也可被格式化以代表用户定义的特征,其包括非图像相关特征。所述预定布置的所述多个参考图像度量经排列以提供与所述呈现的图像度量之间的快速匹配。此时,所述预定布置可以基于虹膜特征、其它身体特征、以及用户定义的特征。或者,该发明的系统可以包括一转盘系统(carousel system),其提供循环的预定布置的一系列参考图像度量,所述一系列参考图像度量与多个呈现的图像度量进行并行比较。因此,所述系统和方法提供所述呈现的图像度量与所述多个参考图像度量之间的快速匹配确定,以识别所述呈现的个人。
再例如,Delean,美国专利申请号2004/0052418公开了用于概率图像分析的方法和装置。在一个实施例中,对图像进行归一化和滤波,并确定该图像随机匹配参考图像的特征的可能性。如果所述可能性小于一阈值,则系统确定所述图像和所述参考图像匹配。在一个实施例中,从两幅图像间计算得到的光流的相关性确定所述可能性。在一个实施例中,将图像划分为多个像素区域。一幅图像中的一个像素区域映射至另一图像中的一最佳匹配区域。所述像素区域的一临近区域映射至另一图像中的一最佳匹配像素区域。将所述像素区域及其临近区域之间的位置关系与所述两个最佳匹配像素区域之间的位置关系进行比较。
又例如,Hanna,美国专利号6714665公开了一种识别系统,其获取并分析一场景中的至少一个对象的图像。所述系统包括宽视场(WFOV)成像器,其用于捕捉所述场景的一图像并对所述对象进行定位;以及窄视场(NFOV)成像器,其响应于所述WFOV成像器提供的定位信息,并用于捕捉所述对象的一图像,所述对象的所述图像具有比所述WFOV成像器捕捉的图像更高的分辨率。在一个实施例中公开了一种系统,其获取并分析一图像中的人或动物的眼睛的虹膜的图像,而基本不涉及或完全不涉及所述人或动物。该专利也公开了一种方法,其用于获取并分析一场景中的至少一个对象的图像。所述方法包括捕捉所述对象的一宽视场图像以对所述场景中的所述对象进行定位;以及使用一窄视场成像器,其响应于所述捕捉步骤中提供的定位信息,以捕捉所述对象的一更高分辨率的图像。
再例如,Wiskott等人的论文“Face Recognition by Elastic Bunch Graph Matching”公开了一种用于从一为每人包含一图像的大型数据库的多个单个图像中识别人的面部的系统。其中基于Gabor子波变换而用带有标签的图表示面部,并通过弹性图匹配过程萃取新的面部图像图且可通过简单的相似性功能比较所述新的面部图像图。该系统在三个方面不同于现有的系统:将相位信息用于精确的结点定位;将对象适应的图用于处理深度上的大旋转;基于一数据结构(束图)进行图像图萃取,所述数据结构构建自一小组样本图像图。
发明内容
本发明可实施为一种面部识别方法及相关设备的形式,其包括选择一面部的单个图像、对所述单个图像中的面部特征进行定位、将在所述单个图像中所定位的面部特征与一参考图像的面部特征相比较、将所述单个图像中的虹膜特征与所述参考图像中的虹膜特性相比较、并根据所述面部特征比较及所述虹膜特征比较来计算所述单个图像与所述参考图像之间的一相似性得分。
在本发明的更详细特征中,所述单个图像可具有一至少约为600像素的眼距分辨率,并可具有至少约5兆像素。可通过将所述单个图像中所述面部的皮肤特性与一参考图像中一面部的皮肤特性相比较来实施一皮肤纹理分析,且所述相似性得分可进一步基于所述皮肤纹理分析。所述皮肤纹理分析可包括:对面部中适于进行皮肤纹理分析的皮肤区域进行定位;对所定位的皮肤区域进行扭曲、对齐及规范化;并从所定位的皮肤区域中提取皮肤特性。所述皮肤特性可由毛孔、皱纹及痣构成。
在本发明的其他更详细特征中,所述单个图像可选自一视频,且所述面部特征是根据对所述视频中面部特征的面部特征跟踪来定位的。此外,所述面部特征还可使用弹性束图匹配来定位。或者,所述面部特征可使用Gabor子波来定位。
附图说明
附图图解说明本发明各实施例,并连同说明一起用来解释本发明原理。
图1为一流程图,其图解说明一种根据本发明使用一多生物统计方法根据单个数字图像来识别人的方法。
图2为一流程图,其图解说明一种用于皮肤纹理分析的匹配过程。
图3为一面部图像的照片,其显示一图形中位于所关心面部特征处的节点。
图4为一可经调谐以实施面部、皮肤及虹膜识别的视觉识别引擎的一方块图。
具体实施方式
本发明涉及用于整合面部、皮肤及虹膜识别以提供一用于识别个体的具有空前准确度的生物统计系统的方法。此方法的一引人注目的特征在于其只需要单个描绘人脸的数字图像作为源数据。在各种各样的操作条件下,误拒绝率可低于0.001,而误接受率为0.01,从而超过传统上较佳的指纹法的辨认准确度。本发明允许使用一种只需要被辨认个体进行最小限度配合的非侵害性生物统计来对大的数据库进行有效检索。
数字照相机正变得日益普遍及便宜。而且,用户数字照相机所使用的CCD及类似成像传感器的分辨率一直在稳定地提高。目前所具有的大部分照相机能够具有五兆或以上的像素,从而在普通打印尺寸情况下使打印质量能够与基于胶片的模拟照相机相媲美。最近,全球用户数字照相机的销售量超过了更便宜的模拟照相机。很快,廉价照相机(例如网络照相机及嵌入移动手机中的照相机)将支持如此高的分辨率。
可利用高分辨率图像的此种可用性来超越现有面部识别技术,以提高这些生物统计系统的准确度。现有技术更多地依赖整体(即基于图像的)匹配方法,或依赖从显眼的面部标志(例如鼻、眼或嘴)所提取的局部特征的匹配。一个非常成功的实例是面部识别技术,其使用弹性束图匹配对面部特征位置进行准确定位,并计算由各种比例及取向的Gabor子波系数构成的模板,从而形成一个体的独有的面部模板。参见2001年10月9日颁与的第6,301,370号美国专利“根据视频图像进行的面部识别(FACERECOGNITION FROM VIDEO IMAGES)”。
通过使用一更高分辨率图像,能够例如使用从面部上的无毛发区域所提取的皮肤小片以更详细的程度进行面部分析,或通过分析一个体虹膜中独有的图案而以一甚至更高的详细程度进行面部分析。一包含面部的图像的分辨率本身并不是用于指示捕捉所述面部的像素分辨率的可靠量度。例如,一极高分辨率图像可包含一在景物中非常远的面部,以致仅由很少的像素来表示所述面部。或者,一极低分辨率图像可包含一非常近的面部,以致所述图像中的大部分分辨率均用来表示所述面部。一更适用的分辨率量度是“眼距分辨率”,其在本文中被定义为一面部中左瞳孔与右瞳孔之间的像素分辨率。对于典型的传统面部识别技术而言,需要眼距分辨率约为25至80像素(例如40像素),而对于皮肤小片分析而言,需要眼距分辨率约为120至150像素,且对于虹膜分析而言,需要眼距分辨率约为600至650像素。
另外,重要的是图像不模糊,否则会降低有效图像分辨率。对一受检测面部的区域使用傅立叶方法便能够估计是否已真正地达到必要的“有效眼距分辨率”。最后,重要的是检查已达到有效像素深度。此可使用同样取自一所检测面部的区域的灰度值直方图来容易地实现。较佳地,所述像素深度接近至少8位。
如果在一足够窄的视角处使用一5或6兆像素照相机在一适当距离处捕捉一面部,则眼距分辨率可处于虹膜分析技术的范围内,且因此可从一个数据源中提取用于三种完全不同的生物统计方法的生物统计模板。此外,可采用用于获得超级分辨率的众所周知的方法来提高有效图像分辨率(例如使用光流及不规则采样的图像中的超级分辨率(Superresolution in images using optical flow and irregular Sampling),MarcRumol,Patrick Vandewalle,LCAV-School of Computer and Communication Sciences,Ecole Polytechnique Fédérale de L ausanne)。
将不同的生物统计方法相组合可提高验证准确度,并且还提高生物统计系统的总体可用性。成功的实例是将声音与面部、及指纹与面部相融合。这些方法所具有的共同之处是其需要不同的传感装置。本发明方法能够将上述生物统计方法、面部、皮肤纹理分析及虹膜识别组合于一个单传感器、基于图像的多生物统计系统中。
参照图1阐述单图像多生物统计分析(SIMBA)过程10。选择一面部12的输入图像来进行分析(步骤14)。在已对所述面部及其面部特征进行定位(步骤16及18)后,在三个分别分析面部、皮肤纹理及虹膜特征的半正交通道20、22及24中对所述面部的不同部分进行处理(步骤26)。将所定位的面部特征与来自一数据库27中的面部图像的对应值进行比较。一融合模块28将这三个通道的结果结合成单个相似性得分。根据所述相似性得分(步骤30),识别出所述图像中的人(步骤32)或在所述数据库中未发现所述人(步骤34)。
面部检测(步骤16)可通过几种现有面部查找程序中的任何一种来实施。一较佳方法使用一通过Adaboost算法加以训练的决策树并使用Gabor子波作为特征。此方法对一代表性图像集合达到99.7%的面部检测率且误警报率为0.001。其性能超过例如由Viola及Jones于2001年12月在“使用简单特征的增强级联进行快速对象检测,IEEE计算机视觉及图案识别会议会刊(Rapid Object Detection using a Boosted Cascade ofSimple Features,Proc.of IEEE Conf.on Computer Vision and Pattern Recognition)”中、及由Rowley等人在1998年提出的方法。
面部特征检测(步骤18)可根据弹性图匹配技术使用一高速面部特征查找及跟踪模块来实施。参见名称为“对化身动画的基于子波的面部运动捕捉(WAVELET-BASED FACIAL MOTION CAPTURE FOR AVATAR ANIMATION)”的第6,272,231号美国专利。较佳地,对面部中的五十五(55)个特征位置进行实时检测及跟踪。此模块在准确度及速度方面是独一无二的。面部特征跟踪使SIMBA技术大大增强,因为其允许对一视频序列的每一帧中的面部特征(包括瞳孔)进行精确定位。对面部特征进行精确定位是对面部特征、皮肤小片及虹膜细部进行比较的先决条件。
面部特征比较(步骤20)可使用市场上的几种引擎中的一种、尤其是可从位于加利福尼亚州Santa Monica的Neven Vision公司购得的面部识别引擎来实施。一较佳的选择同样阐述于名称为“根据视频图像进行的面部识别(FACE RECOGNITIONFROM VIDEO IMAGES)的第6,301,370号美国专利中,该专利以引用方式并入本文中。
皮肤纹理分析(步骤22)可根据对个体皮肤特性(例如毛孔、皱纹、痣等等)的分析。适当的区域为面部中光滑、无毛发的区域,例如(举例而言)面颊、下巴、鼻子或前额。根据如发型或性别(面部毛发)之类的因素而定,可使用哪些区域可因人而异。
参照图2,皮肤纹理分析的匹配过程210可划分成如下处理步骤:
1.检测面部(步骤212);
2.检测面部特征(步骤214);
3.确定面部中适于皮肤纹理分析的皮肤区域的位置(步骤216);
4.对皮肤小片进行扭曲、对齐及规范化(步骤218);
5.提取用于描述局部皮肤区域的特征(步骤220);
6.将这些特征与参考图像相比较,并计算相似性得分(步骤222)。
近来由Bruno Delean所揭示的一种解决方案将眼下面的区域划分成矩形方块并使用简单的方块匹配算法及对相邻方块相对位置的直观推断式评价来计算所述相似性得分。(Bruno Delean,“用于概率性图像分析方法及设备(Method and apparatus forprobabilistic image analysis)”,第2004/0052418号美国专利申请公开案)。前面所阐述的各方法采用使用Gabor子波的基于弹性图匹配的更复杂方法(Buhmann等人,1990年,及Wiskott等人,1997年)。
由于当前的面部识别及面部检测技术(例如第6,301,370号美国专利)依赖对显眼的面部特征的位置进行准确地精确定位,因此其非常适用于基于皮肤纹理分析的生物统计辨认。一个选项是使用弹性图匹配技术。所述弹性图匹配技术将面部表示成一其节点对应于如眼角或鼻尖等面部标志带标记的图,并能够以高精度将此图布置在所表示图像中的面部上。根据这些所找到的标志,可对面部中用于皮肤纹理分析的区域进行精确定位。此种面部识别技术能够判定面部的局部特性,例如是否存在面部毛发或眼镜。使用此信息,可导出适用于皮肤分析的区域的更可靠的个体化面部映像图。
参照图3,可使一弹性图的节点适合于高分辨率图像。在无毛发区域及虹膜区域上布置比通常所使用的更高的节点密度。在每一节点处所提取的特征向量的参数适于最佳地说明预期的信号内容。图3中的节点位置为概念性的。虹膜(具体而言)上的实际节点密度可更高。
此外,由于可导出面部特征的位置及表情,因此可在分析一所提取的皮肤小片前对其进行规范化或解扭曲。此一情形的一实例将是捕捉到要辨认的用户面部上带有的夸张表情(例如狂笑或皱眉)、从而使眼睛下面其中捕捉所述皮肤小片的区域变形。在一现场捕捉情形中,如果检测到一夸张的表情,则可为用户提供反馈以作出一更中性的或不太夸张的表情。另一其中通过使用精确的标志查找来大大增强更高分辨率分析的情形是其中面部处于一非正面位置的情况。一旦检测至一非正面面部,便可通过在面部识别商家测试(face recognition vendor test)2002(FRVT 2002)的报告中所阐述及提及的方法将所述面部图像扭至正面。
在已辨认出要用于匹配的皮肤区域后,一种用于比较皮肤小片的方式是将所辨认出的区域表示成一其中各节点对应于局部皮肤小片的带标记子图。节点的密度经选择以实现准确度与处理速度之间的最佳平衡。在这些节点的位置处,提取一描述所述皮肤小片的适合的特征向量(例如Gabor射流,像素小片)。在对每一如此选择的皮肤小片进行的匹配步骤期间,将所述特征向量分别与参考图像的面部区域进行匹配并辨认出最相似的皮肤小片。结果得到原始图像中的图的一或多或少出现失真的形式。根据原始图与匹配图之间的相似性及失真,通过纳含局部几何约束来计算一相似性得分。参见第6,301,370号美国专利。
就虹膜分析而言,准确特征查找可对瞳孔的位置且因此对周围的虹膜进行精确定位。而且,可检测到眼的状态(例如睁开或闭上)。自然地,对于虹膜分析而言,眼睛需要睁开以露出虹膜。上文所述的所有皮肤分析技术均适用于分析虹膜。
可对虹膜分析使用现有的虹膜扫描及识别技术(步骤24)。对现有技术的改进可在于,面部特征检测及跟踪与面部、皮肤及虹膜识别的紧密结合将实现移动装置所需的完整识别引擎的一种超资源有效且快速的实施方案。重要的是应注意,分析虹膜图案在许多方面不如分析易发生相当多变化的面部复杂。
参照图4,一视觉识别引擎可经调谐以实施面部、皮肤及虹膜识别。视觉识别的宏算法原理为:从关键兴趣点提取特征向量;对对应的特征向量进行比较;导出一相似性量度并将其与一阈值相比较以判定所述对象是否完全相同。在例如面部检测等类别识别情况下,采用一神经网络、增强或一支持向量机器从具体示例中引出结论。然而,通过进一步观察会注意到,采用专用子模块来实施某些步骤会优于该文献中所述的现有技术。更具体而言:
1)兴趣算子:使用Gabor子波的相位一致性及相位对称性会优于该文献中所提到的许多其他兴趣点算子,例如Affine Harris、DOG及Affine Laplace。
2)特征向量:本发明广泛利用Gabor子波作为一用于描述局部图像结构的强大通用数据格式。在适当时,借助使人想起由Viola及Jones所开创方法的已知特征来扩充Gabor子波。最后,一由从显示一般性表面小片的变化的大量图像数据集合中提取的参数化特征向量集合构成的字典“Locons”的应用颇具前景。此方法具有显著促进获得更好的姿势及照明不变性的潜力。
3)匹配:该文献中所阐述的几乎所有匹配例程只考虑特征向量之间的相似性。可通过下述方式来获得改进:明确地估计位移矢量以及描述环境条件(例如视点)及照明条件的参数集合,此可允许更快地获知新的对象并在各种各样的条件下对其进行识别。
当对在各个图像上所见到的个体是否为同一个体进行判定时,需要将来自面部标志图与虹膜子图的相似性得分相结合。该文献中阐述有多种关于如何实现此种结合的方法。可参考其中教示如何将不同的面部识别方法相结合的面部识别商家测试(FaceRecognition Vendor Test)2002的扩充报告NISTIR 2004以及参考其中显示如何最佳地将面部与虹膜识别相结合的下述文章:Yun HongWang、Tieniu Tanl,及Anil K.Jain所著的“将面部及虹膜生物统计相组合地进行身份验证(Combining Face and IrisBiometrics for Identity Verification)”,AVBPA 2003年。
关于各种融合规则的经验已发现,在将虹膜、皮肤及面部特征分析相结合的情况下,可通过一传感器融合方法来达到最佳结果,所述传感器融合方法首先单独地将每一识别通道的匹配得分均等至一[0,1]间隔,然后通过形成平均值来使其融合。
在图像分辨率为4至5兆像素、且特别是分辨率为6兆像素及以上的情况下,面部、皮肤小片及虹膜分析的组合可分阶段对同一源图像进行处理,以显著提高面部识别系统的准确度及可靠性。一通过初始面部特征查找步骤实现的引人注目的特征在于:可根据对可在眼睛之间得到多少像素分辨率的初始判定而定,自动接通或关断需要更高分辨率的用于精细皮肤及虹膜分析的模块。
SIMBA中的融合生物统计的另一优点在于:其极佳地处理所谓“活检查”问题。实施活检查会解决如何判定当前生物统计是源自于一活的个体还是源自于一人工制品(例如照片)的问题。面部特征跟踪可用于分析内部面部运动且因此可防止一冒名顶替者使用静止图像。以一类似方式,虹膜分析可测量瞳孔的变化的收缩或扩张(最终甚至通过将光照射于瞳孔上来激励)以判定正在查看一活的个体。最后,准确的标志查找可用于判定所检测的面部特征是否全部处于一平面中。此进一步允许舍弃冒名顶替者可能显示给生物统计系统的视频图像。
所述SIMBA方法避免了假定可容许要求用户依序曝露至其中许多是侵害性或难以使用的不同生物统计传感器的问题。一有效的多生物统计系统需便于使用。虹膜及指纹识别的现有用途显示易于使用形尚未成为设计中的高优先性因素。与此相反,所述SIMBA方法仅依赖单个2D图像传感器并仅在内部采用多生物统计,因为半正交识别通道利用包含于图像的各个方面中的生物统计信息。重要的是应注意使用一种鲁棒的技术进行实时面部特征跟踪。
Claims (16)
1.一种在其中选择一面部的一单个图像的面部识别方法,其特征在于所述方法包括:
对所述单个图像中的面部特征进行定位;
确定所述单个图像是否代表一活的个体的一实时图像;
响应于确定所述单个图像代表一活的个体的一实时图像,
将在所述单个图像中定位的面部特征与一参考图像的面部特征相比较;
将所述单个图像中的虹膜特征与所述参考图像中的虹膜特性相比较;及
根据所述面部特征比较及所述虹膜特征比较来计算所述单个图像与所述参考图像之间的一相似性得分。
2.如权利要求1所述的面部识别方法,其中所述单个图像具有一至少约600像素的眼距分辨率。
3.如权利要求1所述的面部识别方法,其中所述单个图像包括至少约5兆像素。
4.如权利要求1所述的面部识别方法,其进一步包括通过将所述单个图像中所述面部的皮肤特性与一参考图像中一面部的皮肤特性相比较来实施一皮肤纹理分析,其中所述相似性得分进一步基于所述皮肤纹理分析。
5.如权利要求4所述的面部识别方法,其中所述皮肤纹理分析包括:
对所述面部中适用于皮肤纹理分析的皮肤区域进行定位;
对所述所定位的皮肤区域进行扭曲、对齐及规范化;及
从所述所定位的皮肤区域提取皮肤特性。
6.如权利要求5所述的面部识别方法,其中所述皮肤特性可由毛孔、皱纹及痣组成。
7.如权利要求1所述的面部识别方法,其中使用弹性束图匹配对所述面部特征进行定位。
8.如权利要求1所述的面部识别方法,其中使用Gabor子波对所述面部特征进行定位。
9.如权利要求1所述的面部识别方法,其中所述确定所述单个图像是否代表一活的个体的一实时图像包括测量所述第一组面部特征中的一眼睛的一瞳孔的直径与所述第二组面部特征中的一眼睛的一瞳孔的直径之间的变化。
10.如权利要求1所述的面部识别方法,其中所述确定所述单个图像是否代表一活的个体的一实时图像包括分析所述第一组面部特征与所述第二组面部特征之间的内部面部运动。
11.一种面部识别方法,其中一人的一面部的一单个图像被实时的选择,所述方法包括:
对所述单个图像中的面部特征进行定位;
至少部分响应于所述定位的面部特征的位置而提供反馈,所述反馈要求该人改变其表情;
将在所述单个图像中定位的面部特征与一参考图像的面部特征相比较;
将所述单个图像中的虹膜特征与所述参考图像中的虹膜特性相比较;及
根据所述面部特征比较及所述虹膜特征比较来计算所述单个图像与所述参考图像之间的一相似性得分。
12.如权利要求11所述的面部识别方法,其中所述单个图像具有一至少约600像素的眼距分辨率。
13.如权利要求11所述的面部识别方法,其中所述单个图像包括至少约5兆像素。
14.如权利要求11所述的面部识别方法,其进一步包括用于通过将所述单个图像中所述面部的皮肤特性与一参考图像中一面部的皮肤特性相比较来实施一皮肤纹理分析的构件,其中所述相似性得分进一步基于所述皮肤纹理分析。
15.如权利要求14所述的面部识别方法,其中所述实施一皮肤纹理分析的步骤包括:
对所述面部中适用于皮肤纹理分析的皮肤区域进行定位;
对所述所定位的皮肤区域进行扭曲、对齐及规范化;及
从所述所定位的皮肤区域提取皮肤特性。
16.如权利要求15所述的面部识别方法,其中所述皮肤特性可由毛孔、皱纹及痣组成。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US58149604P | 2004-06-21 | 2004-06-21 | |
US60/581,496 | 2004-06-21 | ||
PCT/US2005/022037 WO2006023046A1 (en) | 2004-06-21 | 2005-06-21 | Single image based multi-biometric system and method |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101027678A CN101027678A (zh) | 2007-08-29 |
CN101027678B true CN101027678B (zh) | 2011-09-21 |
Family
ID=35520844
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2005800260898A Active CN101027678B (zh) | 2004-06-21 | 2005-06-21 | 基于单个图像的多生物统计系统及方法 |
Country Status (12)
Country | Link |
---|---|
US (1) | US7697735B2 (zh) |
EP (1) | EP1766555B1 (zh) |
JP (1) | JP4610614B2 (zh) |
KR (1) | KR100982197B1 (zh) |
CN (1) | CN101027678B (zh) |
AT (1) | ATE476715T1 (zh) |
AU (2) | AU2005278003B8 (zh) |
BR (1) | BRPI0512354A (zh) |
CA (1) | CA2571643C (zh) |
DE (1) | DE602005022718D1 (zh) |
ES (1) | ES2348248T3 (zh) |
WO (1) | WO2006023046A1 (zh) |
Families Citing this family (156)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8989453B2 (en) | 2003-06-26 | 2015-03-24 | Fotonation Limited | Digital image processing using face detection information |
US8896725B2 (en) | 2007-06-21 | 2014-11-25 | Fotonation Limited | Image capture device with contemporaneous reference image capture mechanism |
US7565030B2 (en) | 2003-06-26 | 2009-07-21 | Fotonation Vision Limited | Detecting orientation of digital images using face detection information |
US8494286B2 (en) | 2008-02-05 | 2013-07-23 | DigitalOptics Corporation Europe Limited | Face detection in mid-shot digital images |
US8498452B2 (en) | 2003-06-26 | 2013-07-30 | DigitalOptics Corporation Europe Limited | Digital image processing using face detection information |
US8948468B2 (en) | 2003-06-26 | 2015-02-03 | Fotonation Limited | Modification of viewing parameters for digital images using face detection information |
US9129381B2 (en) * | 2003-06-26 | 2015-09-08 | Fotonation Limited | Modification of post-viewing parameters for digital images using image region or feature information |
US9692964B2 (en) | 2003-06-26 | 2017-06-27 | Fotonation Limited | Modification of post-viewing parameters for digital images using image region or feature information |
US7471846B2 (en) * | 2003-06-26 | 2008-12-30 | Fotonation Vision Limited | Perfecting the effect of flash within an image acquisition devices using face detection |
US8593542B2 (en) * | 2005-12-27 | 2013-11-26 | DigitalOptics Corporation Europe Limited | Foreground/background separation using reference images |
US7269292B2 (en) * | 2003-06-26 | 2007-09-11 | Fotonation Vision Limited | Digital image adjustable compression and resolution using face detection information |
US7620218B2 (en) * | 2006-08-11 | 2009-11-17 | Fotonation Ireland Limited | Real-time face tracking with reference images |
US8330831B2 (en) | 2003-08-05 | 2012-12-11 | DigitalOptics Corporation Europe Limited | Method of gathering visual meta data using a reference image |
US8155397B2 (en) * | 2007-09-26 | 2012-04-10 | DigitalOptics Corporation Europe Limited | Face tracking in a camera processor |
US7440593B1 (en) | 2003-06-26 | 2008-10-21 | Fotonation Vision Limited | Method of improving orientation and color balance of digital images using face detection information |
US7574016B2 (en) | 2003-06-26 | 2009-08-11 | Fotonation Vision Limited | Digital image processing using face detection information |
US8682097B2 (en) * | 2006-02-14 | 2014-03-25 | DigitalOptics Corporation Europe Limited | Digital image enhancement with reference images |
US7362368B2 (en) * | 2003-06-26 | 2008-04-22 | Fotonation Vision Limited | Perfecting the optics within a digital image acquisition device using face detection |
US7792970B2 (en) | 2005-06-17 | 2010-09-07 | Fotonation Vision Limited | Method for establishing a paired connection between media devices |
US7844076B2 (en) | 2003-06-26 | 2010-11-30 | Fotonation Vision Limited | Digital image processing using face detection and skin tone information |
JP2005346806A (ja) * | 2004-06-02 | 2005-12-15 | Funai Electric Co Ltd | Dvdレコーダおよび記録再生装置 |
EP1766555B1 (en) * | 2004-06-21 | 2010-08-04 | Google Inc. | Single image based multi-biometric system and method |
US8019801B1 (en) * | 2004-06-23 | 2011-09-13 | Mayo Foundation For Medical Education And Research | Techniques to rate the validity of multiple methods to process multi-dimensional data |
US8320641B2 (en) | 2004-10-28 | 2012-11-27 | DigitalOptics Corporation Europe Limited | Method and apparatus for red-eye detection using preview or other reference images |
US8503800B2 (en) | 2007-03-05 | 2013-08-06 | DigitalOptics Corporation Europe Limited | Illumination detection using classifier chains |
US7315631B1 (en) | 2006-08-11 | 2008-01-01 | Fotonation Vision Limited | Real-time face tracking in a digital image acquisition device |
US7765231B2 (en) | 2005-04-08 | 2010-07-27 | Rathus Spencer A | System and method for accessing electronic data via an image search engine |
US7646916B2 (en) * | 2005-04-15 | 2010-01-12 | Mississippi State University | Linear analyst |
US8369570B2 (en) * | 2005-09-28 | 2013-02-05 | Facedouble, Inc. | Method and system for tagging an image of an individual in a plurality of photos |
US7599527B2 (en) * | 2005-09-28 | 2009-10-06 | Facedouble, Inc. | Digital image search system and method |
US8311294B2 (en) | 2009-09-08 | 2012-11-13 | Facedouble, Inc. | Image classification and information retrieval over wireless digital networks and the internet |
US7450740B2 (en) | 2005-09-28 | 2008-11-11 | Facedouble, Inc. | Image classification and information retrieval over wireless digital networks and the internet |
US8600174B2 (en) | 2005-09-28 | 2013-12-03 | Facedouble, Inc. | Method and system for attaching a metatag to a digital image |
US7587070B2 (en) * | 2005-09-28 | 2009-09-08 | Facedouble, Inc. | Image classification and information retrieval over wireless digital networks and the internet |
US8326775B2 (en) * | 2005-10-26 | 2012-12-04 | Cortica Ltd. | Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof |
US9330246B2 (en) * | 2005-11-09 | 2016-05-03 | Paul J. Munyon | System and method for inhibiting access to a computer |
US8260008B2 (en) | 2005-11-11 | 2012-09-04 | Eyelock, Inc. | Methods for performing biometric recognition of a human eye and corroboration of same |
WO2007103833A1 (en) * | 2006-03-03 | 2007-09-13 | Honeywell International, Inc. | A combined face and iris recognition system |
DE602007012246D1 (de) | 2006-06-12 | 2011-03-10 | Tessera Tech Ireland Ltd | Fortschritte bei der erweiterung der aam-techniken aus grauskalen- zu farbbildern |
US20070297653A1 (en) * | 2006-06-22 | 2007-12-27 | Rudolf Maarten Bolle | Fingerprint representation using localized texture features |
US7751599B2 (en) * | 2006-08-09 | 2010-07-06 | Arcsoft, Inc. | Method for driving virtual facial expressions by automatically detecting facial expressions of a face image |
US7916897B2 (en) | 2006-08-11 | 2011-03-29 | Tessera Technologies Ireland Limited | Face tracking for controlling imaging parameters |
US7403643B2 (en) * | 2006-08-11 | 2008-07-22 | Fotonation Vision Limited | Real-time face tracking in a digital image acquisition device |
US7773779B2 (en) * | 2006-10-19 | 2010-08-10 | I.Q.S. Shalev Ltd. | Biometric systems |
JP2008118383A (ja) * | 2006-11-02 | 2008-05-22 | Matsushita Electric Ind Co Ltd | デジタルカメラ |
JP2008152530A (ja) * | 2006-12-18 | 2008-07-03 | Sony Corp | 顔認識装置及び顔認識方法、ガボア・フィルタ適用装置、並びにコンピュータ・プログラム |
US7707162B2 (en) * | 2007-01-08 | 2010-04-27 | International Business Machines Corporation | Method and apparatus for classifying multimedia artifacts using ontology selection and semantic classification |
US8055067B2 (en) | 2007-01-18 | 2011-11-08 | DigitalOptics Corporation Europe Limited | Color segmentation |
DE602008001607D1 (de) * | 2007-02-28 | 2010-08-05 | Fotonation Vision Ltd | Trennung der direktionalen beleuchtungsvariabilität in der statistischen gesichtsmodellierung auf basis von texturraumzerlegungen |
WO2008107002A1 (en) | 2007-03-05 | 2008-09-12 | Fotonation Vision Limited | Face searching and detection in a digital image acquisition device |
US8027541B2 (en) * | 2007-03-15 | 2011-09-27 | Microsoft Corporation | Image organization based on image content |
WO2008123967A1 (en) * | 2007-04-02 | 2008-10-16 | Roamware, Inc. | System and method for making a face call |
US8111879B2 (en) | 2007-04-05 | 2012-02-07 | Honeywell International Inc. | Face and iris imaging system and method |
US7916971B2 (en) * | 2007-05-24 | 2011-03-29 | Tessera Technologies Ireland Limited | Image processing method and apparatus |
US9794348B2 (en) | 2007-06-04 | 2017-10-17 | Todd R. Smith | Using voice commands from a mobile device to remotely access and control a computer |
US7844085B2 (en) * | 2007-06-07 | 2010-11-30 | Seiko Epson Corporation | Pairwise feature learning with boosting for use in face detection |
US9117119B2 (en) | 2007-09-01 | 2015-08-25 | Eyelock, Inc. | Mobile identity platform |
US8553948B2 (en) | 2007-09-01 | 2013-10-08 | Eyelock, Inc. | System and method for iris data acquisition for biometric identification |
US20090060286A1 (en) * | 2007-09-04 | 2009-03-05 | General Electric Company | Identification system and method utilizing iris imaging |
KR101347598B1 (ko) * | 2007-10-12 | 2014-01-07 | 삼성전자주식회사 | 영상 변환 방법 및 장치 |
US8558663B2 (en) | 2007-11-30 | 2013-10-15 | Bank Of America Corporation | Integration of facial recognition into cross channel authentication |
US9639740B2 (en) | 2007-12-31 | 2017-05-02 | Applied Recognition Inc. | Face detection and recognition |
US9721148B2 (en) | 2007-12-31 | 2017-08-01 | Applied Recognition Inc. | Face detection and recognition |
US8750574B2 (en) | 2007-12-31 | 2014-06-10 | Applied Recognition Inc. | Method, system, and computer program for identification and sharing of digital images with face signatures |
US8538096B2 (en) * | 2008-01-09 | 2013-09-17 | International Business Machines Corporation | Methods and apparatus for generation of cancelable fingerprint template |
US8532344B2 (en) * | 2008-01-09 | 2013-09-10 | International Business Machines Corporation | Methods and apparatus for generation of cancelable face template |
WO2009096475A1 (ja) | 2008-01-29 | 2009-08-06 | Kabushiki Kaisha Dds | ハイブリッド生体認証装置、ハイブリッド生体認証方法、ハイブリッド生体認証用コンピュータプログラムを記憶したコンピュータ読み取り可能な記憶媒体 |
US7855737B2 (en) * | 2008-03-26 | 2010-12-21 | Fotonation Ireland Limited | Method of making a digital camera image of a scene including the camera user |
US8442279B2 (en) | 2008-06-27 | 2013-05-14 | Lockheed Martin Corporation | Assessing biometric sample quality using wavelets and a boosted classifier |
US8600121B2 (en) * | 2008-07-02 | 2013-12-03 | C-True Ltd. | Face recognition system and method |
JP5547730B2 (ja) * | 2008-07-30 | 2014-07-16 | デジタルオプティックス・コーポレイション・ヨーロッパ・リミテッド | 顔検知を用いた顔及び肌の自動美化 |
GB0818089D0 (en) | 2008-10-03 | 2008-11-05 | Eastman Kodak Co | Interactive image selection method |
US9002120B2 (en) | 2008-10-03 | 2015-04-07 | Intellectual Ventures Fund 83 Llc | Interactive image selection method |
US8284267B2 (en) * | 2009-03-11 | 2012-10-09 | O2Micro Inc. | Virtual camera for sharing a physical camera |
US8538093B2 (en) * | 2009-04-20 | 2013-09-17 | Mark Kodesh | Method and apparatus for encouraging social networking through employment of facial feature comparison and matching |
US8379917B2 (en) * | 2009-10-02 | 2013-02-19 | DigitalOptics Corporation Europe Limited | Face recognition performance using additional image features |
JP2011090466A (ja) * | 2009-10-21 | 2011-05-06 | Sony Corp | 情報処理装置及び方法、並びにプログラム |
US8189964B2 (en) * | 2009-12-07 | 2012-05-29 | Google Inc. | Matching an approximately located query image against a reference image set |
US8774527B1 (en) | 2009-12-07 | 2014-07-08 | Google Inc. | Matching an approximately located query image against a reference image set using cellular base station and wireless access point information |
US8238671B1 (en) | 2009-12-07 | 2012-08-07 | Google Inc. | Scene classification for place recognition |
KR101185243B1 (ko) * | 2009-12-15 | 2012-09-21 | 삼성전자주식회사 | 얼굴 인식을 위한 복수의 얼굴 이미지를 등록하기 위한 장치 및 방법 |
US8634596B2 (en) * | 2009-12-22 | 2014-01-21 | Honeywell International Inc. | Three-dimensional multilayer skin texture recognition system and method |
CN101751559B (zh) * | 2009-12-31 | 2012-12-12 | 中国科学院计算技术研究所 | 人脸皮肤斑痣点检测及利用皮肤斑痣识别人脸的方法 |
US8655053B1 (en) | 2010-05-31 | 2014-02-18 | Andrew S Hansen | Body modeling and garment fitting using an electronic device |
US8908928B1 (en) | 2010-05-31 | 2014-12-09 | Andrew S. Hansen | Body modeling and garment fitting using an electronic device |
US9141150B1 (en) | 2010-09-15 | 2015-09-22 | Alarm.Com Incorporated | Authentication and control interface of a security system |
KR20120052636A (ko) * | 2010-11-16 | 2012-05-24 | 한국전자통신연구원 | 온톨로지 기반의 품목분류코드 추천 시스템 및 방법 |
RU2589859C2 (ru) * | 2011-02-17 | 2016-07-10 | АЙЛОК ЭлЭлСи | Эффективный способ и система для получения данных изображения сцены и изображения радужной оболочки с использованием одного датчика |
US8509525B1 (en) | 2011-04-06 | 2013-08-13 | Google Inc. | Clustering of forms from large-scale scanned-document collection |
US20120287163A1 (en) * | 2011-05-10 | 2012-11-15 | Apple Inc. | Scaling of Visual Content Based Upon User Proximity |
US9552376B2 (en) | 2011-06-09 | 2017-01-24 | MemoryWeb, LLC | Method and apparatus for managing digital files |
EP2546782B1 (en) | 2011-07-11 | 2014-06-25 | Accenture Global Services Limited | Liveness detection |
CN102266241B (zh) * | 2011-08-05 | 2013-04-17 | 上海交通大学 | 融合人脸和指纹视觉信息的协同性别识别方法 |
US8548207B2 (en) | 2011-08-15 | 2013-10-01 | Daon Holdings Limited | Method of host-directed illumination and system for conducting host-directed illumination |
US8903138B1 (en) | 2011-09-06 | 2014-12-02 | Google Inc. | Face recognition using pre-templates |
US10571715B2 (en) | 2011-11-04 | 2020-02-25 | Massachusetts Eye And Ear Infirmary | Adaptive visual assistive device |
US9082004B2 (en) | 2011-12-15 | 2015-07-14 | The Nielsen Company (Us), Llc. | Methods and apparatus to capture images |
US9202105B1 (en) | 2012-01-13 | 2015-12-01 | Amazon Technologies, Inc. | Image analysis for user authentication |
US9177130B2 (en) * | 2012-03-15 | 2015-11-03 | Google Inc. | Facial feature detection |
US20150086074A1 (en) * | 2012-03-27 | 2015-03-26 | Sony Corporation | Information processing device, information processing method, and program |
JP2013207356A (ja) | 2012-03-27 | 2013-10-07 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
KR101357581B1 (ko) * | 2012-06-21 | 2014-02-05 | 안양대학교 산학협력단 | 깊이 정보 기반 사람의 피부 영역 검출 방법 |
US8396265B1 (en) | 2012-06-26 | 2013-03-12 | Google Inc. | Facial recognition |
US20140003674A1 (en) * | 2012-06-27 | 2014-01-02 | Christopher D. Coley | Skin-Based User Recognition |
US8769557B1 (en) | 2012-12-27 | 2014-07-01 | The Nielsen Company (Us), Llc | Methods and apparatus to determine engagement levels of audience members |
US8885925B2 (en) | 2013-03-12 | 2014-11-11 | Harris Corporation | Method for 3D object identification and pose detection using phase congruency and fractal analysis |
WO2014172464A1 (en) * | 2013-04-16 | 2014-10-23 | Imageware Systems, Inc. | Real-time biometric database and template management |
JP2015018400A (ja) * | 2013-07-10 | 2015-01-29 | グローリー株式会社 | 顔照合装置、顔照合方法及び顔照合プログラム |
US9147061B1 (en) | 2013-11-22 | 2015-09-29 | Google Inc. | Multi-level authentication |
US9396177B1 (en) * | 2014-02-10 | 2016-07-19 | Jpmorgan Chase Bank, N.A. | Systems and methods for document tracking using elastic graph-based hierarchical analysis |
EP3118761B1 (en) | 2014-03-13 | 2021-05-12 | LG Electronics Inc. | Mobile terminal and method for controlling same |
US9239957B2 (en) | 2014-04-04 | 2016-01-19 | Fotonation Limited | Image processing method and apparatus |
KR101640014B1 (ko) * | 2014-07-17 | 2016-07-15 | 크루셜텍 (주) | 허위 안면 이미지 분류가 가능한 홍채 인식 장치 |
US10915618B2 (en) | 2014-08-28 | 2021-02-09 | Facetec, Inc. | Method to add remotely collected biometric images / templates to a database record of personal information |
US10698995B2 (en) | 2014-08-28 | 2020-06-30 | Facetec, Inc. | Method to verify identity using a previously collected biometric image/data |
CA3186147A1 (en) | 2014-08-28 | 2016-02-28 | Kevin Alan Tussy | Facial recognition authentication system including path parameters |
US11256792B2 (en) | 2014-08-28 | 2022-02-22 | Facetec, Inc. | Method and apparatus for creation and use of digital identification |
US12130900B2 (en) | 2014-08-28 | 2024-10-29 | Facetec, Inc. | Method and apparatus to dynamically control facial illumination |
US10803160B2 (en) | 2014-08-28 | 2020-10-13 | Facetec, Inc. | Method to verify and identify blockchain with user question data |
US10614204B2 (en) | 2014-08-28 | 2020-04-07 | Facetec, Inc. | Facial recognition authentication system including path parameters |
EP3017755A1 (en) * | 2014-11-04 | 2016-05-11 | Samsung Electronics Co., Ltd. | Electronic device, and method for analyzing face information in electronic device |
JP6572537B2 (ja) * | 2014-12-15 | 2019-09-11 | 富士通コネクテッドテクノロジーズ株式会社 | 認証装置、方法及びプログラム |
RU2596062C1 (ru) | 2015-03-20 | 2016-08-27 | Автономная Некоммерческая Образовательная Организация Высшего Профессионального Образования "Сколковский Институт Науки И Технологий" | Способ коррекции изображения глаз с использованием машинного обучения и способ машинного обучения |
JP6664163B2 (ja) * | 2015-08-05 | 2020-03-13 | キヤノン株式会社 | 画像識別方法、画像識別装置及びプログラム |
US9749317B2 (en) | 2015-08-28 | 2017-08-29 | At&T Intellectual Property I, L.P. | Nullifying biometrics |
KR102401170B1 (ko) | 2015-10-21 | 2022-05-24 | 삼성전자주식회사 | 복합 인증 장치 및 방법 |
CN105554385B (zh) * | 2015-12-18 | 2018-07-10 | 天津中科智能识别产业技术研究院有限公司 | 一种远距离多模态生物特征识别方法及其系统 |
ES2912310T3 (es) | 2016-01-05 | 2022-05-25 | Reald Spark Llc | Corrección de la mirada en imágenes multivista |
USD987653S1 (en) | 2016-04-26 | 2023-05-30 | Facetec, Inc. | Display screen or portion thereof with graphical user interface |
CN105959121B (zh) * | 2016-07-08 | 2018-12-14 | 江苏心灵鸡汤信息技术有限公司 | 一种具有身份验证功能的移动终端 |
CN106899567B (zh) * | 2016-08-24 | 2019-12-13 | 阿里巴巴集团控股有限公司 | 用户核身方法、装置及系统 |
KR102458241B1 (ko) | 2016-12-13 | 2022-10-24 | 삼성전자주식회사 | 사용자 인식 장치 및 방법 |
CN106599841A (zh) * | 2016-12-13 | 2017-04-26 | 广东工业大学 | 一种基于全脸匹配的身份验证方法及装置 |
US10430644B2 (en) | 2017-06-06 | 2019-10-01 | Global Bionic Optics Ltd. | Blended iris and facial biometric system |
CN109325988B (zh) * | 2017-07-31 | 2022-11-11 | 腾讯科技(深圳)有限公司 | 一种面部表情合成方法、装置及电子设备 |
EP3665553B1 (en) | 2017-08-08 | 2023-12-13 | RealD Spark, LLC | Adjusting a digital representation of a head region |
CN108229293A (zh) * | 2017-08-09 | 2018-06-29 | 北京市商汤科技开发有限公司 | 人脸图像处理方法、装置和电子设备 |
RU2670798C9 (ru) | 2017-11-24 | 2018-11-26 | Самсунг Электроникс Ко., Лтд. | Способ аутентификации пользователя по радужной оболочке глаз и соответствующее устройство |
US11017575B2 (en) | 2018-02-26 | 2021-05-25 | Reald Spark, Llc | Method and system for generating data to provide an animated visual representation |
JP7165909B2 (ja) | 2018-02-28 | 2022-11-07 | パナソニックIpマネジメント株式会社 | 画像合成装置、虹彩認証システム、画像合成方法及び虹彩認証方法 |
JP2019152929A (ja) | 2018-02-28 | 2019-09-12 | パナソニックIpマネジメント株式会社 | 認証装置及び認証方法 |
CN108596814A (zh) * | 2018-04-20 | 2018-09-28 | 聊城农村商业银行股份有限公司 | 基于人脸识别的社保认证系统 |
KR102177453B1 (ko) | 2018-10-16 | 2020-11-11 | 서울시립대학교 산학협력단 | 얼굴 인식 방법 및 얼굴 인식 장치 |
US10936178B2 (en) | 2019-01-07 | 2021-03-02 | MemoryWeb, LLC | Systems and methods for analyzing and organizing digital photos and videos |
US10726246B1 (en) | 2019-06-24 | 2020-07-28 | Accenture Global Solutions Limited | Automated vending machine with customer and identification authentication |
USD963407S1 (en) | 2019-06-24 | 2022-09-13 | Accenture Global Solutions Limited | Beverage dispensing machine |
US11874906B1 (en) * | 2020-01-15 | 2024-01-16 | Robert William Kocher | Skin personal identification (Skin-PIN) |
EP3869395A1 (en) | 2020-02-21 | 2021-08-25 | Accenture Global Solutions Limited | Identity and liveness verification |
US11711638B2 (en) | 2020-06-29 | 2023-07-25 | The Nielsen Company (Us), Llc | Audience monitoring systems and related methods |
CN113111808B (zh) * | 2021-04-20 | 2022-03-29 | 山东大学 | 基于机器视觉的异常行为检测方法及系统 |
CN113468961A (zh) * | 2021-05-28 | 2021-10-01 | 郑州轻工业大学 | 一种针对特定对象使用的图像信息处理方法及系统 |
US11860704B2 (en) | 2021-08-16 | 2024-01-02 | The Nielsen Company (Us), Llc | Methods and apparatus to determine user presence |
US11758223B2 (en) | 2021-12-23 | 2023-09-12 | The Nielsen Company (Us), Llc | Apparatus, systems, and methods for user presence detection for audience monitoring |
US11985411B2 (en) * | 2022-06-24 | 2024-05-14 | Dell Products L.P. | Detection of image sensor shutter state |
US12088882B2 (en) | 2022-08-26 | 2024-09-10 | The Nielsen Company (Us), Llc | Systems, apparatus, and related methods to estimate audience exposure based on engagement level |
WO2024166210A1 (ja) * | 2023-02-07 | 2024-08-15 | 日本電気株式会社 | 認証装置、認証方法及び記録媒体 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1020811A2 (en) * | 1999-01-15 | 2000-07-19 | Citicorp Development Center, Inc. | Fast matching systems and methods for personal identification |
US6714665B1 (en) * | 1994-09-02 | 2004-03-30 | Sarnoff Corporation | Fully automated iris recognition system utilizing wide and narrow fields of view |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63223974A (ja) * | 1987-03-13 | 1988-09-19 | Toshiba Corp | 画像処理装置 |
US5291560A (en) * | 1991-07-15 | 1994-03-01 | Iri Scan Incorporated | Biometric personal identification system based on iris analysis |
US5835616A (en) * | 1994-02-18 | 1998-11-10 | University Of Central Florida | Face detection using templates |
AU2186095A (en) * | 1994-03-24 | 1995-10-09 | Minnesota Mining And Manufacturing Company | Biometric, personal authentication system |
US5572596A (en) * | 1994-09-02 | 1996-11-05 | David Sarnoff Research Center, Inc. | Automated, non-invasive iris recognition system and method |
US5729619A (en) * | 1995-08-08 | 1998-03-17 | Northrop Grumman Corporation | Operator identity, intoxication and drowsiness monitoring system and method |
JP3626301B2 (ja) * | 1996-11-15 | 2005-03-09 | 沖電気工業株式会社 | 個人識別装置 |
US6301370B1 (en) * | 1998-04-13 | 2001-10-09 | Eyematic Interfaces, Inc. | Face recognition from video images |
US6272231B1 (en) | 1998-11-06 | 2001-08-07 | Eyematic Interfaces, Inc. | Wavelet-based facial motion capture for avatar animation |
US6944318B1 (en) * | 1999-01-15 | 2005-09-13 | Citicorp Development Center, Inc. | Fast matching systems and methods for personal identification |
JP2001034754A (ja) * | 1999-07-19 | 2001-02-09 | Sony Corp | 虹彩認証装置 |
US6697502B2 (en) * | 2000-12-14 | 2004-02-24 | Eastman Kodak Company | Image processing method for detecting human figures in a digital image |
JP2002251380A (ja) * | 2001-02-22 | 2002-09-06 | Omron Corp | 利用者照合システム |
US6920236B2 (en) * | 2001-03-26 | 2005-07-19 | Mikos, Ltd. | Dual band biometric identification system |
EP1428170A1 (fr) * | 2001-09-14 | 2004-06-16 | STMicroelectronics S.A. | Localisation d'un anneau |
US7369685B2 (en) * | 2002-04-05 | 2008-05-06 | Identix Corporation | Vision-based operating method and system |
US20040052418A1 (en) * | 2002-04-05 | 2004-03-18 | Bruno Delean | Method and apparatus for probabilistic image analysis |
JP4078117B2 (ja) * | 2002-05-23 | 2008-04-23 | 日本放送協会 | 被写体判別方法、被写体判別装置、及び被写体判別プログラム |
DE10245900A1 (de) | 2002-09-30 | 2004-04-08 | Neven jun., Hartmut, Prof.Dr. | Bildbasiertes Anfragesystem für Suchmaschinen für mobile Endgeräte mit eingebauter Kamera |
CN101064004B (zh) * | 2003-02-13 | 2010-05-26 | 日本电气株式会社 | 伪装检测装置及伪装检测方法 |
US7415138B2 (en) * | 2003-11-25 | 2008-08-19 | Ultra-Scan Corporation | Biometric authorization method and system |
US7565139B2 (en) | 2004-02-20 | 2009-07-21 | Google Inc. | Image-based search engine for mobile phones with camera |
US8421872B2 (en) | 2004-02-20 | 2013-04-16 | Google Inc. | Image base inquiry system for search engines for mobile telephones with integrated camera |
EP1766555B1 (en) * | 2004-06-21 | 2010-08-04 | Google Inc. | Single image based multi-biometric system and method |
US7440929B2 (en) * | 2005-01-14 | 2008-10-21 | Ultra-Scan Corporation | Multimodal authorization method, system and device |
JP4734980B2 (ja) * | 2005-03-15 | 2011-07-27 | オムロン株式会社 | 顔認証装置およびその制御方法、顔認証装置を備えた電子機器、顔認証装置制御プログラム、ならびに該プログラムを記録した記録媒体 |
US7860280B2 (en) * | 2006-06-09 | 2010-12-28 | Samsung Electronics Co., Ltd. | Facial feature detection method and device |
US20080298643A1 (en) * | 2007-05-30 | 2008-12-04 | Lawther Joel S | Composite person model from image collection |
-
2005
- 2005-06-21 EP EP05810155A patent/EP1766555B1/en active Active
- 2005-06-21 CN CN2005800260898A patent/CN101027678B/zh active Active
- 2005-06-21 WO PCT/US2005/022037 patent/WO2006023046A1/en active Application Filing
- 2005-06-21 DE DE602005022718T patent/DE602005022718D1/de active Active
- 2005-06-21 US US11/158,906 patent/US7697735B2/en active Active
- 2005-06-21 KR KR1020077001408A patent/KR100982197B1/ko active IP Right Grant
- 2005-06-21 AU AU2005278003A patent/AU2005278003B8/en active Active
- 2005-06-21 JP JP2007518230A patent/JP4610614B2/ja active Active
- 2005-06-21 CA CA2571643A patent/CA2571643C/en active Active
- 2005-06-21 AT AT05810155T patent/ATE476715T1/de not_active IP Right Cessation
- 2005-06-21 ES ES05810155T patent/ES2348248T3/es active Active
- 2005-06-21 BR BRPI0512354-2A patent/BRPI0512354A/pt active Search and Examination
-
2011
- 2011-05-17 AU AU2011202268A patent/AU2011202268B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6714665B1 (en) * | 1994-09-02 | 2004-03-30 | Sarnoff Corporation | Fully automated iris recognition system utilizing wide and narrow fields of view |
EP1020811A2 (en) * | 1999-01-15 | 2000-07-19 | Citicorp Development Center, Inc. | Fast matching systems and methods for personal identification |
Non-Patent Citations (2)
Title |
---|
WISKOTT L ET AL.Face Recognition by Elastic Bunch Graph Matching.IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE19 7.1997,19(7),775-777. |
WISKOTT L ET AL.Face Recognition by Elastic Bunch Graph Matching.IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE19 7.1997,19(7),775-777. * |
Also Published As
Publication number | Publication date |
---|---|
US7697735B2 (en) | 2010-04-13 |
AU2011202268B2 (en) | 2012-09-13 |
CA2571643A1 (en) | 2006-03-02 |
ES2348248T3 (es) | 2010-12-02 |
US20060050933A1 (en) | 2006-03-09 |
AU2005278003B8 (en) | 2011-06-23 |
KR100982197B1 (ko) | 2010-09-14 |
CN101027678A (zh) | 2007-08-29 |
AU2011202268A1 (en) | 2011-06-09 |
BRPI0512354A (pt) | 2008-05-13 |
JP4610614B2 (ja) | 2011-01-12 |
ATE476715T1 (de) | 2010-08-15 |
AU2005278003B2 (en) | 2011-02-24 |
KR20070070151A (ko) | 2007-07-03 |
WO2006023046A1 (en) | 2006-03-02 |
AU2005278003A1 (en) | 2006-03-02 |
CA2571643C (en) | 2011-02-01 |
DE602005022718D1 (de) | 2010-09-16 |
EP1766555B1 (en) | 2010-08-04 |
JP2008504606A (ja) | 2008-02-14 |
EP1766555A1 (en) | 2007-03-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101027678B (zh) | 基于单个图像的多生物统计系统及方法 | |
Burge et al. | Ear biometrics | |
KR100974293B1 (ko) | 얼굴 인식 방법 및 시스템 | |
JP5008269B2 (ja) | 情報処理装置、情報処理方法 | |
CN102902959B (zh) | 基于二代身份证存储证件照的人脸识别方法及系统 | |
KR100944247B1 (ko) | 얼굴 인식 방법 및 시스템 | |
JP5517858B2 (ja) | 画像処理装置、撮像装置、画像処理方法 | |
CN109558810B (zh) | 基于部位分割与融合目标人物识别方法 | |
CN105740781B (zh) | 一种三维人脸活体检测的方法和装置 | |
JP2000259814A (ja) | 画像処理装置及びその方法 | |
KR20050025927A (ko) | 홍채인식을 위한 동공 검출 방법 및 형상기술자 추출방법과 그를 이용한 홍채 특징 추출 장치 및 그 방법과홍채인식 시스템 및 그 방법 | |
Chang et al. | Effects on facial expression in 3D face recognition | |
KR100756047B1 (ko) | 생체 얼굴 인식 장치 및 그 방법 | |
JP2002208011A (ja) | 画像照合処理システムおよび画像照合方法 | |
KR20020092522A (ko) | 손가락 마디 지문을 이용한 개인 식별 방법 및 그 장치 | |
Dutta et al. | AI‐and IoT‐Based Face Recognition Model for Identification of Human Diseases | |
Siregar et al. | Identity recognition of people through face image using principal component analysis | |
Lee et al. | Ocular and iris recognition baseline algorithm | |
Kim et al. | Face detection by facial features with color images and face recognition using PCA | |
CN112070950A (zh) | 脱机人脸识别电梯门禁控制方法、设备及其系统 | |
MADHURI et al. | Pose-Robust Recognition of Low-Resolution Face Images | |
Mathivanan et al. | Peg Free Multi-Dimensional Palmprint Feature Extraction Using Hybrid Level Fusion Strategy | |
Ramidi | Biometrics: A Look at Face Recognition | |
Burge et al. | 13EAR BIOMETRICS | |
Kumar et al. | Face Recognition Using Active Shape Model |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder |
Address after: American California Patentee after: Google limited liability company Address before: American California Patentee before: Google Inc. |
|
CP01 | Change in the name or title of a patent holder |