CN108875623B - 一种基于图像特征融合对比技术的人脸识别方法 - Google Patents
一种基于图像特征融合对比技术的人脸识别方法 Download PDFInfo
- Publication number
- CN108875623B CN108875623B CN201810593767.8A CN201810593767A CN108875623B CN 108875623 B CN108875623 B CN 108875623B CN 201810593767 A CN201810593767 A CN 201810593767A CN 108875623 B CN108875623 B CN 108875623B
- Authority
- CN
- China
- Prior art keywords
- image
- gray
- feature
- eye
- calculating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000005516 engineering process Methods 0.000 title claims abstract description 17
- 230000004927 fusion Effects 0.000 title claims abstract description 16
- 239000013598 vector Substances 0.000 claims abstract description 36
- 238000001914 filtration Methods 0.000 claims abstract description 11
- 230000011218 segmentation Effects 0.000 claims abstract description 9
- 238000000605 extraction Methods 0.000 claims abstract description 4
- 238000012545 processing Methods 0.000 claims abstract description 4
- 238000004458 analytical method Methods 0.000 claims abstract description 3
- 238000000513 principal component analysis Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 5
- 238000012937 correction Methods 0.000 claims description 3
- 230000001186 cumulative effect Effects 0.000 claims description 3
- 238000005315 distribution function Methods 0.000 claims description 3
- 210000004709 eyebrow Anatomy 0.000 claims description 3
- 210000003128 head Anatomy 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 238000013178 mathematical model Methods 0.000 claims description 2
- 239000011159 matrix material Substances 0.000 description 4
- 238000013507 mapping Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
- G06F18/253—Fusion techniques of extracted features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Data Mining & Analysis (AREA)
- Human Computer Interaction (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Image Analysis (AREA)
- Facsimile Image Signal Circuits (AREA)
- Image Processing (AREA)
Abstract
本发明提供了一种基于图像特征融合对比技术的人脸识别方法,包括:步骤一、利用电子设备采集实时图像样本;步骤二、计算图像样本的像素灰度值得到灰度图像,并对灰度图像进行阈值分割,然后采用直方图均衡化处理,最后采用滤波方法滤除独立噪声,得到预处理后的图像样本;步骤三、对所述图像样本进行人像分析,并进行特征提取,计算图像中人像面积,得到人像的眼睛占比,并对所述眼睛向量进行矫正;步骤四、比较目标人的原始图像与对比头像的相似度,识别出目标人,本发明通过提取脸部特征,并对重要眼部特征进行矫正,提高了图像质量,匹配准确性更高。
Description
技术领域
本发明涉及人脸识别技术领域,尤其涉及基于图像特征融合对比技术的人脸识别方法。
背景技术
人脸识别是基于人的脸部特征信息进行身份识别的一种生物识别技术发明内容,尤其是在公安部门,对于抓捕罪犯和寻找失踪人口起到了重大作用。但是目前的人脸识别技术,采集范围大,识别人群多,使得抓捕罪犯任然有困难。
发明内容
本发明提供了一种基于图像特征融合对比技术的人脸识别方法,提取脸部特征,并对重要眼部特征进行矫正,提高了图像质量,匹配准确性更高。
本发明还设计开发了一种基于图像特征融合对比技术的人脸识别方法,包括:
步骤一、利用电子设备采集实时图像样本;
步骤二、计算图像样本的像素灰度值得到灰度图像,并对灰度图像进行阈值分割,然后采用直方图均衡化处理,最后采用滤波方法滤除独立噪声,得到预处理后的图像样本;
步骤三、对所述图像样本进行人像分析,并进行特征提取,计算图像中人像面积,得到人像的眼睛占比,并对所述眼睛向量进行矫正;
步骤四、比较目标人的原始图像与对比头像的相似度,识别出目标人。
优选的是,所述图像样本为视频或图片信息。
优选的是,所述步骤二中像素灰度值的计算公式为:
其中R为图像中包含的红色分量,G为绿色分量,B为蓝色分量。
优选的是,所述步骤二中阈值分割后二值图像为:
其中,f(x,y)为原始灰度图像;g(x,y)为阈值分割后二值图像,t为灰度值,即为分割阈值。
优选的是,所述直方图均衡化过程包括:
步骤a、列出原图像和变换后图像的灰度级fk(k=0,1,2,···L-1),其中L是灰度等级总数。
步骤b、计算直方图各灰度等级的出现总数
其中,nk为原图像各灰度级的像素个数,k=0,1,2,···L-1,n为原图像的像素总个数,L是灰度等级总数,Pf(fk)表示该灰度出现的频率;
步骤c、计算累积分布函数
nk为原图像各灰度级的像素个数,k=0,1,2,···L-1;n为原图像的像素总个数;L是灰度等级总数;
步骤d、计算出直方图均衡后图像的灰度等级gi
gi=INT[(gmax-gmin)C(f)+gmin+0.5]
其中,gi直方图均衡后图像的灰度等级,i=0,1,2···,255;INT是取整运算,gmax为灰度等级最大值,gmin灰度等级最小值
步骤e、计算出输出图像的灰度等级
ni是各个灰度级的像素个数,i=0,1,2···,255,对原始图像进行直方图均衡时利用的是gi和fk的映射关系,映射后可得到直方图均衡后的图像。
优选的是,所述滤波方法采用中值滤波算法。
优选的是,所述步骤三包括:
步骤A、采用主成分分析PCA算法构建数学模型,使用K-L变换得到人脸各部分的特征集,这些特征组成坐标系,每个坐标轴就是一个特征图像,所述特征集中至少包括:眼睛、鼻子、嘴、眼距、眉毛;
步骤B、提取特征眼睛对应的面积,计算眼睛与人脸的占比;
步骤C、根据两个眼睛的面积比,综合分析特征集中其他特征,获得脸部角度,并对眼睛特征向量进行矫正。
优选的是,所述步骤C中矫正计算公式为:
优选的是,所述步骤四中原始图像与对比头像的相似度判断,包括:
计算原始图像和对比图像之间的欧式距离:
其中,Y为原始图像的特征向量集合,D为对比图像的特征向量集合,yi为原始图像对应的单个特征向量,di为对比图像对应的单个特征向量,n为特征集中人脸特征个数;
当Φ(Y,D)≤σ时认为匹配成功完成识别;
其中,σ为设定的特征阈值。
本发明的有益效果
本发明提供的一种基于图像特征融合对比技术的人脸识别方法,提取脸部特征,并对重要眼部特征进行矫正,提高了图像质量,匹配准确性更高。
附图说明
图1为本发明所述的于图像特征融合对比技术的人脸识别方法的流程图。
具体实施方式
下面结合附图对本发明做进一步的详细说明,以令本领域技术人员参照说明书文字能够据以实施。
如图1所示,本发明提供一种基于图像特征融合对比技术的人脸识别方法,按照如下步骤实施:
步骤S110:在本发明中首先采集图像,利用电子眼在特定场所所在位置的一定范围里采集图像,采集到的图像包含视频或图片信息。
步骤S120:图像预处理将采集到的原图像按照以下过程处理:
步骤S121:图像的灰度化,首先输入采集到的图像数据,得到原图像RGB三个分量的值,然后通过公式计算像素灰度值,最后通过像素灰度值得到灰度图像。
其中,R为图像中包含的红色分量,G为绿色分量,B为蓝色分量;
步骤S122:二值化,通过动态阈值法,将2.1步骤得到的灰度图像的灰度值变为只剩0和255的黑白图像。
其中,f(x,y)为原始灰度图像;g(x,y)为阈值分割后二值图像,t为灰度值,即为分割阈值
步骤S123、直方图均衡化,所述直方图均衡化过程包括:
步骤a.列出原图像和变换后图像的灰度级fk(k=0,1,2,···L-1),其中L是灰度等级总数。
步骤b.计算直方图各灰度等级的出现总数
其中,nk为原图像各灰度级的像素个数,(k=0,1,2,···L-1),n为原图像的像素总个数,L是灰度等级总数,Pf(fk)表示该灰度出现的频率;
步骤c.计算累积分布函数
nk为原图像各灰度级的像素个数,(k=0,1,2,···L-1);n为原图像的像素总个数(k=0,1,2,···L-1);L是灰度等级总数;
步骤d.计算出直方图均衡后图像的灰度等级gi
gi=INT[(gmax-gmin)C(f)+gmin+0.5]
其中,gi直方图均衡后图像的灰度等级,i=0,1,2···,255;INT是取整运算,gmax为灰度等级最大值,gmin灰度等级最小值
步骤e.计算出输出图像的灰度等级
ni是各个灰度级的像素个数,i=0,1,2···,255,对原始图像进行直方图均衡时利用的是gi和fk的映射关系,映射后可得到直方图均衡后的图像。
步骤S124、中值滤波。将步骤S123得到的图像集去除独立噪声。实现过程:首先,将模板与步骤123得到的图像进行比较,然后把模板中心与图像中某个像素位置重合;接下来读取模板下各对应像素的灰度值,将这些灰度值从小到大排成一列,找出这些值里排在中间的一个,然后将这个值赋给对应模板中心位置的像素。
步骤S130:人脸特征提取,
步骤S131:采用主成分分析法即PCA,对预处理过的图像进行特征提取。使用K-L变换得到人脸各部分的主成分集,这些主成分组成坐标系,每个坐标轴就是一个特征脸图像。在进行识别时,只要把被识别的图像进行空间投影,就可以得到一组投影向量,再通过与人脸库的图像进行匹配,进而进行识别。这些特征组成坐标系,每个坐标轴就是一个特征图像,所述特征集中至少包括:眼睛、鼻子、嘴、眼距、眉毛;
假设y为n维的随机变量,那么Y可以表示为:
转换为矩阵形式:
取向量为正交向量,得到下式
由于Φ式正交向量组成的,所以Φ应该是正交矩阵
ΦTΦ=I
两边同时乘以ΦT可以得到
a=ΦTY
ai=Φi TY
为了满足a向量的各个向量间互不相关,随机向量矩阵形式为:
R=E[YTY]
得到
R=ΦE[aTa]ΦT
为了满足a的各个分量间互补相关,需要满足关系式
写成矩阵形式,
变换得到
RΦ=ΦΓ
RΦj=λjΦj (j=1,2,···n)
λj是Y的特征值,Φj是特征向量。
步骤S132、提取特征眼睛对应的面积,计算眼睛与人脸的占比;
步骤133、根据两个眼睛的面积比,综合分析特征集中其他特征,获得脸部角度,并对眼睛特征向量进行矫正,矫正计算公式为:
步骤是140:人脸识别,计算原始图像和对比图像之间的欧式距离:
其中,Y为原始图像的特征向量集合,D为对比图像的特征向量集合,yi为原始图像对应的单个特征向量,di为对比图像对应的单个特征向量,n为特征集中人脸特征个数;
当Φ(Y,D)≤σ时认为匹配成功完成识别;
当目标人特定场所目消失,特定场所位置是L采集目标人的图像以及信息S,特定场所名称。然后时刻采集该范围里的图像,采集信息包括图像,图像所在位置及所在位置名称。一旦目标人再次进入特定场所所在位置的一定范围时,则将采集到的现有图像与目标人图像,通过对比人脸特征,识别出目标人。
尽管本发明的实施方案已公开如上,但其并不仅仅限于说明书和实施方式中所列运用,它完全可以被适用于各种适合本发明的领域,对于熟悉本领域的人员而言,可容易地实现另外的修改,因此在不背离权利要求及等同范围所限定的一般概念下,本发明并不限于特定的细节和这里示出与描述的图例。
Claims (7)
1.一种基于图像特征融合对比技术的人脸识别方法,其特征在于,包括:
步骤一、利用电子设备采集实时图像样本;
步骤二、计算图像样本的像素灰度值得到灰度图像,并对灰度图像进行阈值分割,然后采用直方图均衡化处理,最后采用滤波方法滤除独立噪声,得到预处理后的图像样本;
步骤三、对所述图像样本进行人像分析,并进行特征提取,计算图像中人像面积,得到人像的眼睛占比,并对所述眼睛向量进行矫正;
步骤四、比较目标人的原始图像与对比头像的相似度,识别出目标人;
所述步骤三包括:
步骤A、采用主成分分析PCA算法构建数学模型,使用K-L变换得到人脸各部分的特征集,这些特征组成坐标系,每个坐标轴就是一个特征图像,所述特征集中至少包括:眼睛、鼻子、嘴、眼距、眉毛;
步骤B、提取特征眼睛对应的面积,计算眼睛与人脸的占比;
步骤C、根据两个眼睛的面积比,综合分析特征集中其他特征,获得脸部角度,并对眼睛特征向量进行矫正;
所述步骤C中矫正计算公式为:
2.根据权利要求1所述的基于图像特征融合对比技术的人脸识别方法,其特征在于,所述图像样本为视频或图片信息。
5.根据权利要求2所述的基于图像特征融合对比技术的人脸识别方法,其特征在于,所述直方图均衡化过程包括:
步骤a、列出原图像和变换后图像的灰度级fk,k=0,1,2,…L-1,其中,L是灰度等级总数;
步骤b、计算直方图各灰度等级的出现总数
其中,nk为原图像各灰度级的像素个数,k=0,1,2,…L-1,n为原图像的像素总个数,L是灰度等级总数,Pf(fk)表示该灰度出现的频率;
步骤c.计算累积分布函数
nk为原图像各灰度级的像素个数,k=0,1,2,…L-1;n为原图像的像素总个数;L为灰度等级总数;
步骤d、计算出直方图均衡后图像的灰度等级gi
gi=INT[(gmax-gmin)C(f)+gmin+0.5];
其中,gi为直方图均衡后图像的灰度等级,i=0,1,2…,255;INT为取整运算,gmax为灰度等级最大值,gmin为灰度等级最小值;
步骤e、计算出输出图像的灰度等级
其中,ni为各个灰度级的像素个数,i=0,1,2…,255。
6.根据权利要求1所述的基于图像特征融合对比技术的人脸识别方法,其特征在于,所述滤波方法采用中值滤波算法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810593767.8A CN108875623B (zh) | 2018-06-11 | 2018-06-11 | 一种基于图像特征融合对比技术的人脸识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810593767.8A CN108875623B (zh) | 2018-06-11 | 2018-06-11 | 一种基于图像特征融合对比技术的人脸识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108875623A CN108875623A (zh) | 2018-11-23 |
CN108875623B true CN108875623B (zh) | 2020-11-10 |
Family
ID=64337944
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810593767.8A Expired - Fee Related CN108875623B (zh) | 2018-06-11 | 2018-06-11 | 一种基于图像特征融合对比技术的人脸识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108875623B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110533609B (zh) * | 2019-08-16 | 2022-05-27 | 域鑫科技(惠州)有限公司 | 适用于内窥镜的图像增强方法、装置和存储介质 |
CN111914632B (zh) * | 2020-06-19 | 2024-01-05 | 广州杰赛科技股份有限公司 | 一种人脸识别方法、装置及存储介质 |
CN113052497A (zh) * | 2021-02-02 | 2021-06-29 | 浙江工业大学 | 一种基于动静态特征融合学习的服刑人员风险预测方法 |
CN114155480A (zh) * | 2022-02-10 | 2022-03-08 | 北京智视数策科技发展有限公司 | 一种低俗动作识别方法 |
CN114821712A (zh) * | 2022-04-07 | 2022-07-29 | 上海应用技术大学 | 一种人脸识别图像融合方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102750526A (zh) * | 2012-06-25 | 2012-10-24 | 黑龙江科技学院 | 基于人脸图像的身份验证识别方法 |
CN107742094A (zh) * | 2017-09-22 | 2018-02-27 | 江苏航天大为科技股份有限公司 | 提高人证比对结果的图像处理方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100724932B1 (ko) * | 2005-08-02 | 2007-06-04 | 삼성전자주식회사 | 얼굴 검출 장치 및 방법 |
-
2018
- 2018-06-11 CN CN201810593767.8A patent/CN108875623B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102750526A (zh) * | 2012-06-25 | 2012-10-24 | 黑龙江科技学院 | 基于人脸图像的身份验证识别方法 |
CN107742094A (zh) * | 2017-09-22 | 2018-02-27 | 江苏航天大为科技股份有限公司 | 提高人证比对结果的图像处理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN108875623A (zh) | 2018-11-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108875623B (zh) | 一种基于图像特征融合对比技术的人脸识别方法 | |
US11830230B2 (en) | Living body detection method based on facial recognition, and electronic device and storage medium | |
CN110348319B (zh) | 一种基于人脸深度信息和边缘图像融合的人脸防伪方法 | |
CN107135664B (zh) | 一种人脸识别的方法以及人脸识别装置 | |
CN107194317B (zh) | 一种基于网格聚类分析的暴力行为检测方法 | |
CN109948566B (zh) | 一种基于权重融合与特征选择的双流人脸反欺诈检测方法 | |
KR20160143494A (ko) | 현저성 정보 취득 장치 및 현저성 정보 취득 방법 | |
CN111126240B (zh) | 一种三通道特征融合人脸识别方法 | |
JP2004348674A (ja) | 領域検出方法及びその装置 | |
KR20210025020A (ko) | 의사 이미지들을 이용한 얼굴 이미지 인식 | |
KR20170006355A (ko) | 모션벡터 및 특징벡터 기반 위조 얼굴 검출 방법 및 장치 | |
CN111199197B (zh) | 一种人脸识别的图像提取方法及处理设备 | |
CN109725721B (zh) | 用于裸眼3d显示系统的人眼定位方法及系统 | |
CN111259756A (zh) | 基于局部高频次特征和混合度量学习的行人重识别方法 | |
CN112784712B (zh) | 一种基于实时监控的失踪儿童预警实现方法、装置 | |
CN116229528A (zh) | 一种活体掌静脉检测方法、装置、设备及存储介质 | |
CN109522865A (zh) | 一种基于深度神经网络的特征加权融合人脸识别方法 | |
CN109165551B (zh) | 一种自适应加权融合显著性结构张量和lbp特征的表情识别方法 | |
CN111259792A (zh) | 基于dwt-lbp-dct特征的人脸活体检测方法 | |
CN109003247B (zh) | 彩色图像混合噪声的去除方法 | |
CN107729863B (zh) | 人体指静脉识别方法 | |
CN116912604B (zh) | 模型训练方法、图像识别方法、装置以及计算机存储介质 | |
CN109886320B (zh) | 一种人体股骨x光片智能识读方法及系统 | |
CN117275048A (zh) | 一种基于全局特征和局部细节点特征融合的指纹识别方法 | |
JP5048691B2 (ja) | 画像認識方法およびその装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20201110 Termination date: 20210611 |