Nothing Special   »   [go: up one dir, main page]

CN108960173A - 一种毫米波和摄像头融合人脸识别方法 - Google Patents

一种毫米波和摄像头融合人脸识别方法 Download PDF

Info

Publication number
CN108960173A
CN108960173A CN201810765062.XA CN201810765062A CN108960173A CN 108960173 A CN108960173 A CN 108960173A CN 201810765062 A CN201810765062 A CN 201810765062A CN 108960173 A CN108960173 A CN 108960173A
Authority
CN
China
Prior art keywords
module
millimeter
face
processing module
millimeter wave
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810765062.XA
Other languages
English (en)
Inventor
苏刚
徐胡成
金海涛
刘同海
马军
刘成虎
裴进明
陶宗虎
冯庆
于涛
窦红梅
陈玉喜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhu Bogao Photoelectric Polytron Technologies Inc
Original Assignee
Wuhu Bogao Photoelectric Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhu Bogao Photoelectric Polytron Technologies Inc filed Critical Wuhu Bogao Photoelectric Polytron Technologies Inc
Priority to CN201810765062.XA priority Critical patent/CN108960173A/zh
Publication of CN108960173A publication Critical patent/CN108960173A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • G06F18/251Fusion techniques of input or preprocessed data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Vascular Medicine (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种毫米波和摄像头融合人脸识别方法,涉及人脸识别领域,是基于现有的摄像头人脸识别技术上融合了毫米波识别方法,包括毫米波收发器、数据处理模块、图像处理模块、摄像模块、图像融合模块和执行模块,毫米波与摄像头联合识别方法可以放在众多场合,毫米波信号接收模块连接到它对应的数据处理模块上,摄像头与对应的图像处理模块连接,数据处理之后在进行两个数据的融合处理,取长补短,最终得到完整的结果,进而系统执行相应的操作。

Description

一种毫米波和摄像头融合人脸识别方法
技术领域
本发明涉及人脸识别领域,具体涉及一种毫米波和摄像头融合人脸识别方法。
背景技术:
随着科学技术的进步,现在的摄像头人脸识别功能已经引入市场了应用了,但是其安全性一直是人们所担心的,仅仅摄像头进行人脸识别很可能造成错误识别,存在安全隐患。比如用照片来代替真人脸来识别,也可能通过验证,还有夜晚识别的时候,由于光线的原因,摄像头很难精准的捕捉到人脸信息,这是摄像头识别劣势的地方。
如申请号为CN201810051630.X公开了一种智能电梯调度系统,包括感应器系统模块、AI调度模块、定制信息处理模块;所述AI调度模块包含人脸识别单元、射频信息流处理单元、智能调度算法单元;本发明引入了人工智能算法,针对图像类感应器系统,利用卷积CNN神经网络对图像进行处理,为智能调度提供数据基础;该系统开拓了基于射频的深度学习方法,利用毫米波等射频方案,提供了一种图像信息之外的方式,大大提高了光线干扰环境下的稳定性,但是该系统并未公开如何利用毫米波进行人脸的识别。
如申请号为CN201720127636.1公开了一种车载综合安全检查系统,包括:车厢;X射线物品安检设备,设置在车厢内并用于执行对物品的X射线安全检查;毫米波人体安检设备,设置在车厢内并用于执行对人体的毫米波安全检查;以及,车厢装卸机构,设置在车厢处并被构造成使车厢能够在车载移动安检模式和固定场地安检模式之间进行切换,其中,在车载移动安检模式,系统能够在车厢处于车载可移动的情况下执行对物品的X射线安全检查和/或对人体的毫米波安全检查;而在固定场地安检模式,系统能够在车厢处于固定场地的情况下执行对物品的X射线安全检查和/或对人体的毫米波安全检查,但是该系统并未公开如何利用毫米波进行人脸的识别。
发明内容
本发明的目的在于提供一种毫米波和摄像头融合人脸识别方法,兼顾了摄像头人脸识别的优点,同时能够利用毫米波探测来提高人脸识别的准确度,解决了仅用摄像头做人脸识别的安全性问题。
一种毫米波和摄像头融合人脸识别方法,包括毫米波收发器、数据处理模块、图像处理模块、摄像模块、图像融合模块和执行模块,所述毫米波收发器包括毫米波雷达芯片和相应的外围电路用于向前方发射毫米波对人脸特征进行扫描并接收,所述数据处理模块包括高性能的数组信号处理芯片和外围电路,数据处理模块与毫米波收发器连接数组信号芯片用于将毫米波收发器接收的毫米波数据进行分析处理,所述摄像模块用于拍摄人脸图像特征,所述图像处理模块包括专用的图像处理芯片和软件算法,图像处理模块与摄像模块连接通过图像处理芯片和软件算法的结合分析处理摄像模块中的图片,所述图像融合模块分别与数据处理模块和图像处理模块连接,用于将毫米波数据和图像数据进行整合处理,所述执行模块与图像融合模块连接用于判断分析结果,并根据结果执行对应的操作命令。
优选的,所述毫米波收发器和摄像模块均设置于同一个面板上。
优选的,所述摄像模块用于捕捉人脸的2D信息,所述毫米波收发器用于捕捉人脸的3D信息。
优选的,所述图像融合模块将人脸的2D信息和3D信息进行整合,实现人脸的准确复原。
优选的,所述毫米波收发器上连接有多组接收天线。
优选的,所述方法包括以下步骤:
S1:毫米波收发器发出毫米波对人脸进行扫描,同时摄像模块对人脸进行拍摄;
S2:数据处理模块对毫米波的扫描数据进行分析整理,图像处理模块对人脸图片进行分析整理;
S3:图像融合模块通过特定算法对数据处理模块发送来的数据和图像处理模块发送来的图片进行融合处理;
S4:处理完成后将结果发送至执行模块端执行相应的操作。
本发明的优点在于:该种毫米波和摄像头融合人脸识别方法,使用摄像头和毫米波两种方式同时识别人脸信息,可以有效解决只有摄像头识别时产生的错误结果,而且毫米波不受光线的影响,可以解决摄像头在光照不良的情况下不能识别的缺点。
附图说明
图1为本发明的结构示意图。
图2为本发明毫米波收发器原理。
图3为本发明图像融合原理。
具体实施方式
为使本发明实现的技术手段、创作特征、达成目的与功效易于明白了解,下面结合具体实施方式,进一步阐述本发明。
如图1至图3所示,一种毫米波和摄像头融合人脸识别方法,包括毫米波收发器、数据处理模块、图像处理模块、摄像模块、图像融合模块和执行模块,所述毫米波收发器包括毫米波雷达芯片和相应的外围电路用于向前方发射毫米波对人脸特征进行扫描并接收,所述数据处理模块包括高性能的数组信号处理芯片和外围电路,数据处理模块与毫米波收发器连接数组信号芯片用于将毫米波收发器接收的毫米波数据进行分析处理,所述摄像模块用于拍摄人脸图像特征,所述图像处理模块包括专用的图像处理芯片和软件算法,图像处理模块与摄像模块连接通过图像处理芯片和软件算法的结合分析处理摄像模块中的图片,所述图像融合模块分别与数据处理模块和图像处理模块连接,用于将毫米波数据和图像数据进行整合处理,所述执行模块与图像融合模块连接用于判断分析结果,并根据结果执行对应的操作命令。
值得注意的是,所述毫米波收发器和摄像模块均设置于同一个面板上。
在本实施例中,所述摄像模块用于捕捉人脸的2D信息,所述毫米波收发器用于捕捉人脸的3D信息。
在本实施例中,所述图像融合模块将人脸的2D信息和3D信息进行整合,实现人脸的准确复原。
在本实施例中,所述毫米波收发器上连接有多组接收天线。
此外,所述方法包括以下步骤:
S1:毫米波收发器发出毫米波对人脸进行扫描,同时摄像模块对人脸进行拍摄;
S2:数据处理模块对毫米波的扫描数据进行分析整理,图像处理模块对人脸图片进行分析整理;
S3:图像融合模块通过特定算法对数据处理模块发送来的数据和图像处理模块发送来的图片进行融合处理;
S4:处理完成后将结果发送至执行模块端执行相应的操作。
如图1毫米波收发器和数字处理模块相连接,辅以外围电路,搭建成可以利用毫米波进行人脸信息采集的检测电路,如图2毫米波收发器接受到人脸上发射回来的毫米波,然后把信息传送给数字信号处理模块,数字信号处理模块通过算法分析得到毫米波采集到的人脸图像信息,得到结果再传送给图像融合模块;摄像头和图像处理模块相连接,辅以外围电路,搭建成可以利用摄像头进行人脸信息采集的信息采集电路,摄像头拍摄的人脸图像来采集信息,再通过电路传输把人脸信息传输给图像处理模块,图像处理模块通过接受到的图像进行数字化处理,得到结果传送给图像融合模块上;如图3图像处理和数字处理都连接到图像融合模块上,图像融合模块接收到图像处理模块和数字处理模块传来的信息后,将两者采集到的信息进行算法互补融合,从而得到准确的人脸信息,达到精确识别的效果,解决单一识别的不准确问题。经过一系列的数据采集和处理后,得到最终的人脸信息,达到准确识别后,系统做出相应的响应,执行需要处理的动作。根据所述方法,毫米波收发器和摄像头可以放在任意需要检测的地方,如手机的前置摄像头等位置等,让其达到想要的效果。
基于上述,该种毫米波和摄像头融合人脸识别方法,使用摄像头和毫米波两种方式同时识别人脸信息,可以有效解决只有摄像头识别时产生的错误结果,而且毫米波不受光线的影响,可以解决摄像头在光照不良的情况下不能识别的缺点。
由技术常识可知,本发明可以通过其它的不脱离其精神实质或必要特征的实施方案来实现。因此,上述公开的实施方案,就各方面而言,都只是举例说明,并不是仅有的。所有在本发明范围内或在等同于本发明的范围内的改变均被本发明包含。

Claims (6)

1.一种毫米波和摄像头融合人脸识别方法,包括毫米波收发器、数据处理模块、图像处理模块、摄像模块、图像融合模块和执行模块,其特征在于,所述毫米波收发器包括毫米波雷达芯片和相应的外围电路用于向前方发射毫米波对人脸特征进行扫描并接收,所述数据处理模块包括高性能的数组信号处理芯片和外围电路,数据处理模块与毫米波收发器连接数组信号芯片用于将毫米波收发器接收的毫米波数据进行分析处理,所述摄像模块用于拍摄人脸图像特征,所述图像处理模块包括专用的图像处理芯片和软件算法,图像处理模块与摄像模块连接通过图像处理芯片和软件算法的结合分析处理摄像模块中的图片,所述图像融合模块分别与数据处理模块和图像处理模块连接,用于将毫米波数据和图像数据进行整合处理,所述执行模块与图像融合模块连接用于判断分析结果,并根据结果执行对应的操作命令。
2.根据权利要求1所述的一种毫米波和摄像头融合人脸识别方法,其特征在于:所述毫米波收发器和摄像模块均设置于同一个面板上。
3.根据权利要求1所述的一种毫米波和摄像头融合人脸识别方法,其特征在于:所述摄像模块用于捕捉人脸的2D信息,所述毫米波收发器用于捕捉人脸的3D信息。
4.根据权利要求1所述的一种毫米波和摄像头融合人脸识别方法,其特征在于:所述图像融合模块将人脸的2D信息和3D信息进行整合,实现人脸的准确复原。
5.根据权利要求1所述的一种毫米波和摄像头融合人脸识别方法,其特征在于:所述毫米波收发器上连接有多组接收天线。
6.根据权利要求1-5中所述的任意一种毫米波和摄像头融合人脸识别方法,其特征在于:所述方法包括以下步骤:
S1:毫米波收发器发出毫米波对人脸进行扫描,同时摄像模块对人脸进行拍摄;
S2:数据处理模块对毫米波的扫描数据进行分析整理,图像处理模块对人脸图片进行分析整理;
S3:图像融合模块通过特定算法对数据处理模块发送来的数据和图像处理模块发送来的图片进行融合处理;
S4:处理完成后将结果发送至执行模块端执行相应的操作。
CN201810765062.XA 2018-07-12 2018-07-12 一种毫米波和摄像头融合人脸识别方法 Pending CN108960173A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810765062.XA CN108960173A (zh) 2018-07-12 2018-07-12 一种毫米波和摄像头融合人脸识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810765062.XA CN108960173A (zh) 2018-07-12 2018-07-12 一种毫米波和摄像头融合人脸识别方法

Publications (1)

Publication Number Publication Date
CN108960173A true CN108960173A (zh) 2018-12-07

Family

ID=64483841

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810765062.XA Pending CN108960173A (zh) 2018-07-12 2018-07-12 一种毫米波和摄像头融合人脸识别方法

Country Status (1)

Country Link
CN (1) CN108960173A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110290353A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 监控方法及装置、电子设备以及存储介质
CN110290352A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 监控方法及装置、电子设备以及存储介质
CN111460880A (zh) * 2019-02-28 2020-07-28 杭州芯影科技有限公司 多模生物特征融合方法和系统
CN113433541A (zh) * 2020-03-23 2021-09-24 Oppo广东移动通信有限公司 人脸检测方法和装置、电子设备、计算机可读存储介质
CN114511916A (zh) * 2022-04-19 2022-05-17 亿慧云智能科技(深圳)股份有限公司 基于人脸识别的终端设备控制方法、控制装置及终端设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070168128A1 (en) * 2004-01-28 2007-07-19 Setsuo Tokoro Running support system for vehicle
JP2014070899A (ja) * 2012-09-27 2014-04-21 Toyoda Gosei Co Ltd 車両用ミリ波レーダ装置
CN104598878A (zh) * 2015-01-07 2015-05-06 深圳市唯特视科技有限公司 基于灰度和深度信息的多层融合的多模态人脸识别装置及方法
CN105913013A (zh) * 2016-04-08 2016-08-31 青岛万龙智控科技有限公司 双目视觉人脸识别算法
US20160282874A1 (en) * 2013-11-08 2016-09-29 Hitachi, Ltd. Autonomous Driving Vehicle and Autonomous Driving System
US20170124384A1 (en) * 2015-10-30 2017-05-04 Mark A. Allyn Progressive radar assisted facial recognition
CN108109230A (zh) * 2017-07-20 2018-06-01 丁奕 一种用手机录入和维护生物特征信息的新型智能门禁或锁柜系统
CN108217352A (zh) * 2018-01-19 2018-06-29 深圳禾思众成科技有限公司 一种智能电梯调度系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070168128A1 (en) * 2004-01-28 2007-07-19 Setsuo Tokoro Running support system for vehicle
JP2014070899A (ja) * 2012-09-27 2014-04-21 Toyoda Gosei Co Ltd 車両用ミリ波レーダ装置
US20160282874A1 (en) * 2013-11-08 2016-09-29 Hitachi, Ltd. Autonomous Driving Vehicle and Autonomous Driving System
CN104598878A (zh) * 2015-01-07 2015-05-06 深圳市唯特视科技有限公司 基于灰度和深度信息的多层融合的多模态人脸识别装置及方法
US20170124384A1 (en) * 2015-10-30 2017-05-04 Mark A. Allyn Progressive radar assisted facial recognition
CN105913013A (zh) * 2016-04-08 2016-08-31 青岛万龙智控科技有限公司 双目视觉人脸识别算法
CN108109230A (zh) * 2017-07-20 2018-06-01 丁奕 一种用手机录入和维护生物特征信息的新型智能门禁或锁柜系统
CN108217352A (zh) * 2018-01-19 2018-06-29 深圳禾思众成科技有限公司 一种智能电梯调度系统

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111460880A (zh) * 2019-02-28 2020-07-28 杭州芯影科技有限公司 多模生物特征融合方法和系统
CN111460880B (zh) * 2019-02-28 2024-03-05 杭州芯影科技有限公司 多模生物特征融合方法和系统
CN110290353A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 监控方法及装置、电子设备以及存储介质
CN110290352A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 监控方法及装置、电子设备以及存储介质
CN113433541A (zh) * 2020-03-23 2021-09-24 Oppo广东移动通信有限公司 人脸检测方法和装置、电子设备、计算机可读存储介质
CN114511916A (zh) * 2022-04-19 2022-05-17 亿慧云智能科技(深圳)股份有限公司 基于人脸识别的终端设备控制方法、控制装置及终端设备
CN114511916B (zh) * 2022-04-19 2022-06-17 亿慧云智能科技(深圳)股份有限公司 基于人脸识别的终端设备控制方法、控制装置及终端设备

Similar Documents

Publication Publication Date Title
CN108960173A (zh) 一种毫米波和摄像头融合人脸识别方法
WO2017096761A1 (zh) 基于监控摄像机来查找目标对象的方法、装置和系统
CN110688957B (zh) 应用于人脸识别的活体检测方法、装置及存储介质
CN107292285A (zh) 虹膜活体检测方法及相关产品
CN111095297B (zh) 人脸识别的装置、方法和电子设备
WO2020252000A1 (en) Mobile based security system and method
CN104902233B (zh) 综合安全监控系统
CN109740522B (zh) 一种人员检测方法、装置、设备及介质
CN110728213A (zh) 一种基于无线射频信号的细粒度人体姿态估计方法
CN110868536A (zh) 一种门禁系统控制方法及门禁系统
CN103714321A (zh) 基于距离图像和强度图像的驾驶员人脸定位系统
CN102508307B (zh) 毫米波成像扫描检测系统及其检测方法
CN112037252A (zh) 基于鹰眼视觉的目标跟踪方法及系统
CN112000133A (zh) 低空飞行器/飞手的识别系统、反制系统及识别方法
CN106452716A (zh) 基于Hash指纹的无人机信号识别检测算法
CN113762130B (zh) 一种毫米波雷达手势检测识别方法
CN103514449B (zh) 一种图像采集装置及方法
CN109799493A (zh) 雷达和视频融合系统及方法
CN106682662A (zh) 用于移动终端的多模态生物特征识别模组及方法
CN105183163A (zh) 一种基于动作捕捉的屏幕、投影非接触式交互装置
CN105930804A (zh) 位于无人机上的输电设备辨认平台
CN113050083A (zh) 一种基于点云的超宽带雷达人体姿态重构方法
CN114063628A (zh) 一种基于深度学习和雷达检测的无人机救灾系统及方法
CN102055954A (zh) 监控方法及其系统
CN105100341A (zh) 一种带红外光谱材料分析功能的手机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181207

RJ01 Rejection of invention patent application after publication