Nothing Special   »   [go: up one dir, main page]

CN110097571A - 快速高精度的车辆碰撞预测方法 - Google Patents

快速高精度的车辆碰撞预测方法 Download PDF

Info

Publication number
CN110097571A
CN110097571A CN201910350810.2A CN201910350810A CN110097571A CN 110097571 A CN110097571 A CN 110097571A CN 201910350810 A CN201910350810 A CN 201910350810A CN 110097571 A CN110097571 A CN 110097571A
Authority
CN
China
Prior art keywords
vehicle collision
optical flow
interaction field
collision prediction
sampled
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910350810.2A
Other languages
English (en)
Other versions
CN110097571B (zh
Inventor
刘丹平
陈林烽
党普泽
林萌
刘夺
薛尚哲
梁真文
胡学斌
谭晓衡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing University
Original Assignee
Chongqing University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing University filed Critical Chongqing University
Priority to CN201910350810.2A priority Critical patent/CN110097571B/zh
Publication of CN110097571A publication Critical patent/CN110097571A/zh
Application granted granted Critical
Publication of CN110097571B publication Critical patent/CN110097571B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/207Analysis of motion for motion estimation over a hierarchy of resolutions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G06T7/251Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/10Internal combustion engine [ICE] based vehicles
    • Y02T10/40Engine management systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种快速高精度的车辆碰撞预测方法,用于快速预测车辆碰撞事件并及时采取警告措施,对避免交通事故的发生具有重要意义。该方法主要是:对于输入视频,对原始图像帧进行下采样或者上采样得到大小固定的图像帧方便快速处理。利用farneback光流算法得到光流场,将得到的下采样后的光流场利用核函数求得相互作用场,对相互作用场滤波后计算正负区域面积之差再经过平滑得到异常值,通过预先设定的阈值可以通过异常值预测车辆的碰撞。

Description

快速高精度的车辆碰撞预测方法
技术领域
本发明属于智能交通领域,涉及快速高精度的车辆碰撞预测方法,特别适用于实时、全天候的道路车辆碰撞的预测。
背景技术
国内外许多研究小组尝试通过计算机视觉和模式识别技术来研究车辆碰撞事故的自动检测方法。Siyu Xia等提出一种基于低秩矩阵近似的方法来快速有效地自动测视频中的交通事故。其首先将每个帧划分为与不同权重相关联的非重叠块,然后提取视频分段的运动矩阵,在使用低秩矩阵近似来将正常交通场景与一组运动子空间相关联之后,识别在近似误差增加的时刻的交通事故。Yu Chen等提出了一种基于分类器的监测方法,通过观察机动车碰撞前的最后一秒视频作为检测目标。其首先利用OF-SIFT算法从时域中提取局部运动信息特征以用于运动检测,然后用极端学习机(ELM)分类器作为基本分类器对交通事故进行分类。李月娥等通过提取交通监控视频中的烟雾、碎片和运动目标速度的变化等参数,结合麦夸特法进行公式拟合得到交通事故发生概率公式,并计算出事故发生概率,依据概率大小判断车辆是否发生碰撞。拜佩等分析车辆在视频中的一些具体状态,如大小、位置等,根据这些运动判断两个目标是否有重合区域,从而判断车辆是否碰撞。刘纬琪等利用OBB算法计算车辆的包围盒,然后将包围盒的地面平面投影得到车辆矩形二维包围盒,然后检测这些矩形在同一平面上是否相交从而判断车辆是否发生碰撞。尹春娥等提出一种基于小波方程的自适应阈值高速公路交通事故检测方法,基于交通运行状态的改变来动态自适应地调整阈值,以此达到比较高的事故检测率。尹宏鹏等利用智能分析技术,先使用背景差分法检测运动车辆,然后利用均值漂移算法跟踪运动车辆,通过得到的车辆位置、速度和运动方向等参数进行加权融合,以此来检测车辆行为(车辆的碰撞、停止行驶等)
上述算法都比较好地实现了交通事故检测,但存在着目标检测不准,跟踪效果不好和碰撞判别正确率不高等问题。
Atev等采用多个摄像机对同一交叉口同时监测,对数据融合后获得目标的运动状态向量,利用车辆轨迹外推假设建立了车辆碰撞预测算法,用于实现冲突检测。Laureshyn等尝试建立了一套能够全过程衡量交通相互作用事件的严重性指标,包括距离碰撞时间(TTC)、优势时间(TAdv)、间隙时间(TG)、速度等,基于此根据事件全过程严重性对交通冲突进行分类与识别。Ismail等对交通场景中的行人和车辆进行检测、跟踪与分类,然后借助外推假设自动计算严重性指标,并据此识别人车冲突。张方方从视频图像序列中提取冲突车辆的轨迹、速度、加速度等微观交通参数,建立了多数交通冲突判断方法,初步实现简单交通条件下机动车交通冲突视频自动检测。曲昭伟等在运动目标检测与跟踪的基础上,引入GM(1,1)灰色模型对运动目标轨迹进行预测,在确立了交通冲突判别两个条件的基础上实现了无信号交叉口交通冲突自动判别。Hu等利用模糊自组织神经网络算法学习车辆运动模式,并以此对车辆的运动轨迹加以匹配和预测,最终通过计算车辆间碰撞的发生概率对事故行预测。Saunier等建立了一种基于视频的交叉安全自动分析方法,通过最长公共子序列(LCSS)算法习得轨迹原型,在此基础上计算车辆间的碰撞可能性,对交通冲突进行判别。
尽管基于视频的交通冲突技术研究已经取得了一些阶段性成果,但是现行的大多数冲突判别方法只是对视频所采集到的微观交通数据进行简单直接应用,往往最终归于传统的交通冲突判别思路。
发明内容
本专利的目的是提供一种计算量小、计算速度快、抗噪声能力强、检测精度高、并且能够全天候实时预测车辆碰撞交通事故的快速高精度的车辆碰撞预测方法。
一种快速高精度的车辆碰撞预测方法:
步骤一,构建运动相互作用场F2(x,y),按照以下几步进行:
第一步,输入视频,对原始图像帧进行下采样或者上采样得到大小为M×N的图像帧f(x,y)。
第二步,利用farneback光流算法提取出视频序列中目标物体的运动信息:处理第i个像素值f(xi,yi),得到x方向的速度和y方向的速度从而得到大小为M×N的光流场V0x和V0y
第三步,对光流场进行下采样得到大小为M/10×N/10的光流场Vx和Vy
第四步,将得到的Vx和Vy应用到核函数K中,得到大小为M/10×N/10运动相互作用场F1(x,y),其表达式为:
其中K为核函数,其表达式为:
上式中,为前向中心位置,为后向中心位置,k为宽度为σ、中心为(xc,yc)的高斯核函数,其表达式为:
第五步,对F1(x,y)采用双三次插值得到大小为2M×2N运动相互作用场F2(x,y)。
步骤二,利用面积差的方法求得在t时刻的运动相互作用场的异常值按照以下几步进行:
第一步,利用阈值th1,分别求出由上一步得到的运动相互作用场F2(x,y)中像素值的绝对值大于th1的正负区域面积之和S1、S2
第二步,计算正负区域面积差的绝对值得到异常值Mand,其表达式为:
Mand=|S1-S2|
第三步,利用自回归模型平滑Mand得到自回归模型如下:
式中,α是表示传播程度的衰减参数,th2为波动阈值。表示在t时刻的运动相互作用场的异常值。
步骤三,利用步骤二求得的运动相互作用场的异常值设定阈值th3,对车辆碰撞进行预测,其表达式为:
其中,Lt是t帧异常的最终标签。若则判断为将发生碰撞,进行预警;反之,则判断为车辆不会发生碰撞。
本发明的显著效果是:算法计算量小、计算速度快、抗噪声能力强、检测精度高,能够以较高的准确率对视频中的车辆碰撞现象进行实时性的车辆碰撞预测和检测。
附图说明
图1为车辆碰撞预测算法流程图;
图2为玩具小车模拟正常交通时视频帧及其运动相互作用场;
图3为玩具小车模拟异常交通时视频帧及其运动相互作用场;
图4为含有碰撞帧的视频运动相互作用场的异常值变化。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细说明。
图1为本发明所涉及的算法流程图。
先将算法中的参数设置如下:
(A)M×N典型值为240×320;
(B)α=0.8;
(C)th1=55;
(D)th2=300;
(E)th3=1100;
(F)σ=10;
输入一段视频,图2左为从小车模拟交通事故视频中截取的车辆还未碰撞的一帧,图3左为从同一段视频中截取的车辆可能发生碰撞的一帧。对视频中的图像帧进行下采样得到M×N值大小为240×320的图像帧f(x,y)。然后算法利用Farneback光流法得到运动信息:x方向的速度和y方向的速度,从而得到大小为240×320的光流场V0x和V0y;对光流场进行下采样得到大小为24×32的光流场Vx和Vy。
利用得到的Vx和Vy,带入核函数:
通过
得到大小为24×32运动相互作用场F1(x,y),然后对F1(x,y)采用双三次插值得到大小为2M×2N运动相互作用场F2(x,y)。如图2右和图3右所示,分别为从小车模拟交通事故视频中截取的车辆还未碰撞的一帧的运动相互作用场和从同一段视频中截取的车辆可能发生碰撞的一帧的运动相互作用场。
分别利用求出的运动相互作用场F2(x,y)中像素值的绝对值大于th1的正负区域面积之和S1、S2,采用Mand=|S1-S2|计算异常值Mand。然后对其采用衰减参数α=0.8自回归模型平滑Mand得到两帧视频的异常值其中
此时通过异常值对车辆碰撞进行预测。
图4为所选视频的片段的每一帧异常值,可以看到未碰撞帧的异常值小于阈值th3=1100,而碰撞帧则大于它。
通过图4可以看出:通过设定的可能发生碰撞的预警阈值300,其中第176帧是碰撞帧,第172帧及其以前是正常帧。设计好阈值,提前了4帧预测会发生碰撞。

Claims (3)

1.一种快速高精度的车辆碰撞预测方法,其特征在于,按照以下步骤进行:
步骤一,构建运动相互作用场F2(x,y),按照以下几步进行:
第一步,输入视频,对原始图像帧进行下采样或者上采样得到大小为M×N的图像帧f(x,y)。
第二步,利用farneback光流算法提取出视频序列中目标物体的运动信息:处理第i个像素值f(xi,yi),得到x方向的速度和y方向的速度从而得到大小为M×N的光流场V0x和V0y。
第三步,对光流场进行下采样得到大小为M/10×N/10的光流场Vx和Vy。
第四步,将得到的Vx和Vy应用到核函数K中,得到大小为M/10×N/10运动相互作用场F1(x,y),其表达式为:
其中K为核函数,其表达式为:
上式中,为前向中心位置,为后向中心位置,k为宽度为σ、中心为(xc,yc)的高斯核函数,其表达式为:
第五步,对F1(x,y)采用双三次插值得到大小为2M×2N运动相互作用场F2(x,y)。
步骤二,利用面积差的方法求得在t时刻的运动相互作用场的异常值按照以下几步进行:
第一步,利用阈值th1,分别求出由上一步得到的运动相互作用场F2(x,y)中像素值的绝对值大于th1的正负区域面积之和S1、S2。
第二步,计算正负区域面积差的绝对值得到异常值Mand,其表达式为:
Mand=|S1-S2|
第三步,利用自回归模型平滑Mand得到自回归模型如下:
式中,α是表示传播程度的衰减参数,th2为波动阈值。表示在t时刻的运动相互作用场的异常值。
步骤三,利用步骤二求得的运动相互作用场的异常值设定阈值th3,对车辆碰撞进行预测,其表达式为:
其中,Lt是t帧异常的最终标签。若则判断为将发生碰撞,进行预警;反之,则判断为车辆不会发生碰撞。
2.根据权利要求1所述的一种快速高精度的车辆碰撞预测方法,其特征在于:在所述步骤二第三步中,经过实验分析衰减参数α取值为0.8时检测精度最高。
3.根据权利要求1或2所述的一种快速高精度的车辆碰撞预测方法,其特征在于:在所述的步骤三中的判断通过面积差得到的异常值,设定的预警阈值越低对车辆碰撞预测越敏感但是对碰撞预测的精度会降低,实验中将其设定为碰撞阈值的1/3左右。
CN201910350810.2A 2019-04-28 2019-04-28 快速高精度的车辆碰撞预测方法 Active CN110097571B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910350810.2A CN110097571B (zh) 2019-04-28 2019-04-28 快速高精度的车辆碰撞预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910350810.2A CN110097571B (zh) 2019-04-28 2019-04-28 快速高精度的车辆碰撞预测方法

Publications (2)

Publication Number Publication Date
CN110097571A true CN110097571A (zh) 2019-08-06
CN110097571B CN110097571B (zh) 2023-06-13

Family

ID=67446218

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910350810.2A Active CN110097571B (zh) 2019-04-28 2019-04-28 快速高精度的车辆碰撞预测方法

Country Status (1)

Country Link
CN (1) CN110097571B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110660222A (zh) * 2019-11-01 2020-01-07 河北工业大学 一种智能环保道路黑烟车辆电子抓拍系统
CN111832495A (zh) * 2020-07-17 2020-10-27 中通服咨询设计研究院有限公司 一种检测视频中车辆事故的方法
CN115230694A (zh) * 2022-09-20 2022-10-25 毫末智行科技有限公司 自动驾驶车辆的障碍物识别方法、装置及车辆

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014067276A (ja) * 2012-09-26 2014-04-17 Fuji Heavy Ind Ltd 車両の衝突判定装置
CN105405297A (zh) * 2015-12-21 2016-03-16 电子科技大学 一种基于监控视频的交通事故自动检测方法
CN105574552A (zh) * 2014-10-09 2016-05-11 东北大学 一种基于单目视觉的车辆测距与碰撞预警方法
CN106203267A (zh) * 2016-06-28 2016-12-07 成都之达科技有限公司 基于机器视觉的车辆防碰撞方法
US20170344855A1 (en) * 2016-05-24 2017-11-30 Agt International Gmbh Method of predicting traffic collisions and system thereof
US9834139B1 (en) * 2016-09-30 2017-12-05 Plk Technologies Co., Ltd. Vehicle collision warning prevention method using optical flow analysis
CN108389430A (zh) * 2018-01-12 2018-08-10 南京理工大学 一种基于视频检测的交叉口行人与机动车碰撞预测方法
CN108846322A (zh) * 2018-05-25 2018-11-20 重庆大学 快速高精度的车辆碰撞检测方法
CN108922247A (zh) * 2018-07-25 2018-11-30 重庆大学 一种基于ais的船舶-航标碰撞危险度估算方法
CN109409238A (zh) * 2018-09-28 2019-03-01 深圳市中电数通智慧安全科技股份有限公司 一种障碍物检测方法、装置及终端设备
WO2019044625A1 (ja) * 2017-09-01 2019-03-07 株式会社村上開明堂 衝突予測装置、衝突予測方法及びプログラム

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014067276A (ja) * 2012-09-26 2014-04-17 Fuji Heavy Ind Ltd 車両の衝突判定装置
CN105574552A (zh) * 2014-10-09 2016-05-11 东北大学 一种基于单目视觉的车辆测距与碰撞预警方法
CN105405297A (zh) * 2015-12-21 2016-03-16 电子科技大学 一种基于监控视频的交通事故自动检测方法
US20170344855A1 (en) * 2016-05-24 2017-11-30 Agt International Gmbh Method of predicting traffic collisions and system thereof
CN106203267A (zh) * 2016-06-28 2016-12-07 成都之达科技有限公司 基于机器视觉的车辆防碰撞方法
US9834139B1 (en) * 2016-09-30 2017-12-05 Plk Technologies Co., Ltd. Vehicle collision warning prevention method using optical flow analysis
WO2019044625A1 (ja) * 2017-09-01 2019-03-07 株式会社村上開明堂 衝突予測装置、衝突予測方法及びプログラム
CN108389430A (zh) * 2018-01-12 2018-08-10 南京理工大学 一种基于视频检测的交叉口行人与机动车碰撞预测方法
CN108846322A (zh) * 2018-05-25 2018-11-20 重庆大学 快速高精度的车辆碰撞检测方法
CN108922247A (zh) * 2018-07-25 2018-11-30 重庆大学 一种基于ais的船舶-航标碰撞危险度估算方法
CN109409238A (zh) * 2018-09-28 2019-03-01 深圳市中电数通智慧安全科技股份有限公司 一种障碍物检测方法、装置及终端设备

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
ALI AMINZADEH等: "Implementation and performance evaluation of optical flow navigation system under specific conditions for a flying robot", 《IEEE AEROSPACE AND ELECTRONIC SYSTEMS MAGAZINE 》 *
YING-CHE KUO等: "Pedestrian Collision Warning of Advanced Driver Assistance Systems", 《2016 INTERNATIONAL SYMPOSIUM ON COMPUTER, CONSUMER AND CONTROL (IS3C)》 *
尹宏鹏等: "智能视频分析的车辆异常行为检测方法", 《重庆大学学报》 *
常同伟等: "基于HEVC的车辆异常事件检测", 《数据采集与处理》 *
杜鉴豪等: "基于区域光流特征的异常行为检测", 《浙江大学学报(工学版)》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110660222A (zh) * 2019-11-01 2020-01-07 河北工业大学 一种智能环保道路黑烟车辆电子抓拍系统
CN110660222B (zh) * 2019-11-01 2024-05-10 河北工业大学 一种智能环保道路黑烟车辆电子抓拍系统
CN111832495A (zh) * 2020-07-17 2020-10-27 中通服咨询设计研究院有限公司 一种检测视频中车辆事故的方法
CN115230694A (zh) * 2022-09-20 2022-10-25 毫末智行科技有限公司 自动驾驶车辆的障碍物识别方法、装置及车辆

Also Published As

Publication number Publication date
CN110097571B (zh) 2023-06-13

Similar Documents

Publication Publication Date Title
CN112700470B (zh) 一种基于交通视频流的目标检测和轨迹提取方法
Wang et al. Appearance-based brake-lights recognition using deep learning and vehicle detection
CN103150903B (zh) 一种自适应学习的视频车辆检测方法
CN106599832A (zh) 一种基于卷积神经网络的多类障碍物检测与识别方法
CN105744232A (zh) 一种基于行为分析技术的输电线路视频防外破的方法
CN112487905B (zh) 一种车辆周边行人危险等级预测方法及系统
CN107985189A (zh) 面向高速驾驶环境下的驾驶员变道深度预警方法
CN110097571B (zh) 快速高精度的车辆碰撞预测方法
Song The application of computer vision in responding to the emergencies of autonomous driving
Rajendar et al. Prediction of stopping distance for autonomous emergency braking using stereo camera pedestrian detection
CN114693909A (zh) 一种基于多传感器机器视觉融合的微观车辆轨迹感知设备
Qing et al. A novel particle filter implementation for a multiple-vehicle detection and tracking system using tail light segmentation
Rashmi et al. Vehicle density analysis and classification using YOLOv3 for smart cities
Khan Estimating Speeds and Directions of Pedestrians in Real-Time Videos: A solution to Road-Safety Problem.
CN103177248B (zh) 一种基于视觉的快速行人检测方法
Abbas V-ITS: Video-based intelligent transportation system for monitoring vehicle illegal activities
Ran et al. Development of vision-based vehicle detection and recognition system for intelligent vehicles
Liu et al. Research on security of key algorithms in intelligent driving system
Liu et al. A review of traffic visual tracking technology
Varagula et al. Object detection method in traffic by on-board computer vision with time delay neural network
CN117555333A (zh) 一种动态行进轨迹的处理系统及方法
Muniruzzaman et al. Deterministic algorithm for traffic detection in free-flow and congestion using video sensor
Parsola et al. Automated system for road extraction and traffic volume estimation for traffic jam detection
CN114581863A (zh) 车辆危险状态识别方法及系统
Khan et al. Multiple moving vehicle speed estimation using Blob analysis

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant