Nothing Special   »   [go: up one dir, main page]

JP3556766B2 - 道路白線検出装置 - Google Patents

道路白線検出装置 Download PDF

Info

Publication number
JP3556766B2
JP3556766B2 JP13319196A JP13319196A JP3556766B2 JP 3556766 B2 JP3556766 B2 JP 3556766B2 JP 13319196 A JP13319196 A JP 13319196A JP 13319196 A JP13319196 A JP 13319196A JP 3556766 B2 JP3556766 B2 JP 3556766B2
Authority
JP
Japan
Prior art keywords
road
curve
white line
image
detecting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP13319196A
Other languages
English (en)
Other versions
JPH09319872A (ja
Inventor
伸彦 安井
篤 飯阪
衛 金子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=15098840&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP3556766(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP13319196A priority Critical patent/JP3556766B2/ja
Priority to DE69734477T priority patent/DE69734477T2/de
Priority to DE69705994T priority patent/DE69705994T2/de
Priority to EP01104215A priority patent/EP1143398A3/en
Priority to KR1019970020916A priority patent/KR100257592B1/ko
Priority to EP01104213A priority patent/EP1143396B1/en
Priority to EP01104214A priority patent/EP1143397B1/en
Priority to DE69734736T priority patent/DE69734736T2/de
Priority to EP97108509A priority patent/EP0810569B1/en
Priority to US08/864,428 priority patent/US5922036A/en
Publication of JPH09319872A publication Critical patent/JPH09319872A/ja
Publication of JP3556766B2 publication Critical patent/JP3556766B2/ja
Application granted granted Critical
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276—Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/0278—Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using satellite positioning signals, e.g. GPS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/48—Extraction of image or video features by mapping characteristic values of the pattern into a parameter space, e.g. Hough transformation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/04—Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00—Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/08—Lane monitoring; Lane Keeping Systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00—Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/08—Lane monitoring; Lane Keeping Systems
    • B60T2201/089—Lane monitoring; Lane Keeping Systems using optical detection
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0274—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means using mapping information stored in a memory device

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Instructional Devices (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)

Description

【０００１】
【発明の属する技術分野】
本発明は、道路白線を検出する道路白線検出装置に関するものである。
【０００２】
【従来の技術】
従来、道路白線検出装置は特開平５−１５１３４１号に記載されたものが知られている。図１６に従来の道路白線検出装置の構成示す。すなわち、車両前方の道路画像を撮影する画像入力手段１００と、前記画像入力手段１００からの信号を入力してエッジ点を抽出する前処理手段１０１と、前回の演算時における直線式の近傍にウインドウを設定しその設定された各ウインドウ内における複数のエッジ点の座標を計測し直線近似によって複数の直線式を求める直線適合手段１０２と、前記求められた複数の直線式に基づき各直線式間の誤差の２乗和が最小となるように消失点のｘ，ｙ座標と該消失点を通る各直線の傾きに対応する量とを推定して今回の結果とする直線・消失点決定手段１０４と、前記前処理手段１０１の結果と前記直線適合手段１０２の検出結果とに基づいレーンマーカに対応するエッジ点を抽出するエッジ点追跡手段１０３と、前記抽出されたエッジ点に曲線式を当てはめ曲線の曲率を検出する曲線適合手段１０５と、前記曲線適合手段１０５の結果を平滑する平滑手段１０６から構成されている。
【０００３】
従来、道路の曲率半径検出装置は特開平２−１１５９０５号に記載されたものが知られている。図１７に従来の道路の曲率半径検出装置の構成を示す。すなわち、外界の画像を撮る撮像手段１０７と、該画像から走行路目標並びに該目標と移動車との相対的位置関係を検出する検出手段１０８、該相対的位置関係に基づいて所定の関数に規定される起動を創成手段１０９と、該創成軌道にしたがって移動車の走行制御を行なう制御手段１１０から構成されている。
【０００４】
【発明が解決しようとする課題】
この従来の道路白線検出装置においては、最小自乗法で曲線の当てはめを行なっているためにノイズの影響を受けやすく正確な白線検出ができなかった。
【０００７】
本発明は、このような従来の課題を考慮し、高速にそして正確に滑らかな曲線として白線を検出できる装置を提供することを目的とするものである。
【０００８】
【課題を解決するための手段】
この課題を解決するために本発明の道路白線検出装置は、車両前方の道路を撮影する道路画像撮影手段と、前記道路画像撮影手段からの道路画像データをストアする画像データメモリ手段と、前記画像データメモリ手段にストアされている道路画像データを使用して道路白線に対応する輪郭点を抽出する輪郭点抽出手段と、前記輪郭点抽出手段からの道路白線に対応した輪郭点を使用して多項式曲線を算出する曲線検出手段と、前記曲線検出手段からの道路白線に対応した輪郭点全部を使用して算出した多項式曲線を使用してハフ変換を行う際のハフ空間上の領域を限定するハフ変換限定手段と、前記曲線検出手段からの道路白線に対応した輪郭点のうち複数個を使用して算出した多項式曲線と前記ハフ変換限定手段により限定されたハフ変換領域を使用してハフ変換を行なうハフ変換手段と、アキュミュレータのうち極大点のものを求め対応する曲線を検出するハフ変換曲線検出手段とを備えたものである。
【０００９】
また、車両前方の道路を撮影する道路画像撮影手段と、前記道路画像撮影手段からの道路画像データをストアする画像データメモリ手段と、前記画像データメモリ手段にストアされている道路画像データを使用して道路白線に対応する輪郭点を抽出する輪郭点抽出手段と、前記輪郭点抽出手段からの道路白線に対応した輪郭点を使用し画像の縦方向に区分した輪郭点から各区分のスプライン曲線を算出する区分曲線検出手段と、前記区分曲線検出手段において求めた曲線を記憶する区分曲線記憶手段と、前記区分曲線記憶手段に記憶された曲線を画像上に描きその画像の解像度を下げる解像度変換手段と、前記解像度変換手段からの画像を使用して再度輪郭点を求める曲線輪郭点検出手段と、前記曲線輪郭点検出手段からの輪郭点を使用して再度スプライン曲線を求める総合曲線検出手段とを備えたものである。
【００１４】
以上のように、要するに、本発明は、白線を高速に求めるために予め複数のスプライン曲線で求め道路白線に相当する曲線の係数を使用してハフ空間上の点を求めて道路白線を検出する装置と、滑らかにカーブを検出するために高精細度画像から低解像度画像を使用して道路白線を検出する装置である。
【００１６】
【発明の実施形態】
以下、本発明の実施の形態について図面を参照して説明する。
【００１７】
（実施の形態１）
図１は本発明の一実施の形態にかかる道路白線検出装置を示し、図１において、１は道路画像撮影手段、２は画像データメモリ手段、３は輪郭点抽出手段、４は曲線検出手段、５はハフ変換限定手段、６はハフ変換手段、７はハフ変換曲線検出手段である。以上のように構成された道路白線検出装置について、以下、その動作を述べる。
【００１８】
基本的動作としては、まず、道路画像撮影手段１から車両前方の道路画像を入力する。その入力した道路画像データを一旦画像データメモリ手段２に記憶する。輪郭点抽出手段３において、前記画像データメモリ手段２に記憶している道路画像データを使用してエッジを求めその画像全体のエッジ強度の大きさから閾値を設定し、画像底部から上方に向けて画像の中心から左右方向に前記閾値を最初に越えるエッジ強度を見つけ、それを道路の左右の白線の輪郭点とする。曲線検出手段４において、図２に示すように前記輪郭点を使用して道路白線に対応する曲線を多項式として複数個検出する。ハフ変換限定手段５で前記曲線検出手段４で求めた曲線のうちすべての輪郭点を使用して求めた多項式曲線の係数を使用してハフ空間の限定領域を決める。図３に示すように次にハフ変換手段５において、前記複数の曲線の式の係数を使用してハフ空間にその曲線係数に対応する点を配置する。ハフ変換曲線検出手段６において、前記ハフ空間に配置された点の位置を求め、その点から道路白線の画像面での式を算出する。
【００１９】
次に、上述した処理の流れを具体的に図４のフローチャートを用いて説明する。
【００２０】
まず、ステップ１においてハフ空間のアキュミュレータをすべて０にし、カウンタｋも０にする。ステップ２において、画像データメモリ手段２にストアされている画像データにおいてＳｏｂｅｌフィルタを使用してエッジ強度を求める。ステップ３において、エッジデータを使用して閾値を次のように計算する。
【００２１】
【数１】
ｔｈ＝０．８×ｍａｘ＋０．２×ｍｅａｎ
ここで、ｔｈは閾値、ｍａｘは画像中のエッジ強度の最大値、ｍｅａｎはエッジ強度の平均値である。ステップ４において、画像底部から上方に向けてエッジ画像の中心から左右方向にこの閾値ｔｈを初めて越える点を検索する。初めてこの閾値を越えた点を左右白線の輪郭点とする。ステップ５で左右の輪郭点それぞれで全部を使用してスプライン曲線を算出し、その係数を中心に±αだけの領域をハフ空間上に作る。ステップ６で、左右の輪郭点を使用して別々に白線の画像上での式を求める。左白線に対応する輪郭点Ｎ個のうちｎ個を選択し、スプライン補間式として次のようなこの点の近似式を求める。右白線も同様に近似多項式を求める。
【００２２】
【数２】
ｙ＝ａｍｘｍ＋ａｍ−１ｘｍ−１＋．．．＋ａ０
ステップ７において、この多項式の係数に対応し、ステップ５で限定されたハフ空間上のアキュミュレータに１を足し、ｋにも１を足す。もし、ステップ８においてｋがｋｍａｘより小さければステップ６を繰り返し、白線に対応する輪郭点Ｎ個のうち別のｎ個を選択し同様に多項式を求める。もし、ｋｍａｘ以上であれば、ステップ９でハフ空間上のアキュミュレータのうち最も数字の大きいものを選び、それに対応する多項式の係数を求める。ステップ１０でその係数で作られる多項式を道路白線の画像上での式とする。
【００２３】
以上のようにして高速に曲線として道路白線を検出することができ、滑らかな曲線として白線を検出できる。なお、処理において前回求めたハフ空間上のアキュミュレータを中心に一定範囲領域のみ使用するように領域限定を行なって一層の高速化を図ることもできる。
【００２４】
（実施の形態２）
図５は本発明の他の実施の形態の道路白線検出装置を示し、図５において１１は道路画像撮影手段、１２は画像ｌデータメモリ手段、１３は輪郭点抽出手段、１４は区分曲線検出手段、１５は区分曲線記憶手段、１６は解像度変換手段、１７は曲線輪郭点検出手段、１８は総合曲線検出手段である。以上のように構成された白線検出方法について、以下、その動作を述べる。
【００２５】
基本的動作としては、まず、道路画像撮影手段１１から車両前方の道路画像を入力する。その入力した道路画像データを一旦画像データメモリ手段１２に記憶する。輪郭点抽出手段１３において、前記画像データメモリ手段１２に記憶している道路画像データを使用してエッジを求めその画像全体のエッジ強度の大きさから閾値を設定し、画像底部から上方に向けて画像の中心から左右方向に前記閾値を越えるエッジ強度を見つけ、それを道路の左右の白線の輪郭点とする。図６に示すように区分曲線検出手段１４で画像を縦方向にｎ等分し、前記輪郭点を使用してその分割区間内の曲線をスプライン補間式を使用して求める。区分曲線記憶手段１５で前記区分曲線検出手段１４で求めた曲線の式をメモリしておく。解像度変換手段１６において区分曲線記憶手段１５に記憶されている曲線の式を使用して画像データ上に曲線を描きその画像の解像度を下げる。曲線輪郭点検出手段１７において低解像度の画像から再びエッジ強度を算出し、そのエッジ強度から閾値を算出して道路白線の輪郭点を求める。総合曲線検出手段１８において、画像全体の白線をスプライン補間式を使用して求める。
【００２６】
次に、上述した処理の流れを具体的に図７のフローチャートを用いて説明する。
【００２７】
まず、ステップ１においてカウンタｋを０にする。ステップ２において、画像データメモリ手段にストアされている画像データでＳｏｂｅｌフィルタを使用してエッジ強度を求める。ステップ３において、エッジデータを使用して閾値を次のように計算する。
【００２８】
【数１】
ｔｈ＝０．８×ｍａｘ＋０．２×ｍｅａｎ
ここで、ｔｈは閾値、ｍａｘは画像中のエッジ強度の最大値、ｍｅａｎはエッジ強度の平均値である。ステップ４において、画像底部から上方に向けてエッジ画像の中心から左右方向にこの閾値ｔｈを初めて越える点を検索する。初めてこの閾値を越えた点を左右白線の輪郭点とする。ステップ５において画像を縦方向にｎ等分する。ステップ６において各区間内の輪郭点を使用して次のような区間内の曲線の近似多項式を求める。
【００２９】
【数２】
ｙ＝ａｍｘｍ＋ａｍ−１ｘｍ−１＋．．．＋ａ０
ステップ７において、各区間の曲線の式に基づいて曲線を書き込む。ステップ８においてｓｉｎｃ関数を使用して解像度を下げる。ステップ９において、ｋ＝ｋ＋１を実行する。ステップ１０においてｋがｋｎ以上か確かめる。もし、ｋｎ以下であればステップ１１でｎをｎ／２にしてステップ２に戻る。ｋｎ以上であればステップ１２でステップ２と同様にしてエッジ強度を求める。次に、ステップ１３で閾値を求めて，ステップ１４でステップ４と同様にして輪郭点を求める。ステップ１５で画像全体の左右道路に対応する輪郭点をそれぞれ使用して曲線多項式を求め、これを道路白線の式とする。
【００３０】
このような方法で白線を検出することによって、高速に曲線として検出できる。また、滑らかな曲線として検出できる。
【００３１】
（実施の形態３）
図８は、本発明の別の実施の形態の道路白線検出装置を示し、図８において、２１は道路画像撮影手段、２２は輪郭点抽出手段、２３は地図データベース、２４はＧＰＳ車両位置計算手段、２５は車輪速計測手段、２６はマップマッチング手段、２７は車両位置決定手段、２８は前方道路データ検索手段、２９は道路白線抽出手段である。以上のように構成された道路白線検出装置について、以下、その動作を述べる。
【００３２】
基本的動作としては、まず、道路画像撮影手段２１から車両前方の道路画像を入力する。輪郭点抽出手段２２において、前記道路画像撮影手段２１からの道路画像データを使用してエッジを求めその画像全体のエッジ強度の大きさから閾値を設定し、画像底部から上方に向けて画像の中心から左右方向に前記閾値を越えるエッジ強度を見つけそれを道路の左右の白線の輪郭点とする。さらに、マップマッチング手段２６において地図データベース２３からの地図データと車輪速計測手段２５からの車速パルスによって車両の現在位置を検出している。車両位置決定手段２７では、前記マップマッチング手段２６による車両位置とＧＰＳ車両位置計算手段２４による車両位置データによって正確な車両位置を算出する。前方道路データ検索手段２８では車両位置決定手段２７からの現在車両位置のデータにしたがって地図データベース２３から車両前方の道路形状データを検索する。道路白線抽出手段２９では前記前方道路データ検索手段２８からの道路形状を画像平面の座標に変換して前記輪郭点抽出手段２２からの輪郭点の中から道路白線に対応する輪郭点を選んで、その輪郭点を使用して道路白線を検出する。
【００３３】
次に、上述した処理の流れを具体的に図９のフローチャートを用いて説明する。
【００３４】
まず、ステップ１においてカウンタｋを０にする。ステップ２において、画像データからＳｏｂｅｌフィルタを使用してエッジ強度を求める。ステップ３において、エッジデータを使用して閾値を次のように計算する。
【００３５】
【数１】
ｔｈ＝０．８×ｍａｘ＋０．２×ｍｅａｎ
ここで、ｔｈは閾値、ｍａｘは画像中のエッジ強度の最大値、ｍｅａｎはエッジ強度の平均値である。ステップ４において、画像底部から上方に向けてエッジ画像の中心から左右方向にこの閾値ｔｈを初めて越える点を検索する。初めてこの閾値を越えた点を左右白線の輪郭点とする。ステップ５において、車両の地図上の現在位置（Ｘ，Ｙ）から地図データベースの前方道路データを取り出す。ステップ６において前方道路データを図１０に示す世界座標系（ｘ，ｙ，ｚ）から見た時の画像平面上の線図形に透視変換の式にしたがって変換する。ステップ７においてｋに１を足す。ステップ８において、前記の輪郭点と変換画像の相関をとる。ステップ９において、もしｋがｋ０より小さければ、ステップ１０において地図データベースのデータをｙ軸の周りにθだけ回転した画像を作成し、ステップ７に戻る。もしｋがｋ０よりも大きければ、ステップ１１において相関値の最も大きかった画像を道路の白線とする。
【００３６】
このように白線を検出することで正確に車両前方の白線を検出できる。
【００３７】
（実施の形態４）
図１１は、本発明の他の実施の形態の道路白線検出装置を示し、図１１において４１は道路画像撮影手段、４２は輪郭点抽出手段、４３は道路形状パターン記憶手段、４４は道路白線検出手段である。以上のように構成された道路白線検出装置について、以下、その動作を述べる。
【００３８】
基本的動作としては、まず、道路画像撮影手段４１から車両前方の道路画像を入力する。輪郭点抽出手段４２において、前記道路画像撮影手段４１からの道路画像データを使用してエッジを求めその画像全体のエッジ強度の大きさから閾値を設定し、画像底部から上方に向かって画像の中心から左右方向に前記閾値を越えるエッジ強度を見つけそれを道路の左右の白線の輪郭点とする。一方道路形状パターン記憶手段４３では前記道路画像撮影手段４１の路面からの高さと水平からの伏角から見える各種道路パターンをあらかじめ記憶しておく。道路白線検出手段４４では前記輪郭点抽出手段４２で求めた左右の白線の輪郭点と前記道路形状パターン記憶手段４３に記憶している道路形状パターンの相関値を計算し、最も相関の高いものを車両前方の道路形状と判断する。
【００３９】
（実施の形態５）
図１２は、本発明の一実施の形態にかかる道路曲率半径算出装置を示し、図１２において、５１は道路画像撮影手段、５２は輪郭点抽出手段、５３は接線算出手段、５４は座標変換手段、５５は曲率半径算出手段である。以上のように構成された道路曲率半径算出装置について、以下、その動作を述べる。
【００４０】
基本的動作としては、まず、道路画像撮影手段５１から車両前方の道路画像を入力する。輪郭点抽出手段５２において、前記道路画像撮影手段５１からの道路画像データを使用してエッジを求めその画像全体のエッジ強度の大きさから閾値を設定し、画像底部から上方に向かって画像の中心から左右方向に前記閾値を越えるエッジ強度を見つけそれを道路の左右の白線の輪郭点とする。接線算出手段５３において前記輪郭点を使用して、世界座標系の直線距離でＬ離れた２点での接線を求める。接線は２点のそれぞれの近傍ｎ個を用いて直線を検出するハフ変換を使用して求める。次に座標変換手段５４において、透視変換を使用して前記２本の接線を世界座標系に変換する。曲率半径算出手段５５において、図１３に示すように２つの接線が成す角αを求める。∠ＡＯＣ＝∠ＢＯＣ＝α／２なので、
【００４１】
【数３】
Ｒ＝ＡＣ／ｔａｎ（α／２）
ここで
ＡＣ≒Ｌ／２ として
Ｒ＝Ｌ／２ｔａｎ（α／２）
このように道路曲率半径算出方法では、簡単な方式によって精度の高い曲率半径を求めることができる。
【００４２】
（実施の形態６）
図１４は、本発明の一実施の形態のナビゲーション装置を示し、図１４において、６１は道路画像撮影手段、６２は輪郭点抽出手段、６３は白線検出手段、６４は地図データベース、６５はＧＰＳ車両位置計算手段、６６は道路状態検出手段、６７は道路状態記憶手段、６８は表示手段である。以上のように構成されたナビゲーション装置について、以下、その動作を述べる。
【００４３】
基本的動作として、まず、道路画像撮影手段６１から車両前方の道路画像を入力する。輪郭点抽出手段６２において、前記道路画像撮影手段６１からの道路画像データを使用してエッジを求めその画像全体のエッジ強度の大きさから閾値を設定し、画像底部から上方に向かって画像の中心から左右に前記閾値を越えるエッジ強度を見つけそれを道路の白線の輪郭点とする。白線検出手段６３において前記輪郭点からハフ変換を使用して直線としてすべての白線を検出する。検出白線を使用して道路状態検出手段６６において道路の車線を求める。また、走行している車線の左右検出白線間の幅から走行車線の世界座標系における幅を求める。一方、道路状態記憶手段６７において、ＧＰＳ車両位置計算手段６５からの車両の現在位置情報を使用して前記道路状態検出手段６６からの車線数と車線幅を地図データベース６４の地図情報に基づいて記憶する。表示手段６８ではＧＰＳ車両位置計算手段６５からの車両の現在位置情報に基づいて地図データベース６４からの地図情報を表示するとともに、地図情報に関連して記憶し、目的地までの車線数や車線幅を表示する。
【００４４】
一度走行した道路の車線数や車線幅を地図に関連づけて記憶することにより、再度同じ道路を走行する場合、事前に道路情報を得ることができる。
【００４５】
（実施の形態７）
図１５は、本発明の他の実施の形態のナビゲーション装置を示し、図１５において、７１は道路画像撮影手段、７２は輪郭点抽出手段、７３は白線検出手段、７４は道路状態検出手段、７５は地図データベース、７６は目的地入力手段、７７は走行経路決定手段、７８はＧＰＳ車両位置計算手段、７９は誘導手段、７０は情報指示手段である。以上のように構成されたナビゲーション装置について、以下、その動作を述べる。
【００４６】
基本的動作としては、まず、道路画像撮影手段７１から車両前方の道路画像を入力する。輪郭点抽出手段７２において、前記道路画像撮影手段７１からの道路画像データを使用してエッジを求めその画像全体のエッジ強度の大きさから閾値を設定し、画像底部から上方に向かって画像の中心から左右方向に前記閾値を越えるエッジ強度を見つけそれを道路の白線の輪郭点とする。白線検出手段７３において前記輪郭点からハフ変換を使用して直線としてすべての白線を検出する。検出白線を使用して道路状態検出手段７４において道路の車線数および走行車線の位置を求める。地図データベース７５の地図情報と目的地入力手段７６の運転者が入力した目的地から走行ルートを走行経路決定手段７７で求める。誘導手段７９においてＧＰＳ車両位置計算手段７８からの車両位置情報と、それによる地図データベースからの地図情報と走行経路決定手段７７からの目的地までの走行ルートとを使用して、走行すべき車線を決定し、道路状態検出手段７４において求めた走行車線および走行車線の位置を用いて車線変更情報を作成する。情報指示手段７０によって車線変更情報を運転者に知らせる。
【００４７】
画像撮影手段による道路画像から走行車線の位置を認識することで、経路誘導のための具体的な情報を運転者に提供することができる。
【００４８】
なお、本発明の各手段は、コンピュータを用いてソフトウェア的に実現し、あるいはそれら各機能を有する専用のハード回路を用いて実現する事が出来る。
【００４９】
【発明の効果】
以上述べたところから明らかなように、本発明によれば、道路白線検出装置は、高速にそして正確に滑らかな曲線として白線を検出できる。
【図面の簡単な説明】
【図１】本発明の一実施の形態による道路白線検出装置を示すブロック図
【図２】図１の実施の形態において、輪郭点を使用して求めた多項式曲線の一例を示す図
【図３】図１の実施の形態において、ハフ空間に多項式の係数に対応した点を配置した図
【図４】図１の実施の形態において、道路白線検出の処理フローの図
【図５】本発明の一実施の形態による道路白線検出装置を示すブロック図
【図６】図５の実施の形態において、区分区間で求めた曲線の一例を示す図
【図７】図５の実施の形態における道路白線検出の処理フローの図
【図８】本発明の一実施の形態による道路白線検出装置を示すブロック図
【図９】図８の実施の形態における道路白線検出の処理フローの図
【図１０】世界座標系を示す図
【図１１】本発明の一実施の形態による道路白線検出装置を示すブロック図
【図１２】本発明の一実施の形態による道路曲率半径計算装置を示すブロック図
【図１３】図１２の実施の形態における曲率半径算出方法を示す図
【図１４】本発明の一実施の形態によるナビゲーション装置を示すブロック図
【図１５】本発明の一実施の形態によるナビゲーション装置を示すブロック図
【図１６】従来の道路白線検出装置のブロック図
【図１７】従来の道路曲率半径計算装置のブロック図
【符号の説明】
１、１１、２１、４１、１５、６１、７１ 道路画像撮影手段
２、１２ 画像データメモリ手段
３、１３、２２、４２、５２、６２、７２ 輪郭点抽出手段
４ 曲線検出手段
５ ハフ変換限定手段
６ ハフ変換手段
７ ハフ変換曲線検出手段
１４ 区分曲線検出手段
１５ 区分曲線記憶手段
１６ 解像度変換手段
１７ 曲線輪郭点検出手段
１８ 総合曲線検出手段
２３、６４、７５ 地図データベース
２４、６５、７８ ＧＰＳ車両位置計算手段
２５ 車輪速度計測手段
２６ マップマッチング手段
２７ 車両位置決定手段
２８ 前方道路データ検索手段
２９ 道路白線抽出手段
４３ 道路形状パターン記憶手段
４４ 道路白線検出手段
５３ 接線算出手段
５４ 座標変換手段
５５ 曲率半径算出手段
６３、７３ 白線検出手段
６６、７４ 道路状態検出手段
６７ 道路状態記憶手段
６８ 表示手段
７０ 情報指示手段
７６ 目的地入力手段
７７ 走行経路決定手段
７９ 誘導手段

Claims (3)

  1. 車両前方の道路を撮影する道路画像撮影手段と、前記道路画像撮影手段からの道路画像データをストアする画像データメモリ手段と、前記画像データメモリ手段にストアされている道路画像データを使用して道路白線に対応する輪郭点を抽出する輪郭点抽出手段と、前記輪郭点抽出手段からの道路白線に対応した輪郭点を使用して多項式曲線を算出する曲線検出手段と、前記曲線検出手段からの道路白線に対応した輪郭点全部を使用して算出した多項式曲線を使用してハフ変換を行う際のハフ空間上の領域を限定するハフ変換限定手段と、前記曲線検出手段からの道路白線に対応した輪郭点のうち複数個を使用して算出した多項式曲線と前記ハフ変換限定手段により限定されたハフ変換領域を使用してハフ変換を行なうハフ変換手段と、アキュミュレータのうち極大点のものを求め対応する曲線を検出するハフ変換曲線検出手段とを備えたことを特徴とする、道路白線検出装置。
  2. 曲線検出手段において、道路白線に対応した輪郭点のうち複数個を使用して複数のスプライン曲線を算出し、前記ハフ変換手段において前記曲線検出手段で求めた複数の曲線の係数を使用して前記ハフ変換限定手段で限定されたハフ空間の曲線係数に対応するアキュミュレータ配列に一定の数値を加えることを特徴とする請求項１記載の道路白線検出装置。
  3. 車両前方の道路を撮影する道路画像撮影手段と、前記道路画像撮影手段からの道路画像データをストアする画像データメモリ手段と、前記画像データメモリ手段にストアされている道路画像データを使用して道路白線に対応する輪郭点を抽出する輪郭点抽出手段と、前記輪郭点抽出手段からの道路白線に対応した輪郭点を使用し画像の縦方向に区分した輪郭点から各区分の多項式曲線を算出する区分曲線検出手段と、前記区分曲線検出手段において求めた曲線を記憶する区分曲線記憶手段と、前記区分曲線記憶手段に記憶された曲線を画像上に描きその画像の解像度を下げる解像度変換手段と、前記解像度変換手段からの画像を使用して再度輪郭点を求める曲線輪郭点検出手段と、前記曲線輪郭点検出手段からの輪郭点を使用して再度多項式曲線を求める総合曲線検出手段とを備え、高精細度の画像データから道路白線に対応する曲線を求め、さらにその画像を低解像度の画像にしてさらに滑らかな曲線を検出する道路白線検出装置。
JP13319196A 1996-05-28 1996-05-28 道路白線検出装置 Expired - Fee Related JP3556766B2 (ja)

Priority Applications (10)

Application Number Priority Date Filing Date Title
JP13319196A JP3556766B2 (ja) 1996-05-28 1996-05-28 道路白線検出装置
EP01104214A EP1143397B1 (en) 1996-05-28 1997-05-27 Lane detection sensor and navigation system employing the same
EP97108509A EP0810569B1 (en) 1996-05-28 1997-05-27 Lane detection sensor and navigation system employing the same
EP01104215A EP1143398A3 (en) 1996-05-28 1997-05-27 Lane detection sensor and navigation system employing the same
KR1019970020916A KR100257592B1 (ko) 1996-05-28 1997-05-27 차선검출센서 및 이를 이용한 항법장치
EP01104213A EP1143396B1 (en) 1996-05-28 1997-05-27 Lane detection sensor and navigation system employing the same
DE69734477T DE69734477T2 (de) 1996-05-28 1997-05-27 Fahrbahnsensor und Navigationssystem, das diesen Sensor verwendet
DE69734736T DE69734736T2 (de) 1996-05-28 1997-05-27 Fahrbahnsensor und Navigationssystem, das diesen Sensor verwendet
DE69705994T DE69705994T2 (de) 1996-05-28 1997-05-27 Fahrbahnsensor und Navigationssystem, das diesen Sensor verwendet
US08/864,428 US5922036A (en) 1996-05-28 1997-05-28 Lane detection sensor and navigation system employing the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP13319196A JP3556766B2 (ja) 1996-05-28 1996-05-28 道路白線検出装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2004115722A Division JP3856798B2 (ja) 2004-04-09 2004-04-09 ナビゲーション装置

Publications (2)

Publication Number Publication Date
JPH09319872A JPH09319872A (ja) 1997-12-12
JP3556766B2 true JP3556766B2 (ja) 2004-08-25

Family

ID=15098840

Family Applications (1)

Application Number Title Priority Date Filing Date
JP13319196A Expired - Fee Related JP3556766B2 (ja) 1996-05-28 1996-05-28 道路白線検出装置

Country Status (5)

Country Link
US (1) US5922036A (ja)
EP (4) EP1143398A3 (ja)
JP (1) JP3556766B2 (ja)
KR (1) KR100257592B1 (ja)
DE (3) DE69734736T2 (ja)

Families Citing this family (88)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5877897A (en) 1993-02-26 1999-03-02 Donnelly Corporation Automatic rearview mirror, vehicle lighting control and vehicle interior monitoring system using a photosensor array
US6822563B2 (en) 1997-09-22 2004-11-23 Donnelly Corporation Vehicle imaging system with accessory control
US7655894B2 (en) 1996-03-25 2010-02-02 Donnelly Corporation Vehicular image sensing system
US6047234A (en) 1997-10-16 2000-04-04 Navigation Technologies Corporation System and method for updating, enhancing or refining a geographic database using feedback
FR2770672B1 (fr) * 1997-11-04 2000-01-21 Inst Nat Rech Inf Automat Procede et dispositif de localisation et de guidage d'un mobile muni d'une camera lineaire
JP2986439B2 (ja) * 1998-01-12 1999-12-06 松下電器産業株式会社 車両用画像処理装置
GB9804112D0 (en) * 1998-02-27 1998-04-22 Lucas Ind Plc Road profile prediction
JPH11328408A (ja) * 1998-05-12 1999-11-30 Advantest Corp データ処理装置および方法、情報記憶媒体
JP3102478B2 (ja) * 1998-08-17 2000-10-23 日本電気株式会社 線状マーク検出方法および装置
JP3580475B2 (ja) * 1998-09-14 2004-10-20 矢崎総業株式会社 周辺監視装置
US6226592B1 (en) * 1999-03-22 2001-05-01 Veridian Erim International, Inc. Method and apparatus for prompting a motor vehicle operator to remain within a lane
KR100330034B1 (ko) * 2000-03-31 2002-03-27 곽정소 차선표시장치
JP3795299B2 (ja) * 2000-04-07 2006-07-12 本田技研工業株式会社 車両制御装置
JP3521860B2 (ja) * 2000-10-02 2004-04-26 日産自動車株式会社 車両の走行路認識装置
US7035434B2 (en) * 2000-12-11 2006-04-25 Texas Instruments Incorporated Hough transform based motion detection image recording system and method
DE10065593A1 (de) * 2000-12-28 2002-07-04 Bosch Gmbh Robert Verfahren und Vorrichtung zum Erzeugen von Straßenabschnittdaten für eine digitale Landkarte
JP3635244B2 (ja) * 2001-05-16 2005-04-06 富士通テン株式会社 カーブｒ補正方法及びその装置
US7007011B1 (en) * 2001-10-03 2006-02-28 Navteq North America, Llc Method for representing the vertical component of road geometry and computing grade or slope
JP4016735B2 (ja) * 2001-11-30 2007-12-05 株式会社日立製作所 レーンマーク認識方法
AU2003225228A1 (en) 2002-05-03 2003-11-17 Donnelly Corporation Object detection system for vehicle
DE10226481A1 (de) * 2002-06-14 2004-01-15 Bayerische Motoren Werke Ag System zur Erkennung eines Spurwechsels
KR20040001979A (ko) * 2002-06-29 2004-01-07 현대자동차주식회사 차량용 네비게이션 시스템의 가변 차선 경고 제어장치 및방법
JP3958133B2 (ja) * 2002-07-12 2007-08-15 アルパイン株式会社 車両位置測定装置および方法
FR2848935B1 (fr) * 2002-12-20 2005-04-29 Valeo Vision Procede de detection de virages sur une route et systeme de mise en oeuvre
DE10327869A1 (de) * 2003-06-18 2005-01-13 Siemens Ag Navigationssystem mit Fahrspurhinweisen
JP3936683B2 (ja) * 2003-08-04 2007-06-27 株式会社デンソー 道路位置検出装置及びプログラム
US7482916B2 (en) 2004-03-15 2009-01-27 Anita Au Automatic signaling systems for vehicles
DE102004013440A1 (de) * 2004-03-18 2005-10-06 Siemens Ag Verfahren und Vorrichtung zur Präzisierung der Fahranweisungen eines Navigationssystems
US7526103B2 (en) 2004-04-15 2009-04-28 Donnelly Corporation Imaging system for vehicle
JP4703136B2 (ja) 2004-06-02 2011-06-15 トヨタ自動車株式会社 線図形化処理装置
US7881496B2 (en) 2004-09-30 2011-02-01 Donnelly Corporation Vision system for vehicle
JP2006217447A (ja) * 2005-02-07 2006-08-17 Yazaki Corp 車両用表示装置
JP4392389B2 (ja) 2005-06-27 2009-12-24 本田技研工業株式会社 車両及び車線認識装置
US7266438B2 (en) * 2005-08-26 2007-09-04 Gm Global Technology Operations, Inc. Method of assisting driver to negotiate a roadway
JP4607193B2 (ja) * 2005-12-28 2011-01-05 本田技研工業株式会社 車両及びレーンマーク検出装置
US8676492B2 (en) * 2006-01-19 2014-03-18 GM Global Technology Operations LLC Map-aided vision-based lane sensing
JP4793094B2 (ja) * 2006-05-17 2011-10-12 株式会社デンソー 走行環境認識装置
WO2008024639A2 (en) 2006-08-11 2008-02-28 Donnelly Corporation Automatic headlamp control system
JP4222411B2 (ja) * 2006-11-08 2009-02-12 日本電気株式会社 消失点検出システム、消失点検出方法および消失点検出用プログラム
US8565984B2 (en) * 2007-03-16 2013-10-22 Deere & Comany System and method of steering for a work vehicle towing a towed implement on lateral slopes
JP4824635B2 (ja) * 2007-06-15 2011-11-30 株式会社 ソキア・トプコン ロータリエンコーダの角度補正方法
JP4506790B2 (ja) 2007-07-05 2010-07-21 アイシン・エィ・ダブリュ株式会社 道路情報生成装置、道路情報生成方法および道路情報生成プログラム
JP4462333B2 (ja) * 2007-11-13 2010-05-12 株式会社デンソー 走行支援装置
EP2210233A1 (en) * 2007-11-16 2010-07-28 Tele Atlas B.V. Method of and apparatus for producing lane information
JP5028662B2 (ja) * 2007-12-05 2012-09-19 振程 胡 道路白線検出方法、道路白線検出プログラムおよび道路白線検出装置
US8306270B2 (en) * 2008-03-21 2012-11-06 Honda Motor Co., Ltd. Vehicle travel support device, vehicle, vehicle travel support program
US8311283B2 (en) * 2008-07-06 2012-11-13 Automotive Research&Testing Center Method for detecting lane departure and apparatus thereof
KR100975749B1 (ko) 2008-09-24 2010-08-12 금오공과대학교 산학협력단 단일 차선을 이용한 차선 인식 및 차량의 차선 이탈 검출 방법
KR101018033B1 (ko) 2009-01-20 2011-03-02 (주)아이머큐리 차선 이탈 경보 방법 및 시스템
KR101044728B1 (ko) 2009-09-15 2011-06-28 에스엘 주식회사 차선 이탈 경고 시스템 및 방법
RU2569012C2 (ru) * 2010-02-04 2015-11-20 Конинклейке Филипс Электроникс Н.В. Устройство определения местоположения объекта
JP5220787B2 (ja) * 2010-03-08 2013-06-26 株式会社日本自動車部品総合研究所 車載白線認識装置
DE102010020984A1 (de) * 2010-04-20 2011-10-20 Conti Temic Microelectronic Gmbh Verfahren zur Bestimmung des Fahrbahnverlaufes für ein Kraftfahrzeug
CN101984478B (zh) * 2010-08-03 2012-08-08 浙江大学 基于双目视觉车道线检测的非正常s型驾驶预警方法
US9077958B2 (en) 2010-08-30 2015-07-07 Honda Motor Co., Ltd. Road departure warning system
CN103348393B (zh) * 2010-11-04 2015-08-19 丰田自动车株式会社 道路形状推定装置及其推定方法
DE102011010377A1 (de) * 2011-02-04 2012-08-09 GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) Verfahren zum Betreiben eines Kraftfahrzeugs und Kraftfahrzeug
CN103177236B (zh) * 2011-12-22 2016-06-01 株式会社理光 道路区域检测方法和装置、分道线检测方法和装置
US20130202155A1 (en) * 2012-02-03 2013-08-08 Gopal Gudhur Karanam Low-cost lane marker detection
US10457209B2 (en) 2012-02-22 2019-10-29 Magna Electronics Inc. Vehicle vision system with multi-paned view
JP5746996B2 (ja) * 2012-03-21 2015-07-08 日立オートモティブシステムズ株式会社 道路環境認識装置
US20130253753A1 (en) * 2012-03-23 2013-09-26 Google Inc. Detecting lane markings
SE538984C2 (sv) * 2013-07-18 2017-03-14 Scania Cv Ab Fastställande av körfältsposition
JP5892129B2 (ja) * 2013-08-29 2016-03-23 株式会社デンソー 道路形状認識方法、道路形状認識装置、プログラムおよび記録媒体
US9170581B2 (en) 2013-09-30 2015-10-27 Crown Equipment Limited Industrial vehicles with overhead light based localization
KR101620425B1 (ko) * 2014-06-20 2016-05-13 주식회사 세인전장 주변 환경 정보를 이용한 차선 인식 시스템 및 그 방법
US9174830B1 (en) 2014-09-29 2015-11-03 Crown Equipment Limited Industrial vehicles with point fix based localization
CN104392212B (zh) * 2014-11-14 2017-09-01 北京工业大学 一种基于视觉的道路信息检测及前方车辆识别方法
CN104915647B (zh) * 2015-06-02 2018-08-03 长安大学 一种高速公路前方车辆的检测方法
CN105718870B (zh) * 2016-01-15 2019-06-14 武汉光庭科技有限公司 自动驾驶中基于前向摄像头的道路标线提取方法
TW201727417A (zh) * 2016-01-26 2017-08-01 鴻海精密工業股份有限公司 分析路面曲度並結合資料記錄的自動行走建議系統及方法
JP6424845B2 (ja) * 2016-02-03 2018-11-21 株式会社デンソー 位置補正装置、ナビゲーションシステム、及び自動運転システム
CN105809149A (zh) * 2016-03-31 2016-07-27 电子科技大学 基于最大长度直线的车道线检测方法
KR102338880B1 (ko) * 2017-07-27 2021-12-14 한국단자공업 주식회사 영상처리를 통한 맵 매칭 피드백 신뢰도 검증 장치 및 방법
JP6916705B2 (ja) * 2017-09-28 2021-08-11 株式会社Ｓｕｂａｒｕ 自動運転の自車位置検出装置
WO2019107536A1 (ja) * 2017-11-30 2019-06-06 三菱電機株式会社 三次元地図生成システム、三次元地図生成方法および三次元地図生成プログラム
TWI641516B (zh) 2018-03-06 2018-11-21 國立交通大學 車道線偵測方法
KR102236792B1 (ko) * 2018-09-04 2021-04-06 네이버랩스 주식회사 카메라 기반의 차선 변경 가능 시점을 학습하는 방법 및 시스템, 그리고 차선 변경 가능 시점을 예측하는 방법 및 시스템
KR102383566B1 (ko) * 2018-09-04 2022-04-08 네이버랩스 주식회사 카메라 기반의 차선 변경 가능 시점을 학습하는 방법 및 시스템, 그리고 차선 변경 가능 시점을 예측하는 방법 및 시스템
EP3716138A1 (en) * 2019-03-29 2020-09-30 Zenuity AB Road boundary determination
KR102189299B1 (ko) * 2019-09-11 2020-12-11 한국도로공사 차량 번호판 인식 기반의 차로 검출 장치 및 방법
KR102250800B1 (ko) * 2019-09-11 2021-05-11 한국도로공사 노면 객체 인식 기반의 차로 검출 장치 및 방법
CN110645996B (zh) * 2019-09-17 2021-07-16 武汉中海庭数据技术有限公司 一种感知数据的提取方法及系统
DE102019216399A1 (de) * 2019-10-24 2021-04-29 Robert Bosch Gmbh Verfahren und Vorrichtung zum Kalibrieren eines Fahrzeugsensors
DE102019008368A1 (de) 2019-12-02 2021-06-02 Daimler Ag Verfahren zum Betrieb eines Fahrzeugs und Vorrichtung zur Durchführung des Verfahrens
US11560131B2 (en) * 2020-01-13 2023-01-24 Nio Technology (Anhui) Co., Ltd. Lane prediction and smoothing for extended motion planning horizon
CN113701773B (zh) * 2021-08-16 2023-07-18 深蓝汽车科技有限公司 基于车道线方程的arhud导航弯道指示方法及系统
US20230071794A1 (en) * 2021-09-08 2023-03-09 KAIST (Korea Advanced Institute of Science and Technology) Method and system for building lane-level map by using 3D point cloud map

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3532527A1 (de) * 1985-09-12 1987-03-19 Robot Foto Electr Kg Vorrichtung zur photographischen ueberwachung von kreuzungen
EP0341985B1 (en) * 1988-05-09 1995-07-05 Honda Giken Kogyo Kabushiki Kaisha Picture processing device
DE68925091T2 (de) * 1988-09-28 1996-05-09 Honda Motor Co Ltd Verfahren und Vorrichtung zur Einschätzung des Fahrweges
US4970653A (en) * 1989-04-06 1990-11-13 General Motors Corporation Vision method of detecting lane boundaries and obstacles
JP2754871B2 (ja) * 1990-06-01 1998-05-20 日産自動車株式会社 走行路検出装置
JP2671615B2 (ja) * 1991-02-18 1997-10-29 三菱電機株式会社 ガードレール検出装置
US5274718A (en) * 1991-09-30 1993-12-28 At&T Bell Laboratories Image representation using tree-like structures
US5351044A (en) * 1992-08-12 1994-09-27 Rockwell International Corporation Vehicle lane position detection system
JPH06213660A (ja) * 1993-01-19 1994-08-05 Aisin Seiki Co Ltd 像の近似直線の検出方法
JP3374570B2 (ja) * 1995-01-31 2003-02-04 いすゞ自動車株式会社 車線逸脱警報装置
JP3169483B2 (ja) * 1993-06-25 2001-05-28 富士通株式会社 道路環境認識装置
JPH0719893A (ja) * 1993-07-05 1995-01-20 Toyota Motor Corp 道路曲率検出装置
JPH0785249A (ja) * 1993-09-16 1995-03-31 Mitsubishi Motors Corp 道路白線認識方法
JP3345995B2 (ja) * 1993-11-12 2002-11-18 トヨタ自動車株式会社 道路白線検出装置
EP0673010B1 (en) * 1994-03-18 2003-06-04 Aisin Aw Co., Ltd. Guide system
JP3400088B2 (ja) * 1994-05-13 2003-04-28 マツダ株式会社 自動車の走行路推定装置
JP3357749B2 (ja) * 1994-07-12 2002-12-16 本田技研工業株式会社 車両の走行路画像処理装置
JPH08205306A (ja) * 1995-01-27 1996-08-09 Fuji Heavy Ind Ltd 車両の警報装置
US5642093A (en) * 1995-01-27 1997-06-24 Fuji Jukogyo Kabushiki Kaisha Warning system for vehicle
US5675489A (en) * 1995-07-06 1997-10-07 Carnegie Mellon University System and method for estimating lateral position

Also Published As

Publication number Publication date
US5922036A (en) 1999-07-13
EP1143396A2 (en) 2001-10-10
DE69705994D1 (de) 2001-09-13
DE69734477T2 (de) 2006-07-20
DE69734477D1 (de) 2005-12-01
DE69705994T2 (de) 2002-04-04
EP1143396A3 (en) 2003-11-05
EP1143398A3 (en) 2003-10-29
EP1143397B1 (en) 2005-10-26
DE69734736D1 (de) 2005-12-29
KR100257592B1 (ko) 2000-06-01
KR970076404A (ko) 1997-12-12
EP1143398A2 (en) 2001-10-10
EP0810569A1 (en) 1997-12-03
JPH09319872A (ja) 1997-12-12
DE69734736T2 (de) 2006-07-06
EP0810569B1 (en) 2001-08-08
EP1143396B1 (en) 2005-11-23
EP1143397A2 (en) 2001-10-10
EP1143397A3 (en) 2003-10-29

Similar Documents

Publication Publication Date Title
JP3556766B2 (ja) 道路白線検出装置
JP4297501B2 (ja) 移動体周辺監視装置
JP4328692B2 (ja) 物体検出装置
US6249214B1 (en) Image processing apparatus, image processing method, navigation apparatus, program storage device and computer data signal embodied in carrier wave
US6661449B1 (en) Object recognizing apparatus for vehicle and the method thereof
US6753902B1 (en) Image processing apparatus, image processing method, navigation apparatus, program storage device and computer data signal embodied in carrier wave
JP3986360B2 (ja) カメラ校正装置
JP2005136946A (ja) 路上走行車両用のカメラ式位置認識装置および方法
KR101100827B1 (ko) 도로주행 로봇의 자기 위치 인식방법
JPH10283462A (ja) 車外監視装置
WO2019031137A1 (ja) 路側物検出装置、路側物検出方法及び路側物検出システム
JP2018048949A (ja) 物体識別装置
JP2007309799A (ja) 車載測距装置
JP3856798B2 (ja) ナビゲーション装置
JP2002334330A (ja) 車両認識装置
JP2006053754A (ja) 平面検出装置及び検出方法
JPH07296291A (ja) 車両用走行路検出装置
JP5055691B2 (ja) 前方物体検出装置及び前方物体検出方法
JPH06162398A (ja) 車線検出装置と車線逸脱警報装置と衝突警報装置
JP4270386B2 (ja) 移動体移動量算出装置
KR101980509B1 (ko) 차간 거리 추정 방법 및 차간 거리 추정 장치
JP3945919B2 (ja) 走行路検出装置、車両走行制御装置および記録媒体
JP7344744B2 (ja) 路側端検出方法、及び、路側端検出装置
JP3114544B2 (ja) 走行路計測法
JPH06225308A (ja) 走行路検出装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20040129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040409

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040513

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090521

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees