KR101491314B1 - 레이저 스캐너를 이용한 장애물 인식 장치 및 방법 - Google Patents
레이저 스캐너를 이용한 장애물 인식 장치 및 방법 Download PDFInfo
- Publication number
- KR101491314B1 KR101491314B1 KR20130108446A KR20130108446A KR101491314B1 KR 101491314 B1 KR101491314 B1 KR 101491314B1 KR 20130108446 A KR20130108446 A KR 20130108446A KR 20130108446 A KR20130108446 A KR 20130108446A KR 101491314 B1 KR101491314 B1 KR 101491314B1
- Authority
- KR
- South Korea
- Prior art keywords
- data
- obstacle
- laser scanner
- measurement data
- layer
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/86—Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4817—Constructional features, e.g. arrangements of optical elements relating to scanning
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Electromagnetism (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Traffic Control Systems (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
본 발명은 레이저 스캐너를 이용한 장애물 인식 장치 및 방법에 관한 것으로, 이동체의 전방에 설치되어 복수개의 레이어로 구성된 레이저 스캐너 데이터를 실시간으로 획득하는 레이저 스캐너, 이동체의 전방에 설치되어 영상데이터를 획득하는 카메라, 레이저 스캐너에서 획득된 제1 레이저 스캐너 데이터와 제2 레이저 스캐너 데이터를 각각 복수개의 레이어로 분리하여 레이어마다 존재하는 계측데이터를 추출하고 계측데이터를 레이어별로 비교하여 이동체의 전방에 장애물의 유무를 확인하는 제어부, 제어부의 제어에 의해 장애물의 유무에 따른 레이저 스캐너 데이터와 영상데이터를 결합하여 출력하는 출력부를 포함한다.
Description
본 발명은 레이저 스캐너를 이용한 장애물 인식 장치 및 방법에 관한 것으로서, 보다 구체적으로 멀티 레이어 레이저 스캐너로부터 획득된 레이저 스캐너 데이터를 구성하는 복수개의 레이어를 분리하고, 각 레이어에 존재하는 데이터로 차량 전방의 장애물 유무를 확인하는 레이저 스캐너를 이용한 장애물 인식 장치 및 방법에 관한 것이다.
차량에 장착되어 길 안내 및 장애물 안내 등의 서비스를 제공하는 네비게이션(Navigation)이 보편화되면서 자차를 제외한 차량, 보행자 등의 장애물을 인식하는 알고리즘의 지속적인 연구가 진행되고 있다.
이를 위해, 차량에는 레이더 센서, 레이저 스캐너, 영상 센서, 초음파 센서 등의 센서가 장착되고, 각 센서마다 장단점이 존재하기 때문에 두 개 이상의 센서를 사용하여 각 센서의 단점을 보완하는 센서 융합 기술도 덩달아 발전하고 있다.
이 중에서도 레이저 스캐너는 다른 센서들보다 정확한 거리 정보와 각도 정보를 제공한다는 점에서 활용도가 높은 장점이 있지만, 레이저 스캐너에서 획득된 레이저 스캐너 데이터를 장애물 단위로 분리하는 것이 어렵고, 레이저 스캐너 데이터에서는 각도와 거리 정보만을 획득할 수 있기 때문에 레이저 스캐너 데이터를 기반으로 차량, 보행자 등의 장애물을 분류하기가 어려운 문제점이 발생한다. 또한, 레이저 스캐너는 장착된 높이에서 2차원 레이저 스캐너 데이터만을 획득하기 때문에 바닥과 같이 장애물이 아닌 경우에도 레이저 스캐너 데이터에 노이즈가 존재하여 장애물로 인식되기도 한다. 아울러, 레이저 스캐너는 빛을 이용한 센서이기 때문에 주변 조도에 따라 장애물이 없는 공간에서도 레이저 스캐너 데이터에 노이즈가 존재하여 장애물로 인식되는 경우가 발생하기도 한다.
이러한 종래의 문제점들을 해결하기 위한 본 발명의 목적은 멀티 레이어 레이저 스캐너로부터 획득된 레이저 스캐너 데이터를 구성하는 복수개의 레이어를 분리하여 각 레이어에 존재하는 계측데이터를 장애물 단위로 분리하는 장애물 인식 장치 및 방법을 제공하는 것이다.
본 발명의 다른 목적은 멀티 레이어 레이저 스캐너로부터 획득된 레이저 스캐너 데이터를 구성하는 복수개의 레이어를 분리하여 각 레이어에 존재하는 계측데이터를 확인하여 차량 전방의 장애물 유무, 장애물의 정확한 위치, 크기 및 종류를 확인하는 레이저 스캐너를 이용한 장애물 인식 장치 및 방법을 제공하는 것이다.
이러한 목적들을 달성하기 위하여 본 발명에 따른 레이저 스캐너를 이용한 장애물 인식 장치는 이동체의 전방에 설치되어 복수개의 레이어로 구성된 레이저 스캐너 데이터를 실시간으로 획득하는 레이저 스캐너, 상기 이동체의 전방에 설치되어 영상데이터를 획득하는 카메라, 상기 레이저 스캐너에서 획득된 제1 레이저 스캐너 데이터와 제2 레이저 스캐너 데이터를 각각 복수개의 레이어로 분리하여 레이어마다 존재하는 계측데이터를 추출하고 상기 계측데이터를 상기 레이어별로 비교하여 상기 이동체의 전방에 장애물의 유무를 확인하는 제어부, 상기 제어부의 제어에 의해 상기 장애물의 유무에 따른 상기 레이저 스캐너 데이터와 상기 영상데이터를 결합하여 출력하는 출력부를 포함하는 것을 특징으로 한다.
또한, 상기 제어부는 상기 계측데이터를 레이어별로 비교하여 상기 계측데이터가 일정조건을 만족하면 상기 이동체의 전방에 장애물이 존재하지 않는 것으로 확인하는 것을 특징으로 한다.
또한, 상기 제어부는 상기 제1 레이저 스캐너 데이터와 상기 제2 레이저 스캐너 데이터의 동일한 계층 레이어에 상기 계측데이터가 연속적으로 관측되고, 상기 계측데이터가 상기 이동체를 기준으로 임계반경 이내에 존재하면 상기 계측데이터를 장애물이 아닌 것으로 인지하는 것을 특징으로 한다.
또한, 상기 제어부는 상기 계측데이터가 장애물이 아닌 것으로 인지하면, 상기 제1 레이저 스캐너 데이터 및 상기 제2 레이저 스캐너 데이터에서 상기 계측데이터를 삭제하는 것을 특징으로 한다.
또한, 상기 제어부는 상기 계측데이터를 장애물로 인지하면, 상기 장애물의 위치, 상기 장애물의 크기 및 상기 장애물의 종류를 포함하는 장애물 정보를 확인하는 것을 특징으로 한다.
또한, 상기 출력부는 상기 제어부의 제어에 따라 상기 장애물이 존재하지 않으면 상기 영상데이터를 출력하고, 상기 장애물이 존재하면 상기 영상데이터와 상기 확인된 장애물 정보를 결합하여 출력하는 것을 특징으로 한다.
삭제
아울러, 본 발명에 따른 레이저 스캐너를 이용한 장애물 인식 방법은 제어부가 이동체의 전방에 설치된 레이저 스캐너로부터 복수개의 레이어로 구성된 레이저 스캐너 데이터를 실시간으로 제공받는 단계, 상기 제어부가 상기 레이저 스캐너로부터 제공된 제1 레이저 스캐너 데이터를 복수개의 레이어로 분리하고 상기 레이어의 계층별 계측데이터를 추출하는 단계, 상기 제어부가 상기 레이저 스캐너로부터 제공된 제2 레이저 스캐너 데이터를 복수개의 레이어로 분리하고 상기 레이어의 계층별 계측데이터를 추출하는 단계, 상기 제어부가 상기 제1 및 제2 레이저 스캐너 데이터의 레이어별로 상기 계측데이터를 비교하는 단계, 상기 제어부가 상기 비교결과에 따라 상기 이동체의 전방에 장애물의 유무를 확인하는 단계, 상기 제어부가 상기 장애물의 유무에 따른 상기 레이저 스캐너 데이터와 카메라에서 획득된 영상데이터를 결합하여 출력하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 전방에 장애물의 유무를 확인하는 단계는 상기 계측데이터 비교결과, 상기 계측데이터가 일정조건을 만족하면 상기 이동체의 전방에 장애물이 존재하지 않는 것으로 확인하는 단계인 것을 특징으로 한다.
또한, 상기 계측데이터를 비교하는 단계는 상기 제1 레이저 스캐너 데이터와 상기 제2 레이저 스캐너 데이터의 동일한 계층 레이어의 상기 계측데이터를 비교하여 상기 계측데이터가 연속적으로 관측되는지 확인하는 단계, 상기 제1 레이저 스캐너 데이터와 상기 제2 레이저 스캐너 데이터의 동일한 계층 레이어의 상기 계측데이터를 비교하여 상기 계측데이터가 상기 이동체를 기준으로 임계반경 이내에 존재하는지 확인하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 이동체의 전방에 장애물의 유무를 확인하는 단계 이후에 상기 계측데이터를 장애물로 인지하지 않으면 상기 계측데이터를 삭제하는 단계를 더 포함하는 것을 특징으로 한다.
또한, 상기 이동체의 전방에 장애물의 유무를 확인하는 단계 이후에 상기 계측데이터를 장애물로 인지하면, 상기 장애물의 위치, 상기 장애물의 크기 및 상기 장애물의 종류를 포함하는 장애물 정보를 확인하는 단계를 더 포함하는 것을 특징으로 한다.
또한, 상기 장애물의 유무에 따른 데이터를 결합하여 출력하는 단계는 상기 장애물이 존재하지 않으면 상기 영상데이터를 출력하고, 상기 장애물이 존재하면 상기 영상데이터와 상기 확인된 장애물 정보를 결합하여 출력하는 단계인 것을 특징으로 한다.
이와 같이, 본 발명은 멀티 레이어 레이저 스캐너로부터 획득된 레이저 스캐너 데이터를 구성하는 복수개의 레이어를 분리하여 각 레이어에 존재하는 계측데이터를 장애물 단위로 분리함으로써 차량 전방에 감지된 노이즈 데이터에 대한 장애물 유무를 용이하게 할 수 있는 효과가 있다.
또한, 본 발명은 멀티 레이어 레이저 스캐너로부터 획득된 레이저 스캐너 데이터를 구성하는 복수개의 레이어를 분리하여 각 레이어에 존재하는 계측데이터를 확인함으로써, 차량 전방의 장애물 유무, 장애물의 정확한 위치, 크기 및 종류를 보다 정확하게 확인할 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 장치의 주요 구성을 나타내는 블록도
도 2 및 도 3은 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 결과를 설명하기 위한 도면
도 4는 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 방법을 설명하기 위한 순서도
도 2 및 도 3은 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 결과를 설명하기 위한 도면
도 4는 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 방법을 설명하기 위한 순서도
이하, 첨부된 도면들을 참조하여 본 발명의 실시예들을 보다 상세하게 설명하고자 한다. 다만, 실시예들을 설명함에 있어서 본 발명이 속하는 기술 분야에 잘 알려져 있고, 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 가급적 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 핵심을 흐리지 않고 더욱 명확히 전달하기 위함이다.
도 1은 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 장치의 주요 구성을 나타내는 블록도이다. 도 2 및 도 3은 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 결과를 설명하기 위한 도면이다.
도 1 내지 도 3을 참조하면, 본 발명에 따른 레이저 스캐너를 이용한 장애물 인식 장치(100, 이하 장애물인식장치(100)라 함)는 카메라(110), 레이저 스캐너(120), 입력부(130), 출력부(140), 저장부(150), 제어부(160)를 포함한다.
카메라(110)는 차량의 전방에 설치되어 차량의 현재 위치에서 차량의 전방에 대한 영상데이터를 획득하여 제어부(160)로 제공한다.
레이저 스캐너(120)는 차량에 구비되어 차량 전방의 레이저 스캐너 데이터를 획득하여 제어부(160)로 제공한다. 레이저 스캐너 데이터는 복수개의 레이어(multi-layer)로 구성되고, 이를 위해, 레이저 스캐너(120)는 멀티 레이어 레이저 스캐너인 것이 바람직하다. 이때, 레이저 스캐너(120)는 LiDAR(Light Detection And Ranging) 레이저 레이더(Raser Rader)를 사용하는 것이 바람직하지만, 반드시 이에 한정되는 것은 아니며, 이에 상응하는 다양한 종류의 센서 및 레이저 스캐너가 사용될 수 있다.
입력부(130)는 숫자 또는 문자 정보를 입력받고 각종 기능들의 설정 및 장애물인식장치(100)의 기능제어와 관련하여 입력되는 키 신호를 제어부(160)로 전달한다. 입력부(130)는 장애물인식장치(100)의 제공형태에 따라 터치패드 또는 일반적인 키 배열의 키패드로 형성될 수 있다. 입력부(130)는 터치스크린을 포함하고, 이 경우에 입력부(130)는 출력부(140)에 표시될 수 있다. 본 발명의 실시예에서는 사용자 편의성 향상을 위해 입력부(130)를 터치패드 또는 터치스크린으로 구성함이 바람직하다.
출력부(140)는 제어부(160)의 제어에 의해 프로그램 수행 중에 발생하는 화면 데이터 예컨대, 각종 메뉴 데이터, 디지털 방송 화면데이터 등을 표시하고 도 2(a) 및 도 3(a)와 같이 차량 전방의 외부 영상데이터를 표시한다. 이때, 도 2(a)에 도시된 ES, 도 3(a)에 도시된 LN은 출력부(140)에 도시되지 않는 것이 바람직하다.
저장부(150)는 본 발명의 실시예에 따른 기능 동작에 필요한 응용 프로그램 (예를 들어, 레이저 스캐너 데이터를 구성하는 복수개의 레이어를 각각 분리하기 위한 프로그램, 레이저 스캐너 데이터에 포함된 장애물을 확인하기 위한 프로그램 등)들을 저장한다.
제어부(160)는 레이저 스캐너에서 획득된 제1 레이저 스캐너 데이터를 구성하는 복수개의 레이어(multi-layer)를 분리하여 레이어 계층별 계측데이터(A_data)를 추출하고, 제2 레이저 스캐너 데이터를 구성하는 복수개의 레이어를 분리하여 레이어 계층별 계측데이터(B_data)를 추출한 후, A_data와 B_data를 비교하여 차량의 전방에 장애물이 존재하는지를 확인한다.
보다 구체적으로, 도 2 및 도 3을 참조하면, 도 2(a)는 카메라(110)에서 획득된 영상데이터를 나타내며, 도 2(a)에 도시된 도면부호 ES는 차량의 전방에 위치한 빈(empty) 도로를 나타낸다. 도 3(a)는 카메라(110)에서 획득된 영상데이터를 나타내며, 도 3(a)에 도시된 도면부호 LN은 차량의 맞은편 차선에서 다가오는 차량의 전조등을 나타낸다. 도 2(b) 및 도 3(b)는 레이저 스캐너(120)에서 획득된 레이저 데이터를 나타낸다. 레이저 데이터는 0계층의 layer(layer 0)부터 3계층의 layer(layer 3)로 구성됨을 확인할 수 있고, 레이저 데이터를 구성하는 각 계층의 레이어마다 서로 다른 계측데이터가 포함되어 있음을 확인할 수 있다.
도 2(b)의 도면부호 FD는 도 2(a)의 도면부호 ES에 해당하는 계측데이터를 나타내고, FD는 레이저 데이터의 layer 0에서 감지된 계측데이터인 것이 바람직하다. 도 3(b)의 도면부호 FD는 도 2(a)의 도면부호 FD와 동일하고, 도 3(b)의 도면부호 LN은 도 3(a)의 도면부호 LN에 해당하는 계측데이터를 나타낸다. 이때, 도 3(b)의 도면부호 LN은 레이저 데이터의 layer 1에서 감지된 계측데이터인 것이 바람직하다. 레이어의 계층은 0계층부터 3계층에 한정되는 것은 아니며, 당업자에 의해 변경 적용이 가능한 사항임을 명확히 하는 바이다.
제어부(160)는 차량의 전방에 위치하는 바닥으로부터 발생된 노이즈를 제거하여 바닥이 장애물로 인지되는 것을 방지하기 위해 레이저 스캐너(120)로부터 실시간으로 수신되는 도 2(b)와 같은 레이저 데이터에서 제1 레이저 데이터와 제2 레이저 데이터를 선택한다. 제어부(160)는 제1 레이저 데이터를 구성하는 각 레이어에서 확인된 계측데이터(A_data)와 제2 레이저 데이터를 구성하는 각 레이어에서 확인된 계측데이터(B_data)를 비교 확인하여 일정 조건을 만족하면 계측데이터를 장애물로 인식하지 않는다.
보다 구체적으로, 제어부(160)는 제1 레이저 데이터와 제2 레이저 데이터의 layer 0에 포함된 계측데이터가 특정 영역(예컨대, 도 2(b)의 FD에 해당하는 영역)에 분포되어 있으면, 제어부(160)는 계측데이터가 동일한 계층의 레이어에 연속적으로 발생하는 것으로 인지한다. 아울러, 제어부(160)는 계측데이터가 일정한 조건을 만족하면 즉, 계측데이터가 차량의 전방 0~40m 영역에 분포되어 연속적으로 발생하고, 반복적으로 발생과 사라짐이 반복되며, 좌우로 긴 형태로 발생됨이 확인되면, 제어부(160)는 A_data와 B_data가 차량 전방의 바닥(도 2(a)의 도면부호 ES)에 의해 발생된 노이즈 데이터인 것으로 인식한다. 제어부(160)는 도 2(c)와 같이 FD의 영역에 존재하여 노이즈 데이터로 인식되던 계측데이터를 각각의 레이저 데이터에서 삭제한다. 이와 같이, A_data와 B_data는 단순히 차량 전방의 바닥에 의해 발생된 노이즈 데이터이므로 제어부(160)는 A_data와 B_data를 장애물로 인식하지 않는다.
제어부(160)는 도 2(c)와 같이 계측데이터를 삭제한 레이저 데이터를 카메라(110)에서 획득된 영상데이터와 결합하여 출력부(140)에 출력한다.
제어부(160)는 차량의 맞은편 차선에서 다가오는 차량의 전조등으로부터 발생된 노이즈를 제거하여 전조등이 장애물로 인지되는 것을 방지하기 위해 레이저 스캐너(120)로부터 실시간으로 수신되는 도 3(b)와 같은 레이저 데이터에서 제1 레이저 데이터와 제2 레이저 데이터를 선택한다. 제어부(160)는 제1 레이저 데이터를 구성하는 각 레이어에서 확인된 계측데이터(A_data)와 제2 레이저 데이터를 구성하는 각 레이어에서 확인된 계측데이터(B_data)를 비교 확인하여 일정 조건을 만족하면 계측데이터를 장애물로 인식하지 않는다.
보다 구체적으로, 제어부(160)는 제1 레이저 데이터와 제2 레이저 데이터의 layer 1에 포함된 계측데이터가 특정 영역(예컨대, 도 3(b)의 LN에 해당하는 영역)에 분포되어 있으면, 제어부(160)는 계측데이터가 동일한 계층의 레이어에 연속적으로 발생하는 것으로 인지한다. 제어부(160)는 계측데이터가 일정한 조건을 만족하면 즉, 계측데이터가 차량의 전방 0~10m 영역에 분포되어 연속적으로 발생하고, 모양이 불규칙적이며, A_data 및 B_data보다 먼 거리에 존재하는 장애물이 관측되면, 제어부(160)는 A_data와 B_data를 차량의 맞은편 차선에서 다가오는 차량의 전조등(도 3(a)의 도면부호 LN)에 의해 발생된 노이즈 데이터인 것으로 인식한다. 제어부(160)는 도 3(c)와 같이 LN의 영역에 존재하여 노이즈 데이터로 인식되던 계측데이터를 각각의 레이저 데이터에서 삭제한다. 이와 같이, A_data와 B_data는 맞은편 차선에서 다가오는 차량의 전조등에 의해 발생된 노이즈 데이터이므로 제어부(160)는 A_data와 B_data를 장애물로 인식하지 않는다. 이때, 도 3(b)와 도 3(c)에 도시된 FD에 관한 설명은 도 2(b)와 도 2(c)에서 설명하였으므로 상세한 설명을 생략한다. 제어부(160)는 도 3(c)와 같이 계측데이터를 삭제한 레이저 데이터를 카메라(110)에서 획득된 영상데이터와 결합하여 출력부(140)에 출력한다.
반대로, 제어부(160)는 계측데이터가 차량 전방의 바닥 또는 차량의 맞은편 차선에서 다가오는 차량의 전조등으로부터 발생된 노이즈 데이터를 제거하기 위한 일정조건을 만족하지 못하면 계측데이터를 장애물로 인식한다. 제어부(160)는 장애물로 인식된 계측데이터와 카메라(110)에서 획득된 영상데이터를 결합하여 출력부(140)에 출력한다. 이때, 제어부(160)는 계측데이터의 정확한 위치, 크기 및 종류를 포함하는 장애물 정보를 확인할 수 있다.
도 4는 본 발명의 실시예에 따른 레이저 스캐너를 이용한 장애물 인식 방법을 설명하기 위한 순서도이다.
도 4를 참조하면, S11단계에서 제어부(160)는 레이저 스캐너(120)에서 실시간으로 획득된 레이저 데이터를 제공받는다. 이때, 레이저 데이터는 복수개의 레이어(multi-layer)로 구성된다.
이어서, S13단계에서 제어부(160)는 실시간으로 수신된 레이저 데이터 중에서 제1 레이저 데이터를 선택하여 제1 레이저 데이터를 복수개의 레이어로 분리한다. S15단계에서 제어부(160)는 분리된 복수개의 레이어마다 존재하는 계측데이터(A_data)를 추출한다.
이후, S17단계에서 제어부(160)는 실시간으로 수신된 레이저 데이터 중에서 제1 레이저 데이터의 바로 다음 시점에 수신된 제2 레이저 데이터를 선택하여 복수개의 레이어로 분리한다. S19단계에서 제어부(160)는 분리된 복수개의 레이어마다 존재하는 계측데이터(B_data)를 추출한다.
S21단계에서 제어부(160)는 레이어 계층별 계측데이터의 정보를 비교하여 확인한다. 즉, 제어부(160)는 각각의 계측데이터를 분석하여 비교하고, S23단계에서 제어부(160)는 각각의 계측데이터가 일정조건을 만족하는지 확인한다.
예를 들어, 제어부(160)는 A_data가 제1 레이어 데이터의 0계층 레이어(layer 0)에 존재하고, B_data가 제2 레이어 데이터의 0계층 레이어(layer 0)에 존재하며, A_data가 차량의 전방에 분포된 영역과 B_data가 차량의 전방에 분포된 영역이 유사하면 제어부(160)는 A_data와 B_data가 동일한 계층의 레이어에 연속적으로 발생하는 것으로 인지한다. 아울러, 제어부(160)는 A_data의 모양과 B_data의 모양을 확인한다.
S23단계의 확인결과, A_data와 B_data가 상기와 같은 일정조건을 만족하면 제어부(160)는 S25단계로 진행하여 A_data와 B_data를 장애물로 인식하지 않는다. 예를 들면, A_data와 B_data가 차량의 전방 0~40m 영역에 분포되어 연속적으로 발생하고, 반복적으로 발생과 사라짐이 반복되며, 좌우로 긴 형태로 발생됨이 확인되면 제어부(160)는 A_data와 B_data가 차량 전방의 바닥에 의해 입력된 노이즈 데이터인 것으로 인식한다. 이와 같이, A_data와 B_data는 단순히 차량 전방의 바닥에 의해 입력된 노이즈 데이터이므로 제어부(160)는 A_data와 B_data를 장애물로 인식하지 않는다.
또한, A_data와 B_data가 차량의 전방 0~10m 영역에 분포되어 연속적으로 발생하고, 모양이 불규칙적이며, A_data 및 B_data보다 먼 거리에 존재하는 장애물이 관측되면 제어부(160)는 A_data와 B_data를 차량의 맞은편 차선에서 다가오는 차량의 전조등에 의해 입력된 노이즈 데이터인 것으로 인식한다. 이와 같이, A_data와 B_data는 맞은편 차선에서 다가오는 차량의 전조등에 의해 입력된 노이즈 데이터이므로 제어부(160)는 A_data와 B_data를 장애물로 인식하지 않는다.
이어서, 제어부(160)는 S27단계로 진행하여 장애물로 인식하지 않은 계측데이터인 A_data와 B_data를 각각의 레이저 데이터에서 삭제하고 제어부(160)는 S29단계로 진행하여 카메라(110)에서 획득된 영상데이터를 출력부(140)에 출력한다.
반대로, A_data와 B_data가 일정조건을 만족하지 못하면 제어부(160)는 S31단계로 진행하여 A_data와 B_data를 장애물로 인식하고, 제어부(160)는 S29단계로 진행하여 장애물로 인식된 계측데이터와 카메라(110)에서 획득된 영상데이터를 결합하여 출력부(140)에 출력한다. 아울러, 제어부(160)는 A_data와 B_data의 정확한 위치, 크기 및 종류를 포함하는 장애물 정보를 확인할 수 있다.
지금까지 실시예를 통하여 본 발명에 따른 레이저 스캐너를 이용한 장애물 인식 장치 및 방법에 대하여 설명하였다. 본 명세서와 도면에서는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것일 뿐, 본 발명의 범위를 한정하고자 하는 것은 아니다. 상기에 기재된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
100: 장애물인식장치 110: 카메라
120: 레이저 스캐너 130: 입력부
140: 출력부 150: 저장부
160: 제어부
120: 레이저 스캐너 130: 입력부
140: 출력부 150: 저장부
160: 제어부
Claims (13)
- 이동체의 전방에 설치되어 복수개의 레이어로 구성된 레이저 스캐너 데이터를 실시간으로 획득하는 레이저 스캐너;
상기 이동체의 전방에 설치되어 영상데이터를 획득하는 카메라;
상기 레이저 스캐너에서 획득된 제1 레이저 스캐너 데이터와 제2 레이저 스캐너 데이터를 각각 복수개의 레이어로 분리하여 레이어마다 존재하는 계측데이터를 추출하고 상기 계측데이터를 상기 레이어별로 비교하여 상기 이동체의 전방에 장애물의 유무를 확인하는 제어부;
상기 제어부의 제어에 의해 상기 장애물의 유무에 따른 상기 레이저 스캐너 데이터와 상기 영상데이터를 결합하여 출력하는 출력부;
를 포함하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 장치. - 제1항에 있어서,
상기 제어부는
상기 계측데이터를 레이어별로 비교하여 상기 계측데이터가 일정조건을 만족하면 상기 이동체의 전방에 장애물이 존재하지 않는 것으로 확인하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 장치. - 제2항에 있어서,
상기 제어부는
상기 제1 레이저 스캐너 데이터와 상기 제2 레이저 스캐너 데이터의 동일한 계층 레이어에 상기 계측데이터가 연속적으로 관측되고, 상기 계측데이터가 상기 이동체를 기준으로 임계반경 이내에 존재하면 상기 계측데이터를 장애물이 아닌 것으로 인지하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 장치. - 제3항에 있어서,
상기 제어부는
상기 계측데이터가 장애물이 아닌 것으로 인지하면, 상기 제1 레이저 스캐너 데이터 및 상기 제2 레이저 스캐너 데이터에서 상기 계측데이터를 삭제하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 장치. - 제2항에 있어서,
상기 제어부는
상기 계측데이터를 장애물로 인지하면, 상기 장애물의 위치, 상기 장애물의 크기 및 상기 장애물의 종류를 포함하는 장애물 정보를 확인하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 장치. - 삭제
- 제5항에 있어서,
상기 출력부는
상기 제어부의 제어에 따라 상기 장애물이 존재하지 않으면 상기 영상데이터를 출력하고, 상기 장애물이 존재하면 상기 영상데이터와 상기 확인된 장애물 정보를 결합하여 출력하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 장치. - 제어부가 이동체의 전방에 설치된 레이저 스캐너로부터 복수개의 레이어로 구성된 레이저 스캐너 데이터를 실시간으로 제공받는 단계;
상기 제어부가 상기 레이저 스캐너로부터 제공된 제1 레이저 스캐너 데이터를 복수개의 레이어로 분리하고 상기 레이어의 계층별 계측데이터를 추출하는 단계;
상기 제어부가 상기 레이저 스캐너로부터 제공된 제2 레이저 스캐너 데이터를 복수개의 레이어로 분리하고 상기 레이어의 계층별 계측데이터를 추출하는 단계;
상기 제어부가 상기 제1 및 제2 레이저 스캐너 데이터의 레이어별로 상기 계측데이터를 비교하는 단계;
상기 제어부가 상기 비교결과에 따라 상기 이동체의 전방에 장애물의 유무를 확인하는 단계;
상기 제어부가 상기 장애물의 유무에 따른 상기 레이저 스캐너 데이터와 카메라에서 획득된 영상데이터를 결합하여 출력하는 단계;
를 포함하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 방법. - 제8항에 있어서,
상기 전방에 장애물의 유무를 확인하는 단계는
상기 계측데이터 비교결과, 상기 계측데이터가 일정조건을 만족하면 상기 이동체의 전방에 장애물이 존재하지 않는 것으로 확인하는 단계인 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 방법. - 제9항에 있어서,
상기 계측데이터를 비교하는 단계는
상기 제1 레이저 스캐너 데이터와 상기 제2 레이저 스캐너 데이터의 동일한 계층 레이어의 상기 계측데이터를 비교하여 상기 계측데이터가 연속적으로 관측되는지 확인하는 단계;
상기 제1 레이저 스캐너 데이터와 상기 제2 레이저 스캐너 데이터의 동일한 계층 레이어의 상기 계측데이터를 비교하여 상기 계측데이터가 상기 이동체를 기준으로 임계반경 이내에 존재하는지 확인하는 단계;
를 포함하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 방법. - 제10항에 있어서,
상기 이동체의 전방에 장애물의 유무를 확인하는 단계 이후에
상기 계측데이터를 장애물로 인지하지 않으면 상기 계측데이터를 삭제하는 단계;
를 더 포함하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 방법. - 제11항에 있어서,
상기 이동체의 전방에 장애물의 유무를 확인하는 단계 이후에
상기 계측데이터를 장애물로 인지하면, 상기 장애물의 위치, 상기 장애물의 크기 및 상기 장애물의 종류를 포함하는 장애물 정보를 확인하는 단계를 더 포함하는 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 방법. - 제12항에 있어서,
상기 장애물의 유무에 따른 데이터를 결합하여 출력하는 단계는
상기 장애물이 존재하지 않으면 상기 영상데이터를 출력하고, 상기 장애물이 존재하면 상기 영상데이터와 상기 확인된 장애물 정보를 결합하여 출력하는 단계인 것을 특징으로 하는 레이저 스캐너를 이용한 장애물 인식 방법.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20130108446A KR101491314B1 (ko) | 2013-09-10 | 2013-09-10 | 레이저 스캐너를 이용한 장애물 인식 장치 및 방법 |
US14/142,469 US9810787B2 (en) | 2013-09-10 | 2013-12-27 | Apparatus and method for recognizing obstacle using laser scanner |
CN201310757107.6A CN104424478B (zh) | 2013-09-10 | 2013-12-30 | 使用激光扫描仪来识别障碍物的装置和方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20130108446A KR101491314B1 (ko) | 2013-09-10 | 2013-09-10 | 레이저 스캐너를 이용한 장애물 인식 장치 및 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101491314B1 true KR101491314B1 (ko) | 2015-02-06 |
Family
ID=52591660
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20130108446A KR101491314B1 (ko) | 2013-09-10 | 2013-09-10 | 레이저 스캐너를 이용한 장애물 인식 장치 및 방법 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9810787B2 (ko) |
KR (1) | KR101491314B1 (ko) |
CN (1) | CN104424478B (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20190095592A (ko) * | 2018-01-23 | 2019-08-16 | 충북대학교 산학협력단 | 라이다 센서 및 카메라를 이용한 객체 검출 방법 및 그를 위한 장치 |
KR20240059461A (ko) | 2022-10-27 | 2024-05-07 | 주식회사 에스더블유엠 | 그리드 빔을 이용한 자율주행차량의 보조 사물인식장치 및 방법 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101550972B1 (ko) * | 2013-09-25 | 2015-09-07 | 현대자동차주식회사 | 레이저 스캐너를 이용하여 장애물을 인식하기 위한 특징점 추출 장치 및 방법 |
DE102016200653A1 (de) * | 2016-01-20 | 2017-07-20 | Robert Bosch Gmbh | Scheinwerfermodul, Scheinwerfer, Scheinwerfersystem und Betriebsverfahren für ein Scheinwerfermodul |
EP3203180B1 (en) * | 2016-02-04 | 2018-12-05 | Mettler-Toledo GmbH | Apparatus and methods for dimensioning an object carried by a vehicle moving in a field of measurement |
CN106968254A (zh) * | 2017-02-28 | 2017-07-21 | 天津大学 | 一种基于激光扫描仪的水电工程土石方填挖面貌监控方法 |
CN108333589A (zh) * | 2018-03-13 | 2018-07-27 | 苏州青飞智能科技有限公司 | 一种自动驾驶车辆障碍物检测装置 |
JP7147651B2 (ja) * | 2019-03-22 | 2022-10-05 | トヨタ自動車株式会社 | 物体認識装置及び車両制御システム |
CN111290386B (zh) * | 2020-02-20 | 2023-08-04 | 北京小马慧行科技有限公司 | 路径规划方法及装置、运载工具 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120034352A (ko) * | 2010-10-01 | 2012-04-12 | 한국전자통신연구원 | 장애물 감지 시스템 및 방법 |
KR20120037065A (ko) * | 2010-10-11 | 2012-04-19 | 국방과학연구소 | 자율 이동 차량용 장애물 정보 제공장치 및 그 방법 |
KR101305695B1 (ko) | 2012-08-06 | 2013-09-09 | 현대자동차주식회사 | 장애물 인식을 위한 분류기의 생성방법 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8027029B2 (en) * | 2007-11-07 | 2011-09-27 | Magna Electronics Inc. | Object detection and tracking system |
US8812226B2 (en) * | 2009-01-26 | 2014-08-19 | GM Global Technology Operations LLC | Multiobject fusion module for collision preparation system |
JP4819919B2 (ja) * | 2009-04-16 | 2011-11-24 | 本田技研工業株式会社 | 車両用物体検知装置 |
JP5267592B2 (ja) * | 2010-04-09 | 2013-08-21 | 株式会社デンソー | 物体認識装置 |
JP5488518B2 (ja) * | 2010-07-05 | 2014-05-14 | 株式会社デンソー | 道路端検出装置、運転者支援装置、および道路端検出方法 |
CN102779280B (zh) * | 2012-06-19 | 2014-07-30 | 武汉大学 | 一种基于激光传感器的交通信息提取方法 |
-
2013
- 2013-09-10 KR KR20130108446A patent/KR101491314B1/ko active IP Right Grant
- 2013-12-27 US US14/142,469 patent/US9810787B2/en active Active
- 2013-12-30 CN CN201310757107.6A patent/CN104424478B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120034352A (ko) * | 2010-10-01 | 2012-04-12 | 한국전자통신연구원 | 장애물 감지 시스템 및 방법 |
KR20120037065A (ko) * | 2010-10-11 | 2012-04-19 | 국방과학연구소 | 자율 이동 차량용 장애물 정보 제공장치 및 그 방법 |
KR101305695B1 (ko) | 2012-08-06 | 2013-09-09 | 현대자동차주식회사 | 장애물 인식을 위한 분류기의 생성방법 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20190095592A (ko) * | 2018-01-23 | 2019-08-16 | 충북대학교 산학협력단 | 라이다 센서 및 카메라를 이용한 객체 검출 방법 및 그를 위한 장치 |
KR102109941B1 (ko) * | 2018-01-23 | 2020-05-12 | 충북대학교 산학협력단 | 라이다 센서 및 카메라를 이용한 객체 검출 방법 및 그를 위한 장치 |
KR20240059461A (ko) | 2022-10-27 | 2024-05-07 | 주식회사 에스더블유엠 | 그리드 빔을 이용한 자율주행차량의 보조 사물인식장치 및 방법 |
Also Published As
Publication number | Publication date |
---|---|
CN104424478B (zh) | 2019-06-18 |
US9810787B2 (en) | 2017-11-07 |
US20150070682A1 (en) | 2015-03-12 |
CN104424478A (zh) | 2015-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101491314B1 (ko) | 레이저 스캐너를 이용한 장애물 인식 장치 및 방법 | |
US11288524B2 (en) | Estimating object properties using visual image data | |
US12014553B2 (en) | Predicting three-dimensional features for autonomous driving | |
US11748620B2 (en) | Generating ground truth for machine learning from time series elements | |
KR102524851B1 (ko) | 차로 병합 및 차로 분리의 항법을 위한 시스템 및 방법 | |
KR101644370B1 (ko) | 물체 검출 장치 및 그 동작 방법 | |
JP4783431B2 (ja) | 交通情報検出装置、交通情報検出方法、交通情報検出プログラムおよび記録媒体 | |
KR20210115026A (ko) | 차량 인텔리전트 운전 제어 방법 및 장치, 전자 기기 및 기억 매체 | |
KR101550972B1 (ko) | 레이저 스캐너를 이용하여 장애물을 인식하기 위한 특징점 추출 장치 및 방법 | |
JP6677474B2 (ja) | 周辺認識装置 | |
KR102635265B1 (ko) | 라이다를 이용한 어라운드 뷰 모니터링 장치 및 방법 | |
JP4762830B2 (ja) | 周辺監視システム | |
JP6891082B2 (ja) | 物体距離検出装置 | |
KR101340014B1 (ko) | 위치 정보 제공 장치 및 방법 | |
JP2005267331A (ja) | 車両周囲監視装置 | |
US20220065649A1 (en) | Head-up display system | |
KR101526728B1 (ko) | 야간 주행 시 전방 장애물 검출 방법 | |
KR20180053057A (ko) | 거리 및 영상을 감지하는 시스템, 이를 이용한 차량 제어 시스템 및 거리 및 영상을 감지하는 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20180130 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20190130 Year of fee payment: 5 |