KR20220111764A - 운전자 보조 시스템 및 그 제어 방법 - Google Patents
운전자 보조 시스템 및 그 제어 방법 Download PDFInfo
- Publication number
- KR20220111764A KR20220111764A KR1020210014124A KR20210014124A KR20220111764A KR 20220111764 A KR20220111764 A KR 20220111764A KR 1020210014124 A KR1020210014124 A KR 1020210014124A KR 20210014124 A KR20210014124 A KR 20210014124A KR 20220111764 A KR20220111764 A KR 20220111764A
- Authority
- KR
- South Korea
- Prior art keywords
- warning
- vehicle
- lane
- situation
- assistance
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 238000001514 detection method Methods 0.000 claims description 10
- 230000000007 visual effect Effects 0.000 claims description 8
- 238000012545 processing Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 abstract description 4
- 230000008859 change Effects 0.000 description 19
- 230000005540 biological transmission Effects 0.000 description 11
- 230000015654 memory Effects 0.000 description 11
- 238000012423 maintenance Methods 0.000 description 8
- 230000004044 response Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 230000008685 targeting Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/025—Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/029—Steering assistants using warnings or proposing actions to the driver without influencing the steering system
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
- B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/20—Conjoint control of vehicle sub-units of different type or different function including control of steering systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
- B60W30/095—Predicting travel path or likelihood of collision
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/10—Path keeping
- B60W30/12—Lane keeping
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W40/09—Driving style or behaviour
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/10—Interpretation of driver requests or demands
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/408—Radar; Laser, e.g. lidar
-
- B60W2420/42—
-
- B60W2420/52—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/18—Steering angle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/404—Characteristics
- B60W2554/4041—Position
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/404—Characteristics
- B60W2554/4044—Direction of movement, e.g. backwards
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/404—Characteristics
- B60W2554/4045—Intention, e.g. lane change or imminent movement
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
- B60Y2300/00—Purposes or special features of road vehicle drive control systems
- B60Y2300/08—Predicting or avoiding probable or impending collision
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
- B60Y2300/00—Purposes or special features of road vehicle drive control systems
- B60Y2300/10—Path keeping
- B60Y2300/12—Lane keeping
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
- B60Y2302/00—Responses or measures related to driver conditions
- B60Y2302/03—Actuating a signal or alarm device
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mathematical Physics (AREA)
- Traffic Control Systems (AREA)
Abstract
일 실시예에 따른 운전자 보조 시스템은, 차량의 외부 시야를 갖도록 상기 차량에 마련되고, 영상 데이터를 획득하는 카메라; 상기 차량에 대한 외부 감지 시야를 갖도록 상기 차량에 마련되고, 레이더 데이터를 획득하는 레이더; 및 상기 카메라에 의해 획득된 영상 데이터 및 상기 레이더에 의해 획득된 레이더 데이터를 처리하는 적어도 하나의 프로세서를 포함하는 제어부;를 포함하되, 상기 제어부는,
상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 상기 차량으로 조향 신호를 송신하고, 조향 장치의 조향각 및 상기 조향 신호에 기초하여 운전자에 의한 상기 조향 장치의 조작을 감지하고, 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하되, 상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신한다.
상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 상기 차량으로 조향 신호를 송신하고, 조향 장치의 조향각 및 상기 조향 신호에 기초하여 운전자에 의한 상기 조향 장치의 조작을 감지하고, 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하되, 상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신한다.
Description
개시된 발명은 운전자 보조 시스템에 관한 것이다.
최근에는 운전자의 부담을 경감시켜주고 편의를 증진시켜주기 위하여 차량 상태, 운전자 상태, 및 주변 환경에 대한 정보를 능동적으로 제공하는 첨단 운전자 보조 시스템(Advanced Driver Assist System, ADAS)이 탑재된 차량에 대한 연구가 활발히 진행되고 있다.
차량에 탑재되는 첨단 운전자 보조 시스템의 일 예로, 차선유지 보조 시스템(Lane Following Assist; LFA)이 있으며, 차선유지 보조 시스템은, 차선 내 주행 경로를 계획하고 전자식 조향 장치(Electronic Power Steering, EPS)의 능동 제어를 이용하여 목표된 경로를 추종하도록 제어하여 운전자에게 편의를 제공할 수 있다.
즉, 차선유지 보조 시스템은, 차량의 주행 상황에서 차선을 유지하도록 차량을 제어하거나 경고를 제공하는 시스템이다. 그러나, 차선유지 보조 시스템이 동작하기 부적합 상황에서 운전자가 스티어링 휠을 파지하지 않은 핸즈 오프(hands-off)인 경우에는 사고 발생 가능성이 높아질 수 있다.
차선 유지 보조를 수행하는 중에 운전자에 의한 조향 장치의 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하되, 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 즉시 출력하도록 하는 운전자 보조 시스템 및 그 제어 방법을 제공하고자 한다.
일 실시예에 따른 운전자 보조 시스템은, 차량의 외부 시야를 갖도록 상기 차량에 마련되고, 영상 데이터를 획득하는 카메라; 상기 차량에 대한 외부 감지 시야를 갖도록 상기 차량에 마련되고, 레이더 데이터를 획득하는 레이더; 및 상기 카메라에 의해 획득된 영상 데이터 및 상기 레이더에 의해 획득된 레이더 데이터를 처리하는 적어도 하나의 프로세서를 포함하는 제어부;를 포함하되, 상기 제어부는,
상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 상기 차량으로 조향 신호를 송신하고, 조향 장치의 조향각 및 상기 조향 신호에 기초하여 운전자에 의한 상기 조향 장치의 조작을 감지하고, 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하되, 상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신한다.
상기 제어부는, 제1 시간 동안 조작이 없는 경우 핸즈 오프로 결정하여 하위 단계의 경고를 출력하도록 상기 차량으로 제1 경고 신호를 송신하고, 상기 하위 단계의 경고의 출력 이후 제2 시간 동안 조작이 없는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 제2 경고 신호를 송신할 수 있다.
상기 하위 단계의 경고는, 시각적 경고이고, 상기 상위 단계의 경고는, 청각적 경고 또는 시청각적 경고 중 적어도 하나일 수 있다.
상기 제어부는, 상기 제1 시간 경과 전 또는 상기 하위 단계의 경고의 출력 이후 제2 시간 경과 전 보조 부적합 상황으로 결정하는 경우 즉시 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신할 수 있다.
상기 제어부는, 상기 차선 유지 보조를 위한 제어 조건의 이탈 상황 또는 충돌 위험 상황 중 적어도 하나가 발생하는 경우 상기 보조 부적합 상황으로 결정할 수 있다.
상기 제어부는, 차선을 식별하여 상기 차선 유지 보조를 수행하던 중 상기 차선이 소실된 경우 상기 차선 유지 보조를 위한 제어 조건의 이탈 상황으로 결정할 수 있다.
상기 제어부는, 주변 객체와의 상대 위치에 기초하여 상기 주변 객체와의 충돌 위험성이 존재하는 경우 상기 충돌 위험 상황으로 결정할 수 있다.
상기 제어부는, 전방 차량을 추종하여 상기 차선 유지 보조를 수행하던 중 상기 전방 차량이 경로를 변경하는 경우 상기 보조 부적합 상황으로 결정할 수 있다.
상기 제어부는, 차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 넓어지는 분기점에 도달하는 경우 상기 보조 부적합 상황으로 결정할 수 있다.
상기 제어부는, 차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 좁아지는 합류점에 도달하는 경우 상기 보조 부적합 상황으로 결정할 수 있다.
차량의 외부 시야를 갖도록 상기 차량에 마련되고, 영상 데이터를 획득하는 카메라와, 상기 차량에 대한 외부 감지 시야를 갖도록 상기 차량에 마련되고, 레이더 데이터를 획득하는 레이더를 포함하는 일 실시예에 따른 운전자 보조 시스템의 제어 방법은, 상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 상기 차량으로 조향 신호를 송신하고; 조향 장치의 조향각 및 상기 조향 신호에 기초하여 운전자에 의한 상기 조향 장치의 조작을 감지하고; 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하되; 상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것;을 포함한다.
상기 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것은, 제1 시간 동안 조작이 없는 경우 핸즈 오프로 결정하여 하위 단계의 경고를 출력하도록 상기 차량으로 제1 경고 신호를 송신하고; 상기 하위 단계의 경고의 출력 이후 제2 시간 동안 조작이 없는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 제2 경고 신호를 송신하는 것;을 포함할 수 있다.
상기 하위 단계의 경고는, 시각적 경고이고, 상기 상위 단계의 경고는, 청각적 경고 또는 시청각적 경고 중 적어도 하나일 수 있다.
상기 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것은, 상기 제1 시간 경과 전 또는 상기 하위 단계의 경고의 출력 이후 제2 시간 경과 전 보조 부적합 상황으로 결정하는 경우 즉시 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것;을 포함할 수 있다.
상기 보조 부적합 상황으로 결정하는 것은, 상기 차선 유지 보조를 위한 제어 조건의 이탈 상황 또는 충돌 위험 상황 중 적어도 하나가 발생하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함할 수 있다.
상기 보조 부적합 상황으로 결정하는 것은, 차선을 식별하여 상기 차선 유지 보조를 수행하던 중 상기 차선이 소실된 경우 상기 차선 유지 보조를 위한 제어 조건의 이탈 상황으로 결정하는 것;을 포함할 수 있다.
상기 보조 부적합 상황으로 결정하는 것은, 주변 객체와의 상대 위치에 기초하여 상기 주변 객체와의 충돌 위험성이 존재하는 경우 상기 충돌 위험 상황으로 결정하는 것;을 포함할 수 있다.
상기 보조 부적합 상황으로 결정하는 것은, 전방 차량을 추종하여 상기 차선 유지 보조를 수행하던 중 상기 전방 차량이 경로를 변경하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함할 수 있다.
상기 보조 부적합 상황으로 결정하는 것은, 차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 넓어지는 분기점에 도달하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함할 수 있다.
상기 보조 부적합 상황으로 결정하는 것은, 차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 좁아지는 합류점에 도달하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함할 수 있다.
개시된 발명의 일 측면에 따르면, 차선 유지 보조를 수행하는 중에 운전자에 의한 조향 장치의 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하되, 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 즉시 출력함으로써, 사고 발생 가능성을 낮출 수 있다.
도 1은 일 실시예에 의한 차량의 구성을 도시한다.
도 2는 일 실시예에 의한 운전자 보조 시스템의 구성을 도시한다.
도 3은 일 실시예에 의한 운전자 보조 시스템에 포함된 카메라 및 레이더를 도시한다.
도 4는 일 실시예에 따른 운전자 보조 시스템이 차선을 식별하여 차선 유지 보조를 수행하는 경우를 도시한다.
도 5는 일 실시예에 따른 운전자 보조 시스템이 전방 차량을 추종하여 차선 유지 보조를 수행하는 경우를 도시한다.
도 6은 일 실시예에 따른 운전자 보조 시스템이 핸즈오프(hands-off)를 감지하여 단계적으로 경고하는 경우를 도시한다.
도 7은 일 실시예에 따른 운전자 보조 시스템이 보조 부적합 상황을 감지하여 경고하는 경우를 도시한다.
도 8은 일 실시예에 따른 운전자 보조 시스템이 핸즈오프를 감지하여 단계적으로 경고하는 경우를 도시한다.
도 9는 일 실시예에 따른 운전자 보조 시스템이 차선 소실로 차선 유지 보조를 위한 제어 조건 이탈 상황으로 결정하는 경우를 도시한다.
도 10은 일 실시예에 따른 운전자 인식 시스템이 충돌 위험 상황으로 결정하는 경우를 도시한다.
도 11은 일 실시예에 따른 운전자 인식 시스템이 전방 차량의 경로 변경으로 보조 부적합 상황을 결정하는 경우를 도시한다.
도 12는 일 실시예에 따른 운전자 인식 시스템이 분기점 도달로 보조 부적합 상황으로 결정하는 경우를 도시한다.
도 13은 일 실시예에 따른 운전자 인식 시스템이 합류점 도달로 보조 부적합 상황으로 결정하는 경우를 도시한다.
도 14는 일 실시예에 따른 운전자 보조 시스템이 차선 유지 보조 중 경고를 출력하는 방법을 나타내는 순서도이다.
도 2는 일 실시예에 의한 운전자 보조 시스템의 구성을 도시한다.
도 3은 일 실시예에 의한 운전자 보조 시스템에 포함된 카메라 및 레이더를 도시한다.
도 4는 일 실시예에 따른 운전자 보조 시스템이 차선을 식별하여 차선 유지 보조를 수행하는 경우를 도시한다.
도 5는 일 실시예에 따른 운전자 보조 시스템이 전방 차량을 추종하여 차선 유지 보조를 수행하는 경우를 도시한다.
도 6은 일 실시예에 따른 운전자 보조 시스템이 핸즈오프(hands-off)를 감지하여 단계적으로 경고하는 경우를 도시한다.
도 7은 일 실시예에 따른 운전자 보조 시스템이 보조 부적합 상황을 감지하여 경고하는 경우를 도시한다.
도 8은 일 실시예에 따른 운전자 보조 시스템이 핸즈오프를 감지하여 단계적으로 경고하는 경우를 도시한다.
도 9는 일 실시예에 따른 운전자 보조 시스템이 차선 소실로 차선 유지 보조를 위한 제어 조건 이탈 상황으로 결정하는 경우를 도시한다.
도 10은 일 실시예에 따른 운전자 인식 시스템이 충돌 위험 상황으로 결정하는 경우를 도시한다.
도 11은 일 실시예에 따른 운전자 인식 시스템이 전방 차량의 경로 변경으로 보조 부적합 상황을 결정하는 경우를 도시한다.
도 12는 일 실시예에 따른 운전자 인식 시스템이 분기점 도달로 보조 부적합 상황으로 결정하는 경우를 도시한다.
도 13은 일 실시예에 따른 운전자 인식 시스템이 합류점 도달로 보조 부적합 상황으로 결정하는 경우를 도시한다.
도 14는 일 실시예에 따른 운전자 보조 시스템이 차선 유지 보조 중 경고를 출력하는 방법을 나타내는 순서도이다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 개시된 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다. 명세서에서 사용되는 '부, 모듈, 부재, 블록'이라는 용어는 소프트웨어 또는 하드웨어로 구현될 수 있으며, 실시예들에 따라 복수의 '부, 모듈, 부재, 블록'이 하나의 구성요소로 구현되거나, 하나의 '부, 모듈, 부재, 블록'이 복수의 구성요소들을 포함하는 것도 가능하다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
명세서 전체에서, 어떤 부재가 다른 부재 "상에" 위치하고 있다고 할 때, 이는 어떤 부재가 다른 부재에 접해 있는 경우뿐 아니라 두 부재 사이에 또 다른 부재가 존재하는 경우도 포함한다.
제 1, 제 2 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위해 사용되는 것으로, 구성요소가 전술된 용어들에 의해 제한되는 것은 아니다.
단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.
각 단계들에 있어 식별부호는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
이하 첨부된 도면들을 참고하여 개시된 발명의 작용 원리 및 실시예들에 대해 설명한다.
도 1은 일 실시예에 의한 차량의 구성을 도시한다.
도 1에 도시된 바와 같이, 차량(1)은 엔진(10)과, 변속기(20)와, 제동 장치(30)와, 조향 장치(40)를 포함한다. 엔진(10)은 실린더와 피스톤을 포함하며, 차량(1)이 주행하기 위한 동력을 생성할 수 있다. 변속기(20)는 복수의 기어들을 포함하며, 엔진(10)에 의하여 생성된 동력을 차륜까지 전달할 수 있다. 제동 장치(30)는 차륜과의 마찰을 통하여 차량(1)을 감속시키거나 차량(1)을 정지시킬 수 있다. 조향 장치(40)는 차량(1)의 주행 방향을 변경시킬 수 있다.
다만, 본발명의 차량(1)의 구성은, 상기 예에 한정되는 것은 아니며, 차량(1)은, 실시예에 따라, 엔진(10) 및 변속기(20) 외에 차륜에 동력을 전달하는 모터(미도시)를 더 포함하거나, 엔진(10) 및 변속기(20)를 포함하지 않은 채 모터만을 포함할 수도 있다.
차량(1)은 복수의 전장 부품들을 포함할 수 있다. 예를 들어, 차량(1)은 엔진 관리 시스템(Engine Management System, EMS)(11)과, 변속기 제어 유닛(Transmission Control Unit, TCU)(21)과, 전자식 제동 제어 모듈(Electronic Brake Control Module)(31)과, 전자식 조향 장치(Electronic Power Steering, EPS)(41)과, 바디 컨트롤 모듈(Body Control Module, BCM)(51)과, 스티어링 휠의 조향각을 감지하는 조향각 센서(61)와, 운전자 보조 시스템(Driver Assistance System, DAS)(100)을 더 포함한다.
엔진 관리 시스템(11)은 가속 페달을 통한 운전자의 가속 의지 또는 운전자 보조 시스템(100)의 요청에 응답하여 엔진(10)을 제어할 수 있다. 예를 들어, 엔진 관리 시스템(11)은 엔진(10)의 토크를 제어할 수 있다.
변속기 제어 유닛(21)은 변속 레버를 통한 운전자의 변속 명령 및/또는 차량(1)의 주행 속도에 응답하여 변속기(20)를 제어할 수 있다. 예를 들어, 변속기 제어 유닛(21)은 엔진(10)으로부터 차륜까지의 변속 비율을 조절할 수 있다.
다만, 앞서 설명한 바와 같이, 실시예에 따라, 차량(1)은, 모터를 더 포함하는 하이브리드 차량에 해당하거나, 모터만을 포함하는 전기차에 해당할 수 있으며, 이에 따라, 실시예에 따라서는 엔진 관리 시스템(11) 및 변속기 제어 유닛(21)은, 생략될 수 있다.
전자식 제동 제어 모듈(31)은 제동 페달을 통한 운전자의 제동 의지 및/또는 차륜들의 슬립(slip)에 응답하여 제동 장치(30)를 제어할 수 있다. 예를 들어, 전자식 제동 제어 모듈(31)은 차량(1)의 제동 시에 감지되는 차륜의 슬립에 응답하여 차륜의 제동을 일시적으로 해제할 수 있다(Anti-lock Braking Systems, ABS). 전자식 제동 제어 모듈(31)은 차량(1)의 조향 시에 감지되는 오버스티어링(oversteering) 및/또는 언더스티어링(understeering)에 응답하여 차륜의 제동을 선택적으로 해제할 수 있다(Electronic stability control, ESC). 또한, 전자식 제동 제어 모듈(31)은 차량(1)의 구동 시에 감지되는 차륜의 슬립에 응답하여 차륜을 일시적으로 제동할 수 있다(Traction Control System, TCS).
전자식 조향 장치(41)는 스티어링 휠을 통한 운전자의 조향 의지에 응답하여 운전자가 쉽게 스티어링 휠을 조작할 수 있도록 조향 장치(40)의 동작을 보조할 수 있다. 예를 들어, 전자식 조향 장치(41)는 저속 주행 또는 주차 시에는 조향력을 감소시키고 고속 주행 시에는 조향력을 증가시키도록 조향 장치(40)의 동작을 보조할 수 있다.
바디 컨트롤 모듈(51)은 운전자에게 편의를 제공하거나 운전자의 안전을 보장하는 전장 부품들의 동작을 제어할 수 있다. 예를 들어, 바디 컨트롤 모듈(51)은 헤드 램프, 와이퍼, 클러스터, 다기능 스위치 및 방향지시램프 등을 제어할 수 있다.
조향각 센서(61)는, 조향 장치(40)의 조향각을 감지할 수 있으며, 운전자에 의한 스티어링 휠의 조작 여부를 감지할 수 있다. 이를 위해, 조향각 센서(61)는, 조향 장치(40)의 일 측에 마련되는 토크 센서에 해당할 수 있으며, 조향 장치(40)에 가해지는 토크를 감지하여 운전자에 의한 스티어링 휠의 조작 여부를 감지할 수 있다.
운전자 보조 시스템(100)은 운전자가 차량(1)을 조작(구동, 제동, 조향)하는 것을 보조할 수 있다. 예를 들어, 운전자 보조 시스템(100)은 차량(1) 주변의 환경(예를 들어, 다른 차량, 보행자, 사이클리스트(cyclist), 차선, 도로 표지판 등)을 감지하고, 감지된 환경에 응답하여 차량(1)의 구동 및/또는 제동 및/또는 조향을 제어할 수 있다.
운전자 보조 시스템(100)은 운전자에게 다양한 기능을 제공할 수 있다. 예를 들어, 운전자 보조 시스템(100)은 차선 이탈 경고(Lane Departure Warning, LDW)와, 차선 유지 보조(Lane Following Assist, LFA)와, 후측방 경고 시스템(Blind Spot Detection, BSD)와, 차선변경 보조시스템(Lane Change Assist, LCA)와, 상향등 보조(High Beam Assist, HBA)와, 자동 긴급 제동(Autonomous Emergency Braking, AEB)과, 교통 표지판 인식(Traffic Sign Recognition, TSR)과, 스마트 크루즈 컨트롤(Smart Cruise Control, SCC) 등을 제공할 수 있다.
운전자 보조 시스템(100)은 차량(1) 주변의 영상 데이터를 획득하는 카메라 모듈(101)과, 차량(1) 주변의 객체 데이터를 획득하는 레이더 모듈(102)을 포함한다. 카메라 모듈(101)은 카메라(101a)와 제어기(Electronic Control Unit, ECU)(101b)를 포함하며, 차량(1)의 전방을 촬영하고 다른 차량, 보행자, 사이클리스트, 차선, 도로 표지판 등을 인식할 수 있다. 레이더 모듈(102)은 레이더(102a)와 제어기(102b)를 포함하며, 차량(1) 주변의 객체(예를 들어, 다른 차량, 보행자, 사이클리스트 등)의 상대 위치, 상대 속도 등을 획득할 수 있다.
운전자 보조 시스템(100)은 도 1에 도시된 바에 한정되지 아니하며, 차량(1) 주변을 스캔하며 객체를 감지하는 라이다(lidar), 적외선 센서 등을 더 포함할 수 있다.
이상의 전자 부품들은 차량용 통신 네트워크(NT)를 통하여 서로 통신할 수 있다. 예를 들어, 전장 부품들은 이더넷(Ethernet), 모스트(Media Oriented Systems Transport, MOST), 플렉스레이(Flexray), 캔(Controller Area Network, CAN), 린(Local Interconnect Network, LIN) 등을 통하여 데이터를 주고 받을 수 있다. 예를 들어, 운전자 보조 시스템(100)은, 엔진 관리 시스템(11), 전자식 제동 제어 모듈(31) 및 전자식 조향 장치(41)에 각각 차량용 통신 네트워크(NT)를 통하여 구동 제어 신호, 제동 신호 및 조향 신호를 전송할 수 있으며, 조향각 센서(61)로부터 차량용 통신 네트워크(NT)를 통하여 조향 장치(40)의 조향각 정보를 수신할 수 있다.
도 2은 일 실시예에 의한 운전자 보조 시스템(100)의 구성을 도시한다. 도 3은 일 실시예에 의한 운전자 보조 시스템(100)에 포함된 카메라 및 레이더를 도시한다.
도 2에 도시된 바와 같이, 차량(1)은 조향각 센서(61)와, 조향 시스템(42)과, 경고 시스템(72)과, 운전자 보조 시스템(100)을 포함할 수 있다.
조향각 센서(61)는 조향 장치(40)의 조향각 정보를 감지하여 운전자 보조 시스템(100)으로 제공하며, 조향 시스템(42)은 전자식 조향 장치(41, 도 1 참조)와 조향 장치(40, 도 1 참조)를 포함할 수 있다.
경고 시스템(72)은, 운전자 보조 시스템(100)으로부터 차량용 네트워크(NT)를 통하여 수신된 경고 신호에 기초하여 운전자에게 경고를 제공할 수 있다.
이를 위해, 경고 시스템(72)은, 프로세서를 포함할 수 있으며, 경고 신호에 기초하여 운전자에게 경고음을 제공하는 스피커 및 경고 신호에 기초하여 운전자에게 경고 메시지를 표시하는 디스플레이를 포함할 수 있다. 스피커 및 디스플레이는, 차량(1)의 내부에 마련되어 운전자에게 경고를 제공할 수 있다.
또한, 경고 시스템(72)은, 좌측 사이드 미러 및 우측 사이드 미러 각각에 마련된 경고 표시등을 포함할 수 있다. 경고 신호에 기초하여 위험이 발생될 것으로 예상되는 위치에 대응하는 사이드 미러에서의 경고 표시등이 점등되면서 운전자에게 방향성 있는 경고가 제공될 수 있다.
운전자 보조 시스템(100)은 카메라(110)와, 레이더(120)를 포함할 수 있다.
카메라(110)는, 도 3에 도시된 바와 같이, 차량(1)의 외부를 향하는 시야(field of view) (111a, 112a, 113a, 114a)를 가질 수 있다.
이를 위해, 카메라(110)는, 우측방에 대한 영상 데이터를 획득하는 우측방 카메라(111)와, 좌측방에 대한 영상 데이터를 획득하는 좌측방 카메라(112)와, 전방에 대한 영상 데이터를 획득하는 전방 카메라(113)와, 후방에 대한 영상 데이터를 획득하는 후방 카메라(114)를 포함한다.
우측방 카메라(111) 및 좌측방 카메라(112) 각각은, 예를 들어, 우측 사이드 미러 및 좌측 사이드 미러에 마련될 수 있다.
전방 카메라(113)는, 예를 들어, 차량(1)의 프론트 윈드 쉴드에 설치될 수 있으며, 후방 카메라(114)는, 예를 들어, 차량(1)의 트렁크에 설치될 수 있다.
다만, 각 카메라(110)의 설치 위치 및 개수는, 상기 예에 한정되는 것은 아니며, 실시예에 따라, 다양하게 마련될 수 있다.
카메라(110)는 차량(1)의 외부를 촬영하고, 차량(1) 외부의 영상 데이터를 획득할 수 있다. 차량(1) 외부의 영상 데이터는 차량(1) 외부에 위치하는 다른 차량 또는 보행자 또는 사이클리스트 또는 차선에 관한 위치를 포함할 수 있다.
카메라(110)는 복수의 렌즈들 및 이미지 센서를 포함할 수 있다. 이미지 센서는 광을 전기 신호로 변환하는 복수의 포토 다이오드들을 포함할 수 있으며, 복수의 포토 다이오드들이 2차원 매트릭스로 배치될 수 있다.
카메라(110)는 제어부(130)와 전기적으로 연결될 수 있다. 예를 들어, 카메라(110)는 차량용 통신 네트워크(NT)를 통하여 제어부(130)와 연결되거나, 하드 와이어(hard wire)를 통하여 제어부(130)와 연결되거나, 인쇄 회로 기판(Printed Circuit Board, PCB)을 통하여 제어부(130)와 연결될 수 있다.
카메라(110)는 차량(1) 외부의 영상 데이터를 제어부(130)로 전달할 수 있다.
레이더(120)는, 도 3에 도시된 바와 같이, 차량(1)의 코너에 마련되는 코너 레이더(121, 122, 123, 124)와, 차량(1)의 전방을 향하는 감지 시야(field of sensing)를 갖는 전방 레이더(125)와, 차량(1)의 후방을 향하는 감지 시야를 갖는 후방 레이더(126)를 포함한다.
복수의 코너 레이더들(121, 122, 123, 124)은 차량(1)의 전방 우측에 설치되는 제1 코너 레이더(121)와, 차량(1)의 전방 좌측에 설치되는 제2 코너 레이더(122)와, 차량(1)의 후방 우측에 설치되는 제3 코너 레이더(123)와, 차량(1)의 후방 좌측에 설치되는 제4 코너 레이더(124)를 포함한다.
제1 코너 레이더(121)는, 도 3에 도시된 바와 같이, 차량(1)의 전방 우측을 향하는 감지 시야(121a)를 가질 수 있다. 제2 코너 레이더(122)는 차량(1)의 전방 좌측을 향하는 감지 시야(122a)를 가질 수 있으며, 예를 들어 차량(1)의 전방 범퍼의 좌측에 설치될 수 있다. 제3 코너 레이더(123)는 차량(1)의 후방 우측을 향하는 감지 시야(123a)를 가질 수 있으며, 예를 들어 차량(1)의 후방 범퍼의 우측에 설치될 수 있다. 제4 코너 레이더(124)는 차량(1)의 후방 좌측을 향하는 감지 시야(124a)를 가질 수 있으며, 예를 들어 차량(1)의 후방 범퍼의 좌측에 설치될 수 있다.
제1, 제2, 제3 및 제4 코너 레이더들(121, 122, 123, 124) 각각은 송신 안테나와 수신 안테나를 포함할 수 있다. 제1, 제2, 제3 및 제4 코너 레이더들(121, 122, 123, 124)은 각각 제1 코너 레이더 데이터와 제2 코너 레이더 데이터와 제3 코너 레이더 데이터와 제4 코너 레이더 데이터를 획득할 수 있다. 제1 코너 레이더 데이터는 차량(1) 전방 우측에 위치하는 다른 차량 또는 보행자 또는 사이클리스트(이하 "객체"라 한다)에 관한 거리 정보 및 속도 정도를 포함할 수 있다. 제2 코너 레이더 데이터는 차량(1) 전방 좌측에 위치하는 객체의 거리 정보 및 속도 정도를 포함할 수 있다. 제3 및 제4 코너 레이더 데이터는 차량(1) 후방 우측 및 차량(1) 후방 좌측에 위치하는 객체의 거리 정보 및 상대 속도를 포함할 수 있다.
제1, 제2, 제3 및 제4 코너 레이더들(121, 122, 123, 124) 각각은 예를 들어 차량용 통신 네트워크(NT) 또는 하드 와이어 또는 인쇄 회로 기판을 통하여 제어부(130)와 연결될 수 있다. 제1, 제2, 제3 및 제4 코너 레이더들(121, 122, 123, 124)은 각각 제1, 제2, 제3 및 제4 코너 레이더 데이터를 제어부(130)로 전달할 수 있다.
전방 레이더(125)는 예를 들어 차량(1)의 전방 범퍼의 우측에 설치될 수 있다.
전방 레이더(125)는 도 3에 도시된 바와 같이 차량(1)의 전방을 향하는 감지 시야(field of sensing)(125a)을 가질 수 있다. 전방 레이더(125)는 예를 들어 차량(1)의 그릴 또는 범퍼에 설치될 수 있다.
전방 레이더(125)는 차량(1)의 전방을 향하여 송신 전파를 방사하는 송신 안테나(또는 송신 안테나 어레이)와, 객체에 반사된 반사 전파를 수신하는 수신 안테나(또는 수신 안테나 어레이)를 포함할 수 있다. 전방 레이더(125)는 송신 안테나에 의한 송신된 송신 전파와 수신 안테나에 의하여 수신된 반사 전파로부터 전방 레이더 데이터를 획득할 수 있다. 전방 레이더 데이터는 차량(1) 전방에 위치하는 다른 차량 또는 보행자 또는 사이클리스트에 관한 거리 정보 및 속도 정도를 포함할 수 있다. 전방 레이더(125)는 송신 전파와 반사 전파 사이의 위상 차이(또는 시간 차이)에 기초하여 객체까지의 상태 거리를 산출하고, 송신 전파와 반사 전파 사이의 주파수 차이에 기초하여 객체의 상대 속도를 산출할 수 있다.
전방 레이더(125)는 예를 들어 차량용 통신 네트워크(NT) 또는 하드 와이어 또는 인쇄 회로 기판을 통하여 제어부(130)와 연결될 수 있다. 전방 레이더(125)는 전방 레이더 데이터를 제어부(130)로 전달할 수 있다.
후방 레이더(126)는, 차량(1)의 후방에 대한 후방 레이더 데이터를 획득할 수 있으며, 차량(1)의 범퍼에 마련될 수 있다.
제어부(130)는 카메라 모듈(101, 도 1 참조)의 제어기(101b, 도 1 참조) 및/또는 레이더 모듈(102, 도 1 참조)의 제어기(102b, 도 1 참조) 및/또는 별도의 통합 제어기를 포함할 수 있다.
제어부(130)는 프로세서(131)와 메모리(132)를 포함한다.
프로세서(131)는 카메라(110)의 영상 데이터, 레이더(120)의 레이더 데이터와 조향각 센서(61)의 조향각 정보를 처리하고 조향 시스템(42) 및 경고 시스템(72)을 제어하기 위한 조향 신호 및 경고 신호를 생성할 수 있다. 예를 들어, 프로세서(131)는 카메라(110)의 영상 데이터를 처리하는 이미지 프로세서 및/또는 레이더들(120)의 레이더 데이터를 처리하는 디지털 시그널 프로세서 및/또는 조향 신호 및 경고 신호를 생성하는 마이크로 컨트롤 유닛(Micro Control Unit, MCU)를 포함할 수 있다.
프로세서(131)는, 카메라(110)의 영상 데이터 또는 레이더(120)의 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 차량(1)으로 조향 신호를 송신할 수 있다.
구체적으로, 프로세서(131)는, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 차선 또는 전방 차량을 식별할 수 있으며, 식별된 차선 또는 전방 차량에 기초하여 목표 경로를 결정하며, 목표 경로를 추종하도록 조향 시스템(42)으로 조향 신호를 송신할 수 있다.
예를 들어, 프로세서(131)는, 차선이 식별되는 경우 차로의 중심을 주행하기 위한 목표 경로를 결정할 수 있다. 또한, 프로세서(131)는, 차선 제어 중 교차로 등의 차선 소실 구간을 주행하는 경우 전방 차량을 추종하기 위한 목표 경로를 결정할 수 있다.
프로세서(131)는, 차량(1)이 목표 경로로 주행할 수 있도록, 조향 신호를 조향 시스템(42)으로 송신할 수 있다. 조향 시스템(42)의 전자식 조향 장치(41)는 운전자 보조 시스템(100)으로부터 수신된 조향 신호에 기초하여 조향 장치(40)를 제어함으로써, 차량(1)이 목표 경로로 주행할 수 있도록 한다.
프로세서(131)는, 조향각 센서(61)의 출력에 기초하여 조향 장치(40)의 조향각을 결정할 수 있다. 이때, 조향 장치(40)의 조향각은, 스티어링 휠의 조향각에 대응할 수 있다.
프로세서(131)는, 조향 장치(40)의 조향각 및 조향 신호에 기초하여 운전자에 의한 조향 장치(40)의 조작을 감지할 수 있다.
구체적으로, 프로세서(131)는, 조향각 센서(61)의 출력에 기초하여 조향 장치(40)의 조향각 및 조향각 변화 속도를 결정할 수 있으며, 조향각 및 조향각 변화 속도 각각이 미리 설정된 범위 내에서 미리 설정된 시간 동안 유지되는 경우 운전자에 의한 조향 장치(40)의 조작이 없는 핸즈오프(hands-off)로 판단할 수 있다.
이때, 프로세서(131)는, 차선 유지 보조를 위한 조향 신호에 기초하여 조향각 및 조향각 변화 속도 각각에 대응하는 설정 범위를 조정할 수 있다. 즉, 프로세서(131)는, 조향 신호에 의한 조향각 및 조향각 변화 속도를 기준으로 운전자 조작 판단을 위한 범위를 설정할 수 있다.
프로세서(131)는, 조향 장치(40)에 대한 운전자의 조작이 감지되지 않은 시간에 따라 단계적으로 핸즈오프에 대한 경고를 출력하도록 차량(1)으로 경고 신호를 송신할 수 있다.
예를 들어, 프로세서(131)는, 핸즈오프 결정 이후 제1 시간 경과하도록 운전자의 조작이 감지되지 않은 경우 하위 단계(1차)의 경고를 출력하도록 제1 경고 신호를 생성할 수 있다. 또한, 프로세서(131)는, 하위 단계의 경고 출력 이후 제2 시간이 경과하도록 운전자의 조작이 감지되지 않은 경우 상위 단계(2차)의 경고를 출력하도록 제2 경고 신호를 생성할 수 있다.
이때, 하위 단계의 경고는, 시각적 경고에 해당할 수 있으며, 상위 단계의 경고는, 청각적 경고 또는 시청각적 경고 중 적어도 하나에 해당할 수 있다. 즉, 프로세서(131)는, 경고 시스템(72)의 디스플레이가 경고를 출력하도록 디스플레이를 대상으로 하는 제1 경고 신호를 생성할 수 있으며, 경고 시스템(72)의 스피커가 경고를 출력하도록 스피커를 대상으로 하는 제2 경고 신호를 생성할 수 있다. 제2 경고 신호에는, 실시예에 따라, 디스플레이를 대상으로 하는 신호가 포함될 수 있다.
이때, 프로세서(131)는, 상위 단계의 경고 출력 이후 제3 시간이 경과하는 경우 차선 유지 보조를 위한 시스템이 해제될 수 있음을 경고하도록 제3 경고 신호를 차량(1)으로 송신할 수 있다. 또한, 프로세서(131)는, 제3 경고 신호에 따른 경고 이후 제4 시간 경과 시 차선 유지 보조에 대한 기능을 오프할 수 있다.
또한, 프로세서(131)는, 조향 장치(40)에 대한 운전자의 조작이 감지되지 않은 시간에 따라 단계적으로 핸즈오프에 대한 경고를 출력하되, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계(2차)의 경고를 즉시 출력하도록 차량(1)으로 제2 경고 신호를 송신할 수 있다.
즉, 프로세서(131)는, 핸즈오프 결정 후 제1 시간이 경과하기 전이나 하위 단계(1차)의 경고의 출력 이후 제2 시간이 경과하기 전에 보조 부적합 상황으로 결정하는 경우 즉시 상위 단계(2차)의 경고를 출력하도록 차량(1)으로 경고 신호를 송신할 수 있다.
다시 말해, 프로세서(131)는, 차선 유지 보조를 위한 제어 조건의 이탈 상황 또는 충돌 위험 상황 중 적어도 하나가 발생하는 경우 차선 유지 보조를 수행하기 적합하지 않은 것으로 판단하여 해당 시점을 보조 부적합 상황으로 결정하고, 즉시 상위 단계(2차)의 경고를 출력하도록 경고 신호를 송신할 수 있다.
프로세서(131)는, 차선을 식별하여 차선 유지 보조를 수행하던 중 차선이 소실된 경우 차선 유지 보조를 위한 제어 조건의 이탈 상황으로 결정할 수 있다.
또한, 프로세서(131)는, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 주변 객체(예: 다른 차량, 보행자, 사이클리스트 등)와의 상대 위치를 결정하고, 주변 객체와의 상대 위치에 기초하여 주변 객체와 충돌 위험성이 존재하는 경우 충돌 위험 상황으로 결정할 수 있다. 즉, 프로세서(131)는, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 주변 객체와의 충돌 예상 시간(Time to Collision, TTC) 또는 충돌까지의 거리(Distance to Collision, DTC)를 산출하고, 기준값과의 비교를 통하여 충돌 위험성의 존재 여부를 결정할 수 있다.
또한, 프로세서(131)는, 전방 차량을 추종하여 차선 유지 보조를 수행하던 중 전방 차량이 경로를 변경하는 경우 보조 부적합 상황으로 결정할 수 있다. 즉, 프로세서(131)는, 추종하는 전방 차량이 미리 설정된 각도 이상으로 회전하는 경우 전방 차량이 경로를 변경하는 것으로 결정하고, 전방 차량의 경로 변경에 의해 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 전방 차량과의 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다.
또한, 프로세서(131)는, 차선을 식별하여 차선 유지 보조를 수행하던 중 차선 간격이 넓어지는 분기점에 도달하는 경우 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다.
또한, 프로세서(131)는, 차선을 식별하여 차선 유지 보조를 수행하던 중 차선 간격이 좁아지는 합류점에 도달하는 경우 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다.
메모리(132)는 프로세서(131)가 영상 데이터를 처리하기 위한 프로그램 및/또는 데이터와, 레이더 데이터를 처리하기 위한 프로그램 및/또는 데이터와, 프로세서(131)가 조향 신호 및/또는 경고 신호를 생성하기 위한 프로그램 및/또는 데이터를 저장할 수 있다.
메모리(132)는 카메라(110)로부터 수신된 영상 데이터 및/또는 레이더(120)로부터 수신된 레이더 데이터를 임시로 기억하고, 프로세서(131)의 영상 데이터 및/또는 레이더 데이터의 처리 결과를 임시로 기억할 수 있다.
메모리(132)는 S램(S-RAM), D램(D-RAM) 등의 휘발성 메모리뿐만 아니라 플래시 메모리, 롬(Read Only Memory, ROM), 이피롬(Erasable Programmable Read Only Memory: EPROM) 등의 비휘발성 메모리를 포함할 수 있다.
운전자 보조 시스템(100)은 도 2에 도시된 바에 한정되지 아니하며, 차량(1) 주변을 스캔하며 차선, 전방 차량 등 외부 객체를 감지하는 라이다(lidar), 적외선 센서 등을 더 포함할 수 있다.
이상에서는 운전자 보조 시스템(100)의 구성에 대하여 설명하였다. 이하에서는 운전자 보조 시스템(100)이 차선 유지 보조를 수행하는 것에 대하여 자세히 설명하도록 한다.
도 4는 일 실시예에 따른 운전자 보조 시스템(100)이 차선을 식별하여 차선 유지 보조를 수행하는 경우를 도시하고, 도 5는 일 실시예에 따른 운전자 보조 시스템(100)이 전방 차량을 추종하여 차선 유지 보조를 수행하는 경우를 도시한다.
도 4 및 도 5를 참조하면, 프로세서(131)는, 카메라(110)의 영상 데이터 또는 레이더(120)의 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 차량(1)으로 조향 신호를 송신할 수 있다.
구체적으로, 프로세서(131)는, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 차선(400) 또는 전방 차량(2)을 식별할 수 있으며, 식별된 차선(400) 또는 전방 차량(2)에 기초하여 목표 경로(450)를 결정하며, 목표 경로(450)를 추종하도록 조향 시스템(42)으로 조향 신호를 송신할 수 있다.
예를 들어, 프로세서(131)는, 차선(400)이 식별되는 경우 차로의 중심을 주행하기 위한 목표 경로(450)를 결정할 수 있다. 즉, 프로세서(131)는, 차량(1)의 좌측에 마련된 제1 차선(400a)과, 차량(1)의 우측에 마련된 제2 차선(400b)에 의해 형성된 차로의 중심을 목표 경로(450)로 결정할 수 있다.
또한, 프로세서(131)는, 차선 제어 중 교차로 등의 차선 소실 구간을 주행하는 경우 전방 차량(2)을 추종하기 위한 목표 경로(450)를 결정할 수 있다. 구체적으로, 프로세서(131)는, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 전방 차량(2) 사이의 횡거리(x), 종거리(y) 및 방향각(θ)을 결정하여 전방 차량(2)과의 상대 위치를 결정하고, 전방 차량(2)을 추종하는 경로를 목표 경로(450)로 결정할 수 있다.
프로세서(131)는, 차량(1)이 목표 경로(450)로 주행할 수 있도록, 조향 신호를 조향 시스템(42)으로 송신할 수 있다. 조향 시스템(42)의 전자식 조향 장치(41)는 운전자 보조 시스템(100)으로부터 수신된 조향 신호에 기초하여 조향 장치(40)를 제어함으로써, 차량(1)이 목표 경로로 주행할 수 있도록 한다.
이상에서는 운전자 보조 시스템(100)이 차선 유지 보조를 수행하는 경우에 대하여 설명하였다. 이하에서는 운전자 보조 시스템(100)이 운전자에 의한 조향 장치(40)의 조작을 감지하여 핸즈오프를 결정하여 경고하는 것에 대하여 자세히 설명하도록 한다.
도 6은 일 실시예에 따른 운전자 보조 시스템이 핸즈오프를 감지하여 단계적으로 경고하는 경우를 도시하고, 도 7은 일 실시예에 따른 운전자 보조 시스템이 보조 부적합 상황을 감지하여 경고하는 경우를 도시하고, 도 8은 일 실시예에 따른 운전자 보조 시스템이 핸즈오프를 감지하여 단계적으로 경고하는 경우를 도시한다.
도 6을 참조하면, 프로세서(131)는, 조향각 센서(61)의 출력에 기초하여 조향 장치(40)의 조향각을 결정할 수 있다. 이때, 조향 장치(40)의 조향각은, 스티어링 휠의 조향각에 대응할 수 있다.
구체적으로, 프로세서(131)는, 조향각 센서(61)의 출력에 기초하여 조향 장치(40)의 조향각 및 조향각 변화 속도를 결정할 수 있으며, 조향각 및 조향각 변화 속도 각각이 미리 설정된 범위 내에서 미리 설정된 시간 동안 유지되는 경우 운전자에 의한 조향 장치(40)의 조작이 없는 핸즈오프(hands-off)로 판단할 수 있다.
이때, 프로세서(131)는, 차선 유지 보조를 위한 조향 신호에 기초하여 조향각 및 조향각 변화 속도 각각에 대응하는 설정 범위를 조정할 수 있다. 즉, 프로세서(131)는, 조향 신호에 의한 조향각 및 조향각 변화 속도를 기준으로 운전자 조작 판단을 위한 범위를 설정할 수 있다.
프로세서(131)는, 도 6에 도시된 바와 같이, 조향 장치(40)에 대한 운전자의 조작이 감지되지 않은 시간에 따라 단계적으로 핸즈오프에 대한 경고를 출력하도록 차량(1)으로 경고 신호를 송신할 수 있다.
예를 들어, 프로세서(131)는, 핸즈오프 결정 이후 제1 시간 경과하도록 운전자의 조작이 감지되지 않은 경우 하위 단계(1차)의 경고를 출력하도록 제1 경고 신호를 생성할 수 있다. 또한, 프로세서(131)는, 하위 단계의 경고 출력 이후 제2 시간이 경과하도록 운전자의 조작이 감지되지 않은 경우 상위 단계(2차)의 경고를 출력하도록 제2 경고 신호를 생성할 수 있다.
이때, 하위 단계의 경고는, 시각적 경고에 해당할 수 있으며, 상위 단계의 경고는, 청각적 경고 또는 시청각적 경고 중 적어도 하나에 해당할 수 있다. 예를 들어, 시각적 경고는, 디스플레이에 스티어링 휠의 파지를 경고하는 메시지("스터어링 휠을 잡으십시오")가 디스플레이에 표시되는 것일 수 있으며, 청각적 경고는, 스티어링 휠의 파지를 경고하는 메시지("스터어링 휠을 잡으십시오")가 스피커에서 출력되는 것일 수 있다.
즉, 프로세서(131)는, 경고 시스템(72)의 디스플레이가 경고를 출력하도록 디스플레이를 대상으로 하는 제1 경고 신호를 생성할 수 있으며, 경고 시스템(72)의 스피커가 경고를 출력하도록 스피커를 대상으로 하는 제2 경고 신호를 생성할 수 있다. 제2 경고 신호에는, 실시예에 따라, 디스플레이를 대상으로 하는 신호가 포함될 수 있다.
이때, 프로세서(131)는, 상위 단계의 경고 출력 이후 제3 시간이 경과하는 경우 차선 유지 보조를 위한 시스템이 해제될 수 있음을 경고하도록 제3 경고 신호를 차량(1)으로 송신할 수 있다. 또한, 프로세서(131)는, 제3 경고 신호에 따른 경고 이후 제4 시간 경과 시 차선 유지 보조에 대한 기능을 오프하여 차선 유지 보조를 위한 시스템을 해제할 수 있다.
프로세서(131)는, 도 7 및 도8에 도시된 바와 같이, 조향 장치(40)에 대한 운전자의 조작이 감지되지 않은 시간에 따라 단계적으로 핸즈오프에 대한 경고를 출력하되, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계(2차)의 경고를 즉시 출력하도록 차량(1)으로 제2 경고 신호를 송신할 수 있다.
즉, 프로세서(131)는, 도 7에 도시된 바와 같이, 핸즈오프 결정 후 제1 시간이 경과하기 전에 보조 부적합 상황으로 결정하는 경우 즉시 상위 단계(2차)의 경고를 출력하도록 차량(1)으로 경고 신호를 송신할 수 있다.
또한, 프로세서(131)는, 도 8에 도시된 바와 같이, 하위 단계(1차)의 경고의 출력 이후 제2 시간이 경과하기 전에 보조 부적합 상황으로 결정하는 경우 즉시 상위 단계(2차)의 경고를 출력하도록 차량(1)으로 경고 신호를 송신할 수 있다.
다시 말해, 프로세서(131)는, 차선 유지 보조를 위한 제어 조건의 이탈 상황 또는 충돌 위험 상황 중 적어도 하나가 발생하는 경우 차선 유지 보조를 수행하기 적합하지 않은 것으로 판단하여 해당 시점을 보조 부적합 상황으로 결정하고, 즉시 상위 단계(2차)의 경고를 출력하도록 경고 신호를 송신할 수 있다.
이상에서는 운전자 보조 시스템(100)이 운전자에 의한 조향 장치(40)의 조작을 감지하여 핸즈오프를 결정하여 경고하는 것에 대하여 설명하였다. 이하에서는 운전자 보조 시스템(100)이 보조 부적합 상황으로 결정하는 것에 대하여 자세히 설명하도록 한다.
도 9는 일 실시예에 따른 운전자 보조 시스템(100)이 차선 소실로 차선 유지 보조를 위한 제어 조건 이탈 상황으로 결정하는 경우를 도시하고, 도 10은 일 실시예에 따른 운전자 인식 시스템(100)이 충돌 위험 상황으로 결정하는 경우를 도시하고, 도 11은 일 실시예에 따른 운전자 인식 시스템(100)이 전방 차량(2)의 경로 변경으로 보조 부적합 상황을 결정하는 경우를 도시하고, 도 12는 일 실시예에 따른 운전자 인식 시스템(100)이 분기점 도달로 보조 부적합 상황으로 결정하는 경우를 도시하고, 도 13은 일 실시예에 따른 운전자 인식 시스템(100)이 합류점 도달로 보조 부적합 상황으로 결정하는 경우를 도시한다.
도 9를 참조하면, 프로세서(131)는, 차선(400a, 400b; 400)을 식별하여 차선 유지 보조를 수행하던 중 차선이 소실된 경우 차선 유지 보조를 위한 제어 조건의 이탈 상황으로 결정할 수 있다. 즉, 프로세서(131)는, 차선(400a, 400b; 400)을 식별하여 차선 유지 보조를 수행하던 중 차량(1)이 차선 소실 구간에 진입하는 경우 차선 유지 보조를 위한 제어 조건의 이탈 상황으로 결정하여, 운전자에 의한 조항 장치(40)의 조작이 감지되지 않으면 즉시 상위 단계(2차)의 경고를 출력하도록 경고 신호를 송신할 수 있다.
또한, 프로세서(131)는, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 주변 객체(예: 다른 차량, 보행자, 사이클리스트 등)와의 상대 위치를 결정하고, 주변 객체와의 상대 위치에 기초하여 주변 객체와 충돌 위험성이 존재하는 경우 충돌 위험 상황으로 결정할 수 있다. 즉, 프로세서(131)는, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 주변 객체와의 충돌 예상 시간(Time to Collision, TTC) 또는 충돌까지의 거리(Distance to Collision, DTC)를 산출하고, 기준값과의 비교를 통하여 충돌 위험성의 존재 여부를 결정할 수 있다.
예를 들어, 프로세서(131)는, 도 10에 도시된 바와 같이, 전방 차량(2)을 추종하여 차선 유지 보조를 수행하던 중 전방 차량(2)의 경로 변경으로 다른 차량(3)과의 충돌이 예상되는 경우 충돌 위험 상황으로 결정할 수 있다.
또한, 프로세서(131)는, 도 11에 도시된 바와 같이, 전방 차량(2)을 추종하여 차선 유지 보조를 수행하던 중 전방 차량(2)이 경로를 변경하는 경우 보조 부적합 상황으로 결정할 수 있다. 즉, 프로세서(131)는, 추종하는 전방 차량(2)이 미리 설정된 각도 이상으로 회전하는 경우 전방 차량(2)이 경로를 변경하는 것으로 결정하고, 전방 차량(2)의 경로 변경에 의해 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 전방 차량(2)과의 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다.
또한, 프로세서(131)는, 도 12에 도시된 바와 같이, 차선을 식별하여 차선 유지 보조를 수행하던 중 차선 간격(l)이 넓어지는 분기점에 도달하는 경우 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다. 즉, 프로세서(131)는, 분기점에 도달하는 경우 차선을 추종하는 차선 유지 보조가 어려울 것으로 판단하거나, 다른 차량과의 충돌 위험이 높아질 것으로 판단하여 보조 부적합 상황으로 결정할 수 있다.
구체적으로, 프로세서(131)는, 차선폭(차선 간격)(I)이 미리 설정된 제1 값에 도달하는 경우 분기점 즉, 분기구간 내 임계지점에 도달한 것으로 판단할 수 있다. 이 경우, 프로세서(131)는, 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다.
또한, 프로세서(131)는, 도 13에 도시된 바와 같이, 차선을 식별하여 차선 유지 보조를 수행하던 중 차선 간격(l)이 좁아지는 합류점에 도달하는 경우 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다. 즉, 프로세서(131)는, 합류점에 도달하는 경우 차선을 추종하는 차선 유지 보조가 어려울 것으로 판단하거나, 다른 차량과의 충돌 위험이 높아질 것으로 판단하여 보조 부적합 상황으로 결정할 수 있다.
구체적으로, 프로세서(131)는, 차선폭(차선 간격)(I)이 미리 설정된 제2 값에 도달하는 경우 합류점 즉, 합류구간 내 임계지점에 도달한 것으로 판단할 수 있다. 이 경우, 프로세서(131)는, 차선 유지 보조를 위한 제어 조건의 이탈 상황이나 충돌 위험 상황인 것으로 결정하여 보조 부적합 상황으로 결정할 수 있다.
이하, 일 실시예에 따른 운전자 보조 시스템(100)의 제어 방법을 설명하기로 한다. 후술하는 운전자 보조 시스템(100)의 제어 방법에는 전술한 실시예에 따른 운전자 보조 시스템(100)이 적용될 수 있다. 따라서, 앞서 도 1 내지 도 13을 참조하여 설명한 내용은 특별한 언급이 없더라도 일 실시예에 따른 운전자 보조 시스템(100)의 제어 방법에도 동일하게 적용 가능하다.
도 14는 일 실시예에 따른 운전자 보조 시스템(100)이 차선 유지 보조 중 경고를 출력하는 방법을 나타내는 순서도이다.
도 14를 참조하면, 일 실시예에 따른 운전자 보조 시스템(100)은, 조향 장치(40)가 운전자에 의해 미조작되고(1410의 예), 제1 시간 경과하면(1420의 예), 하위 단계(1차) 경고의 출력을 위한 제1 경고 신호를 차량(1)으로 송신할 수 있다(1430).
또한, 일 실시예에 따른 운전자 보조 시스템(100)은, 하위 단계의 경고 출력 이후 제2 시간이 경과하면(1440의 예), 상위 단계(2차) 경고의 출력을 위한 제2 경고 신호를 차량(1)으로 송신할 수 있다(1450).
프로세서(131)는, 조향각 센서(61)의 출력에 기초하여 조향 장치(40)의 조향각 및 조향각 변화 속도를 결정할 수 있으며, 조향각 및 조향각 변화 속도 각각이 미리 설정된 범위 내에서 미리 설정된 시간 동안 유지되는 경우 운전자에 의한 조향 장치(40)의 조작이 없는 핸즈오프(hands-off)로 판단할 수 있다.
프로세서(131)는, 차선 유지 보조를 위한 조향 신호에 기초하여 조향각 및 조향각 변화 속도 각각에 대응하는 설정 범위를 조정할 수 있다. 즉, 프로세서(131)는, 조향 신호에 의한 조향각 및 조향각 변화 속도를 기준으로 운전자 조작 판단을 위한 범위를 설정할 수 있다.
하위 단계의 경고는, 시각적 경고에 해당할 수 있으며, 상위 단계의 경고는, 청각적 경고 또는 시청각적 경고 중 적어도 하나에 해당할 수 있다. 즉, 프로세서(131)는, 경고 시스템(72)의 디스플레이가 경고를 출력하도록 디스플레이를 대상으로 하는 제1 경고 신호를 생성할 수 있으며, 경고 시스템(72)의 스피커가 경고를 출력하도록 스피커를 대상으로 하는 제2 경고 신호를 생성할 수 있다. 제2 경고 신호에는, 실시예에 따라, 디스플레이를 대상으로 하는 신호가 포함될 수 있다.
또한, 운전자 보조 시스템(100)은, 조향 장치(40)에 대한 운전자의 조작이 감지되지 않은 시간에 따라 단계적으로 핸즈오프에 대한 경고를 출력하되, 영상 데이터 또는 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계(2차)의 경고를 즉시 출력하도록 차량(1)으로 제2 경고 신호를 송신할 수 있다.
즉, 운전자 보조 시스템(100)은, 핸즈오프 결정 후 제1 시간이 경과하기 전(1420의 아니오)에 조항 장치(40)의 조작이 없으며(1460의 아니오), 보조 부적합 상황으로 결정하는 경우(1470의 예) 즉시 상위 단계(2차) 경고의 출력을 위한 경고 신호를 차량(1)으로 송신할 수 있다(1450).
또한, 운전자 보조 시스템(100)은, 하위 단계(1차) 경고의 출력을 위한 경고 신호 송신(1430) 이후 제2 시간이 경과하기 전(1440의 아니오)에 조항 장치(40)의 조작이 없으며(1480의 아니오), 보조 부적합 상황으로 결정하는 경우(1490의 예) 즉시 상위 단계(2차) 경고의 출력을 위한 경고 신호를 차량(1)으로 송신할 수 있다(1450).
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래시 메모리, 광 데이터 저장장치 등이 있을 수 있다.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.
1: 차량
100: 운전자 보조 시스템
110: 카메라 120: 레이더
130: 제어부
110: 카메라 120: 레이더
130: 제어부
Claims (20)
- 차량의 외부 시야를 갖도록 상기 차량에 마련되고, 영상 데이터를 획득하는 카메라;
상기 차량에 대한 외부 감지 시야를 갖도록 상기 차량에 마련되고, 레이더 데이터를 획득하는 레이더; 및
상기 카메라에 의해 획득된 영상 데이터 및 상기 레이더에 의해 획득된 레이더 데이터를 처리하는 적어도 하나의 프로세서를 포함하는 제어부;를 포함하되,
상기 제어부는,
상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 상기 차량으로 조향 신호를 송신하고, 조향 장치의 조향각 및 상기 조향 신호에 기초하여 운전자에 의한 상기 조향 장치의 조작을 감지하고, 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하되, 상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 운전자 보조 시스템. - 제1항에 있어서,
상기 제어부는,
제1 시간 동안 조작이 없는 경우 핸즈 오프로 결정하여 하위 단계의 경고를 출력하도록 상기 차량으로 제1 경고 신호를 송신하고, 상기 하위 단계의 경고의 출력 이후 제2 시간 동안 조작이 없는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 제2 경고 신호를 송신하는 운전자 보조 시스템. - 제2항에 있어서,
상기 하위 단계의 경고는,
시각적 경고이고,
상기 상위 단계의 경고는,
청각적 경고 또는 시청각적 경고 중 적어도 하나인 운전자 보조 시스템. - 제2항에 있어서,
상기 제어부는,
상기 제1 시간 경과 전 또는 상기 하위 단계의 경고의 출력 이후 제2 시간 경과 전 보조 부적합 상황으로 결정하는 경우 즉시 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 운전자 보조 시스템. - 제1항에 있어서,
상기 제어부는,
상기 차선 유지 보조를 위한 제어 조건의 이탈 상황 또는 충돌 위험 상황 중 적어도 하나가 발생하는 경우 상기 보조 부적합 상황으로 결정하는 운전자 보조 시스템. - 제5항에 있어서,
상기 제어부는,
차선을 식별하여 상기 차선 유지 보조를 수행하던 중 상기 차선이 소실된 경우 상기 차선 유지 보조를 위한 제어 조건의 이탈 상황으로 결정하는 운전자 보조 시스템. - 제5항에 있어서,
상기 제어부는,
주변 객체와의 상대 위치에 기초하여 상기 주변 객체와의 충돌 위험성이 존재하는 경우 상기 충돌 위험 상황으로 결정하는 운전자 보조 시스템. - 제5항에 있어서,
상기 제어부는,
전방 차량을 추종하여 상기 차선 유지 보조를 수행하던 중 상기 전방 차량이 경로를 변경하는 경우 상기 보조 부적합 상황으로 결정하는 운전자 보조 시스템. - 제5항에 있어서,
상기 제어부는,
차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 넓어지는 분기점에 도달하는 경우 상기 보조 부적합 상황으로 결정하고,
상기 분기점은,
상기 차선 간격이 미리 설정된 값에 도달하는 분기구간 내 임계지점인 운전자 보조 시스템. - 제5항에 있어서,
상기 제어부는,
차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 좁아지는 합류점에 도달하는 경우 상기 보조 부적합 상황으로 결정하고,
상기 합류점은,
상기 차선 간격이 미리 설정된 값에 도달하는 합류구간 내 임계지점인 운전자 보조 시스템. - 차량의 외부 시야를 갖도록 상기 차량에 마련되고, 영상 데이터를 획득하는 카메라와, 상기 차량에 대한 외부 감지 시야를 갖도록 상기 차량에 마련되고, 레이더 데이터를 획득하는 레이더를 포함하는 운전자 보조 시스템의 제어 방법에 있어서,
상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 차선 유지 보조를 위하여 상기 차량으로 조향 신호를 송신하고;
조향 장치의 조향각 및 상기 조향 신호에 기초하여 운전자에 의한 상기 조향 장치의 조작을 감지하고;
조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하되;
상기 영상 데이터 또는 상기 레이더 데이터 중 적어도 하나에 기초하여 보조 부적합 상황으로 결정하는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것;을 포함하는 운전자 보조 시스템의 제어 방법. - 제11항에 있어서,
상기 조작이 감지되지 않은 시간에 따라 단계적으로 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것은,
제1 시간 동안 조작이 없는 경우 핸즈 오프로 결정하여 하위 단계의 경고를 출력하도록 상기 차량으로 제1 경고 신호를 송신하고;
상기 하위 단계의 경고의 출력 이후 제2 시간 동안 조작이 없는 경우 상위 단계의 경고를 출력하도록 상기 차량으로 제2 경고 신호를 송신하는 것;을 포함하는 운전자 보조 시스템의 제어 방법. - 제12항에 있어서,
상기 하위 단계의 경고는,
시각적 경고이고,
상기 상위 단계의 경고는,
청각적 경고 또는 시청각적 경고 중 적어도 하나인 운전자 보조 시스템의 제어 방법. - 제12항에 있어서,
상기 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것은,
상기 제1 시간 경과 전 또는 상기 하위 단계의 경고의 출력 이후 제2 시간 경과 전 보조 부적합 상황으로 결정하는 경우 즉시 상위 단계의 경고를 출력하도록 상기 차량으로 경고 신호를 송신하는 것;을 포함하는 운전자 보조 시스템의 제어 방법. - 제11항에 있어서,
상기 보조 부적합 상황으로 결정하는 것은,
상기 차선 유지 보조를 위한 제어 조건의 이탈 상황 또는 충돌 위험 상황 중 적어도 하나가 발생하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함하는 운전자 보조 시스템의 제어 방법. - 제15항에 있어서,
상기 보조 부적합 상황으로 결정하는 것은,
차선을 식별하여 상기 차선 유지 보조를 수행하던 중 상기 차선이 소실된 경우 상기 차선 유지 보조를 위한 제어 조건의 이탈 상황으로 결정하는 것;을 포함하는 운전자 보조 시스템의 제어 방법. - 제15항에 있어서,
상기 보조 부적합 상황으로 결정하는 것은,
주변 객체와의 상대 위치에 기초하여 상기 주변 객체와의 충돌 위험성이 존재하는 경우 상기 충돌 위험 상황으로 결정하는 것;을 포함하는 운전자 보조 시스템의 제어 방법. - 제15항에 있어서,
상기 보조 부적합 상황으로 결정하는 것은,
전방 차량을 추종하여 상기 차선 유지 보조를 수행하던 중 상기 전방 차량이 경로를 변경하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함하는 운전자 보조 시스템의 제어 방법. - 제15항에 있어서,
상기 보조 부적합 상황으로 결정하는 것은,
차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 넓어지는 분기점에 도달하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함하고,
상기 분기점은,
상기 차선 간격이 미리 설정된 값에 도달하는 분기구간 내 임계지점인 운전자 보조 시스템의 제어 방법. - 제15항에 있어서,
상기 보조 부적합 상황으로 결정하는 것은,
차선을 식별하여 상기 차선 유지 보조를 수행하던 중 차선 간격이 좁아지는 합류점에 도달하는 경우 상기 보조 부적합 상황으로 결정하는 것;을 포함하고,
상기 합류점은,
상기 차선 간격이 미리 설정된 값에 도달하는 합류구간 내 임계지점인 운전자 보조 시스템의 제어 방법.
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210014124A KR20220111764A (ko) | 2021-02-01 | 2021-02-01 | 운전자 보조 시스템 및 그 제어 방법 |
US17/586,563 US12043310B2 (en) | 2021-02-01 | 2022-01-27 | Driver assistance system and control method for the same |
CN202210113816.XA CN114834470A (zh) | 2021-02-01 | 2022-01-30 | 驾驶者辅助系统及其控制方法 |
DE102022201043.4A DE102022201043A1 (de) | 2021-02-01 | 2022-02-01 | Fahrerassistenzsystem und dessen steuerverfahren |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210014124A KR20220111764A (ko) | 2021-02-01 | 2021-02-01 | 운전자 보조 시스템 및 그 제어 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20220111764A true KR20220111764A (ko) | 2022-08-10 |
Family
ID=82403047
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210014124A KR20220111764A (ko) | 2021-02-01 | 2021-02-01 | 운전자 보조 시스템 및 그 제어 방법 |
Country Status (4)
Country | Link |
---|---|
US (1) | US12043310B2 (ko) |
KR (1) | KR20220111764A (ko) |
CN (1) | CN114834470A (ko) |
DE (1) | DE102022201043A1 (ko) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR3141910A1 (fr) * | 2022-11-14 | 2024-05-17 | Renault S.A.S | Procédé de maintien d’un véhicule au centre de sa voie de circulation |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102013009400A1 (de) | 2013-06-04 | 2014-12-04 | Volkswagen Aktiengesellschaft | Notfallassistenz zur Fahrzeugführung |
JP6341149B2 (ja) | 2015-07-07 | 2018-06-13 | トヨタ自動車株式会社 | 車両の運転支援装置 |
US11499768B2 (en) | 2018-05-30 | 2022-11-15 | Johnson Controls Tyco IP Holdings LLP | Chiller suction flow limiting with input power or motor current control |
KR20210111558A (ko) * | 2020-03-03 | 2021-09-13 | 현대자동차주식회사 | 운전자 보조 장치 및 그의 경고 방법 |
-
2021
- 2021-02-01 KR KR1020210014124A patent/KR20220111764A/ko unknown
-
2022
- 2022-01-27 US US17/586,563 patent/US12043310B2/en active Active
- 2022-01-30 CN CN202210113816.XA patent/CN114834470A/zh active Pending
- 2022-02-01 DE DE102022201043.4A patent/DE102022201043A1/de active Pending
Also Published As
Publication number | Publication date |
---|---|
US12043310B2 (en) | 2024-07-23 |
US20220242485A1 (en) | 2022-08-04 |
CN114834470A (zh) | 2022-08-02 |
DE102022201043A1 (de) | 2022-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102715606B1 (ko) | 운전자 보조 시스템, 그를 가지는 차량 및 그 제어 방법 | |
CN113060141B (zh) | 高级驾驶员辅助系统、具有其的车辆及控制车辆的方法 | |
KR102673147B1 (ko) | 운전자 보조 시스템 및 그 제어방법 | |
US10926764B2 (en) | Lane keeping assistance apparatus, vehicle having the same and method for controlling the same | |
KR102352464B1 (ko) | 운전자 보조 시스템 및 그 제어 방법 | |
KR102440255B1 (ko) | 운전자 보조 시스템 및 그 제어 방법 | |
KR102695891B1 (ko) | 운전자 보조 장치 | |
KR20200115827A (ko) | 운전자 보조 시스템 및 그 제어 방법 | |
KR20210079946A (ko) | 차량 및 그 제어 방법 | |
KR20210130297A (ko) | 운전자 보조 시스템 | |
KR20220124397A (ko) | 차량 및 그 제어방법 | |
KR20210152602A (ko) | 운전자 보조 장치 및 운전자 보조 방법 | |
KR20210133330A (ko) | 운전자 보조 시스템 및 운전자 보조 방법 | |
KR20210084713A (ko) | 운전자 보조 시스템 및 운전자 보조 방법 | |
KR20210080717A (ko) | 운전자 보조 장치 및 운전자 보조 방법 | |
KR102440265B1 (ko) | 운전자 보조 시스템 | |
KR102356612B1 (ko) | 충돌 방지 장치, 그를 가지는 차량 및 그 제어 방법 | |
US12043310B2 (en) | Driver assistance system and control method for the same | |
KR20200094629A (ko) | 운전자 보조 시스템 및 그 제어 방법 | |
KR20210088117A (ko) | 운전자 보조 시스템 및 그 방법 | |
KR20200046611A (ko) | 운전자 보조 시스템 | |
KR20220092303A (ko) | 차량 및 그 제어 방법 | |
KR20210112077A (ko) | 운전자 보조 장치 및 그 제어 방법 | |
US20220306164A1 (en) | Driver assistance apparatus and driver assistance method | |
US20220410879A1 (en) | Vehicle and control method thereof |