JP2018049486A - ドライバ状態判定装置及び運転支援システム - Google Patents
ドライバ状態判定装置及び運転支援システム Download PDFInfo
- Publication number
- JP2018049486A JP2018049486A JP2016184950A JP2016184950A JP2018049486A JP 2018049486 A JP2018049486 A JP 2018049486A JP 2016184950 A JP2016184950 A JP 2016184950A JP 2016184950 A JP2016184950 A JP 2016184950A JP 2018049486 A JP2018049486 A JP 2018049486A
- Authority
- JP
- Japan
- Prior art keywords
- distribution
- state
- model
- driver
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000009826 distribution Methods 0.000 claims abstract description 336
- 238000001514 detection method Methods 0.000 claims abstract description 15
- 238000000605 extraction Methods 0.000 claims description 49
- 238000012544 monitoring process Methods 0.000 claims description 27
- 230000002093 peripheral effect Effects 0.000 claims description 19
- 239000000284 extract Substances 0.000 claims description 10
- 206010049976 Impatience Diseases 0.000 claims 4
- 238000000034 method Methods 0.000 description 34
- 238000012545 processing Methods 0.000 description 15
- 238000004364 calculation method Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 210000001747 pupil Anatomy 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000001771 impaired effect Effects 0.000 description 2
- 238000005470 impregnation Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 150000001875 compounds Chemical class 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000000528 statistical test Methods 0.000 description 1
Images
Landscapes
- Traffic Control Systems (AREA)
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
Abstract
Description
<運転支援システム1の概略構成>
以下、本実施形態について図面を用いて説明する。図1に示す運転支援システム1は、自動車といった車両で用いられるものであり、ドライバ状態判定装置10、車両状態センサ20、周辺監視センサ30、周辺監視ECU40、DSM(Driver Status Monitor)50、音声出力装置60、及び表示装置70を含んでいる。ドライバ状態判定装置10と車両状態センサ20と周辺監視ECU40とは、例えば車内LANに接続されているものとする。以下では、運転支援システム1を自動車に搭載している場合を例に挙げて説明を続ける。
続いて、図2を用いてドライバ状態判定装置10の概略構成についての説明を行う。ドライバ状態判定装置10は、図2に示すように、区分関連部100、注視時間演算部105、分布作成部106、分布抽出部107、第1モデル記憶部108、第2モデル記憶部109、ドライバ状態判定部110、及び報知処理部111を機能ブロックとして備える。また、区分関連部100は、対象物特定部101、領域特定部102、進路上判定部103、及び影響要因特定部104を備える。なお、ドライバ状態判定装置10が実行する機能の一部又は全部を、一つ或いは複数のIC等によりハードウェア的に構成してもよい。
分布抽出部107で2つのモデル分布を抽出した場合であって、且つ、モデル分布の代表値となる注視時間の値(以下、単に代表値)が閾値未満となるモデル分布がない場合には、代表値が小さい方のモデル分布に対応するドライバ状態を「集中状態」と決定すればよい。一方、代表値が大きい方のモデル分布に対応するドライバ状態を「漫然状態」と決定すればよい。代表値としては、例えば平均値であっても最頻値であっても中間値であってもよいが、ここでは最頻値を用いるものとして以降の説明を続ける。また、ここで言うところの閾値とは、「焦り状態」と「集中状態」とを区分する閾値(以下、焦り区分閾値)であればよく、例えば150msecとすればよい。分布抽出部107で2つのモデル分布を抽出した場合であって、且つ、モデル分布の代表値が焦り区分閾値未満となるモデル分布がある場合には、代表値が小さい方のモデル分布に対応するドライバ状態を「焦り状態」と決定する。
続いて、図5のフローチャートを用いて、ドライバ状態判定装置10でのモデル分布の抽出に関連する処理(以下、モデル分布抽出処理)の流れの一例について説明を行う。モデル分布抽出処理は、例えば、自車のイグニッション電源がオンになって走行を開始するときに開始する構成とすればよい。自車のイグニッション電源がオンになって走行を開始してからイグニッション電源がオフになるまでを以降ではトリップと呼ぶ。
続いて、図6のフローチャートを用いて、ドライバ状態判定装置10でのドライバ状態の判定に関連する処理(以下、ドライバ状態判定処理)の流れの一例について説明を行う。図6のフローチャートでは、ドライバ状態を「漫然状態」と判定した場合に報知を行わせる場合を例に挙げて説明を行う。ドライバ状態判定処理は、例えば、自車のイグニッション電源がオンになって走行を開始するときに開始する構成とすればよい。
実施形態1の構成によれば、集中状態、漫然状態、焦り状態といったドライバ状態に対応するモデル分布と、分布作成部106で作成した判定用分布とを比較し、近似若しくは乖離の度合いによってドライバ状態を判定するので、ある1回の注視時間に限らない複数回の注視時間の傾向を比較することになる。よって、ある1回の注視時間が閾値以上となったか否かによってドライバ状態を判定するのに比べ、ドライバ状態ごとの注視時間のばらつきによる誤判定が生じにくくできる。その結果、ドライバの注視時間を用いてドライバ状態をより精度良く判定することが可能になる。
前述の実施形態では、注視対象の種類、対象存在領域の種類、注視対象が進路上に存在するか否か、及び注視環境要因に応じて、モデル作成用時間における注視時間の度数分布を作成したり、判定用分布と比較するモデル分布を定めたりする構成を示したが、必ずしもこれに限らない。例えば、注視対象の種類、対象存在領域の種類、注視対象が進路上に存在するか否か、及び注視環境要因のうちの一部に限る構成としてもよい。他にも、注視環境要因を時間帯と天候とのいずれかに限る構成としてもよい。
前述の実施形態では、モデル作成用時間が固定値である場合を例に挙げたが、必ずしもこれに限らない。例えば、分布抽出部107で例えば3つといった所望の数のモデル分布が抽出できるまでモデル作成用時間を延長しつつ、分布作成部106がモデル作成用時間における注視時間の度数分布を逐次作成していく構成としてもよい。
前述の実施形態では、ドライバ状態判定部110が、判定用分布に近似するモデル分布が存在しない場合に、判定用分布のモデル分布からの乖離の度合いによってドライバ状態を判定する構成を示したが、必ずしもこれに限らない。例えば、ドライバ状態判定部110が、判定用分布に近似するモデル分布があるか否かに関わらず、判定用分布のモデル分布からの乖離の度合いによってドライバ状態を判定する構成としてもよい。
前述の実施形態では、トリップごとにモデル作成用時間における注視時間の度数分布を作成し、作成した度数分布から分布抽出部107で抽出して第1モデル記憶部108に記憶したモデル分布をドライバ状態の判定に用いる構成を示したが、必ずしもこれに限らない。例えば、分布抽出部107及び第1モデル記憶部108をドライバ状態判定装置10に備えず、第2モデル記憶部109に記憶されているモデル分布を用いてドライバ状態を判定する構成としてもよい。この場合、分布作成部106では、モデル作成用時間における注視時間の度数分布を作成する処理を行わない構成とすればよい。
前述の実施形態では、ドライバ状態判定部110が、「焦り状態」,「集中状態」,「漫然状態」のいずれも判定する構成を示したが、必ずしもこれに限らない。例えば、「漫然状態」のみを判定する等、「焦り状態」,「集中状態」,「漫然状態」のうちの一部のドライバ状態のみを判定する構成としてもよい。
前述の実施形態では、分布抽出部107が、抽出したモデル分布がどのドライバ状態に対応するか決定し、抽出したモデル分布と決定したドライバ状態とを紐付けして第1モデル記憶部108に記憶する構成を示したが、必ずしもこれに限らない。例えば、抽出したモデル分布がどのドライバ状態に対応するかを分布抽出部107では決定せずに、抽出したモデル分布を第1モデル記憶部108に記憶する構成としてもよい。この場合には、ドライバ状態判定部110でのドライバ状態の判定時に、ドライバ状態判定部110が分布抽出部107と同様にして、抽出したモデル分布がどのドライバ状態に対応するか決定する構成とすればよい。
前述の実施形態では、DSM50でドライバの視線方向を検出する構成を示したが、必ずしもこれに限らない。例えば、眼電位センサで検出したドライバの眼電位とドライバの顔向きからドライバの視線方向を検出する構成としてもよい。また、ドライバの顔向きは、カメラで撮像した顔画像から検出する構成に限らず、Gセンサ等の慣性センサを用いて検出する構成としてもよい。また、運転席のシートやヘッドレストに設けられた赤外線センサ等の複数の測距センサによって、ドライバの頭部や肩等における複数のポイントまでの距離を計測し、計測した複数のポイントの距離からドライバの顔向きを検出する構成としてもよい。
前述の実施形態では、DSM50の制御ユニットでドライバの視線方向及び視線の移動速度を検出する構成を示したが、必ずしもこれに限らない。例えば、ドライバ状態判定装置10がDSM50の制御ユニットの機能を担うことで、ドライバ状態判定装置10でドライバの視線方向及び視線の移動速度を検出する構成としてもよい。
前述の実施形態では、運転支援システム1が自動車で用いられる構成を示したが、必ずしもこれに限らない。運転支援システム1は種々の車両で用いることが可能であり、例えば、鉄道車両,原動機付自転車等の自動車以外の車両で用いられる構成としてもよい。
Claims (15)
- 車両で用いられ、
前記車両のドライバの注視方向を逐次検出するための注視検出センサ(50)での検出結果をもとに、所定時間における前記ドライバの注視時間の度数分布を作成する分布作成部(106)と、
集中状態、漫然状態、及び焦り状態の少なくともいずれかのドライバ状態に対応する注視時間の度数分布のモデルとなるモデル分布を記憶しているモデル記憶部(108,109)と、
前記モデル記憶部に記憶している前記モデル分布と、前記分布作成部で作成した直近の第1の所定時間における注視時間の度数分布とを比較することで、前記車両のドライバの集中状態、漫然状態、及び焦り状態の少なくともいずれかのドライバ状態を判定する判定部(110)とを備えるドライバ状態判定装置。 - 請求項1において、
前記判定部は、前記分布作成部で作成した直近の第1の所定時間における注視時間の度数分布に近似する前記モデル分布に対応するドライバ状態を、前記車両のドライバのドライバ状態と判定するドライバ状態判定装置。 - 請求項1又は2において、
前記判定部は、前記モデル分布に対する前記分布作成部で作成した直近の第1の所定時間における注視時間の度数分布の乖離の度合いをもとに、前記ドライバ状態を判定するドライバ状態判定装置。 - 請求項1〜3のいずれか1項において、
前記注視検出センサでの検出結果と、前記車両の周辺環境を監視する周辺監視センサでの検出結果とをもとに、前記車両のドライバの注視対象が、複数種類に区分される前記車両の周辺領域のうちのどの種類の周辺領域に存在しているか特定する領域特定部(102)を備え、
前記モデル記憶部は、前記周辺領域の種類別に、その周辺領域に注視対象が存在する場合の前記モデル分布を記憶しており、
前記判定部は、前記モデル記憶部に記憶している前記モデル分布のうちの、前記領域特定部で前記ドライバの注視対象が存在していると特定した周辺領域の種類に応じたモデル分布を用いて前記ドライバ状態を判定するドライバ状態判定装置。 - 請求項1〜4のいずれか1項において、
前記注視検出センサでの検出結果と、前記車両の周辺環境を監視する周辺監視センサでの検出結果とをもとに、前記車両のドライバが、複数種類に区分される前記車両の周辺対象物のうちのどの種類の周辺対象物を注視対象としているか特定する対象物特定部(101)を備え、
前記モデル記憶部は、前記周辺対象物の種類別に、その周辺対象物が注視対象である場合の前記モデル分布を記憶しており、
前記判定部は、前記モデル記憶部に記憶している前記モデル分布のうちの、前記対象物特定部で特定した前記ドライバの注視対象に応じたモデル分布を用いて前記ドライバ状態を判定するドライバ状態判定装置。 - 請求項5において、
前記モデル記憶部は、前記周辺対象物の種類別に加え、前記車両の進路上に前記周辺対象物が存在するか否か別に、その周辺対象物が注視対象である場合の前記モデル分布を記憶しており、
前記判定部は、前記モデル記憶部に記憶している前記モデル分布のうちの、前記対象物特定部で特定した前記ドライバの注視対象及びその注視対象が前記車両の進路上に存在するか否かに応じたモデル分布を用いて前記ドライバ状態を判定するドライバ状態判定装置。 - 請求項1〜6のいずれか1項において、
現在の時間帯及び天候の少なくともいずれかである注視影響要因を特定する影響要因特定部(104)を備え、
前記モデル記憶部は、前記注視影響要因別に、その注視影響要因に該当する場合の前記モデル分布を記憶しており、
前記判定部は、前記モデル記憶部に記憶している前記モデル分布のうちの、前記影響要因特定部で特定した前記注視影響要因に応じたモデル分布を用いて前記ドライバ状態を判定するドライバ状態判定装置。 - 請求項1〜7のいずれか1項において、
混合分布からそれぞれの分布を抽出するアルゴリズムによって、前記分布作成部で作成した前記第1の所定時間よりも長い第2の所定時間における注視時間の度数分布に含まれる度数分布を抽出する分布抽出部(107)を備え、
前記モデル記憶部は、前記分布抽出部で抽出した前記度数分布を前記モデル分布として記憶し、
前記判定部は、前記モデル分布として、前記モデル記憶部に記憶している、前記直近の第1の所定時間よりも過去に前記分布抽出部で抽出した前記度数分布を用いるドライバ状態判定装置。 - 請求項8において、
前記分布作成部は、少なくとも前記車両が駐車後に発進してから再度駐車するまでのトリップごとに、前記第2の所定時間における注視時間の度数分布を作成するものであり、
前記判定部は、前記モデル分布として、前記モデル記憶部に記憶している、現在の前記トリップにおいて前記分布抽出部で抽出した前記度数分布を用いるドライバ状態判定装置。 - 請求項8又は9において、
前記判定部は、前記分布抽出部で2つ以上の度数分布を抽出した場合に、それらの度数分布のうちの、代表値が、前記焦り状態と前記集中状態とを区分する閾値以上であって、且つ、最も小さい度数分布を、前記集中状態に対応する前記モデル分布として用いるドライバ状態判定装置。 - 請求項10において、
前記判定部は、前記集中状態に対応する前記モデル分布として用いる度数分布よりも前記代表値が大きい度数分布を、前記漫然状態に対応する前記モデル分布として用いるドライバ状態判定装置。 - 請求項8〜11のいずれか1項において、
前記判定部は、前記分布抽出部で抽出した度数分布のうち、代表値が、前記焦り状態と前記集中状態とを区分する閾値未満の分布を、前記焦り状態に対応する前記モデル分布として用いるドライバ状態判定装置。 - 請求項8又は9において、
前記判定部は、
前記分布抽出部で3つの度数分布を抽出した場合であって、且つ、それらの度数分布の代表値に前記焦り状態と前記集中状態とを区分する閾値未満のものがある場合には、代表値が最も小さい度数分布から順に、焦り状態、集中状態、漫然状態に対応する前記モデル分布として用いる一方、
前記分布抽出部で3つの度数分布を抽出した場合であって、且つ、それらの度数分布の代表値に前記焦り状態と前記集中状態とを区分する閾値未満のものがない場合には、代表値が最も小さい度数分布から順に、集中状態、漫然状態、漫然状態に対応する前記モデル分布として用いるドライバ状態判定装置。 - 請求項1〜13のいずれか1項において、
前記モデル分布には少なくとも前記集中状態に対応するモデル分布を含み、
前記判定部は、前記集中状態に対応する前記モデル分布に対する、前記分布作成部で作成した直近の第1の所定時間における注視時間の度数分布の乖離の度合いに応じて、前記ドライバの漫然状態のレベルを分けて判定するドライバ状態判定装置。 - 車両で用いられ、
請求項1〜14のいずれか1項に記載のドライバ状態判定装置(10)と、
前記ドライバ状態判定装置で判定したドライバ状態に応じた報知を行う報知装置(60,70)とを含む運転支援システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016184950A JP6880615B2 (ja) | 2016-09-22 | 2016-09-22 | ドライバ状態判定装置及び運転支援システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016184950A JP6880615B2 (ja) | 2016-09-22 | 2016-09-22 | ドライバ状態判定装置及び運転支援システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018049486A true JP2018049486A (ja) | 2018-03-29 |
JP6880615B2 JP6880615B2 (ja) | 2021-06-02 |
Family
ID=61767687
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016184950A Active JP6880615B2 (ja) | 2016-09-22 | 2016-09-22 | ドライバ状態判定装置及び運転支援システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6880615B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7563126B2 (ja) | 2020-11-18 | 2024-10-08 | オムロン株式会社 | 運転行動変化検知装置、運転行動変化検知システム、運転行動変化検知方法および運転行動変化検知プログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008210239A (ja) * | 2007-02-27 | 2008-09-11 | Nissan Motor Co Ltd | 視線推定装置 |
JP2008250775A (ja) * | 2007-03-30 | 2008-10-16 | Denso Corp | データベース装置、注意喚起装置及び運転支援装置 |
JP2015138308A (ja) * | 2014-01-21 | 2015-07-30 | アルパイン株式会社 | 運転支援装置、運転支援方法及び運転支援プログラム |
-
2016
- 2016-09-22 JP JP2016184950A patent/JP6880615B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008210239A (ja) * | 2007-02-27 | 2008-09-11 | Nissan Motor Co Ltd | 視線推定装置 |
JP2008250775A (ja) * | 2007-03-30 | 2008-10-16 | Denso Corp | データベース装置、注意喚起装置及び運転支援装置 |
JP2015138308A (ja) * | 2014-01-21 | 2015-07-30 | アルパイン株式会社 | 運転支援装置、運転支援方法及び運転支援プログラム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7563126B2 (ja) | 2020-11-18 | 2024-10-08 | オムロン株式会社 | 運転行動変化検知装置、運転行動変化検知システム、運転行動変化検知方法および運転行動変化検知プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6880615B2 (ja) | 2021-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105620489B (zh) | 驾驶辅助系统及车辆实时预警提醒方法 | |
JP6354776B2 (ja) | 車両の制御装置 | |
US10328932B2 (en) | Parking assist system with annotated map generation | |
CN103874931B (zh) | 用于求取车辆的环境中的对象的位置的方法和设备 | |
JP6838248B2 (ja) | 情報処理装置 | |
JP4614005B2 (ja) | 移動軌跡生成装置 | |
US10067506B2 (en) | Control device of vehicle | |
JP2018195301A (ja) | 制御装置及び制御方法 | |
JP5938569B2 (ja) | 方位情報を考慮する高度運転者支援システム、及びその動作方法 | |
US10232772B2 (en) | Driver assistance system | |
CN108604413B (zh) | 显示装置的控制方法及显示装置 | |
KR101986734B1 (ko) | 차량 운전 보조 장치 및 이의 안전 운전 유도 방법 | |
JP2017151694A (ja) | 安全確認診断システム及び安全確認診断方法 | |
JP2019091255A (ja) | 情報処理装置、運転者モニタリングシステム、情報処理方法、及び情報処理プログラム | |
JP2019088522A (ja) | 情報処理装置、運転者モニタリングシステム、情報処理方法、及び情報処理プログラム | |
JP2018005468A (ja) | 車両の制御装置 | |
JP6631569B2 (ja) | 運転状態判定装置、運転状態判定方法及び運転状態判定のためのプログラム | |
JP2017129973A (ja) | 運転支援装置および運転支援方法 | |
JP4647387B2 (ja) | 車両の運転支援装置 | |
WO2018212090A1 (ja) | 制御装置及び制御方法 | |
US20190147264A1 (en) | Concentration determination apparatus, concentration determination method, and program for concentration determination | |
JP2018005830A (ja) | 車両の制御装置 | |
JP6880615B2 (ja) | ドライバ状態判定装置及び運転支援システム | |
US12216470B2 (en) | Vehicle control system and vehicle driving method using the vehicle control system | |
JP7537450B2 (ja) | 車両制御装置、車両制御方法及び車両制御用コンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190904 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200821 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200901 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201026 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210218 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210406 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210419 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6880615 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |