Nothing Special   »   [go: up one dir, main page]

JP2023010800A - 表示装置 - Google Patents

表示装置 Download PDF

Info

Publication number
JP2023010800A
JP2023010800A JP2022181815A JP2022181815A JP2023010800A JP 2023010800 A JP2023010800 A JP 2023010800A JP 2022181815 A JP2022181815 A JP 2022181815A JP 2022181815 A JP2022181815 A JP 2022181815A JP 2023010800 A JP2023010800 A JP 2023010800A
Authority
JP
Japan
Prior art keywords
vehicle
system reliability
pointer
display
display control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022181815A
Other languages
English (en)
Other versions
JP7416176B2 (ja
Inventor
佐弥香 小野
Sayaka Ono
義孝 不破本
Yoshitaka Fuwamoto
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2022181815A priority Critical patent/JP7416176B2/ja
Publication of JP2023010800A publication Critical patent/JP2023010800A/ja
Application granted granted Critical
Publication of JP7416176B2 publication Critical patent/JP7416176B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18Propelling the vehicle
    • B60W30/18009Propelling the vehicle related to particular drive situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0059Estimation of the risk associated with autonomous or manual driving, e.g. situation too complex, sensor failure or driver incapacity
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/179Distances to obstacles or vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B60K35/265Voice
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/20Data confidence level
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2200/00Type of vehicle
    • B60Y2200/10Road Vehicles
    • B60Y2200/11Passenger cars; Automobiles

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

【課題】車両の位置が地図情報の精度が低い区域に含まれるか否かをポインタの表示態様から運転者が把握することができる表示装置を提供する。【解決手段】車両の運転者用の車載表示器に画像を表示する表示装置であって、車両の自動運転システムから、自動運転システムの自動運転制御における車両の進路を含む走行計画を取得し、車両の位置が予め決められた地図情報の精度が低い区域に含まれる場合、車両の位置が地図情報の精度が低い区域に含まれない場合と比べて、車載表示器上で自動運転制御中における進路を示す画像であるポインタの表示態様を変化させる。【選択図】図3

Description

本発明は、車両の表示装置に関する。
従来、表示装置に関する技術文献として、特開2017-126287号が知られている。この公報には、車両に搭載されたHUD[ヘッドアップディスプレイ:Head UpDisplay]により車両のフロントガラスに車両の進路(予測走行軌跡)を表示することで運転者に車両の進路を認識させる装置が示されている。
特開2017-126287号
ところで、車両の自動運転制御においては、車両の外部環境などによって自動運転制御の継続可能性が変化し、自動運転制御の継続が難しい場合には運転者の介入が必要となることがある。このため、自動運転制御の継続可能性に関して運転者が直感的に把握できる表示を行うことが望ましい。
本発明の一態様は、車両の運転者用の車載表示器に画像を表示する表示装置であって、車両の自動運転システムから、当該自動運転システムの自動運転制御における車両の進路を含む走行計画を取得し、車両の位置が予め決められた地図情報の精度が低い区域に含まれる場合と車両の位置が地図情報の精度が低い区域に含まれない場合とで、自動運転制御中の進路を示す画像であるポインタの表示態様を変化させて車載表示器に表示させる。
本発明の一態様に係る表示装置によれば、車両の位置が地図情報の精度が低い区域に含まれるか否かをポインタの表示態様から運転者が把握することができる。
本発明の一態様に係る表示装置において、車載表示器は、ポインタを車両の前方の風景に重畳させて車両のフロントガラスに投影表示させるヘッドアップディスプレイであり、表示制御部は、ポインタの表示態様の変化としてポインタの透過度を変化させ、システム自信度が自信度閾値以上である場合のポインタの透過度と比べてシステム自信度が自信度閾値未満である場合のポインタの透過度を高くする、又は、システム自信度が低いほどポインタの透過度を高くしてもよい。
この表示装置によれば、車載表示器としてポインタを車両の前方の風景に重畳させて車両のフロントガラスに投影表示させるヘッドアップディスプレイを用いることで、運転者は車両前方を見るだけでポインタを視認することができ、ポインタの表示態様の変化によってシステム自信度の変化を運転者が把握することが容易になる。また、この表示装置によれば、ポインタの表示態様の変化としてポインタの透過度を変化させ、システム自信度が自信度閾値以上である場合のポインタの透過度と比べてシステム自信度が自信度閾値未満である場合のポインタの透過度を高くする、又は、システム自信度が低いほどポインタの透過度を高くするので、運転者はポインタが見えにくくなることから自動運転制御の継続可能性が低下していることを直感的に把握することができる。
本発明の一態様に係る表示装置において、表示制御部は、ポインタを複数表示し、当該複数のポインタは、予め設定されて所定時間ずつ離れた複数の未来時刻における走行計画上の車両の位置にそれぞれ対応する、又は、当該複数のポインタは、車両を起点として進路上で所定間隔ずつ離れた複数の位置にそれぞれ対応してもよい。
この表示装置によれば、複数のポインタのそれぞれが車両から所定間隔ずつ離れた複数の位置又は複数の未来時刻における走行計画上の車両の位置に対応するので、位置ごとのシステム自信度に応じて各ポインタの表示態様を変化させることが可能になり、これによって運転者は車両の進路上の位置に応じた自動運転制御の継続可能性を把握することができる。
本発明の一態様に係る表示装置において、自動運転システムから取得した情報に基づいてシステム自信度の低下の原因を認識する原因認識部を更に備え、表示制御部は、システム自信度の低下によりポインタの表示態様を変化させる場合に、システム自信度の低下の原因に応じてポインタの表示態様を変更してもよい。
この表示装置によれば、システム自信度の低下によりポインタの表示態様を変化させる場合に、システム自信度の低下の原因に応じてポインタの表示態様を変更するので、運転者はポインタの表示態様からシステム自信度の低下の原因を把握することができ、自動運転制御の継続可能性についてより適切に把握することができる。
以上説明したように、本発明の一態様によれば、車両の位置が地図情報の精度が低い区域に含まれるか否かをポインタの表示態様から運転者が把握することができる。
一実施形態に係る表示装置及び自動運転システムを示すブロック図である。 ポインタの表示態様の一例を示す図である。 システム自信度の低下によるポインタの表示態様の変化の一例を示す図である。 (a)ポインタの透過度とシステム自信度の関係の一例を示すグラフである。(b)ポインタの透過度とシステム自信度の関係の他の例を示すグラフである。 システム自信度の低下の原因が運転者介入示唆要因である場合のポインタの表示態様の一例を示す図である。 システム自信度の低下の原因が運転交代誘発要因である場合のポインタの表示態様の一例を示す図である。 システム自信度によるポインタの表示処理の一例を示すフローチャートである。 システム自信度の低下の原因よるポインタの表示処理の一例を示すフローチャートである。 MIDによるポインタの表示態様の変化の一例を示す図である。
以下、本発明の実施形態について図面を参照して説明する。
図1は、本実施形態に係る表示装置及び自動運転システムを示すブロック図である。図1に示されるように、表示装置1及び自動運転システム2は、例えば乗用車などの車両Vに搭載されている。
[自動運転システムの構成]
まず、自動運転システム2の構成について説明する。自動運転システム2は、車両Vの自動運転制御を実行するシステムである。自動運転制御とは、運転者が運転操作をすることなく、車両Vの走行する道路に沿って自動で車両Vを走行させる車両制御である。自動運転システム2は、運転者による自動運転制御の開始操作(例えば自動運転制御の開始ボタンを押す操作等)が行われた場合に、車両Vの自動運転制御を開始する。自動運転システム2は、自動運転制御中において、運転者による運転操作の介入が行われた場合に、自動運転制御を少なくとも一時的に解除して手動運転(オーバーライド状態)に移行する。自動運転システム2は、オーバーライド状態に移行された状態において、運転者による復帰操作(例えば、自動運転制御の復帰ボタンを押す操作、自動運転制御の開始ボタンを押す操作等)が行われた場合に、オーバーライド状態を解除して自動運転制御へ移行(復帰)する。
自動運転システム2は、自動運転ECU[Electronic Control Unit]3、外部センサ21、地図データベース22、内部センサ23、GPS[Global Positioning System]受信機24、及びアクチュエータ25を備える。
外部センサ21は、車両Vの周囲の物体を検出する検出器である。物体には、ガードレール、電柱、駐車車両などの静止物体の他、他車両、歩行者などの移動物体が含まれる。外部センサ21は、カメラ、レーダセンサのうち少なくとも一つを含む。カメラは、車両の周囲(少なくとも前方)を撮像する撮像機器である。カメラは、車両の周囲の撮像情報を自動運転ECU3へ送信する。カメラは、単眼カメラであってもよく、ステレオカメラであってもよい。レーダセンサは、電波(例えばミリ波)又は光を利用して車両の周辺の物体を検出する検出機器である。レーダセンサには、例えば、ミリ波レーダ又はライダー[LIDAR:Light Detection and Ranging]が含まれる。レーダセンサは、電波又は光を自車両の周辺に送信し、物体で反射された電波又は光を受信することで物体を検出する。レーダセンサは、検出した物体情報を自動運転ECU3へ送信する。外部センサ21は、車両Vの走行する走行車線の白線認識にも利用される。
地図データベース22は、地図情報を備えたデータベースである。地図データベース22は、車両Vに搭載された記憶部に格納されている。地図情報には、道路の位置情報、道路形状の情報(カーブ、直線部の種別、カーブの曲率など)、交差点及び分岐点の位置情報、並びに建物の位置情報などが含まれる。地図情報には、横断歩道の位置情報、一時停止線の位置情報などが含まれてもよい。地図情報には、物標の位置情報も含まれる。物標とは、地図上の位置が既知であり、車両の地図上の位置認識の基準として利用される物体である。物標には、一時停止線などの路面標示、電柱、道路の区画線、信号機などを含むことができる。なお、地図データベース22は、車両Vと通信可能な情報処理センターなどの施設のコンピュータに記憶されていてもよい。物標の位置情報は、地図データベースとは別体のデータベースに記憶されていてもよい。
内部センサ23は、車両Vの走行状態及び車両Vの運転者の運転操作を検出する検出器である。内部センサ23は、車両Vの走行状態を検出するために、車速センサ、加速度センサ、及びヨーレートセンサのうち少なくとも一つを含む。
車速センサは、車両Vの速度を検出する検出器である。車速センサの一例としては、車両Vの車輪又は車輪と一体に回転するドライブシャフト等に対して設けられ、車輪の回転速度を検出する車輪速センサが用いられる。車速センサは、検出した車両Vの車速情報を自動運転ECU3に送信する。加速度センサは、車両Vの加速度を検出する検出器である。加速度センサは、車両Vの前後方向の加速度を検出する前後加速度センサと、車両Vの横加速度を検出する横加速度センサとを含む。加速度センサは、検出した車両Vの加速度情報を自動運転ECU3に送信する。ヨーレートセンサは、車両Vの重心の鉛直軸周りのヨーレート(回転角速度)を検出する検出器である。ヨーレートセンサの一例として、ジャイロセンサが用いられる。ヨーレートセンサは、検出した車両Vのヨーレート情報を自動運転ECU3へ送信する。
GPS受信機24は、3個以上のGPS衛星から信号を受信することにより、車両Vの位置を測定する。位置の具体的な一例としては、緯度及び経度である。GPS受信機24は、測定した車両Vの位置情報を自動運転ECU3へ送信する。
アクチュエータ25は、車両Vの走行制御を実行する装置である。アクチュエータ25は、エンジンアクチュエータ、ブレーキアクチュエータ及び操舵アクチュエータを含む。エンジンアクチュエータは、自動運転ECU3からの制御信号に応じてエンジンに対する空気の供給量を変更することで、車両Vの駆動力を制御する。具体的な一例として、エンジンアクチュエータは、スロットル開度を変更することで車両Vの駆動力を制御する。なお、エンジンアクチュエータは、車両Vがハイブリッド車又は電気自動車である場合には、動力源としてのモータの駆動力を制御する。ブレーキアクチュエータは、自動運転ECU3からの制御信号に応じてブレーキシステムを制御し、車両Vの車輪へ付与する制動力を制御する。ブレーキシステムとしては、液圧ブレーキシステムを用いることができる。操舵アクチュエータは、電動パワーステアリングシステムのうち操舵トルクを制御するアシストモータの駆動を、自動運転ECU3からの制御信号に応じて制御する。これにより、操舵アクチュエータは、車両Vの操舵トルクを制御する。
自動運転ECU3は、CPU[Central Processing Unit]、ROM[Read Only Memory]、RAM[Random Access Memory]、CAN[Controller Area Network]通信回路などを有する電子制御ユニットである。自動運転ECU3は、CPUが出力する信号に基づいてハードウェアを制御し、後述する各種の機能を実現する。
自動運転ECU3は、車両位置認識部31、外部環境認識部32、走行状態認識部33、走行計画生成部34、自動運転制御部35、及びシステム自信度算出部36を有している。
車両位置認識部31は、GPS受信機24の位置情報及び地図データベース22の地図情報に基づいて、車両Vの地図上の位置を認識する。また、車両位置認識部31は、地図データベース22の地図情報に含まれた電柱などの物標の位置情報及び外部センサ21の検出結果を利用して、SLAM[Simultaneous Localization and Mapping]技術により車両Vの位置を認識する。車両位置認識部31は、その他、周知の手法により車両Vの地図上の位置を認識してもよい。
外部環境認識部32は、外部センサ21の検出結果に基づいて、車両Vの周辺環境を認識する。外部環境には、車両Vに対する物体の位置、車両Vに対する物体の相対速度、及び車両Vに対する物体の移動方向などが含まれる。外部環境認識部32は、他車両などの移動物体と電柱などの静止物体とを区別して認識してもよい。外部環境認識部32は、例えばテンプレートマッチングその他の手法により、物体の種類(車両、歩行者などの種類)を区別して認識することができる。外部環境には、外部センサ21の検出結果から白線認識処理によって認識された道路形状が含まれていてもよい。外部環境には、カメラの撮像画像を用いた車両前方の信号機の認識結果が含まれていてもよい。
走行状態認識部33は、内部センサ23の検出結果に基づいて、車両Vの走行状態を認識する。走行状態には、車両Vの車速、車両Vの加速度、車両Vのヨーレートが含まれる。具体的に、走行状態認識部33は、車速センサの車速情報に基づいて、車両Vの車速を認識する。走行状態認識部33は、加速度センサの車速情報に基づいて、車両Vの加速度を認識する。走行状態認識部33は、ヨーレートセンサのヨーレート情報に基づいて、車両Vの向きを認識する。
走行計画生成部34は、予め設定された目的地、地図データベース22の地図情報、車両位置認識部31の認識した車両Vの地図上の位置、外部環境認識部32により認識された車両Vの外部環境、及び走行状態認識部33により認識された車両Vの走行状態に基づいて、車両Vの走行計画を生成する。目的地は、運転者を含む乗員が設定した目的地であってもよく、自動運転システム2が提案した目的地であってもよい。
走行計画には、車両Vの進路が含まれている。車両Vの進路とは、自動運転制御において車両Vが走行する未来の走行軌跡である。走行計画生成部34は、目的地、現在の車両Vの地図上の位置、及び地図情報に基づいて目的地までの車両Vの目標ルート(車線単位の経路)を算出する。車両Vの目標ルートは、周知のナビゲーションシステム又は車両外部のサーバによって求められてもよい。
走行計画生成部34は、車両Vの目標ルートと車両Vの外部環境及び車両Vの走行状態とに基づいて、実際に車両Vが走行する車両Vの進路を算出する。車両Vの進路は、例えば、車両の走行経路上の車線の中央位置(車線幅方向における中央の位置)を通るように算出される。車両Vの進路は、目的地に向かうため車線変更が必要な場合には、例えば車両Vの走行車線の中央位置から区画線を跨いで車線変更先の隣接車線の中央位置に至るように算出される。車両Vの進路は、車両Vの前方に小型の落下物などが存在する場合には、走行車線内で落下物を回避するように算出される。
走行計画生成部34は、車両Vの進路の算出後、車両Vの進路を走行するための速度パターン(速度計画)を算出する。走行計画生成部34は、乗員の設定した自動運転制御の許容速度、地図情報に含まれる設定速度(例えば法定最高速度)、地図情報に含まれる一時停止線、信号機などの位置情報、先行車、歩行者などの外部環境などに基づいて、車両Vの速度パターンを算出する。走行計画生成部34は、車両Vの進路及び速度パターンを算出することで、車両Vの進路及び速度パターンを含む走行計画を生成する。なお、走行計画は上述した内容に限られず、自動運転制御において用いられる車両Vの進路を含む走行計画であればよい。
自動運転制御部35は、走行計画生成部34の生成した走行計画に基づいて、車両Vの自動運転制御を実行する。自動運転制御部35は、アクチュエータ25に制御信号を送信することにより、車両Vの車速、操舵角をコントロールして自動運転制御を実行する。
システム自信度算出部36は、自動運転制御のシステム自信度を算出する。システム自信度とは、自動運転制御の信頼性(確からしさ)を示す指標である。システム自信度は、自動運転制御の継続可能性に対応する。自動運転システム2は、例えばシステム自信度が終了閾値未満となった場合に自動運転制御を終了して、運転者主体の運転に切り替える。運転者主体の運転には、運転者による手動運転(完全手動運転)と、ACC[Adaptive Cruise Control]、LKA[Lane KeepingAssist]などの運転支援制御に支援される運転者の運転とが含まれる。終了閾値は予め設定された値の閾値である。以後、説明で用いる閾値は予め設定された値の閾値を意味する。
システム自信度算出部36は、外部環境認識部32による車両Vの外部環境に基づいて、システム自信度を算出する。システム自信度算出部36は、例えば自動運転制御を行う車両Vの周囲からの動的な外乱の影響を考慮してシステム自信度を算出することができる。
具体的に、システム自信度算出部36は、車両Vの周囲において他車両などの移動物体の数が一定数以上である場合、車両Vの周囲の移動物体の数が一定数未満である場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、車両Vの前方で一定距離内に先行車が存在する場合、先行車が存在しない場合と比べて、システム自信度を低い値として算出してもよい。
システム自信度算出部36は、車両Vの前方で一定距離内に先行車が存在する場合、車両Vと先行車との車間距離が短いほど、システム自信度を低い値として算出してもよい。システム自信度算出部36は、車両Vの後方で一定距離内に後続車が存在する場合、後続車が存在しない場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、車両Vに並走する並走車が存在する場合、並走車が存在しない場合と比べて、システム自信度を低い値として算出してもよい。
システム自信度算出部36は、車両Vの前方に衝突余裕時間(Time To Collision:TTC)がTTC閾値未満の物体が存在する場合、車両Vの前方に衝突余裕時間がTTC閾値未満の物体が存在しない場合と比べて、システム自信度を低い値として算出してもよい。なお、衝突余裕時間に代えて車間時間を用いてもよい。
システム自信度算出部36は、車両Vの進行方向で車両Vから一定距離内に歩行者が存在する場合、歩行者が存在しない場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、車両Vの進路を横断する方向に移動している歩行者が存在する場合、当該歩行者が存在しない場合と比べて、システム自信度を低い値として算出してもよい。歩行者ではなく、自転車、パーソナルモビリティなどの場合も同様とすることができる。
システム自信度算出部36は、車両Vの周囲の他車両が異常挙動を行っている場合、他車両が異常挙動を行っていない場合と比べて、システム自信度を低い値として算出してもよい。異常挙動とは、標準的な走行状況において他車両が行うことが予定されない異常な挙動である。異常挙動には、急減速、急加速、急操舵、ハザードランプの点灯などを含むことができる。システム自信度算出部36は、車両Vの周囲の他車両が予め設定された通常挙動を逸脱した場合、異常挙動を行っていると認識してもよい。通常挙動は、例えば加速度または減速度が閾値以下であり、車線の法定最高速度以下の速度で車線に沿った走行とすることができる。通常挙動を逸脱した場合には、走行車線から車体がはみ出した状態で走行している場合を含むことができる。
システム自信度算出部36は、建物、他車両などによる外部センサ21の検出範囲の遮蔽割合が遮蔽閾値以上である場合、外部センサ21の検出範囲の遮蔽割合が遮蔽閾値未満である場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、車両Vの地図上の位置と地図情報に含まれる物標の位置情報とに基づいて地図上で外部センサ21の検出範囲に含まれる物標を認識し、外部環境認識部32の認識した物標(静止物体)と照合してもよい。システム自信度算出部36は、地図上で外部センサ21の検出範囲に含まれる物標の数から外部環境認識部32の認識した物標の数を減じた差分数が差分閾値以上である場合、差分数が差分閾値未満である場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、建物などによる外部センサ21の検出範囲の遮蔽を踏まえて、地図上で外部センサ21の検出範囲に含まれる物標の数を認識してもよい。
システム自信度算出部36は、車両Vの外部環境として他車両などの移動物体のトラッキング状況に基づいて、システム自信度を算出してもよい。システム自信度算出部36は、外部センサ21の検出範囲内でトラッキングしていた移動物体をロストした場合、移動物体をロストしない場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、トラッキング中の移動物体の形状又は体積が一定割合以上に変化した場合、複数の物体を一つの移動物体と誤認識している可能性が高まることから、移動物体の形状又は体積が変化しない場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、トラッキング中の移動物体の相対速度が急変した場合、速度の異なる複数の物体を誤って一つの物体として誤認識している可能性が高まることから、移動物体の相対速度が急変しない場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、例えば、一定時間内の速度変化が急変閾値以上である場合に相対速度が急変したと認識することができる。
システム自信度算出部36は、車両Vの外部環境に車両前方の信号機の認識結果が含まれる場合、認識された信号機の形状と地図情報に記憶された信号機の形状とが一致しない場合(例えば認識した信号機の灯火の数が三つ+矢印灯火であり、地図情報における信号機の灯火の数が三つの三灯式である場合)、認識された信号機の形状と地図情報に記憶された信号機の形状とが一致する場合と比べて、システム自信度を低い値として算出してもよい。信号機の形状だけではなく信号機の寸法を考慮してもよい。また、信号機以外の物標の形状又は寸法を用いてもよい。システム自信度算出部36は、信号機の矢印灯火が通常の灯火と比べて認識に遅れが生じることから、信号機が矢印灯火付きで車両Vとの距離が一定距離以上である場合に、信号機が矢印灯火付きではない場合と比べて、システム自信度を低い値として算出してもよい。
システム自信度算出部36は、車両Vの外部環境に車両Vの周囲の天候が含まれる場合、車両Vの周囲の天候が雨天であるとき、車両Vの周囲の天候が晴天であるときと比べて、システム自信度を低い値として算出してもよい。車両Vの周囲の天候は、カメラの撮像情報又はレーダセンサの検出結果に基づいて判定することができる。車両Vの周囲の天候は、車両Vのワイパー作動状況なども踏まえて判定してもよい。
システム自信度算出部36は、車両Vの進路に対する移動物体の干渉度に基づいて、システム自信度を算出してもよい。車両Vの進路に対する移動物体の干渉度は、例えば特開2007-23454号公報に記載の手法を用いて算出することができる。システム自信度算出部36は、例えば車両Vの進路に対する移動物体の干渉度が高いほど、システム自信度を低い値として算出する。
システム自信度算出部36は、車両Vの周囲の移動物体の危険度に基づいて、システム自信度を算出してもよい。車両Vの周囲の移動体の危険度は、例えば特開2008-158969号公報に記載の手法を用いて算出することができる。システム自信度算出部36は、例えば車両Vの進路に対する移動物体の危険度が高いほど、システム自信度を低い値として算出する。
システム自信度算出部36は、車両位置認識部31による車両Vの地図上の位置に基づいて、システム自信度を算出してもよい。システム自信度算出部36は、例えば、GPS受信機24の位置情報に加えて物標を用いた車両Vの位置認識を行っている場合、GPS受信機24の位置情報のみから車両Vの位置を認識している場合と比べて、システム自信度を低い値として算出する。
システム自信度算出部36は、地図情報の精度が低い区域に車両Vが位置する場合、それ以外の区域に車両Vが位置する場合と比べて、システム自信度を低い値として算出してもよい。地図情報の精度が低い区域であるか否かの情報は、例えば地図情報に予め関連付けられている。システム自信度算出部36は、GPS受信機24が信号を受信しているGPS衛星の数が一定数以上である場合、GPS衛星の数が一定数未満である場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、GPS受信機24が信号を受信しているGPS衛星の配置が分散している場合、GPS衛星の配置が集中している場合と比べて、システム自信度を低い値として算出してもよい。
システム自信度算出部36は、車両Vの周囲に位置する物標の認識数が一定数未満である場合、物標の認識数が一定数以上である場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、車両Vの周囲で認識された複数の物標の位置関係が地図情報における各物標の位置関係と一致していない場合、認識された複数の物標の位置関係が地図情報における各物標の位置関係と一致している場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、認識された複数の物標の位置関係が地図情報における各物標の位置関係と一致しない場合において、各物標の位置誤差の平均が一定距離未満であるとき、各物標の位置誤差の平均が一定距離以上であるときと比べて、システム自信度を低い値として算出してもよい。平均に代えて中央値を用いてもよく、合計値を用いてもよい。
システム自信度算出部36は、交差点、踏み切り、合流区間、分岐区間などの複雑な道路環境に車両Vが位置する場合、車両Vが複雑な道路環境に位置しない場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、地図情報に予め設定された見通しの悪い区間に車両Vが位置する場合、見通しの悪い区間に車両Vが位置しない場合と比べて、システム自信度を低い値として算出してもよい。
システム自信度算出部36は、走行状態認識部33による車両Vの走行状態に基づいて、システム自信度を算出してもよい。システム自信度算出部36は、車両Vの車速の検出結果が異常値となった場合、車速の検出結果が異常値となっていない場合と比べて、システム自信度を低い値として算出してもよい。システム自信度算出部36は、例えば1フレーム前に検出された車速と今回検出された車速との差が異常検出閾値以上(例えば20km/h以上)である場合に異常値となっていると認識する。加速度、ヨーレートについても同様とすることができる。
システム自信度算出部36は、走行状態認識部33による車両Vの走行状態と走行計画生成部34の生成した走行計画とに基づいて、走行計画で計画されていた車両Vの走行状態と自動運転制御を行った結果として認識された車両Vの走行状態との比較結果から、システム自信度を算出してもよい。システム自信度算出部36は、例えば、走行計画で計画されていた車速と自動運転制御の結果としての車速の履歴との乖離が乖離閾値以上である場合、乖離が乖離閾値未満である場合と比べて、システム自信度を低い値として算出してもよい。加速度、ヨーレートについても同様とすることができる。
その他、システム自信度算出部36は、車両Vの各種センサ(外部センサ、内部センサなど)の異常を検出した場合には、各種センサが正常である場合と比べて、システム自信度を低い値として算出してもよい。センサの異常検出については周知の異常検出技術を用いることができる。
システム自信度算出部36は、車両Vの進路上の位置(未来の位置)に対応するシステム自信度の算出(予測)を行う。車両Vの進路上の位置とは、例えば、予め設定されて所定時間ずつ離れた複数の未来時刻における走行計画上の車両Vの位置である。所定時間は、例えば1秒であってもよく、0.5秒であってもよい。所定時間は車両Vの車速が高いほど小さい時間としてもよい。未来時刻の数は二以上であればよい。システム自信度算出部36は、車両Vからの距離が遠いほどシステム自信度を低い値として算出してもよい。
或いは、車両Vの進路上の位置は、車両Vの進路上で車両Vを起点として所定間隔ずつ離れた複数の位置であってもよい。所定間隔は例えば10mであってもよく、15mであってもよい。システム自信度の算出対象となる位置の数は固定であってもよく、車両Vの車速などに応じて変更されてもよい。算出対象となる位置の数は、車両Vの車速が高いほど増加してもよい。
システム自信度算出部36は、車両Vの外部環境から車両Vの周囲の移動物体の挙動を予測することで、車両Vの進路上の位置における未来のシステム自信度を算出することができる。システム自信度算出部36は、例えば、車両Vの周囲の移動物体の挙動を予測することで、車両Vの進路上の位置ごとに車両Vの周囲における移動物体の数を推測する。システム自信度算出部36は、移動物体の推測数が一定数以上である場合、車両Vの周囲の移動物体の推測数が一定数未満である場合と比べて、当該位置におけるシステム自信度を低い値として算出する。
システム自信度算出部36は、車両Vの周囲の他車両の挙動の予測から、車両Vの進路上の位置ごとに車両Vの一定距離内に先行車が存在するか否かを判定し、先行車の有無の判定結果から車両Vの進路上の位置ごとのシステム自信度を算出してもよい。また、システム自信度算出部36は、車両Vの進路上の位置ごとにおける先行車の挙動の予測から車両Vと先行車との車間距離を推測し、車両Vと先行車との車間距離の推測結果に基づいて車両Vの進路上の位置ごとのシステム自信度を算出してもよい。後続車、並走車についても同様に算出することができる。
システム自信度算出部36は、車両Vの進路上の位置ごとの車両Vと移動物体との衝突余裕時間を推定してシステム自信度の算出に用いてもよい。また、システム自信度算出部36は、移動物体の挙動の予測に加えて、静止物体の位置情報を含む地図情報を考慮することで、車両Vの進路上の位置ごとの外部センサ21の検出範囲の遮蔽割合を予測してシステム自信度の算出に用いてもよい。また、システム自信度算出部36は、上述した車両Vの進路に対する移動物体の干渉度又は車両Vの周囲の移動物体の危険度を用いて、車両Vの進路上の位置ごとのシステム自信度を算出してもよい。
システム自信度算出部36は、地図情報に基づいて、車両Vの進路上の位置ごとのシステム自信度を算出してもよい。システム自信度算出部36は、例えば、地図情報に基づいて車両Vの進路上の位置ごとに認識できる物標の数をそれぞれ予測する。システム自信度算出部36は、進路上のある位置において認識できる物標の数が物標閾値未満である場合、物標の数が物標閾値以上である場合と比べて、当該位置におけるシステム自信度を低い値として算出してもよい。システム自信度算出部36は、車両Vの進路上の位置が地図情報の精度が低い区域に含まれる場合、当該位置が地図情報の精度が低い区域に含まれない場合と比べて、当該位置におけるシステム自信度を低い値として算出してもよい。車両Vの進路上の位置が複雑な道路環境に位置する場合、車両Vの進路上の位置が見通しの悪い区間に位置する場合についても同様とすることができる。
次に、システム自信度算出部36によるシステム自信度の低下の原因の特定について説明する。システム自信度算出部36は、システム自信度が原因特定閾値未満になった場合、システム自信度の低下の原因を特定する。システム自信度の低下の原因には、車両Vの周囲の移動物体の数の増加を含むことができる。移動物体の数は、歩行者の数と他車両の数とに区別されていてもよい。
システム自信度の低下の原因には、車両Vと先行車との車間距離の短さを含んでもよく、並走車の存在を含んでもよい。システム自信度の低下の原因には、物標の認識数が含まれてもよく、地図情報の精度が低い区域であることが含まれてもよい。システム自信度の低下の原因には、外部センサ21の検出範囲の遮蔽割合の増加が含まれてもよく、車両Vのセンサ異常が含まれてもよい。その他、システム自信度の低下の原因には、上述したシステム自信度の算出に用いた各種の要因を含めることができる。
システム自信度算出部36は、複数の要因によってシステム自信度が原因特定閾値未満になった場合、最も影響の大きい要因を特定する。システム自信度算出部36は、要因ごとにシステム自信度の低下量が予め定められている場合、システム自信度の低下量が最も大きい要因をシステム自信度の低下の原因として特定する。或いは、システム自信度算出部36は、要因に予め優先順位を設定し、優先順位が最も高い要因をシステム自信度の低下の原因として特定してもよい。
システム自信度算出部36は、車両Vの進路上の位置に対応する未来のシステム自信度についても、同様にしてシステム自信度の低下の原因を特定する。なお、システム自信度算出部36は、システム自信度が原因特定閾値未満になった場合ではなく、一定時間内におけるシステム自信度の低下量が低下量閾値以上である場合に、システム自信度の低下の原因を特定してもよい。
[表示装置の構成]
次に、本実施形態に係る表示装置1の構成について説明する。表示装置1は、自動運転システム2から取得した情報に基づいて、自動運転システム2の自動運転制御に関する画像を運転者に対して表示する。
自動運転システム2から取得した情報には、上述した走行計画の進路に関する情報、システム自信度に関する情報、及びシステム自信度の低下の原因に関する情報が含まれる。なお、自動運転システム2から取得した情報には、地図データベース22の地図情報、車両Vの地図上の位置、車両Vの外部環境、車両Vの走行状態のうち少なくとも一つが含まれてもよい。
表示装置1は、車両Vに搭載された表示制御ECU10の少なくとも一部とHMI[Human Machine Interface]4とを含んで構成されている。表示制御ECU10は、CPU[、ROM、RAMなどを有する電子制御ユニットである。表示制御ECU10は、CPUが出力する信号に基づいてハードウェアを制御し、後述する各種の機能を実現する。
HMI4は、表示装置1及び自動運転システム2と運転者との間で情報の入出力を行うためのインターフェイスである。HMI4は、車載表示器41及びスピーカ42を有している。
車載表示器41は、車両Vに搭載された運転者用の表示機器である。車載表示器41は、例えばHUD[ヘッドアップディスプレイ:Head Up Display]とすることができる。HUDとは、運転者から見て車両の前方の風景に重畳するように車両Vのフロントガラス上に画像を投影表示する表示器である。HUDは、例えば車両Vのインストルメントパネルの奥側でダッシュボード下に設けられた映写部を有している。映写部は、ダッシュボード上に設けられた開口部を介してフロントガラスに光を照射することで画像を投影する。運転者は、フロントガラス表面の反射により画像を視認することができる。車載表示器41は、表示制御ECU10又は自動運転ECU3からの制御信号に応じて各種の画像をフロントガラス上に投影表示する。
スピーカ42は、音声を出力する出力部である。スピーカ42は、例えば車両Vのドアの内側に設けられている。スピーカ42は、表示制御ECU10又は自動運転ECU3からの制御信号に応じて運転者に対する音声出力を行う。
以下、表示制御ECU10の機能的構成について説明する。表示制御ECU10は、走行計画取得部11、自信度取得部12、原因認識部13、及び表示制御部14を有している。
走行計画取得部11は、自動運転システム2の走行計画生成部34が生成した走行計画を取得する。走行計画取得部11は、例えば自動運転ECU3から送信された走行計画に関する情報に基づいて、自動運転制御の走行計画を取得する。走行計画には、車両Vの進路が含まれる。なお、走行計画取得部11は、走行計画の全ての情報を取得する必要はなく、走行計画のうち後述するポインタの表示に用いる情報を取得すればよい。
自信度取得部12は、自動運転システム2のシステム自信度算出部36が算出した自動運転制御のシステム自信度を取得する。自信度取得部12は、例えば自動運転ECU3から送信されたシステム自信度の情報に基づいて、システム自信度を取得する。システム自信度は、少なくとも車両Vの外部環境に基づいて算出されている。
原因認識部13は、自動運転システム2のシステム自信度算出部36が特定したシステム自信度の低下の原因を認識する。原因認識部13は、例えば自動運転ECU3から送信されたシステム自信度の低下の原因の情報に基づいて、システム自信度の低下の原因を認識する。原因認識部13は、システム自信度算出部36がシステム自信度の低下の原因を特定する度に当該原因を認識してもよく、システム自信度の低下により後述するポインタの表示態様の変更を行う場合に当該原因を認識してもよい。
表示制御部14は、車両Vの自動運転制御中に、車両Vの進路を示す画像であるポインタを車載表示器41に表示させる。表示制御部14は、走行計画取得部11の取得した走行計画に基づいて、車両Vの運転者からみて車両Vの進路に対応するようにポインタを表示する。ポインタの画像は特に限定されず、運転者が自動運転制御における車両Vの進路を把握できる画像であればよい。ポインタは、例えば車両Vから見て手前側が開放され、車両Vから見て奥側が閉じた逆U字状又はコの字状の画像とすることができる。ポインタは、車両Vの進行方向に先端が向く逆V字状の画像であってもよく、車両Vの進行方向に頂点の一つが向いた三角形状の画像であってもよい。また、ポインタは、車両Vをイメージした車の画像であってもよい。
表示制御部14は、例えば車載表示器41により車両Vのフロントガラス上にポインタの画像を投影表示させる。これにより、表示制御部14は、車両Vの運転者の視界に車両Vの前方の風景に重畳するようにポインタの画像を表示させることができる。
表示制御部14は、走行計画に加えて、自動運転システム2の外部環境認識部32が認識した車両Vの外部環境(車両Vの前方の区画線の位置など)と運転者の視点位置とに基づいて、ポインタの表示位置を決定してもよい。運転者の視点位置は、予め決められた位置であってもよく、車両Vのドライバモニタカメラなどによって測定された位置であってもよい。
また、表示制御部14は、車両Vの進路上の位置にそれぞれ対応する複数のポインタを表示する。車両Vの進路上の位置の定義は、システム自信度の算出の説明で述べたとおりである。表示制御部14は、一例として、予め設定されて所定時間ずつ離れた複数の未来時刻における走行計画上の車両Vの位置に対応するように複数のポインタを表示する。複数の未来時刻における走行計画上の車両Vの位置は、走行計画から求めることができる。表示制御部14は、周知のHUDの表示制御の技術を用いて、運転者から見て所定時間ずつ離れた複数の未来時刻における走行計画上の車両Vの位置に対応するようにフロントガラス上に複数のポインタを投影表示することができる。表示制御部14は、各ポインタの付近に車両Vの到着時刻(例えば1秒後、2秒後など)を表示してもよい。
表示するポインタの数は、予め設定されていてもよく、車両Vの車速などに応じて増減してもよい。例えば、車両Vの車速が高いほどポインタの数を増やしてもよい。ポインタの数は、例えば車両Vの手前側のポインタに対して車両Vの奥側のポインタが追加されることにより増加する。表示するポインタの数は、システム自信度算出部36においてシステム自信度の算出対象となる車両Vの進路上の位置の数と同じであってもよい。ポインタは一つのみであってもよい。
ここで、図2は、ポインタの表示態様の一例を示す図である。図2は、車両Vのフロントガラス上にポインタを投影表示した状況を示している。図2に、車両Vの走行する走行車線R1、走行車線R1に対向する対向車線R2、走行車線R1の区画線L1、走行車線R1と対向車線R2とを分ける中央線L2、対向車線R2の区画線L3、車両Vの進路C、ポインタP1-P5を示す。
ポインタP1-P5は、車載表示器41によって車両Vのフロントガラスに投影表示されている。ポインタP1-P5は、車両Vの手前側から奥側に向かってポインタP1-P5の順に表示されている。
ポインタP1-P5は、所定時間ずつ離れた複数の未来時刻における走行計画上の車両Vの位置にそれぞれ対応する。具体的に、ポインタP1は、走行計画上における1秒後の車両Vの位置に対応する。ポインタP2は、走行計画上における2秒後の車両Vの位置に対応する。ポインタP3は、走行計画上における3秒後の車両Vの位置に対応する。ポインタP4は、走行計画上における4秒後の車両Vの位置に対応する。ポインタP5は、走行計画上における5秒後の車両Vの位置に対応する。
なお、図2では、車両Vの進路Cは走行車線R1の中央を通っているが、必ずしも進路Cが走行車線R1の中央を通る必要はない。車両Vが車線変更を行う場合には、車両Vの進路Cが車線変更先の区画線を跨ぐ進路となり、ポインタP1-P5のうち少なくとも一つが当該区画線と重なって表示される。また、車両Vの進路Cは、車両Vのフロントガラスに表示されている必要はない。
表示制御部14は、システム自信度に応じてポインタの表示態様を変化させる。表示態様の変化には、透過度の変化、輝度の変化、色の変化、形状の変化、大きさの変化、点滅の有無の変化、点滅速度の変化、揺らぎの有無の変化、揺らぎ量の変化のうち少なくとも一つを含む。また、ポインタを三次元表示する場合には表示態様に三次元表示における見かけ上の高さ(例えば路面に対する見かけ上の高さ)を含んでもよい。
表示制御部14は、例えば、システム自信度が自信度閾値未満である場合、システム自信度が自信度閾値以上である場合と比べて、ポインタの透過度を高くする。自信度閾値はシステム自信度の算出の説明で述べた原因特定閾値と同じ値であってもよい。自信度閾値は固定値であってもよく、乗員の設定などによって変更可能な値であってもよい。
ポインタの透過度とは、ポインタと重なる背景がポインタを透過する度合いである。ポインタと重なる背景の例示としては、路面、区画線、一時停止線などの路面標示が挙げられる。透過度の調整方法は特に限定されない。透過度は、例えばポインタを表示するための光量を変更することで調整されてもよい。
具体的に、表示制御部14は、システム自信度が自信度閾値以上である場合には、予め決められた基準の透過度による基準の表示態様でポインタを表示する。基準の透過度は、薄らと背景が運転者から見える程度の透過度であってもよく、背景がほとんど見えない程の透過度であってもよい。表示制御部14は、システム自信度が自信度閾値未満である場合には、透過度増加の表示態様でポインタを表示する。図2は、システム自信度が自信度閾値以上である場合を示しており、ポインタP1-P5は基準の表示態様で示されている。
図3は、システム自信度の低下によるポインタの表示態様の変化の一例を示す図である。図3では、システム自信度の低下によりポインタP4及びポインタP5が透過度増加の表示態様となっている。すなわち、ポインタP4及びポインタP5の対応する位置においてシステム自信度が自信度閾値未満となっている。表示制御部14は、ポインタP1-P5のうち、対応する位置におけるシステム自信度が自信度閾値未満となるポインタの表示態様を基準の表示態様から透過度増加の表示態様に変化させる。
ここで、図4(a)は、ポインタの透過度とシステム自信度の関係の一例を示すグラフである。図4(a)の縦軸は透過度、横軸はシステム自信度を示している。図4(a)に示すように、表示制御部14は、ポインタの対応する位置のシステム自信度が自信度閾値Th以上である場合、当該ポインタの透過度をH1(基準の透過度)とする。表示制御部14は、ポインタの対応する位置のシステム自信度が自信度閾値Th未満である場合、当該ポインタの透過度をH2とする。透過度H2は、透過度H1より高い値である。
なお、表示制御部14は、複数の閾値を用いてポインタの透過度を段階的に変化させてもよい。表示制御部14は、システム自信度が低いほど段階的にポインタの透過度を高くすることができる。
表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど、当該ポインタの透過度を連続的に高くしてもよい。図4(b)は、ポインタの透過度とシステム自信度の関係の他の例を示すグラフである。図4(b)に示すように、表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど当該ポインタの透過度を高くし、ポインタの対応する位置のシステム自信度が高いほど当該ポインタの透過度を低くしてもよい。ポインタの透過度の最低値を設定してもよく、ポインタの透過度の最高値を設定してもよい。表示制御部14は、システム自信度の低さに応じてポインタの表示を消してもよい。表示制御部14は、システム自信度の低下によりポインタの表示態様を変化させる場合に、変化させる位置を運転者に音声で通知してもよい。表示制御部14は、スピーカ42に制御信号を送信することで音声出力を行う。
表示制御部14は、システム自信度の低下によりポインタの表示態様を変化させる場合に、原因認識部13の認識したシステム自信度の低下の原因に応じてポインタの表示態様を変更する。
表示制御部14は、例えばシステム自信度の低下の原因に基づいて、運転者に求める行動を考慮してポインタの表示態様を変更する。具体的に、表示制御部14は、システム自信度の低下の原因が運転交代誘発要因である場合、システム自信度の低下の原因が運転交代誘発要因ではない場合と比べて、ポインタの色を刺激度が高い色(高刺激色)としてもよい。
運転交代誘発要因とは、自動運転制御が困難となる可能性があり、運転者に自動運転制御から運転者主体の運転への交代を要請する可能性がある要因である。運転交代誘発要因には、車両Vの周囲の歩行者の数が第1閾値以上であること、車両Vのセンサ異常(汚れ、天候の影響その他による自動運転制御が困難になるほどのセンサ精度の低下を含む)、車両Vの地図精度が低い区域への進入(自動運転制御を実行できないほどに地図精度が低い区域への進入)などのうち少なくとも一つが含まれる。歩行者には、自転車を含んでもよい。
図5は、システム自信度の低下の原因が運転交代誘発要因である場合のポインタの表示態様の一例を示す図である。図5においても、図3と同様に、ポインタP4及びポインタP5はシステム自信度の低下により透明度増加の表示態様となっている。図5に示すように、表示制御部14は、システム自信度の低下の原因が運転交代誘発要因である場合、ポインタP1-P5の全ての色を高刺激色の表示態様に変更する。高刺激色としては、例えば赤色を用いることができる。
また、表示制御部14は、システム自信度の低下の原因が運転者介入示唆要因である場合、システム自信度の低下の原因が運転者介入示唆要因及び運転交代誘発要因の何れでもない場合と比べて、ポインタの色を刺激度が高い色としてもよい。一方で、表示制御部14は、システム自信度の低下の原因が運転者介入示唆要因である場合、システム自信度の低下の原因が運転交代誘発要因である場合と比べて、ポインタの色を刺激度が低い色とする。
運転者介入示唆要因とは、運転者に運転を交代する必要性が生じ得るような要因(運転者に余力があれば運転交代を行って欲しい要因)である。運転者介入示唆要因には、外部センサ21の検出範囲の遮蔽割合の増加、車両Vのセンサ精度の低下などのうち少なくとも一つを含むことができる。運転者介入示唆要因には、車両Vの周囲の歩行者の数が第1閾値未満で第2閾値以上であることを含んでもよい。第2閾値は、第1閾値より小さい値として予め設定された値の閾値である。
図6は、システム自信度の低下の原因が運転者介入示唆要因である場合のポインタの表示態様の一例を示す図である。図6においても、図3と同様に、ポインタP4及びポインタP5はシステム自信度の低下により透明度増加の表示態様となっている。図6に示すように、表示制御部14は、システム自信度の低下の原因が運転者介入示唆要因である場合、ポインタP1-P5の全ての色を中刺激色の表示態様に変更する。中刺激色としては、例えば橙色、黄色を用いることができる。
表示制御部14は、システム自信度の低下の原因が運転者介入示唆要因及び運転交代誘発要因の何れでもない場合、予め設定された基準色によりポインタを表示する。基準色は、例えば青色、緑色を用いることができる。その他、色の刺激度は彩度を用いて定義してもよい。例えば刺激度が高いほど高い彩度とすることができる。
表示制御部14は、車両Vの進路C上の複数の位置におけるシステム自信度の低下の原因が異なる場合において、複数の位置のシステム自信度の低下の原因の少なくとも一つに運転交代誘発要因が含まれるときには、運転交代誘発要因を優先してポインタP1-P5の表示態様の変更を行う。同様に、表示制御部14は、車両Vの進路C上の複数の位置におけるシステム自信度の低下の原因が異なる場合において、複数の位置のシステム自信度の低下の原因の少なくとも一つに運転者介入示唆要因が含まれ且つ運転交代誘発要因が全く含まれないときには、運転交代誘発要因を優先してポインタP1-P5の表示態様の変更を行う。
なお、表示制御部14は、システム自信度の低下の原因に応じてポインタP1-P5の全ての色を揃える必要はない。表示制御部14は、システム自信度が低下しているポインタP4及びポインタP5のみ高刺激色又は中刺激色の表示態様に変更してもよい。表示制御部14は、ポインタP4とポインタP5のシステム自信度の低下の原因が異なる場合には、それぞれの原因に応じてポインタP4及びポインタP5の表示態様を変更してもよい。表示制御部14は、システム自信度の低下の原因を音声によって運転者に通知してもよい。表示制御部14は、スピーカ42に制御信号を送信することでシステム自信度の低下の原因の音声出力を行う。
[表示装置の処理]
次に、本実施形態に係る表示装置1の処理について説明する。図7は、システム自信度によるポインタの表示処理の一例を示すフローチャートである。図7に示すフローチャートの処理は、車両Vが自動運転制御中である場合に実行される。
図7に示すように、表示装置1の表示制御ECU10は、S10として、走行計画取得部11により自動運転システム2から走行計画を取得する。走行計画取得部11は、例えば自動運転ECU3から送信された走行計画に関する情報に基づいて、自動運転制御の走行計画を取得する。その後、表示制御ECU10は、S12に移行する。
S12において、表示制御ECU10は、自信度取得部12により自動運転制御のシステム自信度を取得する。自信度取得部12は、例えば自動運転ECU3から送信されたシステム自信度の情報に基づいて、システム自信度を取得する。その後、表示制御ECU10は、S14に移行する。
S14において、表示制御ECU10は、表示制御部14によりシステム自信度が自信度閾値以上であるか否かを判定する。表示制御部14は、車両Vの進路C上の位置にそれぞれ対応する複数のポインタを表示している場合には、複数のポインタのそれぞれについて上記判定を行う。表示制御ECU10は、システム自信度が自信度閾値以上である場合(S14:YES)、S16に移行する。表示制御ECU10は、システム自信度が自信度閾値未満である場合(S14:NO)、S18に移行する。
S16において、表示制御ECU10は、表示制御部14によりポインタを基準の表示態様で表示する。表示制御部14は、HMI4の車載表示器41に制御信号を送信することで、車両Vのフロントガラス上にポインタを基準の表示態様で表示する。ポインタは車両Vの進路Cを示すように表示される。その後、表示制御ECU10は今回の処理を終了する。
S18において、表示制御ECU10は、表示制御部14によりポインタを透過度増加の表示態様で表示する。表示制御部14は、HMI4の車載表示器41に制御信号を送信することで、車両Vのフロントガラス上にポインタを透過度増加の表示態様で表示する。ポインタは車両Vの進路Cを示すように表示される。その後、表示制御ECU10は今回の処理を終了する。なお、図7に示すフローチャートにおいてS12とS14の順番は逆であってもよく、同時に行われてもよい。
図8は、システム自信度の低下の原因よるポインタの表示処理の一例を示すフローチャートである。図8に示すフローチャートの処理は、図7に示すS18の処理が行われたときに実行される。図8のフローチャートの処理はポインタごとに行われてもよい。
図8に示すように、表示制御ECU10は、S20として、原因認識部13によりシステム自信度の低下の原因を認識する。原因認識部13は、例えば自動運転システム2のシステム自信度算出部36が特定したシステム自信度の低下の原因を認識する。その後、表示制御ECU10は、S22に移行する。
S22において、表示制御ECU10は、表示制御部14によりシステム自信度の低下の原因は運転交代誘発要因であるか否かを判定する。表示制御ECU10は、システム自信度の低下の原因は運転交代誘発要因であると判定された場合(S22:YES)、S24に移行する。表示制御ECU10は、システム自信度の低下の原因は運転交代誘発要因ではないと判定された場合(S22:NO)、S26に移行する。
S24において、表示制御ECU10は、表示制御部14によりポインタを高刺激色の表示態様で表示する。表示制御部14は、HMI4の車載表示器41に制御信号を送信することでポインタを高刺激色の表示態様で表示する。その後、表示制御ECU10は、今回の処理を終了する。
S26において、表示制御ECU10は、表示制御部14によりシステム自信度の低下の原因は運転者介入示唆要因であるか否かを判定する。表示制御ECU10は、システム自信度の低下の原因は運転者介入示唆要因であると判定された場合(S26:YES)、S28に移行する。表示制御ECU10は、システム自信度の低下の原因は運転者介入示唆要因ではないと判定された場合(S26:NO)、S30に移行する。
S28において、表示制御ECU10は、表示制御部14によりポインタを中刺激色の表示態様で表示する。表示制御部14は、HMI4の車載表示器41に制御信号を送信することでポインタを中刺激色の表示態様で表示する。その後、表示制御ECU10は、今回の処理を終了する。
S30において、表示制御ECU10は、表示制御部14によりポインタを基準色の表示態様で表示する。表示制御部14は、HMI4の車載表示器41に制御信号を送信することでポインタを基準色の表示態様で表示する。その後、表示制御ECU10は、今回の処理を終了する。
以上説明した本実施形態に係る表示装置1によれば、自動運転制御中における進路を示す画像であるポインタを、自信度取得部12が取得したシステム自信度に応じて表示態様を変化させるので、ポインタの表示態様をシステム自信度に応じて変化させない場合と比べて、自動運転制御の継続可能性に関して運転者が直感的に把握できる表示を行うことができる。
また、表示装置1によれば、車載表示器41としてポインタを車両の前方の風景に重畳させて車両Vのフロントガラスに投影表示させるHUDを用いることで、運転者は車両前方を見るだけでポインタを視認することができ、ポインタの表示態様の変化によってシステム自信度の変化を運転者が把握することが容易になる。また、表示装置1によれば、ポインタの表示態様の変化としてポインタの透過度を変化させ、システム自信度が自信度閾値以上である場合のポインタの透過度と比べてシステム自信度が自信度閾値未満である場合のポインタの透過度を高くする、又は、システム自信度が低いほどポインタの透過度を高くするので、運転者はポインタが見えにくくなることから自動運転制御の継続可能性が低下していることを直感的に把握することができる。
更に、表示装置1によれば、複数のポインタのそれぞれが複数の未来時刻における走行計画上の車両の位置に対応するので、位置ごとのシステム自信度に応じて各ポインタの表示態様を変化させることが可能になり、運転者は車両Vの進路C上の位置に応じた自動運転制御の継続可能性を把握することができる。
また、表示装置1によれば、システム自信度の低下によりポインタの表示態様を変化させる場合に、システム自信度の低下の原因に応じてポインタの表示態様を変更するので、運転者はポインタの表示態様からシステム自信度の低下の原因を把握することができ、自動運転制御の継続可能性についてより適切に把握することができる。
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。本発明は、上述した実施形態を始めとして、当業者の知識に基づいて種々の変更、改良を施した様々な形態で実施することができる。
例えば、表示制御ECU10は、必ずしも自動運転ECU3と別体である必要はなく、自動運転ECU3の一部であってもよい。
ポインタの表示態様の変化は、透過度の変化に限られない。表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど段階的または連続的に当該ポインタの輝度を低下させてもよい。段階的な変化とは図4(a)に示すような変化であり、連続的な変化とは図4(b)に示すような変化である。
表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど段階的または連続的に当該ポインタの色を刺激度が低い色から刺激度が高い色に変化させてもよい。表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど段階的または連続的に当該ポインタの彩度が高くなるように変化させてもよい。
逆に、表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど段階的または連続的に当該ポインタの色を刺激度が高い色から刺激度が低い色に変化させてもよい。同様に、表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど段階的または連続的に当該ポインタの彩度が低くなるように変化させてもよい。
表示制御部14は、ポインタの対応する位置のシステム自信度が形状用閾値未満である場合、システム自信度が形状用閾値以上である場合と比べて、当該ポインタの形状を変化させてもよい。表示制御部14は、システム自信度が形状用閾値未満である場合、形状用閾値以上である場合と比べて、当該ポインタの厚さ(例えば図2に示すポインタP1―P5の車両Vの進行方向における厚さ)が小さくなるように変化させてもよい。表示制御部14は、例えばシステム自信度が形状用閾値未満である場合、形状用閾値以上である場合と比べて、当該ポインタの線幅(例えば図2に示すポインタP1―P5の車両Vの進行方向における線幅)が小さくなるように変化させてもよい。表示制御部14は、システム自信度が形状用閾値未満である場合、形状用閾値以上である場合と比べて、当該ポインタの形状を角張った形状から丸みのある形状に変化させてもよい。
表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど段階的または連続的に当該ポインタの大きさを小さく変化させてもよい。表示制御部14は、ポインタの対応する位置のシステム自信度が点滅用閾値未満である場合、当該ポインタを点滅させてもよい。表示制御部14は、システム自信度が低いほど段階的または連続的に点滅速度を早くしてもよい。或いは、表示制御部14は、システム自信度が低いほど段階的または連続的に点滅速度を遅くしてもよい。
表示制御部14は、ポインタの対応する位置のシステム自信度が揺らぎ用閾値未満である場合、当該ポインタが揺らぐように表示させてもよい。揺らぐ方向は特に限定されないが、例えば車両Vの左右方向とすることができる。表示制御部14は、ポインタの対応する位置のシステム自信度が低いほど段階的または連続的に当該ポインタの揺らぎ量を大きくしてもよい。
表示制御部14は、上述したシステム自信度に応じたポインタの表示態様の変化は、システム自信度の低下の原因に応じたポインタの表示態様の変更に用いることも可能である。表示制御部14は、システム自信度に応じて変化させる表示態様の種類とシステム自信度の低下の原因に応じて変更する表示態様の種類とを異なる種類とすることができる。具体的に、表示制御部14は、システム自信度に応じてポインタの色を変化させる場合には、システム自信度の低下の原因に応じたポインタの表示態様の変更は色以外の変更(例えばポインタの形状の変更)とすることができる。
表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が運転交代誘発要因である場合、運転交代誘発要因ではない場合と比べて、当該ポインタの厚さまたは線幅が大きくなるように変化させてもよい。表示制御部14は、システム自信度の低下の原因が運転交代誘発要因又は運転者介入示唆要因である場合、ポインタを点滅させてもよい。表示制御部14は、システム自信度の低下の原因が運転交代誘発要因である場合、システム自信度の低下の原因が運転者介入示唆要因である場合と比べて、ポインタの点滅速度を早くしてもよい。
表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が運転交代誘発要因である場合、運転交代誘発要因ではない場合と比べて、当該ポインタの大きさを大きくしてもよい。表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が運転交代誘発要因又は運転者介入示唆要因である場合、ポインタが揺らぐように表示させてもよい。表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が運転交代誘発要因である場合、運転者介入示唆要因である場合と比べて、当該ポインタの揺らぎ量を大きくしてもよい。
なお、表示制御部14は、必ずしもシステム自信度に応じて変化させる表示態様の種類とシステム自信度の低下の原因に応じて変更する表示態様の種類とを異ならせる必要はない。表示制御部14は、ポインタを二つ以上の部位に分け、部位毎に色の変化を行ってもよい。表示制御部14は、例えばポインタを輪郭部分と輪郭内側の領域とに分け、システム自信度に応じてポインタの輪郭内側の領域の色を変化させると共に、システム自信度の低下の原因に応じてポインタの輪郭部分の色を変更してもよい。
また、表示制御部14は、複数のポインタについて、車両Vの進路上で車両Vを起点として所定間隔ずつ離れた複数の位置にそれぞれ対応するように表示してもよい。車両Vの進路上で車両Vを起点として所定間隔ずつ離れた複数の位置は、走行計画から求めることができる。所定間隔は特に限定されず、例えば10mとすることができる。
表示制御部14は、システム自信度の低下の原因について、運転交代誘発要因及び運転者介入示唆要因の一方のみを用いてもよい。また、表示制御部14は、システム自信度の低下の原因について、運転交代誘発要因又は運転者介入示唆要因を必ずしも用いる必要はない。表示制御部14は、例えばシステム自信度の低下の原因が維持される程度に着目して原因を区別してもよい。
具体的に、表示制御部14は、システム自信度の低下の原因が動的であるか準静的であるか静的であるかを区別する。システム自信度の低下の原因が動的である場合の例としては、車両Vと先行車との関係(車間距離など)、車両Vの周囲の移動物体の数、車両Vの周囲の歩行者の有無などが挙げられる。システム自信度の低下の原因が準静的である場合の例としては、車両Vのセンサ精度の低下、外部センサ21の検出範囲の遮蔽割合が第1遮蔽閾値以上、地図精度の低い区域に進入などが挙げられる。システム自信度の低下の原因が静的である場合の例としては、交差点、踏切などの道路形状に起因するもの、外部センサ21の検出範囲の遮蔽割合が第2遮蔽閾値以上、などが挙げられる。第2遮蔽閾値は、第1遮蔽閾値より大きい値として予め設定された閾値である。
表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が動的である場合、システム自信度の低下の原因が準静的又は静的である場合と比べて、当該ポインタの彩度を高い値としてもよい。また、表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が準静的である場合、システム自信度の低下の原因が静的である場合と比べて、当該ポインタの彩度を高い値としてもよい。
表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が動的である場合、システム自信度の低下の原因が準静的又は静的である場合と比べて、当該ポインタの形状を角張った形状から丸みのある形状に変更してもよい。表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が準静的である場合、システム自信度の低下の原因が静的である場合と比べて、当該ポインタの形状を角張った形状から丸みのある形状に変更してもよい。
表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が動的である場合、システム自信度の低下の原因が準静的又は静的である場合と比べて、当該ポインタの点滅速度を早くしてもよい。同様に、表示制御部14は、ポインタの対応する位置のシステム自信度の低下の原因が準静的である場合、システム自信度の低下の原因が静的である場合と比べて、当該ポインタの点滅速度を早くしてもよい。
表示制御部14は、周知のHUDの表示制御の技術を用いて、運転者から見て車両Vの進路上で車両Vから所定間隔ずつ離れた複数の位置に対応するようにフロントガラス上に複数のポインタを投影表示することができる。図2に示す場合において、表示制御部14は、例えば車両Vの進路上で車両Vから10m離れた位置に対応するようにポインタP1を表示する。表示制御部14は、車両Vの進路上で車両Vから20m離れた位置に対応するようにポインタP2を表示する。表示制御部14は、車両Vの進路上で車両Vから30m離れた位置に対応するようにポインタP3を表示する。表示制御部14は、車両Vの進路上で車両Vから40m離れた位置に対応するようにポインタP4を表示する。表示制御部14は、車両Vの進路C上で車両Vから50m離れた位置に対応するようにポインタP5を表示する。表示制御部14は、ポインタP1-P5がそれぞれ対応する位置におけるシステム自信度に応じて表示態様を変化させる。
なお、表示制御部14は、ポインタP1-P5のうち少なくとも一つが対応する位置のシステム自信度が自信度閾値未満である場合、全てのポインタP1-P5の表示態様を変化(例えば透過度増加の表示態様に変化)させてもよい。表示制御部14は、ポインタP1-P5の対応する位置のシステム自信度のうち、最も低いシステム自信度に応じて全てのポインタP1-P5の表示態様を変化させてもよい。
表示制御部14は、必ずしも複数のポインタと車両Vの進路C上の位置(未来の位置)のシステム自信度とを個別に対応させる必要はない。表示制御部14は、現在の位置における車両Vのシステム自信度に応じて複数のポインタ全ての表示態様を変化してもよい。同様に、表示制御部14は、現在の位置における車両Vのシステム自信度の低下の原因に応じて複数のポインタ全ての表示態様を変更してもよい。この場合、自動運転システム2のシステム自信度算出部36は未来のシステム自信度を算出する必要はない。なお、表示制御部14は、車両Vからの距離が遠いポインタほど透過度が高くなるように表示してもよい。また、表示制御部14は、常にポインタを一つのみ表示してもよい。
車載表示器41は、必ずしもHUDである必要はない。車載表示器41は、例えばMID[マルチインフォメーションディスプレイ:Multi Information Display]とすることができる。MIDは、例えば車両Vのインストルメントパネルに設けられている。車載表示器41は、車載のディスプレイ(例えばナビゲーションシステムなどに用いられる液晶ディスプレイ)であってもよい。車載のディスプレイは運転者が視認可能な位置に設けられる。
図9は、MIDによるポインタの表示態様の変化の一例を示す図である。図9に、車両Vに対応する自車両画像M、左側区画線画像La、右側区画線画像Lb、ポインタP10-P12を示す。進路CはポインタP10-P12との関係を示すための図示であり、MIDに表示する必要はない。
図9に示すポインタP10-P12は、例えば、所定時間ずつ離れた複数の未来時刻における走行計画上の車両Vの位置にそれぞれ対応する。ポインタP10は、走行計画上における1秒後の車両Vの位置に対応する。ポインタP11は、走行計画上における2秒後の車両Vの位置に対応する。ポインタP12は、走行計画上における3秒後の車両Vの位置に対応する。
図9に示す状況においては、システム自信度の低下によりポインタP12が透過度増加の表示態様となっている。この場合の背景としては、例えば車両Vが車線変更する場合にポインタP10-P12の何れかが重なる左側区画線画像La又は右側区画線画像Lbが挙げられる。或いは、表示制御部14は、システム自信度の低下に応じて透過度増加ではなく、輝度低下の表示態様としてもよい。また、表示制御部14は、原因認識部13によりシステム自信度の低下の原因が認識されている場合には、ポインタP10-P12の表示態様を変更する。このように、表示装置1は、車載表示器41がHUDである場合に限られず、MID又は車載のディスプレイの場合であっても適切に活用することができる。また、上述した種々の実施形態及び変形例も対応可能である。
表示装置1の原因認識部13は、必ずしも自動運転システム2のシステム自信度算出部36からシステム自信度の低下の原因の情報を直接取得する必要はない。原因認識部13は、自動運転システム2から取得した情報として、車両Vの外部環境、車両Vの周囲の移動物体の挙動の予測結果などを取得することで、自らシステム自信度の低下の原因を認識(特定)してもよい。この場合、システム自信度算出部36においてシステム自信度の低下の原因を特定する必要はない。
また、表示装置1は、必ずしもシステム自信度の低下の原因に応じてポインタの表示態様を変更する必要はない。このとき、表示装置1は、原因認識部13を有する必要はない。自動運転システム2は、システム自信度算出部36においてシステム自信度の低下の原因を特定する必要はない。
1…表示装置、2…自動運転システム、3…自動運転ECU、4…HMI、10…表示制御ECU、11…走行計画取得部、12…自信度取得部、13…原因認識部、14…表示制御部、21…外部センサ、22…地図データベース、23…内部センサ、31…車両位置認識部、32…外部環境認識部、33…走行状態認識部、34…走行計画生成部、35…自動運転制御部、36…システム自信度算出部、41…車載表示器、42…スピーカ、V…車両。

Claims (2)

  1. 車両の運転者用の車載表示器に画像を表示する表示装置であって、
    前記車両の自動運転システムから、前記自動運転システムの自動運転制御における前記車両の進路を含む走行計画を取得し、
    前記車両の位置が予め決められた地図情報の精度が低い区域に含まれる場合と前記車両の位置が前記地図情報の精度が低い区域に含まれない場合とで、前記自動運転制御中における前記進路を示す画像であるポインタの表示態様を変化させて前記車載表示器に表示させる、表示装置。
  2. 前記自動運転システムから、少なくとも前記車両の周辺の外部環境に基づいて算出された前記自動運転制御のシステム自信度を取得し、
    前記システム自信度に応じて前記ポインタの表示態様を変化させる、請求項1に記載の表示装置。
JP2022181815A 2018-10-16 2022-11-14 表示装置 Active JP7416176B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022181815A JP7416176B2 (ja) 2018-10-16 2022-11-14 表示装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018195228A JP7205154B2 (ja) 2018-10-16 2018-10-16 表示装置
JP2022181815A JP7416176B2 (ja) 2018-10-16 2022-11-14 表示装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018195228A Division JP7205154B2 (ja) 2018-10-16 2018-10-16 表示装置

Publications (2)

Publication Number Publication Date
JP2023010800A true JP2023010800A (ja) 2023-01-20
JP7416176B2 JP7416176B2 (ja) 2024-01-17

Family

ID=70159844

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018195228A Active JP7205154B2 (ja) 2018-10-16 2018-10-16 表示装置
JP2022181815A Active JP7416176B2 (ja) 2018-10-16 2022-11-14 表示装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018195228A Active JP7205154B2 (ja) 2018-10-16 2018-10-16 表示装置

Country Status (2)

Country Link
US (2) US11390293B2 (ja)
JP (2) JP7205154B2 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7083764B2 (ja) * 2019-02-06 2022-06-13 本田技研工業株式会社 車両制御装置、車両及び車両制御方法
CN112818727A (zh) * 2019-11-18 2021-05-18 华为技术有限公司 一种道路约束确定方法及装置
KR20210100241A (ko) * 2020-02-05 2021-08-17 현대모비스 주식회사 내비게이션 연동을 이용한 차선 표시용 램프 시스템 및 이에 의한 차선 표시 방법
WO2021237212A1 (en) * 2020-05-22 2021-11-25 Optimus Ride, Inc. Display system and method
KR20220028709A (ko) * 2020-08-31 2022-03-08 현대모비스 주식회사 차량용 주행 제어방법 및 시스템
US11721113B2 (en) * 2020-10-09 2023-08-08 Magna Electronics Inc. Vehicular driving assist system with lane detection using rear camera
CN112455465B (zh) * 2020-12-08 2022-02-01 广州小鹏自动驾驶科技有限公司 一种行驶环境感知方法、装置、电子设备和存储介质
CN112874533B (zh) * 2021-01-21 2022-08-23 江苏大学 一种基于v2x的汽车智能抬头显示系统及其方法
JP2022151067A (ja) * 2021-03-26 2022-10-07 株式会社デンソー 覚醒装置
US12071150B2 (en) * 2021-06-25 2024-08-27 Magna Electronics Inc. Vehicular driving assist system using forward viewing camera
US20230008230A1 (en) * 2021-07-09 2023-01-12 Magna Electronics Inc. Vehicular driving assistance system with enhanced traffic lane determination
JP7480756B2 (ja) * 2021-07-26 2024-05-10 トヨタ自動車株式会社 車両用表示制御装置、車両用表示装置、車両用表示制御方法及び車両用表示制御プログラム
JP2023017648A (ja) * 2021-07-26 2023-02-07 トヨタ自動車株式会社 車両用表示装置、車両用表示システム、車両用表示方法及びプログラム
CN115123303A (zh) * 2022-07-18 2022-09-30 腾讯科技(深圳)有限公司 车辆驾驶状态展示方法、装置、电子设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017004210A (ja) * 2015-06-09 2017-01-05 株式会社デンソー 経路設定装置及び自動走行制御システム
JP2017211366A (ja) * 2016-05-19 2017-11-30 株式会社リコー 移動体システム、情報表示装置
JP2018022473A (ja) * 2016-07-21 2018-02-08 パナソニックIpマネジメント株式会社 学習装置、識別装置、学習識別システム、及び、プログラム
JP2019138773A (ja) * 2018-02-09 2019-08-22 トヨタ自動車株式会社 表示装置

Family Cites Families (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3400584B2 (ja) 1994-12-19 2003-04-28 本田技研工業株式会社 車載用表示装置
JP3650946B2 (ja) 1996-09-27 2005-05-25 本田技研工業株式会社 自動走行車
JP2005346177A (ja) 2004-05-31 2005-12-15 Nissan Motor Co Ltd 車両用情報提示装置
JP4353192B2 (ja) 2006-03-02 2009-10-28 トヨタ自動車株式会社 進路設定方法、装置、プログラム、および自動運転システム
JP2007333502A (ja) 2006-06-14 2007-12-27 Nissan Motor Co Ltd 合流支援装置及び合流支援方法
JP2008070998A (ja) 2006-09-13 2008-03-27 Hitachi Ltd 車両周囲情報表示装置
JP4062353B1 (ja) 2006-11-10 2008-03-19 トヨタ自動車株式会社 障害物進路予測方法、装置、およびプログラム
JP5082433B2 (ja) 2006-12-26 2012-11-28 トヨタ自動車株式会社 移動体周囲危険度判定方法、装置、およびプログラム
JP5125400B2 (ja) 2007-10-19 2013-01-23 トヨタ自動車株式会社 車両走行制御装置
US8164543B2 (en) * 2009-05-18 2012-04-24 GM Global Technology Operations LLC Night vision on full windshield head-up display
JP6136714B2 (ja) 2013-07-30 2017-05-31 トヨタ自動車株式会社 車両制御装置
EP3040681B1 (en) * 2013-08-29 2019-05-22 Nissan Motor Co., Ltd Host vehicle with vehicle driving guidance device and method
DE102014009985A1 (de) * 2014-07-04 2016-01-07 Daimler Ag Verfahren zum Betreiben eines Kraftfahrzeugs in verschiedenen Fahrmodi sowie Kraftfahrzeug
JP6356584B2 (ja) 2014-11-28 2018-07-11 株式会社デンソー 予測進路推定装置
US9428194B2 (en) 2014-12-11 2016-08-30 Toyota Motor Engineering & Manufacturing North America, Inc. Splash condition detection for vehicles
JP6332170B2 (ja) 2015-07-01 2018-05-30 トヨタ自動車株式会社 自動運転制御装置
JP6409699B2 (ja) 2015-07-13 2018-10-24 トヨタ自動車株式会社 自動運転システム
JP6432468B2 (ja) 2015-08-28 2018-12-05 株式会社デンソー 車両制御装置及び走路推定方法
JP6350492B2 (ja) 2015-11-26 2018-07-04 トヨタ自動車株式会社 画像表示装置
JP6620564B2 (ja) 2016-01-15 2019-12-18 株式会社デンソー 移譲制御装置
JP6508095B2 (ja) 2016-03-11 2019-05-08 トヨタ自動車株式会社 車両の自動運転制御システム
EP3246664A3 (en) 2016-05-19 2018-02-14 Ricoh Company, Ltd. Information processing system and information display apparatus
US10112611B2 (en) 2016-07-25 2018-10-30 Toyota Motor Engineering & Manufacturing North America, Inc. Adaptive vehicle control systems and methods of altering a condition of a vehicle using the same
JP6515898B2 (ja) 2016-09-29 2019-05-22 トヨタ自動車株式会社 物標レーン関係認識装置
JP6591087B2 (ja) 2016-10-26 2019-10-16 三菱電機株式会社 表示制御装置、表示装置および表示制御方法
JP6489098B2 (ja) 2016-11-02 2019-03-27 トヨタ自動車株式会社 車両制御装置
CN108528269B (zh) 2017-02-21 2021-05-14 丰田自动车株式会社 驱动力控制装置
JP6853068B2 (ja) 2017-03-02 2021-03-31 トヨタ自動車株式会社 偏向制御装置
US10960924B2 (en) 2017-06-16 2021-03-30 Toyota Research Institute, Inc. Vehicle systems for adjusting resistance or sensitivity of steering wheels and/or accelerator pedals
US10431081B2 (en) 2017-07-10 2019-10-01 Toyota Research Institute, Inc. Providing user assistance in a vehicle based on traffic behavior models
JP6669141B2 (ja) 2017-08-07 2020-03-18 トヨタ自動車株式会社 配車システム、配車方法、サーバ、ユーザ端末、サーバプログラム、ユーザ端末プログラム、及び、記憶媒体
JP6991794B2 (ja) * 2017-08-29 2022-01-13 矢崎総業株式会社 車両用表示装置および表示制御方法
JP6834853B2 (ja) 2017-08-31 2021-02-24 トヨタ自動車株式会社 車両制御装置
JP6859902B2 (ja) 2017-08-31 2021-04-14 トヨタ自動車株式会社 車両制御装置
JP6766783B2 (ja) 2017-08-31 2020-10-14 トヨタ自動車株式会社 車両制御装置
US10996338B2 (en) 2017-09-12 2021-05-04 Toyota Research Institute, Inc. Systems and methods for detection by autonomous vehicles
JP6795792B2 (ja) 2017-09-28 2020-12-02 トヨタ自動車株式会社 運転支援装置
JP7095968B2 (ja) 2017-10-02 2022-07-05 トヨタ自動車株式会社 管理装置
JP6969276B2 (ja) 2017-10-19 2021-11-24 トヨタ自動車株式会社 移動体の利用システム、サーバ、及び移動体の利用方法
JP7035447B2 (ja) 2017-10-26 2022-03-15 トヨタ自動車株式会社 車両制御装置
US10588009B2 (en) 2017-10-27 2020-03-10 Toyota Jidosha Kabushiki Kaisha PSM message-based device discovery for a vehicular mesh network
US10569721B2 (en) 2018-01-04 2020-02-25 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous radar roof module
US11285896B2 (en) 2018-06-05 2022-03-29 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for vehicle sharing
US11041957B2 (en) 2018-06-25 2021-06-22 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for mitigating effects of high-reflectivity objects in LiDAR data
US10663963B2 (en) * 2018-08-03 2020-05-26 Here Global B.V. Method and apparatus for visualizing future events for passengers of autonomous vehicles
US11240941B2 (en) 2018-09-12 2022-02-01 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle lidar cooling system
US11273841B2 (en) 2018-09-20 2022-03-15 Toyota Research Institute, Inc. Method and apparatus for spoofing prevention

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017004210A (ja) * 2015-06-09 2017-01-05 株式会社デンソー 経路設定装置及び自動走行制御システム
JP2017211366A (ja) * 2016-05-19 2017-11-30 株式会社リコー 移動体システム、情報表示装置
JP2018022473A (ja) * 2016-07-21 2018-02-08 パナソニックIpマネジメント株式会社 学習装置、識別装置、学習識別システム、及び、プログラム
JP2019138773A (ja) * 2018-02-09 2019-08-22 トヨタ自動車株式会社 表示装置

Also Published As

Publication number Publication date
US11390293B2 (en) 2022-07-19
JP7205154B2 (ja) 2023-01-17
US20200114933A1 (en) 2020-04-16
JP2020064402A (ja) 2020-04-23
US11634150B2 (en) 2023-04-25
US20220297717A1 (en) 2022-09-22
JP7416176B2 (ja) 2024-01-17

Similar Documents

Publication Publication Date Title
JP7416176B2 (ja) 表示装置
US11884277B2 (en) Method for producing a model of the surroundings of a vehicle
US9896094B2 (en) Collision avoidance control system and control method
US20200324764A1 (en) Vehicular control system with pedestrian avoidance
US9963149B2 (en) Vehicle control device
CN109515434B (zh) 车辆控制装置、车辆控制方法及存储介质
US10754335B2 (en) Automated driving system
JP6402684B2 (ja) 表示装置
CN108604413B (zh) 显示装置的控制方法及显示装置
CN111731296B (zh) 行驶控制装置、行驶控制方法以及存储程序的存储介质
JP7238670B2 (ja) 画像表示装置
US11493919B2 (en) Vehicle including information presentation apparatus for presenting information to driver
JP2008230467A (ja) 走行支援装置
US12033403B2 (en) Vehicle control device, vehicle control method, and storage medium
CN114194186A (zh) 车辆行驶控制装置
US20220306150A1 (en) Control device, control method, and storage medium
JP7578496B2 (ja) 車両制御装置
US20230294702A1 (en) Control device, control method, and storage medium
US20220024462A1 (en) Control device for vehicle, control method for automated driven vehicle, and nontransitory recording medium provided with computer program
JP2022154532A (ja) 運転支援装置、運転支援方法、及びプログラム
CN117184057A (zh) 车辆安全行驶的控制方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230704

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230824

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231218

R151 Written notification of patent or utility model registration

Ref document number: 7416176

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151