JP2007249477A - Onboard information transmission device - Google Patents
Onboard information transmission device Download PDFInfo
- Publication number
- JP2007249477A JP2007249477A JP2006070550A JP2006070550A JP2007249477A JP 2007249477 A JP2007249477 A JP 2007249477A JP 2006070550 A JP2006070550 A JP 2006070550A JP 2006070550 A JP2006070550 A JP 2006070550A JP 2007249477 A JP2007249477 A JP 2007249477A
- Authority
- JP
- Japan
- Prior art keywords
- information
- vehicle
- driver
- notification
- occupant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Navigation (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本発明は、車両に取り付けられて各種情報を伝達する車載用情報伝達装置に関するものである。 The present invention relates to an on-vehicle information transmission device that is attached to a vehicle and transmits various types of information.
車両にはディスプレイなどドライバに情報を伝えるための表示装置が搭載されているが、ドライバに伝える情報の中でも、ドライバに確実に伝えるべき重要な情報と、必ずしもドライバに確実に伝えることが必要でないその他の情報とがある。確実にドライバに伝えるべき情報は、車の故障情報、周辺の障害物の接近情報などの運転に影響を及ぼす情報などであり、そこまでの重要度は高くないその他の情報は、ナビゲーション装置の案内情報、渋滞情報、ニュースなど、ドライバが必要なときに確認できればよい情報などである。 The vehicle is equipped with a display device such as a display to convey information to the driver. Among the information to be conveyed to the driver, important information that should be surely communicated to the driver and other things that do not necessarily need to be surely communicated to the driver There is information. Information that should be surely communicated to the driver is information that affects driving, such as vehicle failure information and approach information of nearby obstacles. Other information that is not so important is the guidance of the navigation device. Information, traffic information, news, etc. Information that only needs to be confirmed when the driver is needed.
そこで、重要度の高い車両情報を他の情報と輝度を変えて表示することにより認識性を向上させる車両用表示装置およびその表示方法が考案されている(特許文献1参照)。また、ユーザが知りたい情報を地図の手前下部に表示させる地図表示装置が考案されている(特許文献2参照)。 In view of this, a vehicle display device and its display method have been devised that improve the recognition by displaying highly important vehicle information with different brightness from other information (see Patent Document 1). In addition, a map display device has been devised that displays information that the user wants to know on the lower front side of the map (see Patent Document 2).
特許文献1および2の例では、ディスプレイなどの表示装置が故障した場合、ドライバに情報を伝える手段がなくなってしまうが、他の手段に切り替えて情報を伝える方法は検討されてない。また、ドライバに何らかの障害が生じて情報を認識できない場合の対応についても考慮されていない。
In the examples of
上記問題を背景として、本発明の課題は、ドライバに確実に情報を伝える車載用情報伝達装置を提供することにある。 With the above problem as a background, an object of the present invention is to provide an in-vehicle information transmission device that reliably transmits information to a driver.
上記課題を解決するための車載用情報伝達装置は、乗員に情報を報知する報知手段と、情報が乗員に伝えられたかどうかを判定する伝達完了判定手段と、情報が乗員に伝えられなかったと判定された場合に、当該情報を代替報知手段により報知する報知制御手段と、を備えることを特徴とする。 An in-vehicle information transmission device for solving the above-described problem is a notification means for notifying an occupant of information, a transmission completion determination means for determining whether information has been transmitted to the occupant, and a determination that information has not been transmitted to the occupant. A notification control means for notifying the information by an alternative notification means.
上記構成によって、ドライバを含む乗員に確実に情報を伝えることができるとともに、情報が乗員に伝えられない場合にのみ代替報知手段により報知されるので、既に伝えられた情報を何度も伝えて乗員が煩わしく感じることはない。 With the above configuration, the information can be reliably transmitted to the occupant including the driver, and the information is notified by the alternative notification means only when the information cannot be transmitted to the occupant. Never feel annoying.
また、本発明の車載用情報伝達装置は、情報の内容に応じてその情報の重要度を設定する重要度設定手段と、重要度によって当該情報が重要情報であるかどうかを判定する重要度判定手段と、を備え、報知制御手段は当該情報が重要情報であると判定された場合に、代替報知手段により当該情報を報知するように構成することもできる。 In addition, the in-vehicle information transmission device of the present invention includes importance setting means for setting the importance of the information according to the content of the information, and importance determination for determining whether the information is important information based on the importance. And the notification control means can be configured to notify the information by the alternative notification means when it is determined that the information is important information.
上記構成によって、ドライバを含む乗員に確実に伝えるべき重要情報のみが代替報知手段により報知されるので、重要情報が確実に報知されるとともに不要な情報が報知されて乗員が煩わしく感じることはない。 With the above configuration, only the important information that should be surely transmitted to the occupant including the driver is notified by the alternative notification means. Therefore, the important information is notified reliably and unnecessary information is notified and the occupant does not feel bothered.
また、本発明の車載用情報伝達装置は、車載用情報報知装置に対する操作を検出する操作検出手段を備え、伝達完了判定手段は所定の操作が検出された場合に情報が乗員に伝えられたと判定するように構成することもできる。 The in-vehicle information transmission device of the present invention further includes an operation detection unit that detects an operation on the in-vehicle information notification device, and the transmission completion determination unit determines that the information is transmitted to the occupant when a predetermined operation is detected. It can also be configured to.
上記構成によって、乗員がその情報が伝えられた旨の操作を行うことで、情報が報知されたことを確実に判定することが可能となる。 With the above configuration, it is possible to reliably determine that the information has been notified by performing an operation to the effect that the information has been transmitted.
また、本発明の車載用情報伝達装置は、報知手段の故障を検出する故障検出手段を備え、報知制御手段は報知手段の故障が検出された場合に情報を代替報知手段により報知するように構成することもできる。 The on-vehicle information transmission device of the present invention includes a failure detection unit that detects a failure of the notification unit, and the notification control unit is configured to notify the information by the alternative notification unit when a failure of the notification unit is detected. You can also
情報の重要度によって表示の輝度を変える構成の従来技術では、報知手段となるその表示器が故障したら全ての情報を伝えることができなくなるが、上記構成によって、通常使用する表示器が故障しても代替報知手段によりドライバに情報を伝えることが可能となる。 With the conventional technology that changes the display brightness depending on the importance of information, it is impossible to transmit all information if the display device serving as a notification means fails. It is also possible to convey information to the driver by the alternative notification means.
また、本発明の車載用情報伝達装置は、情報が代替報知手段により乗員に伝えられなかったと判定された場合に、その情報を車外の第三者に対して報知する車外報知手段を備えるように構成することもできる。 In addition, the in-vehicle information transmission device according to the present invention includes an out-of-vehicle notification means for notifying a third party outside the vehicle of the information when it is determined that the information has not been transmitted to the occupant by the alternative notification means. It can also be configured.
情報の内容によっては乗員から車外に報知した方が望ましいものもある。上記構成によって、乗員を介することなく車外の第三者に情報を伝えることが可能となる Depending on the content of the information, it may be desirable to notify the passenger from outside the vehicle. With the above configuration, it is possible to convey information to a third party outside the vehicle without passing through the passenger.
また、本発明の車載用情報伝達装置は、乗員の体調を検出する体調検出手段を備え、情報が代替報知手段により乗員に伝えられなかったと判定された場合に、体調検出手段が乗員の体調を検出し、さらに乗員の体調に異常が生じていると判断された場合には、その情報を車外の第三者に対して報知する車外報知手段を備えるように構成することもできる。 The on-vehicle information transmission device of the present invention includes physical condition detection means for detecting the physical condition of the occupant, and when it is determined that the information has not been transmitted to the occupant by the alternative notification means, the physical condition detection means indicates the physical condition of the occupant. If it is detected and it is determined that there is an abnormality in the physical condition of the occupant, it may be configured to include an outside notification means for notifying a third party outside the vehicle of the information.
上記構成によって、乗員の体調に異常が生じていると判断された場合、すなわち、重要情報が乗員に伝えられなかったと判定された場合には、その情報を伝えるべき者(例えば車外の第三者)に確実に伝えることが可能となる。 If it is determined by the above configuration that there is an abnormality in the physical condition of the occupant, that is, if it is determined that important information has not been transmitted to the occupant, the person who should convey that information (for example, a third party outside the vehicle) ).
また、本発明の車載用情報伝達装置における体調検出手段は、運転者を撮影するカメラ、運転者の皮膚温度を検出する皮膚温度センサ、運転者の皮膚電位を検出する皮膚電位センサおよび運転者の音声を検出する音声センサから選ばれた1種または2種以上の組合せからなる検出器を含むように構成することもできる。 Further, the physical condition detection means in the in-vehicle information transmission device of the present invention includes a camera for photographing the driver, a skin temperature sensor for detecting the skin temperature of the driver, a skin potential sensor for detecting the skin potential of the driver, and the driver's skin temperature sensor. It can also comprise so that the detector which consists of 1 type, or 2 or more types of combinations chosen from the audio | voice sensor which detects an audio | voice may be included.
上記のセンサ等は周知のもので広く利用され、小型・軽量であるため運転席近傍等の車両に設置することは容易である。上記構成によって、安価な構成で運転者の体調を確実に検出することが可能となる。 The above sensors are well known and widely used, and since they are small and light, they can be easily installed in a vehicle near the driver's seat. With the above configuration, it is possible to reliably detect the physical condition of the driver with an inexpensive configuration.
また、本発明の車載用情報伝達装置は、伝達完了判定手段の判定結果あるいは検出された乗員の体調を記憶する記憶手段を備えるように構成することもできる。 Moreover, the vehicle-mounted information transmission device of the present invention can also be configured to include storage means for storing the determination result of the transmission completion determination means or the detected physical condition of the occupant.
上記構成によって、後で何が原因で乗員に伝達できなかったのか等を解析することや、どの手段を用いて報知するかの判断材料とすることが可能となる。 With the above-described configuration, it is possible to analyze what has failed to be transmitted to the occupant later, and to determine which means to use for notification.
簡易な構成で、ドライバに確実に情報を伝える車載用情報伝達装置を提供する目的を、情報が通常の報知手段により乗員に伝えられなかったと判定された場合に、当該情報を代替報知手段により報知する構成により実現した。 The purpose of providing an in-vehicle information transmission device that reliably conveys information to the driver with a simple configuration is to notify the information by the alternative notification means when it is determined that the information has not been transmitted to the occupant by the normal notification means. Realized by the configuration.
以下、本発明の車載用情報伝達装置の実施の形態を、図面を参照しながら説明する。図1は車載用情報伝達装置1の構成を示すブロック図である。車載用情報伝達装置1は、操作スイッチ群2,故障検出部3,体調検出部4,メモリ9,表示器10,送受信機13,音声合成回路24,スピーカ15,車速センサ23,バイブレータ25,LAN(Local Area Network) I/F(インターフェース)26,カメラ28,車外報知器29,音声認識ユニット30,マイク31,表示器32およびこれらの接続された制御回路8等を備えている。
Embodiments of an in-vehicle information transmission apparatus according to the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing the configuration of the in-vehicle
操作スイッチ群2は、例えば表示器10,32と一体になったタッチパネル22,33もしくはメカニカルなスイッチが用いられる。タッチパネル22,33は、表示器10,32の画面上にガラス基盤と透明なフィルムにスペーサと呼ばれる隙間を介してX軸方向、Y軸方向に電気回路が配線され、フィルム上をユーザがタッチすると、押された部分の配線がショートして電圧値が変わるため、これを2次元座標値(X,Y)として検出する、いわゆる抵抗膜方式が広く用いられる。その他に、いわゆる静電容量方式を用いてもよい。メカニカルスイッチの他に、マウスやカーソル等のポインティングデバイスを用いてもよい。また、表示器10,32とその周辺を覆い意匠枠となるエスカッションに、操作スイッチ群2のうちのメカニカルスイッチを配置してもよい(図2参照)。
As the
また、マイク31および音声認識ユニット30を用いて種々の指示を入力することも可能である。これは、マイク31から入力された音声信号を、音声認識ユニット30において周知の隠れマルコフモデル等の音声認識技術により処理を行い、その結果に応じた操作コマンドに変換するものである。これら操作スイッチ群2,タッチパネル22,33,およびマイク31によって、種々の指示を入力することが可能である。なお、操作スイッチ群2,タッチパネル22,33,およびマイク31が本発明の操作検出手段に相当する。
It is also possible to input various instructions using the
故障検出部3は、車両101(図2参照)の各部の状態を監視し所定以外の動作が発生したことの検出を行う少なくとも一つ以上のセンサを含んで構成される。センサとして、車速(別途後述),ブレーキ液圧,ブレーキペダル位置等の走行性能を検出するセンサ、エンジン回転数,アクセル開度等のエンジンの駆動性能を検出するセンサ、吸入空気量,吸気負圧,吸気温度,空燃比,冷却水温度,アクチュエータ温度等の排気ガスの浄化性能を検出するセンサ、ライン圧,オイル温度,タービン回転数等のエンジンを除く駆動系の駆動性能を検出するセンサ、電気回路温度,バッテリ温度,バッテリ電流等を検出するセンサ等がある。
The
体調検出部4は以下のセンサのうちの少なくとも一つ以上を用いる。なお、体調検出部4が本発明の体調検出手段に相当する。
(1)皮膚温度センサ4a:主に図2の35a,35bのような操舵ハンドル36の握りの部分に取り付けられ、ドライバの皮膚温度を検出して制御回路8に出力する。また、ドライバの手首に巻くリストバンド型のセンサを用いてもよい。また、サーモトレーサーのような、物体に照射された赤外線の反射状態から物体の表面温度を測定する機器を用いてもよい。
(2)皮膚電位センサ4b:主に図2の35a,35bのような操舵ハンドル36の握りの部分に取り付けられ、ドライバの皮膚電位を検出して制御回路8に出力する。また、ドライバの手首に巻くリストバンド型のセンサを用いてもよい。皮膚電位は、睡眠時には覚醒時に比べて低下することが知られている。これによって、睡眠状態かどうかも判定することができる。
(3)音声センサ4c:マイク31から入力されたドライバの音声を音声認識ユニット30で特徴を抽出して予めメモリ9に基準データとして記憶しておく。所定のタイミングでドライバに発声を促し、その声と基準データとの差が所定の範囲を超える場合にドライバの体調が異常であると判断する。
The physical
(1)
(2)
(3)
上記のセンサの他に、発汗の度合いを検出する発汗センサ,心拍数を検出する心拍センサ,脈拍波を検出する脈波センサ等を用いてもよい。 In addition to the above sensor, a perspiration sensor that detects the degree of perspiration, a heart rate sensor that detects a heart rate, a pulse wave sensor that detects a pulse wave, and the like may be used.
また、カメラ28で撮影されたドライバの画像から体調を検出してもよい。例えば、ドライバの視線の動きあるいは頭部の傾きから、メモリ9等に予め記憶された基準データと比較することで、ドライバの体調を検出することができる。
Further, the physical condition may be detected from the image of the driver photographed by the
送受信機13は、周知の無線通信機およびアンテナを含んで構成され、車外の無線通信施設との通信を行う。例えば、図示しないVICS(Vehicle Information and Communication System:道路交通情報通信システム)センタから交通情報,天候情報等を受信する。
The
制御回路8は通常のコンピュータとして構成されており、周知のCPU81,ROM82,RAM83,入出力回路であるI/O84,A/D変換部86,描画部87,画像処理部88,切替部89およびこれらの構成を接続するバスライン85が備えられている。CPU81は、ROM82に記憶された制御プログラム82Pおよびデータにより制御を行う。なお、制御回路8が本発明の伝達完了判定手段,報知制御手段,重要度設定手段,重要度判定手段に相当する。
The control circuit 8 is configured as an ordinary computer, and includes a well-known
A/D変換部86は周知のA/D(アナログ/デジタル)変換回路を含み、例えば体調検出部4などから制御回路8に入力されるアナログデータをCPU81で演算可能なデジタルデータに変換するものである。
The A /
描画部87は、ROM82あるいはメモリ9等に記憶された表示用のデータや表示色のデータから表示器10,32に表示させるための表示画面データを生成する。
The
画像処理部88は、公知のパターン認識などの技術によってカメラ28によって撮影された画像の解析を行う画像処理回路を含んで構成される。
The
切替部89は、表示器10,32等の情報の報知手段を切り替えるたものもので、CPU81の指令により報知手段を選択し、選択された報知手段に対して報知する情報を送る。
The switching
メモリ9はEEPROM(Electrically Erasable & Programmable Read Only Memory:電気的消去・プログラム可能・読出し専用メモリ)やフラッシュメモリ等の書き換え可能な記憶媒体によって構成され、車載用情報伝達装置1の動作に必要な情報およびデータが記憶されている。なお、メモリ9は車載用情報伝達装置1がオフ状態になっても、記憶内容が保持されるようになっている。また、メモリ9としてハードディスク装置を用いてもよい。なお、メモリ9が本発明の記憶手段に相当する。
The
表示器10,32は周知のカラー液晶表示器で構成され、ドット・マトリックスLCD(Liquid Crystal Display)およびLCD表示制御を行うための駆動回路11,34を含んで構成されている。駆動回路11,34は、例えば、画素毎にトランジスタを付けて目的の画素を確実に点灯させたり消したりすることができるアクティブマトリックス駆動方式が用いられ、制御回路8から送られる表示指令および表示画面データに基づいて表示を行う。なお、表示器10,32として有機EL(ElectroLuminescence:電界発光)表示器,プラズマ表示器を用いてもよい。なお、表示器10が本発明の報知手段に、表示器32が本発明の代替報知手段にそれぞれ相当する。図2に表示器10,32の設置例を示す。
The
また、駆動回路11,34には故障検出回路が含まれている。この故障検出回路は、画素の点灯/消灯が行われているか、バックライトが所定の輝度で点等されているか、あるいはその他の表示器としての動作が正常に行われているかを含むステータス情報を生成し、そのステータス情報を制御回路8へ送る。なお、駆動回路11,34が本発明の故障検出手段に相当する。
The
スピーカ15は周知の音声合成回路24に接続され、制御プログラム82Pの指令によってメモリ9あるいはROM82に記憶されるデジタル音声データが音声合成回路24においてアナログ音声に変換されたものが送出される。なお、音声合成の方法には、音声波形をそのままあるいは符号化して蓄積しておき必要に応じて繋ぎ合わせる録音編集方式、文字入力情報からそれに対応する音声を合成するテキスト合成方式などがある。また、図2のように、スピーカ15は車両101のドアの内側等に設置される。
The
車速センサ23は周知のロータリエンコーダ等の回転検出部を含み、例えば車輪取り付け部付近に設置されて車輪の回転を検出してパルス信号として制御回路8に送るものである。制御回路8では、その車輪の回転数を車両101の速度に換算する。
The
バイブレータ25は、周知の携帯電話機に含まれて着信を知らせるものと同様の構成であり、モータおよびその駆動回路等を含んで構成され、例えば座席37(図2参照)に内蔵される。
LAN I/F26は車内LAN27を介して他の車載機器やセンサとのデータの遣り取りを行うためのインターフェース回路である。また、LAN I/F26を介して故障検出部3,体調検出部4,あるいは車速センサ23からのデータ取り込みを行ってもよい。
The LAN I /
カメラ28は、図8のように例えば赤外投光領域撮像カメラ28aと赤外投光ランプ28bを含んで構成される。赤外投光ランプ28bによりドライバの頭顔部に赤外光が投光され、その反射光を赤外投光領域撮像カメラ28aにより撮影する。カメラ28は、図2のように例えばステアリングホイールのコラムカバーに設けられる。また、カメラ28の設置場所は、ルームミラー内,天井部,計器パネル上部のようなドライバの頭顔部が撮影可能であれば特に制約はない。また、赤外光を用いずに自然光によって撮影する方法を用いてもよい。なお、カメラ28が本発明の操作検出手段に相当する。
As shown in FIG. 8, the
車外報知器29は、図3のように例えば車両101の室内後部に設置され、例えば表示器10,32のようなLCD表示器やLED表示器として構成される。また、図示しない携帯電話器を含んで外部に通報する構成としてもよい。さらに、車両101のルームランプ103あるいはテールランプ102,ハザードランプ(図示せず)等の灯火装置を車外報知器として用いてもよい。また、送受信機13を用いて外部に通報してもよい。なお、車外報知器29が本発明の車外報知手段に相当する。
As shown in FIG. 3, the
このような構成を持つことにより、車載用情報伝達装置1は、制御回路8のCPU81により制御プログラム82Pが起動されると、図4のように、各種センサ等の情報を基に報知するための情報を生成し、その情報を情報判定部110において伝達すべき情報であるかを判定し、その判定結果に応じて伝達装置切替部113において報知する対象機器を選択して車両乗員に対し情報の伝達を行う。そして、情報完了判定部111において情報の伝達が完了したかを判定し、判定結果に応じて伝達装置切替部113において報知する対象機器(上記の伝達時とは異なるもの)を選択して車両乗員に対し情報の伝達を再度行うか、ドライバ状態判定部112においてドライバの体調を判定し、その体調に応じて伝達装置切替部113において報知する対象機器を選択して情報の伝達を行うかのいずれかを実行する。なお、これら、情報判定部110,情報完了判定部111,ドライバ状態判定部112,伝達装置切替部113はそれぞれ制御プログラム82Pで行われる処理に相当する。
By having such a configuration, when the control program 82P is activated by the
図5のフロー図を用いて、本発明の情報伝達処理について説明する。なお、本処理は制御プログラム82Pに含まれ他の処理とともに繰り返し実行される。まず、送受信機13により例えば交通情報を受信する。また、故障検出部3から各種センサの情報を取得する。また、車内LAN27を介して他の車載機器の情報を取得する。そして、これら取得された情報からドライバに伝えるべき情報があるかを調べる(S1)。
The information transmission process of the present invention will be described using the flowchart of FIG. This process is included in the control program 82P and is repeatedly executed together with other processes. First, for example, traffic information is received by the
ドライバに伝えるべき情報であるかどうかは、その情報の重要度によって判定される。図6に情報の重要度の分類例を示す。エンジン制御系あるいは走行制御系のように車両101の走行に支障をきたす故障のような緊急に対応が必要な情報が重要度Aに分類され、車両101の走行に直接影響を及ぼさないオーディオ機器等の故障が重要度Bに分類され、繰り返し取得可能な交通情報や天候情報は重要度Cに分類されている。ここで、確実に伝えるべき情報は重要度Aに分類される情報とする。なお、確実に伝えるべき情報はユーザ(ドライバ)によって設定可能としてもよい。設定内容はメモリ9の所定の領域に記憶される。
Whether the information is to be transmitted to the driver is determined by the importance of the information. FIG. 6 shows an example of classification of information importance. Information that needs to be dealt with urgently, such as a failure that hinders the traveling of the
各情報には、例えば、重要度Aは00,重要度Bは01,重要度Cは10(いずれも二進数)というように、そのデータの先頭に重要度に対応するインデックスが含まれている。このインデックスを読み取ることで確実に伝えるべき情報かどうかを判定することができる。また、確実に伝えるべき情報を設定する場合は、インデックスの値を設定する。上述の例では、設定されたインデックスの値以下のものが確実に伝えるべき情報となる。つまり、図6の例では、設定値は”00”である。 Each information includes an index corresponding to the importance at the head of the data, for example, importance A is 00, importance B is 01, importance C is 10 (both are binary numbers). . By reading this index, it can be determined whether or not the information is to be transmitted reliably. Also, when setting information to be transmitted reliably, an index value is set. In the above-described example, information that is less than or equal to the set index value is information to be transmitted reliably. That is, in the example of FIG. 6, the set value is “00”.
取得された情報が確実に伝えるべき情報でない(情報が重要度Aに含まれない)場合(S2:No)、表示器10あるいはスピーカ15によってその情報を報知する(S12)。その後、情報がドライバに伝達されたかどうかを判定せずに処理を終了する。
When the acquired information is not information to be surely transmitted (the information is not included in the importance level A) (S2: No), the information is notified by the
一方、取得された情報が確実に伝えるべき情報である(情報が重要度Aに含まれる)場合(S2:Yes)、デフォルトの報知手段である表示器10によりその情報の表示を行う(S3)。
On the other hand, when the acquired information is information to be surely transmitted (the information is included in the importance level A) (S2: Yes), the information is displayed by the
ドライバが操作スイッチ群2,タッチパネル22,およびマイク31のいずれかによる入力操作を行って表示器10に表示された情報を認識したと判定された場合(S4:Yes)、本処理を終了する。図7の例では、表示器10の画面上に情報とともに「確認」ボタンが表示され、「確認」ボタンを押下するとドライバが情報を認識したと判定される。
When it is determined that the driver has performed an input operation using any one of the
また、ドライバの目の動きをカメラ28により撮影し、ドライバの注視点によってドライバが情報を認識したことを判定する方法を用いてもよい。以下、図8,図9を用いて、ドライバの視認行動検出処理の一例について説明する。図8は、視認行動検出の機能構成を示すブロック図である。図8に示すように、カメラ28を構成する赤外投光ランプ28bの投光部分と、赤外投光領域撮像カメラ28aの受光部には、赤外透過フィルタ28cが設けられており、画像処理部88は、赤外投光領域撮像カメラ28aから出力される映像信号に基づいて、画像処理モジュール88aにおいて一般的な2値化処理や特徴点の抽出処理を行うことによってドライバの頭顔部の画像を抽出し、その抽出した頭顔部の画像に基づいて、注視点検出モジュール88bにおいて、ドライバの注視点Pを算出するために、頭顔方向Dh,注視方向Dsを検出する。
Alternatively, a method may be used in which the driver's eyes are photographed by the
次に、画像処理部88の具体的な機能について、図9を参照して説明する。図9は、本実施形態における注視点検出処理のフロー図であり、画像処理モジュール88aおよび注視点検出モジュール88bにより実現される機能を表わす。なお、これらモジュールは画像処理部88に含まれる図示しない周知のマイクロコンピュータが実行する画像処理プログラムに含まれる。
Next, specific functions of the
まず、赤外投光ランプ28bによってドライバの頭顔部に投光を行うと共に、赤外投光領域撮像カメラ28aによって撮影した当該頭顔部のアナログ映像信号は画像処理モジュール88aに取り込み、その映像信号に一般的な2値化処理を施すことにより、ピクセル毎のデジタル多値画像データに変換される(S21)。
First, the
得られた多値画像データから、まず、一般的な画像処理手法を用いてドライバの顔画像部分を抽出し、その抽出した顔画像部分に含まれる複数の特徴点(例えば目頭、目尻、鼻孔等)の位置を検出する(S22)。次に、抽出された顔画像部分の画像データから、赤外投光ランプ28bの投光によってドライバの眼球の角膜に発生している反射点の位置と瞳孔の位置とを検出する(S23)。
First, a driver's face image part is extracted from the obtained multi-valued image data using a general image processing method, and a plurality of feature points (for example, the eyes, the corners of the eyes, the nostrils, etc.) included in the extracted face image part are extracted. ) Position is detected (S22). Next, the position of the reflection point and the position of the pupil generated in the cornea of the driver's eyeball by the projection of the
そして、検出された特徴点の位置に基づいて、所定の3次元座標空間におけるドライバの頭顔面の傾きを算出することにより、ドライバの頭顔が向けられている方向である頭顔方向Dhを計測する(S24)。また、検出された角膜反射点,瞳孔位置,頭顔方向Dhとに基づいて、ドライバの視線の方向である注視方向Dsを検出する(S25)。 Then, by calculating the inclination of the driver's head and face in a predetermined three-dimensional coordinate space based on the position of the detected feature point, the head and face direction Dh, which is the direction in which the driver's head and face is directed, is measured. (S24). Further, based on the detected corneal reflection point, pupil position, and head-face direction Dh, a gaze direction Ds that is the direction of the driver's line of sight is detected (S25).
検出された注視方向Dsが、当該所定の3次元座標空間における座標として予めメモリ16等に記憶された表示器10,32のような所定位置に対応するかを判断することにより、ドライバの注視点Pを検出し、その検出された注視点Pが例えば表示器10である場合、その情報を制御回路8に出力する(S26)。
By determining whether or not the detected gaze direction Ds corresponds to a predetermined position such as the
制御回路8ではドライバの注視点Pが表示器10である場合、ドライバが表示器10に表示された情報を認識したと判定する。
When the driver's gazing point P is the
図5に戻り、表示器10に情報が表示されてから例えば10秒のような所定の時間内にドライバがその情報を認識したと判定されなかった場合、図7の例では「確認」ボタンが押下されなかった場合(S4:No)、例えば1分のような所定の時間間隔で例えば3回のように所定の回数その情報を表示器10に表示する(S5:Yes→S3)。
Returning to FIG. 5, if it is not determined that the driver has recognized the information within a predetermined time such as 10 seconds after the information is displayed on the
情報を所定の回数表示したにもかかわらずドライバがその情報を認識したと判定されなかった場合(S5:No)、代替報知手段である表示器32にその情報を表示する(S6)。表示器32にも図7のように情報が表示されるので、「確認」ボタンが押下された場合、あるいは、カメラ28より撮影された画像からドライバが表示器32を注視して情報を認識したと判定された場合(S7:Yes)、本処理を終了する。
If it is not determined that the driver has recognized the information even though the information has been displayed a predetermined number of times (S5: No), the information is displayed on the
一方、表示器32に表示された情報をドライバが認識しなかった場合(S7:No)、上述と同様に、例えば1分のような所定の時間間隔で例えば3回のように所定の回数その情報を表示器32に表示する(S8:Yes→S6)。 On the other hand, when the driver does not recognize the information displayed on the display device 32 (S7: No), as described above, the predetermined number of times, for example, three times at a predetermined time interval such as one minute. Information is displayed on the display 32 (S8: Yes → S6).
そして、表示器32に情報を所定の回数表示したにもかかわらずドライバがその情報を認識したと判定されなかった場合(S8:No)、体調検出器4によりドライバの体調を検出する(S9)。体調検出器4により検出されたドライバの皮膚温度,皮膚電位,音声の状態のうちの少なくとも一つが予めメモリ9の所定の領域に記憶されているドライバの正常値の範囲外にある場合(S10:Yes)は、ドライバに異常が発生したと判断し、上述した車外報知器29によって車外の第三者に、ドライバに報知すべき情報とドライバの体調に異常がある旨を報知する(S11)。
If it is not determined that the driver has recognized the information even though the information is displayed a predetermined number of times on the display 32 (S8: No), the physical condition of the driver is detected by the physical condition detector 4 (S9). . When at least one of the driver's skin temperature, skin potential, and voice state detected by the
表示器32で情報の表示を行う際に、バイブレータ25を動作させ、振動によってドライバに情報が表示されている旨を伝えてもよい。
When displaying information on the
図10のように、メモリ9には情報の表示を行う際に用いる報知手段の報知順位が記憶されている。図10の例では、表示器10が報知順位1位でデフォルトの報知手段となっている。車外報知器29に複数の装置が含まれている場合には、装置毎に報知順位を定める。表示器10あるいは表示器32と、スピーカ15あるいはバイブレータ25とを併用してもよい。なお、ドライバが報知手段を選択して報知順位を定める構成としてもよい。報知の際には報知順位を参照し、報知順位の高い(数値の小さい)順に報知を行う。
As shown in FIG. 10, the notification order of notification means used when displaying information is stored in the
図5の例では、重要度Aの情報のみ車外報知器29による報知まで行っているが、重要度Bの情報を代替報知手段(表示器32)により報知してもよい。
In the example of FIG. 5, only the information on the importance level A is notified up to the notification by the
また、表示器10により報知された情報をドライバが認識しなかった場合(S5:No)、代替報知手段(表示器32)により報知をした後に本処理を終了する構成としてもよい(S6→終了)。また、表示器32により報知された情報をドライバが認識しなかった場合(S8:No)、本処理を終了する構成としてもよい。 Further, when the driver does not recognize the information notified by the display device 10 (S5: No), the processing may be terminated after the notification by the alternative notification means (display device 32) (S6 → end). ). Moreover, it is good also as a structure which complete | finishes this process, when a driver does not recognize the information alert | reported by the indicator 32 (S8: No).
また、表示器10,32あるいは車外報知器29等の各報知手段の状態、ドライバの体調をメモリ9に記憶するようにしてもよい。図11にその一例を示す。例えば、まず、車載用情報伝達装置1の起動時に各報知手段における上述のステータス情報を取得して正常かどうかを判定し、体調検出器4の状態を検出してドライバの体調を検出して、これらの結果を記憶する。車載用情報伝達装置1が動作中には、一定の周期あるいは報知する情報を取得した場合等の所定のタイミングで各報知手段の状態およびドライバの体調を記憶する。記憶内容に各報知手段の状態およびドライバの体調が記憶されたときの日時情報を含めてもよい。
Further, the state of each notification means such as the
そして、図10の報知順位に従って取得された情報の報知を行う際に、正常でない報知手段をスキップして次の順位の報知手段により報知を行うことで、迅速に情報の報知を行うことが可能となる。 And when notifying the information acquired according to the notification order of FIG. 10, it is possible to notify the information quickly by skipping the abnormal notification means and notifying by the notification means of the next order. It becomes.
また、各報知手段による報知結果をメモリ9に記憶するようにしてもよい。図12にその一例を示す。情報1〜3にはドライバに伝えるべき情報の内容が含まれている。例えば、情報2の報知結果は、表示器10による報知ではドライバが情報を認識しなかったが表示器32の表示により認識したことを表している。また、情報3の報知結果は、ドライバが情報を認識しなかったので車外に報知されたことを表している。このときに、ドライバが情報を認識したかどうか(操作スイッチ群2等の操作の有無),各報知手段の状態,体調検出器の検出結果等を合わせて記憶してもよい。
Further, the notification result by each notification means may be stored in the
各報知手段による報知結果を外部機器(図13(b)のパーソナルコンピュータ124等)に記憶するように構成してもよい。外部機器は、例えばパーソナルコンピュータやインターネットサーバを含んで構成される。車載用情報伝達装置1から外部機器へは、例えばその日の最初に車載用情報伝達装置1を起動したときに、メモリ9に記憶されている前日までの報知結果をまとめて送受信機13あるいは車外報知器29を介して公衆回線等の通信ネットワーク経由で外部機器に送る。この場合、メモリ9に予め記憶されている車載用情報伝達装置1を識別するための機器IDも合わせて外部機器に送る。
You may comprise so that the alerting | reporting result by each alerting | reporting means may be memorize | stored in an external apparatus (
外部機器では、受信した報知結果を機器ID(車載用情報伝達装置1)あるいはドライバ毎にデータベースとして記憶する。記憶された内容によって、例えば、代替報知手段で報知された情報の内容を確認したり、ドライバに異常が発生した場合には何が原因で異常と判定されたのか等を後から確認することができる。 The external device stores the received notification result as a database for each device ID (vehicle-mounted information transmission device 1) or driver. Depending on the stored contents, for example, it is possible to confirm the contents of information notified by the alternative notification means, or to confirm later what caused the abnormality to be determined when an abnormality occurs in the driver. it can.
日時情報は、CPU81に含まれるリアルタイムカウンタ(図示せず)を基にして生成する。また、制御回路8にリアルタイムクロックICとも呼ばれる図示しない時計ICを含めて、CPU81が時計ICから日時情報を取得する構成としてもよい。また、車内LAN27を介して他の車載機器から日時情報を取得してもよい。
The date / time information is generated based on a real-time counter (not shown) included in the
図13に車外報知の構成の一例を示す。図13(a)では、車両101の車外報知器29に含まれる図示しない通信ユニットあるいは携帯電話機により、基地局120を経由して第三者の携帯電話機121に報知する構成を示している。また、図13(b)では、インターネット等の公衆回線122を経由して第三者の携帯電話機123,パーソナルコンピュータ124,図示しない受信手段および報知手段を含む車両125に報知する構成を示している。この場合、報知される内容には、重要情報やドライバの体調等が含まれ、文字(電子メールを含む)あるいは音声の少なくとも一つによるメッセージが報知される。
FIG. 13 shows an example of the configuration of outside notification. FIG. 13A shows a configuration in which a third-party
以上、本発明の実施の形態を説明したが、これらはあくまで例示にすぎず、本発明はこれらに限定されるものではなく、特許請求の範囲の趣旨を逸脱しない限りにおいて、当業者の知識に基づく種々の変更が可能である。 Although the embodiments of the present invention have been described above, these are merely examples, and the present invention is not limited to these embodiments, and the knowledge of those skilled in the art can be used without departing from the spirit of the claims. Various modifications based on this are possible.
1 車載用情報伝達装置
2 操作スイッチ群(操作検出手段)
3 故障検出部
4 体調検出部(体調検出手段)
8 制御回路(伝達完了判定手段,報知制御手段,重要度設定手段,重要度判定手段)
9 メモリ(記憶手段)
10 表示器(報知手段)
11 駆動回路(故障検出手段)
13 送受信機(車外報知手段)
15 スピーカ
22 タッチパネル(操作検出手段)
23 車速センサ
24 音声合成回路
25 バイブレータ
28 カメラ(操作検出手段)
29 車外報知器(車外報知手段)
31 マイク(操作検出手段,音声センサ)
32 表示器(代替報知手段)
33 タッチパネル(操作検出手段)
34 駆動回路(故障検出手段)
DESCRIPTION OF
3
8 Control circuit (transmission completion determination means, notification control means, importance level setting means, importance level determination means)
9 Memory (memory means)
10 Display (notification means)
11 Drive circuit (failure detection means)
13 Transceiver (outside vehicle notification means)
15
23
29 Outside vehicle alarm (outside vehicle alarm means)
31 Microphone (operation detection means, voice sensor)
32 Display (alternative notification means)
33 Touch panel (operation detection means)
34 Drive circuit (failure detection means)
Claims (8)
前記情報が前記乗員に伝えられたかどうかを判定する伝達完了判定手段と、
前記情報が前記乗員に伝えられなかったと判定された場合に、当該情報を代替報知手段により報知する報知制御手段と、
を備えることを特徴とする車載用情報伝達装置。 An informing means for informing the passenger of information;
Transmission completion determination means for determining whether the information is transmitted to the occupant;
When it is determined that the information has not been transmitted to the occupant, notification control means for notifying the information by an alternative notification means;
An in-vehicle information transmission device comprising:
前記重要度によって当該情報が重要情報であるかどうかを判定する重要度判定手段と、を備え、
前記報知制御手段は当該情報が重要情報であると判定された場合に、前記代替報知手段により当該情報を報知する請求項1に記載の車載用情報伝達装置。 Importance setting means for setting the importance of the information according to the content of the information;
An importance level determination means for determining whether the information is important information according to the importance level,
The in-vehicle information transmission device according to claim 1, wherein when the information is determined to be important information, the notification control unit notifies the information by the alternative notification unit.
前記伝達完了判定手段は所定の操作が検出された場合に前記情報が前記乗員に伝えられたと判定する請求項1または2に記載の車載用情報伝達装置。 Comprising an operation detecting means for detecting an operation on the in-vehicle information transmission device;
The in-vehicle information transmission apparatus according to claim 1, wherein the transmission completion determination unit determines that the information is transmitted to the occupant when a predetermined operation is detected.
前記報知制御手段は前記報知手段の故障が検出された場合に前記情報を前記代替報知手段により報知する請求項1ないし3のいずれか1項に記載の車載用情報伝達装置。 A failure detection means for detecting a failure of the notification means;
The in-vehicle information transmission apparatus according to any one of claims 1 to 3, wherein the notification control unit notifies the information by the alternative notification unit when a failure of the notification unit is detected.
前記情報が前記代替報知手段により前記乗員に伝えられなかったと判定された場合に、前記体調検出手段が前記乗員の体調を検出し、さらに前記乗員の体調に異常が生じていると判断された場合には、その情報を車外の第三者に対して伝達する車外報知手段を備える請求項1ないし5のいずれか1項に記載の車載用情報伝達装置。 Comprising physical condition detecting means for detecting the physical condition of the occupant;
When it is determined that the information has not been transmitted to the occupant by the alternative notification means, the physical condition detection means detects the physical condition of the occupant, and it is further determined that an abnormality has occurred in the physical condition of the occupant The vehicle-mounted information transmission device according to any one of claims 1 to 5, further comprising vehicle outside notification means for transmitting the information to a third party outside the vehicle.
The in-vehicle information transmission device according to any one of claims 1 to 7, further comprising a storage unit that stores a determination result of the transmission completion determination unit or a physical condition of the detected occupant.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006070550A JP2007249477A (en) | 2006-03-15 | 2006-03-15 | Onboard information transmission device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006070550A JP2007249477A (en) | 2006-03-15 | 2006-03-15 | Onboard information transmission device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007249477A true JP2007249477A (en) | 2007-09-27 |
Family
ID=38593718
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006070550A Pending JP2007249477A (en) | 2006-03-15 | 2006-03-15 | Onboard information transmission device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2007249477A (en) |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009213779A (en) * | 2008-03-12 | 2009-09-24 | Denso Corp | Operation input apparatus for use of car |
JP2012003764A (en) * | 2010-06-16 | 2012-01-05 | Visteon Global Technologies Inc | Reconfiguration of display part based on face tracking or eye tracking |
US8106783B2 (en) | 2008-03-12 | 2012-01-31 | Denso Corporation | Input apparatus, remote controller and operating device for vehicle |
JP2012100024A (en) * | 2010-11-01 | 2012-05-24 | Denso Corp | Communication device |
JP2013033344A (en) * | 2011-08-01 | 2013-02-14 | Yazaki Corp | Display device |
JP2013089250A (en) * | 2011-10-18 | 2013-05-13 | Visteon Global Technologies Inc | Vehicle system and method for assessing and communicating condition of driver |
WO2016152834A1 (en) * | 2015-03-23 | 2016-09-29 | 株式会社デンソー | Automatic travel control device and automatic travel control system |
JP2016179810A (en) * | 2015-03-23 | 2016-10-13 | 株式会社デンソー | Automatic travel control device and automatic travel control system |
JP2017188127A (en) * | 2017-05-15 | 2017-10-12 | みこらった株式会社 | Automatic driving vehicle |
JPWO2017138146A1 (en) * | 2016-02-12 | 2018-02-15 | 三菱電機株式会社 | Information display device and information display method |
JP2018156172A (en) * | 2017-03-15 | 2018-10-04 | 株式会社Subaru | Display system in vehicle and method for controlling display system in vehicle |
US10503987B2 (en) | 2014-06-23 | 2019-12-10 | Denso Corporation | Apparatus detecting driving incapability state of driver |
WO2020043554A1 (en) * | 2018-08-27 | 2020-03-05 | Volkswagen Aktiengesellschaft | Warning system and motor vehicle |
JP6830704B1 (en) * | 2020-07-09 | 2021-02-17 | 株式会社Arblet | Information processing system, information processing method and program |
US11147464B2 (en) | 2016-10-20 | 2021-10-19 | Panasonic Intellectual Property Management Co., Ltd. | Pulse wave measuring apparatus and pulse wave measuring method |
JP7533366B2 (en) | 2021-06-02 | 2024-08-14 | 株式会社デンソー | Notification determination device, notification determination method, and notification determination program |
US12065176B2 (en) | 2018-09-14 | 2024-08-20 | Denso Corporation | Autonomous vehicle emergency operating mode for communicating with surroundings and seeking emergency medical attention |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1198559A (en) * | 1997-09-17 | 1999-04-09 | Fujitsu Ten Ltd | Use reporting device for telephone set |
JPH11328593A (en) * | 1998-05-15 | 1999-11-30 | Yazaki Corp | Method for judging health condition of vehicle driver, its device, method for managing health condition of vehicle driver and its device |
JP2002092793A (en) * | 2000-09-20 | 2002-03-29 | Denso Corp | Information display device for vehicle |
JP2003123198A (en) * | 2001-10-15 | 2003-04-25 | Daiichi Fashion Service:Kk | Method and system for preventing drowsing driving accident |
JP2004314750A (en) * | 2003-04-15 | 2004-11-11 | Denso Corp | Vehicle instrument operation control device |
JP2005221664A (en) * | 2004-02-04 | 2005-08-18 | Calsonic Kansei Corp | Multi-monitor system for vehicle |
-
2006
- 2006-03-15 JP JP2006070550A patent/JP2007249477A/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1198559A (en) * | 1997-09-17 | 1999-04-09 | Fujitsu Ten Ltd | Use reporting device for telephone set |
JPH11328593A (en) * | 1998-05-15 | 1999-11-30 | Yazaki Corp | Method for judging health condition of vehicle driver, its device, method for managing health condition of vehicle driver and its device |
JP2002092793A (en) * | 2000-09-20 | 2002-03-29 | Denso Corp | Information display device for vehicle |
JP2003123198A (en) * | 2001-10-15 | 2003-04-25 | Daiichi Fashion Service:Kk | Method and system for preventing drowsing driving accident |
JP2004314750A (en) * | 2003-04-15 | 2004-11-11 | Denso Corp | Vehicle instrument operation control device |
JP2005221664A (en) * | 2004-02-04 | 2005-08-18 | Calsonic Kansei Corp | Multi-monitor system for vehicle |
Cited By (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009213779A (en) * | 2008-03-12 | 2009-09-24 | Denso Corp | Operation input apparatus for use of car |
US8106783B2 (en) | 2008-03-12 | 2012-01-31 | Denso Corporation | Input apparatus, remote controller and operating device for vehicle |
JP2012003764A (en) * | 2010-06-16 | 2012-01-05 | Visteon Global Technologies Inc | Reconfiguration of display part based on face tracking or eye tracking |
JP2012100024A (en) * | 2010-11-01 | 2012-05-24 | Denso Corp | Communication device |
JP2013033344A (en) * | 2011-08-01 | 2013-02-14 | Yazaki Corp | Display device |
JP2013089250A (en) * | 2011-10-18 | 2013-05-13 | Visteon Global Technologies Inc | Vehicle system and method for assessing and communicating condition of driver |
US10909399B2 (en) | 2014-06-23 | 2021-02-02 | Denso Corporation | Apparatus detecting driving incapability state of driver |
US10503987B2 (en) | 2014-06-23 | 2019-12-10 | Denso Corporation | Apparatus detecting driving incapability state of driver |
WO2016152834A1 (en) * | 2015-03-23 | 2016-09-29 | 株式会社デンソー | Automatic travel control device and automatic travel control system |
JP2016179810A (en) * | 2015-03-23 | 2016-10-13 | 株式会社デンソー | Automatic travel control device and automatic travel control system |
US10591930B2 (en) | 2015-03-23 | 2020-03-17 | Denso Corporation | Automatic traveling control apparatus and automatic traveling control system |
JPWO2017138146A1 (en) * | 2016-02-12 | 2018-02-15 | 三菱電機株式会社 | Information display device and information display method |
US11147464B2 (en) | 2016-10-20 | 2021-10-19 | Panasonic Intellectual Property Management Co., Ltd. | Pulse wave measuring apparatus and pulse wave measuring method |
JP2018156172A (en) * | 2017-03-15 | 2018-10-04 | 株式会社Subaru | Display system in vehicle and method for controlling display system in vehicle |
JP2017188127A (en) * | 2017-05-15 | 2017-10-12 | みこらった株式会社 | Automatic driving vehicle |
WO2020043554A1 (en) * | 2018-08-27 | 2020-03-05 | Volkswagen Aktiengesellschaft | Warning system and motor vehicle |
US12065176B2 (en) | 2018-09-14 | 2024-08-20 | Denso Corporation | Autonomous vehicle emergency operating mode for communicating with surroundings and seeking emergency medical attention |
JP6830704B1 (en) * | 2020-07-09 | 2021-02-17 | 株式会社Arblet | Information processing system, information processing method and program |
WO2022009819A1 (en) * | 2020-07-09 | 2022-01-13 | 株式会社Arblet | Information processing system, information processing method, and program |
JP2022015768A (en) * | 2020-07-09 | 2022-01-21 | 株式会社Arblet | Information processing system, information processing method and program |
JP7533366B2 (en) | 2021-06-02 | 2024-08-14 | 株式会社デンソー | Notification determination device, notification determination method, and notification determination program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2007249477A (en) | Onboard information transmission device | |
US12033446B2 (en) | Safety for vehicle users | |
US20190071012A1 (en) | Portable electronic device and operating method therefor | |
US9977593B2 (en) | Gesture recognition for on-board display | |
US9881605B2 (en) | In-vehicle control apparatus and in-vehicle control method | |
JP2022519895A (en) | Systems and methods that correlate user attention and appearance | |
US10666901B1 (en) | System for soothing an occupant in a vehicle | |
JP2016110449A (en) | Driving support system and driving support method | |
CN110027567A (en) | The driving condition of driver determines method, apparatus and storage medium | |
CN105523041B (en) | Lane-departure warning system and method for controlling the system | |
JP2007082594A (en) | Fatigue detection device | |
US20180201276A1 (en) | Driver condition detection system | |
KR20210113070A (en) | Attention-based notifications | |
JP2017177883A (en) | On-vehicle notification device | |
JP7011783B2 (en) | Display device for vehicles | |
US11595878B2 (en) | Systems, devices, and methods for controlling operation of wearable displays during vehicle operation | |
CN110737330A (en) | Method and device for reminding abnormal travel and storage medium | |
US10207584B2 (en) | Information providing apparatus for vehicle | |
JPH07117593A (en) | Alarm device for vehicle | |
CN108639056B (en) | Driving state detection method and device and mobile terminal | |
CN111045512B (en) | Vehicle, method of outputting information of vehicle, and computer-readable recording medium | |
CN105774814B (en) | vehicle ACC/LDW system display method | |
US20210291840A1 (en) | Recommendation presenting system, recommendation presenting method, and recommendation presentation program | |
JP2018185688A (en) | Apparatus and program | |
JP2023009149A (en) | Gesture detection device, gesture detection method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080714 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100812 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100823 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110105 |