Nothing Special   »   [go: up one dir, main page]

JP2007249477A - Onboard information transmission device - Google Patents

Onboard information transmission device Download PDF

Info

Publication number
JP2007249477A
JP2007249477A JP2006070550A JP2006070550A JP2007249477A JP 2007249477 A JP2007249477 A JP 2007249477A JP 2006070550 A JP2006070550 A JP 2006070550A JP 2006070550 A JP2006070550 A JP 2006070550A JP 2007249477 A JP2007249477 A JP 2007249477A
Authority
JP
Japan
Prior art keywords
information
vehicle
driver
notification
occupant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006070550A
Other languages
Japanese (ja)
Inventor
Ryoji Suzuki
涼二 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2006070550A priority Critical patent/JP2007249477A/en
Publication of JP2007249477A publication Critical patent/JP2007249477A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Traffic Control Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an onboard information transmission device for certainly transmitting information to a driver. <P>SOLUTION: The onboard information transmission device is characterized by comprising: a notification means for notifying a crew of information; a transmission completion determination means for determining whether or not the information is transmitted to the crew; and a notification control means for notifying the crew of the information by an alternative notification means when it is determined that the information has not been transmitted to the crew. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、車両に取り付けられて各種情報を伝達する車載用情報伝達装置に関するものである。   The present invention relates to an on-vehicle information transmission device that is attached to a vehicle and transmits various types of information.

車両にはディスプレイなどドライバに情報を伝えるための表示装置が搭載されているが、ドライバに伝える情報の中でも、ドライバに確実に伝えるべき重要な情報と、必ずしもドライバに確実に伝えることが必要でないその他の情報とがある。確実にドライバに伝えるべき情報は、車の故障情報、周辺の障害物の接近情報などの運転に影響を及ぼす情報などであり、そこまでの重要度は高くないその他の情報は、ナビゲーション装置の案内情報、渋滞情報、ニュースなど、ドライバが必要なときに確認できればよい情報などである。   The vehicle is equipped with a display device such as a display to convey information to the driver. Among the information to be conveyed to the driver, important information that should be surely communicated to the driver and other things that do not necessarily need to be surely communicated to the driver There is information. Information that should be surely communicated to the driver is information that affects driving, such as vehicle failure information and approach information of nearby obstacles. Other information that is not so important is the guidance of the navigation device. Information, traffic information, news, etc. Information that only needs to be confirmed when the driver is needed.

そこで、重要度の高い車両情報を他の情報と輝度を変えて表示することにより認識性を向上させる車両用表示装置およびその表示方法が考案されている(特許文献1参照)。また、ユーザが知りたい情報を地図の手前下部に表示させる地図表示装置が考案されている(特許文献2参照)。   In view of this, a vehicle display device and its display method have been devised that improve the recognition by displaying highly important vehicle information with different brightness from other information (see Patent Document 1). In addition, a map display device has been devised that displays information that the user wants to know on the lower front side of the map (see Patent Document 2).

特開2005−41355号公報JP 2005-41355 A 特許3620918号公報Japanese Patent No. 3620918

特許文献1および2の例では、ディスプレイなどの表示装置が故障した場合、ドライバに情報を伝える手段がなくなってしまうが、他の手段に切り替えて情報を伝える方法は検討されてない。また、ドライバに何らかの障害が生じて情報を認識できない場合の対応についても考慮されていない。   In the examples of Patent Documents 1 and 2, when a display device such as a display breaks down, there is no means for transmitting information to the driver. However, a method for switching to other means to transmit information is not studied. In addition, no countermeasure is taken into account when information cannot be recognized due to some kind of failure in the driver.

上記問題を背景として、本発明の課題は、ドライバに確実に情報を伝える車載用情報伝達装置を提供することにある。   With the above problem as a background, an object of the present invention is to provide an in-vehicle information transmission device that reliably transmits information to a driver.

課題を解決するための手段および発明の効果Means for Solving the Problems and Effects of the Invention

上記課題を解決するための車載用情報伝達装置は、乗員に情報を報知する報知手段と、情報が乗員に伝えられたかどうかを判定する伝達完了判定手段と、情報が乗員に伝えられなかったと判定された場合に、当該情報を代替報知手段により報知する報知制御手段と、を備えることを特徴とする。   An in-vehicle information transmission device for solving the above-described problem is a notification means for notifying an occupant of information, a transmission completion determination means for determining whether information has been transmitted to the occupant, and a determination that information has not been transmitted to the occupant. A notification control means for notifying the information by an alternative notification means.

上記構成によって、ドライバを含む乗員に確実に情報を伝えることができるとともに、情報が乗員に伝えられない場合にのみ代替報知手段により報知されるので、既に伝えられた情報を何度も伝えて乗員が煩わしく感じることはない。   With the above configuration, the information can be reliably transmitted to the occupant including the driver, and the information is notified by the alternative notification means only when the information cannot be transmitted to the occupant. Never feel annoying.

また、本発明の車載用情報伝達装置は、情報の内容に応じてその情報の重要度を設定する重要度設定手段と、重要度によって当該情報が重要情報であるかどうかを判定する重要度判定手段と、を備え、報知制御手段は当該情報が重要情報であると判定された場合に、代替報知手段により当該情報を報知するように構成することもできる。   In addition, the in-vehicle information transmission device of the present invention includes importance setting means for setting the importance of the information according to the content of the information, and importance determination for determining whether the information is important information based on the importance. And the notification control means can be configured to notify the information by the alternative notification means when it is determined that the information is important information.

上記構成によって、ドライバを含む乗員に確実に伝えるべき重要情報のみが代替報知手段により報知されるので、重要情報が確実に報知されるとともに不要な情報が報知されて乗員が煩わしく感じることはない。   With the above configuration, only the important information that should be surely transmitted to the occupant including the driver is notified by the alternative notification means. Therefore, the important information is notified reliably and unnecessary information is notified and the occupant does not feel bothered.

また、本発明の車載用情報伝達装置は、車載用情報報知装置に対する操作を検出する操作検出手段を備え、伝達完了判定手段は所定の操作が検出された場合に情報が乗員に伝えられたと判定するように構成することもできる。   The in-vehicle information transmission device of the present invention further includes an operation detection unit that detects an operation on the in-vehicle information notification device, and the transmission completion determination unit determines that the information is transmitted to the occupant when a predetermined operation is detected. It can also be configured to.

上記構成によって、乗員がその情報が伝えられた旨の操作を行うことで、情報が報知されたことを確実に判定することが可能となる。   With the above configuration, it is possible to reliably determine that the information has been notified by performing an operation to the effect that the information has been transmitted.

また、本発明の車載用情報伝達装置は、報知手段の故障を検出する故障検出手段を備え、報知制御手段は報知手段の故障が検出された場合に情報を代替報知手段により報知するように構成することもできる。   The on-vehicle information transmission device of the present invention includes a failure detection unit that detects a failure of the notification unit, and the notification control unit is configured to notify the information by the alternative notification unit when a failure of the notification unit is detected. You can also

情報の重要度によって表示の輝度を変える構成の従来技術では、報知手段となるその表示器が故障したら全ての情報を伝えることができなくなるが、上記構成によって、通常使用する表示器が故障しても代替報知手段によりドライバに情報を伝えることが可能となる。   With the conventional technology that changes the display brightness depending on the importance of information, it is impossible to transmit all information if the display device serving as a notification means fails. It is also possible to convey information to the driver by the alternative notification means.

また、本発明の車載用情報伝達装置は、情報が代替報知手段により乗員に伝えられなかったと判定された場合に、その情報を車外の第三者に対して報知する車外報知手段を備えるように構成することもできる。   In addition, the in-vehicle information transmission device according to the present invention includes an out-of-vehicle notification means for notifying a third party outside the vehicle of the information when it is determined that the information has not been transmitted to the occupant by the alternative notification means. It can also be configured.

情報の内容によっては乗員から車外に報知した方が望ましいものもある。上記構成によって、乗員を介することなく車外の第三者に情報を伝えることが可能となる   Depending on the content of the information, it may be desirable to notify the passenger from outside the vehicle. With the above configuration, it is possible to convey information to a third party outside the vehicle without passing through the passenger.

また、本発明の車載用情報伝達装置は、乗員の体調を検出する体調検出手段を備え、情報が代替報知手段により乗員に伝えられなかったと判定された場合に、体調検出手段が乗員の体調を検出し、さらに乗員の体調に異常が生じていると判断された場合には、その情報を車外の第三者に対して報知する車外報知手段を備えるように構成することもできる。   The on-vehicle information transmission device of the present invention includes physical condition detection means for detecting the physical condition of the occupant, and when it is determined that the information has not been transmitted to the occupant by the alternative notification means, the physical condition detection means indicates the physical condition of the occupant. If it is detected and it is determined that there is an abnormality in the physical condition of the occupant, it may be configured to include an outside notification means for notifying a third party outside the vehicle of the information.

上記構成によって、乗員の体調に異常が生じていると判断された場合、すなわち、重要情報が乗員に伝えられなかったと判定された場合には、その情報を伝えるべき者(例えば車外の第三者)に確実に伝えることが可能となる。   If it is determined by the above configuration that there is an abnormality in the physical condition of the occupant, that is, if it is determined that important information has not been transmitted to the occupant, the person who should convey that information (for example, a third party outside the vehicle) ).

また、本発明の車載用情報伝達装置における体調検出手段は、運転者を撮影するカメラ、運転者の皮膚温度を検出する皮膚温度センサ、運転者の皮膚電位を検出する皮膚電位センサおよび運転者の音声を検出する音声センサから選ばれた1種または2種以上の組合せからなる検出器を含むように構成することもできる。   Further, the physical condition detection means in the in-vehicle information transmission device of the present invention includes a camera for photographing the driver, a skin temperature sensor for detecting the skin temperature of the driver, a skin potential sensor for detecting the skin potential of the driver, and the driver's skin temperature sensor. It can also comprise so that the detector which consists of 1 type, or 2 or more types of combinations chosen from the audio | voice sensor which detects an audio | voice may be included.

上記のセンサ等は周知のもので広く利用され、小型・軽量であるため運転席近傍等の車両に設置することは容易である。上記構成によって、安価な構成で運転者の体調を確実に検出することが可能となる。   The above sensors are well known and widely used, and since they are small and light, they can be easily installed in a vehicle near the driver's seat. With the above configuration, it is possible to reliably detect the physical condition of the driver with an inexpensive configuration.

また、本発明の車載用情報伝達装置は、伝達完了判定手段の判定結果あるいは検出された乗員の体調を記憶する記憶手段を備えるように構成することもできる。   Moreover, the vehicle-mounted information transmission device of the present invention can also be configured to include storage means for storing the determination result of the transmission completion determination means or the detected physical condition of the occupant.

上記構成によって、後で何が原因で乗員に伝達できなかったのか等を解析することや、どの手段を用いて報知するかの判断材料とすることが可能となる。   With the above-described configuration, it is possible to analyze what has failed to be transmitted to the occupant later, and to determine which means to use for notification.

簡易な構成で、ドライバに確実に情報を伝える車載用情報伝達装置を提供する目的を、情報が通常の報知手段により乗員に伝えられなかったと判定された場合に、当該情報を代替報知手段により報知する構成により実現した。   The purpose of providing an in-vehicle information transmission device that reliably conveys information to the driver with a simple configuration is to notify the information by the alternative notification means when it is determined that the information has not been transmitted to the occupant by the normal notification means. Realized by the configuration.

以下、本発明の車載用情報伝達装置の実施の形態を、図面を参照しながら説明する。図1は車載用情報伝達装置1の構成を示すブロック図である。車載用情報伝達装置1は、操作スイッチ群2,故障検出部3,体調検出部4,メモリ9,表示器10,送受信機13,音声合成回路24,スピーカ15,車速センサ23,バイブレータ25,LAN(Local Area Network) I/F(インターフェース)26,カメラ28,車外報知器29,音声認識ユニット30,マイク31,表示器32およびこれらの接続された制御回路8等を備えている。   Embodiments of an in-vehicle information transmission apparatus according to the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing the configuration of the in-vehicle information transmission device 1. The in-vehicle information transmission apparatus 1 includes an operation switch group 2, a failure detection unit 3, a physical condition detection unit 4, a memory 9, a display 10, a transmitter / receiver 13, a voice synthesis circuit 24, a speaker 15, a vehicle speed sensor 23, a vibrator 25, and a LAN. (Local Area Network) An I / F (interface) 26, a camera 28, a vehicle outside alarm device 29, a voice recognition unit 30, a microphone 31, a display device 32, a control circuit 8 connected to these, and the like are provided.

操作スイッチ群2は、例えば表示器10,32と一体になったタッチパネル22,33もしくはメカニカルなスイッチが用いられる。タッチパネル22,33は、表示器10,32の画面上にガラス基盤と透明なフィルムにスペーサと呼ばれる隙間を介してX軸方向、Y軸方向に電気回路が配線され、フィルム上をユーザがタッチすると、押された部分の配線がショートして電圧値が変わるため、これを2次元座標値(X,Y)として検出する、いわゆる抵抗膜方式が広く用いられる。その他に、いわゆる静電容量方式を用いてもよい。メカニカルスイッチの他に、マウスやカーソル等のポインティングデバイスを用いてもよい。また、表示器10,32とその周辺を覆い意匠枠となるエスカッションに、操作スイッチ群2のうちのメカニカルスイッチを配置してもよい(図2参照)。   As the operation switch group 2, for example, touch panels 22 and 33 integrated with the display units 10 and 32 or mechanical switches are used. The touch panels 22 and 33 are configured such that an electric circuit is wired in the X-axis direction and the Y-axis direction through a gap called a spacer on a glass substrate and a transparent film on the screens of the display units 10 and 32, and the user touches the film. Since the pressed portion of the wiring is short-circuited to change the voltage value, a so-called resistive film method is widely used in which this is detected as a two-dimensional coordinate value (X, Y). In addition, a so-called capacitance method may be used. In addition to the mechanical switch, a pointing device such as a mouse or a cursor may be used. Moreover, you may arrange | position the mechanical switch of the operation switch group 2 in the escutcheon which covers the indicator | displays 10 and 32 and its periphery, and becomes a design frame (refer FIG. 2).

また、マイク31および音声認識ユニット30を用いて種々の指示を入力することも可能である。これは、マイク31から入力された音声信号を、音声認識ユニット30において周知の隠れマルコフモデル等の音声認識技術により処理を行い、その結果に応じた操作コマンドに変換するものである。これら操作スイッチ群2,タッチパネル22,33,およびマイク31によって、種々の指示を入力することが可能である。なお、操作スイッチ群2,タッチパネル22,33,およびマイク31が本発明の操作検出手段に相当する。   It is also possible to input various instructions using the microphone 31 and the voice recognition unit 30. In this method, a voice signal input from the microphone 31 is processed by a voice recognition technique such as a well-known hidden Markov model in the voice recognition unit 30, and converted into an operation command corresponding to the result. Various instructions can be input through the operation switch group 2, the touch panels 22 and 33, and the microphone 31. The operation switch group 2, the touch panels 22, 33, and the microphone 31 correspond to the operation detection unit of the present invention.

故障検出部3は、車両101(図2参照)の各部の状態を監視し所定以外の動作が発生したことの検出を行う少なくとも一つ以上のセンサを含んで構成される。センサとして、車速(別途後述),ブレーキ液圧,ブレーキペダル位置等の走行性能を検出するセンサ、エンジン回転数,アクセル開度等のエンジンの駆動性能を検出するセンサ、吸入空気量,吸気負圧,吸気温度,空燃比,冷却水温度,アクチュエータ温度等の排気ガスの浄化性能を検出するセンサ、ライン圧,オイル温度,タービン回転数等のエンジンを除く駆動系の駆動性能を検出するセンサ、電気回路温度,バッテリ温度,バッテリ電流等を検出するセンサ等がある。   The failure detection unit 3 includes at least one sensor that monitors the state of each unit of the vehicle 101 (see FIG. 2) and detects that an operation other than a predetermined operation has occurred. As sensors, sensors that detect driving performance such as vehicle speed (discussed later), brake fluid pressure, brake pedal position, etc., sensors that detect engine driving performance such as engine speed, accelerator opening, intake air volume, intake negative pressure , Sensors that detect exhaust gas purification performance such as intake air temperature, air-fuel ratio, cooling water temperature, actuator temperature, etc., sensors that detect drive performance of the drive system excluding the engine, such as line pressure, oil temperature, and turbine speed, There are sensors that detect circuit temperature, battery temperature, battery current, and the like.

体調検出部4は以下のセンサのうちの少なくとも一つ以上を用いる。なお、体調検出部4が本発明の体調検出手段に相当する。
(1)皮膚温度センサ4a:主に図2の35a,35bのような操舵ハンドル36の握りの部分に取り付けられ、ドライバの皮膚温度を検出して制御回路8に出力する。また、ドライバの手首に巻くリストバンド型のセンサを用いてもよい。また、サーモトレーサーのような、物体に照射された赤外線の反射状態から物体の表面温度を測定する機器を用いてもよい。
(2)皮膚電位センサ4b:主に図2の35a,35bのような操舵ハンドル36の握りの部分に取り付けられ、ドライバの皮膚電位を検出して制御回路8に出力する。また、ドライバの手首に巻くリストバンド型のセンサを用いてもよい。皮膚電位は、睡眠時には覚醒時に比べて低下することが知られている。これによって、睡眠状態かどうかも判定することができる。
(3)音声センサ4c:マイク31から入力されたドライバの音声を音声認識ユニット30で特徴を抽出して予めメモリ9に基準データとして記憶しておく。所定のタイミングでドライバに発声を促し、その声と基準データとの差が所定の範囲を超える場合にドライバの体調が異常であると判断する。
The physical condition detection unit 4 uses at least one of the following sensors. The physical condition detection unit 4 corresponds to the physical condition detection means of the present invention.
(1) Skin temperature sensor 4a: It is attached mainly to the grip portion of the steering handle 36 such as 35a and 35b in FIG. 2, and detects the skin temperature of the driver and outputs it to the control circuit 8. Alternatively, a wristband type sensor wound around the wrist of the driver may be used. Moreover, you may use the apparatus which measures the surface temperature of an object from the reflection state of the infrared rays irradiated to the object like a thermo tracer.
(2) Skin potential sensor 4b: The skin potential sensor 4b is attached mainly to the grip portion of the steering handle 36 such as 35a and 35b in FIG. Alternatively, a wristband type sensor wound around the wrist of the driver may be used. It is known that the skin potential is lower during sleep than during awakening. Thereby, it can also be determined whether it is a sleep state.
(3) Voice sensor 4c: The voice of the driver input from the microphone 31 is extracted by the voice recognition unit 30 and stored in the memory 9 as reference data in advance. The driver is prompted to utter at a predetermined timing, and when the difference between the voice and the reference data exceeds a predetermined range, it is determined that the driver's physical condition is abnormal.

上記のセンサの他に、発汗の度合いを検出する発汗センサ,心拍数を検出する心拍センサ,脈拍波を検出する脈波センサ等を用いてもよい。   In addition to the above sensor, a perspiration sensor that detects the degree of perspiration, a heart rate sensor that detects a heart rate, a pulse wave sensor that detects a pulse wave, and the like may be used.

また、カメラ28で撮影されたドライバの画像から体調を検出してもよい。例えば、ドライバの視線の動きあるいは頭部の傾きから、メモリ9等に予め記憶された基準データと比較することで、ドライバの体調を検出することができる。   Further, the physical condition may be detected from the image of the driver photographed by the camera 28. For example, the physical condition of the driver can be detected by comparing with the reference data stored in advance in the memory 9 or the like from the movement of the driver's line of sight or the inclination of the head.

送受信機13は、周知の無線通信機およびアンテナを含んで構成され、車外の無線通信施設との通信を行う。例えば、図示しないVICS(Vehicle Information and Communication System:道路交通情報通信システム)センタから交通情報,天候情報等を受信する。   The transceiver 13 includes a known wireless communication device and an antenna, and performs communication with a wireless communication facility outside the vehicle. For example, traffic information, weather information, etc. are received from a VICS (Vehicle Information and Communication System) center (not shown).

制御回路8は通常のコンピュータとして構成されており、周知のCPU81,ROM82,RAM83,入出力回路であるI/O84,A/D変換部86,描画部87,画像処理部88,切替部89およびこれらの構成を接続するバスライン85が備えられている。CPU81は、ROM82に記憶された制御プログラム82Pおよびデータにより制御を行う。なお、制御回路8が本発明の伝達完了判定手段,報知制御手段,重要度設定手段,重要度判定手段に相当する。   The control circuit 8 is configured as an ordinary computer, and includes a well-known CPU 81, ROM 82, RAM 83, I / O 84 which is an input / output circuit, A / D conversion unit 86, drawing unit 87, image processing unit 88, switching unit 89, and A bus line 85 for connecting these components is provided. The CPU 81 performs control using the control program 82P and data stored in the ROM 82. The control circuit 8 corresponds to the transmission completion determination means, notification control means, importance level setting means, and importance level determination means of the present invention.

A/D変換部86は周知のA/D(アナログ/デジタル)変換回路を含み、例えば体調検出部4などから制御回路8に入力されるアナログデータをCPU81で演算可能なデジタルデータに変換するものである。   The A / D conversion unit 86 includes a well-known A / D (analog / digital) conversion circuit, and converts analog data input to the control circuit 8 from the physical condition detection unit 4 into digital data that can be calculated by the CPU 81, for example. It is.

描画部87は、ROM82あるいはメモリ9等に記憶された表示用のデータや表示色のデータから表示器10,32に表示させるための表示画面データを生成する。   The drawing unit 87 generates display screen data to be displayed on the display units 10 and 32 from display data or display color data stored in the ROM 82 or the memory 9.

画像処理部88は、公知のパターン認識などの技術によってカメラ28によって撮影された画像の解析を行う画像処理回路を含んで構成される。   The image processing unit 88 includes an image processing circuit that analyzes an image captured by the camera 28 by a known technique such as pattern recognition.

切替部89は、表示器10,32等の情報の報知手段を切り替えるたものもので、CPU81の指令により報知手段を選択し、選択された報知手段に対して報知する情報を送る。   The switching unit 89 switches information notifying means such as the display units 10 and 32, selects the notifying means according to a command from the CPU 81, and sends information to be notified to the selected notifying means.

メモリ9はEEPROM(Electrically Erasable & Programmable Read Only Memory:電気的消去・プログラム可能・読出し専用メモリ)やフラッシュメモリ等の書き換え可能な記憶媒体によって構成され、車載用情報伝達装置1の動作に必要な情報およびデータが記憶されている。なお、メモリ9は車載用情報伝達装置1がオフ状態になっても、記憶内容が保持されるようになっている。また、メモリ9としてハードディスク装置を用いてもよい。なお、メモリ9が本発明の記憶手段に相当する。   The memory 9 is composed of a rewritable storage medium such as an EEPROM (Electrically Erasable & Programmable Read Only Memory) or a flash memory, and information necessary for the operation of the in-vehicle information transmission device 1 And data is stored. The memory 9 holds the stored contents even when the in-vehicle information transmission device 1 is turned off. Further, a hard disk device may be used as the memory 9. The memory 9 corresponds to the storage means of the present invention.

表示器10,32は周知のカラー液晶表示器で構成され、ドット・マトリックスLCD(Liquid Crystal Display)およびLCD表示制御を行うための駆動回路11,34を含んで構成されている。駆動回路11,34は、例えば、画素毎にトランジスタを付けて目的の画素を確実に点灯させたり消したりすることができるアクティブマトリックス駆動方式が用いられ、制御回路8から送られる表示指令および表示画面データに基づいて表示を行う。なお、表示器10,32として有機EL(ElectroLuminescence:電界発光)表示器,プラズマ表示器を用いてもよい。なお、表示器10が本発明の報知手段に、表示器32が本発明の代替報知手段にそれぞれ相当する。図2に表示器10,32の設置例を示す。   The displays 10 and 32 are constituted by known color liquid crystal displays, and include a dot matrix LCD (Liquid Crystal Display) and drive circuits 11 and 34 for performing LCD display control. The drive circuits 11 and 34 use, for example, an active matrix drive system in which a transistor is attached to each pixel so that the target pixel can be reliably turned on and off, and display commands and display screens sent from the control circuit 8 are used. Display based on data. Note that an organic EL (ElectroLuminescence) display or a plasma display may be used as the displays 10 and 32. The display 10 corresponds to the notification means of the present invention, and the display 32 corresponds to the alternative notification means of the present invention. FIG. 2 shows an installation example of the display units 10 and 32.

また、駆動回路11,34には故障検出回路が含まれている。この故障検出回路は、画素の点灯/消灯が行われているか、バックライトが所定の輝度で点等されているか、あるいはその他の表示器としての動作が正常に行われているかを含むステータス情報を生成し、そのステータス情報を制御回路8へ送る。なお、駆動回路11,34が本発明の故障検出手段に相当する。   The drive circuits 11 and 34 include a failure detection circuit. This failure detection circuit displays status information including whether the pixel is turned on / off, whether the backlight is lit at a predetermined luminance, or whether other display devices are operating normally. The status information is generated and sent to the control circuit 8. The drive circuits 11 and 34 correspond to the failure detection means of the present invention.

スピーカ15は周知の音声合成回路24に接続され、制御プログラム82Pの指令によってメモリ9あるいはROM82に記憶されるデジタル音声データが音声合成回路24においてアナログ音声に変換されたものが送出される。なお、音声合成の方法には、音声波形をそのままあるいは符号化して蓄積しておき必要に応じて繋ぎ合わせる録音編集方式、文字入力情報からそれに対応する音声を合成するテキスト合成方式などがある。また、図2のように、スピーカ15は車両101のドアの内側等に設置される。   The speaker 15 is connected to a known voice synthesis circuit 24, and the digital voice data stored in the memory 9 or the ROM 82 is converted into analog voice by the voice synthesis circuit 24 in accordance with a command of the control program 82P. Note that speech synthesis methods include a recording / editing method in which speech waveforms are stored as they are or after being encoded and connected as necessary, and a text synthesis method in which corresponding speech is synthesized from character input information. In addition, as shown in FIG. 2, the speaker 15 is installed inside the door of the vehicle 101.

車速センサ23は周知のロータリエンコーダ等の回転検出部を含み、例えば車輪取り付け部付近に設置されて車輪の回転を検出してパルス信号として制御回路8に送るものである。制御回路8では、その車輪の回転数を車両101の速度に換算する。   The vehicle speed sensor 23 includes a rotation detection unit such as a known rotary encoder. For example, the vehicle speed sensor 23 is installed in the vicinity of the wheel mounting unit to detect the rotation of the wheel and send it to the control circuit 8 as a pulse signal. In the control circuit 8, the rotation speed of the wheel is converted into the speed of the vehicle 101.

バイブレータ25は、周知の携帯電話機に含まれて着信を知らせるものと同様の構成であり、モータおよびその駆動回路等を含んで構成され、例えば座席37(図2参照)に内蔵される。   Vibrator 25 has the same configuration as that included in a known mobile phone and notifies an incoming call, and includes a motor and its drive circuit, and is built in, for example, seat 37 (see FIG. 2).

LAN I/F26は車内LAN27を介して他の車載機器やセンサとのデータの遣り取りを行うためのインターフェース回路である。また、LAN I/F26を介して故障検出部3,体調検出部4,あるいは車速センサ23からのデータ取り込みを行ってもよい。   The LAN I / F 26 is an interface circuit for exchanging data with other in-vehicle devices and sensors via the in-vehicle LAN 27. In addition, data acquisition from the failure detection unit 3, the physical condition detection unit 4, or the vehicle speed sensor 23 may be performed via the LAN I / F 26.

カメラ28は、図8のように例えば赤外投光領域撮像カメラ28aと赤外投光ランプ28bを含んで構成される。赤外投光ランプ28bによりドライバの頭顔部に赤外光が投光され、その反射光を赤外投光領域撮像カメラ28aにより撮影する。カメラ28は、図2のように例えばステアリングホイールのコラムカバーに設けられる。また、カメラ28の設置場所は、ルームミラー内,天井部,計器パネル上部のようなドライバの頭顔部が撮影可能であれば特に制約はない。また、赤外光を用いずに自然光によって撮影する方法を用いてもよい。なお、カメラ28が本発明の操作検出手段に相当する。   As shown in FIG. 8, the camera 28 includes, for example, an infrared projection area imaging camera 28a and an infrared projection lamp 28b. Infrared light is projected onto the head face of the driver by the infrared projection lamp 28b, and the reflected light is photographed by the infrared projection area imaging camera 28a. The camera 28 is provided, for example, on a column cover of a steering wheel as shown in FIG. Further, the installation location of the camera 28 is not particularly limited as long as the driver's head and face such as the interior of the rearview mirror, the ceiling, and the upper part of the instrument panel can be photographed. Alternatively, a method of photographing with natural light without using infrared light may be used. The camera 28 corresponds to the operation detection means of the present invention.

車外報知器29は、図3のように例えば車両101の室内後部に設置され、例えば表示器10,32のようなLCD表示器やLED表示器として構成される。また、図示しない携帯電話器を含んで外部に通報する構成としてもよい。さらに、車両101のルームランプ103あるいはテールランプ102,ハザードランプ(図示せず)等の灯火装置を車外報知器として用いてもよい。また、送受信機13を用いて外部に通報してもよい。なお、車外報知器29が本発明の車外報知手段に相当する。   As shown in FIG. 3, the outside alarm device 29 is installed, for example, in the rear part of the vehicle 101 and is configured as an LCD display or LED display such as the display 10 or 32. Moreover, it is good also as a structure which reports to the exterior including the mobile telephone device which is not illustrated. Further, a lighting device such as the room lamp 103 or the tail lamp 102 of the vehicle 101, a hazard lamp (not shown), or the like may be used as an outside alarm. Moreover, you may report to the exterior using the transmitter / receiver 13. FIG. In addition, the vehicle outside notification device 29 corresponds to the vehicle outside notification means of the present invention.

このような構成を持つことにより、車載用情報伝達装置1は、制御回路8のCPU81により制御プログラム82Pが起動されると、図4のように、各種センサ等の情報を基に報知するための情報を生成し、その情報を情報判定部110において伝達すべき情報であるかを判定し、その判定結果に応じて伝達装置切替部113において報知する対象機器を選択して車両乗員に対し情報の伝達を行う。そして、情報完了判定部111において情報の伝達が完了したかを判定し、判定結果に応じて伝達装置切替部113において報知する対象機器(上記の伝達時とは異なるもの)を選択して車両乗員に対し情報の伝達を再度行うか、ドライバ状態判定部112においてドライバの体調を判定し、その体調に応じて伝達装置切替部113において報知する対象機器を選択して情報の伝達を行うかのいずれかを実行する。なお、これら、情報判定部110,情報完了判定部111,ドライバ状態判定部112,伝達装置切替部113はそれぞれ制御プログラム82Pで行われる処理に相当する。   By having such a configuration, when the control program 82P is activated by the CPU 81 of the control circuit 8, the in-vehicle information transmission device 1 notifies the vehicle based on information from various sensors as shown in FIG. It generates information, determines whether the information is to be transmitted in the information determination unit 110, selects a target device to be notified in the transmission device switching unit 113 according to the determination result, and transmits information to the vehicle occupant. Make a transmission. Then, the information completion determination unit 111 determines whether or not the information transmission is completed, and selects a target device to be notified by the transmission device switching unit 113 according to the determination result (different from the above-mentioned transmission time). Information is transmitted again, or the driver condition determination unit 112 determines the physical condition of the driver, and the transmission device switching unit 113 selects the target device to be notified according to the physical condition and transmits the information. Do something. Note that the information determination unit 110, the information completion determination unit 111, the driver state determination unit 112, and the transmission device switching unit 113 correspond to processes performed by the control program 82P.

図5のフロー図を用いて、本発明の情報伝達処理について説明する。なお、本処理は制御プログラム82Pに含まれ他の処理とともに繰り返し実行される。まず、送受信機13により例えば交通情報を受信する。また、故障検出部3から各種センサの情報を取得する。また、車内LAN27を介して他の車載機器の情報を取得する。そして、これら取得された情報からドライバに伝えるべき情報があるかを調べる(S1)。   The information transmission process of the present invention will be described using the flowchart of FIG. This process is included in the control program 82P and is repeatedly executed together with other processes. First, for example, traffic information is received by the transceiver 13. Also, information on various sensors is acquired from the failure detection unit 3. In addition, information on other in-vehicle devices is acquired via the in-vehicle LAN 27. Then, it is checked whether there is information to be transmitted to the driver from the acquired information (S1).

ドライバに伝えるべき情報であるかどうかは、その情報の重要度によって判定される。図6に情報の重要度の分類例を示す。エンジン制御系あるいは走行制御系のように車両101の走行に支障をきたす故障のような緊急に対応が必要な情報が重要度Aに分類され、車両101の走行に直接影響を及ぼさないオーディオ機器等の故障が重要度Bに分類され、繰り返し取得可能な交通情報や天候情報は重要度Cに分類されている。ここで、確実に伝えるべき情報は重要度Aに分類される情報とする。なお、確実に伝えるべき情報はユーザ(ドライバ)によって設定可能としてもよい。設定内容はメモリ9の所定の領域に記憶される。   Whether the information is to be transmitted to the driver is determined by the importance of the information. FIG. 6 shows an example of classification of information importance. Information that needs to be dealt with urgently, such as a failure that hinders the traveling of the vehicle 101, such as an engine control system or a traveling control system, is classified as an importance level A, and audio equipment that does not directly affect the traveling of the vehicle 101 Are classified into importance B, and traffic information and weather information that can be repeatedly acquired are classified into importance C. Here, it is assumed that the information to be surely transmitted is information classified into the importance level A. It should be noted that information to be surely transmitted may be settable by a user (driver). The setting contents are stored in a predetermined area of the memory 9.

各情報には、例えば、重要度Aは00,重要度Bは01,重要度Cは10(いずれも二進数)というように、そのデータの先頭に重要度に対応するインデックスが含まれている。このインデックスを読み取ることで確実に伝えるべき情報かどうかを判定することができる。また、確実に伝えるべき情報を設定する場合は、インデックスの値を設定する。上述の例では、設定されたインデックスの値以下のものが確実に伝えるべき情報となる。つまり、図6の例では、設定値は”00”である。   Each information includes an index corresponding to the importance at the head of the data, for example, importance A is 00, importance B is 01, importance C is 10 (both are binary numbers). . By reading this index, it can be determined whether or not the information is to be transmitted reliably. Also, when setting information to be transmitted reliably, an index value is set. In the above-described example, information that is less than or equal to the set index value is information to be transmitted reliably. That is, in the example of FIG. 6, the set value is “00”.

取得された情報が確実に伝えるべき情報でない(情報が重要度Aに含まれない)場合(S2:No)、表示器10あるいはスピーカ15によってその情報を報知する(S12)。その後、情報がドライバに伝達されたかどうかを判定せずに処理を終了する。   When the acquired information is not information to be surely transmitted (the information is not included in the importance level A) (S2: No), the information is notified by the display 10 or the speaker 15 (S12). Thereafter, the process ends without determining whether the information has been transmitted to the driver.

一方、取得された情報が確実に伝えるべき情報である(情報が重要度Aに含まれる)場合(S2:Yes)、デフォルトの報知手段である表示器10によりその情報の表示を行う(S3)。   On the other hand, when the acquired information is information to be surely transmitted (the information is included in the importance level A) (S2: Yes), the information is displayed by the display 10 which is a default notification means (S3). .

ドライバが操作スイッチ群2,タッチパネル22,およびマイク31のいずれかによる入力操作を行って表示器10に表示された情報を認識したと判定された場合(S4:Yes)、本処理を終了する。図7の例では、表示器10の画面上に情報とともに「確認」ボタンが表示され、「確認」ボタンを押下するとドライバが情報を認識したと判定される。   When it is determined that the driver has performed an input operation using any one of the operation switch group 2, the touch panel 22, and the microphone 31 and has recognized the information displayed on the display device 10 (S4: Yes), this process is terminated. In the example of FIG. 7, a “confirmation” button is displayed on the screen of the display 10 together with information, and when the “confirmation” button is pressed, it is determined that the driver has recognized the information.

また、ドライバの目の動きをカメラ28により撮影し、ドライバの注視点によってドライバが情報を認識したことを判定する方法を用いてもよい。以下、図8,図9を用いて、ドライバの視認行動検出処理の一例について説明する。図8は、視認行動検出の機能構成を示すブロック図である。図8に示すように、カメラ28を構成する赤外投光ランプ28bの投光部分と、赤外投光領域撮像カメラ28aの受光部には、赤外透過フィルタ28cが設けられており、画像処理部88は、赤外投光領域撮像カメラ28aから出力される映像信号に基づいて、画像処理モジュール88aにおいて一般的な2値化処理や特徴点の抽出処理を行うことによってドライバの頭顔部の画像を抽出し、その抽出した頭顔部の画像に基づいて、注視点検出モジュール88bにおいて、ドライバの注視点Pを算出するために、頭顔方向Dh,注視方向Dsを検出する。   Alternatively, a method may be used in which the driver's eyes are photographed by the camera 28 and the driver recognizes the information based on the driver's gaze point. Hereinafter, an example of a driver's visual action detection process will be described with reference to FIGS. 8 and 9. FIG. 8 is a block diagram showing a functional configuration for visual recognition behavior detection. As shown in FIG. 8, an infrared transmission filter 28c is provided in the light projection part of the infrared light projection lamp 28b constituting the camera 28 and the light receiving part of the infrared light projection area imaging camera 28a. The processing unit 88 performs a general binarization process and a feature point extraction process in the image processing module 88a based on the video signal output from the infrared projection area imaging camera 28a, so that the head and face part of the driver. The gaze point detection module 88b detects the head face direction Dh and the gaze direction Ds in order to calculate the driver's gaze point P based on the extracted head face image.

次に、画像処理部88の具体的な機能について、図9を参照して説明する。図9は、本実施形態における注視点検出処理のフロー図であり、画像処理モジュール88aおよび注視点検出モジュール88bにより実現される機能を表わす。なお、これらモジュールは画像処理部88に含まれる図示しない周知のマイクロコンピュータが実行する画像処理プログラムに含まれる。   Next, specific functions of the image processing unit 88 will be described with reference to FIG. FIG. 9 is a flowchart of the gazing point detection process in the present embodiment, and represents functions realized by the image processing module 88a and the gazing point detection module 88b. These modules are included in an image processing program executed by a well-known microcomputer (not shown) included in the image processing unit 88.

まず、赤外投光ランプ28bによってドライバの頭顔部に投光を行うと共に、赤外投光領域撮像カメラ28aによって撮影した当該頭顔部のアナログ映像信号は画像処理モジュール88aに取り込み、その映像信号に一般的な2値化処理を施すことにより、ピクセル毎のデジタル多値画像データに変換される(S21)。   First, the infrared projection lamp 28b projects light onto the driver's head and face, and the analog video signal of the head and face captured by the infrared projection area imaging camera 28a is taken into the image processing module 88a and the image is displayed. The signal is converted into digital multi-value image data for each pixel by performing a general binarization process (S21).

得られた多値画像データから、まず、一般的な画像処理手法を用いてドライバの顔画像部分を抽出し、その抽出した顔画像部分に含まれる複数の特徴点(例えば目頭、目尻、鼻孔等)の位置を検出する(S22)。次に、抽出された顔画像部分の画像データから、赤外投光ランプ28bの投光によってドライバの眼球の角膜に発生している反射点の位置と瞳孔の位置とを検出する(S23)。   First, a driver's face image part is extracted from the obtained multi-valued image data using a general image processing method, and a plurality of feature points (for example, the eyes, the corners of the eyes, the nostrils, etc.) included in the extracted face image part are extracted. ) Position is detected (S22). Next, the position of the reflection point and the position of the pupil generated in the cornea of the driver's eyeball by the projection of the infrared projection lamp 28b are detected from the extracted image data of the face image portion (S23).

そして、検出された特徴点の位置に基づいて、所定の3次元座標空間におけるドライバの頭顔面の傾きを算出することにより、ドライバの頭顔が向けられている方向である頭顔方向Dhを計測する(S24)。また、検出された角膜反射点,瞳孔位置,頭顔方向Dhとに基づいて、ドライバの視線の方向である注視方向Dsを検出する(S25)。   Then, by calculating the inclination of the driver's head and face in a predetermined three-dimensional coordinate space based on the position of the detected feature point, the head and face direction Dh, which is the direction in which the driver's head and face is directed, is measured. (S24). Further, based on the detected corneal reflection point, pupil position, and head-face direction Dh, a gaze direction Ds that is the direction of the driver's line of sight is detected (S25).

検出された注視方向Dsが、当該所定の3次元座標空間における座標として予めメモリ16等に記憶された表示器10,32のような所定位置に対応するかを判断することにより、ドライバの注視点Pを検出し、その検出された注視点Pが例えば表示器10である場合、その情報を制御回路8に出力する(S26)。   By determining whether or not the detected gaze direction Ds corresponds to a predetermined position such as the display 10 or 32 stored in advance in the memory 16 or the like as coordinates in the predetermined three-dimensional coordinate space, P is detected, and when the detected gazing point P is, for example, the display 10, the information is output to the control circuit 8 (S26).

制御回路8ではドライバの注視点Pが表示器10である場合、ドライバが表示器10に表示された情報を認識したと判定する。   When the driver's gazing point P is the display device 10, the control circuit 8 determines that the driver has recognized the information displayed on the display device 10.

図5に戻り、表示器10に情報が表示されてから例えば10秒のような所定の時間内にドライバがその情報を認識したと判定されなかった場合、図7の例では「確認」ボタンが押下されなかった場合(S4:No)、例えば1分のような所定の時間間隔で例えば3回のように所定の回数その情報を表示器10に表示する(S5:Yes→S3)。   Returning to FIG. 5, if it is not determined that the driver has recognized the information within a predetermined time such as 10 seconds after the information is displayed on the display 10, the “confirm” button is displayed in the example of FIG. 7. If not pressed (S4: No), the information is displayed on the display 10 a predetermined number of times, for example, three times at a predetermined time interval such as 1 minute (S5: Yes → S3).

情報を所定の回数表示したにもかかわらずドライバがその情報を認識したと判定されなかった場合(S5:No)、代替報知手段である表示器32にその情報を表示する(S6)。表示器32にも図7のように情報が表示されるので、「確認」ボタンが押下された場合、あるいは、カメラ28より撮影された画像からドライバが表示器32を注視して情報を認識したと判定された場合(S7:Yes)、本処理を終了する。   If it is not determined that the driver has recognized the information even though the information has been displayed a predetermined number of times (S5: No), the information is displayed on the display 32 as an alternative notification means (S6). Since the information is also displayed on the display 32 as shown in FIG. 7, when the “confirm” button is pressed, or the driver recognizes the information by gazing at the display 32 from the image taken by the camera 28. Is determined (S7: Yes), this processing is terminated.

一方、表示器32に表示された情報をドライバが認識しなかった場合(S7:No)、上述と同様に、例えば1分のような所定の時間間隔で例えば3回のように所定の回数その情報を表示器32に表示する(S8:Yes→S6)。   On the other hand, when the driver does not recognize the information displayed on the display device 32 (S7: No), as described above, the predetermined number of times, for example, three times at a predetermined time interval such as one minute. Information is displayed on the display 32 (S8: Yes → S6).

そして、表示器32に情報を所定の回数表示したにもかかわらずドライバがその情報を認識したと判定されなかった場合(S8:No)、体調検出器4によりドライバの体調を検出する(S9)。体調検出器4により検出されたドライバの皮膚温度,皮膚電位,音声の状態のうちの少なくとも一つが予めメモリ9の所定の領域に記憶されているドライバの正常値の範囲外にある場合(S10:Yes)は、ドライバに異常が発生したと判断し、上述した車外報知器29によって車外の第三者に、ドライバに報知すべき情報とドライバの体調に異常がある旨を報知する(S11)。   If it is not determined that the driver has recognized the information even though the information is displayed a predetermined number of times on the display 32 (S8: No), the physical condition of the driver is detected by the physical condition detector 4 (S9). . When at least one of the driver's skin temperature, skin potential, and voice state detected by the physical condition detector 4 is outside the normal value range of the driver stored in a predetermined area of the memory 9 (S10: Yes) determines that an abnormality has occurred in the driver, and notifies the third party outside the vehicle by using the above-mentioned vehicle outside alarm device 29 that the information to be notified to the driver and the physical condition of the driver are abnormal (S11).

表示器32で情報の表示を行う際に、バイブレータ25を動作させ、振動によってドライバに情報が表示されている旨を伝えてもよい。   When displaying information on the display 32, the vibrator 25 may be operated to inform the driver that the information is displayed by vibration.

図10のように、メモリ9には情報の表示を行う際に用いる報知手段の報知順位が記憶されている。図10の例では、表示器10が報知順位1位でデフォルトの報知手段となっている。車外報知器29に複数の装置が含まれている場合には、装置毎に報知順位を定める。表示器10あるいは表示器32と、スピーカ15あるいはバイブレータ25とを併用してもよい。なお、ドライバが報知手段を選択して報知順位を定める構成としてもよい。報知の際には報知順位を参照し、報知順位の高い(数値の小さい)順に報知を行う。   As shown in FIG. 10, the notification order of notification means used when displaying information is stored in the memory 9. In the example of FIG. 10, the display device 10 is the default notification means at the first notification rank. When the outside alarm device 29 includes a plurality of devices, a notification order is determined for each device. The display 10 or the display 32 and the speaker 15 or the vibrator 25 may be used in combination. In addition, it is good also as a structure which a driver | operator selects an alerting | reporting means and determines alerting | reporting order. At the time of notification, the notification order is referred to, and notification is performed in the order of higher notification order (smaller numerical value).

図5の例では、重要度Aの情報のみ車外報知器29による報知まで行っているが、重要度Bの情報を代替報知手段(表示器32)により報知してもよい。   In the example of FIG. 5, only the information on the importance level A is notified up to the notification by the outside alarm device 29, but the information on the importance level B may be notified by an alternative notification means (display device 32).

また、表示器10により報知された情報をドライバが認識しなかった場合(S5:No)、代替報知手段(表示器32)により報知をした後に本処理を終了する構成としてもよい(S6→終了)。また、表示器32により報知された情報をドライバが認識しなかった場合(S8:No)、本処理を終了する構成としてもよい。   Further, when the driver does not recognize the information notified by the display device 10 (S5: No), the processing may be terminated after the notification by the alternative notification means (display device 32) (S6 → end). ). Moreover, it is good also as a structure which complete | finishes this process, when a driver does not recognize the information alert | reported by the indicator 32 (S8: No).

また、表示器10,32あるいは車外報知器29等の各報知手段の状態、ドライバの体調をメモリ9に記憶するようにしてもよい。図11にその一例を示す。例えば、まず、車載用情報伝達装置1の起動時に各報知手段における上述のステータス情報を取得して正常かどうかを判定し、体調検出器4の状態を検出してドライバの体調を検出して、これらの結果を記憶する。車載用情報伝達装置1が動作中には、一定の周期あるいは報知する情報を取得した場合等の所定のタイミングで各報知手段の状態およびドライバの体調を記憶する。記憶内容に各報知手段の状態およびドライバの体調が記憶されたときの日時情報を含めてもよい。   Further, the state of each notification means such as the indicators 10 and 32 or the vehicle outside notification device 29 and the physical condition of the driver may be stored in the memory 9. An example is shown in FIG. For example, first, when the vehicle-mounted information transmission device 1 is started, the above-described status information in each notification means is acquired to determine whether it is normal, the state of the physical condition detector 4 is detected to detect the physical condition of the driver, Memorize these results. While the in-vehicle information transmission device 1 is in operation, the state of each notification means and the physical condition of the driver are stored at a predetermined period or when the information to be notified is acquired. The stored contents may include date and time information when the state of each notification means and the physical condition of the driver are stored.

そして、図10の報知順位に従って取得された情報の報知を行う際に、正常でない報知手段をスキップして次の順位の報知手段により報知を行うことで、迅速に情報の報知を行うことが可能となる。   And when notifying the information acquired according to the notification order of FIG. 10, it is possible to notify the information quickly by skipping the abnormal notification means and notifying by the notification means of the next order. It becomes.

また、各報知手段による報知結果をメモリ9に記憶するようにしてもよい。図12にその一例を示す。情報1〜3にはドライバに伝えるべき情報の内容が含まれている。例えば、情報2の報知結果は、表示器10による報知ではドライバが情報を認識しなかったが表示器32の表示により認識したことを表している。また、情報3の報知結果は、ドライバが情報を認識しなかったので車外に報知されたことを表している。このときに、ドライバが情報を認識したかどうか(操作スイッチ群2等の操作の有無),各報知手段の状態,体調検出器の検出結果等を合わせて記憶してもよい。   Further, the notification result by each notification means may be stored in the memory 9. An example is shown in FIG. Information 1 to 3 includes the contents of information to be transmitted to the driver. For example, the notification result of the information 2 indicates that the driver did not recognize the information in the notification by the display device 10 but recognized by the display of the display device 32. The notification result of information 3 indicates that the driver has been notified outside the vehicle because the driver has not recognized the information. At this time, whether or not the driver has recognized the information (whether the operation switch group 2 or the like is operated), the state of each notification means, the detection result of the physical condition detector, and the like may be stored together.

各報知手段による報知結果を外部機器(図13(b)のパーソナルコンピュータ124等)に記憶するように構成してもよい。外部機器は、例えばパーソナルコンピュータやインターネットサーバを含んで構成される。車載用情報伝達装置1から外部機器へは、例えばその日の最初に車載用情報伝達装置1を起動したときに、メモリ9に記憶されている前日までの報知結果をまとめて送受信機13あるいは車外報知器29を介して公衆回線等の通信ネットワーク経由で外部機器に送る。この場合、メモリ9に予め記憶されている車載用情報伝達装置1を識別するための機器IDも合わせて外部機器に送る。   You may comprise so that the alerting | reporting result by each alerting | reporting means may be memorize | stored in an external apparatus (Personal computer 124 etc. of FIG.13 (b)). The external device includes, for example, a personal computer and an Internet server. From the in-vehicle information transmission device 1 to the external device, for example, when the in-vehicle information transmission device 1 is activated at the beginning of the day, the notification results up to the previous day stored in the memory 9 are collected together and the transmitter / receiver 13 or the outside notification. It is sent to an external device via a communication network such as a public line via the device 29. In this case, the device ID for identifying the in-vehicle information transmission device 1 stored in advance in the memory 9 is also sent to the external device.

外部機器では、受信した報知結果を機器ID(車載用情報伝達装置1)あるいはドライバ毎にデータベースとして記憶する。記憶された内容によって、例えば、代替報知手段で報知された情報の内容を確認したり、ドライバに異常が発生した場合には何が原因で異常と判定されたのか等を後から確認することができる。   The external device stores the received notification result as a database for each device ID (vehicle-mounted information transmission device 1) or driver. Depending on the stored contents, for example, it is possible to confirm the contents of information notified by the alternative notification means, or to confirm later what caused the abnormality to be determined when an abnormality occurs in the driver. it can.

日時情報は、CPU81に含まれるリアルタイムカウンタ(図示せず)を基にして生成する。また、制御回路8にリアルタイムクロックICとも呼ばれる図示しない時計ICを含めて、CPU81が時計ICから日時情報を取得する構成としてもよい。また、車内LAN27を介して他の車載機器から日時情報を取得してもよい。   The date / time information is generated based on a real-time counter (not shown) included in the CPU 81. In addition, the control circuit 8 may include a clock IC (not shown) called a real-time clock IC so that the CPU 81 acquires date and time information from the clock IC. Moreover, you may acquire date information from another vehicle equipment via in-vehicle LAN27.

図13に車外報知の構成の一例を示す。図13(a)では、車両101の車外報知器29に含まれる図示しない通信ユニットあるいは携帯電話機により、基地局120を経由して第三者の携帯電話機121に報知する構成を示している。また、図13(b)では、インターネット等の公衆回線122を経由して第三者の携帯電話機123,パーソナルコンピュータ124,図示しない受信手段および報知手段を含む車両125に報知する構成を示している。この場合、報知される内容には、重要情報やドライバの体調等が含まれ、文字(電子メールを含む)あるいは音声の少なくとも一つによるメッセージが報知される。   FIG. 13 shows an example of the configuration of outside notification. FIG. 13A shows a configuration in which a third-party mobile phone 121 is notified via the base station 120 by a communication unit (not shown) or a mobile phone included in the vehicle outside indicator 29 of the vehicle 101. FIG. 13B shows a configuration in which a vehicle 125 including a third party mobile phone 123, a personal computer 124, a receiving means and a notifying means (not shown) is notified via a public line 122 such as the Internet. . In this case, the notified content includes important information, the physical condition of the driver, and the like, and a message of at least one of characters (including electronic mail) or voice is notified.

以上、本発明の実施の形態を説明したが、これらはあくまで例示にすぎず、本発明はこれらに限定されるものではなく、特許請求の範囲の趣旨を逸脱しない限りにおいて、当業者の知識に基づく種々の変更が可能である。   Although the embodiments of the present invention have been described above, these are merely examples, and the present invention is not limited to these embodiments, and the knowledge of those skilled in the art can be used without departing from the spirit of the claims. Various modifications based on this are possible.

車載用情報伝達装置の構成を示すブロック図。The block diagram which shows the structure of a vehicle-mounted information transmission apparatus. カメラおよびセンサ等の取り付け位置の例を示す図。The figure which shows the example of attachment positions, such as a camera and a sensor. 車外報知器の取り付け位置の例を示す図。The figure which shows the example of the attachment position of an alarm device outside a vehicle. 情報伝達処理を説明するブロック図。The block diagram explaining an information transmission process. 情報伝達処理を説明するフロー図。The flowchart explaining an information transmission process. 情報の重要度の分類例の一例を示す図。The figure which shows an example of the classification example of the importance of information. 重要情報表示時の表示画面の一例を示す図。The figure which shows an example of the display screen at the time of important information display. 視認行動検出の機能構成を示すブロック図。The block diagram which shows the function structure of visual recognition action detection. 注視点検出処理を説明するフロー図。The flowchart explaining a gaze point detection process. 報知手段の報知順位の一例を示す図。The figure which shows an example of the alerting | reporting order | rank of an alerting | reporting means. 報知手段および体調の記憶内容の一例を示す図。The figure which shows an example of the memory | storage content of an alerting | reporting means and a physical condition. 報知結果の記憶内容の一例を示す図。The figure which shows an example of the memory content of an alerting | reporting result. 車外報知の構成の一例を示す図。The figure which shows an example of a structure of alerting | reporting outside a vehicle.

符号の説明Explanation of symbols

1 車載用情報伝達装置
2 操作スイッチ群(操作検出手段)
3 故障検出部
4 体調検出部(体調検出手段)
8 制御回路(伝達完了判定手段,報知制御手段,重要度設定手段,重要度判定手段)
9 メモリ(記憶手段)
10 表示器(報知手段)
11 駆動回路(故障検出手段)
13 送受信機(車外報知手段)
15 スピーカ
22 タッチパネル(操作検出手段)
23 車速センサ
24 音声合成回路
25 バイブレータ
28 カメラ(操作検出手段)
29 車外報知器(車外報知手段)
31 マイク(操作検出手段,音声センサ)
32 表示器(代替報知手段)
33 タッチパネル(操作検出手段)
34 駆動回路(故障検出手段)
DESCRIPTION OF SYMBOLS 1 Vehicle-mounted information transmission apparatus 2 Operation switch group (operation detection means)
3 Failure detection unit 4 Physical condition detection unit (physical condition detection means)
8 Control circuit (transmission completion determination means, notification control means, importance level setting means, importance level determination means)
9 Memory (memory means)
10 Display (notification means)
11 Drive circuit (failure detection means)
13 Transceiver (outside vehicle notification means)
15 Speaker 22 Touch panel (operation detection means)
23 Vehicle speed sensor 24 Speech synthesis circuit 25 Vibrator 28 Camera (operation detection means)
29 Outside vehicle alarm (outside vehicle alarm means)
31 Microphone (operation detection means, voice sensor)
32 Display (alternative notification means)
33 Touch panel (operation detection means)
34 Drive circuit (failure detection means)

Claims (8)

乗員に情報を報知する報知手段と、
前記情報が前記乗員に伝えられたかどうかを判定する伝達完了判定手段と、
前記情報が前記乗員に伝えられなかったと判定された場合に、当該情報を代替報知手段により報知する報知制御手段と、
を備えることを特徴とする車載用情報伝達装置。
An informing means for informing the passenger of information;
Transmission completion determination means for determining whether the information is transmitted to the occupant;
When it is determined that the information has not been transmitted to the occupant, notification control means for notifying the information by an alternative notification means;
An in-vehicle information transmission device comprising:
前記情報の内容に応じてその情報の重要度を設定する重要度設定手段と、
前記重要度によって当該情報が重要情報であるかどうかを判定する重要度判定手段と、を備え、
前記報知制御手段は当該情報が重要情報であると判定された場合に、前記代替報知手段により当該情報を報知する請求項1に記載の車載用情報伝達装置。
Importance setting means for setting the importance of the information according to the content of the information;
An importance level determination means for determining whether the information is important information according to the importance level,
The in-vehicle information transmission device according to claim 1, wherein when the information is determined to be important information, the notification control unit notifies the information by the alternative notification unit.
前記車載用情報伝達装置に対する操作を検出する操作検出手段を備え、
前記伝達完了判定手段は所定の操作が検出された場合に前記情報が前記乗員に伝えられたと判定する請求項1または2に記載の車載用情報伝達装置。
Comprising an operation detecting means for detecting an operation on the in-vehicle information transmission device;
The in-vehicle information transmission apparatus according to claim 1, wherein the transmission completion determination unit determines that the information is transmitted to the occupant when a predetermined operation is detected.
前記報知手段の故障を検出する故障検出手段を備え、
前記報知制御手段は前記報知手段の故障が検出された場合に前記情報を前記代替報知手段により報知する請求項1ないし3のいずれか1項に記載の車載用情報伝達装置。
A failure detection means for detecting a failure of the notification means;
The in-vehicle information transmission apparatus according to any one of claims 1 to 3, wherein the notification control unit notifies the information by the alternative notification unit when a failure of the notification unit is detected.
前記情報が前記代替報知手段により前記乗員に伝えられなかったと判定された場合に、その情報を車外の第三者に対して報知する車外報知手段を備える請求項1ないし4のいずれか1項に記載の車載用情報伝達装置。   5. The vehicle according to claim 1, further comprising a vehicle outside notification unit that notifies the third party outside the vehicle of the information when the information is determined not to be transmitted to the occupant by the alternative notification unit. The vehicle-mounted information transmission device described. 前記乗員の体調を検出する体調検出手段を備え、
前記情報が前記代替報知手段により前記乗員に伝えられなかったと判定された場合に、前記体調検出手段が前記乗員の体調を検出し、さらに前記乗員の体調に異常が生じていると判断された場合には、その情報を車外の第三者に対して伝達する車外報知手段を備える請求項1ないし5のいずれか1項に記載の車載用情報伝達装置。
Comprising physical condition detecting means for detecting the physical condition of the occupant;
When it is determined that the information has not been transmitted to the occupant by the alternative notification means, the physical condition detection means detects the physical condition of the occupant, and it is further determined that an abnormality has occurred in the physical condition of the occupant The vehicle-mounted information transmission device according to any one of claims 1 to 5, further comprising vehicle outside notification means for transmitting the information to a third party outside the vehicle.
前記体調検出手段は、運転者を撮影するカメラ、運転者の皮膚温度を検出する皮膚温度センサ、運転者の皮膚電位を検出する皮膚電位センサおよび運転者の音声を検出する音声センサから選ばれた1種または2種以上の組合せからなる検出器を含む請求項6に記載の車載用情報伝達装置。   The physical condition detecting means is selected from a camera for photographing the driver, a skin temperature sensor for detecting the skin temperature of the driver, a skin potential sensor for detecting the skin potential of the driver, and a voice sensor for detecting the voice of the driver. The in-vehicle information transmission device according to claim 6, comprising a detector composed of one type or a combination of two or more types. 前記伝達完了判定手段の判定結果あるいは前記検出された乗員の体調を記憶する記憶手段を備える請求項1ないし7のいずれか1項に記載の車載用情報伝達装置。
The in-vehicle information transmission device according to any one of claims 1 to 7, further comprising a storage unit that stores a determination result of the transmission completion determination unit or a physical condition of the detected occupant.
JP2006070550A 2006-03-15 2006-03-15 Onboard information transmission device Pending JP2007249477A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006070550A JP2007249477A (en) 2006-03-15 2006-03-15 Onboard information transmission device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006070550A JP2007249477A (en) 2006-03-15 2006-03-15 Onboard information transmission device

Publications (1)

Publication Number Publication Date
JP2007249477A true JP2007249477A (en) 2007-09-27

Family

ID=38593718

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006070550A Pending JP2007249477A (en) 2006-03-15 2006-03-15 Onboard information transmission device

Country Status (1)

Country Link
JP (1) JP2007249477A (en)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009213779A (en) * 2008-03-12 2009-09-24 Denso Corp Operation input apparatus for use of car
JP2012003764A (en) * 2010-06-16 2012-01-05 Visteon Global Technologies Inc Reconfiguration of display part based on face tracking or eye tracking
US8106783B2 (en) 2008-03-12 2012-01-31 Denso Corporation Input apparatus, remote controller and operating device for vehicle
JP2012100024A (en) * 2010-11-01 2012-05-24 Denso Corp Communication device
JP2013033344A (en) * 2011-08-01 2013-02-14 Yazaki Corp Display device
JP2013089250A (en) * 2011-10-18 2013-05-13 Visteon Global Technologies Inc Vehicle system and method for assessing and communicating condition of driver
WO2016152834A1 (en) * 2015-03-23 2016-09-29 株式会社デンソー Automatic travel control device and automatic travel control system
JP2016179810A (en) * 2015-03-23 2016-10-13 株式会社デンソー Automatic travel control device and automatic travel control system
JP2017188127A (en) * 2017-05-15 2017-10-12 みこらった株式会社 Automatic driving vehicle
JPWO2017138146A1 (en) * 2016-02-12 2018-02-15 三菱電機株式会社 Information display device and information display method
JP2018156172A (en) * 2017-03-15 2018-10-04 株式会社Subaru Display system in vehicle and method for controlling display system in vehicle
US10503987B2 (en) 2014-06-23 2019-12-10 Denso Corporation Apparatus detecting driving incapability state of driver
WO2020043554A1 (en) * 2018-08-27 2020-03-05 Volkswagen Aktiengesellschaft Warning system and motor vehicle
JP6830704B1 (en) * 2020-07-09 2021-02-17 株式会社Arblet Information processing system, information processing method and program
US11147464B2 (en) 2016-10-20 2021-10-19 Panasonic Intellectual Property Management Co., Ltd. Pulse wave measuring apparatus and pulse wave measuring method
JP7533366B2 (en) 2021-06-02 2024-08-14 株式会社デンソー Notification determination device, notification determination method, and notification determination program
US12065176B2 (en) 2018-09-14 2024-08-20 Denso Corporation Autonomous vehicle emergency operating mode for communicating with surroundings and seeking emergency medical attention

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1198559A (en) * 1997-09-17 1999-04-09 Fujitsu Ten Ltd Use reporting device for telephone set
JPH11328593A (en) * 1998-05-15 1999-11-30 Yazaki Corp Method for judging health condition of vehicle driver, its device, method for managing health condition of vehicle driver and its device
JP2002092793A (en) * 2000-09-20 2002-03-29 Denso Corp Information display device for vehicle
JP2003123198A (en) * 2001-10-15 2003-04-25 Daiichi Fashion Service:Kk Method and system for preventing drowsing driving accident
JP2004314750A (en) * 2003-04-15 2004-11-11 Denso Corp Vehicle instrument operation control device
JP2005221664A (en) * 2004-02-04 2005-08-18 Calsonic Kansei Corp Multi-monitor system for vehicle

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1198559A (en) * 1997-09-17 1999-04-09 Fujitsu Ten Ltd Use reporting device for telephone set
JPH11328593A (en) * 1998-05-15 1999-11-30 Yazaki Corp Method for judging health condition of vehicle driver, its device, method for managing health condition of vehicle driver and its device
JP2002092793A (en) * 2000-09-20 2002-03-29 Denso Corp Information display device for vehicle
JP2003123198A (en) * 2001-10-15 2003-04-25 Daiichi Fashion Service:Kk Method and system for preventing drowsing driving accident
JP2004314750A (en) * 2003-04-15 2004-11-11 Denso Corp Vehicle instrument operation control device
JP2005221664A (en) * 2004-02-04 2005-08-18 Calsonic Kansei Corp Multi-monitor system for vehicle

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009213779A (en) * 2008-03-12 2009-09-24 Denso Corp Operation input apparatus for use of car
US8106783B2 (en) 2008-03-12 2012-01-31 Denso Corporation Input apparatus, remote controller and operating device for vehicle
JP2012003764A (en) * 2010-06-16 2012-01-05 Visteon Global Technologies Inc Reconfiguration of display part based on face tracking or eye tracking
JP2012100024A (en) * 2010-11-01 2012-05-24 Denso Corp Communication device
JP2013033344A (en) * 2011-08-01 2013-02-14 Yazaki Corp Display device
JP2013089250A (en) * 2011-10-18 2013-05-13 Visteon Global Technologies Inc Vehicle system and method for assessing and communicating condition of driver
US10909399B2 (en) 2014-06-23 2021-02-02 Denso Corporation Apparatus detecting driving incapability state of driver
US10503987B2 (en) 2014-06-23 2019-12-10 Denso Corporation Apparatus detecting driving incapability state of driver
WO2016152834A1 (en) * 2015-03-23 2016-09-29 株式会社デンソー Automatic travel control device and automatic travel control system
JP2016179810A (en) * 2015-03-23 2016-10-13 株式会社デンソー Automatic travel control device and automatic travel control system
US10591930B2 (en) 2015-03-23 2020-03-17 Denso Corporation Automatic traveling control apparatus and automatic traveling control system
JPWO2017138146A1 (en) * 2016-02-12 2018-02-15 三菱電機株式会社 Information display device and information display method
US11147464B2 (en) 2016-10-20 2021-10-19 Panasonic Intellectual Property Management Co., Ltd. Pulse wave measuring apparatus and pulse wave measuring method
JP2018156172A (en) * 2017-03-15 2018-10-04 株式会社Subaru Display system in vehicle and method for controlling display system in vehicle
JP2017188127A (en) * 2017-05-15 2017-10-12 みこらった株式会社 Automatic driving vehicle
WO2020043554A1 (en) * 2018-08-27 2020-03-05 Volkswagen Aktiengesellschaft Warning system and motor vehicle
US12065176B2 (en) 2018-09-14 2024-08-20 Denso Corporation Autonomous vehicle emergency operating mode for communicating with surroundings and seeking emergency medical attention
JP6830704B1 (en) * 2020-07-09 2021-02-17 株式会社Arblet Information processing system, information processing method and program
WO2022009819A1 (en) * 2020-07-09 2022-01-13 株式会社Arblet Information processing system, information processing method, and program
JP2022015768A (en) * 2020-07-09 2022-01-21 株式会社Arblet Information processing system, information processing method and program
JP7533366B2 (en) 2021-06-02 2024-08-14 株式会社デンソー Notification determination device, notification determination method, and notification determination program

Similar Documents

Publication Publication Date Title
JP2007249477A (en) Onboard information transmission device
US12033446B2 (en) Safety for vehicle users
US20190071012A1 (en) Portable electronic device and operating method therefor
US9977593B2 (en) Gesture recognition for on-board display
US9881605B2 (en) In-vehicle control apparatus and in-vehicle control method
JP2022519895A (en) Systems and methods that correlate user attention and appearance
US10666901B1 (en) System for soothing an occupant in a vehicle
JP2016110449A (en) Driving support system and driving support method
CN110027567A (en) The driving condition of driver determines method, apparatus and storage medium
CN105523041B (en) Lane-departure warning system and method for controlling the system
JP2007082594A (en) Fatigue detection device
US20180201276A1 (en) Driver condition detection system
KR20210113070A (en) Attention-based notifications
JP2017177883A (en) On-vehicle notification device
JP7011783B2 (en) Display device for vehicles
US11595878B2 (en) Systems, devices, and methods for controlling operation of wearable displays during vehicle operation
CN110737330A (en) Method and device for reminding abnormal travel and storage medium
US10207584B2 (en) Information providing apparatus for vehicle
JPH07117593A (en) Alarm device for vehicle
CN108639056B (en) Driving state detection method and device and mobile terminal
CN111045512B (en) Vehicle, method of outputting information of vehicle, and computer-readable recording medium
CN105774814B (en) vehicle ACC/LDW system display method
US20210291840A1 (en) Recommendation presenting system, recommendation presenting method, and recommendation presentation program
JP2018185688A (en) Apparatus and program
JP2023009149A (en) Gesture detection device, gesture detection method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080714

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100812

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100823

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110105