DE102012003917A1

DE102012003917A1 - Passenger compartment monitoring system installed on motor car, has image processing apparatus to transmit information signal to vehicle control system for detecting signal from light and/or bright spot originates in captured image

Info

Publication number: DE102012003917A1
Application number: DE201210003917
Authority: DE
Inventors: Aiko Böhme; Heiko Bald
Original assignee: GM Global Technology Operations LLC
Current assignee: GM Global Technology Operations LLC
Priority date: 2012-02-28
Filing date: 2012-02-28
Publication date: 2013-08-29

Abstract

The monitoring system (4) has a camera (8) for detecting a portion of a rider head (12) of a passenger or driver. An image processing apparatus (18) is provided to process images recorded by the camera. The image processing apparatus is connected to a data conveying vehicle control system (20). The image processing apparatus is provided for transmitting an information signal to the vehicle control system for detecting one signal from a light and/or bright spot (16) originates in captured image. An independent claim is included for method for monitoring passenger compartment of motor vehicle.

Description

Die Erfindung betrifft ein Fahrgastraumüberwachungssystem mit wenigstens einer Kamera, die wenigstens einen Bereich eines Kopfes eines Fahrgastes erfasst, und einer Bildverarbeitungsvorrichtung zur Verarbeitung der von der Kamera aufgenommenen Bilder. Die Bildverarbeitungsvorrichtung ist datenübermittelnd mit einer Fahrzeugsteuerung verbunden.The invention relates to a passenger compartment monitoring system comprising at least one camera that detects at least a portion of a passenger's head and an image processing device for processing the images taken by the camera. The image processing device is data-communicatively connected to a vehicle controller.

Fahrgastraumüberwachungssysteme der eingangs genannten Art sind im Stand der Technik bekannt. Unter anderem sind Systeme zur Überwachung der Müdigkeit eines Fahrers bekannt, die bei Erkennen bestimmter Aktivitäten oder unterbleibender Aktivitäten des Fahrers, beispielsweise verlangsamtem Augenaufschlag oder Abdriften des Blicks von der Fahrbahn oder Geschwindigkeit der Pupillenbewegung, ein entsprechendes Warnsignal generieren, um den Fahrer vor seinem Einschlafen zu warnen. Die dazu verwendeten Kameras sind auf den Kopfbereich des Fahrers ausgerichtet und sind meist als Infrarotkameras ausgestaltet, um auch bei Dunkelheit zu funktionieren.Passenger compartment monitoring systems of the type mentioned above are known in the art. *** "" Among other things, driver fatigue monitoring systems are known which generate a corresponding warning signal upon detection of certain activities or non-existent driver activities, such as slowed eye strain or drift of the road or speed of pupil movement, to the driver before falling asleep to warn. The cameras used for this purpose are aimed at the driver's head area and are usually designed as infrared cameras in order to function even in the dark.

Wird in Kraftfahrzeugen geraucht, steigt die Rauch- und Schadstoffkonzentration im Kraftfahrzeug aufgrund des kleinen Volumens der Fahrgastzelle schnell an, Dies ist einerseits unangenehm für die nicht rauchenden Fahrgäste, andererseits werden in Fachkreisen gesundheitsschädliche Aspekte der hohen Rauchkonzentration diskutiert. Daher wäre es wünschenswert, fahrzeugseitig zur Klimaverbesserung beitragen zu können, wenn im Fahrzeug geraucht wird.When smoked in motor vehicles, the smoke and pollutant concentration in the motor vehicle rises rapidly due to the small volume of the passenger compartment. This is on the one hand uncomfortable for the non-smoking passengers, on the other hand, health-hazardous aspects of high smoke concentration are discussed in professional circles. Therefore, it would be desirable to be able to contribute to climate improvement on the vehicle side when smoking in the vehicle.

In der DE 10 2007 052 355 A1 ist offenbart, dass in einem Fahrzeug Rauchsensoren zur Detektion von Zigarettenrauch vorgesehen sein können.In the DE 10 2007 052 355 A1 discloses that in a vehicle smoke sensors may be provided for the detection of cigarette smoke.

Aufgabe der Erfindung ist es somit, ein System der eingangs genannten Art dahingehend weiterzubilden, dass es geeignet ist, im Falle des Erkennens von Rauchen im Fahrzeug entsprechende Maßnahmen, die der Luftverbesserung dienen, einzuleiten.The object of the invention is therefore to develop a system of the type mentioned in that it is suitable, in the case of detecting smoking in the vehicle appropriate measures that serve to improve the air to initiate.

Die Aufgabe wird gelöst durch ein Fahrgastraumüberwachungssystem gemäß Anspruch 1 sowie durch ein Verfahren zur Überwachung eines Fahrgastraums gemäß dem nebengeordneten Anspruch 7. Weitere Ausgestaltungen der Erfindung sind Gegenstand der Unteransprüche.The object is achieved by a passenger compartment monitoring system according to claim 1 and by a method for monitoring a passenger compartment according to the independent claim 7. Further embodiments of the invention are subject of the dependent claims.

Ein erfindungsgemäßes Fahrgastraumüberwachungssystem weist wenigstens eine Kamera auf, die wenigstens einen Bereich eines Kopfes eines Fahrgastes erfasst. Die Kamera kann beispielsweise im Bereich einer A-Säule oder B-Säule oder im Bereich eines Dachhimmels oder eines Mitteltunnels des Kraftfahrzeugs angeordnet sein.A passenger compartment monitoring system according to the invention has at least one camera which detects at least a portion of a passenger's head. The camera can be arranged, for example, in the region of an A pillar or B pillar or in the region of a headliner or a center tunnel of the motor vehicle.

Die Kamera ist mit einer Bildverarbeitungsvorrichtung verbunden, weiche die von der Kamera aufgenommenen Bilder auswertet. Die Bildverarbeitungsvorrichtung kann in die Kamera integriert sein oder kann an anderen Stellen im Kraftfahrzeug angeordnet sein, beispielsweise in einem Kommunikationsmodul oder in einer Kraftfahrzeugsteuerung. Die Bildverarbeitungsvorrichtung ist dazu ausgebildet, die von der Kamera aufgenommenen Bilder auf verschiedene Merkmale hin auszuwerten.The camera is connected to an image processing device that evaluates the images taken by the camera. The image processing device can be integrated in the camera or can be arranged at other locations in the motor vehicle, for example in a communication module or in a motor vehicle control. The image processing device is designed to evaluate the images taken by the camera for various characteristics.

Die Bildverarbeitungsvorrichtung ist datenübermittelnd mit einer Fahrzeugsteuerung verbunden, um die Ergebnisse der Bildverarbeitung an die Fahrzeugsteuerung zu übermitteln. Fahrzeugsteuerung in diesem Zusammenhang kann sich auch auf einzelne Module der Fahrzeugsteuerung beziehen, wie später im Detail erläutert werden wird. Zur Datenübermittlung kann eine drahtgebundene oder drahtlose Übermittlung vorgesehen sein. Die Bildverarbeitungsvorrichtung kann auch in der Fahrzeugsteuerung integriert sein, beispielsweise, wenn eine zentrale Fahrzeugsteuerung vorgesehen ist, die mehrere Aspekte der Fahrzeugsteuerung, beispielsweise Klimatisierung, Kommunikation und Audio etc. miteinander verbindet.The image processing apparatus is communicatively connected to a vehicle controller to transmit the results of the image processing to the vehicle controller. Vehicle control in this context may also refer to individual modules of the vehicle control, as will be explained in detail later. For data transmission, a wired or wireless transmission can be provided. The image processing device may also be integrated in the vehicle controller, for example, if a central vehicle controller is provided, which connects several aspects of vehicle control, such as air conditioning, communication and audio etc. together.

Erfindungsgemäß ist vorgesehen, dass die Bildverarbeitungsvorrichtung zur Weitergabe eines Informationssignals an die Fahrzeugsteuerung ausgebildet ist, wenn die Bildverarbeitungsvorrichtung wenigstens ein Signal detektiert, das von einem hellen und/oder heißen Punkt in einem aufgenommenen Bild herrührt.According to the invention, it is provided that the image processing device is designed to pass on an information signal to the vehicle controller when the image processing device detects at least one signal that originates from a bright and / or hot spot in a recorded image.

Im Rahmen der vorliegenden Erfindung ist im Sinne eines Punktes ein Bereich zu verstehen, der der Abbildung einer realen Größe eines Bereichs einer Zigarettenspitze oder größer in der Kamera entspricht. Dieser ist in der Regel wesentlich kleiner als der Bildbereich der Kamera, sodass die Abbildung des hellen oder heißen Bereichs nur einen kleinen Teil des Bildes ausmachen wird.In the context of the present invention, in terms of a point, an area is to be understood which corresponds to the imaging of a real size of a region of a cigarette holder or larger in the camera. This is usually much smaller than the image area of the camera, so the image of the bright or hot area will only make up a small part of the image.

Wenn also die Kamera im Kopfbereich eines Fahrgastes einen hellen und/oder heißen Punkt detektiert, so wird es mit dem erfindungsgemäßen Fahrgastraumüberwachungssystem erkannt und ein entsprechendes Signal kann an die Fahrzeugsteuerung weitergegeben werden. Ein solcher heller oder heißer Punkt resultiert beispielsweise aus dem Anzünden einer Zigarette oder aus der Glut an der Zigarettenspitze. Entsprechendes gilt für andere Rauchwaren, beispielsweise Zigarren oder Pfeifen. Nach Erkennen eines derartigen hellen und/oder heißen Punktes kann der Fahrzeugsteuerung mit Hilfe des erfindungsgemäßen Fahrgastraumüberwachungssystems übermittelt werden, dass im Kraftfahrzeug geraucht wird. Die Fahrzeugsteuerung kann daraufhin entsprechende Maßnahmen einleiten, die in diesem Zusammenhang sinnvoll sind.Thus, if the camera detects a bright and / or hot spot in the head area of a passenger, it is detected with the passenger compartment monitoring system according to the invention and a corresponding signal can be passed on to the vehicle controller. Such a bright or hot spot results, for example, from the lighting of a cigarette or from the glow on the cigarette holder. The same applies to other tobacco products, such as cigars or pipes. After recognizing such a bright and / or hot spot, the vehicle control with the aid of the invention Passenger compartment monitoring system are transmitted that is smoked in the vehicle. The vehicle control can then take appropriate action that makes sense in this context.

Gemäß einer ersten möglichen Ausgestaltung der Erfindung kann vorgesehen sein, dass die Kamera auf einen Bereich des Kopfes eines Fahrers ausgerichtet ist. Dies ist der am häufigsten belegte Platz eines Kraftfahrzeugs. Somit kann die Effizienz des erfindungsgemäßen Fahrgastraumüberwachungssystems gesteigert werden. Es ist auch möglich, im Rahmen der Erfindung, dass die Kamera mehr als nur den Kopfbereich eines Fahrgastes oder Fahrers erfasst. Des Weiteren ist es möglich, dass mehrere Kameras verbaut sind, um den Kopfbereich mehrerer Personen im Fahrgastraum zu erfassen.According to a first possible embodiment of the invention can be provided that the camera is aligned with an area of the head of a driver. This is the most frequently occupied place of a motor vehicle. Thus, the efficiency of the passenger compartment monitoring system according to the invention can be increased. It is also possible within the scope of the invention for the camera to detect more than just the head area of a passenger or driver. Furthermore, it is possible that several cameras are installed to capture the head of several people in the passenger compartment.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung kann vorgesehen sein, dass die Kamera zur Aufnahme eines Wellenlängenbereichs von 700 nm bis 1800 nm oder von 8000 nm bis 14000 nm ausgebildet ist. Der Bereich von 700 nm bis 1800 nm ist der sogenannte nahe Infrarotbereich, welcher auch für Nachtsichtkameras verwendet wird. Der Bereich von 8000 nm bis 14000 nm ist der sogenannte mittlere Infrarotbereich, in welchem optische Temperaturmessungen möglich sind. Mit Hilfe des ersten Empfindlichkeitsbereichs der Kamera kann beispielsweise das Aufglühen einer Zigarette beim Ziehen erkannt werden. Mit Hilfe des letzteren Empfindlichkeitsbereichs kann die hohe Temperatur an der Zigarettenspitze oder Anzündflamme registriert werden.According to another possible embodiment of the invention, it can be provided that the camera is designed to receive a wavelength range from 700 nm to 1800 nm or from 8000 nm to 14000 nm. The range of 700 nm to 1800 nm is the so-called near infrared range, which is also used for night vision cameras. The range from 8000 nm to 14000 nm is the so-called middle infrared range, in which optical temperature measurements are possible. With the help of the first sensitivity range of the camera, for example, the glow of a cigarette can be detected while pulling. With the aid of the latter sensitivity range, the high temperature at the cigarette tip or ignition flame can be registered.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung kann vorgesehen sein, dass die Bildverarbeitungsvorrichtung zur Erkennung des Wachheitszustandes des Fahrers ausgebildet ist. In diesem Falle lässt sich eine Reduzierung der notwendigen Komponenten zur Implementierung der verschiedenen gewünschten Funktionen erreichen, wenn sowohl eine Müdigkeitswarnfunktion als auch die erfindungsgemäße Fahrgastraumüberwachungssystem zur Erkennung von rauchenden Fahrgästen implementiert werden sollen. Auf diese Weise lassen sich die Mehrkosten zur Bereitstellung beider Funktionen gering halten.According to another possible embodiment of the invention can be provided that the image processing device is designed to detect the awakening state of the driver. In this case, a reduction of the necessary components to implement the various desired functions can be achieved if both a fatigue warning function and the passenger compartment monitoring system according to the invention for detecting smoking passengers are to be implemented. In this way, the additional costs for providing both functions can be kept low.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung kann vorgesehen sein, dass die Bildverarbeitungsvorrichtung an ein Bussystem des Kraftfahrzeugs angeschlossen ist. Bussysteme sind in den Kraftfahrzeugen im Allgemeinen bekannt, sodass sich das erfindungsgemäße Fahrgastraumüberwachungssystem in den Fahrzeugdatenaustausch und die Fahrzeugsteuerung integrieren lässt. Ein entsprechender Anschluss an ein Bussystem erhöht die Modularität eines entsprechenden Fahrgastraumüberwachungssystems und damit die Anzahl der unterschiedlichen Module, die für eine Fahrzeugserie mit unterschiedlichen Ausstattungsvarianten eines Herstellers benötigt werden.According to another possible embodiment of the invention can be provided that the image processing apparatus is connected to a bus system of the motor vehicle. Bus systems are generally known in motor vehicles, so that the passenger compartment monitoring system according to the invention can be integrated into the vehicle data exchange and the vehicle control system. An appropriate connection to a bus system increases the modularity of a corresponding passenger compartment monitoring system and thus the number of different modules that are required for a vehicle series with different equipment variants of a manufacturer.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung kann vorgesehen sein, dass das Fahrgastraumüberwachungssystem mit einer Klimatisierungsanlage des Kraftfahrzeuges gekoppelt ist. Eine solche Kopplung kann beispielsweise über die Fahrzeugsteuerung vorgesehen sein oder über das zuvor beschriebene Bussystem. Auch eine direkte Kopplung mit einer Klimatisierungsanlage des Kraftfahrzeugs ist im Rahmen der Erfindung denkbar. Mit Hilfe dieser Ausgestaltung kann bei Übermittlung des erfindungsgemäßen Informationssignals bei Erkennen einer angezündeten Zigarette oder dergleichen die Fahrzeugklimatisierung angepasst werden. So kann zum Beispiel von Umluft auf Frischluft umgestellt werden, damit nicht der Zigarettenrauch im Fahrgastraum umgewälzt wird, sondern nach draußen befördert und durch frische Luft ersetzt wird. Des Weiteren kann die Gebläsestufe erhöht werden, um den Luftdurchsatz anzupassen. Auch ist das Aktivieren bestimmter Filter oder die Umlenkung der Luftzufuhr im Rahmen der Erfindung denkbar, beispielsweise um mehr Frischluft aus oberen Düsen des Kraftfahrzeugs zu befördern. Es ist auch denkbar, beispielsweise Fenster oder Schiebedächer/Sonnendächer zu öffnen. Auch kann im Falle eines erhöhten Luftdurchsatzes die Lufttemperatur angepasst werden, um Komforteinschränkungen, beispielsweise Wahrnehmen eines Luftzuges, zu reduzieren.According to another possible embodiment of the invention can be provided that the passenger compartment monitoring system is coupled to an air conditioning system of the motor vehicle. Such a coupling can be provided for example via the vehicle control or via the previously described bus system. A direct coupling with an air conditioning system of the motor vehicle is conceivable within the scope of the invention. With the aid of this embodiment, when the information signal according to the invention is transmitted upon detection of a lit cigarette or the like, the vehicle air conditioning system can be adapted. For example, it is possible to switch from circulating air to fresh air, so that the cigarette smoke is not circulated in the passenger compartment, but is transported outside and replaced by fresh air. Furthermore, the blower level can be increased to adjust the air flow rate. The activation of certain filters or the deflection of the air supply in the invention is conceivable, for example, to promote more fresh air from the upper nozzle of the motor vehicle. It is also conceivable, for example, to open windows or sunroofs / sunroofs. Also, in the case of increased airflow, the air temperature may be adjusted to reduce comfort constraints, such as sensing a draft.

Ein erster unabhängiger Gegenstand der Erfindung betrifft ein Verfahren zur Überwachung eines Fahrgastraums eines Kraftfahrzeugs mittels einer wenigstens einen Bereich eines Kopfes eines Fahrgastes und/oder Fahrers erfassenden Kamera. Bei dem erfindungsgemäßen Verfahren werden die Aufnahmen der Kamera mittels einer Bildverarbeitungsvorrichtung ausgewertet. Sofern die Bildverarbeitungsvorrichtung einen hellen und/oder heißen Punkt in dem erfassten Kamerabild erkennt, wird ein Informationssignal an eine Fahrzeugsteuerung ausgegeben. Mit Hilfe des erfindungsgemäßen Verfahrens kann also die Fahrzeugsteuerung darüber informiert werden, dass im Fahrzeug geraucht wird und die Fahrzeugsteuerung kann entsprechende Maßnahmen einleiten.A first independent subject matter of the invention relates to a method for monitoring a passenger compartment of a motor vehicle by means of a camera which detects at least one area of a head of a passenger and / or driver. In the method according to the invention, the images of the camera are evaluated by means of an image processing device. If the image processing device detects a bright and / or hot spot in the captured camera image, an information signal is output to a vehicle controller. With the aid of the method according to the invention, therefore, the vehicle control system can be informed that smoking is taking place in the vehicle and the vehicle control system can initiate appropriate measures.

Das erfindungsgemäße Verfahren kann insbesondere mit einem Fahrgastraumüberwachungssystem nach dem zuvor beschriebenen Erfindungsgedanken implementiert werden.In particular, the method according to the invention can be implemented with a passenger compartment monitoring system according to the idea of the invention described above.

Eine erste mögliche weitere Ausgestaltung des erfindungsgemäßen Verfahrens sieht vor, dass im Falle des Detektierens wenigstens eines hellen und/oder heißen Punktes die Einstellungen einer Klimatisierungsanlage des Kraftfahrzeugs geprüft und bei Abweichen von einer vorgegebenen Einstellung verändert werden. Dies kann beispielsweise das Umstellen von Umluft auf Frischluftzufuhr umfassen, um den sich im Fahrgastraum verteilenden Rauch abzusaugen und durch frische Luft zu ersetzen. Des Weiteren kann die Gebläsestufe der Fahrzeugbelüftung ggf. erhöht werden, um einen höheren Luftdurchsatz zu erreichen. Des Weiteren kann die Luftverteilung innerhalb des Fahrgastraums verändert werden, beispielsweise durch Erhöhung des Luftdurchsatzes in den oberen Düsen und Verringerung in den unteren Düsen.A first possible further embodiment of the method according to the invention provides that, in the case of detecting at least one bright and / or hot spot, the settings of an air conditioning system of the motor vehicle are checked and be changed when deviating from a given setting. This may include, for example, switching from circulating air to fresh air supply in order to extract the smoke which distributes in the passenger compartment and to replace it with fresh air. In addition, the fan level of the vehicle ventilation may be increased to achieve a higher air flow rate. Furthermore, the air distribution within the passenger compartment can be changed, for example by increasing the air flow rate in the upper nozzles and reducing in the lower nozzles.

Gemäß einer weiteren möglichen Ausgestaltung des erfindungsgemäßen Verfahrens kann vorgesehen sein, dass im Falle eines Detektierens wenigstens eines hellen und/oder heißen Punktes die Einstellungen einer Innenraumbeleuchtung geprüft und bei Abweichung von einer vorgegebenen Einstellung verändert werden. Damit kann beispielsweise eine Beleuchtung eines Aschenbechers aktiviert werden, sodass der Raucher, ohne abgelenkt zu werden, den Aschenbecher leicht findet.According to a further possible embodiment of the method according to the invention, it can be provided that, in the case of detecting at least one bright and / or hot spot, the settings of an interior lighting are checked and changed in the case of deviation from a predetermined setting. Thus, for example, an illumination of an ashtray can be activated, so that the smoker, without being distracted, finds the ashtray easy.

Gemäß einer weiteren Ausgestaltung des erfindungsgemäßen Verfahrens kann vorgesehen sein, dass im Falle des Detektierens wenigstens eines hellen und/oder heißen Punktes die Einstellungen von Fenstern und/oder Sonnendächern geprüft und bei Abweichen von einer vorgegebenen Einstellung verändert werden. So kann ein Sonnen- oder Schiebedach angestellt werden, um eine Abluft über das Sonnen- oder Schiebedach zu erreichen. Des Weiteren können Fenster ggf. leicht geöffnet werden, um auch über die Fenster einen Rauchabzug zu ermöglichen.According to a further embodiment of the method according to the invention, it can be provided that, in the case of detecting at least one light and / or hot spot, the settings of windows and / or sunroofs are checked and changed on deviation from a predetermined setting. Thus, a sun or sunroof can be turned on to achieve an exhaust air through the sun or sunroof. Furthermore, windows can be easily opened, if necessary, to enable smoke extraction through the windows.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung kann vorgesehen sein, dass die Veränderung der Einstellung von Fenstern und/oder Sonnen- oder Schiebedach bei Betätigen eines Scheibenwischers und/oder einer Scheibenwischanlage unterlassen oder rückgängig gemacht wird, um die Fahrgäste vor eindringender Feuchtigkeit zu schlitzen.According to another possible embodiment of the invention can be provided that the change in the setting of windows and / or sun or sunroof on actuation of a windscreen wiper and / or a windshield wiper system omitted or reversed to slit the passengers from the ingress of moisture.

Gemäß einer weiteren möglichen Ausgestaltung des erfindungsgemäßen Verfahrens kann vorgesehen sein, dass im Falle eines Detektierens wenigstens eines hellen und/oder heißen Punktes die Einstellungen einer Lenkung geprüft und bei Abweichung von einer vorgegebenen Einstellung verändert werden. So kann im Falle einer aktiven Lenkung die Lenkübersetzung angepasst werden, beispielsweise von direkt auf weniger direkt, um den Einfluss von plötzlichen Lenkbewegungen, welche beim Rauchen vermehrt auftreten können, reduziert werden.According to a further possible embodiment of the method according to the invention, it can be provided that, in the case of detecting at least one light and / or hot spot, the settings of a steering are checked and changed in the event of deviation from a predetermined setting. Thus, in the case of an active steering, the steering ratio can be adjusted, for example, from directly to less directly, in order to reduce the influence of sudden steering movements, which can occur more frequently during smoking.

Gemäß einer weiteren möglichen Ausgestaltung der Erfindung kann vorgesehen sein, dass im Falle eines Detektierens wenigstens einen hellen und/oder heißen Punktes die Einstellungen eines Fahrzeugbetriebs geprüft und bei Abweichen von deiner vorgegebenen Einstellung verändert werden. So können beispielsweise bei automatischen Getrieben oder bei Doppelkupplungsschaltgetrieben, die einen manuellen Modus aufweisen, von diesem manuellen Modus auf Automatikmodus umgestellt werden, damit der Fahrer, der eine Zigarette in der Hand hält, nicht schalten muss oder dies nicht vergisst.According to another possible embodiment of the invention can be provided that in the case of detecting at least one bright and / or hot spot checks the settings of a vehicle operation and changed in deviation from your default setting. For example, in automatic transmissions or dual-clutch transmissions having a manual mode, it is possible to switch from this manual mode to automatic mode so that the driver holding a cigarette does not have to switch or forget it.

Gemäß einer weiteren möglichen Ausgestaltung des erfindungsgemäßen Verfahrens kann vorgesehen sein, dass im Falle eines Detektierens wenigstens eines hellen und/oder heißen Punktes die Einstellungen von Fahrdynamiksystemen geprüft und bei Abweichen von einer vorgegebenen Einstellung verändert werden. Wenn das Fahrzeug beispielsweise vorher in einem Sportmodus betrieben wurde, kann während des Rauchens einer Zigarette auf einen Komfortmodus umgestellt werden, um die Empfindlichkeit des Kraftfahrzeugs auf Veränderungen der Gaspedalstellung und dergleichen zu reduzieren.According to a further possible embodiment of the method according to the invention, it can be provided that, in the case of detecting at least one light and / or hot spot, the settings of driving dynamics systems are checked and changed in deviation from a predetermined setting. For example, if the vehicle was previously operated in a sports mode, a cigarette may be switched to a comfort mode while smoking a cigarette to reduce the sensitivity of the automobile to changes in accelerator pedal position and the like.

Eine weitere mögliche Ausgestaltung der Erfindung sieht vor, dass im Falle eines anschließenden Nichtdetektierens wenigstens eines hellen und/oder heißen Punktes die Einstellungen auf die vor dem Detektieren des hellen Punktes vorherrschenden Einstellungen zurückgestellt werden. Diese Ausgestaltung der Erfindung kann mit bestimmten Zeitvorgaben versehen sein. So ist es normal, dass der Raucher die Asche in einem Aschenbecher abklopft, sodass in diesem Zeitraum nicht mehr im Erfassungsbereich der Kamera ist. Wenn die Zigarette jedoch zu lange nicht mehr in dem Erfassungsbereich war, beispielsweise mehr als eine Minute, kann das System erkennen, dass die Zigaretten vermutlich fertig geraucht ist und kann wieder auf die ursprünglichen Einstellungen zurückstellen.A further possible embodiment of the invention provides that in the case of a subsequent non-detection of at least one bright and / or hot spot, the settings are reset to the settings prevailing before the bright spot is detected. This embodiment of the invention may be provided with specific time specifications. So it is normal for the smoker to knock off the ashes in an ashtray so that the camera is no longer within the detection range during this period. However, if the cigarette has not been in the detection area for too long, for example, more than a minute, the system may detect that the cigarettes have probably finished smoking and may return to the original settings.

Auch der Zeitpunkt des Zurückstellens muss nicht mit dem Zeitpunkt des Erkennens des Beendigens des Rauchens übereinstimmen. So kann die Fahrzeugklimatisierung noch einen bestimmten Zeitraum darauf eingestellt sein, mehr Frischluft in den Fahrzeugraum zu befördern und verbrauchte Luft abzusaugen, um die Rauchreste abzusaugen.Also, the time of reset does not have to coincide with the time of recognizing the cessation of smoking. Thus, the vehicle air conditioning can be set for a certain period of time to convey more fresh air into the vehicle compartment and to suck used air to suck the smoke residues.

Die Erfindung wird anhand eines Ausführungsbeispiels erläutert. Dabei zeigen schematisch:The invention will be explained with reference to an embodiment. Here are shown schematically:

1 eine Draufsicht auf ein Kraftfahrzeug mit einem erfindungsgemäßen Fahrgastraumüberwachungssystems sowie 1 a plan view of a motor vehicle with a passenger compartment monitoring system according to the invention and

2 ein Prinzipschaltbild eines erfindungsgemäßen Fahrgastraumüberwachungssystems. 2 a schematic diagram of a passenger compartment monitoring system according to the invention.

1 zeigt schematisch eine Draufsicht auf ein Kraftfahrzeug 2, das mit einem erfindungsgemäßen Fahrgastraumüberwachungssystem 4 ausgestattet ist. Die Bestandteile des Fahrgastraumüberwachungssystems 4 sind gestrichelt umrahmt. 1 schematically shows a plan view of a motor vehicle 2 that with a Passenger compartment monitoring system according to the invention 4 Is provided. The components of the passenger compartment monitoring system 4 are framed by dashed lines.

Innerhalb eines Fahrgastraums 6 des Kraftfahrzeugs 2 ist eine Kamera 8 im Bereich einer A-Säule 10 angeordnet, die einen Bereich eines Fahrerkopfes 12 erfasst. Der Fahrer hat eine Zigarette 14 im Mund, welche an ihrer vorderen Spitze einen hellen Punkt 16 hat. Die Kamera 8 nimmt ein Bild des Fahrerkopfes 12 auf und erfasst somit im Bildbereich den hellen Punkt 16 der Zigarette 14, der vom Anzünden oder von der Glut der Zigarette 14 stammt.Inside a passenger compartment 6 of the motor vehicle 2 is a camera 8th in the area of an A-pillar 10 arranged, which is an area of a driver's head 12 detected. The driver has a cigarette 14 in the mouth, which at its front tip a bright point 16 Has. The camera 8th takes a picture of the driver's head 12 and thus captures the bright spot in the image area 16 the cigarette 14 by the kindling or by the glow of the cigarette 14 comes.

Die Kamera 8 ist als Infrarotkamera ausgebildet, wobei die Kamera 8 entweder das nahe Infrarot im Bereich von ca. 700 nm bis 18000 nm oder den Bereich des mittleren Infrarots von 8000 nm bis 14000 nm oder beide Bereiche aufnimmt. Der erstgenannte Bereich wird häufig bei Nachtsichtkameras verwendet, der letztgenannte Bereich zur Temperaturmessung. Die Kamera 8 des erfindungsgemäßen Fahrgastraumüberwachungssystems 4 erfasst somit einen hellen und/oder einen heißen Punkt im Bild.The camera 8th is designed as an infrared camera, with the camera 8th either the near infrared in the range of about 700 nm to 18000 nm or the mid-infrared range of 8000 nm to 14000 nm or both ranges. The former area is often used in night vision cameras, the latter area for temperature measurement. The camera 8th of the passenger compartment monitoring system according to the invention 4 thus captures a bright and / or a hot spot in the image.

Die Kamera 8 ist mit einer Bildverarbeitungsvorrichtung 18 verbunden, welche die Auswertung des Kamerabildes der Kamera 8 übernimmt. Die Bildverarbeitungsvorrichtung 18 ist dazu ausgebildet, die von der Kamera 8 aufgenommen Bilder auszuwerten. Je nach Ausgestaltung der Erfindung kann die Bildverarbeitungsvorrichtung 18 dazu ausgebildet sein, bei Anzeichen von Müdigkeit des Fahrers am Fahrerkopf 12 bzw. seinen Wachheitszustand zu erkennen, beispielsweise durch Erkennen der Geschwindigkeit des Augenaufschlags oder durch Erkennen der Blickrichtung des Fahrers und ggf. Abdriften des Fahrerblicks oder ggf. der Geschwindigkeit der Pupillenbewegung des Fahrers. Des Weiteren, abhängig vom verwendeten Prinzip der Kamera 8 kann die Bildverarbeitungsvorrichtung 18 helle und/oder heiße Punkte im aufgenommenen Bild detektieren und als Zigarette, Zigarre, Pfeife oder dergleichen erkennen. Hierzu kann die Bildverarbeitungsvorrichtung 18 ggf. die Position des hellten Punktes 16 mit der Position des Fahrerkopfes 12 korrelieren und einen bestimmten Teilbereich des Bildes definieren, innerhalb welchem sich der helle und/oder heiße Punkt 16 befinden muss.The camera 8th is with an image processing device 18 connected, which is the evaluation of the camera image of the camera 8th takes over. The image processing device 18 is trained by the camera 8th to take pictures taken. Depending on the embodiment of the invention, the image processing device 18 be trained to show signs of fatigue of the driver on the driver's head 12 or to recognize its wakefulness, for example, by detecting the speed of the eye-opening or by recognizing the line of sight of the driver and possibly drifting away of the driver's view or possibly the speed of the pupil movement of the driver. Furthermore, depending on the used principle of the camera 8th can the image processing device 18 detect bright and / or hot spots in the captured image and recognize it as a cigarette, cigar, whistle or the like. For this purpose, the image processing device 18 if necessary, the position of the brighter point 16 with the position of the driver's head 12 correlate and define a particular portion of the image, within which the bright and / or hot spot 16 must be located.

Die Bildverarbeitungsvorrichtung 18 ist datenübermittelnd mit einer Fahrzeugsteuerung 20 verbunden. Hierzu ist das Bildverarbeitungssystem 18 an ein Bussystem 22 des Kraftfahrzeugs 2 angeschlossen. Die Fahrzeugsteuerung 20 ist dazu ausgebildet, eine Klimatisierungsanlage 24 zu steuern, welche Temperatur, Frischluftzufuhr, Luftverteilung und dergleichen des Kraftfahrzeugs 2 steuert. Sofern von dem Fahrgastraumüberwachungssystem 4 erkannt wird, dass eine Zigarette 14 geraucht wird, kann also die Klimatisierungsanlage bedarfsweise auf Frischluftzufuhr und veränderte Luftverteilung im Innenraum 6 eingestellt werden. Die Fahrzeugsteuerung 20 kann des Weiteren eine Innenraumbeleuchtung 26, beispielsweise eine Aschenbecherbeleuchtung anpassen.The image processing device 18 is data transmitting with a vehicle control 20 connected. This is the image processing system 18 to a bus system 22 of the motor vehicle 2 connected. The vehicle control 20 is designed to be an air conditioning system 24 to control what temperature, fresh air supply, air distribution and the like of the motor vehicle 2 controls. Unless of the passenger compartment monitoring system 4 it is recognized that a cigarette 14 is smoked, so the air conditioning system, if necessary, on fresh air and changed air distribution in the interior 6 be set. The vehicle control 20 Furthermore, an interior lighting 26 For example, adjust an ashtray lighting.

Die Fahrzeugsteuerung 20 kann des Weiteren die Stellung von Fahrzeugfenstern 28 und/oder Schiebedächern 30 verändern, beispielsweise leicht öffnen.The vehicle control 20 Furthermore, the position of vehicle windows 28 and / or sunroofs 30 change, for example, open easily.

2 zeigt schematisch die Verschaltung der verschiedenen Komponenten des Fahrgastraumüberwachungssystems 4. 2 schematically shows the interconnection of the various components of the passenger compartment monitoring system 4 ,

Basis der Verschaltung in dem darstellten Ausführungsbeispiel ist ein Bussystem 22, an das verschiedene Komponenten modular anschließbar sind. An dem Bussystem 22 ist zunächst die Kamera 8 angeschlossen. Des Weiteren ist an das Bussystem 22 das Bildverarbeitungssystem 18 angeschlossen. In einer alternativen Ausgestaltung können Kamera 8 und Bilderverarbeitungssystem 18 auch direkt miteinander verbunden sein, wobei das Bildverarbeitungssystem 18 an das Bussystem 22 angeschlossen ist. Das Bildverarbeitungssystem 18 kann auch in die Kamera 8 integriert sein.The basis of the interconnection in the illustrated embodiment is a bus system 22 to which various components can be connected modularly. On the bus system 22 is first the camera 8th connected. Furthermore, to the bus system 22 the image processing system 18 connected. In an alternative embodiment, camera 8th and image processing system 18 also be directly connected to each other, the image processing system 18 to the bus system 22 connected. The image processing system 18 can also be in the camera 8th be integrated.

Des Weiteren sind an das Bussystem 22 die Klimatisierungsanlage 24, Innenraumbeleuchtung 26, Fenstersteuerung 32, Dachsteuerung 34, Getriebesteuerung 36 sowie Fahrdynamiksteuerung 38 angeschlossen Die Fahrdynamiksteuerung 38 kann Lenkungsmodi, Motorabstimmung sowie Fahrassistenzsystemabstimmung beinhalten. Das Bussystem 22 ist mit der Fahrzeugsteuerung 20 verbunden, sodass über eine entsprechende Programmierung der Fahrzeugsteuerung 20 bei Erkennen einer brennenden Zigarette über die Kamera 8 die Einstellungen sämtlicher mit der Fahrzeugsteuerung 20 verbundener Untersysteme geprüft und ggf. angepasst werden können.Furthermore, to the bus system 22 the air conditioning system 24 , Interior lighting 26 , Window control 32 , Roof control 34 , Transmission control 36 as well as driving dynamics control 38 connected The vehicle dynamics control 38 may include steering modes, engine tuning, and driver assistance system tuning. The bus system 22 is with the vehicle control 20 connected so that via a corresponding programming of the vehicle control 20 when detecting a burning cigarette over the camera 8th the settings of all with the vehicle control 20 connected subsystems can be checked and adjusted if necessary.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

22: Kraftfahrzeugmotor vehicle
44: FahrgastraumüberwachungssystemPassenger compartment monitoring system
66: Fahrgastraumpassenger compartment
88th: Kameracamera
1010: A-SäuleA column
1212: Fahrerkopfdriver head
1414: ZigaretteCigarette
1616: heller Punktbright point
1818: BildverarbeitungssystemImage processing system
2020: Fahrzeugsteuerungvehicle control
2222: Bussystembus system
2424: Klimatisierungsanlageair conditioning system
2626: InnenraumbeleuchtungInterior lighting
2828: Fensterwindow
30 30: Schiebedachsunroof
3232: Fenstersteuerungwindow control
3434: Dachsteuerungroof control
3636: Getriebesteuerungtransmission control
3838: Fahrdynamiksteuerungvehicle dynamics control

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

DE 102007052355 A1 [0004]

Claims

Passenger compartment monitoring system, with at least one camera ( 8th ) covering at least a portion of a head ( 12 ) of a passenger or driver, and an image processing device ( 18 ) for processing the camera ( 8th ), the image processing apparatus ( 18 ) communicating with a vehicle controller ( 20 ), characterized in that the image processing device ( 18 ) for passing an information signal to the vehicle controller ( 20 ) upon detection of at least one signal from a bright and / or hot spot ( 16 ) is in a recorded image, is formed.

Passenger compartment monitoring system according to claim 1, characterized in that the camera ( 18 ) on an area of a head ( 12 ) of the driver of the motor vehicle ( 2 ) is aligned.

Passenger compartment monitoring system according to one of the preceding claims, characterized in that the camera ( 18 ) is designed to receive a wavelength range from 700 nm to 1.8 μm or from 8 μm to 14 μm.

Passenger compartment monitoring system according to one of the preceding claims, characterized in that the image processing device ( 20 ) is designed to detect the wakefulness of the driver.

Passenger compartment monitoring system according to one of the preceding claims, characterized in that the image processing device ( 18 ) to a bus system ( 22 ) of the motor vehicle ( 2 ) connected.

Passenger compartment monitoring system according to one of the preceding claims, characterized in that the passenger compartment monitoring system ( 4 ) with an air conditioning system ( 24 ) of the motor vehicle ( 2 ) is coupled.

Method for monitoring a passenger compartment of a motor vehicle ( 2 ) by means of at least one area of a head ( 12 ) camera of a passenger and / or driver ( 8th ), in which the images of the camera ( 8th ) by means of an image processing device ( 18 ) and in case of detecting at least one bright and / or hot spot ( 16 ) an information signal to a vehicle controller ( 20 ) is output.

Method according to claim 7, wherein in case of detecting at least one light and / or hot spot ( 16 ) the settings of an air conditioning system ( 24 ) of the motor vehicle ( 2 ) and changed in deviation from a given setting.

Method according to claim 7 or 8, wherein in case of detecting at least one light and / or hot spot ( 16 ) the settings of an interior lighting ( 26 ) and changed in deviation from a given setting.

Method according to one of claims 7 to 9, wherein in case of detecting at least one light and / or hot spot ( 16 ) the settings of windows ( 28 ) and / or sun or sunroofs ( 30 ) and changed in deviation from a given setting.

Method according to claim 10, characterized in that the change in the setting of windows ( 28 ) and / or sun or sunroofs ( 30 ) is neglected or undone when operating a windshield wiper and / or a windscreen washer system.

Method according to one of claims 7 to 11, wherein in case of detecting at least one bright and / or hot spot ( 16 ) the settings of a steering are checked and changed in deviation from a given setting.

Method according to one of claims 7 to 12, wherein in case of detecting at least one bright and / or hot spot ( 16 ) the settings of a vehicle transmission are checked and changed in deviation from a predetermined setting.

Method according to one of claims 7 to 13, wherein in case of detecting at least one light and / or hot spot ( 16 ) the settings of driving dynamics systems are checked and changed if they deviate from a given setting.

Method according to one of claims 7 to 14, wherein in the event of subsequent non-detection of at least one light and / or hot spot ( 16 ) the settings are reset to the settings prevailing before the bright spot is detected.