DE102017011315B3

DE102017011315B3 - Alarm-enabled microphone

Info

Publication number: DE102017011315B3
Application number: DE102017011315.7A
Authority: DE
Inventors: Auf Nichtnennung Antrag
Original assignee: Individual
Current assignee: Individual
Priority date: 2017-12-08
Filing date: 2017-12-08
Publication date: 2019-02-14
Anticipated expiration: 2037-12-09

Abstract

Verfahren zur Alarmierung eines Nutzers, wobeiein ein Mikrofon umfassendes erstes Endgerät des Nutzers mittels eines Kommunikationsnetzwerks, insbesondere dem Internet, mit einem Server verbunden ist und in einer zu überwachenden Umgebung platziert wird, wobeidas Mikrofon in einen Aufnahmezustand gesetzt ist und Audiosignale der zu überwachenden Umgebung aufnimmt, wobei die Audiosignale im Hinblick auf einen möglichen Alarmfall analysiert werden unddass der Server dem Nutzer beim Vorliegen des möglichen Alarmfalls vermittels des Kommunikationsnetzwerks eine Mitteilung an ein, insbesondere ein mobiles, zweites Endgerät des Nutzers sendet.A method for alerting a user, wherein a first terminal of the user comprising a microphone is connected to a server by means of a communication network, in particular the Internet, and placed in an environment to be monitored, wherein the microphone is set to a recording state and receives audio signals of the environment to be monitored , wherein the audio signals are analyzed with respect to a possible alarm case and that the server sends the user in the presence of the possible alarm case by means of the communication network a message to a, in particular a mobile, second terminal of the user.

Description

Die vorliegende Erfindung betrifft ein Verfahren, eine Verwendung und ein System auf dem technischen Gebiet der Alarmanlagen unter Verwendung eines Mikrofons, das mit einem Kommunikationsnetzwerk verbunden ist.The present invention relates to a method, a use and a system in the field of alarm systems using a microphone, which is connected to a communication network.

Es ist eine Vielzahl von Detektoren bekannt, die verschiedene Ereignisse detektieren können. So überwachen beispielsweise herkömmliche Alarmanlagen mittels solcher Detektoren, ob ein verschlossenes Fenster oder eine verschlossene Tür einer Wohnung unberechtigt geöffnet werden. In einem solchen Fall löst die Alarmanlage ein Alarmsignal zur Vertreibung der Diebe aus und es kann zudem automatisiert eine Nachricht an die Polizei oder an einen Wachdienst gesendet werden, sodass sich diese die Lage der Wohnung vor Ort anschauen können und gegebenenfalls den Einbruch noch verhindern können. Insbesondere kann hierbei vorgesehen sein, einen sogenannten stillen Alarm auszulösen, wobei nur die Polizei oder der Wachdienst benachrichtigt wird, was die Wahrscheinlichkeit erhöht, die Einbrecher noch vor Ort vorzufinden und diese gegebenenfalls in Gewahrsam zu nehmen. Befinden sich die Bewohner in der Wohnung bleiben diese Alarmanlagen zumeist deaktiviert, da sonst sehr häufig ein Fehlalarm ausgelöst werden würde, wenn beispielsweise Kinder beim Fußballspielen eine Scheibe zerbrechen.A variety of detectors are known that can detect various events. For example, conventional alarm systems monitor by means of such detectors, whether a locked window or a locked door of a dwelling are opened without authorization. In such a case, the alarm system triggers an alarm signal to evict the thieves and it can also be automatically sent a message to the police or a security service, so that they can look at the location of the apartment on site and possibly prevent the break-in. In particular, this can be provided to trigger a so-called silent alarm, with only the police or the security service is notified, which increases the likelihood of the burglars still find on the spot and to take them into custody, if necessary. If the residents are in the apartment these alarm systems remain mostly disabled, otherwise very often a false alarm would be triggered if, for example, children break a disc while playing football.

Nachteilig müssen diese Alarmanlagen beim Verlassen der Wohnung „aktiv“ bzw. „scharf“ geschaltet werden. Wird das Aktivieren vergessen, ist die Alarmanlage nutzlos. Nachteilig entstehen bei Fehlalarmen - die auch im „erwünschten“ Betrieb auftreten können - unnötige Kosten, wenn die Polizei zu der Wohnung ausrückt, obwohl gar kein Einbruch vorliegt. Weiterhin sind die Installierung und der Kauf einer herkömmlichen Alarmanlage recht teuer und aufwendig, da insbesondere alle Fenster und Türen mit einem extra Mechanismus versehen werden müssen, der ein unberechtigtes Öffnen detektieren kann. Aus diesem Grund scheuen sich viele Menschen eine Alarmanlage anzuschaffen, obwohl sie prinzipiell gerne ein zusätzliches Maß an Sicherheit für Ihren Wohnraum hätten.The disadvantage of these alarm systems when leaving the apartment "active" or "sharp" are switched. If the activation is forgotten, the alarm system is useless. The disadvantage of false alarms - which can also occur in "desired" operation - is unnecessary costs if the police move out to the apartment, even though there is no break-in. Furthermore, the installation and purchase of a conventional alarm system are quite expensive and expensive, since in particular all windows and doors must be provided with an extra mechanism that can detect unauthorized opening. For this reason, many people are afraid to buy an alarm system, although they would like to have an additional level of security for your living space in principle.

Zumeist sind solche Alarmanlagen mit Kameras ausgestattet, die zudem Bild- und/oder Tonaufzeichnungen aufnehmen, sodass Diebesbanden gegebenenfalls von den Behörden identifiziert werden können.In most cases, such alarm systems are equipped with cameras that also record image and / or sound recordings so that thief bands can be identified by the authorities if necessary.

WO 2006/075352 A1 beschreibt ein Überwachungsverfahren in Kaufhäusern, wobei Video- und Tonsignale von einer Alarmanlage aufgezeichnet und in digitaler Form umgewandelt werden. Diese Video- und Tonsignale werden mit in einer Datenbank gespeicherten Referenzdaten verglichen, um eine Gefährdungssituation zu identifizieren und einen Alarm auszulösen, falls die Video- und Tonsignale eine Übereinstimmung mit den Referenzdaten zeigen. Nachteilig kann dieses Verfahren auch dann einen Alarm auslösen, wenn die aufgenommenen Video- und Tonsignale eines normalen Kunden den Referenzdaten gleichen, obwohl dieser nicht plant einen Diebstahl zu begehen. Nachteilig ist dieses Verfahren zudem nicht geeignet, um den privaten Wohnraum eines Nutzers zu überwachen und diesen zielgerichtet über einen möglichen Alarmfall zu informieren. Zudem ist die Installation des dort beschriebenen Systems aufwendig und teuer. Der Nutzer muss sich zum Betreiben der Alarmanlage neue Geräte kaufen und kann keine schon vorhandenen Geräte nutzen. WO 2006/075352 A1 describes a surveillance procedure in department stores where video and audio signals are recorded by an alarm system and converted in digital form. These video and audio signals are compared with reference data stored in a database to identify a hazardous situation and trigger an alarm if the video and audio signals match the reference data. Disadvantageously, this method can also trigger an alarm when the recorded video and sound signals of a normal customer resemble the reference data, although he does not plan to commit a theft. Disadvantageously, this method is also not suitable for monitoring the private living space of a user and to inform him specifically about a possible alarm case. In addition, the installation of the system described there is complicated and expensive. The user must buy new devices to operate the alarm system and can not use existing devices.

DE 10 2008 032 438 A1 zeigt ein Verfahren zur Alarmierung eines Inhabers von Endgeräten, wobei ein sensibles Gerät, welches für Sprachtelefonie geeignet ist, über das Internet mit einem Server verbunden und in einer räumlichen Umgebung platziert ist. Das sensible Endgerät wird in einem Überwachungsmodus geschaltet, der die Aufnahme akustischer Signale aus der räumlichen Umgebung ermöglicht. Dies ermöglicht von Einbrechern verursachten Lärm zu erkennen, wobei einer Meldung generiert und diese dem Eigentümer an sein Mobiltelefon gesendet wird. Das Verfahren kann dahingehend erweitert werden, dass bestimmte akustische Signale wie etwa die eines Feuermelder ebenfalls detektiert werden. DE 10 2008 032 438 A1 shows a method for alerting a user of terminals, wherein a sensitive device, which is suitable for voice telephony, connected via the Internet with a server and placed in a spatial environment. The sensitive terminal is switched in a monitoring mode, which allows the recording of acoustic signals from the spatial environment. This allows burglars to detect noise, generating a message and sending it to the owner's mobile phone. The method may be extended to also detect certain acoustic signals, such as those of a fire alarm.

US 2016/0150338 A1 zeigt ein Verfahren zur Alarmierung einer Person, wobei ein Endgerät, das akustische Signale detektieren kann beispielsweise in ein Fernsehergerät integriert ist und über das Internet die detektierten akustischen Signale zu einem Server transferieren kann. Die Signale nimmt das Endgerät hierbei über ein Mikrofon auf. Es wird nun bestimmt, ob es sich bei den akustischen Signalen beispielsweise um ein Zerbrechen von Glasscheiben, ein Türöffnungsgeräusch oder über Stimmen von Personen handelt. Liegt ein möglicher Alarmfall vor kann dies an ein externes Endgerät gesendet werden. US 2016/0150338 A1 shows a method for alerting a person, wherein a terminal that can detect acoustic signals, for example, is integrated into a television set and the Internet can transfer the detected acoustic signals to a server. The signals are picked up by the terminal via a microphone. It is now determined whether the acoustic signals are, for example, a breaking of glass panes, a door opening sound or voices of persons. If there is a possible alarm, this can be sent to an external device.

WO 02/061706 A1 offenbart ein Überwachungs- und Steuerungssystem, das eine Steuereinheit zum Empfangen von Signalen von einer Vielzahl von Erfassungsvorrichtungen umfasst, die Ereignisse im Zusammenhang mit der Sicherheit überwachen. Die Steuereinheit sendet Informationen über den Empfang solcher Signale an eine Fernüberwachungsstation, die automatische Auswertungsroutinen speichert und betreibt, um einen Alarmruf an das ausgewählte entfernte Benutzerterminal zu senden. Das entfernte Benutzerterminal kann ein PDA, ein Mobiltelefon oder ein Festnetztelefon sein. In einigen Ausführungsformen der Erfindung kann es möglich sein, der Überwachungsstation übertragene Informationen einschließlich der Überprüfung des Ereignisses zur Verfügung zu stellen. Die Art des Ereignisses und der Überprüfung kann von der Steuereinheit oder von der Überwachungsstation festgelegt werden. WO 02/061706 A1 discloses a monitoring and control system that includes a controller for receiving signals from a plurality of sensing devices that monitor events related to security. The control unit sends information about the receipt of such signals to a remote monitoring station which stores and operates automatic evaluation routines to send an alarm call to the selected remote user terminal. The remote user terminal may be a PDA, a mobile telephone or a landline telephone. In some embodiments of the invention, it may be possible to transmit to the monitoring station To provide information including checking the event. The type of event and verification can be set by the control unit or by the monitoring station.

In einer häuslichen Umgebung sind zudem sogenannte Babyphones zur zielgerichteten Benachrichtigung eines Nutzers im Alarmfall bekannt. So beschreibt beispielsweise EP 1 629 448 B1 ein Babyphone, welches eine Babyeinheit und eine Elterneinheit umfasst. Die Babyeinheit weist ein Mikrofon auf, das den Geräuschpegel des Babys misst und gegebenenfalls die Geräusche über einen Lautsprecher der Elterneinheit, abspielt, sodass die Eltern beurteilen können, wie es ihrem Baby geht. Zudem ist das beschriebene Babyphone in der Lage mittels eines Lautsprechers der Babyeinheit eine beruhigende Nachricht an das Baby abzuspielen. Nachteilig ist ein solches Babyphone nicht zur Verwendung als Alarmanlage geeignet, da es, bedingt durch die kurze Funkreichweite seiner Signale, nur Bewohner informieren kann, die sich in benachbarten Räumen aufhalten. Ferner kann das Babyphone keine Entscheidungen treffen, ob ein Alarmfall vorliegt oder nicht, da lediglich die Höhe des Lautstärkepegels analysiert wird. Eine Funktionalität um Einbrecher zu vertreiben, weisen die Babyphones auch nicht auf, da beispielsweise eine Alarmsirene das Baby verschrecken würde. Der Erfindung liegt demnach die Aufgabe zu Grunde, einem Nutzer eine Alarmanlage zur Verfügung zu stellen, die kostengünstig und ohne großen Installationsaufwand installierbar ist und den Nutzer über einen möglichen Alarmfall informiert.In a domestic environment also so-called baby phones for targeted notification of a user in case of alarm are known. For example, describes EP 1 629 448 B1 a baby monitor, which includes a baby unit and a parent unit. The baby unit has a microphone that measures the noise level of the baby and, if necessary, plays the sounds through a speaker of the parent unit so that the parents can assess how their baby is doing. In addition, the baby monitor described is able by means of a speaker of the baby unit to play a reassuring message to the baby. Disadvantageously, such a baby monitor is not suitable for use as an alarm system, since, due to the short radio range of its signals, it can only inform residents who are in adjacent rooms. Furthermore, the baby monitor can not make any decisions as to whether an alarm is present or not, as only the level of the volume level is analyzed. A functionality to drive burglars, the baby phones also do not have, as for example an alarm siren would scare the baby. The invention is therefore based on the object to provide a user with an alarm system that can be installed inexpensively and without much installation effort and informs the user of a possible alarm case.

Diese Aufgabe wird erfindungsgemäß durch ein Verfahren des unabhängigen Anspruchs 1, einer Verwendung des unabhängigen Anspruchs 6 und ein System des unabhängigen Anspruchs 7 gelöst.This object is achieved according to the invention by a method of independent claim 1, a use of independent claim 6 and a system of independent claim 7.

Erfindungsgemäß ist ein Verfahren zur Alarmierung eines Nutzers angegeben, wobei ein erstes Endgerät des Nutzers ein Mikrofon aufweist und mittels eines Kommunikationsnetzwerks mit einem Server verbunden ist und in einer zu überwachenden Umgebung platziert wird, wobei das Mikrofon in einen Aufnahmezustand gesetzt ist und Audiosignale der zu überwachenden Umgebung aufnimmt. Diese Audiosignale werden im Hinblick auf einen möglichen Alarmfall analysiert, wobei der Server dem Nutzer beim Vorliegen des möglichen Alarmfalls mittels des Kommunikationsnetzwerks eine Mitteilung an ein zweites Endgerät sendet. Bevorzugt ist das zweite Endgerät des Nutzers ein mobiles Endgerät, insbesondere ein Smartphone, eine Smartwatch oder ein Tablet, sodass der Nutzer das zweite Endgerät ständig mit sich tragen kann. Zugleich muss das zweite Endgerät eine Schnittstelle zur Verbindung mit dem Kommunikationsnetzwerk aufweisen.According to the invention, a method is provided for alerting a user, wherein a first terminal of the user has a microphone and is connected by means of a communication network to a server and placed in an environment to be monitored, the microphone is set in a recording state and audio signals to be monitored Environment absorbs. These audio signals are analyzed with regard to a possible alarm case, wherein the server sends the user a message to a second terminal in the presence of the possible alarm case via the communication network. Preferably, the second terminal of the user is a mobile terminal, in particular a smartphone, a smartwatch or a tablet, so that the user can carry the second terminal constantly with him. At the same time, the second terminal must have an interface for connection to the communication network.

Bei dem ersten Endgerät kann es sich um ein eigenständiges Mikrofon, aber auch um ein Tablet, ein Smartphone oder um einen intelligenten Lautsprecher mit eingebautem Mikrofon handeln. Jedenfalls ist es notwendig, dass das erste Endgerät ein Mikrofon und eine Schnittstelle zum Kommunikationsnetzwerk aufweist. Aktuelle intelligente Lautsprecher weisen häufig eingebaute Mikrofone auf, um eine digitale Sprachsteuerung des Gerätes mittels einer Audioschnittstelle bereitzustellen durch welche diverse Internetdienste angesprochen werden oder der Lautsprecher bzw. die Musikwiedergabe gesteuert wird. Diese Funktionalität ist bei Smartphones und Tablets, insbesondere durch Sprachassistenten wie etwa „Siri“, schon länger bekannt, wobei bei den Smartphones und Tablets Zugeständnisse an die Größe des Mikrofons gemacht werden müssen, da eine möglichst kompakte Bauweise oder Wasserdichtigkeit erwünscht ist. The first terminal may be a stand-alone microphone, but also a tablet, a smartphone or a smart speaker with built-in microphone. In any case, it is necessary that the first terminal has a microphone and an interface to the communication network. Current intelligent speakers often have built-in microphones to provide a digital voice control of the device by means of an audio interface through which various Internet services are addressed or the speaker or music playback is controlled. This functionality has long been known in smartphones and tablets, in particular by voice assistants such as "Siri", concessions to the size of the microphone must be made in the smartphones and tablets, since the most compact design or waterproofness is desired.

Diese Beschränkungen sind bei intelligenten Lautsprechern deutlich weniger stark ausgebildet, wodurch in diesen ein oder mehrere Mikrofone mit einer deutlich verbesserten Aufnahmequalität eingebaut werden können. Vorteilhaft wird hierdurch also erreicht, dass sich der Nutzer nicht extra eine teure Alarmanlage kaufen und diese aufwendig installieren muss, da er hierzu Geräte nutzen kann, die auch einem anderen Zweck dienen und die der Nutzer deswegen vielleicht schon besitzt. Der Nutzer kann weltweit über einen möglichen Alarmfall in seiner Wohnung informiert werden. Durch die Analyse wird hierbei sichergestellt, dass dem Nutzer nicht jedes Geräusch, das einen gewissen Lautstärkepegel überschreitet als ein möglicher Alarmfall gemeldet wird.These limitations are much less pronounced with smart speakers, allowing them to incorporate one or more microphones with significantly improved recording quality. Advantageously, this means that the user does not need to buy an expensive alarm system and install it consuming, since he can use devices that also serve another purpose and that the user might already have. The user can be informed worldwide about a possible alarm in his home. The analysis hereby ensures that the user is not notified of any noise exceeding a certain volume level as a possible alarm case.

Bevorzugt weist das erste Endgerät einen Prozessor auf, wobei der Prozessor des ersten Endgeräts die Audiosignale im Hinblick auf den möglichen Alarmfall analysiert. Hierdurch wird erreicht, dass das erste Endgerät mittels auf dem Prozessor implementierter Algorithmen selbstständig den möglichen Alarmfall analysieren kann. Selbst bei einem Ausfall des Kommunikationsnetzwerks kann das erste Endgerät Maßnahmen zur Abschreckung von Einbrechern ausführen. Beispielsweise könnte ein intelligenter Lautsprecher ein Sirenen- oder Alarmsignal abspielen. Die Analyse durch den im ersten Endgerät implementierten Prozessor kann auch aus Datenschutzgründen bevorzugt werden, da der Server erst beim Vorliegen des möglichen Alarmfalls über das Kommunikationsnetzwerk hiervon informiert wird, sodass dieser eine Mitteilung an den Nutzer senden kann.The first terminal preferably has a processor, wherein the processor of the first terminal analyzes the audio signals with regard to the possible alarm case. This ensures that the first terminal can independently analyze the possible alarm case by means of algorithms implemented on the processor. Even in the event of a failure of the communication network, the first terminal can take measures to deter burglars. For example, an intelligent speaker could play a siren or alarm signal. The analysis by the processor implemented in the first terminal can also be preferred for reasons of data protection, since the server is informed of this only in the presence of the possible alarm via the communication network, so that he can send a message to the user.

In einer bevorzugten Ausführungsform leitet das erste Endgerät die Audiosignale mittels des Prozessors an den mit dem Kommunikationsnetzwerk verbundenen Server weiter, wobei die Audiosignale auf dem Server im Hinblick auf den möglichen Alarmfall analysiert werden. Für diese Analyse ist auf dem Server ebenfalls ein Algorithmus implementiert. Dieser Algorithmus kann von dem auf dem Prozessor implementierten Algorithmus abweichen oder aber mit diesem identisch sein. Ein abweichender Algorithmus kann insbesondere dann gegeben sein, wenn ein vorheriger Algorithmus durch einen neuen Algorithmus aktualisiert („upgedatet“) wird, da ein neuer Algorithmus auf einem zentralen Server leichter aktualisiert werden kann als wenn auf jedem möglichen ersten Endgerät eine Softwareaktualisierung ausgeführt werden müsste, wodurch es auch insbesondere zu Problemen mit inkompatibler Hardware oder verschiedenen Betriebssystemen kommen kann. Zudem ist die Rechenleistung eines serverseitigen Algorithmus deutlich höher. Ein weiterer Vorteil kann dadurch entstehen, dass sich selbstlernende Algorithmen deutlich schneller verbessern, je mehr Daten generiert und analysiert werden. Laufen auf dem Server die Daten der ersten Endgeräte von vielen Nutzern zusammen, ist dies der Fall. Das System kann hierdurch sehr effektiv für alle Nutzer auf dem technisch neuesten Stand gehalten werden.In a preferred embodiment, the first terminal forwards the audio signals by means of the processor to the server connected to the communication network, wherein the audio signals on the server with regard to the possible Alarm case to be analyzed. An algorithm is also implemented on the server for this analysis. This algorithm may differ from or be identical to the algorithm implemented on the processor. A different algorithm may be given, in particular, when a previous algorithm is updated by a new algorithm, since a new algorithm can be updated more easily on a central server than if a software update had to be performed on every possible first terminal, which can also lead to problems with incompatible hardware or different operating systems. In addition, the computing power of a server-side algorithm is significantly higher. Another advantage can be the fact that self-learning algorithms improve significantly faster the more data is generated and analyzed. Running on the server, the data of the first terminals of many users together, this is the case. The system can thus be kept very effective for all users on the state of the art.

Durch die Analyse wird ermittelt, ob dem Audiosignal ein Sprachsignal oder ein nicht-sprachlich basiertes Geräuschsignal zu Grunde liegt. Hierdurch wird vorteilhaft erreicht, dass das Audiosignal in einer ersten Analyse in zwei verschiedene Kategorien unterteilt wird, die den Ablauf der nachfolgenden Analysealgorithmen festlegen, da ein Sprachsignal anders ausgewertet werden kann als ein nicht-sprachlich basiertes Geräuschsignal.The analysis determines whether the audio signal is based on a speech signal or a non-linguistically based noise signal. In this way, it is advantageously achieved that the audio signal is subdivided in a first analysis into two different categories, which determine the sequence of the subsequent analysis algorithms, since a speech signal can be evaluated differently than a non-linguistically based noise signal.

Aus dem Sprachsignal wird ein Sprachprofil extrahiert, wobei das Sprachprofil mit in einer Datenbank hinterlegten Sprachprofilen von Personen verglichen wird, die der zu überwachenden Umgebung zugeordnet sind. Als Sprachprofil wird hierbei gewissermaßen das akustische Pendant zum Fingerabdruck verstanden. In der Hinsicht, dass ein Sprachprofil einer Person eindeutig zugeordnet werden kann. Die Datenbank ist entweder in dem ersten Endgerät oder auf dem Server implementiert und kann von dem Nutzer aktiv erstellt und erweitert werden, indem er beispielsweise mittels Sprachbefehl oder einer entsprechenden Applikation, die über das Kommunikationsnetzwerk mit der Datenbank verbunden ist, das Mikrofon in einen Aufnahmezustand versetzt und gewünschte Personen auffordert zu sprechen, sodass deren Sprachprofile in der Datenbank hinterlegt werden. Insbesondere kann der Nutzer hierbei Freunde oder Familienmitglieder aktiv in die Datenbank aufnehmen, wobei der Algorithmus bei der Analyse im Falle einer Übereinstimmung des Sprachsignals mit einem der Sprachprofile in der Datenbank annimmt, dass kein Alarmfall vorliegt. Das erste Endgerät kann die Datenbank auch automatisiert erstellen oder erweitern, beispielsweise wenn das erste Endgerät feststellt, dass ein in seiner Datenbank bekanntes Sprachprofil zeitgleich mit einem neuen Sprachprofil auftritt. Dieses neue Sprachprofil kann der Datenbank automatisch hinzugefügt werden. Hierbei liegt die Überlegung zu Grunde, dass der Sprechpartner ein Bekannter des Nutzers ist, sodass von diesem keine Gefahr ausgeht. Konkret könnte das wie folgt ablaufen: Unterhält sich der dem ersten Endgerät bekannte Nutzer beispielsweise mit seinem Vater, wird der Vater automatisch in die Datenbank hinzugefügt. Unterhält sich der Vater dann bei einer späteren Gelegenheit alleine mit seiner Frau in der Nähe des ersten Endgeräts, so erkennt das erste Endgerät den Vater als bekannt und fügt automatisch auch dessen Frau in die Datenbank hinzu. Die Funktionalität der automatischen Erweiterung der Datenbank kann allerdings durch den Nutzer wahlweise deaktiviert oder aktiviert werden. Diese Funktionalität kann also auch Einbrecher ermitteln, die dieselbe Sprache sprechen wie der Nutzer.From the voice signal, a voice profile is extracted, wherein the voice profile is compared with stored in a database language profiles of people who are assigned to the environment to be monitored. The language profile is to some extent understood as the acoustic counterpart to the fingerprint. In the sense that a language profile can be uniquely assigned to a person. The database is either implemented in the first terminal or on the server and can be actively created and expanded by the user by placing the microphone in a recording state, for example by means of a voice command or a corresponding application which is connected to the database via the communication network and asks people to speak, so that their language profiles are stored in the database. In particular, the user can thereby actively include friends or family members in the database, the algorithm assuming in the analysis in the case of a match of the speech signal with one of the speech profiles in the database that there is no alarm case. The first terminal may also create or augment the database automatically, for example, when the first terminal determines that a voice profile known in its database coincides with a new voice profile. This new language profile can be automatically added to the database. This is based on the consideration that the speaker is an acquaintance of the user, so there is no danger from this. Specifically, this could take place as follows: If the user known to the first terminal is talking to his father, for example, the father is automatically added to the database. If the father then talks alone with his wife on a later occasion near the first terminal, the first terminal recognizes the father as known and automatically adds his wife in the database. The functionality of the automatic extension of the database can however be deactivated or activated by the user. This functionality can also detect burglars who speak the same language as the user.

In einer weiteren möglichen Ausgestaltung der Erfindung wird aus dem Sprachsignal eine Klangfarbe und/oder ein Klangprofil extrahiert und analysiert. Die Analyse der Klangfarbe kann ergeben aus welchem Sprachraum der Sprecher kommt. Bekannt sind zum Beispiel die Begriffe romanischer, slawischer oder germanischer Sprachraum, wobei weitere Unterteilungen wie etwa italienischer, slowenischer oder deutscher Sprachraum bekannt sind, die alle spezifische Charakteristika aufweisen. Vermittels Sprachsteuerung, automatischer Erkennung in einer Lernphase, einer dem ersten Endgerät zugeordneten Applikation oder mittels automatischer Standortbestimmung des ersten Endgeräts, über beispielsweise die IP-Adresse, kann eine dem ersten Gerät zugeordnete Standardsprache festgelegt werden, wobei diese im Normalfall mit der eingestellten Systemsprache übereinstimmt. Das erste Endgerät „weiß“ also, welche Sprache im Normalfall in der zu überwachenden Umgebung gesprochen wird. Ergibt die Analyse der Klangfarbe, dass die Sprache nicht mit der Standardsprache übereinstimmt, kann dies als ein möglicher Alarmfall bewertet werden, woraufhin der Nutzer informiert wird. Gerade durch die offenen Grenzen innerhalb der Europäischen Union - wobei die Idee der Europäischen Union im Rahmen dieser Erfindung explizit gutgeheißen wird - ist in letzter Zeit vermehrt von international agierenden und vernetzten Diebesbanden zu lesen, deren Einbruch durch das vorstehend beschriebene Verfahren entdeckt werden kann, wenn sie sich in einer anderen Sprache unterhalten.In a further possible embodiment of the invention, a tone color and / or a sound profile is extracted and analyzed from the speech signal. The analysis of the timbre can show from which language space the speaker comes. For example, the terms Romance, Slavic or Germanic are known, with further subdivisions such as Italian, Slovenian or German speaking being known, all of which have specific characteristics. By means of voice control, automatic detection in a learning phase, an application associated with the first terminal, or via automatic positioning of the first terminal, for example via the IP address, a default language associated with the first device can be set, which normally coincides with the set system language. The first terminal thus "knows" which language is normally spoken in the environment to be monitored. If the analysis of the timbre shows that the language does not agree with the standard language, this can be evaluated as a possible alarm case, whereupon the user is informed. Especially through the open borders within the European Union - whereby the idea of the European Union in the context of this invention is explicitly endorsed - read of international acting and networked thief gangs lately, whose break-in can be discovered by the procedure described above, if they talk in a different language.

Bevorzugt wird ein Spracherkennungsalgorithmus auf das Sprachsignal angewendet, der in einem ersten Schritt die Sprache analysiert - also beispielsweise ob es sich um Deutsch oder Französisch oder eine andere Sprache handelt. In einem folgenden Schritt wird das Sprachsignal in Text umwandelt. Spracherkennungsalgorithmen sind dem Fachmann bekannt. Auf dem Markt sind fortgeschrittene Lösungen verfügbar, die Sprache in Text umsetzen. Beispielhaft seien ergänzend einige Publikationen genannt: Pirani, Giancarlo: Advanced algorithms and architectures for speech understanding. Vol. 1. Springer Science & Business Media, 2013 . ISBN 978-3-642-84341-9 oder Ernst Günter Schukat-Talamazzini: Automatische Spracherkennung. Grundlagen, statistische Modelle und effiziente Algorithmen, Vieweg, Braunschweig / Wiesbaden 1995 , ISBN 3-528-05492-1. Hat der Algorithmus ermittelt, dass die vorliegende Sprache eine andere Sprache als die Standardsprache des ersten Endgerätes ist, wird der Text automatisch in die Standardsprache des Nutzers übersetzt. Dieser übersetzte Text kann dann dem Nutzer in einem möglichen Alarmfall in Form einer Textmitteilung an sein zweites Endgerät übermittelt werden, sodass er direkt lesen kann, was gesprochen wurde. Vorteilhaft wird ihm also hierdurch ermöglicht, dass er in Textform lesen kann, was eine ausländische Einbruchsbande gesprochen hat.Preferably, a speech recognition algorithm is applied to the speech signal, which analyzes the speech in a first step - for example, whether it is German or French or another language. In a following step, the speech signal is converted to text. Speech recognition algorithms are known to the person skilled in the art. Are in the market Advanced solutions that translate speech into text are available. By way of example, some publications may be mentioned: Pirani, Giancarlo: Advanced algorithms and architectures for speech understanding. Vol. 1. Springer Science & Business Media, 2013 , ISBN 978-3-642-84341-9 or Ernst Günter Schukat-Talamazzini: Automatic speech recognition. Basics, statistical models and efficient algorithms, Vieweg, Braunschweig / Wiesbaden 1995 , ISBN 3-528-05492-1. If the algorithm has determined that the present language is a language other than the default language of the first terminal, the text is automatically translated into the user's default language. This translated text can then be transmitted to the user in a possible alarm in the form of a text message to the second terminal so that he can read directly what has been spoken. It is thus advantageously made possible for him to read in text form what a foreign gang of defenders has spoken.

In einer vorteilhaften Ausgestaltung der Erfindung werden Signalwörter aus dem Text extrahiert und bevorzugt in einen semantischen Zusammenhang gesetzt. In einer Datenbank werden Referenzwörter und Kombination von Referenzwörtern hinterlegt, die mit einer gewissen Wahrscheinlichkeit von einer Einbruchsbande verwendet werden können. Solche Referenzwörter könnten unter anderem sein: Schmuck, Geld oder Polizei. Kommen solche Wörter in Kombination mit anderen Wörtern vor, erhöht dies noch mal die Wahrscheinlichkeit, dass es sich um eine Einbruchsbande handelt. So ist die Wortkombination „Wo ist der Schmuck?“ oder „Hast Du den Schmuck schon gefunden?“ noch aussagekräftiger als das Wort „Schmuck“ alleine. Diese Signalwörter bzw. Wortkombinationen können in verschiedenen Sprachen hinterlegt werden oder aber in einer Sprache, wobei ein Übersetzungsalgorithmus vor der Analyse das Sprachsignal in die Sprache übersetzt und in Text umwandelt in der die Referenzwörter vorliegen.In an advantageous embodiment of the invention, signal words are extracted from the text and preferably set in a semantic context. A database contains reference words and a combination of reference words that can be used by a break-in band with a certain probability. Such reference words could include: jewelry, money or police. If such words occur in combination with other words, this again increases the likelihood of being a break-in band. So the word combination "Where is the jewelry?" Or "Have you already found the jewelry?" Is even more meaningful than the word "jewelry" alone. These signal words or word combinations can be stored in different languages or in a language, wherein a translation algorithm before the analysis translates the speech signal into the language and converts it into text in which the reference words are present.

Bevorzugt wird das Geräuschsignal mit in einer Datenbank hinterlegten Bibliothek von Geräuschsignal verglichen. Alternativ oder zusätzlich kann zudem ab einem festlegbaren Geräuschpegel der mögliche Alarm festgestellt werden. Handelt es sich um einen einzelnen Einbrecher, kann dessen Eindringen in die Wohnung mittels Erkennung eines Sprachsignals nur schwer detektiert werden, wenn sich dieser Einbrecher nicht gerade durch ausgiebige Selbstgespräche zu erkennen gibt. Glücklicherweise sind Einbrecher zumeist nicht alleine unterwegs, um sich gegenseitig absichern zu können. Trotzdem ist es zweckmäßig, wenn das erste Endgerät auch eine Möglichkeit offenbart, einen einzelnen Einbrecher festzustellen. Diese Möglichkeit ist durch die Analyse von Geräuschsignalen gegeben. In der Datenbank können Geräusche hinterlegt werden wie etwa: Ein eingeschlagenes Fenster; Schrankschubladen, die hastig und schnell aufgerissen werden; Gegenstände, die zu Boden fallen. Zeigen die Geräuschsignale eine hinreichende Übereinstimmung mit den in der Datenbank hinterlegten Geräuschsignalen, kann der Nutzer über sein zweites Endgerät über den möglichen Alarmfall informiert werden. Zusätzlich kann vorteilhaft der mögliche Alarm festgestellt werden, wenn die Geräuschsignale einen festlegbaren Geräuschpegel bzw. Lautstärkepegel überschreiten. Der Nutzer kann in den Systemeinstellungen des ersten Endgeräts festlegen, ab welchem Geräuschpegel er über den möglichen Alarmfall informiert werden möchte, sodass auch Geräusche als möglicher Alarmfall detektiert werden können, die nicht in der Datenbank aufgenommen sind. So könnten beispielsweise leise Fußschritte des Einbrechers als möglicher Alarm detektiert werden. Bevorzugt kann der Nutzer die Mitteilung des möglichen Alarms über die Geräuschpegelbestimmung an dem ersten Endgerät ab- bzw. anschalten, um zu verhindern, dass auch dann Alarmmeldungen an das zweite Endgerät des Nutzers gesendet werden, wenn der selbst Nutzer an dem ersten Endgerät vorbeiläuft. Vorzugsweise ist hierzu ein Extra-Überwachungsmodus am ersten Endgerät eingerichtet.The noise signal is preferably compared with a library of noise signals stored in a database. Alternatively or additionally, the possible alarm can also be determined from a definable noise level. If it is a single burglar, its penetration into the home can be difficult to detect by detecting a voice signal, if this burglar is not just to recognize through extensive soliloquy. Fortunately, burglars are usually not alone on the road to protect each other. Nevertheless, it is expedient if the first terminal also discloses a way to detect a single burglar. This possibility is given by the analysis of noise signals. Noise can be stored in the database, such as: a window that has been closed; Cabinet drawers that are hastily and quickly torn open; Objects that fall to the ground. If the noise signals show a sufficient correspondence with the noise signals stored in the database, the user can be informed about the possible alarm case via his second terminal. In addition, the possible alarm can advantageously be determined if the noise signals exceed a definable noise level or volume level. The user can specify in the system settings of the first terminal, from which noise level he wants to be informed about the possible alarm case, so that noises can be detected as a possible alarm case, which are not included in the database. Thus, for example, silent footsteps of the burglar could be detected as a possible alarm. Preferably, the user can turn off or on the notification of the possible alarm on the noise level determination on the first terminal to prevent even then alarm messages are sent to the second terminal of the user when the user himself passes by the first terminal. For this purpose, an extra monitoring mode is preferably set up on the first terminal.

Vorzugsweise wird die Wahrscheinlichkeit für den möglichen Alarmfall mit einem ersten Schwellenwert verglichen. Der Algorithmus kann die Wahrscheinlichkeit für einen möglichen Alarmfall ermitteln. Detektiert der Algorithmus beispielsweise mehrere in der Datenbank hinterlegte Referenzwörter oder verdächtigen Geräusche ist die Wahrscheinlichkeit für einen möglichen Alarmfall höher als wenn der Algorithmus nur ein einziges verdächtiges Referenzwort ermittelt. Der Nutzer kann hierzu in den Systemeinstellungen den ersten Schwellenwert festlegen, ab dem er über den möglichen Alarmfall informiert werden möchte. Hierdurch wird quasi die Sensitivität des Systems festgelegt und verhindert, dass der Nutzer unerwünscht oft Mitteilungen über den möglichen Alarmfall auf sein zweites Endgerät erhält. Wird dieser Schwellenwert überschritten, wird dem Nutzer der Text des Sprachsignals und/oder das aufgenommene Audiosignal an sein zweites Endgerät übermittelt, die er sich ansehen bzw. anhören kann, um die Lage besser abschätzen zu können. Gegebenenfalls kann der Nutzer direkt über eine auf seinem zweiten Endgerät vorgesehene Applikation die Polizei benachrichtigen, wobei der Polizei automatisch sämtliche verfügbaren Informationen bereitgestellt werden.The probability for the possible alarm case is preferably compared with a first threshold value. The algorithm can determine the probability of a possible alarm case. For example, if the algorithm detects multiple reference words or suspicious sounds stored in the database, the probability of a possible alarm is higher than if the algorithm detects only a single suspect reference word. In the system settings, the user can set the first threshold from which he would like to be informed about the possible alarm case. As a result, the sensitivity of the system is quasi set and prevents the user undesirable often receives messages about the possible alarm case on his second terminal. If this threshold is exceeded, the text of the speech signal and / or the recorded audio signal is transmitted to the user to his second terminal, which he can watch or listen to in order to better estimate the situation. Optionally, the user can notify the police directly via an application provided on his second terminal, the police being automatically provided with all available information.

Es kann zudem vorgesehen werden, dass dem Nutzer bei Überschreitung des ersten Schwellenwertes ein Kanal zum Anhören einer Echtzeitaufnahme des Mikrofons über das Kommunikationsnetzwerk an sein zweites Endgerät eingerichtet wird. Vorteilhaft kann sich der Nutzer dann einen eigenen Überblick über die Lage verschaffen. Weist das erste Endgerät zudem einen Lautsprecher auf, wird hierdurch eine Telefonfunktion bereitgestellt.In addition, provision can be made for the user, when the first threshold value is exceeded, to set up a channel for listening to a real-time recording of the microphone via the communication network to his second terminal. Advantageously, the user can then gain an own overview of the situation. Does that know first terminal also has a speaker, thereby providing a phone function.

Zudem kann ein zweiter Schwellenwert festgelegt sein bzw. von dem Nutzer an dem ersten Endgerät in den Systemeinstellungen festgelegt werden. Bevorzugt ist dieser zweite Schwellenwert dahingehend höher als der erste Schwellenwert, dass dieser erst als überschritten gilt, wenn die Wahrscheinlichkeit eines Vorliegens des möglichen Alarmfalls höher ist als bei dem ersten Schwellenwert. Bevorzugt werden bei der Überschreitung dieses zweiten Schwellenwertes automatisiert Behörden, wie beispielsweise die Polizei, über das Kommunikationsnetzwerk über den möglichen Alarmfall informiert. Hat nämlich der Nutzer sein zweites Endgerät nicht bei sich oder ist es in einem nicht funktionsfähigen Zustand, sollte trotzdem sichergestellt sein, dass das erste Endgerät in dem möglichen Alarmfall als wirksame Alarmanlage funktioniert. Bevorzugt wird selbst bei einer Überschreitung des zweiten Schwellenwertes keine Information an die Behörden weitergegeben, wenn der Nutzer vermittels seines ersten Endgeräts das Vorliegen eines möglichen Alarmfalls aktiv, beispielsweise vermittels einer Applikation, verneint hat.In addition, a second threshold may be fixed or set by the user at the first terminal in the system settings. Preferably, this second threshold value is higher than the first threshold value so that it is not considered exceeded until the probability of the occurrence of the possible alarm case is higher than at the first threshold value. When exceeding this second threshold, authorities such as the police are preferably informed via the communication network about the possible alarm case. If the user does not have his second terminal with him or is in a non-functional state, it should nevertheless be ensured that the first terminal functions as an effective alarm system in the event of possible alarms. Preferably, even if the second threshold is exceeded, no information is forwarded to the authorities if the user has actively denied by means of his first terminal the presence of a possible alarm case, for example by means of an application.

Vorzugsweise kann das erste Endgerät vermittels eines Lautsprechers ein Alarmsignal abspielen oder ein Gespräch simulieren. In beiden Fällen kann dies dazu führen, dass Einbrecher effektiv abgeschreckt werden können und die zu überwachende Umgebung verlassen oder diese erst gar nicht betreten. Für das Aktivieren eines Alarmsignals oder für die Simulation eines Gesprächs können weitere, insbesondere frei festlegbare, Schwellenwerte vorgesehen sein. Zudem kann das erste Endgerät auch mit einem Smart-Home-System verbunden sein, sodass beispielsweise auch Hausbeleuchtungen angeschaltet werden können.Preferably, the first terminal can play an alarm signal or simulate a conversation by means of a loudspeaker. In either case, this can result in burglars being effectively deterred from leaving or even entering the monitored environment. For activating an alarm signal or for simulating a call, further, in particular freely definable, threshold values can be provided. In addition, the first terminal may also be connected to a smart home system, so that, for example, home lighting can also be switched on.

In einer bevorzugten Ausgestaltung der Erfindung können die technischen Reaktionen des ersten Endgeräts auf die Audiosignale in den Systemeinstellungen verändert und festgelegt werden. Hierbei sind insbesondere auch die vorstehend erwähnten Festlegungen der Schwellenwerte zu verstehen, aber auch andere Funktionalitäten des ersten Endgeräts können über die Systemeinstellungen festgelegt werden. Beispielsweise welches Alarmsignal abgespielt wird oder ob überhaupt ein zweiter Schwellenwert eingerichtet werden soll.In a preferred embodiment of the invention, the technical responses of the first terminal to the audio signals in the system settings can be changed and set. In this case, the above-mentioned definitions of the threshold values are to be understood in particular, but also other functionalities of the first terminal can be defined via the system settings. For example, which alarm signal is played or whether at all a second threshold should be established.

Vorzugsweise ist an dem ersten Endgerät auch eine Kamera vorgesehen, sodass auch Bilder oder Videos der zu überwachenden Umgebung an den Nutzer und/oder die Behörden übermittelt werden können.Preferably, a camera is also provided on the first terminal, so that images or videos of the environment to be monitored can also be transmitted to the user and / or the authorities.

Vorteilhaft nimmt das Mikrofon des ersten Endgerätes dauerhaft die zu überwachende Umgebung auf. Ist das erste Endgerät beispielsweise als intelligenter Lautsprecher ausgestaltet, kann die Analyse von Sprachsignale im Hinblick auf einen möglichen Alarmfall ausgeschaltet werden, wenn der Lautsprecher Musik oder einen Fernsehfilm abspielt. Das erste Endgerät soll dem Nutzer keinen möglichen Alarmfall melden, wenn sich dieser zum Beispiel einen Gangsterfilm im Fernseher ansieht. Vorzugsweise kann der Algorithmus Audiosignale eines Fernsehfilms oder von Musik von denen einer Einbrecherband unterscheiden. Das erste Endgerät kann seine Alarmfunktion bevorzugt automatisch abschalten, wenn in der zu überwachenden Umgebung Medieninhalte abgespielt werden. Bevorzugt kann dem ersten Endgerät diese Information über ein Smart-Home-System zugänglich gemacht werden. Beispielsweise kann ein Fernseher, der in das Smart-Home-System eingebunden ist, dem ersten Endgerät seinen Aktivitätsstatus übermitteln. Es kann aber auch vorgesehen sein, dass das erste Endgerät einen von dem Nutzer an- oder abschaltbaren Modus besitzt, der die Alarmfunktion aktiviert oder deaktiviert. Dies kann über eine entsprechende Applikation, welcher über das Kommunikationsnetzwerk auf die Systemeinstellungen zugreifen kann, oder beispielsweise über einen manuellen Schalter am ersten Endgerät umgesetzt werden.Advantageously, the microphone of the first terminal permanently absorbs the environment to be monitored. For example, if the first terminal is configured as an intelligent speaker, the analysis of voice signals may be turned off in the event of a possible alarm when the speaker plays music or a television movie. The first terminal is not to report the user a possible alarm case, for example, when watching a gangster movie in the TV. Preferably, the algorithm may distinguish audio signals of a television movie or music from those of a burglar band. The first terminal can preferably automatically switch off its alarm function if media contents are played in the environment to be monitored. Preferably, this information can be made accessible to the first terminal via a smart home system. For example, a television that is integrated into the smart home system can transmit its activity status to the first terminal. However, provision may also be made for the first terminal to have a mode which can be switched on or off by the user and which activates or deactivates the alarm function. This can be implemented via a corresponding application, which can access the system settings via the communication network, or, for example, via a manual switch on the first terminal.

Gemäß eines weiteren Aspekts der Erfindung wird eine Verwendung des ersten Endgeräts als Alarmanlage angegeben, wobei das erste Endgerät ein Mikrofon umfasst und mit einem Kommunikationsnetzwerk verbunden ist. Wie erläutert, kann ein solches Endgerät mit den vorstehend beschriebenen Eigenschaften einen möglichen Alarmfall über das Kommunikationsnetzwerk an das zweite Endgerät des Nutzers senden. Mögliche zweite Endgeräte sind insbesondere auf dem Markt erhältliche Smartphones, Tablets oder Smartwatches. Zusätzlich oder alternativ kann das erste Endgerät auch als ein Babyphone verwendet werden. Hierzu müsste lediglich ein alternativer Algorithmus für Audiosignale des Babys vorgesehen sein, der ermittelt, ob Eltern nach ihrem Baby sehen sollten. Bevorzugt können die Eltern über ein Bewertungssystem angeben, ob es sich um „normale“ Babygeräusche handelt oder um Situationen in denen die Eltern nach dem Baby sehen sollten. Das Bewertungssystem kann allerdings auch verwendet werden, um die Funktionalität des Algorithmus bei der Verwendung als Alarmanlage zu verbessern. Über einer mit dem Netzwerk verbundenen Applikation können beispielsweise Fehlalarme gekennzeichnet werden, sodass das System selbstlernend besser wird. Technisch können beide Algorithmen parallel implementiert sein, wobei der Nutzer über die Systemeinstellungen wählen kann, welcher Algorithmus aktiviert werden soll, sodass das erste Endgerät wahlweise als Alarmanlage oder als Babyphone verwendet werden kann. Alternativ kann das erste Endgerät aber auch zugleich als Babyphone und als Alarmanlage verwendet werden, wenn der Algorithmus so ausgebildet ist, dass er die Audiosignale des Babys von anderen unterscheiden kann. Dies ist beispielsweise über die vorstehend beschriebenen Klangprofile möglich.According to a further aspect of the invention, a use of the first terminal is specified as an alarm system, wherein the first terminal comprises a microphone and is connected to a communication network. As explained, such a terminal with the characteristics described above can send a possible alarm case via the communication network to the second terminal of the user. Possible second terminals are especially available on the market smartphones, tablets or smartwatches. Additionally or alternatively, the first terminal may also be used as a baby monitor. All that would be required is an alternative audio algorithm for the baby, which determines whether parents should look for their baby. Preferably, the parents can indicate via a rating system whether they are "normal" baby noises or situations in which the parents should look after the baby. However, the rating system can also be used to improve the functionality of the algorithm when used as an alarm system. An application connected to the network, for example, can be used to mark false alarms, so that the system becomes better self-learning. Technically, both algorithms can be implemented in parallel, whereby the user can select via the system settings which algorithm is to be activated, so that the first terminal can optionally be used as an alarm system or as a baby monitor. Alternatively, the first terminal but also at the same time as a baby monitor and as Alarm system can be used, if the algorithm is designed so that it can distinguish the audio signals of the baby from others. This is possible, for example, via the sound profiles described above.

Vorzugsweise ist das erste Endgerät als ein smarter Lautsprecher, ein Mikrofon, ein Tablet oder als ein Smartphone ausgebildet. Insbesondere smarte Lautsprecher, Tablets oder Smartphones befinden sich bereits im Besitz von Nutzern. Vorteilhaft können diese also schon bereits vorhandene Geräte des Nutzers als Alarmanlage nutzen, der Kosten- und Installationsaufwand wird hierbei deutlich reduziert. Die technische Realisierung wird bevorzugt durch einen Anbieter bzw. Hersteller umgesetzt, indem durch den Anbieter der Server eingerichtet wird auf dem die entsprechenden Analysealgorithmen ablaufen. Als Kommunikationsnetzwerk wird bevorzugt das Internet verwendet, welches insbesondere auch den Mobilfunk einschließt. Bevorzugt wird die Mitteilung über den möglichen Alarmfall über den Mobilfunk an das zweite Endgerät übermittelt. Bei smarten Lautsprecher ist das Mikrofon zumeist ohnehin dauerhaft aktiviert und falls nicht, kann dies einfach eingerichtet werden. Bei Tablets oder Smartphones kann jedenfalls eine Applikation bereitgestellt werden, die das Mikrofon des Tablets oder des Smartphones dauerhaft aktiviert und dieses hierdurch in einen Alarmzustand versetzt.Preferably, the first terminal is designed as a smart speaker, a microphone, a tablet or a smartphone. In particular, smart speakers, tablets or smartphones are already in the possession of users. Advantageously, these can already use existing devices of the user as an alarm system, the cost and installation effort is significantly reduced. The technical realization is preferably implemented by a provider or manufacturer by setting up by the provider of the server on which the corresponding analysis algorithms run. As a communication network, the Internet is preferably used, which includes in particular the mobile network. The message about the possible alarm case is preferably transmitted via the mobile radio to the second terminal. With smart speakers, the microphone is usually permanently activated anyway and if not, this can easily be set up. In the case of tablets or smartphones, an application can always be provided that permanently activates the microphone of the tablet or the smartphone and thereby puts it in an alarm state.

Bevorzugt können über ein Smart-Home-System oder durch einen entsprechend eingerichteten Server, z.B. über ein Nutzerprofil, mehrere erste Endgeräte verknüpft werden, sodass zeitgleich mehrere, auch räumlich weit getrennte, zu überwachende Umgebungen überwacht werden können.Preferably, via a smart home system or by a correspondingly established server, e.g. can be linked via a user profile, several first terminals, so that at the same time several, even spatially widely separated, monitored environments can be monitored.

Ferner wird ein System gegeben, das zur Durchführung des vorstehend beschriebenen Verfahrens geeignet ist.Furthermore, a system is provided which is suitable for carrying out the method described above.

Weitere Vorteile, Eigenschaften und Weiterbildungen der Erfindung ergeben sich aus den abhängigen Ansprüchen sowie aus der nachstehenden Beschreibung bevorzugter Ausführungsbeispiele.Further advantages, features and developments of the invention will become apparent from the dependent claims and from the following description of preferred embodiments.

Die Erfindung wird im Folgenden unter Bezugnahme auf die Zeichnungen anhand bevorzugter Ausführungsbeispiele näher erläutert.

1 zeigt ein Ausführungsbeispiel einer erfindungsgemäßen Verwendung eines intelligenten Lautsprechers als Alarmanlage.
2 zeigt eine Verwendung des intelligenten Lautsprechers aus 1 als Alarmanlage und Babyphone.
3 zeigt ein Ausführungsbeispiel der erfindungsgemäßen Verfahrensschritte aus 1.

The invention will be explained in more detail below with reference to the drawings with reference to preferred embodiments.

1 shows an embodiment of an inventive use of a smart speaker as an alarm system.
2 indicates use of the intelligent speaker 1 as alarm system and baby monitor.
3 shows an embodiment of the method steps according to the invention 1 ,

1 zeigt ein Ausführungsbeispiel einer erfindungsgemäßen Verwendung eines ersten Endgeräts 10 als Alarmanlage. Hierbei ist das erste Endgerät 10 als ein intelligenter Lautsprecher 10 ausgebildet, wobei alternativ als erstes Endgerät 10 auch ein Smartphone oder ein Tablet verwendet werden können. Der intelligente Lautsprecher 10 weist eine Lautsprechereinheit 12 und ein Mikrofon 14 auf, die beide mit einem Prozessor 16 des intelligenten Lautsprechers 10 verbunden sind. Der Prozessor 16 steuert mittels geeigneter Algorithmen die Abläufe des intelligenten Lautsprechers 10. Hierbei gibt er zum Beispiel entsprechenden Signale an die Lautsprechereinheit 12 zur Tonerzeugung oder verarbeitet und digitalisiert die von dem Mikrofon 14 einlaufenden Audiosignale. Das Mikrofon 14 ist ständig aufnahmebereit und nimmt Geräusche, Töne oder Gespräche also im weitesten Sinne Audiosignale 42 auf, die in der Wohnung 11 zu hören sind. Zur Verbesserung der Qualität der Audiosignale 42 können mehrere Mikrofone 14, insbesondere Richtmikrofone, vorgesehen werden. Der Prozessor 16 digitalisiert die Audiosignale 42 und leitet diese über ein Kommunikationsnetzwerk 18, insbesondere das Internet 18, an einen Server 20 weiter. Auf dem Server 20 sind entsprechende Algorithmen 40 implementiert, die das Audiosignal 42 im Hinblick auf einen Alarmfall auswerten zu können. Über das Kommunikationsnetzwerk 18, insbesondere über ein Mobilfunknetz 18a, kann der Server 20 Daten bzw. Mitteilungen an ein zweites Endgerät 22, insbesondere ein Smartphone 22 eines Nutzers, senden. Der Nutzer ist der Besitzer oder Eigentümer einer Wohnung 11 in welcher der intelligente Lautsprecher 10 aufgestellt ist. Diese Mitteilungen können als Textnachrichten 24 oder auch als Audionachrichten 26 ausgebildet sein. Ferner ist der Server 20 über das Kommunikationsnetzwerk 18 mit der Polizei 32 verbunden. 1 shows an embodiment of an inventive use of a first terminal 10 as alarm system. Here is the first terminal 10 as a smart speaker 10 formed, alternatively as the first terminal 10 Even a smartphone or a tablet can be used. The intelligent speaker 10 has a speaker unit 12 and a microphone 14 on, both with a processor 16 of the smart speaker 10 are connected. The processor 16 controls the processes of the intelligent loudspeaker by means of suitable algorithms 10 , He gives, for example, appropriate signals to the speaker unit 12 for tone generation or processing and digitizing that from the microphone 14 incoming audio signals. The microphone 14 is always receptive and takes sounds, sounds or conversations so in the broadest sense audio signals 42 on that in the apartment 11 can be heard. To improve the quality of the audio signals 42 can have multiple microphones 14 , Especially directional microphones are provided. The processor 16 digitizes the audio signals 42 and forwards these over a communication network 18 , especially the internet 18 to a server 20 further. On the server 20 are appropriate algorithms 40 implements the audio signal 42 to be able to evaluate with regard to an alarm case. About the communication network 18 , in particular via a mobile network 18a , the server can 20 Data or messages to a second terminal 22 , especially a smartphone 22 a user, send. The user is the owner or owner of an apartment 11 in which the intelligent speaker 10 is set up. These messages can be as text messages 24 or as audio messages 26 be educated. Further, the server 20 over the communication network 18 with the police 32 connected.

Die Erfindung funktioniert nun wie folgt: Betreten Einbrecher 30 die Wohnung 11, so machen die Einbrecher 30 dabei verschiedene Arten von Geräuschen. Bei den Geräuschen kann es sich um Schritte, zerbrochene Scheiben oder um ein Gespräch handeln, das die beiden Einbrecher 30 führen. Diese Audiosignale 42 werden von dem Mikrofon 14 des intelligenten Lautsprechers 10 aufgezeichnet, vermittels des Prozessors 16 digitalisiert und über das Kommunikationsnetzwerk 18 an den Server 20 gesendet. Mittels Algorithmen 40, die Alarmfälle detektieren können und die auf dem Server 20 implementiert sind, wird das empfangene Audiosignal analysiert und festgestellt, ob ein möglicher Alarmfall vorliegt. Liegt ein Alarmfall vor, sendet der Server 20 über das Mobilfunknetz 18a eine Benachrichtigung an das Smartphone 22 des Nutzers. Haben sich die Einbrecher 30 unterhalten, kann diese Unterhaltung dem Nutzer als Textnachricht 24 oder als Audionachricht 26 wiedergegeben werden. Geräusche, wie zerbrochene Fensterscheiben oder Schritte, werden dem Nutzer als Audionachricht 26 wiedergegeben.The invention works as follows: Enter burglars 30 the apartment 11 so do the burglars 30 doing different types of sounds. The sounds can be steps, broken windows, or a conversation between the two burglars 30 to lead. These audio signals 42 be from the microphone 14 of the smart speaker 10 recorded by means of the processor 16 digitized and via the communication network 18 to the server 20 Posted. Using algorithms 40 who can detect alarms and those on the server 20 are implemented, the received audio signal is analyzed and it is determined whether there is a possible alarm case. If there is an alarm, the server sends 20 over the mobile network 18a a notification to the smartphone 22 of the user. Have the burglars 30 This conversation can be presented to the user as a text message 24 or as an audio message 26 be reproduced. Noises, like Broken windows or steps are presented to the user as an audio message 26 played.

Hierbei kann der Algorithmus 40 vorzugsweise die empfangenen Audiosignale 42 so filtern, dass die relevanten Geräusche dem Nutzer verstärkt abgespielt werden - beispielsweise Schritte oder eine zerbrechende Fensterscheibe. Der Nutzer kann hierauf bei Bedarf die Polizei 32 informieren oder selbst seine Wohnung 11 aufsuchen. Stellt der Algorithmus 40 bei der Analyse eine erhöhte Gefahrensituation fest, alarmiert der Server 20 automatisch die Polizei 32 über das Kommunikationsnetzwerk 18.This can be the algorithm 40 preferably the received audio signals 42 filter so that the relevant noises are amplified to the user - for example steps or a breaking window. The user can then on demand, the police 32 inform or even his apartment 11 attention. Represents the algorithm 40 When analyzing an increased danger situation, the server alerts 20 automatically the police 32 over the communication network 18 ,

In einer weiteren nicht gezeigten Ausführungsform kann das erste Endgerät 10 zudem eine Kameraeinheit aufweisen und sowohl aufgezeichnete Videos als auch Liveaufnahmen sowohl an das Smartphone 22 des Nutzers als auch an die Polizei 32 senden. Wird der auf dem Server 20 implementierte Algorithmus 40 aktualisiert, führt dies automatisch zu einer besseren Erkennungsgenauigkeit aller möglichen ersten Endgeräte 10.In a further embodiment not shown, the first terminal 10 also have a camera unit and both recorded video and live recordings both to the smartphone 22 the user as well as the police 32 send. Will that be on the server 20 implemented algorithm 40 updated, this automatically leads to a better recognition accuracy of all possible first devices 10 ,

2 zeigt eine Verwendung des intelligenten Lautsprechers aus 1 als Alarmanlage und als Babyphone. Das Mikrofon 14 des intelligenten Lautsprechers 10 kann sowohl die Audiosignale 42 eines Babys 34 als auch die Audiosignale 42 des Einbrechers 30 aufzeichnen und mittels des Prozessors 16 digitalisiert an den Server 20 weiterleiten. In dem Ausführungsbeispiel der 2 ist auf dem Server 20 ein Algorithmus implementiert, der zwischen den Geräuschen des Babys 34 und denen des Einbrechers 30 unterscheiden kann. Stellt der Algorithmus fest, dass es sich um ein Einbrecher 30 handelt, wird wie in 1 verfahren. Zusätzlich kann über die Lautsprechereinheit 12 auch ein Alarmton abgespielt werden oder dem Einbrecher 30 in seiner eigenen Sprache erklärt werden, dass die Polizei 32 schon auf dem Weg ist. 2 indicates use of the intelligent speaker 1 as an alarm system and as a baby monitor. The microphone 14 of the smart speaker 10 can both the audio signals 42 a baby 34 as well as the audio signals 42 the burglar 30 record and by means of the processor 16 digitized to the server 20 hand off. In the embodiment of 2 is on the server 20 An algorithm is implemented between the sounds of the baby 34 and those of the burglar 30 can differentiate. The algorithm determines that it is a burglar 30 is acting as in 1 method. In addition, via the speaker unit 12 also an alarm sound can be played or the burglar 30 be explained in his own language that the police 32 already on the way.

Stellt der Algorithmus jedoch nach der Analyse der Audiosignale fest, dass es sich bei den Audiosignalen 42 um das Baby 34 handelt, können wiederum durch den Server 20 Textnachrichten 24 oder Audionachricht 26 an den Nutzer des Smartphones 22 gesendet werden oder aber, falls ein medizinischer Notfall festgestellt wird, automatisiert ein Notarztwagen 36 benachrichtigt werden. 2 zeigt zudem, dass mehrere intelligente Lautsprecher 10, beispielsweise in verschiedenen Wohnungen 11, 11a, kombiniert werden können. In entsprechenden Datenbanken auf dem Server 20 können für die verschiedenen Wohnungen 11, 11a jeweils verschiedene Systemeinstellungen bzw. Referenzdatenbanken angelegt werden. Dies ist vor allem in Fällen zweckmäßig, wenn die Wohnung 11a ein Ferienhaus ist, das sich in einem anderen Land befindet.However, after analyzing the audio signals, the algorithm determines that it is the audio signals 42 around the baby 34 can act again through the server 20 text messages 24 or audio message 26 to the user of the smartphone 22 or, if a medical emergency is detected, an ambulance automates 36 be notified. 2 also shows that several smart speakers 10 for example in different apartments 11 . 11a , can be combined. In appropriate databases on the server 20 can for the different apartments 11 . 11a different system settings or reference databases are created. This is especially useful in cases when the apartment 11a a holiday home is located in another country.

Dem Nutzer kann in jedem möglichen Alarmfall eine Nachricht über den möglichen Alarmfall an sein Smartphone 22 gesendet werden als auch, dass das sowohl Echtzeit als auch aufgezeichnete Aufnahmen des Mikrofons 14 des intelligente Lautsprechers 10 auf das Smartphone 22 durchgestellt werden.The user can in every possible case of alarm a message about the possible alarm case to his smartphone 22 be sent as well that that both real-time and recorded footage of the microphone 14 of the intelligent loudspeaker 10 on the smartphone 22 be put through.

3 zeigt ein Ausführungsbeispiel des Algorithmus 40, der ermittelt, ob es sich bei dem durch das Mikrofon 14 aufgenommenen Audiosignal 42 um einen Alarmfall handelt. In 3 sind die von den Verzweigungen, beispielsweise von der Verzweigung 44, abgehenden horizontalen Linien jeweils mit 0 und 1 bezeichnet, wobei die „0“ ein „Nein“ und die „1“ ein „Ja“ als Antwort auf die jeweilige Entscheidungsfrage repräsentiert, die der Algorithmus 40 in der jeweiligen Verzweigung bearbeitet. Zur Verdeutlichung des Ablaufs des Algorithmus 40 wird dieser nachstehend entlang verschiedener Pfade durchlaufen. 3 shows an embodiment of the algorithm 40 , which determines if it is due to the microphone 14 recorded audio signal 42 is an alarm case. In 3 are those of the branches, for example of the branch 44 , outgoing horizontal lines respectively denoted by 0 and 1, where the "0" represents a "no" and the "1" represents a "yes" in response to the respective decision question that the algorithm 40 edited in the respective branch. To clarify the process of the algorithm 40 this will be traversed along different paths below.

Ausgangspunkt ist jeweils das Audiosignal 42. In der Verzweigung 44 wird analysiert, ob es sich bei dem Audiosignal 42 um ein Sprachsignal handelt. Liegt ein Sprachsignal vor, so läuft der Algorithmus in die Verzweigung 46 in welcher analysiert wird, ob dem Sprachsignal ein bekanntes Klangprofil bzw. ein bekanntes Sprachprofil zu Grunde liegt. Dieses bekannte Sprachprofil oder Klangprofil, das in einer Datenbank auf dem Server 20 hinterlegt ist, kann beispielsweise das Klangprofil des Nutzers sein. In diesem Fall liegt kein Alarmfall vor und der Algorithmus läuft in den Prozess 48 ein, welcher den Algorithmus 40 abbricht. Wird in der Verzweigung 46 hingegen verneint, dass es sich um ein bekanntes Klangprofil handelt, wird das Audiosignal 42 in dem Prozess 50 in einen Text umgewandelt. Der Algorithmus 40 erzeugt als nächster Schritt eine Mitteilung 52, die über das Mobilfunknetz 18a als Alarmmeldung an das Smartphone 22 des Nutzers gesendet wird.The starting point is always the audio signal 42 , In the branch 44 will analyze if it is the audio signal 42 is a voice signal. If there is a voice signal, the algorithm runs into the branch 46 in which it is analyzed whether the speech signal is based on a known sound profile or a known speech profile. This familiar language profile or sound profile, stored in a database on the server 20 can be, for example, the sound profile of the user. In this case there is no alarm and the algorithm is running in the process 48 one which the algorithm 40 aborts. Will be in the branch 46 but denies that it is a known sound profile, the audio signal 42 in the process 50 converted into a text. The algorithm 40 generates a message as the next step 52 that over the mobile network 18a as an alarm message to the smartphone 22 the user is sent.

Wird in der Verzweigung 44 hingegen verneint, dass es sich bei dem Audiosignal 42 um ein Sprachsignal handelt, so liegt ein Geräuschsignal vor. Der Algorithmus läuft also in der Folge in die Verzweigung 54 ein, in welcher überprüft wird, ob bei dem intelligenten Lautsprecher 10 bzw. in den Systemeinstellungen ein Überwachungsmodus aktiviert ist. Wird dies bejaht, läuft der Algorithmus in die Verzweigung 56 ein, in welcher überprüft wird, ob die Lautstärke des Audiosignals 42 einen gewissen festlegbaren Geräuschpegel überschreitet. Wird der Geräuschpegel überschritten, so liegt ein Alarmfall vor und es wird durch den Server eine Mitteilung 52 generiert, die über das Mobilfunknetz 18a an das Smartphone 22 des Nutzers gesendet wird. Wird der Geräuschpegel jedoch nicht überschritten, stellt der Algorithmus fest, dass kein Alarmfall vorliegt und der Algorithmus 40 wird in dem Prozess 48 abgebrochen.Will be in the branch 44 but denies that it is the audio signal 42 is a voice signal, so there is a noise signal. The algorithm thus runs in the sequence in the branch 54 one in which checks whether the intelligent speaker 10 or in the system settings a monitoring mode is activated. If yes, the algorithm will branch 56 in which checks whether the volume of the audio signal 42 exceeds a certain specifiable noise level. If the noise level is exceeded, there is an alarm case and it is by the server a message 52 generated via the mobile network 18a to the smartphone 22 the user is sent. However, if the noise level is not exceeded, the algorithm determines that there is no alarm and the algorithm 40 gets in the process 48 canceled.

Wird in der Verzweigung 54 verneint, dass der Überwachungsmodus des intelligenten Lautsprechers 10 aktiviert ist, wird in der Verzweigung 58 überprüft, ob das Audiosignal 42 Geräuschen zugeordnet werden kann, die in der Datenbank auf dem Server 20 hinterlegt sind und die einen Alarmfall kennzeichnen. Wird dies bejaht, generiert der Server 20 eine Mitteilung 52 und sendet diese an das Smartphone 22 des Nutzers, wohingegen bei einer fehlenden Übereinstimmung des Audiosignals 42 mit hinterlegten Geräuschen in der Datenbank der Algorithmus in den Prozess 48 einläuft und abgebrochen wird.Will be in the branch 54 denies that the monitoring mode of the intelligent speaker 10 is activated, is in the branch 58 Checks if the audio signal 42 Noise can be allocated in the database on the server 20 are deposited and which characterize an alarm case. If yes, the server generates 20 a message 52 and sends it to the smartphone 22 of the user, whereas in case of a mismatch of the audio signal 42 with deposited sounds in the database the algorithm in the process 48 enters and is canceled.

Der vorstehend beschriebene Algorithmus 40 soll nicht als Beschränkung der Algorithmen angesehen werden, die von der Erfindung umfasst werden. Beispielsweise sei in diesem Zusammenhang noch erwähnt, dass bei der Verwendung des intelligenten Lautsprechers 10 als Babyphone parallel zur Verwendung als Alarmanlage, das Audiosignal 42 zunächst in eine Verzweigung einlaufen würde, die entscheiden sollte, ob es sich um ein Audiosignal 42 des Babys handelt. Die beschriebenen Merkmale der Erfindung können also zu einer Vielzahl von Algorithmen kombiniert werden, die allesamt von der Erfindung erfasst werden.The algorithm described above 40 should not be construed as limiting the algorithms encompassed by the invention. For example, it should be mentioned in this context that when using the intelligent speaker 10 as a baby monitor in parallel to use as an alarm system, the audio signal 42 would first run into a branch, which should decide if it is an audio signal 42 of the baby. The described features of the invention can thus be combined into a variety of algorithms, all of which are covered by the invention.

Claims

A method for alerting a user, wherein an intelligent loudspeaker comprising a microphone (14) is connected as the first terminal (10) of the user by means of a communication network (18) to a server (20) and placed in an environment (11) to be monitored, wherein the microphone (14) is set in a recording state and receives audio signals (42) of the environment (11) to be monitored, wherein the audio signals (42) are analyzed for a possible alarm case, wherein an algorithm (40) determines whether the audio signal is based on a voice signal or a non-linguistically based noise signal, wherein a voice profile is extracted from the voice signal and the voice profile is compared with stored in a database profiles of people who the monitored environment (11) are assigned, wherein the server (20) sends the user a message (24, 26) to a second terminal (22) of the user in the presence of the possible alarm via the communication network (18a) when a first threshold is exceeded, wherein a second threshold, which is higher than the first threshold, is provided, and that when the second threshold value is exceeded, authorities and / or security companies are informed automatically via the communication network (18) about the possible alarm case.

Method according to one of the preceding claims, characterized in that the first terminal (10) forwards the audio signals (42) by means of a processor (16) to the server (20) connected to the communication network (18) and in that the audio signals (42) the server with regard to the possible alarm case.

Method according to Claim 1 characterized in that a speech recognition algorithm is applied to the speech signal, wherein the speech recognition algorithm converts the speech signal to text and the server (20) sends the text as a message to the second terminal (22).

Method according to Claim 1 , characterized in that the noise signal is compared with stored in a database database of noise signals and / or that is determined from a definable noise level of the possible alarm.

Method according to one of the preceding claims, characterized in that when exceeding the second threshold value, the first terminal (10) by means of a loudspeaker (12) plays an alarm signal and / or simulates a conversation.

Use of a first terminal (10) comprising a microphone (14) and connected to a communication network (18) suitable for a method according to one of the Claims 1 to 5 as an alarm or as a baby monitor.

System suitable for carrying out a method according to one of Claims 1 to 5 ,