DE102019218291A1

DE102019218291A1 - Communication system for telephone and / or video conferences in vehicles

Info

Publication number: DE102019218291A1
Application number: DE102019218291.7A
Authority: DE
Inventors: Franz Petzoldt; Manuel Joachim
Original assignee: Volkswagen AG
Current assignee: Volkswagen AG
Priority date: 2019-11-26
Filing date: 2019-11-26
Publication date: 2021-05-27

Abstract

Die Erfindung betrifft ein Kommunikationssystem (10) für Telefon- und/oder Videokonferenzen in Fahrzeugen sowie ein Fahrzeug umfassend solch ein Kommunikationssystem (10).Es ist vorgesehen, dass ein Kommunikationssystem (10) bereitgestellt wird. Solch ein System (10) umfasst dabei ein Telefon- und/oder Videokonferenzsystem (12), eine Innenraumkamera (14) und eine mit den jeweils zuvor genannten Komponenten gekoppelte Steuer- und Recheneinheit (16) mit einem Ausführungsprogramm (18), welches zumindest ein Gesichtserkennungsprogramm (20) umfasst, sodass mittels des Telefon- und/oder Videokonferenzsystems (12) und/oder mittels der Innenraumkamera (14) zu einem jeweiligen Fahrzeuginsassen ein im Ausführungsprogramm (18) hinterlegtes personifiziertes Profil verknüpfbar und visuell anzeigbar ist. Die Steuer- und Recheneinheit (16) ist dabei ausgelegt jeweilige von den einzelnen Komponenten des Kommunikationssystems (10) entgegengenommenen Informationen entsprechend ihrer Quelle im Fahrzeug (24) zu jeweiligen begrenzten und zuvor benutzerdefiniert eingeteilten Zonen (32 a, b, c, d, e, f) in dem Fahrzeug (24) zuzuweisen und umfasst zudem ein Mimik-Detektionsprogramm (22), welches ausgelegt ist, jeweilige erfassten Mundbewegungen der Fahrzeuginsassen auszuwerten, sodass aufgrund der ausgewerteten Mundbewegungen und der zugewiesenen Zonen (32 a, b, c, d, e, f) ein aktiv sprechender Fahrzeuginsasse durch wenigstens eine ausgelöste Aktion kennzeichenbar ist.The invention relates to a communication system (10) for telephone and / or video conferences in vehicles and to a vehicle comprising such a communication system (10). Provision is made for a communication system (10) to be provided. Such a system (10) comprises a telephone and / or video conference system (12), an interior camera (14) and a control and computing unit (16) coupled to the aforementioned components with an execution program (18) which contains at least one Face recognition program (20) so that by means of the telephone and / or video conference system (12) and / or by means of the interior camera (14) a personalized profile stored in the execution program (18) can be linked and visually displayed for a respective vehicle occupant. The control and computing unit (16) is designed for the respective information received from the individual components of the communication system (10) according to its source in the vehicle (24) for the respective limited and previously user-defined zones (32 a, b, c, d, e) , f) in the vehicle (24) and also includes a facial expression detection program (22) which is designed to evaluate the respective recorded mouth movements of the vehicle occupants so that based on the evaluated mouth movements and the assigned zones (32 a, b, c, d , e, f) an actively speaking vehicle occupant can be identified by at least one triggered action.

Description

Die Erfindung betrifft ein Kommunikationssystem für Telefon- und/oder Videokonferenzen in Fahrzeugen sowie ein Fahrzeug umfassend solch ein Kommunikationssystem.The invention relates to a communication system for telephone and / or video conferences in vehicles and to a vehicle comprising such a communication system.

Fahrzeuge sind in erster Linie für den Transport von Fahrzeuginsassen und Gütern innerhalb eines geographischen Raumes von einem Ort zum nächsten vorgesehen. Um die dabei anfallenden Fahrtzeiten nicht ungenutzt verstreichen zu lassen, bieten heutige Fahrzeuge bereits eine Reihe von Zusatzsystemen und zugehörigen Geräten. In diesem Zusammenhang sind beispielsweise bereits Videokonferenzsysteme bekannt, welche sich in einem Fahrzeug auch während der Fahrt anwenden lassen. Viele dieser Systeme konzentrieren sich dabei meist nur auf einen Nutzer im Fahrzeug, sodass dieser Nutzer dann entsprechend alle Anwendungen rund um ein Telefon- und Videokonferenzsystem gezielt nutzen kann. In Situationen, in denen sich im Fahrzeug mehr als ein Nutzer beziehungsweise Fahrzeuginsasse befinden, wird dabei meist dennoch nur ein Einwählmedium angezeigt, sodass für einen ebenfalls aktiven Teilnehmer der Konferenz außerhalb des Fahrzeugs nicht ersichtlich ist, welche Personen sich das entsprechende Einwählmedium teilen. Externe Teilnehmer einer solchen Telefonbeziehungsweise Videokonferenz wollen aber häufig aufgrund unterschiedlicher Interessen wissen, wer sich außer dem aktuellen Gesprächspartner noch in dem Fahrzeug befindet. Parallel zu solchen Telefon- und Videokonferenzsystemen werden in der Praxis deswegen auch häufig jeweilige mobile Telefone verwendet. Dabei wählen sich alle Nutzer parallel in den Termin ein und schalten dabei ihre Telefone stumm. Somit ist dann über das jeweilige Telefon sichtbar, wer an der Telefon- beziehungsweise Videokonferenz teilnimmt. Dieser Umgehungsweg des ansonsten im Fahrzeug vorgehaltenen Systems kann als umständlich und aufwendig empfunden werden, sodass auch diese Umgehungslösung kaum genutzt wird. Aus dem Stand der Technik sind bereits weitere Lösungen als bekannt zu entnehmen. Einige Beispiele werden nachfolgend kurz vorgestellt.Vehicles are primarily intended for the transport of vehicle occupants and goods within a geographical area from one location to the next. In order not to let the resulting travel times pass by unused, today's vehicles already offer a number of additional systems and associated devices. In this context, video conference systems are already known, for example, which can also be used in a vehicle while driving. Many of these systems mostly concentrate on only one user in the vehicle, so that this user can then use all applications relating to a telephone and video conference system in a targeted manner. In situations in which there is more than one user or vehicle occupant in the vehicle, only one dial-in medium is usually displayed, so that an active participant in the conference outside the vehicle cannot see which people are sharing the corresponding dial-in medium. However, external participants in such a telephone or video conference often want to know, due to different interests, who is still in the vehicle apart from the current conversation partner. For this reason, respective mobile telephones are often used in parallel to such telephone and video conference systems. All users dial into the appointment at the same time and switch their phones to mute. This means that it is then visible via the respective telephone who is participating in the telephone or video conference. This bypassing the system otherwise kept in the vehicle can be perceived as cumbersome and expensive, so that this bypassing solution is hardly used either. Further solutions than known can already be found in the prior art. Some examples are briefly presented below.

So ist aus der Druckschrift GB 25 250 39 A ein in ein Fahrzeug integriertes audiovisuelles Kommunikationssystem als bekannt zu entnehmen. Insbesondere weist solch ein audiovisuelles Kommunikationssystem zur Verwendung in einem Fahrzeug mehrere Benutzerschnittstelleneinheiten auf, welche Sitzplätzen zugeordnet sind, und eine Steuereinheit, um eine selektive Kommunikation zwischen einer dieser Schnittstelleneinheiten oder zwischen diesen Schnittstelleneinheiten zu ermöglichen, und Remote-Interface-Einheiten (in Verbindung mit dem Internet oder Mobilfunknetzen). Die Schnittstelleneinheiten umfassen eine visuelle Anzeigeeinheit, eine Audiokommunikationsschnittstelle und eine Kamera. Ein Sitzplan auf dem Bildschirm kann auf der visuellen Anzeige zusammen mit Bildern bereitgestellt werden, die von den Kameras der anderen Einheiten bereitgestellt werden, um eine selektive Kommunikation zwischen Fahrgästen und/oder dem Fahrzeugführer zu ermöglichen und zu steuern. Sensoren können feststellen, ob ein Sitz belegt ist, und so die Kamera für die Sitzposition aktivieren. Die Benutzerschnittstelleneinheiten können in Sitzlehnen, Kopfstützen oder im Armaturenbrett montiert werden. In den Schnittstelleneinheiten können Anschlüsse für das Mikrofon und den Lautsprecher vorgesehen sein. Die Kommunikation zwischen den Schnittstelleneinheiten und der Steuereinheit kann über festgelegte permanente Verbindungen oder drahtlose Kanäle erfolgen. Das System ermöglicht Videokonferenzen innerhalb eines Fahrzeugs. Mit der Gesichtserkennung können Personen identifiziert und ihr Profil angezeigt werden.So is from the pamphlet GB 25 250 39 A an audio-visual communication system integrated into a vehicle can be found as known. In particular, such an audiovisual communication system for use in a vehicle has a plurality of user interface units, which are assigned to seats, and a control unit to enable selective communication between one of these interface units or between these interface units, and remote interface units (in connection with the Internet or cellular networks). The interface units include a visual display unit, an audio communication interface and a camera. A seat map on the screen can be provided on the visual display along with images provided by the cameras of the other units to enable and control selective communication between passengers and / or the vehicle driver. Sensors can determine whether a seat is occupied and thus activate the camera for the seating position. The user interface units can be mounted in seat backs, headrests or in the dashboard. Connections for the microphone and the loudspeaker can be provided in the interface units. The communication between the interface units and the control unit can take place via fixed permanent connections or wireless channels. The system enables video conferencing within a vehicle. Face recognition can identify people and display their profile.

Aus der Druckschrift JP 2007 074081 A ist ein Kommunikationsgerät für Fahrzeuge als bekannt zu entnehmen. Ein erklärtes Ziel ist dabei das reibungslosere Durchführen einer Kommunikation in einer fahrzeuginternen Kommunikationsvorrichtung, die an einem Fahrzeug angebracht ist, um eine Kommunikation unter Verwendung einer Videotelefonfunktion mit einer anderen Kommunikationsvorrichtung durchzuführen. Die fahrzeugseitige Kommunikationsvorrichtung ist dabei mit einer Fahrzeugkabinen-Kamera zum Fotografieren eines Bildes versehen, das alle Insassen im Fahrzeug enthält. Zudem ist eine Bildsegmentierungseinheit zum Segmentieren des Bildes eines Zielbereichs pro Passagier aus dem Bild vorgesehen, das alle Passagiere enthält, die mit der Kabinenkamera fotografiert wurden. Eine Äußerstenpositions-Bestimmungsvorrichtung zum Auswählen eines auf den äußersten fokussierten Bereichs aus dem durch die Bildsegmentierungseinheit segmentierten Bild ist vorgesehen. Zudem ist eine Kommunikationsvorrichtung zum Übertragen des Bildes des Bereichs, der auf den Äußersten fokussiert ist, der von der Äußerstenpositions-Bestimmungsvorrichtung ausgewählt wird, zu einer fahrzeugseitigen Kommunikationsvorrichtung einer Kommunikationspartei vorgesehen.From the pamphlet JP 2007 074081 A a communication device for vehicles can be found as known. A stated aim is to more smoothly carry out communication in an in-vehicle communication device attached to a vehicle in order to carry out communication using a video telephone function with another communication device. The vehicle-side communication device is provided with a vehicle cabin camera for photographing an image that contains all the occupants in the vehicle. In addition, an image segmentation unit is provided for segmenting the image of a target area per passenger from the image, which contains all passengers who were photographed with the cabin camera. An outermost position determining device for selecting an outermost focused area from the image segmented by the image segmentation unit is provided. In addition, a communication device is provided for transmitting the image of the area focused on the outermost selected by the outermost position determining device to an in-vehicle communication device of a communication party.

Der Erfindung liegt nun die Aufgabe zugrunde, ein alternatives Kommunikationssystem für Telefon- und/oder Videokonferenzen in Fahrzeugen bereitzustellen, welches einen erhöhten Komfort für die Nutzer aufweist.
In bevorzugter Ausgestaltung der Erfindung ist vorgesehen, dass ein Kommunikationssystem für Telefon- und/oder Videokonferenzen in Fahrzeugen bereitgestellt wird. Solch ein System umfasst dabei ein systemeigenes und/oder fahrzeugeigenes Telefon- und/oder Videokonferenzsystem, welches ausgelegt ist, jeweiligen Fahrzeuginsassen an jeweiligen Sitzpositionen in einem Fahrzeug zu ermöglichen an einer Telefon- und/oder Videokonferenz aktiv teilzunehmen, eine systemeigene und/oder fahrzeugeigene Innenraumkamera, welche ausgelegt ist, jeweilige Sitzpositionen und sich dort aufhaltende Fahrzeuginsassen in dem Fahrzeug zu erfassen und eine mit den jeweils zuvor genannten Komponenten gekoppelte Steuer- und Recheneinheit mit einem Ausführungsprogramm, welches zumindest ein Gesichtserkennungsprogramm umfasst, sodass mittels des Telefon- und/oder Videokonferenzsystem und/oder mittels der Innenraumkamera zu einem jeweiligen Fahrzeuginsassen ein im Ausführungsprogramm hinterlegtes personifiziertes Profil verknüpfbar und visuell anzeigbar ist. Die Steuer- und Recheneinheit mit dem Auswerteprogramm ist dabei ausgelegt, jeweilige von den einzelnen Komponenten des Kommunikationssystems entgegengenommenen Informationen entsprechend ihrer Quelle im Fahrzeug zu jeweiligen begrenzten und zuvor benutzerdefiniert eingeteilten Zonen in dem Fahrzeug zuzuweisen und die Steuer- und Recheneinheit mit dem Auswerteprogramm umfasst zudem ein Mimik-Detektionsprogramm, welches ausgelegt ist, jeweilige mittels des Telefon- und/oder Videokonferenzsystems und/oder der Innenraumkamera erfassten Mundbewegungen der Fahrzeuginsassen auszuwerten, sodass aufgrund der ausgewerteten Mundbewegungen und der zugewiesenen Zonen ein aktiv sprechender Fahrzeuginsasse durch wenigstens eine ausgelöste Aktion kennzeichenbar ist. Auf diese Weise ist es möglich, ein Kommunikationssystem für Telefon- und/oder Videokonferenzen in Fahrzeugen hervorzubringen, welches einen erhöhten Komfort für die Nutzer bereitstellt. Das systemeigene und/oder fahrzeugeigene Telefon- und/oder Videokonferenzsystem kann dabei jeweils so vorgesehen sein, dass auch bereits im Fahrzeug für diese Zwecke nützliche und nötige Hardware-Komponenten integriert beziehungsweise genutzt werden können. Somit können entsprechende Hardware-Kosten eingespart werden, da keine zusätzlichen Kosten auftreten. Auch die Innenraumkamera kann demnach bereits im Fahrzeug vorgesehen sein. Beispielsweise kann diese Innenraumkamera am Dachhimmel positioniert sein, sodass jegliche Sitzposition und die dort sich befindlichen Fahrzeuginsassen besonders gut erfasst werden können. Die vorgestellte Kombination aus der Zuordnung einer Quelle von erhobenen Informationen und den ausgewerteten Mundbewegungen weist den Vorteil auf, dass somit besonders präzise der jeweils aktiv sprechende Fahrzeuginsasse gekennzeichnet werden kann. Erst diese Verschneidung von zwei unterschiedlichen Bestimmungen über die Fahrzeuginsassen vermeidet somit, dass eine Fehlinterpretation zu einer falschen Kennzeichnung führt. Wenn beispielsweise ein Geräusch in einer Zone detektiert wird, beispielsweise eine von einem Fremdgerät wiedergegebene menschliche Stimme, sorgt erst die Überprüfung beziehungsweise die Auswertung der Mundbewegungen dafür, dass die richtigen Schlüsse gezogen werden können. In diesem Fall könnte somit erkannt werden, dass ein Fahrzeuginsasse in dieser Zone keinerlei Mundbewegungen aufweist und somit folgerichtig trotz der Detektion eines Geräusches von dieser Quelle dieser Fahrzeuginsasse nicht der aktiv sprechende Teilnehmer der Konferenz ist. Da während einer solchen Konferenz auch Teilnehmer außerhalb des Fahrzeugs involviert sein können und in den meisten Fällen auch sind, kann somit die Orientierung und der Komfort mittels des vorgestellten Kommunikationssystems stark erhöht werden. Die Fahrzeuginsassen untereinander können nämlich noch ihre eigenen über ihre jeweiligen Sinne erfassten Informationen nutzen, um die Situation zu bewerten. Beispielsweise sehen sie nicht nur einen während der Konferenz bereitgestellten Bildausschnitt, sondern können diesen in die reelle Umgebung in dem Fahrzeug sinngemäß einfügen. Auch können sie bei einer reinen akustischen Konferenz oder bei schlechter Bildqualität, wenn also entsprechend das gesprochene Wort zählt, weitere Geräusche beziehungsweise eine Geräuschkulisse im Fahrzeug anders bewerten als ein externer Teilnehmer, welcher mitunter nur über Mikrofone aufgenommene Geräusche wahrnimmt. Das vorgestellte Kommunikationssystem umfasst dabei ein hochsensibles Mimik-Detektionsprogramm. Dieses unterscheidet sich wesentlich von dem verwendeten Gesichtserkennungsprogramm, wenngleich zumindest teilweise gleiche erfasste Daten von Gesichtern der Fahrzeuginsassen für beide Anwendungen verwendet werden können. Der große Unterschied besteht vor allem darin, dass das Mimik-Detektionsprogramm ausgelegt ist, dynamisch eine Reihe von Bewegungsdaten, insbesondere eines Mundbereiches einer Zielperson, folgerichtig zu entschlüsseln beziehungsweise auszuwerten. Während das Gesichtserkennungsprogramm lediglich beispielsweise einen Abgleich von einzelnen Datenpunkten in Form von beispielsweise Abmessungen einer Augenpartie zu einer Kinnspitze und so weiter vornimmt, erkennt das Mimik-Detektionsprogramm fortlaufende Bewegungsmuster und kann beispielsweise über einen Abgleich mit Vergleichsbewegungsmustern oder aufgrund von typischen Mundbewegungsmustern für gängige Worte sofort folgerichtig eine sprechende Mundbewegung erkennen. Somit kann beispielsweise das vorgesehene Mimik-Detektionsprogramm auch eine Kaubewegung von einer Bewegung im Zusammenhang mit ausgeführten Sprechbewegungen unterscheiden. Bewegt hingegen ein Fahrzeuginsasse nur seinen Mund, ohne dass dabei akustische Laute geformt werden, beispielsweise weil dieser Fahrzeuginsasse lediglich für sich einen Text leise und somit kaum hörbar für sich selbst vorliest oder sogar nur in Gedanken die Lippen beim Lesen mitbewegt, kann über die Verschneidung der ermittelten Informationen aus den jeweiligen Zonen dennoch eine folgerichtige Kennzeichnung des aktiv sprechenden Teilnehmers im Fahrzeug vollzogen werden. Da alle Fahrzeuginsassen gleichermaßen erfasst und deren Handlungen ausgewertet werden, kann mittels eines besonders hochempfindlich eingestellten Kommunikationssystems sogar erkannt werden, welche Teilnehmer aktiv für die Konferenz sprechen und welche Teilnehmer sich im Fahrzeug lediglich untereinander unterhalten. Dies kann beispielsweise aufgrund einer Auswertung mittels des Auswerteprogramms und den bereitgestellten Informationen der Innenraumkamera vollzogen werden. Mit anderen Worten kann mittels des vorgestellten Kommunikationssystems ein erhöhter Komfort bei einer durchgeführten Telefon- und/oder Videokonferenz erreicht werden, da zuverlässig ein jeweiliger aktiv sprechender Teilnehmer im Fahrzeug zielsicher gekennzeichnet werden kann. Im Zusammenhang mit dem visuell anzeigbaren jeweiligen Profilen kann so beispielsweise ein externer Teilnehmer sehr genau der Konferenz in dem fahrenden und weitentfernten Fahrzeug folgen und somit sehr komfortabel und effizient an dieser Konferenz partizipieren. Durch die kamerabasierte Sprecherkennung in Kombination mit den zuvor erläuterten Zusammenhängen kann den anderen Teilnehmern der Konferenz immer angezeigt werden, mit wem sie sich im Moment unterhalten. Durch die Erkennung von Mundbewegungen (Sprechen) und durch die Unterteilung in verschiedene Zonen (beispielweise sogenannte Akustikbereiche, welche auch als sogenannte Sound-Zonen (Sound = Geräusch) betrachtet werden können) ist es zudem möglich, immer den Sprecher zu kennzeichnen. Beispielsweise kann das vorgestellte System im Zusammenhang mit einer Skype-Konferenz (InCarOffice) angewendet werden, wobei durch die bereitgestellte Funktionalität des Systems die Möglichkeit gegeben ist, alle im Fahrzeug teilnehmenden Insassen nicht nur anzuzeigen, sondern den jeweiligen aktiv sprechenden Insassen zu kennzeichnen.The invention is now based on the object of providing an alternative communication system for telephone and / or video conferences in vehicles which is more convenient for the user.
In a preferred embodiment of the invention it is provided that a communication system for telephone and / or video conferences is provided in vehicles. Such a system comprises a system-specific and / or vehicle-specific telephone and / or video conference system which is designed to allow respective vehicle occupants to be seated at respective seat positions in a vehicle make it possible to actively participate in a telephone and / or video conference, a system-internal and / or vehicle-internal camera that is designed to record the respective seat positions and vehicle occupants in the vehicle and a control and processing unit coupled with the components mentioned above an execution program, which includes at least one face recognition program, so that by means of the telephone and / or video conference system and / or by means of the interior camera a personalized profile stored in the execution program can be linked and visually displayed to a respective vehicle occupant. The control and processing unit with the evaluation program is designed to assign the respective information received by the individual components of the communication system according to its source in the vehicle to the respective limited and previously user-defined zones in the vehicle and the control and processing unit with the evaluation program also includes a Facial expression detection program, which is designed to evaluate respective mouth movements of the vehicle occupants detected by means of the telephone and / or video conference system and / or the interior camera, so that an actively speaking vehicle occupant can be identified by at least one triggered action based on the evaluated mouth movements and the assigned zones. In this way it is possible to produce a communication system for telephone and / or video conferences in vehicles which provides increased comfort for the users. The system-internal and / or vehicle-internal telephone and / or video conference system can in each case be provided in such a way that hardware components that are useful and necessary for these purposes can also be integrated or used in the vehicle. Corresponding hardware costs can thus be saved, since no additional costs arise. The interior camera can therefore also already be provided in the vehicle. For example, this interior camera can be positioned on the headliner so that any seat position and the vehicle occupants located there can be recorded particularly well. The presented combination of the assignment of a source of collected information and the evaluated mouth movements has the advantage that the vehicle occupant who is actively speaking can be identified particularly precisely. Only this intersection of two different provisions on the vehicle occupants avoids a misinterpretation leading to a wrong identification. If, for example, a noise is detected in a zone, for example a human voice reproduced by a third-party device, only the checking or evaluation of the mouth movements ensures that the correct conclusions can be drawn. In this case it could thus be recognized that a vehicle occupant in this zone does not have any mouth movements and consequently, despite the detection of a noise from this source, this vehicle occupant is not the actively speaking participant of the conference. Since participants outside the vehicle can and in most cases also are involved during such a conference, orientation and comfort can be greatly increased by means of the communication system presented. This is because the vehicle occupants among each other can still use their own information recorded via their respective senses in order to assess the situation. For example, they not only see an image section made available during the conference, but can also insert it into the real environment in the vehicle. In the case of a purely acoustic conference or in the case of poor image quality, i.e. if the spoken word counts accordingly, they can evaluate further noises or background noise in the vehicle differently than an external participant who sometimes only perceives noises recorded via microphones. The presented communication system includes a highly sensitive facial expression detection program. This differs significantly from the face recognition program used, although at least partially the same recorded data from the faces of the vehicle occupants can be used for both applications. The main difference is that the facial expression detection program is designed to dynamically decipher or evaluate a series of movement data, in particular of the mouth area of a target person, in a consistent manner. While the face recognition program only compares individual data points, for example, in the form of, for example, the dimensions of an eye area to the tip of the chin and so on, the facial expression detection program recognizes continuous movement patterns and can, for example, immediately make consistent use of a comparison with comparison movement patterns or on the basis of typical mouth movement patterns for common words recognize a speaking mouth movement. Thus, for example, the facial expression detection program provided can also distinguish a chewing movement from a movement in connection with executed speech movements. If, on the other hand, a vehicle occupant only moves their mouth without acoustic sounds being formed, for example because this vehicle occupant only reads a text quietly and thus barely audible to himself or even only moves his lips in his mind while reading, the intersection of the If information from the respective zones is determined, a consistent identification of the actively speaking participant in the vehicle be carried out. Since all vehicle occupants are recorded equally and their actions are evaluated, a particularly highly sensitive communication system can even be used to identify which participants are actively speaking for the conference and which participants are only talking to one another in the vehicle. This can be done, for example, on the basis of an evaluation using the evaluation program and the information provided by the interior camera. In other words, by means of the communication system presented, increased comfort can be achieved when a telephone and / or video conference is carried out, since a respective actively speaking participant in the vehicle can be reliably identified in a targeted manner. In connection with the respective profiles that can be visually displayed, an external participant can, for example, follow the conference very precisely in the driving and far-away vehicle and thus participate very comfortably and efficiently in this conference. Thanks to the camera-based speaker recognition in combination with the contexts explained above, the other participants in the conference can always be shown who they are talking to at the moment. The recognition of mouth movements (speaking) and the subdivision into different zones (e.g. so-called acoustic areas, which can also be viewed as so-called sound zones (sound = noise)) also make it possible to always identify the speaker. For example, the system presented can be used in connection with a Skype conference (InCarOffice), the functionality provided by the system not only making it possible to not only display all the occupants participating in the vehicle, but also to identify the respective actively speaking occupant.

In weiterer bevorzugter Ausgestaltung der Erfindung ist vorgesehen, dass ein Fahrzeug umfassend ein Kommunikationssystem gemäß einem der Ansprüche 1 bis 9 bereitgestellt wird. Die zuvor genannten Vorteile gelten soweit übertragbar gleichermaßen für das vorgestellte Fahrzeug.In a further preferred embodiment of the invention it is provided that a vehicle comprising a communication system according to one of claims 1 to 9 is provided. The advantages mentioned above apply equally to the presented vehicle, insofar as they are transferable.

Weitere bevorzugte Ausgestaltungen der Erfindung ergeben sich aus den übrigen, in den Unteransprüchen genannten Merkmalen.Further preferred embodiments of the invention emerge from the other features mentioned in the subclaims.

So ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass das Gesichtserkennungsprogramm ausgelegt ist jeweilige Fahrzeuginsassen entweder über eine Abgleichroutine mit einer in der Steuer- und Recheneinheit hinterlegten Biometrie-Datenbank mit benutzerdefiniert eingebbaren biometrischen Profilen zu identifizieren und/oder ausgelegt ist, jeweilige Fahrzeuginsassen mittels während einer Aktivierungsphase des Kommunikationssystems erlernten Zuweisungsroutine zu identifizieren. Beispielsweise ist es somit möglich über die Innenraumkamera, welche zum Beispiel eine Multifunktions-Innenraumkamera (MIK) für Fahrzeuge sein kann und bereits in dem Fahrzeug, in welchem das Kommunikationssystem integriert ist, vorgesehen sein kann, im Dachmodul des Fahrzeugs den gesamten Innenraum des Fahrzeugs zu überwachen und dabei alle Insassen zu identifizieren. Dies kann beispielsweise, sofern entsprechende biometrische Templates (template = Vorlage) vorhanden sind, über einen Abgleich mit der Datenbank erfolgen. Diese Datenbank kann beispielsweise eine firmeninterne sein, welche somit entsprechende Angaben der Mitarbeiter umfasst. In diesem Zusammenhang ist es zudem vorteilhafterweise möglich, dass jegliche benutzerdefiniert einstellbaren weiteren Informationen bereitgestellt werden. Zum Beispiel kann so ein Profil neben den eigentlichen Namen auch den Titel beziehungsweise Angaben über die jeweilige Stelle im Betrieb umfassen. Auch kann eine erlernte Zuordnungsroutine vorgesehen sein, wobei beispielweise vor jeder Fahrt beim Einsteigen in das Fahrzeug ein Blick in die Innenraumkamera mit Angaben über einen jeweiligen Namen vorgesehen ist. Ein Fahrzeuginsasse steigt demnach in das Fahrzeug ein, schaut kurz in die Kamera und sagt seinen Namen. Optional kann zudem noch angegeben werden, in welcher Zone beziehungsweise auf welchem Sitzplatz dieser Insasse sitzen wird. Diese Angaben erleichtern es einem selbstlernenden System eine während der anstehenden Fahrt durchgeführte Konferenz mit hohem Komfort zu unterstützen.In a further preferred embodiment of the invention it is provided that the face recognition program is designed to identify respective vehicle occupants either via a comparison routine with a biometric database stored in the control and computing unit with user-defined biometric profiles and / or is designed to identify respective vehicle occupants by means of to identify learned assignment routine during an activation phase of the communication system. For example, it is thus possible via the interior camera, which can be a multifunction interior camera (MIK) for vehicles and can already be provided in the vehicle in which the communication system is integrated, to view the entire interior of the vehicle in the roof module of the vehicle monitor and identify all occupants. This can be done, for example, if corresponding biometric templates are available, via a comparison with the database. This database can, for example, be internal to the company, which thus includes corresponding information from the employees. In this context, it is also advantageously possible for any further information that can be set in a user-defined manner to be provided. For example, such a profile can include not only the actual name but also the title or information about the respective position in the company. A learned assignment routine can also be provided, for example a look into the interior camera with information about a respective name before each trip when getting into the vehicle. A vehicle occupant gets into the vehicle, looks briefly into the camera and says his name. Optionally, it can also be specified in which zone or on which seat this occupant will be seated. This information makes it easier for a self-learning system to support a conference held during the upcoming trip with a high level of comfort.

Auch ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass die wenigstens eine ausgelöste Aktion eine Hervorhebung des jeweils aktiv sprechenden und an der Telefon- und/oder Videokonferenz teilnehmenden Fahrzeuginsassen umfasst, wobei die Hervorhebung akustische und/oder visuelle Merkmale umfasst und/oder wobei die wenigstens eine Aktion eine automatische Einbindung des aktiv sprechenden Fahrzeuginsassen in das Telefon- und/oder Videokonferenzsystem umfasst. Somit kann beispielsweise in jeweiligen eingebundenen Wiedergabemedien eine entsprechende visuelle Kennzeichnung vorgenommen werden. Diese kann dann komfortabel beispielsweise von einem externen Teilnehmer registriert werden. Akustische Merkmale können beispielsweise in Form von einer lauteren Wiedergabe von Wortlauten des aktiv sprechenden Fahrzeuginsassen resultieren. Auch kann somit sichergestellt werden, dass ein neu hinzustoßender Fahrzeuginsasse automatisch in die Konferenz eingebunden wird. Dies kann somit spätestens dann geschehen, wenn er oder sie selbst das Wort ergreift.In a further preferred embodiment of the invention it is also provided that the at least one triggered action includes a highlighting of the vehicle occupant who is actively speaking and participating in the telephone and / or video conference, the highlighting including acoustic and / or visual features and / or where the at least one action comprises an automatic integration of the actively speaking vehicle occupant into the telephone and / or video conference system. Thus, for example, a corresponding visual identification can be made in the respective integrated playback media. This can then be conveniently registered by an external participant, for example. Acoustic features can result, for example, in the form of a louder reproduction of wording by the actively speaking vehicle occupant. It can also be ensured in this way that a new vehicle occupant who joins is automatically included in the conference. This can happen at the latest when he or she takes the floor.

Ferner ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass das Telefon- und/oder Videokonferenzsystem wenigstens eine Anzeigenvorrichtung, wenigstens eine Kameravorrichtung, wenigstens eine Lautsprechervorrichtung und wenigstens eine Mikrofonvorrichtung umfasst oder wobei die benutzerdefiniert eingeteilten Zonen in dem Fahrzeug jeweils einen Sitzplatz für einen Fahrzeuginsassen pro Zone umfassen und pro Zone wenigstens eine Anzeigenvorrichtung, wenigstens eine Kameravorrichtung, wenigstens eine Lautsprechervorrichtung und wenigstens eine Mikrofonvorrichtung vorgesehen ist, wobei die jeweiligen Anzeigenvorrichtungen ausgelegt sind, zumindest die teilnehmenden Fahrzeuginsassen in dem Fahrzeug mit ihrem jeweiligen personifizierten Profil und den jeweiligen aktiv sprechenden Fahrzeuginsassen kennzeichnend darzustellen, wobei die ausgelöste Aktion eine Darstellung mittels der Anzeigenvorrichtung von wenigstens einem visualisierten Merkmal umfasst. Anstelle von ansonsten vorgesehenen Standardkomponenten oder dem einbinden von im Fahrzeug vorgehaltenen Komponenten, welche nur bedingt für einen komfortablen Betrieb und das Abhalten einer Telefon- und/oder Videokonferenz geeignet sind, ist es somit möglich, das Kommunikationssystem nach jeweiligen Anwendungsfällen mit den genannten Komponenten bereitzustellen. In einem Kleintransporter können beispielsweise im hinteren Bereich einer Vierersitzgruppe entsprechend größere Komponenten vorgesehen sein, sodass dort somit ein ähnlich hoher Komfort wie in einem Besprechungsraum sichergestellt wird. Die Anordnung pro Sitzplatz beziehungsweise Zone erleichtert eine komfortable Teilnahme der Fahrzeuginsassen, da somit jeder Insasse eine besonders gute Sicht etwa auf einen Bildschirm seiner Anzeigenvorrichtung hat. Jegliche genannten Vorrichtungen können beliebig viele Komponenten umfassen. So kann eine jeweilige Anzeigenvorrichtung beispielsweise mehr als eine Bildschirmeinheit umfassen oder eine Kameravorrichtung mehr als eine Kamera (ähnlich einer Vorrichtung für ein zeitgenössisches Mobiltelefon). Auch 3D-Kameras und weitere besondere Funktionen können baukastenförmig in das vorgestellte System involviert werden.Furthermore, in a further preferred embodiment of the invention it is provided that the telephone and / or video conference system at least a display device, at least one camera device, at least one loudspeaker device and at least one microphone device, or wherein the user-defined zones in the vehicle each include a seat for a vehicle occupant per zone and at least one display device, at least one camera device, at least one loudspeaker device and at least one per zone Microphone device is provided, the respective display devices being designed to characterize at least the participating vehicle occupants in the vehicle with their respective personalized profile and the respective actively speaking vehicle occupants, the triggered action comprising a display by means of the display device of at least one visualized feature. Instead of otherwise provided standard components or the integration of components stored in the vehicle, which are only conditionally suitable for convenient operation and holding a telephone and / or video conference, it is thus possible to provide the communication system with the components mentioned according to the respective application. In a small van, for example, correspondingly larger components can be provided in the rear area of a four-seat group, so that a similarly high level of comfort is ensured there as in a conference room. The arrangement per seat or zone facilitates comfortable participation by the vehicle occupants, since each occupant thus has a particularly good view of a screen on their display device, for example. Any of the devices mentioned can comprise any number of components. For example, a respective display device can comprise more than one screen unit or a camera device can comprise more than one camera (similar to a device for a contemporary mobile phone). 3D cameras and other special functions can also be integrated into the system presented in a modular manner.

Zudem ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass das wenigstens eine visualisierte Merkmal ausgewählt ist aus: Vergrößern eines mittels der Anzeigenvorrichtung dargestellten Bildes des aktiv sprechenden Fahrzeuginsassen, Hervorheben eines Bildes des aktiv sprechenden Fahrzeuginsassen mit wenigstens einem farblichen Merkmal, Markieren eines Bildes des aktiv sprechenden Fahrzeuginsassen mit wenigstens einem eingeblendeten Text. Das farbliche Merkmal kann beispielsweise ein roter Rahmen um das Profilfoto des aktiv sprechenden Fahrzeuginsassen sein. Die Vergrößerung kann so erfolgen, dass die anderen Profilfotos der anderen in dem Moment passiven Teilnehmer zumindest visuell gleichzeitig an einem Randbereich des gezeigten Bildausschnitts dargestellt werden. Andere Markierungen sind denkbar. Diese können beispielsweise auch bestimmte Muster oder derart gestaltet sein, dass nur der aktiv sprechende Fahrzeuginsasse mit einem Farbfoto oder einer farblichen Bildsequenz in Echtzeit dargestellt wird. Auch kann lediglich der Text „Wortinhaber“ oder dergleichen aufgeführt werden. Dies kann zusätzlich über eine Bauchbinde mit dem entsprechenden Nutzernamen realisiert werden.In addition, a further preferred embodiment of the invention provides that the at least one visualized feature is selected from: enlarging an image of the actively speaking vehicle occupant displayed by means of the display device, highlighting an image of the actively speaking vehicle occupant with at least one color feature, marking an image of the actively speaking vehicle occupants with at least one text displayed. The colored feature can be, for example, a red frame around the profile photo of the actively speaking vehicle occupant. The enlargement can take place in such a way that the other profile photos of the other participants who are passive at the moment are displayed at least visually at the same time on an edge area of the image detail shown. Other markings are conceivable. These can, for example, also be specific patterns or be designed in such a way that only the actively speaking vehicle occupant is shown in real time with a color photo or a color image sequence. Only the text “word owner” or the like can also be listed. This can also be done using a belly band with the appropriate user name.

Auch ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass bei einer fehlgeschlagenen Gesichtserkennung eines Fahrzeuginsassen automatisch ein benutzerdefiniertes Ersatzprofil verwendbar ist. Nicht erkannte Insassen können beispielsweise als „Gast“ angezeigt werden. Auf diese Weise kann zumindest diese Information somit verdeutlichen, dass es sich um eine nicht erkannte Person handelt. Dieser Zustand kann dann entweder mit dem Ersatzprofil aufgefangen werden oder es kann eine nachträgliche Einbindung über die Lernfunktion des Systems benutzerdefiniert durchgezogen werden.In a further preferred embodiment of the invention it is also provided that a user-defined substitute profile can automatically be used in the event of a failed face recognition of a vehicle occupant. Unrecognized occupants can, for example, be displayed as “guests”. In this way, at least this information can make it clear that it is an unrecognized person. This state can then either be caught with the substitute profile or a subsequent integration can be carried out via the learning function of the system in a user-defined manner.

Zudem ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass vor und/oder während einer Telefon- und/oder Videokonferenz ein Bildausschnitt in dem Fahrzeug benutzerdefiniert festlegbar ist. Auf diese Weise kann komfortabel eine Konferenz gestartet werden und dabei über den festgelegten Bildausschnitt entschieden werden, welcher Insasse aktiv teilnehmen soll. Je nach festgelegtem Bildausschnitt kann somit das System die zuvor erläuterte Kennzeichenroutine durchführen. Es ist beispielsweise denkbar, dass der Bildausschnitt beziehungsweise das Videobild eingegrenzt wird, um zum Beispiel Kinder auf der Rückbank auszublenden. Somit werden nur die im Bildausschnitt gezeigten Personen während der Telefon- und/oder Videokonferenz aufgeführt.In addition, a further preferred embodiment of the invention provides that before and / or during a telephone and / or video conference an image section can be defined in the vehicle in a user-defined manner. In this way, a conference can be started comfortably and a decision can be made via the defined image section as to which occupant should actively participate. Depending on the defined image section, the system can thus carry out the previously explained identification routine. It is conceivable, for example, that the image section or the video image is delimited in order, for example, to hide children in the back seat. This means that only the people shown in the image section are listed during the telephone and / or video conference.

Ferner ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass ein Bildausschnitt in Abhängigkeit der ausgewerteten Mundbewegungen und der zugewiesenen Zonen automatisch anpassbar ist, sodass immer die Fahrzeuginsassen darstellbar sind, welche aktiv an der Telefon- und/oder Videokonferenz teilnehmen und wobei die wenigstens eine Anzeigevorrichtung, die wenigstens eine Kameravorrichtung, die wenigstens eine Lautsprechervorrichtung und die wenigstens eine Mikrofonvorrichtung pro Zone in Abhängigkeit einer Teilnahme und/oder in Abhängigkeit eines dargestellten Bildausschnitts automatisch und/oder benutzerdefiniert an- und ausschaltbar sind. Somit kann der Komfort weiter gesteigert werden. Beispielsweise ist es somit möglich, dass nicht involvierte Insassen nicht unnötigerweise mit Geräuschen von der Konferenz beschallt werden. Insofern findet eine Kopplung der Zonen mit dem ausgewählten Bildausschnitt statt. Dadurch sind dann beispielsweise nur die Mikrofone der aktiven Teilnehmer aktiviert und nur deren Lautsprecher würden das Konferenzgespräch wiedergeben.Furthermore, a further preferred embodiment of the invention provides that an image section can be automatically adapted as a function of the evaluated mouth movements and the assigned zones, so that the vehicle occupants can always be shown who are actively participating in the telephone and / or video conference and where the at least one Display device, the at least one camera device, the at least one loudspeaker device and the at least one microphone device per zone can be switched on and off automatically and / or in a user-defined manner as a function of participation and / or as a function of a displayed image section. Thus, the comfort can be further increased. For example, it is thus possible that uninvolved occupants are not unnecessarily exposed to noise from the conference. In this respect, there is a coupling of the zones with the selected image section. As a result, for example, there are only the microphones of the active participants activated and only their loudspeakers would play the conference call.

Schlussendlich ist in einer weiteren bevorzugten Ausgestaltung der Erfindung vorgesehen, dass zumindest immer ein Bildausschnitt gemäß den benutzerdefiniert eingeteilten Zonen im Fahrzeug mittels der jeweiligen Anzeigevorrichtungen visualisierbar ist. Die zuvor genannten Vorteile sind somit noch besser umzusetzen.Finally, in a further preferred embodiment of the invention, it is provided that at least one image section can always be visualized according to the user-defined zones in the vehicle by means of the respective display devices. The advantages mentioned above can therefore be implemented even better.

Angewendet kann das vorgestellte System mit den verschiedensten Fahrzeugen, insbesondere mit Kraftfahrzeugen. Die mittels des Systems erfassten Informationen und Kennzeichnungen können dabei in jegliche Ausgabeeinheiten von extern teilnehmenden Konferenzteilnehmern übertragen werden.The presented system can be used with a wide variety of vehicles, in particular with motor vehicles. The information and identifications recorded by means of the system can be transmitted to any output units by externally participating conference participants.

Die verschiedenen in dieser Anmeldung genannten Ausführungsformen der Erfindung sind, sofern im Einzelfall nicht anders ausgeführt, mit Vorteil miteinander kombinierbar.The various embodiments of the invention mentioned in this application can advantageously be combined with one another, unless stated otherwise in the individual case.

Die Erfindung wird nachfolgend in Ausführungsbeispielen anhand der zugehörigen Zeichnungen erläutert. Es zeigen:

1 eine schematische Darstellung eines Kommunikationssystems für Telefon- und/oder Videokonferenzen in Fahrzeugen; und
2 eine schematische Darstellung eines Fahrzeugs umfassend ein Kommunikationssystem gemäß einem der Ansprüche 1 bis 9.

The invention is explained below in exemplary embodiments with reference to the accompanying drawings. Show it:

1 a schematic representation of a communication system for telephone and / or video conferences in vehicles; and
2 a schematic representation of a vehicle comprising a communication system according to one of claims 1 to 9.

1 zeigt eine schematische Darstellung eines Kommunikationssystems 10 für Telefon- und/oder Videokonferenzen in Fahrzeugen. Dabei ist das Kommunikationssystem 10 mit einem Telefon- und/oder Videokonferenzsystem 12 dargestellt, welches entweder systemeigen und somit in ein nicht näher dargestelltes Fahrzeug entsprechend nachträglich in selbiges integrierbar ist oder ein fahrzeugeigenes ist, sodass dieses entsprechend an das dargestellte Kommunikationssystem 10 funktional koppelbar ist. Das gezeigte Telefon- und/oder Videokonferenzsystem 12 ist dabei ausgelegt, jeweiligen ebenfalls nicht näher dargestellten Fahrzeuginsassen an jeweiligen Sitzpositionen in einem Fahrzeug zu ermöglichen, an einer Telefon- und/oder Videokonferenz aktiv teilzunehmen. Zudem ist eine Innenraumkamera 14 dargestellt, wobei auch diese Innenraumkamera 14 entweder systemeigen und somit in ein nicht näher dargestelltes Fahrzeug entsprechend nachträglich in selbiges integrierbar ist oder eine fahrzeugeigene ist, sodass diese entsprechend an das dargestellte Kommunikationssystem 10 funktional koppelbar ist. Die Innenraumkamera 14 ist dabei ausgelegt jeweilige nicht näher dargestellte Sitzpositionen und sich dort aufhaltende Fahrzeuginsassen in dem nicht näher dargestellten Fahrzeug zu erfassen. Zudem ist eine mit den zuvor genannten Komponenten gekoppelte Steuer- und Recheneinheit 16 dargestellt. Diese Steuer- und Recheneinheit 16 ist dabei mit einem Ausführungsprogramm 18 dargestellt, wobei dieses Ausführungsprogramm 18 ein Gesichtserkennungsprogramm 20 umfasst, sodass mittels des Telefon- und/oder Videokonferenzsystems 12 und/oder mittels der Innenraumkamera 14 zu einem jeweiligen Fahrzeuginsassen ein im Ausführungsprogramm 18 hinterlegtes personifiziertes Profil verknüpfbar und visuell anzeigbar ist. Die Steuer- und Recheneinheit 16 mit dem Auswerteprogramm ist dabei ausgelegt, jeweilige von den einzelnen Komponenten des Kommunikationssystems 10 entgegengenommenen Informationen entsprechend ihrer Quelle in dem nicht näher dargestellten Fahrzeug zu jeweiligen begrenzten und zuvor benutzerdefiniert eingeteilten Zonen in dem nicht näher dargestellten Fahrzeug zuzuweisen. Die Steuer- und Recheneinheit 16 mit dem Auswerteprogramm 18 ist zudem mit einem Mimik-Detektionsprogramm 22 dargestellt, welches ausgelegt ist, jeweilige mittels des Telefon- und/oder Videokonferenzsystems 12 und/oder der Innenraumkamera 14 erfassten Mundbewegungen der nicht näher dargestellten Fahrzeuginsassen auszuwerten, sodass aufgrund der ausgewerteten Mundbewegungen und der zugewiesenen Zonen ein aktiv sprechender Fahrzeuginsasse durch wenigstens eine ausgelöste Aktion kennzeichenbar ist. 1 shows a schematic representation of a communication system 10 for telephone and / or video conferences in vehicles. Here is the communication system 10 with a telephone and / or video conference system 12th shown, which is either system-specific and thus in a vehicle (not shown in detail) can be subsequently integrated into the same, or is a vehicle-specific one, so that this is correspondingly connected to the communication system shown 10 can be functionally coupled. The telephone and / or video conferencing system shown 12th is designed to enable respective vehicle occupants, also not shown in detail, in respective seating positions in a vehicle to actively participate in a telephone and / or video conference. There is also an indoor camera 14th shown, with this indoor camera 14th is either system-specific and thus in a vehicle (not shown in detail) that can be subsequently integrated into the same, or it is a vehicle-specific one, so that it is correspondingly connected to the communication system shown 10 can be functionally coupled. The interior camera 14th is designed to capture the respective seat positions (not shown in detail) and vehicle occupants in the vehicle (not shown in detail) who are there. In addition, there is a control and computing unit coupled to the aforementioned components 16 shown. This control and arithmetic unit 16 is doing it with an execution program 18th shown, this execution program 18th a face recognition program 20th includes, so that by means of the telephone and / or video conference system 12th and / or by means of the interior camera 14th for a respective vehicle occupant in the execution program 18th stored personalized profile can be linked and visually displayed. The control and arithmetic unit 16 with the evaluation program is designed, each of the individual components of the communication system 10 to assign received information according to its source in the vehicle, not shown in detail, to respective limited and previously user-defined zones in the vehicle, not shown in detail. The control and arithmetic unit 16 with the evaluation program 18th is also equipped with a facial expression detection program 22nd shown, which is designed, each by means of the telephone and / or video conference system 12th and / or the interior camera 14th to evaluate detected mouth movements of the vehicle occupants, not shown in detail, so that an actively speaking vehicle occupant can be identified by at least one triggered action on the basis of the evaluated mouth movements and the assigned zones.

2 zeigt eine schematische Darstellung eines Fahrzeugs 24, umfassend ein Kommunikationssystem 10 gemäß einem der Ansprüche 1 bis 9. Es handelt sich dabei um eine Draufsicht auf einen Innenraum 26 des Fahrzeugs 24. Dabei sind jeweilige Sitzplätze 28 in dem Fahrzeug 24 dargestellt. Bezogen auf die Bildebene sind sowohl vertikal als auch horizontal jeweilige Hilfslinien 30 dargestellt, welche jeweilige benutzerdefiniert eingeteilten Zonen 32 a, b, c, d, e, f in dem Fahrzeug 24 darstellen. Pro Zone 32 a, b, c, d, e, f ist somit ein Sitzplatz 28 vorgesehen, wobei in Fahrtrichtung, gekennzeichnet mittels eines Richtungspfeils 34, jeweils ein Bildschirm 36 von jeweiligen nicht näher dargestellten Anzeigenvorrichtungen und jeweils eine Kamera 38 von jeweiligen nicht näher dargestellten Kameravorrichtungen dargestellt sind. 2 shows a schematic representation of a vehicle 24 , comprising a communication system 10 according to one of claims 1 to 9. It is a plan view of an interior 26th of the vehicle 24 . There are respective seats 28 in the vehicle 24 shown. Relative to the image plane, there are respective auxiliary lines both vertically and horizontally 30th shown which respective user-defined zones 32 a, b, c, d, e, f in the vehicle 24 represent. Per zone 32 a, b, c, d, e, f is therefore a seat 28 provided, in the direction of travel, marked by means of a directional arrow 34 , one screen at a time 36 of respective display devices, not shown in detail, and one camera each 38 are shown by respective camera devices not shown in detail.

Diese zuvor genannten Komponenten sind entsprechend Teil eines nicht näher gezeigten Telefon- und/oder Videokonferenzsystems 12. Auf der Position des nicht näher dargestellten Fahrers können diese Komponenten beispielsweise während eines autonomen Fahrbetriebs in diese Position gebracht werden, sodass ein ansonsten an dieser Position vorgesehenes Lenkrad zeitweilig weggeklappt ist. Hinter der ersten Sitzreihe, also hinter den Zonen 32 a, f, bezogen auf die Fahrtrichtung ist eine Innenraumkamera 14 dargestellt, welche an einem nicht näher dargestellten Dachhimmel des Fahrzeugs 24 angeordnet ist. Eine nicht näher dargestellte Steuer- und Recheneinheit 16 mit dem Auswerteprogramm 18 von dem Kommunikationssystem 10, welches in dem Fahrzeug 24 bezogen auf die Fahrtrichtung hinten angeordnet ist, ist dabei ausgelegt, jeweilige von den einzelnen Komponenten des Kommunikationssystems 10 entgegengenommenen Informationen entsprechend ihrer Quelle im Fahrzeug 24 zu jeweiligen begrenzten und zuvor benutzerdefiniert eingeteilten Zonen 32 a, b, c, d, e, f in dem Fahrzeug 24 zuzuweisen. Die Steuer- und Recheneinheit 16 mit dem Auswerteprogramm 18 umfasst zudem ein Mimik-Detektionsprogramm 22, welches ausgelegt ist, jeweilige mittels des Telefon- und/oder Videokonferenzsystems 12 und/oder der Innenraumkamera 14 erfasste Mundbewegungen der nicht näher gezeigten Fahrzeuginsassen auszuwerten, sodass aufgrund der ausgewerteten Mundbewegungen und der zugewiesenen Zonen 32 a, b, c, d, e, f ein aktiv sprechender Fahrzeuginsasse durch wenigstens eine ausgelöste Aktion kennzeichenbar ist.These aforementioned components are accordingly part of a telephone and / or video conference system, not shown in detail 12th . In the position of the driver (not shown in more detail), these components can be brought into this position, for example during autonomous driving, so that a steering wheel otherwise provided in this position is temporarily folded away. Behind the first row of seats, i.e. behind the zones 32 a, f, based on the direction of travel, is an interior camera 14th shown which at a not shown headliner of the vehicle 24 is arranged. A control and computing unit not shown in detail 16 with the evaluation program 18th from the communication system 10 which is in the vehicle 24 Is arranged at the rear in relation to the direction of travel, is designed here, each of the individual components of the communication system 10 received information according to its source in the vehicle 24 to the respective limited and previously user-defined zones 32 a, b, c, d, e, f in the vehicle 24 assign. The control and arithmetic unit 16 with the evaluation program 18th also includes a facial expression detection program 22nd , which is designed, in each case by means of the telephone and / or video conference system 12th and / or the interior camera 14th to evaluate detected mouth movements of the vehicle occupants, not shown in detail, so that based on the evaluated mouth movements and the assigned zones 32 a, b, c, d, e, f an actively speaking vehicle occupant can be identified by at least one triggered action.

BezugszeichenlisteList of reference symbols

1010: KommunikationssystemCommunication system
1212th: Telefon- und/oder VideokonferenzsystemTelephone and / or video conference system
1414th: InnenraumkameraIndoor camera
1616: Steuer- und RecheneinheitControl and arithmetic unit
1818th: AusführungsprogrammExecution program
2020th: GesichtserkennungsprogrammFace recognition program
2222nd: Mimik-DetektionsprogrammFacial expression detection program
2424: Fahrzeugvehicle
2626th: Innenrauminner space
2828: SitzplatzSeat
3030th: HilfslinieAuxiliary line
3232: ZoneZone
3434: RichtungspfeilDirection arrow
3636: Bildschirmscreen
3838: Kameracamera

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

GB 2525039 A [0003]
JP 2007074081 A [0004]

Claims

Communication system (10) for telephone and / or video conferences in vehicles, comprising a system-specific and / or vehicle-specific telephone and / or video conference system (12) which is designed to enable respective vehicle occupants at respective seat positions in a vehicle (24) at a To actively participate in telephone and / or video conferences, a system-internal and / or vehicle-internal camera (14), which is designed to record the respective seat positions and vehicle occupants in the vehicle (24), and a control system coupled to the components mentioned above. and computing unit (16) with an execution program (18), which comprises at least one face recognition program (22), so that by means of the telephone and / or video conference system (12) and / or by means of the interior camera (14) a respective vehicle occupant receives a message in the execution program ( 18) stored personalized profile can be linked and visually displayed, thereby ge indicates that the control and computing unit (16) is designed with the evaluation program (18) the respective information received by the individual components of the communication system (10) according to its source in the vehicle for the respective limited and previously user-defined zones (32 a, b, c, d, e, f) in the vehicle (24) and that the control and computing unit (16) with the evaluation program (18) also includes a facial expression detection program (22) which is designed to be used in each case by means of the telephone and / or video conference system (12) and / or the interior camera (14) to evaluate the vehicle occupants' mouth movements recorded so that, based on the evaluated mouth movements and the assigned zones (32 a, b, c, d, e, f), an actively speaking vehicle occupant can at least a triggered action can be identified.

Communication system (10) according to Claim 1 , wherein the face recognition program (22) is designed to identify respective vehicle occupants either via a comparison routine with a biometric database stored in the control and computing unit (16) with user-defined biometric profiles and / or is designed to identify the respective vehicle occupant by means of during an activation phase of the Communication system (10) to identify learned assignment routine.

Communication system (10) according to one of the preceding claims, wherein the at least one triggered action comprises a highlighting of the vehicle occupant who is actively speaking and participating in the telephone and / or video conference, the highlighting comprising acoustic and / or visual features and / or wherein the at least one action includes an automatic integration and highlighting of the actively speaking vehicle occupant in the telephone and / or video conference system (12).

Communication system (10) according to one of the preceding claims, wherein the telephone and / or video conference system (12) comprises at least one display device, at least one camera device, at least one loudspeaker device and at least one microphone device, or wherein the user-defined zones in the vehicle each have a seat ( 28) for a vehicle occupant per zone (32 a, b, c, d, e, f) and per zone (32 a, b, c, d, e, f) comprise at least one display device, at least one camera device, at least one loudspeaker device and at least one microphone device is provided, the respective display devices being designed to represent at least the participating vehicle occupants in the vehicle (24) with their respective personalized profile and the respective actively speaking vehicle occupants, the triggered action being displayed by means of the display device by at least one visual ized feature includes.

Communication system (10) according to one of the preceding claims, wherein the at least one visualized feature is selected from: enlarging an image of the actively speaking vehicle occupant displayed by means of the display device, highlighting an image of the actively speaking vehicle occupant with at least one colored feature, marking an image of the actively speaking speaking vehicle occupants with at least one superimposed text.

Communication system (10) according to one of the preceding claims, wherein a user-defined substitute profile can automatically be used in the event of a failed facial recognition of a vehicle occupant.

Communication system (10) according to one of the preceding claims, wherein before and / or during a telephone and / or video conference an image section in the vehicle (24) can be defined in a user-defined manner.

Communication system (10) according to one of the previous ones Claims 4 to 7th , with an image section being automatically adaptable as a function of the evaluated mouth movements and the assigned zones, so that the vehicle occupants who are actively participating in the telephone and / or video conference can always be displayed and the at least one display device, the at least one camera device, the at least one Speaker device and the at least one Microphone device per zone as a function of participation and / or as a function of a displayed image section can be switched on and off automatically and / or user-defined.

Communication system (10) according to one of the previous ones Claims 4 to 8th At least one image section according to the user-defined zones (32 a, b, c, d, e, f) can always be visualized in the vehicle (24) by means of the respective display device.

Vehicle (24) comprising a communication system (10) according to one of the Claims 1 to 9 .