DE102016201680A1

DE102016201680A1 - Method and system for synchronously playing audio signals and video signals

Info

Publication number: DE102016201680A1
Application number: DE102016201680.6A
Authority: DE
Inventors: Christian Linke; Christoph Schmalz
Original assignee: Bayerische Motoren Werke AG
Current assignee: Bayerische Motoren Werke AG
Priority date: 2016-02-04
Filing date: 2016-02-04
Publication date: 2017-08-10

Abstract

Die Erfindung betrifft ein Verfahren zum synchronen Wiedergeben von Audiosignalen und Videosignalen in einer Fahrgastzelle (8) eines Fahrzeugs, aufweisend die Schritte: – Erfassen (100) einer individuellen Übertragungsdauer einer Übertragung eines Datensignals von einer A/V-Quelle (2) eines A/V-Wiedergabesystems (1) des Fahrzeugs an eine Wiedergabeeinheit (3, 4, 7) des A/V-Wiedergabesystems (1) für jede Wiedergabeeinheit (3, 4, 7) des A/V-Wiedergabesystems (1); – Erfassen (200) einer individuellen Verarbeitungsdauer einer Signalverarbeitung des Datensignals durch die Wiedergabeeinheit (3, 4, 7) für jede Wiedergabeeinheit (3, 4, 7) des A/V-Wiedergabesystems (1); und – Festlegen (300) einer individuellen Verzögerungszeit für jede Wiedergabeeinheit (3, 4, 7) des A/V-Wiedergabesystems (1) auf Basis der bezüglich der jeweiligen Wiedergabeeinheit (3, 4, 7) erfassten individuellen Übertragungsdauer und individuellen Verarbeitungsdauer.The invention relates to a method for synchronously reproducing audio signals and video signals in a passenger compartment (8) of a vehicle, comprising the steps of: - detecting (100) an individual transmission duration of a transmission of a data signal from an A / V source (2) of an A / V-rendering system (1) of the vehicle to a reproduction unit (3, 4, 7) of the A / V reproduction system (1) for each reproduction unit (3, 4, 7) of the A / V reproduction system (1); - detecting (200) an individual processing time of signal processing of the data signal by the reproducing unit (3, 4, 7) for each reproducing unit (3, 4, 7) of the A / V reproducing system (1); and determining (300) an individual delay time for each reproducing unit (3, 4, 7) of the A / V reproducing system (1) on the basis of the individual transmission duration and the individual processing time detected with respect to the respective reproducing unit (3, 4, 7).

Description

Die Erfindung betrifft ein Verfahren und ein System zum synchronen Wiedergeben von Audiosignalen und Videosignalen in einer Fahrgastzelle eines Fahrzeugs. The invention relates to a method and a system for synchronously reproducing audio signals and video signals in a passenger compartment of a vehicle.

Mit einem Audio/Video-Wiedergabesystem (A/V-Wiedergabesystem) eines Fahrzeugs können Audiosignale und Videosignale separat voneinander verarbeitet werden. Die Audiosignale und die Videosignale werden von einer Audio/Video-Quelle (A/V-Quelle) des A/V-Wiedergabesystems erzeugt und über ein Kommunikationsnetz des A/V-Wiedergabesystems an Wiedergabeeinheiten des A/V-Wiedergabesystems übertragen, die als Audiosenken, insbesondere Lautsprecher, als Videosenken, insbesondere Bildschirme, oder als Audio/Video-Senken (A/V-Senken) ausgebildet sein können. Die Audiosignale und die Videosignale sollten in einer Fahrgastzelle des Fahrzeugs synchron von den Wiedergabeeinheiten wiedergegeben werden. With an audio / video reproduction system (A / V reproduction system) of a vehicle, audio signals and video signals can be processed separately from each other. The audio signals and the video signals are generated from an audio / video source (A / V source) of the A / V playback system and transmitted via a communication network of the A / V playback system to the playback units of the A / V playback system as audio sinks , in particular loudspeakers, as video sinks, in particular screens, or as audio / video sinks (A / V sinks) may be formed. The audio signals and the video signals should be reproduced in a passenger compartment of the vehicle in synchronization with the reproducing units.

Ein in diesem Zusammenhang bekanntes Lippensynchronisationsproblem kann in einem Fahrzeug bei einer zeitgleichen Wiedergabe von Videodateien und Audiodateien an mehreren Audiosenken und Videosenken auftreten. Hierbei können beispielsweise Videodateien zeitgleich auf einem in einem vorderen Bereich der Fahrgastzelle des Fahrzeugs angeordneten, zentralen Bildschirm und auf zwei in einem hinteren Bereich der Fahrgastzelle angeordneten Bildschirmen wiedergegeben werden, während gleichzeitig eine Tonwiedergabe von zugehörigen Audiodateien über ein Hauptschallfeld bzw. lokale Hörzonen innerhalb der Fahrgastzelle erfolgt. Hierbei sind somit mehrere verschiedene Wiedergabeeinheiten für die Audiosignale und die Videosignale vorhanden, die dennoch alle gleichzeitig von der A/V-Quelle gespeist werden müssen. A lip-sync problem known in this context may occur in a vehicle in simultaneous playback of video files and audio files at multiple audio sinks and video sinks. In this case, for example, video files can be reproduced at the same time on a central screen arranged in a front area of the passenger compartment of the vehicle and on two screens arranged in a rear area of the passenger compartment, while at the same time sound reproduction of associated audio files via a main sound field or local listening zones within the passenger compartment he follows. There are thus several different playback units for the audio signals and the video signals, which nevertheless have to be fed simultaneously from the A / V source.

Hierbei kann wie folgt vorgegangen werden. Zunächst kann beispielsweise ein Fernsehsignal ein RAM-Steuergerät des A/V-Wiedergabesystems erreichen. Das RAM-Steuergerät kann dann eine Anzeigeeinheit/Bildwiedergabeeinheit (Media Graphics Unit, MGU) speisen, die wiederum eine für eine im hinteren Teil einer Fahrgastzelle angeordnete Wiedergabeeinheit mit den Fernsehsignalen versorgt. Dabei kommt es zu üblichen Zeitverzögerungen, da die Fernsehsignale nach ihrem Empfang durch das RAM-Steuergerät entschlüsselt, zur Weitergabe wieder verschlüsselt und beim Empfänger (MGU, RSE) schließlich wieder entschlüsselt werden müssen. This can be done as follows. First, for example, a television signal may reach a RAM controller of the A / V playback system. The RAM controller may then power a Media Graphics Unit (MGU), which in turn supplies the television signals to a display unit located at the rear of a passenger compartment. It comes to usual time delays, since the television signals decrypted after their receipt by the RAM controller, re-encrypted for distribution and finally at the receiver (MGU, RSE) must be decrypted again.

Herkömmlich kann die Synchronisation der Bildwiedergabe mit der Tonwiedergabe auf mehreren Audiosenken und Videosenken eines A/V-Wiedergabesystems durch Zeitstempel („Presentation Time Stamps“; PTS) erreicht werden, die sich Decoder des A/V-Wiedergabesystems gegenseitig mitteilen. Dies geschieht bei solchen dynamischen A/V-Wiedergabesystemen zur Laufzeit („on-the-fly“). Eine derartige Synchronisation ist beispielsweise aus US 8 606 070 B2 bekannt. Hier werden Verzögerungen in der Datenübertragung während der Laufzeit erfasst und der A/V-Quelle des A/V-Wiedergabesystems mitgeteilt („in-band signaling“). Hinzukommen kann eine entsprechende Kommunikation während der Übertragung zwischen den Wiedergabeeinheiten („out-of-band signaling“) des A/V-Wiedergabesystems. Die Anpassung der Übertragungsparameter zur Laufzeit kann zu ungewünschten Störungen, beispielsweise Sprüngen oder Pausen, bei der Bildwiedergabe und/oder der Tonwiedergabe führen, insbesondere wenn sich eine weitere Wiedergabeeinheit, beispielsweise ein Tablet oder ein Smartphone, an dem A/V-Wiedergabesystem anmeldet oder sich von dem A/V-Wiedergabesystem abmeldet. Conventionally, the synchronization of the picture reproduction with the sound reproduction on plural audio sinks and video sinks of an A / V reproducing system can be achieved by time stamps ("Presentation Time Stamps"; PTS) which inform each other of decoders of the A / V reproducing system. This happens in such dynamic A / V playback systems at runtime ("on-the-fly"). Such a synchronization is for example off US Pat. No. 8,606,070 B2 known. Here delays in data transfer during runtime are detected and reported to the A / V source of the A / V playback system ("in-band signaling"). In addition, an appropriate communication during transmission between the playback units ("out-of-band signaling") of the A / V playback system. The adaptation of the transmission parameters at runtime can lead to unwanted disturbances, for example jumps or pauses, during image reproduction and / or sound reproduction, in particular if another reproduction unit, for example a tablet or a smartphone, logs on to the A / V reproduction system or itself from the A / V playback system logs off.

Eine Aufgabe der Erfindung ist es, die synchrone Wiedergabe von Audiosignalen und Videosignalen in einer Fahrgastzelle eines Fahrzeugs zu optimieren. An object of the invention is to optimize the synchronous reproduction of audio signals and video signals in a passenger compartment of a vehicle.

Diese Aufgabe wird durch die unabhängigen Patentansprüche gelöst. Vorteilhafte Ausgestaltungen sind insbesondere in den abhängigen Patentansprüchen wiedergegeben, die jeweils für sich genommen oder in unterschiedlicher Kombination miteinander einen Aspekt der Erfindung darstellen können. This object is solved by the independent claims. Advantageous embodiments are set forth in particular in the dependent claims, each of which taken alone or in different combinations with each other can represent an aspect of the invention.

Ein erfindungsgemäßes Verfahren zum synchronen Wiedergeben von Audiosignalen und Videosignalen in einer Fahrgastzelle eines Fahrzeugs umfasst die Schritte:

– Erfassen einer individuellen Übertragungsdauer einer Übertragung eines Datensignals von einer A/V-Quelle eines A/V-Wiedergabesystems des Fahrzeugs an eine Wiedergabeeinheit des A/V-Wiedergabesystems für jede Wiedergabeeinheit des A/V-Wiedergabesystems;
– Erfassen einer individuellen Verarbeitungsdauer einer Signalverarbeitung des Datensignals durch die Wiedergabeeinheit für jede Wiedergabeeinheit des A/V-Wiedergabesystems; und
– Festlegen einer individuellen Verzögerungszeit für jede Wiedergabeeinheit des A/V-Wiedergabesystems auf Basis der bezüglich der jeweiligen Wiedergabeeinheit erfassten individuellen Übertragungsdauer und individuellen Verarbeitungsdauer.

A method according to the invention for synchronously reproducing audio signals and video signals in a passenger compartment of a vehicle comprises the steps:

Detecting an individual transmission duration of a transmission of a data signal from an A / V source of an A / V reproducing system of the vehicle to a reproducing unit of the A / V reproducing system for each reproducing unit of the A / V reproducing system;
Detecting, by the reproducing unit, an individual processing time of signal processing of the data signal for each reproducing unit of the A / V reproducing system; and
Setting an individual delay time for each reproduction unit of the A / V reproduction system on the basis of the individual transmission time and individual processing time detected with respect to the respective reproduction unit.

Erfindungsgemäß wird eine automatische Festlegung von individuellen Verzögerungszeiten für jede Wiedergabeeinheit des A/V-Wiedergabesystems vorgeschlagen, um eine synchrone Wiedergabe von Audio- und/oder Videodatensignalen auf allen Wiedergabeeinheiten zu erreichen. Dazu werden vorab die individuelle Übertragungsdauer und die individuelle Verarbeitungsdauer für jede Wiedergabeeinheit des A/V-Wiedergabesystems erfasst. Eine individuelle Verarbeitungsdauer ist dabei insbesondere durch die erforderlichen Signalverarbeitungsprozesse durch die jeweilige Wiedergabeeinheit bestimmt. According to the invention, an automatic determination of individual delay times for each playback unit of the A / V playback system is proposed in order to achieve a synchronous reproduction of audio and / or video data signals on all the playback units. For this purpose, the individual transmission duration and the individual processing time for each playback unit of the A / V playback system. An individual processing time is determined in particular by the required signal processing processes by the respective playback unit.

Das Erfassen einer individuellen Übertragungsdauer kann durch eine Messung erfolgen. Die Erfassung der individuellen Verarbeitungsdauer kann dadurch erfolgen, dass die individuelle Verarbeitungsdauer gemessen, von der Wiedergabeeinheit automatisch abgefragt oder von dieser automatisch gemeldet wird. Die individuelle Verarbeitungsdauer kann in der jeweiligen Wiedergabeeinheit hinterlegt sein. The detection of an individual transmission duration can be done by a measurement. The detection of the individual processing time can be done by measuring the individual processing time, automatically requested by the playback unit or automatically reported by the playback unit. The individual processing time can be stored in the respective playback unit.

Einem Automobilhersteller ist das eigene Audiosystem, insbesondere dessen Anzahl an Audiowiedergabeeinheiten, dessen Anzahl an Schnittstellen und dessen Verzögerungszeiten gut bekannt. Das Audiosystem ist meist nicht dynamisch, so dass der Automobilhersteller die Parameter der Datenübertragung zwischen einer A/V-Quelle und den Audiowiedergabeeinheiten bislang auch per Hand einstellen konnte. Eine derartige manuelle Einstellung der Synchronisation zwischen Audiowidergabe und Videowiedergabe ist jedoch bei A/V-Wiedergabesystemen mit mehreren A/V-Quellen und Wiedergabeeinheiten aufgrund der damit verbundenen Kombinatorik mit einem hohen Aufwand verbunden. Zudem wachsen die Anforderungen stetig, so dass die Anpassung des Audiosystems automatisch erfolgen sollte, und zwar nicht über einen Decoder zur Laufzeit, sondern vorab durch einen Algorithmus im Audiosystem entsprechend der vorliegenden Erfindung. Eine feste Übertragungszeit kann herkömmlich mit Hilfe der AVB-Technologie garantiert werden. Allerdings treten abhängig vom Anwendungsfall weitere Signalverzögerungen auf, die beispielsweise durch eine Verschlüsselung, eine Entschlüsselung, eine Filterung und dergleichen der übertragenen Datensignale begründet sein können. An automobile manufacturer is well aware of its own audio system, in particular its number of audio playback units, its number of interfaces and its delay times. The audio system is usually not dynamic, so that the car manufacturer could adjust the parameters of data transmission between an A / V source and the audio playback units so far by hand. Such a manual adjustment of the synchronization between audio streaming and video playback, however, in A / V playback systems with multiple A / V sources and playback units due to the associated combinatorics associated with a lot of effort. In addition, the requirements are growing steadily, so that the adaptation of the audio system should be automatic, not via a decoder at runtime, but in advance by an algorithm in the audio system according to the present invention. Fixed transmission time can be conventionally guaranteed by AVB technology. However, depending on the application further signal delays occur, which may be due to encryption, decryption, filtering and the like of the transmitted data signals, for example.

Der entscheidende Unterschied der Erfindung zum Stand der Technik besteht darin, dass die individuellen Verzögerungen nicht zur Laufzeit abgeglichen werden müssen, sondern nur einmal vorab, da das A/V-Wiedergabesystem als bekannt und statisch angesehen wird. Dies schont Ressourcen und ermöglicht eine einfache, aber stabile Synchronisation der Audiosignale mit den Videosignalen. The crucial difference of the invention with the prior art is that the individual delays need not be adjusted at runtime, but only once in advance, since the A / V rendering system is considered to be known and static. This saves resources and allows a simple but stable synchronization of the audio signals with the video signals.

Gemäß der Erfindung wird mit Zeitdifferenzen gearbeitet, was den Vorteil hat, dass beteiligte Datenverarbeitungsgeräte des A/V-Wiedergabesystems nicht notwendigerweise synchrone Uhren aufweisen müssen. Die wesentliche Voraussetzung für die Durchführung des erfindungsgemäßen Verfahrens ist, dass alle am Datenfluss beteiligten Komponenten des A/V-Wiedergabesystems eine vorhersagbare Verarbeitungszeit für ihren jeweiligen Arbeitsschritt benötigen. According to the invention, time differences are used, which has the advantage that involved data processing devices of the A / V reproduction system do not necessarily have to have synchronous clocks. The essential prerequisite for carrying out the method according to the invention is that all components of the A / V playback system involved in the data flow require a predictable processing time for their respective work step.

Erfindungsgemäß können also individuelle Verzögerungszeiten ausgeglichen werden, die aus den reinen individuellen Übertragungszeiten und aus den individuellen Verarbeitungszeiten stammen. In Abhängigkeit der individuellen Übertragungsdauern und der individuellen Verarbeitungsdauern können die individuellen Verzögerungszeiten festgelegt werden, was es insbesondere erlaubt, weitere Wiedergabeeinheiten dynamisch und artefaktfrei zuzuschalten oder abzuschalten. Dies ist von Vorteil bei A/V-Wiedergabesystemen, bei denen Systemparameter, beispielsweise die Anzahl an vorhandenen Wiedergabeeinheiten, unbekannt sind und sich laufend ändern können. Thus, according to the invention, individual delay times can be compensated, which originate from the pure individual transmission times and from the individual processing times. Depending on the individual transmission times and the individual processing times, the individual delay times can be determined, which in particular allows further playback units to be switched on or off dynamically and without artifacts. This is advantageous in A / V playback systems in which system parameters, such as the number of available display units, are unknown and can change constantly.

Eine Wiedergabeeinheit kann erfindungsgemäß als reine Audiowiedergabeeinheit, als reine Videowiedergabeeinheit oder als kombinierte A/V-Wiedergabeeinheit ausgebildet sein. Ein Datensignal kann erfindungsgemäß ein reines Audiosignal, ein reines Videosignal oder ein kombiniertes A/V-Videosignal sein. According to the invention, a reproduction unit can be designed as a pure audio reproduction unit, as a pure video reproduction unit or as a combined A / V reproduction unit. According to the invention, a data signal can be a pure audio signal, a pure video signal or a combined A / V video signal.

Gemäß einer vorteilhaften Ausgestaltung erfolgt das Festlegen der individuellen Verzögerungszeiten bei Inbetriebnahme des A/V-Wiedergabesystems oder vor jedem Verbindungsaufbau zwischen der A/V-Quelle und den Wiedergabeeinheiten. Ersteres ist ressourcensparender, wohingegen Letzteres eine möglichst aktuelle Anpassung des A/V-Wiedergabesystems an dessen momentane Systemparameter sicherstellt. According to an advantageous embodiment, the setting of the individual delay times when commissioning the A / V playback system or before each connection between the A / V source and the playback units. The former is resource-saving, whereas the latter ensures the most current possible adaptation of the A / V playback system to its current system parameters.

Nach einer weiteren vorteilhaften Ausgestaltung wird die individuelle Verarbeitungsdauer einer nachträglich in das A/V-Wiedergabesystem integrierten Wiedergabeeinheit automatisch erfasst. Hierdurch ist es insbesondere möglich, dass zur Laufzeit des A/V-Wiedergabesystems neue, unbekannte Komponenten, beispielsweise Tablets oder Smartphones, dynamisch zugeschaltet werden. Solange diese Komponenten die jeweils durch sie erzeugte individuelle Verarbeitungsdauer an eine Datenverarbeitungseinheit zum Steuern und/oder Regeln einer Datenkommunikation zwischen der A/V-Quelle und den Wiedergabeeinheiten, beispielsweise einen Audiomanager, melden, können diese Komponenten auch in die lippensynchrone Wiedergabe einbezogen werden, indem für die jeweilige Komponente eine individuelle Verzögerungszeit festgelegt wird. Hierzu wird vorzugsweise auch die individuelle Übertragungsdauer bezüglich der weiteren Wiedergabeeinheit erfasst. According to a further advantageous embodiment, the individual processing time of a subsequently integrated in the A / V playback system playback unit is automatically detected. As a result, it is possible, in particular, for new, unknown components, for example tablets or smartphones, to be dynamically switched on during the runtime of the A / V playback system. As long as these components report the individual processing time generated by them to a data processing unit for controlling and / or regulating data communication between the A / V source and the playback units, for example an audio manager, these components can also be included in the lip-sync rendering by: an individual delay time is specified for the respective component. For this purpose, the individual transmission duration with respect to the further reproduction unit is preferably also detected.

Eine weitere vorteilhafte Ausgestaltung sieht vor, dass eine Datenverbindung zwischen der A/V-Quelle und einer Wiedergabeeinheit hergestellt wird, wenn ein Datensignal innerhalb einer vorgegebenen Ziel-Verzögerungszeit von der Wiedergabeeinheit wiedergegeben werden kann. Hierdurch können dynamisch zusätzliche Wiedergabeeinheiten zugeschaltet und bereits verbundene Wiedergabeeinheiten abgeschaltet, ohne dass Artefakte bei der Bildwiedergabe und/oder der Tonwiedergabe auftreten. Es ist keine herkömmliche Abstimmung pro Verbindung zwischen einer A/V-Quelle und einer Wiedergabeeinheit erforderlich. Es kann eine optimale Ziel-Verzögerungszeit für die A/V-Synchronisation mit minimaler Latenz aus den individuellen Übertragungsdauern und den individuellen Verarbeitungsdauern ermittelt bzw. berechnet werden. Die Ziel-Verzögerungszeit kann durch die A/V-Quelle oder eine weitere Datenverarbeitungseinheit vorgegeben werden. A further advantageous embodiment provides that a data connection between the A / V source and a playback unit is produced, when a data signal can be reproduced within a predetermined target delay time from the playback unit. As a result, additional playback units can be dynamically connected and already connected playback units switched off without artifacts occurring during image reproduction and / or sound reproduction. No conventional tuning per connection between an A / V source and a playback unit is required. An optimal target delay time for minimum latency A / V synchronization can be calculated from the individual transmission durations and the individual processing times. The target delay time can be specified by the A / V source or another data processing unit.

Vorteilhafterweise wird der Wiedergabeeinheit eine Pufferzeit vorgegeben, wenn das Datensignal nicht innerhalb der Ziel-Verzögerungszeit von der Wiedergabeeinheit wiedergegeben werden kann. Hierdurch wird sichergestellt, dass alle Wiedergabeeinheiten das ihnen jeweilig zugeführte Datensignal synchron wiedergeben. Daher können dynamisch zusätzliche Wiedergabeeinheiten zugeschaltet und bereits verbundene Wiedergabeeinheiten abgeschaltet werden, ohne dass Artefakte bei der Bildwiedergabe und/oder der Tonwiedergabe auftreten. Advantageously, the playback unit is given a buffer time if the data signal can not be reproduced within the target delay time by the playback unit. This ensures that all the playback units synchronously reproduce the respective data signal supplied to them. Therefore, additional display units can be dynamically connected and already connected display units can be switched off without artifacts occurring during image reproduction and / or sound reproduction.

Es ist des Weiteren von Vorteil, wenn als Ziel-Verzögerungszeit ein Wert zwischen etwa 100 ms und etwa 200 ms gewählt wird. Dadurch können auch interaktive A/V-Quellen verwendet werden. Für nicht-interaktive Quellen ist die Latenz weniger wichtig, jedoch sollten die Puffer der Wiedergabeeinheiten im Hinblick auf Ressourcen nicht unnötig groß dimensioniert werden. It is furthermore advantageous if a value between approximately 100 ms and approximately 200 ms is selected as the target delay time. This also allows interactive A / V sources to be used. For non-interactive sources, latency is less important, but the buffers of the rendering units should not be unnecessarily large in terms of resources.

Gemäß einer weiteren vorteilhaften Ausgestaltung wird von der A/V-Quelle eine in einem ungünstigsten Fall („worst case“) bei einer gegebenen Konfiguration des A/V-Wiedergabesystems erforderliche Verzögerungszeit vorgegeben, wobei diese Verzögerungszeit als minimale Ziel-Verzögerungszeit verwendet wird. Beispielsweise kann ein Audiomanager des A/V-Wiedergabesystems für jede A/V-Quelle eine Worst-Case-Verzögerungszeit aus der aktuell bekannten Systemkonfiguration berechnen. Diese Worst-Case-Verzögerungszeit kann als minimale Ziel-Verzögerungszeit verwendet werden, die alle möglichen Anwendungsfälle der A/V-Quelle abdeckt. According to a further advantageous embodiment, the A / V source specifies a worst-case delay time for a given configuration of the A / V playback system, this delay time being used as the minimum target delay time. For example, an audio manager of the A / V playback system may compute a worst case delay time from the currently known system configuration for each A / V source. This worst-case delay time can be used as a minimum target delay time covering all possible use cases of the A / V source.

Ein erfindungsgemäßes System zum synchronen Wiedergeben von Audiosignalen und Videosignalen in einer Fahrgastzelle eines Fahrzeugs umfasst

– wenigstens eine A/V-Quelle zum Erzeugen von Datensignalen,
– wenigstens eine Audiowiedergabeeinheit zum Empfangen und Verarbeiten der Datensignale,
– wenigstens eine Videowiedergabeeinheit zum Empfangen und Verarbeiten der Datensignale,
– wenigstens ein die A/V-Quelle kommunikationstechnisch mit den Wiedergabeeinheiten verbindendes Kommunikationsnetz und
– wenigstens eine Datenverarbeitungseinheit zum Steuern und/oder Regeln einer Datenkommunikation zwischen der A/V-Quelle und den Wiedergabeeinheiten,
– wobei die Datenverarbeitungseinheit eingerichtet ist, eine individuelle Übertragungsdauer einer Übertragung eines Datensignals von der A/V-Quelle an eine Wiedergabeeinheit für jede Wiedergabeeinheit des Systems zu erfassen,
– eine individuelle Verarbeitungsdauer einer Signalverarbeitung des A/V-Datensignals durch die Wiedergabeeinheit für jede Wiedergabeeinheit des Systems zu erfassen und
– eine individuelle Verzögerungszeit für jede Wiedergabeeinheit des Systems auf Basis der bezüglich der jeweiligen Wiedergabeeinheit erfassten individuellen Übertragungsdauer und individuellen Verarbeitungsdauer festzulegen.

An inventive system for synchronously reproducing audio signals and video signals in a passenger compartment of a vehicle

At least one A / V source for generating data signals,
At least one audio playback unit for receiving and processing the data signals,
At least one video display unit for receiving and processing the data signals,
- At least one A / V source communication technology with the playback units connecting communication network and
At least one data processing unit for controlling and / or regulating data communication between the A / V source and the display units,
The data processing unit is set up to record an individual transmission duration of a transmission of a data signal from the A / V source to a playback unit for each playback unit of the system,
To detect an individual processing time of a signal processing of the A / V data signal by the reproduction unit for each reproduction unit of the system, and
To set an individual delay time for each display unit of the system based on the individual transmission time and individual processing time recorded with respect to the respective display unit.

Mit dem System sind die oben mit Bezug auf das Verfahren genannten Vorteile entsprechend verbunden. Insbesondere kann das System zur Durchführung des Verfahrens nach einer der genannten Ausgestaltungen oder einer beliebigen Kombination von wenigstens zwei dieser Ausgestaltungen verwendet werden. With the system, the advantages mentioned above with respect to the method are connected accordingly. In particular, the system can be used to carry out the method according to one of the stated embodiments or any combination of at least two of these embodiments.

Nach einer vorteilhaften Ausgestaltung ist die Datenverarbeitungseinheit eingerichtet, die individuellen Verzögerungszeiten bei Inbetriebnahme des Systems oder vor jedem Verbindungsaufbau zwischen der A/V-Quelle und den Wiedergabeeinheiten festzulegen. Mit dieser Ausgestaltung sind die oben mit der entsprechenden Ausgestaltung des Verfahrens genannten Vorteile entsprechend verbunden. According to an advantageous embodiment, the data processing unit is set up to set the individual delay times when the system is put into operation or before each connection establishment between the A / V source and the display units. With this embodiment, the advantages mentioned above with the corresponding embodiment of the method are connected accordingly.

Gemäß einer weiteren vorteilhaften Ausgestaltung ist die Datenverarbeitungseinheit eingerichtet, die individuelle Verarbeitungsdauer einer nachträglich in das System integrierten Wiedergabeeinheit automatisch zu erfassen. Mit dieser Ausgestaltung sind die oben mit der entsprechenden Ausgestaltung des Verfahrens genannten Vorteile entsprechend verbunden. According to a further advantageous embodiment, the data processing unit is set up to automatically detect the individual processing time of a reproduction unit which is subsequently integrated in the system. With this embodiment, the advantages mentioned above with the corresponding embodiment of the method are connected accordingly.

Eine weitere vorteilhafte Ausgestaltung sieht vor, dass die Datenverarbeitungseinheit eingerichtet ist, eine Ziel-Verzögerungszeit vorzugeben und eine Datenverbindung zwischen der A/V-Quelle und einer Wiedergabeeinheit herzustellen, wenn ein Datensignal innerhalb der Ziel-Verzögerungszeit von der Wiedergabeeinheit wiedergegeben werden kann. Mit dieser Ausgestaltung sind die oben mit der entsprechenden Ausgestaltung des Verfahrens genannten Vorteile entsprechend verbunden. A further advantageous embodiment provides that the data processing unit is set up to specify a target delay time and establish a data connection between the A / V source and a playback unit when a data signal within the target delay time of the Playback unit can be played. With this embodiment, the advantages mentioned above with the corresponding embodiment of the method are connected accordingly.

Vorteilhafterweise ist die Datenverarbeitungseinheit eingerichtet, der Wiedergabeeinheit eine Pufferzeit vorzugeben, wenn das Datensignal nicht innerhalb der Ziel-Verzögerungszeit von der Wiedergabeeinheit wiedergegeben werden kann. Mit dieser Ausgestaltung sind die oben mit der entsprechenden Ausgestaltung des Verfahrens genannten Vorteile entsprechend verbunden. Beispielsweise kann ein Audiomanager des Systems über die nötigen Informationen verfügen, um die passenden Pufferlängen vorgeben zu können. Advantageously, the data processing unit is set up to give the playback unit a buffer time if the data signal can not be reproduced by the playback unit within the target delay time. With this embodiment, the advantages mentioned above with the corresponding embodiment of the method are connected accordingly. For example, an audio manager of the system may have the information necessary to specify the appropriate buffer lengths.

Es ist des Weiteren von Vorteil, wenn die Ziel-Verzögerungszeit in einem Bereich von etwa 100 ms bis etwa 200 ms liegt. Mit dieser Ausgestaltung sind die oben mit der entsprechenden Ausgestaltung des Verfahrens genannten Vorteile entsprechend verbunden. It is further advantageous if the target delay time is in a range of about 100 ms to about 200 ms. With this embodiment, the advantages mentioned above with the corresponding embodiment of the method are connected accordingly.

Nach einer weiteren vorteilhaften Ausgestaltung ist die Datenverarbeitungseinheit eingerichtet, eine in einem ungünstigsten Fall bei einer gegebenen Konfiguration des Systems erforderliche Verzögerungszeit vorzugeben und diese Verzögerungszeit als minimale Ziel-Verzögerungszeit zu verwenden. Mit dieser Ausgestaltung sind die oben mit der entsprechenden Ausgestaltung des Verfahrens genannten Vorteile entsprechend verbunden. According to a further advantageous embodiment, the data processing unit is set up to specify a delay time required in a worst case scenario for a given configuration of the system and to use this delay time as the minimum target delay time. With this embodiment, the advantages mentioned above with the corresponding embodiment of the method are connected accordingly.

Weitere Einzelheiten, Merkmale und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung und der Figuren. Es zeigen: Further details, features and advantages of the invention will become apparent from the following description and the figures. Show it:

1 eine schematische Darstellung eines Ausführungsbeispiels für ein erfindungsgemäßes System; und 1 a schematic representation of an embodiment of a system according to the invention; and

2 ein Flussdiagramm zur Veranschaulichung der Schritte eines Ausführungsbeispiels für ein erfindungsgemäßes Verfahren. 2 a flowchart for illustrating the steps of an embodiment of a method according to the invention.

1 zeigt eine schematische Darstellung eines Ausführungsbeispiels für ein erfindungsgemäßes System 1 zum synchronen Wiedergeben von Audiosignalen und Videosignalen in einer Fahrgastzelle 8 eines Fahrzeugs. 1 shows a schematic representation of an embodiment of a system according to the invention 1 for synchronously playing audio signals and video signals in a passenger compartment 8th of a vehicle.

Das System 1 umfasst eine A/V-Quelle 2 zum Erzeugen von Datensignalen, eine Audiowiedergabeeinheit 3 zum Empfangen und Verarbeiten der Datensignale, eine Videowiedergabeeinheit 4 zum Empfangen und Verarbeiten der Datensignale, ein die A/V-Quelle 2 kommunikationstechnisch mit den Wiedergabeeinheiten 3 und 4 verbindendes Kommunikationsnetz 5 und eine Datenverarbeitungseinheit 6 zum Steuern und/oder Regeln einer Datenkommunikation zwischen der A/V-Quelle 2 und den Wiedergabeeinheiten 3 und 4. Die von der A/V-Quelle 2 erzeugten Datensignale können beispielsweise Fernsehsignale sein. Das Kommunikationsnetz 5 kann kabelgebunden oder zumindest teilweise kabellos ausgeführt sein. Die Wiedergabeeinheit 4 umfasst eine nicht gezeigte Bildwiedergabeeinheit, beispielsweise ein Display oder dergleichen. Die Wiedergabeeinheit 4 kann auch als Touchscreen ausgebildet sein, wobei eine bidirektionale Datenkommunikation zwischen der A/V-Quelle 2 und dieser Wiedergabeeinheit 4 gegeben sein kann. The system 1 includes an A / V source 2 for generating data signals, an audio playback unit 3 for receiving and processing the data signals, a video display unit 4 for receiving and processing the data signals, an A / V source 2 communication technology with the playback units 3 and 4 connecting communication network 5 and a data processing unit 6 for controlling and / or regulating data communication between the A / V source 2 and the playback units 3 and 4 , The from the A / V source 2 generated data signals can be, for example, television signals. The communication network 5 Can be wired or at least partially wireless. The playback unit 4 includes an image display unit, not shown, such as a display or the like. The playback unit 4 can also be designed as a touch screen, wherein a bidirectional data communication between the A / V source 2 and this playback unit 4 can be given.

Die Datenverarbeitungseinheit 6 ist eingerichtet, eine individuelle Übertragungsdauer einer Übertragung eines Datensignals von der A/V-Quelle 2 an eine der Wiedergabeeinheiten 3 bzw. 4 für jede Wiedergabeeinheit 3 bzw. 4 des Systems 1 zu erfassen. Zudem ist die Datenverarbeitungseinheit 6 eingerichtet, eine individuelle Verarbeitungsdauer einer Signalverarbeitung des Datensignals durch die jeweilige Wiedergabeeinheit 3 bzw. 4 für jede Wiedergabeeinheit 3 bzw. 4 des Systems 1 zu erfassen. Ferner ist die Datenverarbeitungseinheit 6 eingerichtet, eine individuelle Verzögerungszeit für jede Wiedergabeeinheit 3 bzw. 4 des Systems 1 auf Basis der bezüglich der jeweiligen Wiedergabeeinheit 3 bzw. 4 erfassten individuellen Übertragungsdauer und individuellen Verarbeitungsdauer festzulegen. The data processing unit 6 is set up, an individual transmission duration of a transmission of a data signal from the A / V source 2 to one of the display units 3 respectively. 4 for each playback unit 3 respectively. 4 of the system 1 capture. In addition, the data processing unit 6 set up, an individual processing time of signal processing of the data signal by the respective playback unit 3 respectively. 4 for each playback unit 3 respectively. 4 of the system 1 capture. Further, the data processing unit 6 set up, an individual delay time for each playback unit 3 respectively. 4 of the system 1 based on the respective playback unit 3 respectively. 4 set individual transmission duration and individual processing time.

Die Datenverarbeitungseinheit 6 kann eingerichtet sein, die individuellen Verzögerungszeiten bei Inbetriebnahme des Systems 1 oder vor jedem Verbindungsaufbau zwischen der A/V-Quelle 2 und den Wiedergabeeinheiten 3 und 4 festzulegen. The data processing unit 6 can be set up, the individual delay times when commissioning the system 1 or before each connection between the A / V source 2 and the playback units 3 and 4 set.

Die Datenverarbeitungseinheit 6 kann eingerichtet sein, die Verarbeitungsdauer einer nachträglich in das A/V-Wiedergabesystem 1 integrierten Wiedergabeeinheit 7 automatisch zu erfassen. The data processing unit 6 can be set up, the processing time of a subsequent in the A / V playback system 1 integrated playback unit 7 automatically detect.

Die A/V-Quelle 2 kann eingerichtet sein, eine Ziel-Verzögerungszeit zu erzeugen, wobei die Datenverarbeitungseinheit 6 eingerichtet sein kann, eine Datenverbindung zwischen der A/V-Quelle 2 und einer Wiedergabeeinheit 3, 4 bzw. 7 herzustellen, wenn ein Datensignal innerhalb der Ziel-Verzögerungszeit von der Wiedergabeeinheit 3, 4 bzw. 7 wiedergegeben werden kann. Zudem kann die Datenverarbeitungseinheit 6 eingerichtet sein, der Wiedergabeeinheit 3, 4 bzw. 7 eine Pufferzeit vorzugeben, wenn das Datensignal nicht innerhalb der Ziel-Verzögerungszeit von der Wiedergabeeinheit 3, 4 bzw. 7 wiedergegeben werden kann. Die Ziel-Verzögerungszeit kann in einem Bereich von etwa 100 ms bis etwa 200 ms liegen. The A / V source 2 may be configured to generate a target delay time, wherein the data processing unit 6 can be established, a data connection between the A / V source 2 and a playback unit 3 . 4 respectively. 7 when a data signal within the target delay time from the playback unit 3 . 4 respectively. 7 can be played. In addition, the data processing unit 6 be set up, the playback unit 3 . 4 respectively. 7 to specify a buffer time if the data signal is not within the target delay time from the playback unit 3 . 4 respectively. 7 can be played. The target delay time may be in a range of about 100 ms to about 200 ms.

Die A/V-Quelle 2 kann eingerichtet sein, eine in einem ungünstigsten Fall bei einer gegebenen Konfiguration des Systems 1 erforderliche Verzögerungszeit vorzugeben, wobei die Datenverarbeitungseinheit 6 eingerichtet sein kann, diese Verzögerungszeit als minimale Ziel-Verzögerungszeit zu verwenden. The A / V source 2 can be set up, one in a worst case scenario given configuration of the system 1 specify required delay time, wherein the data processing unit 6 may be configured to use this delay time as the minimum target delay time.

2 zeigt ein Flussdiagramm zur Veranschaulichung der Schritte eines Ausführungsbeispiels für ein erfindungsgemäßes Verfahren zum synchronen Wiedergeben von Audiosignalen und Videosignalen in einer Fahrgastzelle eines Fahrzeugs. Zur Durchführung des Verfahrens kann ein System entsprechend 1 verwendet werden. 2 shows a flowchart illustrating the steps of an embodiment of a method according to the invention for synchronously reproducing audio signals and video signals in a passenger compartment of a vehicle. To carry out the method, a system can be used accordingly 1 be used.

In Verfahrensschritt 100 wird eine individuelle Übertragungsdauer einer Übertragung eines Datensignals von einer A/V-Quelle eines A/V-Wiedergabesystems des Fahrzeugs an eine Wiedergabeeinheit des A/V-Wiedergabesystems für jede Wiedergabeeinheit des A/V-Wiedergabesystems erfasst. In process step 100 For example, an individual transmission time of transmitting a data signal from an A / V source of an A / V reproducing system of the vehicle to a reproducing unit of the A / V reproducing system is detected for each reproducing unit of the A / V reproducing system.

In Verfahrensschritt 200 wird eine individuelle Verarbeitungsdauer einer Signalverarbeitung des Datensignals durch die Wiedergabeeinheit für jede Wiedergabeeinheit des A/V-Wiedergabesystems erfasst. In process step 200 For example, an individual processing time of signal processing of the data signal by the reproduction unit is detected for each reproduction unit of the A / V reproduction system.

In Verfahrensschritt 300 wird eine individuelle Verzögerungszeit für jede Wiedergabeeinheit des A/V-Wiedergabesystems auf Basis der bezüglich der jeweiligen Wiedergabeeinheit erfassten individuellen Übertragungsdauer und individuellen Verarbeitungsdauer festgelegt. Das Festlegen der individuellen Verzögerungszeiten kann bei Inbetriebnahme des A/V-Wiedergabesystems oder vor jedem Verbindungsaufbau zwischen der A/V-Quelle und den Wiedergabeeinheiten erfolgen. In process step 300 For example, an individual delay time is set for each reproducing unit of the A / V reproducing system on the basis of the individual transmission time and the individual processing time detected with respect to the respective reproducing unit. The individual delay times can be set when the A / V playback system is started up or before each connection between the A / V source and the playback units.

Gemäß dem Verfahren kann die individuelle Verarbeitungsdauer einer nachträglich in das A/V-Wiedergabesystem integrierten Wiedergabeeinheit automatisch erfasst werden. According to the method, the individual processing time of a reproducing unit integrally incorporated into the A / V reproducing system can be automatically detected.

Eine Datenverbindung zwischen der A/V-Quelle und einer Wiedergabeeinheit kann hergestellt werden, wenn ein Datensignal innerhalb einer vorgegebenen Ziel-Verzögerungszeit von der Wiedergabeeinheit wiedergegeben werden kann. Der Wiedergabeeinheit kann eine Pufferzeit vorgegeben werden, wenn das Datensignal nicht innerhalb der Ziel-Verzögerungszeit von der Wiedergabeeinheit wiedergegeben werden kann. Als Ziel-Verzögerungszeit kann ein Wert zwischen etwa 100 ms und etwa 200 ms gewählt werden. Von der Wiedergabeeinheit kann eine in einem ungünstigsten Fall bei einer gegebenen Konfiguration des A/V-Wiedergabesystems erforderliche Verzögerungszeit vorgegeben werden, wobei diese Verzögerungszeit als minimale Ziel-Verzögerungszeit verwendet werden kann. A data connection between the A / V source and a playback unit can be established when a data signal can be reproduced within a predetermined target delay time by the playback unit. The playback unit may be given a buffer time if the data signal can not be reproduced within the target delay time from the playback unit. As the target delay time, a value between about 100 ms and about 200 ms can be selected. The playback unit may specify a worst case delay time for a given configuration of the A / V playback system, which delay time may be used as a minimum target delay time.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

1 1: System system
2 2: A/V-Quelle A / V source
3 3: Audiowiedergabeeinheit Audio playback unit
4 4: Videowiedergabeeinheit Video display
5 5: Übertragungssystem transmission system
6 6: Datenverarbeitungseinheit Data processing unit
7 7: Wiedergabeeinheit Playback unit
8 8th: Fahrgastzelle cabin
100 100: Verfahrensschritt step
200 200: Verfahrensschritt step
300 300: Verfahrensschritt step

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

US 8606070 B2 [0005]

Claims

Method for synchronously reproducing audio signals and video signals in a passenger compartment ( 8th ) of a vehicle, comprising the steps of: - detecting ( 100 ) of an individual transmission duration of a transmission of a data signal from an A / V source ( 2 ) of an A / V playback system ( 1 ) of the vehicle to a playback unit ( 3 . 4 . 7 ) of the A / V playback system ( 1 ) for each playback unit ( 3 . 4 . 7 ) of the A / V playback system ( 1 ); - To capture ( 200 ) an individual processing duration of a signal processing of the data signal by the playback unit ( 3 . 4 . 7 ) for each playback unit ( 3 . 4 . 7 ) of the A / V playback system ( 1 ); and - specify ( 300 ) of an individual delay time for each playback unit ( 3 . 4 . 7 ) of the A / V playback system ( 1 ) based on the respective playback unit ( 3 . 4 . 7 ) recorded individual transmission duration and individual processing time.

Method according to Claim 1, characterized in that the setting of the individual delay times when the A / V reproduction system is put into operation ( 1 ) or before each connection between the A / V source ( 2 ) and the playback units ( 3 . 4 . 7 ) he follows.

A method according to claim 1 or 2, characterized in that the individual processing time of a subsequent in the A / V playback system ( 1 ) integrated playback unit ( 7 ) is detected automatically.

Method according to one of claims 1 to 3, characterized in that a data connection between the A / V source ( 2 ) and a playback unit ( 3 . 4 . 7 ) is produced when a data signal within a predetermined target delay time from the playback unit ( 3 . 4 . 7 ) can be reproduced.

Method according to claim 4, characterized in that the reproduction unit ( 3 . 4 . 7 ) a buffer time is specified if the data signal is not received within the target delay time by the playback unit ( 3 . 4 . 7 ) can be reproduced.

A method according to claim 4 or 5, characterized in that a value between about 100 ms and about 200 ms is selected as the target delay time.

Method according to one of claims 4 to 6, characterized in that the reproduction unit ( 2 ) in a worst-case scenario given a configuration of the A / V playback system ( 1 ), said delay time being used as the minimum target delay time.

System ( 1 ) for synchronously reproducing audio signals and video signals in a passenger compartment ( 8th ) of a vehicle, comprising - at least one A / V source ( 2 ) for generating data signals, - at least one audio reproduction unit ( 3 . 7 ) for receiving and processing the data signals, - at least one video display unit ( 4 . 7 ) for receiving and processing the data signals, - at least one the A / V source ( 2 ) communication technology with the playback units ( 3 . 4 . 7 ) connecting communication network ( 5 ) and - at least one data processing unit ( 6 ) for controlling and / or regulating data communication between the A / V source ( 2 ) and the playback units ( 3 . 4 . 7 ), - wherein the data processing unit ( 6 ), an individual transmission duration of a transmission of a data signal from the A / V source ( 2 ) to a playback unit ( 3 . 4 . 7 ) for each playback unit ( 3 . 4 . 7 ) of the system ( 1 ) - an individual processing duration of a signal processing of the data signal by the reproduction unit ( 3 . 4 . 7 ) for each playback unit ( 3 . 4 . 7 ) of the system ( 1 ) and - an individual delay time for each playback unit ( 3 . 4 . 7 ) of the system ( 1 ) based on the respective playback unit ( 3 . 4 . 7 ) and the individual processing time.

System ( 1 ) according to claim 8, characterized in that the data processing unit ( 6 ), the individual delay times at system startup ( 1 ) or before each connection between the A / V source ( 2 ) and the playback units ( 3 . 4 . 7 ).

System ( 1 ) according to claim 8 or 9, characterized in that the data processing unit ( 6 ), the individual processing time of a subsequent entry into the system ( 1 ) integrated playback unit ( 7 ) automatically.

System ( 1 ) according to one of claims 8 to 10, characterized in that the data processing unit ( 6 ) is set to specify a target delay time and a data connection between the A / V source ( 2 ) and a playback unit ( 3 . 4 . 7 ) when a data signal within the target delay time from the playback unit ( 3 . 4 . 7 ) can be reproduced.

System ( 1 ) according to claim 11, characterized in that the data processing unit ( 6 ), the playback unit ( 3 . 4 . 7 ) to specify a buffer time if the data signal is not received by the playback unit within the target delay time (FIG. 3 . 4 . 7 ) can be reproduced.

System ( 1 ) according to claim 11 or 12, characterized in that the target delay time is in a range of about 100 ms to about 200 ms.

System ( 1 ) according to one of claims 11 to 13, characterized in that the data processing unit ( 6 ), at worst in a given configuration of the system ( 1 ) and to use this delay time as the minimum target delay time.