EP1380126B1 - Entertainment device with a search function for data similar in type to instantaneously reproduced data - Google Patents

Entertainment device with a search function for data similar in type to instantaneously reproduced data Download PDF

Info

Publication number
EP1380126B1
EP1380126B1 EP02737758A EP02737758A EP1380126B1 EP 1380126 B1 EP1380126 B1 EP 1380126B1 EP 02737758 A EP02737758 A EP 02737758A EP 02737758 A EP02737758 A EP 02737758A EP 1380126 B1 EP1380126 B1 EP 1380126B1
Authority
EP
European Patent Office
Prior art keywords
data
processor
entertainment device
entertainment appliance
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
EP02737758A
Other languages
German (de)
French (fr)
Other versions
EP1380126A2 (en
Inventor
Andreas Engelsberg
Sven Bauer
Holger Kussmann
Michael Wollborn
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of EP1380126A2 publication Critical patent/EP1380126A2/en
Application granted granted Critical
Publication of EP1380126B1 publication Critical patent/EP1380126B1/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/61—Arrangements for services using the result of monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
    • H04H60/66—Arrangements for services using the result of monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 for using the result on distributors' side
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/29—Arrangements for monitoring broadcast services or broadcast-related services
    • H04H60/33—Arrangements for monitoring the users' behaviour or opinions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/47—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for recognising genres
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/68—Systems specially adapted for using specific information, e.g. geographical or meteorological information
    • H04H60/73—Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H2201/00—Aspects of broadcast communication
    • H04H2201/10—Aspects of broadcast communication characterised by the type of broadcast system
    • H04H2201/13—Aspects of broadcast communication characterised by the type of broadcast system radio data system/radio broadcast data system [RDS/RBDS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H2201/00—Aspects of broadcast communication
    • H04H2201/10—Aspects of broadcast communication characterised by the type of broadcast system
    • H04H2201/20—Aspects of broadcast communication characterised by the type of broadcast system digital audio broadcasting [DAB]

Definitions

  • the invention relates to an entertainment device according to the preamble of the independent claim.
  • an entertainment device such as a car radio, a processor for processing of data to be displayed and means for optical and / or acoustic reproduction has on.
  • These display means include a display and a speaker system.
  • a radio receiver and a method for operating such a radio receiver are known.
  • common characteristic properties of previously set and received programs are determined in order to determine the listening habits of the user and then only to offer or output the programs corresponding to the listening habits to the user for listening.
  • the characteristic properties are determined such that a frequency distribution and / or a pause distribution of the audio signal or a chrominance distribution and / or brightness distribution of video signals and RDS identifiers or VPS identifiers are evaluated.
  • From WO 94/08407 the search of a program according to the wishes of a user is disclosed.
  • a program filtering is carried out.
  • a code is stored which corresponds to the PTY information of the program type of the currently set station.
  • EP-A-0 680 166 discloses that a key leads to an action in the entertainment device only if the button is pressed continuously for a certain time, for example 2 seconds. From GB-A-2 258 102 it is known to buffer currently playing data. It is known from WO 99/43109 that a user actuates a key that causes address information transmitted over a DAB channel to be used to retrieve audio clips from a database via a cellular line.
  • the entertainment device has the advantage that it is possible by the operation of a control element to search and reproduce similar data to the currently reproduced data by the entertainment device according to the invention, as long as this function is activated.
  • a control element search and reproduce similar data to the currently reproduced data by the entertainment device according to the invention, as long as this function is activated.
  • This can for example be a program type designation, as already achieved by the known program type (PTY) in car radios, or even a comprehensive data description, for example with MPEG 7.
  • the processor of the entertainment device according to the invention can search and find identical data.
  • the entertainment device according to the invention has the advantage that the user is not constantly after completion of a post, a song but also news or a weather report to search for new sources to find similar contributions.
  • messages it may be, for example, that you want more detailed or further messages, which are then also searched in particular on the Internet.
  • the processor with the at least one characteristic feature changes a user profile. This makes it possible to recognize the preferences of a user and to respond accordingly. If, for example, a user now has the interest of being able to reproduce stock market news, then this is achieved in his user profile by the actuation of the operating element according to the invention. It is particularly advantageous that this change in the user profile is acknowledged by an acoustic and / or visual message. The effort to adapt a user profile is thereby significantly simplified. It also takes into account the fact that, especially in the case of multimedia data, wishes and preferences can change rapidly. There is thus a learning, adaptive user profile.
  • the data found which also have the characteristic feature, are reproduced. This can either be done directly by starting a data sequence, for example a broadcast program, or by displaying a list of comparable data found. In this case, it is possible in particular for a user profile to be used to prioritize or even prioritize the processor itself by evaluating the data found.
  • the selection is carried out according to the wishes and needs of the driver or user by the operation of a control element according to the invention.
  • This actuation triggers a processor of the entertainment device according to the invention to analyze the data currently being displayed for such descriptions or features and then to use this feature to search for other data which also has this feature.
  • a Like-Mir button or an equivalent control is thus realized according to the invention by a Like-Mir button or an equivalent control.
  • both functionalities or only one of both can be realized with a control element according to the invention.
  • FIG. 1 the entertainment device according to the invention is shown schematically.
  • An inventive entertainment device 1 has an inventive control element 2 labeled with Like-it, so a Like-me button, further controls 3 and 4 for adjusting the volume or the station selection and a display panel 5 on.
  • the inventive entertainment device 1 is connected via a line with a speaker 6.
  • FIG. 2 shows a block diagram of the transmission device 1 according to the invention.
  • a processor 7 is connected via a first data input / output to a memory 8 which is used for buffering data.
  • the processor 7 Via a second data input / output, the processor 7 is connected to a signal processor 12, which in turn is connected to a drive for sound carriers 13.
  • the drive 13 may be a minidisc drive or a CD. However, there are also other sound carriers such as a chip card possible.
  • the processor 7 Via a data input, the processor 7 is connected to a digital part 9, which processes a data stream from a high-frequency receiver 10.
  • the radio frequency receiver 10 has an antenna at an input to receive broadcast signals.
  • a radio receiver such as a mobile radio or a wired receiver such as a cable television receiver or a cable modem is possible.
  • the processor 7 is connected via a data output to an audio amplifier 11, which controls the loudspeaker 6. Via a second data input, the processor 7 is connected to a signal processor 14, to which in turn the operating element 2 according to the invention is connected.
  • buttons 2 instead of the button 2 as a control, it is also possible to use a voice control or other similar controls.
  • a user in reproducing data that pleases him, operates the operating element 2, so that the processor 7 searches for comparable data in the broadcasting signals received by the antenna 11 or also searches a sound carrier in the drive 13 whether he has comparable data. If these are found, then they are displayed on the display 5 or with the speaker 6.
  • the feature analysis of the processor 7 in the data currently being displayed in digital data focuses on the existing accompanying description as in MPEG7 the metafiles.
  • analog data it is possible for an assignment of features to be assigned to the corresponding reproduced data either by means of a stored program guide or a directory. This makes it possible for the processor 7 to find corresponding equivalent data and to offer it to the user.
  • the entertainment device may be a car radio, a radio receiver for home use or even a portable radio device. Furthermore, it may be a playback device such as a video recorder or another player for a disk.
  • An entertainment device may further comprise a buffer memory for the data to be replayed, which optionally buffers data already reproduced with description in order to be able to perform the feature analysis also on this data, so that a Users can also search for equivalent data at the end of a piece of music.
  • the duration or frequency of operation of the control element according to the invention determines how long the entertainment device according to the invention searches for equivalent data to the currently reproduced data.
  • the currently reproduced data are stored by the operation of the control element to expand, for example, a music collection.
  • the control element By means of corresponding buffer memories and the description accompanying the data, it is possible to determine the beginning and end of the data so as to be able to store an entire piece of music with the aid of the buffer memory.

Description

Die Erfindung geht aus von einem Unterhaltungsgerät nach der Gattung des unabhängigen Patentanspruchs.The invention relates to an entertainment device according to the preamble of the independent claim.

Es ist bereits bekannt, dass ein Unterhaltungsgerät wie ein Autoradio, einen Prozessor zur Verarbeitung von wiederzugebenden Daten und Mitteln zur optischen und/oder akustischen Wiedergabe auf weist. Zu diesen Wiedergabemitteln gehört eine Anzeige und ein Lautsprecher bzw. Lautsprechersystem.It is already known that an entertainment device such as a car radio, a processor for processing of data to be displayed and means for optical and / or acoustic reproduction has on. These display means include a display and a speaker system.

Aus EP-A-0 935 359 ist ein Rundfunkempfänger und ein Verfahren zum Betreiben eines solchen Rundfunkempfängers bekannt. Dabei werden gemeinsame charakteristische Eigenschaften von zuvor eingestellten und empfangenen Programmen ermittelt, um die Hörgewohnheiten des Nutzers zu bestimmen und dann nur noch die den Hörgewohnheiten entsprechenden Programme dem Benutzer zum Hören anzubieten oder auszugeben. Die charakteristischen Eigenschaften werden dahingehend bestimmt, dass eine Frequenzverteilung und/oder eine Pausenverteilung des Audiosignals bzw. eine Chrominanzverteilung und/oder Helligkeitsverteilung von Videosignalen sowie RDS-Kennungen oder VPS-Kennungen ausgewertet werden. Aus WO 94/08407 ist die Suche eines Programms gemäß den Wünschen eines Benutzers offenbart. Dabei wird eine Programmfilterung vorgenommen. Es wird eine Kennzahl gespeichert, die der PTY-Information also der Programmart des gerade eingestellten Senders entspricht. Eine Abhängigkeit von einer Übereinstimmung gefundener Sender wird zum Empfang angeboten. EP-A-0 680 166 offenbart, dass eine Taste nur dann zu einer Aktion im Unterhaltungsgerät führt, wenn die Taste für eine bestimmte Zeit beispielsweise 2 Sekunden kontinuierlich gedrückt gehalten wird. Aus GB-A-2 258 102 ist es bekannt aktuell wiedergegebene Daten zwischenzuspeichem. Aus WO 99/43109 ist es bekannt, dass ein Benutzer eine Taste betätigt, die es bewirkt, dass Adressinformationen die über einen DAB-Kanal übertragen werden, dazu verwendet werden über eine Mobilfunkleitung Audioclips von einer Datenbank abzurufen.From EP-A-0 935 359 a radio receiver and a method for operating such a radio receiver are known. In this case, common characteristic properties of previously set and received programs are determined in order to determine the listening habits of the user and then only to offer or output the programs corresponding to the listening habits to the user for listening. The characteristic properties are determined such that a frequency distribution and / or a pause distribution of the audio signal or a chrominance distribution and / or brightness distribution of video signals and RDS identifiers or VPS identifiers are evaluated. From WO 94/08407 the search of a program according to the wishes of a user is disclosed. A program filtering is carried out. A code is stored which corresponds to the PTY information of the program type of the currently set station. A dependency on a match of found stations is offered for reception. EP-A-0 680 166 discloses that a key leads to an action in the entertainment device only if the button is pressed continuously for a certain time, for example 2 seconds. From GB-A-2 258 102 it is known to buffer currently playing data. It is known from WO 99/43109 that a user actuates a key that causes address information transmitted over a DAB channel to be used to retrieve audio clips from a database via a cellular line.

Vorteile der ErfindungAdvantages of the invention

Die Vorteile der Erfindung sind durch den Gegenstand der Ansprüche 1-6 erreichbar.The advantages of the invention can be achieved by the subject matter of claims 1-6.

Das erfindungsgemäße Unterhaltungsgerät hat den Vorteil, dass es durch die Betätigung eines Bedienelements möglich wird, artgleiche Daten zu den momentan wiedergegebenen Daten durch das erfindungsgemäße Unterhaltungsgerät suchen und wiedergeben zu lassen, solange diese Funktion aktiviert ist. Damit ist es beispielsweise möglich, dass durch das einfache Betätigen des Bedienelements zu einer laufenden Sportsendung alternative gleichzeitig laufende Sportsendungen gesucht und wiedergegeben werden. Um dies zu bewerkstelligen, sucht dann der Prozessor des erfindungsgemäßen Unterhaltungsgeräts nach wenigstens einem charakteristischen Merkmal, das die aktuell wiedergegebenen Daten charakterisiert. Dies kann beispielsweise eine Programmtyp-Bezeichnung, wie es durch den bekannten Programmtyp (PTY) bei Autoradios bereits erreicht wird, sein oder auch eine umfassende Datenbeschreibung, beispielsweise mit MPEG 7.The entertainment device according to the invention has the advantage that it is possible by the operation of a control element to search and reproduce similar data to the currently reproduced data by the entertainment device according to the invention, as long as this function is activated. Thus, it is possible, for example, that by simply operating the operating element to a running sports program alternative simultaneously running sports broadcasts are searched for and reproduced. To accomplish this, then seek the processor of the entertainment device according to the invention according to at least one characteristic feature that characterizes the currently reproduced data. This can for example be a program type designation, as already achieved by the known program type (PTY) in car radios, or even a comprehensive data description, for example with MPEG 7.

Digitale Rundfunkprogramme oder digitale Multimediadaten weisen jedoch viele Möglichkeiten auf, um durch eine Beschreibung die wiedergegebenen Daten zu charakterisieren. Anhand dieser Beschreibung, die mit den wiedergegebenen Daten empfangen wird, kann dann der Prozessor des erfindungsgemäßen Unterhaltungsgeräts wesensgleiche Daten suchen und finden. Insbesondere in einem Kraftfahrzeug und bei einem Rundfunkempfang im Allgemeinen eröffnet das erfindungsgemäße Unterhaltungsgerät den Vorteil, dass der Nutzer nicht ständig nach Beendigung eines Beitrags, eines Liedes aber auch Nachrichten oder eines Wetterberichts nach neuen Quellen suchen muß, um ähnliche Beiträge zu finden. Bei Nachrichten kann es dabei beispielsweise sein, dass man ausführlichere oder weitere Nachrichten wünscht, die dann auch insbesondere im Internet gesucht werden. Durch die Bezeichnung des Bedienelements mit beispielsweise "gefällt mir" ist eine intuitive einfache Bedienung für einen Nutzer hier möglich, um den Bedienkomfort eines Unterhaltungsgeräts zu erhöhen, ohne komplexe Eingaben durchführen zu müssen.However, digital broadcast programs or digital multimedia data have many possibilities to characterize the reproduced data by a description. Based on this description, which is received with the reproduced data, then the processor of the entertainment device according to the invention can search and find identical data. In particular, in a motor vehicle and in a radio reception in general, the entertainment device according to the invention has the advantage that the user is not constantly after completion of a post, a song but also news or a weather report to search for new sources to find similar contributions. In the case of messages, it may be, for example, that you want more detailed or further messages, which are then also searched in particular on the Internet. By designating the control element with, for example, "like" an intuitive simple operation for a user is possible here to increase the ease of use of an entertainment device, without having to perform complex inputs.

Besonders vorteilhaft ist, dass der Prozessor mit dem wenigstens einen charakteristischen Merkmal ein Benutzerprofil ändert. Damit ist es möglich, die Vorlieben eines Nutzers zu erkennen und entsprechend darauf zu reagieren. Hat beispielsweise ein Nutzer nun das Interesse, Börsennachrichten wiedergegeben zu bekommen, dann wird das in seinem Benutzerprofil durch die Betätigung des erfindungsgemäßen Bedienelements erreicht. Dabei ist es insbesondere vorteilhaft, dass diese Änderung des Benutzerprofils durch eine akustische und/oder optische Meldung quittiert wird. Der Aufwand somit ein Benutzerprofil anzupassen, wird dadurch entscheidend vereinfacht. Außerdem wird dadurch der Eigenschaft Rechnung getragen, dass insbesondere bei Multimediadaten sich Wünsche und Vorlieben rasch ändern können. Es liegt damit ein lernendes, adaptives Benutzerprofil vor.It is particularly advantageous that the processor with the at least one characteristic feature changes a user profile. This makes it possible to recognize the preferences of a user and to respond accordingly. If, for example, a user now has the interest of being able to reproduce stock market news, then this is achieved in his user profile by the actuation of the operating element according to the invention. It is particularly advantageous that this change in the user profile is acknowledged by an acoustic and / or visual message. The effort to adapt a user profile is thereby significantly simplified. It also takes into account the fact that, especially in the case of multimedia data, wishes and preferences can change rapidly. There is thus a learning, adaptive user profile.

Darüber hinaus ist es von Vorteil, dass die gefundenen Daten, die ebenfalls das charakteristische Merkmal aufweisen, wiedergegeben werden. Dies kann entweder direkt durch ein Anspielen einer Datenfolge, beispielsweise eines Rundfunkprogramms, geschehen, oder durch Aufzeigen einer Liste von gefundenen vergleichbaren Daten. Dabei ist es insbesondere möglich, dass durch ein Benutzerprofil eine Priorisierung oder auch eine Priorisierung durch den Prozessor selbst durch eine Bewertung der gefundenen Daten vorgenommen werden kann.In addition, it is advantageous that the data found, which also have the characteristic feature, are reproduced. This can either be done directly by starting a data sequence, for example a broadcast program, or by displaying a list of comparable data found. In this case, it is possible in particular for a user profile to be used to prioritize or even prioritize the processor itself by evaluating the data found.

Schließlich ist es auch von Vorteil, dass durch die Betätigungsdauer oder Betätigungshäufigkeit des erfindungsgemäßen Bedienelements bestimmt wird, wie lange der Prozessor nach Daten mit dem wenigstens einen charakteristischen Merkmal sucht. Damit ist es dem Benutzer überlassen, zu bestimmen, wie lange nach vergleichbaren Daten gesucht wird.Finally, it is also advantageous that is determined by the duration of actuation or actuation frequency of the control element according to the invention, as long as the processor for data with the at least one characteristic feature searches. Thus, it is up to the user to determine how long to search for comparable data.

Zeichnungdrawing

Ausführungsbeispiele der Erfindung sind in der Zeichnung dargestellt und werden in der nachfolgenden Beschreibung näher erläutert. Es zeigt

  • Figur 1 eine schematische Darstellung des erfindungsgemäßen Unterhaltungsgeräts und
  • Figur 2 ein Blockschaltbild des erfindungsgemäßen Unterhaltungsgeräts.
Embodiments of the invention are illustrated in the drawings and are explained in more detail in the following description. It shows
  • Figure 1 is a schematic representation of the entertainment device according to the invention and
  • Figure 2 is a block diagram of the entertainment device according to the invention.

Beschreibungdescription

In zukünftigen Fahrzeugen wird sich eine Vielzahl von Funktionalitäten, die über einzelne Geräte oder über ein Infotainmentsystem abgerufen werden können, finden. Dazu gehören in der Übergangsphase analoge Radio- und Fernsehempfänger (FM, PAL, NTSC) sowie zukünftig digitale Empfängertechnologien wie DAB (Digital Audio Broadcasting) DMB (Digital Multimedia Broadcasting), DRM (Digital Radio Mondial) und DVB (Digital Video Broadcasting). Darüber hinaus hat dann fast jedes Kraftfahrzeug eine Anbindung an ein mobiles Punkt-zu-Punkt-Kommunikationssystem wie es beispielsweise GSM, GPRS oder UMTS sind. Über diese Mobilfunksysteme sind beliebige Dienste auch aus dem Internet nutzbar. Damit liegt dann eine unüberschaubare Menge an multimedialer Information und Unterhaltung in einem Kraftfahrzeug vor. Dies gilt ebenso für Heimempfänger, die eine Vielzahl und vor allem steigende Zahl von Sendern und Datendiensten bekommen. Um dem Fahrer bzw. einem Benutzer bzw. einem Mitreisenden die Information oder Unterhaltung gezielt und damit ausgesucht präsentieren zu können, ist ein Content-Management wünschenswert. Dies besteht zum einen aus einer zusätzlichen Beschreibung des Inhalts und damit einer Merkmalszuordnung für wiederzugebende Daten, damit das System beim Empfang von diesen Daten bereits weiß, um was für einen Inhalt es sich handelt. Diese Beschreibung kann direkt mit den Daten übertragen werden oder sie wird dem System auf einem beliebigen Weg zugeführt, beispielsweise über eine Art elektronische Programmzeitschrift oder andere Zusatzinformationen. Ein Beispiel für ein solches System ist RDS-PTY (Programmtypcode). Auch MPEG7 wird eine solche Beschreibung aufweisen.In future vehicles, a large number of functionalities that can be accessed via individual devices or via an infotainment system will be found. These include analogue radio and television receivers (FM, PAL, NTSC) and, in the future, digital receiver technologies such as DAB (Digital Audio Broadcasting), Digital Multimedia Broadcasting (DMB), Digital Radio Mondial (DRM) and Digital Video Broadcasting (DVB). In addition, then almost every motor vehicle has a connection to a mobile point-to-point communication system such as GSM, GPRS or UMTS. Any number of services from the Internet can also be used via these mobile radio systems. This is then an unmanageable amount of multimedia information and entertainment in a motor vehicle before. This also applies to home recipients who get a variety and especially increasing number of channels and data services. In order to be able to present the information or entertainment specifically and thus selected to the driver or a user or a fellow traveler is a Content management desirable. This consists on the one hand of an additional description of the content and thus of a feature assignment for data to be reproduced, so that the system already knows when receiving this data what the content is. This description may be transmitted directly with the data or it may be supplied to the system by any means, such as a kind of electronic program guide or other additional information. An example of such a system is RDS-PTY (Program Type Code). Also MPEG7 will have such a description.

Erfindungsgemäß erfolgt nun die Auswahl entsprechend der Wünsche und Bedürfnisse des Fahrers oder Benutzers durch die Betätigung eines erfindungsgemäßen Bedienelements. Diese Betätigung löst aus, dass ein Prozessor des erfindungsgemäßen Unterhaltungsgeräts die aktuell wiedergegebenen Daten auf solche Beschreibungen oder Merkmale hin analysiert und mit diesem gewonnenen Merkmal dann nach anderen Daten sucht, die auch dieses Merkmal aufweisen. Dies wird damit erfindungsgemäß durch eine Gefällt-Mir-Taste oder ein äquivalentes Bedienelement realisiert.According to the invention, the selection is carried out according to the wishes and needs of the driver or user by the operation of a control element according to the invention. This actuation triggers a processor of the entertainment device according to the invention to analyze the data currently being displayed for such descriptions or features and then to use this feature to search for other data which also has this feature. This is thus realized according to the invention by a Like-Mir button or an equivalent control.

Als Daten werden hier Audio- und Videodaten auf Tonträgern oder mittels Rundfunksignal empfangen, verstanden. Es ist weiterhin möglich, dass auch andere Multimediadaten mit dem erfindungsgemäßen Unterhaltungsgerät wiedergegeben und gesucht werden können.As data here audio and video data on phonograms or by means of broadcast signal received, understood. It is also possible that other multimedia data can be reproduced and searched with the entertainment device according to the invention.

Das erfindungsgemäße Übertragungsgerät ist für jedes Infotainmentsystem einsetzbar, also nicht nur Autoradios, sondern auch Heimempfänger oder tragbare Unterhaltungsgeräte. Wenn der Anwender das Gerät nutzt, kann er das erfindungsgemäße Bedienelement des Unterhaltungsgeräts betätigen, wenn ihm eine Information oder ein unterhaltender Inhalt präsentiert wird, der von ihm prinzipiell gewünscht wird. Dabei ergeben sich dann nur zwei unterschiedliche Funktionalitäten:

  • 1. Das Bedienelement agiert als Query-by-example. D.h. wird ein Inhalt präsentiert, der dem Nutzer gefällt, kann er das Bedienelement drücken. Daraufhin werden die beigefügten Inhaltsbeschreibungen, z.B. MPEG7 Dateien genutzt, um im aktuellen Rundfunkprogramm und alle anderen aktuell verfügbaren Inhalte über Internet, CDs, MPEG3-Dateien, DVDs, Radio, Fernsehen, sonstige Dienste über Mobilfunk oder Rundfunk nach Inhalten zu suchen, die ähnlich zum aktuell präsentierten Inhalt sind. Diese Suchergebnisse werden dann entweder automatisch priorisiert und nach Beendigung des aktuellen Inhalts der Reihe nach präsentiert oder als Wahlmöglichkeit dem Nutzer aufgelistet. Im Kfz wird vorteilhafterweise aus Gründen der Sicherheit die erste Variante bevorzugt. Natürlich werden die Suchergebnisse während der Präsentation ständig aktualisiert, da die zeitliche Komponente eine Rolle spielt. Beispielsweise bei Broadcast-Anwendungen kann der zeitliche Ablauf nicht geändert werden. Dieses Query by example kann prinzipiell für alle Dienste bzw. Inhalte verwendet werden oder auch nur für einzelne, beispielsweise nur für Musik. Solange nun dieses Bedienelement aktiviert ist, wird nur der Inhalt nach dem gewünschten Muster präsentiert. Drückt man das Bedienelement erneut, wird wieder der Lieblingssender oder die Lieblings-CD gespielt. Alternativ ist es möglich, dass auch der zuletzt eingestellte Radiosender oder die zuletzt eingespielte CD eingespielt werden.
  • 2. Ein Gefällt-mir-Knopf oder Nice-Button wird darüber hinaus verwendet, um ein vorhandenes Fahrerprofil dynamisch anzupassen und zu erweitern. Wird dem Nutzer ein Inhalt präsentiert, der ihm gefällt, so kann dieser beispielsweise durch langes Drücken oder zweimaliges Drücken dem System mitteilen, dass die Beschreibungsdaten dieses Inhalts, also die MPEG7-Metadateien in sein Profil aufgenommen werden sollen. Die Metadateien können bereits vorhandene Daten dabei sowohl ergänzen als auch ersetzen. Das Verfahren zur Berücksichtigung der Beschreibungsdaten kann also beliebig von einem Profilmanagement vorgegeben werden. Der-Nutzer kann nach Berücksichtigung der Beschreibungsdaten eine akustische und/oder optische Bestätigung erhalten.
The transmission device according to the invention can be used for any infotainment system, so not only car radios, but also home receiver or portable entertainment devices. If the user uses the device, he can control the inventive element of Entertaining device when presented information or entertaining content, which is in principle desired by him. This results in only two different functionalities:
  • 1. The control acts as a query-by-example. That is, a content is presented that pleases the user, he can press the control. Thereafter, the attached content descriptions, eg MPEG7 files are used to search in the current broadcasting program and all other currently available content on the Internet, CDs, MPEG3 files, DVDs, radio, television, other services via mobile or radio for content, similar to currently presented content. These search results are then either automatically prioritized and presented after completion of the current content in order or listed as an option to the user. In motor vehicles, the first variant is advantageously preferred for reasons of safety. Of course, the results are constantly updated during the presentation because the time component plays a role. For example, in broadcast applications, the timing can not be changed. This query by example can in principle be used for all services or contents or only for individual ones, for example only for music. As long as this control is activated, only the content will be presented according to the desired pattern. If you press the control again, the favorite station or the favorite CD is played again. Alternatively, it is possible that also the last set radio station or the last recorded CD are recorded.
  • 2. A Like button or Nice button is also used to dynamically adapt and expand an existing driver profile. If the user presents a content that pleases him, then this can for example long press or press twice tells the system that the description data of this content, ie the MPEG7 metafiles, should be included in its profile. Metadata can both complement and replace existing data. The method for taking into account the description data can therefore be specified as desired by a profile management. The user may receive an acoustic and / or optical confirmation after taking into account the description data.

Im Prinzip können beide Funktionalitäten oder nur eine von beiden mit einem erfindungsgemäßen Bedienelement realisiert werden.In principle, both functionalities or only one of both can be realized with a control element according to the invention.

In Figur 1 ist schematisch das erfindungsgemäße Unterhaltungsgerät dargestellt. Ein erfindungsgemäßes Unterhaltungsgerät 1 weist ein erfindungsgemäßes Bedienelement 2 bezeichnet mit Like-it, also ein Gefällt-mir-Knopf, weitere Bedienelemente 3 und 4 zur Verstellung der Lautstärke bzw. der Senderwahl und ein Anzeigenfeld 5 auf. Darüber hinaus ist das erfindungsgemäße Unterhaltungsgerät 1 über eine Leitung mit einem Lautsprecher 6 verbunden.In Figure 1, the entertainment device according to the invention is shown schematically. An inventive entertainment device 1 has an inventive control element 2 labeled with Like-it, so a Like-me button, further controls 3 and 4 for adjusting the volume or the station selection and a display panel 5 on. In addition, the inventive entertainment device 1 is connected via a line with a speaker 6.

Im Moment hört der Nutzer den Rundfunksender SWR2, der durch seine Senderbezeichnung im Anzeigenfeld 5 angegeben wird. Ein Nutzer möchte nun einen ähnlichen Sender wie SWR2 hören und drückt dazu die Taste 2 Like-it. Dann sucht ein Prozessor des erfindungsgemäßen Unterhaltungsgeräts nach vergleichbaren Sendern und zeigt diese entweder im Anzeigenfeld 5 an oder spielt sie nacheinander an. Durch ein weiteres Drücken des Bedienelements 2 ist es dann beispielsweise möglich, dass der Nutzer einen Sender dann fest auswählt. Es ist weiterhin möglich, dass im Anzeigenfeld 5 eine Liste der verfügbaren Sender dargestellt wird und der Nutzer wählt durch Betätigung von Bedienelementen einen entsprechenden Sender aus. Darüber hinaus ist es möglich, dass diese Auswahl in ein Nutzerprofil übernommen wird, um in Zukunft diesen Wünschen des Nutzers Rechnung tragen zu können.At the moment the user listens to the radio transmitter SWR2, which is indicated by its transmitter designation in the display field 5. A user now wants to hear a similar station like SWR2 and presses the button 2 Like-it. Then, a processor of the entertainment device according to the invention searches for comparable transmitters and displays them either in the display panel 5 or plays them in succession. By further pressing the control element 2, it is then possible, for example, for the user to select a transmitter permanently. It is also possible that displayed in the display box 5 is a list of available stations is and the user selects by pressing controls a corresponding transmitter. In addition, it is possible that this selection will be included in a user profile in order to be able to accommodate these wishes of the user in the future.

In Figur 2 ist als Blockschaltbild das erfindungsgemäße Übertragungsgerät 1 dargestellt. Ein Prozessor 7 ist über einen ersten Datenein-/-ausgang mit einem Speicher 8 verbunden, der zur Zwischenspeicherung von Daten verwendet wird. Über einen zweiten Datenein-/-ausgang ist der Prozessor 7 mit einer Signalverarbeitung 12 verbunden, die wiederum mit einem Laufwerk für Tonträger 13 verbunden ist. Bei dem Laufwerk 13 kann es sich dabei um ein Minidisc-Laufwerk oder eine CD handeln. Es sind jedoch auch andere Tonträger wie eine Chipkarte möglich. Über einen Dateneingang ist der Prozessor 7 mit einem Digitalteil 9 verbunden, der einen Datenstrom von einem Hochfrequenzempfänger 10 verarbeitet. Der Hochfrequenzempfänger 10 weist eine Antenne an einem Eingang auf, um Rundfunksignale zu empfangen. Alternativ ist es möglich, dass anstatt eines Rundfunkempfängers ein Funkempfänger, wie ein Mobilfunkgerät oder ein kabelgebundener Empfänger wie ein Kabelfernsehempfänger oder ein Kabelmodem möglich ist. Der Prozessor 7 ist über einen Datenausgang mit einem Audioverstärker 11 verbunden, der den Lautsprecher 6 ansteuert. Über einen zweiten Dateneingang ist der Prozessor 7 mit einer Signalverarbeitung 14 verbunden, an die wiederum das erfindungsgemäße Bedienelement 2 angeschlossen ist.FIG. 2 shows a block diagram of the transmission device 1 according to the invention. A processor 7 is connected via a first data input / output to a memory 8 which is used for buffering data. Via a second data input / output, the processor 7 is connected to a signal processor 12, which in turn is connected to a drive for sound carriers 13. The drive 13 may be a minidisc drive or a CD. However, there are also other sound carriers such as a chip card possible. Via a data input, the processor 7 is connected to a digital part 9, which processes a data stream from a high-frequency receiver 10. The radio frequency receiver 10 has an antenna at an input to receive broadcast signals. Alternatively, it is possible that, instead of a radio receiver, a radio receiver such as a mobile radio or a wired receiver such as a cable television receiver or a cable modem is possible. The processor 7 is connected via a data output to an audio amplifier 11, which controls the loudspeaker 6. Via a second data input, the processor 7 is connected to a signal processor 14, to which in turn the operating element 2 according to the invention is connected.

Anstatt des Knopfs 2 als Bedienelement ist es auch möglich, eine Sprachsteuerung oder andere ähnliche Bedienelemente zu verwenden.Instead of the button 2 as a control, it is also possible to use a voice control or other similar controls.

Ein Nutzer wird wie oben dargestellt bei einer Wiedergabe von Daten, die ihm gefallen, das Bedienelement 2 betätigen, so dass der Prozessor 7 in den Rundfunksignalen, die mit der Antenne 11 empfangen werden, nach vergleichbaren Daten sucht oder auch im Laufwerk 13 einen Tonträger durchsucht, ob er vergleichbare Daten aufweist. Sind diese gefunden, dann werden sie auf der Anzeige 5 oder mit dem Lautsprecher 6 wiedergegeben.As shown above, a user, in reproducing data that pleases him, operates the operating element 2, so that the processor 7 searches for comparable data in the broadcasting signals received by the antenna 11 or also searches a sound carrier in the drive 13 whether he has comparable data. If these are found, then they are displayed on the display 5 or with the speaker 6.

Die Merkmalsanalyse des Prozessors 7 bei den aktuell wiedergegebenen Daten konzentriert sich bei digitalen Daten auf die vorhandene begleitende Beschreibung wie bei MPEG7 die Metadateien. Bei analogen Daten ist es möglich, dass entweder durch eine gespeicherte Programmzeitschrift oder ein Verzeichnis den entsprechenden wiedergegebenen Daten eine Zuordnung von Merkmalen zugeordnet wird. Damit ist es dann dem Prozessor 7 möglich, entsprechend äquivalente Daten zu finden und dem Nutzer anzubieten.The feature analysis of the processor 7 in the data currently being displayed in digital data focuses on the existing accompanying description as in MPEG7 the metafiles. In the case of analog data, it is possible for an assignment of features to be assigned to the corresponding reproduced data either by means of a stored program guide or a directory. This makes it possible for the processor 7 to find corresponding equivalent data and to offer it to the user.

Das erfindungsgemäße Unterhaltungsgerät kann ein Autoradio, ein Rundfunkempfänger für den Heimgebrauch oder auch ein tragbares Rundfunkgerät sein. Weiterhin kann es sich dabei um ein Wiedergabegerät wie ein Videorekorder oder ein anderes Abspielgerät für einen Datenträger handeln.The entertainment device according to the invention may be a car radio, a radio receiver for home use or even a portable radio device. Furthermore, it may be a playback device such as a video recorder or another player for a disk.

Ein erfindungsgemäßes Unterhaltungsgerät kann weiterhin einen Pufferspeicher für die wiedezugebenden Daten aufweisen, der bereits wiedergegebene Daten gegebenenfalls mit Beschreibung puffert, um die Merkmalsanalyse auch an diesen Daten durchführen zu können, so dass sich ein Benutzer auch am Ende eines Musikstücks äquivalente Daten suchen lassen kann.An entertainment device according to the invention may further comprise a buffer memory for the data to be replayed, which optionally buffers data already reproduced with description in order to be able to perform the feature analysis also on this data, so that a Users can also search for equivalent data at the end of a piece of music.

Die Dauer oder Häufigkeit der Bedienung des erfindungsgemäßen Bedienelements bestimmt dabei, wie lange das erfindungsgemäße Unterhaltungsgerät nach äquivalenten Daten zu den aktuell wiedergegebenen Daten sucht.The duration or frequency of operation of the control element according to the invention determines how long the entertainment device according to the invention searches for equivalent data to the currently reproduced data.

In einer Weiterbildung des erfindungsgemäßen Unterhaltungsgeräts ist vorgesehen, dass gleichzeitig zur Suche nach den äquivalenten Daten die aktuell wiedergegebenen Daten durch die Betätigung des Bedienelements abgespeichert werden, um beispielsweise eine Musiksammlung zu erweitern. Durch entsprechende Pufferspeicher und die die Daten begleitende Beschreibung ist es möglich, Anfang und Ende der Daten zu ermitteln, um so unter Zuhilfenahme des Pufferspeichers ein ganzes Musikstück abspeichern zu können.In a further development of the entertainment device according to the invention it is provided that simultaneously with the search for the equivalent data, the currently reproduced data are stored by the operation of the control element to expand, for example, a music collection. By means of corresponding buffer memories and the description accompanying the data, it is possible to determine the beginning and end of the data so as to be able to store an entire piece of music with the aid of the buffer memory.

Claims (6)

  1. Entertainment appliance, where the entertainment appliance (1) has a processor (7) for processing data and means (5, 6) for visual and/or audio reproduction of the data, with the entertainment appliance (1) having a control element (2) whose operation prompts the processor (7) to ascertain at least one characteristic feature of the data which are currently being reproduced, characterized in that the processor (7), as a result of this operation, uses the at least one characteristic feature to search for further data which likewise have the at least one characteristic feature, with the processor (7) doing this by examining a description which accompanies the further data, and in that when the processor (7) has found the further data with the at least one characteristic feature the means (5, 6) for visual and/or audio reproduction reproduce these further data which have been found.
  2. Entertainment appliance according to Claim 1, characterized in that the processor (7) uses the at least one characteristic feature to change a user profile.
  3. Entertainment appliance according to Claim 1, characterized in that the means (5, 6) for visual and/or audio reproduction output the data which have been found as a list.
  4. Entertainment appliance according to Claim 2, characterized in that the means (5, 6) for visual and/or audio reproduction output a report about a change in the user profile.
  5. Entertainment appliance according to one of the preceding claims, characterized in that the processor (7) takes the length of operation or the frequency of operation of the control element (2) as a basis for performing the search for the further data with the at least one characteristic feature.
  6. Entertainment appliance according to one of the preceding claims, characterized in that the entertainment appliance stores the data which are currently being reproduced when the control element (2) is operated.
EP02737758A 2001-04-04 2002-03-28 Entertainment device with a search function for data similar in type to instantaneously reproduced data Expired - Lifetime EP1380126B1 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE10116722 2001-04-04
DE10116722A DE10116722C1 (en) 2001-04-04 2001-04-04 Entertainment device
PCT/DE2002/001138 WO2002082698A2 (en) 2001-04-04 2002-03-28 Entertainment device with a search function for data similar in type to instantaneously reproduced data

Publications (2)

Publication Number Publication Date
EP1380126A2 EP1380126A2 (en) 2004-01-14
EP1380126B1 true EP1380126B1 (en) 2006-01-11

Family

ID=7680321

Family Applications (1)

Application Number Title Priority Date Filing Date
EP02737758A Expired - Lifetime EP1380126B1 (en) 2001-04-04 2002-03-28 Entertainment device with a search function for data similar in type to instantaneously reproduced data

Country Status (4)

Country Link
US (1) US7386134B2 (en)
EP (1) EP1380126B1 (en)
DE (2) DE10116722C1 (en)
WO (1) WO2002082698A2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10119067A1 (en) 2001-04-18 2002-10-31 Bosch Gmbh Robert Method for playing multimedia data with an entertainment device
US8015259B2 (en) * 2002-09-10 2011-09-06 Alan Earl Swahn Multi-window internet search with webpage preload
US8068507B2 (en) * 2005-06-14 2011-11-29 Interdigital Technology Corporation Method and system for conveying backhaul link information for intelligent selection of a mesh access point
KR101203855B1 (en) 2006-12-22 2012-11-21 엘지전자 주식회사 A terminal for broadcasting and Method for notifying preference broadcasing program in thereof
US8155581B2 (en) * 2008-10-18 2012-04-10 GM Global Technology Operations LLC Method and system for exhibiting media segments
EP2890142A1 (en) 2013-12-27 2015-07-01 Samsung Electronics Co., Ltd Display device, method of providing personalized object, and method of providing information
US11503384B2 (en) 2020-11-03 2022-11-15 Hytto Pte. Ltd. Methods and systems for creating patterns for an adult entertainment device

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5014348A (en) * 1988-04-01 1991-05-07 Uniden America Corporation Self-programming scanning radio receiver
GB2258102A (en) * 1991-06-26 1993-01-27 Royal College Of Art Storage of received programme segments in ram
US5231494A (en) * 1991-10-08 1993-07-27 General Instrument Corporation Selection of compressed television signals from single channel allocation based on viewer characteristics
US6081750A (en) * 1991-12-23 2000-06-27 Hoffberg; Steven Mark Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US5469206A (en) * 1992-05-27 1995-11-21 Philips Electronics North America Corporation System and method for automatically correlating user preferences with electronic shopping information
DE4233282A1 (en) 1992-10-02 1994-04-07 Becker Autoradio Method of tuning a radio receiver using the RDS information
DE4300875A1 (en) * 1993-01-15 1994-07-21 Becker Autoradio Procedure for tuning a mobile radio receiver
US5410344A (en) * 1993-09-22 1995-04-25 Arrowsmith Technologies, Inc. Apparatus and method of selecting video programs based on viewers' preferences
JPH07297735A (en) 1994-04-27 1995-11-10 Pioneer Electron Corp Multiplex broadcasting reception method and receiver
US5617565A (en) * 1994-11-29 1997-04-01 Hitachi America, Ltd. Broadcast interactive multimedia system
GB2325537B8 (en) * 1997-03-31 2000-01-31 Microsoft Corp Query-based electronic program guide
DE19805043B4 (en) * 1998-02-09 2013-10-10 Harman Becker Automotive Systems Gmbh Broadcast receiver and method of operating such
GB9803623D0 (en) 1998-02-20 1998-04-15 The Technology Partnership Plc Audio information transmission
DE19901242A1 (en) * 1999-01-14 2000-07-20 Hans Joachim Otto Selective reception and reproduction method for chosen transmission contributions from different transmitters, involves comparing received transmission codes with stored codes
US6725022B1 (en) * 1999-09-22 2004-04-20 Motorola, Inc. Method and apparatus for enabling the selection of content on a wireless communication device
US6728531B1 (en) * 1999-09-22 2004-04-27 Motorola, Inc. Method and apparatus for remotely configuring a wireless communication device
US6799201B1 (en) * 2000-09-19 2004-09-28 Motorola, Inc. Remotely configurable multimedia entertainment and information system for vehicles

Also Published As

Publication number Publication date
WO2002082698A3 (en) 2002-12-27
EP1380126A2 (en) 2004-01-14
US7386134B2 (en) 2008-06-10
WO2002082698A2 (en) 2002-10-17
DE50205583D1 (en) 2006-04-06
DE10116722C1 (en) 2003-02-06
US20040147241A1 (en) 2004-07-29

Similar Documents

Publication Publication Date Title
EP1382200B1 (en) Method for playing back audio data by means of an entertainment device
EP2192693B1 (en) Information and entertainment system in a vehicle
DE10014987C2 (en) Device for playing multimedia files from a memory in a car radio
CA2622223C (en) Audio playlist creation system and method
US6112064A (en) RDS radio with multi-function RDS button
CN1729685A (en) Audio signal identification method and system
EP1380126B1 (en) Entertainment device with a search function for data similar in type to instantaneously reproduced data
DE10306277B4 (en) Method for recording a plurality of audio signals in an audio system of a motor vehicle and audio recording system in a vehicle
DE10306563B4 (en) Personal audio recorder in a vehicle audio system
EP0878906B1 (en) Radio receiver
JP2005503693A (en) Method and apparatus for making recommendations to users of entertainment receivers
EP1489880B1 (en) Device and method for processing sound signals with automatic selection of acoustic spectrum
EP2928094B1 (en) Receiving apparatus and method of providing information associated with received broadcast signals
US8285233B2 (en) Method for displaying other stations now playing list
EP1421701B1 (en) Method for reproducing multimedia files in a terminal
WO1996037965A1 (en) Record identification technique
US20080214131A1 (en) User Interface to be Implemented in a Device for Organazing Broadcast Stations and Optically Their Content
JP2009503639A5 (en)
DE19838039A1 (en) Broadcast receiver for RDS data reception in vehicle has memory locations for user-defined programme identification names
EP1475910B1 (en) Reproduction apparatus
EP2037578A2 (en) Radio receiver and method for operating same
EP2028775A2 (en) Method and system for marking an analogue signal
JPH1093395A (en) Multiplex broadcast receiving device
DE102005027695A1 (en) Broadcast receiver for broadcast system, has operating unit connected with search unit and operated by user, where operating unit controls operating mode of search unit and selects one of music pieces
DE102009027466A1 (en) Method for receiving additional information in radio transmitter of vehicle, involves sending search request to radio transmitter by Internet interface of radio set

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20031104

AK Designated contracting states

Kind code of ref document: A2

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR

17Q First examination report despatched

Effective date: 20040226

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): DE FR GB IT

REF Corresponds to:

Ref document number: 50205583

Country of ref document: DE

Date of ref document: 20060406

Kind code of ref document: P

GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)

Effective date: 20060420

ET Fr: translation filed
PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20061012

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20130318

Year of fee payment: 12

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20140328

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20140328

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 15

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20160322

Year of fee payment: 15

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20160318

Year of fee payment: 15

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20171130

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20170331

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20170328

REG Reference to a national code

Ref country code: DE

Ref legal event code: R084

Ref document number: 50205583

Country of ref document: DE

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20200526

Year of fee payment: 19

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 50205583

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20211001