DE102011006846A1 - Method for preparing speech signal regarding traffic and/or weather conditions of route to be traveled by motor car, involves generating language records comprising classification information and speech signal - Google Patents
Method for preparing speech signal regarding traffic and/or weather conditions of route to be traveled by motor car, involves generating language records comprising classification information and speech signal Download PDFInfo
- Publication number
- DE102011006846A1 DE102011006846A1 DE102011006846A DE102011006846A DE102011006846A1 DE 102011006846 A1 DE102011006846 A1 DE 102011006846A1 DE 102011006846 A DE102011006846 A DE 102011006846A DE 102011006846 A DE102011006846 A DE 102011006846A DE 102011006846 A1 DE102011006846 A1 DE 102011006846A1
- Authority
- DE
- Germany
- Prior art keywords
- information
- speech signal
- speech
- signal
- classification information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/02—Methods for producing synthetic speech; Speech synthesisers
- G10L13/027—Concept to speech synthesisers; Generation of natural phrases from machine-based concepts
Abstract
Description
Stand der TechnikState of the art
Die vorliegende Erfindung bezieht sich auf ein Verfahren zum Aufbereiten eines Sprachsignals bezüglich einer zurückzulegenden Strecke, auf eine entsprechende Vorrichtung sowie auf ein entsprechendes Computerprogrammprodukt.The present invention relates to a method for processing a speech signal with respect to a distance to be covered, to a corresponding device and to a corresponding computer program product.
Die Verwendung von Navigationssystemen im Fahrzeug ist heute Stand der Technik (mit zunehmendem Ausstattungsrad). Dabei kann man unterscheiden zwischen Festeinbauten (OEM-Navigationsgeräten), sogenannten „Portable Navigation Devices” (vertrieben von z. B. Tom Tom, Garmin) und Smart Phones mit Navigations-Software (z. B. iPhone von Apple).The use of navigation systems in the vehicle is state of the art today (with increasing equipment level). A distinction can be made here between fixed installations (OEM navigation devices), so-called "portable navigation devices" (distributed by, for example, Tom Tom, Garmin) and smart phones with navigation software (for example, the iPhone from Apple).
Bekannt sind auch Verfahren, in denen ein Navigationsgerät mittels aktiver Zielführung und Routeninformation Informationen von einer lokalen Datenbank oder von einem zentralen Server anfordert.Methods are also known in which a navigation device requests information from a local database or from a central server by means of active route guidance and route information.
So beschreibt
Offenbarung der ErfindungDisclosure of the invention
Vor diesem Hintergrund wird mit der vorliegenden Erfindung ein Verfahren zum Aufbereiten eines Sprachsignals bezüglich einer zurückzulegenden Strecke, weiterhin eine Vorrichtung, die dieses Verfahren verwendet sowie schließlich ein entsprechendes Computerprogrammprodukt gemäß den Hauptansprüchen vorgestellt. Vorteilhafte Ausgestaltungen ergeben sich aus den jeweiligen Unteransprüchen und der nachfolgenden Beschreibung.Against this background, the present invention provides a method for processing a speech signal with respect to a distance to be traveled, a device which uses this method, and finally a corresponding computer program product according to the main claims. Advantageous embodiments emerge from the respective subclaims and the following description.
Die vorliegende Erfindung schafft ein Verfahren zum Aufbereiten eines Sprachsignals bezüglich einer zurückzulegenden Strecke, wobei das Verfahren die folgenden Schritte aufweist:
- – Extrahieren einer Klassifizierungsinformation aus einem eingelesenen Sprachsignal, wobei die Klassifizierungsinformation geeignet ist, um das Sprachsignal einer von mehreren Klassen zuzuordnen, wobei das Extrahieren unter Verwendung eines Spracherkennungsalgorithmus erfolgt; und
- – Erzeugen eines Sprachdatensatzes, der das Sprachsignal oder eine von dem Sprachsignal abgeleitete Information einerseits und zumindest die Klassifizierungsinformation andererseits umfasst, um das Sprachsignal aufzubereiten.
- Extracting classification information from a read-in speech signal, wherein the classification information is adapted to associate the speech signal with one of a plurality of classes, wherein the extraction is performed using a speech recognition algorithm; and
- Generating a speech data record which comprises the speech signal or information derived from the speech signal on the one hand and at least the classification information on the other hand in order to prepare the speech signal.
Die vorliegende Erfindung schafft ferner eine Vorrichtung zur Aufbereitung eines Sprachsignals bezüglich einer zurückzulegenden Strecke, wobei die Vorrichtung die folgenden Merkmale aufweist:
- – eine Einheit zum Extrahieren einer Klassifizierungsinformation aus einem eingelesenen Sprachsignal, wobei die Klassifizierungsinformation ausgebildet ist, um das Sprachsignal einer von mehreren Klassen zuzuordnen, wobei die Einheit zum Extrahieren ausgebildet ist, um einen Spracherkennungsalgorithmus auszuführen; und
- – eine Einheit zum Erzeugen eines Sprachdatensatzes, der das Sprachsignal oder eine davon abgeleitete Information einerseits und zumindest die Klassifizierungsinformation andererseits umfasst, um ein aufbereitetes Sprachsignal bereitzustellen.
- A unit for extracting a classification information from a read-in speech signal, the classification information being adapted to associate the speech signal with one of a plurality of classes, the unit for extracting being adapted to execute a speech recognition algorithm; and
- A voice data record generating unit comprising the voice signal or information derived therefrom on the one hand and at least the classification information on the other hand to provide a processed voice signal.
Auch schafft die vorliegende Erfindung ein Verfahren zur Assistenz eines Fahrers eines Fahrzeugs, wobei das Verfahren die folgenden Schritte aufweist:
- – Aussenden eines Ausgabeanforderungssignals an eine vorstehend beschriebene Vorrichtung zur Aufbereitung eine Sprachsignals, wobei das Ausgabeanforderungssignal eine von einem Benutzer auswählbare Klassifikationsinformation und eine Information über einen Ort eines Fahrzeugs umfasst, von dem aus das Ausgabeanforderungssignal ausgesandt wird; und
- – Empfangen von Daten aus einem Sprachdatensatz und Ausgeben der empfangenen Daten oder von den empfangenen Daten abgeleitete Informationen an den Fahrer des Fahrzeugs, um dem Fahrer zu assistieren.
- Sending an output request signal to a speech signal processing apparatus described above, the output request signal comprising user selectable classification information and information about a location of a vehicle from which the output request signal is emitted; and
- Receiving data from a voice data set and outputting the received data or information derived from the received data to the driver of the vehicle to assist the driver.
Ferner schafft die vorliegende Erfindung eine Vorrichtung zur Assistenz eines Fahrers eines Fahrzeugs, wobei die Vorrichtung die folgenden Merkmale aufweist:
- – eine Schnittstelle zum Aussenden eines Ausgabeanforderungssignals an eine vorstehend beschriebene Vorrichtung zur Aufbereitung eine Sprachsignals, wobei das Ausgabeanforderungssignal eine von einem Benutzer auswählbare Klassifikationsinformation und eine Information über einen Ort eines Fahrzeugs umfasst, von dem aus das Ausgabeanforderungssignal ausgesandt wird; und
- – eine Einheit zum Empfangen von Daten aus einem Sprachdatensatz und Ausgeben der empfangenen Daten oder von den empfangenen Daten abgeleitete Informationen an den Fahrer des Fahrzeugs, um dem Fahrer zu assistieren.
- An interface for transmitting an output request signal to a voice signal conditioning apparatus described above, the output request signal comprising user selectable classification information and information about a location of a vehicle from which the output request signal is emitted; and
- A unit for receiving data from a voice data set and outputting the received data or information derived from the received data to the driver of the vehicle to assist the driver.
Die vorliegende Erfindung schafft somit Vorrichtungen, die ausgebildet sind, um die Schritte eines der erfindungsgemäßen Verfahren in entsprechenden Einrichtungen durchzuführen bzw. umzusetzen. Auch durch diese Ausführungsvariante der Erfindung in Form einer Vorrichtung kann die der Erfindung zugrunde liegende Aufgabe schnell und effizient gelöst werden.The present invention thus provides apparatuses adapted to perform the steps of one of the methods according to the invention in corresponding devices. Also by this embodiment of the invention in the form of a device, the object underlying the invention can be solved quickly and efficiently.
Unter einer Vorrichtung kann vorliegend ein elektronisches Gerät verstanden werden, das Sensorsignale verarbeitet und in Abhängigkeit davon Signale ausgibt. Die Vorrichtung kann eine Schnittstelle aufweisen, die hard- und/oder softwaremäßig ausgebildet sein kann. Bei einer hardwaremäßigen Ausbildung können die Schnittstellen beispielsweise Teil eines sogenannten System-ASICs sein, der verschiedenste Funktionen der Vorrichtung beinhaltet. Es ist jedoch auch möglich, dass die Schnittstellen eigene, integrierte Schaltkreise sind oder zumindest teilweise aus diskreten Bauelementen bestehen. Bei einer softwaremäßigen Ausbildung können die Schnittstellen Softwaremodule sein, die beispielsweise auf einem Mikrocontroller neben anderen Softwaremodulen vorhanden sind.In the present case, a device can be understood as meaning an electronic device which processes sensor signals and outputs signals in dependence thereon. The device may have an interface, which may be formed in hardware and / or software. In the case of a hardware-based embodiment, the interfaces can be part of a so-called system ASIC, for example, which contains a wide variety of functions of the device. However, it is also possible that the interfaces are their own integrated circuits or at least partially consist of discrete components. In a software training, the interfaces may be software modules that are present, for example, on a microcontroller in addition to other software modules.
Von Vorteil ist auch ein Computerprogrammprodukt mit Programmcode, der auf einem maschinenlesbaren Träger wie einem Halbleiterspeicher, einem Festplattenspeicher oder einem optischen Speicher gespeichert sein kann und zur Durchführung eines der Verfahren nach einer der vorstehend beschriebenen Ausführungsformen verwendet wird, wenn das Programm auf einer Datenverarbeitungsanlage ausgeführt wird.A computer program product with program code which can be stored on a machine-readable carrier such as a semiconductor memory, a hard disk memory or an optical memory and is used to carry out one of the methods according to one of the embodiments described above when the program is executed on a data processing system is also of advantage ,
Unter einem Sprachsignal kann dabei ein Signal verstanden werden, das eine Repräsentation eines gesprochenen Wortes oder Satzes darstellt. Dieses Sprachsignal kann in Bezug auf eine von einem Fahrzeug befahrene Strecke vorliegen, beispielsweise einen Hinweis auf eine besondere Verkehrssituation wie einen Stau, eine bestimmte Wettersituation wie beispielsweise Nebel oder Regen oder Ähnliches enthalten. Und einer Klassifizierungsinformation kann eine Information über eine bestimmte von mehreren Klassen des Sprachsignals verstanden werden, wobei sich die einzelnen Klassen darin unterscheiden, dass die in eine gemeinsame Klasse klassierten Sprachsignale einen gleichen oder sehr ähnlichen (semantischen) Inhalt aufweisen, verglichen mit den Sprachsignalen, die in eine andere Klasse klassiert wurden. Unter einem Spracherkennungsalgorithmus kann ein automatisches Verfahren zu Erkennung des Inhalts eines Sprachsignals verstanden werden, welches einen mündlich gesprochenen Ausdruck oder Begriff repräsentiert. Unter einem Sprachdatensatz kann eine Gruppe von Daten oder Informationen verstanden werden, die beispielsweise zumindest neben der Klassifizierungsinformation noch eine weitere Information wie beispielsweise das Sprachsignal und/oder eine von dem Sprachsignal abgeleitete Information aufweist.In this case, a voice signal can be understood as a signal which represents a representation of a spoken word or sentence. This voice signal may be present in relation to a distance traveled by a vehicle, for example an indication of a particular traffic situation such as a traffic jam, a specific weather situation such as mist or rain or the like. And classification information may be understood to be information about a particular one of a plurality of classes of the speech signal, wherein the individual classes differ in that the speech signals classified into a common class have the same or very similar (semantic) content as compared to the speech signals were classified into another class. A speech recognition algorithm can be understood to mean an automatic method for recognizing the content of a speech signal, which represents an oral expression or term. A voice data record may be understood to mean a group of data or information which, for example, at least in addition to the classification information, has further information, such as the voice signal and / or information derived from the voice signal.
Unter einem Ausgabeanforderungssignal kann ein Signal verstanden werden, welches von einem Fahrzeug oder einem anderen mobilen Gerät an eine zentrale Vorrichtung zur Aufbereitung eines Sprachsignals ausgesandt wird, um eine entsprechende Mitteilung von dieser zentralen Vorrichtung zu erhalten. Unter einem Benutzer kann der Fahrer des Fahrzeugs oder ein anderer Insasse des Fahrzeugs oder allgemein ein Benutzer eines mobilen Gerätes wie beispielsweise ein Fußgänger oder ein Radfahrer verstanden werden, der das betreffende Gerät bedient. Unter Daten aus einem Sprachdatensatz, die empfangenen werden, kann einerseits ein Sprachsignal verstanden werden, welches eine digitale Aufzeichnung eines mündlich gesprochenen Wortes oder Begriffes repräsentiert. Ferner kann unter Daten aus einem Sprachdatensatz auch eine Information verstanden werden, die aus einem solchen Sprachsignal generiert oder abgeleitet wurde. Beispielsweise kann unter solchen Daten aus einem Sprachdatensatz eine Textinformation verstanden werden, die unter Anwendung eines Sprache-zu-Text-Wandlers aus dem Sprachsignal erhalten wurde. Unter einem Ausgeben der empfangenen Daten kann beispielsweise eine Ausgabe über einen Lautsprecher oder ein optisches Display verstanden werden.An output request signal can be understood as a signal which is transmitted by a vehicle or another mobile device to a central device for processing a voice signal in order to receive a corresponding message from this central device. A user can be understood as the driver of the vehicle or another occupant of the vehicle, or generally a user of a mobile device, such as a pedestrian or a cyclist, who operates the device in question. Data from a voice data record that is received may, on the one hand, be understood as a voice signal which represents a digital recording of an orally spoken word or term. Furthermore, data from a voice data record can also be understood to mean information that has been generated or derived from such a voice signal. For example, such data from a voice data set may be understood to be text information obtained from the voice signal using a speech-to-text converter. By outputting the received data, for example, an output via a loudspeaker or an optical display can be understood.
Die vorliegende Erfindung bietet den Vorteil, dass nun auf sehr einfache Weise eine Gruppierung oder Klassifizierung von unterschiedlichen Sprachsignalen erfolgen kann, wobei eine Zuordnung der einzelnen Sprachsignale zu unterschiedlichen Themen möglich ist. Durch die Verwendung eines Spracherkennungsalgorithmus wird dabei eine sehr schnelle und effiziente Klassifizierung der einzelnen, beispielsweise von einem Fahrer eines Fahrzeugs zur Verfügung gestellten Sprachsignale möglich. Dabei ist keine separate Klassifizierung des bereitgestellten Sprachsignals durch den Bereitsteller (beispielsweise den Fahrer eines Fahrzeugs) erforderlich, sondern diese Klassifizierung kann durch Auswertung des Inhalts, insbesondere semantischen Inhalts des Sprachsignals selbst erfolgen. Durch eine derartige Klassifizierung lässt sich auch bei einer hohen Menge von zur Verfügung stehenden Sprachsignalen in Bezug auf einen Streckenabschnitt einer Fahrtroute eines Fahrzeugs eine sehr einfache Auswahl eines bestimmten Sprachsignals für eine abrufende Einheit realisieren. Beispielsweise kann die abrufende Einheit, die als Navigationsgerät in einem weiteren Fahrzeug verbaut ist, ein Anforderungssignal aussenden, in dem eine Klassifizierungsinformation, beispielsweise bezüglich eines Wettergeschehens einer bestimmten Strecke enthalten ist, so dass aus den insgesamt für die betreffende Strecke zur Verfügung stehenden Sprachsignalen lediglich diejenigen Sprachsignale für die abrufende Einheit als relevant betrachtet werden, die beispielsweise in eine gemeinsame Klasse bezüglich des „Wettergeschehens” klassiert wurden. Auf diese Weise kann auch eine große Anzahl von zur Verfügung stehenden Sprachsignalen für eine bestimmte Strecke effizient verwaltet und für eine anfordernde Einheit vorstrukturiert werden.The present invention offers the advantage that a grouping or classification of different speech signals can now be carried out in a very simple manner, wherein an assignment of the individual speech signals to different topics is possible. By using a speech recognition algorithm, a very fast and efficient classification of the individual speech signals provided, for example, by a driver of a vehicle is made possible. In this case, no separate classification of the provided speech signal by the provider (for example, the driver of a vehicle) is required, but this classification can be done by evaluating the content, in particular the semantic content of the speech signal itself. Such a classification makes it possible to realize a very simple selection of a specific speech signal for a calling unit even with a large amount of available speech signals in relation to a route section of a route of a vehicle. For example, the calling one Unit which is installed as a navigation device in another vehicle, send a request signal in which a classification information, for example, with respect to a weather event of a particular route is included, so that from the total available for the route speech signals only those speech signals for the calling Unit considered relevant, for example, classified in a common class in terms of "weather events". In this way, a large number of available speech signals for a particular link can be efficiently managed and pre-structured for a requesting entity.
Gemäß einer Ausführungsform der vorliegenden Erfindung kann im Schritt des Erzeugens dem Sprachdatensatz ferner zumindest eine Information über einen Ort zugeordnet werden, an dem das Sprachsignal aufgezeichnet wurde und/oder es kann dem Sprachdatensatz ferner zumindest eine Information über eine Zeit zugeordnet werden, zu der das Sprachsignal aufgezeichnet wurde. Unter einem Ort, an dem das Sprachsignal aufgezeichnet wurde, kann beispielsweise eine geographische Koordinate verstanden werden. Diese geographische Koordinate kann beispielsweise eine Strecke bei der Fahrt des Fahrzeugs eindeutig identifizieren, auf die sich der Inhalt des Sprachsignals bezieht. Eine derartige Ausführungsform der vorliegenden Erfindung bietet den Vorteil einer besonders detaillierten Erzeugung des Sprachdatensatzes, so dass der Sprachdatensatz einen sehr hohen Informationsgehalt aufweist.According to an embodiment of the present invention, in the step of generating, the voice data set may further be assigned at least one information about a location where the voice signal was recorded and / or the voice data set may be further assigned at least one information about a time to which the voice signal was recorded. Under a location where the speech signal was recorded, for example, a geographical coordinate can be understood. This geographic coordinate can uniquely identify, for example, a route while driving the vehicle to which the content of the voice signal relates. Such an embodiment of the present invention offers the advantage of a particularly detailed generation of the speech data record, so that the speech data record has a very high information content.
Auch kann das Verfahren ferner einen Schritt des Filterns und Ausgebens eines von mehreren Sprachdatensätzen aufweisen, wobei der Schritt des Filterns ansprechend auf ein Ausgabeanforderungssignal erfolgt, das eine von mehreren Klassifikationsinformationen enthält, wobei im Schritt des Filterns und Ausgebens Daten (insbesondere Teildaten) aus dem Sprachdatensatz ausgegeben werden, die in einem Sprachdatensatz enthalten sind, der eine Klassifikationsinformation umfasst, die der in dem Ausgabeanforderungssignal enthaltenen Klassifikationsinformation entsprechen. Unter den Daten aus dem Sprachdatensatz können einerseits das Sprachsignal selbst und/oder von dem Sprachsignal abgeleitete Informationen verstanden werden. Eine derartige Ausführungsform der vorliegenden Erfindung bietet den Vorteil, dass durch die Berücksichtigung des Ausgabeanforderungssignals, welches die betreffende Klassifikationsinformation enthält, aus einer großen Anzahl von Sprachdatensätzen diejenigen Sprachdatensätze herausgesucht werden können, die für den Absender des Ausgabeanforderungssignals besondere Relevanz haben. Auf diese Weise kann eine sehr effiziente Verwaltung von Information auch bei einer sehr hohen Anzahl von gespeicherten Sprachsignalen in Bezug auf eine bestimmte Strecke umgesetzt werden, wobei dem Absender des Ausgabeanforderungssignals lediglich diejenigen Daten übertragen werden, die für ihn besonders relevant sind. Insofern wird auch eine unnötige Belastung eines Kommunikationsnetzes zur Übertragung der Daten aus dem Sprachdatensatz vermieden. Ferner ist es denkbar, die Klassifikationsinformation unter Verwendung eines Nutzerprofils zu erhalten, das in der Vorrichtung gespeichert ist. In diesem Fall kann das Ausgabeanforderungssignal einen Hinweis auf den Nutzer enthalten, und die vom Nutzer gewünschte Klassifikationsinformation aus dem Profil geladen und zum Herausfiltern des gewünschten Sprachdatensatzes verwendet wird. Dies ermöglicht einerseits eine sehr geringe Übertragungsbandbreits zur Übermittlung des Ausgabeanforderungssignals.Also, the method may further comprise a step of filtering and outputting one of a plurality of voice data sets, wherein the step of filtering is in response to an output request signal containing one of a plurality of classification information, wherein in the filtering and outputting step, data (especially partial data) from the voice data set which are included in a voice data set comprising classification information corresponding to the classification information included in the output request signal. On the one hand, the voice signal itself and / or information derived from the voice signal can be understood as the data from the voice data record. Such an embodiment of the present invention offers the advantage that, by taking into account the output request signal containing the relevant classification information, it is possible to select from a large number of speech data sets those speech data records which are of particular relevance to the sender of the output request signal. In this way, a very efficient management of information can be implemented even with a very high number of stored speech signals in relation to a certain route, wherein the sender of the output request signal is transmitted only the data that are particularly relevant for him. In this respect, an unnecessary burden on a communication network for transmitting the data from the voice data set is avoided. Furthermore, it is conceivable to obtain the classification information using a user profile stored in the device. In this case, the output request signal may include an indication to the user, and the classification information desired by the user may be loaded from the profile and used to filter out the desired speech data set. This allows on the one hand a very low Übertragungsbandbreits for transmitting the output request signal.
Günstig ist es ferner, wenn gemäß einer Ausführungsform der vorliegenden Erfindung im Schritt des Erzeugens dem Sprachdatensatz ferner eine Textinformation zugeordnet wird, die unter Verwendung eines Wandlers erhalten wurde, der ausgebildet ist, um Sprache in Text zu wandeln, insbesondere die bei einer Anwendung des Wandlers auf das Sprachsignal erhalten wurde. Eine derartige Ausführungsform der vorliegenden Erfindung bietet den Vorteil, dass die Textinformation den semantischen Inhalt des Sprachsignals einerseits in einer sehr komprimierten Form repräsentiert und andererseits die Möglichkeit zur Weiterverarbeitung des semantischen Inhalts des Sprachsignals ermöglicht. Zugleich bietet auch das Vorliegen einer Textinformation die Möglichkeit, dass eine abrufende Einheit eine solche Textinformation übertragen erhält und diese grafisch dem Fahrer des Fahrzeugs darstellen kann.It is also favorable if according to an embodiment of the present invention, in the step of generating, the speech data set is further associated with text information obtained using a converter adapted to convert speech to text, in particular that used in an application of the converter was obtained on the speech signal. Such an embodiment of the present invention offers the advantage that the text information on the one hand represents the semantic content of the speech signal in a very compressed form and on the other hand enables the possibility for further processing of the semantic content of the speech signal. At the same time, the presence of text information also offers the possibility that a retrieving unit receives such text information and can present it graphically to the driver of the vehicle.
Gemäß einer weiteren Ausführungsform der vorliegenden Erfindung kann im Schritt des Erzeugens dem Sprachdatensatz ferner eine Fremdsprachtextinformation zugeordnet werden, die unter Verwendung eines Übersetzungsalgorithmus erhalten wurde, wobei der Übersetzungsalgorithmus ausgebildet ist, um aus der Textinformation eine Übersetzung der Textinformation in die Fremdsprachtextinformation durchzuführen, insbesondere wobei die Textinformation auf einer von Menschen gesprochenen anderen Sprache basiert, als die Fremdsprachtextinformation. Eine derartige Ausführungsform der vorliegenden Erfindung bietet die Möglichkeit, dass auch Fahrern der Inhalt des Sprachsignals zugänglich gemacht werden kann, die nicht die Sprache sprechen, in welcher das Sprachsignal aufgezeichnet wurde. Auf diese Weise kann die in dem Sprachsignalen enthaltene Information einer deutlich größeren Anzahl von Nutzern zugänglich gemacht werden, als wenn lediglich diejenigen Nutzer die Information des Sprachsignals nutzen können, die auch die Sprache sprechen, in der das Sprachsignal aufgezeichnet wurde.According to another embodiment of the present invention, in the step of generating the speech data set further foreign language text information obtained using a translation algorithm, wherein the translation algorithm is adapted to perform a translation of the text information into the foreign language text information from the text information, in particular wherein the Textual information is based on a language spoken by other people than the foreign language textual information. Such an embodiment of the present invention offers the possibility that also drivers can be made accessible the content of the speech signal that does not speak the language in which the speech signal was recorded. In this way, the information contained in the speech signals can be made available to a significantly larger number of users than if only those users can use the information of the speech signal, which also speak the language in which the speech signal was recorded.
Besonders vorteilhaft ist es ferner, wenn ein Schritt des Ausgebens der Textinformation und/oder der Fremdsprachentextinformation ansprechend auf ein Ausgabesignal erfolgt. Eine derartige Ausführungsform der vorliegenden Erfindung bietet den Vorteil, dass die Textinformation oder die Fremdsprachentextinformation wesentlich weniger Übertragungskapazität erfordern, als üblicherweise die Übertragung des Sprachsignals an eine abrufende Einheit. Zugleich ermöglicht das Ausgeben der Textinformation und/oder der Fremdsprachentextinformation einerseits eine grafische Darstellung der betreffenden Information für den Nutzer bzw. den Sender des Ausgabesignals wobei zugleich eine Wandlung vom Text-in-Sprache ebenfalls in einer entsprechend ausgestalteten Einheit des Nutzers bzw. den Sender des Ausgabesignals möglich ist. It is furthermore particularly advantageous if a step of outputting the text information and / or the foreign-language text information takes place in response to an output signal. Such an embodiment of the present invention offers the advantage that the text information or the foreign language text information requires much less transmission capacity than is usually the transmission of the speech signal to a retrieving unit. At the same time, the outputting of the text information and / or the foreign-language text information on the one hand enables a graphic representation of the relevant information for the user or the sender of the output signal, wherein a conversion of the text-to-speech also takes place in a correspondingly configured unit of the user or the sender of the Output signal is possible.
Um eine Information in Bezug auf eine Strecke möglichst immer aktuell zu halten kann gemäß einer weiteren Ausführungsform der vorliegenden Erfindung im Schritt des Erzeugers der Sprachdatensatz gelöscht werden, wenn ein jüngerer Sprachdatensatz erzeugt wird, der eine zum Sprachdatensatz identische Klassifikationsinformation und/oder eine identische Ortsinformation aufweist. Besonders vorteilhaft ist eine solche Ausführungsform der vorliegenden Erfindung, wenn die Sprachbotschaft auch zum gleichen Ort aufgezeichnet wurde. Eine Sprachbotschaft sollte auch zu einem Ort in derselben Klasse „jünger” sein, damit die „ältere” Botschaft gelöscht werden kann.In order to keep information regarding a route as up-to-date as possible, according to another embodiment of the present invention, in the step of the producer, the voice data record can be deleted if a younger voice data record is generated which has classification information identical to the voice data record and / or identical location information , Such an embodiment of the present invention is particularly advantageous if the speech message was also recorded at the same location. A voice message should also be "younger" to a location in the same class so that the "older" message can be deleted.
Um eine möglichst große Vielfalt von unterschiedlichen Klassen für die Sprachdatensätze zu erhalten, kann gemäß einer besonderen Ausführungsform der vorliegenden Erfindung im Schritt des Extrahierens ferner eine von der Klassifizierungsinformation unterschiedliche weitere Klassifikationsinformation aus einem weiteren Sprachsignal extrahiert werden, wobei die weitere Klassifizierungsinformation geeignet ist, um das weitere Sprachsignal in eine andere von mehreren Klassen zuzuordnen, wobei das Extrahieren unter Verwendung des Spracherkennungsalgorithmus erfolgt und wobei im Schritt des Erzeugens ein weiterer Sprachdatensatz erzeugt wird, der das weitere Sprachsignal und/oder eine vor dem weiteren Sprachsignal abgeleitete Information einerseits und die weitere Klassifizierungsinformation andererseits umfasst. Die andere Klasse aus mehreren Klassen bezieht sich dabei auf eine Klasse, die sich vor einer Klasse unterscheidet, in die das Sprachsignal klassiert wurde. Unter einem weiteren Sprachdatensatz kann dabei ebenfalls eine Gruppe von Information verstanden werden, die zumindest neben der weiteren Klassifizierungsinformation das weitere Sprachsignal oder eine von den weiteren Sprachsignalen abgeleitete Information umfasst.In order to obtain the widest possible variety of different classes for the speech data sets, according to a particular embodiment of the present invention further in the step of extracting further classification information different from the classification information can be extracted from a further speech signal, wherein the further classification information is suitable for the to assign further speech signal into another of several classes, wherein the extraction is performed using the speech recognition algorithm and wherein in the step of generating a further speech data set is generated, the further speech signal and / or one before the further speech signal derived information on the one hand and the other classification information on the other hand includes. The other class from several classes refers to a class that differs from a class into which the speech signal has been classified. A further speech data record can also be understood to mean a group of information which, at least in addition to the further classification information, comprises the further speech signal or information derived from the further speech signals.
Vorteilhaft ist es ferner wenn im Schritt des Extrahierens eine Klassifikationsinformation aus dem Sprachsignal extrahiert wird, wobei der Spracherkennungsalgorithmus ein vorbestimmtes Wort und/oder einen vorbestimmten Begriff verwendet, um die Klassifikationsinformation zu erhalten, insbesondere wobei das vorbestimmte Wort und/oder der vorbestimmte Begriff zur Beschreibung eines Verkehrsflusses und/oder eines Wetters geeignet sind. Eine derartige Ausführungsform der vorliegenden Erfindung bietet den Vorteil durch die Wahl von vorbestimmten Worten oder Begriffen eine schnelle Zuordnung des Sprachsignals in vordefinierte Klassen zu ermöglichen. Auf diese Weise kann eine schnelle und dennoch ausreichend detaillierte Klassifizierung von verschiedenen Sprachsignalen ermöglicht werden.It is also advantageous if in the step of extracting a classification information is extracted from the speech signal, the speech recognition algorithm uses a predetermined word and / or a predetermined term to obtain the classification information, in particular where the predetermined word and / or the predetermined term for description a traffic flow and / or a weather are suitable. Such an embodiment of the present invention offers the advantage of allowing rapid assignment of the speech signal to predefined classes by the choice of predetermined words or terms. In this way, a fast yet sufficiently detailed classification of different speech signals can be made possible.
Die Erfindung wird nachstehend anhand der beigefügten Zeichnungen beispielhaft näher erläutert. Es zeigen:The invention will now be described by way of example with reference to the accompanying drawings. Show it:
In der nachfolgenden Beschreibung bevorzugter Ausführungsbeispiele der vorliegenden Erfindung werden für die in den verschiedenen Figuren dargestellten und ähnlich wirkenden Elemente gleiche oder ähnliche Bezugszeichen verwendet, wobei auf eine wiederholte Beschreibung dieser Elemente verzichtet wird.In the following description of preferred embodiments of the present invention, the same or similar reference numerals are used for the elements shown in the various figures and similarly acting, wherein a repeated description of these elements is omitted.
Der vorangehend erwähnte Stand der Technik zeigt, dass vielfältige Entwicklungen bekannt sind, die dazu dienen, Informationen entlang der Route oder Strecke aus einer Datenbank herauszufiltern. Diese Informationen befinden sich in der Regel in einer statischen Datenbank, die sich entweder auf dem Navigationsgerät selbst befindet (digitale Karte mit Zusatzinformationen wie z. B. POI-Informationen, Reiseführer) oder die in einem zentralen Server liegt, auf den mittels drahtloser Kommunikation zugegriffen wird.The above-mentioned prior art shows that various developments are known, which serve to filter information along the route or route from a database. This information is typically stored in a static database located either on the navigation device itself (digital map with additional information such as POI information, travel guide) or located in a central server accessed by wireless communication becomes.
Beim Stand der Technik erfolgt der Abruf der Sprachinformation beispielsweise über die Ortsreferenz. Bei einer sehr großen Anzahl von Sprachnachrichten ist es nicht mehr möglich, die gewünschten Sprachnachrichten herauszufiltern. Die Vorteile der vorliegenden Erfindung liegen darin, dass zu speichernde akustische Sprachnachrichten beispielsweise mittels einer vollautomatischen Spracherkennung behandelt und durch diese klassifiziert werden. Damit lassen sich Sprachnachrichten in bestimmte Klassen einteilen. Die Klassifikation erfolgt anhand der Erkennung von bestimmten Schlüsselwörtern. So können z. B. Sprachnachrichten, in denen Schlüsselwörter wie „Stau”, „stehender Verkehr”, „Stop & Go”, „Unfall” vorkommen, als verkehrsrelevante Informationen klassifiziert werden. Sprachnachrichten, in denen Schlüsselwörter wie „Parkplatz frei”, „Parkplatz besetzt”, Parkplatz” vorkommen, sind für das Parken relevante Verkehrsinformationen. Auf diese Weise können die Klassen als verkehrsrelevante Informationen in Bezug zu einer Strecke oder Route verstanden werden, an Hand deren die Sprachbotschaft oder Sprachnachricht klassiert wird.In the prior art, the retrieval of the language information takes place, for example, via the location reference. With a very large number of voice messages, it is no longer possible to filter out the desired voice messages. The advantages of the present invention are that acoustic voice messages to be stored are treated, for example, by means of fully automatic voice recognition and classified by them. This allows voice messages to be divided into certain classes. The classification is based on the recognition of certain keywords. So z. As voice messages in which keywords such as "traffic jam", "stagnant traffic", "stop &go","accident" occur classified as traffic-related information. Voice messages using keywords such as "parking space free", "parking occupied", "parking space" are traffic information relevant to parking. In this way, the classes may be understood as traffic relevant information related to a route or route by which the voice message or voice message is classified.
Dadurch, dass die Sprachnachrichten mit Zusatzinformation, insbesondere der Klassifizierungsinformation versehen werden, die beispielswiese aus einer automatischen Spracherkennung gewonnen werden, die nach bestimmten Schlüsselwörtern sucht, ist eine effiziente Suche nach gewünschten Sprachnachrichten aus einer großen Menge möglich.Characterized in that the voice messages are provided with additional information, in particular the classification information obtained, for example, from an automatic speech recognition, which searches for certain keywords, an efficient search for desired voice messages from a large amount is possible.
Der Grundgedanke der Erfindung liegt darin, dass ein Nutzer eine Sprachbotschaft mit z. B. Ortsbezug anderen, nachfolgenden Nutzern bereitstellen möchte. In der
Ein Fahrzeuginformationssystem
Sinnvoll ist sicher auch das Hinzufügen einer Zeitinformation
Ein wichtiger Aspekt der vorliegenden Erfindung liegt nun darin, anhand des Inhalts der abzulegenden Sprachnachricht
Ein besonders günstiges Ausführungsbeispiel der vorliegenden Erfindung, wie es in der
Eine andere interessante Klasse
Auf diese Weise lassen sich mit weiteren Schlüsselwörtern beliebige Klassen
Anhand der in dem Sprachdatensatz-Speicher
Das Filter
Eine weitere sinnvolle Variante des in
Eine weitere sinnvolle Variante des in
Außerdem wäre es prinzipiell auch möglich, die übersetzten Textbotschaften
Da sich bei sehr vielen Nutzern, die eine Vielzahl von Sprachnachrichten
Zusammenfassend wird ein System und Verfahren vorgestellt, das es mehreren mobilen Navigationsgeräten ermöglicht, ortsbasierende Sprachinformation über einen zentralen Server auszutauschen, derart, dass die mobilen Navigationsgeräte Informationen an den zentralen Server zur Ablage melden und die abgelegte Information aus einer Nutzinformation (= Sprachinformation) mit einer Zusatzinformation bestehen und jede Navigationseinheit über ein Filter auf die von anderen mobilen Navigationseinheiten abgelegten Informationen zugreift, wobei das Filter anhand der Zusatzinformation die gewünschte Nutzinformation herausfiltert und einem Fahrer wieder zur Verfügung stellt und die Zusatzinformation zumindest teilweise durch eine automatische Bearbeitung der Sprachinformation mittels eines Spracherkenners gewonnen wird.In summary, a system and method is presented which allows several mobile navigation devices to exchange location-based voice information via a central server, such that the mobile navigation devices report information to the central server for storage and the stored information from a payload (= voice information) with a Additional information and access each navigation unit via a filter on the stored information from other mobile navigation units, the filter filters out the desired information using a supplementary information and a driver provides again and recovered the additional information at least partially by automatic processing of the speech information by means of a speech recognizer becomes.
Weiterhin wird auch ein Verfahren und System vorgestellt, wobei die Zusatzinformation gewonnen aus der Bearbeitung der Sprachbotschaft mittels Spracherkenners eine von mehreren Klassen darstellt.Furthermore, a method and system is presented, wherein the additional information obtained from the processing of the voice message by voice recognizer represents one of several classes.
Gemäß einem anderen Aspekt wird in der vorliegenden Beschreibung ein Verfahren und System vorgestellt, wobei zusätzlich die Sprachbotschaften mittels einer automatischen Spracherkennung in Textbotschaften umgewandelt werden, die auf einem grafischen Display darstellbar sind.According to another aspect, in the present description, a method and system is presented wherein, in addition, the voice messages are converted by means of an automatic speech recognition into text messages which can be displayed on a graphic display.
Auch wird ein Verfahren und System beschrieben, wobei die Textbotschaften in eine oder mehrere Sprachen mittels eines automatischen Übersetzers umgewandelt werden.Also described is a method and system wherein the text messages are converted into one or more languages by means of an automatic translator.
Ferner wird auch ein Verfahren und System vorgestellt, wobei die Textbotschaft bei Abruf durch einen Nutzer in einem Fahrzeug mittels eines „Text to Speech”-Verfahrens wieder in eine akustische Botschaft zurückverwandelt wird.Furthermore, a method and system is presented, wherein the text message is retrieved on call by a user in a vehicle by means of a "text to speech" process back into an acoustic message.
Schließlich wird hier auch ein Verfahren und System vorgestellt, wobei zusätzlich ein Löschmechanismus vorgesehen ist, der bei mehreren Botschaften innerhalb einer Klasse ältere Botschaften zugunsten jüngerer Botschaften an einer Ortsposition oder in einem vordefinierten (d. h. begrenzten) Radius um eine Ortsposition löscht.Finally, a method and system is also presented, with an additional deletion mechanism being provided which, in the case of multiple messages within a class, deletes older messages in favor of younger messages at a location position or in a predefined (i.e., limited) radius about a location position.
Die beschriebenen und in den Figuren gezeigten Ausführungsbeispiele sind nur beispielhaft gewählt. Unterschiedliche Ausführungsbeispiele können vollständig oder in Bezug auf einzelne Merkmale miteinander kombiniert werden. Auch kann ein Ausführungsbeispiel durch Merkmale eines weiteren Ausführungsbeispiels ergänzt werden.The embodiments described and shown in the figures are chosen only by way of example. Different embodiments may be combined together or in relation to individual features. Also, an embodiment can be supplemented by features of another embodiment.
Ferner können erfindungsgemäße Verfahrensschritte wiederholt sowie in einer anderen als in der beschriebenen Reihenfolge ausgeführt werden.Furthermore, method steps according to the invention can be repeated as well as carried out in a sequence other than that described.
Umfasst ein Ausführungsbeispiel eine „und/oder” Verknüpfung zwischen einem ersten Merkmal und einem zweiten Merkmal, so kann dies so gelesen werden, dass das Ausführungsbeispiel gemäß einer Ausführungsform sowohl das erste Merkmal als auch das zweite Merkmal und gemäß einer weiteren Ausführungsform entweder nur das erste Merkmal oder nur das zweite Merkmal aufweist.If an exemplary embodiment comprises a "and / or" link between a first feature and a second feature, this can be read so that the embodiment according to one embodiment, both the first feature and the second feature and according to another embodiment, either only the first Feature or only the second feature.
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- DE 102009031275 A1 [0004] DE 102009031275 A1 [0004]
Claims (13)
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102011006846A DE102011006846A1 (en) | 2011-04-06 | 2011-04-06 | Method for preparing speech signal regarding traffic and/or weather conditions of route to be traveled by motor car, involves generating language records comprising classification information and speech signal |
IT000392A ITMI20120392A1 (en) | 2011-04-06 | 2012-03-13 | PROCEDURE AND DEVICE FOR FORMING A VOICE SIGNAL IN RELATION TO A PATH TO BE CARRIED OUT |
CN201210101519.XA CN102737630B (en) | 2011-04-06 | 2012-04-01 | Method for processing voice signal of to-be-driven road section and device |
FR1253151A FR2973924B1 (en) | 2011-04-06 | 2012-04-05 | METHOD AND DEVICE FOR PREPARING A VOICE SIGNAL RELATING TO A PATH |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102011006846A DE102011006846A1 (en) | 2011-04-06 | 2011-04-06 | Method for preparing speech signal regarding traffic and/or weather conditions of route to be traveled by motor car, involves generating language records comprising classification information and speech signal |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102011006846A1 true DE102011006846A1 (en) | 2012-10-11 |
Family
ID=46832815
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102011006846A Ceased DE102011006846A1 (en) | 2011-04-06 | 2011-04-06 | Method for preparing speech signal regarding traffic and/or weather conditions of route to be traveled by motor car, involves generating language records comprising classification information and speech signal |
Country Status (4)
Country | Link |
---|---|
CN (1) | CN102737630B (en) |
DE (1) | DE102011006846A1 (en) |
FR (1) | FR2973924B1 (en) |
IT (1) | ITMI20120392A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103456300A (en) * | 2013-08-07 | 2013-12-18 | 安徽科大讯飞信息科技股份有限公司 | POI speech recognition method based on class-base linguistic models |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015222956A1 (en) * | 2015-11-20 | 2017-05-24 | Robert Bosch Gmbh | A method for operating a server system and for operating a recording device for recording a voice command, server system, recording device and voice dialogue system |
CN111078934A (en) * | 2019-12-23 | 2020-04-28 | 上海擎感智能科技有限公司 | Map-based voice recording and playing method, system, medium, and apparatus |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102009031275A1 (en) | 2008-07-17 | 2010-01-21 | Audi Ag | Navigation arrangement for a motor vehicle |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4073668B2 (en) * | 2001-12-28 | 2008-04-09 | モトローラ・インコーポレイテッド | Data transmission method for mobile communication device, data reception method for mobile communication device, mobile communication device, and voice portal system |
EP1507129B1 (en) * | 2003-08-14 | 2008-01-02 | Harman/Becker Automotive Systems GmbH | Computer-based system and method for outputting information to a driver of a vehicle |
ATE416362T1 (en) * | 2006-03-28 | 2008-12-15 | Harman Becker Automotive Sys | STORAGE AND INTEREST-BASED VIEWING IN A NAVIGATION SYSTEM |
KR100819234B1 (en) * | 2006-05-25 | 2008-04-02 | 삼성전자주식회사 | Method and apparatus for setting destination in navigation terminal |
-
2011
- 2011-04-06 DE DE102011006846A patent/DE102011006846A1/en not_active Ceased
-
2012
- 2012-03-13 IT IT000392A patent/ITMI20120392A1/en unknown
- 2012-04-01 CN CN201210101519.XA patent/CN102737630B/en not_active Expired - Fee Related
- 2012-04-05 FR FR1253151A patent/FR2973924B1/en not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102009031275A1 (en) | 2008-07-17 | 2010-01-21 | Audi Ag | Navigation arrangement for a motor vehicle |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103456300A (en) * | 2013-08-07 | 2013-12-18 | 安徽科大讯飞信息科技股份有限公司 | POI speech recognition method based on class-base linguistic models |
CN103456300B (en) * | 2013-08-07 | 2016-04-20 | 科大讯飞股份有限公司 | A kind of POI audio recognition method based on class-base language model |
Also Published As
Publication number | Publication date |
---|---|
FR2973924A1 (en) | 2012-10-12 |
FR2973924B1 (en) | 2017-06-23 |
CN102737630B (en) | 2014-12-17 |
CN102737630A (en) | 2012-10-17 |
ITMI20120392A1 (en) | 2012-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1176395B1 (en) | Method for the selection of the designation of a place in a system of navigation via voice input | |
DE102009017177B4 (en) | Speech recognition arrangement and method for acoustically operating a function of a motor vehicle | |
DE60318430T2 (en) | Computer-aided system and method for outputting information to a driver of a vehicle | |
DE112011104739B4 (en) | Information management device and information management system for mobile information terminals | |
EP1198696B1 (en) | Method and device for transmitting navigational information from a central data unit to a navigation system, located in a motor-vehicle | |
DE102018113034A1 (en) | VOICE RECOGNITION SYSTEM AND VOICE RECOGNITION METHOD FOR ANALYZING A COMMAND WHICH HAS MULTIPLE INTENTIONS | |
DE102018120911A1 (en) | Navigation system with automatic suppression of navigation instructions for known geographical areas | |
DE102013006173A1 (en) | Method and device for proactive dialogue guidance | |
EP3095114B1 (en) | Method and system for generating a control command | |
EP2815396B1 (en) | Method for phoneticizing a data list and speech-controlled user interface | |
WO2015185464A1 (en) | Assistance system that can be controlled by means of voice inputs, having a functional device and a plurality of voice recognition modules | |
DE102018114598A1 (en) | METHOD AND SYSTEM FOR ANALYZING EXTRACTED PHRASES FROM A TEXT | |
EP2068123A2 (en) | Method for operating a navigation device | |
DE102011006846A1 (en) | Method for preparing speech signal regarding traffic and/or weather conditions of route to be traveled by motor car, involves generating language records comprising classification information and speech signal | |
DE112017008236T5 (en) | METHOD AND DEVICE TO ASSIST DRIVING | |
DE102017211447A1 (en) | Method for selecting a list entry from a selection list of an operating device by means of voice control and operating device | |
DE102016008862A1 (en) | Method for configuring a voice-controlled operating device, voice-controlled operating device and motor vehicle | |
EP1273886A1 (en) | Navigation system and method for a vehicle | |
DE102020202795A1 (en) | Method and device for compressing a neural network | |
EP1402232B1 (en) | Method and device for output of data on an attribute on a digital street map | |
DE102011113052A1 (en) | Method for speech output of text content acquired from user of vehicle, involves outputting acoustic output of the voice data | |
DE102014010315A1 (en) | Computer-implemented method and device for processing voice input | |
DE102012014484A1 (en) | Method for assisting driver of motor vehicle involves translating character string from actual language to target language, if character string is assigned to traffic sign, and is provided to driver | |
WO2012119707A1 (en) | Navigation device for a motor vehicle | |
DE102020115002A1 (en) | Virtual advisor |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R079 | Amendment of ipc main class |
Free format text: PREVIOUS MAIN CLASS: B60D0099000000 Ipc: G10L0015220000 |
|
R002 | Refusal decision in examination/registration proceedings | ||
R016 | Response to examination communication | ||
R003 | Refusal decision now final |