EP1552720B1 - Verfahren zum vortäuschen einer bewegung mittels einer akustischen wiedergabeeinrichtung und schallwiedergabeanordnung dafür - Google Patents

Verfahren zum vortäuschen einer bewegung mittels einer akustischen wiedergabeeinrichtung und schallwiedergabeanordnung dafür Download PDF

Info

Publication number
EP1552720B1
EP1552720B1 EP03770903A EP03770903A EP1552720B1 EP 1552720 B1 EP1552720 B1 EP 1552720B1 EP 03770903 A EP03770903 A EP 03770903A EP 03770903 A EP03770903 A EP 03770903A EP 1552720 B1 EP1552720 B1 EP 1552720B1
Authority
EP
European Patent Office
Prior art keywords
virtual sound
movement
sound sources
point
acoustic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
EP03770903A
Other languages
English (en)
French (fr)
Other versions
EP1552720A2 (de
Inventor
Christoph Pörschmann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gigaset Communications GmbH
Original Assignee
Gigaset Communications GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gigaset Communications GmbH filed Critical Gigaset Communications GmbH
Publication of EP1552720A2 publication Critical patent/EP1552720A2/de
Application granted granted Critical
Publication of EP1552720B1 publication Critical patent/EP1552720B1/de
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • H04S5/005—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation  of the pseudo five- or more-channel type, e.g. virtual surround
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/301—Automatic calibration of stereophonic sound system, e.g. with test microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/6063—Methods for processing data by generating or executing the game program for sound processing

Definitions

  • the invention relates to a method for simulating a movement in a predetermined direction relative to a reference point in the vicinity of an acoustic reproduction device and to a sound reproduction device for carrying out such a method.
  • a moving performance of sound sources is basically known.
  • a person in the vicinity of the acoustic reproduction device is simulated a spatial movement in that a sound source generated by the acoustic reproduction device moves relative to the person in a predetermined direction of movement.
  • a simple example is the displacement of a sound source from a first loudspeaker to a second loudspeaker, which is located at a distance from the first loudspeaker, by means of an acoustic reproduction device.
  • a virtual sound source is realized by a suitable superposition of sound signals, so that when a person perceiving these signals, the impression is created, the sound signals heard came from a particular point in space in his environment.
  • a method for simulating movement by means of a virtual sound source has the disadvantage that this sound source must, for example, move in a circular path in order to continuously indicate a movement in a certain direction. In a straight-line movement of the sound source, the sound source will continue to move away from the person, so that at a certain time no indication of the movement for the person cause more.
  • the present invention seeks to simulate a movement in a predetermined direction by means of an acoustic display device, wherein a sound source generated to pretend both a movement and should remain substantially fixed in space.
  • the proposed method has the effect that a person located at the reference point perceives the at least two virtual sound sources as a single sound source which is substantially stationary but simulates movement from the starting point to the end point.
  • control in step b) is such that a movement of the at least two virtual sound sources is effected substantially perpendicular to a connecting line between the reference point and a point in the middle between the starting point and the end point of movement of the at least two virtual sound sources.
  • a movement of the at least two virtual sound sources is effected substantially perpendicular to a connecting line between the reference point and a point in the middle between the starting point and the end point of movement of the at least two virtual sound sources.
  • the method may be performed as described, with the at least two virtual sound sources in this case either from right to left and jumped back or left to right and jumped back again by means of the control unit.
  • the midpoint between the starting point and the end point of the movement of the at least two virtual sound sources will be approximately in the middle of the field of view of the person.
  • the method to simulate movements that run obliquely to the connecting line between the reference point and the midpoint between the start and end point.
  • the path between the starting point and end point may correspond to a direction that is dictated by the navigation system.
  • the movement path for the at least two virtual sound sources can be adjusted so that the direction of travel to be selected for the motor vehicle is always indicated acoustically.
  • control in step b) is such that an increase of the sound intensity is effected for each virtual sound source from the starting point to the midpoint and a decrease of the sound intensity from the midpoint to the end point.
  • This measure contributes to the fact that the person who perceives the acoustic reproduction device, the impression that only a single, substantially stationary sound source, is present.
  • the sound intensity may increase at a constant rate up to the midpoint and decrease at the same rate from the midpoint to the endpoint.
  • step b) a moving speed of the at least two virtual sound sources is constant.
  • At least four virtual sound sources should be used which are controlled as explained on the basis of the aforementioned at least two virtual sound sources.
  • a sound reproducing apparatus having an acoustic reproducing apparatus for simulating movement in a predetermined direction relative to a reference point in the vicinity of an acoustic reproducing apparatus and generating at least two virtual sound sources and having a control unit for repeatedly moving the at least two virtual sound sources are formed in succession from a predetermined starting point to a predetermined end point and from there abruptly back to the starting point, wherein a direction of movement of the at least two virtual sound sources coincides with the direction of the vorzutäuschenden motion.
  • the single drawing shows a temporal sequence of arrangements of a plurality of virtual sound sources with respect to a person in the vicinity of the sound sources to illustrate a method for simulating a movement for the person.
  • the distance shown between virtual sound sources VS A, VS B, VS C and VS D, ie four virtual sound sources, and a person represented by an ellipse as a stylized view from above on her head is not comparable to actual distances. In certain applications, the distance will be very small, as the drawing suggests, but it is also possible that the virtual sound sources VS A, VS B, VS C and VS D, are located at a considerable distance from the person P.
  • the virtual sound sources VS A, VS B, VS C and VS D are present in an initial formation, wherein they lie on a common line, in the present embodiment of a straight line.
  • the leading virtual sound source VS A has been set behind the virtual sound source VS D, so that now the virtual sound source VS B is the leading sound source and the virtual sound source VS A is the trailing sound source.
  • each virtual sound source VS A, VS B, VS C and VS D which simulates a movement in the direction of an arrow B in the figure for the person P, is identical.
  • This path is defined by a start point and an end point.
  • the starting point is defined as the point in space to which each of the virtual sound sources VSA, VSB, VSC, VSD is jumped when it reaches the end point of the path. If one of the virtual sound sources VS A, VS B, VS C and VS D is jumped back to the starting point SP, its sound intensity is preferably 0, so that no influence on the acoustic perception of the person P by the return of the virtual sound sources VSA, VSB , VSC, VSD is exercised. In degraded embodiments, the starting point SP and the end point EP may also vary for the path to be traveled.
  • a midpoint MP of the path traveled by the virtual sound sources VS A, VS B, VS C and VS D is approximately in the direction of a horizontal center axis of the field of view of the person P.
  • the traversed path is approximately perpendicular to a connecting line V between the center of the path and the person P defining a reference point.
  • the movement of the virtual sound sources VS A, VS B, VSD C and VS D is controlled by a control unit (not shown) connected to an acoustic reproduction device (not shown), such as a headphone or speaker assembly can.
  • the acoustic reproduction device and the control unit together form a sound reproduction arrangement which is suitable for carrying out the method.
  • the control unit tracks which position each of the virtual sound sources, VS A, VS B, VS C and VS D, has at a particular point in time. Depending on the particular Position, the control unit determines the intensity of the sound signal, which is emitted by a respective virtual sound source VS A, VS B, VS C and VS D. From the starting point SP on the right side of the figure, the intensity increases up to the above-mentioned center point MP, whereafter it decreases until the end point EP. The increase and decrease of the sound intensity occurs at the same constant rate.
  • This approach has the advantage that the person P perceives the sound source arrangement, which results from the four successively arranged virtual sound sources VS A, VS B, VS C and VS D, as a single sound source which is stationary, but a movement from the right pretending to the left.
  • the sudden displacement of a virtual sound source located at the left edge occurs when its intensity has reached its minimum.
  • white noise can be used as the audio signal to be radiated from the virtual sound sources VS A, VS B, VS C and VS D.
  • the broadcast audio signals can have a bandwidth that allows localization of the sound signals.
  • the virtual sound sources VS A, VS B, VS C and VS D can also present voice signals or so-called listening icons, which are naturally or synthetically generated sound signals to which a function is assigned and which are as intuitive as possible by the person P related to this function. It is important that all virtual sound sources VS A, VS B, VS C and VS D emit the same audio signal, possibly with varying intensity.
  • a person uses a navigation system installed in a motor vehicle.
  • the navigation system proposes by means of a speech output to the person, for example, to turn left after 500 meters, the speech output is played back in such a way that the four virtual sound sources VS A, VS B, VS C and VS D move in the desired direction Case to the left.
  • a person uses a location-based service using a mobile phone. She uses a stereo headphone.
  • the location-based service notifies the person that he needs to move up to find a searched department within a store.
  • the four virtual sound sources are moved by means of the control unit so that an upward movement is simulated.
  • the thereby played audio signal for example "Please Move to the next higher floor", then forms the output signal of the virtual sound sources VS A, VS B, VS C and VS D.
  • a mobile phone may have the ability to virtually offer user menus spatially.
  • the person using the mobile phone receives visually the impression that menu entries that are more deeply nested are further away than the topmost menu level. So the person has the opportunity to gain an impression, which, for example, behind a menu item of the top level hides and intuitively moves through this virtual spatial representation of menus.
  • Three-dimensional audio icons can be used. With the aid of these icons, movement of the user into a movement of the virtual sound sources VS A, VS B, VS C and VS D can be implemented and made audible to the user. In this way he finds his way around the three-dimensional virtual spatial representation of the user menus better.
  • a game implemented on a mobile phone is intended to give a person the impression of moving through a virtual world.
  • the movement speed of the person should change. It is very difficult to illustrate the change in the speed of movement solely by means of a visual impression which the person receives, for example, via the display panel of the mobile telephone.
  • a parallel implementation of the method described above helps to illustrate the movement in that a sound background presented on the one hand remains stationary in space, on the other hand perceived by the person but an apparent movement. In this way, for example, the impression of different movement speeds can be "simulated" for the person.
  • the spatial positions of the starting point SP and the end point EP over time are not fixed but time-dependent. This means that the distance of the virtual sound sources VS A, VS B, VS C, VS D increases by the person in the present case.
  • the distance traveled by the virtual sound sources VS A, VS B, VS C, VS D is variable with time, but each of the virtual sound sources VS A, VS B, VS C and VS D still moves along the way and in particular performs the return movement.

Description

  • Die Erfindung bezieht sich auf ein Verfahren zum Vortäuschen einer Bewegung in einer vorbestimmten Richtung relativ zu einem Bezugspunkt in der Umgebung einer akustischen Wiedergabeeinrichtung sowie auf eine Schallwiedergabeanordnung zur Durchführung eines solchen Verfahrens.
  • Im Stand der Technik ist eine bewegte Darbietung von Schallquellen grundsätzlich bekannt. Dabei wird einer Person in der Umgebung der akustischen Wiedergabeeinrichtung eine räumliche Bewegung dadurch vorgetäuscht, dass sich eine von der akustischen Wiedergabeeinrichtung erzeugte Schallquelle relativ zu der Person in einer vorbestimmten Bewegungsrichtung bewegt.
  • Ein einfaches Beispiel ist dabei die Verlagerung einer Schallquelle von einem ersten Lautsprecher zu einem zweiten Lautsprecher, der sich in einem Abstand von dem ersten Lautsprecher befindet, mittels einer akustischen Wiedergabeeinrichtung.
  • Im Stand der Technik ist dem Fachmann auf dem hier relevanten technischen Gebiet jedoch auch die Realisierung sogenannter "virtueller Schallquellen" bekannt. Eine virtuelle Schallquelle wird realisiert durch eine geeignete Ürberlagerung von Schallsignalen, so daß bei einer diese Signale wahrnehmende Person der Eindruck entsteht, die wahrgenommenen Schallsignale stammten von einem bestimmten Raumpunkt in seiner Umgebung. In diesem Zusammenhang wird auf den Fachartikel "An Interactive Virtual-Environment Generator for Psychoacoustic Research, I: Architecture and Implementation" von J. Blauert et al. in ACUSTICA/Acta Acustica" 86, 2000, S. 94 - 102, verwiesen. Dort findet sich eine detaillierte Beschreibung für die Realisierung virtueller Schallquellen. Auch zu erwähnen ist der Fachartikel "Binaural Room Scanning - A new Tool for Acoustic and Psychoacoustic Research" von P. Mackensen et al., erschienen im Tagungsband zur DAGA 1999 (Jahrestagung der deutschen Gesellschaft für Akustik), in dem die Bewegung einer virtuellen Schallquelle erwähnt ist.
  • Dokument WO-A-98 58523 offenbart ein Verfahren zum Vortäuschen einer Bewegung mittels einer akustischen Wiedergabeeinrichtung und Schallwiedergabeanordnung dafür.
  • Ein Verfahren zum Vortäuschen einer Bewegung mittels einer virtuellen Schallquelle hat jedoch den Nachteil, dass sich diese Schallquelle beispielsweise auf einer Kreisbahn bewegen muss, um kontinuierlich eine Bewegung in eine bestimmte Richtung anzuzeigen. Bei einer geradlinigen Bewegung der Schallquelle wird sich die Schallquelle immer weiter von der Person entfernen, so dass zu einem bestimmten Zeitpunkt keine Anzeige der Bewegung für die Person mehr herbeiführen lässt.
  • Ausgehend hiervon liegt der Erfindung die Aufgabe zugrunde, mittels einer akustischen Wiedergabeeinrichtung eine Bewegung in einer vorbestimmten Richtung vorzutäuschen, wobei eine erzeugte Schallquelle sowohl eine Bewegung vortäuschen als auch im wesentlichen raumfest bleiben soll.
  • Diese Aufgabe wird gelöst durch ein Verfahren zum Vortäuschen einer Bewegung in einer vorbestimmten Richtung relativ zu einem Bezugspunkt in der Umgebung einer akustischen Wiedergabeeinrichtung, mit den Schritten:
    1. a) Vorsehen der akustischen Wiedergabeeinrichtung zum Erzeugen von mindestens zwei virtuellen Schallquellen,
    2. b) Steuern der akustischen Wiedergabeeinrichtung mit einer Steuereinheit, die zum wiederholten Bewegen der mindestens zwei virtuellen Schallquellen hintereinander von einem vorbestimmten Startpunkt aus bis zu einem vorbestimmten Endpunkt und von da aus sprunghaft zurück zu dem Startpunkt ausgebildet ist, wobei eine Bewegungsrichtung der mindestens zwei virtuellen Schallquellen mit der Richtung der vorzutäuschenden Bewegung zusammenfällt.
  • Das vorgeschlagene Verfahren hat die Wirkung, dass eine an dem Bezugspunkt befindliche Person die mindestens zwei virtuellen Schallquellen als eine einzige Schallquelle wahrnimmt, die im wesentlichen ortsfest ist, jedoch eine Bewegung von dem Startpunkt zu dem Endpunkt vortäuscht.
  • Bevorzugt erfolgt das Steuern in Schritt b) derart, dass eine Bewegung der mindestens zwei virtuellen Schallquellen im wesentlichen senkrecht zu einer Verbindungslinie zwischen dem Bezugspunkt und einem Punkt in der Mitte zwischen dem Startpunkt und dem Endpunkt der Bewegung der mindestens zwei virtuellen Schallquellen bewirkt wird. Auf diese Weise ist es möglich, in dem Fall, wenn der Person eine bestimmte Bewegungsrichtung mittels der akustischen Wiedergabeeinrichtung angegeben werden soll, eine besonders deutliche Wahrnehmung der Bewegung zu gewährleisten.
  • Wenn das Verfahren beispielsweise eingesetzt wird, um einer Person die Richtungen "links" oder "rechts" in Bezug auf ihren Kopf anzugeben, kann das Verfahren in der beschriebenen Weise durchgeführt werden, wobei die mindestens zwei virtuellen Schallquellen in diesem Fall entweder von rechts nach links und sprunghaft wieder zurück oder von links nach rechts und sprunghaft wieder zurück mittels der Steuereinheit bewegt werden. Dabei wird der Mittelpunkt zwischen dem Startpunkt und dem Endpunkt der Bewegung der mindestens zwei virtuellen Schallquellen etwa in der Mitte des Sichtfeldes der Person liegen.
  • Alternativ ist es aber auch möglich, mit Hilfe des Verfahrens Bewegungen vorzutäuschen, die schräg zu der Verbindungslinie zwischen dem Bezugspunkt und dem Mittelpunkt zwischen Start- und Endpunkt verlaufen. Wenn beispielsweise das Verfahren in Kombination mit einem Navigationssystem eines Kraftfahrzeugs benutzt wird, kann der Weg zwischen Startpunkt und Endpunkt einer Richtung entsprechen, die von dem Navigationssystem vorgegeben wird. Abhängig von dem jeweils aktuellen Aufenthaltsort des Kraftfahrzeugs kann der Bewegungsweg für die mindestens zwei virtuellen Schallquellen so angepasst werden, dass immer die zu wählende Fahrtrichtung für das Kraftfahrzeug akustisch angegeben wird.
  • Die Anzeige der Richtungen "rechts" und "links" wird allerdings voraussichtlich der Hauptanwendungsfall des Verfahrens im Zusammenhang mit ortsbezogenen Diensten, wie beispielsweise einem Navigationssystem, sein.
  • Bei einer bevorzugten Ausführungsform erfolgt das Steuern in Schritt b) derart, dass für jede virtuelle Schallquelle von dem Startpunkt aus bis zu dem Mittelpunkt eine Zunahme der Schallintensität und von dem Mittelpunkt zu dem Endpunkt eine Abnahme der Schallintensität bewirkt wird. Diese Maßnahme trägt dazu bei, dass die Person, welche die akustische Wiedergabeeinrichtung wahrnimmt, den Eindruck gewinnt, dass nur eine einzige, im wesentlichen ortsfeste Schallquelle, vorhanden ist. Insbesondere kann die Schallintensität mit gleichbleibender Rate bis zum dem Mittelpunkt zunehmen und mit derselben Rate von dem Mittelpunkt bis zum Endpunkt abnehmen.
  • Für die Vortäuschung einer gleichförmigen Bewegung ist es bevorzugt, dass in Schritt b) eine Bewegungsgeschwindigkeit der mindestens zwei virtuellen Schallquellen gleichbleibend ist.
  • Zur Verbesserung der Wahrnehmungseigenschaften der akustischen Wiedergabeeinrichtung sollten bevorzugt mindestens vier virtuelle Schallquellen verwendet werden, die so gesteuert werden, wie es anhand der zuvor erwähnten mindestens zwei virtuellen Schallquellen erläutert ist.
  • Die oben genannte Aufgabe wird ebenfalls gelöst, durch eine Schallwiedergabeanordnung mit einer akustischen Wiedergabevorrichtung zum Vortäuschen einer Bewegung in einer vorbestimmten Richtung relativ zu einem Bezugspunkt in der Umgebung einer akustischen Wiedergabeeinrichtung und zum Erzeugen von mindestens zwei virtuellen Schallquellen und mit einer Steuereinheit, die zum wiederholten Bewegen der mindestens zwei virtuellen Schallquellen hintereinander von einem vorbestimmten Startpunkt aus bis zu einem vorbestimmten Endpunkt und von da aus sprunghaft zurück zu dem Startpunkt ausgebildet ist, wobei eine Bewegungsrichtung der mindestens zwei virtuellen Schallquellen mit der Richtung der vorzutäuschenden Bewegung zusammenfällt.
  • Die Funktion einer solchen Schallwiedergabeanordnung ist bereits anhand des vorgeschlagenen Verfahrens oben erläutert worden. Bevorzugte Ausführungsformen der Schallwiedergabeanordnung finden sich in den Ansprüchen 7 bis 9.
  • Ein Ausführungsbeispiel der Erfindung wird nachfolgend unter Bezugnahme auf die einzige Zeichnung noch näher erläutert. Die einzige Zeichnung zeigt eine zeitliche Abfolge von Anordnungen einer Mehrzahl virtueller Schallquellen in Bezug zu einer Person in der Umgebung der Schallquellen zur Veranschaulichung eines Verfahrens zum Vortäuschen einer Bewegung für die Person.
  • Im Hinblick auf die Figur ist darauf hinzuweisen, dass der gezeigte Abstand zwischen virtuellen Schallquellen VS A, VS B, VS C und VS D, also vier virtuellen Schallquellen, und einer Person, die durch eine Ellipse als stilisierte Ansicht von oben auf ihren Kopf dargestellt ist, nicht mit tatsächlichen Abständen vergleichbar sein muss. In bestimmten Anwendungsfällen wird der Abstand sehr klein sein, wie es die Zeichnung suggeriert, jedoch ist es auch möglich, dass sich die virtuellen Schallquellen VS A, VS B, VS C und VS D, in einem erheblichen Abstand von der Person P befinden.
  • In dem dargestellten Ausführungsbeispiel sind die vier virtuellen Schallquellen VS A, VS B, VS C und VS D sowohl zu einem Zeitpunkt T = 0 s als auch zu weiteren Zeitpunkten mit T = 2 s, T = 4 s und T = 6 s gezeigt. Auf diese Weise wird veranschaulicht, wie sich die relative Bewegung der einzelnen virtuellen Schallquellen VS A, VS B, VS C, VS D, gegenüber der Person als Funktion der Zeit vollzieht.
  • Zu der Zeit T = 0 s liegen die virtuellen Schallquellen VS A, VS B, VS C und VS D in einer Anfangsformation vor, wobei sie auf einer gemeinsamen Linie, im vorliegenden Ausführungsbeispiel einer geraden Linie, liegen. Zum Zeitpunkt T = 2 s haben sich sämtliche virtuellen Schallquellen mit derselben Geschwindigkeit um ein Intervall nach links bewegt, wobei sich diese Bewegung bis zu einem Zeitpunkt T = 4s fortsetzt.
  • Zum Zeitpunkt T = 6 s ist die voreilende virtuelle Schallquelle VS A sprunghaft hinter die virtuelle Schallquelle VS D gesetzt worden, so dass nunmehr die virtuelle Schallquelle VS B die voreilende und die virtuelle Schallquelle VS A die nacheilende Schallquelle ist.
  • Insgesamt ergibt sich somit für sämtliche virtuellen Schallquellen VS A, VS B, VS C, VS D eine Bewegung von rechts nach links in der Zeichnung. Sobald die virtuelle Schallquelle VS B, die zunächst hinter der virtuellen Schallquelle VS A angeordnet ist, die ursprüngliche Lage CT = 0 s) der virtuellen Schallquelle VS A im Laufe der Zeit erreicht hat, erfolgt die sprunghafte Bewegung der virtuellen Schallquelle VS A an das Ende der Reihe der virtuellen Schallquellen VS A, VS B, VS C, VS D.
  • Der von jeder virtuellen Schallquelle VS A, VS B, VS C und VS D zurückzulegende Weg, der eine Bewegung in Richtung eines Pfeils B in der Figur für die Person P vortäuscht, ist identisch. Dieser Weg wird definiert durch einen Startpunkt und einen Endpunkt. Der Startpunkt ist definiert als derjenige Punkt im Raum, auf den jede der virtuellen Schallquellen VSA, VSB, VSC, VSD sprunghaft zurückgeführt wird, wenn sie den Endpunkt des Weges erreicht hat. Wenn eine der virtuellen Schallquellen VS A, VS B, VS C und VS D sprunghaft zu dem Startpunkt SP zurückgeführt wird, ist ihre Schallintensität bevorzugt 0, so dass keine Einfluss auf die akustische Wahrnehmung der Person P durch die Rückführung der virtuellen Schallquellen VSA, VSB, VSC, VSD ausgeübt wird. Bei verschlechterten Ausführungsformen können der Startpunkt SP und der Endpunkt EP für den zurückzulegenden Weg auch variieren.
  • Ein Mittelpunkt MP des von den virtuellen Schallquellen VS A, VS B, VS C und VS D zurückgelegten Weges befindet sich etwa in Richtung einer horizontalen Mittelachse des Sichtfeldes der Person P. Der zurückgelegte Weg verläuft etwa senkrecht zu einer Verbindungslinie V zwischen dem Mittelpunkt des Weges und der Person P, die einen Bezugspunkt definiert.
  • Die Bewegung der virtuellen Schallquellen VS A, VS B, VSD C und VS D wird von einer Steuereinheit (nicht dargestellt) gesteuert, die mit einer akustischen Wiedergabeeinrichtung (nicht dargestellt) verbunden ist, bei der es sich beispielsweise um einen Kopfhörer oder eine Lautsprecheranordnung handeln kann.
  • Die akustische Wiedergabeeinrichtung und die Steuereinheit bilden zusammen eine Schallwiedergabeanordnung, die zur Durchführung des Verfahrens geeignet ist. In der Steuereinheit wird nachverfolgt, welche Position jede der virtuellen Schallquellen, VS A, VS B, VS C und VS D zu einem bestimmten Zeitpunkt hat. Abhängig von der jeweiligen Position bestimmt die Steuereinheit die Intensität des Schallsignals, das von einer betreffenden virtuellen Schallquelle VS A, VS B, VS C und VS D ausgestrahlt wird. Von dem Startpunkt SP auf der rechten Seite der Figur aus, nimmt die Intensität bis zu dem o. g. Mittelpunkt MP zu, wonach sie bis zum dem Endpunkt EP abnimmt. Die Zunahme und die Abnahme der Schallintensität erfolgt mit derselben konstanten Rate. Diese Vorgehensweise hat den Vorteil, dass die Person P die Schallquellenanordnung, die sich aus den vier hintereinander angeordneten virtuellen Schallquellen VS A, VS B, VS C und VS D ergibt, als eine einzige Schallquelle wahrnimmt, die ortsfest ist, jedoch eine Bewegung von rechts nach links vortäuscht. Insbesondere erfolgt das sprunghafte Versetzen einer am linken Rand befindlichen virtuellen Schallquelle dann, wenn ihre Intensität ihr Minimum erreicht hat.
  • Als von den virtuellen Schallquellen VS A, VS B, VS C und VS D auszustrahlendes Audiosignal kann beispielsweise weißes Rauschen (MLS-Signal) verwendet werden. Grundsätzlich kommt es darauf an, dass die ausgestrahlten Audiosignale eine Bandbreite aufweisen, die eine Lokalisierung der Schallsignale gestattet. Alternativ können die virtuellen Schallquellen VS A, VS B, VS C und VS D auch Sprachsignale oder sog. Hör-Ikons darbieten, bei denen es sich um natürlich oder synthetisch erzeugte Schallsignale handelt, denen eine Funktion zugeordnet ist und die möglichst intuitiv von der Person P auf diese Funktion bezogen werden. Von Bedeutung ist es, dass sämtliche virtuellen Schallquellen VS A, VS B, VS C und VS D dasselbe Audiosignal, ggf. mit sich ändernder Intensität ausstrahlen.
  • Im Folgenden werden einige Anwendungsbeispiele des oben beschriebenen Verfahrens und der zugehörigen Schallwiedergabeanordnung beschrieben:
    • Anwendungsbeispiel 1
  • Eine Person verwendet ein Navigationssystem, das in einem Kraftfahrzeug installiert ist. Wenn das Navigationssystem mittels einer Sprachausgabe der Person vorschlägt, beispielsweise nach 500 Metern nach links abzubiegen, wird die Sprachausgabe so abgespielt, dass sich die vier virtuellen Schallquellen VS A, VS B, VS C und VS D, in die gewünschte Richtung bewegen, im vorliegenden Fall nach links.
    • Anwendungsbeispiel 2
  • Eine Person nutzt einen ortsbezogenen Dienst mit Hilfe eines Mobiltelefons. Dabei verwendet sie einen Stereo-Kopfhöher. Der ortsbezogene Dienst weist die Person darauf hin, dass sie sich nach oben bewegen muss, um eine gesuchte Abteilung innerhalb eines Geschäftes aufzufinden. In diesem Fall werden die vier virtuellen Schallquellen mittels der Steuereinheit so bewegt, dass eine Bewegung nach oben vorgetäuscht wird. Das dabei abgespielte Audiosignal, beispielsweise "Bitte Bewegen Sie sich in die nächst höhere Etage", bildet dann das Ausgangssignal der virtuellen Schallquellen VS A, VS B, VS C und VS D.
  • Anhand der Bewegung der virtuellen Schallquellen VS A, VS B, VS C und VS D erkennt die Person intuitiv, dass sie mit Hilfe z. B. einer Rolltreppe in die nächst höhere Etage fahren muss.
    • Anwendungsbeispiel 3
  • Ein Mobiltelefon kann über die Möglichkeit verfügen, Benutzermenüs virtuell räumlich darzubieten. Die das Mobiltelefon benutzende Person erhält dabei visuell den Eindruck, dass tiefer geschachtelte Menüeinträge weiter entfernt liegen als die oberste Menüebene. So hat die Person die Möglichkeit, einen Eindruck zu gewinnen, was sich beispielsweise hinter einem Menüpunkt der obersten Ebene verbirgt und kann sich intuitiv durch diese virtuelle räumliche Darstellung von Menüs bewegen.
  • Um eine Navigation in einem solchen dreidimensionalen Benutzermenü intuitiv zu gestalten, können sog. Dreidimensionale Audio-Icons verwendet werden. Mit Hilfe dieser Icons kann eine Bewegung des Benutzers in eine Bewegung der virtuellen Schallquellen VS A, VS B, VS C und VS D umgesetzt und für den Benutzer hörbar gemacht werden. Auf diese Weise findet er sich in der dreidimensionalen virtuellen räumlichen Darstellung der Benutzermenüs besser zurecht.
    • Anwendungsbeispiel 4
  • Bei einem auf einem Mobiltelefon implementierten Spiel soll für eine Person der Eindruck erweckt werden, dass sie sich durch eine virtuelle Welt bewegt. Dabei soll sich die Bewegungsgeschwindigkeit der Person ändern. Es ist sehr schwierig, die Änderung der Bewegungsgeschwindigkeit allein mit Hilfe eines visuellen Eindrucks, den die Person beispielsweise über das Anzeigefeld des Mobiltelefons erhält, zu verdeutlichen.
  • Eine parallele Durchführung des oben beschriebenen Verfahrens unterstützt dabei, die Bewegung dadurch zu verdeutlichen, dass eine dargebotene Geräuschkulisse einerseits ortsfest im Raum bleibt, andererseits von der Person aber eine scheinbare Bewegung wahrgenommen wird. Auf diese Weise kann für die Person beispielsweise der Eindruck unterschiedlicher Bewegungsgeschwindigkeiten "simuliert" werden.
  • Bei diesem Ausführungsbeispiel sind die räumlichen Lagen des Startpunktes SP und des Endpunktes EP über die Zeit nicht fest sondern zeitabhängig. Dies bedeutet, dass sich der Abstand der virtuellen Schallquellen VS A, VS B, VS C, VS D von der Person im vorliegenden Fall vergrößert.
  • In weiteren Anwendungsbeispielen kann es auch sinnvoll sein, das der von den virtuellen Schallquellen VS A, VS B, VS C, VS D zurückgelegte Weg mit der Zeit veränderlich ist, wobei jedoch jede der virtuellen Schallquellen VS A, VS B, VS C und VS D sich nach wie vor entlang des Weges bewegt und insbesondere die Rücksprungbewegung durchführt.

Claims (9)

  1. Verfahren zum Vortäuschen einer Bewegung in einer vorbestimmten Richtung relativ zu einem Bezugspunkt (P) in der Umgebung einer akustischen Wiedergabeeinrichtung, mit den Schritten:
    a) Vorsehen der akustischen Wiedergabeeinrichtung zum Erzeugen von mindestens zwei virtuellen Schallquellen,
    b) Steuern der akustischen Wiedergabeeinrichtung mit einer Steuereinheit, die zum wiederholten Bewegen der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) hintereinander von einem vorbestimmten Startpunkt (SP) aus bis zu einem vorbestimmten Endpunkt (EP) und von da aus sprunghaft zurück zu dem Startpunkt (SP) ausgebildet ist, wobei eine Bewegungsrichtung (B) der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) mit der Richtung der vorzutäuschenden Bewegung zusammenfällt.
  2. Verfahren nach Anspruch 1,
    bei dem das Steuern in Schritt b) derart erfolgt,
    dass eine Bewegung der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) im wesentlichen senkrecht zu einer Verbindungslinie (V) zwischen dem Bezugspunkt (P) und einem Punkt (MP) in der Mitte zwischen dem Startpunkt (SP) und dem Endpunkt (EP) der Bewegung der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) bewirkt wird.
  3. Verfahren nach Anspruch 2,
    bei dem das Steuern im Schritt b) derart erfolgt,
    dass für jede virtuelle Schallquelle (VS A, VS B, VS C, VS D) von dem Startpunkt (SP) aus bis zu dem Mittelpunkt (MP) eine Zunahme der Schallintensität und von dem Mittelpunkt (MP) zu dem Endpunkt (EP) eine Abnahme der Schallintensität bewirkt wird.
  4. Verfahren nach einem der Ansprüche 1 bis 3,
    bei dem in Schritt b) eine Bewegungsgeschwindigkeit der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) gleichbleibend ist.
  5. Verfahren nach einem der Ansprüche 1 bis 4,
    bei dem mindestens vier virtuelle Schallquellen (VS A, VS B, VS C, VS D) verwendet werden.
  6. Schallwiedergabeanordnung mit einer akustischen Wiedergabevorrichtung zum Vortäuschen einer Bewegung in einer vorbestimmten Richtung relativ zu einem Bezugspunkt (P) in der Umgebung einer akustischen Wiedergabeeinrichtung und zum Erzeugen von mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) und mit einer Steuereinheit, die zum wiederholten Bewegen der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) hintereinander von einem vorbestimmten Startpunkt (SP) aus bis zu einem vorbestimmten Endpunkt (EP) und von da aus sprunghaft zurück zu dem Startpunkt (SP) ausgebildet ist, wobei eine Bewegungsrichtung (B) der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) mit der Richtung der vorzutäuschenden Bewegung zusammenfällt.
  7. Schallwiedergabeanordnung nach Anspruch 6,
    bei der die Steuereinheit eine Positionserfassungseinrichtung zur Erfassung der Position der virtuellen Schallquellen (VS A, VS B, VS C, VS D) aufweist und Steuern der Intensität jeder virtuellen Schallquelle (VS A, VS B, VS C, VS D) abhängig von ihrer Position zwischen dem Startpunkt (SP) und dem Endpunkt (EP) ausgebildet ist.
  8. Schallwiedergabeanordnung nach einem der Ansprüche 6 und 7,
    bei der die Steuereinheit derart ausgebildet ist,
    dass sie eine Bewegung der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) im wesentlichen senkrecht zu einer Verbindungslinie (V) zwischen dem Bezugspunkt (B) und einem Punkt (MP) in der Mitte zwischen dem Startpunkt (SP) und dem Endpunkt (EP) der Bewegung der mindestens zwei virtuellen Schallquellen (VS A, VS B, VS C, VS D) bewirkt wird.
  9. Schallwiedergabeanordnung nach Anspruch 8,
    bei der die Steuereinheit derart ausgebildet ist,
    dass sie für jede virtuelle Schallquelle (VS A, VS B, VS C, VS D) von dem Startpunkt (SP) aus bis zu dem Mittelpunkt (MP) eine Zunahme der Schallintensität und von dem Mittelpunkt (MP) zu dem Endpunkt (EP) eine Abnahme der Schallintensität bewirkt.
EP03770903A 2002-10-18 2003-10-06 Verfahren zum vortäuschen einer bewegung mittels einer akustischen wiedergabeeinrichtung und schallwiedergabeanordnung dafür Expired - Fee Related EP1552720B1 (de)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE10248754A DE10248754B4 (de) 2002-10-18 2002-10-18 Verfahren zum Vortäuschen einer Bewegung mittels einer akustischen Wiedergabeeinrichtung und Schallwiedergabeanordnung dafür
DE10248754 2002-10-18
PCT/DE2003/003309 WO2004040939A2 (de) 2002-10-18 2003-10-06 Verfahren zum vortäuschen einer bewegung mittels einer akustischen wiedergabeeinrichtung und schallwiedergabeanordnung dafür

Publications (2)

Publication Number Publication Date
EP1552720A2 EP1552720A2 (de) 2005-07-13
EP1552720B1 true EP1552720B1 (de) 2009-12-09

Family

ID=32102825

Family Applications (1)

Application Number Title Priority Date Filing Date
EP03770903A Expired - Fee Related EP1552720B1 (de) 2002-10-18 2003-10-06 Verfahren zum vortäuschen einer bewegung mittels einer akustischen wiedergabeeinrichtung und schallwiedergabeanordnung dafür

Country Status (8)

Country Link
US (1) US20060126877A1 (de)
EP (1) EP1552720B1 (de)
JP (1) JP2006503512A (de)
KR (1) KR100697442B1 (de)
CN (1) CN1706221A (de)
AU (1) AU2003280300A1 (de)
DE (2) DE10248754B4 (de)
WO (1) WO2004040939A2 (de)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006115396A (ja) * 2004-10-18 2006-04-27 Sony Corp オーディオ信号の再生方法およびその再生装置
US9032042B2 (en) * 2011-06-27 2015-05-12 Microsoft Technology Licensing, Llc Audio presentation of condensed spatial contextual information
US8958569B2 (en) 2011-12-17 2015-02-17 Microsoft Technology Licensing, Llc Selective spatial audio communication
DE102012001149B4 (de) * 2012-01-21 2016-04-28 Audi Ag Verfahren und Vorrichtung zur Erzeugung eines synthetischen, räumlich verorteten, akustischen Feedback-Signals bei Betätigung eines Bedienelements
US10149058B2 (en) 2013-03-15 2018-12-04 Richard O'Polka Portable sound system
EP2971393A4 (de) 2013-03-15 2016-11-16 Richard O'polka Tragbares audiosystem
USD740784S1 (en) 2014-03-14 2015-10-13 Richard O'Polka Portable sound device

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2650583B2 (ja) * 1992-09-24 1997-09-03 カシオ計算機株式会社 パンニング制御装置
JPH06308949A (ja) * 1993-04-27 1994-11-04 Casio Comput Co Ltd 音像移動制御装置
JP3492404B2 (ja) * 1993-12-24 2004-02-03 ローランド株式会社 音響効果装置
US5436975A (en) * 1994-02-02 1995-07-25 Qsound Ltd. Apparatus for cross fading out of the head sound locations
JP3870493B2 (ja) * 1996-08-02 2007-01-17 株式会社セガ 競争ゲーム装置
DE19745392A1 (de) * 1996-10-14 1998-05-28 Sascha Sotirov Tonwiedergabevorrichtung und Verfahren zur Tonwiedergabe
US6694033B1 (en) * 1997-06-17 2004-02-17 British Telecommunications Public Limited Company Reproduction of spatialized audio
JP3856927B2 (ja) * 1997-10-20 2006-12-13 ローランド株式会社 効果装置
JP3285835B2 (ja) * 1998-12-25 2002-05-27 三菱電機株式会社 メニュー選択装置
JP3766770B2 (ja) * 1999-10-28 2006-04-19 シャープ株式会社 情報提示装置、情報提示方法、及び情報提示プログラムを記録したコンピュータで読取可能な記録媒体
GB2354364B (en) * 1999-08-17 2004-02-18 Ncr Int Inc Self-service terminals
JP2002005675A (ja) * 2000-06-16 2002-01-09 Matsushita Electric Ind Co Ltd 音響ナビゲーション装置
AUPQ942400A0 (en) * 2000-08-15 2000-09-07 Lake Technology Limited Cinema audio processing system
JP2002199499A (ja) * 2000-12-22 2002-07-12 Sony Corp 車載装置、自動車及び情報処理方法

Also Published As

Publication number Publication date
WO2004040939A3 (de) 2004-09-16
AU2003280300A8 (en) 2004-05-25
JP2006503512A (ja) 2006-01-26
CN1706221A (zh) 2005-12-07
KR20050048686A (ko) 2005-05-24
DE50312211D1 (de) 2010-01-21
WO2004040939A2 (de) 2004-05-13
KR100697442B1 (ko) 2007-03-20
US20060126877A1 (en) 2006-06-15
DE10248754A1 (de) 2004-05-13
AU2003280300A1 (en) 2004-05-25
DE10248754B4 (de) 2004-11-18
EP1552720A2 (de) 2005-07-13

Similar Documents

Publication Publication Date Title
DE3413181C2 (de) Großraumbeschallungssystem
EP3005737B1 (de) Mischpult, verfahren und computerprogramm zum bereitstellen eines tonsignals
DE2910117C2 (de) Lautsprecherkombination zur Wiedergabe eines zwei- oder mehrkanalig übertragenen Schallereignisses
EP2255359B1 (de) Vorrichtung und verfahren zur akustischen anzeige
DE102005057406A1 (de) Verfahren zur Aufnahme einer Tonquelle mit zeitlich variabler Richtcharakteristik und zur Wiedergabe sowie System zur Durchführung des Verfahrens
DE102016103331A1 (de) Vorrichtung und Verfahren zur Wiedergabe von Audiosignalen in einem Kraftfahrzeug
EP1552720B1 (de) Verfahren zum vortäuschen einer bewegung mittels einer akustischen wiedergabeeinrichtung und schallwiedergabeanordnung dafür
DE102009057981B4 (de) Verfahren zur Steuerung der akustischen Wahrnehmbarkeit eines Fahrzeugs
EP2208365A1 (de) Audiomodul zur akustischen überwachung eines überwachungsbereichs, überwachungssystem für den überwachungsbereich, verfahren zur erzeugung einer klangumgebung sowie computerprogramm
DE3806915A1 (de) Reverb- (nachhall-) generator
DE10254470A1 (de) Vorrichtung und Verfahren zum Bestimmen einer Impulsantwort und Vorrichtung und Verfahren zum Vorführen eines Audiostücks
DE3112874C2 (de) Verfahren zur Signalaufbereitung für die Wiedergabe einer Tonaufnahme über Kopfhörer und Vorrichtung zur Durchführung des Verfahrens
WO2013034444A1 (de) Vorrichtung, verfahren und elektroakustisches system zur nachhallzeitverlängerung
EP2373054B1 (de) Wiedergabe in einem beweglichen Zielbeschallungsbereich mittels virtueller Lautsprecher
AT514412A1 (de) Verfahren zur Erhöhung der Sprachverständlichkeit
DE10215775B4 (de) Verfahren zur räumlichen Darstellung von Tonquellen
DE756615C (de) Stereophonische UEbertragung von Tonschwingungen
DE19917820C2 (de) Verfahren und Vorrichtung zum mobilen und stationären Navigieren in versprachlichten hypertextorientierten Graphical User Interfaces (GUIs)
DE102018117648B3 (de) Verfahren zur Verbesserung der Wahrnehmbarkeit eines Sondersignals
AT413010B (de) Vorrichtung zur herleitung von räumlichen schallsignalen
DE2341342A1 (de) Anordnung zur musikwiedergabe
DE102016115449B4 (de) Verfahren zur Erzeugung eines Raumklangs aus einem Audiosignal, Verwendung des Verfahrens sowie Computerprogrammprodukt
EP1359437A1 (de) Verfahren zum Bestimmen einer Position eines Benutzers eines Kommunikationsendgerätes
DE3315326C2 (de) Verfahren und Anordnung zur stereophonen Tonaufnahme
DE102014107616B4 (de) System und Verfahren zur Minderung der Sprachverständlichkeit

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20050309

AK Designated contracting states

Kind code of ref document: A2

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LI LU MC NL PT RO SE SI SK TR

AX Request for extension of the european patent

Extension state: AL LT LV MK

DAX Request for extension of the european patent (deleted)
RBV Designated contracting states (corrected)

Designated state(s): DE ES FI FR GB IT

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: GIGASET COMMUNICATIONS GMBH

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): DE ES FI FR GB IT

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REF Corresponds to:

Ref document number: 50312211

Country of ref document: DE

Date of ref document: 20100121

Kind code of ref document: P

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091209

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20100320

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20100910

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091209

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20101006

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101102

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20110630

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101006

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 50312211

Country of ref document: DE

Effective date: 20110502

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20110502