DE19523518A1 - Steuerung von audiovisuellen Ereignissen mittels optischem Fluß - Google Patents
Steuerung von audiovisuellen Ereignissen mittels optischem FlußInfo
- Publication number
- DE19523518A1 DE19523518A1 DE1995123518 DE19523518A DE19523518A1 DE 19523518 A1 DE19523518 A1 DE 19523518A1 DE 1995123518 DE1995123518 DE 1995123518 DE 19523518 A DE19523518 A DE 19523518A DE 19523518 A1 DE19523518 A1 DE 19523518A1
- Authority
- DE
- Germany
- Prior art keywords
- supermarket
- discotheque
- events
- visual effects
- optical flow
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
Die Erfindung bezieht sich auf eine Steuerung von audiovisuellen Ereignissen. Die Steuerung
erfolgt dabei derart, daß zunächst Bilder einer oder mehrerer Personen (1) von einer CCD-
Kamera (2) aufgenommen werden. Diese Bilder werden dann zur Bildauswertung (3) d. h.
zur Analyse des sogenannten optischen Flusses verwendet. (Berechnung des optischen Flusses
bedeutet Bildbereiche in zeitlich aufeinanderfolgenden Bildern einander zuordnen. Dabei
gehören solche Bildbereiche zusammen, die Projektionen derselben Struktur in der Außenwelt
darstellen.) In der Fachliteratur wurden bereits zahlreiche Algorithmen zur Berech
nung des optischen Flusses angegeben. (Ein typisches Beispiel hierfür ist: Bülthoff HH,
Little JJ, Poggio T. A parallel algorithm for real-time computation of optical flow. Na
ture, pages 337-549, 1989) Die Berechnung des Flusses kann mittels eines Rechners (18)
erfolgen, der über Bildaquisitionshardware (19) verfügt, wie sie z. B. von den Firmen Eltec
und Stemmer (geschützte Firmennamen) vertrieben werden. Der optische Fluß, wie ihn
z. B. eine einzelne Person erzeugt, gibt Auskunft darüber, in welche Richtung und wie stark
sich einzelne Körperteile der Person bewegen. Diese Meßdaten können nun genutzt werden,
visuelle oder akustische Ereignisse zu steuern. Dies kann entweder direkt mit dem Rech
ner (18) geschehen, oder die Flußparameter werden über Datenleitungen weiteren Anlagen
zugeführt, wie sie z. B. spezielle Graphikrechner (4) oder Midigeräte zur Musikerzeugung (5)
darstellen. Graphikrechner, wie sie z. B. von der Firma Silicon Graphics (geschützter Fir
menname) angeboten werden, sind für diesen Zweck geeignet. Midigeräte sind Sequencer,
z. B. Cubase (geschützter Produktname) von der Firma Steinberg (geschützter Firmenname)
und Synthesizer, z. B. der D800 von der Firma Roland (geschützter Firmenname). Schließlich
benötigt man noch Ausgabegeräte wie Verstärker, Lautsprecher (6) oder Bildschirme (7).
Um die Abbildung von Flußfeldparametern auf Parameter, die die audiovisuellen Er
eignisse steuern bestimmen, lernfähig zu machen, kann ein neuronales Netz (21) Verwendung
finden. Z.B. sind sogenannte Backpropagation Netze (Rummelhart und McClelland) denkbar
oder auch Reinforcement Schemas (Barto und Sutton). Neuronale Netzwerke sind in der
Lage, unter Nutzung eines Trainingssignals (21), die Abbildung von Flußfeldparametern auf
Parameter, die die audiovisuelle Ereignisse festlegen, zu verbessern. Das Trainingssignal
gibt an, wie gut diese Abbildung bereits ist.
Konkrete Umsetzungen der Erfindung sind folgende:
- 1) Ein "Cyberwecker" funktioniert so, daß die Kamera auf ein Bett gerichtet ist. Der Wecker weckt die Person im Bett zu einer bestimmter Zeit, indem er Musik spielt. Bewegt sich die Person nun nicht, was durch die Flußfeldanalyse festgestellt wird, wird die Musik lauter gespielt, oder eine aggressivere Musik wird gespielt. Bewegt sich die Person nun stärker, wird die Musik wieder sanfter. Das ganze dauert eine vorher festgelegte Zeit. Ist die Person aufgestanden, kann sie per Tastendruck ein Trainingssignal erzeugen. Dieses gibt an, wie sehr die Person mit dem Weckprozeß zufrieden war, z. B. gibt sie eine Zahl zwischen 1 (sehr gut) und 6 (sehr schlecht) ein. Entsprechend wird das neuronale Netz die Zuordnung von Bewegungen zu musikalischen Ereignissen ändern.
- 2) Reklameansagen in einem Supermarkt können mittels der Erfindung an Besucher ströme angepaßt werden. Dazu müssen in dem Supermarkt Kameras so angebracht sein, daß die Stärke des optischen Flusses, den die Besucherströme erzeugen, gut gemessen wer den kann. Sind in einer Abteilung viele Besucher, sind dort die Bildbereiche ausgedehnt, in denen der optische Fluß groß ist. Dieses Signal kann dazu genutzt werden, Reklameansagen für Produkte in leereren Abteilungen zu machen. Welche Abteilungen leer sind, läßt sich ebenfalls mit Messungen des optischen Flusses herausfinden.
- 3) Werden mit der vorgeschlagenen Erfindung in einer Discotheque die Bewegungen des Publikums analysiert, kann dies dazu genutzt werden, Videoinstallationen, Licht oder Musik zu steuern.
Claims (3)
1. Steuerungsvorrichtung von audiovisuellen Ereignissen mittels optischem Fluß, bei welcher
durch Bildauswertung (3) optischer Fluß bestimmt wird und die Flußfeldparameter visuelle
und/oder akustische Ereignisse steuern.
2. Steuervorrichtung nach Anspruch 1, dadurch gekennzeichnet, daß eine CCD-Kamera, die
Bewegung einer oder mehrerer Personen beobachtet.
3. Steuervorrichtung nach Anspruch 1, die zusätzlich über ein lernfähiges neuronales Netz
verfügt (21), um die Steuerung von akustischen und/oder visuellen Ereignissen mittels Fluß
feldparametern zu verbessern.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE1995123518 DE19523518A1 (de) | 1995-06-30 | 1995-06-30 | Steuerung von audiovisuellen Ereignissen mittels optischem Fluß |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE1995123518 DE19523518A1 (de) | 1995-06-30 | 1995-06-30 | Steuerung von audiovisuellen Ereignissen mittels optischem Fluß |
Publications (1)
Publication Number | Publication Date |
---|---|
DE19523518A1 true DE19523518A1 (de) | 1997-01-02 |
Family
ID=7765486
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE1995123518 Withdrawn DE19523518A1 (de) | 1995-06-30 | 1995-06-30 | Steuerung von audiovisuellen Ereignissen mittels optischem Fluß |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE19523518A1 (de) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999040558A1 (de) * | 1998-02-05 | 1999-08-12 | Kuno Marbet Intern. Patente & Lizenzen | Reklameanlage |
WO2001093230A2 (de) * | 2000-06-02 | 2001-12-06 | Zn Vision Technologies Ag | Objektbezogene steuerung von informations- und werbeträgern |
DE102009034266A1 (de) * | 2009-07-21 | 2011-02-03 | Deutsches Zentrum für Luft- und Raumfahrt e.V. | Vorrichtung und Verfahren zum Anzeigen eines digitalen Bildes |
WO2014118450A1 (fr) * | 2013-02-01 | 2014-08-07 | Jean-Marie Adrien | Dispositif d'augmentation sélective de la signalétique sonore d'un lieu |
-
1995
- 1995-06-30 DE DE1995123518 patent/DE19523518A1/de not_active Withdrawn
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999040558A1 (de) * | 1998-02-05 | 1999-08-12 | Kuno Marbet Intern. Patente & Lizenzen | Reklameanlage |
WO2001093230A2 (de) * | 2000-06-02 | 2001-12-06 | Zn Vision Technologies Ag | Objektbezogene steuerung von informations- und werbeträgern |
WO2001093230A3 (de) * | 2000-06-02 | 2002-03-14 | Zn Vision Technologies Ag | Objektbezogene steuerung von informations- und werbeträgern |
DE102009034266A1 (de) * | 2009-07-21 | 2011-02-03 | Deutsches Zentrum für Luft- und Raumfahrt e.V. | Vorrichtung und Verfahren zum Anzeigen eines digitalen Bildes |
DE102009034266B4 (de) * | 2009-07-21 | 2013-12-19 | Deutsches Zentrum für Luft- und Raumfahrt e.V. | Vorrichtung und Verfahren zum Anzeigen eines digitalen Bildes |
WO2014118450A1 (fr) * | 2013-02-01 | 2014-08-07 | Jean-Marie Adrien | Dispositif d'augmentation sélective de la signalétique sonore d'un lieu |
FR3001825A1 (fr) * | 2013-02-01 | 2014-08-08 | Jean Marie Adrien | Signaletique augmentee |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Hauser et al. | Spontaneous number discrimination of multi-format auditory stimuli in cotton-top tamarins (Saguinus oedipus) | |
Droit-Volet et al. | The emotional body and time perception | |
Gregory et al. | Recent developments in public sector labor markets | |
Brown et al. | Repetition suppression in auditory–motor regions to pitch and temporal structure in music | |
US4490840A (en) | Oral sound analysis method and apparatus for determining voice, speech and perceptual styles | |
JP2018206085A (ja) | 事象評価支援システム、事象評価支援装置、及び事象評価支援プログラム | |
Paul et al. | A novel wavelet neural network based pathological stage detection technique for an oral precancerous condition | |
Whipple | An analytic study of the memory image and the process of judgment in the discrimination of clangs and tones | |
WO2014020134A1 (de) | Vorrichtung, verfahren und applikation zur ermittlung eines aktuellen belastungsniveaus | |
Sparks et al. | The effect of fast speech rate on stuttering frequency during delayed auditory feedback | |
DE19523518A1 (de) | Steuerung von audiovisuellen Ereignissen mittels optischem Fluß | |
Wang et al. | Altering stimulus timing via fast rhythmic sensory stimulation induces STDP-like recall performance in human episodic memory | |
CN113576498A (zh) | 基于脑电信号的视听觉美学评价方法及系统 | |
Lane et al. | Methods and findings in an analysis of a vocal operant | |
Kjeldergaard | Attitudes towards newscasters as measured by the semantic differential: A descriptive case. | |
Bigand et al. | Effect of context on the perception of pitch structures | |
Alluri et al. | Neural correlates of timbre processing | |
Bolte et al. | Integration of sex/gender into environmental health research. Results of the interdisciplinary research network Sex/Gender—Environment—Health (GeUmGe-NET) | |
Martínez et al. | Emotion elicitation oriented to the development of a human emotion management system for people with intellectual disabilities | |
Welkowitz et al. | An automated system for the analyses of temporal speech patterns: description of the hardware and software | |
Frühholz et al. | Neural dynamics of Karaoke-like voice Imitation in singing performance | |
SE9701977L (sv) | Förbättringar i, eller med avseende på, optisk talsyntes | |
Hui et al. | Testing Hearing | |
Ghosh et al. | Musical Perception and Visual Imagery: Do Musicians visualize while Performing? | |
Cohen et al. | Multimedia digital signal processing laboratory |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
8139 | Disposal/non-payment of the annual fee |