Die Erfindung bezieht sich auf eine Steuerung die während Tanzveranstaltungen eingesetzt
werden soll. Sie dient dazu, Videoinstallationen und/oder Musikanlagen in Abhängigkeit
von der Position und/oder der Bewegung der Teilnehmer zu steuern. Die Steuerung erfolgt
dabei derart, daß zunächst Bilder einer oder mehrerer Personen auf der Tanzfläche (1) von
CCD-Kameras (2) aufgenommen werden. Diese Bilder werden dann zur Bildauswertung (3)
verwendet. Dies kann mittels eines Rechners (30) erfolgen, der über Bildaquisitionshardware
(31) verfügt, wie sie z. B. von den Firmen Eltec und Stemmer (geschützte Firmennamen)
vertrieben wird.The invention relates to a controller that is to be used during dance events. It is used to control video installations and / or music systems depending on the position and / or the movement of the participants. The control takes place in such a way that first images of one or more people are recorded on the dance floor ( 1 ) by CCD cameras ( 2 ). These images are then used for image evaluation ( 3 ). This can be done by means of a computer ( 30 ), which has image acquisition hardware ( 31 ), as z. B. is distributed by the companies Eltec and Stemmer (protected company names).
Die Bildauswertung kann so erfolgen, daß Merkmalsdetektoren bestimmte Körperteile,
wie zum Beispiel Hände oder Kopf detektieren. Dies ist z. B. für das interaktive Videosystem
IVE des MIT Media Laboratory in Boston beschrieben worden. Besonders günstig zur
Bestimmung der Handpositionen ist, wenn die Kameras senkrecht nach unten schauen, da
dann die Hände seltener vor den restlichen Körper treten und somit in der Silhouette deutlicher
zu sehen sind. Mit Hilfe einer zweiten Kamera kann dann mittels Stereoverfahren die 3D-Position
der Körperteile bestimmt werden. Hierfür kommen verschiedene Verfahren in Frage,
z. B. ein Korrelationsverfahren, welches auf der Auswertung von Bildkorrelationen beruht,
wie es wie es z. B. von Faugeras beschrieben wird (Three-Dimensional Computer Vision, MIT
Press 1993).The image can be evaluated in such a way that feature detectors
such as detecting hands or head. This is e.g. B. for the interactive video system
IVE of the MIT Media Laboratory in Boston has been described. Particularly cheap for
Determining the hand positions is when the cameras are looking down vertically
then the hands appear less frequently in front of the rest of the body and thus more clearly in the silhouette
you can see. With the help of a second camera, the 3D position can then be achieved using a stereo method
the body parts are determined. There are several ways to do this,
e.g. B. a correlation method which is based on the evaluation of image correlations,
how it how it z. B. is described by Faugeras (Three-Dimensional Computer Vision, MIT
Press 1993).
Die Positionsdaten können nun unmittelbar genutzt werden visuelle und/oder akustische
Ereignisse zu steuern. Es kann weiterhin günstig sein, aus den Positionsdaten andere Pa
rameter zu berechnen, wie zum Beispiel die Amplitude der Tanzbewegung oder die relative
Phase von Tanzbewegung und Rhythmus der Musik (relative Phase ist definiert in Dÿkstra et
al., Biological Cybernetics 71, Seite 489-501,1994). Eine weitere Möglichkeit besteht darin,
kollektive Parameter zu berechnen, die das Verhalten ganzer Personengruppen beschreiben.
The position data can now be used directly visual and / or acoustic
Control events. It may also be advantageous to use the other Pa
to calculate parameters, such as the amplitude of the dance movement or the relative
Phase of dance movement and rhythm of the music (relative phase is defined in Dÿkstra et
al., Biological Cybernetics 71, pages 489-501, 1994). Another option is
calculate collective parameters that describe the behavior of entire groups of people.
Schließlich können zur Unterstützung der auf Positionsanalyse beruhenden Steuerung noch
weitere Eingänge hinzugenommen werden. Geeignet wären insbesondere visuelle Mimikanal
yse, Messung von EEG-Daten oder die Messung der Stirnmuskelkontraktion.Finally, to support the control based on position analysis
further entrances will be added. Visual facial expressions would be particularly suitable
yse, measurement of EEG data or measurement of forehead muscle contraction.
Die visuellen oder akustischen Ereignisse werden entweder direkt mit dem Rechner (30)
gesteuert, oder die Meßdaten werden über Datenleitungen weiteren Anlagen zugeführt, wie
sie z. B. spezielle Graphikrechner (4) oder Midigeräte zur Musikerzeugung (5) darstellen.
Graphikrechner, wie sie z. B. von der Firma Silicon Graphics (geschützter Firmenname)
angeboten werden, sind für diesen Zweck geeignet. Midigeräte sind Sequencer, z. B. Cubase
(geschützter Produktname) von der Firma Steinberg (geschützter Firmenname) und Synthe
sizer, z. B. der D800 von der Firma Roland (geschützter Firmenname). Schließlich benötigt
man noch Ausgabegeräte wie Verstärker, Lautsprecher (6) oder Bildschirme (7).The visual or acoustic events are either controlled directly with the computer ( 30 ), or the measurement data are supplied via data lines to other systems, such as those described in FIG. B. special graphics calculator ( 4 ) or midi devices for music generation ( 5 ). Graphics calculator, such as. B. from the company Silicon Graphics (protected company name) are suitable for this purpose. Midi devices are sequencers, e.g. B. Cubase (protected product name) from Steinberg (protected company name) and Synthe sizer, e.g. B. the D800 from Roland (protected company name). Finally, output devices such as amplifiers, loudspeakers ( 6 ) or screens ( 7 ) are required.
Anwendungsbeispiele sind die folgenden:Application examples are the following:
Die Anordnung kann dazu dienen, die Kopplung zwischen Musik und Tänzer zu in
tensivieren. Zum Beispiel deutet ein Abfall der Amplitude der Tanzbewegung oder starke
Schwankungen der relativen Phase zwischen Tanzbewegung und angebotenem Rhythmus der
Musik darauf hin, das der Tänzer nicht mehr konzentriert ist. Um die Aufmerksamkeit
wieder zu erhöhen, kann z. B. die Lautstärke geändert werden, oder der Rhythmus leicht
geändert werden, in dem z. B. eine Viertelnote in zwei Achtelnoten aufgespalten wird.The arrangement can serve to connect the coupling between music and dancer
intensify. For example, a decrease in the amplitude of the dance movement indicates or strong
Fluctuations in the relative phase between the dance movement and the rhythm offered
Music indicating that the dancer is no longer focused. For attention
to increase again, e.g. B. the volume can be changed, or the rhythm slightly
be changed in which, for. B. a quarter note is split into two eighth notes.
Die Anordnung kann auch genutzt werden, um interessante interaktive Dekorationen zu
schaffen. Beispielsweise könnte auf den Videoinstallationen ein mittels Computergraphik
generierter Ozean zu sehen sein. Bereiche im Publikum sind Bereichen des Ozeans zuge
ordnet. Beginnt das Publikum in einem Bereich stärker zu tanzen, wird der Ozean im
entsprechenden Bereich welliger. Die Ozeanoberfläche spiegelt so die Stimmung im Pub
likum wieder. Stellt die Mimikanalyse fest, daß die Mundwinkel eines Tänzers weit nach
oben gezogen sind, könnte eine Sonne auf Videoleinwand aufgehen.The arrangement can also be used to create interesting interactive decorations
create. For example, one could use computer graphics on the video installations
generated ocean can be seen. Areas in the audience are drawn to areas of the ocean
arranges. When the audience starts to dance harder in one area, the ocean in the
corresponding area wavy. The ocean surface reflects the mood in the pub
likum again. The facial expression analysis determines that the corners of a dancer's mouth lag far behind
pulled up, a sun could rise on video screen.