WO1984002416A1 - Dispositif de creation sonore - Google Patents

Dispositif de creation sonore Download PDF

Info

Publication number
WO1984002416A1
WO1984002416A1 PCT/FR1983/000247 FR8300247W WO8402416A1 WO 1984002416 A1 WO1984002416 A1 WO 1984002416A1 FR 8300247 W FR8300247 W FR 8300247W WO 8402416 A1 WO8402416 A1 WO 8402416A1
Authority
WO
WIPO (PCT)
Prior art keywords
signals
image
sound
sounds
parameters
Prior art date
Application number
PCT/FR1983/000247
Other languages
English (en)
Inventor
Sylvain Aubin
Original Assignee
France Etat
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by France Etat filed Critical France Etat
Priority to JP84500038A priority Critical patent/JPS60500228A/ja
Publication of WO1984002416A1 publication Critical patent/WO1984002416A1/fr

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H5/00—Instruments in which the tones are generated by means of electronic generators
    • G10H5/16—Instruments in which the tones are generated by means of electronic generators using cathode ray tubes
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155—User input interfaces for electrophonic musical instruments
    • G10H2220/441—Image sensing, i.e. capturing images or optical patterns for musical purposes or musical control purposes
    • G10H2220/455—Camera input, e.g. analyzing pictures from a video camera and using the analysis results as control data
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S84/00—Music
    • Y10S84/06—Cathode-ray tube

Definitions

  • the subject of the present invention is a method and a device for creating sound implying a transformation of images into sounds, which makes it possible to analyze images including at least one moving object, and to produce musical sounds from this analysis. .
  • It also relates to a sound creation device characterized in that it comprises first means for observing an image encompassing a moving object and producing image signals translating at least two parameters of the image varying during displacement of the object, and second means for producing from said image signals, sound control signals, and for ensuring a synthesis of sounds by using said sound control signals to control the variations of at least "two parameters different from the sounds produced.
  • the first means can advantageously include a video signal generator producing the image signals.
  • the second means can advantageously be designed to control parameters of the sounds chosen from the
  • O PI pitch of sound timbre, intensity, and possibly the rhythm of succession of sounds or their duration or any combination of these parameters.
  • the invention involves the use of a device for transforming a video signal into sounds, comprising at least one generator of a video signal, an analog digital converter if the video signal is not not already digital, a means of transforming the digitized video signal into a multitude p of signals representative of P parameters, a set of digital analog converters in number equal to the number of parameters, a matrix for connecting the P signals to a second multitude of q inputs of a sound synthesizer whose output is connected to a loudspeaker.
  • FIG. 1 is a schematic view of the constituent elements of the device
  • FIG. 2 is an example of parameters that can be extracted from an image for use in the device
  • FIG. 3 is a schematic view of the means for transforming a video signal into a multitude of signals, used in the device of Figure 1;
  • FIG. 1 represents the device according to the invention, in which 1 designates a video signal generator which can be constituted, as will be seen hereinafter, by one or more achrome or polychrome video cameras, or else by a video recorder, a videodisc or any other means. Except in the case of the video disc, the video signals coming from the means 1 are generally not in digital form. From output 11 of the generator they then supply an analog / digital converter 2 (input 20), which transforms analog signals into digital signals to transmit them from its output 21 to input 30 of interface 3, which can be constituted , either by a microprocessor device, or by a wired logic, which will be described later. In the event that the video signal is originally produced in digital form, it would be admitted to interface 3 directly.
  • a video signal generator which can be constituted, as will be seen hereinafter, by one or more achrome or polychrome video cameras, or else by a video recorder, a videodisc or any other means. Except in the case of the video disc, the video signals coming from the
  • the multitude p of the P outputs of the interface also supply the P analog digital converters, the P outputs of which are connected to a connection matrix 5, making it possible to modify the P outputs of the analog converters 4, into a multitude q of outputs that the it is connected to the inputs of the analog sound synthesizer 6, the single output of which is connected to a speaker 7.
  • the synthesizer 6 must have a sufficient number of voltage inputs. It is desirable to be able to control at least a first input 61, acting on the synthesizer circuit defining the pitch, a second input 62 acting on the synthesizer circuit defining the timbre of the sound and consequently the number of harmonics contained in the sound, a third input 63 acting on the synthesizer circuit regulating the intensity of the sound, a fourth input 64, acting on the synthesizer circuit regulating the rhythm of succession of the notes, and a fifth input 65, not shown, acting on the synthesizer circuit regulating the duration of said notes. If the sound synthesizer offers the possibility of controlling special effects in tension, vibrato, distortion, reverberation, echo, etc., it is possible to provide connections to the inputs controlling the special effects.
  • connection matrix 5 therefore makes it possible, from a number of outputs P of the converter 4, to control the q inputs of the synthesizer 6.
  • This matrix can easily be produced by any device making it possible to combine the P signals to transform them into Q signals.
  • This connection matrix is within the reach of any person skilled in the art; it can simply be carried out by plug-in pads making it possible to connect the outputs and the inputs together.
  • interface 3 The main role of interface 3 is to transform
  • a frame C represents either a television screen or the viewfinder of a camera which is used to film the image.
  • an object can be defined and represented by its dimensions x, y and by its position X, Y relative to an origin 0 chosen in a corner of the frame.
  • the image can be that of a dancer who moves on a stage and whose movements are translated by the variation of the parameters X, Y, y, x. If one wishes to have a larger number of signals to control the synthesizer, one uses the signals representative of the speed of variation of the parameters, and even of the acceleration. This gives the signals representative of the parameters x, y, x ', y', x ", y", x, Y. x f , Y ', X ", Y" -
  • FIG. 3 An exemplary embodiment of an interface in programmed logic is shown in FIG. 3 “
  • a module 38 for extracting the synchronization signals delivers the video signal to be digitized and the line and frame synchronization signals.
  • the converter 2 codes the video signal on a single bit.
  • the output of the analog / digital converter 2 is connected to the input 301 of a serial-parallel converter 101, controlled by a clock 102 (itself slaved to the line synchronization signal), which delivers to the input 305 of the 30 word interface of 16 bits.
  • the line and frame synchronization signals are connected at 302 and 303 and set the state organs of the interface to 1. They allow synchronization of the program progress with the line and frame scans, which is important for allow the system to operate in real time.
  • the exchanges between the interface 39 and the microprocessor are
  • a data bus 33 connects this interface to the microprocessor 31.
  • An address bus 34, as well as a control bus 35 " also connects the interface 39 to the microprocessor.
  • the microprocessor 31 is also connected by the address 34, data 33 and control 35 buses to a memory 32 containing the program for processing the digital information arriving at 305.
  • the input-output interface 39 transmits by the p outputs 304, the P words resulting from the processing of the digitized video signal, to the P digital / analog converters 4.
  • microprocessor is programmed to work in the following manner, which will be - explained with the aid of the flow diagram of Figure 4.
  • a first phase, or word processing phase when the serial-parallel converter 101 has loaded 16 bits, corresponding to a complete word, the interface 30 delivers a "full word” indication and the microprocessor loads the word in a register internal and detects the position in the word of bits at state 1, after having performed a filtering operation.
  • the goal of filtering is to get rid of parasitic luminances, by deciding that the passage from 0 to 1 only took place after having seen a certain number of 1 pass and that the passage from 1 to 0 did not take place until after having seen a certain number of 0s (which number will determine the power of the filtering), which amounts to requiring a transition of a certain stability before taking it into account.
  • the microprocessor calculates the position (x min. Or x max.), Stores this information in memory, examines the organ d 'state corresponding to line synchronization (bit at 1 during top line time), and if the latter is at 0,
  • WIPO _ waits for the next full word indication to repeat the same operation.
  • the microprocessor executes the second phase, or line processing phase, by comparing the information x min. and x max. relating to line n processed with information x min. and x max. it has in memory and which result from the processing of the previous line n-1. It only remembers the smallest of x min. and the largest of x max., so that when all the lines have been processed, only the extreme values in x of the position of the object in frame i will remain in memory (x min. frame i, x maximum frame i).
  • the microprocessor also determines whether the rank of the line processed corresponds to Y min. or Y max. after filtering.
  • the decision is made that a line contains 1 only if a certain number of the following lines also contain (y min.); similarly, the decision that a line contains no more than 1 is only taken if a certain number of the lines which follow does not contain either (y max.).
  • the microprocessor then stores the values of y min. and y max. It scans the output of the interface corresponding to the frame synchronization signal which enters 303 "If this is 0, it waits for the next complete word indication to process a new line, otherwise it starts a third phase, which is a frame processing phase.
  • the microprocessor performs calculations on the information it has in memory and which are: x max. frame i, x min. frame i, y min. frame i, y max. frame i.
  • the microprocessor restores this information to the 4 digital / analog converters by addressing the outputs 304 of the interface 39 and waits for the following complete word indication to process a new i + 1 frame.
  • the only limit to the complexity of the programs is the execution time. As an example, it can be decided that the line comprises 10 words of 16 bits and since the scanning of a line lasts. 52U s, the processing of a word must be carried out in less than 5.2 u s, the processing of a line (during line feed) in less than 12 us, the frame processing (during frame return) in less 1.2 milliseconds. These time constraints condition the real-time operation of the system.
  • FIG. 5 in wired logic, is represented in FIG. 5.
  • the output of the device 1 providing a video signal is connected to the input 380 of a circuit 48 for extracting line and frame synchronization signals.
  • the output 382 of circuit 48 provides a line synchronization signal, which serves to synchronize a clock 42, and which, on the other hand, is connected to an input of a logic circuit 45 with five inputs, including the two outputs 351 and 352 respectively deliver the signals y and Y to the digital analog converters of circuit 4.
  • the other four inputs of logic circuit 45 receive the frame synchronization signal supplied at output 383 of circuit 48 two of the output signals of logic 46 and the output signal from comparator 41, making it possible to digitize the video signal received at input 310 of circuit 41.
  • This video signal, supplied by output 381 of circuit 48 is compared with a reference voltage supplied to input 311 of comparator circuit 41. By acting on the reference voltage, the luminance level on which the switching takes place.
  • logic circuit 45 The role of logic circuit 45 is to detect the first blank line at the end of the object y max.
  • Logic 45 constructs a second signal which goes to 1 as soon as a non-blank line is encountered (like the previous signal) and which drops to zero after the end of object detection. It is during the high position of this signal that a second counter, not shown, will be authorized to count the line synchronization tops, which will provide the magnitude y.
  • the output 312 of the comparator 41 drives a shift register 43, looped on itself, whose offset is synchronized by the signal of a clock 42, which is itself synchronized with the line synchronization signal.
  • This shift register constitutes a rotating memory which makes it possible to construct, then to memorize the location of the parameter x on a line.
  • the output of circuit 43 is connected to an input of a logic block 44 with seven inputs, of which the other six
  • “Inputs receive the line synchronization signal, the clock signal and the four signals of the outputs of the logic block 46, which receives the signal on its first input 362. Line synchronization and on its second input 363 the signal of frame synchronization.
  • Logic circuit 46 consists of a
  • the circuit 36 thus provides four logic signals which, with the line and frame synchronization signals, allow the sequencing of the operations carried out by the system.
  • the outputs 340 and 341 of the logic circuit 44 deliver the signals representative respectively of x and X to the analog digital converters of the circuit 4.
  • This circuit 34 will notably include a counter and buffers.
  • the values X and Y respectively designate the abscissas and ordinates at the start of the object in projection on each axis, and not the mediums between minimum and maximum as in the previous case, also illustrated by Figure 2.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Studio Circuits (AREA)
  • Processing Or Creating Images (AREA)
  • Image Analysis (AREA)

Abstract

Ce dispositif de création sonore comprend au moins un générateur d'un signal vidéo (1), un convertisseur analogique digital (2) si le signal vidéo n'est pas déjà numérique, un moyen (3) de transformer le signal vidéo en une multitude p de signaux représentatifs de P paramètres, un ensemble (4) de convertisseurs digitaux-analogiques en nombre égal au nombre des paramètres, une matrice de connexion (5) des P signaux à une second multitude de q entrées d'un synthétiseur de son dont la sortie est branchée à un haut-parleur.

Description

DISPOSITIF DE CREATION SONORE
La présente invention a pour objet un procédé et un dispositif de création sonore impliquant une transformation d'images en sons, qui permet d'analyser des images englobant au moins un objet en déplacement, et de produire' des sons musicaux à partir de cette analyse.
L'invention a ainsi pour objet un procédé de création sonore caractérisé en ce qu'il consiste essentiellement :
- à observer une image englobant un objet en déplacement,
- à produire des signaux d'image traduisant au moins deux paramètres de l'image variant au cours du déplacement de l'objet,
- à produire à partir desdits signaux d'image, des signaux de commande sonore, et à assurer une synthèse de sons en utilisant lesdits signaux de commande sonore pour commander les variations d'au moins deux paramètres différents des sons produits.
Elle a aussi pour objet un dispositif de création sonore caractérisé en ce qu'il comprend des premiers moyens pour observer une image englobant un objet en déplacement et produire des signaux d'image traduisant au moins deux paramètres de l'image variant au cours du déplacement de l'objet, et des seconds moyens pour produire à partir desdits signaux d'image, des signaux de commande sonore, et pour assurer une synthèse de sons en utilisant lesdits signaux de commande sonore pour commander les variations d'au moins «deux paramètres différents des sons produits.
Dans un tel dispositif, les premiers moyens peuvent avantageusement comporter un générateur de signal vidéo produisant les signaux d'image. D'autre part, les seconds moyens peuvent avantageusement être conçus pour commander des paramètres des sons choisis parmi la
O PI hauteur du son, son timbre, son intensité, et éventuellement le rythme de succession des sons ou leur durée ou toute combinaison de ces paramètres.
Il est en fait déjà connu de réaliser des appareils de synthèse de bruits ou de sons fonctionnant par exemple à partir d'une commande vocale comme décrit dans le brevet français 2 057 645, ou utilisant un analyseur de musique pour générer des signaux de commande d'un synthétiseur de sons comme dans le brevet français 2 226 092. On connait aussi du brevet français 2 206 030 un système connu pour soumettre la création de sons à l'influence du déplacement d'énergie d'un être humain. Toutefois, aucun des documents précédents ne concerne l'utilisation d'images permettant de générer des signaux vidéo pour commander, après transformation de ces signaux, un synthétiseur de sons. Aucune des techniques connues ne conduit à prendre en compte véritablement les mouvements comme le permet l'invention, grâce à la possibilité qu'elle offre de faire intervenir une analyse de l'image dans la synthèse de sons, qui pourra ainsi être influencée par exemple par tel ou tel mouvement de bras, de jambe, du corps, ou autre, d'un danseur ou d'un groupe de personnes. On notera d'autre part qu'à partir d'une analyse d'image détaillée, on peut jouer sur un nombre de paramètres importants dans la synthèse des sons, en exploitant des relations entre paramètres physiques et qualités des sons qui sont en elles-mêmes connues.
Selon un mode de réalisation particulier, l'invention implique l'utilisation d'un dispositif de transformation d'un signal vidéo en sons, comprenant au moins un générateur d'un signal vidéo, un convertisseur analogique digital si le signal vidéo n'est pas déjà numérique, un moyen de transformer le signal vidéo numérisé en une multitude p de signaux représentatifs de P paramètres, un ensemble de convertisseurs analogiques digitaux en nombre égal au nombre des paramètres, une matrice de connexion des P signaux à une seconde multitude de q entrées d'un synthétiseur de sons dont la sortie est branchée à un haut-parleur.
D'autres caractéristiques et avantages de la présente invention apparaîtront plus clairement à la lecture de la description faite ci-après en référence aux figures annexées dans lesquelles : la figure 1 est une vue schématique des éléments constitutifs du dispositif,
- la figure 2 est un exemple de paramètres que l'on peut extraire d'une image pour les utiliser dans le dispositif,
- la figure 3 est une vue schématique des moyens de transformer un signal vidéo en une multitude de signaux, utilisés dans le dispositif de la figure 1 ;
- la figure -4 est un organigramme de l'analyse de l'image ;
- la figure 5 une variante de l'interface de la figure 3» réalisée alors en logique câblée.
La figure 1 représente le dispositif selon l'invention, dans lequel 1 désigne un générateur de signaux vidéo qui peut être constitué, comme on le verra par la suite, par une ou plusieurs caméras vidéo achrome ou polychrome, ou bien par un magnétoscope, un vidéodisque ou tout autre moyen. Sauf dans le cas du vidéodisque, les signaux vidéo issus des moyens 1 ne sont en général pas sous forme numérique. De la sortie 11 du générateur ils alimentent alors un convertisseur analogique/digital 2 (entrée 20), qui transforme les signaux analogiques en signaux numériques pour les transmettre de sa sortie 21 à l'entrée 30 de l'interface 3, laquelle peut être constituée, soit par un dispositif à microprocesseur, soit par une logique câblée, qui seront décrits par la suite. Dans le cas où le signal vidéo serait produit d'origine sous forme numérique, il serait admis à l'interface 3 directement. La multitude p des P sorties de l'interface alimentent également les P convertisseurs digitaux analogiques dont les P sorties sont reliées à une matrice de connexion 5, permettant de modifier les P sorties des convertisseurs analogiques 4, en une multitude q de sorties que l'on relie aux entrées du synthétiseur analogique de son 6, dont l'unique sortie est branchée à un haut-parleur 7.
Le synthétiseur 6 doit posséder un nombre suffisant d'entrées en tension. Il est souhaitable de pouvoir commander au moins une première entrée 61, agissant sur le circuit du synthétiseur définissant la hauteur du son, une seconde entrée 62 agissant sur le circuit du synthétiseur définissant le timbre du son et par conséquent le nombre d'harmoniques contenus dans le son, une troisième entrée 63 agissant sur le circuit du synthétiseur réglant l'intensité du son, une quatrième entrée 64, agissant sur le circuit du synthétiseur réglant le rythme de succession des notes, et une cinquième entrée 65, non représentée, agissant sur le circuit du synthétiseur réglant la durée desdites notes. Dans le cas où le synthétiseur de sons offre la possibilité de commander en tension des effets spéciaux, vibrato, distorsion, réverbération, écho, etc., il est possible de prévoir des branchements sur les entrées commandant les effets spéciaux.
La matrice 5 de connexion permet donc, à partir d'un nombre de sorties P du convertisseur 4, de commander les q entrées du synthétiseur 6. Cette matrice peut facilement être réalisée par tout dispositif permettant de combiner les P signaux pour les transformer en Q signaux. Cette matrice de connexion est à la portée de tout homme de l'art ; elle peut simplement être réalisée par des plots enfichables permettant de connecter entre elles les sorties et les entrées.
L'interface 3 a pour rôle principal de tranformer
OMPI le signal vidéo, digitalisé, en P signaux dont on va se servir pour commander le synthétiseur. Un exemple de sélection dans l'image de P paramètres représentatifs de son évolution est donné par la figure 2. Un cadre C représente soit un écran de téléviseur, soit le viseur d'une caméra qui sert à filmer l'image. A chaque trame un objet peut être défini et représenté par ses dimensions x, y et par sa position X, Y par rapport à une origine 0 choisie dans un coin du cadre. L'image peut être celle d'un danseur qui se meut sur une scène et dont les mouvements sont traduits par la variation des paramètres X, Y, y, x. Si l'on désire avoir un plus grand nombre de signaux pour commander le synthétiseur, on utilise les signaux représentatifs de la vitesse de variation des paramètres, et même de l'accélération. On obtient ainsi, les signaux représentatifs des paramètres x, y, x', y', x", y", x, Y. xf, Y', X", Y"-
Un exemple de réalisation d'un interface en logique programmée, est représenté en figure 3«
Un module d'extraction 38 des signaux de synchronisation délivre le signal vidéo à numériser et les signaux de synchronisation de ligne et de trame. En fait, dans le cas simple de l'exemple, le convertisseur 2 code le signal vidéo sur un seul bit. La sortie du convertisseur analogique/digital 2 est branchée à l'entrée 301 d'un convertisseur série-parallèle 101, piloté par une horloge 102 (elle-même asservie au signal de synchronisation ligne), qui délivre à l'entrée 305 de l'interface 30 des mots de 16 bits.
Les signaux de synchronisation de ligne et de trame sont branchés en 302 et 303 et mettent à 1 des organes d'états de l'interface 39- Ils permettent de synchroniser le déroulement du programme avec les balayages ligne et trame, ce qui est important pour permettre le fonctionnement du système en temps réel. Les échanges entre l'interface 39 et le microprocesseur sont
^TjREA, soit programmés, soit déclenchés par interruption.
Un bus de données 33 raccorde cet interface au microprocesseur 31. Un bus d'adresses 34, ainsi qu'un bus de commande 35» raccordent également l'interface 39 au microprocesseur. Le microprocesseur 31 est également relié par les bus d'adresses 34, de données 33 , de commande 35, à une mémoire 32, contenant le programme de traitement des informations digitales arrrivant en 305.
En sortie, l'interface d'entrée-sortie 39 transmet par les p sorties 304, les P mots résultant du traitement du signal vidéo digitalisé, aux P convertisseurs digitaux/analogiques 4.
En fonctionnement, le microprocesseur est programmé pour travailler de la façon suivante, qui sera - explicitée à l'aide de l'organigramme de la figure 4.
Dans une première phase, ou phase de traitement de mot, lorsque le convertisseur série-parallèle 101 a chargé 16 bits, correspondant à un mot complet, l'interface 30 délivre une indication "mot complet" et le microprocesseur charge le mot dans un registre interne et détecte la position dans le mot des bits à l'état 1, après avoir effectué une opération de filtrage.
Le but du filtrage, qui est optionnel, est de s'affranchir de luminances parasites, en décidant que le passage de 0 à 1 n'a eu lieu qu'après avoir vu passer un certain nombre de 1 et que le passage de 1 à 0 n'a eulieu qu'après avoir vu passer un certain nombre de 0 (lequel nombre) déterminera la puissance du filtrage), ce qui revient à exiger d'une transition une certaine stabilité avant de la prendre en compte.
Si un passage de 0 à 1 ou de 1 à 0 a été détecté dans le mot, le microprocesseur en calcule la position (x min. ou x max.), stocke en mémoire cette information, scrute dans l'interface l'organe d'état correspondant à la synchronisation ligne (bit à 1 pendant le temps du top ligne), et si ce dernier est à 0,
OMPI _ attend l'indication de mot complet suivant pour refaire la même opération.
A l'issue de la première phase, lorsque tous les mots constitutifs d'une ligne ont été traités, le microprocesseur exécute la deuxième phase, ou phase de traitement de ligne, en comparant les informations x min. et x max. relatives à la ligne n traitée avec les informations x min. et x max. qu'il possède en mémoire et qui résultent du traitement de la ligne précédente n-1. II ne garde en mémoire que le plus petit des x min. et le plus grand des x max., de telle sorte que lorsque toutes les lignes auront été traitées, il ne subsistera en mémoire que les valeurs extrêmes en x de la position de l'objet dans la trame i (x min. trame i, x max. trame i).
Au cours de cette seconde phase de traitement le microprocesseur détermine aussi si le rang de la ligne traitée correspond à Y min. ou Y max. après filtrage.
Dans ce filtrage, la décision est prise qu'une ligne contient des 1 seulement si un certain nombre des lignes suivantes en contiennent aussi (y min.) ; de même, la décision qu'une ligne ne contient plus de 1 n'est prise que si un certain nombre des lignes qui suivent n'en contient pas non plus (y max.).
Le microprocesseur met alors en mémoire les valeurs de y min. et y max. Il scrute la sortie de l'interface correspondant au signal de synchronisation trame qui entre en 303» Si celui-ci est à 0, il attend l'indication de mot complet suivant pour traiter une nouvelle ligne, sinon il amorce une troisième phase, qui est une phase de traitement de la trame.
Dans cette troisième phase, le microprocesseur opère des calculs sur les informations qu'il possède en mémoire et qui sont : x max. trame i, x min. trame i, y min. trame i, y max. trame i.
Il calcule les coordonnées moyennes en abscisse, et ordonnées, soit :
Figure imgf000009_0001
X - max . + x min . et _ y max. -t- y min . , 2 2
ainsi que la largeur et la hauteur de l'objet, soit' : x = x max. - x min. et y = y max. - y min.
Ces calculs faits, le microprocesseur restitue ces informations aux 4 convertisseurs digitaux/analogiques en adressant les sorties 304 de l'interface 39 et attend l'indication de mot complet suivant pour traiter une nouvelle trame i + 1.
La seule limite à la complexité des programmes est le temps d'exécution. A titre d'exemple, on peut décider que la ligne comporte 10 mots de 16 bits et étant donné que le balayage d'une ligne dure. 52U s, le traitement d'un mot devra être réalisé en moins de 5,2u s, le traitement d'une ligne (pendant le retour ligne) en moins de 12 u s, le traitement de trame (pendant le retour trame) en moins de 1,2 millisecondes. Ces contraintes de temps conditionnent le fonctionnement en temps réel du système.
Un deuxième mode de réalisation de l'interface
3> en logique câblée, est représenté en figure 5. La sortie du dispositif 1 fournissant un signal vidéo , est branchée à l'entrée 380 d'un circuit 48 d'extraction des signaux de synchronisation de ligne et de trame.
La sortie 382 du circuit 48 fournit un signal de synchronisation de ligne, qui sert à synchroniser une horloge 42, et qui d'autre part, est branché à une entrée d'un circuit logique 45 à cinq entrées, dont les deux sorties 351 et 352 délivrent respectivement les signaux y et Y aux convertisseurs analogiques digitaux du circuit 4. Les quatre autres entrées du circuit logique 45 reçoivent le signal de synchronisation de trame délivré à la sortie 383 du circuit 48 deux des signaux de sortie d'une logique 46 et le signal de sortie du comparateur 41, permettant de digitaliser le signal vidéo reçu à l'entrée 310 du circuit 41. Ce signal vidéo, fourni par la sortie 381 du circuit 48, est comparé avec une tension de référence fournie à l'entrée 311 du circuit comparateur 41. En agissant sur la tension de référence, on détermine le niveau de luminance sur lequel a lieu la commutation.
Le circuit logique 45 a pour rôle de détecter la première ligne vierge en fin d'objet y max.
(avantageusement avec filtrage) . Il construit un premier signal qui passe à 1 dès qu'une ligne non vierge est rencontrée et qui retombe à zéro en fin de trame. C'est durant la position haute de celui-ci qu'un compteur non représenté sera autorisé à compter les tops de synchronisation ligne, ce qui fournira la grandeur Y.
La logique 45 construit un second signal qui passe à 1 dès qu'une ligne non vierge est rencontrée (comme le précédent signal) et qui retombe à zéro après la détection de fin d'objet. C'est durant la position haute de ce signal qu'un second compteur non représenté, sera autorisé à compter les tops de synchronisation ligne, ce qui fournira la grandeur y.
La sortie 312 du comparateur 41 attaque un registre à décalage 43, bouclé sur lui-même, dont le décalage est synchronisé par le signal d'une horloge 42, qui est elle-même synchronisée sur le signal de synchronisation de ligne. Ce registre à décalage constitue une mémoire tournante qui permet de construire, puis de mémoriser l'emplacement du paramètre x sur une ligne. La sortie du circuit 43 est reliée à une entrée d'un bloc logique 44 à sept entrées, dont les six autres
« entrées reçoivent le signal de synchronisation ligne, le signal d'horloge et les quatre signaux des sorties du bloc logique 46, qui reçoit sur sa première entrée 362 le signal .,de- synchronisation de ligne et sur sa seconde entrée 363 le signal de synchronisation de trame.
Le circuit logique 46 est constitué d'un
O PI compteur et d'un démultiplexeur. Son objet est de fournir une base de temps secondaire afin d'effectuer le traitement qui a lieu après le top de retour trame. Le circuit 36 fournit ainsi quatre signaux logiques qui, avec les signaux de synchronisation ligne et trame, permettent le séquencement des opérations effectuées par le système.
Les sorties 340 et 341 du circuit logique 44 délivrent les signaux représentatifs respectivement de x et X aux convertisseurs digitaux analogiques du circuit 4. Ce circuit 34 comprendra notamment un compteur et des buffers.
On remarquera que dans la variante de la figure 5 les valeurs X et Y désignent respectivement les abscisses et ordonnées au début de l'objet en projection sur chaque axe, et non les milieux entre minimum et maximum comme dans le cas précédent, illustré aussi par la figure 2.
Il est bien évident que toute modification à la portée de l'homme de l'art fait également partie de l'esprit de l'invention. Ainsi en particulier, quand on a parlé d'un objet, il pourrait aussi s'agir de plusieurs sous-objets distincts, évoluant plus ou moins indépendamment les uns des autres. Il pourrait par ailleurs s'agir d'objets distingués les uns des autres par leur couleur. D'autre part, la même technique peut servir à réaliser un enregistrement sonore automatique sur un film vidéo.
On doit comprendre aussi que pour une production sonore différée par rapport à l'observation de l'image, on peut conserver aussi bien les signaux de commande sonore que les signaux d'image, ou les paramètres correspondants, dans des enregistrements réalisés soit en forme analogique, soit en forme numérique. Les sons synthétisés eux-mêmes comme l'image à analyser, peuvent ;' être conservés enregistrés dans tous les détails qui les définissent.

Claims

REVENDICATIONS
1. Procédé de création sonore, caractérisé en ce qu'il consiste essentiellement à observer une image englobant un objet en déplacement, à produire des signaux d'image traduisant au moins deux paramètres de l'image variant au cours du déplacement de l'objet, à produire à partir desdits signaux d'image, des signaux de commande sonore, et à assurer une synthèse de sons en utilisant lesdits signaux de commande sonore pour commander les variations d'au moins deux paramètres différents des sons produits.
2. Procédé de création sonore selon la revendication 1 , caractérisé en ce que les signaux d'image traduisant au moins deux paramètres de l'image variant au cours du déplacement de l'objet sont obtenus en trois étapes : une première étape de traitement du signal vidéo pour en retirer pour chaque ligne la valeur d'abscisse minimum et d'abscisse maximum définissant le contour de l'objet ; une deuxième étape qui a lieu pendant le retour du spot permettant, en comparant les abscisses minimum de chaque ligne et les abscisses maximum de chaque ligne, de déterminer la plus petite des abscisses minimum et la plus grande des abscisses maximum, et permettant en déterminant les ordonnées ' de la première ligne et de la dernière ligne où l'on a détecté une abscisse, de détecter respectivement les valeurs de l'ordonnée maximum et de l'ordonnée minimum j une troisième étape pendant laquelle on détermine les coordonnées du point milieu de l'objet et les dimensions en abscisse et en ordonnée de l'objet, et l'on adresse ces résultats à des convertisseurs digitaux-analogiques branchés aux entrées d'un synthétiseur de son produisant les sons.
3. Dispositif de création sonore caractérisé en ce qu'il comprend des premiers moyens pour observer une image englobant un objet en déplacement et produire des signaux d'image traduisant au moins deux paramètres-. cκ?ι
*-K V.'ÛO l'image variant au cours du déplacement de l'objet, et des seconds moyens pour produire à partir desdits signaux d'image, des signaux de commande sonore et pour assurer une synthèse de sons en utilisant lesdits signaux de commande sonore pour commander les variations d'au moins deux paramètres différents des sons produits.
4. Dispositif de création sonore selon la revendication 3» caractérisé en ce que lesdits premiers moyens comportent un générateur de signal vidéo (1) produisant lesdits signaux.
5. Dispositif selon l'une des revendications précédentes, caractérisé en ce que les signaux d'image comprennent des signaux représentatifs de la position de l'objet par rapport à un point de référence dans l'image, de la vitesse de déplacement de l'objet par rapport au point de référence, de l'ampleur de l'objet, de la vitesse de variation de l'ampleur de l'objet.
6. Dispositif selon la revendication 5, caractérisé en ce que les signaux d'image comprennent en plus des signaux représentatifs de l'accélération de l'objet et de l'accélération de la variation en ampleur de l'objet.
7. Dispositif selon la revendication 6, caractérisé en ce que les paramètres des sons sont choisis parmi la hauteur du son, son timbre, son intensité, le rythme de succession des sons, leur durée.
PCT/FR1983/000247 1982-12-10 1983-12-09 Dispositif de creation sonore WO1984002416A1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP84500038A JPS60500228A (ja) 1982-12-10 1983-12-09 音響発生装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR8220695A FR2537755A1 (fr) 1982-12-10 1982-12-10 Dispositif de creation sonore

Publications (1)

Publication Number Publication Date
WO1984002416A1 true WO1984002416A1 (fr) 1984-06-21

Family

ID=9279949

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/FR1983/000247 WO1984002416A1 (fr) 1982-12-10 1983-12-09 Dispositif de creation sonore

Country Status (6)

Country Link
US (1) US4658427A (fr)
EP (2) EP0142179A1 (fr)
JP (1) JPS60500228A (fr)
DE (1) DE3371952D1 (fr)
FR (1) FR2537755A1 (fr)
WO (1) WO1984002416A1 (fr)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0306602A2 (fr) * 1984-03-06 1989-03-15 3Dis Pty. Ltd. Système de vision auto-regulé
EP0486925A2 (fr) * 1990-11-20 1992-05-27 Yamaha Corporation Instrument de musique électronique
WO1993022762A1 (fr) * 1992-04-24 1993-11-11 The Walt Disney Company Appareil et procede pour suivre un mouvement afin de generer un signal de commande
DE19630330A1 (de) * 1996-07-26 1998-01-29 Sgs Thomson Microelectronics Audiosignalprozessor
USRE37422E1 (en) 1990-11-20 2001-10-30 Yamaha Corporation Electronic musical instrument
WO2009065424A1 (fr) * 2007-11-22 2009-05-28 Nokia Corporation Musique variant selon la lumière
EP2643791A1 (fr) * 2010-11-25 2013-10-02 Institut für Rundfunktechnik GmbH Procédé et ensemble pour présentation par signal audio améliorée de sons durant un enregistrement vidéo

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4913297A (en) * 1988-09-09 1990-04-03 Tyee Trading Corporation Display unit
JPS6451994U (fr) * 1987-09-25 1989-03-30
JPH083715B2 (ja) * 1987-09-11 1996-01-17 ヤマハ株式会社 音響処理装置
US5159140A (en) * 1987-09-11 1992-10-27 Yamaha Corporation Acoustic control apparatus for controlling musical tones based upon visual images
EP0390048B1 (fr) * 1989-03-28 1996-10-23 Matsushita Electric Industrial Co., Ltd. Appareil et méthode pour la mise en forme de données
EP0410045A1 (fr) * 1989-07-27 1991-01-30 Koninklijke Philips Electronics N.V. Système de transformation d'images en signaux sonores, en particulier pour les aveugles
US5469511A (en) * 1990-10-05 1995-11-21 Texas Instruments Incorporated Method and apparatus for presentation of on-line directional sound
US5286908A (en) * 1991-04-30 1994-02-15 Stanley Jungleib Multi-media system including bi-directional music-to-graphic display interface
US5426510A (en) * 1992-06-05 1995-06-20 Dolman Associates, Inc. Audio-video system
US7661676B2 (en) 2001-09-28 2010-02-16 Shuffle Master, Incorporated Card shuffler with reading capability integrated into multiplayer automated gaming table
JP2728080B2 (ja) * 1996-02-07 1998-03-18 ヤマハ株式会社 楽音発生装置
US6084169A (en) * 1996-09-13 2000-07-04 Hitachi, Ltd. Automatically composing background music for an image by extracting a feature thereof
JP3384314B2 (ja) * 1997-12-02 2003-03-10 ヤマハ株式会社 楽音応答画像生成システム、方法、装置、及び、そのための記録媒体
JP4305971B2 (ja) 1998-06-30 2009-07-29 ソニー株式会社 情報処理装置および方法、並びに記録媒体
US7255351B2 (en) 2002-10-15 2007-08-14 Shuffle Master, Inc. Interactive simulated blackjack game with side bet apparatus and in method
US7309065B2 (en) 2002-12-04 2007-12-18 Shuffle Master, Inc. Interactive simulated baccarat side bet apparatus and method
WO2005122134A1 (fr) * 2004-06-09 2005-12-22 Toyota Motor Kyushu Inc. Dispositif de production de musique, procédé de production de musique, programme de production de musique et support d'enregistrement
US7525034B2 (en) * 2004-12-17 2009-04-28 Nease Joseph L Method and apparatus for image interpretation into sound
GB2441434B (en) * 2006-08-29 2010-06-23 David Charles Dewhurst Audiotactile vision substitution system
US8475252B2 (en) 2007-05-30 2013-07-02 Shfl Entertainment, Inc. Multi-player games with individual player decks
FI20075530A0 (fi) * 2007-07-09 2007-07-09 Virtual Air Guitar Company Oy Eleohjattu musiikkisynteesijärjestelmä
US9430954B1 (en) 2013-09-27 2016-08-30 David Charles Dewhurst System for presenting visual items
US10565898B2 (en) 2016-06-19 2020-02-18 David Charles Dewhurst System for presenting items

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE840185C (de) * 1948-10-02 1952-05-29 Siemens Ag Elektrisches Musikgeraet
FR2206030A5 (fr) * 1972-11-07 1974-05-31 Agam Yaacov

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3907434A (en) * 1974-08-30 1975-09-23 Zipcor Inc Binaural sight system
DE2511935A1 (de) * 1975-03-19 1976-09-30 Wolfgang Dipl Phys Dr Witte Orientierungsverfahren fuer blinde
US4000565A (en) * 1975-05-05 1977-01-04 International Business Machines Corporation Digital audio output device
CA1054407A (fr) * 1975-10-22 1979-05-15 Hiroshi Ichigaya Systeme generateur de signaux utilisant un tube a rayons cathodiques
US4215343A (en) * 1979-02-16 1980-07-29 Hitachi, Ltd. Digital pattern display system
US4322744A (en) * 1979-12-26 1982-03-30 Stanton Austin N Virtual sound system for the visually handicapped
US4378569A (en) * 1980-07-18 1983-03-29 Thales Resources, Inc. Sound pattern generator
US4483230A (en) * 1982-07-20 1984-11-20 Citizen Watch Company Limited Illumination level/musical tone converter

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE840185C (de) * 1948-10-02 1952-05-29 Siemens Ag Elektrisches Musikgeraet
FR2206030A5 (fr) * 1972-11-07 1974-05-31 Agam Yaacov

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Micro-Systemes, January 1982, Paris (FR) M. Rozenberg: "Musique informatique", pages 107-118 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0306602A2 (fr) * 1984-03-06 1989-03-15 3Dis Pty. Ltd. Système de vision auto-regulé
EP0208681A4 (fr) * 1984-03-06 1989-04-12 Simon John Veitch Systeme visuel.
EP0306602A3 (en) * 1984-03-06 1989-08-23 Simon John Veitch Vision system
EP0722163A2 (fr) * 1990-11-20 1996-07-17 Yamaha Corporation Dispositif musical électronique
EP0486925A3 (en) * 1990-11-20 1993-02-24 Yamaha Corporation Electronic musical instrument
EP0486925A2 (fr) * 1990-11-20 1992-05-27 Yamaha Corporation Instrument de musique électronique
EP0722163A3 (fr) * 1990-11-20 1997-10-22 Yamaha Corp Dispositif musical électronique
USRE37422E1 (en) 1990-11-20 2001-10-30 Yamaha Corporation Electronic musical instrument
WO1993022762A1 (fr) * 1992-04-24 1993-11-11 The Walt Disney Company Appareil et procede pour suivre un mouvement afin de generer un signal de commande
DE19630330A1 (de) * 1996-07-26 1998-01-29 Sgs Thomson Microelectronics Audiosignalprozessor
DE19630330C2 (de) * 1996-07-26 1998-11-19 Sgs Thomson Microelectronics Audiosignalprozessor
US6101257A (en) * 1996-07-26 2000-08-08 Sgs-Thomson Microelectronics Gmbh Audio signal processor
WO2009065424A1 (fr) * 2007-11-22 2009-05-28 Nokia Corporation Musique variant selon la lumière
EP2643791A1 (fr) * 2010-11-25 2013-10-02 Institut für Rundfunktechnik GmbH Procédé et ensemble pour présentation par signal audio améliorée de sons durant un enregistrement vidéo
EP2643791B1 (fr) * 2010-11-25 2022-06-22 Institut für Rundfunktechnik GmbH Procédé et ensemble pour présentation par signal audio améliorée de sons durant un enregistrement vidéo

Also Published As

Publication number Publication date
EP0112761A1 (fr) 1984-07-04
DE3371952D1 (en) 1987-07-09
FR2537755B1 (fr) 1985-04-05
EP0112761B1 (fr) 1987-06-03
US4658427A (en) 1987-04-14
EP0142179A1 (fr) 1985-05-22
JPS60500228A (ja) 1985-02-21
FR2537755A1 (fr) 1984-06-15

Similar Documents

Publication Publication Date Title
EP0112761B1 (fr) Dispositif de création sonore
WO2003075551A3 (fr) Enregistrement video a gamme dynamique et systeme et procede de lecture
EP0089871B1 (fr) Dispositif de génération de signaux de test d'équipements électroniques
FR2523787A1 (fr) Procede et dispositif de traitement video pour rotation d'images
FR2523332A1 (fr) Systeme et procede de creation d'images a palette synthetisee electroniquement
FR2683415A1 (fr) Systeme d'analyse video du montage d'un programme televise diffuse ou enregistre et son utilisation pour les techniques de post production, notamment multilingues.
EP2396788A2 (fr) Dispositif et procede de controle du defilement d'un fichier de signaux a reproduire
FR2923928A1 (fr) Systeme d'interpretation simultanee automatique.
US7446252B2 (en) Music information calculation apparatus and music reproduction apparatus
CA3123970A1 (fr) Mesure temporelle a haute precision d'evenements vibro-acoustiques en synchronisation avec un signal sonore sur dispositif a ecran tactile
EP0092465A1 (fr) Dispositif de commande de correction et système d'établissement automatique de données de correction d'une caméra de télévision
CN101499310A (zh) 多媒体档案制作系统及方法
FR2654283A1 (fr) Dispositif de mise au point automatique pour un systeme optique.
WO2001075861A1 (fr) Procede et equipement pour la production automatique en temps reel de sequences audiovisuelles virtuelles a partir d'un message textuel et d'evenements exterieurs et pour la diffusion de telles sequences
EP0978116A1 (fr) Procede et dispositif pour l'enregistrement en boucles cycliques de plusieurs sequences phoniques
EP0011576B1 (fr) Synthétiseur polyphonique de signaux périodiques utilisant les techniques numériques
TW200816603A (en) Method for eliminating a sound of motor
EP0689366B1 (fr) Circuit de détection de tonalité téléphonique
EP0446334B1 (fr) Dispositif de programmation d'enregistrement par reconnaissance de signaux de reference
EP0449190B1 (fr) Programmateur produisant des signaux de sortie binaires en réponse à un signal de rythme
FR2523790A1 (fr) Dispositif et appareil de saisie selective de signaux notamment de television en vue de leur caracterisation par un calculateur numerique
BE1001792A6 (fr) Systemes de correction et de production d'image.
JP2626473B2 (ja) 電子楽器の入力制御装置
FR2548428A1 (fr) Appareil enregistreur de messages sonores dans une memoire electronique et appareil de reproduction de messages ainsi enregistres
KR101133272B1 (ko) 입체 캐릭터 영상을 제공하는 가라오케 시스템 및 그 구동방법

Legal Events

Date Code Title Description
AK Designated states

Designated state(s): JP US