WO1998013819A1 - Procede pour adjoindre a un signal sonore code de l'information complementaire, notamment textuelle, destinee a etre visualisee - Google Patents

Procede pour adjoindre a un signal sonore code de l'information complementaire, notamment textuelle, destinee a etre visualisee Download PDF

Info

Publication number
WO1998013819A1
WO1998013819A1 PCT/FR1997/001699 FR9701699W WO9813819A1 WO 1998013819 A1 WO1998013819 A1 WO 1998013819A1 FR 9701699 W FR9701699 W FR 9701699W WO 9813819 A1 WO9813819 A1 WO 9813819A1
Authority
WO
WIPO (PCT)
Prior art keywords
samples
display
sequence
musical
information
Prior art date
Application number
PCT/FR1997/001699
Other languages
English (en)
Inventor
Bruno Job
Cédric Christian Gilbert BOUILLOT
Original Assignee
Midi-Musique S.A.R.L.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Midi-Musique S.A.R.L. filed Critical Midi-Musique S.A.R.L.
Priority to AU44642/97A priority Critical patent/AU4464297A/en
Publication of WO1998013819A1 publication Critical patent/WO1998013819A1/fr

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0008—Associated control or indicating means
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
    • G10H1/0041—Recording/reproducing or transmission of music for electrophonic musical instruments in coded form
    • G10H1/0058—Transmission between separate instruments or between individual components of a musical system
    • G10H1/0066—Transmission between separate instruments or between individual components of a musical system using a MIDI interface
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/011—Files or data streams containing coded musical information, e.g. for transmission
    • G10H2240/031—File merging MIDI, i.e. merging or mixing a MIDI-like file or stream with a non-MIDI file or stream, e.g. audio or video
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/091—Info, i.e. juxtaposition of unrelated auxiliary information or commercial messages with or between music files

Definitions

  • the present invention relates to a method making it possible to add to a sound signal representing a musical sequence additional textual or musical information intended to be displayed during the execution of the musical sequence.
  • Information of this nature can be, but is not necessarily, text on which the musical sequence is written.
  • the device or microphone is equipped with one or more read only memories in which the lyrics or other musical information necessary for execution are stored beforehand. During this execution, the accompanying MIDI musical sequence is played while the lyrics and other additional information are extracted from the read-only memory (s) at the rhythm of the MIDI synchronization signal and displayed on the microphone screen.
  • the object of the invention is to propose a method for forming recordings comprising musical sequences accompanied by additional information relating to these musical sequences in order to view them during the execution of the musical sequences, recordings which require at the reproduction level an ability very low memory compared to the storage capacity which was required in the prior art methods.
  • the subject of the invention is therefore a method of coding information complementary to the musical information of a sound sequence coded in the form of a series of digital samples, in particular complementary text information on which said sound sequence is written, in view of allowing the display of said additional information in synchronism with the unfolding of said sound sequence, characterized in that it consists in decomposing said additional information into digitally coded elements and in mixing said digitally coded elements with binary samples as and when of their appearance in said musical sequence, so as to generate a mixed sequence of samples comprising both said musical information and said complementary information.
  • a sound sequence formed using the method of the invention itself consists of a mixture of coded samples representing, in the order in which they must be reproduced, both the information purely related to the partition than textual or other information. This has the consequence that all the information is intrinsically synchronized with each other, the restitution material receiving them as the sound sequence proceeds.
  • the device responsible for viewing the additional information does not need a large capacity memory since the samples can be processed immediately after appearing in the sound sequence. As a result, a simple register of the length of a sample is sufficient to allow this processing.
  • the subject of the invention is also a recording medium on which a sound sequence obtained by the method as defined above is recorded.
  • the invention further relates to a device for displaying additional information contained in a mixed sequence obtained by the method as defined below, characterized in that it comprises extraction means for extracting from said mixed sequence the coded samples comprising said digitally coded elements; storage means connected to said extraction means for temporarily storing the extracted samples; - processing means for processing the stored samples in order to separate the digitally coded elements from the samples; and display means connected to said processing means for viewing the coded elements thus separated.
  • FIG. 1 is a diagram representing a sample or message according to the MIDI standard
  • FIG. 2 highlights an example of a time difference between musical information and additional textual information that can be implemented in the method and the device according to the invention
  • FIG. 3 is a simplified diagram of a sound reproduction installation equipped with a device making it possible to display the additional information coded according to the invention
  • - Figures 4 and 5 are two flowcharts illustrating the operation of the display device according to the invention, flowcharts which describe two interrupt loops executed in this device.
  • FIG. 1 shows for the record a message according to the MIDI standard which, in the context of the present invention, can be assimilated to what is called a "sample”.
  • a MIDI message or sample E is generally composed of three bytes, namely a status byte S and two bytes of data D1 and D2. Some messages may include only the S status byte, others may include an S status byte and a single data byte.
  • Each byte is surrounded by a start bit BD (Start) at level “0” and an end bit BF (STOP) at level “1", the start bit BD being followed by the least significant bit of the byte following it.
  • a MIDI sequence is made up of a plurality of these messages or samples following each other over time. It will be noted that the status byte S always includes a most significant bit (bit 7 in FIG. 1) at level “1” used to identify it. Similarly for the identification of a data byte (Dl or D2), the most significant bit has the level "0".
  • the other bits of each byte contain significant information relating to the MIDI sequence to be transmitted. These bits are therefore selectively at level “1” or at level "0". It should be noted that in FIG.
  • the status byte S is divided into two parts.
  • the four least significant bits designate a "channel" which in a MIDI musical installation corresponds to the designation of a given device and / or instrument among a certain number of participating devices and / or instruments when executing the MIDI sequence. There can therefore be a maximum of sixteen separate devices and / or instruments in such an installation.
  • a sample E is only taken into account by a device of the installation if the status byte S has the corresponding channel number in it.
  • the MIDI standard provides that three of the four most significant bits of the status byte S can encode eight types of commands, such as "Note On", “Note Off” etc. and also a type of command announcing that the first byte of data of the message or sample considered defines a particular command called "controller” in the MIDI language.
  • This type of command is identified by the binary number "1011” or "B” in hexadecimal numbers.
  • the data byte D1 can thus encode 128 of these "controllers". Most of these have a specific assignment rigidly defined by the MIDI standard; others may be freely assigned by users to particular orders.
  • At least one of the controllers among the free controllers codes the fact that the second byte of data D2 of a MIDI sample is a binary value translating a sign belonging to information complementary to the MIDI musical sequence properly speaking, this information can be either textual or musical, for example information which assists the performer or performers during the reproduction of the musical sequence, or even a control signal which can define particular properties of display of the additional information in question.
  • the data byte D1 defines a controller used for the textual additional information, it can be given the number 54 (38 in hexadecimal); the MIDI sample according to the invention then has the following form (in hexadecimal):
  • An essential characteristic of the method according to the invention thus consists in decomposing the information complementary to a musical MIDI sequence, into distinct pieces of information which are "translated" according to the MIDI standard and nested in the musical MIDI sequence. proper.
  • the additional information is textual, this is "spelled" and each alphanumeric sign of a text is translated into a binary code which is incorporated in the data byte D2 of certain samples of the MIDI sequence, a sample thus constituted being in turn nested in the sequence of messages or MIDI samples representing the musical information proper.
  • the additional information may also be of a musical nature, the samples relating thereto always having a status byte of value xB, but presenting a controller with a value different from 38 chosen from the free controllers defined by the MIDI standard.
  • This information can be, for example a metronome top displayed at the appropriate times during the course of the musical performance.
  • Other samples including other controllers may contain chord information, information on how to present the melody written on the lyrics displayed etc.
  • the visualization of the additional information can be controlled by orders contained in the data bytes D1 and D2 of certain samples of the MIDI sequence. These so-called "order" samples can cause the following functions to be carried out, the list not being exhaustive: Store a character of text to be displayed, Display the stored text before the moment when it must be sung, (offset ⁇ T)
  • Assign a character to a drawing of a matrix stored in read-only memory Indicate, by an address of a conversion table, in which language a tone must be displayed,
  • FIG. 3 very schematically represents a MIDI-type musical execution installation incorporating a display device and making it possible to interpret a musical sequence coded according to the method of the invention.
  • the display device is designated by the general reference 1.
  • the installation also includes an LC source reader, formed for example by a personal computer capable of reading a recording medium containing a MIDI sequence file recorded according to the method of the invention, for example on a flexible disk which is commonly found on the market.
  • the signals of the MIDI sequence read by the LC reader pass on a common bus 2 of conventional design in MIDI technique, bus which is also connected to the display device 1 and to a MIDI microphone M.
  • the display device 1 is intended to assist one or more performers, for example a singer or a choir whose synthesizer I provides accompaniment.
  • this or these performers can, by observing the display device 1, read the text on which the musical work has been written, and this during the course of the execution of the accompaniment performed by the synthesizer I. It (s ) can also receive other additional information relating for example to harmony, counterpoint or nuance instructions, a visual rhythm, etc.
  • the display device 1 comprises a MIDI input 3 (called “IN” in the MIDI terminology) and connected to the common bus 2.
  • This input is connected to a MIDI interface 4 of conventional type comprising in particular an opto-coupler and communicating with a microprocessor 5.
  • This can be of the 80C31 type for example and it is connected to a memory symbolized here by a single block 6.
  • This memory has ROM and RAM sections.
  • One of these sections 7 contains the work program of the microprocessor 5.
  • Another section is a register 8 essential for the present invention, since it is intended to store successively the samples of the MIDI sequence identified in their status byte by the hexadecimal number "B". Each sample thus retained by the microprocessor 5 is processed immediately and then replaced by the next sample marked with the number "B".
  • the display device 1 does not have to be equipped with a large memory.
  • the memory 6 also includes a buffer section 9 called row display, and several sections 10, 11 and 12 forming tables whose purpose will appear later.
  • the microprocessor 5 is also connected to a display screen 13 via a directional bus 14.
  • the display screen is capable of displaying two superimposed lines of text 13a and 13b 40 characters each.
  • a liquid crystal screen or any other known type of screen may be suitable.
  • the display device also includes a switching converter 15 making it possible to supply its various components at a voltage of 5V, for example from a 9V battery connected to a terminal 16.
  • a switching converter 15 making it possible to supply its various components at a voltage of 5V, for example from a 9V battery connected to a terminal 16.
  • the display device 1 can take many forms. For example, it can be housed in a housing adaptable to a microphone stand, be installed on a lectern or on a musical instrument etc. However, it can also be carried out in other forms such as for example:
  • a rear-projection device which can be included in a personal helmet, in transparency on the user's directing eye, or in proximity stereoscopic projection (isolated "virtual" representation); - a video projector, a cathode-ray screen or a television set;
  • the display device can be connected to bus 2 by a wired, radio or similar link.
  • the microprocessor 5 selects only the samples whose status byte includes the channel code which in the installation is assigned to the display device 1 and the code B identifying that it is a sample relating to the additional information. It should be noted that the channel assignment can also be done by default, for example on channel 16.
  • the samples selected by the microprocessor 5 are temporarily stored in the register 8. It is recalled that, according to an important characteristic of the invention, the latter retains a given sample only for the time necessary for its analysis by the microprocessor 5. It is then immediately replaced by the next sample and so on. It can therefore be seen that it is not necessary to store all of the additional information beforehand, or to reproduce it using any synchronization mechanism, the synchronization according to the invention being carried out automatically by the only temporal relationship that the "musical" samples and the "additional information" samples have in the rest of the mixed MIDI sequence.
  • the analysis made by the microprocessor 5 first consists in memorizing the data byte (s) D1 and D2 in order to allow their subsequent processing or their appropriate application to one of the units which are connected to the microprocessor 5.
  • byte D2 which then contains the corresponding ASCII code, is routed to buffer memory 9.
  • the display screen comprises two lines 13a and 13b called respectively high line LH and low line LB.
  • the two lines of the display screen 13 correspond to two subsections 9a and 9b of the buffer memory section 9.
  • the MIDI sequence sent by the LC source player first sends the first sentence of the song, the samples being coded as already indicated above.
  • the display device receives the following signals, Txx designating the successive instants of reception:
  • the MIDI sequence then sent by the LC source player now contains the second sentence of the song:
  • the performer is assisted in the interpretation by seeing displayed on the low line 13b of the screen 13 the syllable that he has to sing on a given note.
  • the received sequence now includes a command sample of the form ⁇ [x] [B]. [3F]. [03] ⁇ , the code 3F being the controller causing the display of the syllable and the number 03 coding the number of signs to be displayed for this syllable (a space between the words included). This comes back to the following representation on the screen:
  • x represents the synthesizer channel I, 9, the "NOTE ON” command, 48 the note number corresponding to the pitch of the envisaged “DO” and 40 the velocity code, according to the criteria well known from the MIDI standard.
  • This sample is followed by the sample of the form ⁇ [x] [8]. [48]. [7F] ⁇ in which x is again the channel code of synthesizer I, 8 the code for "NOTE OFF", 48 the recall of the number of the note to which we refer and 7F the maximum velocity code, like this is prescribed by the MIDI standard. This results in the restitution of the "DO" of the first note of the melody while at the same time the performer sees highlighted on the second line 13b of the display, the syllable "AU” which he has to sing. on that note.
  • MIDI is scheduled in the usual way using the required number of time units based on an installation time base, depending on the rhythm chosen for the song.
  • the syllabic display of the lyrics of the song can be done in anticipation of a certain delay ⁇ T preceding the execution of the note or notes on which these syllables are written.
  • This delay is generated by a simple shift, upstream in time, of the text samples compared to the musical samples.
  • This offset can therefore easily be determined at the time of writing the MIDI file representing the sequence in question here.
  • Such a delay notably facilitates the reading for the performer who will then not only have at his disposal the total sentence to be sung, but also, in advance, the syllable corresponding to the note which will be heard, after expiration of the delay ⁇ T and this successively for any syllable associated with this note.
  • the mixed MIDI sequence according to the invention can include control samples causing the display of additional musical information, such as for example the rhythm, graphic or literal data on the chords, data on shades, crescendos and decrescendos etc.
  • additional musical information such as for example the rhythm, graphic or literal data on the chords, data on shades, crescendos and decrescendos etc.
  • Such musical information may be called collectively from the tables 10, 11 and 12 of the memory 6, following the reception of these control samples, the tables possibly containing subroutines to ensure the display of this information.
  • the table 10 can store information on the agreements
  • the table 11 can be a language conversion table for the display of comments in given languages
  • the table 12 can contain commands or sets of commands to ensure the display. information in certain given modes.
  • the display device 1 does not store in memory (register 8) more than a single sample composed of a maximum of three bytes, another important advantage of the invention resides in the fact that the control samples carrying control signals from the various functions can be nested within each other. Since some of its functions cannot be executed at the same time, a command priority system can be defined in the program managing the microprocessor 5 so that the control signals can be processed as required. This feature due to the invention makes it possible to further increase the flexibility available in writing a mixed MIDI sequence.
  • the display device 1 When the display device 1 is initialized, it is placed by default in a configuration given in particular with regard to the language of the display (unit 11) and the display mode (unit 12). This configuration can be modified, either by specific samples of the MIDI sequence, or possibly by manual control using a control button 17 provided on the display device 1 and connected to the microprocessor 5.
  • the program executed by the microprocessor 5 comprises a main loop which only has to execute two tasks, namely on the one hand the refresh of the display on the screen 13 according to the commands received from the samples and the mode of selected operation, and on the other hand the execution of the mode change orders (like karaoke or songpad mode, for example).
  • FIGS. 4 and 5 represent two interrupt loops on which the main loop deviates on the one hand to ensure the display and on the other hand to process the samples in which the byte D1 codes a controller governing the particular control functions as described above.
  • a first interrupt loop of the main program loop is shown in the figure.
  • This interruption loop mainly concerns the display provided by the display device 1.
  • the microprocessor 5 waits in step B2 for the MIDI sample ⁇ [x] [ B]. [7A].
  • step B1 which is capable of controlling the resetting of various components of the display device 1, in particular the erasure of the display buffer 9 and therefore of the screen 13, the removal of the metronome sign, erasing the tone sign etc.
  • the microprocessor 5 then waits in step B3, the sample of the MIDI sequence identifying a possible priority message.
  • the latter can be composed of a text displayed before the performance of the musical work begins.
  • the message can indicate the author of the work, the title, the indication concerning the royalties etc. If such a sample is received, the microprocessor waits the following samples reflecting, for example in ASCII alphanumeric signs f ues of the message are stored in the buffer memory 9 at step B4.
  • the subroutine loops back to operation B3, the test of which this time receives a negative response. The loop then passes to the next test
  • step B5 to recognize the sample identifying the display command on line 13a of the display. If the corresponding sample arrives, the program goes back to step B4 and passes tests B3 and B5 again. These receiving a negative response, a sample is expected (test B6) identifying a display command at the bottom line 13b of the display screen 13. If so, the subroutine returns to step B4 at the end of which tests B3, B5 and B6 are again executed. If they all receive a negative response, the subroutine proceeds to test B7, to identify a sample corresponding to the command for highlighting the syllable on screen 13. If such a sample is identified, the subroutine passes to a calculation operation (step B8) of the abscissa of the screen 13 at which the highlighting must begin. The information thus produced is sent to buffer 9 for processing by operation B4. At the end of this operation, the subroutine again passes through operations B3 and B5 to B7 and if all these steps receive a negative response, a test is carried out
  • step B9 to identify a control sample causing a reset of the organs of the display device 1.
  • the subroutine loops back to the operation
  • FIG. 5 represents another interrupt loop or subroutine which allows the microprocessor 5 to process the data contained in the data bytes D2 of the samples provided that these samples naturally have a status byte identified by the hexadecimal number B.
  • This subroutine starts in B11, when the microprocessor detects a first sample containing the code of a text sign to be displayed.
  • a first test is then carried out (step B12) to check whether a series of signs is not already being processed. If so, the data of bytes D2 of the following samples of the incoming sequence are stored in a working buffer belonging to the RAM 7 of the microprocessor 5 (step B13). Otherwise, a new test is performed in B14 to detect a display order. If such an order is received, the subroutine reconnects to the main loop by step B15. Otherwise the subroutine performs a test (step B16) to identify a sample having a control controller. If so, the controller is stored by the microprocessor 5 for further processing (step B17).
  • routine proceeds to a test in B18 to identify a reset sample. If it is detected, the main loop is informed in B19. Otherwise, the subroutine returns to the main loop in B20. Furthermore, steps B13, B15, B17 and B19 all result in a loopback on the main loop of the program of the microprocessor 5.
  • the invention is not limited solely to a method of coding musical sequences mixed with complementary information according to the standard. MIDI as we just described.
  • the method according to the invention can also be applied in the case of musical sequences coded according to digital audio methods in which digital samples are taken successively from an analog sound sequence, as is now very widely used for audio compact discs.
  • the method of the invention consists in replacing one of the bits of each sample, for example the least significant bit by a bit of a binary signal representing a digital fraction of the sign coding value. to display.
  • a display device making it possible to capture the information thus coded and to display it on a screen will be designed to apply the least significant bit of the binary samples to a decoder capable of controlling a display using successive bits detected in the sound sequence sampling signal.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

Les informations musicales d'une séquence sonore sont codées sous la forme d'une suite d'échantillons numériques. Selon le procédé de l'invention, les informations complémentaires, notamment textuelles sont codées en vue de permettre leur visualisation en synchronisme avec le déroulement de la séquence sonore. A cet effet, le procédé consiste à décomposer les informations complémentaires en des éléments codés numériquement et à mélanger les éléments codés numériquement aux échantillons binaires au fur et à mesure de leur apparition dans la séquence musicale, de manière à engendrer une séquence mixte d'échantillons comprenant à la fois les informations musicales et les informations complémentaires. L'invention s'applique notamment aux séquences sonores codées selon le standard MIDI. Un dispositif de visualisation propre à afficher les informations complémentaires est également décrit. Il comporte notamment un microprocesseur (5) et un écran d'affichage (13) et est raccordé dans une installation musicale MIDI par l'intermédiaire d'un bus commun (2) sur lequel transitent les échantillons.

Description

Procédé pour adjoindre à un signal sonore codé de l'information complémentaire, notamment textuelle, destinée à être visualisée. La présente invention est relative à un procédé permettant d'adjoindre à un signal sonore représentant une séquence musicale de l'information textuelle ou musicale complémentaire destinée à être affichée au cours de l'exécution de la séquence musicale. De l'information de cette nature peut être, mais n'est pas nécessairement, un texte sur lequel est écrite la séquence musicale.
D'après le document EP 0 675 666, il est connu de faire défiler sur un écran d'affichage d'un appareil se présentant sous la forme d'un microphone, les paroles et la musique d'une chanson qu'un exécutant est censé chanter en se faisant accompagner par une séquence musicale qui est reproduite au moyen d'une installation sonore fonctionnant selon la norme bien connue appelée MIDI (acronyme anglo- saxonne pour "Musical Instrument Digital Interface") .
L'appareil ou microphone est équipé d'une ou de plusieurs mémoires mortes dans lesquelles sont préalablement stockées les paroles ou les autres informations musicales nécessaires à l'exécution. Pendant cette exécution, la séquence musicale MIDI d'accompagnement est reproduite pendant que les paroles et autres informations complémentaires sont extraites de la ou des mémoires mortes au rythme du signal de synchronisation MIDI et affichées sur l'écran du microphone.
Ce système de reproduction musicale et textuelle présente peu de souplesse du fait que l'ensemble de l'information textuelle doit être préenregistré dans des mémoires mortes de grande capacité devant être incorporées ou éventuellement spécialement adjointes par enfichage au microphone.
D'après un autre document à savoir le EP 0 503 978, il est connu un procédé de création d'enregistrements mixtes, par exemple sur disque compact, de séquences sonores et de séquences textuelles, par lequel la séquence textuelle est codée sous la forme d'un signal vidéo qui est reproduite et affichée en même temps que la séquence sonore se fait entendre. Ce procédé présente la même rigidité d'emploi que l'appareil connu du document analysé précédemment.
L'invention a pour but de proposer un procédé pour former des enregistrements comprenant des séquences musicales accompagnées d'informations complémentaires relatives à ces séquences musicales afin de les visualiser pendant l'exécution des séquences musicales, enregistrements qui nécessitent au niveau de la reproduction une capacité de mémoire très réduite par rapport à la capacité de mémorisation qui était requise dans les procédés de la technique antérieure. L'invention a donc pour objet un procédé de codage d'informations complémentaires aux informations musicales d'une séquence sonore codée sous la forme d'une suite d'échantillons numériques, notamment des informations complémentaires textuelles sur lesquelles ladite séquence sonore est écrite, en vue de permettre la visualisation desdites informations complémentaires en synchronisme avec le déroulement de ladite séquence sonore, caractérisé en ce qu'il consiste à décomposer lesdites informations complémentaires en des éléments codés numériquement et à mélanger lesdits éléments codés numériquement aux échantillons binaires au fur et à mesure de leur apparition dans ladite séquence musicale, de manière à engendrer une séquence mixtes d'échantillons comprenant à la fois lesdites informations musicales et lesdites informations complémentaires.
Grâce à ces caractéristiques, une séquence sonore formée à 1 ' aide du procédé de 1 ' invention est constituée elle-même d'un mélange d'échantillons codés représentant, selon l'ordre dans lequel ils doivent être restitués, aussi bien les informations purement musicales relatives à la partition que les informations textuelles ou autres. Ceci a pour conséquence que toutes les informations sont intrinsèquement synchronisées les unes sur les autres, le matériel de restitution les recevant au fur et à mesure du déroulement de la séquence sonore. Ainsi, l'appareil chargé de visualiser les informations complémentaires n'a pas besoin d'une mémoire de grande capacité car les échantillons peuvent être traités immédiatement après être apparus dans la séquence sonore. Il en résulte qu'un simple registre de la longueur d'un échantillon suffit pour permettre ce traitement.
En outre, comme l'information complémentaire est insérée dans le message musical ambiant qui conserve sa forme habituelle de fichier musical, la restitution de ce message n'est aucunement perturbée par la présence des informations complémentaires.
L'invention a également pour objet un support d'enregistrement sur lequel est enregistré une séquence sonore obtenue par le procédé tel que défini ci-dessus. L'invention a en outre pour objet un dispositif de visualisation d'informations complémentaires contenues dans une séquence mixte obtenue par le procédé tel que défini ci- dessous caractérisé en ce qu'il comprend des moyens d'extraction pour extraire de ladite séquence mixte les échantillons codés comportant lesdits éléments codés numériquement; des moyens de stockage connectés auxdits moyens d'extraction pour mémoriser temporairement les échantillons extraits; - des moyens de traitement pour traiter les échantillons mémorisés afin de séparer les éléments codés numériquement des échantillons; et des moyens d'affichage connectés auxdits moyens de traitement pour visualiser les éléments codés ainsi séparés. D'autres caractéristiques et avantages de l'invention apparaîtront au cours de la description qui va suivre, donnée uniquement à titre d'exemple et faite en se référant aux dessins annexés sur lesquels: - la figure 1 est un diagramme représentant un échantillon ou message selon le standard MIDI; la figure 2 met en évidence un exemple de décalage temporel entre de l'information musicale et de l'information textuelle complémentaire pouvant être mis en oeuvre dans le procédé et le dispositif selon l'invention; la figure 3 est un schéma simplifié d'une installation de restitution sonore équipée d'un dispositif permettant de visualiser 1 ' information complémentaire codée selon l'invention; - les figures 4 et 5 sont deux organigrammes illustrant le fonctionnement du dispositif de visualisation selon l'invention, organigrammes qui décrivent deux boucles d'interruption exécutées dans ce dispositif.
La figure 1 représente pour mémoire un message selon le standard MIDI qui, dans le cadre de la présente invention, peut être assimilé à ce qui est appelé un "échantillon".
Pour trouver une description détaillée du standard MIDI et des signaux qu'elle implique, on pourra se reporter à l'ouvrage de Jean-Jacques Quinet publié en 1990 dans "Les Dossiers de l'AMCE", édité à Bruxelles par l'auteur.
Comme représenté sur la figure 1, un message ou échantillon MIDI E est composé généralement de trois octets, à savoir un octet de statut S et deux octets de données Dl et D2. Certains messages peuvent ne comprendre que l'octet de statut S, d'autres un octet de statut S et un seul octet de données.
Chaque octet est encadré par un bit de début BD (Start) au niveau "0" et un bit de fin BF (STOP) au niveau "1", le bit de début BD étant suivi du bit de poids le plus faible de l'octet qui le suit. Une séquence MIDI est composée d'une pluralité de ces messages ou échantillons se suivant dans le temps. On notera que l'octet de statut S comporte toujours un bit de plus grand poids (bit 7 sur la figure 1) au niveau "1" servant à l'identifier. De même pour l'identification d'un octet de données (Dl ou D2), le bit de plus grand poids présente le niveau "0". Les autres bits de chaque octet contiennent de l'information significative relative à la séquence MIDI à transmettre. Ces bits sont donc sélectivement au niveau "1" ou au niveau "0". II est à noter que sur la figure 1, on admet que l'échelle des temps est croissante de gauche à droite, le bit le plus à gauche étant donc celui qui se présente en premier dans la séquence MIDI. La flèche F indique le sens de présentation dans la séquence. L'octet de statut S est divisé en deux parties. Les quatre bits de poids le plus faible désignent un "canal" qui dans une installation musicale MIDI, correspond à la désignation d'un appareil et/ou d'un instrument donné parmi un certain nombre d'appareils et/ou d'instruments participant à l'exécution de la séquence MIDI. Il peut donc y avoir au maximum seize appareils et/ou instruments distincts dans une telle installation. Un échantillon E n'est pris en compte par un appareil de l'installation que si l'octet de statut S présente le numéro de canal qui lui correspond dans celle-ci.
Le standard MIDI prévoit que trois bits des quatre bits de poids fort de 1 ' octet de statut S peuvent coder huit types de commandes, tels que par exemple "Note On", "Note Off" etc. et également un type de commande annonçant que le premier octet de données du message ou de l'échantillon considéré définit une commande particulière appelée "contrôleur" dans le langage MIDI. Ce type de commande est identifié par le nombre binaire "1011" ou "B" en numération hexadécimale. Dans un échantillon dont l'octet de statut présente ce type de commande "B", l'octet de données Dl peut ainsi coder 128 de ces "contrôleurs". La plupart de ceux-ci ont une affectation particulière définie de façon rigide par le standard MIDI; d'autres peuvent être librement affectés par les utilisateurs à des commandes particulières.
Selon l'invention, au moins l'un des contrôleurs parmi les contrôleurs libres code le fait que le second octet de données D2 d'un échantillon MIDI est une valeur binaire traduisant un signe appartenant à de l'information complémentaire à la séquence musicale MIDI proprement dite, cette information pouvant être soit textuelle, soit d'ordre musical, par exemple de l'information qui assiste l'exécutant ou les exécutants pendant la reproduction de la séquence musicale, soit encore un signal de commande pouvant définir des propriétés particulières de l'affichage de l'information complémentaire en question.
Ainsi, si à titre d'exemple, l'octet de données Dl définit un contrôleur utilisé pour l'information complémentaire textuelle, il peut porter le n°54 (38 en hexadécimal); l'échantillon MIDI selon l'invention présente alors la forme (en hexadécimal) suivante:
{ [x] [B].[38].[dd]}
dans laquelle x est le canal affecté au dispositif de visualisation de l'information complémentaire et dd la valeur du signe alphanumérique appartenant à cette information complémentaire textuelle. Une caractéristique essentielle du procédé selon l'invention consiste ainsi à décomposer l'information complémentaire à une séquence MIDI musicale, en des éléments d'information distincts qui sont "traduits" selon le standard MIDI et imbriqués dans la séquence MIDI musicale proprement dite. Ainsi, si l'information complémentaire est textuelle, celle-ci est "épelée" et chaque signe alphanumérique d'un texte est traduit en un code binaire qui est incorporé dans l'octet de données D2 de certains échantillons de la séquence MIDI, un échantillon ainsi constitué étant à son tour imbriqué dans la suite de messages ou échantillons MIDI représentant l'information musicale proprement dite.
Pour illustrer ce concept de l'invention, on va examiner un exemple simple basé sur la mélodie et les paroles de la chanson enfantine "Au clair de la lune, mon ami Pierrot ", la partition mélodique du premier tronçon de phrase "Au clair de la lune" étant représentée sur la figure 2. Dans l'exemple, le codage de l'information textuelle est réalisé selon le code ASCII; cependant l'homme de métier comprendra que d'autres systèmes de codage peuvent également convenir .
Le type de codage ASCII donne pour ledit premier tronçon de phrase la suite d'échantillons MIDI suivante:
{[x] [B] .[38] .[41]} = 'A'
{[x] [B] .[38] • [75]} = 'u'
{[X] [B] • [38] • [20]}
{[x] [B] . [38] • [63]} = 'C'
{[x] [B] [38] [6B]} = '1'
{[X] [B] [38] [61]} = 'a'
{[x] [B] [38] . [69]} = 'i'
{[x] [B]. [38] [72]} = 'r'
{ [x] [B] . [38]. {20]} etc.
{[x] [B]. [38]. [2C]} /
On a déjà précisé que l'in ormation complémentaire peut également être d'ordre musical, les échantillons y relatifs ayant toujours un octet de statut de valeur xB, mais présentant un contrôleur d'une valeur différente de 38 choisie parmi les contrôleurs libres définis par le standard MIDI. Cette information peut être, par exemple un top de métronome visualisé aux instants appropriés pendant le déroulement de 1 ' exécution musicale. D'autres échantillons comprenant d'autres contrôleurs peuvent contenir des informations d'accord, des informations sur la façon de présenter la mélodie écrite sur les paroles visualisées etc. Comme également déjà mentionné, la visualisation de l'information complémentaire peut être pilotée par des ordres contenus dans les octets de données Dl et D2 de certains échantillons de la séquence MIDI . Ces échantillons dits "de commande" peuvent entraîner l'accomplissement des fonctions suivantes, la liste n'étant pas limitative: Mémoriser un caractère de texte à afficher, Afficher le texte mémorisé avant le moment où il doit être chanté, (décalage ΔT)
Afficher un caractère de texte, - Souligner une portion de texte affiché au moment où elle doit être chantée,
Afficher une tonalité en fonction d'une table mémorisée en mémoire morte,
Afficher à l'avance un caractère identifiant un accord,
Afficher un accord entier au moment où il doit être reproduit,
Afficher un symbole de métronome à un instant approprié, - Redéfinir le dessin d'un caractère suivant une matrice de sept fois cinq points,
Affecter à un caractère un dessin d'une matrice stockée en mémoire morte, Indiquer, par une adresse d'une table de conversion, dans quelle langue doit être affichée une tonalité,
Modifier le mode d'affichage et d'exploitation des informations qui arriveront par la suite, - etc.
On constate donc que certaines de ces commandes impliquent des opérations affectant l'affichage d'informations textuelles, tandis que d'autres permettent de commander l'affichage d'informations musicales, telles qu'un accord, le rythme ou analogues, assistant un exécutant dans la reproduction de la séquence musicale proprement dite.
On va maintenant se référer à la figure 3 qui représente très schématiquement une installation d'exécution musicale de type MIDI incorporant un dispositif de visualisation et permettant d'interpréter une séquence musicale codée selon le procédé de l'invention. Le dispositif de visualisation est désigné par la référence générale 1.
Dans le mode de réalisation représenté, on a supposé qu'il s'agit d'une installation d'exécution musicale impliquant un synthétiseur I (connu en soi) adapté pour restituer électroniquement l'information musicale d'une séquence MIDI; ce synthétiseur est raccordé à un haut- parleur HP. L'installation comprend également un lecteur source LC, formé par exemple par un ordinateur personnel capable de lire un support d'enregistrement contenant un fichier de séquence MIDI enregistrée selon le procédé de l'invention, par exemple sur une disquette souple que l'on trouve couramment sur le marché. Les signaux de la séquence MIDI lus par le lecteur LC passent sur un bus commun 2 de conception classique en technique MIDI, bus qui est également connecté au dispositif de visualisation 1 et à un microphone MIDI M. Dans l'exemple décrit, le dispositif de visualisation 1 est destiné à assister un ou plusieurs exécutants, par exemple un chanteur ou une chorale dont le synthétiseur I assure l'accompagnement. Ainsi, ce ou ces exécutants peuvent en observant le dispositif de visualisation 1, lire le texte sur lequel l'oeuvre musicale a été écrite, et ce pendant le déroulement de 1 ' exécution de 1 ' accompagnement réalisée par le synthétiseur I. Il (s) peu(ven)t également recevoir d'autres informations complémentaires relatives par exemple à des instructions d'harmonie, de contrepoint ou de nuances, un rythme visuel, etc.
Le dispositif d'affichage 1 comprend une entrée MIDI 3 (appelée "IN" dans la terminologie MIDI) et connectée au bus commun 2. Cette entrée est connectée à une interface MIDI 4 de type classique comprenant notamment un opto-coupleur et communiquant avec un microprocesseur 5. Celui-ci peut être du type 80C31 par exemple et il est connecté à une mémoire symbolisée ici par un seul bloc 6. Cette mémoire comporte des sections ROM et RAM. L'une de ces sections 7 contient le programme de travail du microprocesseur 5. Une autre section est un registre 8 essentiel pour la présente invention, car destiné à stocker successivement les échantillons de la séquence MIDI identifiés dans leur octet de statut par le nombre hexadécimal "B" . Chaque échantillon retenu ainsi par le microprocesseur 5 est traité immédiatement et ensuite remplacé par l'échantillon suivant marqué par le nombre "B". On voit donc que les échantillons d'information complémentaire ne sont pas accumulés dans le dispositif de visualisation 1 préalablement à l'exécution d'une oeuvre musicale, mais au contraire traités au fur et à mesure qu'ils apparaissent dans la séquence MIDI. Le dispositif de visualisation 1 n'a donc pas à être équipé d'une mémoire de grande taille. La mémoire 6 comporte également une section tampon 9 dite d'affichage de lignes, et plusieurs sections 10, 11 et 12 formant des tables dont le but apparaîtra par la suite.
Le microprocesseur 5 est également connecté à un écran d'affichage 13 par l'intermédiaire d'un bus directionnel 14. Dans l'exemple décrit ici, l'écran d'affichage est capable d'afficher deux lignes de texte superposées 13a et 13b de 40 caractères chacune. Un écran à cristaux liquides ou tout autre type d'écran connu peut convenir. Le dispositif de visualisation comporte également un convertisseur à découpage 15 permettant d'alimenter ses divers composants à une tension de 5V, par exemple à partir d'une pile de 9V connectée à une borne 16. Bien entendu, d'autres modes d'alimentation sont possibles. Le dispositif de visualisation 1 peut revêtir de nombreuses formes. Par exemple, il peut être logé dans un boîtier adaptable à un pied de microphone, être installé sur un lutrin ou sur un instrument de musique etc. Mais, il peut également être réalisé sous d'autres formes comme par exemple :
- un appareil de rétro-projection, qui peut être inclus dans un casque personnel, en transparence sur l'oeil directeur de l'utilisateur, ou bien en projection stéréoscopique de proximité (représentation "virtuelle" isolée) ; - un projecteur vidéo, un écran cathodique ou un téléviseur ;
- un écran plat de type matriciel, monochrome ou couleur, tel que ceux qui équipent la plupart des ordinateurs dits "portables". On notera que le dispositif de visualisation peut être connecté au bus 2 par une liaison filaire, hertzienne ou analogue .
Au cours de l'exécution de l'oeuvre musicale, tous les échantillons de la séquence MIDI circulant sur le bus 2 sont appliqués à l'entrée 3. Le microprocesseur 5 sélectionne uniquement les échantillons dont l'octet de statut comporte le code du canal qui dans l'installation est affecté au dispositif de visualisation 1 et le code B identifiant qu'il s'agit d'un échantillon relatif à l'information complémentaire. Il est à noter que l'affectation du canal peut également être faite par défaut par exemple sur le canal 16.
Les échantillons sélectionnés par le microprocesseur 5 sont stockés temporairement dans le registre 8. On rappelle que, selon une caractéristique importante de l'invention, celui-ci ne retient un échantillon donné que pendant le temps nécessaire à son analyse par le microprocesseur 5. Il est ensuite remplacé immédiatement par l'échantillon suivant et ainsi de suite. On voit donc qu'il n'est pas nécessaire de stocker au préalable l'ensemble de l'information complémentaire, ni de la reproduire à l'aide d'un mécanisme de synchronisation quelconque, la synchronisation selon l'invention étant réalisée automatiquement par la seule relation temporelle qu'ont les échantillons "musicaux" et les échantillons d' "information complémentaire" dans la suite de la séquence MIDI mixte.
L'analyse faite par le microprocesseur 5 consiste d'abord à mémoriser le ou les octets de données Dl et D2 afin de permettre leur traitement ultérieur ou leur application approprié à l'une des unités qui sont raccordées au microprocesseur 5.
Ainsi, si le contrôleur de l'octet D2 correspond à une commande d'affichage d'un signe alphanumérique (38 dans l'exemple), l'octet D2 qui contient alors le code ASCII correspondant, est acheminé vers la mémoire tampon 9.
On va maintenant examiner de quelle façon les échantillons relatifs respectivement à l'information musicale et à 1 ' information complémentaire sont imbriqués les uns dans les autres, en s 'aidant de l'exemple déjà énoncé ci-dessus. Cette description suppose que, comme représenté sur la figure 3, l'écran d'affichage comporte deux lignes 13a et 13b appelées respectivement ligne haute LH et ligne basse LB. On verra que ce mode d'affichage permet à un exécutant de plus facilement anticiper le texte qu'il a à chanter au cours de l'exécution musicale. Les deux lignes de l'écran d'affichage 13 correspondent à deux sous-sections 9a et 9b de la section de mémoire tampon 9.
La séquence MIDI envoyée par le lecteur source LC envoie d'abord la première phrase de la chanson, les échantillons étant codés comme déjà indiqués ci-dessus. Ainsi, le dispositif de visualisation reçoit les signaux suivants, Txx désignant les instants successifs de réception:
Figure imgf000015_0001
TOn : (|A|u| Idllalilrl | ... I lal lil I P| i |e| r | r | o| t| , | )
Cette information textuelle est stockée dans la sous- section basse 9b du tampon 9 sur un ordre contenu dans l'échantillon suivant immédiatement celui ( { [x] [B] . [38] . [2C] } ) codant la virgule après le mot "Pierrot". Il peut s'agir de l'échantillon { [x] [B] . [38] . [OD] } , OD étant le code ASCII pour "retour de chariot". Selon le mode d'affichage choisi, cet ordre peut également entraîner 1 ' affichage réel à la ligne 13b de l'écran 13, comme suit:.
TOp : |_|_|_ IJ_I_I_IJ_I_I_I_I_I_I_I_I = Oigne haute) |A|u| Idllalilrl I |a|m|i| | P|i|e|r| r|o|t| , I = (ligne basse)
La séquence MIDI envoyée ensuite par le lecteur source LC contient maintenant la seconde phrase de la chanson:
|P|r|ê|t|e|-|m|o|i| |é|c|r|i|r|e| |u|n| |m|o|t|. Cet ensemble d'échantillons est suivi d'un échantillon de commande de la forme { [x] [B] . [16] . [es] } permettant la vérification de l'information qui vient d'arriver. Plus précisément, il est interprété par le microprocesseur 5 pour vérifier si le nombre de signes reçus pour la première phrase est correcte, le code 16 étant le contrôleur incitant le microprocesseur 5 à effectuer la vérification et le code es représentant le nombre en hexadécimal de ces signes (vérification dite "CHECK-SUM") . La vérification ayant eu le résultat escompté, le microprocesseur 5 commande l'affichage de la phrase en ligne haute 13a sur l'écran 13.
L'échantillon suivant est codé { [x] [B] . [38] . [OD] } qui provoque l'ordre de stockage de la seconde phrase qui vient d'être envoyée.
Dans le mode d'affichage décrit ici, on suppose que l'exécutant est assisté dans l'interprétation en voyant affichée sur la ligne basse 13b de l'écran 13 la syllabe qu'il a à chanter sur une note donnée. A cet effet, la séquence reçue comprend maintenant un échantillon de commande de la forme { [x] [B] . [3F] . [03] }, le code 3F étant le contrôleur provoquant l'affichage de la syllabe et le nombre 03 codant le nombre de signes à afficher pour cette syllabe (un espace entre les mots compris) . Ceci revient à la représentation suivante sur l'écran:
TOsl : |A| u | | c | l | a | i | r | I . . . | | a |m| i | I P l i I e | r | r | o | t | , I = (ligne haute) |A| u | l_l_l_l_l_l_l • • • MJ JJ J JJJJ J J ' (ϋβne basse) La séquence MIDI contient maintenant un échantillon d'information musicale pure représentant la première note de la chanson qui est un "DO" (voir figure 2) . Cet échantillon peut être de la forme { [x] [9] . [48] . [40] } . Dans cet échantillon x représente le canal du synthétiseur I, 9, la commande "NOTE ON", 48 le numéro de note correspondant à la hauteur tonale du "DO" envisagé et 40 le code de vélocité, selon les critères bien connus du standard MIDI. Cet échantillon est suivi de l'échantillon de la forme { [x] [8] . [48] . [7F] } dans lequel x est de nouveau le code de canal du synthétiseur I, 8 le code de "NOTE OFF", 48 le rappel du numéro de la note à laquelle on se réfère et 7F le code de vélocité maximale, comme cela est prescrit par le standard MIDI. Il en résulte la restitution du "DO" de la première note de la mélodie pendant qu'en même temps l'exécutant voit mis en évidence sur la deuxième ligne 13b de l'affichage, la syllabe "AU" qu'il a à chanter sur cette note.
L'échantillon suivant est de nouveau une commande de mise en évidence de la forme { [x] [B] . [3F] . [06] } , le code 06 représentant le nombre de lettres du mot "CLAIR" de la première phrase de la chanson (y compris un espace entre les mots) . L'affichage devient:
T0s2 : |A|u| |c|l|a|i|r| | I lalmlil I PI i |e| r| r|o|t| , | = (ligne haute) I I I Idllalilrl I 1 1 1 1 1 1 1 1 1 1 1 1 1 1 = (ligne basse)
L'échantillon suivant est de la forme { [x] [9] . [48] . [40] } qui provoque la restitution par le synthétiseur I du second "DO" de la mélodie (figure 2), suivi de l'échantillon de la forme { [x] [8] . [48] . [7F] } qui coupe la reproduction de cette seconde note.
Le processus se poursuit ainsi pour permettre le déroulement de la première phrase de la chanson, les derniers affichages avec lesquels sont synchronisés automatiquement les notes de la partition, étant successivement les suivants:
TOsw |A|u| |c|l|a|i|r| |a|m|i| |P|i|e|r|r|o|t| «= (ligne haute) I I I I I I I I I Ia| I I I I I I I I I I = (ligne basse)
TOsx lAlul Idllalilrl lalmlil I P|i |e| r | r |o| t| , = (ligne haute) I I I I I I _|_|m|i|_|_|_|_|_|_|_|_|_ - (ligne basse)
TOsy |A|u| Idllalilrl |a|m|i| |P|i |e| r | r|o| 11 , « (ligne haute) I I I I I I I I I M i l |P|i|e|r| | | | •≈ (ligne basse)
TOsz |A|u| |c|l|a|i|r| lalmlil | P|i |e| r I r |o| t | , = (ligne haute) I I I I I I I I |r|o|t|, = (ligne basse) Pendant l'affichage de la dernière syllabe de la première phrase, un échantillon de la forme { [x] [B] . [16] . [es] } pourra provoquer l'affichage de la phrase suivante en ligne haute et l'initialisation de l'affichage de la première syllabe mise en évidence pour l'exécution de la seconde phrase de la chanson à la ligne basse 13b, et ainsi de suite.
L'espacement temporel des échantillons dans la séquence
MIDI est prévu de la façon habituelle en utilisant le nombre requis d'unités temporelles fondées sur une base de temps de l'installation, en fonction du rythme choisi pour la chanson.
Selon une caractéristique particulière de l'invention illustrée sur la figure 2, l'affichage syllabique des paroles de la chanson peut être fait par anticipation d'un certain délai ΔT précédant l'exécution de la ou des notes sur lesquelles ces syllabes sont écrites. Ce délai est généré par un simple décalage, en amont dans le temps, des échantillons textuels par rapport aux échantillons musicaux. Ce décalage peut donc aisément être déterminé au moment de l'écriture du fichier MIDI représentant la séquence dont il est question ici. Un tel délai facilite notablement la lecture pour l'exécutant qui aura alors non seulement à sa disposition la phrase totale devant être chantée, mais également, par anticipation la syllabe correspondant à la note qui va être entendue, après expiration du délai ΔT et ce successivement pour toute syllabe associée à cette note.
On a précisé ci-dessus qu'en pratique, tous les échantillons autres que ceux identifiés par un octet de statut S codé xB sont ignorés lors de la sélection par le microprocesseur 5. Cependant, une exception a cette règle peut être faite pour les échantillons dénommés Sys-Ex dans la terminologie MIDI (pour System Exclusive Messages) et plus particulièrement pour ceux identifiant les remises à zéro et les pauses qui sont des commandes bien connues dans la technologie MIDI; tous les autres échantillons Sys-Ex sont ignorés jusqu'à la réception de l'octet de fin [F7] .
On a également vu que la séquence MIDI mixte selon l'invention peut comprendre des échantillons de commande entraînant l'affichage d'informations complémentaires d'ordre musical, telles que par exemple le rythme, des données graphiques ou littérales sur les accords, des données sur les nuances, les crescendos et decrescendos etc. De telles informations d'ordre musical, pourront être appelés collectivement à partir des tables 10, 11 et 12 de la mémoire 6, à la suite de la réception de ces échantillons de commande, les tables pouvant contenir des sous-programmes pour assurer l'affichage de ces informations. Ainsi, la table 10 peut stocker des informations sur les accords, la table 11 peut être une table de conversion linguistique pour l'affichage de commentaires dans des langues données et la table 12 pourra contenir des commandes ou jeux de commandes pour assurer l'affichage des informations dans certains modes donnés . Le dispositif de visualisation 1 ne conservant en mémoire (registre 8) pas plus d'un seul échantillon composé au maximum de trois octets, un autre avantage important de l'invention réside dans le fait que les échantillons de commande porteurs de signaux de commande des diverses fonctions peuvent être imbriqués les uns dans les autres. Comme certaines de ses fonctions ne peuvent pas être exécutées en même temps, un système de priorités des commandes peut être défini dans le programme gérant le microprocesseur 5 de telle manière que les signaux de commande puissent être traités selon les besoins. Cette particularité due à l'invention permet d'accroître encore davantage la souplesse dont on dispose dans l'écriture d'une séquence MIDI mixte.
Lorsque le dispositif de visualisation 1 est initialisé, il est placé par défaut dans une configuration donnée notamment en ce qui concerne la langue de l'affichage (unité 11) et le mode d'affichage (unité 12). Cette configuration peut être modifiée, soit par des échantillons particuliers de la séquence MIDI, soit éventuellement par commande manuelle à l'aide d'un bouton de commande 17 prévu sur le dispositif de visualisation 1 et raccordé au microprocesseur 5.
Le programme exécuté par le microprocesseur 5 comporte une boucle principale qui n'a à exécuter que deux tâches à savoir d'une part le rafraîchissement de l'affichage sur l'écran 13 en fonction des commandes reçues à partir des échantillons et du mode de fonctionnement choisi, et d'autre part l'exécution des ordres de changement de mode (comme le mode karaoké ou songpad, par exemple) . Les figures 4 et 5 représentent deux boucles d'interruption sur lesquelles la boucle principale dévie d'une part pour assurer l'affichage et d'autre part pour traiter les échantillons dans lesquels l'octet Dl code un contrôleur régissant les fonctions particulières de commande comme décrites ci-dessus.
Une première boucle d'interruption de la boucle principale du programme est représentée sur la figure . Cette boucle d'interruption concerne principalement l'affichage assuré par le dispositif de visualisation 1. Après l'initialisation (étape Bl) du dispositif de visualisation 1, le microprocesseur 5 attend à l'étape B2 l'échantillon MIDI { [x] [B] . [7A] . [00] } qui est propre à commander la remise à l'état initial de divers composants du dispositif de visualisation 1, notamment l'effacement du tampon d'affichage 9 et donc de l'écran 13, la suppression du signe de métronome, l'effacement du signe de tonalité etc.
Le microprocesseur 5 attend alors à l'étape B3, l'échantillon de la séquence MIDI identifiant un message prioritaire éventuel. Ce dernier peut être composé d'un texte affiché avant que l'exécution de l'oeuvre musicale ne commence. Par exemple, le message peut indiquer l'auteur de l'oeuvre, le titre, l'indication concernant les droits d'auteur etc. Si un tel échantillon est reçu, le microprocesseur attend les échantillons suivants traduisant, par exemple en code ASCII les signes alphanumériçfues du message qui sont stockés dans la mémoire tampon 9 à l'étape B4.
A l'issue de ce stockage, le sous-programme reboucle sur l'opération B3 dont le test reçoit cette fois-ci une réponse négative. La boucle passe alors au test suivant
(étape B5) pour reconnaître l'échantillon identifiant la commande d'affichage sur la ligne 13a de l'affichage. En cas d'arrivée de l'échantillon correspondant, le programme passe de nouveau à l'étape B4 et repasse les tests B3 et B5. Ceux-ci recevant une réponse négative, un échantillon est attendu (test B6) identifiant une commande d'affichage à la ligne basse 13b de l'écran d'affichage 13. Dans l'affirmative, le sous-programme retourne à l'étape B4 à l'issue de laquelle les tests B3, B5 et B6 sont de nouveau exécutés. S'ils reçoivent tous une réponse négative, le sous-programme passe au test B7, pour identifier un échantillon correspondant à la commande de mise en évidence de syllabe sur l'écran 13. Si un tel échantillon est identifié, le sous-programme passe à une opération de calcul (étape B8) de l'abscisse de l'écran 13 à laquelle la mise en évidence doit commencer. L'information ainsi élaborée est envoyée au tampon 9 pour traitement par l'opération B4. A l'issue de cette opération, le sous-programme passe de nouveau par les opérations B3 et B5 à B7 et si toutes ces étapes reçoivent une réponse négative, un test est effectué
(étape B9) pour identifier un échantillon de commande provoquant une remise à zéro des organes du dispositif de visualisation 1. Le sous-programme reboucle sur l'opération
B3, si ce test s'avère négatif, sinon il reboucle sur l'opération B2. La figure 5 représente une autre boucle d'interruption ou sous-programme qui permet au microprocesseur 5 de traiter les données contenues dans les octets de données D2 des échantillons pour autant naturellement que ces échantillons aient un octet de statut identifié par le nombre hexadécimal B.
Ce sous-programme démarre en Bll, lorsque le microprocesseur détecte un premier échantillon contenant le code d'un signe textuel à afficher. Un premier test est alors effectué (étape B12) pour vérifier si une suite de signes n'est pas déjà en cours de traitement. Dans l'affirmative, les données des octets D2 des échantillons suivants de la séquence entrante sont stockées dans un tampon de travail appartenant à la RAM 7 du microprocesseur 5 (étape B13) . Sinon, un nouveau test est effectué en B14 pour détecter un ordre d'affichage. Si un tel ordre est reçu, le sous-programme se rebranche sur la boucle principale par l'étape B15. Sinon le sous-programme effectue un test (étape B16) pour identifier un échantillon ayant un contrôleur de commande. S'il en est ainsi, le contrôleur est stocké par le microprocesseur 5 pour traitement ultérieur (étape B17) .
Sinon, le sous-programme passe à un test en B18 pour identifier un échantillon de remise à zéro. Si celui-ci est détecté, la boucle principale en est informée en B19. Sinon, le sous-programme retourne à la boucle principale en B20. Par ailleurs les étapes B13, B15, B17 et B19 aboutissent toutes à un rebouclage sur la boucle principale du programme du microprocesseur 5. L'invention ne se limite pas uniquement à un procédé de codage de séquences musicales mélangées à des informations complémentaires selon le standard MIDI comme on vient de le décrire.
En effet, le procédé selon l'invention peut également s'appliquer dans le cas de séquences musicales codées selon les méthodes audionumériques dans lesquelles des échantillons numériques sont pris successivement d'une séquence sonore analogiques, comme cela est maintenant très largement répandu pour les disques compacts audio.
Dans ce cas, le procédé de l'invention consiste à remplacer l'un des bits de chaque échantillon, par exemple le bit de poids le plus faible par un bit d'un signal binaire représentant une fraction numérique de la valeur de codage des signes à afficher.
Ainsi, en prenant comme exemple le célèbre canon "Frères Jaccjues" la première lettre du mot "Frère" pourrait être codé de la façon suivante (F en code ASCII = 01000110) :
Séquence audio {F} séquence mixte remarques
[80]=11000000 0 11000000= = [80] identité
[84]=11000100 1 11000101= = [85] différence
[96]=11010110 0 11010110= = [96] identité
[Al]=10100001 0 10100000= = [A0] différence
[9F]=10011111 0 10011110= = [9E] différence
[89]=10001001 1 10001001= ;[89] identité
[6C]=01111100 1 01111101= = [6D] différence
[7F]=01111111 0 01111110= :[7E] différence
On voit que cette façon de coder n'altère çpie très peu la çpαalité d'écoute de la séquence sonore. Ainsi, on peut démontrer que pour une fréquence d'échantillonnage de 44,1 kHz qui est habituelle pour les disques compacts en stéréophonie, le taux de dégradation du signal n'est que de 0,0002% ce qui est négligeable.
Un dispositif de visualisation permettant de capter l'information ainsi codée et de l'afficher sur un écran sera conçu pour appliquer le bit de plus faible poids des échantillons binaires à un décodeur capable de commander un affichage à l'aide des bits successifs détecté dans le signal d'échantillonnage de la séquence sonore.

Claims

REVENDICATIONS
1.- Procédé de codage d'informations complémentaires aux informations musicales d'une séquence sonore codée sous la forme d'une suite d'échantillons numériques, notamment des informations complémentaires textuelles sur lesquelles ladite séquence sonore est écrite, en vue de permettre la visualisation desdites informations complémentaires en synchronisme avec le déroulement de ladite séquence sonore, caractérisé en ce qu'il consiste à décomposer lesdites informations complémentaires en des éléments codés numériquement et à mélanger lesdits éléments codés numériquement aux échantillons binaires au fur et à mesure de leur apparition dans ladite séquence musicale, de manière à engendrer une séquence mixtes d'échantillons comprenant à la fois lesdites informations musicales et lesdites informations complémentaires.
2.- Procédé suivant la revendication 1, caractérisé en ce «que ladite séquence sonore est codée selon le standard
MIDI et en ce que lesdits éléments codés numériquement sont incorporés dans des échantillons MIDI qui sont mélangés aux échantillons MIDI codant ladite séquence sonore.
3.- Procédé suivant la revendication 2, caractérisé en ce que chacun desdits éléments codés numériquement forme au moins un octet de données d'un échantillon MIDI.
4.- Procédé suivant l'une quelconque des revendications 2 et 3, caractérisé en ce que chaque échantillon MIDI incorporant un élément codé numériquement comporte un octet de statut dans lequel la partie de commande code un contrôleur apparaissant dans un octet de données de cet échantillon.
5.- Procédé suivant la revendication 4, caractérisé en ce que ladite partie de commande comporte le nombre hexadécimal "B" en tant que demi-octet de poids fort.
6.- Procédé suivant la revendication 1 caractérisé en ce que ladite séquence sonore est codée selon le standard audionumérique des disques compacts et en ce que lesdits éléments codés numériquement sont décomposés en leurs bits élémentaires qui, lors du codage remplacent respectivement au moins un bit de poids faible des échantillons de ladite séquence sonore, lesdits bits élémentaires de chaque élément codé numériquement étant répartis successivement dans des échantillons successifs de ladite séquence sonore.
7.- Procédé suivant l'une «quelconque des revendications
1 à 6, caractérisé en ce que lesdites informations complémentaires sont d'ordre textuel et codées selon la norme de codage alphanumérique dite ASCII dans les seconds octets de données des échantillons.
8.- Procédé suivant l'une quelconque des revendications 1 à 7, caractérisé en ce que lesdites informations complémentaires sont d'ordre musical et/ou des commandes de visualisation.
9.- Procédé suivant la revendication 8, caractérisé en ce qu'il consiste à coder des informations complémentaires relatives à des opérations choisies parmi les opérations suivantes:
Mémoriser un caractère de texte à afficher, Afficher le texte mémorisé avant le moment où il doit être chanté,
Afficher un caractère de texte, - Souligner une portion de texte affichée au moment où elle doit être chantée. Afficher une tonalité.
Afficher à l'avance un caractère identifiant un accord, - Afficher un accord entier au moment où il doit être reproduit,
Afficher un symbole de métronome à un instant approprié,
Redéfinir le dessin d'un caractère suivant une matrice de sept fois cinq points. Affecter à un caractère un dessin d'une matrice mémorisée.
Indiquer, par une adresse d'une table de conversion, dans quelle langue doit être affichée une tonalité, et/ou
Modifier le mode d'affichage et d'exploitation des informations qui arriveront par la suite.
10.- Procédé suivant l'une quelconque des revendications 1 à 9, caractérisé en ce que lesdits éléments codés numériquement sont insérés temporellement dans ladite séquence sonore en aval de l'information musicale dont elle est composée.
11.- Dispositif de visualisation d'informations complémentaires contenues dans une séquence mixte obtenue par le procédé suivant l'une quelconque des revendications précédentes, caractérisé en ce qu'il comprend des moyens d'extraction pour extraire de ladite séquence mixte les échantillons codés comportant lesdits éléments codés numériquement; - des moyens de stockage connectés auxdits moyens d'extraction pour mémoriser temporairement les échantillons extraits: des moyens de traitement pour traiter les échantillons mémorisés afin de séparer les éléments codés numériquement des échantillons; et des moyens d'affichage connectés auxdits moyens de traitement pour visualiser les éléments codés ainsi séparés.
PCT/FR1997/001699 1996-09-26 1997-09-26 Procede pour adjoindre a un signal sonore code de l'information complementaire, notamment textuelle, destinee a etre visualisee WO1998013819A1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
AU44642/97A AU4464297A (en) 1996-09-26 1997-09-26 Method for adding a coded sound signal of complementary information, in particular textual, for display

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR96/11746 1996-09-26
FR9611746A FR2753827B1 (fr) 1996-09-26 1996-09-26 Procede pour adjoindre a un signal sonore code de l'information complementaire, notamment textuelle, destinee a etre visualisee

Publications (1)

Publication Number Publication Date
WO1998013819A1 true WO1998013819A1 (fr) 1998-04-02

Family

ID=9496091

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/FR1997/001699 WO1998013819A1 (fr) 1996-09-26 1997-09-26 Procede pour adjoindre a un signal sonore code de l'information complementaire, notamment textuelle, destinee a etre visualisee

Country Status (3)

Country Link
AU (1) AU4464297A (fr)
FR (1) FR2753827B1 (fr)
WO (1) WO1998013819A1 (fr)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2351214A (en) * 1999-04-29 2000-12-20 Ibm Encoding text in a MIDI datastream

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2795842B1 (fr) * 1999-06-29 2001-09-21 Imc Systeme et procede pour l'edition de fichiers musicaux numeriques
AU2001276016A1 (en) * 2000-07-24 2002-02-05 Intel Corporation (A Delawere Corporation) Personalized disc jockey system
AU2003298150A1 (en) * 2002-12-06 2004-06-30 Sony Ericsson Mobile Communications Ab Compact media data format
EP1435603A1 (fr) * 2002-12-06 2004-07-07 Sony Ericsson Mobile Communications AB Format compact de données media
KR20050026641A (ko) * 2003-09-09 2005-03-15 삼성전자주식회사 오디오 신호에 가라오케 정보를 삽입하기 위한 방법,삽입된 가라오케 정보의 재생 방법, 및 그 장치와 이를구현하기 위한 프로그램이 기록된 기록 매체

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0459157A2 (fr) * 1990-04-28 1991-12-04 Nec Corporation Méthode et appareil pour la lecture automatique d'un milieu d'enregistrement
US5131311A (en) * 1990-03-02 1992-07-21 Brother Kogyo Kabushiki Kaisha Music reproducing method and apparatus which mixes voice input from a microphone and music data
EP0498927A2 (fr) * 1991-01-16 1992-08-19 Ricos Co., Ltd. Dispositif d'affichage de caractéristiques vocales
US5321200A (en) * 1991-03-04 1994-06-14 Sanyo Electric Co., Ltd. Data recording system with midi signal channels and reproduction apparatus therefore
US5335073A (en) * 1991-09-02 1994-08-02 Sanyo Electric Co., Ltd. Sound and image reproduction system
US5453570A (en) * 1992-12-25 1995-09-26 Ricoh Co., Ltd. Karaoke authoring apparatus

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5131311A (en) * 1990-03-02 1992-07-21 Brother Kogyo Kabushiki Kaisha Music reproducing method and apparatus which mixes voice input from a microphone and music data
EP0459157A2 (fr) * 1990-04-28 1991-12-04 Nec Corporation Méthode et appareil pour la lecture automatique d'un milieu d'enregistrement
EP0498927A2 (fr) * 1991-01-16 1992-08-19 Ricos Co., Ltd. Dispositif d'affichage de caractéristiques vocales
US5321200A (en) * 1991-03-04 1994-06-14 Sanyo Electric Co., Ltd. Data recording system with midi signal channels and reproduction apparatus therefore
US5335073A (en) * 1991-09-02 1994-08-02 Sanyo Electric Co., Ltd. Sound and image reproduction system
US5453570A (en) * 1992-12-25 1995-09-26 Ricoh Co., Ltd. Karaoke authoring apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2351214A (en) * 1999-04-29 2000-12-20 Ibm Encoding text in a MIDI datastream
GB2351214B (en) * 1999-04-29 2003-12-03 Ibm Method and apparatus for encoding text in a midi datastream

Also Published As

Publication number Publication date
AU4464297A (en) 1998-04-17
FR2753827B1 (fr) 1998-10-30
FR2753827A1 (fr) 1998-03-27

Similar Documents

Publication Publication Date Title
CN101042752B (zh) 用于电子邮件管理的方法和系统
FR2547146A1 (fr) Procede et dispositif pour l'audition de messages parles synthetises et pour la visualisation de messages graphiques correspondants
Qureshi His Master's Voice? Exploring Qawwali and ‘Gramophone Culture’in South Asia 1
FR2670599A1 (fr) Partition musicale electronique.
Auner Making old machines speak: images of technology in recent music
WO1998013819A1 (fr) Procede pour adjoindre a un signal sonore code de l'information complementaire, notamment textuelle, destinee a etre visualisee
CN107610725A (zh) 一种视频制作方法及终端
Spring ““To Sustain Illusion is All That is Necessary””: The Authenticity of Song Performance in Early American Sound Cinema
JP2004325905A (ja) 外国語学習装置および外国語学習プログラム
KR100577558B1 (ko) 오디오 컨텐츠와 텍스트를 동기화시키는 동기신호삽입/검출 방법 및 장치
CN1047901C (zh) 用于控制卡拉ok系统屏幕显示的装置和方法
US20070202480A1 (en) Digital karaoke jukebox
JP4354337B2 (ja) 手話学習機能付きカラオケ装置
JP2001006295A (ja) 情報再生装置及び方法、並びに情報提供媒体
Bernstein Making Audio Visible: The Lessons of Visual Language for the Textualization of Sound
Byron et al. This Is How We Do It: An Approach to Hooks
Ristić SEMIOTICS OF FILM/SEMIOTICS OF FILM MUSIC
Prince BEAT REFRAINS: MUSIC, MILIEU AND IDENTITY IN JACK KEROUAC’S THE SUBTERRANEANS, THE METRO-GOLDWYN-MAYER FILM ADAPTATION
Alleyne “In a Sky Full of People”: Spatial and Cinematic Staging in Seal's “Crazy”(1990)
FR2507362A1 (fr) Partition automatique
McGrath Something seems wrong, should that be happening?
KR100693658B1 (ko) 휴대용 어학학습 장치 및 방법
US20080276792A1 (en) Lyrics superimposed on video feed
Bullock “The Kind of Music We Play”: A Study of Self-Idiomatic Improvised Music and Musicians in Boston
Wong Ritual and Music of North China: Shawm Bands in Shanxi by Stephen Jones, and: Ritual and Music of North China. Volume 2: Shaanbei by Stephen Jones

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AL AM AT AU AZ BA BB BG BR BY CA CH CN CU CZ DE DK EE ES FI GB GE GH HU ID IL IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MD MG MK MN MW MX NO NZ PL PT RO RU SD SE SG SI SK SL TJ TM TR TT UA UG US UZ VN YU ZW AM AZ BY KG KZ MD RU TJ TM

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): GH KE LS MW SD SZ UG ZW AT BE CH DE DK ES FI FR GB GR IE IT LU MC

DFPE Request for preliminary examination filed prior to expiration of 19th month from priority date (pct application filed before 20040101)
121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: JP

Ref document number: 1998515355

Format of ref document f/p: F

REG Reference to national code

Ref country code: DE

Ref legal event code: 8642

122 Ep: pct application non-entry in european phase
NENP Non-entry into the national phase

Ref country code: CA