WO2017216850A1 - 照明制御装置、照明制御方法および照明制御プログラム - Google Patents

照明制御装置、照明制御方法および照明制御プログラム Download PDF

Info

Publication number
WO2017216850A1
WO2017216850A1 PCT/JP2016/067556 JP2016067556W WO2017216850A1 WO 2017216850 A1 WO2017216850 A1 WO 2017216850A1 JP 2016067556 W JP2016067556 W JP 2016067556W WO 2017216850 A1 WO2017216850 A1 WO 2017216850A1
Authority
WO
WIPO (PCT)
Prior art keywords
music
illumination
lighting
effect
control device
Prior art date
Application number
PCT/JP2016/067556
Other languages
English (en)
French (fr)
Inventor
弘勝 川野
敏貴 中井
井上　純一郎
Original Assignee
Ｐｉｏｎｅｅｒ ＤＪ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ｐｉｏｎｅｅｒ ＤＪ株式会社 filed Critical Ｐｉｏｎｅｅｒ ＤＪ株式会社
Priority to PCT/JP2016/067556 priority Critical patent/WO2017216850A1/ja
Priority to US16/307,667 priority patent/US10708998B2/en
Priority to JP2018523059A priority patent/JP6718963B2/ja
Publication of WO2017216850A1 publication Critical patent/WO2017216850A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/40—Rhythm
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
    • G10H1/0041—Recording/reproducing or transmission of music for electrophonic musical instruments in coded form
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G10H1/368—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems displaying animated or moving pictures synchronized with the music or audio part
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/105—Controlling the light source in response to determined parameters
    • H05B47/115—Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings
    • H05B47/12—Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings by detecting audible sound
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/155—Coordinated control of two or more light sources
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/165—Controlling the light source following a pre-assigned programmed sequence; Logic control [LC]
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/061—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction of musical phrases, isolation of musically relevant segments, e.g. musical thumbnail generation, or for temporal structure analysis of a musical piece, e.g. determination of the movement sequence of a musical work
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/076—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction of timing, tempo; Beat detection
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/021—Indicator, i.e. non-screen output user interfacing, e.g. visual or tactile instrument status or guidance information using lights, LEDs, seven segments displays
    • G10H2220/026—Indicator, i.e. non-screen output user interfacing, e.g. visual or tactile instrument status or guidance information using lights, LEDs, seven segments displays associated with a key or other user input device, e.g. key indicator lights
    • G10H2220/031—Blinking or flashing indicator lights
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155—User input interfaces for electrophonic musical instruments
    • G10H2220/405—Beam sensing or control, i.e. input interfaces involving substantially immaterial beams, radiation, or fields of any nature, used, e.g. as a switch as in a light barrier, or as a control device, e.g. using the theremin electric field sensing principle
    • G10H2220/411—Light beams
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2250/00—Aspects of algorithms or signal processing methods without intrinsic musical character, yet specifically adapted for or used in electrophonic musical processing
    • G10H2250/025—Envelope processing of music signals in, e.g. time domain, transform domain or cepstrum domain
    • G10H2250/035—Crossfade, i.e. time domain amplitude envelope control of the transition between musical sounds or melodies, obtained for musical purposes, e.g. for ADSR tone generation, articulations, medley, remix
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection

Definitions

  • the present invention relates to an illumination control device, an illumination control method, and an illumination control program.
  • the lighting control data related to the lighting content corresponding to the music is created in advance, and the lighting is controlled based on the lighting control data in synchronization with the music at the time of performance.
  • the desired illumination corresponding to is realized.
  • the music data to be analyzed is analyzed in advance and divided into music blocks (for example, A melody, B melody, rust, etc.), and an illumination pattern suitable for the image of each block Is specified.
  • an acoustic effect operation (adding a hit sound or reverberation, emphasizing the overall volume or bass / treble, etc.) or time axis for a song being played by a DJ (disc jockey) Special playback (scratch, tempo change, jump to cue point, etc.) is performed.
  • Such an operation performed at the site cannot be handled by illumination control using illumination control data created in advance as in Patent Document 1 or Patent Document 2 described above.
  • DJ effects and special playback operations are performed sensuously on music, and it is difficult to specify lighting effects suitable for effects and special playback for lighting control during music playback.
  • Patent Document 3 uses a lighting control unit that sends a control signal that changes the operation of the lighting device to the lighting device in accordance with an operation input to the operation input unit, and performs performance such as scratch performance.
  • the lighting can be controlled according to the operation.
  • Patent Document 3 described above, an operation such as a jog dial is detected, and an illumination operation corresponding to the operation amount is performed. For this reason, the lighting effect cannot be related to the operation result or effect reflected in the music by the input operation.
  • Patent Document 3 when the playback position is moved back and forth by scratch or the like, the illumination can be changed according to the movement of the jog dial. However, even if the music tempo is accelerated by the jog dial, it is reflected in the illumination control. It is only the movement of the jog dial that does not necessarily reflect the playback status of the music. Further, in Patent Document 3, even if a roll effect (an effect of playing a predetermined music section at double speed, etc.) is executed by operating a button of a music playback device or its controller, it is not associated with the roll timing. Lighting effects such as blinking according to can not be performed. As described above, in the illumination control of Patent Document 3, it is not possible to provide an appropriate illumination effect according to the operation on the music being played.
  • a roll effect an effect of playing a predetermined music section at double speed, etc.
  • An object of the present invention is to provide an illumination control device, an illumination control method, and an illumination control program capable of performing an appropriate illumination effect according to an operation applied to a music being reproduced.
  • An illumination control device of the present invention includes an information acquisition unit that acquires music information including at least beat position information of music data, an illumination control unit that controls the lighting device using the beat position as a minimum unit of a change point of lighting effects, Corresponding to the operation or processing executed by the operation when a pre-designated operation is performed on the music playback device that plays back the music data as music or the music playback control device that controls the music playback device An operation interlocking control unit that reflects a predetermined lighting effect on the control of the lighting device.
  • the lighting control method of the present invention is a computer system that acquires music information including at least beat position information of music data, controls the lighting device using the beat position as a minimum unit of a lighting effect change point, and the music data.
  • a pre-designated operation is performed on a music playback device that plays music as a music or a music playback control device that controls the music playback device, an illumination effect corresponding to the operation or processing executed by the operation is provided. This is reflected in the control of the lighting device.
  • the lighting control program of the present invention is characterized by causing a computer system to execute the above-described lighting control method of the present invention, which causes the computer system to function as the above-described lighting control device of the present invention.
  • FIG. 1 shows an acoustic lighting system 1 for a live space such as a club.
  • the acoustic lighting system 1 includes a music playback device 10 that performs music playback, a lighting device 20 that performs lighting in a live space, and a lighting control device 30 that controls the lighting device 20.
  • the music playback device 10 includes a general-purpose PC (personal computer) in which music playback software is incorporated, and an acoustic system 13 connected to the PC.
  • the playback control unit 12 is configured by music playback software, and the music data 11 stored in the PC is sent to the acoustic system 13 as an audio signal, so that music based on the music data 11 can be played back in the live space. it can.
  • the music data 11 is supplied to the music playback device 10 via a disk medium or the like, and is also supplied to the music playback device 10 via network communication.
  • the music reproducing device 10 is not limited to the PC audio system using the general-purpose PC as described above, but may be a dedicated disk reproducing device or a music data reproducing device.
  • a DJ controller 19 music reproduction control device is connected to the music reproduction device 10 for a user DJ (disc jockey) to perform special reproduction such as scratch or effect operation.
  • the DJ controller 19 has controls (jog dial, pad, rotary volume, slider volume, switch, and selector) necessary for playback control of the music played back by the music playback device 10.
  • the rotary volume and slider volume allow continuous variable operation of parameters related to music reproduction (total volume, bass volume, channel distribution operation, etc.).
  • the switch and selector can perform intermittent variable operations such as on / off and selection related to music playback.
  • pad operations such as adding an arbitrary effect assigned in advance can be performed.
  • the jog dial can perform a jog operation for special reproduction that changes the time position when reproducing music data, such as scratch.
  • the DJ controller 19 is not limited to a music playback control device that is externally connected to the music playback device 10, and may be installed in the music playback device 10.
  • the lighting device 20 performs lighting in a live space or event space, and includes various lighting fixtures 21 that are frequently used as live equipment.
  • the lighting fixture 21 is, for example, a perlite, a strobe light, a moving head, or the like often used for stage lighting.
  • parameters such as irradiation direction and operating speed can be designated by the fixtures in addition to intermittent light projection and brightness.
  • the lighting fixtures 21 of the lighting device 20 are each based on the DMX512 standard, are connected to each other based on the standard, and transmit a lighting control signal 22 based on the standard.
  • Each lighting fixture 21 can be made to perform intended lighting.
  • the DMX512 standard is a general standard in the stage lighting field, but the lighting device 20 and the lighting control device 30 described later are not limited to the same standard, and may be based on other standards.
  • the lighting control device 30 is a general-purpose PC (personal computer), built-in equipment, or the like in which lighting control software that executes control according to the present invention is incorporated. In addition, when using PC for the illumination control apparatus 30, you may share the same thing as PC used for the music reproduction apparatus 10 mentioned above.
  • the illumination control device 30 includes an information acquisition unit 31, an illumination control information editing unit 32, an illumination control unit 34, and an operation interlocking control unit 39 (including an illumination effect setting unit 38) by the above-described illumination control software.
  • the information acquisition unit 31 and the lighting control information editing unit 32 create lighting control data 33 corresponding to the music data 11.
  • the illumination control unit 34 controls the illumination device 20 based on the created illumination control data 33.
  • the illumination control unit 34 is configured by DMX control software executed on the PC of the illumination control device 30.
  • the illumination control data 33 is a DMX control program processed by the illumination control unit 34.
  • the illumination control data 33 and the illumination control unit 34 are each compliant with the DMX512 standard of the illumination device 20, and the illumination control unit 34 is described by describing the illumination operation in the illumination control data 33 based on the standard.
  • the lighting device 20 can execute a desired lighting operation.
  • the lighting control unit 34 may be a hardware DMX controller connected to a PC used as the lighting control device 30 instead of the DMX control software.
  • the lighting control unit 34 is also configured according to the standard.
  • the lighting control data 33 is assigned lighting control information corresponding to each part of the music data 11.
  • the music data 11 includes, for example, intro, A melody, B melody, rust, break, A melody repeat, and outro blocks 111.
  • illumination control information 331 corresponding to each block 111 is set. That is, individual lighting control information 331 is assigned to each of intro, A melody, B melody, rust, break, A melody repetition, and outro.
  • the information acquisition unit 31 and the lighting control information editing unit 32 perform processing in units of the beat position of the music.
  • the information acquisition unit 31 reads the music data 11 from the music playback device 10, performs music analysis of the recorded sound data, detects the beat position and tempo of the music, and records it as music analysis information.
  • the beat position can be recorded by the time position on each music data 11.
  • the information acquisition unit 31 may detect the bar position by identifying the drum sound and the snare sound, and detecting the first and third beat positions and the second and fourth beat positions from these.
  • a block composed of a plurality of measures for example, A melody, B melody, rust, etc.
  • a technique for performing such music analysis for example, a technique described in JP 2010-97084 A can be employed.
  • the illumination control information editing unit 32 creates illumination control data 33 to be passed to the above-described illumination control unit 34.
  • a plurality of reference positions for assigning illumination control information are arranged based on the beat positions in the music analysis information obtained by the information acquisition unit 31 described above.
  • FIG. 3 for example, blank illumination control data 333 having a length corresponding to the music data 11 is created, and each time position corresponding to each beat position of the blank illumination control data 333 is set as a reference. Record the position 332.
  • blank illumination control data 333 having a length corresponding to the music data 11 and divided into fine units at a large number of reference positions 332 is obtained.
  • the illumination control information editing unit 32 edits the blank illumination control data 333 partitioned at the reference position 332, and assigns the illumination control information 331 (see FIG. 2) to the corresponding portion. As shown in FIG. 4, for example, a DJ as a user determines the illumination image 334 based on the image of each block 111 of the music data 11. Then, the lighting control information 331 that embodies the lighting image 334 is designated and assigned to the blank lighting control data 333.
  • the designation of the lighting fixture 21 in the lighting device 20 and the designation of parameters of each lighting fixture 21 are used. It is done.
  • the lighting control information 331 may be defined by the user each time it is designated, or a lighting control information set having high versatility is preset in the lighting control information editing unit 32 in advance, and the user may select this. Good.
  • lighting that evokes a predetermined image including emotional images such as lively, fun, lonely, sad, scary from simple images such as dark, bright, red, and blue
  • a pattern may be created in advance.
  • blank illumination control data 333 is displayed as a bar graph on the PC screen, and a grid indicating the reference position 332 is displayed on the bar graph. Then, the user can specify the lighting control information 331 at the approximate position of the corresponding section of the grid displayed on the screen by using a keyboard or a pointing device such as a touch pad connected to the PC. In response to such designation, the illumination control information editing unit 32 performs a process of aligning the illumination control information 331 with the nearest reference position 332 even if the designated illumination control information 331 is an approximate position designation.
  • the illumination control information editing unit 32 registers the illumination control information 331 on the blank illumination control data 333 in units of the reference position 332. That is, the set position of the lighting control information 331 is forcibly adjusted (so-called suction) to the nearest reference position 332. For example, if the lighting control information set A is set in the A melody portion of the music, the lighting control information editing unit 32 corresponds to the lighting control information set A in a portion corresponding to the A melody portion of the lighting control data 33. Lighting control information 331 is embedded. As a result, the illumination control information editing unit 32 creates illumination control data 33 in which the illumination control information 331 is assigned to the reference position 332 in a uniform manner.
  • the head position of the lighting control information 331 in the lighting control data 33 can be intentionally shifted from the nearest reference position 332.
  • the numerical value of the time position of the lighting control information 331 assigned to the lighting control data 33 can be changed to a numerical value deviated from the reference position 332 by a user operation.
  • the time position may be changed by the user performing an operation of shifting the start position of the illumination control information 331 displayed on the screen to an arbitrary position on the illumination control data 33.
  • the illumination control data 33 to which the illumination control information 331 is assigned by the illumination control information editing unit 32 is referred to by the illumination control unit 34.
  • the illumination control unit 34 controls the illumination device 20 based on the created illumination control data 33.
  • the illumination control unit 34 controls the illumination device 20 by processing the illumination control data 33 in synchronization with the reproduction operation in which the reproduction control unit 12 of the music reproduction device 10 processes and reproduces the music data 11. Execute the desired lighting operation.
  • an operation interlock control unit 39 including an illumination effect setting unit 38 is connected to the illumination control unit 34, and an operation signal of the DJ controller 19 is connected to the operation interlock control unit 39.
  • the operation interlocking control unit 39 and the DJ controller 19 are not necessarily connected directly, and the operation signal of the DJ controller 19 input to the music playback device 10 is also transferred to the operation interlocking control unit 39. It is good. Instead of the operation signal of the DJ controller 19, the current playback position change amount or playback speed change amount generated in the playback control unit 12 by the operation of the DJ controller 19 may be acquired from the playback control unit 12.
  • the operation interlocking control unit 39 monitors the operation signal of the DJ controller 19, and when an operation is performed on one of the operators (for example, a pad) designated in advance in the lighting effect setting information 18, the operation content (for example, a roll) (Effect execution) is detected. Then, the illumination effect setting unit 38 refers to the preset illumination effect setting information 18, acquires illumination effect information corresponding to the detected operation content, and sends this illumination effect information to the illumination control unit 34.
  • the lighting effect setting information 18 operators (such as a rotary volume, slider volume, pad, jog dial, switch, and selector) of the DJ controller 19 are designated, and these “operators”.
  • “Illumination effect information” that defines the illumination effect corresponding to the “process” executed by the operation is designated. For example, when the operation of the operation unit “Rotary Volume” is the process “Increase / Lower Volume”, select “Shifting the lighting to blue when increasing, shifting the lighting to red when decreasing” as the corresponding lighting effect information. Is done.
  • the reproduction When the reproduction of the music data 11 reaches the next beat position P62, the reproduction jumps to the jump destination P63 (for example, the first beat position of the break portion) and is set to the break portion of the illumination control data 33 from there. Illumination L63 is performed.
  • the jump destination P63 for example, the first beat position of the break portion
  • the operation of the operation element “A pad” is a process “add roll effect”, that is, an operation that repeatedly reproduces a specific section and changes the cycle of repeated reproduction
  • the corresponding lighting effect information “ “Project Flash” is selected.
  • FIG. 7 in the B melody portion of the music data 11, illumination L71 set in the B melody portion of the illumination control data 33 is performed.
  • the cue button is pressed at the position P71 of the music data 11, the lighting from the position P71 to the beat position P72 after a predetermined number of beats is based on the lighting effect information corresponding to the process “roll effect addition”. Is "flashes at intervals of rolls”.
  • the reproduction of the music data 11 reaches the next beat position P72, the process returns to the illumination L71 set in the B melody portion of the illumination control data 33.
  • the crossfader when the operation of the operation element “crossfader” is the process “change in volume ratio of a plurality of music pieces”, that is, an operation for changing the ratio of reproduction volume between a plurality of music pieces (crossfade). “Transition of lighting effects set for each music piece” is selected as information.
  • the crossfader (horizontal slider volume) of a general DJ controller outputs the volume of the music played on the left channel A at 100% when the knob is at the left end, and the right side The volume of music played on channel B is 0%.
  • the knob is at the right end
  • the volume of the music played on the left channel A is 0%
  • the volume of the music played on the right channel B is 100%.
  • the volume of the left channel A is increased or decreased as indicated by the line A
  • the volume of the right channel B is increased or decreased as indicated by the line B.
  • the crossfader knob is moved to the left end, and the preceding music is played on the left channel A (the preceding music is output at 100%).
  • the succeeding music is played on the right channel B (the succeeding music is 0%, that is, not output).
  • the knob of the crossfader is moved from the left end to the right side, the volume ratio of the channel A is decreased and the volume ratio of the channel B is increased according to the movement. That is, as the crossfader moves, the volume of the preceding music (left channel A) gradually decreases, and the volume of the subsequent music (right channel B) gradually increases.
  • the volume of channel A (preceding music) is 0% and the volume of channel B (following music) is 100%. That is, by gradually moving the crossfader, a smooth transition from the preceding music to the succeeding music can be performed.
  • the music data A as the preceding music is played on the left channel A.
  • the crossfader is at the left end, and the volume of channel A is 100%, that is, only the preceding music of channel A is played, that is, output as sound.
  • the illumination is performed by the illumination effect data A set in the music data A.
  • the music data B which is the subsequent music, is played on the right channel B. If the crossfader remains at the left end, that is, if the volume of the right channel B is 0%, the subsequent music of channel B is not output (played) as sound.
  • the knob of the crossfader is moved from the left end to the right end over a predetermined time.
  • the volume of the left channel A is decreased from 100% to 0%
  • the volume of the right channel B is increased from 0% to 100%
  • the crossfade from the preceding music to the subsequent music is performed.
  • illumination based on the illumination effect information L101 at the position of the illumination effect data A set in the music data A that is the preceding music is performed at the position P101.
  • the ratio of the lighting effect is also changed in the same manner as the change in the volume ratio of each channel A and B. That is, the ratio of the setting value of the lighting effect of the lighting effect data A corresponding to the preceding music is reduced from 100% to 0%, and the ratio of the setting value of the lighting effect of the lighting effect data B corresponding to the subsequent music is from 0%. Increase to 100%.
  • illumination by the lighting effect information L102 that changes continuously (crossfade) from the lighting effect information L101 of the lighting effect data A at the position P101 to the lighting effect information L103 of the lighting effect data B at the position P102 can be carried out
  • processing by such operations includes adjustments related to music playback (level adjustments in other frequency bands such as high sound volume) and effects (pitch shift, key change, reverberation sound Addition etc.), increase / decrease of music playback speed, tempo change, etc. can be employed.
  • the operation interlocking control unit 39 detects an operation (for example, pad operation) on the jog dial of the DJ controller 19
  • illumination effect information for example, roll effect execution
  • the lighting effect information can be set in advance in the lighting effect setting unit 38 by the DJ or the manufacturer of the lighting control device 30 as the lighting effect setting information 18.
  • the illumination control device 30 of the present embodiment it is possible to perform an appropriate illumination effect according to the operation applied to the music being played. And, as the lighting effect for the operation, the processing “roll effect addition” by the operation element “A pad” or “short reverb addition” by the operation element “B pad” is adopted, so that the illumination state following the change amount by the effect operation This change can be performed by the lighting device 20.
  • the “roll effect addition” process by the operator “A pad” is an effect operation that repeatedly reproduces a specific section of a song and changes the cycle of repeated reproduction.
  • “flash is thrown at roll intervals”.
  • the “volume increase / decrease” process using the slider “slider volume” and the “bass volume increase / decrease” process using the operator “rotary volume” have been adopted.
  • the lighting device 20 can be caused to change the illumination state following the change in each volume.
  • the music playback device 10 is not limited to a PC audio system, and may be a dedicated disk playback device or a music data playback device.
  • the music playback device 10 is not limited to a DJ controller 19 that is a separate music playback control device, and may be a music playback device that has a DJ controller for DJ operation.
  • the illumination control device 30 detects the operation of the operator installed in the music reproducing device 10.
  • the illumination control device 30 and the music playback device 10 may be configured integrally.
  • the illumination control device 30 and the music playback device 10 may be realized on the same PC by loading software that realizes the illumination control device 30 and the music playback device 10 in the same embodiment.
  • the lighting device 20 and the lighting control device 30 are not limited to those based on the DMX512 standard, but may be based on other standards.
  • the beat position is used as the reference position in the music by using the beat position in the music analysis information
  • the position of the lighting control information is used as the reference position of the lighting control information.
  • the unit is not limited to an arbitrary length, but is a measure unit obtained as music analysis information or a block unit composed of a plurality of measures (for example, A melody, B melody, rust, etc.), and lighting control information is provided for each unit. It may be settable. Note that the reference position may be based on the beat position even when the unit is a measure or a block.
  • the user's operation on the music playback control device is detected, and the lighting effect is changed according to the type, change amount, change speed, etc. of the operation.
  • the lighting effect can be changed according to the operation based on the lighting effect state at the time when the user operation is detected. According to this, it is possible to produce a more realistic effect with the illumination state at the time of operation as a reference.
  • the lighting effect in the lighting control device may be returned to the initial value.
  • the lighting effect can be changed according to the operation based on the initial value of the lighting control device, the same lighting effect can be obtained for the same operation, that is, the same effect, and the sense of unity in the lighting effect can be obtained. You can also get an impression of specific effects.
  • the illumination control data 33 is created in the illumination control device 30, but the illumination control data 33 may be edited externally and read into the illumination control device 30. As described above, when the illumination control data 33 is created outside, the information acquisition unit 31 and the illumination control information editing unit 32 of the illumination control device 30 may be omitted.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)

Abstract

照明制御装置（３０）は、楽曲データ（１１）の少なくとも拍位置情報を含む楽曲情報を取得する情報取得部（３１）と、拍位置を照明演出の変化点の最小単位として照明装置（２０）を制御する照明制御部（３４）と、楽曲データを楽曲として再生する楽曲再生装置（１０）または楽曲再生装置を制御する楽曲再生制御装置（１９）に対して予め指定された操作がなされた際に、この操作またはこの操作で実行される処理に対応した所定の照明演出を、照明装置の制御に反映する操作連動制御部（３９）と、を備える。

Description

照明制御装置、照明制御方法および照明制御プログラム
　本発明は、照明制御装置、照明制御方法および照明制御プログラムに関する。
　コンサートやクラブシーンにおいて、音楽に対応した照明あるいは楽曲に同期して照明を変化させることは、演出上重要な要素である。
　楽曲に対応した照明を用いた緻密な演出効果を得るためには、楽曲を理解した専属の照明スタッフが操作することが望ましい。しかし、小規模なコンサートやクラブ、イベント等では、費用の都合などから、専属スタッフを常駐させることが困難である。
　これに対し、楽曲に対応した照明の自動化が試みられている。例えば、特許文献１あるいは特許文献２の技術は、楽曲に対応した照明内容に関する照明制御データを予め作成しておき、演奏時に楽曲と同期して照明制御データに基づき照明を制御することで、楽曲に対応した所望の照明を実現している。
　照明制御データの作成にあたっては、対象となる楽曲データに対して、予め楽曲解析を行い、楽曲のブロック（例えばＡメロ、Ｂメロ、サビなど）に区画し、各ブロックのイメージに適した照明パターンを指定する等がなされている。
　前述のようなコンサートやクラブシーンにおいて、ＤＪ（ディスクジョッキー）が再生中の楽曲に対して、音響的なエフェクト操作（ヒット音や残響の追加、全体音量や低音高音の強調など）、あるいは時間軸を変化させる特殊再生（スクラッチ、テンポ変更、キューポイントへのジャンプなど）を行う。
　このような現場で行われる操作については、前述した特許文献１あるいは特許文献２のように、予め作成しておいた照明制御データを用いた照明制御では対応できない。
　とくに、ＤＪによるエフェクトや特殊再生の操作は、楽曲に対して感覚的に実行されるものであり、楽曲の再生中に、エフェクトや特殊再生に適した照明演出を照明制御に指定することは困難であった。
　これに対し、特許文献３の技術は、操作入力部に入力された操作に応じて、照明装置の動作を変化させる制御信号を照明装置に送出する照明制御部を用い、スクラッチ演奏などのパフォーマンスの操作に合わせて照明を制御できるようにしている。
特許第３７４３０７９号公報 特開２０１０－１９２１５５号公報 特開２００７－３１１１５５号公報
　前述した特許文献３では、ジョグダイヤルなどの操作を検出し、その操作量に応じた照明動作を行わせるものであった。
　このため、入力された操作によって楽曲に反映される操作結果あるいは効果に対して、照明演出を関係させることができない。
　例えば、特許文献３では、スクラッチなどで再生位置を前後に振った際に、ジョグダイヤルの動きに応じて照明を変化させることができるものの、ジョグダイヤルで楽曲のテンポを速めたとしても、照明制御に反映されるのはジョグダイヤルの動きだけであり、楽曲の再生状況を必ずしも反映しない。
　また、特許文献３では、楽曲再生装置あるいはそのコントローラのボタンを操作して、ロールエフェクト（所定の楽曲区間を倍速等で再生するエフェクト）を実行させても、ロールのタイミングと関連付けされないため、ロールに応じた点滅などの照明演出を行うことはできない。
　このように、特許文献３の照明制御では、再生中の楽曲に対する操作に応じて、適切な照明演出を提供することができなかった。
　本発明の目的は、再生中の楽曲に加えられる操作に応じた適切な照明演出が行える照明制御装置、照明制御方法および照明制御プログラムを提供することにある。
　本発明の照明制御装置は、楽曲データの少なくとも拍位置情報を含む楽曲情報を取得する情報取得部と、前記拍位置を照明演出の変化点の最小単位として照明装置を制御する照明制御部と、前記楽曲データを楽曲として再生する楽曲再生装置または前記楽曲再生装置を制御する楽曲再生制御装置に対して予め指定された操作がなされた際に、前記操作または前記操作で実行される処理に対応した所定の照明演出を、前記照明装置の制御に反映する操作連動制御部と、を備えることを特徴とする。
　本発明の照明制御方法は、コンピュータシステムで、楽曲データの少なくとも拍位置情報を含む楽曲情報を取得し、前記拍位置を照明演出の変化点の最小単位として照明装置を制御するとともに、前記楽曲データを楽曲として再生する楽曲再生装置または前記楽曲再生装置を制御する楽曲再生制御装置に対して予め指定された操作がなされた際に、前記操作または前記操作で実行される処理に対応した照明演出を、前記照明装置の制御に反映することを特徴とする。
　本発明の照明制御プログラムは、コンピュータシステムを、前述した本発明の照明制御装置として機能させることを特徴とする前述した本発明の照明制御方法をコンピュータシステムで実行させることを特徴とする。
本発明の一実施形態の構成を示すブロック図。 楽曲データに対応した照明制御データを示す模式図。 楽曲の拍位置解析およびブランクの照明制御データを示す模式図。 楽曲の各部に照明制御情報を設定する処理を示す模式図。 操作子、処理および照明演出設定情報の関係を示す模式図。 ジャンプ操作があった際の照明制御を示す模式図。 ロールエフェクト操作があった際の照明制御を示す模式図。 スライダーボリューム操作があった際の照明制御を示す模式図。 クロスフェーダーの音量比率を示す模式図。 クロスフェーダー操作があった際の照明制御を示す模式図。
　以下、本発明の一実施形態を図面に基づいて説明する。
　図１には、クラブ等のライブスペース用の音響照明システム１が示されている。
　音響照明システム１は、音楽再生を行う楽曲再生装置１０と、ライブスペース内の照明を行う照明装置２０と、照明装置２０を制御する照明制御装置３０とを備えている。
　楽曲再生装置１０は、音楽再生ソフトウェアが組み込まれた汎用のＰＣ（パーソナルコンピュータ）と、このＰＣに接続された音響システム１３とを有する。ＰＣでは音楽再生ソフトウェアにより再生制御部１２が構成され、ＰＣにストアされた楽曲データ１１を音声信号として音響システム１３に送ることで、この楽曲データ１１に基づく音楽をライブスペース内に再生することができる。
　楽曲データ１１は、ディスク媒体などで楽曲再生装置１０に供給されるほか、ネットワーク通信を介して楽曲再生装置１０に供給される。
　なお、楽曲再生装置１０としては、前述のような汎用ＰＣを用いたＰＣオーディオシステムに限らず、専用のディスク再生装置あるいは音楽データ再生装置であってもよい。
　楽曲再生装置１０には、ユーザであるＤＪ（ディスクジョッキー）が、スクラッチ等の特殊再生あるいはエフェクト操作をするためのＤＪコントローラ１９（楽曲再生制御装置）が接続されている。
　ＤＪコントローラ１９は、楽曲再生装置１０で再生される楽曲の再生制御に必要な操作子（ジョグダイヤル、パッド、ロータリーボリューム、スライダーボリューム、スイッチおよびセレクタ）を有する。
　このうち、ロータリーボリュームおよびスライダーボリュームでは、楽曲再生に関するパタメータ（全体音量や低音音量、チャンネル振り分け動作など）の連続的な可変操作が行える。
　スイッチおよびセレクタでは、楽曲の再生に関するオンオフや選択など、断続的な可変操作が行える。
　パッドでは、予めアサインされている任意のエフェクトの追加などのパッド操作が行える。
　ジョグダイヤルでは、スクラッチなど、楽曲データの再生時の時刻位置を変化させる特殊再生に対するジョグ操作が行える。
　なお、ＤＪコントローラ１９は、楽曲再生制御装置として楽曲再生装置１０に外部接続されるものに限らず、楽曲再生装置１０に設置されていてもよい。
　照明装置２０は、ライブスペースやイベントスペース内の照明を行うものであり、ライブ設備として多用される各種の照明器具２１を備えている。
　照明器具２１は、舞台照明に多用される、例えばパーライト、ストロボライト、ムービングヘッドなどである。これらの照明器具２１においては、それぞれ投光の断続、明るさのほか、器具によって照射方向、動作速度などのパラメータを指定することができる。
　これらのパラメータを制御するために、照明装置２０の照明器具２１は、それぞれＤＭＸ５１２規格に準拠するとともに、同規格に基づいて互いに接続され、同規格に準拠した照明制御信号２２を送信することで、各照明器具２１に所期の照明を実行させることができる。
　なお、ＤＭＸ５１２規格は舞台照明分野で一般的な規格であるが、照明装置２０および後述する照明制御装置３０は同規格に限らず、他の規格に基づくものであってもよい。
　照明制御装置３０は、汎用のＰＣ（パーソナルコンピュータ）や組み込み機器等に、本発明に基づく制御を実行する照明制御ソフトウェアが組み込まれたものである。なお、照明制御装置３０にＰＣを用いる場合、前述した楽曲再生装置１０に用いるＰＣと同じものを共用してもよい。
　照明制御装置３０には、前述した照明制御ソフトウェアにより、情報取得部３１、照明制御情報編集部３２、照明制御部３４、操作連動制御部３９（照明演出設定部３８を含む）が構成される。
　このうち、情報取得部３１および照明制御情報編集部３２は、楽曲データ１１に対応した照明制御データ３３を作成するものである。
　一方、照明制御部３４は、作成された照明制御データ３３に基づいて照明装置２０を制御するものである。本実施形態において、照明制御部３４は、照明制御装置３０のＰＣ上で実行されるＤＭＸコントロールソフトウェアで構成される。また、照明制御データ３３は、照明制御部３４で処理されるＤＭＸ制御プログラムとされている。
　これらの照明制御データ３３および照明制御部３４は、各々照明装置２０のＤＭＸ５１２規格に準拠しており、同規格に基づいて照明制御データ３３に照明動作を記述しておくことにより、照明制御部３４により照明装置２０に所望の照明動作を実行させることができる。
　なお、照明制御部３４は、ＤＭＸコントロールソフトウェアではなく、照明制御装置３０として用いるＰＣに接続されたハードウェアＤＭＸコントローラであってもよい。また、照明装置２０がＤＭＸ規格とは別の規格に基づく場合、照明制御部３４も当該規格に応じて構成される。
　本実施形態において、照明制御データ３３には、楽曲データ１１の各部に対応した照明制御情報が割り当てられる。
　図２に示すように、楽曲データ１１は、例えば、イントロ、Ａメロ、Ｂメロ、サビ、ブレイク、Ａメロ繰り返し、アウトロの各ブロック１１１で構成される。
　照明制御データ３３には、各ブロック１１１に対応した照明制御情報３３１が設定される。つまり、イントロ、Ａメロ、Ｂメロ、サビ、ブレイク、Ａメロ繰り返し、アウトロの各々に、それぞれ個別の照明制御情報３３１が割り当てられる。
　照明制御情報３３１の割り当てにあたって、情報取得部３１および照明制御情報編集部３２により、楽曲の拍位置を単位とした処理が行われる。
　情報取得部３１は、楽曲再生装置１０から楽曲データ１１を読み込み、記録された音データの楽曲解析を行うことにより、楽曲の拍位置およびテンポを検出し、楽曲解析情報として記録する。楽曲解析情報において、拍位置は、各々の楽曲データ１１上の時間位置により記録することができる。
　さらに、情報取得部３１は、ドラム音およびスネア音を識別し、これらから１，３拍位置および２，４拍位置を検出する等により、小節位置を検出してもよい。また、楽曲のキーおよびコードを解析し、フレーズの分布を検出する等により、複数小節からなるブロック（例えばＡメロ、Ｂメロ、サビなど）を検出してもよい。
　このような楽曲解析を行う技術としては、例えば、特開２０１０－９７０８４号公報に記載の技術が採用できる。
　照明制御情報編集部３２は、前述した照明制御部３４に渡すべき照明制御データ３３を作成する。この際、前述した情報取得部３１で得られた楽曲解析情報における拍位置に基づいて、照明制御情報を割り当てるための複数の基準位置を配置しておく。
　図３に示すように、例えば、楽曲データ１１に対応した長さのブランクの照明制御データ３３３を作成しておき、このブランクの照明制御データ３３３の各拍位置に対応する時間位置に、それぞれ基準位置３３２を記録してゆく。その結果、楽曲データ１１に対応した長さであって、多数の基準位置３３２で細かな単位に区画されたブランクの照明制御データ３３３が得られる。
　照明制御情報編集部３２は、基準位置３３２で区画されたブランクの照明制御データ３３３に対して編集を行い、その該当部分に照明制御情報３３１（図２参照）を割り付けてゆく。
　図４に示すように、例えば、ユーザであるＤＪが、楽曲データ１１の各ブロック１１１のイメージに基づいて、照明イメージ３３４を決定する。そして、照明イメージ３３４を具現化する照明制御情報３３１を指定し、ブランクの照明制御データ３３３に割り当ててゆく。
　照明制御情報３３１としては、前述した照明装置２０における照明器具２１の指定、および各照明器具２１のパラメータ（投光の断続、明るさのほか、器具によって照射方向、動作速度など）の指定が用いられる。
　照明制御情報３３１は、指定のつどユーザが定義してもよいし、予め照明制御情報編集部３２に汎用性が高い照明制御情報セットをプリセットしておき、これをユーザが選択するようにしてもよい。
　さらに、照明制御情報セットを組み合わせて所定のイメージ（暗い、明るい、赤系、青系などの単純イメージから、賑やか、楽しい、寂しげ、悲しい、恐いなどの情感イメージを含む）を喚起するような照明パターンを予め作成しておいてもよい。
　照明制御情報３３１を割り当てる操作の際には、例えば、ＰＣ画面上にブランクの照明制御データ３３３をバーグラフで表示し、このバーグラフには基準位置３３２を示すグリッドを表示させておく。そして、ユーザが、ＰＣに接続されたキーボードや、タッチパッドなどのポインティングデバイスを用いて、画面に表示されたグリッドの該当区画のおおよその位置に、照明制御情報３３１を指定することができる。
　このような指定に対し、照明制御情報編集部３２は、指定された照明制御情報３３１がおおよその位置指定であっても、この照明制御情報３３１を最寄りの基準位置３３２に揃える処理を行う。
　すなわち、照明制御情報編集部３２は、図４に示すように、照明制御情報３３１を、基準位置３３２を単位として、ブランクの照明制御データ３３３上に登録する。つまり、設定された照明制御情報３３１は、その先頭位置が、最寄りの基準位置３３２に強制的に位置調整（いわゆる吸着）される。
　例えば、楽曲のＡメロ部分に照明制御情報セットＡが設定されたならば、照明制御情報編集部３２は、照明制御データ３３のＡメロ部分に対応する部位に、照明制御情報セットＡに対応する照明制御情報３３１が埋め込まれる。
　これにより、照明制御情報編集部３２においては、照明制御情報３３１が基準位置３３２にきちんと揃えて割り当てられた照明制御データ３３が作成される。
　なお、照明制御データ３３における照明制御情報３３１の先頭位置は、最寄りの基準位置３３２から意図的にずらすこともできる。具体的には、照明制御データ３３に割り当てられた照明制御情報３３１の時間位置の数値を、ユーザの操作により、基準位置３３２からずれた数値に変更することができる。あるいは、ユーザが、画面上に表示された照明制御情報３３１の先頭位置を、照明制御データ３３上の任意の位置にずらす操作を行うことで、時間位置を変更するようにしてもよい。
　照明制御情報編集部３２によって照明制御情報３３１が割り当てられた照明制御データ３３は、照明制御部３４で参照される。
　照明制御部３４は、前述した通り、作成された照明制御データ３３に基づいて照明装置２０を制御する。
　照明制御部３４は、通常は、楽曲再生装置１０の再生制御部１２が、楽曲データ１１を処理して再生する再生動作と同期して、照明制御データ３３を処理して照明装置２０を制御し、所期の照明動作を実行させる。
　ここで、ユーザであるＤＪが、ＤＪコントローラ１９で楽曲の再生に関する操作を行った際には、操作に応じて照明制御部３４による照明装置２０の制御を変化させる。
　このために、照明制御部３４には照明演出設定部３８を含む操作連動制御部３９が接続され、操作連動制御部３９にはＤＪコントローラ１９の操作信号が接続されている。
　なお、操作連動制御部３９とＤＪコントローラ１９とが必ずしも直接接続される必要はなく、楽曲再生装置１０に入力されたＤＪコントローラ１９の操作信号が操作連動制御部３９にも転送されるような構成としてもよい。
　ＤＪコントローラ１９の操作信号ではなく、再生制御部１２から、ＤＪコントローラ１９の操作によって再生制御部１２に生じる現在の再生位置の変更量あるいは再生速度の変更量を取得してもよい。
　操作連動制御部３９は、ＤＪコントローラ１９の操作信号を監視し、予め照明演出設定情報１８で指定された操作子のいずれか（例えばパッド）に操作があった際に、その操作内容（例えばロールエフェクト実行）を検出する。そして、照明演出設定部３８により、予め設定された照明演出設定情報１８を参照し、検出した操作内容に対応した照明演出情報を取得し、この照明演出情報を照明制御部３４に送る。
　図５に示すように、照明演出設定情報１８には、ＤＪコントローラ１９の操作子（ロータリーボリューム、スライダーボリューム、パッド、ジョグダイヤル、スイッチおよびセレクタなど）が指定されているとともに、これらの「操作子」の操作により実行される「処理」に対応する照明演出を規定する「照明演出情報」が指定されている。
　例えば、操作子「ロータリーボリューム」の操作が処理「低音音量増減」であるとき、対応する照明演出情報として「増加時は照明を青系にシフト、減少時は照明を赤系にシフト」が選択される。
　図５において、操作子「キューボタン」の操作が処理「キューポイントへのジャンプ」つまり楽曲の再生位置の変更であるとき、対応する照明演出情報として「ジャンプ時点で最大光量」が選択される。
　図６に示すように、楽曲データ１１のＢメロ部分では、照明制御データ３３のＢメロ部分に設定された照明Ｌ６１が行われている。ここで、楽曲データ１１の位置Ｐ６１でキューボタンが押された場合、位置Ｐ６１から次の拍位置Ｐ６２までは、処理「キューポイントへのジャンプ」に対応する照明演出情報に基づいて、照明が「最大光量」とされる。そして、楽曲データ１１の再生が次の拍位置Ｐ６２に達したら、再生はジャンプ先であるＰ６３（例えばブレイク部分の先頭拍位置）までジャンプし、そこから照明制御データ３３のブレイク部分に設定されている照明Ｌ６３が行われる。
　図５において、操作子「Ａパッド」の操作が処理「ロールエフェクト追加」、つまり特定区間を反復再生しかつ反復再生の周期を変化させる操作であるとき、対応する照明演出情報として「ロール間隔でフラッシュを投光」が選択される。
　図７に示すように、楽曲データ１１のＢメロ部分では、照明制御データ３３のＢメロ部分に設定された照明Ｌ７１が行われている。ここで、楽曲データ１１の位置Ｐ７１でキューボタンが押された場合、位置Ｐ７１から所定の拍数後の拍位置Ｐ７２までは、処理「ロールエフェクト追加」に対応する照明演出情報に基づいて、照明が「ロール間隔でフラッシュを投光」とされる。そして、楽曲データ１１の再生が次の拍位置Ｐ７２に達したら、照明制御データ３３のＢメロ部分に設定された照明Ｌ７１に戻る。
　図５において、操作子「スライダーボリューム」の操作が処理「音量増減」であるとき、対応する照明演出情報として「増加時は明るく、減少時は暗く」が選択される。
　図８に示すように、楽曲データ１１のＢメロ部分では、照明制御データ３３のＢメロ部分に設定された照明Ｌ８１が行われている。ここで、楽曲データ１１の位置Ｐ８１から位置Ｐ８２にかけて、音量調整用のスライダーボリュームが、音量Ｖ８１から音量Ｖ８２まで下げられた場合、位置Ｐ８１から位置Ｐ８２までは、処理「音量増減」に対応する照明演出情報に基づいて、「減少時は暗く」された照明Ｌ８２が行われる。ボリューム操作が終わった位置Ｐ８２からは、元の明るさの照明Ｌ８１に戻る。
　図５において、操作子「クロスフェーダー」の操作が、処理「複数楽曲の音量比率変化」、つまり複数楽曲間での再生音量の比率を変化させる操作（クロスフェード）であるとき、対応する照明演出情報として「各楽曲に設定された照明演出の遷移」が選択される。
　図９に示すように、一般的なＤＪコントローラのクロスフェーダー（横置きスライダーボリューム）は、ノブが左端にあるとき、左側のチャンネルＡで再生される楽曲の音量が１００％で出力され、右側のチャンネルＢで再生される楽曲の音量が０％となる。一方、ノブが右端にあるとき、左側のチャンネルＡで再生される楽曲の音量が０％、右側のチャンネルＢで再生される楽曲の音量が１００％となる。そして、クロスフェーダーを左右に移動させることで、左側のチャンネルＡは線Ａに示すように音量が増減され、右側のチャンネルＢは線Ｂに示すように音量が増減される。
　例えば、クロスフェーダーのノブを左端に移動させ、左側のチャンネルＡで先行楽曲を再生させる（先行楽曲が１００％で出力される）。この状態で、右側のチャンネルＢで後続楽曲を再生させる（後続楽曲は０％つまり出力されない）。
　ここで、クロスフェーダーのノブを左端から右側へ移動させると、移動に従ってチャンネルＡの音量比率が減少し、チェンネルＢの音量比率が増加してゆく。つまり、クロスフェーダーの移動に伴って、先行楽曲（左側のチャンネルＡ）の音量が漸減し、後続楽曲（右側のチャンネルＢ）の音量が漸増してゆく。
　そして、最終的にノブの位置が右端に達すると、チャンネルＡ（先行楽曲）の音量が０％、チャンネルＢ（後続楽曲）の音量が１００％となる。
　つまり、クロスフェーダーを徐々に移動させることで、先行楽曲から後続楽曲へとスムーズな遷移を行うことができる。
　図１０に示すように、位置Ｐ１０１より左側の区間では、先行楽曲である楽曲データＡが左側のチャンネルＡで再生されている。このとき、クロスフェーダーは左端とされ、チャンネルＡの音量が１００％、つまりチェンネルＡの先行楽曲のみが演奏、つまり音響として出力されている。このとき、照明は、楽曲データＡに設定された照明演出データＡにより行われている。
　先行楽曲の再生中に、後続楽曲である楽曲データＢを右側のチャンネルＢで再生する。クロスフェーダーを左端のまま、つまり右側のチャンネルＢの音量が０％であれば、チャンネルＢの後続楽曲は音響として出力（演奏）されない。
　ここで、位置Ｐ１０１から位置Ｐ１０２までの区間で、クロスフェーダーのノブを左端から所定の時間かけて右端まで移動させる。
　この操作により、左側のチャンネルＡの音量が１００％から０％に減少し、右側のチャンネルＢの音量が０％から１００％に増加し、先行楽曲から後続楽曲へのクロスフェードが行われる。
　このようなクロスフェード操作が行われた際には、照明演出情報として「各楽曲に設定された照明演出の遷移」が行われる。
　前述のように、位置Ｐ１０１では先行楽曲である楽曲データＡに設定された照明演出データＡの、当該位置での照明演出情報Ｌ１０１に基づく照明が行われている。
　クロスフェーダーが左端から右端に向けて移動されると、各チャンネルＡ，Ｂの音量比率変化と同様に、照明演出の比率も変化される。すなわち、先行楽曲に対応した照明演出データＡの照明演出の設定値の比率が１００％から０％に減少し、後続楽曲に対応した照明演出データＢの照明演出の設定値の比率が０％から１００％に増加する。
　その結果、位置Ｐ１０１での照明演出データＡの照明演出情報Ｌ１０１から、位置Ｐ１０２での照明演出データＢの照明演出情報Ｌ１０３へと、連続的に変化（クロスフェード）する照明演出情報Ｌ１０２による照明を行うことができる
　このような操作による「処理」としては、図５に例示したもののほか、楽曲の再生に関する調整（高音音量など他の周波数帯域のレベル調整など）や、エフェクト（ピッチシフトやキー変更、残響音の付加など）、楽曲の再生速度の増減やテンポ変更などを採用することができる。
　従って、操作連動制御部３９が、ＤＪコントローラ１９のジョグダイヤルに対する操作（例えばパッド操作）を検出した場合、照明演出設定部３８により照明演出情報（例えばロールエフェクト実行）が選択され、照明制御部３４に送られ、照明装置２０の照明制御に反映させることができる。
　これらの照明演出情報は、予めＤＪが、あるいは照明制御装置３０のメーカーが、照明演出設定情報１８として照明演出設定部３８に設定しておくことができる。
　このように、本実施形態の照明制御装置３０によれば、再生中の楽曲に加えられる操作に応じた適切な照明演出を行うことができる。
　そして、操作に対する照明演出として、操作子「Ａパッド」による処理「ロールエフェクト追加」、あるいは操作子「Ｂパッド」による「ショートリバーブ追加」を採用したので、エフェクト操作による変化量に追従した照明状態の変化を、照明装置２０に実行させることができる。
　とくに、操作子「Ａパッド」による処理「ロールエフェクト追加」は、楽曲の特定区間を反復再生しかつ反復再生の周期を変化させるエフェクト操作であり、対応する照明演出として「ロール間隔でフラッシュを投光」を設定することで、反復再生の周期の変化に追従した照明状態の変化を、照明装置２０に実行させることができる。
　また、操作子「スライダーボリューム」による処理「音量増減」、および操作子「ロータリーボリューム」による処理「低音音量増減」を採用したので、楽曲の再生時に特定周波数帯域の音量または全帯域の音量を変化させる音量調整操作に対して、各音量の変化に追従した照明状態の変化を、照明装置２０に実行させることができる。
　なお、本発明は前述した実施形態の構成に限らず、本発明の目的を達成できる範囲での変形などは、本発明に含まれる。
　前記実施形態において、楽曲再生装置１０は、ＰＣオーディオシステムに限らず、専用のディスク再生装置あるいは音楽データ再生装置であってもよい。また、楽曲再生装置１０は、別途楽曲再生制御装置であるＤＪコントローラ１９が外部接続されるものに限らず、それ自体にＤＪ操作用のＤＪコントローラを有する楽曲再生装置であってもよい。この場合、照明制御装置３０は、楽曲再生装置１０に設置された操作子の操作を検出することになる。
　さらに、照明制御装置３０と楽曲再生装置１０とが一体に構成されていてもよい。例えば、前記実施形態で照明制御装置３０および楽曲再生装置１０を実現するソフトウェアを、同じＰＣにロードすることで、同じＰＣ上で照明制御装置３０および楽曲再生装置１０を実現してもよい。
　また、照明装置２０および照明制御装置３０は、ＤＭＸ５１２規格に準拠したものに限らず、他の規格に基づくものであってもよい。
　さらに、前記実施形態では、楽曲解析情報のうち拍位置を用い、楽曲における基準位置として拍位置を検出し、照明制御情報の位置の基準としたが、照明制御情報の指定単位としては、拍位置を単位とした任意の長さに限らず、楽曲解析情報として得られる小節単位、あるいは複数小節からなるブロック単位（例えばＡメロ、Ｂメロ、サビなど）とし、それぞれの単位ごとに照明制御情報を設定できるようにしてもよい。
　なお、小節単位あるいはブロック単位とする場合でも、基準位置は拍位置に基づくものとしてよい。
　前記実施形態では、それぞれ楽曲再生制御装置（ＤＪコントローラ）に対するユーザの操作を検出し、その操作の種類・変化量・変化速度等に応じて照明演出効果を変化させるものとした。
　ここで、操作に対応した照明演出効果の変化としては、ユーザ操作を検出した時点における照明演出状態を基準とし、その基準から操作に応じて照明演出効果を変化させることができる。これによれば、操作時の照明状態を基準として、より臨場感のある演出をすることができる。
　一方、ユーザ操作を検出した時点で、照明制御装置における照明演出効果を初期値に戻してもよい。これによれば、照明制御装置の初期値を基準として、操作に応じて照明演出効果を変化させることができ、同じ操作つまり同じエフェクトに対して同じ照明演出効果が得られ、照明演出における統一感や特定のエフェクトに対する印象の強化を得ることもできる。
　前記実施形態では、照明制御データ３３を照明制御装置３０において作成したが、照明制御データ３３は外部で編集しておき、照明制御装置３０に読み込むようにしてもよい。このように照明制御データ３３を外部作成する場合、照明制御装置３０の情報取得部３１および照明制御情報編集部３２は省略してよい。
　１…音響照明システム、１０…楽曲再生装置、１１…楽曲データ、１１１…楽曲のブロック、１２…再生制御部、１３…音響システム、１８…照明演出設定情報、１９…楽曲再生制御装置であるＤＪコントローラ、２０…照明装置、２１…照明器具、２２…照明制御信号、３０…照明制御装置、３１…情報取得部、３２…照明制御情報編集部、３３…照明制御データ、３３１…照明制御情報、３３２…基準位置、３３３…照明制御データ、３３４…照明イメージ、３４…照明制御部、３８…照明演出設定部、３９…操作連動制御部。

Claims (10)

  1. 　楽曲データの少なくとも拍位置情報を含む楽曲情報を取得する情報取得部と、
    　前記拍位置を照明演出の変化点の最小単位として照明装置を制御する照明制御部と、
    　前記楽曲データを楽曲として再生する楽曲再生装置または前記楽曲再生装置を制御する楽曲再生制御装置に対して予め指定された操作がなされた際に、前記操作または前記操作で実行される処理に対応した所定の照明演出を、前記照明装置の制御に反映する操作連動制御部と、を備えることを特徴とする照明制御装置。
  2. 　請求項１に記載した照明制御装置において、
    　前記操作連動制御部には、前記操作と前記操作に対応した前記照明演出との関係を示す情報、または、前記操作と前記操作で実行される処理に対応した前記照明演出との関係を示す情報の少なくともいずれかが、予め記録されていることを特徴とする照明制御装置。
  3. 　請求項２に記載した照明制御装置において、
    　前記操作は、再生される前記楽曲に対するエフェクト操作であり、
    　前記操作に対する前記照明演出は、前記エフェクト操作による変化量に追従した照明状態の変化を含むことを特徴とする照明制御装置。
  4. 　請求項２に記載した照明制御装置において、
    　前記操作は、前記楽曲の再生時に特定周波数帯域の音量または全帯域の音量を変化させる音量調整操作であり、
    　前記操作に対する前記照明演出は、前記音量の変化に追従した照明状態の変化を含むことを特徴とする照明制御装置。
  5. 　請求項２に記載した照明制御装置において
    　前記操作は、前記楽曲の再生時に他の楽曲のとの音量比率を連続的に変化させる音量調整操作であり、
    　前記操作に対する前記照明演出は、前記音量比率の変化に追従した照明状態の変化を含むことを特徴とする照明制御装置。
  6. 　請求項２に記載した照明制御装置において、
    　前記操作は、前記楽曲の再生速度を変化させる特殊再生操作であり、
    　前記操作に対する前記照明演出は、前記再生速度の変化に追従した照明状態の変化を含むことを特徴とする照明制御装置。
  7. 　請求項２に記載した照明制御装置において、
    　前記操作は、前記楽曲の再生位置を変化させる特殊再生操作であり、
    　前記操作に対する前記照明演出は、前記再生位置に応じた照明状態の変化を含むことを特徴とする照明制御装置。
  8. 　請求項２に記載した照明制御装置において、
    　前記操作は、前記楽曲の特定区間を反復再生しかつ前記反復再生の周期を変化させるエフェクト操作であり、
    　前記操作に対する前記照明演出は、前記反復再生の周期の変化に追従した照明状態の変化を含むことを特徴とする照明制御装置。
  9. 　コンピュータシステムで、楽曲データの少なくとも拍位置情報を含む楽曲情報を取得し、前記拍位置を照明演出の変化点の最小単位として照明装置を制御するとともに、
    　前記楽曲データを楽曲として再生する楽曲再生装置または前記楽曲再生装置を制御する楽曲再生制御装置に対して予め指定された操作がなされた際に、前記操作または前記操作で実行される処理に対応した照明演出を、前記照明装置の制御に反映することを特徴とする照明制御方法。
  10. 　コンピュータシステムを、請求項１から請求項８のいずれか一項に記載した照明制御装置として機能させることを特徴とする照明制御プログラム。
PCT/JP2016/067556 2016-06-13 2016-06-13 照明制御装置、照明制御方法および照明制御プログラム WO2017216850A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/JP2016/067556 WO2017216850A1 (ja) 2016-06-13 2016-06-13 照明制御装置、照明制御方法および照明制御プログラム
US16/307,667 US10708998B2 (en) 2016-06-13 2016-06-13 Light control device, lighting control method, and lighting control program for controlling lighting based on a beat position in a music piece information
JP2018523059A JP6718963B2 (ja) 2016-06-13 2016-06-13 照明制御装置、照明制御方法および照明制御プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/067556 WO2017216850A1 (ja) 2016-06-13 2016-06-13 照明制御装置、照明制御方法および照明制御プログラム

Publications (1)

Publication Number Publication Date
WO2017216850A1 true WO2017216850A1 (ja) 2017-12-21

Family

ID=60664526

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/067556 WO2017216850A1 (ja) 2016-06-13 2016-06-13 照明制御装置、照明制御方法および照明制御プログラム

Country Status (3)

Country Link
US (1) US10708998B2 (ja)
JP (1) JP6718963B2 (ja)
WO (1) WO2017216850A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020195389A1 (ja) * 2019-03-26 2020-10-01 ソニー株式会社 情報処理装置及び情報処理方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10124078A (ja) * 1996-10-24 1998-05-15 Yamaha Corp 演奏データ作成方法および装置
JP2007311155A (ja) * 2006-05-18 2007-11-29 D & M Holdings Inc 再生装置及び再生システム
JP2010508626A (ja) * 2006-10-31 2010-03-18 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ オーディオ信号に応じた照明制御
WO2012007990A1 (ja) * 2010-07-14 2012-01-19 パイオニア株式会社 再生システム、再生方法およびそのプログラム
JP2014203493A (ja) * 2013-04-08 2014-10-27 パイオニア株式会社 電子機器、電子システム、音響機器、電子機器の制御方法およびプログラム
JP2015055721A (ja) * 2013-09-11 2015-03-23 パイオニア株式会社 制御装置、コマンド生成方法、プログラム
JP2015076625A (ja) * 2013-10-04 2015-04-20 パイオニア株式会社 制御装置、制御方法、プログラム
WO2015092984A1 (ja) * 2013-12-18 2015-06-25 ソニー株式会社 音響再生装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6175632B1 (en) * 1996-08-09 2001-01-16 Elliot S. Marx Universal beat synchronization of audio and lighting sources with interactive visual cueing
FR2806497B1 (fr) * 2000-03-17 2002-05-03 Naguy Caillavet Interface materielle et logicielle de controle par messages midi
US20050275626A1 (en) * 2000-06-21 2005-12-15 Color Kinetics Incorporated Entertainment lighting system
US20020154787A1 (en) * 2001-02-20 2002-10-24 Rice Richard F. Acoustical to optical converter for providing pleasing visual displays
US20070209499A1 (en) * 2004-03-31 2007-09-13 Matsushita Electric Industrial Co., Ltd. Music Composition Data Editing Device And Music Composition Data Editing Method
US20060130635A1 (en) * 2004-12-17 2006-06-22 Rubang Gonzalo R Jr Synthesized music delivery system
US8300504B2 (en) * 2004-12-20 2012-10-30 Pioneer Corporation Switch device, information processing device, and reproduction device
WO2006067933A1 (ja) * 2004-12-20 2006-06-29 Pioneer Corporation スイッチ装置、情報処理装置および再生装置
JP5395399B2 (ja) 2008-10-17 2014-01-22 Ｋｄｄｉ株式会社 携帯端末、拍位置推定方法および拍位置推定プログラム
JP2010192155A (ja) 2009-02-16 2010-09-02 Roland Corp 照明制御データの生成装置
US20120134512A1 (en) * 2009-04-24 2012-05-31 Pioneer Corporation Mixer device, player, reproduction system, method of controlling mixer device, method of controlling player and program
EP2609793A2 (en) * 2010-08-23 2013-07-03 Heinz Grether PC An improved combined lighting and video control system
WO2015092965A1 (ja) * 2013-12-17 2015-06-25 ソニー株式会社 再生装置および再生方法
FR3031198A1 (fr) * 2014-12-31 2016-07-01 Guillemot Corp Dispositif de controle d'au moins un signal audio ou video avec affichage d'informations, et controleur de mixage electronique correspondant

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10124078A (ja) * 1996-10-24 1998-05-15 Yamaha Corp 演奏データ作成方法および装置
JP2007311155A (ja) * 2006-05-18 2007-11-29 D & M Holdings Inc 再生装置及び再生システム
JP2010508626A (ja) * 2006-10-31 2010-03-18 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ オーディオ信号に応じた照明制御
WO2012007990A1 (ja) * 2010-07-14 2012-01-19 パイオニア株式会社 再生システム、再生方法およびそのプログラム
JP2014203493A (ja) * 2013-04-08 2014-10-27 パイオニア株式会社 電子機器、電子システム、音響機器、電子機器の制御方法およびプログラム
JP2015055721A (ja) * 2013-09-11 2015-03-23 パイオニア株式会社 制御装置、コマンド生成方法、プログラム
JP2015076625A (ja) * 2013-10-04 2015-04-20 パイオニア株式会社 制御装置、制御方法、プログラム
WO2015092984A1 (ja) * 2013-12-18 2015-06-25 ソニー株式会社 音響再生装置

Also Published As

Publication number Publication date
JP6718963B2 (ja) 2020-07-08
US10708998B2 (en) 2020-07-07
JPWO2017216850A1 (ja) 2019-03-28
US20190313506A1 (en) 2019-10-10

Similar Documents

Publication Publication Date Title
US10062367B1 (en) Vocal effects control system
US20210279030A1 (en) Method and device for processing, playing and/or visualizing audio data, preferably based on ai, in particular decomposing and recombining of audio data in real-time
US9619431B2 (en) Music and audio playback system
US7373210B2 (en) Effects and recording system
US11688377B2 (en) Synthesized percussion pedal and docking station
US20040264917A1 (en) Audio waveform cueing for enhanced visualizations during audio playback
JP6926354B1 (ja) オーディオデータの分解、ミキシング、再生のためのａｉベースのｄｊシステムおよび方法
AU2020432954B2 (en) Method and device for decomposing, recombining and playing audio data
JP2013048352A (ja) マルチトラックレコーダ装置
WO2017216850A1 (ja) 照明制御装置、照明制御方法および照明制御プログラム
US20230343315A1 (en) Synthesized percussion pedal and docking station
JP2006279733A (ja) テンポ信号出力装置、オーディオミキシング装置
JP6685391B2 (ja) 照明制御装置、照明制御方法および照明制御プログラム
WO2018016008A1 (ja) 音響機器制御操作入力装置、および音響機器制御操作入力プログラム
WO2020054064A1 (ja) 楽曲編集システム、及び楽曲編集方法
JP6768005B2 (ja) 照明制御装置、照明制御方法および照明制御プログラム
JP2017073631A (ja) 音信号処理装置用設定プログラム
JP6768064B2 (ja) 照明演出装置、照明システム、照明演出方法および照明演出プログラム
WO2017212551A1 (ja) 照明演出装置、照明システム、照明演出方法および照明演出プログラム
JP6280714B2 (ja) 制御装置、コマンド生成方法、プログラム
JP7349143B2 (ja) 光演出装置
JP6691608B2 (ja) 照明制御装置
Werner et al. Development of an ambisonic guitar system GASP: Guitars with ambisonic spatial performance
NZ791507A (en) Method and device for decomposing, recombining and playing audio data
EP4315312A1 (en) Synthesized percussion pedal and docking station

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16905405

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018523059

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16905405

Country of ref document: EP

Kind code of ref document: A1