WO2022230171A1 - 音響装置、音響装置の制御方法およびプログラム - Google Patents

音響装置、音響装置の制御方法およびプログラム Download PDF

Info

Publication number
WO2022230171A1
WO2022230171A1 PCT/JP2021/017188 JP2021017188W WO2022230171A1 WO 2022230171 A1 WO2022230171 A1 WO 2022230171A1 JP 2021017188 W JP2021017188 W JP 2021017188W WO 2022230171 A1 WO2022230171 A1 WO 2022230171A1
Authority
WO
WIPO (PCT)
Prior art keywords
song
tempo
music
mixing
parts
Prior art date
Application number
PCT/JP2021/017188
Other languages
English (en)
French (fr)
Inventor
実 渡邉
Original Assignee
AlphaTheta株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AlphaTheta株式会社 filed Critical AlphaTheta株式会社
Priority to PCT/JP2021/017188 priority Critical patent/WO2022230171A1/ja
Priority to JP2023516999A priority patent/JPWO2022230171A1/ja
Publication of WO2022230171A1 publication Critical patent/WO2022230171A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones

Definitions

  • the present invention relates to an audio device, an audio device control method, and a program.
  • DJ equipment such as a DJ controller has a plurality of decks, and by switching the audio output between the decks while playing music on each deck, the music being played is switched to another music.
  • a crossfader for adjusting the volume of a plurality of decks provided in the DJ equipment is used when switching songs in the DJ equipment, but a skillful user operation is required for natural switching. Therefore, various techniques have been proposed for assisting the switching of music.
  • the audio equipment disclosed in Patent Literature 1 adjusts the output level by focusing on the frequency band, thereby preventing discomfort when mixing music.
  • an object of the present invention is to provide an audio device, a control method for the audio device, and a program that can perform a preferable switching operation in mixing to switch music without giving the user a sense of discomfort or discomfort.
  • a sound device for mixing at least two pieces of music comprising: a detecting unit for detecting the tempo of a first piece of music and a second piece of music composed of a plurality of parts; A process of gradually changing the tempo of the first part included in the music, and the tempo of the first part included in the first music and the second music at the start of mixing or after the lapse of a predetermined time from the start of mixing. and a playback control unit for executing a process of synchronizing the audio device.
  • a sound device for mixing at least two pieces of music comprising: a detection unit for detecting the tempo of a first piece of music and a second piece of music composed of a plurality of parts; A process of gradually changing the tempo of the first part included in the music, and the tempo of the first part included in the first music and the second music at the start of mixing or after the lapse of a predetermined time from the start of mixing. and a playback control unit for executing a process of synchronizing the audio device.
  • the reproduction control unit After synchronizing the tempos of the first parts included in the first music and the second music, the reproduction control unit synchronizes the tempos of the first part of the first music or the second music with The acoustic device according to [1] or [2], which executes processing for gradually transitioning to the tempo of the original song.
  • the playback control unit After gradually changing the tempo of the first part of the first song or the second song to the tempo of the original song, the playback control unit, in the first song or the second song, The acoustic device according to any one of [1] to [3], which performs a process of matching the reproduction positions of the one part and the second part different from the first part.
  • Acoustic device according to [6] The playback control unit reproduces the second part included in the first song at the tempo of the original song of the first song in a predetermined section including the time when mixing is started or after the elapse of a predetermined time from the time when mixing is started.
  • the second part included in the second music is reproduced at the tempo of the original music of the second music, and the second part of the first music and the second part of the second music are reproduced.
  • a control method for a sound device that mixes at least two pieces of music comprising: detecting the tempo of a first piece of music and a second piece of music composed of a plurality of parts; a step of gradually changing the tempo of a first part included in two songs; synchronizing the tempo of a sound device.
  • a control method for an audio device that mixes at least two pieces of music comprising: detecting tempos of a first piece of music and a second piece of music composed of a plurality of parts; a step of gradually changing the tempo of a first part included in two songs; synchronizing the tempo of a sound device.
  • a program for causing a computer to function as a sound device comprising: a reproduction control section for executing processing for synchronizing the tempo of the included first part; [11] A program for causing a computer to function as a sound device for mixing at least two pieces of music, the detection unit detecting the tempo of a first piece of music and a second piece of music composed of a plurality of parts; A process of gradually changing the tempo of the first part included in the first song and the second song, and the first song and the second song at the start of mixing or after a predetermined time has elapsed from the start of mixing.
  • a program for causing a computer to function as a sound device comprising: a reproduction control section for executing processing for synchronizing the tempo of the included first part;
  • FIG. 1 is a schematic diagram showing an acoustic device according to a first embodiment of the present invention
  • FIG. 1 is a block diagram showing a schematic functional configuration of an acoustic device according to a first embodiment of the invention
  • FIG. 4 is a schematic diagram illustrating music switching processing according to the first embodiment of the present invention.
  • FIG. 11 is another schematic diagram illustrating the song switching process according to the first embodiment of the present invention.
  • FIG. 11 is another schematic diagram illustrating the song switching process according to the first embodiment of the present invention.
  • 4 is a flow chart showing a control method for the audio device according to the first embodiment of the present invention
  • 4 is another flowchart showing the control method of the audio device according to the first embodiment of the present invention;
  • FIG. 11 is a schematic diagram illustrating music switching processing according to the second embodiment of the present invention.
  • 8 is a flow chart showing a method of controlling an audio device according to a second embodiment of the present invention
  • FIG. 12 is a schematic diagram illustrating music switching processing according to the third embodiment of the present invention.
  • 8 is a flow chart showing a control method for an audio device according to a third embodiment of the present invention.
  • FIG. 1 is a schematic diagram showing an acoustic device according to the first embodiment of the present invention.
  • a sound device 1 according to the first embodiment is a DJ system in which two players 2A and 2B that reproduce music, a mixer 3 that controls the players 2A and 2B, and a display unit 4 are integrated.
  • the audio device 1 functions as an audio reproduction device and an audio reproduction control device by a user's operation, reproduces music, and applies various effects to the music being reproduced.
  • the effects include, for example, effects such as delay, echo, reverb, or loop, which are applied to music to reproduce the effect sound, and effects for processing and reproducing the original sound.
  • the audio device 1 includes, as shown in FIG. 1, operation units 21A and 21B provided on the players 2A and 2B, respectively, and an operation unit 31 provided on the mixer 3. As shown in FIG. 21 A of operation parts receive user operation with respect to the player 2A, and the operation part 21B receives user operation with respect to the player 2B. Further, the operation unit 31 receives user operations on the mixer 3 .
  • the operation unit 21A includes a jog dial 211A, a tempo slider 212A, a cue button 213A, a play/pause button 214A, and a performance pad 215A.
  • the jog dial 211A is a rotary operator and is used to set the playback direction and playback speed of the music being played by the player 2A.
  • the tempo slider 212A is used when adjusting the playback speed of the song being played by the player 2A.
  • the cue button 213A is pressed when setting a predetermined position of a piece of music as a cue point.
  • the play/pause button 214A is pressed when the player 2A starts or stops playing music.
  • Performance pad 215A is a general-purpose operator to which various functions relating to playback control can be assigned.
  • the operating section 21B includes a jog dial 211B, a tempo slider 212B, a cue button 213B, a play/pause button 214B, and a performance pad 215B, similar to the operating section 21A.
  • the audio device 1 reproduces the music loaded in the player 2A and applies effects to the music being reproduced as necessary. do. The same is true for player 2B.
  • the mixer 3 switches music playback between the players 2A and 2B, adjusts the volume of each channel, and performs playback with effects applied, according to user operations.
  • the operation unit 31 of the mixer 3 includes effect selection knobs 311A and 311B, effect amount adjustment knobs 312A and 312B, channel faders 313A and 313B, and a cross fader 314.
  • effect selection knobs 311A and 311B are used to select effects to be applied to the songs being reproduced by the players 2A and 2B, respectively.
  • Effect amount adjustment knobs 312A and 312B are used to adjust parameters such as the depth and magnitude of the effect applied to the music being reproduced by the players 2A and 2B, respectively.
  • Channel faders 313A and 313B are used to adjust the output sound volume level of music being reproduced by players 2A and 2B, respectively.
  • the crossfader 314 is an operator for adjusting the volume balance between the first music played on the player 2A on the first channel and the second music played on the player 2B on the second channel. is.
  • the display unit 4 includes a display 41 and a touch panel 42 provided to cover the display area of the display.
  • the touch panel 42 detects the touched position by the user and outputs information such as coordinates indicating the touched position, so that the display unit 4 also functions as an operation unit.
  • FIG. 2 is a block diagram showing a schematic functional configuration of a processing unit in the acoustic device according to the first embodiment;
  • the acoustic device 1 includes a music data storage section 5, a control section 6, and an audio output section 7, as shown in FIG. 2, in addition to the respective sections described above.
  • the functions of the above units are realized by a processor operating according to a program in, for example, an acoustic device having a computer hardware configuration. The function of each unit will be further described below.
  • the music data storage unit 5 is configured to be able to store music data using a HDD (Hard Disk Drive), flash memory, or the like.
  • the music data storage unit 5 stores music data of a plurality of music pieces in a predetermined format such as MP3 format.
  • the song data includes, in addition to audio information, information such as BPM, artwork, title, artist name, album name, key, number of DJ plays and genre of the song as tag information.
  • the music data stored in the music data storage unit 5 is associated with a time stamp, which is reproduction position information.
  • the music data stored in the music data storage unit 5 and reproducible by the audio device 1 is previously subjected to separation processing into a plurality of parts.
  • the multiple parts separated from the music data correspond to the sounds of each part of the music reproduced by the music data.
  • the parts of a song correspond to vocals or the sound of each musical instrument, and in a simple example, a song is composed of four parts: vocals, guitar, bass, and drums.
  • music data stored in the music data storage unit 5 is separated into two parts: a drum sound part and an instrumental sound other than the drums and/or vocal part.
  • the audio device 1 may acquire music data that has already been subjected to separation processing from the outside, or may further have a functional part that executes processing for separating unseparated music data into a plurality of parts. good.
  • the control unit 6 is implemented in the audio device 1 by, for example, a communication interface, a processor such as a CPU (Central Processing Unit), and a memory serving as a work area, and controls the operation of the audio device 1.
  • the control unit 6 includes a reception unit 61 implemented by the processor operating according to a program stored in a memory or received via a communication interface, an automix setting unit 62, a tempo detection unit 63, a 1 reproduction section 64 and second reproduction section 65 are included.
  • the accepting portion 61 accepts user operations on the operating portions 21A, 21B, the operating portion 31, and the touch panel .
  • the automix setting unit 62 performs settings according to user operations on the operation units 21A, 21B, the operation unit 31, and the touch panel 42 for the automix processing for automatically switching songs. Settings related to automix processing are performed by designating the result of song switching.
  • the results of song switching are, for example, the time from the start of listening to the song after the switch due to fade-out and fade-in until the song before the switch is no longer heard, and the time when the songs are equalized at the midpoint between the fade-out and fade-in. and the time from the cut-in of the song after switching to the cut-out of the song before switching.
  • the song data to be switched between songs is associated with a cue point, etc., and the result of the song switching described above is specified, so that the songs can be switched according to the characteristics of the target song data. becomes possible.
  • Such detailed settings are performed before the performance using, for example, the display 41 and touch panel 42 of the audio device 1 or a computer connected to the audio device 1 .
  • the details of the settings in the automix setting unit 62 will be described together with the automix processing described later.
  • the tempo detector 63 detects the tempos of the first and second songs.
  • the first reproduction unit 64 reproduces music on the player 2A and outputs audio signals to the audio output unit 7 according to user operations on the operation units 21A and 31 .
  • the second reproduction unit 65 reproduces music on the player 2B and outputs audio signals to the audio output unit 7 according to user operations on the operation units 21B and 31 .
  • the automix setting unit 62 performs settings related to the automix processing and the user operates the operation units 21A, 21B, and 31 to issue an instruction to execute the automix processing
  • the first playback unit 64 and the second The 2 playback unit 65 adjusts the volume balance between the first song and the second song for each of a plurality of parts in accordance with the setting in the automix setting unit 62, thereby reproducing the songs played by the player 2A and the player 2B. Perform switching processing.
  • the audio device 1 may be configured to have a communication interface, acquire music data stored in an external storage device, a computer, or the like via a communication interface (not shown) and store the music data in the music data storage unit 5 .
  • the audio device 1 does not include the music data storage unit 5, and the external storage device functions as the music data storage unit 5.
  • FIG. The audio output unit 7 has an audio output terminal such as a speaker terminal or a headphone terminal, and outputs audio signals of songs reproduced by the first reproduction unit 64 and the second reproduction unit 65 as audio information.
  • FIG. 3 shows an example of music data of the first music piece (first music piece) and music data of the second music piece (second music piece) at the switching portion of the music performed by the audio device according to the first embodiment.
  • the music data of the first music and the second music have different tempos.
  • the tempo is the beat derived from the BPM or the beat position.
  • uniform song switching processing has been performed for the entire song.
  • the audio device 1 performs music switching processing for performing mixing according to the characteristics of each part for each of a plurality of parts that constitute a music piece.
  • FIG. 4 and FIG. 5 are schematic diagrams for explaining music switching processing by the audio device according to the first embodiment.
  • switching of songs from the player 2A to the player 2B will be described.
  • the tempos of the original songs of the first song and the second song are referred to as tempo T1 and tempo T2, respectively.
  • the drum sound part will be described with reference to FIG.
  • the audio device 1 executes the following processes (1) to (3) for the drum sound part to perform mixing.
  • the processing indicated by (1) to (3) is processing for switching songs according to the characteristics of the drum sound parts and suppressing discomfort and discomfort that may occur during mixing.
  • the drum sound part has a large volume level, a different pattern for each song, and a delay from the attack sound to the peak sound especially for the bass drum, which greatly differs for each song. Therefore, if the song is switched without matching the tempo of the drum sound part, the user may feel uncomfortable and uncomfortable as described above. Therefore, for the drum sound parts, as shown in (1), the tempos of the drum sound parts of the first song and the second song are synchronized and switched. In addition, since the drum sound part has no melody or lyrics, it is rare for listeners to perceive continuity.
  • the tempo is gradually changed from the first time point P1 to the second time point P2 to the tempo T2.
  • the reproduction positions of the drum sound part and the sound part other than the drum sound of the second musical composition are aligned.
  • the tempo of the drum sound part of the second musical piece is synchronized with the tempo T1, which is the original tempo of the drum sound part of the first musical piece. You can switch songs without discomfort.
  • the tempo of the drum sound part of the second musical piece is gradually changed from the tempo T1 to the tempo T2, which is the original tempo of the second musical piece, between the first time point P1 and the second time point P2.
  • the playback positions of the drum sound part and the sound part other than the drums of the second music are matched.
  • the drum sound part and the sound part other than the drums of the second music are reproduced in accordance with the tempo T2.
  • the second piece of music becomes equivalent to normal reproduced sound with no change in tempo or the like.
  • the automix setting section 62 performs the following settings for the drum sound part, for example.
  • First song Cutout position (P1)
  • Second music piece cut-in position (P1), position (P2) for matching the playback positions of the drum sound part and the non-drum sound part
  • the cut-out position (P1) of the drum sound part in the first music piece and the cut-in position (P1) of the drum sound part in the second music piece may be set automatically.
  • performing known music analysis processing such as beat position detection technology, bar position detection technology, vocal detection technology, and lyric display technology, suitable for part cut-out and cut-in of drum sounds in the first and second songs
  • a configuration for setting the timing may be used.
  • the first reproducing section 64 and the second reproducing section 65 reproduce the drum sound parts of the first music piece and the second music piece according to the settings in the automix setting section 62 as follows. Until the first point in time P1: The first piece of music is reproduced at the tempo T1. First point in time P1: Cut out the first song and play back the second song at tempo T1. Between the first time point P1 and the second time point P2: Gradually change the tempo of the second song from tempo T1 to tempo T2. After the second time point P2: The second music piece is reproduced at the tempo T2.
  • the automix setting unit 62 sets, for example, the fade-out start position and end position of the first music and the fade-in start position and end position of the second music for the sound parts other than the drums.
  • the mix section S preferably includes the cut-in position and the cut-out position of the drum sound part described above.
  • known music analysis processing such as key detection technology, music development detection technology, vocal detection technology, and lyric display technology is performed, and fade-out or fade-in start positions of sound parts other than drums in the first and second songs And it is good also as a structure which sets the timing suitable for an end position.
  • the first reproducing unit 64 and the second reproducing unit 65 reproduce the sound parts other than the drums of the first music piece and the second music piece according to the setting in the automix setting unit 62 as follows.
  • the first song is reproduced at the tempo T1, which is the tempo of the original song. Fade-out start position to end position of the first song: Fade out the first song.
  • the second music piece is reproduced at the tempo T2, which is the tempo of the original music, and faded in.
  • the second music is reproduced at the tempo T2, which is the tempo of the original music.
  • the first playback unit 64 gradually lowers the volume of the sound parts other than the drums of the first song to start fading out.
  • the first playback unit 64 cuts out the drum sound part of the first song, and the second playback unit 65 gradually increases the volume of the sound part other than the drums of the second song.
  • a fade-in is started, the drum sound part of the second music is cut in at the tempo T1 which is the tempo of the original music of the first music, and the tempo of the drum sound part of the second music is reduced to the tempo T2. change gradually.
  • the first playback unit 64 finishes fading out the non-drum sound parts of the first song
  • the second playback unit 65 fades out the non-drum sound parts of the second song. end the fade-in of
  • the playback positions of the drum sound part and the sound part other than the drum sound in the second music match. That is, for the drum sound part, the music is switched by cut-out and cut-in accompanying the adjustment of the music tempo at the first time point P1, and for the sound part other than the drums, the music tempo is changed. Songs are switched by fading out and fading in.
  • the playback positions of the drum sound part and the sound part other than the drum sound in the second music match. Therefore, a preferable switching operation can be realized by performing music switching processing according to the characteristics of each part for each of the plurality of parts that constitute the music.
  • the first reproducing unit 64 reproduces the unseparated first music data until time t1, and reproduces the first music data that has undergone separation processing from time t1.
  • the second reproduction unit 65 reproduces the second music data that has undergone the separation processing from time t2, and reproduces the unseparated second music data from time t5.
  • the song switching process shown in the example of FIG. 5 is an example, and is not limited to this example.
  • an example of switching songs by fading out and fading in for sound parts other than drums has been shown, but switching of songs may be performed by cutting out and cutting in, or fading out and fading. Songs may be switched by combining in with cut-out and cut-in.
  • an example of switching songs by cut-out and cut-in was shown for the drum sound part, but switching of songs may be performed by fade-out and fade-in, or fade-out and fade-in.
  • cut-out and cut-in may be combined to switch songs.
  • cut-out and cut-in may be performed at the same time or at different timings.
  • FIG. 6 shows a flowchart of processing that is started when the receiving unit 61 receives an operation for instructing settings related to automix processing.
  • the automix setting unit 62 receives settings for each of a plurality of parts forming the first music piece and the second music piece (step S101). Then, the automix setting unit 62 determines whether or not tempo adjustment is necessary (step S102). Whether or not tempo adjustment is necessary can be determined according to whether or not the tempos (BPM) of the first song and the second song match.
  • BPM tempos
  • the automix setting unit 62 determines that tempo adjustment is necessary.
  • the automix setting unit 62 calculates the point in time at which the playback positions of the multiple parts are to be aligned (step S103).
  • the time point (second time point P2) at which the playback positions of the plurality of parts are aligned is, for example, the time point after a predetermined time has elapsed from the time point (first time point P1) at which the drum sound part of the second musical piece cuts in.
  • it may be the time when a predetermined time has passed since the end of the fade-in of the sound parts other than the drums of the second music piece. Also, it is possible to calculate the point of time at which the playback positions of a plurality of parts are matched based on known music analysis processing such as key detection technology, music development detection technology, vocal detection technology, and lyric display technology.
  • the automix setting unit 62 determines the change in tempo based on the point in time at which the reproduction positions of the plurality of parts calculated in step S103 are matched (step S104).
  • the change in tempo can be determined based on the tempos of the first and second songs and the point in time at which the playback positions of the multiple parts are aligned. For example, in the example described with reference to FIG. 5, from the time of cut-in of the drum sound part of the second music (first time point P1) to the time of aligning the playback positions of a plurality of parts (second time point P2).
  • the automix setting unit 62 calculates control values relating to automix processing for each of the multiple parts according to the contents of the settings received by the automix setting unit 62 (step S105). If the automix setting unit 62 determines in step S102 that the tempo needs to be adjusted, it calculates the control value taking into account the processes in steps S103 and S104, and determines in step S102 that the tempo does not need to be adjusted. If so, the control value is calculated based on the content of the setting received by the automix setting unit 62 . Since various well-known techniques can be used for calculating the control value, detailed description thereof will be omitted.
  • FIG. 7 shows a flowchart of processing that is started when the reception unit 61 receives an operation instructing execution of the automix processing.
  • the first playback unit 64 starts fading out the sound parts other than the drums of the first music according to the control value calculated by the automix setting unit 62 (step S201).
  • the first playback unit 64 performs the control calculated by the automix setting unit 62.
  • the second reproduction unit 65 cuts out the drum sound part of the first music according to the value, and the second reproduction unit 65 cuts out the drum sound part of the second music according to the control value calculated by the automix setting unit 62. Cut-in is performed at the tempo T1, which is the tempo of the original song, and fade-in of the sound parts other than the drums of the second song is started (step S203). Subsequently, the second playback unit 65 gradually adjusts the tempo of the drum sound part of the second musical piece to tempo T2, which is the tempo of the original musical piece of the second musical piece, according to the control value calculated by the automix setting unit 62. (step S204).
  • the second playback unit 65 continues the process of step S204 until the playback position of the drum sound part and the sound part other than the drums in the second musical piece match (step S205 YES).
  • step S205 YES the second playback unit 65 continues the process of step S204 until the playback position of the drum sound part and the sound part other than the drums in the second musical piece match.
  • step S205 YES the second playback unit 65 continues the process of step S204 until the playback position of the drum sound part and the sound part other than the drums in the second musical piece match.
  • the tempos of the first music piece and the second music piece composed of a plurality of parts are detected, and the drum sounds included in the second music piece are reproduced.
  • a process of gradually changing the tempo of the part (first part), and changing the tempo of the drum sound part included in the first and second songs at the start of mixing or after a predetermined time has elapsed from the start of mixing. Synchronize and execute. Therefore, it is possible to switch songs according to the characteristics of each of the plurality of parts that make up the song. Therefore, it is possible to perform a preferable switching operation in mixing to switch songs without giving the user a sense of incompatibility or discomfort.
  • the tempos of the drum sound parts of the second song are synchronized. , the process of gradually transitioning to the tempo of the original song is executed. Therefore, the tempo of the drum sound part of the second musical piece that was changed for synchronization can be restored.
  • the sound part other than the drums included in the first song is first reproduce at the tempo of the original music of the second music, reproduce the sound parts other than the drums contained in the second music at the tempo of the original music of the second music, and play the sound parts other than the drums of the first music , and the sound part other than the drums of the second musical composition. Therefore, for parts that give the user a sense of discomfort or discomfort when the divergence between the original music and the reproduced sound increases, a preferable switching operation can be performed without changing the tempo according to the characteristics of the part.
  • the first part is the part corresponding to at least the bass drum sound among the drum sounds. Therefore, it is possible to switch songs suitable for the characteristics of drum sound parts (especially bass drums) that may give the user a sense of discomfort and discomfort.
  • the acoustic device in the second embodiment has the same configuration as in the first embodiment.
  • the process of switching the drum sound parts of the first and second musical pieces is different from that of the acoustic apparatus of the first embodiment.
  • FIG. 8 corresponds to FIG. 4 of the first embodiment, and is a schematic diagram for explaining music switching processing, particularly drum sound part switching processing, by the audio device of the second embodiment.
  • the audio device of the second embodiment executes the following processes (1) and (2) for the drum sound part to perform mixing.
  • the processing indicated by (1) and (2) is similar to the first embodiment, in which songs are switched according to the characteristics of the parts of the drum sounds, and the feeling of discomfort and discomfort that occurs during mixing is suppressed. processing.
  • the second embodiment instead of adjusting the tempo of the second music, the tempo of the first music is adjusted. In other words, by adjusting the tempo of the drum sound part of the first song between the first time point P3 and the second time point P4, at the second time point P4, the cut-out and cut-in are performed. The tempos of the drum sound parts of the first song and the second song match. Therefore, unlike the first embodiment, it is not necessary to adjust the tempo of the drum sound part of the second musical composition.
  • the tempo and the playback position are changed between the drum sound part and the sound part other than the drum sound of the first song. gap occurs.
  • the sound parts other than the drums are fading out, the volume is lower than the drum sound part, and the drum sound part, which is the main part that ticks the rhythm, is playing stably.
  • the rhythm of the sound parts other than the drums is inconspicuous, so the effect of the above-described gap is small.
  • the tempo of neither the drum sound part nor the sound part other than the drums of the second music is adjusted.
  • the consistency of the playback positions of the drum sound part and the non-drum sound part of the second musical composition is maintained. No calculations and processing are required to align the playback positions of the drum sound parts and the non-drum sound parts of the song.
  • the tempo of the drum sound part of the first musical piece whose tempo has been changed is the tempo of the original musical piece of the first musical piece. A process of returning to T1 may be performed.
  • the tempo of the drum sound part of the first song is changed from the first time point P3, and the tempo of the drum sound part is changed at the second time point P4.
  • the tempo of the first song is matched with the tempo T2, which is the tempo of the original song of the second song, and the songs are switched by cut-out and cut-in.
  • songs are switched by fading out and fading in without changing the tempo, as in the first embodiment.
  • step S103 the processing of step S103 is unnecessary.
  • the tempo of the drum sound part of the first musical piece is changed from the tempo T1, which is the tempo of the original musical piece of the first musical piece, to the second tempo, as the content of the tempo change in the process of step S104.
  • the change content for changing to the tempo T2, which is the tempo of the original piece of music, is determined.
  • the first playback unit 64 follows the control value calculated by the automix setting unit 62 to perform the first is gradually changed from tempo T1 to tempo T2 (step S302).
  • the first playback unit 64 follows the control value calculated by the automix setting unit 62, The drum sound part of the first music piece is cut out, and the second playback unit 65 reproduces the drum sound part of the second music piece without changing the tempo according to the control value calculated by the automix setting unit 62. (step S304).
  • the tempos of the first music piece and the second music piece composed of a plurality of parts are detected, and the drum sounds included in the first music piece are reproduced.
  • the acoustic device in the third embodiment has the same configuration as in the first and second embodiments. Further, in the acoustic apparatus of the third embodiment, the process of switching the drum sound parts of the first and second musical pieces is different from that of the acoustic apparatuses of the first and second embodiments.
  • FIG. 10 corresponds to FIG. 4 of the first embodiment, and is a schematic diagram for explaining music switching processing, particularly drum sound part switching processing, by the audio device of the third embodiment.
  • the audio device of the third embodiment executes the following processes (1) to (4) for the drum sound part to perform mixing.
  • a second point in time P6 cut out the first song and cut in the second song.
  • the tempo T3 in the processes (1) and (3) is, for example, an intermediate tempo between the tempo T1 of the first song and the tempo T2 of the second song.
  • the tempo T3 may be calculated based on the difference between the tempo T1 of the first song and the tempo T2 of the second song, or may be a predetermined tempo (for example, always BPM 120).
  • the processes (1) to (4) switch songs according to the characteristics of the parts of the drum sounds, and reduce the discomfort that occurs during mixing. This is a process for suppressing discomfort.
  • the tempo of the first music is also adjusted. That is, in the third embodiment, as in the first embodiment, the tempo of the second piece of music is changed so as to approach the tempo T1, which is the tempo of the original piece of the first piece of music. As with the form, the tempo of the first piece of music is changed so as to approach the tempo T2, which is the tempo of the original piece of the second piece of music. Therefore, it can be expected that the gap that occurs in the tempo and playback position between the drum sound part and the non-drum sound part of the first and second songs will be reduced more than in the first embodiment.
  • the tempo of the drum sound part of the first song is changed from the first time point P5, and the tempo of the drum sound part is changed at the second time point P6.
  • the tempos of the drum sound parts of the first music piece and the second music piece are synchronized, and the music is switched by cut-out and cut-in. change the On the other hand, for sound parts other than drums, songs are switched by fading out and fading in without changing the tempo, as in the first and second embodiments. Then, at the third point in time P7, the playback positions of the drum sound part and the sound part other than the drum sound in the second music match.
  • the content of the tempo change includes the content of change for changing the tempo of the drum sound part of the first musical piece from the tempo T1, which is the tempo of the original musical piece of the first musical piece, to the tempo T3.
  • the tempo of the drum sound part of the first song whose tempo has been changed is returned to the tempo T1, which is the tempo of the original song of the first song.
  • step S401 YES the first playback unit 64 follows the control value calculated by the automix setting unit 62 to perform the first is gradually changed from tempo T1 to tempo T3 (step S402).
  • the first playback unit 64 performs the control calculated by the automix setting unit 62.
  • the second reproduction unit 65 cuts out the drum sound part of the first music according to the value
  • the second reproduction unit 65 cuts out the drum sound part of the second music according to the control value calculated by the automix setting unit 62.
  • a cut-in is performed in synchronization with the tempo T3 of the drum sound part of the music (step S404).
  • the second playback unit 65 gradually changes the tempo of the drum sound part of the second musical piece from tempo T3 to tempo T2 according to the control value calculated by the automix setting unit 62 (step S405).
  • the second reproducing unit 65 repeats step S405 until it reaches the third time point P7 at which the reproduction positions of the drum sound part and the sound part other than the drum sound in the second music match (step S406 YES).
  • the tempo of the first music piece and the second music piece composed of a plurality of parts are detected, and the tempos of the first music piece and the second music piece are A process of gradually changing the tempo of the included drum sound part (first part), and the drum sounds included in the first and second songs at the start of mixing or after the lapse of a predetermined time from the start of mixing. synchronizing the tempos of the parts. Therefore, effects similar to those of the first embodiment can be obtained.
  • part of the processing described in each of the above embodiments may be omitted. For example, only the process of synchronizing the tempos of the drum sound parts included in the first and second musical pieces is executed, and then the tempo of the drum sound parts of the first musical piece or the second musical piece is synchronized with the original musical piece.
  • One or both of the process of gradually transitioning to the tempo of , and the process of matching the playback positions of the drum sound part and the sound part other than the drums in the first song or the second song may be omitted.
  • the tempo synchronization processing may be completed before the start of mixing. good.
  • music switching processing may be performed using an operator such as the crossfader 314 .
  • mixing may be started when the crossfader 314 starts moving from one end toward the other end.
  • the automix processing described in each of the above embodiments is performed on only some of the parts that make up the first song and the second song, for example, only the drum sound parts, and the parts other than the drum sounds are processed.
  • an operator such as the crossfader 314 may be used to perform music switching processing.
  • the present invention is not limited to controls such as the crossfader 314, but can be applied to controls configured in software such as a GUI (Graphical User Interface).
  • the audio device having the functions as described above is not limited to the DJ system described in each of the above embodiments, and may be, for example, a mixer, a DJ controller having a mixer function, or the like.
  • the present invention may be applied to DJ applications and music applications executed on computers, smartphones, and tablet terminals, or may be applied to streaming services using the Internet.
  • a 2-channel sound system with two players 2A and 2B was described, but the same function can be realized with a 4-channel sound system, for example.
  • the present invention is not limited to DJ equipment, but can be applied to general mixers, electronic musical instruments, and audio equipment such as DAWs (Digital Audio Workstations) and DTMs (Desk Top Music).

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

少なくも2の楽曲をミキシングする音響装置(1)であって、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部(63)と、第一の楽曲又は第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させる処理とを実行する再生制御部(64,65)とを備える音響装置が提供される。

Description

音響装置、音響装置の制御方法およびプログラム
 本発明は、音響装置、音響装置の制御方法およびプログラムに関する。
 従来、DJコントローラー等のDJ機器は複数のデッキを備え、それぞれのデッキで楽曲を再生しつつ、デッキ間の音声出力を切り替えることにより、再生中の楽曲から他の楽曲への切り替えが行われている。DJ機器における楽曲の切り替えに際しては、DJ機器に設けられた複数のデッキの音量を調節するクロスフェーダーが用いられるが、自然な切り替えを行うためには巧みなユーザー操作が必要となる。
 そこで、楽曲の切り替えを支援するための技術が種々提案されている。例えば、特許文献1の音響機器では、周波数帯域に着目して出力レベルを調整することにより、楽曲をミキシングする際の違和感の発生を防止している。
特許第6171503号公報
 上述した楽曲の切り替えに際しては、切り替え前後の楽曲のテンポが合っていない場合、BPMの連続性が失われ、ユーザーに違和感や不快感を与えるという問題がある。また、切り替え前後の楽曲のテンポを合わせるためにBPMを変更した場合、特にメロディーラインにおいて原曲と再生音との乖離が大きくなり、ユーザーに違和感や不快感を与えるという問題がある。
 そこで、本発明は、ユーザーに違和感や不快感を与えることなく、楽曲を切り替えるミキシングにおいて好ましい切り替え動作を行うことが可能な音響装置、音響装置の制御方法およびプログラムを提供することを目的とする。
[1]少なくも2の楽曲をミキシングする音響装置であって、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、第一の楽曲又は第二の楽曲に含まれる第一のパート のテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させる処理とを実行する再生制御部とを備える音響装置。
[2]少なくも2の楽曲をミキシングする音響装置であって、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させる処理とを実行する再生制御部とを備える音響装置。
[3]再生制御部は、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させた後に、第一の楽曲又は第二の楽曲の第一のパートのテンポを、原曲のテンポに徐々に推移させる処理を実行する、[1]又は[2]に記載の音響装置。
[4]再生制御部は、第一の楽曲又は第二の楽曲の第一のパートのテンポを、原曲のテンポに徐々に推移させた後に、第一の楽曲又は第二の楽曲において、第一のパートと第一のパートとは異なる第二のパートとの再生位置を整合させる処理を行う、[1]から[3]のいずれかに記載の音響装置。
[5]クロスフェーダーをさらに備え、再生制御部は、クロスフェーダーの一方の端部から、他方の端部方向へ移動を開始した時点をミキシング開始時とする、[1]から[4]のいずれかに記載の音響装置。
[6]再生制御部は、ミキシング開始時又はミキシング開始時より所定の時間経過後を含む所定の区間において、第一の楽曲に含まれる第二のパートを第一の楽曲の原曲のテンポで再生させ、第二の楽曲に含まれる第二のパートを第二の楽曲の原曲のテンポで再生させるとともに、第一の楽曲の第二のパートと、第二の楽曲の第二のパートとを切り替える、[1]から[5]のいずれかに記載の音響装置。
[7]第一のパートは、ドラム音のうち、少なくともバスドラム音に対応するパートである、[1]から[6]に記載の音響装置。
[8]少なくも2の楽曲をミキシングする音響装置の制御方法であって、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出するステップと、第一の楽曲又は第二の楽曲に含まれる第一のパートのテンポを徐々に変化させるステップと、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させるステップとを含む音響装置の制御方法。
[9]少なくも2の楽曲をミキシングする音響装置の制御方法であって、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出するステップと、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを徐々に変化させるステップと、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させるステップとを含む音響装置の制御方法。
[10]少なくも2の楽曲をミキシングする音響装置としてコンピュータを機能させるためのプログラムであって、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、第一の楽曲又は第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させる処理とを実行する再生制御部とを備える音響装置としてコンピュータを機能させるためのプログラム。
[11]少なくも2の楽曲をミキシングする音響装置としてコンピュータを機能させるためのプログラムであって、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれる第一のパートのテンポを同期させる処理とを実行する再生制御部とを備える音響装置としてコンピュータを機能させるためのプログラム。
本発明の第1の実施形態における音響装置を示す模式図である。 本発明の第1の実施形態に係る音響装置の概略的な機能構成を示すブロック図である。 本発明の第1の実施形態における楽曲の切り替え処理について説明する模式図である。 本発明の第1の実施形態における楽曲の切り替え処理について説明する別の模式図である。 本発明の第1の実施形態における楽曲の切り替え処理について説明する別の模式図である。 本発明の第1の実施形態に係る音響装置の制御方法を示すフローチャートである。 本発明の第1の実施形態に係る音響装置の制御方法を示す別のフローチャートである。 本発明の第2の実施形態における楽曲の切り替え処理について説明する模式図である。 本発明の第2の実施形態に係る音響装置の制御方法を示すフローチャートである。 本発明の第3の実施形態における楽曲の切り替え処理について説明する模式図である。 本発明の第3の実施形態に係る音響装置の制御方法を示すフローチャートである。
 以下、添付図面を参照しながら、本発明のいくつかの実施形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
 (第1の実施形態)
 図1は、本発明の第1の実施形態における音響装置を示す模式図である。
 第1の実施形態に係る音響装置1は、楽曲を再生する2つのプレイヤー2Aおよび2Bと、プレイヤー2Aおよび2Bを制御するミキサー3と、表示部4とが一体化したDJシステムである。具体的に、音響装置1は、ユーザーが操作をすることによって音響再生装置および音響再生制御装置として機能し、楽曲を再生するとともに、再生中の楽曲に対して各種エフェクトを適用する。エフェクトには、例えばディレイ、エコー、リバーブ、またはループなどと呼ばれるエフェクトを楽曲に適用してエフェクト音を再生するエフェクト、および原音を加工して再生するエフェクト等が含まれる。
 音響装置1は、図1に示すように、プレイヤー2Aおよび2Bにそれぞれ設けられた操作部21Aおよび21Bと、ミキサー3に設けられた操作部31とを備える。
 操作部21Aは、プレイヤー2Aに対するユーザー操作を受け付け、操作部21Bは、プレイヤー2Bに対するユーザー操作を受け付ける。また、操作部31は、ミキサー3に対するユーザー操作を受け付ける。
 操作部21Aは、ジョグダイヤル211A、テンポスライダー212A、キューボタン213A、プレイ/ポーズボタン214A、およびパフォーマンスパッド215Aを含む。
 より具体的には、ジョグダイヤル211Aは回転操作子であり、プレイヤー2Aで再生中の楽曲の再生方向や再生速度を設定する際に用いられる。テンポスライダー212Aは、プレイヤー2Aで再生中の楽曲の再生速度を調整する際に用いられる。キューボタン213Aは、楽曲の所定の位置をキューポイントとして設定する際に押下される。プレイ/ポーズボタン214Aは、プレイヤー2Aで楽曲の再生を開始、または停止する際に押下される。パフォーマンスパッド215Aは、再生制御に関する各種機能を割り当てることができる汎用性操作子である。
 操作部21Bは、操作部21Aと同様に、ジョグダイヤル211B、テンポスライダー212B、キューボタン213B、プレイ/ポーズボタン214B、およびパフォーマンスパッド215Bを含む。
 音響装置1は、例えば、プレイヤー2Aの操作部21Aに対してユーザーによる操作が行われると、プレイヤー2Aにロードされた楽曲を再生するとともに、必要に応じて再生中の楽曲に対してエフェクトを適用する。プレイヤー2Bについても同様である。
 ミキサー3は、ユーザー操作に従って、プレイヤー2Aおよび2B間の楽曲再生の切り替え、各チャンネルの音量調整、およびエフェクトを適用した再生を実行する。
 ミキサー3の操作部31は、エフェクト選択つまみ311Aおよび311B、エフェクト量調整つまみ312Aおよび312B、チャンネルフェーダー313Aおよび313B、およびクロスフェーダー314を含む。
 より具体的には、エフェクト選択つまみ311Aおよび311Bは、それぞれプレイヤー2Aおよび2Bで再生中の楽曲に適用するエフェクトを選択する際に用いられる。エフェクト量調整つまみ312Aおよび312Bは、それぞれプレイヤー2Aおよび2Bで再生中の楽曲に適用するエフェクトの深さ、大きさ等のパラメータを調整する際に用いられる。チャンネルフェーダー313Aおよび313Bは、それぞれプレイヤー2Aおよび2Bで再生中の楽曲の出力音量レベルを調整する際に用いられる。
 クロスフェーダー314は、第1のチャンネルであるプレイヤー2Aで再生される第一の楽曲と、第2のチャンネルであるプレイヤー2Bで再生される第二の楽曲との音量バランスを調節するための操作子である。
 表示部4は、ディスプレイ41、およびディスプレイの表示領域を覆うように設けられたタッチパネル42を備える。タッチパネル42がユーザーによる接触位置を検出し、接触位置を示す座標等の情報を出力することにより、表示部4は操作部としても機能する。
 図2は、第1の実施形態に係る音響装置における処理部の概略的な機能構成を示すブロック図である。
 音響装置1は、それぞれ上述した各部の他、図2に示すように、楽曲データ格納部5と、制御部6と、音声出力部7とを含む。上記の各部の機能は、例えばコンピュータのハードウェア構成を備える音響装置において、プロセッサがプログラムに従って動作することによって実現される。以下、各部の機能についてさらに説明する。
 楽曲データ格納部5は、HDD(Hard Disk Drive)またはフラッシュメモリー等により、楽曲データを格納可能に構成されている。楽曲データ格納部5には、複数の楽曲の楽曲データがMP3形式等の所定の形式で格納されている。楽曲データは、音声情報に加えて、例えば、楽曲のBPM、アートワーク、タイトル、アーティスト名、アルバム名、キー、DJプレイ回数およびジャンル等の情報をタグ情報として含む。楽曲データ格納部5に格納される楽曲データには、再生位置の情報であるタイムスタンプが対応付けられる。
 本実施形態において、楽曲データ格納部5に格納され、音響装置1において再生可能な楽曲データは、予め複数のパートへの分離処理が施されている。本実施形態において、楽曲データから分離される複数のパートは、楽曲データによって再生される楽曲のパートごとの音に対応する。ここで、楽曲のパートは、ボーカルまたは各楽器の音に対応し、単純な例ではボーカル、ギター、ベース、ドラムの4つのパートによって楽曲が構成される。さらに、例えばドラムにおけるバスドラム、スネアドラム、ハイハットなどのように楽器の部分ごとにパートを細分化して分離することも有用である。なお、このような複数のパートへの分離処理については、公知の各種の技術を利用可能であるため詳細な説明は省略する。
 以下では、一例として、ドラム音のパートと、ドラム以外の楽器音および/またはボーカルのパートとの2つのパートへの分離処理が施された楽曲データが楽曲データ格納部5に格納されているものとして説明を行う。なお、音響装置1は、既に分離処理が施された楽曲データを外部から取得してもよいし、未分離の楽曲データを複数のパートに分離する処理を実行する機能部分をさらに有してもよい。
 制御部6は、例えば通信インターフェース、CPU(Central Processing Unit)等のプロセッサ、および、作業領域となるメモリーによって音響装置1に実装され、音響装置1の動作を制御する。制御部6は、プロセッサがメモリーに格納された、又は通信インターフェースを介して受信されたプログラムに従って動作することによって実現される受付部61と、オートミックス設定部62と、テンポ検出部63と、第1再生部64と、第2再生部65とを含む。
 受付部61は、操作部21A、21B、操作部31、およびタッチパネル42に対するユーザー操作を受け付ける。
 オートミックス設定部62は、自動で楽曲を切り替えるミキシングを行うオートミックス処理について、操作部21A、21B、操作部31、およびタッチパネル42に対するユーザー操作に応じた設定を行う。
 オートミックス処理に関する設定は、楽曲の切り替え結果を指定する形で行われる。楽曲の切り替え結果は、例えばフェードアウトおよびフェードインで切り替え後の楽曲が聴取され始めてから切り替え前の楽曲が聴取されなくなるまでの時間、フェードアウトおよびフェードインの中間点で均等になったときのそれぞれの楽曲の音量、および切り替え後の楽曲のカットインから切り替え前の楽曲のカットアウトまでの時間等を含む。
 オートミックス処理に関する設定においては、楽曲の切り替えの対象となる楽曲データについて、キューポイント等と関連付けて、上述した楽曲の切り替え結果を指定することにより、対象の楽曲データの特徴に応じた楽曲の切り替えが可能となる。このような詳細な設定は、例えば音響装置1のディスプレイ41およびタッチパネル42や、音響装置1に接続されたコンピュータを利用して演奏前に実施される。オートミックス設定部62における設定の詳細は、後述するオートミックス処理とあわせて説明する。
 テンポ検出部63は、第一の楽曲及び第二の楽曲のテンポを検出する。
 第1再生部64は、操作部21Aおよび操作部31に対するユーザー操作に応じて、プレイヤー2Aにおける楽曲の再生を行い、音声信号を音声出力部7に出力する。同様に、第2再生部65は、操作部21B、および操作部31に対するユーザー操作に応じて、プレイヤー2Bにおける楽曲の再生を行い、音声信号を音声出力部7に出力する。なお、オートミックス設定部62によってオートミックス処理に関する設定が行われ、操作部21A、21B、および操作部31に対するユーザー操作によってオートミックス処理を実行する指示がされた場合、第1再生部64および第2再生部65は、オートミックス設定部62における設定に応じて、第一の楽曲と第二の楽曲との音量バランス等を複数のパートごとに調節することにより、プレイヤー2Aおよびプレイヤー2Bにおける楽曲の切り替え処理を行う。
 なお、音響装置1は、通信インターフェースを備え、外部記憶装置およびコンピュータ等に記憶された楽曲データを、図示しない通信インターフェースを介して取得し、楽曲データ格納部5に格納する構成としてもよい。この場合、音響装置1には楽曲データ格納部5が含まれず、外部記憶装置が楽曲データ格納部5として機能する。
 音声出力部7は、例えばスピーカー端子またはヘッドフォン端子等の音声出力端子を備え、第1再生部64および第2再生部65により再生された楽曲の音声信号を音声情報として出力する。
 以上説明した音響装置1においてオートミックス処理による楽曲の切り替え処理を行う際の制御部6の動作について説明する。
 図3は、第1の実施形態に係る音響装置による楽曲の切り替え部分における1曲目(第一の楽曲)の楽曲データ、および2曲目(第二の楽曲)の楽曲データの例を示す。図3の例では、第一の楽曲および第二の楽曲の楽曲データは、テンポが異なる。ここで、テンポとはBPMまたは拍位置等より導かれる拍子のことである。
 従来、楽曲の切り替えに際しては、楽曲全体に対して一様な楽曲の切り替え処理が行われていた。そのため、例えば楽曲の切り替え時に第一の楽曲と第二の楽曲とのテンポ(BPM)が異なる場合、第一の楽曲および第二の楽曲をそれぞれ原曲のテンポでミックスするとBPMの連続性が失われ、ユーザーに違和感や不快感を与えるという問題がある。特にドラム音については、楽曲の切り替え時にこの問題が顕著になる。
 また、テンポ(BPM)を合わせるために一方又は両方の楽曲のテンポ(BPM)を変更した場合、特にメロディーラインにおいては、原曲と再生音との乖離が大きくなり、ユーザーに違和感や不快感を与えるという問題がある。
 そこで、第1の実施形態の音響装置1は、楽曲を構成する複数のパートのそれぞれについて、各パートの特性に応じたミキシングを行うための楽曲の切り替え処理を行う。
 図4および図5は、第1の実施形態に係る音響装置による楽曲の切り替え処理について説明する模式図である。以下では、一例として、プレイヤー2Aからプレイヤー2Bへの楽曲の切り替えを例に挙げて説明する。また、以下では第一の楽曲および第二の楽曲の原曲のテンポをそれぞれテンポT1およびテンポT2と称する。
 まず、ドラム音のパートについて図4を参照して説明する。音響装置1は、図4に示すように、ドラム音のパートについて以下の(1)から(3)の各処理を実行してミキシングを行う。
 (1)第1の時点P1で、第二の楽曲のドラム音のパートのテンポを変更することにより第一の楽曲および第二の楽曲のドラム音のパートのテンポを同期させ、第一の楽曲をカットアウトするとともに第二の楽曲をカットインすることにより切り替える。
 (2)第1の時点P1から第2の時点P2の間で、第二の楽曲のドラム音のパートのテンポを、徐々に変化させる。
 (3)第2の時点P2で、第二の楽曲のドラム音のパートとドラム以外の音のパートとの再生位置を整合させる。
 (1)から(3)で示した処理は、ドラム音のパートの特性に応じて楽曲の切り替えを行うとともに、ミキシング時に発生する違和感や不快感を抑えるための処理である。ドラム音のパートは、音量のレベルが大きく、また楽曲ごとにパターンが異なり、さらには特にバスドラムにおけるアタック音からピーク音までのディレイが楽曲ごとに大きく異なる。そのため、ドラム音のパートについてテンポを合わせずに楽曲の切り替えを行うと、上述したように、ユーザーに違和感および不快感を与える場合がある。
 そこで、ドラム音のパートについては、(1)に示したように、第一の楽曲および第二の楽曲のドラム音のパートのテンポを同期させて切り替える。なお、ドラム音のパートにはメロディーや歌詞がないため、聴取者に連続性をもって捉えられることは少ない。そこで、ドラム音のパートについては、カットアウトおよびカットインによる楽曲の切り替えを行うことにより、楽曲の切り替え時の違和感をより抑えることができる。
 次に、(2)に示したように、第1の時点P1から第2の時点P2の間でテンポT2まで徐々に変化させる。そして、(3)に示したように、第2の時点P2で第二の楽曲のドラム音のパートとドラム音以外の音のパートとの再生位置を整合させる。
 このような処理を行うことにより、第1の時点P1において、第二の楽曲のドラム音のパートのテンポを第一の楽曲のドラム音のパートの原曲のテンポであるテンポT1に同期させることにより違和感なく楽曲の切り替えを行う。その後、第1の時点P1から第2の時点P2の間で、第二の楽曲のドラム音のパートのテンポを、テンポT1から第2の楽曲の原曲のテンポであるテンポT2まで徐々に変化させ、第2の時点P2において第二の楽曲のドラム音のパートとドラム以外の音のパートとの再生位置を整合させる。そして、第2の時点P2から第二の楽曲のドラム音のパートおよびドラム以外の音のパートをテンポT2に合わせて再生する。つまり、第2の時点以降、第二の楽曲は、テンポの変更等のない通常の再生音と同等になる。
 (1)から(3)の各処理を実行するために、オートミックス設定部62は、ドラム音のパートについて例えば下記の設定を行う。
 第一の楽曲:カットアウト位置(P1)
 第二の楽曲:カットイン位置(P1)、ドラム音のパートとドラム以外の音のパートとの再生位置を整合させる位置(P2)
 なお、第一の楽曲におけるドラム音のパートのカットアウト位置(P1)および第二の楽曲におけるドラム音のパートのカットイン位置(P1)を、自動で設定する構成としてもよい。例えば、拍位置検出技術、小節位置検出技術、ボーカル検出技術、およびリリック表示技術など公知の楽曲解析処理を行い、第一の楽曲および第二の楽曲におけるドラム音のパートカットアウトおよびカットインにふさわしいタイミングを設定する構成としてもよい。
 第1再生部64および第2再生部65は、オートミックス設定部62における設定に応じて、第一の楽曲および第二の楽曲のドラム音のパートを下記のように再生する。
 第1の時点P1まで:第一の楽曲をテンポT1で再生する。
 第1の時点P1:第一の楽曲をカットアウトするとともに第二の楽曲をテンポT1で再生する。
 第1の時点P1から第2の時点P2までの間:第二の楽曲のテンポをテンポT1からテンポT2まで徐々に変化させる。
 第2の時点P2以降:第二の楽曲をテンポT2で再生する。
 次に、ドラム以外の音のパートについて図5を参照して説明する。ドラム以外の音のパートは、メロディーや歌詞があることによって聴取者に連続性をもって捉えられることが多いパートである。そのため、楽曲の切り替え時にテンポを変更すると、原曲と再生音との乖離が大きくなり、ユーザーに違和感や不快感を与える場合がある。そこで、音響装置1は、図5に示すように、ドラム以外の音のパートについては第1の時点P1を含むミックス区間Sで、テンポを変更せずに第一の楽曲および第二の楽曲を切り替える。
 このような楽曲の切り替えを行うことにより、ドラム以外の音のパートについて、テンポを調整することによってメロディーや歌詞が早送りになる、または、間延びし、ユーザーに違和感および不快感を与えるという問題を避けることができる。
 オートミックス設定部62は、ドラム以外の音のパートについて、例えば、第一の楽曲のフェードアウト開始位置および終了位置と、第二の楽曲のフェードイン開始位置および終了位置とを設定する。この時、ミックス区間Sは、上述したドラム音のパートのカットイン位置およびカットアウト位置を含むことが好ましい。このようにミックス区間Sを設定することにより、ドラム音のパートのカットアウトおよびカットインによる楽曲の切り替え処理のバックグラウンドで、ドラム以外の音のパートを自然に切り替えることができる。
 なお、第一の楽曲および第二の楽曲におけるドラム以外の音のパートのフェードアウトまたはフェードイン開始位置および終了位置を、自動で設定する構成としてもよい。例えば、キー検出技術、楽曲展開検出技術、ボーカル検出技術およびリリック表示技術など公知の楽曲解析処理を行い、第一の楽曲および第二の楽曲におけるドラム以外の音のパートのフェードアウトまたはフェードイン開始位置および終了位置にふさわしいタイミングを設定する構成としてもよい。
 第1再生部64および第2再生部65は、オートミックス設定部62における設定に応じて、第一の楽曲および第二の楽曲のドラム以外の音のパートを下記のように再生する。
 第1の楽曲のフェードアウト開始位置(ミキシング開始時)まで:第一の楽曲を原曲のテンポであるテンポT1で再生する。
 第一の楽曲のフェードアウト開始位置から終了位置:第一の楽曲をフェードアウトする。
 第二の楽曲のフェードイン開始位置から終了位置(ミキシング開始時より所定の時間経過後):第二の楽曲を原曲のテンポであるテンポT2で再生するとともにフェードインする。
 第二の楽曲のフェードイン終了位置以降:第二の楽曲を原曲のテンポであるテンポT2で再生する。
 ここまで説明したように、オートミックス処理が開始されると、時刻t1で、第1再生部64は、第一の楽曲のドラム以外の音のパートの音量を徐々に下げてフェードアウトを開始する。時刻t2で、第1再生部64は、第一の楽曲のドラム音のパートをカットアウトし、第2再生部65は、第二の楽曲のドラム以外の音のパートの音量を徐々に上げてフェードインを開始し、第二の楽曲のドラム音のパートを、第一の楽曲の原曲のテンポであるテンポT1でカットインし、第二の楽曲のドラム音のパートのテンポをテンポT2まで徐々に変化させる。
 時刻t3において、第1再生部64は、第一の楽曲のドラム以外の音のパートのフェードアウトを終了し、時刻t4において、第2再生部65は、第二の楽曲のドラム以外の音のパートのフェードインを終了する。そして、時刻t5で、第二の楽曲におけるドラム音のパートおよびドラム以外の音のパートの再生位置が整合する。
 つまり、ドラム音のパートについては、第1の時点P1で楽曲のテンポの調整を伴うカットアウトおよびカットインで楽曲の切り替えが行われ、ドラム以外の音のパートについては、楽曲のテンポを変化させずに、フェードアウトおよびフェードインで楽曲の切り替えが行われる。そして、第2の時点P2で第二の楽曲におけるドラム音のパートおよびドラム以外の音のパートの再生位置が整合する。したがって、楽曲を構成する複数のパートのそれぞれについて、各パートの特性に応じた楽曲の切り替え処理を行うことにより、好ましい切り替え動作を実現することができる。
 なお、時刻t2から時刻t5までの間、第二の楽曲のドラム音のパートのテンポを徐々に変化させるが、ドラム以外の音のパートのテンポは変化させない。そのため、時刻t2から時刻t5までの間、第二の楽曲のドラム音のパートとドラム以外の音のパートとの間で、テンポおよび再生位置のギャップが発生する。このギャップは時刻t2で最大となり、時刻t5で略0となる。しかし、ドラム以外の音のパートは、ドラム音のパートと比較して音量が小さく、また、リズムを刻む主要なパートであるドラム音のパートが安定的に再生している限りドラム以外の音のパートのリズムは目立ちにくいため、上述したギャップの影響は小さい。
 また、上述したミックス区間S(時刻t1から時刻t5)についてのみ、分離処理が施された楽曲データを利用し、それ以外の区間については、未分離の楽曲データを利用する構成としてもよい。この場合、第1再生部64は、時刻t1まで未分離の第一の楽曲データを再生し、時刻t1から分離処理が施された第一の楽曲データを再生する。また、第2再生部65は、時刻t2から分離処理が施された第二の楽曲データを再生し、時刻t5から未分離の第二の楽曲データを再生する。
 また、図5の例で示した楽曲の切り替え処理は、一例であり、この例に限定されない。例えば、図5の例では、ドラム以外の音のパートについてフェードアウトおよびフェードインで楽曲の切り替えを行う例を示したが、カットアウトおよびカットインで楽曲の切り替えを行ってもよいし、フェードアウトおよびフェードインとカットアウトおよびカットインとを組み合わせて楽曲の切り替えを行ってもよい。また、図5の例では、ドラム音のパートについて、カットアウトおよびカットインで楽曲の切り替えを行う例を示したが、フェードアウトおよびフェードインで楽曲の切り替えを行ってもよいし、フェードアウトおよびフェードインとカットアウトおよびカットインとを組み合わせて楽曲の切り替えを行ってもよい。さらに、何れのパートにおいても、カットアウトおよびカットインを同時に行ってもよいし、異なるタイミングで行ってもよい。
 次に、図6のフローチャートを参照して、本発明の第1の実施形態におけるオートミックス処理に関する設定時の音響装置の制御方法について説明する。
 図6には、受付部61がオートミックス処理に関する設定を指示する操作を受け付けた時に開始される処理のフローチャートが示されている。
 オートミックス設定部62は、第一の楽曲および第二の楽曲を構成する複数のパートごとに、設定を受け付ける(ステップS101)。
 そして、オートミックス設定部62は、テンポの調整が必要か否かを判定する(ステップS102)。テンポの調整が必要か否かは、第一の楽曲および第二の楽曲のテンポ(BPM)が一致しているか否かに応じて判定することができる。例えば、図5で説明した例のように、第一の楽曲および第二の楽曲のテンポ(BPM)が異なる場合、オートミックス設定部62は、テンポの調整が必要と判定する。
 そして、テンポの調整が必要と判定されると(ステップS102YES)、オートミックス設定部62は、複数のパートの再生位置を整合させる時点を算出する(ステップS103)。複数のパートの再生位置を整合させる時点(第2の時点P2)は、例えば、第二の楽曲のドラム音のパートのカットインの時点(第1の時点P1)から所定の時間が経過した時点でもよいし、第二の楽曲のドラム以外の音のパートのフェードイン終了の時点から所定の時間が経過した時点でもよい。また、キー検出技術、楽曲展開検出技術、ボーカル検出技術、およびリリック表示技術など公知の楽曲解析処理に基づいて複数のパートの再生位置を整合させる時点を算出してもよい。
 次に、オートミックス設定部62は、ステップS103で算出した複数のパートの再生位置を整合させる時点に基づいて、テンポの変更内容を決定する(ステップS104)。テンポの変更内容は、第一の楽曲および第二の楽曲のテンポと、複数のパートの再生位置を整合させる時点とに基づいて決定することができる。例えば、図5で説明した例では、第二の楽曲のドラム音のパートのカットインの時点(第1の時点P1)から複数のパートの再生位置を整合させる時点(第2の時点P2)までの間に、第二の楽曲のドラム音のパートのテンポを、第一の楽曲の原曲のテンポであるテンポT1から第二の楽曲の原曲のテンポであるテンポT2に変化させるための変更内容を決定する。
 そして、オートミックス設定部62は、オートミックス設定部62が受け付けた設定の内容に応じて、複数のパートごとにオートミックス処理に関する制御値を算出する(ステップS105)。なお、オートミックス設定部62は、ステップS102でテンポの調整が必要と判定した場合には、ステップS103およびS104における処理を加味して制御値を算出し、ステップS102でテンポの調整が不要と判定した場合には、オートミックス設定部62が受け付けた設定の内容に基づいて制御値を算出する。制御値の算出については、公知の各種の技術を利用可能であるため詳細な説明は省略する。
 次に、図7のフローチャートを参照して、本発明の第1の実施形態におけるオートミックス処理実行時の音響装置の制御方法について説明する。
 図7には、受付部61がオートミックス処理の実行を指示する操作を受け付けた時に開始される処理のフローチャートが示されている。
 第1再生部64は、オートミックス設定部62により算出された制御値に従って、第一の楽曲のドラム以外の音のパートのフェードアウトを開始する(ステップS201)。
 第一の楽曲および第二の楽曲のドラム音のパートをカットアウトおよびカットインする第1の時点P1になると(ステップS202YES)、第1再生部64は、オートミックス設定部62により算出された制御値に従って、第一の楽曲のドラム音のパートをカットアウトし、第2再生部65は、オートミックス設定部62により算出された制御値に従って、第二の楽曲のドラム音のパートを第一の楽曲の原曲のテンポであるテンポT1でカットインするとともに、第二の楽曲のドラム以外の音のパートのフェードインを開始する(ステップS203)。続けて、第2再生部65は、オートミックス設定部62により算出された制御値に従って、第二の楽曲のドラム音のパートのテンポを第二の楽曲の原曲のテンポであるテンポT2まで徐々に変化させる(ステップS204)。
 そして、第2再生部65は、第二の楽曲におけるドラム音のパートおよびドラム以外の音のパートの再生位置が整合する位置である時点P2になるまで(ステップS205YES)、ステップS204の処理を継続する。
 なお、図3から図7では、プレイヤー2Aからプレイヤー2Bへの楽曲の切り替えを例に挙げて説明したが、プレイヤー2Bからプレイヤー2Aへの楽曲の切り替えについても同様の処理が行われる。また、図3から図5では、第一の楽曲のテンポT1が第二の楽曲のテンポT2よりも遅い例を挙げて説明したが、第一の楽曲のテンポT1が第二の楽曲のテンポT2よりも速い場合にも同様の処理を行うことができる。
 以上で説明したような本発明の第1の実施形態によれば、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出し、第二の楽曲に含まれるドラム音のパート(第一のパート)のテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのテンポを同期させる処理とを実行する。したがって、楽曲を構成する複数のパートのそれぞれについて、特性に応じた楽曲の切り替えを行うことができる。そのため、ユーザーに違和感や不快感を与えることなく、楽曲を切り替えるミキシングにおいて好ましい切り替え動作を行うことができる。
 また、本発明の第1の実施形態によれば、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのテンポを同期させた後に、第二の楽曲のドラム音のパートのテンポを、原曲のテンポに徐々に推移させる処理を実行する。したがって、同期させるために変更した第二の楽曲のドラム音のパートのテンポを、元に戻すことができる。
 また、本発明の第1の実施形態によれば、第二の楽曲のドラム音のパートのテンポを、第二の楽曲の原曲のテンポに徐々に推移させた後に、第二の楽曲において、ドラム音のパート(第一のパート)とドラム以外の音のパート(第二のパート)との再生位置を整合させる処理を行う。したがって、ドラム音のパートのテンポを変更することにより発生するギャップを解消することができる。
 また、本発明の第1の実施形態によれば、ミキシング開始時又はミキシング開始時より所定の時間経過後を含む所定の区間において、第一の楽曲に含まれるドラム以外の音のパートを第一の楽曲の原曲のテンポで再生させ、第二の楽曲に含まれるドラム以外の音のパートを第二の楽曲の原曲のテンポで再生させるとともに、第一の楽曲のドラム以外の音のパートと、第二の楽曲のドラム以外の音のパートとを切り替える。したがって、原曲と再生音との乖離が大きくなるとユーザーに違和感や不快感を与えるパートについては、その特性に応じて、テンポを変更することなく好ましい切り替え動作を行うことができる。
 また、本発明の第1の実施形態によれば、第一のパートは、ドラム音のうち、少なくともバスドラム音に対応するパートである。したがって、ユーザーに違和感および不快感を与える可能性があるドラム音のパート(特にバスドラム)について、その特性に適した楽曲の切り替えを行うことができる。
 (第2の実施形態)
 第2の実施形態では、第1の実施形態と異なる部分についてのみ説明し、第1実施形態と同様の部分については説明を省略する。
 第2の実施形態における音響装置は、第1の実施形態と同様の構成を備える。そして、第2の実施形態の音響装置においては、第一の楽曲および第二の楽曲のドラム音のパートの切り替え処理が第1の実施形態の音響装置と異なる。
 図8は、第1の実施形態の図4に対応し、第2の実施形態の音響装置による楽曲の切り替え処理、特に、ドラム音のパートの切り替え処理について説明する模式図である。
 第2の実施形態の音響装置は、図8に示すように、ドラム音のパートについて以下の(1)および(2)の各処理を実行してミキシングを行う。
 (1)第1の時点P3から第2の時点P4までの間で、第一の楽曲のドラム音のパートのテンポを、第一の楽曲の原曲のテンポであるテンポT1からテンポT2まで徐々に変化させる。
 (2)第2の時点P4で、第一の楽曲をカットアウトするとともに第二の楽曲をカットインする。
 (1)および(2)で示した処理は、第1の実施形態と同様に、ドラム音のパートの特性に応じて楽曲の切り替えを行うとともに、ミキシング時に発生する違和感や不快感を抑えるための処理である。ただし、第2の実施形態においては、上述したように、第二の楽曲のテンポを調整する代わりに第一の楽曲のテンポを調整する。つまり、第1の時点P3から第2の時点P4までの間に第一の楽曲のドラム音のパートのテンポを調整することにより、カットアウトおよびカットインを行う第2の時点P4において、第一の楽曲および第二の楽曲のドラム音のパートのテンポは一致する。そのため、第1の実施形態のように第二の楽曲のドラム音のパートのテンポを調整する必要はない。
 また、第2の実施形態においては、第1の時点P3から第2の時点P4までの間、第一の楽曲のドラム音のパートとドラム以外の音のパートとの間で、テンポおよび再生位置のギャップが発生する。しかし、ドラム以外の音のパートは、フェードアウト中であり、また、ドラム音のパートと比較して音量が小さく、さらに、リズムを刻む主要なパートであるドラム音のパートが安定的に再生している限りドラム以外の音のパートのリズムは目立ちにくいため、上述したギャップの影響は小さい。
 また、第2の実施形態においては、第二の楽曲のドラム音のパートおよびドラム以外の音のパートのいずれもテンポは調整されない。そのため、第2の時点P4において第二の楽曲のドラム音のパートとドラム以外の音のパートとの再生位置の整合性は保たれているので、第1の実施形態のように、第二の楽曲のドラム音のパートとドラム以外の音のパートとの再生位置を整合させるための計算及び処理は必要ない。なお、第1の実施形態における第二の楽曲のドラム音のパートと同様に、テンポを変更した第一の楽曲のドラム音のパートについて、テンポを第一の楽曲の原曲のテンポであるテンポT1に戻す処理を行ってもよい。
 ここまで説明したように、オートミックス処理が開始されると、ドラム音のパートについては、第1の時点P3から第一の楽曲のドラム音のパートのテンポを変化させ、第2の時点P4で第一の楽曲のテンポを第二の楽曲の原曲のテンポであるテンポT2と一致させるとともに、カットアウトおよびカットインで楽曲の切り替えが行われる。一方、ドラム以外の音のパートについては、第1の実施形態と同様に、テンポを変化させずにフェードアウトおよびフェードインで楽曲の切り替えが行われる。
 (1)および(2)の各処理を実行するために、第2の実施形態においては、第1の実施形態の図6に示したフローチャートと同様に、オートミックス処理に関する設定が行われる。ただし、第2の実施形態では、ステップS103において複数のパートの再生位置を整合させる時点を算出する必要はないため、ステップS103の処理は不用である。また、第2の実施形態では、ステップS104の処理におけるテンポの変更内容として、第一の楽曲のドラム音のパートのテンポを、第一の楽曲の原曲のテンポであるテンポT1から第二の楽曲の原曲のテンポであるテンポT2に変化させるための変更内容を決定する。
 次に、図9のフローチャートを参照して、本発明の第2の実施形態におけるオートミックス処理実行時の音響装置の制御方法について説明する。なお、図9の例では、ドラム音のパートの楽曲の切り替え処理についてのみ説明し、ドラム以外の音のパートの楽曲の切り替え処理については、第1の実施形態と同様であるため説明を省略する。
 第一の楽曲のドラム音のパートのテンポの変化を開始する第1の時点P3になると(ステップS301YES)、第1再生部64は、オートミックス設定部62により算出された制御値に従って、第一の楽曲のドラム音のパートのテンポをテンポT1からテンポT2まで徐々に変化させる(ステップS302)。
 第一の楽曲および第二の楽曲のドラム音のパートをカットアウトする第2の時点P4になると(ステップS303YES)、第1再生部64は、オートミックス設定部62により算出された制御値に従って、第一の楽曲のドラム音のパートをカットアウトし、第2再生部65は、オートミックス設定部62により算出された制御値に従って、第二の楽曲のドラム音のパートを、テンポを変化させずにカットインする(ステップS304)。
 以上で説明したような本発明の第2の実施形態によれば、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出し、第一の楽曲に含まれるドラム音のパート(第一のパート)のテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのテンポを同期させる処理とを実行する。したがって、第1の実施形態と同様の効果を得ることができる。特に、第2の実施形態によれば、第二の楽曲のドラム音のパートとドラム以外の音のパートとの再生位置を整合させる処理が不要であるため、処理負荷を低減することが期待できる。
 (第3の実施形態)
 第3の実施形態では、第1の実施形態および第2の実施形態と異なる部分についてのみ説明し、第1実施形態および第2の実施形態と同様の部分については説明を省略する。
 第3の実施形態における音響装置は、第1の実施形態および第2の実施形態と同様の構成を備える。そして、第3の実施形態の音響装置においては、第一の楽曲および第二の楽曲のドラム音のパートの切り替え処理が第1の実施形態および第2の実施形態の音響装置と異なる。
 図10は、第1の実施形態の図4に対応し、第3の実施形態の音響装置による楽曲の切り替え処理、特に、ドラム音のパートの切り替え処理について説明する模式図である。
 第3の実施形態の音響装置は、図10に示すように、ドラム音のパートについて以下の(1)から(4)の処理を実行してミキシングを行う。
 (1)第1の時点P5から第2の時点P6までの間で、第一の楽曲のドラム音のパートのテンポを、第一の楽曲の原曲のテンポであるテンポT1からテンポT3まで徐々に変化させる。
 (2)第2の時点P6で、第一の楽曲をカットアウトするとともに第二の楽曲をカットインする。
 (3)第2の時点P6から第3の時点P7までの間で、第二の楽曲のドラム音のパートのテンポを、テンポT3から第二の楽曲の原曲のテンポであるテンポT2まで徐々に変化させる。
 (4)第3の時点P7で、第二の楽曲のドラム音のパートとドラム以外の音のパートとの再生位置を整合させる。
 なお、(1)および(3)の処理におけるテンポT3は、例えば、第一の楽曲のテンポT1と第二の楽曲のテンポT2との中間的なテンポである。テンポT3は、第一の楽曲のテンポT1と第二の楽曲のテンポT2との差異に基づいて算出されてもよいし、所定のテンポ(例えば、常にBPM120)であってもよい。
 (1)から(4)で示した処理は、第1の実施形態および第2の実施形態と同様に、ドラム音のパートの特性に応じて楽曲の切り替えを行うとともに、ミキシング時に発生する違和感や不快感を抑えるための処理である。ただし、第3の実施形態においては、上述したように、第二の楽曲のテンポの調整に加えて、第一の楽曲のテンポも調整する。つまり、第3の実施形態においては、第1の実施形態と同様に第二の楽曲のテンポを第一の楽曲の原曲のテンポであるテンポT1に近づけるように変化させるとともに、第2の実施形態と同様に第一の楽曲のテンポを第二の楽曲の原曲のテンポであるテンポT2に近づけるように変化させる。そのため、第一の楽曲および第二の楽曲のドラム音のパートとドラム以外の音のパートとのテンポおよび再生位置に発生するギャップを第1の実施形態よりも低減することが期待できる。
 ここまで説明したように、オートミックス処理が開始されると、ドラム音のパートについては、第1の時点P5から第一の楽曲のドラム音のパートのテンポを変化させ、第2の時点P6で第一の楽曲および第二の楽曲のドラム音のパートのテンポを同期させてカットアウトおよびカットインで楽曲の切り替えが行われ、第2の時点P6から第二の楽曲のドラム音のパートのテンポを変化させる。一方、ドラム以外の音のパートについては、第1の実施形態および第2の実施形態と同様に、テンポを変化させずにフェードアウトおよびフェードインで楽曲の切り替えが行われる。そして、第3の時点P7で第二の楽曲におけるドラム音のパートおよびドラム以外の音のパートの再生位置が整合する。
 (1)から(4)の各処理を実行するために、第3の実施形態においては、第1の実施形態の図6に示したフローチャートと同様に、オートミックス処理に関する設定が行われる。なお、ステップS104においては、テンポの変更内容として、第一の楽曲のドラム音のパートのテンポを、第一の楽曲の原曲のテンポであるテンポT1からテンポT3に変化させるための変更内容と、第二の楽曲のドラム音のパートのテンポを、テンポT3から第二の楽曲の原曲のテンポであるテンポT2に変化させるための変更内容とを決定する。
 なお、第二の楽曲のドラム音のパートと同様に、テンポを変更した第一の楽曲のドラム音のパートについて、テンポを第一の楽曲の原曲のテンポであるテンポT1に戻す処理を行ってもよい。
 次に、図11のフローチャートを参照して、本発明の第3の実施形態におけるオートミックス処理実行時の音響装置の制御方法について説明する。なお、図11の例では、第2の実施形態と同様に、ドラム音のパートの楽曲の切り替え処理についてのみ説明し、ドラム以外の音のパートの楽曲の切り替え処理については、第1の実施形態および第2の実施形態と同様であるため説明を省略する。
 第一の楽曲のドラム音のパートのテンポの変化を開始する第1の時点P5になると(ステップS401YES)、第1再生部64は、オートミックス設定部62により算出された制御値に従って、第一の楽曲のドラム音のパートのテンポをテンポT1からテンポT3まで徐々に変化させる(ステップS402)。
 第一の楽曲および第二の楽曲のドラム音のパートをカットアウトおよびカットインする第2の時点P6になると(ステップS403YES)、第1再生部64は、オートミックス設定部62により算出された制御値に従って、第一の楽曲のドラム音のパートをカットアウトし、第2再生部65は、オートミックス設定部62により算出された制御値に従って、第二の楽曲のドラム音のパートを第一の楽曲のドラム音のパートにおけるテンポT3に同期させてカットインする(ステップS404)。続けて、第2再生部65は、オートミックス設定部62により算出された制御値に従って、第二の楽曲のドラム音のパートのテンポをテンポT3からテンポT2まで徐々に変化させる(ステップS405)。
 そして、第2再生部65は、第二の楽曲におけるドラム音のパートおよびドラム以外の音のパートの再生位置が整合する位置である第3の時点P7になるまで(ステップS406YES)、ステップS405の処理を継続する。
 以上で説明したような本発明の第3の実施形態によれば、複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出し、第一の楽曲及び第二の楽曲に含まれるドラム音のパート(第一のパート)のテンポを徐々に変化させる処理と、ミキシング開始時又はミキシング開始時より所定の時間経過後に、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのテンポを同期させる処理とを実行する。したがって、第1の実施形態と同様の効果を得ることができる。
 なお、上記の各実施形態において説明した処理の一部を省略してもよい。例えば、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのテンポを同期させる処理のみを実行し、その後、第一の楽曲又は第二の楽曲のドラム音のパートのテンポを原曲のテンポに徐々に推移させる処理、および第一の楽曲又は第二の楽曲において、ドラム音のパートとドラム以外の音のパートとの再生位置を整合させる処理の一方または両方を省略してもよい。
 また、上記の各実施形態において、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのテンポを同期させる際には、必ずしも完全に同期させなくてもよい。例えば、グルーブ感やアクセント付けなどを目的として、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのBPMおよび拍位置をあえて少しずらして同期させてもよい。
 また、上記の各実施形態において、第一の楽曲及び第二の楽曲に含まれるドラム音のパートのテンポを同期させる際には、ミキシング開始時点より前にテンポを同期させる処理を完了させてもよい。
 また、上記の各実施形態では、第一の楽曲および第二の楽曲を構成する複数のパートとして、ドラム音のパート、およびドラム以外の音のパートの2つのパートを例示したが、この例に限定されない。第一の楽曲および第二の楽曲の演奏に対応するパートであれば、例えば、ボーカルのパート、ギター音のパート、ベース音のパート、ピアノ音のパートなど、上述した2つのパート以外のパートについても同様の処理を行うことが可能である。
 また、上記の各実施形態では、オートミックス処理において、楽曲全体の切り替え処理を行う例を示したが、この例に限定されない。例えば、クロスフェーダー314等の操作子を用いて楽曲の切り替え処理を行ってもよい。この場合、クロスフェーダー314の一方の端部から、他方の端部方向へ移動を開始した時点をミキシング開始時としてもよい。また、第一の楽曲および第二の楽曲を構成する複数のパートのうち一部のパート、例えばドラム音のパートのみについて上記の各実施形態で説明したオートミックス処理を行い、ドラム以外の音のパートについてはクロスフェーダー314等の操作子を用いて楽曲の切り替え処理を行ってもよい。
 さらに、クロスフェーダー314等の操作子に限定されず、GUI(Graphical User Interface)等によりソフトウェア的に構成される操作子についても同様に本発明を適用することができる。
 また、上記のような機能をもった音響装置は上記の各実施形態として説明されたようなDJシステムには限られず、例えばミキサー、ミキサー機能を備えたDJコントローラー等であってもよい。また、コンピュータ、スマートフォン、およびタブレット端末で実行されるDJアプリケーションおよび音楽アプリケーションに本発明を適用してもよいし、インターネットを利用したストリーミングサービス等に本発明を適用してもよい。
 また、上記の例では2つのプレイヤー2Aおよび2Bを有する2チャンネルの音響装置が説明されたが、例えば4チャンネルの音響装置でも同様の機能が実現可能である。また、本発明はDJ機器に限られず、一般的なミキサーや電子楽器、さらにはDAW(Digital Audio Workstation)やDTM(Desk Top Music)といった音響装置にも適用可能である。
 以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
 1…音響装置、2A,2B…プレイヤー、3…ミキサー、4…表示部、5…楽曲データ格納部、6…制御部、7…音声出力部、21A,21B,31…操作部、41…タッチパネル、61…受付部、62…オートミックス設定部、63…テンポ検出部、64…第1再生部、65…第2再生部、211A,211B…ジョグダイヤル、212A,212B…テンポスライダー、213A,213B…キューボタン、214A,214B…プレイ/ポーズボタン、215A,215B…パフォーマンスパッド、311A,311B…エフェクト選択つまみ、312A,312B…エフェクト量調整つまみ、313A,313B…チャンネルフェーダー、314…クロスフェーダー。
 
 

Claims (11)

  1.  少なくも2の楽曲をミキシングする音響装置であって、
     複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、
      前記第一の楽曲又は前記第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、
      前記ミキシング開始時又は前記ミキシング開始時より所定の時間経過後に、前記第一の楽曲及び前記第二の楽曲に含まれる前記第一のパートのテンポを同期させる処理とを実行する再生制御部と
     を備える音響装置。
  2.  少なくも2の楽曲をミキシングする音響装置であって、
     複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、
      前記第一の楽曲及び前記第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、
      前記ミキシング開始時又は前記ミキシング開始時より所定の時間経過後に、前記第一の楽曲及び前記第二の楽曲に含まれる前記第一のパートのテンポを同期させる処理とを実行する再生制御部と
     を備える音響装置。
  3.  前記再生制御部は、前記第一の楽曲及び前記第二の楽曲に含まれる前記第一のパートのテンポを同期させた後に、前記第一の楽曲又は前記第二の楽曲の前記第一のパートのテンポを、原曲のテンポに徐々に推移させる処理を実行する、請求項1又は請求項2に記載の音響装置。
  4.  前記再生制御部は、前記第一の楽曲又は前記第二の楽曲の前記第一のパートのテンポを、原曲のテンポに徐々に推移させた後に、前記第一の楽曲又は前記第二の楽曲において、前記第一のパートと前記第一のパートとは異なる第二のパートとの再生位置を整合させる処理を行う、請求項1から請求項3のいずれか一項に記載の音響装置。
  5.  クロスフェーダーをさらに備え、
     前記再生制御部は、前記クロスフェーダーの一方の端部から、他方の端部方向へ移動を開始した時点を前記ミキシング開始時とする、請求項1から請求項4のいずれか一項に記載の音響装置。
  6.  前記再生制御部は、前記ミキシング開始時又は前記ミキシング開始時より所定の時間経過後を含む所定の区間において、前記第一の楽曲に含まれる第二のパートを前記第一の楽曲の原曲のテンポで再生させ、前記第二の楽曲に含まれる前記第二のパートを前記第二の楽曲の原曲のテンポで再生させるとともに、前記第一の楽曲の前記第二のパートと、前記第二の楽曲の前記第二のパートとを切り替える、請求項1から請求項5のいずれか一項に記載の音響装置。
  7.  前記第一のパートは、ドラム音のうち、少なくともバスドラム音に対応するパートである、請求項1から請求項6のいずれか一項に記載の音響装置。
  8.  少なくも2の楽曲をミキシングする音響装置の制御方法であって、
     複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出するステップと、
     前記第一の楽曲又は前記第二の楽曲に含まれる第一のパートのテンポを徐々に変化させるステップと、
     前記ミキシング開始時又は前記ミキシング開始時より所定の時間経過後に、前記第一の楽曲及び前記第二の楽曲に含まれる前記第一のパートのテンポを同期させるステップと
     を含む音響装置の制御方法。
  9.  少なくも2の楽曲をミキシングする音響装置の制御方法であって、
     複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出するステップと、
     前記第一の楽曲及び前記第二の楽曲に含まれる第一のパートのテンポを徐々に変化させるステップと、
     前記ミキシング開始時又は前記ミキシング開始時より所定の時間経過後に、前記第一の楽曲及び前記第二の楽曲に含まれる前記第一のパートのテンポを同期させるステップと
     を含む音響装置の制御方法。
  10.  少なくも2の楽曲をミキシングする音響装置としてコンピュータを機能させるためのプログラムであって、
     複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、
      前記第一の楽曲又は前記第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、
      前記ミキシング開始時又は前記ミキシング開始時より所定の時間経過後に、前記第一の楽曲及び前記第二の楽曲に含まれる前記第一のパートのテンポを同期させる処理とを実行する再生制御部とを備える音響装置としてコンピュータを機能させるためのプログラム。
  11.  少なくも2の楽曲をミキシングする音響装置としてコンピュータを機能させるためのプログラムであって、
     複数のパートから構成される第一の楽曲及び第二の楽曲のテンポを検出する検出部と、
      前記第一の楽曲及び前記第二の楽曲に含まれる第一のパートのテンポを徐々に変化させる処理と、
      前記ミキシング開始時又は前記ミキシング開始時より所定の時間経過後に、前記第一の楽曲及び前記第二の楽曲に含まれる前記第一のパートのテンポを同期させる処理とを実行する再生制御部とを備える音響装置としてコンピュータを機能させるためのプログラム。
     
     
PCT/JP2021/017188 2021-04-30 2021-04-30 音響装置、音響装置の制御方法およびプログラム WO2022230171A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2021/017188 WO2022230171A1 (ja) 2021-04-30 2021-04-30 音響装置、音響装置の制御方法およびプログラム
JP2023516999A JPWO2022230171A1 (ja) 2021-04-30 2021-04-30

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2021/017188 WO2022230171A1 (ja) 2021-04-30 2021-04-30 音響装置、音響装置の制御方法およびプログラム

Publications (1)

Publication Number Publication Date
WO2022230171A1 true WO2022230171A1 (ja) 2022-11-03

Family

ID=83848181

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/017188 WO2022230171A1 (ja) 2021-04-30 2021-04-30 音響装置、音響装置の制御方法およびプログラム

Country Status (2)

Country Link
JP (1) JPWO2022230171A1 (ja)
WO (1) WO2022230171A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009204907A (ja) * 2008-02-28 2009-09-10 Kddi Corp 同期再生装置、楽曲自動リミックスシステム、同期再生方法および同期再生プログラム
JP2014178535A (ja) * 2013-03-15 2014-09-25 Yamaha Corp 楽曲編集装置、カラオケ装置および楽曲編集システム
JP2014202892A (ja) * 2013-04-04 2014-10-27 パイオニア株式会社 音響機器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009204907A (ja) * 2008-02-28 2009-09-10 Kddi Corp 同期再生装置、楽曲自動リミックスシステム、同期再生方法および同期再生プログラム
JP2014178535A (ja) * 2013-03-15 2014-09-25 Yamaha Corp 楽曲編集装置、カラオケ装置および楽曲編集システム
JP2014202892A (ja) * 2013-04-04 2014-10-27 パイオニア株式会社 音響機器

Also Published As

Publication number Publication date
JPWO2022230171A1 (ja) 2022-11-03

Similar Documents

Publication Publication Date Title
US5693903A (en) Apparatus and method for analyzing vocal audio data to provide accompaniment to a vocalist
JP5243042B2 (ja) 音楽編集装置及び音楽編集方法
US11347475B2 (en) Transition functions of decomposed signals
WO2021175464A1 (en) Method, device and software for controlling timing of audio data
US20110015767A1 (en) Doubling or replacing a recorded sound using a digital audio workstation
US11488568B2 (en) Method, device and software for controlling transport of audio data
US20230335091A1 (en) Method and device for decomposing, recombining and playing audio data
EP4115629A1 (en) Method, device and software for applying an audio effect to an audio signal separated from a mixed audio signal
JP7136979B2 (ja) オーディオエフェクトを適用するための方法、装置、およびソフトウェア
WO2022230171A1 (ja) 音響装置、音響装置の制御方法およびプログラム
JP3533972B2 (ja) 電子楽器の設定制御装置
WO2022101977A1 (ja) 音響機器、音響機器の制御方法およびプログラム
WO2022230170A1 (ja) 音響装置、音響装置の制御方法およびプログラム
WO2023062722A1 (ja) 音響装置、音響装置の制御方法およびプログラム
WO2021175461A1 (en) Method, device and software for applying an audio effect to an audio signal separated from a mixed audio signal
JP4107212B2 (ja) 楽曲再生装置
WO2023062721A1 (ja) 音響装置、音響装置の制御方法およびプログラム
WO2022249402A1 (ja) 音響機器、楽曲の再生方法およびプログラム
JP7375003B2 (ja) 音響装置および音響再生プログラム
JP4561561B2 (ja) カラオケ装置
EP3734591B1 (en) Musical sound effect adding device and musical sound effect adding program
EP3734592B1 (en) Musical sound effect adding device and musical sound effect adding program
JP7375002B2 (ja) 音響装置および楽曲再生プログラム
JP7375004B2 (ja) 音響装置および音響再生プログラム
JP4830575B2 (ja) 電子楽器およびプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21939329

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2023516999

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 18557336

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21939329

Country of ref document: EP

Kind code of ref document: A1