WO2010047444A1 - 음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법 - Google Patents

음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법 Download PDF

Info

Publication number
WO2010047444A1
WO2010047444A1 PCT/KR2009/000154 KR2009000154W WO2010047444A1 WO 2010047444 A1 WO2010047444 A1 WO 2010047444A1 KR 2009000154 W KR2009000154 W KR 2009000154W WO 2010047444 A1 WO2010047444 A1 WO 2010047444A1
Authority
WO
WIPO (PCT)
Prior art keywords
scenario
music fountain
audio data
fountain
music
Prior art date
Application number
PCT/KR2009/000154
Other languages
English (en)
French (fr)
Inventor
이인권
유민준
Original Assignee
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단 filed Critical 연세대학교 산학협력단
Publication of WO2010047444A1 publication Critical patent/WO2010047444A1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B05—SPRAYING OR ATOMISING IN GENERAL; APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05B—SPRAYING APPARATUS; ATOMISING APPARATUS; NOZZLES
    • B05B17/00—Apparatus for spraying or atomising liquids or other fluent materials, not covered by the preceding groups
    • B05B17/08—Fountains
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63J—DEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J17/00—Apparatus for performing colour-music
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing

Definitions

  • the present invention relates to a musical fountain. More specifically, the present invention relates to a music fountain scenario that defines a discharge pattern according to the passage of time of water through each of the nozzles provided in the music fountain.
  • Music fountain is a fountain that changes in accordance with the music flowing out of the shape of the fountain, and is installed in various places such as parks, exhibition halls, and concert halls.
  • This musical fountain has one or more pumps and one or more nozzles connected to each of the pumps and controls the pump to discharge water through the nozzles.
  • Music fountains for example, control the pump as the volume increases, releasing water higher through the nozzle.
  • the technical problem to be achieved by the present invention is to provide a music fountain scenario generation apparatus that can automatically and automatically generate a music fountain scenario that can be best suited for any song without depending on the manual work .
  • Another technical problem to be achieved by the present invention is to provide a music fountain scenario generation method that can quickly and automatically create a music fountain scenario that can be best suited for any song without relying on manual work. have.
  • Another technical problem to be solved by the present invention is to read a computer program having a computer program stored thereon, which allows the user to quickly and automatically create a music fountain scenario that can be best suited for any song without resorting to manual work. To provide a recording medium.
  • Another technical problem to be achieved by the present invention is to provide a music fountain driving apparatus that enables the music fountain to automatically and automatically provide a fountain show that best matches the song for any song without resorting to manual labor.
  • Another technical problem to be achieved by the present invention is to provide a music fountain driving method that enables the music fountain to quickly and automatically provide a fountain show that best matches the song for any song without resorting to manual work.
  • the apparatus for generating a music fountain scenario includes an onset retrieval unit for retrieving at least one viewpoint in which a musical attribute including a volume among the viewpoints of audio data is a preset musical attribute; And a music fountain scenario of the audio data defining the discharge mode adjusted at the searched time point in consideration of the 'emission form of water through one or more nozzles provided in the music fountain' and the audio data preset for each musical property.
  • the musical property may further include a pitch
  • the discharge form may include at least one of a probability of discharge, discharge pressure, and discharge direction
  • the audio data may be music data, and data in an MP3 format. , WMA format data, and WAVE format data.
  • the music fountain scenario generation device may further include a scenario correction unit for modifying the generated music fountain scenario according to the manipulated result of the music fountain scenario generation device.
  • the music fountain scenario generating apparatus further includes a scenario interface unit for displaying the generated music fountain scenario, and the scenario correction unit is an operation result of the music fountain scenario generating apparatus by the user who observes the displayed music fountain scenario. Can be operated according to.
  • the music fountain scenario generating apparatus further includes an existing scenario analysis unit for determining the discharge form of each of the pumps for each of the musical properties by analyzing one or more pre-prepared music fountain scenarios, the scenario generation unit and The music fraction scenario of the audio data may be automatically generated in consideration of the audio data.
  • the music fountain scenario generating apparatus may further include an emission type information storage unit configured to store an emission type table indicating an emission type of each of the pumps for each musical property, and the scenario generation unit reads and reads the stored emission type table.
  • the music fountain scenario of the audio data may be automatically generated in consideration of the discharge mode table and the audio data.
  • the onset search unit may search for one or more viewpoints among the viewpoints of the audio data, wherein a difference between the musical attribute of the current view and the musical attribute of a previous view is greater than or equal to a preset difference.
  • the onset search unit may select one or more viewpoints in which time intervals between the searched viewpoints are equal to or greater than a preset time interval, and the scenario generator may determine a music fraction of the audio data that defines the emission form adjusted for each of the selected viewpoints. You can also create scenarios automatically.
  • a method for generating a music fountain scenario including: searching for at least one viewpoint of a musical attribute including a volume among the viewpoints of audio data; And a music fountain scenario of the audio data defining the discharge mode adjusted at the searched time point in consideration of the 'emission form of water through one or more nozzles provided in the music fountain' and the audio data preset for each musical property.
  • the musical property may further include a pitch
  • the discharge form may include at least one of a probability of discharge, discharge pressure, and discharge direction
  • the audio data may be music data, and data in an MP3 format. , WMA format data, and WAVE format data.
  • the music fountain scenario generation method may further include modifying the generated music fountain scenario according to an operation result of the apparatus for performing the music fountain scenario generation method.
  • the modifying may include displaying the generated music fountain scenario; And modifying according to the manipulated result of the device by the user who observes the displayed music fountain scenario.
  • the generating may include analyzing one or more pre-set music fountain scenarios and determining a discharge form of each of the pumps by the musical attributes; And automatically generating a music fountain scenario of the audio data in consideration of the determined emission form and the audio data.
  • the generating may include reading an emission form table stored in an apparatus for performing the music fountain scenario generation method and indicating an emission form of each of the pumps for each musical attribute; And automatically generating a music fountain scenario of the audio data in consideration of the read emission type table and the audio data.
  • the searching may include searching for one or more viewpoints in which the difference between the musical attribute of the current view and the musical attribute of the previous view is greater than or equal to a preset difference among the viewpoints of the audio data.
  • the searching may include selecting one or more viewpoints whose time intervals are greater than or equal to a predetermined time interval among the searched viewpoints, and wherein the generating of the audio data defines the emission form adjusted for each of the selected viewpoints.
  • Music fountain scenarios can be generated automatically.
  • a computer-readable recording medium searching for at least one viewpoint of a musical attribute including a volume among audio viewpoints is a preset musical attribute. ; And a music fountain scenario of the audio data defining the discharge mode adjusted at the searched time point in consideration of the 'emission form of water through one or more nozzles provided in the music fountain' and the audio data preset for each musical property.
  • a computer program can be stored for the computer to automatically generate the steps.
  • a music fountain driving apparatus comprising: an onset search unit for searching for at least one viewpoint in which a musical attribute including a volume of a viewpoint of audio data is a preset musical attribute; Automatically generating a music fountain scenario of the audio data defining the discharge pattern adjusted at the searched time point in consideration of the discharge form of the water through the one or more nozzles provided in the predetermined music fountain for each musical property and the audio data A scenario generator; And a music fountain driver for driving the music fountain according to the generated scenario.
  • a method for driving a music fountain including: searching for at least one viewpoint of a musical attribute including a volume among the viewpoints of audio data; Automatically generating a music fountain scenario of the audio data defining the discharge pattern adjusted at the searched time point in consideration of the discharge form of the water through the one or more nozzles provided in the predetermined music fountain for each musical property and the audio data Doing; And driving the music fountain according to the generated scenario.
  • An apparatus and method for generating a music fountain scenario may search for at least one viewpoint in which a 'musical property including a volume' among the viewpoints of audio data is a predetermined musical property, and (i) for each musical property.
  • the music fountain driving apparatus and method search for at least one viewpoint in which the 'musical property including the volume' of the audio data is a preset musical property, and (i) the musical property.
  • 'Music discharge scenario of the audio data' which defines the discharge pattern adjusted at the time of the search, taking into account the 'emission pattern of water through one or more nozzles provided in the music fountain' and (ii) the audio data.
  • FIG. 1 is a block diagram illustrating a music fountain scenario generation device and a music fountain driving device according to an embodiment of the present invention.
  • FIG. 2 is a reference diagram illustrating examples of a fountain show provided by a music fountain.
  • FIG. 3 is a waveform diagram illustrating an operation of the onset search unit 120 shown in FIG. 1.
  • FIG. 4 is a flowchart illustrating a music fountain scenario generation method according to an embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating a music fountain driving method according to an embodiment of the present invention.
  • an apparatus for generating a best music fountain scenario comprising: an onset retrieval unit for retrieving at least one viewpoint of a musical attribute including a volume among audio viewpoints; And a music fountain scenario of the audio data defining the discharge mode adjusted at the time of the search, in consideration of the discharge form of water through the one or more nozzles provided in the predetermined music fountain for each musical property and the audio data. It includes a scenario generation unit to generate.
  • the music fountain scenario generation device further includes a scenario correction unit for modifying the generated music fountain scenario according to the manipulated result of the music fountain scenario generation device.
  • the music fountain scenario generating apparatus further includes a scenario interface unit for displaying the generated music fountain scenario, and the scenario correcting unit of the music fountain scenario generating device by the user who observes the displayed music fountain scenario. It operates according to the result of the operation.
  • the music fountain scenario generating apparatus further includes an existing scenario analysis unit for analyzing the one or more pre-prepared music fountain scenarios to determine the discharge type of each of the pumps for each of the musical properties, the scenario generation unit
  • the music fountain scenario of the audio data is automatically generated in consideration of the shape and the audio data.
  • the music fountain scenario generating apparatus further includes a discharge type information storage unit for storing the discharge type table indicating the discharge type of each of the pumps for each musical property, the scenario generation unit reads the stored discharge type table A music fountain scenario of the audio data is automatically generated in consideration of the taken and read emission form table and the audio data.
  • the musical attribute includes a pitch.
  • the discharge form comprises at least one of a probability of discharge, discharge pressure and discharge direction.
  • the onset search unit searches for one or more viewpoints among the viewpoints of the audio data, wherein a difference between the audio data of the current view and the audio data of a previous view is greater than or equal to a preset difference.
  • the onset search unit selects one or more viewpoints in which time intervals between the searched viewpoints are greater than or equal to a preset time interval
  • the scenario generator is configured to define the emission form adjusted for each of the selected viewpoints. Automatically create music fountain scenarios.
  • the audio data is characterized in that the music data.
  • the audio data is one of data in MP3 format, data in WMA format, and data in WAVE format.
  • a method of generating a best music fountain scenario comprising: searching for at least one viewpoint of a musical attribute including a volume among the viewpoints of audio data; And a music fountain scenario of the audio data defining the discharge mode adjusted at the time of the search, in consideration of the discharge form of water through the one or more nozzles provided in the predetermined music fountain for each musical property and the audio data.
  • the music fountain scenario generation method further includes modifying the generated music fountain scenario according to an operation result of the apparatus for performing the music fountain scenario generation method. More preferably, the modifying step includes displaying the generated music fountain scenario; And modifying according to the manipulated result of the device by the user observing the displayed music fountain scenario.
  • the generating may include analyzing one or more pre-set music fountain scenarios to determine a discharge form of each of the pumps by the musical properties; And automatically generating a music fountain scenario of the audio data in consideration of the determined emission form and the audio data.
  • the generating may include reading an emission form table stored in an apparatus for performing the music fountain scenario generation method and representing an emission form of each of the pumps according to the musical attributes; And automatically generating a music fountain scenario of the audio data in consideration of the read emission form table and the audio data.
  • the retrieving includes searching for one or more viewpoints among the viewpoints of the audio data, wherein a difference between the audio data of the current view and the audio data of a previous view is greater than or equal to a preset difference.
  • the searching comprises selecting one or more viewpoints in which time intervals between the searched viewpoints are greater than or equal to a predetermined time interval, and the generating of the audio defines the emission form adjusted for each of the selected viewpoints. Automatically create music fountain scenarios for your data.
  • an apparatus for driving music fountain comprising: an onset retrieval unit for retrieving at least one viewpoint of a musical attribute including a volume among audio viewpoints; Automatically generating a music fountain scenario of the audio data defining the discharge pattern adjusted at the searched time point in consideration of the discharge form of the water through the one or more nozzles provided in the predetermined music fountain for each musical property and the audio data A scenario generator; And a music fountain driver for driving the music fountain according to the generated scenario.
  • a method of driving a music fountain comprising: searching for at least one viewpoint of a musical attribute including a volume among the viewpoints of audio data; Automatically generating a music fountain scenario of the audio data defining the discharge pattern adjusted at the searched time point in consideration of the discharge form of the water through the one or more nozzles provided in the predetermined music fountain for each musical property and the audio data Doing; And driving the music fountain in accordance with the generated scenario.
  • FIG. 1 is a block diagram illustrating a music fountain scenario generating device 100 and a music fountain driving device 105 according to an embodiment of the present invention, an audio conversion unit 110, an onset search unit 120, and an existing unit.
  • the scenario analysis unit 130, the emission mode information storage unit 140, the scenario generation unit 150, the scenario correction unit 160, the scenario interface unit 170, and the music fountain driver 180 may be included.
  • the audio converter 110 analyzes the format of the audio data input through the input terminal IN1 and converts the input audio data into audio data of the specific format if the format of the analyzed audio data is not a specific format. do.
  • the audio data may be speech data or music data, but for convenience of description, it is assumed that the audio data is music data.
  • Examples of the format of the audio data include MP3 (MPEG Audio Layer-3) format, There is a WMA (Windows Media Audio) format, a WAVE format, etc., and for the sake of explanation, it is assumed that the specific format is the WAVE format.
  • the audio converting unit 110 converts the input audio data into WAVE format audio data and describes the converted audio data on the on-set retrieval unit (described later). If the format of the input audio data is WAVE format, the input audio data is output to the onset search unit 120 to be described later.
  • the audio converter 110 may not be provided in the apparatus for generating a music fountain scenario according to an embodiment of the present invention, and the audio data input to the onset searcher 120 to be described later is audio data of various formats that are not unified. In the present specification, for convenience of description, it is assumed that the onset search unit 120 receives audio data of a WAVE format through the audio converter 110.
  • the onset search unit 120 receives audio data and searches for at least one onset of the input audio data.
  • onset refers to a point in time at which the shape of the music fountain show is adjusted, and the musical property may include volume and even pitch, but for convenience of description, it is assumed that the musical property is volume.
  • the onset search unit 120 searches for 'one or more points of time in which the musical property is a predetermined musical property' among the viewpoints of the audio data input to the onset searcher 120, and sets each of the searched points in time. Can be determined as More specifically, the onset search unit 120 uses the audio data input to the onset search unit 120 and, among the frames constituting the input audio data, 'difference in frequency component data between adjacent frames.
  • a musical property for example, volume
  • a predetermined musical property for example, volume
  • the onset search unit 120 may search for one or more onsets such that there are no onsets that are too adjacent in time when searching for the onset. It may be. To this end, the on-set search unit 120 searches for 'one or more points of time in which the musical property is a preset musical property' among the viewpoints of the audio data, and a point of time in which the time interval between each other is greater than or equal to a preset time interval. May be selected and each of the selected viewpoints may be determined as onset.
  • the existing scenario analysis unit 130 receives one or more music fountain scenarios (for one or more audio data (of course, not audio data input through the aforementioned input terminal IN1)) through the input terminal IN2.
  • the music fountain scenario means data defining a discharge form of water of each of the nozzles over time of audio data (eg, music data).
  • the 'water discharge form' includes at least one of 'probability of water discharge', 'exhaust water pressure', and 'discharge direction'.
  • the existing scenario analysis unit 130 analyzes each of the one or more music fountain scenarios inputted to the existing scenario analysis unit 130, so that 'the discharge form of each of the nozzles provided in the music fountain is a musical property (for example, What happens by volume).
  • the emission form information storage unit 140 stores a 'emission form table' indicating 'emission form of water of each nozzle provided in the musical fountain' for each musical attribute determined by the existing scenario analysis unit 130.
  • the scenario generation unit 150 is adjusted for each onset in consideration of 'audio data input through the input terminal IN1' and 'type of discharge of water through one or more nozzles provided in the music fountain', which is preset for each musical property. It automatically generates a music fountain scenario of audio data input through the input terminal IN1, which defines the discharge pattern of water through the nozzles.
  • the scenario generation unit 150 receives information on the 'water discharge form according to the musical properties of the nozzles provided in the music fountain' from the existing scenario analysis unit 130, and inputs through the 'input terminal IN1'.
  • the 'audio data input through the input terminal IN1' in consideration of the 'emission pattern of water according to the musical properties' of the nozzles provided in the music fountain determined by the existing scenario analysis unit 130 and the existing scenario analysis unit 130.
  • Music fountain scenarios can be generated automatically.
  • the scenario generating unit 150 reads the discharge type table stored in the discharge type information storage unit 140 and discharges water according to the 'musical property of each of the nozzles provided in the music fountain shown in the read discharge type table.
  • the music fountain scenario of the' audio data input through the input terminal IN1 ' may be automatically generated.
  • the scenario corrector 160 modifies the music fountain scenario generated by the scenario generator 150 according to the manipulated result of the music fountain scenario generator 100.
  • the music fountain scenario generated by the scenario generation unit 150 is automatically generated on a computer (specifically, a music fountain scenario generating device) according to the principle according to an embodiment of the present invention described above, without any manual intervention. It is a fountain scenario, and accordingly, a user (eg, a music fountain designer) may not be sufficiently satisfied with the user. In this case, the scenario corrector 160 is provided in the music fountain scenario generator 100.
  • the scenario interface unit 170 displays the music fountain scenario generated by the scenario generator 150 and is manipulated by a user (for example, a music fountain designer) who observes the displayed music fountain scenario.
  • the scenario corrector 160 modifies the music fountain scenario generated by the scenario generator 150 according to the manipulated result.
  • the scenario interface unit 170 may include a data input device such as a keyboard or a mouse, or may be implemented as a touch panel.
  • the music fountain driver 180 is a music fountain (for example, one provided in the music fountain) according to the music fountain scenario generated by the scenario generator 150 or the music fountain scenario modified by the scenario corrector 160. Above pumps).
  • FIG. 2 is a reference diagram illustrating examples of a fountain show provided by a music fountain.
  • a fountain show provided by a music fountain.
  • the probability of water being discharged through the nozzles is the probability that the pump connected to the nozzles is on, and the probability that one pump is on is the Bayesian model (Bayesian). Model), and may be specifically expressed as Equations 1 and 2 below.
  • Audio means a volume value
  • Audio) is the probability that the i-th pump is turned on at any point when the volume of the volume at any point in the audio data is Audio
  • Pj, Audio) means the volume of the audio data at any point of time is Audio and the probability that the i-th pump will be turned on at any point when the j-th pump is turned on at any point.
  • Audio) means the probability that the j-th pump is turned on at any point when the volume of the audio data at any point of time is Audio
  • N is provided in the music fountain.
  • Psel (Pi) is the probability that the i-th pump is turned on at any point in time.
  • Equation 1 The reason why P (Pi
  • Fig. 2A shows an example of a preferable music fountain show when the music volume is low
  • Fig. 2B shows an example of a preferable music fountain show when the music volume is high.
  • Equation 1 the reason why P (Pi
  • Figure 2 (c) shows the water flow does not fit well with each other
  • Figure 2 (d) shows the water flow goes well with each other.
  • FIG. 3 is a waveform diagram illustrating an operation of the onset search unit 120 shown in FIG. 1.
  • FIG. 3A is a waveform diagram of an example of audio data input through the input terminal IN1
  • FIG. 3D is shown in FIG. 3C.
  • the waveform diagram of the result of removing some of the data whose time intervals from each other in the waveform are less than the preset time interval.
  • the spectral flux data of the audio data is calculated using Equation 3 below.
  • the audio data is composed of a plurality of frames, wherein n in Equation 1 means one of the viewpoints of the audio data, that is, one of the frames of the audio data, SF (n) is the spectral flux data of the frame at time n, and X (n, k) means data corresponding to the kth frequency of the frame at time n when the Fourier transform is performed on audio data.
  • X (n-1, k) means data corresponding to the kth frequency of the frame at the point n-1
  • H function is a half wave rectifier function. Is defined as 4.
  • the spectral flux data of the audio data is data representing a difference between the data in the frequency domain of the frame at the present time and the data in the frequency domain of the frame at the previous time, as shown in FIG. 3.
  • the reason for retrieving the onset from the spectral flux data is because in general, a lot of changes occur in the data of the frequency component of the audio data each time the onset elapses.
  • the onset search unit 120 may include one or more musical attributes (eg, volume) among the viewpoints of the audio data (see (a) of FIG. 3) input through the input terminal IN1.
  • One or more viewpoints whose musical attributes are preset musical attributes among the viewpoints of the spectral flux data (see (b) of FIG. 3) of the audio data input through the input terminal IN1 may be determined by searching the viewpoints and determining the found viewpoints as onsets. May be searched and determined to be onsets.
  • the on-set search unit 120 has a musical property among the viewpoints of the spectral flux data (see (b) of FIG. 3) of the audio data input through the input terminal IN1.
  • FIG. 4 is a flowchart illustrating a method of generating a music fountain scenario according to an embodiment of the present invention, and quickly and automatically a music fountain scenario that can be best suited for any song without depending on manual operation. It may include the step (410 to 420 steps) that can be generated.
  • the music fountain scenario generating apparatus 100 searches for at least one of the viewpoints of the audio data input through the input terminal IN1 at least one of which the musical attribute (eg, volume) is a predetermined musical attribute (step 410).
  • the musical attribute eg, volume
  • the music fountain scenario generating apparatus 100 After operation 410, the music fountain scenario generating apparatus 100 considers the 'emission form of water through one or more nozzles provided in the music fountain' and 'audio data input through the input terminal IN1' preset for each musical property. In operation 420, a music fountain scenario of 'audio data input through the input terminal IN1' is automatically generated.
  • FIG. 5 is a flowchart showing a music fountain driving method according to an embodiment of the present invention, and automatically provides a fountain show that best matches the music fountain for any song without relying on manual labor. It may include a step (steps 510 to 530) to enable.
  • the music fountain driving device 105 searches for at least one of the viewpoints of the audio data input through the input terminal IN1, at least one of which the musical attribute (eg, volume) is a predetermined musical attribute (step 510).
  • the musical attribute eg, volume
  • the music fountain driving device 105 After operation 510, the music fountain driving device 105 considers the 'emission form of water through the one or more nozzles provided in the music fountain' and the 'audio data input through the input terminal IN1' which are preset for each musical property. In operation 520, a music fountain scenario of 'audio data input through the input terminal IN1' is automatically generated.
  • the music fountain driver 105 drives the music fountain according to the music fountain scenario generated in operation 520 to perform a fountain show on 'audio data input through the input terminal IN1' (530). step).
  • the program for executing the music fountain scenario generation method according to an embodiment of the present invention mentioned above on a computer may be stored in a computer-readable recording medium.
  • the program for executing the music fountain driving method according to an embodiment of the present invention on a computer may also be stored in a computer-readable recording medium.
  • the computer-readable recording medium may be a magnetic storage medium (for example, a ROM, a floppy disk, a hard disk, etc.), and an optical reading medium (for example, a CD-ROM, a DVD). : Digital Versatile Disc).
  • the present invention relates to a technique for generating a new music fountain scenario using audio analysis technology and machine learning technology.
  • computer-generated scenarios are inadequate compared to scenarios created by experts.
  • an interface is provided that can easily modify the auto-generated scenario, it is possible to create a higher level scenario by simply modifying a few parts desired by the user.
  • the present invention is combined with a simulation system, even non-professional public can easily and quickly create scenarios.
  • the present invention has high marketability because it is a technology that can be used directly by various music fountain construction companies.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Special Spraying Apparatus (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)

Abstract

본 발명의 일 실시예에 따른 음악분수 시나리오 생성장치 및 방법은, 오디오 데이터의 시점들 중 '볼륨을 포함한 음악적 속성'이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하고, (i) 음악적 속성별로 기 설정된 '음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태'와 (ii) 그 오디오 데이터를 고려하여, 그 검색된 시점에서 조정되는 그 배출 형태를 규정한 '그 오디오 데이터의 음악분수 시나리오'를 자동으로 생성하므로, 수작업에 의존하지 않으면서 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울릴 수 있는 음악분수 시나리오를 신속히 자동으로 생성할 수 있다. 또한, 본 발명의 일 실시예에 따른 음악분수 구동장치 및 방법은, 상기 자동 생성된 음악분수 시나리오에 따라 음악 분수를 구동하므로, 수작업에 의존하지 않으면서 음악 분수가 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울리는 분수 쇼를 신속히 자동으로 제공할 수 있도록 한다.

Description

[규칙 제26조에 의한 보정 06.10.2009]　음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법
본 발명은 음악 분수에 관한 것이다. 보다 구체적으로, 음악 분수에 구비된 노즐들 각각을 통한 물의 시간의 흐름에 따른 배출 형태를 규정한 음악분수 시나리오에 관한 것이다.
음악 분수(musical fountain)는 분수의 모양이 흘러나오는 음악에 맞추어 변화하는 분수이며, 공원, 전시회장, 연주회장 등 다양한 장소에 설치되고 있는 실정이다. 이러한 음악 분수는 하나 이상의 펌프(pump)와 그 펌프들 각각에 연결되어 있는 하나 이상의 노즐(nozzle)을 구비하고 펌프를 제어하여 노즐을 통해 물을 배출한다. 예컨대, 음악 분수는 볼륨의 크기가 높아지면 펌프를 제어해 노즐을 통해 물을 더 높이 배출한다.
음악 분수가 음악의 느낌을 얼마나 살려주는가는 음악 분수에 구비된 펌프들 각각을 어떻게 제어하느냐에 달려 있다. 그래서, 종래에는 이를 음악 분수 설계자 개개인의 능력에 의존하였다. 그러나, 어떤 음악 데이터의 시간의 흐름에 따른 노즐들 각각의 물의 배출 여부 및 물의 수압을 규정한 데이터인 음악분수 시나리오(scenario)의 제작에 상당 시간과 비용이 소요될 수 밖에 없고, 곡(曲)마다 음악분수 시나리오가 상이할 수 밖에 없어 기존에 분수 쇼를 제공하던 곡 이외의 곡에 대해 분수 쇼를 제공하기 위해서는 음악 분수 설계자에게 그 이외의 곡에 대한 음악분수 시나리오 제작을 추가로 더 의뢰해야 하는 번거로움도 감수해야 한다.
본 발명이 이루고자 하는 기술적 과제는 수작업에 의존하지 않으면서 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울릴 수 있는 음악분수 시나리오를 신속히 자동으로 생성할 수 있는 음악분수 시나리오 생성장치를 제공하는 데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는 수작업에 의존하지 않으면서 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울릴 수 있는 음악분수 시나리오를 신속히 자동으로 생성할 수 있는 음악분수 시나리오 생성방법을 제공하는 데 있다.
본 발명이 이루고자 하는 또 다른 기술적 과제는 수작업에 의존하지 않으면서 어떠한 곡에 대해서도 그 곡에 최대로 어울릴 수 있는 음악분수 시나리오를 신속히 자동으로 생성할 수 있도록 하는 컴퓨터 프로그램을 저장한 컴퓨터로 읽을 수 있는 기록매체를 제공하는 데 있다.
본 발명이 이루고자 하는 또 다른 기술적 과제는 수작업에 의존하지 않으면서 음악 분수가 어떠한 곡에 대해서도 그 곡에 최대로 어울리는 분수 쇼를 신속히 자동으로 제공할 수 있도록 하는 음악분수 구동장치를 제공하는 데 있다.
본 발명이 이루고자 하는 또 다른 기술적 과제는 수작업에 의존하지 않으면서 음악 분수가 어떠한 곡에 대해서도 그 곡에 최대로 어울리는 분수 쇼를 신속히 자동으로 제공할 수 있도록 하는 음악분수 구동방법을 제공하는 데 있다.
상기 과제를 이루기 위해, 본 발명의 일 실시예에 따른 음악분수 시나리오 생성장치는, 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 온셋 검색부; 및 상기 음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태’와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 시나리오 생성부를 포함한다. 이때, 상기 음악적 속성은 음정을 더 포함할 수 있고, 상기 배출 형태는 배출될 확률, 배출 수압 및 배출 방향 중 적어도 하나를 포함할 수 있고, 상기 오디오 데이터는 음악 데이터일 수 있고, MP3 포맷의 데이터, WMA 포맷의 데이터, 및 WAVE 포맷의 데이터 중 하나일 수 있다.
여기서, 상기 음악분수 시나리오 생성장치는 상기 생성된 음악분수 시나리오를 상기 음악분수 시나리오 생성장치의 조작된 결과에 따라 수정하는 시나리오 수정부를 더 포함할 수 있다. 이때, 상기 음악분수 시나리오 생성장치는 상기 생성된 음악분수 시나리오를 표시하는 시나리오 인터페이스부를 더 포함하고, 상기 시나리오 수정부는 상기 표시된 음악분수 시나리오를 관찰하는 사용자에 의한 상기 음악분수 시나리오 생성장치의 조작된 결과에 따라 동작할 수 있다.
한편, 상기 음악분수 시나리오 생성장치는 하나 이상의 미리 마련된 음악분수 시나리오들을 분석하여 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 결정하는 기존 시나리오 분석부를 더 포함하고, 상기 시나리오 생성부는 상기 결정된 배출 형태 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성할 수 있다.
또한, 상기 음악분수 시나리오 생성장치는 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 나타내는 배출형태 테이블을 저장하는 배출형태정보 저장부를 더 포함하고, 상기 시나리오 생성부는 상기 저장된 배출형태 테이블을 독취하고 독취된 배출형태 테이블 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성할 수도 있다.
여기서, 상기 온셋 검색부는, 상기 오디오 데이터의 시점들 중 현재 시점의 상기 음악적 속성과 이전 시점의 상기 음악적 속성 간의 차이가 기 설정된 차이 이상인 하나 이상의 시점들을 검색할 수 있다. 또한, 상기 온셋 검색부는 상기 검색된 시점들 중 서로 간의 시간 간격이 기 설정된 시간 간격 이상인 하나 이상의 시점들을 선택하고, 상기 시나리오 생성부는 상기 선택된 시점마다 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성할 수도 있다.
상기 다른 과제를 이루기 위해, 본 발명의 일 실시예에 따른 음악분수 시나리오 생성방법은, 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 단계; 및 상기 음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태’와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계를 포함한다. 이때, 상기 음악적 속성은 음정을 더 포함할 수 있고, 상기 배출 형태는 배출될 확률, 배출 수압 및 배출 방향 중 적어도 하나를 포함할 수 있고, 상기 오디오 데이터는 음악 데이터일 수 있고, MP3 포맷의 데이터, WMA 포맷의 데이터, 및 WAVE 포맷의 데이터 중 하나일 수 있다.
여기서, 상기 음악분수 시나리오 생성방법은 상기 생성된 음악분수 시나리오를 상기 음악분수 시나리오 생성방법을 수행하는 장치의 조작된 결과에 따라 수정하는 단계를 더 포함할 수 있다. 이때, 상기 수정하는 단계는 상기 생성된 음악분수 시나리오를 표시하는 단계; 및 상기 표시된 음악분수 시나리오를 관찰하는 사용자에 의한 상기 장치의 조작된 결과에 따라 수정하는 단계를 포함할 수 있다.
한편, 상기 생성하는 단계는 하나 이상의 미리 마련된 음악분수 시나리오들을 분석하여 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 결정하는 단계; 및 상기 결정된 배출 형태 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계를 포함할 수 있다.
또한, 상기 생성하는 단계는 상기 음악분수 시나리오 생성방법을 수행하는 장치에 저장되어 있으며 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 나타내는 배출형태 테이블을 독취하는 단계; 및 상기 독취된 배출형태 테이블 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계를 포함할 수도 있다.
한편, 상기 검색하는 단계는 상기 오디오 데이터의 시점들 중 현재 시점의 상기 음악적 속성과 이전 시점의 상기 음악적 속성 간의 차이가 기 설정된 차이 이상인 하나 이상의 시점들을 검색할 수 있다. 이때, 상기 검색하는 단계는 상기 검색된 시점들 중 서로 간의 시간 간격이 기 설정된 시간 간격 이상인 하나 이상의 시점들을 선택하고, 상기 생성하는 단계는 상기 선택된 시점마다 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성할 수 있다.
상기 또 다른 과제를 이루기 위해, 본 발명의 일 실시예에 따른 컴퓨터로 읽을 수 있는 기록매체는, 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 단계; 및 상기 음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태’와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계를 컴퓨터에서 실행시키기 위한 컴퓨터 프로그램을 저장할 수 있다.
상기 또 다른 과제를 이루기 위해, 본 발명의 일 실시예에 따른 음악분수 구동장치는, 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 온셋 검색부; 상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 시나리오 생성부; 및 상기 생성된 시나리오에 따라 상기 음악 분수를 구동하는 음악분수 구동부를 포함할 수 있다.
상기 또 다른 과제를 이루기 위해, 본 발명의 일 실시예에 따른 음악분수 구동방법은, 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 단계; 상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계; 및 상기 생성된 시나리오에 따라 상기 음악 분수를 구동하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 따른 음악분수 시나리오 생성장치 및 방법은, 오디오 데이터의 시점들 중 ‘볼륨을 포함한 음악적 속성’이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하고, (i) 음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태’와 (ii) 그 오디오 데이터를 고려하여, 그 검색된 시점에서 조정되는 그 배출 형태를 규정한 ‘그 오디오 데이터의 음악분수 시나리오’를 자동으로 생성하므로, 수작업에 의존하지 않으면서 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울릴 수 있는 음악분수 시나리오를 신속히 자동으로 생성할 수 있다.
이와 같은 논리로, 본 발명의 일 실시예에 따른 음악분수 구동장치 및 방법은, 오디오 데이터 중 ‘볼륨을 포함한 음악적 속성’이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하고, (i) 음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태’와 (ii) 그 오디오 데이터를 고려하여, 그 검색된 시점에서 조정되는 그 배출 형태를 규정한 ‘그 오디오 데이터의 음악분수 시나리오’를 자동으로 생성하고, 생성된 음악분수 시나리오에 따라 음악분수를 구동하므로, 수작업에 의존하지 않으면서 음악 분수가 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울리는 분수 쇼를 신속히 자동으로 제공할 수 있도록 한다. 이에 따라, 본 발명의 일 실시예에 따르면, 음악 분수가 분수 쇼를 제공하고자 하는 곡(曲)에 대한 음악분수 시나리오가 현재 존재하지 않음에도 불구하고 음악 분수가 그 곡에 대한 분수 쇼를 갑작스럽게 제공해야 할 상황이 발생되더라도, 그 곡에 대한 최적의 음악분수 시나리오를 신속히 생성함으로써 그 곡에 최대로 어울리는 분수 쇼를 신속히 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 음악분수 시나리오 생성장치와 음악분수 구동장치를 설명하기 위한 블록도이다.
도 2는 음악 분수가 제공하는 분수쇼의 일 례들을 나타낸 참고도이다.
도 3은 도 1에 도시된 온셋 검색부(120)의 동작을 설명하기 위한 파형도이다.
도 4는 본 발명의 일 실시예에 따른 음악분수 시나리오 생성방법을 나타내는 플로우챠트이다.
도 5는 본 발명의 일 실시예에 따른 음악분수 구동방법을 나타내는 플로우챠트이다.
본 발명에 따른 최선의 음악분수 시나리오 생성장치는 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 온셋 검색부; 및 상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 시나리오 생성부를 포함한다.
바람직하게는, 상기 음악분수 시나리오 생성장치는 상기 생성된 음악분수 시나리오를 상기 음악분수 시나리오 생성장치의 조작된 결과에 따라 수정하는 시나리오 수정부를 더 포함한다. 더욱 바람직하게는, 상기 음악분수 시나리오 생성장치는 상기 생성된 음악분수 시나리오를 표시하는 시나리오 인터페이스부를 더 포함하고, 상기 시나리오 수정부는 상기 표시된 음악분수 시나리오를 관찰하는 사용자에 의한 상기 음악분수 시나리오 생성장치의 조작된 결과에 따라 동작한다.
바람직하게는, 상기 음악분수 시나리오 생성장치는 하나 이상의 미리 마련된 음악분수 시나리오들을 분석하여 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 결정하는 기존시나리오 분석부를 더 포함하고, 상기 시나리오 생성부는 상기 결정된 배출 형태 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성한다.
바람직하게는, 상기 음악분수 시나리오 생성장치는 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 나타내는 배출형태 테이블을 저장하는 배출형태정보 저장부를 더 포함하고, 상기 시나리오 생성부는 상기 저장된 배출형태 테이블을 독취하고 독취된 배출형태 테이블 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성한다.
바람직하게는, 상기 음악적 속성은 음정을 포함한다.
바람직하게는, 상기 배출 형태는 배출될 확률, 배출 수압 및 배출 방향 중 적어도 하나를 포함한다.
바람직하게는, 상기 온셋 검색부는 상기 오디오 데이터의 시점들 중 현재 시점의 상기 오디오 데이터와 이전 시점의 상기 오디오 데이터 간의 차이가 기 설정된 차이 이상인 하나 이상의 시점들을 검색한다.
바람직하게는, 상기 온셋 검색부는 상기 검색된 시점들 중 서로 간의 시간 간격이 기 설정된 시간 간격 이상인 하나 이상의 시점들을 선택하고, 상기 시나리오 생성부는 상기 선택된 시점마다 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성한다.
바람직하게는, 상기 오디오 데이터는 음악 데이터인 것을 특징으로 한다.
바람직하게는, 상기 오디오 데이터는 MP3 포맷의 데이터, WMA 포맷의 데이터, 및 WAVE 포맷의 데이터 중 하나이다.
본 발명에 따른 최선의 음악분수 시나리오 생성방법은 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 단계; 및 상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계를 포함한다.
바람직하게는, 상기 음악분수 시나리오 생성방법은 상기 생성된 음악분수 시나리오를 상기 음악분수 시나리오 생성방법을 수행하는 장치의 조작된 결과에 따라 수정하는 단계를 더 포함한다. 더욱 바람직하게는, 상기 수정하는 단계는 상기 생성된 음악분수 시나리오를 표시하는 단계; 및 상기 표시된 음악분수 시나리오를 관찰하는 사용자에 의한 상기 장치의 조작된 결과에 따라 수정하는 단계를 포함한다.
바람직하게는, 상기 생성하는 단계는 하나 이상의 미리 마련된 음악분수 시나리오들을 분석하여 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 결정하는 단계; 및 상기 결정된 배출 형태 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계를 포함한다.
바람직하게는, 상기 생성하는 단계는 상기 음악분수 시나리오 생성방법을 수행하는 장치에 저장되어 있으며 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 나타내는 배출형태 테이블을 독취하는 단계; 및 상기 독취된 배출형태 테이블 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계를 포함한다.
바람직하게는, 상기 검색하는 단계는 상기 오디오 데이터의 시점들 중 현재 시점의 상기 오디오 데이터와 이전 시점의 상기 오디오 데이터 간의 차이가 기 설정된 차이 이상인 하나 이상의 시점들을 검색한다.
바람직하게는, 상기 검색하는 단계는 상기 검색된 시점들 중 서로 간의 시간 간격이 기 설정된 시간 간격 이상인 하나 이상의 시점들을 선택하고, 상기 생성하는 단계는 상기 선택된 시점마다 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성한다.
본 발명에 따른 최선의 음악분수 구동장치는 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 온셋 검색부; 상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 시나리오 생성부; 및 상기 생성된 시나리오에 따라 상기 음악 분수를 구동하는 음악분수 구동부를 포함한다.
본 발명에 따른 최선의 음악분수 구동방법은 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 단계; 상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계; 및 상기 생성된 시나리오에 따라 상기 음악 분수를 구동하는 단계를 포함한다.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 그 첨부 도면을 설명하는 내용을 참조하여야만 한다.
이하, 본 발명의 일 실시예에 의한 음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법을 첨부한 도면들을 참조하여 다음과 같이 설명한다.
도 1은 본 발명의 일 실시예에 따른 음악분수 시나리오 생성장치(100)와 음악분수 구동장치(105)를 설명하기 위한 블록도로서, 오디오 변환부(110), 온셋 검색부(120), 기존시나리오 분석부(130), 배출형태정보 저장부(140), 시나리오 생성부(150), 시나리오 수정부(160), 시나리오 인터페이스부(170), 및 음악분수 구동부(180)를 포함할 수 있다.
오디오 변환부(110)는 입력단자 IN1을 통해 입력된 오디오 데이터의 포맷(format)을 분석하고 분석된 오디오 데이터의 포맷이 어떤 특정 포맷이 아니라면 그 입력된 오디오 데이터를 그 특정 포맷의 오디오 데이터로 변환한다. 본 명세서에서, 오디오 데이터는 음성(speech) 데이터일 수도 있고 음악(music) 데이터일 수도 있으나 설명의 편의상 음악 데이터라 가정하고, 오디오 데이터의 포맷의 일 례들로는 MP3(MPEG Audio Layer-3) 포맷, WMA(Windows Media Audio) 포맷, WAVE 포맷 등이 있고 설명의 편의상 그 특정 포맷은 WAVE 포맷이라 가정한다.
즉, 오디오 변환부(110)는 입력단자 IN1을 통해 입력된 오디오 데이터의 포맷이 WAVE 포맷이 아니라면 그 입력된 오디오 데이터를 WAVE 포맷의 오디오 데이터로 변환하고 변환된 오디오 데이터를 후술할 온셋 검색부(120)로 출력하고, 그 입력된 오디오 데이터의 포맷이 WAVE 포맷이라면 그 입력된 오디오 데이터를 후술할 온셋 검색부(120)로 출력한다.
이러한 오디오 변환부(110)는 본 발명의 일 실시예에 따른 음악분수 시나리오 생성장치에 마련되지 않을 수도 있고, 후술할 온셋 검색부(120)에 입력되는 오디오 데이터는 통일되지 않은 다양한 포맷의 오디오 데이터일 수도 있으나, 본 명세서에서는 설명의 편의상, 온셋 검색부(120)는 오디오 변환부(110)를 거친 WAVE 포맷의 오디오 데이터를 입력받는다고 가정한다.
온셋 검색부(120)는 오디오 데이터를 입력받고, 입력된 오디오 데이터 중 적어도 하나의 온셋(onset)들을 검색한다. 본 명세서에서, 온셋이란 음악 분수쇼의 모습이 조정되는 시점을 의미하고, 음악적 속성은 볼륨(volume)을 포함하고 음정까지도 포함할 수도 있으나, 이하 설명의 편의상 음악적 속성은 볼륨이라 가정한다.
보다 구체적으로, 온셋 검색부(120)는 온셋 검색부(120)에 입력된 오디오 데이터의 시점들 중 ‘음악적 속성이 기 설정된 음악적 속성인 하나 이상의 시점들’을 검색하고, 검색된 시점들 각각을 온셋으로서 결정할 수 있다. 보다 구체적으로, 온셋 검색부(120)는 온셋 검색부(120)에 입력된 오디오 데이터를 이용하여, 그 입력된 오디오 데이터를 구성하는 프레임(frame)들 중 ‘인접 프레임들 간의 주파수 성분 데이터의 차이’가 기 설정된 차이 이상인 프레임들로 구성된 데이터를 생성하고, 생성된 데이터의 시점들 중 ‘음악적 속성(예를 들어, 볼륨)이 기 설정된 음악적 속성(예를 들어, 볼륨)인 하나 이상의 시점들’을 검색하고, 검색된 시점들을 온셋(onset)들로서 결정할 수 있다.
한편, 현실적으로 음악 분수쇼의 물줄기 모습이 지나치게 빈번히 조정되는 경우는 거의 없으므로, 온셋 검색부(120)는 온셋을 검색함에 있어, ‘시간상 지나치게 인접해 있는 온셋들이 존재하지 않도록’ 하나 이상의 온셋들을 검색할 수도 있다. 이를 위해, 온셋 검색부(120)는 오디오 데이터의 시점들 중 ‘음악적 속성이 기 설정된 음악적 속성인 하나 이상의 시점들’을 검색하고, 검색된 시점들 중 ‘서로 간의 시간 간격이 기 설정된 시간 간격 이상인 시점들’을 선택하고 선택된 시점들 각각을 온셋으로서 결정할 수도 있다.
기존시나리오 분석부(130)는 입력단자 IN2를 통해 (하나 이상의 오디오 데이터들(물론, 앞서 언급한 입력단자 IN1을 통해 입력된 오디오 데이터가 아님)에 대한) 하나 이상의 음악분수 시나리오들을 입력받는다. 본 명세서에서, 음악분수 시나리오(scenario)란 오디오 데이터(예를 들어, 음악 데이터)의 시간의 흐름에 따른 노즐들 각각의 물의 배출 형태를 규정한 데이터를 의미한다. 본 명세서에서, ‘물의 배출 형태’란 ‘물의 배출될 확률’, ‘배출 수압’, 및 ‘배출 방향’ 중 적어도 하나를 포함한다.
기존시나리오 분석부(130)는 기존시나리오 분석부(130)에 입력된 하나 이상의 음악분수 시나리오들 각각을 분석하여, ‘음악 분수에 구비된 노즐들 각각의 물의 배출 형태가 음악적 속성(예를 들어, 볼륨)별로 어떻게 되는지’를 결정한다.
배출형태정보 저장부(140)는 기존시나리오 분석부(130)에 의해 결정된 ‘음악적 속성별 ‘음악 분수에 구비된 노즐들 각각의 물의 배출 형태’’를 나타내는 ‘배출형태 테이블’을 저장한다.
시나리오 생성부(150)는 ‘입력단자 IN1을 통해 입력된 오디오 데이터’ 및 ‘음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐들을 통한 물의 배출 형태’’를 고려하여, 온셋마다 조정되는 ‘그 노즐들을 통한 물의 배출 형태’를 규정한 ‘입력단자 IN1을 통해 입력된 오디오 데이터의 음악분수 시나리오’를 자동으로 생성한다.
구체적으로, 시나리오 생성부(150)는 기존시나리오 분석부(130)로부터 ‘음악 분수에 구비된 노즐들 각각의 음악적 속성에 따른 물의 배출 형태’에 관한 정보를 입력받고, ‘입력단자 IN1을 통해 입력된 오디오 데이터’ 및 기존시나리오 분석부(130)에 의해 결정된 ‘음악 분수에 구비된 노즐들 각각의 ‘음악적 속성에 따른 물의 배출 형태'를 고려하여, 그 ‘입력단자 IN1을 통해 입력된 오디오 데이터’의 음악분수 시나리오를 자동으로 생성할 수 있다.
또는, 시나리오 생성부(150)는 배출형태정보 저장부(140)에 저장된 배출형태 테이블을 독취하고, 독취된 배출형태 테이블에 나타난 음악 분수에 구비된 노즐들 각각의 ‘음악적 속성에 따른 물의 배출 형태'와 ‘입력단자 IN 1을 통해 입력된 오디오 데이터’를 고려하여, 그 ‘입력단자 IN1을 통해 입력된 오디오 데이터’의 음악분수 시나리오를 자동으로 생성할 수도 있다.
시나리오 수정부(160)는 시나리오 생성부(150)에 의해 생성된 음악분수 시나리오를 음악분수 시나리오 생성장치(100)의 조작된 결과에 따라 수정한다. 시나리오 생성부(150)가 생성하는 음악분수 시나리오는 수작업의 아무런 개입없이, 오로지 상술한 본 발명의 일 실시예에 따른 원리에 따라 컴퓨터(구체적으로, 음악분수 시나리오 생성장치)상에서 자동으로 생성된 음악분수 시나리오이고, 따라서 사용자(예컨대, 음악 분수 설계자)에 따라서는 사용자를 충분히 만족시키지 못할 수 있으며, 이러한 경우를 대비해 시나리오 수정부(160)가 음악분수 시나리오 생성장치(100)에 마련된다.
구체적으로, 시나리오 인터페이스부(170)는 시나리오 생성부(150)에 의해 생성된 음악분수 시나리오를 표시하며, 그 표시된 음악분수 시나리오를 관찰하는 사용자(예를 들어, 음악 분수 설계자)에 의해 조작되고, 시나리오 수정부(160)는 시나리오 생성부(150)에 의해 생성된 음악분수 시나리오를 그 조작된 결과에 따라 수정한다. 이를 위해, 시나리오 인터페이스부(170)는 키보드나 마우스와 같은 데이터 입력장치를 구비할 수도 있고, 터치 패널(touch panel)로 구현될 수도 있다.
음악분수 구동부(180)는 시나리오 생성부(150)에 의해 생성된 음악분수 시나리오 또는 시나리오 수정부(160)에 의해 수정된 음악분수 시나리오에 따라, 음악 분수(예를 들어, 음악 분수에 구비된 하나 이상의 펌프들)를 구동한다.
도 2는 음악 분수가 제공하는 분수쇼의 일 례들을 나타낸 참고도이다. 이하, 본 명세서에 기재된 ‘물의 배출될 확률’을 도 2를 참조하며 보다 상세히 설명한다.
음악 분수에 구비된 펌프들 각각에는 하나 이상의 노즐들이 연결되어 있으므로, 노즐을 통해 물이 배출될 확률은 그 노즐에 연결된 펌프가 켜질(on) 확률이며, 하나의 펌프가 켜질 확률은 베이지안 모델(Bayesian Model)을 이용하여 표현되며, 구체적으로는 다음의 수학식 1과 2로서 표현될 수 있다.
[규칙 제26조에 의한 보정 10.02.2009]　
수학식 1
Figure WO-DOC-MATHS-1
[규칙 제26조에 의한 보정 10.02.2009]　
수학식 2
Figure WO-DOC-MATHS-2
수학식 1에서, Audio는 볼륨값을 의미하고, P(Pi | Audio)는 오디오 데이터의 어느 시점에서의 볼륨의 크기가 Audio라는 크기일 때 i번째 펌프가 그 어느 시점에서 켜질 확률을 의미하고, P(Pi | Pj, Audio)는 그 오디오 데이터의 그 어느 시점에서의 볼륨의 크기가 Audio라는 크기이면서 j번째 펌프가 그 어느 시점에서 켜져 있을 때 i번째 펌프가 그 어느 시점에서 켜질 확률을 의미하고, P(Pj | Audio)는 그 오디오 데이터의 어느 시점에서의 볼륨의 크기가 Audio라는 크기일 때 j번째 펌프가 그 어느 시점에서 켜질 확률을 의미하고, 수학식 2에서, N은 음악 분수에 구비된 펌프의 개수를 의미하고, Psel(Pi)는 i번째 펌프가 그 어느 시점에서 켜질 확률을 의미한다.
수학식 1에 P(Pi | Audio)가 존재하는 이유는 펌프마다 음악의 볼륨에 따라 켜질 확률이 다를 수 있기 때문이다. 일반적으로, 크기가 큰 노즐에 연결된 펌프의 경우, 음악 볼륨이 작을 때보다는 클 때 켜질 확률이 크다. 한편, 도 2의 (a)는 음악 볼륨이 작을 때의 바람직한 음악 분수쇼의 일 례를 나타내고, 도 2의 (b)는 음악 볼륨이 클 때의 바람직한 음악 분수쇼의 일 례를 나타낸다.
한편, 수학식 1에 P(Pi | Pj, Audio)가 존재하는 이유는, 복수의 펌프가 켜짐으로 인한 복수의 물줄기의 모양 간의 어울림 정도는 어떠한 조합의 펌프가 켜지느냐에 따라 달라지며, i번째 펌프가 켜질 경우 발생되는 물줄기의 모양과 j번째 펌프가 켜질 경우 발생되는 물줄기의 모양간의 어울림 정도가 클수록 P(Pi | Pj, Audio)도 큰 값으로 설정될 수 있다. 한편, 도 2의 (c)는 서로 잘 어울리지 않는 물줄기들을 나타내고, 도 2의 (d)는 서로 잘 어울리는 물줄기들을 나타낸다.
도 3은 도 1에 도시된 온셋 검색부(120)의 동작을 설명하기 위한 파형도이다. 도 3의 (a)는 입력단자 IN1을 통해 입력된 오디오 데이터의 일 례의 파형도이고, 도 3의 (b)는 도 3의 (a)에 도시된 오디오 데이터의 spectral flux 데이터의 파형도이고, 도 3의 (c)는 도 3의 (b)에 도시된 파형에서 크기가 기 설정된 크기 이상인 데이터를 선택한 결과의 파형도이고, 도 3의 (d)는 도 3의 (c)에 도시된 파형에서 서로 간의 시간 간격이 기 설정된 시간 간격 미만인 데이터들 중 일부를 제거한 결과의 파형도이다.
오디오 데이터의 spectral flux 데이터는 다음의 수학식 3을 이용하여 계산된다.
[규칙 제26조에 의한 보정 10.02.2009]　
수학식 3
Figure WO-DOC-MATHS-3
(단, K는 2이상의 정수)
본 명세서에서, 오디오 데이터는 복수의 프레임(frame)들로 구성되며, 수학식 1에서 n은 오디오 데이터의 시점들 중 하나의 시점, 즉, 오디오 데이터의 프레임들 중 하나의 시점을 의미하고, SF(n)은 n이라는 시점에서의 프레임의 spectral flux 데이터이고, X(n, k)는 오디오 데이터를 푸리에 변환(Fourier Transform)한 경우 n이라는 시점에서의 프레임 중 k번째 주파수에 해당하는 데이터를 의미하고, X(n-1, k)는 오디오 데이터를 푸리에 변환한 경우 n-1이라는 시점에서의 프레임 중 k번째 주파수에 해당하는 데이터를 의미하고, H함수는 half wave rectifier function으로서 다음의 수학식 4로서 정의된다.
[규칙 제26조에 의한 보정 10.02.2009]　
수학식 4
Figure WO-DOC-MATHS-4
결국, 오디오 데이터의 spectral flux 데이터란, ‘현재 시점에서의 프레임의 주파수 영역에서의 데이터’와 ‘이전 시점에서의 프레임의 주파수 영역에서의 데이터’간의 차이를 나타내는 데이터이며, 도 3에 도시된 바에서 온셋을 spectral flux 데이터상에서 검색하는 이유는, 일반적으로 온셋이 경과될 때마다 오디오 데이터의 주파수 성분의 데이터에 변화가 많이 발생되기 때문이다.
한편, 온셋 검색부(120)는 ‘입력단자 IN1을 통해 입력된 오디오 데이터(도 3의 (a) 참조)’의 시점들 중 음악적 속성(예를 들어, 볼륨)이 기 설정된 음악적 속성인 하나 이상의 시점들을 검색하고 검색된 시점들을 온셋들이라 결정할 수도 있고, 입력단자 IN1을 통해 입력된 오디오 데이터의 spectral flux 데이터(도 3의 (b) 참조)의 시점들 중 음악적 속성이 기 설정된 음악적 속성인 하나 이상의 시점들을 검색하고 검색된 시점들을 온셋들이라 결정할 수도 있다. 다만, 도 3에 도시된 바에서 온셋 검색부(120)는 입력단자 IN1을 통해 입력된 오디오 데이터의 spectral flux 데이터(도 3의 (b) 참조)의 시점들 중 음악적 속성이 기 설정된 음악적 속성인 하나 이상의 시점들을 검색함으로써 그 검색된 시점들의 프레임들만으로 구성된 파형을 획득하고(도 3의 (c) 참조), 그 검색된 시점들 중 ‘서로 간의 시간 간격이 기 설정된 시간 간격 이상인 하나 이상의 시점들’을 선택하고 선택된 시점들의 프레임들만으로 구성된 파형을 획득하고(도 3의 (d) 참조) 그 선택된 시점들을 온셋들로서 결정한다.
도 4는 본 발명의 일 실시예에 따른 음악분수 시나리오 생성방법을 나타내는 플로우챠트로서, 수작업에 의존하지 않으면서 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울릴 수 있는 음악분수 시나리오를 신속히 자동으로 생성할 수 있는 단계(제410 내지 제420 단계들)을 포함할 수 있다.
음악분수 시나리오 생성장치(100)는 입력단자 IN1을 통해 입력된 오디오 데이터의 시점들 중 음악적 속성(예를 들어, 볼륨)이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색한다(제410 단계).
제410 단계 후에, 음악분수 시나리오 생성장치(100)는 음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태’와 ‘입력단자 IN1을 통해 입력된 오디오 데이터’를 고려하여, ‘입력단자 IN1을 통해 입력된 오디오 데이터’의 음악분수 시나리오를 자동으로 생성한다(제420 단계).
도 5는 본 발명의 일 실시예에 따른 음악분수 구동방법을 나타내는 플로우챠트로서, 수작업에 의존하지 않으면서 음악 분수가 어떠한 곡(曲)에 대해서도 그 곡에 최대로 어울리는 분수 쇼를 신속히 자동으로 제공할 수 있도록 하는 단계(제510 내지 제530 단계들)을 포함할 수 있다.
음악분수 구동장치(105)는 입력단자 IN1을 통해 입력된 오디오 데이터의 시점들 중 음악적 속성(예를 들어, 볼륨)이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색한다(제510 단계).
제510 단계 후에, 음악분수 구동장치(105)는 음악적 속성별로 기 설정된 ‘음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태’와 ‘입력단자 IN1을 통해 입력된 오디오 데이터’를 고려하여, ‘입력단자 IN1을 통해 입력된 오디오 데이터’의 음악분수 시나리오를 자동으로 생성한다(제520 단계).
제520 단계 후에, 음악분수 구동장치(105)는 제520 단계에서 생성된 음악분수 시나리오에 따라 음악 분수를 구동하여 ‘입력단자 IN1을 통해 입력된 오디오 데이터’에 대한 분수 쇼를 수행한다(제530 단계).
이상에서 언급된 본 발명의 일 실시예에 의한 음악분수 시나리오 생성방법을 컴퓨터에서 실행시키기 위한 프로그램은 컴퓨터로 읽을 수 있는 기록매체에 저장될 수 있다. 물론, 본 발명의 일 실시예에 의한 음악분수 구동방법을 컴퓨터에서 실행시키기 위한 프로그램 역시 컴퓨터로 읽을 수 있는 기록매체에 저장될 수 있다.
여기서, 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬(ROM), 플로피 디스크, 하드 디스크 등), 및 광학적 판독 매체(예를 들면, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc))와 같은 저장매체를 포함한다.
이제까지 본 발명을 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로, 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점들은 본 발명에 포함된 것으로 해석되어야 할 것이다.
본 발명은 오디오 분석 기술과 머신 러닝 기술을 이용하여 새로운 음악 분수 시나리오를 생성하는 기술에 관련한 것이다. 일반적으로 컴퓨터를 통하여 자동 생성한 시나리오는 전문가가 공들여 만든 시나리오에 비하여는 부족한 점이 존재한다. 하지만, 자동 생성한 시나리오를 간단하게 수정할 수 있는 인터페이스가 제공된다면, 사용자가 원하는 몇 부분을 간단하게 수정함으로써, 더욱 높은 수준의 시나리오를 생성할 수 있다. 또한, 본 발명이 시뮬레이션 시스템과 결합된다면, 전문가가 아닌 일반인들도 쉽고 빠르게 시나리오를 생성할 수 있게 된다. 본 발명은 종래에 다양한 음악 분수 시공 회사에서 직접적으로 사용 가능한 기술이기 때문에 높은 시장성을 가진다.

Claims (25)

  1. 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 온셋 검색부; 및
    상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 시나리오 생성부
    를 포함하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  2. 제 1 항에 있어서,
    상기 음악분수 시나리오 생성장치는 상기 생성된 음악분수 시나리오를 상기 음악분수 시나리오 생성장치의 조작된 결과에 따라 수정하는 시나리오 수정부를 더 포함하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  3. 제 2 항에 있어서,
    상기 음악분수 시나리오 생성장치는 상기 생성된 음악분수 시나리오를 표시하는 시나리오 인터페이스부를 더 포함하고,
    상기 시나리오 수정부는 상기 표시된 음악분수 시나리오를 관찰하는 사용자에 의한 상기 음악분수 시나리오 생성장치의 조작된 결과에 따라 동작하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  4. 제 1 항에 있어서,
    상기 음악분수 시나리오 생성장치는 하나 이상의 미리 마련된 음악분수 시나리오들을 분석하여 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 결정하는 기존시나리오 분석부를 더 포함하고,
    상기 시나리오 생성부는 상기 결정된 배출 형태 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  5. 제 1 항에 있어서,
    상기 음악분수 시나리오 생성장치는 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 나타내는 배출형태 테이블을 저장하는 배출형태정보 저장부를 더 포함하고,
    상기 시나리오 생성부는 상기 저장된 배출형태 테이블을 독취하고 독취된 배출형태 테이블 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  6. 제 1 항에 있어서,
    상기 음악적 속성은 음정을 더 포함하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  7. 제 1 항에 있어서,
    상기 배출 형태는 배출될 확률, 배출 수압 및 배출 방향 중 적어도 하나를 포함하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  8. 제 1 항에 있어서,
    상기 온셋 검색부는 상기 오디오 데이터의 시점들 중 현재 시점의 상기 오디오 데이터와 이전 시점의 상기 오디오 데이터 간의 차이가 기 설정된 차이 이상인 하나 이상의 시점들을 검색하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  9. 제 1 항에 있어서,
    상기 온셋 검색부는 상기 검색된 시점들 중 서로 간의 시간 간격이 기 설정된 시간 간격 이상인 하나 이상의 시점들을 선택하고,
    상기 시나리오 생성부는 상기 선택된 시점마다 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 것을 특징으로 하는 음악분수 시나리오 생성장치.
  10. 제 1 항에 있어서,
    상기 오디오 데이터는 음악 데이터인 것을 특징으로 하는 음악분수 시나리오 생성장치.
  11. 제 1 항에 있어서,
    상기 오디오 데이터는 MP3 포맷의 데이터, WMA 포맷의 데이터, 및 WAVE 포맷의 데이터 중 하나인 것을 특징으로 하는 음악분수 시나리오 생성장치.
  12. 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 단계; 및
    상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계
    를 포함하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  13. 제 12 항에 있어서,
    상기 음악분수 시나리오 생성방법은 상기 생성된 음악분수 시나리오를 상기 음악분수 시나리오 생성방법을 수행하는 장치의 조작된 결과에 따라 수정하는 단계를 더 포함하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  14. 제 13 항에 있어서,
    상기 수정하는 단계는,
    상기 생성된 음악분수 시나리오를 표시하는 단계; 및
    상기 표시된 음악분수 시나리오를 관찰하는 사용자에 의한 상기 장치의 조작된 결과에 따라 수정하는 단계
    를 포함하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  15. 제 12 항에 있어서,
    상기 생성하는 단계는,
    하나 이상의 미리 마련된 음악분수 시나리오들을 분석하여 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 결정하는 단계; 및
    상기 결정된 배출 형태 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계
    를 포함하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  16. 제 12 항에 있어서,
    상기 생성하는 단계는,
    상기 음악분수 시나리오 생성방법을 수행하는 장치에 저장되어 있으며 상기 음악적 속성별로 상기 펌프들 각각의 배출 형태를 나타내는 배출형태 테이블을 독취하는 단계; 및
    상기 독취된 배출형태 테이블 및 상기 오디오 데이터를 고려하여 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계
    를 포함하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  17. 제 12 항에 있어서,
    상기 음악적 속성은 음정을 더 포함하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  18. 제 12 항에 있어서,
    상기 배출 형태는 배출될 확률, 배출 수압 및 배출 방향 중 적어도 하나를 포함하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  19. 제 12 항에 있어서,
    상기 검색하는 단계는 상기 오디오 데이터의 시점들 중 현재 시점의 상기 오디오 데이터와 이전 시점의 상기 오디오 데이터 간의 차이가 기 설정된 차이 이상인 하나 이상의 시점들을 검색하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  20. 제 12 항에 있어서,
    상기 검색하는 단계는 상기 검색된 시점들 중 서로 간의 시간 간격이 기 설정된 시간 간격 이상인 하나 이상의 시점들을 선택하고,
    상기 생성하는 단계는 상기 선택된 시점마다 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 것을 특징으로 하는 음악분수 시나리오 생성방법.
  21. 제 12 항에 있어서,
    상기 오디오 데이터는 음악 데이터인 것을 특징으로 하는 음악분수 시나리오 생성방법.
  22. 제 12 항에 있어서,
    상기 오디오 데이터는 MP3 포맷의 데이터, WMA 포맷의 데이터, 및 WAVE 포맷의 데이터 중 하나인 것을 특징으로 하는 음악분수 시나리오 생성방법.
  23. 제 12 항 내지 제 22 항 중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 컴퓨터 프로그램을 저장한 컴퓨터로 읽을 수 있는 기록매체.
  24. 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 온셋 검색부;
    상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 시나리오 생성부; 및
    상기 생성된 시나리오에 따라 상기 음악 분수를 구동하는 음악분수 구동부
    를 포함하는 것을 특징으로 하는 음악분수 구동장치.
  25. 오디오 데이터의 시점들 중 볼륨을 포함한 음악적 속성이 기 설정된 음악적 속성인 적어도 하나의 시점들을 검색하는 단계;
    상기 음악적 속성별로 기 설정된 음악 분수에 구비된 하나 이상의 노즐을 통한 물의 배출 형태와 상기 오디오 데이터를 고려하여, 상기 검색된 시점에서 조정되는 상기 배출 형태를 규정한 상기 오디오 데이터의 음악분수 시나리오를 자동으로 생성하는 단계; 및
    상기 생성된 시나리오에 따라 상기 음악 분수를 구동하는 단계
    를 포함하는 것을 특징으로 하는 음악분수 구동방법.
PCT/KR2009/000154 2008-10-22 2009-01-12 음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법 WO2010047444A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2008-0103648 2008-10-22
KR1020080103648A KR101004784B1 (ko) 2008-10-22 2008-10-22 음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오생성장치 및 방법

Publications (1)

Publication Number Publication Date
WO2010047444A1 true WO2010047444A1 (ko) 2010-04-29

Family

ID=42119469

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2009/000154 WO2010047444A1 (ko) 2008-10-22 2009-01-12 음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법

Country Status (2)

Country Link
KR (1) KR101004784B1 (ko)
WO (1) WO2010047444A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103473423A (zh) * 2013-09-22 2013-12-25 上海幻维数码创意科技有限公司 喷泉模拟系统
CN110992450A (zh) * 2019-11-28 2020-04-10 东华大学 基于OpenGL的音乐喷泉模拟系统
CN112667193A (zh) * 2020-12-22 2021-04-16 北京小米移动软件有限公司 外壳显示状态控制方法及装置、电子设备、存储介质
CN117956247A (zh) * 2023-12-27 2024-04-30 北京信息科技大学 一种音乐驱动的视频自动生成方法、系统、设备及介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101336107B1 (ko) * 2011-03-23 2013-12-05 중앙대학교 산학협력단 음악적 표현 스트리밍 서비스를 이용한 지능형 분수 시스템 및 그 제어 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004148233A (ja) * 2002-10-31 2004-05-27 Shin Meiwa Ind Co Ltd 音楽同調噴水装置
KR20060013446A (ko) * 2006-01-24 2006-02-09 김노석 패턴디자인이 용이한 음악분수 제어시스템
KR20080002932U (ko) * 2007-01-25 2008-07-30 김영포 음악 분수 제어 방법
KR20080077747A (ko) * 2007-02-21 2008-08-26 문동환 Ｄｍｘ512 기반의 멀티미디어 음악분수시스템 및 이의연출방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100305631B1 (ko) * 1998-02-23 2001-12-17 정운익 음악분수시스템
KR20040029887A (ko) * 2002-10-02 2004-04-08 엘지전자 주식회사 김치냉장고
KR200429887Y1 (ko) * 2006-06-22 2006-11-01 거성에이티엘(주) 음악 분수장치
KR100817749B1 (ko) * 2006-09-05 2008-04-01 창인건설(주) 음악과 분수의 출력을 동기화 한 음악분수장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004148233A (ja) * 2002-10-31 2004-05-27 Shin Meiwa Ind Co Ltd 音楽同調噴水装置
KR20060013446A (ko) * 2006-01-24 2006-02-09 김노석 패턴디자인이 용이한 음악분수 제어시스템
KR20080002932U (ko) * 2007-01-25 2008-07-30 김영포 음악 분수 제어 방법
KR20080077747A (ko) * 2007-02-21 2008-08-26 문동환 Ｄｍｘ512 기반의 멀티미디어 음악분수시스템 및 이의연출방법

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103473423A (zh) * 2013-09-22 2013-12-25 上海幻维数码创意科技有限公司 喷泉模拟系统
CN103473423B (zh) * 2013-09-22 2017-04-12 上海幻维数码创意科技有限公司 喷泉模拟系统
CN110992450A (zh) * 2019-11-28 2020-04-10 东华大学 基于OpenGL的音乐喷泉模拟系统
CN110992450B (zh) * 2019-11-28 2023-06-20 东华大学 基于OpenGL的音乐喷泉模拟系统
CN112667193A (zh) * 2020-12-22 2021-04-16 北京小米移动软件有限公司 外壳显示状态控制方法及装置、电子设备、存储介质
CN117956247A (zh) * 2023-12-27 2024-04-30 北京信息科技大学 一种音乐驱动的视频自动生成方法、系统、设备及介质

Also Published As

Publication number Publication date
KR20100044493A (ko) 2010-04-30
KR101004784B1 (ko) 2011-01-04

Similar Documents

Publication Publication Date Title
Li et al. Creating a multitrack classical music performance dataset for multimodal music analysis: Challenges, insights, and applications
Eerola et al. MIDI toolbox: MATLAB tools for music research
Goto et al. Music interfaces based on automatic music signal analysis: new ways to create and listen to music
US9773483B2 (en) Automatic transcription of musical content and real-time musical accompaniment
Barbancho et al. Automatic transcription of guitar chords and fingering from audio
US9558727B2 (en) Performance method of electronic musical instrument and music
WO2010047444A1 (ko) 음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법
US20100251876A1 (en) System and method for adaptive melodic segmentation and motivic identification
JP2001265326A (ja) 演奏位置検出方法および楽譜表示装置
CN104867487A (zh) 多功能音频信号产生设备
CN104078035A (zh) 一种演奏乐曲的方法及装置
Dannenberg A Vision of Creative Computation in Music Performance.
WO2014148665A2 (ko) 멀티미디어 콘텐츠 편집장치 및 그 방법
US9098679B2 (en) Raw sound data organizer
WO2015152586A1 (ko) 유사도판별장치 및 그 동작 방법
Greenhalgh et al. ^ muzicode$ Composing and Performing Musical Codes
KR102497878B1 (ko) 노트 레벨의 오디오 데이터를 기초로 학습을 수행하는 보컬 채보 학습 방법 및 장치
WO2015093668A1 (ko) 오디오 신호 처리 장치 및 방법
JP4531679B2 (ja) マルチスタンダード採点を行うカラオケ採点装置
KR102490769B1 (ko) 음악적 요소를 이용한 인공지능 기반의 발레동작 평가 방법 및 장치
TW201719628A (zh) 具有指法標示之樂譜產生方法及其系統
WO2011136454A1 (ko) 이미지를 이용한 음원 생성 시스템 및 방법
JP2007334202A (ja) カラオケ装置
JP2013200455A (ja) 演奏練習支援システム
Müller et al. Music synchronization

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09822120

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09822120

Country of ref document: EP

Kind code of ref document: A1