WO2012117444A1 - 色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム - Google Patents

色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム Download PDF

Info

Publication number
WO2012117444A1
WO2012117444A1 PCT/JP2011/001195 JP2011001195W WO2012117444A1 WO 2012117444 A1 WO2012117444 A1 WO 2012117444A1 JP 2011001195 W JP2011001195 W JP 2011001195W WO 2012117444 A1 WO2012117444 A1 WO 2012117444A1
Authority
WO
WIPO (PCT)
Prior art keywords
music
color conversion
color
tonality
display
Prior art date
Application number
PCT/JP2011/001195
Other languages
English (en)
French (fr)
Inventor
拓也 山田
Original Assignee
パイオニア株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パイオニア株式会社 filed Critical パイオニア株式会社
Priority to PCT/JP2011/001195 priority Critical patent/WO2012117444A1/ja
Publication of WO2012117444A1 publication Critical patent/WO2012117444A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0008—Associated control or indicating means
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/081—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for automatic key or tonality recognition, e.g. using musical rules or a knowledge base

Definitions

  • the present invention relates to a color conversion method, a music display method, a color conversion device, a color conversion system, a display device, a correspondence table, a server, a user terminal, and a program for expressing tone tones (keys) by color.
  • a harmony color selection method in which the tone of a sound is expressed by color by making the wavelength of the sound correspond to the wavelength of the hue (hue ring).
  • the colors that are close to each other in the root tone wavelength are arranged close to each other on the hue ring.
  • C and C # correspond to similar hues such as red and orange (for example, Patent Document 1).
  • the present invention can convert the tone of a sound into a color that is intuitively understandable, and can display a music in a color suitable for the tonality, a color conversion method, a music display method, and a color It is an object to provide a conversion device, a color conversion system, a display device, a correspondence table, a server, a user terminal, and a program.
  • an arbitrary tonality is based on a reference step that refers to a correspondence table that associates an annular tonality space based on the fifth degree and a hue circle, and a reference result of the reference step. And a color conversion step for converting the color into a color.
  • the color conversion device has an arbitrary tonality based on a reference table that refers to a correspondence table that associates an annular tonality space based on the fifth degree and a hue circle, and a reference result of the reference unit. And color conversion means for converting the color into a color.
  • the correspondence table in which the annular tonality space based on the fifth degree is associated with the hue circle is used, it is possible to convert the tonality of the sound into a color that is intuitively understandable. it can.
  • the fifth grade since a genus chord that can be shifted naturally (for example, G for C) and a lower genus chord (for example, F for C) are arranged at close positions, the genus chord and the lower genus chord are thus close in hue. Is associated with. This makes it possible to realize color conversion in which the closeness of hearing between tones and the closeness of hue coincide with each other and humans can feel it naturally.
  • the “fifth degree” refers to a tonality space in which each of the 12 major and minor keys is arranged in an annular shape, and the subgenus is arranged in the clockwise direction and the counterclockwise direction in each key. A combination of major and minor keys located at the same angle is a parallel tone. For this reason, the tonality located closer to the fifth degree includes more common pitches and can be transposed naturally, and even when mixed, dissonance is less likely to occur.
  • the hue circle may be based on any color space or color system such as HLS color space, HSV color space, PCCS (Practical Color Coordinate System) color system, Munsell color system, or the like.
  • the correspondence table is characterized in that colors having the same hue are associated with parallel tones.
  • the correspondence table is characterized by associating colors having different brightness or luminance in major and minor keys.
  • a major key and a minor key can be visually distinguished.
  • the major key is associated with a color having high brightness or high luminance with respect to the minor key. According to this configuration, it is possible to express the difference between the major / minor key in a sensuous manner.
  • the color conversion step is characterized in that the color conversion step converts the color into a different saturation color according to the analysis result excluding the tonality of each music or the music information which is accompanying information of each music.
  • the “music analysis result” refers to BPM or the like. Further, the presence / absence of musical sound, the genre of music, the melody, the harmony, the rhythm, etc. may be analyzed and used as the analysis result.
  • the “accompanying information” refers to music identification information, title name, album name, artist name, rate (evaluation by a user), database registration date, last update date of music data, music playback time, and the like. Further, presence / absence of musical sound, genre of music, melody, harmony, rhythm, etc. may be attached as accompanying information.
  • the music information is information indicating the presence or absence of a musical sound.
  • the color conversion step converts the tonality of each unit music obtained by dividing the music into a plurality of sections to a color.
  • the above color conversion method further includes an analysis step of analyzing the music and determining the tonality, and the color conversion step converts the music into a color corresponding to the tonality based on the tonality determination result in the analysis step. It is characterized by doing.
  • the music display method of the present invention includes each step in the color conversion method described above, and a display control step for displaying the music on the display screen in a color corresponding to the tonality based on the conversion result of the color conversion step. It is characterized by that.
  • the music can be displayed in a color suitable for its tonality (a color that is intuitively understandable).
  • the display control step displays the audio waveform of the music in a color corresponding to each music section divided by dividing the tonality switching position.
  • the audio waveform of the music to be modulated can be color-converted and displayed for each music segment divided by the tonality switching position. Thereby, presence / absence of modulation and tonality switching position can be visually grasped.
  • the music display method further includes a sorting step of sorting a plurality of music pieces according to the analysis result of each music piece or music information that is accompanying information of each music piece, and the display control step includes a sound of each sorted music piece.
  • the waveform is displayed in a color corresponding to the tonality of each music piece.
  • a plurality of music pieces are sorted according to music information, and the result is displayed as a voice waveform color-coded according to tonality.
  • Information about the music can be grasped at a glance. For example, by sorting music according to BPM, it is possible to instantly grasp BPM and tonality that are important information when mixing and combining music.
  • the “music analysis result” refers to BPM, tonality, and the like.
  • attribute items related to the mixing and combination of music such as the genre of music, melody, harmony, rhythm, and presence / absence of music may be analyzed, and these may be used as analysis results.
  • the “accompanying information” refers to music identification information, title name, album name, artist name, rate (evaluation by a user), database registration date, last update date of music data, music playback time, and the like. Further, the BPM, tonality, genre, melody, harmony, rhythm, presence / absence of musical sound, etc. of the music may be attached as accompanying information.
  • the display control step is characterized in that an information display area for displaying music information is decorated with a color corresponding to the tonality of the music.
  • the information display area is decorated with a color corresponding to the tonality of the music, the tonality of the music can be grasped at a glance and the music information can also be confirmed.
  • the display control step is characterized in that different decorations are applied to the information display area according to at least one of the presence / absence of music modulation and the presence / absence of music.
  • the color conversion system includes an annular tonality space based on the fifth degree, a storage unit that stores a correspondence table in which the hue circle is associated, and an arbitrary tonality based on a reference result of the correspondence table. And color conversion means for converting the color into a color.
  • the server according to the present invention provides an arbitrary tonality based on a reference table that refers to a correspondence table in which an annular tonality space based on the fifth degree is associated with a hue circle, and a reference result of the reference unit. And a color conversion means for converting into color.
  • the user terminal according to the present invention is used in connection with the server described above, and is provided with a display screen for displaying the result of color conversion by the color conversion means.
  • a color conversion system can be realized by a server on the network.
  • the present invention may be realized by a plurality of servers and terminals, such as a color conversion system constructed by a server having storage means and a server having color conversion means.
  • the color conversion system can also be applied to cloud computing.
  • a server, a personal computer (hereinafter referred to as “PC”), and a user terminal are network-connected, at least a display screen, a server, and / or a PC are connected to the user terminal.
  • Communication means for communication may be provided, and the storage means and the color conversion means may be provided in any one of the server, the PC, and the user terminal, or distributed in each.
  • the display device of the present invention is characterized by including a display screen in the music display method described above.
  • the correspondence table of the present invention is used in the color conversion method or the music display method described above.
  • the program of the present invention causes a computer to execute each step in the color conversion method or the music display method.
  • PC It is a block diagram of PC concerning one Embodiment of this invention. It is a figure which shows the example of a screen display of a file music player. It is a functional block diagram of PC. It is a figure which shows an example of a correspondence table. It is a figure which shows the tonality space of a fifth grade. It is a figure which shows HLS color space and a corresponding attribute item. It is explanatory drawing regarding the display of an audio
  • FIG. 1 is a configuration diagram showing a schematic configuration of a PC 10 (color conversion device).
  • the PC 10 includes a display unit 11, an operation unit 12, an external storage device interface unit (hereinafter referred to as an “external storage device I / F unit”) 13, a communication unit 14, a control unit 15, and a storage.
  • an external storage device I / F unit external storage device interface unit
  • the reproduction processing unit 17, and the audio output unit 18, a bus 19 for connecting them is provided.
  • the display unit 11 displays an operation screen D0 (see FIG. 2) of the file music player on a display screen (not shown).
  • the present embodiment is characterized in that a voice waveform 60 expressed in a color corresponding to the tone of music is displayed on the operation screen D0.
  • the operation unit 12 includes a mouse, a keyboard, a touch pad, and the like, and is used for a user to perform various operations. In the present embodiment, it is mainly used for selecting a desired speech waveform 60 (music) from the speech waveform group displayed on the operation screen D0 (browser display area E5).
  • the external storage device I / F unit 13 inputs / outputs information between the PC 10 and the external storage device 30 such as reading music information from the external storage device 30.
  • the external storage device 30 refers to a storage device (such as an external hard disk device) locally connected to the PC 10 or a USB memory that can be read by a memory slot mounted on the PC 10.
  • the communication unit 14 communicates between the PC 10 and a device on the network NW, such as acquiring music information from a memory of a device (server) on the network NW via a network NW such as the Internet or an intranet.
  • the control unit 15 includes a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and performs various arithmetic processes.
  • display control of the display unit 11 based on the operation of the operation unit 12, information input / output control via the external storage device I / F unit 13 and the communication unit 14, music editing processing (including music mixing processing and combination processing) ), Music playback control and the like.
  • the storage unit 16 is composed of a hard disk drive or the like, stores a dedicated application 20 for realizing a file music player, and stores music information.
  • a music file or a music file path
  • music accompanying information and the like are stored.
  • the music accompanying information includes music identification information (music ID), music title name, album name, artist name, genre name, composer name, remixer name, label name, album artwork AAW ID, and album artwork AAW image.
  • the representative color information of the album artwork AAW and the song artwork TAW is also obtained from the image file of the artwork AW (hereinafter, the album artwork AAW and the song artwork TAW are referred to as “artwork AW”) by the dedicated application 20.
  • the extracted information may be set in advance in the music accompanying information or may be specified by the user. Note that the music artwork TAW may be the same image as the album artwork AW unless otherwise set.
  • the reproduction processing unit 17 performs reproduction processing of the music file under the control of the control unit 15 and outputs the reproduction signal to the audio output unit 18.
  • the audio output unit 18 includes a DSP, an amplifier, a speaker, headphones, or the like, and outputs a reproduction signal to the outside.
  • the display unit 11, the operation unit 12, the storage unit 16, the audio output unit 18, and the like may be externally attached.
  • the operation screen D0 of the file music player includes a player unit Ea at the top of the screen and a browser unit Eb at the bottom of the screen.
  • the player section Ea is an area for displaying information related to the music being played back, and has a first player display section E1, a second player display section E2, and a button group display area E3.
  • the first player display unit E1 and the second player display unit E2 display information about music loaded in two players that can be played back by the file music player.
  • Each of the display units E1 and E2 includes an artwork display area E11 that displays the music artwork TAW of the music, and a reproduction information display area E12 that displays the music information, the reproduction time, the audio waveform 60, and the like. Yes. Note that the example in the figure shows a case where music is loaded only in the first player.
  • the button group display area E3 displays a button group for performing various reproduction operations.
  • the browser section Eb is an area for the user to perform various operations and information confirmation, and includes a user operation area E4 for selecting operation contents and a browser area E5 in which a large number of objects are arranged. ing. Other areas include a category selection area E21 for switching display of the browser area E5, a key selection area E23 for filtering and searching for music, and a keyword input area E22.
  • the user operation area E4 is an “ARTWORKS button” for displaying the browser area E5, and a “SELECT DB button” for selecting an arbitrary database file (external storage device 30, device on the network NW, storage area of the storage unit 16).
  • an “IMPORT button” for loading music information (music file), a “PROPERTY button” for displaying music information, and the like are arranged. Note that the operation screen D0 in the figure shows a state in which the “ARTWORKS button” is selected.
  • the display is shown in the browser area E5 in FIG.
  • the browser area E5 displays the audio waveform 60 and the information display area 70 as a target object group for each loadable music piece.
  • the voice waveform 60 is displayed in different colors using colors corresponding to the tonality of the music.
  • the audio waveform 60 of “Player 1” displayed on the first player display unit E1 indicates that the tonality has changed in the middle of the music due to the modulation, and has returned to the original tonality. Details will be described later.
  • music information such as a track number, a title name, an artist name, and an album name is displayed.
  • the audio waveforms 60 for nine songs are displayed in the browser display area E5, but the audio waveforms 60 of other songs are displayed by a screen movement operation using a mouse, a keyboard, or the like. It is also possible. The user can select a desired music from the music group displayed in the browser display area E5.
  • the file music player of the present embodiment displays the object group to be displayed in the browser display area E5 according to filtering conditions such as genre, album name, artist name, BPM, access history such as the number of playbacks and playback date, and release time. It has a narrowing function to narrow down by input (key selection area E23, keyword input area E22).
  • the audio waveform 60 of the object group displayed in the browser area E5 is selected from the music artwork TAW of the music, the album artwork AAW, the album artwork AAW of the artist's representative album, the artwork of the playlist AW, and the like. It is also possible to switch to display (category selection area E21).
  • the browser display area E5 is capable of enlarging / reducing the display area, and highlights the selected speech waveform 60 in comparison with the other speech waveforms 60 (for example, an enlarged display box) Display control such as adding a frame or increasing brightness).
  • the PC 10 includes music analysis means 51, storage means 52, reference means 53, color conversion means 54, and display control means 55 as main functional configurations. Each of these means is realized by the dedicated application 20.
  • the music analysis means 51 analyzes the music and determines the tonality of the music. For the music to be modulated, the tonality of each music segment divided by the tonal change position and the section position information indicating the start position and / or end position of each music section are determined. Note that the music analysis means 51 also determines the BPM and the presence / absence of a musical sound based on the analysis result. As for the BPM, when the tempo changes in the middle of a song, the representative BPM of the song (the most detected BPM or the average value of the detected BPM) is determined as the BPM of the song. In addition, “musical sound” means a sound in which the pitch can be felt. Therefore, a musical piece having only drum sounds is determined as a musical sound “none”.
  • the storage means 52 stores a correspondence table T (see FIG. 4) for converting the tonality of music to color.
  • the reference unit 53 refers to the correspondence table T (accesses a storage area in which the correspondence table T is stored).
  • the color conversion unit 54 converts the tonality of the music analyzed by the music analysis unit 51 into a color based on the reference result of the correspondence table T by the reference unit 53.
  • the correspondence table T associates “tonity” with “color”.
  • “luminance” and “hue” are associated with “color”.
  • “luminance” is indicated by a value from 0 (black) to 100 (white).
  • “Hue” is indicated by a value of 0 ° to 360 °, and is arranged based on a hue circle.
  • colors specified by “luminance” and “hue” are indicated by “color” (mainly shown in gray scale) and “color code”.
  • FIG. 5 is a diagram illustrating the tonal space in the fifth degree zone.
  • the “fifth-degree zone” refers to a tonal space in which 12 tones of major and minor tones are arranged in an annular shape. The subgenus is arranged counterclockwise, and the combination of the major and minor keys located at the same angle is a parallel tone. For this reason, the tonality closer to the fifth degree includes more common pitches and can be transposed naturally, and dissonance is less likely to occur when mixed.
  • the auditory proximity between the tones matches the hue closeness.
  • the natural interconversion of hue For example, the genus that can be shifted naturally (for example, G for C) and the lower genus (for example, F for C) are converted into close colors such as red and orange (orange) and red and magenta (M), respectively.
  • colors having the same hue are associated with parallel tones (for example, C and Am) because they match aurally even if there is a difference between the major and minor tones.
  • the correspondence table T associates different “luminances” in major and minor.
  • “50” is associated with the major key
  • “30” is associated with the minor key.
  • the color conversion means 54 considers not only the difference in tonality but also the presence or absence of musical sounds when color-converting the music. Specifically, the presence / absence of a musical sound is converted into a color having a different saturation. For example, when the saturation is represented by a value of 0 to 1, the tone “n” is associated with a saturation close to “0”, and the tone “a” is associated with a saturation close to “1”.
  • FIG. 6 is a diagram showing an HLS color space and corresponding attribute items.
  • the color converting means 54 expresses the tonality (24 tonality) of music and the presence or absence of musical tone by “hue”, “luminance”, and “saturation” that are the three attributes of color in the HLS color space. To do.
  • “hue” is represented by a loop-like endless axis according to the hue circle, and corresponds to tones (12 tones that do not distinguish between major and minor tones).
  • Luminance is represented by the vertical axis in the figure and corresponds to the length of the key.
  • saturation is represented by an axis extending outward (circumferential direction) from the center of the hue circle, and corresponds to the presence or absence of a musical sound.
  • the center of the hue circle is saturation “0” (gray).
  • the display control unit 55 displays the music on the operation screen D0 in a color corresponding to the tonality. Further, the display control means 55 displays the audio waveform 60 of the music in a color corresponding to each music section divided by dividing the tone switching position. For example, as shown in FIG. 7, in the case of music whose tonality changes twice at the timing of time T1 and time T2, the section from the start to time T1, the section from time T1 to time T2, and from the time T2 to the end The three music sections of the section are displayed in colors according to the tonality detected by the music analysis means 51 and the presence or absence of music.
  • each block (unit music) is drawn in a color according to its tonality and the presence or absence of a musical sound.
  • the user can not only grasp the sound level from the shape of the audio waveform 60 but also the presence / absence of modulation and the position where the tonality changes from the color of the audio waveform 60, each music section (or each unit music). , And the presence or absence of music in each music section can be grasped simultaneously.
  • the color conversion is performed using the correspondence table T in which the annular tonality space based on the fifth degree and the hue ring are associated with each other.
  • the tonality can be converted into a color that is intuitively understandable. That is, since a genus chord that can be shifted naturally (for example, G for C) and a lower genus chord (for example, F for C) are associated with close hues, the closeness of hearing between tones and closeness of hues are one. In addition, it is possible to realize color conversion that is natural to humans and that does not feel uncomfortable.
  • the operation screen D0 by displaying the operation screen D0, it is possible to visually find a musical piece that is close in tonality, that is, that is easy to mix naturally in harmony, and a position on the time axis within the musical piece.
  • the voice waveform 60 having the same color as the voice waveform 60 of the currently playing music displayed as “Player 1” is selected from the browser display area E5, so that there is less dissonance and harmony is natural. Can be mixed.
  • sort step when displaying the operation screen D0 (browser display area E5), it may be browsed by sorting by music information (BPM, artist name, etc.) (sort step). Thereby, efficient music selection can be performed. Further, sorting may be performed in combination with filtering. For example, by filtering according to the genre and displaying the result sorted according to the BPM in the browser display area E5, it is easy to create a song that is close to the BPM in the same genre as the currently playing song and that is easy to connect in harmony To find out.
  • an image group of album artwork AAW corresponding to each song in the selected database includes three images constituting the representative color of each album artwork AAW. Based on color elements (for example, hue, luminance, and saturation of the HLS color space), they are arranged in the X-axis direction (shown in the horizontal direction) and the Y-axis direction (shown in the vertical direction) (not shown).
  • color elements for example, hue, luminance, and saturation of the HLS color space
  • the album artwork AAW having similar color elements is arranged in a discrete two-dimensional space so that the album artwork AAW is arranged in a close place (so as to be a gradation).
  • the image group is not necessarily arranged without gaps (as a complete matrix) in the vertical and horizontal directions, and based on the representative colors of each image, smooth changes can be obtained in all three color elements. Priority is placed. Therefore, blank areas in which images are not arranged are generated everywhere in the browser area E5. If any image is selected, the album name corresponding to the selected image (album artwork AAW) is displayed.
  • an image group for example, a representative album of each artist
  • an image group is displayed on the same screen (browser area E5) as when “Album” is selected.
  • Album artwork AAW, etc. When any image is selected, the artist name is displayed instead of the album name.
  • an operation such as a double click of the mouse makes a transition to an album selection screen (not shown) having a screen configuration substantially similar to that of the music selection screen D1 (see FIG. 12).
  • the artwork display area E11 of the album selection screen not the artist but the album artwork AAW corresponding to each album is displayed.
  • the album group of the artist can be switched and displayed by operating the switching button.
  • playlist when “playlist” is selected in the category selection area E21, an image group associated with each playlist is displayed in the browser area E5.
  • the playlist name is displayed instead of the album name.
  • an operation such as a double click makes a transition to a playlist selection screen (not shown) having a screen configuration substantially similar to that of the music selection screen D1.
  • the music list in the playlist is displayed as in the music selection screen D1.
  • the playlist selection screen when there are a plurality of playlists corresponding to the same artwork AW, the playlist group can be switched and displayed by operating the switching button.
  • key selection consisting of a plurality of layers is possible based on genre, artist, album, BPM, playlist, and the like. That is, by specifying a key such as a genre, only the matching item (artwork AW) can be displayed in the browser area E5. For example, in the example shown in the figure, since “genre-jazz” is selected as the narrow-down key, only items whose genre is “jazz” are displayed.
  • the keyword input area E22 includes an input area and a search execution button.
  • An arbitrary keyword such as information related to music accompanying information is input in the input area, and a matching item (art) is selected by pressing the search execution button. Only the work AW) can be displayed in the browser area E5.
  • the keywords are album name, artist name, playlist name, genre name, composer name, remixer name, label name, release date, rate (evaluated by the user), BPM (Beats Per Minute), tone of the song (key) ), Database registration date, last update date of music file, etc., information related to music accompanying information, access history such as the number of playbacks and playback date, etc.
  • the input character string is included in the character string information If it is included, the matching item is displayed in the browser area E5.
  • the search based on the AND condition or the OR condition.
  • the three color elements constituting the representative colors of each music artwork TAW are displayed in the same manner as when the album artwork AAW is displayed by the switching operation by the user. It is also possible to arrange the images based on the above.
  • the image group of the music artwork TAW of each music is displayed in the browser area E5 where the horizontal axis (X axis) of the coordinate axis is KEY and the vertical axis (Y axis) is BPM. Is also possible. Also in this case, if any image is selected, the title name is displayed.
  • the music information is displayed in the reproduction information display area E12 and the music artwork TAW is displayed in the artwork display area E11 by an operation such as a double click.
  • FIG. 8 and 9 are diagrams showing display examples of the information display area 70.
  • FIG. FIG. 8 shows a display example of music without modulation.
  • FIG. 8A illustrates a case where the tonality of the music is reflected in the background color (ground color) of the information display area 70.
  • FIG. 8B illustrates the case where the tonality of the music is reflected in the color of the frame of the information display area 70.
  • FIG. 9 shows a display example of music with modulation.
  • FIG. 9A illustrates a case where the tonality of the music is reflected on the background color of the information display area 70.
  • the horizontal direction of the information display area 70 is regarded as a time axis, and the background color changes at a position where the tonality changes (shown, time T1).
  • FIG. 9B illustrates a case where the tonality of the music is reflected on the color of the frame of the information display area 70.
  • the horizontal direction (upper and lower sides) of the information display area 70 is regarded as a time axis, and the color of the frame changes at the position where the tonality changes (shown, time T1). .
  • the color changes corresponding to the position where the tonality of the music changes is illustrated, but when the presence or absence of a musical sound changes for each music section, the color is changed according to the change position. It may be changed.
  • the area before the time T1 left area
  • the area after the time T1 right area
  • display in a color according to the sex is conceivable to display in a color according to the sex.
  • the information display area 70 is displayed in a color according to the tonality of the music, the presence or absence of a musical sound may be expressed by a decoration other than the color.
  • a decoration other than the color.
  • the frame of the information display area 70 when a musical sound is generated from time T1, for the area before time T1 (left area), the frame of the information display area 70 is indicated by a dotted line, and the area after time T1 (right side)
  • the frame of the information display area 70 may be represented by a solid line.
  • Other decorations include changing the character color, changing the font of the character, changing the size of the character, changing the background pattern, changing the pattern of the frame, changing the thickness of the frame, adding symbols and images, etc.
  • Various decorations may be applied according to the music information. For example, a predetermined mark may be added to the information display area 70 of the music to be modulated.
  • the information display area 70 is decorated with colors according to the tonality of music and the presence or absence of music, the user can grasp the attributes at a glance. The music information can also be confirmed.
  • the two embodiments have been exemplified.
  • a combination of the first embodiment and the second embodiment such as expressing both the audio waveform 60 and the information display area 70 with colors according to the tonality of the music, is displayed. You can go. Also, the user may be able to arbitrarily set the color conversion of the audio waveform 60, the color conversion of the information display area 70, the music information items displayed in the information display area 70, and the like.
  • As a setting method it may be possible to input or select necessary information on the setting screen (not shown) of the dedicated application 20 using the operation unit 12.
  • the hue circle based on the HLS color space is exemplified, but other color spaces and color systems such as HSV color space, PCCS (Practical Color Coordinate System) color system, Munsell color system, etc. may be used.
  • a based hue ring may be used.
  • the present invention is applied by appropriately replacing the color components. For example, in the case of the HSV color space, “luminance” in the above embodiment is replaced with “brightness”.
  • the color conversion unit 54 performs color conversion so that the saturation is different depending on the presence or absence of a musical sound.
  • the color conversion unit 54 varies the saturation depending on music information other than the presence or absence of a musical sound. May be. For example, it is conceivable to change the saturation depending on the BPM, genre, rate, reproduction time of music, and the like.
  • the luminance may be varied according to the music information instead of varying the luminance according to the length of the key.
  • the audio waveform 60 and the information display area 70 are displayed in a color corresponding to each music segment divided by dividing the tonality switching position. You may display by one color based on sex.
  • the representative tonality means the tonality detected most frequently or the tonality detected first or last.
  • the audio waveform 60 and the information display area 70 may be divided into a plurality of sections (not divided into blocks of the audio waveform 60 as in the above embodiment, regardless of the tonal switching position. Color conversion may be performed for each unit music divided into large sections.
  • FIG. 10 is an explanatory diagram of the modified example.
  • FIG. 6A shows the same audio waveform 60 as in FIG. 7 of the first embodiment
  • FIG. 5B shows the same music piece as an audio waveform 60 according to a modification.
  • the music is divided into two unit music (a section from the start to the time TH and a section from the time TH to the end) equally divided into the first half and the second half.
  • each unit music is displayed in a color corresponding to the first detected tonality (the first section is “F #” and the second section is “C #”).
  • Each unit music piece may be displayed in a color corresponding to the most detected tonality.
  • the tonality can be expressed by color for each unit music obtained by dividing the music into an arbitrary number at an arbitrary position. Further, the number of divisions and the division position may be arbitrarily set by the user when this modification is employed.
  • the present invention can be applied not only to the music but also to simply color-converting “sound (sound material)”. Further, the present invention can also be applied to color conversion of “tonality (code)” as information instead of “sound”. For example, it is also included in the scope of the right of the present invention to represent characters representing each tone of the fifth degree (see FIG. 5) with corresponding colors.
  • the music is analyzed by the PC (dedicated application 20).
  • the music may be analyzed by another device, and the analysis data as the analysis result may be acquired.
  • each function of the PC 10 shown in the above embodiment can be provided by being stored in various recording media (CD-ROM, flash memory, etc.). That is, a program for causing a computer to function as each function of the PC 10 and a recording medium on which the program is recorded are also included in the scope of the right of the present invention.
  • the correspondence table T shown in the above embodiment is just an example, and the luminance and hue values can be changed as appropriate. For example, it is possible to change the design such that blue is associated with the tone “C”, luminance is “70” for the major, and luminance is “10” for the minor. In addition, the user may be able to set brightness and hue values according to his / her preference and usage.
  • the present invention can also be applied to other music playback devices and music search devices.
  • the present invention can be applied to DJ devices, portable audio players, HDD components, visualizers, etc. that handle a large number of music files.
  • it can also be applied to a browsing function for loop materials and sampling materials in DAW and DTM.
  • the audio data and MIDI data are displayed in a color corresponding to the tonality, and can be used as a reference when combining the sound materials.
  • many DAWs have a function to transpose and transpose audio data. However, even in such DAWs, when it is desired to refer to transposition or to avoid voice deterioration due to processing, Application is useful.
  • the present invention may be realized by a server on the network.
  • a communication system for realizing the present invention is constructed by a server and a user terminal connected to the server via a network.
  • the present invention can also be applied to cloud computing.
  • the present invention may be realized by a system (color conversion system) including three or more components such as a server, a PC, and a user terminal.
  • a system color conversion system
  • the user terminal may be provided with a communication means for communicating with the display screen, the server, and / or the PC.
  • the other means are the server, the PC, What is necessary is just to be distributed and provided in either or each of a user terminal. Other modifications can be made as appropriate without departing from the scope of the present invention.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Auxiliary Devices For Music (AREA)

Abstract

　音の調性を、感覚的に分かりやすい色に変換できると共に、楽曲をその調性に適した色で表示可能な色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブルおよびプログラムを提供することを目的とする。本発明の色変換方法は、五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルＴを参照し、当該参照結果に基づいて、任意の調性を色に変換することを特徴とする。また、対応テーブルＴは、平行調に対し、同じ色相を有する色を対応付け、且つ、長調と短調で、異なる明度または輝度を有する色を対応付けていることを特徴とする。

Description

色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム
　音の調性（キー）を色によって表現する色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラムに関するものである。
　従来、音の波長と色相の波長（色相環）を対応させることにより、音の調性を色によって表現する調和色選定方法が提案されている。当該調和色選定方法では、色相環上において、根音の波長が近いもの同士が近くになるように配置されている。例えば、ＣとＣ♯は、レッドとオレンジといった具合に、近い色相に対応している（例えば、特許文献１）。
特表２００３－５０７７９９号公報
　ところが、調性や和音においては、根音の波長の近いものが近い響きを持つという訳ではなく、ＣとＣ♯も聴覚上かけ離れた組み合わせである。また、上記の調和色選定方法では、自然に移行できる属和音（例えば、Ｃに対するＧ）や下属和音（例えば、Ｃに対するＦ）が、レッドとブルー、レッドとシアンといったように、離れた色相に対応している。このため、実際に楽曲の調性を色で表現した場合、人間が感覚的に理解しづらく不自然に感じられてしまう。また、和音を調性に置き換えても同様のことが言える。
　また、近年、音楽制作の分野では、複数の楽曲（音素材）を混合（ミックス）したり組み合わせたりして、新たな楽曲を制作することが多く行われている。例えば、複数の楽曲を重ねて演奏するＤＪパフォーマンスはその代表的なものであり、それ以外にもデジタル音声信号の録音、編集、ミキシングを行うＤＡＷ（Digital　Audio　Workstation）を用いて、特に音素材のループがベースとなるような音楽を制作する場合も上記のプロセスが用いられることが多い。そこで、特許文献１の技術を適用し、楽曲の調性に対応する色を頼りに、多数の楽曲の中から目的の楽曲（混合対象、または組み合わせ対象となる楽曲）を探し出すといった使用方法が考えられる。しかしながら、各楽曲が感覚的に理解しづらい色で表現されていると、目的の楽曲を探すのに時間がかかるばかりでなく、不適切な楽曲を選択してしまい、混合した際に不協和音を発生させてしまうなどの不具合が想定される。
　本発明は、上記の問題点に鑑み、音の調性を、感覚的に分かりやすい色に変換できると共に、楽曲をその調性に適した色で表示可能な色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラムを提供することを目的とする。
　本発明の色変換方法は、五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを参照する参照ステップと、参照ステップの参照結果に基づいて、任意の調性を色に変換する色変換ステップと、を備えたことを特徴とする。
　本発明の色変換装置は、五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを参照する参照手段と、参照手段の参照結果に基づいて、任意の調性を色に変換する色変換手段と、を備えたことを特徴とする。
　これらの構成によれば、五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを用いるため、音の調性を、感覚的に分かりやすい色に変換することができる。例えば、五度圏では、自然に移行できる属和音（例えば、Ｃに対するＧ）や下属和音（例えば、Ｃに対するＦ）が近い位置に配置されているため、これにより属和音や下属和音が近い色相に対応付けられる。これにより、調性同士の聴覚上の近さと、色相の近さとが一致し、人間が自然に感じられる色変換を実現できる。
　なお、「五度圏」とは、各１２個の長調と短調を円環状に並べた調性空間を指し、各調の時計回りの方向に属調、反時計回りに下属調が配置され、同じ角度に位置する長調と短調の組み合わせが平行調となるものを指す。このため、五度圏上で近くに位置する調性ほど共通の音程を多く含み、自然に転調することができると共に、混合した際にも不協和音が発生しにくくなる。
　また、色相環は、ＨＬＳ色空間、ＨＳＶ色空間、ＰＣＣＳ（Practical　Color　Coordinate　System）表色系、マンセル表色系など、どの色空間や表色系に基づくものであっても良い。
　上記の色変換方法において、対応テーブルは、平行調に対し、同じ色相を有する色を対応付けていることを特徴とする。
　この構成によれば、平行調は同じ調号であるため、同じ色相で表現することで、より自然に感じられる色変換を実現できる。
　上記の色変換方法において、対応テーブルは、長調と短調で、異なる明度または輝度を有する色を対応付けていることを特徴とする。
　この構成によれば、平行調であっても（同じ調号であっても）、長調と短調を視覚的に区別することができる。
　なお、長調は短調に対し、高い明度または高い輝度を有する色を対応付けることが好ましい。この構成によれば、長調／短調の違いを、感覚的に分かりやすく表現することができる。
　上記の色変換方法において、色変換ステップは、各楽曲の調性を除く解析結果または各楽曲の付随情報である楽曲情報に応じて、異なる彩度の色に変換することを特徴とする。
　この構成によれば、楽曲を色で表現するに当たり、調性に応じた色相だけでなく、楽曲情報に応じた彩度で示すことができる。これにより、調性の違いだけでなく楽曲情報の違いを視覚的に区別することができる。
　なお、「楽曲の解析結果」とは、ＢＰＭなどを指す。また、楽音の有無、楽曲のジャンル、メロディ、ハーモニー、リズムなどを解析し、これらを解析結果として用いても良い。また、「付随情報」とは、楽曲の識別情報、タイトル名、アルバム名、アーティスト名、レート（ユーザーによる評価）、データベース登録日、楽曲データの最終更新日、楽曲の再生時間などを指す。また、楽音の有無、楽曲のジャンル、メロディ、ハーモニー、リズムなどを付随情報として付随させても良い。
　上記の色変換方法において、楽曲情報は、楽音の有無を示す情報であることを特徴とする。
　この構成によれば、楽曲を色で表現するに当たり、調性に応じた色相だけでなく、楽音の有無に応じた彩度で示すことができる。これにより、調性の違いだけでなく楽音の有無を視覚的に区別することができる。
　なお、彩度を０～１で表す場合であって、楽音「無」の場合、彩度を「０」に近い値に対応させ、楽音「有」の場合、彩度を「１」に近い値に対応させることが好ましい。この構成によれば、楽音の有無を、感覚的に分かりやすく表現することができる。
　上記の色変換方法において、色変換ステップは、楽曲を複数の区間に分割した単位楽曲ごとの調性を色に変換することを特徴とする。
　この構成によれば、楽曲によっては途中で転調するものがあるが、そのような楽曲であっても、単位楽曲ごとに色変換を行うため、転調の有無を視覚的に区別することができる。
　上記の色変換方法において、楽曲を解析し、調性を判定する解析ステップをさらに備え、色変換ステップは、解析ステップによる調性判定結果に基づいて、楽曲をその調性に応じた色に変換することを特徴とする。
　この構成によれば、楽曲を解析して調性を判定できるため、解析結果を外部から取得する必要がない。つまり、解析を行うための他の手段を必要としない。
　本発明の楽曲表示方法は、上記の色変換方法における各ステップと、色変換ステップの変換結果に基づき、楽曲をその調性に応じた色で表示画面に表示させる表示制御ステップと、を備えたことを特徴とする。
　この構成によれば、楽曲をその調性に適した色（感覚的に分かりやすい色）で表示することができる。
　上記の楽曲表示方法において、表示制御ステップは、楽曲の音声波形を、調性の切替位置で区切って分割した楽曲区間ごとに応じた色で表示させることを特徴とする。
　この構成によれば、転調する楽曲の音声波形を、調性の切替位置で区切った楽曲区間ごとに色変換して表示することができる。これにより、転調の有無、調性の切替位置を視覚的に把握することができる。
　上記の楽曲表示方法において、複数の楽曲を、各楽曲の解析結果または各楽曲の付随情報である楽曲情報に応じてソートするソートステップをさらに備え、表示制御ステップは、ソートされた各楽曲の音声波形を、各楽曲の調性に応じた色で表示させることを特徴とする。
　この構成によれば、複数の楽曲を、楽曲情報に応じてソートし、その結果を、調性に応じて色分けされた音声波形として表示するため、音声波形の表示位置や音声波形の色などから、その楽曲に関する情報を一目で把握することができる。例えば、ＢＰＭに応じて楽曲をソートすることで、楽曲の混合や組み合わせの際に重要な情報となる、ＢＰＭや調性を瞬時に把握することができる。
　なお、「楽曲の解析結果」とは、ＢＰＭや調性などを指す。その他、楽曲のジャンル、メロディ、ハーモニー、リズム、楽音の有無など、楽曲の混合や組み合わせに関係する属性項目を解析し、これらを解析結果として用いても良い。また、「付随情報」とは、楽曲の識別情報、タイトル名、アルバム名、アーティスト名、レート（ユーザーによる評価）、データベース登録日、楽曲データの最終更新日、楽曲の再生時間などを指す。また、楽曲のＢＰＭ、調性、ジャンル、メロディ、ハーモニー、リズム、楽音の有無などを付随情報として付随させても良い。
　上記の楽曲表示方法において、表示制御ステップは、楽曲情報を表示する情報表示領域を、当該楽曲の調性に応じた色で装飾することを特徴とする。
　この構成によれば、情報表示領域を、楽曲の調性に応じた色で装飾するため、一目で楽曲の調性を把握することができると共に、楽曲情報についても確認することができる。
　上記の楽曲表示方法において、表示制御ステップは、情報表示領域に対し、楽曲の転調の有無および楽音の有無の少なくとも一方に応じて、異なる装飾を施すことを特徴とする。
　この構成によれば、情報表示領域の装飾から、一目で楽曲の転調の有無および楽音の有無を把握することができる。
　本発明の色変換システムは、五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを記憶する記憶手段と、対応テーブルの参照結果に基づいて、任意の調性を色に変換する色変換手段と、を備えたことを特徴とする。
　本発明のサーバーは、五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを参照する参照手段と、参照手段の参照結果に基づいて、任意の調性を色に変換する色変換手段と、を備えたことを特徴とする。
　本発明のユーザー端末は、上記のサーバーと接続されて用いられ、色変換手段による色変換の結果を表示する表示画面を備えたことを特徴とする。
　これらの構成によれば、ネットワーク上のサーバーなどで、色変換システムを実現できる。また、記憶手段を有するサーバーと、色変換手段を有するサーバーとで色変換システムを構築するなど、複数のサーバーや端末で本発明を実現しても良い。また、色変換システムは、クラウドコンピューティングにも適用できる。さらに、サーバー、パーソナルコンピューター（以下、「ＰＣ」と表記する）、ユーザー端末がネットワーク接続された構成に本発明を適用する場合は、最低限、ユーザー端末に、表示画面、サーバーおよび／またはＰＣと通信するための通信手段を備えればよく、記憶手段や色変換手段については、サーバー、ＰＣ、ユーザー端末のいずれか、またはそれぞれに分散して備えられれば良い。
　本発明の表示装置は、上記の楽曲表示方法における表示画面を備えたことを特徴とする。
　本発明の対応テーブルは、上記の色変換方法、若しくは上記の楽曲表示方法に用いられることを特徴とする。
　本発明のプログラムは、コンピューターに、上記の色変換方法、若しくは上記の楽曲表示方法における各ステップを実行させることを特徴とする。
　これらの表示装置、対応テーブル、プログラムを用いることにより、音の調性を、感覚的に分かりやすい色に変換できると共に、楽曲をその調性に適した色で表示可能な色変換方法および楽曲表示方法を実現できる。
本発明の一実施形態に係るＰＣの構成図である。 ファイルミュージックプレーヤの画面表示例を示す図である。 ＰＣの機能ブロック図である。 対応テーブルの一例を示す図である。 五度圏の調性空間を示す図である。 ＨＬＳ色空間と、対応する属性項目を示す図である。 音声波形の表示に関する説明図である。 情報表示領域の表示に関する説明図である。 情報表示領域の他の表示例を示す説明図である。 音声波形の他の表示例を示す説明図である。
　以下、本発明の一実施形態に係る色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラムについて、添付図面を参照しながら詳細に説明する。本実施形態では、ＰＣ上で動作する「ファイルミュージックプレーヤ」に、本発明を適用した場合について例示する。
［第１実施形態］
　図１は、ＰＣ１０（色変換装置）の概略構成を示す構成図である。同図に示すように、ＰＣ１０は、表示部１１、操作部１２、外部記憶装置インターフェース部（以下、「外部記憶装置Ｉ／Ｆ部」と表記する）１３、通信部１４、制御部１５、記憶部１６、再生処理部１７、音声出力部１８の他、これらを接続するバス１９を備えている。
　表示部１１は、不図示の表示画面上に、ファイルミュージックプレーヤの操作画面Ｄ０（図２参照）などを表示する。本実施形態では、操作画面Ｄ０に、楽曲の調性に対応した色で表された音声波形６０を表示することを特徴とする。操作部１２は、マウス、キーボード、タッチパッド等を有し、ユーザーが各種操作を行うために用いられる。本実施形態では、主に、操作画面Ｄ０（ブラウザ表示領域Ｅ５）に表示された音声波形群の中から所望の音声波形６０（楽曲）を選択するために用いられる。
　外部記憶装置Ｉ／Ｆ部１３は、外部記憶装置３０から楽曲情報等を読み出すなど、ＰＣ１０と外部記憶装置３０との間で情報の入出力を行う。なお、外部記憶装置３０とは、ＰＣ１０にローカル接続された記憶デバイス（外付けハードディスク装置など）や、ＰＣ１０に搭載のメモリスロットで読み出し可能なＵＳＢメモリなどを指す。
　通信部１４は、インターネットやイントラネットなどのネットワークＮＷを介して、ネットワークＮＷ上の機器（サーバー）のメモリから楽曲情報等を取得するなど、ＰＣ１０とネットワークＮＷ上の機器との間で通信を行う。
　制御部１５は、ＣＰＵ（Central　Processing　Unit）、ＲＯＭ（Read　Only　Memory）、ＲＡＭ（Random　Access　Memory）等から成り、各種演算処理を行う。また、操作部１２の操作に基づく表示部１１の表示制御、外部記憶装置Ｉ／Ｆ部１３および通信部１４を介した情報入出力制御、楽曲の編集処理（楽曲の混合処理や組み合わせ処理を含む）、楽曲の再生制御等を行う。
　記憶部１６は、ハードディスクドライブ等から成り、ファイルミュージックプレーヤを実現するための専用アプリケーション２０を記憶すると共に、楽曲情報を記憶する。「楽曲情報」としては、楽曲ファイル（または楽曲ファイルのパス）と楽曲付随情報などを記憶する。楽曲付随情報は、楽曲の識別情報（楽曲ＩＤ）、楽曲タイトル名、アルバム名、アーティスト名、ジャンル名、作曲者名、リミキサー名、レーベル名、アルバムアートワークＡＡＷのＩＤ、アルバムアートワークＡＡＷの画像ファイル（または画像ファイルのパス）、アルバムアートワークＡＡＷの代表色情報、発売時期、楽曲アートワークＴＡＷのＩＤ、楽曲アートワークＴＡＷの画像ファイル（または画像ファイルのパス）、楽曲アートワークＴＡＷの代表色情報、レート（ユーザーによる評価）、データベース登録日、楽曲ファイルの最終更新日、楽曲の長さ（再生時間）、ＢＰＭ（Beats　Per　Minute）、楽曲の調性（キー）、音声波形データ、楽音の有無、メロディ、ハーモニー、リズム、再生回数や再生日時などのアクセス履歴、などである。なお、これらの情報のうち、ジャンル、ＢＰＭ、楽曲の調性、楽音の有無、メロディ、ハーモニー、リズムなどは、専用アプリケーション２０による楽曲ファイルの解析結果から得られる情報とすることも可能である。また、ジャンル、メロディ、ハーモニー、リズムなどについては、予め楽曲付随情報内に設定されていてもよいが、ユーザーが指定しても良いし、専用アプリケーション２０の解析結果として得るようにしても良い。また、アルバムアートワークＡＡＷや楽曲アートワークＴＡＷの代表色情報も、専用アプリケーション２０によってアートワークＡＷ（以下、アルバムアートワークＡＡＷや楽曲アートワークＴＡＷを「アートワークＡＷ」と表記する）の画像ファイルから抽出される情報であるが、予め楽曲付随情報内に設定されていてもよく、ユーザーが指定するようにしてもよい。なお、楽曲アートワークＴＡＷは、特に設定されていない場合は、アルバムアートワークＡＷと同じ画像とすることも可能である。
　再生処理部１７は、制御部１５の制御下で、楽曲ファイルの再生処理を行い、その再生信号を音声出力部１８に出力する。音声出力部１８は、ＤＳＰ、アンプ、スピーカーまたはヘッドフォン等から成り、再生信号を外部出力する。なお、図１に示した構成要素のうち、表示部１１、操作部１２、記憶部１６、音声出力部１８などは、外付けのものを用いても良い。
　次に、図２を参照し、ファイルミュージックプレーヤの操作画面Ｄ０について説明する。操作画面Ｄ０は、画面上部のプレーヤ部Ｅａと、画面下部のブラウザ部Ｅｂと、から成る。プレーヤ部Ｅａは、再生中の楽曲に関する情報を表示する領域であり、第１プレーヤ表示部Ｅ１と、第２プレーヤ表示部Ｅ２と、ボタン群表示領域Ｅ３と、を有している。第１プレーヤ表示部Ｅ１および第２プレーヤ表示部Ｅ２は、ファイルミュージックプレーヤで再生可能な２台のプレーヤにロードされている楽曲に関する情報を表示する。また、各表示部Ｅ１，Ｅ２は、楽曲の楽曲アートワークＴＡＷを表示するアートワーク表示領域Ｅ１１と、楽曲情報、再生時間、音声波形６０等を表示する再生情報表示領域Ｅ１２と、を有している。なお、同図の例では、第１のプレーヤのみに楽曲がロードされている場合を示している。また、ボタン群表示領域Ｅ３は、各種再生操作を行うためのボタン群を表示している。
　一方、ブラウザ部Ｅｂは、ユーザーが各種操作および情報確認を行うための領域であり、操作内容を選択するためのユーザー操作領域Ｅ４と、多数の対象物を配列したブラウザ領域Ｅ５と、を有している。また、その他の領域として、ブラウザ領域Ｅ５の表示切替を行うためのカテゴリー選択領域Ｅ２１、楽曲のフィルタリングや検索を行うためのキー選択領域Ｅ２３およびキーワード入力領域Ｅ２２を有している。ユーザー操作領域Ｅ４は、ブラウザ領域Ｅ５を表示させる「ARTWORKSボタン」、任意のデータベースファイル（外部記憶装置３０、ネットワークＮＷ上の機器、記憶部１６の記憶領域）を選択するための「SELECT　DBボタン」、楽曲情報（楽曲ファイル）を取り込むための「IMPORTボタン」、楽曲情報を表示させるための「PROPERTYボタン」などが配置されている。なお、同図の操作画面Ｄ０は、「ARTWORKSボタン」が選択されている状態を示している。
　カテゴリー選択領域Ｅ２１では、「アルバム」、「アーティスト」、「プレイリスト」、「タイトル」のうちいずれかの項目を選択可能である。ここで、例えば「タイトル」が選択された場合、同図のブラウザ領域Ｅ５に示す表示となる。ブラウザ領域Ｅ５は、ロード可能な各楽曲について、音声波形６０および情報表示領域７０を対象物群として表示する。音声波形６０は、楽曲の調性に対応する色を用いて色分け表示される。例えば、第１プレーヤ表示部Ｅ１に表示している「Ｐｌａｙｅｒ１」の音声波形６０は、転調により、楽曲の途中で調性が変化し、また元の調性に戻っていることを示している。詳細については後述する。また、情報表示領域７０には、トラック番号、タイトル名、アーティスト名、アルバム名などの楽曲情報を表示する。なお、同図の例では、ブラウザ表示領域Ｅ５に、９曲分の音声波形６０を表示しているが、マウスやキーボード等を用いた画面移動操作により、他の楽曲の音声波形６０を表示させることも可能である。ユーザーは、このブラウザ表示領域Ｅ５に表示された楽曲群の中から所望の楽曲を選択可能する。
　また、本実施形態のファイルミュージックプレーヤは、ブラウザ表示領域Ｅ５に表示する対象物群を、ジャンル、アルバム名、アーティスト名、ＢＰＭ、再生回数や再生日時などのアクセス履歴、発売時期などのフィルタリング条件の入力により絞込む絞込み機能を有している（キー選択領域Ｅ２３，キーワード入力領域Ｅ２２）。また、ブラウザ領域Ｅ５に表示する対象物群の、音声波形６０を、楽曲の楽曲アートワークＴＡＷ、や、アルバムアートワークＡＡＷ、アーティストの代表アルバムのアルバムアートワークスＡＡＷ、プレイリストのアートワークスＡＷなどの表示に切り替えることも可能である（カテゴリー選択領域Ｅ２１）。なお、カテゴリー選択領域Ｅ２１、キー選択領域Ｅ２３およびキーワード入力領域Ｅ２２の詳細については、後述する。さらに、ブラウザ表示領域Ｅ５は、その表示領域の拡大／縮小操作が可能であると共に、選択された音声波形６０を、他の音声波形６０と比較して強調表示する（例えば、拡大表示する、囲み枠を付加する、輝度を上げて表示する）などの表示制御を行う。
　次に、図３を参照し、ＰＣ１０（ファイルミュージックプレーヤ）の機能構成について説明する。ＰＣ１０は、主な機能構成として、楽曲解析手段５１、記憶手段５２、参照手段５３、色変換手段５４、表示制御手段５５を備えている。なお、これらの各手段は、いずれも専用アプリケーション２０によって実現される。
　楽曲解析手段５１は、楽曲を解析し、楽曲の調性を判定する。転調する楽曲については、調性の変化位置によって区切られる各楽曲区間の調性と、各楽曲区間の開始位置および／または終了位置を示す区間位置情報と、を判定する。なお、楽曲解析手段５１は、解析結果に基づいて、ＢＰＭの判定および楽音の有無の判定も行う。ＢＰＭについては、楽曲の途中でテンポが変化する場合、その楽曲の代表的なＢＰＭ（最も多く検出されたＢＰＭ、または検出されたＢＰＭの平均値）を、その楽曲のＢＰＭとして判定する。また、「楽音」とは、音の高さを感じられる音を意味する。したがって、ドラム音だけの楽曲などは、楽音「無」と判定する。
　記憶手段５２は、楽曲の調性を色に変換するための対応テーブルＴ（図４参照）を記憶する。また、参照手段５３は、当該対応テーブルＴを参照する（対応テーブルＴが格納されている記憶領域にアクセスする）。また、色変換手段５４は、参照手段５３による対応テーブルＴの参照結果に基づいて、楽曲解析手段５１によって解析された楽曲の調性を、色に変換する。
　図４に示すように、対応テーブルＴは、「調性」と「色」を対応付けたものである。ここで、「色」としては、「輝度」および「色相」が対応付けられている。同図の例において、「輝度」は、０（黒）～１００（白）の値で示される。また、「色相」は、０°～３６０°の値で示され、色相環に基づく配列となっている。なお、同図では、「輝度」および「色相」によって特定される色を、「カラー」（主に、グレースケールにて図示）と、「カラーコード」で示している。
　一方、「調性」は、五度圏に基づく配列となっている。図５は、五度圏の調性空間を示す図である。同図に示すように、「五度圏」とは、長調と短調各１２個の調性を円環状に並べた調性空間を指すものであり、各調の時計回りの方向に属調、反時計回りに下属調が配置され、同じ角度に位置する長調と短調の組み合わせは平行調となっている。このため、五度圏上で近い位置にある調性ほど共通の音程を多く含み、自然に転調することができると共に、混合した際に不協和音が発生しにくくなる。図４の対応テーブルＴは、この五度圏に基づく配列と色相環に基づく配列とが対応しているため、調性同士の聴覚上の近さと色相の近さが一致し、これによって調性と色相の自然な相互変換可能となっている。例えば、自然に移行できる属調（例えば、Ｃに対するＧ）や下属調（例えば、Ｃに対するＦ）は、それぞれ赤とオレンジ（橙）、赤とマゼンタ（Ｍ）のように近い色に変換される。また、平行調（例えば、ＣとＡｍ）に対しては、長調と短調の違いがあっても聴覚上一致するため、同じ色相を有する色を対応付けている。
　また、図４に示したように、対応テーブルＴは、長調と短調で、異なる「輝度」を対応付けている。同図の例では、長調については「５０」、短調については「３０」の輝度を対応付けている。これにより、平行調であっても（同じ調号であっても）、長調と短調の違いを視覚的に区別することができる。
　なお、色変換手段５４は、楽曲を色変換する際、調性の違いだけでなく、楽音の有無も考慮する。具体的には、楽音の有無を、異なる彩度の色に変換する。例えば、彩度を０～１の値で表す場合、楽音「無」の場合は「０」に近い彩度に対応させ、楽音「有」の場合は「１」に近い彩度に対応させる。
　図６は、ＨＬＳ色空間と、対応する属性項目を示す図である。上記の通り、色変換手段５４は、楽曲の調性（２４の調性）および楽音の有無を、ＨＬＳ色空間における色の三属性である「色相」、「輝度」、「彩度」によって表現する。同図に示すように、「色相」については、色相環に従ったループ状の無端軸によって表され、調性（長調と短調を区別しない１２個の調性）に対応させる。また、「輝度」については、図示上下方向の軸によって表され、調の長短に対応させる。さらに、「彩度」については、色相環の中心から外側（円周方向）に伸びる軸で表され、楽音の有無に対応している。ＨＬＳ色空間の場合、色相環の中心は、彩度「０」（灰色）となる。このように、楽曲の調性および楽音の有無を、色の三属性に基づいて一意の色で表すことで、人間が直感的に理解可能な分かりやすい色変換を実現できる。
　図３の説明に戻る。表示制御手段５５は、色変換手段５４の変換結果に基づき、楽曲をその調性に応じた色で、操作画面Ｄ０に表示する。また、表示制御手段５５は、楽曲の音声波形６０を、調性の切替位置で区切って分割した楽曲区間ごとに応じた色で表示する。例えば、図７に示すように、時間Ｔ１および時間Ｔ２のタイミングで２回調性が変化する楽曲の場合、開始から時間Ｔ１までの区間、時間Ｔ１から時間Ｔ２までの区間、時間Ｔ２から終了までの区間の３つの楽曲区間を、それぞれ楽曲解析手段５１によって検出された調性および楽音の有無に応じた色で表示する。つまり、音声波形６０の時間軸上における各位置を、図示のようにブロック単位で分割した場合、各ブロック（各単位楽曲）を、その調性および楽音の有無に応じた色で描画する。これにより、ユーザーは、音声波形６０の形状から、音のレベルを把握できるだけでなく、音声波形６０の色から、転調の有無、また調性が変化する位置、各楽曲区間（または各単位楽曲）の調性、各楽曲区間の楽音の有無について、同時に把握することができる。
　以上説明したとおり、本発明の第１実施形態によれば、五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルＴを用いて色変換を行うため、楽曲の調性を、感覚的に分かりやすい色に変換することができる。つまり、自然に移行できる属和音（例えば、Ｃに対するＧ）や下属和音（例えば、Ｃに対するＦ）が近い色相に対応付けられるため、調性同士の聴覚上の近さと、色相の近さとが一致し、人間が自然に感じられる違和感の無い色変換を実現できる。
　また、操作画面Ｄ０の表示により、調性の近い、すなわち和声的に自然に混合しやすい楽曲や、楽曲内の時間軸上における位置を、視覚的に探しだすことができる。例えば、「Ｐｌａｙｅｒ１」として表示されている現在再生中の楽曲の音声波形６０の色と同系色の音声波形６０を、ブラウザ表示領域Ｅ５から選択することで、不協和音が少なく、且つ和声的に自然な混合処理を行うことができる。
　なお、操作画面Ｄ０（ブラウザ表示領域Ｅ５）を表示する際、楽曲情報（ＢＰＭやアーティスト名など）によりソートして、ブラウズさせても良い（ソートステップ）。これにより、効率的な選曲を行うことができる。また、フィルタリングと組み合わせてソートを行っても良い。例えば、ジャンルにしたがってフィルタリングした上でＢＰＭにしたがってソートした結果をブラウザ表示領域Ｅ５に表示させることで、現在再生中の楽曲と同じジャンルでＢＰＭが近く、さらに和声的にも繋ぎやすい楽曲を容易に探し出すことができる。
　次に、図２に示した操作画面Ｄ０のカテゴリー選択領域Ｅ２１において、「タイトル」以外の項目が選択された場合の表示、並びに絞込み機能について説明する。例えば、「アルバム」が選択された場合、ブラウザ領域Ｅ５には、選択されたデータベース内の各楽曲に対応するアルバムアートワークＡＡＷの画像群が、各アルバムアートワークＡＡＷの代表色を構成する３つの色要素（例えば、ＨＬＳ色空間の色相、輝度、彩度）に基づいて、Ｘ軸方向（図示横方向）およびＹ軸方向（図示縦方向）に配列される（図示省略）。つまり、色要素の近いアルバムアートワークＡＡＷが近い場所に配置されるように（グラデーションになるように）、離散的な２次元空間に配置されている。なお、画像群は、必ずしも縦・横方向において間隙なく（完全なマトリクス状として）配置される訳ではなく、各画像の代表色に基づき、３つの色要素全てにおいて滑らかな変化が得られることを優先して配置される。したがって、ブラウザ領域Ｅ５の随所に、画像が配置されない空白領域が発生する。なお、いずれかの画像が選択された場合、選択された画像（アルバムアートワークＡＡＷ）に対応するアルバム名を表示する。
　また、カテゴリー選択領域Ｅ２１にて「アーティスト」が選択された場合は、「アルバム」選択時と同様の画面（ブラウザ領域Ｅ５）において、各アーティストに結び付けられた画像群（例えば、各アーティストの代表アルバムのアルバムアートワークＡＡＷなど）を表示する。なお、いずれかの画像が選択された場合、アルバム名ではなくアーティスト名を表示する。また、マウスのダブルクリック等の操作で、楽曲選択画面Ｄ１（図１２参照）と略同様の画面構成を有するアルバム選択画面（図示省略）に遷移する。当該アルバム選択画面のアートワーク表示領域Ｅ１１には、アーティストではなく各アルバムに対応するアルバムアートワークＡＡＷを表示する。また、アルバム選択画面では、選択されたアーティストに対応するアルバムが複数存在する場合、切り替えボタンの操作により、そのアーティストのアルバム群を切り替えて表示させることができる。
　一方、カテゴリー選択領域Ｅ２１にて「プレイリスト」が選択された場合は、ブラウザ領域Ｅ５において、各プレイリストに結び付けられた画像群を表示する。いずれかの画像が選択された場合は、アルバム名ではなくプレイリスト名を表示する。また、ダブルクリック等の操作で、楽曲選択画面Ｄ１と略同様の画面構成を有するプレイリスト選択画面（図示省略）に遷移する。プレイリスト選択画面のタイトル一覧表示領域Ｅ１３には、楽曲選択画面Ｄ１と同様に、プレイリスト内の楽曲リストを表示する。また、プレイリスト選択画面では、同じアートワークＡＷに対応するプレイリストが複数存在する場合、切り替えボタンの操作により、そのプレイリスト群を切り替えて表示させることができる。
　また、カテゴリー選択領域Ｅ２１にて「タイトル」が選択された場合は、上述のとおり、ブラウザ領域Ｅ５において、選択されたデータベース内の各楽曲ファイルに対応する対象物群（音声波形６０および情報表示領域７０）を表示する。いずれかの対象物が選択された場合は、タイトル名を表示する。また、ダブルクリック等の操作で、再生情報表示領域Ｅ１２に楽曲情報を表示し、アートワーク表示領域Ｅ１２に楽曲アートワークＴＡＷを表示する。また、タイトル選択後におけるボタン群表示領域Ｅ３の再生操作により、楽曲を再生する。
　続いて、フィルタリング条件入力の例として、キーによる絞込みについて説明する。図２に示したように、キー選択領域Ｅ２３は、ジャンル、アーティスト、アルバム、ＢＰＭ、プレイリスト、などに基づき、複数階層から成るキー選択が可能である。つまり、ジャンルなどのキーを指定することで、合致するアイテム（アートワークＡＷ）のみをブラウザ領域Ｅ５に表示させることができる。例えば、同図の例では、絞込みキーとして「ジャンル－ジャズ」が選択されているため、ジャンルが「ジャズ」のアイテムのみが表示される。
　続いて、キーワードによる絞込みについて説明する。キーワード入力領域Ｅ２２は、入力領域および検索実行ボタンから成り、入力領域に、例えば楽曲付随情報に関連する情報などの任意のキーワードを入力し、検索実行ボタンを押下することで、合致するアイテム（アートワークＡＷ）のみをブラウザ領域Ｅ５に表示させることができる。キーワードとしては、アルバム名、アーティスト名、プレイリスト名、ジャンル名、作曲者名、リミキサー名、レーベル名、発売時期、レート（ユーザーによる評価）、ＢＰＭ（Beats　Per　Minute）、楽曲の調性（キー）、データベース登録日、楽曲ファイルの最終更新日、などの楽曲付随情報に関連する情報、再生回数や再生日時などのアクセス履歴を入力可能であり、入力された文字列がそれらの文字列情報内に含まれるか否かを判別し、含まれる場合、合致するアイテムをブラウザ領域Ｅ５に表示する。なお、入力領域に複数のキーワード入力があった場合、ａｎｄ条件またはｏｒ条件による検索が可能である。
　なお、カテゴリー選択領域Ｅ２１で「タイトル」が選択された場合も、ユーザーによる切り替え操作により、アルバムアートワークＡＡＷを表示する場合と同様に、各楽曲アートワークＴＡＷの代表色を構成する３つの色要素に基づいて、各画像を配列させることも可能である。また、ユーザーによる切り替え操作により、各楽曲の楽曲アートワークＴＡＷの画像群を、座標軸の横軸（Ｘ軸）にＫＥＹとし、縦軸（Ｙ軸）をＢＰＭとしたブラウザ領域Ｅ５内に表示させることも可能である。この場合も、いずれかの画像が選択された場合は、タイトル名を表示する。また、ダブルクリック等の操作で、再生情報表示領域Ｅ１２に楽曲情報を表示し、アートワーク表示領域Ｅ１１に楽曲アートワークＴＡＷを表示する。
［第２実施形態］
　次に、図８および図９を参照し、本発明の第２実施形態について説明する。上記の第１実施形態では、楽曲の調性を音声波形６０の色で表現した場合を例示したが、本実施形態では、情報表示領域７０の色で表現した場合を例示する。以下、第１実施形態と異なる点のみ説明する。なお、本実施形態において、第１実施形態と同様の構成部分については同様の符号を付し、詳細な説明を省略する。また、第１実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。
　図８および図９は、情報表示領域７０の表示例を示す図である。図８は、転調のない楽曲の表示例を示している。図８（ａ）は、楽曲の調性を、情報表示領域７０の背景色（地色）に反映した場合を例示している。また、図８（ｂ）は、楽曲の調性を、情報表示領域７０の枠の色に反映した場合を例示している。
　一方、図９は、転調がある楽曲の表示例を示している。図９（ａ）は、楽曲の調性を、情報表示領域７０の背景色に反映した場合を例示している。同図の例では、情報表示領域７０の横方向を時間軸に見立てており、調性が変化する位置（図示、時間Ｔ１）を境に、背景色が変化している。また、図９（ｂ）は、楽曲の調性を、情報表示領域７０の枠の色に反映した場合を例示している。同図の例も、情報表示領域７０の横方向（上下の辺）を時間軸に見立てており、調性が変化する位置（図示、時間Ｔ１）を境に、枠の色が変化している。
　なお、図９の例では楽曲の調性が変化する位置に対応して色が変化する場合を例示したが、楽曲区間ごとに、楽音の有無が変化する場合、その変化位置に応じて色を変化させても良い。例えば、図９の例において、時間Ｔ１から楽音が発生した場合、時間Ｔ１より前の領域（左側の領域）を灰色で表示し、時間Ｔ１より後の領域（右側の領域）を、楽音の調性に応じた色で表示することが考えられる。
　また、情報表示領域７０を、楽曲の調性に応じた色で表示するが、楽音の有無を色以外の他の装飾で表しても良い。例えば、図９の例において、時間Ｔ１から楽音が発生した場合、時間Ｔ１より前の領域（左側の領域）については、情報表示領域７０の枠を点線で表し、時間Ｔ１より後の領域（右側の領域）については、情報表示領域７０の枠を実線で表す、などが考えられる。その他、装飾としては、文字色を変える、文字のフォントを変える、文字の大きさを変える、背景模様を変える、枠のパターンを変える、枠の太さを変える、記号や画像を付加するなど、楽曲情報に応じて種々の装飾を施しても良い。例えば、転調する楽曲の情報表示領域７０については、所定のマークを付加する、などが考えられる。
　このように、第２実施形態によれば、情報表示領域７０を、楽曲の調性や楽音の有無に応じた色で装飾するため、ユーザーは、一目でそれらの属性について把握することができると共に、楽曲情報についても確認することができる。
　以上、２つの実施形態を例示したが、音声波形６０および情報表示領域７０の両方を、楽曲の調性に応じた色で表現するなど、第１実施形態と第２実施形態を組み合わせた表示を行っても良い。また、音声波形６０を色変換するか、情報表示領域７０を色変換するか、また情報表示領域７０に表示する楽曲情報の項目などについて、ユーザーが任意に設定可能としても良い。なお、設定方法としては、専用アプリケーション２０の設定画面（図示省略）に、操作部１２を用いて必要な情報を入力または選択することが考えられる。
　また、上記の実施形態では、ＨＬＳ色空間に基づく色相環を例示したが、ＨＳＶ色空間、ＰＣＣＳ（Practical　Color　Coordinate　System）表色系、マンセル表色系など、他の色空間や表色系に基づく色相環を用いても良い。但し、ＨＬＳ色空間の色成分（色相、輝度、彩度）と異なる成分を有する色空間の場合は、適宜色成分を置き換えて本発明を適用することとなる。例えば、ＨＳＶ色空間の場合、上記の実施形態における「輝度」を「明度」に置き換える。
　また、上記の実施形態において、色変換手段５４は、楽音の有無に応じて異なる彩度となるように色変換を行ったが、楽音の有無以外の楽曲情報に応じて、彩度を可変しても良い。例えば、ＢＰＭ、ジャンル、レート、楽曲の再生時間などによって彩度を可変することが考えられる。同様に、調の長短に応じて輝度を可変するのではなく、楽曲情報に応じて、輝度を可変しても良い。
　また、上記の実施形態では、音声波形６０や情報表示領域７０を、調性の切替位置で区切って分割した楽曲区間ごとに応じた色で表示したが、１つの楽曲を、その代表的な調性に基づく１つの色で表示しても良い。この場合、代表的な調性とは、最も多く検出された調性、若しくは最初または最後に検出された調性を意味する。
　また、音声波形６０や情報表示領域７０を、調性の切替位置に関係なく、楽曲を複数の区間（上記の実施形態のように、音声波形６０のブロック単位で分割するのではなく、比較的大きな区間）に分割した単位楽曲ごとに色変換しても良い。図１０は、当該変形例の説明図である。同図（ａ）は、第１実施形態の図７と同様の音声波形６０を示し、同図（ｂ）は、同様の楽曲を、変形例による音声波形６０で示している。同図（ｂ）の例では、楽曲を、前半と後半に均等２分した２つの単位楽曲（開始から時間ＴＨまでの区間と、時間ＴＨから終了までの区間）に分割している。また、各単位楽曲について、それぞれ最初に検出された調性（前半の区間が「Ｆ♯」、後半の区間が「Ｃ♯」）に対応する色で表示されている。なお、各単位楽曲を、最も多く検出された調性に対応する色で表示しても良い。このように、楽曲を、任意の位置で、任意の数に分割した単位楽曲ごとに、その調性を色で表すことが可能である。また、本変形例を採用した場合の、分割数や分割位置をユーザーが任意に設定可能としても良い。
　また、上記の実施形態では、楽曲を色変換する場合を例示したが、楽曲に限らず、単に、「音（音素材）」を色変換する場合にも本発明を適用可能である。また、「音」ではなく、情報としての「調性（コード）」を、色変換する場合にも本発明を適用可能である。例えば、五度圏（図５参照）の各調性を表す文字を、対応する色で表すことも、本発明の権利範囲に含まれる。
　また、上記の実施形態では、ＰＣ（専用アプリケーション２０）によって楽曲の解析を行ったが、他の装置によって楽曲の解析を行い、その解析結果である解析データを取得する構成としても良い。
　また、上記の実施形態に示したＰＣ１０の各機能をプログラムとして提供することも可能である。また、そのプログラムを各種記録媒体（ＣＤ－ＲＯＭ、フラッシュメモリ等）に格納して提供することも可能である。すなわち、コンピューターをＰＣ１０の各機能として機能させるためのプログラム、およびそれを記録した記録媒体も、本発明の権利範囲に含まれるものである。
　また、上記の実施形態に示した対応テーブルＴは、ほんの一例を示したものであり、輝度および色相の値など、適宜変更可能である。例えば、調性「Ｃ」に対して青色を対応付けたり、長調に対して輝度を「７０」、短調に対して輝度を「１０」に対応付けたりするなどの設計変更が可能である。また、ユーザーが自分の好みや使用用途に応じて、輝度および色相の値を設定可能としても良い。
　また、上記の実施形態では、本発明をＰＣ１０（ファイルミュージックプレーヤ）に適用した場合を例示したが、その他の楽曲再生装置や、楽曲検索装置にも適用可能である。例えば、多数の楽曲ファイルを扱うＤＪ機器、ポータブルオーディオプレーヤー、ＨＤＤコンポ、ビジュアライザーなどに適用可能である。また、ＤＡＷやＤＴＭにおけるループ素材やサンプリング素材のブラウズ機能にも適用可能である。この場合、音声データやＭＩＤＩデータを調性に応じた色で表示することで、それらの音素材を組み合わせる際の参考とすることができる。また、近年のＤＡＷでは、音声データを加工して移調する機能を有するものが多いが、そのようなＤＡＷでも、移調の参考にしたい場合や、加工による音声劣化を避けたい場合に、本発明の適用が有用である。
　また、本発明を、ネットワーク上のサーバーで実現しても良い。この場合、サーバーと、当該サーバーとネットワークを介して接続されたユーザー端末と、によって、本発明を実現するための通信システムが構築される。また、クラウドコンピューティングにも、本発明を適用可能である。
　また、サーバー、ＰＣ、ユーザー端末など、３つ以上の構成部材から成るシステム（色変換システム）により本発明を実現しても良い。この場合、最低限、ユーザー端末に、表示画面、サーバーおよび／またはＰＣと通信するための通信手段を備えればよく、他の手段（図３に示した各手段）については、サーバー、ＰＣ、ユーザー端末のいずれか、またはそれぞれに分散して備えられれば良い。その他、本発明の要旨を逸脱しない範囲で、適宜変更が可能である。
　１０…ＰＣ　２０…専用アプリケーション　５１…楽曲解析手段　５２…記憶手段　５３…参照手段　５４…色変換手段　５５…表示制御手段　６０…音声波形　７０…情報表示領域　Ｄ０…操作画面　Ｅ１…第１プレーヤ表示部　Ｅ２…第２プレーヤ表示部　Ｅ５…ブラウザ表示領域　Ｔ…対応テーブル

Claims (19)

  1. 　五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを参照する参照ステップと、
    　前記参照ステップの参照結果に基づいて、任意の調性を色に変換する色変換ステップと、を備えたことを特徴とする色変換方法。
  2. 　前記対応テーブルは、平行調に対し、同じ色相を有する色を対応付けていることを特徴とする請求項１に記載の色変換方法。
  3. 　前記対応テーブルは、長調と短調で、異なる明度または輝度を有する色を対応付けていることを特徴とする請求項１に記載の色変換方法。
  4. 　前記色変換ステップは、各楽曲の調性を除く解析結果または各楽曲の付随情報である楽曲情報に応じて、異なる彩度の色に変換することを特徴とする請求項１に記載の色変換方法。
  5. 　前記楽曲情報は、楽音の有無を示す情報であることを特徴とする請求項１に記載の色変換方法。
  6. 　前記色変換ステップは、楽曲を複数の区間に分割した単位楽曲ごとの調性を色に変換することを特徴とする請求項１に記載の色変換方法。
  7. 　楽曲を解析し、調性を判定する解析ステップをさらに備え、
    　前記色変換ステップは、前記解析ステップによる調性判定結果に基づいて、前記楽曲をその調性に応じた色に変換することを特徴とする請求項１に記載の色変換方法。
  8. 　請求項１に記載の色変換方法における各ステップと、
    　前記色変換ステップの変換結果に基づき、楽曲をその調性に応じた色で表示画面に表示させる表示制御ステップと、を備えたことを特徴とする楽曲表示方法。
  9. 　前記表示制御ステップは、前記楽曲の音声波形を、調性の切替位置で区切って分割した楽曲区間ごとに応じた色で表示させることを特徴とする請求項８に記載の楽曲表示方法。
  10. 　複数の楽曲を、各楽曲の解析結果または各楽曲の付随情報である楽曲情報に応じてソートするソートステップをさらに備え、
    　前記表示制御ステップは、ソートされた各楽曲の音声波形を、各楽曲の調性に応じた色で表示させることを特徴とする請求項９に記載の楽曲表示方法。
  11. 　前記表示制御ステップは、前記楽曲情報を表示する情報表示領域を、当該楽曲の調性に応じた色で装飾することを特徴とする請求項１０に記載の楽曲表示方法。
  12. 　前記表示制御ステップは、前記情報表示領域に対し、前記楽曲の転調の有無および楽音の有無の少なくとも一方に応じて、異なる装飾を施すことを特徴とする請求項１１に記載の楽曲表示方法。
  13. 　五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを参照する参照手段と、
    　前記参照手段の参照結果に基づいて、任意の調性を色に変換する色変換手段と、を備えたことを特徴とする色変換装置。
  14. 　五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを記憶する記憶手段と、
    　前記対応テーブルの参照結果に基づいて、任意の調性を色に変換する色変換手段と、を備えたことを特徴とする色変換システム。
  15. 　請求項８ないし１２のいずれか１項に記載の楽曲表示方法における前記表示画面を備えたことを特徴とする表示装置。
  16. 　請求項１ないし７のいずれか１項に記載の色変換方法、若しくは請求項８ないし１２のいずれか１項に記載の楽曲表示方法に用いられることを特徴とする対応テーブル。
  17. 　五度圏に基づく円環状の調性空間と、色相環とを対応付けた対応テーブルを参照する参照手段と、
    　前記参照手段の参照結果に基づいて、任意の調性を色に変換する色変換手段と、を備えたことを特徴とするサーバー。
  18. 　請求項１７に記載のサーバーと接続されて用いられ、
    　前記色変換手段による色変換の結果を表示する表示画面を備えたことを特徴とするユーザー端末。
  19. 　コンピューターに、請求項１ないし７のいずれか１項に記載の色変換方法、若しくは請求項８ないし１２のいずれか１項に記載の楽曲表示方法における各ステップを実行させるためのプログラム。
PCT/JP2011/001195 2011-03-01 2011-03-01 色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム WO2012117444A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/001195 WO2012117444A1 (ja) 2011-03-01 2011-03-01 色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/001195 WO2012117444A1 (ja) 2011-03-01 2011-03-01 色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム

Publications (1)

Publication Number Publication Date
WO2012117444A1 true WO2012117444A1 (ja) 2012-09-07

Family

ID=46757420

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/001195 WO2012117444A1 (ja) 2011-03-01 2011-03-01 色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム

Country Status (1)

Country Link
WO (1) WO2012117444A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099056A (ja) * 2001-09-25 2003-04-04 Yamaha Corp 電子楽器
JP2005283980A (ja) * 2004-03-30 2005-10-13 Aiichiro Harashima 記譜法及びその楽譜
JP2010096885A (ja) * 2008-10-15 2010-04-30 Hideyuki Kotani 選曲装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099056A (ja) * 2001-09-25 2003-04-04 Yamaha Corp 電子楽器
JP2005283980A (ja) * 2004-03-30 2005-10-13 Aiichiro Harashima 記譜法及びその楽譜
JP2010096885A (ja) * 2008-10-15 2010-04-30 Hideyuki Kotani 選曲装置

Similar Documents

Publication Publication Date Title
US9508330B2 (en) System and method for generating a rhythmic accompaniment for a musical performance
CN102760426B (zh) 使用表示乐音生成模式的演奏数据搜索
US9263018B2 (en) System and method for modifying musical data
US7792782B2 (en) Internet music composition application with pattern-combination method
US10242097B2 (en) Music selection and organization using rhythm, texture and pitch
US9875304B2 (en) Music selection and organization using audio fingerprints
Lidy et al. On the suitability of state-of-the-art music information retrieval methods for analyzing, categorizing and accessing non-western and ethnic music collections
US10225328B2 (en) Music selection and organization using audio fingerprints
WO2012074070A1 (ja) リズムパターンの類似度に基づく楽音データの検索
US20030117400A1 (en) Color display instrument and method for use thereof
CN105659322A (zh) 推荐音频样本组合
JP2008287125A (ja) コンテンツの表示方法、コンテンツの表示装置、記録媒体、およびサーバ装置
McCandless Metal as a gradual process: Additive rhythmic structures in the music of Dream Theater
KR20120051343A (ko) 음악 시각화 방법을 이용한 음악 재생 시스템 및 방법
JP2008041043A (ja) 情報処理装置
Nuanáin et al. Rhythmic concatenative synthesis for electronic music: techniques, implementation, and evaluation
WO2013114421A1 (ja) 表示システム、表示制御装置、音響機器、表示方法およびプログラム
WO2013005262A1 (ja) 画像抽出方法、画像抽出装置、画像抽出システム、サーバー、ユーザー端末、通信システムおよびプログラム
WO2012117444A1 (ja) 色変換方法、楽曲表示方法、色変換装置、色変換システム、表示装置、対応テーブル、サーバー、ユーザー端末およびプログラム
JP5706960B2 (ja) 画像配置方法、ブラウズ方法、表示制御装置、サーバー、通信システム、画像配置システムおよびプログラム
JP2007071903A (ja) 楽曲創作支援装置
WO2012117443A1 (ja) 対象物配置方法、ブラウズ方法、表示制御装置、サーバー、ユーザー端末、通信システム、対象物配置システムおよびプログラム
JP2016161900A (ja) 音楽データ検索装置及び音楽データ検索プログラム
Rosenboom Exploring compositional choice in the SalMar construction and related early works by Salvatore Martirano
Fremerey SyncPlayer–a Framework for Content-Based Music Navigation

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11859706

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11859706

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP