TW201312547A - 樂曲產生裝置 - Google Patents

Abstract

本發明之樂曲產生裝置中，第1獲取部42生成與指定發音區間S之時間序列之複數個區間指定資料DA中之任一者相應的區間指定資料GA。第2獲取部44選擇指定音高之時間序列之複數個音高指定資料DB中之任一者作為音高指定資料GB。旋律生成部522生成指定與第1獲取部42所獲取之區間指定資料GA指定之各發音區間S、及第2獲取部44所獲取之音高指定資料GB針對該發音區間S之起始點指定之音高相應的音符之時間序列之旋律資料DM。

Description

樂曲產生裝置

本發明係關於一種生成樂曲(旋律)之技術。

自先前以來，提出有一種自動生成樂曲之旋律之技術(自動作曲技術)。例如，於日本專利特開平9-081141號公報中揭示有藉由對音值行資料按時間序列指定之各音值(發音區間)賦予高音而生成旋律之技術。對各音值賦予之音高係隨機選擇。於日本專利特開平9-081143號公報中揭示有藉由根據調(key)或音階(scale)等背景資訊變更曲調素材資料按時間序列指定之各音高而生成旋律之技術。

於日本專利特開平9-081141號公報所記載之技術中，由於係隨機選擇對各音值賦予之音高，故實際上難以生成於音樂角度而言自然之旋律。又，於日本專利特開平9-081143號公報所記載之技術中，由於僅變更曲調素材資料所指定之各音高，故難以生成多樣化之旋律。考慮以上之情況，本發明之目的在於生成於音樂角度而言自然且多樣化之旋律。

說明本發明為解決以上之問題而採用之手段。再者，為容易理解本發明，於以下之說明中，以括弧標記來附註本發明之各要素與下述各實施形態之要素的對應，但並非旨在將本發明之範圍限定於實施形態之例示。

本發明之樂曲生成裝置包含：第1獲取機構(例如第1獲 取部42)，其係自按時間序列排列之指定發音區間之複數個區間指定資料(例如區間指定資料DA)中獲取任一區間指定資料(例如區間指定資料GA)；第2獲取機構(例如第2獲取部44)，其係自按時間序列排列之指定音高之複數個音高指定資料(例如音高指定資料DB)中獲取任一音高指定資料(例如音高指定資料GB)；及旋律生成機構(例如旋律生成部522)，其係根據第1獲取機構獲取之區間指定資料所指定之各發音區間、與第2獲取機構獲取之音高指定資料於該發音區間之基準時間點(例如發音區間之起始點)所指定之音高，而生成按時間序列排列之指定音符之旋律資料(例如旋律資料DM)。於以上之構成中，由於係利用與複數個區間指定資料中之任一者相應之區間指定資料、和與複數個音高指定資料中之任一者相應之音高指定資料而生成旋律資料，故與例如僅變更曲調素材資料所指定之各音高的作為先前技術來說明的日本專利特開平9-081143號公報所記載的技術相比，有可生成多樣化之樂曲這一優點。又，由於係利用區間指定資料與音高指定資料作為模板而生成旋律，故與例如隨機選擇音高的作為先前技術來說明之日本特開平9-081041號公報所記載之技術相比，可生成於音樂角度而言自然之旋律。

於本發明之較佳態樣中，旋律生成機構包含：音高擷取機構(例如音高擷取部62)，其生成編排音符序列(例如編排音符序列M)，該編排音符序列排列有包含區間指定資料所指定之各發音區間、與音高指定資料於該發音區間之基準 時間點指定之音高的音符；及音高調整機構(例如音高調整部64)，其調整音高擷取機構生成之編排音符序列之各音符之音高，而生成旋律資料。於以上之態樣中，由於係調整根據區間指定資料與音高指定資料生成之編排音符序列之各音符之音高，故與不調整編排音符序列之構成相比，可生成於音樂角度而言自然之旋律。

由音高調整機構進行之調整處理之內容為任意，例如在包含獲取指定和絃進行之和絃進行資料(例如，與複數個和絃進行資料中之任一者相應之和絃進行資料)之第3獲取機構(例如第3獲取部46)的構成中，音高調整機構係執行第1調整處理(例如第1調整處理SB1)，該第1調整處理係將編排音符序列之複數個音符中之至少一部份之音符(例如指定為關鍵音或終止音之音符)之音高，變更為和絃進行資料針對該音符之發音區間指定之和絃之構成音的音高。於以上之態樣中，由於編排音符序列中之至少一部份之音符之音高變更為和絃進行資料指定之和絃之構成音，故可生成各音符之音高於音樂角度而言自然地過渡之樂曲。又，音高調整機構執行第2調整處理(例如第2調整處理SB2)之構成亦有可生成各音符之音高於音樂角度而言自然地過渡之樂曲這一優點，該第2調整處理係將編排音符序列之複數個音符中之至少一部份之音符(例如指定為經過音(passing note)之音符)之音高變更為與該音符之上一個或下一個音符之音高對應的特定範圍內之音高。

本發明之較佳態樣之樂曲生成裝置包含：字符串設定機 構(例如字符串設定部34)，其獲取將複數個聲音單位(例如音節或音素)按時間序列排列之指定字符串；及聲音合成機構(例如聲音合成部524)，其係藉由旋律生成機構所生成之旋律資料指定之複數個音符，而生成發出指定字符串之聲音之聲音信號。根據以上之態樣，有可生成發出於音樂角度而言自然且多樣化之旋律之聲音之聲音信號這一優點。

於包含聲音合成機構之構成之較佳例中，第1獲取機構包含譜曲機構(例如譜曲部424)，該譜曲機構使第1獲取機構所獲取之區間指定資料指定之各發音區間、與指定字符串之各聲音單位相互對應；聲音合成機構於旋律資料指定之複數個音符之各發音區間，生成使譜曲機構發出與該發音區間對應之聲音單位之聲音之聲音信號。於以上之態樣中，有可於旋律資料指定之各音符之發音區間生成發出指定字符串之聲音單位之自然之聲音的聲音信號這一優點。

於本發明之較佳態樣中，第1獲取機構宜包含選擇機構，該選擇機構係字符串設定機構所設定之指定字符串之聲音單位之個數越多，則選擇複數個區間指定資料中發音區間之個數越多之區間指定資料。以上之態樣中，由於係指定字符串之聲音單位之個數越多，則選擇發音區間之個數越多之區間指定資料，故可使各發音區間與各聲音單位理所應當地對應。

於本發明之較佳態樣中，譜曲機構針對設定於時間軸上之複數個區塊之各者，以使區間指定資料於該區塊內指定 之發音區間之個數、與指定字符串中該區塊內之聲音單位之個數近似的方式，按每個區塊劃分指定字符串，從而使各發音區間與各聲音單位按每個區塊對應。根據以上之態樣，可於各區塊使發音區間與聲音單位理所應當地對應。又，根據如下構成，即，針對發音區間之個數小於聲音單位之個數之區塊，分割該區塊內之發音區間，針對發音區間之個數大於聲音單位之個數之區塊，對該區塊內之指定字符串追加特定之聲音單位(例如長音符號)，可使各發音區間與各聲音單位一對一對應。

本發明之較佳態樣之樂曲生成裝置包含：伴奏音生成機構(例如伴奏音生成部54)，其生成表示伴奏音之伴奏信號；及混合機構(例如混合部56)，其係混合聲音合成機構所生成之聲音信號與伴奏音生成機構所生成之伴奏信號。於以上之態樣中，由於伴奏信號混合於聲音信號中，故與單獨生成聲音信號之構成相比，有可生成音樂性豐富之樂曲這一優點。又，若將聲音合成機構生成之聲音信號與伴奏音生成機構生成之伴奏信號設定為同等節拍，則亦有可生成旋律與伴奏自然匹配之樂曲這一優點。

以上之各態樣之樂曲生成裝置除藉由專用之DSP(Digital Signal Processor，數位信號處理器)等硬體(電子電路)來實現以外，亦可藉由CPU(Central Processing Unit，中央處理單元)等通用之運算處理裝置與程式之協動來實現。本發明之程式係使電腦執行如下處理：第1獲取處理，其係自按時間序列排列之指定發音區間之複數個區間指定資料中 獲取任一區間指定資料；第2獲取處理，其係自按時間序列排列之指定音高之複數個之音高指定資料中獲取任一音高指定資料；及旋律生成處理，其係根據第1獲取處理中獲取之區間指定資料所指定之各發音區間、與第2獲取處理中獲取之音高指定資料於該發音區間之基準時間點指定之音高，而生成按時間序列排列之指定音符之旋律資料。根據以上之程式，可實現與本發明之樂曲生成裝置相同之作用及效果。再者，本發明之程式除以儲存於電腦可讀取之記錄媒體之形態提供並安裝至電腦中以外，亦能夠以經由通訊網之傳送之形態提供並安裝至電腦中。

又，本發明亦作為生成樂曲之方法來實現。本發明之樂曲生成方法係自按時間序列排列之指定發音區間之複數個區間指定資料中獲取任一區間指定資料，自按時間序列排列之指定音高之複數個音高指定資料中獲取任一音高指定資料，且根據上述獲取之區間指定資料指定之各發音區間、與上述獲取之音高指定資料於該發音區間之基準時間點指定之音高，而生成按時間序列排列之指定音符之旋律資料。根據以上之方法，可實現與本發明之樂曲生成裝置相同之作用及效果。

<第1實施形態>

圖1係本發明之第1實施形態之樂曲生成裝置100A之方塊圖。樂曲生成裝置100A係生成樂曲並輸出該樂曲之演奏音之音響信號V之信號處理裝置(自動作曲裝置)。於第1實施 形態中，例示生成對歌聲之旋律附加樂器聲之伴奏而成之樂曲(歌曲)之構成。

於樂曲生成裝置100A連接有輸入裝置12、與放音裝置14。輸入裝置12係受理來自利用者之指示之機器(例如，滑鼠等指向裝置或鍵盤、觸控面板)。放音裝置14(例如揚聲器或頭戴式耳機)係放射與自樂曲生成裝置100A供給之音響信號V相應之聲波。再者，為方便起見，而省略將音響信號V自數位轉換為類比之D/A(digital-to-analog，數位/類比)轉換器等之圖式。

第1實施形態之樂曲生成裝置100A係由包含運算處理裝置22、及記憶裝置24之電腦系統來實現。運算處理裝置22係藉由執行儲存於記憶裝置24之程式PGM，而實現用以生成樂曲之複數個功能(變數設定部32、字符串設定部34、第1獲取部42、第2獲取部44、第3獲取部46、歌聲生成部52、伴奏音生成部54、混合部56)。再者，亦可使專用之電子電路(例如DSP)分擔運算處理裝置22之一部份之功能。

記憶裝置24記憶運算處理裝置22執行之程式PGM或運算處理裝置22使用之各種資料。作為記錄裝置24，可任意採用半導體記錄媒體、或磁記錄媒體等眾所周知之記錄媒體、或者複數種記錄媒體之組合。

第1實施形態之記憶裝置24記憶複數個區間指定資料DA、複數個音高指定資料DB、複數個和絃進行資料DC、及和絃表(chord table)TBL。各區間指定資料DA、各音高 指定資料DB、及各和絃進行資料DC係由被選擇作為樂曲生成之素材之現有之複數個樂曲各自之特定區間(以下稱為「素材區間」)Q生成之模板。

如圖2及圖3所示，於第1實施形態中，自各樂曲中抽出連續之特定個(第1實施形態之例示中為8個)小節作為素材區間Q。各素材區間Q之節拍(例如，4/4節拍)共通。再者，於該第1實施形態中，各素材區間Q之節拍共通，但各素材區間Q之節拍亦可不共通。例如於DA為3/4、DB為4/4之情形時，DC為4/4之情形時，只要無視DB及DC之最後一拍即可。因此，以共通之節拍再生各素材區間Q之情形時之各素材區間Q的時間長相等。如圖2及圖3所示，素材區間Q係以樂曲之2個小節為單位劃分成4個區塊QB(QB1~QB4)。惟素材區間Q內之區塊QB之個數或構成區塊QB之小節之個數可任意變更。

記憶裝置24中所記憶之各區間指定資料DA係如圖2所示，指定發出構成素材區間Q內之旋律之各音符之按時間序列排列的區間(以下稱為「發音區間」)S。即，各區間指定資料DA呈現素材區間Q內之旋律之節奏模式(rhythm pattern)。複數個區間指定資料DA之各者根據不同之素材區間Q(不同樂曲之素材區間Q或1個樂曲內之不同素材區間Q)而生成。因此，區間指定資料DA指定之按時間序列排列之發音區間S之態樣(各發音區間S之時間軸上之位置或持續長度或個數)係依每個區間指定資料DA而不同。

如圖2所示，1個區間指定資料DA包含與素材區間Q內之 不同發音區間S對應之複數個按時間序列排列之單位資料UA。各單位資料UA係包含屬性資訊UA1、與時間資訊UA2而構成。時間資訊UA2指定發音區間S之時間軸上之位置(例如起始點之時刻)及持續長度(音值)。

屬性資訊UA1指定發音區間S之音符之音樂屬性(樂曲內之音樂意義)。具體而言，屬性資訊UA1係如圖2所示，指定關鍵音、終止音、及經過音中之任一者。關鍵音係指素材區間Q內就音樂性而言較為重要之音符。具體而言，將持續長度較長之音符、或樂曲之和絃之構成音分類為關鍵音。終止音係素材區間Q內之位於各區塊QB之最後之音符(除關鍵音以外之音符)。經過音係除關鍵音及終止音以外之音符。各單位資料UA之屬性資訊UA1係藉由例如樂曲生成裝置100A之提供者解析各素材區間Q之內容，而利用手動進行設定。

各區間指定資料DA可描述為以MIDI(Musical Instrument Digital Interface，樂器數位介面)規格為依據之SMF(Standard MIDI File，標準MIDI檔案)形式之音樂檔案。具體而言，將以音符號碼(note number)之數值簡便地指定屬性資料UA1之事件資料(event data)、與將各事件資料之處理間隔指定為時間資訊UA2之時序資料按時間序列排列之SMF形式之時間序列資料作成為區間指定資料DA，並儲存於記憶裝置24。

如圖3所示，記憶裝置24中所記憶之各音高指定資料DB指定構成素材區間Q內之旋律之按時間序列排列之各音符 之音高。即，各音高指定資料DB呈現素材區間Q內之旋律線(melody line)。音高指定資料DB指定之按時間序列排列之音高之態樣係依每個音高指定資料DB而不同。

如圖3所示，1個音高指定資料DB包含與素材區間Q內之不同音符對應之按時間序列排列之複數個單位資料UB。各單位資料UB係包含音高資訊UB1與時間資訊UB2而構成。音高資訊UB1係指定音符之音高，而時間資訊UB2係指定音符之時間軸上之位置及持續長度。各音高指定資料DB可描述為SMF形式之音樂檔案，該SMF形式之音樂檔案將以音符號碼之數值指定音高資訊UB1之事件資料、與將各事件資料之處理間隔指定為時間資訊UB2之時序資料按時間序列排列。

記憶裝置24中所記憶之各和絃進行資料DC指定素材區間Q內之和絃進行(按時間序列排列之和絃)。具體而言，各和絃進行資料DC係按劃分素材區間Q而成之每個單位時間(例如8分音符之時間長)來指定和絃。各和絃進行資料指定之按時間序列排列之和絃係依每個和絃進行資料DC而不同。圖1之和絃表TBL係針對可由和絃進行資料DC指定之每個和絃來指定該和絃之複數個構成音。以上為第1實施形態之記憶裝置24中所記憶之主要資料。

圖1之變數設定部32係可變地設定適用於樂曲生成之變數。具體而言，變數設定部32根據對輸入裝置12之來自利用者之指示，而設定樂曲之節拍Xt、與音樂之風格(例如搖滾或爵士等類型)Xs。節拍Xt係設定為例如由利用者指 示之任意數值，風格Xs係設定為例如複數個選擇項中由利用者選擇之內容。

字符串設定部34係可變地設定樂曲之歌詞之字符串(以下稱為「指定字符串」)DY。具體而言，字符串設定部34係根據對輸入裝置12之來自利用者之指示(字符輸入)，而設定指定字符串DY。如圖4所示，指定字符串DY包含複數個音節y(聲音單位)。

指定字符串DY被分割成字符串Ya與字符串Yb。具體而言，於利用者指定2列指定字符串DY之構成中，將指定字符串DY分割成換行以前之字符串Ya、與換行以後之字符串Yb。再者，指定字符串DY之分割方法為任意。於利用者指定包含2個文章之指定字符串DY之構成中，將指定字符串DY分割成與第1文對應之字符串Ya、和與第2文對應之字符串Yb。

圖1之第1獲取部42生成與記憶裝置24中所記憶之複數個區間指定資料DA中之任一者相應之區間指定資料GA。圖5係第1實施形態之第1獲取部42之方塊圖。如圖5所示，第1獲取部42係包含選擇部422與譜曲部424而構成。

選擇部422係選擇記憶裝置24中所記憶之複數個區間指定資料DA中之任一者。於第1實施形態中，根據構成字符串設定部34所設定之指定字符串DY之音節y之個數，而選擇區間指定資料DA。具體而言，選擇部422係指定字符串DY之音節y之個數越多，則選擇發音區間S之個數越多之區間指定資料DA。

例如，選擇部422針對記憶裝置24中所記憶之複數個區間指定資料DA之各者，計算以下之算式(1)之指標值α。

α=|Na-NYa|+|Nb-NYb|………(1)

算式(1)之第1項|Na-NYa|係素材區間Q之前半區間(區塊QB1及區塊QB2)內由區間指定資料DA指定之發音區間S之個數Na、與指定字符串DY中前方之字符串Ya之音節y之個數NYa的差分之絕對值。同樣地，算式(1)之第2項|Nb-NYb|係素材區間Q之後半區間(區塊QB3及區塊QB4)內由區間指定資料DA指定之發音區間S之個數Nb、與指定字符串DY中後方之字符串Yb之音節y之個數NYb的差分之絕對值。即，素材區間Q之前半區間中之發音區間S之個數Na、與字符串Ya之音節y之個數NYa越近似，或者素材區間Q之後半區間中之發音區間S之個數Nb、與字符串Yb之音節y之個數NYb越近似，則指標值α成為越小之數值。

選擇部422係自記憶裝置24檢索指標值α處於特定之範圍內(例如5以下之範圍內)之區間指定資料DA(即，指定與指定字符串DY之音節y之個數接近之個數之發音區間S的區間指定資料DA)，自檢索到之複數個區間指定資料DA中隨機選擇1個區間指定資料DA。

圖5之譜曲部424執行譜曲處理，該譜曲處理使選擇部422選擇之區間指定資料DA所示之各發音區間S、與字符串設定部34所設定之指定字符串DY之各音節y對應。具體而言，譜曲部424係如圖4所示，針對素材區間Q內之4個區塊QB(QB1~QB4)之各者，以使區間指定資料DA於該區塊 QBi(i=1~4)內指定之發音區間S之個數Ni、與指定字符串DY中之該區塊QBi內之音節y之個數NYi的差異最小化的方式，使指定字符串DY之各音節y與素材區間Q內之各發音區間S對應。

圖6係譜曲處理之流程圖。若開始譜曲處理，則譜曲部424如圖4所示，按素材區間Q內之每個區塊QB分割指定字符串DY(步驟SA1)。指定字符串DY之分割之邊界係自指定字符串DY之各文節之邊界選擇。指定字符串DY之文節之特定可任意利用語素解析等眾所周知之自然語言處理。再者，圖4中雖為方便起見而例示有字符串Ya與字符串Yb之邊界、和區塊QB2與區塊QB3之邊界一致之情形，但字符串Ya與字符串Yb之邊界和各區塊QB之邊界未必一致。

具體而言，譜曲部424係以使由以下之算式(2)定義之指標值β最小化之方式，以文節之邊界分割指定字符串DY。

β=|N1-NY1|²+|N2-NY2|²+|N3-NY3|²+|N4-NY4|²………(2)

由算式(2)而可瞭解，指標值β係針對複數個區塊QB1~QB4累計區間指定資料DA於區塊QB1內指定之發音區間S之個數Ni、與指定字符串DY中存在於區塊QBi內之音節y之個數NYi之差異之平方|Ni-NYi|²所得的數值。即，譜曲部424係以針對複數個區塊QB1~QB4使發音區間S之個數Ni、與音節y之個數NYi之差異最小化的方式，按每個區塊QB劃分指定字符串DY。

於藉由以上之處理分割指定字符串DY之階段，各區塊QBi內之發音區間S之個數Ni、與指定字符串DY之音節y之 個數NYi未必一致。因此，譜曲部424執行用以使各區塊QB內發音區間S之個數Ni、與指定字符串DY之音節y之個數NYi一致之處理(步驟SA2、SA3)。即，譜曲部424係使各區塊QB內發音區間S與音節y一對一對應。

第1，譜曲部424針對發音區間S之個數Ni小於音節y之個數NYi之區塊QBi(Ni<NYi)，藉由適當分割各發音區間S，而使區塊QBi內之發音區間S之個數Ni增加至音節y之個數NYi(步驟SA2)。具體而言，譜曲部424係反覆進行分割(例如2等分)區塊QBi內最長之發音區間S之處理，直至發音區間S之個數Ni達到音節y之個數NYi。分割後之複數個發音區間S之屬性(關鍵音/終止音/經過音)被設定為與分割前之發音區間S共通之屬性。

第2，譜曲部424針對發音區間S之個數Ni大於音節y之個數NYi之區塊QBi(Ni>NYi)，藉由將調整用之特定音節y適當插入至指定字符串DY，而使區塊QBi內之音節y之個數NYi增加至發音區間S之個數Ni(步驟SA3)。具體而言，譜曲部424係反覆進行將意指上一個之音節y之延續之長音符號「-」作為調整用之音節y而插入至區塊QBi內之指定字符串DY之處理，直至音節y之個數NYi達到發音區間S之個數Ni。再者，亦可取代長音符號「-」，而重複上一個之音節之母音。插入調整用之音節y之位置係例如自區塊QBi內之指定字符串DY中隨機選擇。

藉由以上所說明之譜曲處理，各區塊QBi內之發音區間S與音節y一對一對應。譜曲部424生成指定譜曲處理後按時 間序列排列之各發音區間S之區間指定資料GA、與指定譜曲處理後按時間序列排列之各音節y之指定字符串GY。即，區間指定資料GA係指定將由選擇部422選擇之區間指定資料DA所指定之複數個發音區間S之一部份置換為步驟SA2中分割後之複數個發音區間S之狀態下的按時間序列排列之發音區間S的時間序列資料，與區間指定資料DA同樣係包含複數個單位資料UA而構成。指定字符串GY係對字符串設定部34所設定之指定字符串DY追加步驟SA3中調整用之音節y而成之內容之字符串。由以上說明而可瞭解，區間指定資料GA指定之各發音區間S、與構成指定字符串GY之各音節y一對一對應。

圖1之第2獲取部44係選擇記憶裝置24中所記憶之複數個音高指定資料DB中之任一者作為音高指定資料GB並自記憶裝置24獲取。音高指定資料DB之選擇方法為任意，例如可隨機選擇複數個音高指定資料DB中之任一者作為音高指定資料GB。

圖1之第3獲取部46選擇記憶裝置24中所記憶之複數個和絃進行資料DC中之任一者作為和絃進行資料GC並自記憶裝置24獲取。例如，第3獲取部46隨機選擇複數個和絃進行資料DC中之任一者作為和絃進行資料GC。

歌聲生成部52生成由第1獲取部42生成之指定字符串GY發出與第1獲取部42生成之區間指定資料GA、第2獲取部44獲取之音高指定資料GB、及第3獲取部46獲取之和絃進行資料GC相應的旋律之聲音之聲音信號VA。

圖7係歌聲生成部52之方塊圖。如圖7所示，歌聲生成部52包含旋律生成部522、及聲音合成部524。旋律生成部522係利用區間指定資料GA、音高指定資料GB、及和絃進行資料GC作為模板而生成旋律資料DM之要素，且包含音高擷取部62與音高調整部64而構成。

如圖8所示，音高擷取部62生成由區間指定資料GA指定之各發音區間S、與音高指定資料GB於該發音區間S中指定之音高所規定的按時間序列排列之音符n(以下稱為「編排音符序列」)M。具體而言，構成編排音符序列M之複數個音符n中之第m個(m為自然數)音符n係自區間指定資料GA指定之複數個發音區間S中之第m個發音區間S之起始點及至終點為止始終維持於音高指定資料GB在該發音區間S之起始點之時間點指定之音高。例如，圖8所例示之編排音符序列M中之第1個音符n在區間指定資料GA指定之最初之發音區間S內，維持於音高指定資料GB對該發音區間S之起始點之時間點指定之音高「C#」。由以上之說明而可瞭解，編排音符序列M之各音符n、與區間指定資料GA指定之各發音區間一對一對應。

圖7之音高調整部64調整音高擷取部62生成之編排音符序列M之各音符n之音高而生成旋律資料DM。圖9係利用音高調整部64之調整處理之流程圖。如圖9所示，音高調整部64依序執行第1調整處理SB1、第2調整處理SB2、及第3調整處理SB3。再者，各調整處理(SB1~SB3)之順序可適當變更。

第1調整處理SB1係根據第3獲取部46獲取之和絃進行資料GC而調整構成編排音符序列M之複數個音符n中之由區間指定資料GA指定為關鍵音或終止音之音符n之音高的處理。具體而言，音高調整部64係將編排音符序列M中指定為關鍵音或終止音之各音符n之音高變更為和絃進行資料GC對該音符n之發音區間S指定之和絃(例如，發音區間S之起始點之和絃)之構成音中最接近該音高的音高。和絃進行資料GC指定之和絃之構成音係根據記憶裝置24中所記憶之和絃表TBL而特定。

然而，就確保音樂自然性之觀點而言，要執行以下之例外處理。第1，於關鍵音之音符n之音高為「F」或「B」且和絃進行資料GC對該音符n指定之和絃之根音為「C」之情形時，不執行音符n之音高之變更。即，音符n之音高按照原樣維持於「F」或「B」。第2，於和絃進行資料GC對終止音之音符n指定之和絃之根音為「C」、「F」或「G」之情形時，音符n之音高變更為最接近該音高之五聲音階(pentatonic)音(C、D、E、G、A)。

第2調整處理SB2係調整構成編排音符序列M之複數個音符n中之由區間指定資料GA指定為經過音之音符n之音高的處理。具體而言，音高調整部64係將編排音符序列M中指定為經過音之各音符n之音高，變更為包含該音符n上一個或下一個音符n之音高的特定範圍內之音高。例如，經過音之各音符n之音高被設定為以其上一個或下一個音符n之音高為中心或端點(上限或下限)之特定範圍(例如4個半 音之範圍)內之自然音(natural tone)(C、D、E、F、G、A、B)。

第3調整處理SB3係和絃進行資料GC針對編排音符序列M之各音符n(關鍵音、終止音、經過音)指定特定之和絃之情形時之例外處理。具體而言，於音符n之音高為「A」且對該音符n指定之和絃為Fm系列(例如Fm、Fm7等)之情形時，音高調整部64將音符n之音高自「A」變更為「G#」。又，於音符n之音高為「B」且對該音符n指定之和絃為Fm系列、Gm系列、A#系列或C7之情形時，音高調整部64將音符n之音高自「B」變更為「A#」。

圖7之旋律生成部522(音高調整部64)生成指定以上所說明之調整後之編排音符序列M之旋律資料DM。如圖8所示，旋律資料DM包含與調整後之編排音符序列M之各音符n對應的按時間序列排列之複數個單位資料UM。各單位資料UM係包含指定音符n之音高之音高資訊UM1、與指定音符n之發音區間S(時間軸上之位置及持續長度)之時間資訊UM2而構成。具體而言，旋律資料DM與音高指定資料DB同樣描述為SMF形式之音樂檔案。旋律資料DM指定之各音符n、與指定字符串GY指定之各音節y之關係維持在第1獲取部42(譜曲部424)所對應之關係(各音符n之發音區間S、與指定字符串GY之各音節y一對一對應之關係)。再者，旋律生成部522亦可不進行利用音高調整部64之第1至第3調整處理，而將自音高擷取部62輸出之編排音符序列M作為旋律資料DM進行處理，並供給至聲音合成部524。

圖7之聲音合成部524生成和旋律生成部522所生成之旋律資料DM與第1獲取部42所生成之指定字符串GY相應的聲音信號VA。聲音信號VA係針對指定字符串GY之各音節y，以旋律資料DM指定為與該音節y對應之音符n之音高將其等發出時之歌聲的音響信號。即，聲音信號VA相當於將指定字符串GY作為歌詞而歌唱出編排音符序列M(旋律線)之歌聲。聲音信號VA之生成可較佳地採用例如眾所周知之片段連接型之聲音合成處理。即，聲音合成部524依序選擇與指定字符串GY指定之與各音節y對應之聲音片段，將各聲音片段調整為旋律資料DM指定之各音符n之發音區間S與音高之後相互連結，藉此而生成聲音信號VA。聲音信號VA之節拍設定為變數設定部32設定之節拍Xt。

圖1之伴奏音生成部54生成表示伴奏音之伴奏信號VB。如圖10所示，伴奏音生成部54係包含伴奏資料生成部542與伴奏信號生成部544而構成。伴奏資料生成部542生成與第3獲取部46獲取之和絃進行資料GC相應之伴奏資料DE。伴奏資料DE係將與和絃進行資料GC依序指定之和絃對應之伴奏音按時間序列指定的SMF形式之音樂檔案。伴奏資料DE指定之伴奏音之種類或節奏係根據變數設定部32所設定之風格Xs而設定。又，伴奏資料DE之節拍係設定為變數設定部32所設定之節拍Xt。伴奏信號生成部544係藉由對伴奏資料DE執行特定之處理(例如，基於MIDI聲源之音樂生成處理)而生成伴奏信號VB。由以上之說明而可瞭解，聲音信號VA與伴奏信號VB設定為同等之節拍。

圖1之混合部56係藉由歌聲生成部52所生成之聲音信號VA與伴奏音生成部54所生成之伴奏信號VB之混合(加權和)而生成音響信號V。藉由將混合部56所生成之音響信號V供給至放音裝置14而再生聲波。由以上之說明而可瞭解，音響信號V之再生音成為對以指定字符串GY歌唱出旋律資料DM所示之旋律之歌聲附加伴奏音而成之歌曲之演奏音。

如以上所說明般，第1實施形態中係利用與複數個區間指定資料DA中之任一者相應之區間指定資料GA、和與複數個音高指定資料DB中之任一者相應之音高指定資料GB而生成旋律資料DM。因此，即便為由相同之區間指定資料GA生成之旋律資料DM，若音高指定資料DB不同，則亦會成為不同之旋律，即便為由相同之音高指定資料GB生成之旋律資料DM，若區間指定資料GA不同，則亦會成為不同之旋律。即，根據第1實施形態，與例如僅變更曲調素材資料指定之各音高的作為先前技術來說明的日本專利特開平9-081143號公報所記載之技術相比，有即便於被選擇作為樂曲生成之素材之樂曲較少之情形時，亦可生成多樣化之樂曲這一優點。

又，由於係例如利用呈現現有之樂曲之節奏模式之區間指定資料DA、與呈現現有之樂曲之旋律線之音高指定資料DB作為模板而生成旋律資料DM，故與例如作為先前技術說明之隨機選擇音高之日本專利特開平9-081141號公報所記載之技術相比，亦有可生成就音樂角度而言自然之旋 律這一優點。即，根據第1實施形態，可生成就音樂角度而言自然且多樣化之旋律。

第1實施形態中係藉由音高調整部64來調整由區間指定資料DA與音高指定資料DB生成之編排音符序列M之各音符n之音高，因此與不調整編排音符序列M之構成相比，有可生成就音樂角度而言自然之旋律這一優點。具體而言，於第1實施形態中，由於關鍵音或終止音之音符n之音高變更為由和絃進行資料GC指定之和絃之構成音之音高(第1調整處理SB1)，故可使旋律內特別重要之音符之音高就音樂角度而言自然過渡。又，亦有可生成與區間指定資料DA、音高指定資料DB、及和絃進行資料DC之組合相應之多樣化之旋律這一優點。又，由於將經過音之音符n之音高相對於上一個或下一個音符n之音高變更為特定範圍內之音高(第2調整處理SB2)，故亦可使經過音之音高就音樂角度而言自然地過渡。

第1實施形態中係藉由譜曲部424將區間指定資料GA指定之各發音區間S、與指定字符串GY之各音節y建立對應關係，因此有可生成各發音區間S與各音節y之對應明確且自然之歌聲之聲音信號VA這一優點。第1實施形態中特別係指定字符串DY之音節y之個數越多，則選擇發音區間S之個數越多之區間指定資料DA，因此和發音區間S之個數與音節y之個數可能相差懸殊之構成相比，可使各發音區間S與各音節y理所應當地對應。又，由於係以使發音區間S之個數Ni、與音節y之個數NYi之差異針對區塊QB1~QB4 最小化的方式，按每個區塊QB劃分指定字符串DY而將各發音區間S與各音節y建立對應關係，因此可使區塊QB1~QB4之各者中各發音區間S與各音節y理所應當地對應。而且，由於係以使各發音區間S與各音節y一對一對應之方式來執行發音區間S之分割(SA2)、或對指定字符串DY之音節y插入(SA3)，故亦有可生成對旋律之各音符n分配1個音節y之自然之歌聲的聲音信號VA這一優點。

第1實施形態中係對聲音信號VA附加伴奏音生成部54所生成之伴奏信號VB，因此與單獨再生聲音信號VA之構成相比，有可生成音樂性豐富之樂曲這一優點。第1實施形態中特別係利用自複數個和絃進行資料DC中選擇之和絃進行資料GC而生成伴奏信號VB，因此與伴奏固定為1種之構成相比，有可生成多樣化之樂曲這一優點。而且，第1實施形態中係生成對應與來自利用者之指示相應之風格Xs的伴奏資料DE，因此可生成符合利用者之意願或愛好之樂曲。又，由於聲音信號VA與伴奏信號VB設定為共通之節拍Xt，故亦有可生成伴奏音與旋律音自然匹配這一樂曲。

<第2實施形態>

以下，說明本發明之第2實施形態。第1實施形態中，例示有以單體之裝置實現樂曲生成裝置100A之構成。第2實施形態中係藉由可相互通訊之複數個伺服器裝置協動，而實現與第1實施形態之樂曲生成裝置100A相同功能之樂曲生成裝置100B。再者，於以下所例示之各態樣中，對作用 或功能與第1實施形態同等之要素，沿用以上之說明中參照之符號，並適當省略各自之詳細說明。

圖11係圖2實施形態之樂曲生成裝置100B之方塊圖。如圖11所示，第2實施形態之樂曲生成裝置100B係生成音響信號V並提供至終端裝置10之通訊系統(樂曲生成系統)，且包含管理伺服器裝置70、旋律生成伺服器裝置72、聲音信號合成伺服器裝置74、伴奏生成伺服器裝置76、及伴奏信號合成伺服器裝置78而構成。各伺服器裝置可經由網際網路等通訊網而相互通訊。終端裝置10係例如行動電話機或個人電腦等通訊終端，且包含輸入裝置12與放音裝置14而構成。

管理伺服器裝置70係與終端裝置10通訊之網站伺服器(web server)，且包含變數設定部32、字符串設定部34、記憶部242、第3獲取部46、及混合部56。變數設定部32係根據對終端裝置10之輸入裝置12之來自利用者之指示，而設定節拍Xt及風格Xs，字符串設定部34係根據對輸入裝置12之來自利用者之指示，而設定指定字符串DY。記憶部242記憶複數個和絃進行資料DC。第3獲取部46獲取複數個和絃進行資料DC中之任一者作為和絃進行資料GC。指定字符串DY、節拍Xt、及和絃進行資料GC係發送至旋律生成伺服器裝置72，和絃進行資料GC、節拍Xt、及風格Xs則係發送至伴奏生成伺服器裝置76。

旋律生成伺服器裝置72包含記憶部244、第1獲取部42、第2獲取部44、及旋律生成部522。記憶部244記憶複數個 區間指定資料DA、與複數個音高指定資料DB。第1獲取部42係根據指定字符串DY選擇記憶部244中所記憶之複數個區間指定資料DA中之任一者來執行圖6之譜曲處理，藉此而生成區間指定資料GA與指定字符串GY。第2獲取部44係選擇記憶部244中所記憶之複數個音高指定資料DB中之任一者作為音高指定資料GB。旋律生成部522係生成與區間指定資料GA、音高指定資料GB、及和絃進行資料GC相應之旋律資料DM。旋律資料DM、指定字符串GY、節拍Xt係發送至聲音信號合成伺服器裝置74。

聲音信號合成伺服器裝置74包含生成與旋律資料DM、指定字符串GY、及節拍Xt相應之聲音信號VA之聲音合成部524。聲音合成部524所生成之聲音信號VA經由旋律生成伺服器裝置72而發送至管理伺服器裝置70。

伴奏生成伺服器裝置76生成與和絃進行資料GC、節拍Xt、及風格Xs相應之伴奏資料DE。伴奏信號合成伺服器裝置78包含伴奏信號生成部544，該伴奏信號生成部544生成與自伴奏生成伺服器裝置76供給之伴奏資料DE相應之伴奏信號VB。伴奏信號生成部544所生成之伴奏信號VB經由伴奏生成伺服器裝置76而發送至管理伺服器裝置70。

管理伺服器裝置70之混合部56係混合聲音信號合成伺服器裝置74所生成之聲音信號VA、與伴奏信號合成伺服器裝置78所生成之伴奏信號VB而生成音響信號V。將音響信號V發送至終端裝置10，並作為聲波而由放音裝置14再生。

第2實施形態中，亦可實現與第1實施形態相同之效果。再者，構成樂曲生成裝置100B之伺服器裝置之個數，或各自所執行之功能可根據圖11之例示而適當變更。例如，亦可採用由單體之伺服器裝置來執行圖11之旋律生成伺服器裝置72及聲音信號合成伺服器裝置74之功能之構成、或者由單體之伺服器裝置來執行伴奏生成伺服器裝置76及伴奏信號合成伺服器裝置78之功能之構成。

<變形例>

以上之各形態可進行各種變形。以下，例示具體之變形之態樣。自以下之例示任意選擇之2個以上之態樣可適當合併。

(1)第1獲取部42獲取區間指定資料GA之方法可適當地變更。例如，亦可採用第1獲取部42隨機選擇複數個區間指定資料DA中之任一者作為區間指定資料GA之構成(即，省略譜曲部424之構成)。即，可省略根據指定字符串DY選擇區間指定資料DA之構成、或者對區間指定資料DA執行譜曲處理之構成。由以上之說明而可瞭解，第1獲取部42係作為獲取與複數個區間指定資料DA中之任一者相應之區間指定資料GA之要素而包括在內。區間指定資料GA係如第1實施形態所例示般，包含由譜曲部424進行譜曲處理後之區間指定資料DA與區間指定資料DA本身兩者。第2獲取部44或第3獲取部46之動作亦可適當變更。例如，第2獲取部44亦可採用如下構成，即，自記憶裝置24選擇複數個音高指定資料DB中之任一者而執行特定之處理(例如，使 各音符之音高增加特定量之處理)，藉此而生成音高指定資料GB。對於第3獲取部46亦相同。

(2)上述各形態中，聲音合成部524生成與指定字符串GY相應之聲音信號VA，但可省略字符串設定部34或聲音合成部524。即，本發明亦可實現為以指定編排音符序列M之旋律資料DM之生成為目的之裝置、或者生成表示旋律資料DM所指定之編排音符序列M之樂器聲之音響信號的裝置。

(3)伴奏音生成部54生成伴奏信號VB之方法可適當變更。例如，亦可將與不同風格對應之複數個伴奏資料DE保持於記憶裝置24，並選擇與利用者所指定之風格Xs相應之伴奏資料DE，從而生成伴奏信號VB。又，亦可採用省略伴奏音生成部54之構成(即僅生成旋律之構成)。

(4)上述各形態中，雖係針對區間指定資料GA指定之發音區間S之起始點，由音高擷取部62擷取出音高指定資料GB指定之音高，但擷取音高之時間點並不限定於發音區間S之起始點。例如，亦可針對自發音區間S之起始點經過特定時間之時間點、或發音區間S之中點，擷取音高指定資料GB指定之音高作為與該發音區間對應之音符n之音高。由以上之說明而可瞭解，旋律生成部522係作為生成指定與區間指定資料GA指定之各發音區間S、與音高指定資料GB針對該發音區間S之基準時間點指定之音高相應的按時間序列排列之音符之旋律資料DM的要素而包括在內，且發音區間S之基準時間點係指相對於發音區間S處於 特定之位置關係之時間點(發音區間S之起始點或中點)。

(5)上述各形態中，雖對編排音符序列M中相當於關鍵音及終止音之音符n執行第1調整處理SB1，並對相當於經過音之音符n執行第2調整處理SB2，但亦可對編排音符序列M之全部音符n執行第1調整處理SB1或第2調整處理SB2。

(6)上述各形態中例示之資料之形式可任意變更。例如，區間指定資料DA、音高指定資料DB、旋律資料DM及伴奏資料DE並不限定於SMF形式，能以任意形式來描述。亦能以SMF形式來描述和絃進行資料DC。又，音響信號V、聲音信號VA、或伴奏信號VB並不限定於時間波形之樣本系列，亦可呈現為按時間序列指定時間波形之資料(例如，以MIDI規格為依據之演奏資料)。

10‧‧‧終端裝置

12‧‧‧輸入裝置

14‧‧‧放音裝置

22‧‧‧運算處理裝置

24‧‧‧記憶裝置

32‧‧‧變數設定部

34‧‧‧字符串設定部

42‧‧‧第1獲取部

44‧‧‧第2獲取部

46‧‧‧第3獲取部

52‧‧‧歌聲生成部

54‧‧‧伴奏音生成部

56‧‧‧混合部

62‧‧‧音高擷取部

64‧‧‧音高調整部

70‧‧‧管理伺服器裝置

72‧‧‧旋律生成伺服器裝置

74‧‧‧聲音信號合成伺服器裝置

76‧‧‧伴奏生成伺服器裝置

78‧‧‧伴奏信號合成伺服器裝置

100A‧‧‧樂曲生成裝置

100B‧‧‧樂曲生成裝置

242‧‧‧記憶部

244‧‧‧記憶部

422‧‧‧選擇部

424‧‧‧譜曲部

522‧‧‧旋律生成部

524‧‧‧聲音合成部

542‧‧‧伴奏資料生成部

544‧‧‧伴奏信號生成部C、D、E、F、C#、D#、F#音高

DA‧‧‧區間指定資料

DB‧‧‧音高指定資料

DC‧‧‧和絃進行資料

DE‧‧‧伴奏資料

DM‧‧‧旋律資料

DY[Ya/Yb]‧‧‧指定字符串

GA‧‧‧區間指定資料

GB‧‧‧音高指定資料

GC‧‧‧和絃進行資料

GY‧‧‧指定字符串

M‧‧‧編排音符序列

n‧‧‧音符

PGM‧‧‧程式

Q‧‧‧素材區間

QB‧‧‧區塊

QB1~QB4‧‧‧區塊

S‧‧‧發音區間

TBL‧‧‧和絃表

UA‧‧‧單位資料

UA1‧‧‧屬性資訊

UA2‧‧‧時間資訊

UB‧‧‧單位資料

UB1‧‧‧音高資訊

UB2‧‧‧時間資訊

UM‧‧‧單位資料

UM1‧‧‧音高資訊

UM2‧‧‧時間資訊

V‧‧‧音響信號

VA‧‧‧聲音信號

VB‧‧‧伴奏信號

Xs‧‧‧風格

Xt‧‧‧節拍

y‧‧‧音節

Ya‧‧‧字符串

Yb‧‧‧字符串

圖1係本發明之第1實施形態之樂曲生成裝置之方塊圖。

圖2係區間指定資料之說明圖。

圖3係音高指定資料之說明圖。

圖4係指定字符串之劃分之說明圖。

圖5係第1獲取部之方塊圖。

圖6係譜曲處理之流程圖。

圖7係歌聲生成部之方塊圖。

圖8係旋律生成部之動作之說明圖。

圖9係調整處理之流程圖。

圖10係伴奏音生成部之方塊圖。

圖11係第2實施形態之樂曲生成裝置之方塊圖。

12‧‧‧輸入裝置

14‧‧‧放音裝置

22‧‧‧運算處理裝置

24‧‧‧記憶裝置

32‧‧‧變數設定部

34‧‧‧字符串設定部

42‧‧‧第1獲取部

44‧‧‧第2獲取部

46‧‧‧第3獲取部

52‧‧‧歌聲生成部

54‧‧‧伴奏音生成部

56‧‧‧混合部

100A‧‧‧樂曲生成裝置

DA‧‧‧區間指定資料

DB‧‧‧音高指定資料

DC‧‧‧和絃進行資料

DY[Ya/Yb]‧‧‧指定字符串

GA‧‧‧區間指定資料

GB‧‧‧音高指定資料

GC‧‧‧和絃進行資料

GY‧‧‧指定字符串

PGM‧‧‧程式

TBL‧‧‧和絃表

V‧‧‧音響信號

VA‧‧‧聲音信號

VB‧‧‧伴奏信號

Xt‧‧‧節拍

Xs‧‧‧風格

Claims (13)

1. 一種樂曲生成裝置，其包含：第1獲取機構，其係自按時間序列排列之指定發音區間之複數個區間指定資料中獲取任一區間指定資料；第2獲取機構，其係自按時間序列排列之指定音高之複數個音高指定資料中獲取任一音高指定資料；及旋律生成機構，其係根據上述第1獲取機構獲取之區間指定資料所指定之各發音區間、與上述第2獲取機構獲取之音高指定資料於該發音區間之基準時間點指定之音高，而生成按時間序列排列之指定音符之旋律資料。
2. 如請求項1之樂曲生成裝置，其中上述旋律生成機構包含：音高擷取機構，其生成編排音符序列，該編排音符序列排列有包含上述區間指定資料指定之各發音區間、與上述音高指定資料於該發音區間之基準時間點指定之音高的音符；及音高調整機構，其調整上述音高擷取機構所生成之編排音符序列之各音符之音高，而生成上述旋律資料。
3. 如請求項2之樂曲生成裝置，其包含獲取指定和絃進行之和絃進行資料之第3獲取機構；且上述音高調整機構執行第1調整處理，該第1調整處理係將上述編排音符序列之複數個音符中之至少一部份之音符之音高，變更為上述和絃進行資料針對該音符之發音區間指定之和絃之構成音的音高。
4. 如請求項2之樂曲生成裝置，其中上述音高調整機構執行第2調整處理，該第2調整處理係將上述編排音符序列之複數個音符中之至少一部份之音符之音高，變更為與該音符之上一個或下一個音符之音高對應的特定範圍內之音高。
5. 如請求項1至4中任一項之樂曲生成裝置，其包含：字符串設定機構，其獲取將複數個聲音單位按時間序列排列之指定字符串；及聲音合成機構，其係藉由上述旋律生成機構所生成之旋律資料指定之複數個音符，而生成發出上述指定字符串之聲音之聲音信號。
6. 如請求項5之樂曲生成裝置，其中上述第1獲取機構包含譜曲機構，該譜曲機構使上述第1獲取機構所獲取之區間指定資料指定之各發音區間、與上述指定字符串之各聲音單位相互對應；且上述聲音合成機構於上述旋律資料指定之複數個音符之各發音區間，生成使上述譜曲機構發出與該發音區間對應之聲音單位之聲音之聲音信號。
7. 如請求項6之樂曲生成裝置，其中上述第1獲取機構包含選擇機構，該選擇機構係上述字符串設定機構所設定之指定字符串之聲音單位之個數越多，則選擇上述複數個區間指定資料中發音區間之個數越多之區間指定資料。
8. 如請求項6之樂曲生成裝置，其中上述譜曲機構針對設定於時間軸上之複數個區塊之各者，以使上述區間指定資料於該區塊內指定之發音區間之個數、與上述指定字符串中該區塊內之聲音單位之個數近似的方式，按每個區塊劃分上述指定字符串，從而使上述各發音區間與上述各聲音單位按每個區塊對應。
9. 如請求項8之樂曲生成裝置，其中上述譜曲機構針對發音區間之個數小於聲音單位之個數之區塊，分割該發音區間，針對發音區間之個數大於聲音單位之個數之區塊，對該區塊內之指定字符串追加特定之聲音單位。
10. 如請求項5之樂曲生成裝置，其包含：伴奏音生成機構，其生成表示伴奏音之伴奏信號；及混合機構，其係混合上述聲音合成機構所生成之聲音信號、與上述伴奏音生成機構所生成之伴奏信號。
11. 如請求項10之樂曲生成裝置，其包含指定節拍之變數設定機構；上述聲音合成機構生成上述變數設定機構所設定之節拍之聲音信號；且上述伴奏音生成機構生成上述變數設定機構所設定之節拍之伴奏信號。
12. 一種樂曲生成方法，其係自按時間序列排列之指定發音區間之複數個區間指定資料中獲取任一區間指定資料；自按時間序列排列之指定音高之複數個音高指定資料中獲取任一音高指定資料；且 根據上述獲取之區間指定資料指定之各發音區間、與上述獲取之音高指定資料於該發音區間之基準時間點指定之音高，而生成按時間序列排列之指定音符之旋律資料。
13. 一種記錄媒體，其記錄有電腦程式，該電腦程式使電腦執行如下處理：第1獲取處理，其係自按時間序列排列之指定發音區間之複數個區間指定資料中獲取任一區間指定資料；第2獲取處理，其係自按時間序列排列之指定音高之複數個音高指定資料中獲取任一音高指定資料；及旋律生成處理，其係根據上述獲取之區間指定資料指定之各發音區間、與上述獲取之音高指定資料於該發音區間之基準時間點指定之音高，而生成按時間序列排列之指定音符之旋律資料。