JP6988343B2 - 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 - Google Patents
歌唱音声の編集支援方法、および歌唱音声の編集支援装置 Download PDFInfo
- Publication number
- JP6988343B2 JP6988343B2 JP2017191630A JP2017191630A JP6988343B2 JP 6988343 B2 JP6988343 B2 JP 6988343B2 JP 2017191630 A JP2017191630 A JP 2017191630A JP 2017191630 A JP2017191630 A JP 2017191630A JP 6988343 B2 JP6988343 B2 JP 6988343B2
- Authority
- JP
- Japan
- Prior art keywords
- editing
- waveform
- singing
- pitch curve
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 44
- 230000008859 change Effects 0.000 claims description 43
- 230000000694 effects Effects 0.000 claims description 12
- 230000008602 contraction Effects 0.000 claims description 7
- 230000001960 triggered effect Effects 0.000 claims description 4
- 230000015572 biosynthetic process Effects 0.000 description 80
- 238000003786 synthesis reaction Methods 0.000 description 68
- 230000008569 process Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0008—Associated control or indicating means
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
- G10H1/368—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems displaying animated or moving pictures synchronized with the music or audio part
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
- G10H7/008—Means for controlling the transition from one tone waveform to another
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/02—Methods for producing synthetic speech; Speech synthesisers
- G10L13/033—Voice editing, e.g. manipulating the voice of the synthesiser
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/325—Musical pitch modification
- G10H2210/331—Note pitch correction, i.e. modifying a note pitch or replacing it by the closest one in a given scale
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/005—Non-interactive screen display of musical or status data
- G10H2220/011—Lyrics displays, e.g. for karaoke applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
- G10H2220/101—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters
- G10H2220/116—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters for graphical editing of sound parameters or waveforms, e.g. by graphical interactive control of timbre, partials or envelope
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
- G10H2220/101—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters
- G10H2220/121—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters for graphical editing of a musical score, staff or tablature
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
- G10H2220/101—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters
- G10H2220/126—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters for graphical editing of individual notes, parts or phrases represented as variable length segments on a 2D or 3D representation, e.g. graphical edition of musical collage, remix files or pianoroll representations of MIDI-like files
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2250/00—Aspects of algorithms or signal processing methods without intrinsic musical character, yet specifically adapted for or used in electrophonic musical processing
- G10H2250/315—Sound category-dependent sound synthesis processes [Gensound] for musical use; Sound category-specific synthesis-controlling parameters or control means therefor
- G10H2250/455—Gensound singing voices, i.e. generation of human voices for musical applications, vocal singing sounds or intelligible words at a desired pitch or with desired vocal effects, e.g. by phoneme synthesis
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Auxiliary Devices For Music (AREA)
- Electrophonic Musical Instruments (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
図1は、本発明の一実施形態の歌唱合成装置1の構成例を示す図である。歌唱合成装置1は、例えばパーソナルコンピュータであり、歌唱合成用データベース134aと歌唱合成プログラム134bが予めインストールされている。図1に示すように、歌唱合成装置1は、制御部100、外部機器インタフェース部110、ユーザインタフェース部120、記憶部130、およびこれら構成要素間のデータ授受を仲介するバス140を有する。なお、図1では、外部機器インタフェース部110は外部機器I/F部110と略記されており、ユーザインタフェース部120はユーザI/F部120と略記されている。以下、本明細書においても同様に略記する。本実施形態では、歌唱合成用データベース134aおよび歌唱合成プログラム134bのインストール先のコンピュータ装置がパーソナルコンピュータである場合について説明するが、タブレット端末やスマートフォン、PDAなどの携帯型情報端末であっても良く、また、携帯型或いは据置型の家庭用ゲーム機であっても良い。
域A01に音符ブロック等が表示されていた時間区間の歌唱波形が表示される。つまり、本実施形態の波形表示画面は、楽曲の情報を提示するときに、楽曲の音波形の表示により当該楽曲のデータを提示し、当該音波形に対する操作により楽曲のデータを編集できる画面である。
Claims (27)
- 音符の時系列を表す楽譜データと歌詞を表す歌詞データとに相当する歌唱波形データの表す歌唱波形を、一方の軸が音高を表し他方の軸が時間を表す波形表示画面に音符毎に配置して表示装置に表示する波形表示ステップと、
歌詞の音素を示す情報を前記波形表示画面における当該音素の発音位置に表示する音素表示ステップと、を有し、
前記音素表示ステップでは、
前記歌唱波形データを参照して歌詞の音素を示す情報の切り替わり箇所となる時刻を特定し、当該時刻を前記発音位置として特定する、
ことを特徴とする編集支援方法。 - 前記音素表示ステップでは、
前記歌唱波形データを参照して歌詞の音素を示す情報の切り替わり箇所となる時刻を特定し、当該時刻を当該情報の示す音素の発音が開始されるタイミングとして特定し、さらに当該タイミングを前記波形表示画面の時間軸上の位置に換算することで、前記発音位置を特定する、
ことを特徴とする請求項1に記載の編集支援方法。 - 前記楽譜データと前記歌詞データの少なくとも一方に対する編集指示の入力を契機として、前記表示装置の表示画面を、前記楽譜データと前記歌詞データの少なくとも一方を編集するための楽譜編集画面に切り替える切り替えステップと、
前記楽譜編集画面に対する編集操作に応じて前記楽譜データと前記歌詞データの少なくとも一方を変更し、前記歌唱波形データを算出し直す算出ステップと、
を含むことを特徴とする請求項1又は請求項2に記載の編集支援方法。 - 前記歌唱波形の開始タイミングの変更指示を音符毎に受け付け、指示内容に応じて歌唱波形の開始タイミングを編集する開始タイミング編集ステップと、
前記開始タイミング編集ステップにおける編集内容に応じて前記歌唱波形データを算出し直す算出ステップと、
を含むことを特徴とする請求項1又は請求項2に記載の編集支援方法。 - 前記楽譜データにしたがって音符を示す一区切りの図形である音符ブロックを音符毎に前記波形表示画面に表示する音符表示ステップを有する、
ことを特徴とする請求項4に記載の歌唱音声の編集支援方法。 - 音高の時間変化を表すピッチカーブを前記楽譜データにしたがって前記波形表示画面に表示するピッチカーブ表示ステップと、
前記ピッチカーブにおけるアタック部分またはリリース部分の変更指示を音符毎に受け付け、指示内容に応じて前記ピッチカーブを編集するピッチカーブ編集ステップと、
前記ピッチカーブ編集ステップにおける編集内容に応じて前記歌唱波形データを算出し直す算出ステップと、を含む
ことを特徴とする請求項1又は請求項2に記載の編集支援方法。 - 前記ピッチカーブ編集ステップでは、
前記歌唱音声に付与する音響効果の種類に応じて時間軸方向と音量軸方向の少なくとも一方の方向に前記ピッチカーブを伸縮させることを促す編集補助画面を前記表示装置に表示させ、当該編集補助画面に対する指示内容に応じて前記ピッチカーブを編集することを特徴とする請求項6に記載の編集支援方法。 - 音符の時系列を表す楽譜データと歌詞を表す歌詞データとに相当する歌唱波形データの表す歌唱波形を、一方の軸が音高を表し他方の軸が時間を表す波形表示画面に音符毎に配置して表示装置に表示する波形表示ステップと、
歌詞の音素を示す情報を前記波形表示画面における当該音素の発音位置に表示する音素表示ステップと、
音高の時間変化を表すピッチカーブを前記楽譜データにしたがって前記波形表示画面に表示するピッチカーブ表示ステップと、
前記ピッチカーブにおけるアタック部分またはリリース部分の変更指示を音符毎に受け付け、指示内容に応じて前記ピッチカーブを編集するピッチカーブ編集ステップと、
前記ピッチカーブ編集ステップにおける編集内容に応じて前記歌唱波形データを算出し直す算出ステップと、を含む
ことを特徴とする編集支援方法。 - 前記ピッチカーブ編集ステップでは、
前記歌唱音声に付与する音響効果の種類に応じて時間軸方向と音量軸方向の少なくとも一方の方向に前記ピッチカーブを伸縮させることを促す編集補助画面を前記表示装置に表示させ、当該編集補助画面に対する指示内容に応じて前記ピッチカーブを編集することを特徴とする請求項8に記載の編集支援方法。 - 音符の時系列を表す楽譜データと歌詞を表す歌詞データとに相当する歌唱波形データの表す歌唱波形を、一方の軸が音高を表し他方の軸が時間を表す波形表示画面に音符毎に配置して表示装置に表示する波形表示手段と、
歌詞の音素を示す情報を前記波形表示画面における当該音素の発音位置に表示する音素表示手段と、を有し、
前記音素表示手段は、
前記歌唱波形データを参照して歌詞の音素を示す情報の切り替わり箇所となる時刻を特定し、当該時刻を前記発音位置として特定する、
ことを特徴とする編集支援装置。 - 前記音素表示手段は、
前記歌唱波形データを参照して歌詞の音素を示す情報の切り替わり箇所となる時刻を特定し、当該時刻を当該情報の示す音素の発音が開始されるタイミングとして特定し、さらに当該タイミングを前記波形表示画面の時間軸上の位置に換算することで、前記発音位置を特定する、
ことを特徴とする請求項10に記載の編集支援装置。 - 前記楽譜データと前記歌詞データの少なくとも一方に対する編集指示の入力を契機として、前記表示装置の表示画面を、前記楽譜データと前記歌詞データの少なくとも一方を編集するための楽譜編集画面に切り替える切り替え手段と、
前記楽譜編集画面に対する編集操作に応じて前記楽譜データと前記歌詞データの少なくとも一方を変更し、前記歌唱波形データを算出し直す算出手段と、
を含むことを特徴とする請求項10又は請求項11に記載の編集支援装置。 - 前記歌唱波形の開始タイミングの変更指示を音符毎に受け付け、指示内容に応じて歌唱波形の開始タイミングを編集する開始タイミング編集手段と、
前記開始タイミング編集手段による編集内容に応じて前記歌唱波形データを算出し直す算出手段と、
を含むことを特徴とする請求項10又は請求項11に記載の編集支援装置。 - 前記楽譜データにしたがって音符を示す一区切りの図形である音符ブロックを音符毎に前記波形表示画面に表示する音符表示手段を有する、
ことを特徴とする請求項13に記載の歌唱音声の編集支援装置。 - 音高の時間変化を表すピッチカーブを前記楽譜データにしたがって前記波形表示画面に表示するピッチカーブ表示手段と、
前記ピッチカーブにおけるアタック部分またはリリース部分の変更指示を音符毎に受け付け、指示内容に応じて前記ピッチカーブを編集するピッチカーブ編集手段と、
前記ピッチカーブ編集手段による編集内容に応じて前記歌唱波形データを算出し直す算出手段と、を含む
ことを特徴とする請求項10又は請求項11に記載の編集支援装置。 - 前記ピッチカーブ編集手段は、
前記歌唱音声に付与する音響効果の種類に応じて時間軸方向と音量軸方向の少なくとも一方の方向に前記ピッチカーブを伸縮させることを促す編集補助画面を前記表示装置に表示させ、当該編集補助画面に対する指示内容に応じて前記ピッチカーブを編集することを特徴とする請求項15に記載の編集支援装置。 - 音符の時系列を表す楽譜データと歌詞を表す歌詞データとに相当する歌唱波形データの表す歌唱波形を、一方の軸が音高を表し他方の軸が時間を表す波形表示画面に音符毎に配置して表示装置に表示する波形表示手段と、
歌詞の音素を示す情報を前記波形表示画面における当該音素の発音位置に表示する音素表示手段と、
音高の時間変化を表すピッチカーブを前記楽譜データにしたがって前記波形表示画面に表示するピッチカーブ表示手段と、
前記ピッチカーブにおけるアタック部分またはリリース部分の変更指示を音符毎に受け付け、指示内容に応じて前記ピッチカーブを編集するピッチカーブ編集手段と、
前記ピッチカーブ編集手段による編集内容に応じて前記歌唱波形データを算出し直す算出手段と、を含む
ことを特徴とする編集支援装置。 - 前記ピッチカーブ編集手段は、
前記歌唱音声に付与する音響効果の種類に応じて時間軸方向と音量軸方向の少なくとも一方の方向に前記ピッチカーブを伸縮させることを促す編集補助画面を前記表示装置に表示させ、当該編集補助画面に対する指示内容に応じて前記ピッチカーブを編集することを特徴とする請求項17に記載の編集支援装置。 - コンピュータに、
音符の時系列を表す楽譜データと歌詞を表す歌詞データとに相当する歌唱波形データの表す歌唱波形を、一方の軸が音高を表し他方の軸が時間を表す波形表示画面に音符毎に配置して表示装置に表示する波形表示ステップと、
歌詞の音素を示す情報を前記波形表示画面における当該音素の発音位置に表示する音素表示ステップと、を実行させ、
前記音素表示ステップでは、前記コンピュータは、
前記歌唱波形データを参照して歌詞の音素を示す情報の切り替わり箇所となる時刻を特定し、当該時刻を前記発音位置を特定する、
ことを特徴とするプログラム。 - 前記音素表示ステップでは、前記コンピュータは、
前記歌唱波形データを参照して歌詞の音素を示す情報の切り替わり箇所となる時刻を特定し、当該時刻を当該情報の示す音素の発音が開始されるタイミングとして特定し、さらに当該タイミングを前記波形表示画面の時間軸上の位置に換算することで、前記発音位置を特定する、
ことを特徴とする請求項19に記載のプログラム。 - 前記楽譜データと前記歌詞データの少なくとも一方に対する編集指示の入力を契機として、前記表示装置の表示画面を、前記楽譜データと前記歌詞データの少なくとも一方を編集するための楽譜編集画面に切り替える切り替えステップと、
前記楽譜編集画面に対する編集操作に応じて前記楽譜データと前記歌詞データの少なくとも一方を変更し、前記歌唱波形データを算出し直す算出ステップと、
を前記コンピュータにさらに実行させる、ことを特徴とする請求項19又は請求項20に記載のプログラム。 - 前記歌唱波形の開始タイミングの変更指示を音符毎に受け付け、指示内容に応じて歌唱波形の開始タイミングを編集する開始タイミング編集ステップと、
前記開始タイミング編集ステップにおける編集内容に応じて前記歌唱波形データを算出し直す算出ステップと、
を前記コンピュータにさらに実行させることを特徴とする請求項19又は請求項20に記載のプログラム。 - 前記楽譜データにしたがって音符を示す一区切りの図形である音符ブロックを音符毎に前記波形表示画面に表示する音符表示ステップを、
前記コンピュータにさらに実行させることを特徴とする請求項22に記載のプログラム。 - 音高の時間変化を表すピッチカーブを前記楽譜データにしたがって前記波形表示画面に表示するピッチカーブ表示ステップと、
前記ピッチカーブにおけるアタック部分またはリリース部分の変更指示を音符毎に受け付け、指示内容に応じて前記ピッチカーブを編集するピッチカーブ編集ステップと、
前記ピッチカーブ編集ステップにおける編集内容に応じて前記歌唱波形データを算出し直す算出ステップと、
を前記コンピュータにさらに実行させることを特徴とする請求項19又は請求項20に記載のプログラム。 - 前記ピッチカーブ編集ステップでは、前記コンピュータは、
前記歌唱音声に付与する音響効果の種類に応じて時間軸方向と音量軸方向の少なくとも一方の方向に前記ピッチカーブを伸縮させることを促す編集補助画面を前記表示装置に表示させ、当該編集補助画面に対する指示内容に応じて前記ピッチカーブを編集することを特徴とする請求項24に記載のプログラム。 - コンピュータに、
音符の時系列を表す楽譜データと歌詞を表す歌詞データとに相当する歌唱波形データの表す歌唱波形を、一方の軸が音高を表し他方の軸が時間を表す波形表示画面に音符毎に配置して表示装置に表示する波形表示ステップと、
歌詞の音素を示す情報を前記波形表示画面における当該音素の発音位置に表示する音素表示ステップと、
音高の時間変化を表すピッチカーブを前記楽譜データにしたがって前記波形表示画面に表示するピッチカーブ表示ステップと、
前記ピッチカーブにおけるアタック部分またはリリース部分の変更指示を音符毎に受け付け、指示内容に応じて前記ピッチカーブを編集するピッチカーブ編集ステップと、
前記ピッチカーブ編集ステップにおける編集内容に応じて前記歌唱波形データを算出し直す算出ステップと、
を実行させるプログラム。 - 前記ピッチカーブ編集ステップでは、前記コンピュータは、
前記歌唱音声に付与する音響効果の種類に応じて時間軸方向と音量軸方向の少なくとも一方の方向に前記ピッチカーブを伸縮させることを促す編集補助画面を前記表示装置に表示させ、当該編集補助画面に対する指示内容に応じて前記ピッチカーブを編集することを特徴とする請求項26に記載のプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017191630A JP6988343B2 (ja) | 2017-09-29 | 2017-09-29 | 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 |
CN201811130796.7A CN109584910B (zh) | 2017-09-29 | 2018-09-27 | 歌唱音频的编辑辅助方法以及歌唱音频的编辑辅助装置 |
US16/145,661 US10354627B2 (en) | 2017-09-29 | 2018-09-28 | Singing voice edit assistant method and singing voice edit assistant device |
EP18197462.7A EP3462441B1 (en) | 2017-09-29 | 2018-09-28 | Singing voice edit assistant method and singing voice edit assistant device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017191630A JP6988343B2 (ja) | 2017-09-29 | 2017-09-29 | 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019066650A JP2019066650A (ja) | 2019-04-25 |
JP6988343B2 true JP6988343B2 (ja) | 2022-01-05 |
Family
ID=63708217
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017191630A Active JP6988343B2 (ja) | 2017-09-29 | 2017-09-29 | 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10354627B2 (ja) |
EP (1) | EP3462441B1 (ja) |
JP (1) | JP6988343B2 (ja) |
CN (1) | CN109584910B (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7000782B2 (ja) * | 2017-09-29 | 2022-01-19 | ヤマハ株式会社 | 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 |
JP6835247B2 (ja) * | 2017-11-07 | 2021-02-24 | ヤマハ株式会社 | データ生成装置およびプログラム |
WO2019240042A1 (ja) * | 2018-06-15 | 2019-12-19 | ヤマハ株式会社 | 表示制御方法、表示制御装置およびプログラム |
US10923105B2 (en) * | 2018-10-14 | 2021-02-16 | Microsoft Technology Licensing, Llc | Conversion of text-to-speech pronunciation outputs to hyperarticulated vowels |
US11289067B2 (en) * | 2019-06-25 | 2022-03-29 | International Business Machines Corporation | Voice generation based on characteristics of an avatar |
CN110289024B (zh) * | 2019-06-26 | 2021-03-02 | 北京字节跳动网络技术有限公司 | 一种音频编辑方法、装置、电子设备及存储介质 |
CN111063372B (zh) * | 2019-12-30 | 2023-01-10 | 广州酷狗计算机科技有限公司 | 确定音高特征的方法、装置、设备及存储介质 |
JP2021128297A (ja) * | 2020-02-17 | 2021-09-02 | ヤマハ株式会社 | 推定モデル構築方法、演奏解析方法、推定モデル構築装置、演奏解析装置、およびプログラム |
CN111883090A (zh) * | 2020-06-30 | 2020-11-03 | 海尔优家智能科技(北京)有限公司 | 基于移动终端的音频文件的制作方法及装置 |
CN112071287A (zh) * | 2020-09-10 | 2020-12-11 | 北京有竹居网络技术有限公司 | 用于生成歌谱的方法、装置、电子设备和计算机可读介质 |
WO2022074753A1 (ja) * | 2020-10-07 | 2022-04-14 | ヤマハ株式会社 | 情報処理方法、情報処理システムおよびプログラム |
CN113035158B (zh) * | 2021-01-28 | 2024-04-19 | 深圳点猫科技有限公司 | 一种在线midi音乐编辑方法、系统及存储介质 |
CN113035157B (zh) * | 2021-01-28 | 2024-04-16 | 深圳点猫科技有限公司 | 一种图形化音乐编辑方法、系统及存储介质 |
CN113204673A (zh) * | 2021-04-28 | 2021-08-03 | 北京达佳互联信息技术有限公司 | 音频处理方法、装置、终端及计算机可读存储介质 |
CN113407275B (zh) * | 2021-06-17 | 2024-08-02 | 广州繁星互娱信息科技有限公司 | 音频编辑方法、装置、设备及可读存储介质 |
CN113870820A (zh) * | 2021-10-28 | 2021-12-31 | 福建星网视易信息系统有限公司 | 一种谱音同步方法及终端 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010216354A (ja) * | 2009-03-16 | 2010-09-30 | Daihatsu Motor Co Ltd | 排気ガス浄化装置 |
US8545083B2 (en) | 2009-12-22 | 2013-10-01 | Sumita Optical Glass, Inc. | Light-emitting device, light source and method of manufacturing the same |
JP5330306B2 (ja) | 2010-03-30 | 2013-10-30 | 豊田合成株式会社 | 発光装置 |
JP5605066B2 (ja) * | 2010-08-06 | 2014-10-15 | ヤマハ株式会社 | 音合成用データ生成装置およびプログラム |
ITPD20110235A1 (it) * | 2011-07-07 | 2013-01-08 | Geosec S R L | Metodo di consolidamento di terreni di fondazione e/o di aree fabbricabili |
JP6070010B2 (ja) * | 2011-11-04 | 2017-02-01 | ヤマハ株式会社 | 音楽データ表示装置および音楽データ表示方法 |
JP6236765B2 (ja) * | 2011-11-29 | 2017-11-29 | ヤマハ株式会社 | 音楽データ編集装置および音楽データ編集方法 |
JP5811837B2 (ja) * | 2011-12-27 | 2015-11-11 | ヤマハ株式会社 | 表示制御装置及びプログラム |
US8907195B1 (en) * | 2012-01-14 | 2014-12-09 | Neset Arda Erol | Method and apparatus for musical training |
JP6127371B2 (ja) * | 2012-03-28 | 2017-05-17 | ヤマハ株式会社 | 音声合成装置および音声合成方法 |
JP5821824B2 (ja) * | 2012-11-14 | 2015-11-24 | ヤマハ株式会社 | 音声合成装置 |
EP2930714B1 (en) * | 2012-12-04 | 2018-09-05 | National Institute of Advanced Industrial Science and Technology | Singing voice synthesizing system and singing voice synthesizing method |
JP5949607B2 (ja) * | 2013-03-15 | 2016-07-13 | ヤマハ株式会社 | 音声合成装置 |
JP6171711B2 (ja) * | 2013-08-09 | 2017-08-02 | ヤマハ株式会社 | 音声解析装置および音声解析方法 |
US20180268792A1 (en) * | 2014-08-22 | 2018-09-20 | Zya, Inc. | System and method for automatically generating musical output |
JP6507579B2 (ja) * | 2014-11-10 | 2019-05-08 | ヤマハ株式会社 | 音声合成方法 |
JP6620462B2 (ja) * | 2015-08-21 | 2019-12-18 | ヤマハ株式会社 | 合成音声編集装置、合成音声編集方法およびプログラム |
-
2017
- 2017-09-29 JP JP2017191630A patent/JP6988343B2/ja active Active
-
2018
- 2018-09-27 CN CN201811130796.7A patent/CN109584910B/zh active Active
- 2018-09-28 EP EP18197462.7A patent/EP3462441B1/en active Active
- 2018-09-28 US US16/145,661 patent/US10354627B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10354627B2 (en) | 2019-07-16 |
US20190103082A1 (en) | 2019-04-04 |
CN109584910A (zh) | 2019-04-05 |
EP3462441B1 (en) | 2020-09-23 |
JP2019066650A (ja) | 2019-04-25 |
EP3462441A1 (en) | 2019-04-03 |
CN109584910B (zh) | 2021-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6988343B2 (ja) | 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 | |
JP5895740B2 (ja) | 歌唱合成を行うための装置およびプログラム | |
JP7000782B2 (ja) | 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 | |
JP2019066649A (ja) | 歌唱音声の編集支援方法、および歌唱音声の編集支援装置 | |
JP2001075564A (ja) | 演奏データ処理装置及び方法 | |
JP3915807B2 (ja) | 奏法自動判定装置及びプログラム | |
JP4561636B2 (ja) | 楽音合成装置及びプログラム | |
JP2013231872A (ja) | 歌唱合成を行うための装置およびプログラム | |
JP4483304B2 (ja) | 楽譜表示プログラム及び楽譜表示装置 | |
JP3815249B2 (ja) | 楽譜表示装置及び楽譜表示プログラム | |
JP4407473B2 (ja) | 奏法決定装置及びプログラム | |
JP5176981B2 (ja) | 音声合成装置、およびプログラム | |
JP5969421B2 (ja) | 楽器音出力装置及び楽器音出力プログラム | |
JP4853054B2 (ja) | 演奏データ編集装置及びプログラム | |
JP2000081883A (ja) | 音楽処理手段の設定方法、波形デ―タ生成手段の設定方法、楽音生成方法、および、プログラムが記録された記録媒体 | |
JP3972899B2 (ja) | 楽譜表示装置 | |
JP4802947B2 (ja) | 奏法決定装置及びプログラム | |
JP3620396B2 (ja) | 情報修正装置及び情報修正プログラムを記録した媒体 | |
JP5224021B2 (ja) | 楽譜表示装置および楽譜表示用プログラム | |
JP4835434B2 (ja) | 演奏パターン再生装置及びそのコンピュータプログラム | |
JP3794303B2 (ja) | 演奏情報編集装置及び演奏情報編集プログラム | |
JP2570214B2 (ja) | 演奏情報入力装置 | |
JP4182889B2 (ja) | コード構成音高決定装置及びプログラム | |
JP2014149488A (ja) | 音楽データ編集方法、当該音楽データ編集方法を実現するためのプログラムおよび音楽データ編集装置 | |
JP5272599B2 (ja) | 電子音楽装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171024 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200309 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210112 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210218 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210608 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210727 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211102 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211115 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6988343 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |