JP2002073064A - 音声処理装置、音声処理方法および情報記録媒体 - Google Patents
音声処理装置、音声処理方法および情報記録媒体Info
- Publication number
- JP2002073064A JP2002073064A JP2000258034A JP2000258034A JP2002073064A JP 2002073064 A JP2002073064 A JP 2002073064A JP 2000258034 A JP2000258034 A JP 2000258034A JP 2000258034 A JP2000258034 A JP 2000258034A JP 2002073064 A JP2002073064 A JP 2002073064A
- Authority
- JP
- Japan
- Prior art keywords
- information
- vibrato
- syllable
- scale
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Electrophonic Musical Instruments (AREA)
Abstract
(57)【要約】
【課題】 簡易に適切な音に適切なビブラートをかける
ことができ、自然な歌唱音や演奏音を再現することがで
きる音声処理装置、音声処理方法及びこの音声処理を行
うためのプログラムを記録した情報記録媒体を提供す
る。 【解決手段】 音声処理装置は、人の歌唱音のビブラー
トがかかっている音節のピッチ変化と振幅変化の情報で
あるピッチ変化データと、その音節の関連情報（前後の
音節などの情報）と、を対応づけて記憶するビブラート
データベース１２を有しており、ＭＩＤＩデータから歌
唱音の生成時に、ＭＩＤＩデータに基づきビブラートを
かける音節ＳＹを特定する。そして、特定した音節ＳＹ
の関連情報ＶＤＡと同一または類似の１の関連情報をビ
ブラートデータベース１２の中から選択し、特定した音
節に対して、選択した関連情報に対応する各ピッチ変化
データに基づきビブラートをかける処理を行って出力す
る。
ことができ、自然な歌唱音や演奏音を再現することがで
きる音声処理装置、音声処理方法及びこの音声処理を行
うためのプログラムを記録した情報記録媒体を提供す
る。 【解決手段】 音声処理装置は、人の歌唱音のビブラー
トがかかっている音節のピッチ変化と振幅変化の情報で
あるピッチ変化データと、その音節の関連情報（前後の
音節などの情報）と、を対応づけて記憶するビブラート
データベース１２を有しており、ＭＩＤＩデータから歌
唱音の生成時に、ＭＩＤＩデータに基づきビブラートを
かける音節ＳＹを特定する。そして、特定した音節ＳＹ
の関連情報ＶＤＡと同一または類似の１の関連情報をビ
ブラートデータベース１２の中から選択し、特定した音
節に対して、選択した関連情報に対応する各ピッチ変化
データに基づきビブラートをかける処理を行って出力す
る。
Description
【０００１】
【発明の属する技術分野】本発明は、音声処理装置、音
声処理方法及び情報記録媒体に関し、特にＭＩＤＩデー
タから合成した歌唱音にビブラートをかける処理を行う
音声処理装置及び音声処理方法、この音声処理を行うた
めのプログラムを記録した情報記録媒体に関する。
声処理方法及び情報記録媒体に関し、特にＭＩＤＩデー
タから合成した歌唱音にビブラートをかける処理を行う
音声処理装置及び音声処理方法、この音声処理を行うた
めのプログラムを記録した情報記録媒体に関する。
【０００２】
【従来の技術】従来、トーンジェネレータにおいては、
楽器音の音色情報に加えて人の声の音色情報を内蔵する
ものがあり、ＭＩＤＩ（Musical Instruments Digital
Interface）データから演奏音や歌唱音を合成できるも
のがある。また、この種のトーンジェネレータにおいて
は、エフェクト機能として演奏音や歌唱音の中のユーザ
が設定した所定位置の音（音階または音節）に対してビ
ブラートをかけることが可能なものがある。
楽器音の音色情報に加えて人の声の音色情報を内蔵する
ものがあり、ＭＩＤＩ（Musical Instruments Digital
Interface）データから演奏音や歌唱音を合成できるも
のがある。また、この種のトーンジェネレータにおいて
は、エフェクト機能として演奏音や歌唱音の中のユーザ
が設定した所定位置の音（音階または音節）に対してビ
ブラートをかけることが可能なものがある。
【０００３】
【発明が解決しようとする課題】ところで、人の歌声や
人の演奏には様々なビブラートが存在し、人のビブラー
トは、曲のジャンル（演歌、オペラ）や人の種類（性
別、年齢など）で異なるだけでなく、人（歌唱者、演奏
者）ごとに異なることによって歌声や演奏に個性が生じ
ていると考えられる。しかし、この種のトーンジェネレ
ータなどの音声処理装置が行うビブラートの処理は、Ｍ
ＩＤＩデータから生成した合成音に対して一定周期でピ
ッチ変化を付加する簡略的なものであるため、人の歌声
などにある不規則なピッチ変化を伴うビブラートとは異
なり、特に歌唱音の場合は機械的な（不自然な）歌声に
聞こえてしまうという問題があった。また、従来の音声
処理装置では、ビブラートをかける音をユーザが個々に
設定する必要があったため、作業が繁雑になるだけでな
く、例え、複数種類のビブラート（ピッチ変化のパター
ン）があったとしても、これをユーザが適切に使い分け
て自然な歌声や演奏を再現することは困難であるという
問題があった。
人の演奏には様々なビブラートが存在し、人のビブラー
トは、曲のジャンル（演歌、オペラ）や人の種類（性
別、年齢など）で異なるだけでなく、人（歌唱者、演奏
者）ごとに異なることによって歌声や演奏に個性が生じ
ていると考えられる。しかし、この種のトーンジェネレ
ータなどの音声処理装置が行うビブラートの処理は、Ｍ
ＩＤＩデータから生成した合成音に対して一定周期でピ
ッチ変化を付加する簡略的なものであるため、人の歌声
などにある不規則なピッチ変化を伴うビブラートとは異
なり、特に歌唱音の場合は機械的な（不自然な）歌声に
聞こえてしまうという問題があった。また、従来の音声
処理装置では、ビブラートをかける音をユーザが個々に
設定する必要があったため、作業が繁雑になるだけでな
く、例え、複数種類のビブラート（ピッチ変化のパター
ン）があったとしても、これをユーザが適切に使い分け
て自然な歌声や演奏を再現することは困難であるという
問題があった。
【０００４】本発明は、上述した事情に鑑みてなされた
ものであり、簡易に適切な音に適切なビブラートをかけ
ることができ、自然な歌唱音や演奏音を再現することが
できる音声処理装置、音声処理方法及びこの音声処理を
行うためのプログラムを記録した情報記録媒体を提供す
ることを目的とする。
ものであり、簡易に適切な音に適切なビブラートをかけ
ることができ、自然な歌唱音や演奏音を再現することが
できる音声処理装置、音声処理方法及びこの音声処理を
行うためのプログラムを記録した情報記録媒体を提供す
ることを目的とする。
【０００５】
【課題を解決するための手段】上述課題を解決するた
め、請求項１に記載の発明は、音声処理装置において、
人の歌唱音のビブラートがかかっている音節のピッチ変
化と振幅変化の情報であるビブラート情報をその音節の
関連情報と対応づけて記憶する記憶手段と、歌唱情報に
基づいてビブラートをかける音節を順次特定する処理対
象特定手段と、前記記憶手段に記憶された前記音節の関
連情報の中から前記処理対象特定手段が特定した音節の
関連情報と同一または類似の音節の関連情報を順次検索
し、その中からいずれか一つを選択する選択手段と、前
記選択手段により選択された前記音節の関連情報に対応
づけられた前記ビブラート情報に基づいて、前記処理対
象特定手段が特定した音節に対してビブラートをかける
処理を順次行って前記歌唱情報に対応する音声信号を生
成する音声処理手段と、前記音声処理手段により生成さ
れた前記音声信号を出力する出力手段とを備えることを
特徴としている。
め、請求項１に記載の発明は、音声処理装置において、
人の歌唱音のビブラートがかかっている音節のピッチ変
化と振幅変化の情報であるビブラート情報をその音節の
関連情報と対応づけて記憶する記憶手段と、歌唱情報に
基づいてビブラートをかける音節を順次特定する処理対
象特定手段と、前記記憶手段に記憶された前記音節の関
連情報の中から前記処理対象特定手段が特定した音節の
関連情報と同一または類似の音節の関連情報を順次検索
し、その中からいずれか一つを選択する選択手段と、前
記選択手段により選択された前記音節の関連情報に対応
づけられた前記ビブラート情報に基づいて、前記処理対
象特定手段が特定した音節に対してビブラートをかける
処理を順次行って前記歌唱情報に対応する音声信号を生
成する音声処理手段と、前記音声処理手段により生成さ
れた前記音声信号を出力する出力手段とを備えることを
特徴としている。
【０００６】請求項２に記載の発明は、請求項１記載の
音声処理装置において、前記処理対象特定手段は、前記
歌唱情報から音の長さが所定値以上の音節を特定するこ
とを特徴としている。
音声処理装置において、前記処理対象特定手段は、前記
歌唱情報から音の長さが所定値以上の音節を特定するこ
とを特徴としている。
【０００７】請求項３に記載の発明は、請求項１または
２に記載の音声処理装置において、前記処理対象特定手
段は、前記歌唱情報から音階が変化する音節を特定する
ことを特徴としている。
２に記載の音声処理装置において、前記処理対象特定手
段は、前記歌唱情報から音階が変化する音節を特定する
ことを特徴としている。
【０００８】請求項４に記載の発明は、請求項１ないし
３のいずれかに記載の音声処理装置において、前記選択
手段は、前記記憶手段に記憶された前記音節の関連情報
と、前記処理対象特定手段が特定した音節の関連情報と
の類似度を計算し、前記記憶手段に記憶された前記音節
の関連情報の中から前記類似度がもっとも高い音節の関
連情報を選択することを特徴としている。
３のいずれかに記載の音声処理装置において、前記選択
手段は、前記記憶手段に記憶された前記音節の関連情報
と、前記処理対象特定手段が特定した音節の関連情報と
の類似度を計算し、前記記憶手段に記憶された前記音節
の関連情報の中から前記類似度がもっとも高い音節の関
連情報を選択することを特徴としている。
【０００９】請求項５に記載の発明は、請求項１ないし
４のいずれかに記載の音声処理装置において、人の歌唱
音の情報からビブラートがかかっている音節のピッチ変
化と振幅変化の情報であるビブラート情報を抽出する抽
出手段と、前記抽出手段が前記ビブラート情報を抽出し
た音節の関連情報を少なくとも前記人の歌唱音の情報か
ら取得し、前記音節のビブラート情報と対応づけて前記
記憶手段に記憶させるビブラート情報作成手段とをさら
に有することを特徴としている。
４のいずれかに記載の音声処理装置において、人の歌唱
音の情報からビブラートがかかっている音節のピッチ変
化と振幅変化の情報であるビブラート情報を抽出する抽
出手段と、前記抽出手段が前記ビブラート情報を抽出し
た音節の関連情報を少なくとも前記人の歌唱音の情報か
ら取得し、前記音節のビブラート情報と対応づけて前記
記憶手段に記憶させるビブラート情報作成手段とをさら
に有することを特徴としている。
【００１０】請求項６に記載の発明は、音声処理装置に
おいて、人の歌唱音のビブラートがかかっている音節の
ピッチ変化と振幅変化の情報であるビブラート情報をそ
の音節の関連情報と対応づけて記憶する記憶手段と、前
記ビブラート情報に基づいてビブラートをかける処理を
行って歌唱情報に対応する音声信号を生成する音声処理
手段と、前記音声処理手段により生成された前記音声信
号を出力する出力手段とを備えることを特徴としてい
る。
おいて、人の歌唱音のビブラートがかかっている音節の
ピッチ変化と振幅変化の情報であるビブラート情報をそ
の音節の関連情報と対応づけて記憶する記憶手段と、前
記ビブラート情報に基づいてビブラートをかける処理を
行って歌唱情報に対応する音声信号を生成する音声処理
手段と、前記音声処理手段により生成された前記音声信
号を出力する出力手段とを備えることを特徴としてい
る。
【００１１】請求項７に記載の発明は、請求項１ないし
６のいずれかに記載の音声処理装置において、前記音節
の関連情報は、当該音節と、前記人の歌唱音における少
なくとも当該音節の前または後ろの音節、当該音節に対
応する音階、当該音節の前または後ろの音節に対応する
音階、当該音節の長さ、歌唱曲のジャンル、歌唱者の情
報のうち１以上を含む情報であることを特徴としてい
る。
６のいずれかに記載の音声処理装置において、前記音節
の関連情報は、当該音節と、前記人の歌唱音における少
なくとも当該音節の前または後ろの音節、当該音節に対
応する音階、当該音節の前または後ろの音節に対応する
音階、当該音節の長さ、歌唱曲のジャンル、歌唱者の情
報のうち１以上を含む情報であることを特徴としてい
る。
【００１２】請求項８に記載の発明は、請求項１ないし
６のいずれかに記載の音声処理装置において、前記歌唱
情報は、ＭＩＤＩデータであることを特徴としている。
６のいずれかに記載の音声処理装置において、前記歌唱
情報は、ＭＩＤＩデータであることを特徴としている。
【００１３】請求項９に記載の発明は、音声処理装置に
おいて、人の歌唱音の情報からビブラートがかかってい
る音節のピッチ変化の情報を抽出する抽出手段と、前記
抽出手段がピッチ変化の情報を抽出した音節の関連情報
を少なくとも前記人の歌唱音の情報から取得し、前記音
節のピッチ変化の情報と対応づけるビブラート情報作成
手段とを備えることを特徴としている。
おいて、人の歌唱音の情報からビブラートがかかってい
る音節のピッチ変化の情報を抽出する抽出手段と、前記
抽出手段がピッチ変化の情報を抽出した音節の関連情報
を少なくとも前記人の歌唱音の情報から取得し、前記音
節のピッチ変化の情報と対応づけるビブラート情報作成
手段とを備えることを特徴としている。
【００１４】請求項１０に記載の発明は、請求項１ない
し９のいずれかに記載の音声処理装置において、前記ビ
ブラート情報には、人の歌唱音の歌い出しや歌い終わ
り、音韻間におけるピッチ変化と振幅変化の情報が含ま
れることを特徴としている。
し９のいずれかに記載の音声処理装置において、前記ビ
ブラート情報には、人の歌唱音の歌い出しや歌い終わ
り、音韻間におけるピッチ変化と振幅変化の情報が含ま
れることを特徴としている。
【００１５】請求項１１に記載の発明は、音声処理装置
において、人の演奏音のビブラートがかかっている音階
のピッチ変化と振幅変化の情報であるビブラート情報を
その音階の関連情報と対応づけて記憶する記憶手段と、
演奏情報に基づいてビブラートをかける音階を順次特定
する処理対象特定手段と、前記記憶手段に記憶された前
記音階の関連情報の中から前記処理対象特定手段が特定
した音階の関連情報と同一または類似の音階の関連情報
を順次検索し、その中からいずれか一つを選択する選択
手段と、前記選択手段により選択された前記音階の関連
情報に対応づけられた前記ビブラート情報に基づいて、
前記処理対象特定手段が特定した音階に対してビブラー
トをかける処理を順次行って前記演奏情報に対応する音
声信号を生成する音声処理手段と、前記音声処理手段に
より生成された前記音声信号を出力する出力手段とを備
えることを特徴としている。
において、人の演奏音のビブラートがかかっている音階
のピッチ変化と振幅変化の情報であるビブラート情報を
その音階の関連情報と対応づけて記憶する記憶手段と、
演奏情報に基づいてビブラートをかける音階を順次特定
する処理対象特定手段と、前記記憶手段に記憶された前
記音階の関連情報の中から前記処理対象特定手段が特定
した音階の関連情報と同一または類似の音階の関連情報
を順次検索し、その中からいずれか一つを選択する選択
手段と、前記選択手段により選択された前記音階の関連
情報に対応づけられた前記ビブラート情報に基づいて、
前記処理対象特定手段が特定した音階に対してビブラー
トをかける処理を順次行って前記演奏情報に対応する音
声信号を生成する音声処理手段と、前記音声処理手段に
より生成された前記音声信号を出力する出力手段とを備
えることを特徴としている。
【００１６】請求項１２に記載の発明は、請求項１１記
載の音声処理装置において、前記処理対象特定手段は、
前記演奏情報から音の長さが所定値以上の音階を特定す
ることを特徴としている。
載の音声処理装置において、前記処理対象特定手段は、
前記演奏情報から音の長さが所定値以上の音階を特定す
ることを特徴としている。
【００１７】請求項１３に記載の発明は、請求項１１ま
たは１２に記載の音声処理装置において、前記選択手段
は、前記記憶手段に記憶された前記音階の関連情報と、
前記処理対象特定手段が特定した音階の関連情報との類
似度を計算し、前記記憶手段に記憶された前記音階の関
連情報の中から前記類似度がもっとも高い音階の関連情
報を選択することを特徴としている。
たは１２に記載の音声処理装置において、前記選択手段
は、前記記憶手段に記憶された前記音階の関連情報と、
前記処理対象特定手段が特定した音階の関連情報との類
似度を計算し、前記記憶手段に記憶された前記音階の関
連情報の中から前記類似度がもっとも高い音階の関連情
報を選択することを特徴としている。
【００１８】請求項１４に記載の発明は、請求項１１な
いし１３のいずれかに記載の音声処理装置において、人
の演奏音の情報からビブラートがかかっている音階のピ
ッチ変化と振幅変化の情報であるビブラート情報を抽出
する抽出手段と、前記抽出手段が前記ビブラート情報を
抽出した音階の関連情報を少なくとも前記人の演奏音の
情報から取得し、前記音階のビブラート情報と対応づけ
て前記記憶手段に記憶させるビブラート情報作成手段と
をさらに有することを特徴としている。
いし１３のいずれかに記載の音声処理装置において、人
の演奏音の情報からビブラートがかかっている音階のピ
ッチ変化と振幅変化の情報であるビブラート情報を抽出
する抽出手段と、前記抽出手段が前記ビブラート情報を
抽出した音階の関連情報を少なくとも前記人の演奏音の
情報から取得し、前記音階のビブラート情報と対応づけ
て前記記憶手段に記憶させるビブラート情報作成手段と
をさらに有することを特徴としている。
【００１９】請求項１５に記載の発明は、音声処理装置
において、人の演奏音のビブラートがかかっている音階
のピッチ変化と振幅変化の情報であるビブラート情報を
その音階の関連情報と対応づけて記憶する記憶手段と、
前記ビブラート情報に基づいてビブラートをかける処理
を行って演奏情報に対応する音声信号を生成する音声処
理手段と、前記音声処理手段により生成された前記音声
信号を出力する出力手段とを備えることを特徴としてい
る。
において、人の演奏音のビブラートがかかっている音階
のピッチ変化と振幅変化の情報であるビブラート情報を
その音階の関連情報と対応づけて記憶する記憶手段と、
前記ビブラート情報に基づいてビブラートをかける処理
を行って演奏情報に対応する音声信号を生成する音声処
理手段と、前記音声処理手段により生成された前記音声
信号を出力する出力手段とを備えることを特徴としてい
る。
【００２０】請求項１６に記載の発明は、請求項１１な
いし１５のいずれかに記載の音声処理装置において、前
記音階の関連情報は、当該音階と、前記人の演奏音にお
ける少なくとも当該音階の前または後ろの音階、当該音
階の長さ、演奏曲のジャンル、演奏者の情報、楽器の情
報のうち１以上を含む情報であることを特徴としてい
る。
いし１５のいずれかに記載の音声処理装置において、前
記音階の関連情報は、当該音階と、前記人の演奏音にお
ける少なくとも当該音階の前または後ろの音階、当該音
階の長さ、演奏曲のジャンル、演奏者の情報、楽器の情
報のうち１以上を含む情報であることを特徴としてい
る。
【００２１】請求項１７に記載の発明は、請求項１１な
いし１６のいずれかに記載の音声処理装置において、前
記演奏情報は、ＭＩＤＩデータであることを特徴として
いる。
いし１６のいずれかに記載の音声処理装置において、前
記演奏情報は、ＭＩＤＩデータであることを特徴として
いる。
【００２２】請求項１８に記載の発明は、音声処理装置
において、人の演奏音の情報からビブラートがかかって
いる音階のピッチ変化と振幅変化の情報であるビブラー
ト情報を抽出する抽出手段と、前記抽出手段が前記ビブ
ラート情報を抽出した音階の関連情報を少なくとも前記
人の演奏音の情報から取得し、前記音階のビブラート情
報と対応づけるビブラート情報作成手段とを備えること
を特徴としている。
において、人の演奏音の情報からビブラートがかかって
いる音階のピッチ変化と振幅変化の情報であるビブラー
ト情報を抽出する抽出手段と、前記抽出手段が前記ビブ
ラート情報を抽出した音階の関連情報を少なくとも前記
人の演奏音の情報から取得し、前記音階のビブラート情
報と対応づけるビブラート情報作成手段とを備えること
を特徴としている。
【００２３】請求項１９に記載の発明は、請求項１１な
いし１８のいずれかに記載の音声処理装置において、前
記ビブラート情報には、人の演奏音の弾き始めや弾き終
わり、音韻間におけるピッチ変化と振幅変化の情報が含
まれることを特徴としている。
いし１８のいずれかに記載の音声処理装置において、前
記ビブラート情報には、人の演奏音の弾き始めや弾き終
わり、音韻間におけるピッチ変化と振幅変化の情報が含
まれることを特徴としている。
【００２４】請求項２０に記載の発明は、請求項１ない
し１９のいずれかに記載の音声処理装置において、前記
ビブラート情報は、ベクトル量子化されて記憶されたこ
とを特徴としている。
し１９のいずれかに記載の音声処理装置において、前記
ビブラート情報は、ベクトル量子化されて記憶されたこ
とを特徴としている。
【００２５】請求項２１に記載の発明は、音声処理方法
において、歌唱情報からビブラートをかける所定位置の
音節を順次特定する処理対象特定ステップと、人の歌唱
音のビブラートがかかっている音節のピッチ変化と振幅
変化の情報であるビブラート情報をその音節の関連情報
と対応づけて記憶する記憶部の前記音節の関連情報の中
から前記処理対象特定ステップにおいて特定された音節
の関連情報と同一または類似の音節の関連情報を順次検
索し、その中からいずれか一つを選択する選択ステップ
と、前記選択ステップにおいて選択された前記音節の関
連情報に対応づけられた前記ビブラート情報に基づい
て、前記特定した音に対してビブラートをかける処理を
順次行って前記歌唱情報に対応する音声信号を生成する
音声処理ステップと、前記音声処理ステップにおいて処
理された前記音声信号を出力する出力ステップとを備え
ることを特徴としている。
において、歌唱情報からビブラートをかける所定位置の
音節を順次特定する処理対象特定ステップと、人の歌唱
音のビブラートがかかっている音節のピッチ変化と振幅
変化の情報であるビブラート情報をその音節の関連情報
と対応づけて記憶する記憶部の前記音節の関連情報の中
から前記処理対象特定ステップにおいて特定された音節
の関連情報と同一または類似の音節の関連情報を順次検
索し、その中からいずれか一つを選択する選択ステップ
と、前記選択ステップにおいて選択された前記音節の関
連情報に対応づけられた前記ビブラート情報に基づい
て、前記特定した音に対してビブラートをかける処理を
順次行って前記歌唱情報に対応する音声信号を生成する
音声処理ステップと、前記音声処理ステップにおいて処
理された前記音声信号を出力する出力ステップとを備え
ることを特徴としている。
【００２６】請求項２２に記載の発明は、請求項２１に
記載の音声処理方法において、前記ビブラート情報に
は、人の歌唱音の歌い出しや歌い終わり、音韻間におけ
るピッチ変化と振幅変化の情報が含まれることを特徴と
している。
記載の音声処理方法において、前記ビブラート情報に
は、人の歌唱音の歌い出しや歌い終わり、音韻間におけ
るピッチ変化と振幅変化の情報が含まれることを特徴と
している。
【００２７】請求項２３に記載の発明は、音声処理方法
において、演奏情報からビブラートをかける所定位置の
音階を順次特定する処理対象特定ステップと、人の演奏
音のビブラートがかかっている音階のピッチ変化と振幅
変化の情報であるビブラート情報をその音階の関連情報
と対応づけて記憶する記憶部の前記音階の関連情報の中
から前記処理対象特定ステップにおいて特定された音階
の関連情報と同一または類似の音階の関連情報を順次検
索し、その中からいずれか一つを選択する選択ステップ
と、前記選択ステップにおいて選択された前記音階の関
連情報に対応づけられた前記ビブラート情報に基づい
て、前記特定した音階に対してビブラートをかける処理
を順次行って前記演奏情報に対応する音声信号を生成す
る音声処理ステップと、前記音声処理ステップにおいて
処理された前記音声信号を出力する出力ステップとを備
えることを特徴としている。
において、演奏情報からビブラートをかける所定位置の
音階を順次特定する処理対象特定ステップと、人の演奏
音のビブラートがかかっている音階のピッチ変化と振幅
変化の情報であるビブラート情報をその音階の関連情報
と対応づけて記憶する記憶部の前記音階の関連情報の中
から前記処理対象特定ステップにおいて特定された音階
の関連情報と同一または類似の音階の関連情報を順次検
索し、その中からいずれか一つを選択する選択ステップ
と、前記選択ステップにおいて選択された前記音階の関
連情報に対応づけられた前記ビブラート情報に基づい
て、前記特定した音階に対してビブラートをかける処理
を順次行って前記演奏情報に対応する音声信号を生成す
る音声処理ステップと、前記音声処理ステップにおいて
処理された前記音声信号を出力する出力ステップとを備
えることを特徴としている。
【００２８】請求項２４に記載の発明は、請求項２３に
記載の音声処理方法において、前記ビブラート情報に
は、人の演奏音の弾き始めや弾き終わり、音韻間におけ
るピッチ変化と振幅変化の情報が含まれることを特徴と
している。
記載の音声処理方法において、前記ビブラート情報に
は、人の演奏音の弾き始めや弾き終わり、音韻間におけ
るピッチ変化と振幅変化の情報が含まれることを特徴と
している。
【００２９】請求項２５に記載の発明は、情報記録媒体
において、歌唱情報からビブラートをかける所定位置の
音節を順次特定し、人の歌唱音のビブラートがかかって
いる音節のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音節の関連情報と対応づけて記憶する記憶
部の前記音節の関連情報の中から前記処理対象特定ステ
ップにおいて特定された音節の関連情報と同一または類
似の音節の関連情報を順次検索してその中からいずれか
一つを選択し、前記選択した前記音節の関連情報に対応
づけられた前記ビブラート情報に基づいて、前記特定し
た音に対してビブラートをかける処理を順次行って前記
歌唱情報に対応する音声信号を生成する音声処理のプロ
グラムが記録されたことを特徴としている。
において、歌唱情報からビブラートをかける所定位置の
音節を順次特定し、人の歌唱音のビブラートがかかって
いる音節のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音節の関連情報と対応づけて記憶する記憶
部の前記音節の関連情報の中から前記処理対象特定ステ
ップにおいて特定された音節の関連情報と同一または類
似の音節の関連情報を順次検索してその中からいずれか
一つを選択し、前記選択した前記音節の関連情報に対応
づけられた前記ビブラート情報に基づいて、前記特定し
た音に対してビブラートをかける処理を順次行って前記
歌唱情報に対応する音声信号を生成する音声処理のプロ
グラムが記録されたことを特徴としている。
【００３０】請求項２６に記載の発明は、情報記録媒体
において、演奏情報からビブラートをかける所定位置の
音階を順次特定し、人の演奏音のビブラートがかかって
いる音階のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音階の関連情報と対応づけて記憶する記憶
部の前記音階の関連情報の中から前記処理対象特定ステ
ップにおいて特定された音階の関連情報と同一または類
似の音階の関連情報を順次検索してその中からいずれか
一つを選択し、前記選択した前記音階の関連情報に対応
づけられた前記ビブラート情報に基づいて、前記特定し
た音階に対してビブラートをかける処理を順次行って前
記演奏情報に対応する音声信号を生成する音声処理のプ
ログラムが記録されたことを特徴としている。
において、演奏情報からビブラートをかける所定位置の
音階を順次特定し、人の演奏音のビブラートがかかって
いる音階のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音階の関連情報と対応づけて記憶する記憶
部の前記音階の関連情報の中から前記処理対象特定ステ
ップにおいて特定された音階の関連情報と同一または類
似の音階の関連情報を順次検索してその中からいずれか
一つを選択し、前記選択した前記音階の関連情報に対応
づけられた前記ビブラート情報に基づいて、前記特定し
た音階に対してビブラートをかける処理を順次行って前
記演奏情報に対応する音声信号を生成する音声処理のプ
ログラムが記録されたことを特徴としている。
【００３１】請求項２７に記載の発明は、音節のビブラ
ート情報と音節の関連情報を記録した情報記録媒体であ
って、前記音節のビブラート情報は、人の歌唱音から取
得したビブラートがかかっている音節のピッチ変化と振
幅変化の情報であり、前記音節の関連情報は、前記人の
歌唱音から取得した前記ビブラートがかかっている音
節、少なくとも当該音節の前または後ろの音節、当該音
節に対応する音階、当該音節の前または後ろの音節に対
応する音階及び当該音節の長さのうち１以上を含む情報
と、前記人の歌唱音における歌唱曲のジャンル、歌唱者
の情報のうち１以上を含む情報とであり、前記音節の関
連情報と前記音節のビブラート情報とがそれぞれ対応づ
けされて記憶されていることを特徴としている。
ート情報と音節の関連情報を記録した情報記録媒体であ
って、前記音節のビブラート情報は、人の歌唱音から取
得したビブラートがかかっている音節のピッチ変化と振
幅変化の情報であり、前記音節の関連情報は、前記人の
歌唱音から取得した前記ビブラートがかかっている音
節、少なくとも当該音節の前または後ろの音節、当該音
節に対応する音階、当該音節の前または後ろの音節に対
応する音階及び当該音節の長さのうち１以上を含む情報
と、前記人の歌唱音における歌唱曲のジャンル、歌唱者
の情報のうち１以上を含む情報とであり、前記音節の関
連情報と前記音節のビブラート情報とがそれぞれ対応づ
けされて記憶されていることを特徴としている。
【００３２】請求項２８に記載の発明は、音階のビブラ
ート情報と音階の関連情報を記録した情報記録媒体であ
って、前記音階のビブラート情報は、人の演奏音から取
得したビブラートがかかっている音階のピッチ変化と振
幅変化の情報であり、前記音階の関連情報は、前記人の
演奏音から取得した前記ビブラートがかかっている音
階、少なくとも当該音階の前または後ろの音階及び当該
音階の長さのうち１以上を含む情報と、前記人の演奏音
における演奏曲のジャンル、演奏者の情報のうち１以上
を含む情報とであり、前記音階の関連情報と前記音階の
ビブラート情報とがそれぞれ対応づけされて記録されて
いることを特徴としている。
ート情報と音階の関連情報を記録した情報記録媒体であ
って、前記音階のビブラート情報は、人の演奏音から取
得したビブラートがかかっている音階のピッチ変化と振
幅変化の情報であり、前記音階の関連情報は、前記人の
演奏音から取得した前記ビブラートがかかっている音
階、少なくとも当該音階の前または後ろの音階及び当該
音階の長さのうち１以上を含む情報と、前記人の演奏音
における演奏曲のジャンル、演奏者の情報のうち１以上
を含む情報とであり、前記音階の関連情報と前記音階の
ビブラート情報とがそれぞれ対応づけされて記録されて
いることを特徴としている。
【００３３】請求項２９に記載の発明は、請求項２５ま
たは２７に記載の情報記録媒体において、前記ビブラー
ト情報には、人の歌唱音の歌い出しや歌い終わり、音韻
間におけるピッチ変化と振幅変化の情報が含まれること
を特徴としている。
たは２７に記載の情報記録媒体において、前記ビブラー
ト情報には、人の歌唱音の歌い出しや歌い終わり、音韻
間におけるピッチ変化と振幅変化の情報が含まれること
を特徴としている。
【００３４】請求項３０に記載の発明は、請求項２６ま
たは２８に記載の情報記録媒体において、前記ビブラー
ト情報には、人の演奏音の弾き始めや弾き終わり、音韻
間におけるピッチ変化と振幅変化の情報が含まれること
を特徴としている。
たは２８に記載の情報記録媒体において、前記ビブラー
ト情報には、人の演奏音の弾き始めや弾き終わり、音韻
間におけるピッチ変化と振幅変化の情報が含まれること
を特徴としている。
【００３５】
【発明の実施の形態】以下、図面を参照して本発明の実
施の形態を詳述する。 （１） 実施形態 （１−１）実施形態の構成 図１は、本発明の実施形態に係る音声処理装置を示すブ
ロック図である。この音声処理装置１０は、本発明を楽
器音と人の声の音色情報を内蔵するトーンジェネレータ
に適用したものであり、通常のトーンジェネレータの機
能に加えて、ＭＩＤＩデータから歌唱音の音声信号を生
成する場合にはビブラートをかけて出力できるように構
成されている。制御部１１は、パーソナルコンピュータ
などから入力されるＭＩＤＩデータに基づいてこの音声
処理装置１０全体を制御することにより、演奏音や歌唱
音の音声信号を生成してスピーカＳＰに出力させたり、
音声信号に音声処理を行わせたり、録音処理や、後述す
るビブラートデータベース１２の作成更新処理を行う。
ここで、ビブラートデータベース１２とは、人のビブラ
ートにあるピッチ変化と振幅変化の情報であるピッチ変
化データ（ビブラート情報）を後述する音節の関連情報
と対応付けたデータベースである。
施の形態を詳述する。 （１） 実施形態 （１−１）実施形態の構成 図１は、本発明の実施形態に係る音声処理装置を示すブ
ロック図である。この音声処理装置１０は、本発明を楽
器音と人の声の音色情報を内蔵するトーンジェネレータ
に適用したものであり、通常のトーンジェネレータの機
能に加えて、ＭＩＤＩデータから歌唱音の音声信号を生
成する場合にはビブラートをかけて出力できるように構
成されている。制御部１１は、パーソナルコンピュータ
などから入力されるＭＩＤＩデータに基づいてこの音声
処理装置１０全体を制御することにより、演奏音や歌唱
音の音声信号を生成してスピーカＳＰに出力させたり、
音声信号に音声処理を行わせたり、録音処理や、後述す
るビブラートデータベース１２の作成更新処理を行う。
ここで、ビブラートデータベース１２とは、人のビブラ
ートにあるピッチ変化と振幅変化の情報であるピッチ変
化データ（ビブラート情報）を後述する音節の関連情報
と対応付けたデータベースである。
【００３６】音源部１３は、ＭＩＤＩデータから音声信
号を生成するための楽器音や人の声の音色情報などを保
持しており、制御部１１の制御に従って演奏音や歌唱音
の音声信号を生成する。なお、歌唱音のＭＩＤＩデータ
を作成する方法について説明すると、従来の方法と同様
であるが、ＭＩＤＩ規格のノートデータに予め定めた音
節（「あ」、「い」など）を割り当てた歌詞情報をＭＩ
ＤＩデータとして作成され、このＭＩＤＩデータが対応
する機器（音声処理装置など）に入力されることによっ
て歌唱音の音声信号を生成できるようになっている。ま
た、この音声処理装置１０においては、いわゆるアカペ
ラの歌唱音の音声信号を生成するだけでなく、ＭＩＤＩ
データを歌唱音のパートと演奏音（楽器音）のパートを
有するトラック構成にすることにより、歌唱音と演奏音
を合成した音声信号を生成することもできる。
号を生成するための楽器音や人の声の音色情報などを保
持しており、制御部１１の制御に従って演奏音や歌唱音
の音声信号を生成する。なお、歌唱音のＭＩＤＩデータ
を作成する方法について説明すると、従来の方法と同様
であるが、ＭＩＤＩ規格のノートデータに予め定めた音
節（「あ」、「い」など）を割り当てた歌詞情報をＭＩ
ＤＩデータとして作成され、このＭＩＤＩデータが対応
する機器（音声処理装置など）に入力されることによっ
て歌唱音の音声信号を生成できるようになっている。ま
た、この音声処理装置１０においては、いわゆるアカペ
ラの歌唱音の音声信号を生成するだけでなく、ＭＩＤＩ
データを歌唱音のパートと演奏音（楽器音）のパートを
有するトラック構成にすることにより、歌唱音と演奏音
を合成した音声信号を生成することもできる。
【００３７】音声処理部１４は、音声信号を音声処理
（リバーブ／コーラス／バリエーションなど）するため
の各種情報を保持しており、制御部１１の制御により音
声信号に各種の音声処理を行う。また、音声処理部１４
は、歌唱音の音声信号に対しては、対応する音声信号ま
たはＭＩＤＩデータ（歌詞情報）から音の長さが所定値
以上の音節、すなわち、伸ばしている音節を後述するそ
の音節の関連情報と共に抽出できるようになっている。
そして、音声処理部１４は、この抽出した音節の関連情
報とビブラートデータベース１２に登録された複数の音
節の関連情報との類似度を算出し、類似度がもっとも高
い音節の関連情報に対応づけられたピッチ変化データを
用い、抽出した音節のピッチを変化させてビブラートを
かける処理を行えるようになっている。
（リバーブ／コーラス／バリエーションなど）するため
の各種情報を保持しており、制御部１１の制御により音
声信号に各種の音声処理を行う。また、音声処理部１４
は、歌唱音の音声信号に対しては、対応する音声信号ま
たはＭＩＤＩデータ（歌詞情報）から音の長さが所定値
以上の音節、すなわち、伸ばしている音節を後述するそ
の音節の関連情報と共に抽出できるようになっている。
そして、音声処理部１４は、この抽出した音節の関連情
報とビブラートデータベース１２に登録された複数の音
節の関連情報との類似度を算出し、類似度がもっとも高
い音節の関連情報に対応づけられたピッチ変化データを
用い、抽出した音節のピッチを変化させてビブラートを
かける処理を行えるようになっている。
【００３８】（１−２） 実施形態の動作 次に、音声処理装置１０において、ビブラートデータベ
ース１２の作成更新処理を行う場合の動作について説明
する。まず、音声処理装置１０においては、実際の人の
歌声が図示しないマイクを介して入力され、図示しない
メモリに歌唱音データとして録音される。このとき、こ
の歌唱音データには、ユーザの入力により歌（曲）のジ
ャンル（クラシック／ポップス／演歌など）や、歌い手
の情報（性別／子供／若者／中年など）が付加されて記
録される。
ース１２の作成更新処理を行う場合の動作について説明
する。まず、音声処理装置１０においては、実際の人の
歌声が図示しないマイクを介して入力され、図示しない
メモリに歌唱音データとして録音される。このとき、こ
の歌唱音データには、ユーザの入力により歌（曲）のジ
ャンル（クラシック／ポップス／演歌など）や、歌い手
の情報（性別／子供／若者／中年など）が付加されて記
録される。
【００３９】次に、音声処理装置１０においては、図２
に示すように、制御部１１によりこの歌唱音データから
音の長さが所定値以上の音節（「あ」）が順次特定さ
れ、この音節のピッチ変化の波形データがピッチ変化デ
ータＤＰとして順次取得される。このとき、制御部１１
では、特定した音節の関連情報ＤＡとして、ユーザが入
力した情報（歌（曲）のジャンルや歌い手の情報）に加
えて、特定した音節（「あ」）及びその音階（「Ｃ
４」）と、この音節の前後に割り当てられた音節
（「い」と「い」）及びその音階（「Ｄ４」と「Ｅ
４」）と、特定した音節の継続時間（「０．５３」）と
が順次取得され、図３に符号ＩＮで示すように、音節の
関連情報ＤＡとピッチ変化データＤＰとが対応付けされ
てビブラートデータベース１２が作成される。また、す
でにビブラートデータベース１２が作成されている場合
は、新たに取得した音節の関連情報ＤＡとピッチ変化デ
ータＤＰとが追加されてビブラートデータベース１２の
内容が更新されるようになっている。なお、歌唱音デー
タは、この音声処理装置１０に接続されたパーソナルコ
ンピュータのＨＤＤ（hard disk drive）に記憶された
データを用いてもよい。
に示すように、制御部１１によりこの歌唱音データから
音の長さが所定値以上の音節（「あ」）が順次特定さ
れ、この音節のピッチ変化の波形データがピッチ変化デ
ータＤＰとして順次取得される。このとき、制御部１１
では、特定した音節の関連情報ＤＡとして、ユーザが入
力した情報（歌（曲）のジャンルや歌い手の情報）に加
えて、特定した音節（「あ」）及びその音階（「Ｃ
４」）と、この音節の前後に割り当てられた音節
（「い」と「い」）及びその音階（「Ｄ４」と「Ｅ
４」）と、特定した音節の継続時間（「０．５３」）と
が順次取得され、図３に符号ＩＮで示すように、音節の
関連情報ＤＡとピッチ変化データＤＰとが対応付けされ
てビブラートデータベース１２が作成される。また、す
でにビブラートデータベース１２が作成されている場合
は、新たに取得した音節の関連情報ＤＡとピッチ変化デ
ータＤＰとが追加されてビブラートデータベース１２の
内容が更新されるようになっている。なお、歌唱音デー
タは、この音声処理装置１０に接続されたパーソナルコ
ンピュータのＨＤＤ（hard disk drive）に記憶された
データを用いてもよい。
【００４０】すなわち、音声処理装置１０においては、
人の歌声からビブラートのピッチ変化データＤＰに加え
て、ビブラートがかかる音節の関連情報ＤＡをすべて取
得し、これらピッチ変化データＤＰと音節の関連情報Ｄ
Ａとを対応づけてビブラートデータベース１２を作成す
る。従って、音声処理装置１０においては、様々なジャ
ンルや歌い手の歌唱音データを用いてビブラートデータ
ベース１２を作成することにより、人の歌声にある多種
多様なビブラートをそのビブラートがかかっている音節
の周辺情報、ジャンル、歌い手などと組み合わせてデー
タベース化し、後述するビブラートをかける音声処理を
行うことができるようになっている。
人の歌声からビブラートのピッチ変化データＤＰに加え
て、ビブラートがかかる音節の関連情報ＤＡをすべて取
得し、これらピッチ変化データＤＰと音節の関連情報Ｄ
Ａとを対応づけてビブラートデータベース１２を作成す
る。従って、音声処理装置１０においては、様々なジャ
ンルや歌い手の歌唱音データを用いてビブラートデータ
ベース１２を作成することにより、人の歌声にある多種
多様なビブラートをそのビブラートがかかっている音節
の周辺情報、ジャンル、歌い手などと組み合わせてデー
タベース化し、後述するビブラートをかける音声処理を
行うことができるようになっている。
【００４１】次に、音声処理装置１０において、歌唱音
の音声信号の生成に際してビブラートをかける場合の動
作について説明する。なお、ここでは、歌唱音のパート
と演奏音（楽器音）のパートを有する歌唱音にビブラー
トをかける例を説明するが、本発明はこれに限らず、い
わゆるアカペラの歌唱音でも同様の方法でビブラートを
かけることが可能である。音声処理装置１０において、
歌唱音のパートと演奏音（楽器音）のパートを有するＭ
ＩＤＩデータが入力されると、音源部１３により音色情
報から対応する人の声の歌唱音と楽器音の演奏音の音声
信号が生成され、音声処理部１４に出力される（図
１）。音声処理部１４では、歌唱音に対応するＭＩＤＩ
データから音の長さが所定値以上の音節（伸ばしている
音節）がビブラートをかける音節ＳＹとして順次特定さ
れる。このとき、音声処理部１４では、図４に示すよう
に、例えば、特定したビブラートをかける音節ＳＹ
（「あ」）の関連情報ＶＤＡとして、特定した音節
（「あ」）及びその音階（「Ｅ４」）と、この音節の前
後に割り当てられた音節（「う」と「い」）及びその音
階（「Ｄ４」と「Ｅ４」）と、特定した音節の継続時間
（「0.55」）と、予めユーザが入力した歌（曲）のジャ
ンル（「Ｃ」）などが取得され、図４の符号ＣＡＬで示
すように、この音節の関連情報ＶＤＡと、ビブラートデ
ータベース１２に登録された音節の関連情報ＤＡｘ
（ｘ：１〜ｎ）との類似度ＲＥｘが順次計算される。
の音声信号の生成に際してビブラートをかける場合の動
作について説明する。なお、ここでは、歌唱音のパート
と演奏音（楽器音）のパートを有する歌唱音にビブラー
トをかける例を説明するが、本発明はこれに限らず、い
わゆるアカペラの歌唱音でも同様の方法でビブラートを
かけることが可能である。音声処理装置１０において、
歌唱音のパートと演奏音（楽器音）のパートを有するＭ
ＩＤＩデータが入力されると、音源部１３により音色情
報から対応する人の声の歌唱音と楽器音の演奏音の音声
信号が生成され、音声処理部１４に出力される（図
１）。音声処理部１４では、歌唱音に対応するＭＩＤＩ
データから音の長さが所定値以上の音節（伸ばしている
音節）がビブラートをかける音節ＳＹとして順次特定さ
れる。このとき、音声処理部１４では、図４に示すよう
に、例えば、特定したビブラートをかける音節ＳＹ
（「あ」）の関連情報ＶＤＡとして、特定した音節
（「あ」）及びその音階（「Ｅ４」）と、この音節の前
後に割り当てられた音節（「う」と「い」）及びその音
階（「Ｄ４」と「Ｅ４」）と、特定した音節の継続時間
（「0.55」）と、予めユーザが入力した歌（曲）のジャ
ンル（「Ｃ」）などが取得され、図４の符号ＣＡＬで示
すように、この音節の関連情報ＶＤＡと、ビブラートデ
ータベース１２に登録された音節の関連情報ＤＡｘ
（ｘ：１〜ｎ）との類似度ＲＥｘが順次計算される。
【００４２】類似度ＲＥｘの具体的な計算方法として
は、以下に示すように、音節の関連情報ＶＤＡと関連情
報ＤＡｘとの間で項目間の距離ｄｉ（ｉ＝１〜ｍ、ｍは
関連情報の全項目数）と、各項目に対する重みづけｗｉ
との乗算値がすべての項目で計算され、この計算値の累
積加算値が類似度ＲＥｘとされるようになっている。
は、以下に示すように、音節の関連情報ＶＤＡと関連情
報ＤＡｘとの間で項目間の距離ｄｉ（ｉ＝１〜ｍ、ｍは
関連情報の全項目数）と、各項目に対する重みづけｗｉ
との乗算値がすべての項目で計算され、この計算値の累
積加算値が類似度ＲＥｘとされるようになっている。
【００４３】
【００４４】距離ｄｉは、例えば、音階や継続時間など
の数値で表記される項目では差の絶対値で求められ、音
節などの項目では、別途備える音節間の距離を定義した
テーブル（「あ」と「い」の間は距離が近く、「あ」と
「え」は距離が遠い等をすべての音節について数値で定
義したテーブル）を用いて求められるようになってい
る。そして、音声処理部１４では、計算結果に基づいて
類似度ＲＥｘのうちもっとも類似度が高い音節の関連情
報（関連情報が同一または類似のもの）ＤＡ１を決定す
ると、その類似度が高い音節の関連情報ＤＡ１に対応づ
けられたピッチ変化データＤＰを用いて音節ＳＹにビブ
ラートをかける処理を行うようになっている。なお、ビ
ブラートをかける処理は、ピッチ変化データＤＰに対応
するパラメータをＭＩＤＩデータに付加してディジタル
処理により行う方法などを広く適用することができる。
の数値で表記される項目では差の絶対値で求められ、音
節などの項目では、別途備える音節間の距離を定義した
テーブル（「あ」と「い」の間は距離が近く、「あ」と
「え」は距離が遠い等をすべての音節について数値で定
義したテーブル）を用いて求められるようになってい
る。そして、音声処理部１４では、計算結果に基づいて
類似度ＲＥｘのうちもっとも類似度が高い音節の関連情
報（関連情報が同一または類似のもの）ＤＡ１を決定す
ると、その類似度が高い音節の関連情報ＤＡ１に対応づ
けられたピッチ変化データＤＰを用いて音節ＳＹにビブ
ラートをかける処理を行うようになっている。なお、ビ
ブラートをかける処理は、ピッチ変化データＤＰに対応
するパラメータをＭＩＤＩデータに付加してディジタル
処理により行う方法などを広く適用することができる。
【００４５】このようにして、音声処理部１４では、特
定したビブラートをかける音節ＳＹ毎に類似度ＲＥｘを
計算し、類似度が高い音節の関連情報ＤＡに対応づけら
れたピッチ変化データＤＰを用いて音節ＳＹにビブラー
トをかける処理を順次行うようになっている。これによ
り、この音声処理装置１０は、特定した音節ＳＹに対し
て、実際の人の歌声から取得した多種多様なビブラート
のうち、その音節ＳＹの関連情報と同一または類似の関
連情報を有する音節にかかっているビブラートをかける
ことができ、ＭＩＤＩデータから合成した歌唱音に実際
の人の歌声と同様のビブラートを付加することができ、
自然な歌唱音を再現することができる。
定したビブラートをかける音節ＳＹ毎に類似度ＲＥｘを
計算し、類似度が高い音節の関連情報ＤＡに対応づけら
れたピッチ変化データＤＰを用いて音節ＳＹにビブラー
トをかける処理を順次行うようになっている。これによ
り、この音声処理装置１０は、特定した音節ＳＹに対し
て、実際の人の歌声から取得した多種多様なビブラート
のうち、その音節ＳＹの関連情報と同一または類似の関
連情報を有する音節にかかっているビブラートをかける
ことができ、ＭＩＤＩデータから合成した歌唱音に実際
の人の歌声と同様のビブラートを付加することができ、
自然な歌唱音を再現することができる。
【００４６】また、この音声処理装置１０は、ビブラー
トをかける音節の特定とビブラートの選定とを自動で行
うことができるので、従来の音声処理装置のように、ビ
ブラートをかける音とビブラートの内容をユーザが個々
に設定する必要がなく、簡易に自然な歌唱音を再現する
ことができる。さらに、ユーザが希望する歌い手の情報
（性別／子供／若者／中年など）を入力したり、入力す
る歌い手の情報や歌のジャンルを変更することによっ
て、ユーザが希望する歌い手やジャンル風（ポップス
調、演歌調など）の歌唱音を簡易に再現することができ
る。この場合、ビブラートデータベース１２を好みの歌
手の歌声から作成しておくことにより、好みの歌手の個
性を備えた歌唱音を簡易に再現することが可能となる。
トをかける音節の特定とビブラートの選定とを自動で行
うことができるので、従来の音声処理装置のように、ビ
ブラートをかける音とビブラートの内容をユーザが個々
に設定する必要がなく、簡易に自然な歌唱音を再現する
ことができる。さらに、ユーザが希望する歌い手の情報
（性別／子供／若者／中年など）を入力したり、入力す
る歌い手の情報や歌のジャンルを変更することによっ
て、ユーザが希望する歌い手やジャンル風（ポップス
調、演歌調など）の歌唱音を簡易に再現することができ
る。この場合、ビブラートデータベース１２を好みの歌
手の歌声から作成しておくことにより、好みの歌手の個
性を備えた歌唱音を簡易に再現することが可能となる。
【００４７】（２） 変形例 （２−１） 変形例１ 上述の実施形態においては、音の長さが所定値以上の音
節（伸ばしている音節）のみにビブラートをかける場合
について述べたが、本発明はこれに限らず、音階が変化
している音節に対して、その関連情報が同一または類似
の関連情報に対応付けされたピッチ変化データＤＰを用
いてビブラートをかけるようにしてもよい。この場合、
音節の同一または類似を考慮せずに、音階の変化などが
同一または類似の関連情報に対応付けされたピッチ変化
データＤＰを用いてビブラートをかけるようにしてもよ
い。
節（伸ばしている音節）のみにビブラートをかける場合
について述べたが、本発明はこれに限らず、音階が変化
している音節に対して、その関連情報が同一または類似
の関連情報に対応付けされたピッチ変化データＤＰを用
いてビブラートをかけるようにしてもよい。この場合、
音節の同一または類似を考慮せずに、音階の変化などが
同一または類似の関連情報に対応付けされたピッチ変化
データＤＰを用いてビブラートをかけるようにしてもよ
い。
【００４８】（２−２） 変形例２ 上述の実施形態においては、ビブラートデータベース１
２に登録されたすべての音節の関連情報ＤＡｘ（ｘ：１
〜ｎ）との類似度ＲＥｘを計算する場合について述べた
が、本発明はこれに限らず、計算中に明らかに類似度が
低いと判定できる場合（項目間の距離が遠い場合など）
には、計算を中断して次の関連情報との類似度の計算に
移行させて計算時間を短縮してもよく、効率的に類似度
が高い関連情報を選択する計算方法や選択方法を広く適
用することができる。
２に登録されたすべての音節の関連情報ＤＡｘ（ｘ：１
〜ｎ）との類似度ＲＥｘを計算する場合について述べた
が、本発明はこれに限らず、計算中に明らかに類似度が
低いと判定できる場合（項目間の距離が遠い場合など）
には、計算を中断して次の関連情報との類似度の計算に
移行させて計算時間を短縮してもよく、効率的に類似度
が高い関連情報を選択する計算方法や選択方法を広く適
用することができる。
【００４９】（２−３） 変形例３ 上述の実施形態においては、類似度の計算に使用する音
節の関連情報を、音節及びその音階と、この音節の前後
に割り当てられた音節及びその音階と、特定した音節の
継続時間と、歌（曲）のジャンルなどの情報で構成する
場合について述べたが、本発明はこれに限らず、情報の
種類を適宜増減してもよい。
節の関連情報を、音節及びその音階と、この音節の前後
に割り当てられた音節及びその音階と、特定した音節の
継続時間と、歌（曲）のジャンルなどの情報で構成する
場合について述べたが、本発明はこれに限らず、情報の
種類を適宜増減してもよい。
【００５０】（２−４） 変形例４ 上述の実施形態においては、本発明を歌唱音にビブラー
トを付加する音声処理に適用する場合について述べた
が、本発明はこれに限らず、楽器音などの演奏音にビブ
ラートを付加する音声処理に適用してもよい。この場
合、実際の人によるバイオリンやトランペットの演奏か
らビブラートがかかっている音階を特定し、ピッチ変化
データと音階の関連情報とを対応づけてビブラートデー
タベースを作成することにより、上述と同様の方法によ
り、合成した演奏音に実際の人の演奏にあるビブラート
を付加することができ、演奏音の自然性を向上させるこ
とができる。
トを付加する音声処理に適用する場合について述べた
が、本発明はこれに限らず、楽器音などの演奏音にビブ
ラートを付加する音声処理に適用してもよい。この場
合、実際の人によるバイオリンやトランペットの演奏か
らビブラートがかかっている音階を特定し、ピッチ変化
データと音階の関連情報とを対応づけてビブラートデー
タベースを作成することにより、上述と同様の方法によ
り、合成した演奏音に実際の人の演奏にあるビブラート
を付加することができ、演奏音の自然性を向上させるこ
とができる。
【００５１】（２−５） 変形例５ 上述の実施形態においては、さらに人の歌唱音の歌い出
しや歌い終わり、若しくは音韻間におけるピッチ変化デ
ータを取得し、これらピッチ変化データに基づいて、Ｍ
ＩＤＩデータの歌唱音の歌い出しや歌い終わり、若しく
は音韻間に人の歌唱音と同じピッチ変化と振幅変化をつ
けることにより、歌唱音の自然性をさらに向上させるこ
とができる。また、演奏音の場合は、人の演奏の弾き始
めや弾き終わり、若しくは音韻間におけるピッチ変化デ
ータを取得し、これらピッチ変化データに基づいてＭＩ
ＤＩデータの演奏音の弾き始めや弾き終わり、若しくは
音韻間に同一のピッチ変化と振幅変化をつけることによ
り、演奏音の自然性をさらに向上させることができる。
しや歌い終わり、若しくは音韻間におけるピッチ変化デ
ータを取得し、これらピッチ変化データに基づいて、Ｍ
ＩＤＩデータの歌唱音の歌い出しや歌い終わり、若しく
は音韻間に人の歌唱音と同じピッチ変化と振幅変化をつ
けることにより、歌唱音の自然性をさらに向上させるこ
とができる。また、演奏音の場合は、人の演奏の弾き始
めや弾き終わり、若しくは音韻間におけるピッチ変化デ
ータを取得し、これらピッチ変化データに基づいてＭＩ
ＤＩデータの演奏音の弾き始めや弾き終わり、若しくは
音韻間に同一のピッチ変化と振幅変化をつけることによ
り、演奏音の自然性をさらに向上させることができる。
【００５２】（２−６） 変形例６ 上述の実施形態においては、マイクを介して録音した人
の歌声や楽器音からビブラートデータベースを作成する
場合について述べたが、要は実際の人の歌声や演奏音か
らビブラートの情報（ピッチ変化データや関連情報）を
取得できればよく、音楽用ＣＤ（Compact Disk）等の情
報記録媒体から取得する方法などを広く適用することが
できる。
の歌声や楽器音からビブラートデータベースを作成する
場合について述べたが、要は実際の人の歌声や演奏音か
らビブラートの情報（ピッチ変化データや関連情報）を
取得できればよく、音楽用ＣＤ（Compact Disk）等の情
報記録媒体から取得する方法などを広く適用することが
できる。
【００５３】（２−７） 変形例７ 上述の実施形態においては、ビブラートのピッチ変化の
波形データをそのまま保持する場合について述べたが、
本発明はこれに限らず、ピッチ変化の波形データをベク
トル量子化すれば、ビブラートデータベースのデータ量
を低減することができる。この場合 図５（ｂ）に示す
ように、ピッチ変化の波形データ毎にピッチ変化コード
を割り当て、図５（ａ）に示すように、ビブラートデー
タベース１２では、関連情報とピッチ変化コードとを対
応付けさせてもよく、異なる関連情報間でピッチ変化の
波形データが同様な場合には、異なる関連情報に同一の
ピッチ変化コードを対応付けすれば、さらにデータ量を
低減することができる。
波形データをそのまま保持する場合について述べたが、
本発明はこれに限らず、ピッチ変化の波形データをベク
トル量子化すれば、ビブラートデータベースのデータ量
を低減することができる。この場合 図５（ｂ）に示す
ように、ピッチ変化の波形データ毎にピッチ変化コード
を割り当て、図５（ａ）に示すように、ビブラートデー
タベース１２では、関連情報とピッチ変化コードとを対
応付けさせてもよく、異なる関連情報間でピッチ変化の
波形データが同様な場合には、異なる関連情報に同一の
ピッチ変化コードを対応付けすれば、さらにデータ量を
低減することができる。
【００５４】（２−８） 変形例８ 上述の実施形態は、本発明をトーンジェネレータに適用
する場合について述べたが、本発明はこれに限らず、本
発明は信号処理用の半導体集積回路と、それに設定され
たマイクロプログラムなどの組み合わせによって構成す
ることができ、また、パーソナルコンピュータおよびそ
の周辺機器と、そのコンピュータで実行されるプログラ
ムとの組み合わせによっても実現することができる。さ
らに、コンピュータとプログラムとから構成する場合に
は、そのプログラムをコンピュータが読み取り可能な情
報記録媒体に記録して頒布することが可能である。
する場合について述べたが、本発明はこれに限らず、本
発明は信号処理用の半導体集積回路と、それに設定され
たマイクロプログラムなどの組み合わせによって構成す
ることができ、また、パーソナルコンピュータおよびそ
の周辺機器と、そのコンピュータで実行されるプログラ
ムとの組み合わせによっても実現することができる。さ
らに、コンピュータとプログラムとから構成する場合に
は、そのプログラムをコンピュータが読み取り可能な情
報記録媒体に記録して頒布することが可能である。
【００５５】
【発明の効果】上述したように本発明によれば、簡易に
適切な音に適切なビブラートをかけることができ、自然
な歌唱音や演奏音を再現することができる。
適切な音に適切なビブラートをかけることができ、自然
な歌唱音や演奏音を再現することができる。
【図１】 本発明の実施形態に係る音声処理装置を示す
ブロック図である。
ブロック図である。
【図２】 ビブラートデータベースの作成の説明に供す
るタイミングチャートである。
るタイミングチャートである。
【図３】 ビブラートデータベースの内容を示す図であ
る。
る。
【図４】 ビブラートデータベースの中から目的の関連
情報を選択する処理の説明に供する図である。
情報を選択する処理の説明に供する図である。
【図５】 変形例６に係るビブラートデータベースの内
容を示す図である。
容を示す図である。
１０……音声処理装置、 １１……制御部、 １２……ビブラートデータベース、 １３……音源部、 １４……音声処理部、 ＤＰ……ピッチ変化データ（ビブラート情報）。
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成１２年１１月２８日（２０００．１１．
２８）
２８）
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正内容】
【特許請求の範囲】
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正内容】
【００１４】請求項１０に記載の発明は、請求項１ない
し９のいずれかに記載の音声処理装置において、前記記
憶手段には、さらに、人の歌唱音の歌い出しや歌い終わ
り、音節間におけるピッチ変化と振幅変化の情報である
他の変化情報がその音節の関連情報と対応づけて記憶さ
れ、前記処理対象特定手段は、さらに、前記歌唱情報に
基づいて歌い出しや歌い終わりの音節、及び音節間を変
化させる音節を特定し、前記選択手段は、前記記憶手段
に記憶された前記音節の関連情報の中から前記処理対象
特定手段が特定した音節の関連情報と同一または類似の
音節の関連情報を検索し、その中からいずれか一つを選
択し、前記音声処理手段は、前記選択手段により選択さ
れた前記音節の関連情報に対応づけられた前記他の変化
情報に基づいて、前記処理対象特定手段が特定した音節
に対してピッチ変化と振幅変化をかける処理を行って前
記歌唱情報に対応する音声信号を生成することを特徴と
している。
し９のいずれかに記載の音声処理装置において、前記記
憶手段には、さらに、人の歌唱音の歌い出しや歌い終わ
り、音節間におけるピッチ変化と振幅変化の情報である
他の変化情報がその音節の関連情報と対応づけて記憶さ
れ、前記処理対象特定手段は、さらに、前記歌唱情報に
基づいて歌い出しや歌い終わりの音節、及び音節間を変
化させる音節を特定し、前記選択手段は、前記記憶手段
に記憶された前記音節の関連情報の中から前記処理対象
特定手段が特定した音節の関連情報と同一または類似の
音節の関連情報を検索し、その中からいずれか一つを選
択し、前記音声処理手段は、前記選択手段により選択さ
れた前記音節の関連情報に対応づけられた前記他の変化
情報に基づいて、前記処理対象特定手段が特定した音節
に対してピッチ変化と振幅変化をかける処理を行って前
記歌唱情報に対応する音声信号を生成することを特徴と
している。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正内容】
【００２３】請求項１９に記載の発明は、請求項１１な
いし１８のいずれかに記載の音声処理装置において、前
記記憶手段には、さらに、人の演奏音の弾き始めや弾き
終わり、音階間におけるピッチ変化と振幅変化の情報で
ある他の変化情報がその音階の関連情報と対応づけて記
憶され、前記処理対象特定手段は、さらに、前記演奏情
報に基づいて弾き始めや弾き終わり、及び音階間を変化
させる音階を特定し、前記選択手段は、前記記憶手段に
記憶された前記音階の関連情報の中から前記処理対象特
定手段が特定した音階の関連情報と同一または類似の音
階の関連情報を検索し、その中からいずれか一つを選択
し、前記音声処理手段は、前記選択手段により選択され
た前記音階の関連情報に対応づけられた前記他の変化情
報に基づいて、前記処理対象特定手段が特定した音階に
対してピッチ変化と振幅変化をかける処理を行って前記
演奏情報に対応する音声信号を生成することを特徴とし
ている。
いし１８のいずれかに記載の音声処理装置において、前
記記憶手段には、さらに、人の演奏音の弾き始めや弾き
終わり、音階間におけるピッチ変化と振幅変化の情報で
ある他の変化情報がその音階の関連情報と対応づけて記
憶され、前記処理対象特定手段は、さらに、前記演奏情
報に基づいて弾き始めや弾き終わり、及び音階間を変化
させる音階を特定し、前記選択手段は、前記記憶手段に
記憶された前記音階の関連情報の中から前記処理対象特
定手段が特定した音階の関連情報と同一または類似の音
階の関連情報を検索し、その中からいずれか一つを選択
し、前記音声処理手段は、前記選択手段により選択され
た前記音階の関連情報に対応づけられた前記他の変化情
報に基づいて、前記処理対象特定手段が特定した音階に
対してピッチ変化と振幅変化をかける処理を行って前記
演奏情報に対応する音声信号を生成することを特徴とし
ている。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正内容】
【００２６】請求項２２に記載の発明は、請求項２１に
記載の音声処理方法において、前記歌唱情報に基づいて
歌い出しや歌い終わりの音節、及び音節間を変化させる
音節を順次特定する第２の処理対象特定ステップと、人
の歌唱音の歌い出しや歌い終わり、音節間におけるピッ
チ変化と振幅変化の情報である他の変化情報をその音節
の関連情報と対応づけて記憶する記憶部の前記音節の関
連情報の中から前記第２の処理対象特定ステップにおい
て特定された音節の関連情報と同一または類似の音節の
関連情報を順次検索し、その中からいずれか一つを選択
する第２の選択ステップと、前記第２の選択ステップに
おいて選択された前記音節の関連情報に対応づけられた
前記他の変化情報に基づいて、前記特定した音節に対し
てピッチ変化と振幅変化をかける処理を行って前記歌唱
情報に対応する音声信号を生成する第２の音声信号を生
成する第２の音声処理ステップとを有し、前記出力ステ
ップは、前記音声処理ステップと前記第２の音声処理ス
テップにおいて処理された前記音声信号を出力すること
を特徴としている。
記載の音声処理方法において、前記歌唱情報に基づいて
歌い出しや歌い終わりの音節、及び音節間を変化させる
音節を順次特定する第２の処理対象特定ステップと、人
の歌唱音の歌い出しや歌い終わり、音節間におけるピッ
チ変化と振幅変化の情報である他の変化情報をその音節
の関連情報と対応づけて記憶する記憶部の前記音節の関
連情報の中から前記第２の処理対象特定ステップにおい
て特定された音節の関連情報と同一または類似の音節の
関連情報を順次検索し、その中からいずれか一つを選択
する第２の選択ステップと、前記第２の選択ステップに
おいて選択された前記音節の関連情報に対応づけられた
前記他の変化情報に基づいて、前記特定した音節に対し
てピッチ変化と振幅変化をかける処理を行って前記歌唱
情報に対応する音声信号を生成する第２の音声信号を生
成する第２の音声処理ステップとを有し、前記出力ステ
ップは、前記音声処理ステップと前記第２の音声処理ス
テップにおいて処理された前記音声信号を出力すること
を特徴としている。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２８
【補正方法】変更
【補正内容】
【００２８】請求項２４に記載の発明は、請求項２３に
記載の音声処理方法において、前記演奏情報に基づいて
弾き始めや弾き終わり、及び音階間を変化させる音階を
順次特定する第２の処理対象特定ステップと、人の演奏
音の弾き始めや弾き終わり、音階間におけるピッチ変化
と振幅変化の情報である他の変化情報をその音階の関連
情報と対応づけて記憶する記憶部の前記音階の関連情報
の中から前記第２の処理対象特定ステップにおいて特定
された音階の関連情報と同一または類似の音階の関連情
報を順次検索し、その中からいずれか一つを選択する第
２の選択ステップと、前記第２の選択ステップにおいて
選択された前記音階の関連情報に対応づけられた前記他
の変化情報に基づいて、前記特定した音階に対してピッ
チ変化と振幅変化をかける処理を行って前記演奏情報に
対応する音声信号を生成する第２の音声信号を生成する
第２の音声処理ステップとを有し、前記出力ステップ
は、前記音声処理ステップと前記第２の音声処理ステッ
プにおいて処理された前記音声信号を出力することを特
徴としている。
記載の音声処理方法において、前記演奏情報に基づいて
弾き始めや弾き終わり、及び音階間を変化させる音階を
順次特定する第２の処理対象特定ステップと、人の演奏
音の弾き始めや弾き終わり、音階間におけるピッチ変化
と振幅変化の情報である他の変化情報をその音階の関連
情報と対応づけて記憶する記憶部の前記音階の関連情報
の中から前記第２の処理対象特定ステップにおいて特定
された音階の関連情報と同一または類似の音階の関連情
報を順次検索し、その中からいずれか一つを選択する第
２の選択ステップと、前記第２の選択ステップにおいて
選択された前記音階の関連情報に対応づけられた前記他
の変化情報に基づいて、前記特定した音階に対してピッ
チ変化と振幅変化をかける処理を行って前記演奏情報に
対応する音声信号を生成する第２の音声信号を生成する
第２の音声処理ステップとを有し、前記出力ステップ
は、前記音声処理ステップと前記第２の音声処理ステッ
プにおいて処理された前記音声信号を出力することを特
徴としている。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正内容】
【００２９】請求項２５に記載の発明は、情報記録媒体
において、歌唱情報からビブラートをかける所定位置の
音節を順次特定し、人の歌唱音のビブラートがかかって
いる音節のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音節の関連情報と対応づけて記憶する記憶
部の前記音節の関連情報の中から前記特定した音節の関
連情報と同一または類似の音節の関連情報を順次検索し
てその中からいずれか一つを選択し、前記選択した前記
音節の関連情報に対応づけられた前記ビブラート情報に
基づいて、前記特定した音に対してビブラートをかける
処理を順次行って前記歌唱情報に対応する音声信号を生
成する音声処理のプログラムが記録されたことを特徴と
している。
において、歌唱情報からビブラートをかける所定位置の
音節を順次特定し、人の歌唱音のビブラートがかかって
いる音節のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音節の関連情報と対応づけて記憶する記憶
部の前記音節の関連情報の中から前記特定した音節の関
連情報と同一または類似の音節の関連情報を順次検索し
てその中からいずれか一つを選択し、前記選択した前記
音節の関連情報に対応づけられた前記ビブラート情報に
基づいて、前記特定した音に対してビブラートをかける
処理を順次行って前記歌唱情報に対応する音声信号を生
成する音声処理のプログラムが記録されたことを特徴と
している。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正内容】
【００３０】請求項２６に記載の発明は、情報記録媒体
において、演奏情報からビブラートをかける所定位置の
音階を順次特定し、人の演奏音のビブラートがかかって
いる音階のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音階の関連情報と対応づけて記憶する記憶
部の前記音階の関連情報の中から前記特定した音階の関
連情報と同一または類似の音階の関連情報を順次検索し
てその中からいずれか一つを選択し、前記選択した前記
音階の関連情報に対応づけられた前記ビブラート情報に
基づいて、前記特定した音階に対してビブラートをかけ
る処理を順次行って前記演奏情報に対応する音声信号を
生成する音声処理のプログラムが記録されたことを特徴
としている。
において、演奏情報からビブラートをかける所定位置の
音階を順次特定し、人の演奏音のビブラートがかかって
いる音階のピッチ変化と振幅変化の情報であるビブラー
ト情報をその音階の関連情報と対応づけて記憶する記憶
部の前記音階の関連情報の中から前記特定した音階の関
連情報と同一または類似の音階の関連情報を順次検索し
てその中からいずれか一つを選択し、前記選択した前記
音階の関連情報に対応づけられた前記ビブラート情報に
基づいて、前記特定した音階に対してビブラートをかけ
る処理を順次行って前記演奏情報に対応する音声信号を
生成する音声処理のプログラムが記録されたことを特徴
としている。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正内容】
【００３３】請求項２９に記載の発明は、請求項２５ま
たは２７に記載の情報記録媒体において、前記歌唱情報
に基づいて歌い出しや歌い終わりの音節、及び音節間を
変化させる音節を順次特定し、人の歌唱音の歌い出しや
歌い終わり、音節間におけるピッチ変化と振幅変化の情
報である他の変化情報をその音節の関連情報と対応づけ
て記憶する記憶部の前記音節の関連情報の中から前記特
定した音節の関連情報と同一または類似の音節の関連情
報を順次検索し、その中からいずれか一つを選択し、前
記選択した前記音節の関連情報に対応づけられた前記他
の変化情報に基づいて、前記特定した音節に対してピッ
チ変化と振幅変化をかける処理を行って前記歌唱情報に
対応する音声信号を生成する音声処理のプログラムが記
録されたことを特徴としている。
たは２７に記載の情報記録媒体において、前記歌唱情報
に基づいて歌い出しや歌い終わりの音節、及び音節間を
変化させる音節を順次特定し、人の歌唱音の歌い出しや
歌い終わり、音節間におけるピッチ変化と振幅変化の情
報である他の変化情報をその音節の関連情報と対応づけ
て記憶する記憶部の前記音節の関連情報の中から前記特
定した音節の関連情報と同一または類似の音節の関連情
報を順次検索し、その中からいずれか一つを選択し、前
記選択した前記音節の関連情報に対応づけられた前記他
の変化情報に基づいて、前記特定した音節に対してピッ
チ変化と振幅変化をかける処理を行って前記歌唱情報に
対応する音声信号を生成する音声処理のプログラムが記
録されたことを特徴としている。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正内容】
【００３４】請求項３０に記載の発明は、請求項２６ま
たは２８に記載の情報記録媒体において、前記演奏情報
に基づいて弾き始めや弾き終わり、及び音階間を変化さ
せる音階を順次特定し、人の演奏音の弾き始めや弾き終
わり、音階間におけるピッチ変化と振幅変化の情報であ
る他の変化情報をその音階の関連情報と対応づけて記憶
する記憶部の前記音階の関連情報の中から前記特定した
音階の関連情報と同一または類似の音階の関連情報を順
次検索し、その中からいずれか一つを選択し、前記選択
した前記音階の関連情報に対応づけられた前記他の変化
情報に基づいて、前記特定した音階に対してピッチ変化
と振幅変化をかける処理を行って前記演奏情報に対応す
る音声信号を生成する第２の音声信号を生成する音声処
理のプログラムが記録されたことを特徴としている。
たは２８に記載の情報記録媒体において、前記演奏情報
に基づいて弾き始めや弾き終わり、及び音階間を変化さ
せる音階を順次特定し、人の演奏音の弾き始めや弾き終
わり、音階間におけるピッチ変化と振幅変化の情報であ
る他の変化情報をその音階の関連情報と対応づけて記憶
する記憶部の前記音階の関連情報の中から前記特定した
音階の関連情報と同一または類似の音階の関連情報を順
次検索し、その中からいずれか一つを選択し、前記選択
した前記音階の関連情報に対応づけられた前記他の変化
情報に基づいて、前記特定した音階に対してピッチ変化
と振幅変化をかける処理を行って前記演奏情報に対応す
る音声信号を生成する第２の音声信号を生成する音声処
理のプログラムが記録されたことを特徴としている。
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5D045 AA07 BA02 5D378 FF17 FF22 KK02 MM12 MM22 MM33 MM47 MM68 MM72 QQ05 QQ08 QQ23 QQ25 WW16 XX24 XX30 XX43
Claims (30)
- 【請求項１】 人の歌唱音のビブラートがかかっている
音節のピッチ変化と振幅変化の情報であるビブラート情
報をその音節の関連情報と対応づけて記憶する記憶手段
と、 歌唱情報に基づいてビブラートをかける音節を順次特定
する処理対象特定手段と、 前記記憶手段に記憶された前記音節の関連情報の中から
前記処理対象特定手段が特定した音節の関連情報と同一
または類似の音節の関連情報を順次検索し、その中から
いずれか一つを選択する選択手段と、 前記選択手段により選択された前記音節の関連情報に対
応づけられた前記ビブラート情報に基づいて、前記処理
対象特定手段が特定した音節に対してビブラートをかけ
る処理を順次行って前記歌唱情報に対応する音声信号を
生成する音声処理手段と、 前記音声処理手段により生成された前記音声信号を出力
する出力手段とを備えることを特徴とする音声処理装
置。 - 【請求項２】 請求項１記載の音声処理装置において、 前記処理対象特定手段は、前記歌唱情報から音の長さが
所定値以上の音節を特定することを特徴とする音声処理
装置。 - 【請求項３】 請求項１または２に記載の音声処理装置
において、 前記処理対象特定手段は、前記歌唱情報から音階が変化
する音節を特定することを特徴とする音声処理装置。 - 【請求項４】 請求項１ないし３のいずれかに記載の音
声処理装置において、 前記選択手段は、 前記記憶手段に記憶された前記音節の関連情報と、前記
処理対象特定手段が特定した音節の関連情報との類似度
を計算し、 前記記憶手段に記憶された前記音節の関連情報の中から
前記類似度がもっとも高い音節の関連情報を選択するこ
とを特徴とする音声処理装置。 - 【請求項５】 請求項１ないし４のいずれかに記載の音
声処理装置において、 人の歌唱音の情報からビブラートがかかっている音節の
ピッチ変化と振幅変化の情報であるビブラート情報を抽
出する抽出手段と、 前記抽出手段が前記ビブラート情報を抽出した音節の関
連情報を少なくとも前記人の歌唱音の情報から取得し、
前記音節のビブラート情報と対応づけて前記記憶手段に
記憶させるビブラート情報作成手段とをさらに有するこ
とを特徴とする音声処理装置。 - 【請求項６】 人の歌唱音のビブラートがかかっている
音節のピッチ変化と振幅変化の情報であるビブラート情
報をその音節の関連情報と対応づけて記憶する記憶手段
と、 前記ビブラート情報に基づいてビブラートをかける処理
を行って歌唱情報に対応する音声信号を生成する音声処
理手段と、 前記音声処理手段により生成された前記音声信号を出力
する出力手段とを備えることを特徴とする音声処理装
置。 - 【請求項７】 請求項１ないし６のいずれかに記載の音
声処理装置において、 前記音節の関連情報は、当該音節と、前記人の歌唱音に
おける少なくとも当該音節の前または後ろの音節、当該
音節に対応する音階、当該音節の前または後ろの音節に
対応する音階、当該音節の長さ、歌唱曲のジャンル、歌
唱者の情報のうち１以上を含む情報であることを特徴と
する音声処理装置。 - 【請求項８】 請求項１ないし７のいずれかに記載の音
声処理装置において、 前記歌唱情報は、ＭＩＤＩデータであることを特徴とす
る音声処理装置。 - 【請求項９】 人の歌唱音の情報からビブラートがかか
っている音節のピッチ変化と振幅変化の情報であるビブ
ラート情報を抽出する抽出手段と、 前記抽出手段が前記ビブラート情報を抽出した音節の関
連情報を少なくとも前記人の歌唱音の情報から取得し、
前記音節のビブラート情報と対応づけるビブラート情報
作成手段とを備えることを特徴とする音声処理装置。 - 【請求項１０】 請求項１ないし９のいずれかに記載の
音声処理装置において、 前記ビブラート情報には、人の歌唱音の歌い出しや歌い
終わり、音韻間におけるピッチ変化と振幅変化の情報が
含まれることを特徴とする音声処理装置。 - 【請求項１１】 人の演奏音のビブラートがかかってい
る音階のピッチ変化と振幅変化の情報であるビブラート
情報をその音階の関連情報と対応づけて記憶する記憶手
段と、 演奏情報に基づいてビブラートをかける音階を順次特定
する処理対象特定手段と、 前記記憶手段に記憶された前記音階の関連情報の中から
前記処理対象特定手段が特定した音階の関連情報と同一
または類似の音階の関連情報を順次検索し、その中から
いずれか一つを選択する選択手段と、 前記選択手段により選択された前記音階の関連情報に対
応づけられた前記ビブラート情報に基づいて、前記処理
対象特定手段が特定した音階に対してビブラートをかけ
る処理を順次行って前記演奏情報に対応する音声信号を
生成する音声処理手段と、 前記音声処理手段により生成された前記音声信号を出力
する出力手段とを備えることを特徴とする音声処理装
置。 - 【請求項１２】 請求項１１記載の音声処理装置におい
て、 前記処理対象特定手段は、前記演奏情報から音の長さが
所定値以上の音階を特定することを特徴とする音声処理
装置。 - 【請求項１３】 請求項１１または１２に記載の音声処
理装置において、 前記選択手段は、 前記記憶手段に記憶された前記音階の関連情報と、前記
処理対象特定手段が特定した音階の関連情報との類似度
を計算し、 前記記憶手段に記憶された前記音階の関連情報の中から
前記類似度がもっとも高い音階の関連情報を選択するこ
とを特徴とする音声処理装置。 - 【請求項１４】 請求項１１ないし１３のいずれかに記
載の音声処理装置において、 人の演奏音の情報からビブラートがかかっている音階の
ピッチ変化と振幅変化の情報であるビブラート情報を抽
出する抽出手段と、 前記抽出手段が前記ビブラート情報を抽出した音階の関
連情報を少なくとも前記人の演奏音の情報から取得し、
前記音階のビブラート情報と対応づけて前記記憶手段に
記憶させるビブラート情報作成手段とをさらに有するこ
とを特徴とする音声処理装置。 - 【請求項１５】 人の演奏音のビブラートがかかってい
る音階のピッチ変化と振幅変化の情報であるビブラート
情報をその音階の関連情報と対応づけて記憶する記憶手
段と、 前記ビブラート情報に基づいてビブラートをかける処理
を行って演奏情報に対応する音声信号を生成する音声処
理手段と、 前記音声処理手段により生成された前記音声信号を出力
する出力手段とを備えることを特徴とする音声処理装
置。 - 【請求項１６】 請求項１１ないし１５のいずれかに記
載の音声処理装置において、 前記音階の関連情報は、当該音階と、前記人の演奏音に
おける少なくとも当該音階の前または後ろの音階、当該
音階の長さ、演奏曲のジャンル、演奏者の情報、楽器の
情報のうち１以上を含む情報であることを特徴とする音
声処理装置。 - 【請求項１７】 請求項１１ないし１６のいずれかに記
載の音声処理装置において、 前記演奏情報は、ＭＩＤＩデータであることを特徴とす
る音声処理装置。 - 【請求項１８】 人の演奏音の情報からビブラートがか
かっている音階のピッチ変化と振幅変化の情報であるビ
ブラート情報を抽出する抽出手段と、 前記抽出手段が前記ビブラート情報を抽出した音階の関
連情報を少なくとも前記人の演奏音の情報から取得し、
前記音階のビブラート情報と対応づけるビブラート情報
作成手段とを備えることを特徴とする音声処理装置。 - 【請求項１９】 請求項１１ないし１８のいずれかに記
載の音声処理装置において、 前記ビブラート情報には、人の演奏音の弾き始めや弾き
終わり、音韻間におけるピッチ変化と振幅変化の情報が
含まれることを特徴とする音声処理装置。 - 【請求項２０】 請求項１ないし１９のいずれかに記載
の音声処理装置において、 前記ビブラート情報は、ベクトル量子化されて記憶され
たことを特徴とする音声処理装置。 - 【請求項２１】 歌唱情報からビブラートをかける所定
位置の音節を順次特定する処理対象特定ステップと、 人の歌唱音のビブラートがかかっている音節のピッチ変
化と振幅変化の情報であるビブラート情報をその音節の
関連情報と対応づけて記憶する記憶部の前記音節の関連
情報の中から前記処理対象特定ステップにおいて特定さ
れた音節の関連情報と同一または類似の音節の関連情報
を順次検索し、その中からいずれか一つを選択する選択
ステップと、 前記選択ステップにおいて選択された前記音節の関連情
報に対応づけられた前記ビブラート情報に基づいて、前
記特定した音に対してビブラートをかける処理を順次行
って前記歌唱情報に対応する音声信号を生成する音声処
理ステップと、 前記音声処理ステップにおいて処理された前記音声信号
を出力する出力ステップとを備えることを特徴とする音
声処理方法。 - 【請求項２２】 請求項２１に記載の音声処理方法にお
いて、 前記ビブラート情報には、人の歌唱音の歌い出しや歌い
終わり、音韻間におけるピッチ変化と振幅変化の情報が
含まれることを特徴とする音声処理方法。 - 【請求項２３】 演奏情報からビブラートをかける所定
位置の音階を順次特定する処理対象特定ステップと、 人の演奏音のビブラートがかかっている音階のピッチ変
化と振幅変化の情報であるビブラート情報をその音階の
関連情報と対応づけて記憶する記憶部の前記音階の関連
情報の中から前記処理対象特定ステップにおいて特定さ
れた音階の関連情報と同一または類似の音階の関連情報
を順次検索し、その中からいずれか一つを選択する選択
ステップと、 前記選択ステップにおいて選択された前記音階の関連情
報に対応づけられた前記ビブラート情報に基づいて、前
記特定した音階に対してビブラートをかける処理を順次
行って前記演奏情報に対応する音声信号を生成する音声
処理ステップと、 前記音声処理ステップにおいて処理された前記音声信号
を出力する出力ステップとを備えることを特徴とする音
声処理方法。 - 【請求項２４】 請求項２３に記載の音声処理方法にお
いて、 前記ビブラート情報には、人の演奏音の弾き始めや弾き
終わり、音韻間におけるピッチ変化と振幅変化の情報が
含まれることを特徴とする音声処理方法。 - 【請求項２５】 歌唱情報からビブラートをかける所定
位置の音節を順次特定し、 人の歌唱音のビブラートがかかっている音節のピッチ変
化と振幅変化の情報であるビブラート情報をその音節の
関連情報と対応づけて記憶する記憶部の前記音節の関連
情報の中から前記処理対象特定ステップにおいて特定さ
れた音節の関連情報と同一または類似の音節の関連情報
を順次検索してその中からいずれか一つを選択し、 前記選択した前記音節の関連情報に対応づけられた前記
ビブラート情報に基づいて、前記特定した音に対してビ
ブラートをかける処理を順次行って前記歌唱情報に対応
する音声信号を生成する音声処理のプログラムが記録さ
れたことを特徴とする情報記録媒体。 - 【請求項２６】 演奏情報からビブラートをかける所定
位置の音階を順次特定し、 人の演奏音のビブラートがかかっている音階のピッチ変
化と振幅変化の情報であるビブラート情報をその音階の
関連情報と対応づけて記憶する記憶部の前記音階の関連
情報の中から前記処理対象特定ステップにおいて特定さ
れた音階の関連情報と同一または類似の音階の関連情報
を順次検索してその中からいずれか一つを選択し、 前記選択した前記音階の関連情報に対応づけられた前記
ビブラート情報に基づいて、前記特定した音階に対して
ビブラートをかける処理を順次行って前記演奏情報に対
応する音声信号を生成する音声処理のプログラムが記録
されたことを特徴とする情報記録媒体。 - 【請求項２７】 音節のビブラート情報と音節の関連情
報を記録した情報記録媒体であって、 前記音節のビブラート情報は、 人の歌唱音から取得したビブラートがかかっている音節
のピッチ変化と振幅変化の情報であり、 前記音節の関連情報は、 前記人の歌唱音から取得した前記ビブラートがかかって
いる音節、少なくとも当該音節の前または後ろの音節、
当該音節に対応する音階、当該音節の前または後ろの音
節に対応する音階及び当該音節の長さのうち１以上を含
む情報と、 前記人の歌唱音における歌唱曲のジャンル、歌唱者の情
報のうち１以上を含む情報とであり、 前記音節の関連情報と前記音節のビブラート情報とがそ
れぞれ対応づけされて記録されていることを特徴とする
情報記録媒体。 - 【請求項２８】 音階のビブラート情報と音階の関連情
報を記録した情報記録媒体であって、 前記音階のビブラート情報は、 人の演奏音から取得したビブラートがかかっている音階
のピッチ変化と振幅変化の情報であり、 前記音階の関連情報は、 前記人の演奏音から取得した前記ビブラートがかかって
いる音階、少なくとも当該音階の前または後ろの音階及
び当該音階の長さのうち１以上を含む情報と、 前記人の演奏音における演奏曲のジャンル、演奏者の情
報のうち１以上を含む情報とであり、 前記音階の関連情報と前記音階のビブラート情報とがそ
れぞれ対応づけされて記憶されていることを特徴とする
情報記録媒体。 - 【請求項２９】 請求項２５または２７に記載の情報記
録媒体において、 前記ビブラート情報には、人の歌唱音の歌い出しや歌い
終わり、音韻間におけるピッチ変化と振幅変化の情報が
含まれることを特徴とする情報記録媒体。 - 【請求項３０】 請求項２６または２８に記載の情報記
録媒体において、 前記ビブラート情報には、人の演奏音の弾き始めや弾き
終わり、音韻間におけるピッチ変化と振幅変化の情報が
含まれることを特徴とする情報記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000258034A JP3716725B2 (ja) | 2000-08-28 | 2000-08-28 | 音声処理装置、音声処理方法および情報記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000258034A JP3716725B2 (ja) | 2000-08-28 | 2000-08-28 | 音声処理装置、音声処理方法および情報記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002073064A true JP2002073064A (ja) | 2002-03-12 |
| JP3716725B2 JP3716725B2 (ja) | 2005-11-16 |
Family
ID=18746402
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000258034A Expired - Fee Related JP3716725B2 (ja) | 2000-08-28 | 2000-08-28 | 音声処理装置、音声処理方法および情報記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3716725B2 (ja) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004111993A1 (ja) * | 2003-06-13 | 2004-12-23 | Sony Corporation | 信号合成方法及び装置、歌声合成方法及び装置、プログラム及び記録媒体並びにロボット装置 |
| JP2006030610A (ja) * | 2004-07-16 | 2006-02-02 | Yamaha Corp | 音声合成用スクリプト生成装置、音声合成装置、音声合成用スクリプト生成プログラム及び音声合成プログラム |
| JP2006251451A (ja) * | 2005-03-11 | 2006-09-21 | Yamaha Corp | 歌データ入力プログラム |
| US7389231B2 (en) | 2001-09-03 | 2008-06-17 | Yamaha Corporation | Voice synthesizing apparatus capable of adding vibrato effect to synthesized voice |
| WO2008102594A1 (ja) * | 2007-02-19 | 2008-08-28 | Panasonic Corporation | 力み変換装置、音声変換装置、音声合成装置、音声変換方法、音声合成方法およびプログラム |
| EP2355092A1 (en) | 2009-12-04 | 2011-08-10 | Yamaha Corporation | Audio processing apparatus and method |
| JP2012037722A (ja) * | 2010-08-06 | 2012-02-23 | Yamaha Corp | 音合成用データ生成装置およびピッチ軌跡生成装置 |
| JP2013164609A (ja) * | 2013-04-15 | 2013-08-22 | Yamaha Corp | 歌唱合成用データベース生成装置、およびピッチカーブ生成装置 |
| JP2013195699A (ja) * | 2012-03-19 | 2013-09-30 | Yamaha Corp | 歌唱合成装置および歌唱合成プログラム |
| CN111105799A (zh) * | 2019-12-09 | 2020-05-05 | 国网浙江省电力有限公司杭州供电公司 | 基于发音量化和电力专用词库的离线语音识别装置及方法 |
-
2000
- 2000-08-28 JP JP2000258034A patent/JP3716725B2/ja not_active Expired - Fee Related
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7389231B2 (en) | 2001-09-03 | 2008-06-17 | Yamaha Corporation | Voice synthesizing apparatus capable of adding vibrato effect to synthesized voice |
| WO2004111993A1 (ja) * | 2003-06-13 | 2004-12-23 | Sony Corporation | 信号合成方法及び装置、歌声合成方法及び装置、プログラム及び記録媒体並びにロボット装置 |
| JP4622356B2 (ja) * | 2004-07-16 | 2011-02-02 | ヤマハ株式会社 | 音声合成用スクリプト生成装置及び音声合成用スクリプト生成プログラム |
| JP2006030610A (ja) * | 2004-07-16 | 2006-02-02 | Yamaha Corp | 音声合成用スクリプト生成装置、音声合成装置、音声合成用スクリプト生成プログラム及び音声合成プログラム |
| JP2006251451A (ja) * | 2005-03-11 | 2006-09-21 | Yamaha Corp | 歌データ入力プログラム |
| US8898062B2 (en) | 2007-02-19 | 2014-11-25 | Panasonic Intellectual Property Corporation Of America | Strained-rough-voice conversion device, voice conversion device, voice synthesis device, voice conversion method, voice synthesis method, and program |
| JPWO2008102594A1 (ja) * | 2007-02-19 | 2010-05-27 | パナソニック株式会社 | 力み変換装置、音声変換装置、音声合成装置、音声変換方法、音声合成方法およびプログラム |
| WO2008102594A1 (ja) * | 2007-02-19 | 2008-08-28 | Panasonic Corporation | 力み変換装置、音声変換装置、音声合成装置、音声変換方法、音声合成方法およびプログラム |
| EP2355092A1 (en) | 2009-12-04 | 2011-08-10 | Yamaha Corporation | Audio processing apparatus and method |
| US8492639B2 (en) | 2009-12-04 | 2013-07-23 | Yamaha Corporation | Audio processing apparatus and method |
| JP2012037722A (ja) * | 2010-08-06 | 2012-02-23 | Yamaha Corp | 音合成用データ生成装置およびピッチ軌跡生成装置 |
| US8916762B2 (en) | 2010-08-06 | 2014-12-23 | Yamaha Corporation | Tone synthesizing data generation apparatus and method |
| JP2013195699A (ja) * | 2012-03-19 | 2013-09-30 | Yamaha Corp | 歌唱合成装置および歌唱合成プログラム |
| JP2013164609A (ja) * | 2013-04-15 | 2013-08-22 | Yamaha Corp | 歌唱合成用データベース生成装置、およびピッチカーブ生成装置 |
| CN111105799A (zh) * | 2019-12-09 | 2020-05-05 | 国网浙江省电力有限公司杭州供电公司 | 基于发音量化和电力专用词库的离线语音识别装置及方法 |
| CN111105799B (zh) * | 2019-12-09 | 2023-07-07 | 国网浙江省电力有限公司杭州供电公司 | 基于发音量化和电力专用词库的离线语音识别装置及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3716725B2 (ja) | 2005-11-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6528715B1 (en) | Music search by interactive graphical specification with audio feedback | |
| JP3333022B2 (ja) | 歌声合成装置 | |
| JP4207902B2 (ja) | 音声合成装置およびプログラム | |
| CN112382257B (zh) | 一种音频处理方法、装置、设备及介质 | |
| CN109036355B (zh) | 自动作曲方法、装置、计算机设备和存储介质 | |
| JP2012103603A (ja) | 情報処理装置、楽曲区間抽出方法、及びプログラム | |
| Lindemann | Music synthesis with reconstructive phrase modeling | |
| JP3716725B2 (ja) | 音声処理装置、音声処理方法および情報記録媒体 | |
| JP3239897B1 (ja) | 作詞作曲装置及びプログラム | |
| WO2014142200A1 (ja) | 音声処理装置 | |
| JPH10207460A (ja) | 演奏設定データ選択装置、演奏設定データ選択方法及びプログラムを記録した媒体 | |
| JP3646680B2 (ja) | 作詞作曲装置及びプログラム | |
| JP4304934B2 (ja) | 合唱合成装置、合唱合成方法およびプログラム | |
| JP2003345400A (ja) | ピッチ変換装置、ピッチ変換方法及びプログラム | |
| JP4024440B2 (ja) | 曲検索システムのデータ入力装置 | |
| TW201027514A (en) | Singing synthesis systems and related synthesis methods | |
| JPH01288900A (ja) | 歌声伴奏装置 | |
| JP3752859B2 (ja) | 自動作曲装置と記録媒体 | |
| CN112951184B (zh) | 歌曲生成方法、装置、设备及存储介质 | |
| WO2023171522A1 (ja) | 音響生成方法、音響生成システムおよびプログラム | |
| JP2002221978A (ja) | ボーカルデータ生成装置、ボーカルデータ生成方法および歌唱音合成装置 | |
| US20230290325A1 (en) | Sound processing method, sound processing system, electronic musical instrument, and recording medium | |
| US20240005896A1 (en) | Music generation method and apparatus | |
| JP3775390B2 (ja) | 演奏設定データ選択装置、演奏設定データ選択方法及び記録媒体 | |
| JP3775386B2 (ja) | 演奏設定データ選択装置、演奏設定データ選択方法及び記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040706 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040713 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040913 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050308 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050509 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050809 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050822 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313532 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090909 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100909 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100909 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110909 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120909 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130909 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |