JPH086577A

JPH086577A - カラオケ装置

Info

Publication number: JPH086577A
Application number: JP6141405A
Authority: JP
Inventors: Yasuhiro Hirano; 裕弘平野; Masanori Maruyama; 優徳丸山
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 1994-06-23
Filing date: 1994-06-23
Publication date: 1996-01-12

Abstract

(57)【要約】【構成】カラオケの映像に、歌詞と楽譜、あるいは歌詞
と音程グラフィックスとを同時に表示する機能を設け
た。また、曲のメロディーとの音程のずれなどを表示す
る歌唱診断の機能を設けた。また、ユーザの声域に合せ
てカラオケの演奏を調整する自動調節の機能を設けた。【効果】予備知識がない曲も無理なく歌え、曲の不得意
な部分を明示するので上達が速く、自分の音域に合った
演奏で思いどおりに歌うことができる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、カラオケ装置に係り、
特に、曲の歌詞と可視化した演奏情報を背景映像に合成
したカラオケの映像を表示する機能や、音声認識技術を
用いた歌唱診断の機能を有し、ユーザの使いやすいカラ
オケ装置に関する。

【０００２】

【従来の技術】従来のカラオケ装置では、ユーザが歌い
やすい様に、カラオケの歌詞をメロディーに同期して色
変わりして表示する機能や、音程を調節する機能などが
備えられている。これらの機能は、ユーザがメロディー
や、自分の歌える音域を良く知っている場合には有効な
ものである。

【０００３】しかし、ユーザがメロディーの音程や速度
などの演奏データに関する予備知識を持っていない場合
や、カラオケの音程をどれだけ変えれば自分が最も歌い
やすくなるかをあらかじめ知っていない場合には、これ
らの機能を有効に使いこなすことができないという問題
を有する。

【０００４】

【発明が解決しようとする課題】本発明の目的は、ユー
ザの予備知識が少ない曲でも無理なく歌うことができ、
また、正しく歌えているかどうかの診断も可能で、ユー
ザの使いやすいカラオケ装置を提供することにある。

【０００５】

【課題を解決するための手段】上記目的を達成するた
め、本発明では、曲の歌詞と、可視化した演奏情報、す
なわち、メロディーの楽譜、あるいはメロディーの音程
グラフィックスとを背景映像に合成し、これをカラオケ
の映像として表示する手段を採用した。

【０００６】また、楽器の演奏情報をディジタル信号を
用いて通信するために定められたＭＩＤＩ規格に準拠し
たＭＩＤＩ信号より、可視化した演奏情報を生成する手
段，カラオケを演奏する手段を採用した。

【０００７】また、音声分析，音声比較などの音声認識
技術で音程のずれ量を検出し、この結果を可視化データ
として表示する歌唱診断の手段、この結果で音程を制御
する自動調節の手段を採用した。

【０００８】さらに、カラオケのソフト素材は、カラオ
ケＣＤ規格、あるいはグラフィックスＣＤ規格のＣＤ−
ＲＯＭ媒体、もしくは、ディジタル音声付ＬＤ規格のＬ
Ｄ−ＲＯＭ媒体に記録する手段を採用した。

【０００９】

【作用】本発明では、カラオケの映像は、図１に示す様
に、曲の歌詞とメロディーの楽譜とを併せて表示する。
また、図２に示す様に、曲の歌詞とメロディーの音程を
可視化した音程グラフィックスとを併せて表示する。し
たがって、ユーザは曲の予備知識がなくても、表示した
楽譜や音程グラフィックスでメロディーが把握できるの
で、無理なく上手に歌うことが可能になる。

【００１０】また、ＭＩＤＩ信号を使用することで、楽
譜や音符のグラフィック化や、演奏データの生成や、音
源のＭＩＤＩ対応楽器の駆動，音程の変更，演奏速度の
変更などの処理が、コンピュータプログラムによって簡
単に実現できる。また、音声認識技術の音声比較の処理
では、比較の基準信号にＭＩＤＩ信号を用いて、音程の
ずれ量を高精度に検出できる。

【００１１】さらに、音程のずれ量を可視化して表示す
る歌唱診断の手段によって、ユーザは曲の不得意な部分
が正確に把握できるので、効率のよい練習を行うことが
できる。

【００１２】また、本発明によるカラオケのソフト素材
は、いずれも規格に準拠した信号フォーマットでＣＤ−
ＲＯＭ媒体やＬＤ−ＲＯＭ媒体に記録するので、このソ
フト素材は従来のカラオケ装置で使用することもでき
る。

【００１３】

【実施例】図３ないし図５は、カラオケＣＤ規格のＣＤ
−ＲＯＭ媒体に記録したカラオケのソフト素材を用いた
本発明の一実施例である。

【００１４】図３は、ソフト制作工程のブロック図であ
る。ＣＰＵ部１は、ＭＩＤＩ規格に準拠したディジタル
信号により楽器の演奏情報や歌詞のデータを生成し、MI
DIコントロール部２にデータを蓄積する。そして、グラ
フィックス化する楽譜や歌詞のデータＣＶをグラフィッ
ク制御部３，カラオケの演奏を行うための演奏データＣ
ＡをＭＩＤＩ音源部４に供給する。

【００１５】グラフィック制御部３は、データＣＶで指
定される文字や図形に変換し、可視化した歌詞や楽譜の
ビデオ信号Ｖ２を生成する。そして、ＭＩＸ部６でソー
スビデオ部５の背景映像のビテオ信号Ｖ１とミックスし
て、図１，図２に示した様なカラオケの映像信号ＶＳを
生成する。一方、ＭＩＤＩ音源部４は演奏データＣＡで
音源モジュールを駆動して、カラオケの演奏信号ＡＳを
生成する。なお、データＣＶは、例えば、歌詞の表示を
楽譜データ形式でつくることによって、歌詞の表示や消
去や色変わりなどのタイミングがメロディーに同期して
行うことができる。

【００１６】カラオケの映像信号ＶＳは、画像フォーマ
ット変換部７で、カラオケＣＤ規格のビデオフォーマッ
トの信号Ｖ３に変換し、ビデオ符号化部８では所定のビ
デオＭＰＥＧ符号化処理した符号化データ信号Ｖ４を生
成し、バッファ部９に蓄積する。

【００１７】カラオケの演奏信号ＡＳは、オーディオ符
号化部１０で所定のオーディオMPEG符号化処理した符号
化データ信号Ａ１を生成し、バッファ部１１に蓄積す
る。

【００１８】ＭＰＸ部１２は、バッファ部９，１１より
読み出したビデオ符号化データ信号Ｖ５とオーディオ符
号化データ信号Ａ２を時分割に多重化してＡＶストリー
ムを生成し、情報エリアに情報ファイルを付加してマス
ター信号ＶＡＤを生成する。そして、ＣＤ−ＲＯＭ媒体
１３にこの信号を記録する。

【００１９】図４は、カラオケ装置の第一の実施例のブ
ロック図である。ＣＤ−ＲＯＭ媒体１３より再生したマ
スター信号ＶＡＤは、ＤＭＰＸ部１４で、ビデオ符号化
データ信号Ｖ５とオーディオ符号化データ信号Ａ２を分
離し、バッファ部１５，１９に蓄積する。

【００２０】バッファ部１５より読み出したビデオ符号
化データ信号Ｖ４は、ビデオ復号化部１６で所定のビデ
オＭＰＥＧ復号化処理し、カラオケＣＤ規格のビデオフ
ォーマットの信号Ｖ３を復号する。フォーマット変換部
１７は、画像のフォーマット変換処理を行い、画像表示
部１８のフォーマットの映像信号ＶＳを生成する。そし
て、カラオケの映像を画像表示部１８に表示する。

【００２１】バッファ部１９で読み出したオーディオ符
号化データＡ１は、オーディオ復号化部２０で所定のオ
ーディオＭＰＥＧ復号化処理を行い、カラオケの演奏信
号ＡＳを再生する。ＭＩＸ部２１では、マイク部２３で
収音したマイク音声信号ＭＡをミックスする処理を行
い、その出力信号Ａ３をスピーカ部２２に供給する。

【００２２】図５は、カラオケ装置の第二の実施例のブ
ロック図である。ＣＤ−ＲＯＭ媒体１３より再生したマ
スター信号ＶＡＤは、ＤＭＰＸ部１４で、ビデオ符号化
データ信号Ｖ５とオーディオ符号化データ信号Ａ２とを
分離し、バッファ部１５，１９に蓄積する。

【００２３】バッファ部１５の出力信号Ｖ４は、ビデオ
復号化部１６で所定のビデオMPEG復号化処理を行い、カ
ラオケＣＤ規格のビデオフォーマットの信号Ｖ３を復号
する。フォーマット変換部１７は、画像表示部１８の画
像フォーマットの信号に変換する信号処理を行い、カラ
オケの映像信号ＶＳを生成する。画像処理部２４は、Ｔ
Ｖカメラ２５で撮影したユーザの姿などの映像信号Ｖ６
を、スーパーインポーズ機能や映像ミキサの機能で、カ
ラオケの映像信号と合成し、合成信号Ｖ７を画像表示部
１８に表示する。

【００２４】バッファ部１９の出力信号Ａ１は、オーデ
ィオ復号化部２０で所定のオーディオＭＰＥＧ復号化処
理を行い、カラオケの演奏信号ＡＳを再生する。一方、
マイク部２３で収音したユーザのマイク音声信号ＭＡ
は、音声処理部２６で音質や音程を変える、あるいはエ
コーをかけるなどのエフェクトを加え、信号Ａ４を生成
する。そして、ＭＩＸ部２１で、カラオケの演奏信号Ａ
Ｓとミックスする処理を行い、その出力信号Ａ３をスピ
ーカ部２２に供給する。

【００２５】以上の実施例では、カラオケの映像に、曲
の歌詞とメロディーの楽譜、あるいは、曲の歌詞とメロ
ディーの音程グラフィックスが表示できる。また、歌詞
や、楽譜の音符や、音程グラフィックスの音符は、メロ
ディーに同期して、表示や消去や色変わりを行うことが
できる。したがって、ユーザは曲の予備知識がなくて
も、無理なく上手に歌うことができ、ユーザの使いやす
いカラオケ装置を実現することができる。

【００２６】次に、ディジタル音声付ＬＤ規格のＬＤ−
ＲＯＭ媒体に記録したカラオケのソフト素材を用いた本
発明の一実施例を、図６ないし図９で説明する。

【００２７】図６は、ソフト制作工程のブロック図であ
る。ＣＰＵ部１は、ＭＩＤＩ規格に準拠したディジタル
信号により楽器の演奏情報や歌詞のデータを生成し、MI
DIコントロール部２にこのデータを蓄積する。そして、
グラフィック化する楽譜や歌詞のデータＣＶと、カラオ
ケの演奏を行うための演奏データＣＡとを、所定のタイ
ミングで送出する。なお、データＣＶは、例えば、歌詞
の表示を楽譜データ形式でつくることによって、表示画
像での歌詞の表示や消去や色変わりなどのタイミングを
メロディーに同期して行うことができる。

【００２８】ＭＩＤＩ音源部４は、演奏データＣＡで音
源モジュールを駆動し、カラオケの演奏信号ＡＳを生成
する。一方、ソースビデオ部５はカラオケの背景映像の
ビデオ信号Ｖ１を生成する。

【００２９】ＦＭ変調部２７は、ビデオ信号Ｖ１をＦＭ
変調し、同図に示すビデオエリア帯の信号Ｖ１０を生成
する。また、ＦＭ変調部２８は、カラオケの演奏信号Ａ
ＳをＦＭ変調し、同図に示すオーディオエリア帯のステ
レオ２チャネル信号Ａ１０を生成する。

【００３０】多重部２９は、信号Ｖ１０と、Ａ１０と、
データＣＶとを多重してディジタル音声付ＬＤ規格のマ
スタ信号ＶＡＳを生成する。なお、デイジタル信号のデ
ータＣＶは、同図に示すディジタル音声エリア帯に配置
する。そして、マスタ信号ＶＡＳはＬＤ−ＲＯＭ媒体３
０に記録する。

【００３１】図７は、カラオケ装置の第三の実施例のブ
ロック図である。

【００３２】ＬＤ−ＲＯＭ媒体３０で再生したマスタ信
号ＶＡＳは、分離部３１に入力し、ビデオエリア帯の信
号Ｖ１０と、オーディオエリア帯の信号Ａ１０と、ディ
ジタル音声エリア帯の信号ＣＶとを分離する。

【００３３】ＦＭ復調部３２は、所定のＦＭ復調処理を
行い、カラオケの背景映像のビデオ信号Ｖ１を復調す
る。また、ＦＭ復調部３３は、所定の復調処理を行い、
カラオケの演奏信号ＡＳを復調する。また、グラフィッ
ク制御部３は、データＣＶで指定された文字や図形に変
換する処理を行い、可視化した歌詞や楽譜のビデオ信号
Ｖ２を生成する。

【００３４】ＭＩＸ部６は、ビデオ信号Ｖ１とＶ２を、
スーパーインポーズあるいは映像ミキシングの処理で合
成し、カラオケの映像信号ＶＳを生成する。そして、画
像表示部１８に、図１あるいは図２に示す様な画像を表
示する。

【００３５】ＭＩＸ部２１は、マイク部２３で収音した
ユーザのマイク音声信号ＭＡとカラオケの演奏信号ＡＳ
をミキシングし、その出力信号Ａ３をスピーカ部２２に
供給する。

【００３６】図８は、カラオケ装置の第四の実施例のブ
ロック図である。

【００３７】ＬＤ−ＲＯＭ媒体３０で再生したマスタ信
号ＶＡＳは、分離部３１に入力し、ビデオエリア帯の信
号Ｖ１０と、オーディオエリア帯の信号Ａ１０と、ディ
ジタル音声エリア帯の信号ＣＶとを分離する。

【００３８】ＦＭ復調部３２は、所定のＦＭ復調処理を
行い、カラオケの背景映像のビデオ信号Ｖ１を復調す
る。ＦＭ復調部３３は、所定の復調処理を行い、カラオ
ケの演奏信号ＡＳを復調する。また、グラフィックス制
御部３は、データＣＶで指定された文字や図形に変換す
る処理を行い、可視化した歌詞や楽譜のビデオ信号Ｖ２
を生成する。

【００３９】画像処理部３４は、ビデオＶ１，Ｖ２，Ｔ
Ｖカメラ２５で撮影したユーザの姿などの映像信号Ｖ
６、および、後述する歌唱診断の結果を可視化した信号
Ａ１４を、スーパーインポーズや映像ミキシングの処理
で合成し、カラオケの映像信号ＶＳを生成する。そし
て、画像表示部１８に、図１や図２に示す様な、歌詞と
楽譜あるいは歌詞と音程グラフィックスを合成した画
像、あるいは図９に示す様な歌唱診断結果を合成した画
像などを表示する。

【００４０】音声ＭＩＸ部３５は、マイク部２３で収音
したユーザのマイク音声信号ＭＡとカラオケの演奏信号
ＡＳとのミキシング処理を行う。なお、信号ＭＡの音質
や音程を変えたり、エコーをかけるなどのエフェクト処
理も併せて行う。そして、出力信号Ａ３をスピーカ部２
２に供給する。

【００４１】歌唱診断の機能は、ＡＤＣ３６と、音声分
析部３７と、音声比較部３８と、グラフィックス制御部
３９との組み合せで実現する。マイク音声信号ＭＡは、
ＡＤＣ３６でＡＤ変換処理を行い、ディジタルの信号に
変換する。音声分析部３７は、例えば、ウェーブレット
解析の手法などでマイク音声信号の周波数成分を分析
し、ユーザの帯域信号Ａ１１を出力する。音声比較部３
８は、データＣＶのメロディーの楽譜データから算出し
た正規の音域と、ユーザの声域信号Ａ１１との比較を行
い、正規の音程からのずれ量を示す信号Ａ１３を生成す
る。そして、グラフィックス制御部３９は、例えば、図
９に示す様なグラフ図形への変換処理を行い、歌唱診断
の結果を可視化した信号Ａ１４を生成する。この信号Ａ
１４は、プリンタ４０に供給し、歌唱診断の結果を印字
して出力することもできる。

【００４２】なお、画像表示部１８で表示する画像は、
ユーザの指定により、例えば歌詞と楽譜の合成画像や、
歌唱診断結果の合成画像や、両者を合併した合成画像な
ど、種々のものを呈示できる。

【００４３】この様に、本実施例では、カラオケの映像
に、曲の歌詞とメロディーの楽譜、あるいは、曲の歌詞
とメロディーの音程グラフィックスが表示できる。ま
た、歌詞や、楽譜の音符や、音程グラフィックスの音符
は、メロディーに同期した表示や消去や色変わりを行う
ことができる。このため、ユーザは曲の予備知識がなく
ても、無理なく上手に歌うことができる。さらに、歌唱
診断の機能で、ユーザは曲の不得意な部分を正確に把握
できるので、上達が速く、効率よい練習を行うことがで
きる。そして、ユーザの使いやすいカラオケ装置を実現
することができる。

【００４４】次に、グラフィックスＣＤ規格のＣＤ−Ｒ
ＯＭ媒体に記録したカラオケのソフト素材を用いた本発
明の一実施例を、図１０ないし図１３と表１で説明す
る。

【００４５】図１０は、ソフト制作工程のブロック図で
ある。ＣＰＵ部１は、ＭＩＤＩ規格に準拠したディジタ
ル信号により楽器の演奏情報や歌詞のデータを生成し、
このデータ信号ＣＡＶをＤＳＭ４１のディジタルストレ
ージメディアに記憶する。なお、グラフィック化する楽
譜や歌詞のデータは、例えば、楽譜データ形式でつくる
ことによって、表示画像での歌詞の表示や消去や色変わ
りなどのタイミングをメロディーに同期して行うことが
できる。

【００４６】データ処理部４２は、ＤＳＭ４１より読み
出したディジタルデータＤ１で、グラフィックスＣＤ規
格のデータストリームを生成し、情報エリアに情報ファ
イルを付加して、マスタ信号Ｄ２を生成し、ＣＤ−ＲＯ
Ｍ媒体４３に記録する。

【００４７】図１１は、カラオケ装置の第五の実施例の
ブロック図である。

【００４８】ＣＤ−ＲＯＭ媒体４３で再生したマスタ信
号Ｄ２は、ＭＩＤＩコントロール部２に蓄積する。そし
て、ＣＰＵ部５０からの制御信号で、グラフィック化す
る楽譜や歌詞のデータＣＶと、カラオケの演奏を行うた
めの演奏データＣＡとを、所定のタイミングで送出す
る。

【００４９】グラフィック制御部３は、データＣＶで指
定された文字や図形に変換する処理を行い、可視化した
歌詞や楽譜のビデオ信号Ｖ２を生成する。画像処理部２
４は、ソースビデオ部５のカラオケの背景映像のビデオ
信号Ｖ１と、ビデオ信号Ｖ２とを、スーパーインポーズ
や映像ミキシングの処理で合成し、カラオケの映像信号
ＶＳを生成する。そして、画像表示部１８に、図１や図
２に示す様な、歌詞と楽譜、あるいは歌詞と音程グラフ
ィックスを合成した画像を表示する。

【００５０】ＭＩＤＩ音源部４は、演奏データＣＡで音
源モジュールを駆動し、カラオケの演奏信号ＡＳを生成
する。ＭＩＸ部２１は、マイク部２３で収音したユーザ
のマイク音声信号ＭＡと、カラオケの演奏信号ＡＳとを
ミキシングし、その出力信号Ａ３をスピーカ部２２に供
給する。

【００５１】図１２は、カラオケ装置の第六の実施例の
ブロック図である。

【００５２】ＣＤ−ＲＯＭ媒体４３で再生したマスタ信
号Ｄ２は、ＭＩＤＩコントロール部２に蓄積する。そし
て、ＣＰＵ部５０からの制御信号で、グラフィック化す
る楽譜や歌詞のデータＣＶと、カラオケの演奏を行うた
めの演奏データＣＡとを、所定のタイミングで送出す
る。

【００５３】グラフィック制御部３は、データＣＶで指
定された文字や図形に変換する処理を行い、可視化した
歌詞や楽譜のビデオ信号Ｖ２を生成する。

【００５４】画像処理部３４は、ソースビデオ部５のカ
ラオケの背景映像のビデオ信号Ｖ１，ＴＶカメラ２５で
撮影したユーザの姿などの映像信号Ｖ６，後述する歌唱
診断の結果を可視化した信号Ａ１４、およびビデオ信号
Ｖ２を、スーパーインポーズや映像ミキシングの処理で
合成し、カラオケの映像信号ＶＳを生成する。そして、
画像表示部１８に、図１や図２に示す様な、楽譜や音程
グラフィックスを合成した画像、あるいは、図９に示す
様な歌唱診断結果を合成した画像などを表示する。

【００５５】ＭＩＤＩ音源部４は、演奏データＣＡで音
源モジュールを駆動し、カラオケの演奏信号ＡＳを生成
する。音声ＭＩＸ部３５は、マイク部２３で収音したユ
ーザのマイク音声信号ＭＡと、カラオケの演奏信号ＡＳ
とのミキシング処理を行う。なお、信号ＭＡの音質や音
程を変えたり、エコーをかけるなどのエフェクト処理も
併せて行う。そして、この出力信号Ａ３をスピーカ部２
２に供給する。

【００５６】歌唱診断の機能は、ＡＤＣ３６と、音声分
析部３７と、音声比較部３８と、グラフィックス制御部
３９との組み合せで実現する。マイク音声信号ＭＡは、
ＡＤＣ３６でＡＤ変換処理を行い、ディジタルの信号に
変換する。音声分析部３７は、例えば、ウェーブレット
解析の手法などでマイク音声信号の周波数成分を分析
し、ユーザの声域信号Ａ１１を出力する。音声比較部３
８は、データＣＶのメロディーの音譜データから算出し
た正規の音域と、ユーザの声域信号Ａ１１との比較を行
い、正規の音程からのズレ量を示す信号Ａ１３を生成す
る。そして、グラフィックス制御部３９は、例えば、図
９に示す様なグラフ図形への変換処理を行い、歌唱診断
の結果を可視化した信号Ａ１４を生成する。この信号
は、プリンタ４０に供給して、歌唱診断の結果を印字し
て出力することもできる。

【００５７】また、画像表示部１８で表示する画像は、
ユーザの指定により、例えば歌詞と楽譜の合成画像や、
歌唱診断結果の合成画像や、両者を合併した合成画像な
ど、種々のものを呈示できる。

【００５８】図１３は、カラオケ装置の第七の実施例の
ブロック図である。

【００５９】ＣＤ−ＲＯＭ媒体４３で再生したマスタ信
号Ｄ２は、ＭＩＤＩコントロール部２に蓄積する。そし
て、ＣＰＵ部５０からの制御信号で、グラフィック化す
る楽譜や歌詞のデータＣＶと、カラオケの演奏を行うた
めの演奏データＣＡとを、所定のタイミングで送出す
る。なお、後述する様に、ＣＰＵ部５０は、調節信号Ｃ
Ｔに応じて、演奏データＣＡの送出速度や音程を変える
制御も併せて行い、自動調節の機能を実現する。

【００６０】グラフィック制御部３は、データＣＶで指
定された文字や図形に変換する処理を行い、可視化した
歌詞や楽譜のビデオ信号Ｖ２を生成する。

【００６１】画像処理部３４は、ソースビデオ部５のカ
ラオケの背景映像のビデオ信号Ｖ１，ＴＶカメラ２５で
撮影したユーザの姿などの映像信号Ｖ６，後述する歌唱
診断の結果を可視化した信号Ａ１４、およびビデオ信号
Ｖ２を、スーパーインポーズや映像ミキシングの処理で
合成し、カラオケの映像信号ＶＳを生成する。そして、
画像表示部１８に、図１や図２に示す様な楽譜や音程グ
ラフィックスを合成した画像、あるいは、図９に示す様
な歌唱診断結果を合成した画像などを表示する。

【００６２】ＭＩＤＩ音源部４は、演奏データＣＡで音
源モジュールを駆動し、カラオケの演奏信号ＡＳを生成
する。音声ＭＩＸ部３５は、マイク部２３で収音したユ
ーザのマイク音声信号ＭＡと、カラオケの演奏信号ＡＳ
とのミキシング処理や、マイク音声信号ＭＡの音質や音
程を変えたり、エコーをかけるなどのエフェクト処理を
行う。なお、後述する様に、調節信号ＣＴで、これら処
理でのパラメータ、例えば、混合比などを変化させ、自
動調節の機能を実現する。そして、この出力信号Ａ３を
スピーカ部２２に供給する。

【００６３】歌唱診断と自動調節の機能は、ＡＤＣ３６
と、音声分析部３７と、音声比較部３８と、グラフィッ
クス制御部３９と、音声ＡＩ制御部４４との組み合せで
実現する。マイク音声信号ＭＡは、ＡＤＣ３６でＡＤ変
換処理を行い、ディジタルの信号に変換する。音声分析
部３７は、例えば、ウェーブレット解析の手法などでマ
イク音声信号の周波数成分を分析し、ユーザの声域信号
Ａ１１を出力する。音声比較部３８は、データＣＶのメ
ロディーの楽譜データから算出した正規の音域と、ユー
ザの声域信号Ａ１１との比較を行い、正規の音程からの
ずれ量を示す信号Ａ１３を生成する。そして、グラフィ
ックス制御部３９で、例えば図９に示す様なグラフ図形
への変換処理を行い、歌唱診断の結果を可視化した信号
Ａ１４を生成する。この信号は、プリンタ４０で印字し
て出力することもできる。また、画像表示部１８に表示
することもできる。

【００６４】一方、音声ＡＩ制御部４４は、データＣＶ
のメロディーの楽譜データから算出した正規の音域と、
ユーザの声域信号Ａ１１との比較より、カラオケの演奏
信号ＡＳの補正、例えば、演奏速度や音程の補正、ある
いはミキシングの混合比の補正に必要な調節信号ＣＴを
生成する。そして、ＣＰＵ部５０，音声ＭＩＸ部３５で
は、この調節信号ＣＴに応じて、演奏速度や音程やミキ
シングの混合比を補正し、自動調節の機能を実現する。

【００６５】表１は、自動調整メニューの一例表であ
る。

【００６６】

【表１】

【００６７】ユーザの声域に合せて歌いやすい音程に設
定する音程域自動設定，ユーザの歌声に合せた速度でカ
ラオケの演奏を行う音程速度自動補正，ユーザの音量に
合せてカラオケの音量を調整するメロディー音量自動補
正，周囲環境の状況で音質や音程を変える音声特殊エフ
ェクト、などの機能を実現する。なお、これらの機能
は、ユーザの指定で選択することができる。

【００６８】この様に、本実施例では、カラオケの映像
に、曲の歌詞とメロディーの楽譜、あるいは曲の歌詞と
メロディーの音程グラフィックスが表示できる。また、
歌詞や、楽譜，音程グラフィックスの音符は、メロディ
ーに同期した表示や消去や色変わりを行うことができ
る。このため、ユーザは曲の予備知識がなくても、無理
なく上手に歌うことが可能になる。さらに、歌唱診断の
機能でユーザは曲の不得意な部分を的確に把握できるた
め、上達の速い効率のよい練習を行うことが可能にな
る。また、自動調節の機能でユーザは自分の声域に合っ
たカラオケの演奏で歌うことができるため、思いどおり
に歌うことが可能になる。そして、ユーザの使いやすい
カラオケ装置を実現することができる。

【００６９】次に、本発明のカラオケ装置のシステム構
成の一例を、図１４と図１５により説明する。

【００７０】図１４は、ＴＶ受像機に接続して、カラオ
ケの映像と演奏とを行うに好適なシステム構成である。

【００７１】カラオケプレーヤ４５は、前述した第一な
いし第七の実施例のカラオケ装置に相当し、ＣＤ−ＲＯ
Ｍ媒体やＬＤ−ＲＯＭ媒体などに記録したカラオケのソ
フト素材により、カラオケの映像信号と演奏信号を再生
する。そして、映像信号はＴＶ受像機４６のビデオ入力
端子、演奏信号は音声入力端子に接続し、ＴＶ受像機で
映像と演奏を再生する。ＴＶカメラ４７でユーザの姿な
どを撮影した映像信号Ｖ６と、マイク４８で収音したユ
ーザのマイク音声信号ＭＡは、カラオケプレーヤ４５に
入力し、ミキシング処理の信号に使用する。

【００７２】本実施例によれば、家庭のＴＶ受像機にカ
ラオケプレーヤを接続して、気軽にカラオケを楽しむこ
とができる。

【００７３】図１５は、カラオケの映像を複数個の画像
表示部で呈示して楽しむに好適なシステム構成である。

【００７４】カラオケプレーヤ４５は、第三ないし第七
の実施例のカラオケ装置に相当し、ＣＤ−ＲＯＭ媒体や
ＬＤ−ＲＯＭ媒体などに記録したカラオケのソフト素材
により、カラオケの映像信号と演奏信号を再生する。

【００７５】ＴＶ受像機４６には、カラオケの背景映像
のビデオ信号Ｖ１、あるいは、ＴＶカメラ４７で撮影し
たユーザの姿などの映像信号Ｖ６をスーパーインポーズ
や映像ミキシングで合成した映像信号を、ビデオ入力端
子に入力する。また、カラオケの演奏信号を音声入力端
子に入力する。そして、歌詞や楽譜などがない画像と演
奏とを再生する。

【００７６】一方、歌詞画像表示ユニット４９では、例
えば、液晶パネルなどのディスプレー上に可視化した歌
詞や楽譜のビデオ信号Ｖ２を表示する。したがって、表
示部では譜面に相当した画像が呈示でき、ユーザはあた
かも譜面をみながら曲を歌うことができる。

【００７７】ＴＶカメラ４７で撮影したユーザの姿など
の映像信号Ｖ６と、マイク４８で収音したユーザのマイ
ク音声信号ＭＡは、カラオケプレーヤ４５に入力し、ミ
キシング処理の信号に使用する。

【００７８】本実施例によれば、ユーザはあたかも譜面
をみながら曲を歌うことができるので、簡単なシステム
構成で、本格的なカラオケを楽しむことができる。

【００７９】なお、実施例の説明では、カラオケのソフ
ト素材はＣＤ−ＲＯＭ媒体やＬＤ−ＲＯＭ媒体に記録す
る例について述べたが、本発明はこれに限定されること
はなく、磁気テープや磁気ディスクやＩＣメモリなどの
種々の蓄積媒体によって実現することができる。

【００８０】また、可視化した歌詞や楽譜の形態は、図
１や図２に示したものの他にも、例えば、楽譜や音程の
音符部分に歌詞を表示するなど、様々な表現形態で実現
することができる。

【００８１】

【発明の効果】本発明によれば、カラオケの映像に曲の
歌詞と、楽譜あるいは音程グラフィックスを表示するた
め、曲の予備知識がないユーザも無理なく上手に歌うこ
とができる。また、歌唱診断の機能でユーザは曲の不得
意な部分を把握でき、上達の速い効率のよい練習ができ
る。さらに、自動調節の機能で、ユーザは自分の声域に
合ったカラオケの演奏で思いどおりに歌うことができ
る。そして、ユーザにとって極めて使いやすいカラオケ
装置が実現できる。

【図面の簡単な説明】

【図１】本発明における第一の画像表示の説明図。

【図２】本発明における第二の画像表示の説明図。

【図３】本発明のソフト制作工程の第一の実施例のブロ
ック図。

【図４】本発明のカラオケ装置の第一の実施例のブロッ
ク図。

【図５】本発明のカラオケ装置の第二の実施例のブロッ
ク図。

【図６】本発明のソフト制作工程の第二の実施例図。

【図７】本発明のカラオケ装置の第三の実施例のブロッ
ク図。

【図８】本発明のカラオケ装置の第四の実施例のブロッ
ク図。

【図９】第四の実施例における診断結果表示の説明図。

【図１０】本発明のソフト制作工程の第三の実施例のブ
ロック図。

【図１１】本発明のカラオケ装置の第五の実施例のブロ
ック図。

【図１２】本発明のカラオケ装置の第六の実施例のブロ
ック図。

【図１３】本発明のカラオケ装置の第七の実施例のブロ
ック図。

【図１４】本発明のカラオケ装置の第一のシステムの説
明図。

【図１５】本発明のカラオケ装置の第二のシステムの説
明図。

【符号の説明】

１…ＣＰＵ部、２…ＭＩＤＩコントロール部、３…グラ
フィック制御部、４…ＭＩＤＩ音源部、５…ソースビデ
オ部、６…ＭＩＸ部、７…画像フォーマット変換部、８
…ビデオ符号化部、９，１１…バッファ部、１０…オー
ディオ符号化部。

Claims

【特許請求の範囲】

【請求項１】曲の歌詞と、メロディーの楽譜とを、曲の
演奏データにリンクして、画像表示部に表示することを
特徴とするカラオケ装置。
【請求項２】曲の歌詞と、メロディーの音程データを可
視化した音程グラフィックスとを、曲の演奏データにリ
ンクして、画像表示部に表示することを特徴とするカラ
オケ装置。
【請求項３】請求項１または２において、前記曲の演奏
データとタイミングの一致する歌詞データの領域を、色
変わりなどの可視手段で明示するカラオケ装置。
【請求項４】請求項１において、曲の演奏データとタイ
ミングの一致するメロディーの楽譜の音符領域を、色変
わりなどの可視手段で明示するカラオケ装置。
【請求項５】請求項２において、曲の演奏データとタイ
ミングの一致するメロディーの音程グラフィックスの領
域を、色変わりなどの可視手段で明示するカラオケ装
置。
【請求項６】請求項１，２，３，４または５において、
歌手の声域と、曲のメロディーの音程データとの比較で
音程のずれ量を検出する手段と、前記音程のずれ量を可
視化データに変換するグラフィック処理の手段とを設
け、前記可視化データと、曲の歌詞、あるいはメロディ
ーの楽譜とを、画像表示部に表示、もしくはプリンタ部
に印字するカラオケ装置。
【請求項７】請求項１，２，３，４，５または６におい
て、複数個数の画像表示部の一つに、曲の歌詞とメロデ
ィーの楽譜、あるいは、曲の歌詞とメロディーの音程デ
ータを可視化した音程グラフィックス、もしくは、曲の
歌詞やメロディーの楽譜と歌手の音程のずれ量の可視化
データを表示するカラオケ装置。
【請求項８】請求項１，２，３，４，５，６または７に
おいて、歌手の声域を検出する音声分析の手段と、前記
音声分析データとメロディーの音程データとを比較して
歌手の音程のずれ量を検出する音声比較の手段と、前記
音程のずれ量をもとに音量制御の信号を生成する音声制
御の手段とを設け、歌手の歌唱診断や音程の自動調節を
行うカラオケ装置。
【請求項９】請求項１，２，３，４または５において、
カラオケ装置のソフト素材は、カラオケＣＤ規格に準拠
するビデオ符号化，オーディオ符号化で情報量を圧縮し
た符号化データで収録したＣＤ−ＲＯＭ媒体によって供
給するカラオケ装置。
【請求項１０】請求項１，２，３，４，５，６，７また
は８において、カラオケ装置のソフト素材は、ディジタ
ル音声付ＬＤ規格に準拠したビデオエリアにＦＭ変調し
たビデオ信号，オーディオエリアにＦＭ変調したオーデ
ィオ信号，ディジタル音声エリアにＭＩＤＩ（Musical
Instrument Digital Interface）規格に準拠したメロデ
ィーの楽譜，歌詞のディジタル信号を収録したＬＤ−Ｒ
ＯＭ媒体によって供給するカラオケ装置。
【請求項１１】請求項１，２，３，４，５，６，７また
は８において、カラオケ装置のソフト素材は、グラフィ
ックＣＤ（ＣＤ＋Ｇ）規格に準拠したディジタル信号
で、MIDI規格の演奏情報を収録したＣＤ−ＲＯＭ媒体に
よって供給するカラオケ装置。