JP3614049B2

JP3614049B2 - Karaoke device, external device of karaoke device, and karaoke system

Info

Publication number: JP3614049B2
Application number: JP25492599A
Authority: JP
Inventors: 兼久鶴見
Original assignee: Yamaha Corp
Current assignee: Yamaha Corp
Priority date: 1999-09-08
Filing date: 1999-09-08
Publication date: 2005-01-26
Anticipated expiration: 2019-09-08
Also published as: JP2001083975A

Description

【０００１】
【発明の属する技術分野】
この発明は、カラオケ曲を演奏し、歌唱、ダンスゲームの両方を実行することのできるカラオケシステムおよび該カラオケシステムに用いられるカラオケ装置、カラオケ装置の外部装置に関する。
【０００２】
【従来の技術】
一般的なカラオケ装置は、カラオケ曲を自動演奏するとともに、モニタに歌詞を表示して歌唱をガイドする機能を備えている。そして近年、マイクから入力される歌唱音声の音高や音量を分析し、これを採点するゲーム機能を備えたものも実用化されている。
【０００３】
一方、モニタの画面下から音楽に乗って現れる４方向矢印（←↑↓→）のパターンに合わせて同方向のフットパネルをタイミング良く踏んで特定を競うダンスゲームがアーケードゲームとして人気を集めている。
【０００４】
【発明が解決しようとする課題】
カラオケ装置もダンスゲーム機も曲データを記憶し、これを自動演奏する点では共通しているが、元々は別々の装置であるため、曲データを共有したりゲームと歌唱を一緒にしたりすることができなかった。
【０００５】
この発明は、カラオケ曲の歌唱とともにダンスゲームをスムーズに実行できるカラオケシステムおよびカラオケ装置、カラオケ装置の外部装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
請求項１の発明であるカラオケ装置は、楽音発生手段と、インタフェースと、制御手段とを備え、カラオケデータの処理を行うカラオケ装置であって、
カラオケデータは、楽曲データとパターンデータとを含み、楽音発生手段は、楽曲データの演奏を可能とし、インタフェースは、外部装置と各種データの通信を可能とし、制御手段は、第１、第２処理を行い、第１処理は、利用者から指定されたカラオケデータのパターンデータをインタフェースを介して外部装置に送信し、第２処理は、インタフェースからのスタート信号の受信を契機として、指定されたカラオケデータ中の楽曲データを楽音発生手段に演奏させるとともに、楽曲データの演奏進行に同期した曲進行情報をインタフェースを介して外部装置に送信することを特徴とする。
また、請求項４の発明であるカラオケ装置は、楽音発生手段と、インタフェースと、制御手段とを備え、カラオケデータの処理を行うカラオケ装置であって、
カラオケデータは、楽曲データと属性データとを含み、楽音発生手段は、楽曲データの演奏を可能とし、インタフェースは、外部装置と各種データの通信を可能とし、制御手段は、第１、第２処理を行い、第１処理は、利用者から指定されたカラオケデータの属性データをインタフェースを介して外部装置に送信し、第２処理は、インタフェースからのスタート信号の受信を契機として、指定されたカラオケデータ中の楽曲データを楽音発生手段に演奏させるとともに、楽曲データの演奏進行に同期した曲進行情報をインタフェースを介して外部装置に送信することを特徴とする。
【０００７】
請求項２の発明であるカラオケ装置の外部装置は、入力手段と、第２制御手段と、第２インタフェースと、映像生成手段と、記憶手段とを備えるカラオケ装置の外部装置であって、
入力手段は、スタート指示を可能とし、第２インタフェースは、カラオケ装置と各種データの通信を可能とし、映像生成手段は、受信する曲進行情報のタイミングでパターンデータを読み出して映像信号を作成し、第２制御手段は、第３、第４処理を行い、第３処理は、第２インタフェースが受信したパターンデータを記憶手段に記憶させ、第４処理は、入力手段のスタート指示を契機として、第２インタフェースを介してスタート信号をカラオケ装置に送信するとともに、第３処理にて記憶させたパターンデータおよび受信する曲進行情報に基づいて映像信号を作成させることを特徴とする。
また、請求項５の発明であるカラオケ装置の外部装置は、入力手段と、第２制御手段と、第２インタフェースと、記憶手段と、映像生成手段とを備えるカラオケ装置の外部装置であって、
入力手段は、スタート指示を可能とし、第２インタフェースは、カラオケ装置と各種データの通信を可能とし、記憶手段は、属性データに対応する複数のパターンデータを記憶し、映像生成手段は、受信する曲進行情報のタイミングでパターンデータを読み出して映像信号を作成し、第２制御手段は、第３、第４処理を行い、第３処理は、第２インタフェースが受信した属性データを記憶手段に記憶させ、第４処理は、入力手段のスタート指示を契機として、第２インタフェースを介してスタート信号をカラオケ装置に送信するとともに、第３処理にて記憶させた属性データに対応するパターンデータおよび受信する曲進行情報に基づいて映像信号を作成させることを特徴とする。
カラオケ装置の外部装置。
【０００８】
請求項３の発明であるカラオケシステムは、請求項１に記載のカラオケ装置と請求項２に記載のカラオケ装置の外部装置を接続したことを特徴とする。
また、請求項６の発明であるカラオケシステムは、請求項４に記載のカラオケ装置と請求項５に記載のカラオケ装置の外部装置を接続したことを特徴とする。
【０００９】
請求項７の発明は、請求項３、６の発明において、曲進行情報は、曲の拍を示す情報であり、パターンデータは、ダンスのステップを示すデータであることを特徴とする。
【００１０】
この発明では、カラオケ装置は、楽曲データに基づいて楽音を発生するいわゆるカラオケ曲の演奏を実行し、たとえばこの楽曲データの歌詞を表示する歌詞テロップを内部映像として生成する。利用者は、この演奏音と映像表示でカラオケ曲の歌唱を楽しむことができる。また、カラオケ装置は、外部装置に対して曲進行情報を出力し、外部装置は、この曲進行情報に同期した外部映像を生成する。この外部映像はカラオケ装置に送信され、カラオケ装置は、前記内部映像または外部映像を選択的または合成してモニタに出力する（映像選択手段）。第２の映像である外部映像を生成する装置を外部装置としたことで、従来よりあるカラオケ装置の構成に曲進行情報出力手段と映像選択手段を設けるのみで新たな映像を表示出力する機能を実現することができる。外部装置が、たとえばダンスゲーム装置であった場合には、ステップなど身振りのタイミングを示す身振り指示映像が外部映像として生成される。映像選択手段の映像選択のルールはどのようなものでもよいが、例えば利用者の選択入力によって選択する方式、外部映像が入力された場合には優先的に外部映像を選択する方式などを採用することができる。
【００１１】
【発明の実施の形態】
図面を参照してこの発明のカラオケシステムについて説明する。図１は同カラオケシステムの外観図である。同図に示すようにこのカラオケシステムは、カラオケ装置とダンスゲーム装置からなっている。図２は同カラオケシステムを構成するカラオケ装置のブロック図である。図３は同カラオケシステムを構成するダンスゲーム装置のブロック図である。このダンスゲーム装置がこの発明のカラオケ装置の外部装置に対応する。
【００１２】
このカラオケシステムでは、カラオケ装置の演奏する曲に合わせて利用者が歌唱することができるとともに、カラオケ装置の演奏する曲に合わせて利用者がダンスゲームをすることができる。ここで、ダンスゲームとは、モニタ画面の下から音楽にあわせてスクロールするステップ指示映像（４方向矢印（←↓↑→）のパターン）に合わせて同方向のフットパネルをタイミング良く踏んで得点を競うゲームである。このステップ指示映像がこの発明の外部映像に対応する。
【００１３】
カラオケ装置は、本体装置１、コントロールアンプ２、ＤＶＤチェンジャ３、スピーカ５（図２参照）、モニタ６などを備えている。なお、本願請求項１の発明において、モニタ６は必須ではない。
【００１４】
また、ダンスゲーム装置は、ゲームコントロールユニット４、ダンスのステップを検出するステップボード９、ゲーム操作パネル１１、ビルコインボックス１２、照明装置１３などを備えている。
【００１５】
利用者が演奏する曲を選曲したとき、それが通常のカラオケ曲（一般曲）であれば、カラオケ装置は、モニタ６に歌詞を表示しながら通常どおりのカラオケ演奏を実行する。一方、ダンスゲーム用の曲（専用曲）が選曲された場合は、利用者がゲーム操作パネル１１のスタートボタン１１ａをオンしたとき曲の演奏をスタートさせ、この演奏と並行してモニタ６にステップ指示映像を表示する（図５参照）。利用者はこのステップ指示映像に合わせてステップし、ステップボード９のフットパネル９ａ〜９ｄを踏む。各フットパネル９ａ〜９ｄにはスイッチ９０（図３参照）が設けられており、このスイッチ９０のオンタイミングに基づいて利用者のステップの正確さを採点し、曲の演奏中または曲の終了後にその得点を表示する。また、カラオケ歌唱用の一般曲であっても上記スタートボタン１１ａを押すことによってダンスゲーム用の曲として演奏することも可能である。
【００１６】
図２において、カラオケ本体装置１のＣＰＵ２０が、このカラオケシステム全体の動作を制御する。このＣＰＵ２０には、ＲＯＭ２１、ＲＡＭ２２、ハードディスク２７、通信制御部２６、リモコン受信部２３、操作部２４、表示部２５、この発明の内部映像生成手段であるグラフィック回路２８、この発明の映像選択手段である映像ミキサ２９、この発明の楽音発生手段である楽音発生部３０、および、音声再生部３１が接続されているとともに、インタフェース３５、３６が接続されている。インタフェース３５には、前記コントロールアンプ２およびＤＶＤチェンジャ３が接続されている。インタフェース３６には、前記ゲームコントロールユニット４が接続されている。
【００１７】
ＲＯＭ２１には、このカラオケ装置を起動するためのプログラムなどが記憶されている。カラオケ曲（一般曲、専用曲を含めて以下このように呼ぶ。）を演奏するための楽曲データはＤＶＤドライブ３にセットされているＤＶＤ３ａおよびハードディスク２７に記憶されている。また、ハードディスク２７には、上記楽曲データのほか、システムプログラム、カラオケ演奏プログラム、通信プログラムなどの各種プログラム、文字パターンデータなどが記憶されている。システムプログラムは、この装置の基本動作を制御するプログラムであり、カラオケ装置の起動時にＲＡＭ２２に読み込まれる。カラオケ演奏プログラムは、楽曲データに基づいてカラオケ演奏部３０や音声再生部３１を駆動してカラオケ演奏音を発生するためのプログラムである。通信プログラムは、配信センタから前記楽曲データやこの発明の身振りデータであるステップデータをダウンロードするためのプログラムである。文字パターンデータは、コード情報として与えられる歌詞、曲名などのテキスト情報を文字パターンに展開するためのデータである。
【００１８】
ＲＡＭ２２には、上記プログラムを読み込むエリアのほか、現在演奏中の楽曲データや次に演奏する楽曲データを読み出す実行データ記憶エリア、後述の各種フラグ、レジスタなどが設定される。
【００１９】
楽音発生部３０は音源ＬＳＩなどを備え、前記楽曲データに基づいてカラオケ曲演奏の楽音を発生する。また、音声再生部３１は、ＴｗｉｎＶＱなどの圧縮方式で記録された音声信号を再生する回路である。この音声再生部３１は、カラオケ曲のバックコーラスを再生するほか、音多モードに応じて、予め録音されているプロの歌唱を再生する。すなわち、歌唱者が初心者で専門の歌手の歌唱を聴きたい場合や、利用者がダンスゲームをして歌唱をできない場合などに、このプロの歌唱を再生する。
【００２０】
楽曲データは、楽音発生部３０に楽音を発生させるための楽音トラックのほか、上記予め録音されたプロの歌唱音声のＴｗｉｎＶＱデータで構成される音声トラックを有している。ＣＰＵ２０は、カラオケ曲の演奏時、音多モードに応じて、楽音トラックの読み出しと同期してこの音声トラックのデータを音声再生部３１に入力する。
【００２１】
音多モードは、音多切換スイッチ５０（同図（Ｂ）参照）の操作により、音多オフ、音多オン、ダンスゲーム時音多オンの３つのモードに順次設定される。設定されたモードは、ＲＡＭ２２に設定される音多モードレジスタに記憶される。音多モードのデフォルトは、歌詞オフであり、カラオケ曲が選曲されるごとに、音多モードは音多オフに再設定される。なお、前記音多切換スイッチ５０は、リモコン８、操作部２４、ゲーム操作パネル１１のいずれかまたはその他どこに設けてもよく、ＣＰＵ２０にその操作信号を通知できればよい。
【００２２】
楽音発生部３０が発生した演奏音および指示に応じて音声再生部３１が再生した歌唱音声は、コントロールアンプ２に入力される。コントロールアンプ２には、歌唱者が歌唱音声を入力するためのマイク７が接続されている。コントロールアンプ２は、マイク７から入力されたまたは音声再生部３１が再生した歌唱音声および前記カラオケ演奏の楽音をミキシングしてスピーカ５に出力する。
【００２３】
また、コントロールアンプ２は、マイク７から入力された歌唱音声を分析・変換するための回路部であるハモリユニットを備えており、マイク７から入力された歌唱音声の周波数や音量を分析して、ＭＩＤＩデータに変換したり、マイク７から入力された歌唱音声を他の所定周波数の音声に変換してハーモニー音声を生成することができる。ハーモニー音声を生成した場合には、これを前記楽音、歌唱音声とミキシングしてスピーカ５に出力する。
【００２４】
また、歌唱音声から周波数や音量を抽出して作成されたＭＩＤＩデータは、ＣＰＵ２０に入力される。ＣＰＵ２０は、このＭＩＤＩデータをリファレンス（楽曲データの楽音トラックに含まれているガイドメロディトラックなど）と比較することによって歌唱者の歌唱を採点する。さらにＣＰＵ２０は、このＭＩＤＩデータにより発声回数、発声音量、単位時間当たりの発声頻度、音高、音高のジャンプ間隔などに基づいて、歌唱者がこの歌唱によってどの程度カロリーを消費したかを算出する。
【００２５】
通信制御部２６は、通信回路を介して配信センタ１９と交信し、楽曲データやステップデータなどをダウンロードするためのコントローラである。通信制御部１６は、ＤＭＡ回路を内蔵しており、ダウンロードされた楽曲データなどを直接ハードディスク２７に書き込む。
【００２６】
リモコン受信部２３はリモコン８から送られてくる赤外線信号を受信してデータを復元する。リモコン８は、曲番号を入力してカラオケ曲を予約するためのテンキーなど複数のキースイッチを備えている。利用者がキースイッチを操作すると、リモコン８は操作されたキースイッチに対応する赤外線コードの信号を送信する。リモコン受信部２３はこの赤外線コード信号を受信してデータに復元し、ＣＰＵ２０に入力する。ＣＰＵ２０はこのデータに基づいてカラオケ曲の予約などの処理を実行する。操作部２４は、カラオケ本体装置１のフロントパネルに設けられており、上記リモコン８と同様のキースイッチを備えている。表示部２５も上記操作部２４と同様カラオケ装置本体のフロントパネルに設けられており、現在演奏中の曲番号や予約曲数などを表示するＬＥＤマトリクス表示器を含んでいる。
【００２７】
グラフィック回路２８は、歌詞テロップの映像信号を発生し、映像ミキサ２９に入力する。楽曲データは、楽音を発生する楽音トラックに加えて、楽音の発生に同期して歌詞を表示するための歌詞トラックを含んでいる。ＣＰＵ２０は、カラオケ曲の演奏時に、楽音トラックのデータを楽音発生部３０に入力するのと同期して歌詞トラックのデータを読み出し、このデータに対応するフォントデータをハードディスク２７から読み出して歌詞を文字パターンに展開する。この展開は、グラフィック回路２８のＶＲＡＭ上で行われる。グラフィック回路２８は、この文字パターンを映像信号（ＮＴＳＣコンポジット信号）化して映像ミキサ２９に出力する。
【００２８】
映像ミキサ２９は、グラフィック回路２８から文字テロップを入力するための内部入力端子のほか、２つの外部映像入力端子２９ａ，２９ｂを備えている。外部映像入力端子２９ａには、前記ＤＶＤドライブ３が接続され、外部映像入力端子２９ｂには前記ゲームコントロールユニット４が接続されている。
【００２９】
通常のカラオケ演奏時には、グラフィック回路２８から歌詞テロップの映像信号を入力するとともに、外部入力端子２９ａからＤＶＤドライブ３が再生する背景映像を入力し、背景映像上に歌詞テロップをスーパーインポーズ合成してモニタ６に入力する。ＤＶＤドライブ３が再生するＤＶＤ３ａの背景映像は、カラオケ曲のジャンルや季節などに対応し、カラオケ曲の雰囲気にあった風景などの映像であり、カラオケ歌唱の雰囲気を盛り上げる機能を有している。
【００３０】
また、ダンスゲーム実行時には、外部入力端子２９ｂからゲームコントロールユニット４の発生する映像を入力してモニタ６に出力する。このとき歌詞表示モード（後述）に応じて、グラフィック回路２８から入力される歌詞テロップを上記映像にスーパーインポーズ合成する。ゲームコントロールユニット４が出力する映像信号は、図５に示すように、ゲーム用の背景映像上にステップ指示映像がスーパーインポーズ合成されたものである。ゲーム用の背景映像は、ＣＧ（コンピュータグラフィック）のキャラクタがダンスをしているというような映像であり、ゲームを盛り上げる機能を有するとともに、ステップ指示映像が見やすい配色になっている。ゲームコントロールユニット４から入力される上記の映像信号に歌詞テロップをスーパーインポーズ合成すると、歌詞テロップが最前景に表示され、ステップ指示映像が見づらくなる可能性があるため、ユーザが歌詞表示モードを選択してこれを消去できるようになっている。
【００３１】
歌詞表示モードは、歌詞表示切換スイッチ５１（同図（Ｂ）参照）の操作により、歌詞オン、歌詞オフ、ダンスゲーム時歌詞オフの３つのモードに順次設定される。設定されたモードは、ＲＡＭ２２に設定される歌詞表示モードレジスタに記憶される。歌詞表示モードのデフォルトは、歌詞オンであり、カラオケ曲が選曲されるごとに、歌詞表示モードは歌詞オンに再設定される。なお、前記歌詞表示切換スイッチ５１は、リモコン８、操作部２４、ゲーム操作パネル１１のいずれかまたはその他どこに設けてもよく、ＣＰＵ２０にその操作信号を通知できればよい。ＣＰＵ２０は、歌詞表示切換スイッチ５１の操作信号に応じて映像ミキサ２９の切り換えを制御する。
【００３２】
インタフェース３６は、ゲームコントロールユニット４のインタフェース４３に接続され、ゲームコントロールユニット４に対して種々のデータを送信するとともに、ゲームコントロールユニット４から種々のデータを受信するインタフェースである。ゲームコントロールユニット４に対して送信されるデータは、ダンスゲームを実行するためのステップデータまたは属性情報、カラオケ曲の各拍毎に生成されるビートマーク情報、曲の区間を示す演奏マークなどである。また、ゲームコントロールユニット４から受信するデータは、スタート信号やダンスゲームの得点、カロリー消費量などである。前記ビートマークがこの発明の曲進行情報に対応し、インタフェース３６がこの発明の曲進行情報出力手段に対応する。
【００３３】
図３において、ステップ指示映像は、ステップデータに基づいてＣＰＵ４０が生成する。また、ゲーム用の背景映像は、ＣＤ−ＲＯＭドライブ４２にセットされているＣＤ−ＲＯＭ４２ａに記憶されているムービーデータを再生したものである。すなわち、ＣＤ−ＲＯＭドライブ４２がこの発明の身振り用背景映像発生手段に対応する。
【００３４】
ここで、ステップデータとは、曲の進行（特に曲のリズム）にあわせて４方向の矢印（←↓↑→）が描かれているフットパネル９ａ〜９ｄのどれを踏むかを示すデータであり、専用曲にはその曲に１対１で対応するステップデータがカラオケ本体装置１のハードディスク２７またはＤＶＤ３に記憶されている。また、一般曲のステップデータを生成するための素材となる８ステップ程度のパターンデータが、ゲームコントロールユニット４のＣＤ−ＲＯＭ４２ａに複数記憶されている。
【００３５】
ゲームコントロールユニット４は、前記ＣＰＵ４０を備え、このＣＰＵ４０には、メモリ４１、ＣＤ−ＲＯＭドライブ４２、インタフェース４３、グラフィックコントローラ４４、インタフェース４５、４６を備えている。
【００３６】
メモリ４１には、ダンスゲームを実行するとき、演奏中のカラオケ曲に対応するステップデータが書き込まれる。専用曲が選曲されると、ステップデータはカラオケ本体装置１から送信される。また、一般曲でゲームを行うとき、カラオケ本体装置１から送信されてくるのは、その曲のジャンル、拍子、テンポなどの属性情報であるため、ＣＰＵ４０はこの属性情報に基づいてステップデータを生成する。
【００３７】
ＣＤ−ＲＯＭドライブ４２にセットされているＣＤ−ＲＯＭ４２ａには、８ステップ程度のパターンデータが多数記憶されており、ＣＰＵ４０は、属性情報に基づいてこのパターンデータから適当なものを選択・組み合わせすることによってステップデータをリアルタイムに生成する。
【００３８】
インタフェース４３はカラオケ本体装置１と通信するためのインタフェースであり、カラオケ本体装置１から専用曲のステップデータ、一般曲の属性情報を受信するほか、１拍毎に発生するビートマーク、曲の切れ目（サビ、コーラス、間奏など）を示す演奏マークを受信する。また、このインタフェース４３を介して、ゲームコントロールユニット４からカラオケ本体装置１に向けて、スタートボタン１１ａのオン信号であるスタート信号やダンスゲームの採点結果（得点）、ゲームによるカロリー消費量などの情報が送信される。インタフェース４３がこの発明の受信手段に対応する。
【００３９】
グラフィックコントローラ４４は、ＣＰＵ４０から入力されるステップ指示映像を映像信号に変換し、この映像をＣＤ−ＲＯＭドライブ４２から入力されるゲーム用の背景映像にスーパーインポーズ合成してカラオケ本体装置１（映像ミキサ２９の外部映像入力端子２９ｂ）に出力する。ＣＰＵ４０およびグラフィックコントローラ４４がこの発明の外部映像生成手段に対応する。
【００４０】
インタフェース４５には前記ゲーム操作パネル１１およびステップボード９が接続されている。ステップボード９は、前後左右の矢印が付された４枚のフットパネル９ａ〜９ｄの内部に設けられた４個のスイッチ９０（９０ａ〜９０ｄ）、および、該矢印が付されたフットパネル９ａ〜９ｄとこれらに囲まれたホームポジションのフットパネル９ｅの内部に設けられた５つの圧力センサ９１（９１ａ〜９１ｅ）を備えている。スイッチ９０のオン・オフ状態および圧力センサ９１の検出値はインタフェース４５を介してＣＰＵ４０に伝達される。
【００４１】
また、ゲーム操作パネル１１には、スタートボタン１１ａ、難易度選択ボタン１１ｂが設けられている。難易度選択ボタン１１ｂは、ステップ指示映像として表示されるステップデータの難易度を選択するためのボタンスイッチであり、Ａ、Ｂ、Ｃの３種類が設けられている。Ａボタン、Ｂボタン、Ｃボタンは、それぞれＡ（高難易）、Ｂ（中難易）、Ｃ（低難易）の難易度に対応している。なお、ゲームモード設定時のデフォルトはＣ（低難易）である。スタートボタン１１ａ，難易度選択ボタン１１ｂのオン操作はインタフェース４５を介してＣＰＵ４０に伝達される。スタートボタン１１ａがオンされると、ＣＰＵ４０はスタート信号をカラオケ本体装置１のＣＰＵ２０に送信する。また、難易度選択ボタン１１ｂが操作されると、メモリ４１に記憶している３種類のステップデータからその操作された難易度選択ボタンに対応するものを選択する。
【００４２】
インタフェース４６には、前記コインボックス１２および照明装置１３が接続されている。コインボックス１２は、ＣＰＵ４０に対して投入されたコインの枚数の情報であるクレジット情報を送信する。ダンスゲームを課金サービスとする場合、ＣＰＵ４０はこのクレジット情報に基づいてダンスゲームを実行するか否かを決定する。また、照明装置１３は、ダンスゲームの実行時にＣＰＵ４０の制御によって点滅制御される。ＣＰＵ４０は、カラオケ本体装置１から入力される拍タイミングの情報であるビートマークに基づいて、照明装置１３の点滅制御を行う。
【００４３】
利用者によるリモコン８の操作によって専用曲が選曲されると、カラオケ本体装置１のＣＰＵ２０は、ハードディスク２７またはＤＶＤ３ａからＲＡＭ２２へ楽曲データを読み込むとともに、この楽曲データに対応して記憶されているステップデータをインタフェース３６を介してゲームコントロールユニット４に送信する。
【００４４】
ゲームコントロールユニット４のＣＰＵ４０は、カラオケ本体装置１から（インタフェース４３を介して）ステップデータが入力されると、これをメモリ４１に書き込み、利用者によるスタートボタン１１ａ、難易度選択ボタン１１ｂの操作があるまで待機する。難易度選択ボタン１１ｂが操作されると、操作されたボタンに対応する難易度のステップデータを選択する。また、スタートボタン１１ａが操作されると、スタートボタン１１ａがオンされた旨を示すスタート信号をインタフェース４３→インタフェース３６を介してＣＰＵ２０に通知する。
【００４５】
ＣＰＵ２０は、このスタート信号の入力をトリガとしてカラオケ曲（専用曲）の演奏をスタートし、曲の拍タイミングに同期したビートマークをインタフェース３６→インタフェース４３を介してＣＰＵ４０に入力する。
【００４６】
ＣＰＵ４０は、このビートマークに同期して、ステップ指示映像を生成し、グラフィックコントローラ４４に入力する。なお、ＣＤ−ＲＯＭドライブ４２は、カラオケ曲のスタート（最初のビートマークの入力など）をトリガとしてゲーム用の背景映像の再生をスタートする。グラフィックコントローラ４４は、ＣＤ−ＲＯＭドライブ４２から入力される背景映像にＣＰＵ４０から入力されグラフィックコントローラ４４のＶＲＡＭ上に展開したステップ指示映像をスーパーインポーズ合成してカラオケ本体装置１（映像ミキサ２９）の外部映像入力端子２９ｂに向けて出力する。この映像信号はＮＴＳＣコンポジット信号でよい。
【００４７】
また、ＣＰＵ４０は、ステップデータに基づいてステップ指示映像を生成するとともに、ステップボード９のスイッチ９０ａ〜９０ｄから入力されるオン信号をステップデータと比較し、ステップ指示映像で指示したフットパネルを、その指示タイミングに正確に踏んでいるかを判断し、その正確さに応じた得点を算出する。この得点は、ゲームの進行中にリアルタイムに算出され、メモリ４１に蓄積記憶される。また、このスイッチ９０のオン信号の回数、単位時間当たりのオン頻度、および、ステップする毎に各フットパネル（ホームポジションを含む）に加えられる圧力に基づいて、このゲームによるカロリー消費量を算出する。このカロリー消費量は、ゲームの進行中にリアルタイムに算出され、メモリ４１に蓄積記憶される。曲の演奏すなわちゲームが終了すると、ＣＰＵ４０は、上記得点およびカロリー消費量を集計し、カラオケ本体装置１に向けて送信する。カラオケ本体装置は、この得点とカロリー消費量をモニタ６に表示する。
【００４８】
なお、カラオケ曲の演奏に合わせてダンスゲームが実行されているとき、利用者（ダンスゲームをしている者と別人でもよい）が、このカラオケ曲を歌唱することもでき、また、実際の歌唱に代えて楽曲データ中の音声トラックに基づいてプロの歌唱音声を再生するようにしてもよい。音多モード（プロの歌唱音声を再生するか否か）は、音多切換スイッチ５０の操作によって切り換えることができる。音多モードがオフの場合には、マイク７が有効になり、マイク７から入力された歌唱が採点され、歌唱によるカロリー消費量が算出される。
【００４９】
カロリー消費量の表示は、直接的に「○○Ｃａｌ消費しました」と表示してもよく、また「５分間ジョギングしたのと同じカロリーを消費しました」と他の運動に置き換えて表示してもよい。また、歌唱のカロリー消費量とダンスゲームのカロリー消費量を加算して合計の消費量を表示してもよい。
【００５０】
一方、利用者によって一般曲が選曲されると、カラオケ本体装置１のＣＰＵ２０は、ハードディスク２７またはＤＶＤ３ａからＲＡＭ２２へ楽曲データを読み込み、自動的にカラオケ曲の演奏をスタートする。このとき、ＤＶＤドライブ３がカラオケ曲用の背景映像を再生し、外部映像入力端子２９ａから映像ミキサ２９にこの映像信号を入力する。映像ミキサ２９はこの背景映像にグラフィック回路２８から入力された歌詞テロップをスーパーインポーズ合成してモニタ６に出力する。利用者がカラオケ演奏に合わせて歌唱すれば、マイク７からその歌唱音声が入力されてスピーカ５から出力されるとともに、この歌唱が採点され、歌唱によるカロリー消費量が算出される。歌唱終了後、この採点結果（得点）とカロリー消費量がモニタ６に表示される。
【００５１】
上記のように一般曲の演奏がスタートして３０秒以内に、ゲーム操作パネル１１のスタートボタン１１ａが操作されると、ゲームコントロールユニット４のＣＰＵ４０からカラオケ本体装置１のＣＰＵ２０にスタート信号が通知される。
【００５２】
ＣＰＵ２０は、一般曲の演奏がスタートして３０秒以内にスタート信号が通知されると、カラオケ曲の演奏を中止し、ステップ指示映像を表示しながらカラオケ曲を演奏するゲームモードでこのカラオケ曲の演奏を再スタートする。このとき、映像はゲームコントロールユニット４から入力されるものに切り換える。
【００５３】
一般曲には、対応するステップデータが記憶されていないため、ＣＰＵ２０は、このカラオケ曲の属性情報をゲームコントロールユニット４のＣＰＵ４０に対して送信する。ＣＰＵ４０は、受信した属性情報をメモリ４１に記憶するとともに、この属性情報に基づいてＣＤ−ＲＯＭ４２ａのステップパターンデータを選択・組み合わせすることによってリアルタイムにステップデータを生成する。ＣＰＵ２０から間奏、サビなど曲の区間を示す演奏マークが入力された場合には、その区間に合うようなステップパターンを選択する。また、利用者が難易度選択ボタン１１ｂを操作すると、その指定された難易度のステップデータを生成するようにしてもよい。
【００５４】
なお、ステップデータを自動生成する場合であっても、同じ曲に対しては毎回（難易度ごとに）同じステップデータが生成されるようにする。これは、利用者が練習によって上達できるようにするためである。
【００５５】
なお、ダンスゲームを実行しているとき、または、ダンスゲームを実行していて且つ音多オンのとき、すなわちプロ歌手の歌唱を再生しているときには、カラオケ曲のイコライジングや各パートのバランスを変更するようにしてもよい。すなわち、カラオケ歌唱時には歌唱が引き立つように全体のバランスをフラットにしてボリュームを控えめにするが、ダンスゲーム時（歌唱しないとき）には、全体のボリュームを上げて、リズムパート（ベースパートを含む）の音量を大きくし、イコライジングも低音・高音が強調されたヘビーなものにすることでゲームを盛り上げることができる。このためには、楽曲データにパートバランス，イコライジングのパラメータを歌唱用とダンスゲーム用で別々に持つか、または、楽曲データには歌唱用のパラメータを記憶しておき、別にパラメータ変更アルゴリズムを持っていて、ダンスゲーム時にはこのパラメータ変更アルゴリズムに基づいてパートバランスやイコライジングを変更するようにすればよい。パラメータ変更アルゴリズムとしては「リズムパート（ＭＩＤＩ第１０チャンネル）は、現在のボリューム×１．２」などである。
【００５６】
図４は上記ハードディスクおよびＤＶＤに記憶されている楽曲データの構成を示す図である。楽曲データは、曲のジャンル、拍子、テンポなどの属性情報が書き込まれたヘッダのほか、楽音発生部３０に楽音を発生させるためのデータが書き込まれた楽音トラック、演奏に同期して歌詞テロップを表示するためのデータが書き込まれた歌詞トラック、前奏、１番、間奏、サビ、２番、後奏などの曲の区間を示す演奏マークが書き込まれた制御トラックを備えている。楽音トラックは複数トラックで構成されており、複数の演奏パートのトラックのほか、歌唱採点のリファレンスとなるガイドメロディトラックなどが含まれている。
【００５７】
さらに、楽曲データには、プロの歌手がこのカラオケ曲を歌唱した歌唱音声データをＴｗｉｎＶＱ方式で圧縮した音声トラックが付属している。この音声トラックは、楽曲データと一体に記憶してもよく、楽曲データの記憶エリアと別の音声トラックの記憶エリアを設け、それぞれを対応づけるようにしてもよい。
【００５８】
さらに、楽曲データのうち専用曲には、１対１で対応するステップデータが付属している。ステップデータとは、上述したように、曲の進行にあわせてフットパネル９ａ〜９ｄ（←↓↑→）のどれを踏むかを示す時系列のデータである。各専用曲について、ステップデータは、Ａ（高難易）、Ｂ（中難易）、Ｃ（低難易）の３種類が記憶されている。このステップデータは、楽曲データの一部として一体に記憶してもよく、楽曲データの記憶エリアと別のステップデータの記憶エリアを設け、各楽曲データと各ステップデータを対応づけるテーブルを設けるようにしてもよい。
なお、専用曲であるか一般曲であるかは、楽曲データのヘッダに書き込んでおいてもよく、対応するステップデータが存在するか否かで判断するようにしてもよい。
【００５９】
図５は、ダンスゲームが実行されるゲームモード時のモニタ６の表示例を示す図であり、モニタ６の左側部分の映像の時間変化を表すせのである。モニタ６の左側にステップ指示映像が表示されている。ステップ指示映像は、曲のリズムに合ったステップのパターンが上方にスクロールする動画像である矢印群６１と、モニタ６の上端に表示される静止画像であり、上方にスクロールしてきた矢印がこれと一致したときステップタイミングであることを示すタイミングマーク６０とを合成した画像からなっている。矢印群６１は、同図（Ａ）〜（Ｄ）に示すように曲のテンポに合わせて下から上にスクロールし、上端のタイミングマーク６０と重なり合ったとき、そのタイミングマークが明るく変化し、スクロールしてきた矢印は消滅する。
【００６０】
ＣＰＵ４０は、カラオケ本体装置１から演奏中のカラオケ曲の拍タイミングと同期したビートマークを受信し、そのビートマークのタイミングにタイミングマーク６０と矢印群６１中の所定の矢印が重なるように矢印群６１を描画するとともに、そのスクロールを制御する。
【００６１】
図６〜図１１のフローチャートを参照して同カラオケシステムの動作を説明する。
図６は演奏スタート時の動作を示すフローチャートである。利用者がリモコン８から曲番号を入力すると、その曲番号が予約曲リストに登録される。ＣＰＵ２０は、予約曲リストの先頭に登録されている曲番号を読み出し（ｓ１）、この曲番号で指定される楽曲データをハードディスク２７またはＤＶＤ３ａから読み出す（ｓ２）。そして、この曲が専用曲であるか一般曲であるかを判断する（ｓ３）。専用曲であれば、対応するステップデータを読み出して（楽曲データと一体になっている場合には、楽曲データの読出時に一緒に読み出されている）、これをゲームコントロールユニット４に送信する（ｓ４）。こののち、楽音発生部３０のイニシャライズなどの演奏の準備を実行し（ｓ５）、ゲームコントロールユニット４からスタート信号が送られてくるまで待機する（ｓ６）。ゲームコントロールユニット４は、スタートボタン１１ａがオンされたとき、スタート信号をカラオケ本体装置１に向けて送信する。スタート信号を受信すると（ｓ６）、ＣＰＵ２０は、曲の演奏をスタートする（ｓ７）。
【００６２】
一方、リクエストされた曲が一般曲であった場合には（ｓ３）、演奏の準備を実行したのち（ｓ１０）、即座に演奏をスタートする（ｓ１１）。そして、３０秒以内にゲームコントロールユニット４からスタート信号が入力された場合には（ｓ１２，ｓ１３）、現在の演奏を停止し（ｓ１４）、ステップデータを生成するための曲の属性情報をゲームコントロールユニット４に対して送信する（ｓ１５）。こののち、演奏を再スタートする（ｓ１６）。
【００６３】
スタートボタンがオンされないまま３０秒が経過した場合には（ｓ１２）、ゲームコントロールユニット４からのスタート信号の入力を禁止してそのまま演奏を継続する。なお、ダンスゲームに用いることが著作権契約等で禁止されている曲（禁止曲）は、楽曲データのヘッダにその旨が書き込まれており、禁止曲が演奏されているときは、３０秒以内にスタートボタンがオンされた場合であってもゲームモードには移行しない。また、ｓ１６の演奏の再スタートは、ゲームコントロールユニット４のセットアップが完了するように２秒程度待ってスタートする。
【００６４】
図７はカラオケ曲の演奏中の動作を示すフローチャートである。同図（Ａ）において、音多モードがオンのモードであるか否かを判断する（ｓ２０）。オンのモードであれば、すなわち音多オンであるか、または、ゲーム時オンであり且つダンスゲーム実行中であれば音声トラックを曲の演奏に同期して読み出し、音声再生部３１に入力することによってこれを再生する（ｓ２１）。
【００６５】
次にテンポクロックをカウントし、そのテンポクロックのタイミングのイベントデータを各トラックから読み出す（ｓ２２）。読み出したデータが楽音トラックのデータの場合には（ｓ２３）、このデータを楽音発生部３０に出力する（ｓ２６）。読み出したデータが歌詞トラックのデータの場合には（ｓ２４）、歌詞表示モードのオン・オフを判断し（ｓ２７）、歌詞表示モードがオンの場合のみこの歌詞データをパターン展開してグラフィック回路に出力する（ｓ２８）。足し表示モードが歌詞オフまたはダンスゲーム時オフで現在ダンスゲームが実行されているときには歌詞を表示しないため、歌詞データをパターン展開しない。なお、歌詞データの文字パターン展開は常時実行しておき、映像ミキサ２９の切り換えで表示しないようにしてもよい。
また、読み出されたデータが演奏マークの場合には（ｓ２５）、このマークをゲームコントロールユニット４に送信する（ｓ２９）。
【００６６】
同図（Ｂ）はビートマーク出力動作を示すフローチャートである。テンポクロックと現在演奏中の曲のテンポ情報に基づいてビート（拍）タイミングを検出する（ｓ３１）。そして拍子データ（３拍子、４拍子等）に基づいて強拍のビートマークまたは弱拍のビートマークを作成する（ｓ３２）。このビートマークをゲームコントロールユニット４に送信する（ｓ３３）。
【００６７】
図８（Ａ）は、カラオケ曲演奏中の採点動作を示すフローチャートである。まず、コントロールアンプ２から歌唱の音量・音高情報を入力する（ｓ４０）。この情報はマイク７から入力された歌唱から音量・音高を抽出し、これをＭＩＤＩデータに変換したものである。この情報とガイドメロディデータなどのリファレンスデータとを比較して一致度を判定し、これに基づいて歌唱を採点する（ｓ４１）。そして、この歌唱の音量、音高、間隔、音高のジャンプ幅などの要素に基づいてこの歌唱によるカロリー消費量を計算する（ｓ４２）。算出された得点（採点結果）とカロリー消費量を蓄積記憶する（ｓ４３）。以上の動作を曲が終了するまで繰り返し実行する（ｓ４４）。
【００６８】
そして曲が終了すると（ｓ４４）、歌唱の得点を集計し（ｓ４５）、歌唱によって消費したカロリー量を集計する（ｓ４６）。次にダンスゲームを実行している場合にはゲームコントロールユニット４からダンスゲームの得点およびダンスゲームによるカロリー消費量を受信する（ｓ４７、ｓ４８）。そしてこれら得点およびカロリー消費量を順次表示するとともに（ｓ４９）、これをログに保存する（ｓ５０）。なお、ログはカラオケ曲の演奏履歴ファイルであり、ハードディスク２７に設定される。ログの記録項目は、演奏時刻、曲番号、歌唱得点、歌唱カロリー消費量、ダンスゲーム得点、ダンスゲームカロリー消費量、ダンスゲーム選択難易度などである。
【００６９】
図８（Ｂ）は利用者の操作によるモード切換動作を示すフローチャートである。ユーザが音多切換スイッチ５０を操作すると（ｓ５１）、ＲＡＭ２２に設定されている音多モードフラグの内容をオフ→オン→ダンスゲーム時オンの順に順次切り換える（ｓ５２）。また、ユーザが歌詞表示切換スイッチ５１を操作すると（ｓ５３）、ＲＡＭ２２に設定されている歌詞表示モードフラグの内容をオン→オフ→ダンスゲーム時オフの順に順次切り換える（ｓ５４）。上述したように、音多モードのデフォルトはオフであり、歌詞表示モードのデフォルトはオンである。カラオケ装置の電源がオンされたときなど状態がリセットされるときには、これらのモードはデフォルトにセットされる。
【００７０】
図９〜図１１はゲームコントロールユニットの動作を示すフローチャートである。図９はカラオケ装置で専用曲が演奏されるときの動作を示すフローチャートである。専用曲が演奏されるとき、カラオケ装置本体からその曲専用のステップデータが送られてくるのでこれを受信し（ｓ６０）、これをメモリ４１に書き込む（ｓ６１）。ステップデータはＡ（高難易）、Ｂ（中難易）、Ｃ（低難易）の３種類が送られてくる。そしてユーザが難易度選択スイッチ１１ｂまたはスタートスイッチ１１ａを操作するまで待機する（ｓ６２、ｓ６４）。難易度選択スイッチ１１ｂが操作されると、メモリ４１に記憶しているステップデータからその難易度に対応するものを選択する（ｓ６３）。なお、難易度のデフォルトはＣ（低難易）である。そして、スタートスイッチ１１ａがオンされると（ｓ６４）、カラオケ本体装置１に対してスタート信号を送信する（ｓ６５）。
【００７１】
図１０は、カラオケ装置で一般曲が演奏されるときの動作を示すフローチャートである。一般曲の場合、カラオケ本体装置１は、このゲームコントロールユニット４のからの指示を待たないで自動的に演奏をスタートする。このときスタートスイッチ１１ａがオンされると（ｓ７０）、カラオケ本体装置１に対してスタート信号を送信する（ｓ７１）。カラオケ曲の演奏がスタートして３０秒以内であれば、カラオケ本体装置１は、このスタート信号に応答してカラオケ演奏を停止し、ダンスゲームとして演奏をやり直す。このためカラオケ本体装置１は、ステップデータを生成するための支援情報である属性情報をこの装置に送信してくる。この属性情報を受信して（ｓ７２）、メモリ４１に記憶する（ｓ７３）。そして、この属性情報に基づいてＣＤ−ＲＯＭ４２ａからパターンデータを選択して組み合わせることによってステップデータを生成する（ｓ７４）。このリアルタイムのステップパターンデータの生成を曲が終了するまで継続する（ｓ７７）。そして、曲の途中で曲がサビにはいったか間奏になったかなどの情報である演奏マークを受信すると（ｓ７５）、その演奏マークに合わせて生成するステップデータの内容を変更する（ｓ７６）。
【００７２】
図１１（Ａ）は、ゲームコントロールユニット４の映像生成動作を示すフローチャートである。入力されるビートマークに同期し、ステップパターンに基づいて下から上にスクロールする矢印の映像であるステップ指示映像を生成する（ｓ８０）。そして、ＣＤ−ＲＯＭドライブ４２がダンスゲーム用の背景映像を再生する（ｓ８１）。グラフィックコントローラ４４がこれらをスーパーインポーズ合成して（ｓ８２）、カラオケ本体装置１（映像ミキサ２９）の外部映像入力端子２９ｂに出力する（ｓ８３）。この動作は、ゲームが進行している間、すなわち曲が演奏されている間、繰り返し実行される繰り返す毎にｓ８０で生成される矢印の映像は上に移動している。
【００７３】
同図（Ｂ）は、ゲームの採点動作を示すフローチャートである。まずステップボード９のフットスイッチ９０ａ〜９０ｄのオン・オフを検出する（ｓ８５）。このオン・オフ状態と現在のビートタイミング、ステップデータとの一致度を判定し、ゲームの得点を算出する（ｓ８６）。次に、圧力センサ９１ａ〜９１ｅの検出値を読み取り（ｓ８７）、これに基づいてこのゲームによるカロリー消費量を算出する（ｓ８８）。算出された得点とカロリー消費量をメモリ４１に蓄積記憶する（ｓ８９）。以上の動作をゲーム（曲）が終了するまで繰り返し実行する（ｓ９０）。
【００７４】
そしてゲームが終了すると（ｓ９０）、得点およびカロリー消費量を集計してカラオケ本体装置に送信する（ｓ９１）。
【００７５】
なお、ゲーム実行中にテンポが変わるとステップ指示映像が曲に合わなくなるため、ゲームの実行中はカラオケ曲のテンポコントロール機能を禁止する。
【００７６】
この実施形態では、カラオケ装置の外部装置としてダンスゲーム装置（ゲームコントロールユニット４）を接続しているが、この発明の外部装置はこれに限定されることはない。たとえば、ステップボード９に代えてギターコントローラを接続するギターゲーム、ドラムコントローラを接続するドラムゲーム、キーボードコントローラを接続するキーボードゲームなどのゲーム装置を接続することができ、また、ゲーム装置に限らず、専ら演奏タイミングに同期した映像を作成する外部映像装置などを外部装置とすることができる。
【００７７】
【発明の効果】
以上のようにこの発明によれば、カラオケ曲の演奏と内部映像で従来のカラオケ装置と同じようにカラオケ曲の歌唱を楽しむことができるうえ、外部装置を接続し、この外部装置から曲の演奏と同期した外部映像を入力することにより、歌唱以外のたとえばダンスゲームなどを楽しむことができる。このダンスゲームなどの映像を生成する装置を外部装置として外付けにしたことにより、現在普及しているカラオケ装置にインタフェース機能を付加するのみで、この外部装置を接続することができ、カラオケ装置で新たな機能を実現することができる。
【図面の簡単な説明】
【図１】この発明の実施形態であるカラオケシステムの構成図
【図２】同カラオケシステムのカラオケ装置のブロック図
【図３】同カラオケシステムのゲームコントロールユニットのブロック図
【図４】カラオケ装置に記憶されている楽曲データの構成を示す図
【図５】ダンスゲーム時のモニタの表示例を示す図
【図６】カラオケ装置の動作を示すフローチャート
【図７】カラオケ装置の動作を示すフローチャート
【図８】カラオケ装置の動作を示すフローチャート
【図９】ゲームコントロールユニットの動作を示すフローチャート
【図１０】ゲームコントロールユニットの動作を示すフローチャート
【図１１】ゲームコントロールユニットの動作を示すフローチャート
【符号の説明】
１…カラオケ本体装置、２…コントロールアンプ、３…ＤＶＤチェンジャ、３ａ…ＤＶＤ、４…ゲームコントロールユニット、５…スピーカ、６…モニタ、７…マイク、８…リモコン、
９…ステップボード、９ａ，９ｂ，９ｃ，９ｄ…フットパネル、１１…ゲーム操作パネル、１１ａ…スタートボタン、１１ｂ…難易度選択ボタン、１２…コインボックス、１３…照明装置、
１９…配信センタ、２０…ＣＰＵ、２１…ＲＯＭ、２２…ＲＡＭ、２３…リモコン受信部、２４…操作部、２５…表示部、２６…通信制御部、２７…ハードディスク、２８…グラフィック回路、２９…映像ミキサ、２９ａ，２９ｂ…外部映像入力端子、３０…楽音発生部、３１…音声再生部、３５，３６…インタフェース、
４０…ＣＰＵ、４１…メモリ、４２…ＣＤ−ＲＯＭドライブ、４２ａ…ＣＤ−ＲＯＭ、４３…インタフェース、４４…グラフィックコントローラ、４５，４６…インタフェース、５０…音多切換スイッチ、５１…歌詞表示切換スイッチ[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a karaoke system capable of playing karaoke songs and executing both singing and dancing games, a karaoke apparatus used in the karaoke system, and an external device of the karaoke apparatus.
[0002]
[Prior art]
A general karaoke apparatus has a function of automatically performing a karaoke song and guiding a song by displaying lyrics on a monitor. In recent years, those equipped with a game function for analyzing the pitch and volume of a singing voice input from a microphone and scoring them have been put into practical use.
[0003]
On the other hand, a dance game that competes for a specific step by stepping on the foot panel in the same direction according to the pattern of four-directional arrows (← ↑ ↓ →) appearing on music from the bottom of the monitor screen is gaining popularity as an arcade game .
[0004]
[Problems to be solved by the invention]
Karaoke devices and dance game machines are common in that they store song data and automatically play them, but they are originally separate devices, so you can share song data and share games and singing together. I could not.
[0005]
An object of the present invention is to provide a karaoke system, a karaoke apparatus, and an external apparatus of the karaoke apparatus that can smoothly execute a dance game together with singing a karaoke song.
[0006]
[Means for Solving the Problems]
A karaoke apparatus according to claim 1 is a karaoke apparatus comprising a musical sound generating means, an interface, and a control means for processing karaoke data,
The karaoke data includes music data and pattern data, the musical sound generating means enables performance of the music data, the interface enables communication of various data with the external device, and the control means performs the first and second processing. The first process transmits the karaoke data pattern data specified by the user to the external device via the interface, and the second process receives the start signal from the interface as a trigger. The music data in the data is played by the musical tone generating means, and music progress information synchronized with the performance progress of the music data is transmitted to the external device via the interface.
The karaoke apparatus according to the invention of claim 4 is a karaoke apparatus comprising a musical sound generating means, an interface, and a control means for processing karaoke data,
The karaoke data includes music data and attribute data, the musical sound generating means can play music data, the interface can communicate various data with an external device, and the control means can perform first and second processing. The first process transmits the attribute data of the karaoke data designated by the user to the external device via the interface, and the second process is triggered by the reception of the start signal from the interface. The music data in the data is played by the musical tone generating means, and music progress information synchronized with the performance progress of the music data is transmitted to the external device via the interface.
[0007]
The external device of the karaoke apparatus according to the invention of claim 2 is an external device of the karaoke apparatus comprising input means, second control means, second interface, video generation means, and storage means,
The input means enables a start instruction, the second interface enables communication of various data with the karaoke device, and the video generation means reads the pattern data at the timing of the received song progress information and creates a video signal, The second control means performs third and fourth processes, the third process stores the pattern data received by the second interface in the storage means, and the fourth process is triggered by the start instruction of the input means. A start signal is transmitted to the karaoke apparatus via the two interfaces, and a video signal is generated based on the pattern data stored in the third process and the received song progress information.
Further, the external device of the karaoke apparatus according to the invention of claim 5 is an external device of the karaoke apparatus comprising input means, second control means, second interface, storage means, and video generation means,
The input means can give a start instruction, the second interface can communicate various data with the karaoke apparatus, the storage means stores a plurality of pattern data corresponding to the attribute data, and the video generation means receives The pattern data is read out at the timing of the music progression information to create a video signal, the second control means performs third and fourth processing, and the third processing stores the attribute data received by the second interface in the storage means. In the fourth process, a start signal is transmitted to the karaoke device via the second interface in response to a start instruction from the input means, and pattern data corresponding to the attribute data stored in the third process is received. A video signal is created based on the music progress information.
External device for karaoke equipment.
[0008]
A karaoke system according to a third aspect of the present invention is characterized in that the karaoke apparatus according to the first aspect is connected to an external device of the karaoke apparatus according to the second aspect.
A karaoke system according to a sixth aspect of the invention is characterized in that the karaoke device according to the fourth aspect is connected to an external device of the karaoke device according to the fifth aspect.
[0009]
A seventh aspect of the invention is characterized in that, in the third and sixth aspects of the invention, the music progression information is information indicating the beat of the music, and the pattern data is data indicating a dance step.
[0010]
In the present invention, the karaoke apparatus performs a so-called karaoke song performance that generates a musical sound based on the song data, and generates, for example, a lyrics telop that displays the lyrics of the song data as an internal video. The user can enjoy singing karaoke songs with this performance sound and video display. Also, the karaoke device outputs song progression information to the external device, and the external device generates an external video synchronized with the song progression information. This external video is transmitted to the karaoke device, and the karaoke device selectively or synthesizes the internal video or the external video and outputs it to the monitor (video selection means). Since the device for generating the external video as the second video is an external device, a function for displaying and outputting a new video simply by providing a song progress information output means and a video selection means in the configuration of a conventional karaoke apparatus. Can be realized. If the external device is, for example, a dance game device, a gesture instruction video indicating the timing of gestures such as steps is generated as an external video. Any video selection rule may be used by the video selection means. For example, a method of selecting by a user's selection input or a method of preferentially selecting an external video when an external video is input is adopted. be able to.
[0011]
DETAILED DESCRIPTION OF THE INVENTION
The karaoke system of the present invention will be described with reference to the drawings. FIG. 1 is an external view of the karaoke system. As shown in the figure, this karaoke system includes a karaoke device and a dance game device. FIG. 2 is a block diagram of a karaoke apparatus constituting the karaoke system. FIG. 3 is a block diagram of a dance game device constituting the karaoke system. This dance game device corresponds to an external device of the karaoke device of the present invention.
[0012]
In this karaoke system, the user can sing along with the music played by the karaoke device, and the user can play a dance game according to the music played by the karaoke device. Here, the dance game refers to the step instruction video that scrolls along with the music from the bottom of the monitor screen (4-directional arrow (← ↓ ↑ →) pattern) and step on the foot panel in the same direction in a timely manner to score points. It is a game to compete. This step instruction image corresponds to the external image of the present invention.
[0013]
The karaoke device includes a main device 1, a control amplifier 2, a DVD changer 3, a speaker 5 (see FIG. 2), a monitor 6, and the like. In the invention of claim 1 of the present application, the monitor 6 is not essential.
[0014]
Further, the dance game apparatus includes a game control unit 4, a step board 9 for detecting a dance step, a game operation panel 11, a bill coin box 12, a lighting device 13, and the like.
[0015]
When the user selects a song to be played, if the song is a normal karaoke song (general song), the karaoke apparatus performs a normal karaoke performance while displaying lyrics on the monitor 6. On the other hand, when a song for a dance game (dedicated song) is selected, the performance of the song is started when the user turns on the start button 11a of the game operation panel 11, and the monitor 6 is stepped in parallel with this performance. An instruction video is displayed (see FIG. 5). The user steps in accordance with the step instruction video and steps on the foot panels 9a to 9d of the step board 9. Each foot panel 9a to 9d is provided with a switch 90 (see FIG. 3). The user's step accuracy is scored based on the ON timing of the switch 90. The score is displayed. Even a general song for karaoke singing can be played as a song for a dance game by pressing the start button 11a.
[0016]
In FIG. 2, the CPU 20 of the karaoke main unit 1 controls the operation of the entire karaoke system. The CPU 20 includes a ROM 21, a RAM 22, a hard disk 27, a communication control unit 26, a remote control receiving unit 23, an operation unit 24, a display unit 25, a graphic circuit 28 which is an internal video generation unit of the present invention, and a video selection unit of the present invention. A video mixer 29, a musical sound generating unit 30 which is a musical sound generating means of the present invention, and an audio reproducing unit 31 are connected, and interfaces 35 and 36 are connected. The control amplifier 2 and the DVD changer 3 are connected to the interface 35. The game control unit 4 is connected to the interface 36.
[0017]
The ROM 21 stores a program for starting the karaoke apparatus. Music data for playing karaoke music (including general music and exclusive music in the following manner) is stored in the DVD 3a set in the DVD drive 3 and the hard disk 27. In addition to the music data, the hard disk 27 stores various programs such as a system program, a karaoke performance program, a communication program, character pattern data, and the like. The system program is a program for controlling the basic operation of the apparatus, and is read into the RAM 22 when the karaoke apparatus is activated. The karaoke performance program is a program for generating the karaoke performance sound by driving the karaoke performance section 30 and the voice reproduction section 31 based on the music data. The communication program is a program for downloading the music data and step data which is gesture data of the present invention from the distribution center. The character pattern data is data for expanding text information such as lyrics and song names given as code information into character patterns.
[0018]
In addition to an area for reading the above program, the RAM 22 is set with an execution data storage area for reading the music data currently being played and the music data to be played next, various flags and registers described later.
[0019]
The musical sound generating unit 30 includes a sound source LSI and the like, and generates musical sounds for karaoke music performance based on the music data. The audio reproduction unit 31 is a circuit that reproduces an audio signal recorded by a compression method such as TwinVQ. In addition to reproducing the back chorus of the karaoke song, the audio reproducing unit 31 reproduces a professional song recorded in advance according to the tone-rich mode. That is, when a singer is a beginner and wants to listen to a song of a professional singer, or when a user cannot sing by performing a dance game, the professional singing is reproduced.
[0020]
The music data has an audio track composed of the pre-recorded professional singing voice TwinVQ data, in addition to the musical tone track for causing the musical tone generator 30 to generate a musical tone. When the karaoke song is played, the CPU 20 inputs the data of the audio track to the audio reproduction unit 31 in synchronism with the reading of the musical sound track in accordance with the tone mode.
[0021]
The tone-high mode is sequentially set to three modes of tone-off, tone-on, and dance game tone-on by operating the tone switch 50 (see FIG. 5B). The set mode is stored in a tone-rich mode register set in the RAM 22. The default of the sound-to-speech mode is lyrics off, and every time a karaoke song is selected, the sound-to-sound mode is reset to tone-to-off. Note that the tone change switch 50 may be provided at any one of the remote controller 8, the operation unit 24, the game operation panel 11, or any other place as long as it can notify the CPU 20 of the operation signal.
[0022]
The performance sound generated by the musical sound generating unit 30 and the singing sound reproduced by the sound reproducing unit 31 according to the instruction are input to the control amplifier 2. The control amplifier 2 is connected to a microphone 7 for a singer to input singing voice. The control amplifier 2 mixes the singing voice input from the microphone 7 or reproduced by the voice reproducing unit 31 and the musical sound of the karaoke performance and outputs the mixed sound to the speaker 5.
[0023]
The control amplifier 2 includes a hammer unit that is a circuit unit for analyzing and converting the singing voice input from the microphone 7, and analyzes the frequency and volume of the singing voice input from the microphone 7. A harmony voice can be generated by converting it into MIDI data or by converting a singing voice inputted from the microphone 7 into a voice of another predetermined frequency. When the harmony voice is generated, it is mixed with the musical sound and the singing voice and outputted to the speaker 5.
[0024]
The MIDI data created by extracting the frequency and volume from the singing voice is input to the CPU 20. The CPU 20 scores the singer's song by comparing the MIDI data with a reference (such as a guide melody track included in the musical tone track of the music data). Further, the CPU 20 calculates how much calories the singer has consumed by this singing based on the number of utterances, utterance volume, utterance frequency per unit time, pitch, pitch jump interval, and the like based on the MIDI data. .
[0025]
The communication control unit 26 is a controller that communicates with the distribution center 19 via a communication circuit and downloads music data, step data, and the like. The communication control unit 16 has a built-in DMA circuit, and directly writes downloaded music data and the like on the hard disk 27.
[0026]
The remote control receiver 23 receives the infrared signal sent from the remote controller 8 and restores the data. The remote controller 8 includes a plurality of key switches such as a numeric keypad for inputting a song number and reserving a karaoke song. When the user operates the key switch, the remote controller 8 transmits an infrared code signal corresponding to the operated key switch. The remote control receiver 23 receives this infrared code signal, restores it to data, and inputs it to the CPU 20. The CPU 20 executes processing such as karaoke song reservation based on this data. The operation unit 24 is provided on the front panel of the karaoke main unit 1 and includes the same key switch as the remote controller 8. The display unit 25 is also provided on the front panel of the karaoke apparatus main body in the same manner as the operation unit 24, and includes an LED matrix display for displaying the number of a song currently being played, the number of reserved songs, and the like.
[0027]
The graphic circuit 28 generates a video signal of the lyrics telop and inputs it to the video mixer 29. The music data includes a lyrics track for displaying lyrics in synchronization with the generation of the musical sound, in addition to the musical sound track for generating the musical sound. When the karaoke song is played, the CPU 20 reads out the data of the lyrics track in synchronization with the input of the data of the musical tone track to the musical tone generator 30, reads out the font data corresponding to this data from the hard disk 27, and converts the lyrics into the character pattern. Expand to. This expansion is performed on the VRAM of the graphic circuit 28. The graphic circuit 28 converts this character pattern into a video signal (NTSC composite signal) and outputs it to the video mixer 29.
[0028]
The video mixer 29 includes two external video input terminals 29 a and 29 b in addition to an internal input terminal for inputting a character telop from the graphic circuit 28. The DVD drive 3 is connected to the external video input terminal 29a, and the game control unit 4 is connected to the external video input terminal 29b.
[0029]
During normal karaoke performance, the video signal of the lyrics telop is input from the graphic circuit 28, the background video reproduced by the DVD drive 3 is input from the external input terminal 29a, and the lyrics telop is superimposed on the background video. Input to the monitor 6. The background video of the DVD 3a reproduced by the DVD drive 3 corresponds to the genre of the karaoke song, the season, etc., and is a video of the scenery that matches the atmosphere of the karaoke song, and has a function of raising the atmosphere of the karaoke song.
[0030]
When a dance game is executed, an image generated by the game control unit 4 is input from the external input terminal 29 b and output to the monitor 6. At this time, the lyrics telop input from the graphic circuit 28 is superimposed on the video according to the lyrics display mode (described later). As shown in FIG. 5, the video signal output from the game control unit 4 is obtained by superimposing the step instruction video on the background video for the game. The background image for the game is an image in which a CG (computer graphic) character is dancing, has a function of exciting the game, and has a color scheme that makes it easy to see the step instruction image. When the lyrics telop is superimposed on the video signal input from the game control unit 4, the lyrics telop is displayed in the foreground and the step instruction video may be difficult to see, so the user selects the lyrics display mode. This can be erased.
[0031]
The lyrics display mode is sequentially set to three modes of lyrics on, lyrics off, and lyrics off at the time of a dance game by operating the lyrics display changeover switch 51 (see FIG. 5B). The set mode is stored in the lyrics display mode register set in the RAM 22. The default of the lyrics display mode is lyrics on, and the lyrics display mode is reset to lyrics on every time a karaoke song is selected. The lyrics display changeover switch 51 may be provided in any one of the remote controller 8, the operation unit 24, the game operation panel 11, or any other place as long as it can notify the CPU 20 of the operation signal. The CPU 20 controls the switching of the video mixer 29 according to the operation signal of the lyrics display switching switch 51.
[0032]
The interface 36 is an interface that is connected to the interface 43 of the game control unit 4 and transmits various data to the game control unit 4 and receives various data from the game control unit 4. Data transmitted to the game control unit 4 includes step data or attribute information for executing a dance game, beat mark information generated for each beat of a karaoke song, a performance mark indicating a song section, and the like. . The data received from the game control unit 4 includes a start signal, a score of a dance game, a calorie consumption amount, and the like. The beat mark corresponds to the music progress information of the present invention, and the interface 36 corresponds to the music progress information output means of the present invention.
[0033]
In FIG. 3, the CPU 40 generates the step instruction video based on the step data. The game background video is a reproduction of movie data stored in the CD-ROM 42 a set in the CD-ROM drive 42. That is, the CD-ROM drive 42 corresponds to the gesture background image generating means of the present invention.
[0034]
Here, the step data is data indicating which of the foot panels 9a to 9d on which arrows in four directions (← ↓ ↑ →) are drawn in accordance with the progress of the music (particularly the rhythm of the music). In the dedicated music, step data corresponding to the music on a one-to-one basis is stored in the hard disk 27 or DVD 3 of the karaoke main unit 1. Further, a plurality of pieces of pattern data of about 8 steps, which are materials for generating step data of general music, are stored in the CD-ROM 42a of the game control unit 4.
[0035]
The game control unit 4 includes the CPU 40, and the CPU 40 includes a memory 41, a CD-ROM drive 42, an interface 43, a graphic controller 44, and interfaces 45 and 46.
[0036]
When the dance game is executed, step data corresponding to the karaoke song being played is written in the memory 41. When the dedicated music is selected, the step data is transmitted from the karaoke main unit 1. In addition, when playing a game with a general song, what is transmitted from the karaoke main unit 1 is attribute information such as the genre, time signature, and tempo of the song, so the CPU 40 generates step data based on this attribute information. To do.
[0037]
The CD-ROM 42a set in the CD-ROM drive 42 stores a large number of pattern data of about 8 steps, and the CPU 40 selects and combines appropriate ones from the pattern data based on the attribute information. To generate step data in real time.
[0038]
The interface 43 is an interface for communicating with the karaoke main unit 1 and receives the step data of the dedicated tune and the attribute information of the general tune from the karaoke main unit 1, in addition to the beat mark generated at every beat, the break of the tune ( Performance marks indicating rust, chorus, interlude, etc.) are received. In addition, information such as a start signal that is an ON signal of the start button 11a, a scoring result (score) of a dance game, a calorie consumption amount by the game, and the like from the game control unit 4 to the karaoke main unit 1 through the interface 43. Is sent. The interface 43 corresponds to the receiving means of the present invention.
[0039]
The graphic controller 44 converts the step instruction video input from the CPU 40 into a video signal, and superimposes the video on the game background video input from the CD-ROM drive 42 to karaoke main unit 1 (video). Output to the external video input terminal 29b) of the mixer 29. The CPU 40 and the graphic controller 44 correspond to the external video generation means of the present invention.
[0040]
The game operation panel 11 and the step board 9 are connected to the interface 45. The step board 9 includes four switches 90 (90a to 90d) provided inside four foot panels 9a to 9d with front, rear, left and right arrows, and foot panels 9a to 9 with the arrows. 9d and five pressure sensors 91 (91a to 91e) provided inside the foot panel 9e at the home position surrounded by them. The on / off state of the switch 90 and the detected value of the pressure sensor 91 are transmitted to the CPU 40 via the interface 45.
[0041]
The game operation panel 11 is provided with a start button 11a and a difficulty level selection button 11b. The difficulty level selection button 11b is a button switch for selecting the difficulty level of the step data displayed as the step instruction video, and three types A, B, and C are provided. The A button, the B button, and the C button correspond to the difficulty levels of A (high difficulty), B (medium difficulty), and C (low difficulty), respectively. The default when setting the game mode is C (low difficulty). The on operation of the start button 11 a and the difficulty level selection button 11 b is transmitted to the CPU 40 via the interface 45. When the start button 11a is turned on, the CPU 40 transmits a start signal to the CPU 20 of the karaoke main unit 1. Further, when the difficulty level selection button 11b is operated, one corresponding to the operated difficulty level selection button is selected from the three types of step data stored in the memory 41.
[0042]
The interface 46 is connected to the coin box 12 and the lighting device 13. The coin box 12 transmits credit information which is information on the number of inserted coins to the CPU 40. When the dance game is set as a charging service, the CPU 40 determines whether or not to execute the dance game based on the credit information. The lighting device 13 is controlled to blink by the control of the CPU 40 when the dance game is executed. The CPU 40 performs blinking control of the illumination device 13 based on beat marks that are beat timing information input from the karaoke main unit 1.
[0043]
When a dedicated song is selected by the user operating the remote controller 8, the CPU 20 of the karaoke main unit 1 reads the song data from the hard disk 27 or the DVD 3a to the RAM 22, and the step data stored corresponding to the song data. Is transmitted to the game control unit 4 via the interface 36.
[0044]
When the step data is input from the karaoke main unit 1 (via the interface 43), the CPU 40 of the game control unit 4 writes the step data into the memory 41, and the user operates the start button 11a and the difficulty level selection button 11b. Wait until there is. When the difficulty level selection button 11b is operated, step data having a difficulty level corresponding to the operated button is selected. When the start button 11a is operated, a start signal indicating that the start button 11a is turned on is notified to the CPU 20 via the interface 43 → interface 36.
[0045]
The CPU 20 starts playing a karaoke song (dedicated song) using the input of the start signal as a trigger, and inputs a beat mark synchronized with the beat timing of the song to the CPU 40 via the interface 36 → interface 43.
[0046]
The CPU 40 generates a step instruction video in synchronization with the beat mark and inputs it to the graphic controller 44. Note that the CD-ROM drive 42 starts playing the background video for the game with the start of the karaoke song (input of the first beat mark, etc.) as a trigger. The graphic controller 44 superimposes the step instruction video input from the CPU 40 and developed on the VRAM of the graphic controller 44 on the background video input from the CD-ROM drive 42, and the karaoke main unit 1 (video mixer 29). Output to the external video input terminal 29b. This video signal may be an NTSC composite signal.
[0047]
Further, the CPU 40 generates a step instruction video based on the step data, compares the ON signal input from the switches 90a to 90d of the step board 9 with the step data, and determines the foot panel indicated by the step instruction video. It is determined whether the instruction timing is correctly followed, and a score corresponding to the accuracy is calculated. This score is calculated in real time while the game is in progress, and is accumulated and stored in the memory 41. In addition, the calorie consumption by this game is calculated based on the number of ON signals of the switch 90, the ON frequency per unit time, and the pressure applied to each foot panel (including the home position) at each step. . This calorie consumption is calculated in real time while the game is in progress, and stored and stored in the memory 41. When the performance of the song, that is, the game is finished, the CPU 40 totals the score and the calorie consumption, and transmits them to the karaoke main unit 1. The karaoke main unit displays the score and calorie consumption on the monitor 6.
[0048]
In addition, when a dance game is executed in accordance with the performance of a karaoke song, a user (may be different from the person who is playing the dance game) can sing this karaoke song, or an actual song Instead of this, professional singing voice may be reproduced based on the audio track in the music data. Tone mode (whether or not to play professional singing voice) can be switched by operating the tone-to-speech switch 50. When the sound mode is off, the microphone 7 is enabled, the song input from the microphone 7 is scored, and the calorie consumption by the song is calculated.
[0049]
The calorie consumption may be displayed directly as “XX Cal consumed” or “5 minutes The “You have consumed the same calories as you jogged.” Further, the total consumption may be displayed by adding the calorie consumption of the singing and the calorie consumption of the dance game.
[0050]
On the other hand, when a general song is selected by the user, the CPU 20 of the karaoke main unit 1 reads the song data from the hard disk 27 or the DVD 3a to the RAM 22, and automatically starts the performance of the karaoke song. At this time, the DVD drive 3 reproduces a background video for karaoke music and inputs this video signal to the video mixer 29 from the external video input terminal 29a. The video mixer 29 superimposes the lyrics telop input from the graphic circuit 28 on this background video and outputs it to the monitor 6. If the user sings along with the karaoke performance, the singing voice is input from the microphone 7 and output from the speaker 5, and the singing is scored, and the calorie consumption by the singing is calculated. After singing, the scoring result (score) and calorie consumption are displayed on the monitor 6.
[0051]
As described above, when the start button 11a of the game operation panel 11 is operated within 30 seconds after the start of the performance of the general song, a start signal is notified from the CPU 40 of the game control unit 4 to the CPU 20 of the karaoke main unit 1. The
[0052]
When the start signal is notified within 30 seconds after the start of the performance of the general song, the CPU 20 stops the performance of the karaoke song and displays the karaoke song while displaying the step instruction video. Restart the performance. At this time, the video is switched to that input from the game control unit 4.
[0053]
Since the corresponding step data is not stored in the general music, the CPU 20 transmits the attribute information of the karaoke music to the CPU 40 of the game control unit 4. The CPU 40 stores the received attribute information in the memory 41, and generates step data in real time by selecting and combining the step pattern data of the CD-ROM 42a based on the attribute information. When a performance mark indicating a section of music such as interlude or chorus is input from the CPU 20, a step pattern that matches the section is selected. Further, when the user operates the difficulty level selection button 11b, step data having the designated difficulty level may be generated.
[0054]
Even when step data is automatically generated, the same step data is generated every time (for each difficulty level) for the same song. This is to allow users to improve through practice.
[0055]
When you are running a dance game, or when you are running a dance game and tone is on, that is, when you are playing a professional singer, change the equalization of karaoke songs and the balance of each part You may make it do. In other words, during karaoke singing, the overall balance is flattened to make the singing stand out and the volume is conservative, but during a dance game (when not singing), the overall volume is increased and the rhythm part (including the base part) The volume can be increased and the equalization can be made heavy by emphasizing the low and high sounds. For this purpose, the song data has part balance and equalizing parameters separately for singing and dance games, or the song data is stored with singing parameters and has a separate parameter change algorithm. In a dance game, the part balance and equalizing may be changed based on this parameter changing algorithm. The parameter changing algorithm is “rhythm part (MIDI 10th channel) is current volume × 1.2” or the like.
[0056]
FIG. 4 is a diagram showing the composition of music data stored in the hard disk and DVD. The song data includes a header in which attribute information such as the genre, time signature, and tempo of the song is written, a tone track in which data for generating a tone in the tone generator 30 is written, and a lyrics telop in synchronization with the performance. There is a control track in which performance marks indicating the section of the song such as a lyric track, prelude, No. 1, interlude, chorus, No. 2, and follower in which data for display are written are provided. The musical sound track is composed of a plurality of tracks, and includes a track of a plurality of performance parts and a guide melody track that serves as a reference for singing.
[0057]
Furthermore, the music data is accompanied by an audio track obtained by compressing the singing voice data of a professional singer singing this karaoke song by the TwinVQ method. This audio track may be stored integrally with the music data, or a music data storage area and a separate audio track storage area may be provided and associated with each other.
[0058]
Further, step data corresponding to one-to-one is attached to the dedicated music in the music data. As described above, the step data is time-series data indicating which of the foot panels 9a to 9d (← ↓ ↑ →) is stepped on as the music progresses. For each dedicated song, three types of step data, A (high difficulty), B (medium difficulty), and C (low difficulty) are stored. This step data may be stored integrally as part of the music data, and a music data storage area and a separate step data storage area are provided, and a table for associating each music data with each step data is provided. May be.
Whether the song is a dedicated song or a general song may be written in the header of the song data, and may be determined by whether or not corresponding step data exists.
[0059]
FIG. 5 is a diagram showing a display example of the monitor 6 in the game mode in which the dance game is executed, and represents the time change of the video on the left side portion of the monitor 6. A step instruction video is displayed on the left side of the monitor 6. The step instruction video is a group of arrows 61 that is a moving image in which a step pattern that matches the rhythm of the song is scrolled upward, and a still image that is displayed at the upper end of the monitor 6, and the arrow that has been scrolled upward is It consists of an image synthesized with a timing mark 60 indicating that it is a step timing when they match. As shown in FIGS. 6A to 6D, the arrow group 61 scrolls from the bottom to the top in accordance with the tempo of the music, and when it overlaps the timing mark 60 at the upper end, the timing mark changes brightly and scrolls. The arrows that have disappeared disappear.
[0060]
The CPU 40 receives a beat mark synchronized with the beat timing of the karaoke song being played from the karaoke main unit 1, and the arrow group 61 so that the timing mark 60 and a predetermined arrow in the arrow group 61 overlap the timing of the beat mark. Is drawn and the scrolling is controlled.
[0061]
The operation of the karaoke system will be described with reference to the flowcharts of FIGS.
FIG. 6 is a flowchart showing the operation at the start of performance. When the user inputs a song number from the remote controller 8, the song number is registered in the reserved song list. The CPU 20 reads the song number registered at the head of the reserved song list (s1), and reads the song data designated by this song number from the hard disk 27 or the DVD 3a (s2). Then, it is determined whether this song is a dedicated song or a general song (s3). If it is a dedicated music, the corresponding step data is read (if it is integrated with the music data, it is read together when the music data is read) and transmitted to the game control unit 4 ( s4). After that, preparation for performance such as initialization of the musical tone generator 30 is executed (s5), and it waits until a start signal is sent from the game control unit 4 (s6). The game control unit 4 transmits a start signal to the karaoke main unit 1 when the start button 11a is turned on. When the start signal is received (s6), the CPU 20 starts playing the music (s7).
[0062]
On the other hand, if the requested music is a general music (s3), after preparation for performance is executed (s10), the performance is immediately started (s11). If a start signal is input from the game control unit 4 within 30 seconds (s12, s13), the current performance is stopped (s14), and the attribute information of the song for generating step data is controlled by the game control. Transmit to unit 4 (s15). After this, the performance is restarted (s16).
[0063]
When 30 seconds have passed without the start button being turned on (s12), the start signal input from the game control unit 4 is prohibited and the performance is continued. For songs that are prohibited for use in dance games due to copyright agreements (prohibited songs), this is written in the header of the song data, and within 30 seconds when prohibited songs are played. Even if the start button is turned on, the game mode is not entered. Further, the restart of the performance of s16 is started after waiting for about 2 seconds so that the setup of the game control unit 4 is completed.
[0064]
FIG. 7 is a flowchart showing an operation during performance of a karaoke song. In FIG. 10A, it is determined whether or not the tone-rich mode is an on mode (s20). If the mode is on, that is, if the tone is on, or if the game is on and the dance game is running, the audio track is read in synchronization with the performance of the song and input to the audio playback unit 31. This is reproduced (s21).
[0065]
Next, the tempo clock is counted, and event data at the timing of the tempo clock is read from each track (s22). When the read data is data of a musical tone track (s23), this data is output to the musical tone generator 30 (s26). If the read data is lyric track data (s24), it is determined whether the lyric display mode is on or off (s27). Only when the lyric display mode is on, this lyric data is developed and output to the graphic circuit. (S28). When the additional display mode is set to the lyrics off or the dance game off and the dance game is currently being executed, the lyrics are not displayed, so the lyrics data is not developed in a pattern. It should be noted that the character pattern expansion of the lyrics data is always executed and may not be displayed by switching the video mixer 29.
If the read data is a performance mark (s25), the mark is transmitted to the game control unit 4 (s29).
[0066]
FIG. 5B is a flowchart showing the beat mark output operation. Beat timing is detected based on the tempo clock and the tempo information of the currently playing song (s31). Then, a strong beat mark or a weak beat mark is created based on the time data (3 time, 4 time, etc.) (s32). This beat mark is transmitted to the game control unit 4 (s33).
[0067]
FIG. 8A is a flowchart showing a scoring operation during performance of a karaoke song. First, singing volume / pitch information is input from the control amplifier 2 (s40). This information is obtained by extracting the volume and pitch from the song input from the microphone 7 and converting it into MIDI data. The degree of coincidence is determined by comparing this information with reference data such as guide melody data, and singing is scored based on this (s41). And the calorie consumption by this song is calculated based on factors such as the volume, pitch, interval and pitch jump width of this song (s42). The calculated score (scoring result) and calorie consumption are accumulated and stored (s43). The above operation is repeated until the music ends (s44).
[0068]
When the song ends (s44), the score of the song is totaled (s45), and the calorie amount consumed by the song is totaled (s46). Next, when the dance game is executed, the score of the dance game and the calorie consumption by the dance game are received from the game control unit 4 (s47, s48). These scores and calorie consumption are sequentially displayed (s49) and stored in a log (s50). The log is a performance history file of karaoke songs and is set in the hard disk 27. Log recording items include performance time, song number, singing score, singing calorie consumption, dance game score, dance game calorie consumption, dance game selection difficulty, and the like.
[0069]
FIG. 8B is a flowchart showing the mode switching operation by the user's operation. When the user operates the tone switch 50 (s51), the contents of the tone mode flag set in the RAM 22 are sequentially switched in the order of off → on → on during dance game (s52). Further, when the user operates the lyrics display changeover switch 51 (s53), the contents of the lyrics display mode flag set in the RAM 22 are sequentially switched in the order of ON → OFF → OFF at the time of the dance game (s54). As described above, the default of the tone-rich mode is off, and the default of the lyrics display mode is on. When the state is reset, such as when the karaoke device is powered on, these modes are set to default.
[0070]
9 to 11 are flowcharts showing the operation of the game control unit. FIG. 9 is a flowchart showing an operation when a dedicated song is played by the karaoke apparatus. When a dedicated song is played, step data dedicated to the song is sent from the karaoke apparatus main body, so that it is received (s60) and written into the memory 41 (s61). Three types of step data, A (high difficulty), B (medium difficulty), and C (low difficulty) are sent. And it waits until a user operates the difficulty level selection switch 11b or the start switch 11a (s62, s64). When the difficulty level selection switch 11b is operated, the step data stored in the memory 41 is selected corresponding to the difficulty level (s63). The default difficulty is C (low difficulty). When the start switch 11a is turned on (s64), a start signal is transmitted to the karaoke main unit 1 (s65).
[0071]
FIG. 10 is a flowchart showing an operation when a general song is played by the karaoke apparatus. In the case of a general song, the karaoke main unit 1 automatically starts playing without waiting for an instruction from the game control unit 4. At this time, when the start switch 11a is turned on (s70), a start signal is transmitted to the karaoke main unit 1 (s71). If the performance of the karaoke song starts within 30 seconds, the karaoke main unit 1 stops the karaoke performance in response to the start signal, and replays as a dance game. For this reason, the karaoke main body apparatus 1 transmits attribute information, which is support information for generating step data, to this apparatus. This attribute information is received (s72) and stored in the memory 41 (s73). Then, step data is generated by selecting and combining pattern data from the CD-ROM 42a based on the attribute information (s74). The generation of the real-time step pattern data is continued until the music ends (s77). Then, when a performance mark, which is information such as whether the music has entered chorus or an interlude, is received in the middle of the music (s75), the content of the step data generated in accordance with the performance mark is changed (s76).
[0072]
FIG. 11A is a flowchart showing the video generation operation of the game control unit 4. In synchronization with the input beat mark, a step instruction image which is an image of an arrow scrolling from bottom to top is generated based on the step pattern (s80). Then, the CD-ROM drive 42 reproduces the background video for the dance game (s81). The graphic controller 44 superimposes them (s82) and outputs them to the external video input terminal 29b of the karaoke main unit 1 (video mixer 29) (s83). In this operation, while the game is in progress, that is, while the music is being played, the video of the arrow generated in s80 is moved upward each time it is repeatedly executed.
[0073]
FIG. 5B is a flowchart showing the scoring operation of the game. First, on / off of the foot switches 90a to 90d of the step board 9 is detected (s85). The degree of coincidence between the on / off state and the current beat timing and step data is determined, and the score of the game is calculated (s86). Next, the detection values of the pressure sensors 91a to 91e are read (s87), and based on this, the calorie consumption by this game is calculated (s88). The calculated score and calorie consumption are accumulated and stored in the memory 41 (s89). The above operation is repeated until the game (song) ends (s90).
[0074]
When the game is over (s90), the score and calorie consumption are totaled and transmitted to the karaoke main unit (s91).
[0075]
Note that if the tempo changes during the game, the step instruction video will not match the song, so the karaoke song tempo control function is prohibited during the game.
[0076]
In this embodiment, a dance game device (game control unit 4) is connected as an external device of the karaoke device, but the external device of the present invention is not limited to this. For example, a game device such as a guitar game in which a guitar controller is connected instead of the step board 9, a drum game in which a drum controller is connected, or a keyboard game in which a keyboard controller is connected can be connected. An external video device or the like that creates a video exclusively synchronized with the performance timing can be used as the external device.
[0077]
【The invention's effect】
As described above, according to the present invention, it is possible to enjoy singing karaoke songs in the same way as a conventional karaoke device by playing karaoke songs and internal images, and by connecting an external device and playing music from this external device. For example, a dance game other than singing can be enjoyed by inputting an external video synchronized with. By externally attaching a device for generating images such as this dance game as an external device, this external device can be connected only by adding an interface function to the currently popular karaoke device. New functions can be realized.
[Brief description of the drawings]
FIG. 1 is a configuration diagram of a karaoke system according to an embodiment of the present invention.
FIG. 2 is a block diagram of the karaoke apparatus of the karaoke system.
FIG. 3 is a block diagram of a game control unit of the karaoke system.
FIG. 4 is a diagram showing the composition of music data stored in a karaoke device
FIG. 5 is a diagram showing a display example of a monitor during a dance game
FIG. 6 is a flowchart showing the operation of the karaoke apparatus.
FIG. 7 is a flowchart showing the operation of the karaoke apparatus.
FIG. 8 is a flowchart showing the operation of the karaoke apparatus.
FIG. 9 is a flowchart showing the operation of the game control unit.
FIG. 10 is a flowchart showing the operation of the game control unit.
FIG. 11 is a flowchart showing the operation of the game control unit.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Karaoke main body apparatus, 2 ... Control amplifier, 3 ... DVD changer, 3a ... DVD, 4 ... Game control unit, 5 ... Speaker, 6 ... Monitor, 7 ... Microphone, 8 ... Remote control,
9 ... Step board, 9a, 9b, 9c, 9d ... Foot panel, 11 ... Game operation panel, 11a ... Start button, 11b ... Difficulty level selection button, 12 ... Coin box, 13 ... Lighting device,
DESCRIPTION OF SYMBOLS 19 ... Distribution center, 20 ... CPU, 21 ... ROM, 22 ... RAM, 23 ... Remote control receiving part, 24 ... Operation part, 25 ... Display part, 26 ... Communication control part, 27 ... Hard disk, 28 ... Graphic circuit, 29 ... Video mixer, 29a, 29b ... external video input terminal, 30 ... musical sound generating unit, 31 ... sound reproduction unit, 35,36 ... interface,
40 ... CPU, 41 ... memory, 42 ... CD-ROM drive, 42a ... CD-ROM, 43 ... interface, 44 ... graphic controller, 45,46 ... interface, 50 ... tone switch, 51 ... lyric display switch

Claims

A karaoke apparatus comprising a musical sound generating means, an interface, and a control means for processing karaoke data,
Karaoke data includes music data and pattern data,
The musical sound generating means enables music data to be played,
The interface enables communication of various data with external devices,
The control means performs the first and second processes,
In the first process, pattern data of karaoke data designated by the user is transmitted to the external device via the interface,
In the second process, triggered by reception of a start signal from the interface, the music data in the designated karaoke data is played by the musical sound generating means, and the music progress information synchronized with the performance progress of the music data is transmitted via the interface. Karaoke device to send to external device.

An external device of a karaoke apparatus comprising an input means, a second control means, a second interface, a video generation means, and a storage means,
The input means enables a start instruction,
The second interface enables communication of various data with the karaoke device,
The video generation means reads the pattern data at the timing of the received song progress information and creates a video signal,
The second control means performs the third and fourth processes,
The third process stores the pattern data received by the second interface in the storage means,
In the fourth process, a start signal is transmitted to the karaoke device via the second interface in response to a start instruction from the input means, and the video is based on the pattern data stored in the third process and the received song progress information. An external device of a karaoke device that creates a signal.

A karaoke system comprising the karaoke device according to claim 1 and an external device of the karaoke device according to claim 2 connected to each other.

A karaoke apparatus comprising a musical sound generating means, an interface, and a control means for processing karaoke data,
Karaoke data includes music data and attribute data,
The musical sound generating means enables music data to be played,
The interface enables communication of various data with external devices,
The control means performs the first and second processes,
In the first process, attribute data of karaoke data designated by the user is transmitted to the external device via the interface,
In the second process, triggered by reception of a start signal from the interface, the music data in the designated karaoke data is played by the musical sound generating means, and the music progress information synchronized with the performance progress of the music data is transmitted via the interface. Karaoke device to send to external device.

An external device of a karaoke device comprising an input means, a second control means, a second interface, a storage means, and a video generation means,
The input means enables a start instruction,
The second interface enables communication of various data with the karaoke device,
The storage means stores a plurality of pattern data corresponding to the attribute data,
The video generation means reads the pattern data at the timing of the received song progress information and creates a video signal,
The second control means performs the third and fourth processes,
The third process stores the attribute data received by the second interface in the storage means,
In the fourth process, a start signal is transmitted to the karaoke device via the second interface in response to a start instruction from the input means, and the pattern data corresponding to the attribute data stored in the third process and the received music progression An external device of a karaoke device that creates a video signal based on information.

A karaoke system comprising the karaoke device according to claim 4 and an external device of the karaoke device according to claim 5 connected to each other.

The song progress information is information indicating the beat of the song,
7. The karaoke system according to claim 3, wherein the pattern data is data indicating a dance step.