JP2000029483A - Karaoke machine - Google Patents

Karaoke machine

Info

Publication number
JP2000029483A
JP2000029483A JP10216441A JP21644198A JP2000029483A JP 2000029483 A JP2000029483 A JP 2000029483A JP 10216441 A JP10216441 A JP 10216441A JP 21644198 A JP21644198 A JP 21644198A JP 2000029483 A JP2000029483 A JP 2000029483A
Authority
JP
Japan
Prior art keywords
data
scoring
user
image
karaoke apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP10216441A
Other languages
Japanese (ja)
Inventor
Kazumitsu Watanabe
一光 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP10216441A priority Critical patent/JP2000029483A/en
Publication of JP2000029483A publication Critical patent/JP2000029483A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To grade the figure of a user in compliance with singing with a prescribed timing of music and to improve the usability by capturing the photographing videos photographing the user's figure and grading the figure of the user in accordance with the captured static images. SOLUTION: When a CPU 2 transfers the captures static images of a capturer 10 to a RAM 4, only the human portions are extracted from the static image data and converts the body of the human portions and the center line of the hands to data. The CPU 2 executes grading by comparing the pose data obtd. by extracting only the pose by converting the body of the human portions and the center line of the hands of the static images to data and the reference image data assigned by image grading information among the files of the reference image data previously stored in a HDD 6. The results of the grading are displayed by a method, such as meter display, in a part of a monitor 9 at the point of the time the grading is executed. The grading results at the respective points of the grading are totaled by addition or subtraction at the point of the time playing ends or attains the data end of the music data. The results of the totalization are displayed by scores on the monitor 9.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、カラオケ装置に関
し、詳細には、カラオケ装置の使用者の曲に合わせたポ
ーズやダンス等の動きを採点するカラオケ装置に関す
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a karaoke apparatus, and more particularly, to a karaoke apparatus for scoring a movement such as a pose or a dance according to a song of a user of the karaoke apparatus.

【0002】[0002]

【従来の技術】従来、カラオケ装置としては、演奏音楽
(伴奏音楽)と歌詞情報を含む映像を記録した光ディス
ク等を再生し、再生した伴奏音楽にマイクによる音声を
ミキシングして出力するものが一般的であった。
2. Description of the Related Art Conventionally, a karaoke apparatus generally reproduces an optical disk or the like on which an image including performance music (accompaniment music) and lyrics information is recorded, and mixes the reproduced accompaniment music with a microphone and outputs the resulting music. It was a target.

【0003】ところが、近年、電子楽器等で使用されて
いるMIDI音源を用いて楽曲を演奏し、同時にビデオ
CD等の背景映像に歌詞を重ねて表示するカラオケ装置
がある。このようなMIDI音源を使用したカラオケ装
置は、伴奏音楽と歌詞情報を含む映像を記録した光ディ
スクを再生するカラオケ装置が、演奏後の音を記録して
いたのに対して、演奏情報を曲データとして持っている
のみであるため、情報量が上記光ディスクを再生するカ
ラオケ装置の場合に比較して、少なくて済むという特徴
を有している。
However, in recent years, there has been a karaoke apparatus that plays music using a MIDI sound source used in electronic musical instruments and the like, and simultaneously displays lyrics over a background image such as a video CD. A karaoke apparatus using such a MIDI sound source has a karaoke apparatus for playing back an optical disk on which an image including accompaniment music and lyrics information is recorded. Therefore, it has a feature that the amount of information can be reduced as compared with a karaoke apparatus that reproduces the optical disc.

【0004】そこで、近時、この特徴を生かして、電話
回線等を利用した通信により楽曲を配信して、当該配信
された楽曲をMIDI音源を利用して演奏する通信を利
用したカラオケ装置が普及している。このようなMID
I音源を利用したカラオケ装置は、楽曲がMIDIデー
タで制作されており、このMIDIデータは、通常、オ
リジナルの曲に似せて制作されている。
In recent years, karaoke apparatuses have been widely used which utilize this characteristic to distribute music by communication using a telephone line or the like and to play the distributed music using a MIDI sound source. are doing. Such MID
In a karaoke apparatus using an I sound source, music is produced using MIDI data, and the MIDI data is usually produced so as to resemble an original music.

【0005】また、カラオケ装置においては、音程や音
量の基準データと使用者のマイク入力の音声とを比較し
て、歌唱に対する採点を行い、歌唱後に採点結果を表示
する機能を備えたカラオケ装置が出現している。
In the karaoke apparatus, there is provided a karaoke apparatus having a function of comparing reference data of a pitch and a volume with a voice of a user's microphone input, scoring a singing, and displaying a scoring result after the singing. Has appeared.

【0006】[0006]

【発明が解決しようとする課題】しかしながら、このよ
うな従来の採点を行うカラオケ装置にあっては、音程や
音量の基準データと使用者のマイク入力の音声とを比較
して、歌唱に対する採点を行うようになっていたため、
歌唱者の振り付けや動きを採点することができず、この
ような振り付けや動きについても採点を行うことのでき
るカラオケ装置が要望されている。すなわち、カラオケ
演奏の元となる楽曲のオリジナルのプロによる歌唱で
は、歌唱にあわせた振り付けや間奏部分でダンスが行わ
れることがあるが、従来のカラオケ装置には、このよう
な振り付けやダンス等の動きに対して採点す機能がな
く、振り付け(ポーズ)や動きに対して採点を行うカラ
オケ装置が要望されている。
However, in such a conventional karaoke apparatus for scoring, the reference data of the pitch and volume is compared with the voice of the microphone input of the user to score the singing. Had to do so,
There is a demand for a karaoke apparatus that cannot score the choreography and movement of a singer, and can also score such choreography and movement. In other words, in the singing by the original professional of the music that is the source of the karaoke performance, the dance may be performed in the choreography or the interlude portion according to the singing. There is a demand for a karaoke apparatus that does not have a function for scoring movements and performs scoring (pause) and movements.

【0007】そこで、請求項1記載の発明は、曲データ
に、タイミングデータに対応付けて、使用者の姿の採点
を指示する採点データを設定し、当該採点データに基づ
いて、カラオケ装置の使用者の姿を撮影した撮影映像を
静止画像として取り込み、当該取り込んだ静止画像に基
づいて使用者の姿を採点することにより、曲の所定タイ
ミングで歌唱に合わせた使用者の姿(ポーズ)を採点
し、利用性の良好なカラオケ装置を提供することを目的
としている。
Therefore, according to the present invention, scoring data for instructing scoring of a user's figure is set in music data in association with timing data, and the karaoke apparatus is used based on the scoring data. The captured image of the user is captured as a still image, and the user's figure is scored based on the captured still image. It is another object of the present invention to provide a karaoke apparatus with good usability.

【0008】請求項2記載の発明は、使用者の姿の採点
の基準となる複数の基準画像データを記憶し、当該複数
の基準画像データのうち、採点データに含まれている採
点基準データの指定する基準画像データと使用者の姿を
撮影した静止画像とを比較して採点を行うことにより、
使用者の姿を当該曲に応じてより適切に採点し、より一
層利用性の良好なカラオケ装置を提供することを目的と
している。
According to a second aspect of the present invention, a plurality of reference image data serving as a reference for scoring a user's figure are stored, and among the plurality of reference image data, the scoring reference data included in the scoring data is stored. By scoring by comparing the specified reference image data with a still image of the user's figure,
It is an object of the present invention to provide a karaoke apparatus that more appropriately scores the appearance of a user in accordance with the song and that is more usable.

【0009】請求項3記載の発明は、曲データに、タイ
ミングデータに対応付けて、所定間隔毎に使用者の動き
の採点を指示する採点データを設定し、当該採点データ
に基づいて、カラオケ装置の使用者の姿を撮影した撮影
映像を静止画像として取り込み、当該所定間隔毎に取り
込んだ静止画像に基づいて使用者の動きを採点すること
により、曲の所定タイミングで歌唱に合わせた使用者の
動きを適切に採点し、利用性の良好なカラオケ装置を提
供することを目的としている。
According to a third aspect of the present invention, the karaoke apparatus sets grading data for instructing grading of the user's movement at predetermined intervals in association with the music data, at timing data, and based on the grading data. By capturing a captured image of the user's figure as a still image and scoring the user's movement based on the captured still images at the predetermined intervals, the user's music synchronized with the singing at a predetermined timing of the song The purpose of the present invention is to provide a karaoke device that appropriately scores a movement and has good usability.

【0010】請求項4記載の発明は、使用者の動きの採
点の基準となる複数の基準画像データを記憶し、当該複
数の基準画像データのうち、採点データに含まれている
採点基準データの指定する基準画像データと静止画像の
変化とを比較して採点を行うことにより、使用者の動き
を当該曲に応じてより適切に採点し、より一層利用性の
良好なカラオケ装置を提供することを目的としている。
According to a fourth aspect of the present invention, a plurality of reference image data serving as a reference for scoring a user's movement are stored, and among the plurality of reference image data, the scoring reference data included in the scoring data is stored. To provide a karaoke apparatus with better usability by comparing the designated reference image data with a change in a still image and scoring the movement of the user more appropriately according to the music. It is an object.

【0011】請求項5記載の発明は、複数の静止画像の
変化の差分を抽出し、当該差分に基づいて使用者の動き
を採点することにより、簡単にかつ適切に使用者の動き
を採点し、安価で利用性の良好なカラオケ装置を提供す
ることを目的としている。
According to a fifth aspect of the present invention, the difference between the changes of a plurality of still images is extracted, and the movement of the user is scored based on the difference, whereby the movement of the user is easily and appropriately scored. It is an object of the present invention to provide a karaoke apparatus which is inexpensive and has good usability.

【0012】[0012]

【課題を解決するための手段】請求項1記載の発明のカ
ラオケ装置は、演奏のタイミングを設定するタイミング
データ毎に、少なくとも楽曲データ、映像データ及び歌
詞データの設定されたカラオケの曲データ中の前記楽曲
データに基づいて演奏音を出力するとともに、当該演奏
音に合わせてマイクから入力された音声を前記演奏音に
ミキシングし、前記映像データに基づいて背景映像を表
示するとともに、前記歌詞データに基づいて前記背景映
像に当該歌詞を合成して表示するカラオケ装置におい
て、前記曲データは、前記タイミングデータに対応付け
て、使用者の姿の採点を指示する採点データが設定され
ており、前記使用者の姿を撮影する撮影手段と、前記撮
影手段の撮影する撮影映像を静止画像として取り込む画
像取込手段と、前記画像取込手段の取り込んだ静止画像
に基づいて前記使用者の姿を採点する採点手段と、前記
採点データに基づいて前記画像取込手段に前記静止画像
を取り込ませ、当該取り込んだ静止画像に基づいて前記
採点手段に前記使用者の姿を採点させる制御手段と、を
備えることにより、上記目的を達成している。
According to the first aspect of the present invention, there is provided a karaoke apparatus in which at least music data, video data, and lyric data are included in the karaoke music data for each timing data for setting a performance timing. Along with outputting the performance sound based on the music data, mixing the sound input from the microphone with the performance sound to the performance sound, displaying a background video based on the video data, and In the karaoke apparatus that synthesizes and displays the lyrics with the background video based on the karaoke data, the tune data is set in such a manner that the grading data instructing grading of the user's figure is set in association with the timing data. Photographing means for photographing a person's figure; image capturing means for capturing a photographed image photographed by the photographing means as a still image; Scoring means for scoring the user's figure based on the still image captured by the image capturing means, and causing the image capturing means to capture the still image based on the scoring data, and based on the captured still image. The above object is achieved by providing the scoring means with control means for scoring the figure of the user.

【0013】上記構成によれば、曲データに、タイミン
グデータに対応付けて、使用者の姿の採点を指示する採
点データを設定し、当該採点データに基づいて、カラオ
ケ装置の使用者の姿を撮影した撮影映像を静止画像とし
て取り込み、当該取り込んだ静止画像に基づいて使用者
の姿を採点するので、曲の所定タイミングで歌唱に合わ
せた使用者の姿(ポーズ)を採点することができ、カラ
オケ装置の利用性を向上させることができる。
[0013] According to the above arrangement, scoring data for instructing scoring of the user's figure is set in the music data in association with the timing data, and based on the scoring data, the figure of the user of the karaoke apparatus is determined. Since the captured video is captured as a still image and the user's figure is scored based on the captured still image, the user's figure (pause) according to the singing can be scored at a predetermined timing of the song, The usability of the karaoke apparatus can be improved.

【0014】この場合、例えば、請求項2に記載するよ
うに、前記カラオケ装置は、前記採点手段による前記使
用者の姿の採点の基準となる複数の基準画像データを記
憶する記憶手段をさらに備え、前記採点データは、前記
基準画像データを指定する採点基準データを含み、前記
制御手段は、前記記憶手段の記憶する複数の前記基準画
像データのうち前記採点基準データの指定する前記基準
画像データと前記静止画像とを前記採点手段に比較させ
て前記採点を行わせるものであってもよい。
In this case, for example, as described in claim 2, the karaoke apparatus further includes storage means for storing a plurality of reference image data which are used as references for scoring the user's figure by the scoring means. , The scoring data includes scoring reference data specifying the reference image data, the control means, the reference image data to specify the scoring reference data among the plurality of reference image data stored in the storage means, The scoring unit may compare the still image with the scoring unit to perform the scoring.

【0015】上記構成によれば、使用者の姿の採点の基
準となる複数の基準画像データを記憶し、当該複数の基
準画像データのうち、採点データに含まれている採点基
準データの指定する基準画像データと使用者の姿を撮影
した静止画像とを比較して採点を行っているので、使用
者の姿を当該曲に応じてより適切に採点することがで
き、カラオケ装置の利用性をより一層向上させることが
できる。
According to the above configuration, a plurality of reference image data serving as a reference for scoring the user's figure are stored, and among the plurality of reference image data, the scoring reference data included in the scoring data is designated. Since the scoring is performed by comparing the reference image data with a still image of the user's figure, the user's figure can be more appropriately graded according to the music, and the usability of the karaoke apparatus can be improved. It can be further improved.

【0016】請求項3記載の発明のカラオケ装置は、演
奏のタイミングを設定するタイミングデータ毎に、少な
くとも楽曲データ、映像データ及び歌詞データの設定さ
れたカラオケの曲データ中の前記楽曲データに基づいて
演奏音を出力するとともに、当該演奏音に合わせてマイ
クから入力された音声を前記演奏音にミキシングし、前
記映像データに基づいて背景映像を表示するとともに、
前記歌詞データに基づいて前記背景映像に当該歌詞を合
成して表示するカラオケ装置において、前記曲データ
は、前記タイミングデータに対応付けて、所定間隔毎に
使用者の動きの採点を指示する採点データが設定されて
おり、前記使用者の姿を撮影する撮影手段と、前記撮影
手段の撮影する撮影映像を静止画像として取り込む画像
取込手段と、前記画像取込手段が所定間隔毎に取り込ん
だ静止画像に基づいて前記使用者の動きを採点する採点
手段と、前記採点データに基づいて前記画像取込手段に
前記静止画像を所定間隔で取り込ませ、当該取り込んだ
複数の前記静止画像に基づいて前記採点手段に前記使用
者の動きを採点させる制御手段と、を備えることによ
り、上記目的を達成している。
In the karaoke apparatus according to the third aspect of the present invention, for each timing data for setting a performance timing, at least the karaoke music data in the karaoke music data in which music data, video data and lyric data are set. Along with outputting the performance sound, mixing the sound input from the microphone with the performance sound to the performance sound, and displaying a background video based on the video data,
In a karaoke apparatus that combines the lyrics with the background video based on the lyrics data and displays the lyrics, the song data is associated with the timing data, and the scoring data is used to instruct the user to score the movement at predetermined intervals. A photographing means for photographing the figure of the user, an image capturing means for capturing a photographed image captured by the photographing means as a still image, and a still image captured by the image capturing means at predetermined intervals. Scoring means for scoring the movement of the user based on an image, causing the image capturing means to capture the still images at predetermined intervals based on the scoring data, and based on the plurality of captured still images. The above object is achieved by providing the scoring means with control means for scoring the movement of the user.

【0017】上記構成によれば、曲データに、タイミン
グデータに対応付けて、所定間隔毎に使用者の動きの採
点を指示する採点データを設定し、当該採点データに基
づいて、カラオケ装置の使用者の姿を撮影した撮影映像
を静止画像として取り込んで、当該所定間隔毎に取り込
んだ静止画像に基づいて使用者の動きを採点するので、
曲の所定タイミングで歌唱に合わせた使用者の動きを適
切に採点することができ、カラオケ装置の利用性を向上
させることができる。
According to the above arrangement, scoring data for instructing the scoring of the movement of the user is set at predetermined intervals in association with the music data and the timing data, and the use of the karaoke apparatus is performed based on the scoring data. Since the captured image of the user is captured as a still image and the movement of the user is scored based on the captured still images at the predetermined intervals,
At a predetermined timing of the music, the movement of the user according to the singing can be appropriately scored, and the usability of the karaoke apparatus can be improved.

【0018】この場合、例えば、請求項4に記載するよ
うに、前記カラオケ装置は、前記採点手段による前記使
用者の動きの採点の基準となる複数の基準画像データを
記憶する記憶手段をさらに備え、前記採点データは、前
記基準画像データを指定する採点基準データを含み、前
記制御手段は、前記記憶手段の記憶する複数の前記基準
画像データのうち前記採点基準データの指定する前記基
準画像データと前記静止画像の変化とを比較させて前記
採点を行わせるものであってもよい。
In this case, for example, as set forth in claim 4, the karaoke apparatus further includes storage means for storing a plurality of pieces of reference image data serving as a reference for scoring the movement of the user by the scoring means. , The scoring data includes scoring reference data specifying the reference image data, the control means, the reference image data to specify the scoring reference data among the plurality of reference image data stored in the storage means, The scoring may be performed by comparing the change with the still image.

【0019】上記構成によれば、使用者の動きの採点の
基準となる複数の基準画像データを記憶し、当該複数の
基準画像データのうち、採点データに含まれている採点
基準データの指定する基準画像データと静止画像の変化
とを比較して採点を行っているので、使用者の動きを当
該曲に応じてより適切に採点することができ、カラオケ
装置の利用性をより一層向上させることができる。
According to the above configuration, a plurality of reference image data serving as a reference for scoring the movement of the user is stored, and among the plurality of reference image data, the scoring reference data included in the scoring data is designated. Since the scoring is performed by comparing the reference image data with the change of the still image, the movement of the user can be more appropriately scored according to the music, and the usability of the karaoke apparatus is further improved. Can be.

【0020】また、例えば、請求項5に記載するよう
に、前記採点手段は、前記複数の静止画像の変化の差分
を抽出し、当該差分に基づいて前記使用者の動きを採点
するものであってもよい。
Further, for example, as set forth in claim 5, the scoring means extracts a difference between changes in the plurality of still images and scores the movement of the user based on the difference. You may.

【0021】上記構成によれば、複数の静止画像の変化
の差分を抽出し、当該差分に基づいて使用者の動きを採
点しているので、簡単にかつ適切に使用者の動きを採点
することができ、カラオケ装置を安価で利用性の良好な
ものとすることができる。
According to the above arrangement, since the difference between the changes of the plurality of still images is extracted and the movement of the user is scored based on the difference, the movement of the user can be easily and appropriately scored. Thus, the karaoke apparatus can be made inexpensive and have good usability.

【0022】[0022]

【発明の実施の形態】以下、本発明の好適な実施の形態
を添付図面に基づいて詳細に説明する。なお、以下に述
べる実施の形態は、本発明の好適な実施の形態であるか
ら、技術的に好ましい種々の限定が付されているが、本
発明の範囲は、以下の説明において特に本発明を限定す
る旨の記載がない限り、これらの態様に限られるもので
はない。
Preferred embodiments of the present invention will be described below in detail with reference to the accompanying drawings. It should be noted that the embodiments described below are preferred embodiments of the present invention, and therefore, various technically preferable limitations are added. However, the scope of the present invention is not limited to the following description. The embodiments are not limited to these embodiments unless otherwise specified.

【0023】図1〜図4は、本発明のカラオケ装置の第
1の実施の形態を示す図である。図1は、本発明のカラ
オケ装置の第1の実施の形態を適用したカラオケ装置1
の回路ブロック図である。
FIGS. 1 to 4 are diagrams showing a first embodiment of the karaoke apparatus of the present invention. FIG. 1 shows a karaoke apparatus 1 to which a first embodiment of the karaoke apparatus of the present invention is applied.
FIG. 3 is a circuit block diagram of FIG.

【0024】図1において、カラオケ装置1は、CPU
(Central Processing Unit )2、ROM(Read Only
Memory)3、RAM(Random Access Memory)4、SC
SI(Small Computer System Interface ) I/F
5、HDD(ハードディスク)6、VCDチャンバー
7、画像制御部8、モニタ9、キャプチャ10、カメラ
11、フロントパネル12、リモコン13、通信制御部
14、タイマー15、MIDI(Musical Instrument D
igital Interface) I/F16、音源17、音声制御
部18、マイク19、アンプ20及びスピーカ21等を
備えており、上記主要各部は、バス22に接続されてい
る。
In FIG. 1, a karaoke apparatus 1 has a CPU
(Central Processing Unit) 2, ROM (Read Only)
Memory) 3, RAM (Random Access Memory) 4, SC
SI (Small Computer System Interface) I / F
5, HDD (hard disk) 6, VCD chamber 7, image controller 8, monitor 9, capture 10, camera 11, front panel 12, remote controller 13, communication controller 14, timer 15, MIDI (Musical Instrument D)
Digital Interface) An I / F 16, a sound source 17, a sound control unit 18, a microphone 19, an amplifier 20, a speaker 21, and the like are provided.

【0025】ROM3には、カラオケ装置1の電源が立
ち上がった時点で起動するブート用プログラムが格納さ
れており、HDD6には、制御プログラムや受信した楽
曲データが格納される。
The ROM 3 stores a boot program which is started when the power of the karaoke apparatus 1 is turned on, and the HDD 6 stores a control program and received music data.

【0026】CPU(制御手段)2は、カラオケ装置1
の電源がオンされると、ROM3に格納されているブー
ト用プログラムで立ち上げ処理を行って、HDD6から
制御プログラムをRAM4にロードし、RAM4をワー
クメモリとして利用しつつ、カラオケ装置1の各部を制
御して、カラオケ装置1としての処理を行うとともに、
後述する採点処理を行う。
The CPU (control means) 2 is a karaoke device 1
When the power supply of the karaoke apparatus 1 is turned on, a boot process is performed by a boot program stored in the ROM 3, the control program is loaded from the HDD 6 into the RAM 4, and each part of the karaoke apparatus 1 is used while using the RAM 4 as a work memory. Control and perform the processing as the karaoke apparatus 1,
A scoring process described below is performed.

【0027】上記HDD(記憶手段)6及びVCDチャ
ンバー7は、SCSI I/F5に接続されており、V
CDチャンバー7には、カラオケの背景映像を記憶する
ビデオCDが複数枚セットされている。VCDチャンバ
ー7は、CPU2の制御下で動作して、CD(Compact
Disc)の入れ替え処理、指定位置からのCDの再生・停
止処理を行う。なお、VCDチャンバー7の代わりに、
LDプレイヤを用いてもよい。また、HDD6には、後
述する採点処理で採点の基準となる基準画像データが格
納されている。
The HDD (storage means) 6 and the VCD chamber 7 are connected to a SCSI I / F 5,
In the CD chamber 7, a plurality of video CDs storing background images of karaoke are set. The VCD chamber 7 operates under the control of the CPU 2 and outputs a CD (Compact
Disc) replacement processing and CD playback / stop processing from the designated position are performed. In addition, instead of the VCD chamber 7,
An LD player may be used. The HDD 6 also stores reference image data serving as a reference for scoring in a scoring process described later.

【0028】画像制御部8には、TVモニタ等のモニタ
9が接続されており、画像制御部8は、CPU2により
ビットマップに展開された歌詞とVCDチャンバー7の
出力映像を合成してモニタ9に出力し、また、曲データ
の色替え情報に基づいて曲の進行に合わせて歌詞の色を
変化させる。
The image control unit 8 is connected to a monitor 9 such as a TV monitor. The image control unit 8 combines the lyrics developed in the bit map by the CPU 2 with the output image of the VCD chamber 7 to monitor 9. And the color of the lyrics is changed in accordance with the progress of the music based on the color change information of the music data.

【0029】キャプチャ(画像取込手段)10には、カ
メラ(撮影手段)11が接続されており、カメラ11と
しては、ビデオカメラが利用されている。カメラ11
は、カラオケ装置1の使用者、例えば、歌唱者の姿を撮
影して、取り込んだ映像をビデオ信号としてキャプチャ
10に出力し、キャプチャ10は、カメラ11から入力
されるビデオ信号をデジタル化して内部メモリに記憶す
る。
A camera (photographing means) 11 is connected to the capture (image capturing means) 10, and a video camera is used as the camera 11. Camera 11
Captures an image of a user, for example, a singer, of the karaoke apparatus 1 and outputs the captured image as a video signal to the capture 10. The capture 10 digitizes the video signal input from the camera 11 and internally Store in memory.

【0030】フロントパネル12は、カラオケ装置1を
操作する各種スイッチやキー等のスイッチ類が設けられ
ているとともに、ディスプレイ、例えば、LED(Ligh
t Emitting Diode)やLCD(Liquid Crystal Displa
y)等を備え、スイッチ類からは、カラオケ装置1の各
種操作が行われ、ディスプレイには、スイッチ類から入
力操作された内容や各種情報が表示される。また、フロ
ントパネル12には、リモコン13の光受光部やリモコ
ン13への光送信部を備えており、光受光部でリモコン
13から送信されてくる操作信号を受信するとともに、
光送信部からカラオケ装置1の状態を示す情報信号をリ
モコン13に送信する。
The front panel 12 is provided with switches such as various switches and keys for operating the karaoke apparatus 1, and has a display such as an LED (Light).
t Emitting Diode) and LCD (Liquid Crystal Displa)
y) and the like, various operations of the karaoke apparatus 1 are performed from the switches, and the contents and various information input by the switches are displayed on the display. Further, the front panel 12 includes a light receiving unit of the remote controller 13 and a light transmitting unit to the remote controller 13. The light receiving unit receives an operation signal transmitted from the remote controller 13, and
An information signal indicating the state of the karaoke apparatus 1 is transmitted from the optical transmitter to the remote controller 13.

【0031】リモコン13は、カラオケ装置1を操作す
る各種スイッチやキー等のスイッチ類が設けられている
とともに、ディスプレイ、例えば、LCDやLED等を
備え、スイッチ類からは、カラオケ装置1の各種操作が
行われ、ディスプレイには、スイッチ類から入力操作さ
れた内容や各種情報が表示される。
The remote controller 13 is provided with switches such as various switches and keys for operating the karaoke apparatus 1, and has a display such as an LCD and an LED. Is performed, and the content and various information input from the switches are displayed on the display.

【0032】通信制御部14には、回線L、例えば、I
SDN(Integrated Services Digital Network:サー
ビス総合デジタル網 )あるいはPSTN(Public Swic
hed Telephone Network:公衆電話網)等を介してホス
ト30が接続されており、通信制御部14は、回線Lを
介してホスト30と通信を行って、ホスト30から新し
い曲データをダウンロードし、また、ステータスをアッ
プロードする。このホスト30からダウンロードされた
曲データは、CPU2の制御下で、上記HDD6に蓄積
される。
The communication control unit 14 has a line L, for example, I
SDN (Integrated Services Digital Network) or PSTN (Public Swic
The host 30 is connected via a headphone network (public telephone network) or the like. The communication control unit 14 communicates with the host 30 via the line L to download new music data from the host 30, and , Upload status. The music data downloaded from the host 30 is stored in the HDD 6 under the control of the CPU 2.

【0033】ホスト30は、多数の曲データを蓄積し、
各カラオケ装置1から曲データの要求があると、当該要
求のあった曲データを回線Lを介してカラオケ装置1に
送信し、また、各カラオケ装置1の状態を管理する。
The host 30 stores a large number of music data,
When there is a request for song data from each karaoke device 1, the requested song data is transmitted to the karaoke device 1 via the line L, and the state of each karaoke device 1 is managed.

【0034】上記曲データは、図2に示すように、タイ
ミング情報(タイミングデータ)、演奏情報(楽曲デー
タ)、描画情報(歌詞データ)、歌詞情報、色替え情報
及び画像採点情報(採点データ)等が含まれており、タ
イミング情報毎に、上記各情報が記述されているが、タ
イミング情報によっては、一部の情報のみしか記述され
ていない場合がある。このタイミング情報は、前のタイ
ミング情報からの時間情報であり、演奏情報は、音源1
7に対するコマンドが含まれている。描画情報は、VC
Dチャンバー7の再生位置データが含まれており、歌詞
情報は、表示分の歌詞データ、表示位置、表示色の情報
が含まれている。なお、歌詞データには、タイトルや著
作権表示も含まれている。色替え情報は、色替え位置、
色替え幅、表示色の情報が含まれており、画像採点情報
は、画像のキャプチャー指示、基準画像データのファイ
ル情報(採点基準データ)が含まれている。そして、画
像採点に使用されるこの基準画像データのファイル自体
は、別途ファイル化してホスト30から転送され、HD
D6に蓄積されている。
As shown in FIG. 2, the music data includes timing information (timing data), performance information (music data), drawing information (lyric data), lyrics information, color change information, and image scoring information (scoring data). The above information is described for each piece of timing information, but depending on the timing information, only some pieces of information may be described. This timing information is time information from the previous timing information, and the performance information is the sound source 1
7 is included. The drawing information is VC
The reproduction position data of the D chamber 7 is included, and the lyric information includes the lyric data for the display, the display position, and the display color information. The lyrics data includes a title and a copyright notice. The color change information includes the color change position,
Information on the color change width and display color is included. The image scoring information includes an image capture instruction and file information (scoring reference data) of reference image data. The file itself of the reference image data used for the image scoring is separately filed and transferred from the host 30, and the
D6.

【0035】タイマー15は、曲データを再生する際の
基準となるタイミングクロックを生成し、生成したタイ
ミングで割り込みを発生させる。
The timer 15 generates a timing clock serving as a reference when reproducing music data, and generates an interrupt at the generated timing.

【0036】MIDI I/F16には、音源17が接
続されており、音源17には、MIDI I/F16を
介してHDD6に蓄積されている曲データが入力され
る。音源17は、入力される曲データを再生して、オー
ディオ信号として音声制御部18に出力する。
A sound source 17 is connected to the MIDI I / F 16, and music data stored in the HDD 6 is input to the sound source 17 via the MIDI I / F 16. The sound source 17 reproduces the input music data and outputs it to the audio control unit 18 as an audio signal.

【0037】音声制御部18には、マイク19が接続さ
れており、マイク19からマイク19の集音した歌唱音
声の音声信号が入力される。音声制御部18は、音源1
7から入力されるオーディオ信号とマイク19から入力
される音声信号をミキシングしてアンプ20に出力す
る。この音声制御部18は、CPU2の制御下で動作し
て、音源17から入力されるオーディオ信号とマイク1
9から入力される音声信号に対して各種のエフェクト処
理を行う。
A microphone 19 is connected to the voice control unit 18, and a voice signal of a singing voice collected by the microphone 19 is input from the microphone 19. The sound control unit 18 controls the sound source 1
The audio signal input from the microphone 7 and the audio signal input from the microphone 19 are mixed and output to the amplifier 20. The voice control unit 18 operates under the control of the CPU 2 to control the audio signal input from the sound source 17 and the microphone 1.
Various types of effect processing are performed on the audio signal input from the control unit 9.

【0038】アンプ20は、音声制御部18から入力さ
れるミキシング信号を増幅してスピーカ21に出力し、
スピーカ21は、アンプ20から入力されるミキシング
信号を拡声出力する。
The amplifier 20 amplifies the mixing signal input from the audio controller 18 and outputs the amplified signal to the speaker 21.
The speaker 21 loudspeaker outputs the mixing signal input from the amplifier 20.

【0039】次に、本実施の形態の作用を説明する。カ
ラオケ装置1は、曲データ中に含まれている画像採点情
報に基づいてカメラ11の撮影しているカラオケ装置1
の使用者の映像をキャプチャ10で取り込んで、当該使
用者の姿を基準画像画像データと比較して採点するとこ
ろにその特徴がある。
Next, the operation of the present embodiment will be described. The karaoke apparatus 1 captures images of the karaoke apparatus 1 based on the image scoring information included in the music data.
The feature is that the video of the user is captured by the capture 10 and the appearance of the user is compared with the reference image image data and scored.

【0040】すなわち、カラオケ装置1は、図3に示す
ように、曲データのタイミング情報に基づいてタイミン
グを確保しながら曲データの各情報に基づいてカラオケ
演奏・採点処理を行う。すなわち、CPU2は、リモコ
ン13あるいはフロントパネル12のスイッチ操作によ
り指定された曲の曲データをHDD6から読み出し、あ
るいは、通信制御部14を介してホスト30から当該指
定された曲の曲データをダウンロードし(ステップS
1)、当該曲データのタイミング情報に基づいてウエイ
ト時間が経過したかチェックする(ステップS2)。
That is, as shown in FIG. 3, the karaoke apparatus 1 performs a karaoke performance / scoring process based on each piece of music data information while securing timing based on the music data timing information. That is, the CPU 2 reads the song data of the song designated by the switch operation of the remote controller 13 or the front panel 12 from the HDD 6 or downloads the song data of the designated song from the host 30 via the communication control unit 14. (Step S
1) It is checked whether the wait time has elapsed based on the timing information of the music data (step S2).

【0041】ステップS2で、ウエイト時間が経過して
いないときには、CPU2は、リモコン13あるいはフ
ロントパネル12のスイッチ操作が行われたかチェック
し(ステップS3)、スイッチ操作が行われると、当該
スイッチ操作に対応した処理を行って(ステップS
4)、データエンドであるかあるいは演奏終了であるか
をチェックする(ステップS5)。
If the wait time has not elapsed in step S2, the CPU 2 checks whether a switch operation on the remote controller 13 or the front panel 12 has been performed (step S3). Perform the corresponding processing (step S
4) It is checked whether it is the data end or the performance end (step S5).

【0042】ステップS5で、データエンドあるいは演
奏終了でないときには、CPU2は、ステップS2に戻
って、ウエイト時間が経過したかチェックし(ステップ
S2)、ウエイト時間が経過すると、演奏情報があるか
(ステップS6)、描画情報があるか(ステップS
8)、歌詞情報があるか(ステップS10)、色替え情
報があるか(ステップS12)及び画像採点情報がある
か(ステップS14)を順次チェックする。
If it is determined in step S5 that the data end or the performance has not ended, the CPU 2 returns to step S2 to check whether or not the wait time has elapsed (step S2). S6) Whether there is drawing information (step S6)
8) It is sequentially checked whether there is lyric information (step S10), whether there is color change information (step S12), and whether there is image scoring information (step S14).

【0043】そして、ステップS6で、演奏情報がある
ときには、CPU2は、演奏情報を音源17に転送して
音源17に当該演奏情報を再生させる演奏情報処理を行
い(ステップS7)、描画情報があるかをチェックする
(ステップS8)。
If there is performance information at step S6, the CPU 2 performs performance information processing for transferring the performance information to the sound source 17 and causing the sound source 17 to reproduce the performance information (step S7). Is checked (step S8).

【0044】ステップS8で、描画情報があると、CP
U2は、当該描画情報に基づいてVCDチャンバー7を
制御して背景映像を再生させて、当該再生された背景映
像を映像制御部8に転送する描画情報処理を行い(ステ
ップS9)、歌詞情報があるかチェックする(ステップ
S10)。
In step S8, if there is drawing information, CP
U2 controls the VCD chamber 7 based on the drawing information to reproduce the background image, and performs drawing information processing for transferring the reproduced background image to the image control unit 8 (step S9). It is checked whether there is (Step S10).

【0045】ステップS10で、歌詞情報があると、C
PU2は、当該歌詞情報を画像制御部8にビットマップ
に展開させて背景映像に合成させる歌詞情報処理を行い
(ステップS11)、色替え情報があるかチェックする
(ステップS12)。
In step S10, if there is lyrics information, C
The PU 2 performs lyric information processing for causing the image control unit 8 to develop the lyric information into a bitmap and synthesize the lyric information with the background video (step S11), and checks whether there is color change information (step S12).

【0046】ステップS12で、色替え情報があると、
CPU2は、画像制御部8に当該色替え情報に基づいて
歌詞部分の着色を行なわせる色替え情報処理を行い(ス
テップS13)、画像採点情報があるかチェックする
(ステップS14)。
In step S12, if there is color change information,
The CPU 2 performs color change information for causing the image control unit 8 to color the lyrics portion based on the color change information (step S13), and checks whether there is image scoring information (step S14).

【0047】ステップS14で、画像採点情報がある
と、CPU2は、キャプチャ10に当該タイミングでカ
メラ11から入力されている映像の取り込み(キャプチ
ャ)を行わせ、当該キャプチャ10の取り込んだ静止画
像をRAM4に転送した後、当該画像採点情報の指定す
る基準画像データをHDD6に予め格納されている基準
画像データのファイルから読み出して比較することによ
りカラオケ装置1の使用者(歌唱者)のポーズ等の姿の
採点を行う画像採点情報処理を行い(ステップS1
5)、リモコン13あるいはフロントパネル12でスイ
ッチ操作が行われたかをチェックする(ステップS
3)。
In step S14, when there is the image scoring information, the CPU 2 causes the capture 10 to capture the video input from the camera 11 at the relevant timing and captures the still image captured by the capture 10 into the RAM 4. After the transfer, the reference image data specified by the image scoring information is read out from a file of the reference image data stored in the HDD 6 in advance, and compared to read the pose of the user (singer) of the karaoke apparatus 1. Perform image scoring information processing for scoring (step S1)
5) Check whether a switch operation has been performed on the remote controller 13 or the front panel 12 (step S)
3).

【0048】ステップS3で、スイッチ操作が行われる
と、CPU2は、上記同様に、当該スイッチ操作に対応
する処理を行って(ステップS4)、データエンドある
いは演奏終了かをチェックし(ステップS5)、データ
エンドでも演奏終了でもないときには、ステップS2に
戻って、上記同様に処理する(ステップS2、ステップ
S6〜ステップS15)。
When a switch operation is performed in step S3, the CPU 2 performs processing corresponding to the switch operation (step S4) in the same manner as described above, and checks whether data end or performance has been completed (step S5). If neither the data end nor the performance end, the process returns to step S2 and performs the same processing as described above (step S2, steps S6 to S15).

【0049】ステップS3で、スイッチ操作が行われ、
当該スイッチ操作が演奏の中止であると、CPU2は、
演奏の終了処理を行って(ステップS4)、ステップS
5で、演奏終了であると判断し、処理を終了する。ま
た、ステップS5で、演奏曲の曲データの終了である
と、CPU2は、演奏終了であると判断して、処理を終
了する。
In step S3, a switch operation is performed.
If the switch operation is to stop the performance, the CPU 2
A performance end process is performed (step S4), and step S4 is performed.
At 5, it is determined that the performance has ended, and the process ends. If it is determined in step S5 that the music data of the music piece has ended, the CPU 2 determines that the performance has ended and ends the processing.

【0050】そして、上記画像採点情報処理は、図4に
示すように処理される。すなわち、CPU2は、キャプ
チャ10に取り込ませた静止画像をRAM4に転送する
と、図4に示すように、当該静止画像データから人物部
分のみを抽出し(ステップP1)、人物部分の体と手の
中心線をデータ化する(ステップP2)。CPU2は、
この静止画像の人物部分の体と手の中心線をデータ化し
てポーズのみを抽出したポーズデータと、HDD6に予
め格納されている基準画像データのファイルのうち画像
採点情報の指定する基準画像データと、を比較して採点
を行い(ステップP3)、当該採点結果を採点した時点
でモニタ9の一部にメータ表示等の方法により表示し、
また、演奏が終了あるいは曲データのデータエンドとな
った時点で、各採点時点の採点結果を加点あるいは減点
して集計して、集計結果をモニタ9に点数表示する(ス
テップP4)。
The image scoring information processing is processed as shown in FIG. That is, when the CPU 2 transfers the still image captured by the capture 10 to the RAM 4, as shown in FIG. 4, the CPU 2 extracts only the person portion from the still image data (step P1), and moves the body and hand of the person portion to the center. The line is converted into data (step P2). CPU2
The pose data obtained by converting the center line of the body and the hand of the person portion of the still image into data and extracting only the pose, and the reference image data designated by the image scoring information among the files of the reference image data stored in the HDD 6 in advance. Are compared (step P3), and when the scoring result is graded, it is displayed on a part of the monitor 9 by a method such as meter display.
At the end of the performance or at the data end of the music data, the scoring results at each scoring point are added or subtracted and totalized, and the totaled results are displayed on the monitor 9 as points (step P4).

【0051】このように、本実施の形態のカラオケ装置
1は、曲データに、タイミング情報に対応付けて、使用
者の姿の採点を指示する画像採点情報を設定し、当該画
像採点情報に基づいて、カラオケ装置1の使用者の姿を
撮影した撮影映像を静止画像として取り込み、当該取り
込んだ静止画像に基づいて使用者の姿を採点している。
As described above, the karaoke apparatus 1 according to the present embodiment sets the image scoring information indicating the scoring of the user's figure in the music data in association with the timing information, and based on the image scoring information. In addition, a captured image of the user of the karaoke apparatus 1 is captured as a still image, and the user's figure is scored based on the captured still image.

【0052】したがって、曲の所定タイミングで歌唱に
合わせた使用者の姿(ポーズ)を採点することができ、
カラオケ装置1の利用性を向上させることができる。
Therefore, it is possible to score the user's figure (pause) at the predetermined timing of the music in accordance with the singing.
The usability of the karaoke apparatus 1 can be improved.

【0053】また、カラオケ装置1は、使用者の姿の採
点の基準となる複数の基準画像データを記憶し、当該複
数の基準画像データのうち、画像採点情報に含まれてい
るファイル情報の指定する基準画像データと使用者の姿
を撮影した静止画像とを比較して採点を行っているの
で、使用者の姿を当該曲に応じてより適切に採点するこ
とができ、カラオケ装置1の利用性をより一層向上させ
ることができる。
Further, the karaoke apparatus 1 stores a plurality of reference image data as a reference for scoring the user's figure, and designates file information included in the image scoring information among the plurality of reference image data. Since the scoring is performed by comparing the reference image data to be taken with the still image of the user's figure, the user's figure can be more appropriately graded according to the music, and the use of the karaoke apparatus 1 Properties can be further improved.

【0054】図5は、本発明のカラオケ装置の第2の実
施の形態を示す図であり、本実施の形態は、カラオケ装
置の使用者の動きを採点するものである。
FIG. 5 is a diagram showing a second embodiment of the karaoke apparatus according to the present invention, in which the movement of the user of the karaoke apparatus is scored.

【0055】本実施の形態は、上記第1の実施の形態と
同様のカラオケ装置に適用したものであり、本実施の形
態の説明においては、上記第1の実施の形態の説明で用
いた符号をそのまま用いて、以下、説明する。
The present embodiment is applied to the same karaoke apparatus as the first embodiment, and the description of the present embodiment uses the same reference numerals used in the description of the first embodiment. This will be described below using the above as it is.

【0056】本実施の形態のカラオケ装置1は、HDD
6に予め人物の基準のポーズとポーズの差分データが基
準差分データ(基準画像データ)として格納されてお
り、画像採点情報処理においてこの基準差分データとカ
メラ11で撮影した人物のポーズの差分のデータを比較
することにより、カラオケ装置1の使用者の動きの採点
を行う。
The karaoke apparatus 1 of the present embodiment has an HDD
6, reference difference data (reference image data) is stored in advance as reference difference data (reference image data) of the reference pose of the person, and data of the difference between the reference difference data and the pose of the person photographed by the camera 11 in image scoring information processing. Are compared, the movement of the user of the karaoke apparatus 1 is graded.

【0057】すなわち、カラオケ装置1は、上記図3に
示したと同様のカラオケ演奏・採点処理を行い、当該カ
ラオケ演奏・採点処理の画像採点情報処理として、図5
に示す処理を行う。
That is, the karaoke apparatus 1 performs the same karaoke performance / scoring processing as shown in FIG. 3, and performs image grading information processing of the karaoke performance / scoring processing as shown in FIG.
Is performed.

【0058】すなわち、CPU2は、キャプチャ10に
取り込ませた静止画像をRAM4に転送すると、図5に
示すように、当該静止画像データから人物部分のみを抽
出し(ステップP11)、人物部分の体と手の中心線を
データ化する(ステップP12)。
That is, when the still image captured by the capture 10 is transferred to the RAM 4, the CPU 2 extracts only the person portion from the still image data as shown in FIG. The center line of the hand is converted into data (step P12).

【0059】CPU2は、この静止画像の人物部分の体
と手の中心線をデータ化してポーズのみを抽出したポー
ズデータと、前回のポーズデータとの差分をとって、ポ
ーズの変化、すなわち、人物の動きを抽出して、当該差
分をデータ化する(ステップP13)。CPU2は、当
該差分データをHDD6に予め格納されている基準差分
データのファイルのうち画像採点情報の指定する基準差
分データと比較して採点を行う(ステップP14)。
The CPU 2 calculates the difference between the pose data obtained by converting the center line of the body and the hand of the person portion of the still image into data and extracting only the pose from the previous pose data, and changes the pose, that is, the person. Is extracted, and the difference is converted into data (step P13). The CPU 2 scores the difference data by comparing the difference data with the reference difference data specified by the image scoring information in the reference difference data file stored in the HDD 6 in advance (step P14).

【0060】CPU2は、当該採点結果を採点した時点
でモニタ9の一部にメータ表示等の方法により表示し、
また、演奏が終了あるいは曲データのデータエンドとな
った時点で、各採点時点の採点結果を加点あるいは減点
して集計して、集計結果をモニタ9に点数表示する(ス
テップP15)。
The CPU 2 displays the result of the scoring on a part of the monitor 9 by a method such as meter display when the scoring result is scored.
At the end of the performance or at the data end of the music data, the scoring results at the respective scoring points are added or subtracted and totalized, and the totaled results are displayed on the monitor 9 as points (step P15).

【0061】このように、本実施の形態のカラオケ装置
1は、曲データに、タイミング情報に対応付けて、所定
間隔毎に使用者の動きの採点を指示する画像採点情報を
設定し、当該画像採点情報に基づいて、カラオケ装置1
の使用者の姿を撮影した撮影映像を静止画像として取り
込んで、当該所定間隔毎に取り込んだ静止画像に基づい
て使用者の動きを採点している。
As described above, the karaoke apparatus 1 according to the present embodiment sets the image scoring information instructing the user's movement scoring at predetermined intervals in the music data in association with the timing information. Karaoke device 1 based on the scoring information
Is captured as a still image, and the movement of the user is scored based on the still images captured at predetermined intervals.

【0062】したがって、曲の所定タイミングで歌唱に
合わせた使用者の動きを適切に採点することができ、カ
ラオケ装置1の利用性を向上させることができる。
Accordingly, the movement of the user in accordance with the singing can be appropriately scored at a predetermined timing of the music, and the usability of the karaoke apparatus 1 can be improved.

【0063】また、カラオケ装置1は、使用者の動きの
採点の基準となる複数の基準画像データを記憶し、当該
複数の基準画像データのうち、画像採点情報に含まれて
いるファイル情報の指定する基準画像データと静止画像
の変化とを比較して採点を行っているので、使用者の動
きを当該曲に応じてより適切に採点することができ、カ
ラオケ装置1の利用性をより一層向上させることができ
る。
Further, the karaoke apparatus 1 stores a plurality of reference image data as a reference for scoring the movement of the user, and designates the file information included in the image scoring information among the plurality of reference image data. Since the scoring is performed by comparing the reference image data to be changed with the change of the still image, the movement of the user can be more appropriately graded according to the music, and the usability of the karaoke apparatus 1 is further improved. Can be done.

【0064】さらに、カラオケ装置1は、複数の静止画
像の変化の差分を抽出し、当該差分に基づいて使用者の
動きを採点しているので、簡単にかつ適切に使用者の動
きを採点することができ、カラオケ装置1を安価で利用
性の良好なものとすることができる。
Further, the karaoke apparatus 1 extracts the difference between the changes of the plurality of still images and scores the user's movement based on the difference, so that the user's movement is easily and appropriately scored. Thus, the karaoke apparatus 1 can be made inexpensive and have good usability.

【0065】以上、本発明者によってなされた発明を好
適な実施の形態に基づき具体的に説明したが、本発明は
上記のものに限定されるものではなく、その要旨を逸脱
しない範囲で種々変更可能であることはいうまでもな
い。
Although the invention made by the inventor has been specifically described based on the preferred embodiments, the invention is not limited to the above-described embodiment, and various modifications may be made without departing from the spirit of the invention. It goes without saying that it is possible.

【0066】[0066]

【発明の効果】請求項1記載の発明のカラオケ装置によ
れば、曲データに、タイミングデータに対応付けて、使
用者の姿の採点を指示する採点データを設定し、当該採
点データに基づいて、カラオケ装置の使用者の姿を撮影
した撮影映像を静止画像として取り込み、当該取り込ん
だ静止画像に基づいて使用者の姿を採点するので、曲の
所定タイミングで歌唱に合わせた使用者の姿(ポーズ)
を採点することができ、カラオケ装置の利用性を向上さ
せることができる。
According to the karaoke apparatus of the first aspect of the present invention, scoring data for instructing scoring of the user's figure is set in the music data in association with the timing data, and based on the scoring data. In addition, a captured image of the user of the karaoke apparatus is captured as a still image, and the user's figure is scored based on the captured still image. Pause)
And the usability of the karaoke apparatus can be improved.

【0067】請求項2記載の発明のカラオケ装置によれ
ば、使用者の姿の採点の基準となる複数の基準画像デー
タを記憶し、当該複数の基準画像データのうち、採点デ
ータに含まれている採点基準データの指定する基準画像
データと使用者の姿を撮影した静止画像とを比較して採
点を行っているので、使用者の姿を当該曲に応じてより
適切に採点することができ、カラオケ装置の利用性をよ
り一層向上させることができる。
According to the karaoke apparatus according to the second aspect of the present invention, a plurality of reference image data serving as a reference for scoring the user's figure are stored, and the plurality of reference image data are included in the scoring data. Since the scoring is performed by comparing the reference image data designated by the scoring reference data with the still image of the user, the user's figure can be more appropriately graded according to the song. Therefore, the usability of the karaoke apparatus can be further improved.

【0068】請求項3記載の発明のカラオケ装置によれ
ば、曲データに、タイミングデータに対応付けて、所定
間隔毎に使用者の動きの採点を指示する採点データを設
定し、当該採点データに基づいて、カラオケ装置の使用
者の姿を撮影した撮影映像を静止画像として取り込ん
で、当該所定間隔毎に取り込んだ静止画像に基づいて使
用者の動きを採点するので、曲の所定タイミングで歌唱
に合わせた使用者の動きを適切に採点することができ、
カラオケ装置の利用性を向上させることができる。
According to the karaoke apparatus of the third aspect of the present invention, scoring data for instructing scoring of the movement of the user is set at predetermined intervals in the music data in association with the timing data. Based on the captured image of the user of the karaoke apparatus based on the captured image as a still image, the movement of the user is scored based on the captured still images at the predetermined intervals, so that singing at a predetermined timing of the song The combined movement of the user can be appropriately scored,
The usability of the karaoke apparatus can be improved.

【0069】請求項4記載の発明のカラオケ装置によれ
ば、使用者の動きの採点の基準となる複数の基準画像デ
ータを記憶し、当該複数の基準画像データのうち、採点
データに含まれている採点基準データの指定する基準画
像データと静止画像の変化とを比較して採点を行ってい
るので、使用者の動きを当該曲に応じてより適切に採点
することができ、カラオケ装置の利用性をより一層向上
させることができる。
According to the karaoke apparatus of the present invention, a plurality of reference image data serving as a reference for scoring the movement of the user are stored, and among the plurality of reference image data, the reference image data is included in the scoring data. Since the grading is performed by comparing the reference image data specified by the grading reference data with the change of the still image, the movement of the user can be more appropriately graded according to the music, and the use of the karaoke apparatus Properties can be further improved.

【0070】請求項5記載の発明のカラオケ装置によれ
ば、複数の静止画像の変化の差分を抽出し、当該差分に
基づいて使用者の動きを採点しているので、簡単にかつ
適切に使用者の動きを採点することができ、カラオケ装
置を安価で利用性の良好なものとすることができる。
According to the karaoke apparatus according to the fifth aspect of the present invention, a difference between changes in a plurality of still images is extracted, and the movement of the user is scored based on the difference. The karaoke apparatus can be inexpensive and have good usability.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明のカラオケ装置の第1の実施の形態を適
用したカラオケ装置の回路ブロック図。
FIG. 1 is a circuit block diagram of a karaoke apparatus to which a first embodiment of a karaoke apparatus according to the present invention is applied.

【図2】図1のカラオケ装置で使用される曲データの一
例を示す図。
FIG. 2 is a view showing an example of music data used in the karaoke apparatus of FIG. 1;

【図3】図1のカラオケ装置によるカラオケ演奏・採点
処理を示すフローチャート。
FIG. 3 is a flowchart showing a karaoke performance / scoring process by the karaoke apparatus of FIG. 1;

【図4】図3の画像採点情報処理の詳細な処理を示すフ
ローチャート。
FIG. 4 is a flowchart showing detailed processing of image scoring information processing of FIG. 3;

【図5】本発明のカラオケ装置の第2の実施の形態を適
用したカラオケ装置による画像採点情報処理を示すフロ
ーチャート。
FIG. 5 is a flowchart showing image scoring information processing by the karaoke apparatus to which the second embodiment of the karaoke apparatus of the present invention is applied.

【符号の説明】[Explanation of symbols]

1 カラオケ装置 2 CPU 3 ROM 4 RAM 5 SCSI I/F 6 HDD 7 VCDチャンバー 8 画像制御部 9 モニタ 10 キャプチャ 11 カメラ 12 フロントパネル 13 リモコン 14 通信制御部 15 タイマー 16 MIDI 17 音源 18 音声制御部 19 マイク 20 アンプ 21 スピーカ 22 バス 30 ホスト 1 Karaoke device 2 CPU 3 ROM 4 RAM 5 SCSI I / F 6 HDD 7 VCD chamber 8 Image control unit 9 Monitor 10 Capture 11 Camera 12 Front panel 13 Remote control 14 Communication control unit 15 Timer 16 MIDI 17 Sound source 18 Audio control unit 19 Microphone 20 amplifier 21 speaker 22 bus 30 host

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】演奏のタイミングを設定するタイミングデ
ータ毎に、少なくとも楽曲データ、映像データ及び歌詞
データの設定されたカラオケの曲データ中の前記楽曲デ
ータに基づいて演奏音を出力するとともに、当該演奏音
に合わせてマイクから入力された音声を前記演奏音にミ
キシングし、前記映像データに基づいて背景映像を表示
するとともに、前記歌詞データに基づいて前記背景映像
に当該歌詞を合成して表示するカラオケ装置において、
前記曲データは、前記タイミングデータに対応付けて、
使用者の姿の採点を指示する採点データが設定されてお
り、前記使用者の姿を撮影する撮影手段と、前記撮影手
段の撮影する撮影映像を静止画像として取り込む画像取
込手段と、前記画像取込手段の取り込んだ静止画像に基
づいて前記使用者の姿を採点する採点手段と、前記採点
データに基づいて前記画像取込手段に前記静止画像を取
り込ませ、当該取り込んだ静止画像に基づいて前記採点
手段に前記使用者の姿を採点させる制御手段と、を備え
ることを特徴とするカラオケ装置。
1. For each timing data for setting a performance timing, a performance sound is output based on at least the music data in the karaoke music data in which music data, video data and lyrics data are set, and A karaoke that mixes sound input from a microphone with the sound to the performance sound, displays a background video based on the video data, and synthesizes and displays the lyrics with the background video based on the lyrics data. In the device,
The music data is associated with the timing data,
Scoring data for instructing scoring of the user's figure is set; a photographing means for photographing the figure of the user; an image capturing means for capturing a photographed image photographed by the photographing means as a still image; and Scoring means for scoring the appearance of the user based on the still image captured by the capturing means, and causing the image capturing means to capture the still image based on the scoring data, based on the captured still image A karaoke apparatus comprising: a control unit that causes the scoring unit to score the figure of the user.
【請求項2】前記カラオケ装置は、前記採点手段による
前記使用者の姿の採点の基準となる複数の基準画像デー
タを記憶する記憶手段をさらに備え、前記採点データ
は、前記基準画像データを指定する採点基準データを含
み、前記制御手段は、前記記憶手段の記憶する複数の前
記基準画像データのうち前記採点基準データの指定する
前記基準画像データと前記静止画像とを前記採点手段に
比較させて前記採点を行わせることを特徴とする請求項
1記載のカラオケ装置。
2. The karaoke apparatus further comprises storage means for storing a plurality of reference image data serving as a reference for scoring the figure of the user by the scoring means, wherein the scoring data designates the reference image data. The control means includes comparing the reference image data and the still image designated by the scoring reference data among the plurality of reference image data stored in the storage means with the scoring means. 2. The karaoke apparatus according to claim 1, wherein the scoring is performed.
【請求項3】演奏のタイミングを設定するタイミングデ
ータ毎に、少なくとも楽曲データ、映像データ及び歌詞
データの設定されたカラオケの曲データ中の前記楽曲デ
ータに基づいて演奏音を出力するとともに、当該演奏音
に合わせてマイクから入力された音声を前記演奏音にミ
キシングし、前記映像データに基づいて背景映像を表示
するとともに、前記歌詞データに基づいて前記背景映像
に当該歌詞を合成して表示するカラオケ装置において、
前記曲データは、前記タイミングデータに対応付けて、
所定間隔毎に使用者の動きの採点を指示する採点データ
が設定されており、前記使用者の姿を撮影する撮影手段
と、前記撮影手段の撮影する撮影映像を静止画像として
取り込む画像取込手段と、前記画像取込手段が所定間隔
毎に取り込んだ静止画像に基づいて前記使用者の動きを
採点する採点手段と、前記採点データに基づいて前記画
像取込手段に前記静止画像を所定間隔で取り込ませ、当
該取り込んだ複数の前記静止画像に基づいて前記採点手
段に前記使用者の動きを採点させる制御手段と、を備え
ることを特徴とするカラオケ装置。
3. For each timing data for setting a performance timing, a performance sound is output based on at least the music data in the karaoke music data in which music data, video data and lyrics data are set, and A karaoke that mixes sound input from a microphone with the sound to the performance sound, displays a background video based on the video data, and synthesizes and displays the lyrics with the background video based on the lyrics data. In the device,
The music data is associated with the timing data,
Scoring data for instructing the scoring of the user's movement is set at predetermined intervals, a photographing means for photographing the user's figure, and an image capturing means for capturing a photographed image photographed by the photographing means as a still image Scoring means for scoring the movement of the user based on the still images captured at predetermined intervals by the image capturing means, and the still images are captured by the image capturing means at predetermined intervals based on the scoring data. A karaoke apparatus, comprising: a control unit for causing the scoring unit to score the movement of the user based on the captured still images.
【請求項4】前記カラオケ装置は、前記採点手段による
前記使用者の動きの採点の基準となる複数の基準画像デ
ータを記憶する記憶手段をさらに備え、前記採点データ
は、前記基準画像データを指定する採点基準データを含
み、前記制御手段は、前記記憶手段の記憶する複数の前
記基準画像データのうち前記採点基準データの指定する
前記基準画像データと前記静止画像の変化とを比較させ
て前記採点を行わせることを特徴とする請求項3記載の
カラオケ装置。
4. The karaoke apparatus further includes storage means for storing a plurality of reference image data which are used as a reference for scoring the movement of the user by the scoring means, wherein the scoring data designates the reference image data. The control means includes: comparing the reference image data designated by the scoring reference data with a change in the still image, from among the plurality of reference image data stored in the storage means; 4. The karaoke apparatus according to claim 3, wherein the karaoke apparatus is operated.
【請求項5】前記採点手段は、前記複数の静止画像の変
化の差分を抽出し、当該差分に基づいて前記使用者の動
きを採点することを特徴とする請求項3または請求項4
記載のカラオケ装置。
5. The scoring means extracts a difference between changes in the plurality of still images and scores the movement of the user based on the difference.
A karaoke device as described.
JP10216441A 1998-07-15 1998-07-15 Karaoke machine Pending JP2000029483A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP10216441A JP2000029483A (en) 1998-07-15 1998-07-15 Karaoke machine

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP10216441A JP2000029483A (en) 1998-07-15 1998-07-15 Karaoke machine

Publications (1)

Publication Number Publication Date
JP2000029483A true JP2000029483A (en) 2000-01-28

Family

ID=16688598

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10216441A Pending JP2000029483A (en) 1998-07-15 1998-07-15 Karaoke machine

Country Status (1)

Country Link
JP (1) JP2000029483A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6692259B2 (en) * 1998-01-07 2004-02-17 Electric Planet Method and apparatus for providing interactive karaoke entertainment
US6971882B1 (en) 1998-01-07 2005-12-06 Electric Planet, Inc. Method and apparatus for providing interactive karaoke entertainment
JP2008216335A (en) * 2007-02-28 2008-09-18 Brother Ind Ltd Karaoke apparatus
WO2014162788A1 (en) * 2013-04-02 2014-10-09 Necソリューションイノベータ株式会社 Facial-expression assessment device, dance assessment device, karaoke device, and game device
JP2016057337A (en) * 2014-09-05 2016-04-21 オムロン株式会社 Point rating device and point rating method
JP2016188978A (en) * 2015-03-30 2016-11-04 ブラザー工業株式会社 Karaoke device and program
JP2016191794A (en) * 2015-03-31 2016-11-10 ブラザー工業株式会社 Karaoke device and program
JP2017058527A (en) * 2015-09-16 2017-03-23 株式会社エクシング Karaoke device and program for karaoke
JP2017058526A (en) * 2015-09-16 2017-03-23 株式会社エクシング Karaoke device and program for karaoke

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6692259B2 (en) * 1998-01-07 2004-02-17 Electric Planet Method and apparatus for providing interactive karaoke entertainment
US6971882B1 (en) 1998-01-07 2005-12-06 Electric Planet, Inc. Method and apparatus for providing interactive karaoke entertainment
JP2008216335A (en) * 2007-02-28 2008-09-18 Brother Ind Ltd Karaoke apparatus
WO2014162788A1 (en) * 2013-04-02 2014-10-09 Necソリューションイノベータ株式会社 Facial-expression assessment device, dance assessment device, karaoke device, and game device
CN105050673A (en) * 2013-04-02 2015-11-11 日本电气方案创新株式会社 Facial-expression assessment device, dance assessment device, karaoke device, and game device
JPWO2014162788A1 (en) * 2013-04-02 2017-02-16 Necソリューションイノベータ株式会社 Facial expression scoring device, dance scoring device, karaoke device, and game device
CN105050673B (en) * 2013-04-02 2019-01-04 日本电气方案创新株式会社 Facial expression scoring apparatus, dancing scoring apparatus, Caraok device and game device
JP2016057337A (en) * 2014-09-05 2016-04-21 オムロン株式会社 Point rating device and point rating method
JP2016188978A (en) * 2015-03-30 2016-11-04 ブラザー工業株式会社 Karaoke device and program
JP2016191794A (en) * 2015-03-31 2016-11-10 ブラザー工業株式会社 Karaoke device and program
JP2017058527A (en) * 2015-09-16 2017-03-23 株式会社エクシング Karaoke device and program for karaoke
JP2017058526A (en) * 2015-09-16 2017-03-23 株式会社エクシング Karaoke device and program for karaoke

Similar Documents

Publication Publication Date Title
CA2434777C (en) Music data providing apparatus, music data reception apparatus and program
JP2003111031A (en) Portable electronic image display device and audio player, and method for displaying and capturing a plurality of digital images
JP2000029483A (en) Karaoke machine
JP2000156049A (en) Audio medium and medium reproducing device
JP4471640B2 (en) Music player
JPH06110480A (en) Karaoke (recorded accompaniment) device
JPH10301586A (en) Karaoke device
JP3591227B2 (en) Karaoke equipment
JP2002116774A (en) Karaoke device
JP3743321B2 (en) Data editing method, information processing apparatus, server, data editing program, and recording medium
JPH1091175A (en) Musical tone reproducing system
JP3703580B2 (en) Music sound playback system
JPH11282481A (en) Karaoke playing device for photographing and displaying video image of requesting person and remote control reservation device with video camera
JP3662662B2 (en) Music playback device
JP2000029482A (en) Karaoke machine
JPH10222184A (en) Musical sound reproducing device
JP3639387B2 (en) Karaoke equipment
JP2009008830A (en) System for displaying image corresponding to musical composition
JP2822590B2 (en) Music information playback device with medley performance function
JPH1195769A (en) Music reproducing device
JP3994472B2 (en) Video playback device
JPH11184489A (en) Karaoke device and timing adjusting method
JP2002041070A (en) Karaoke equipment having game function to guess title based on introduction part of song
JP2004356690A (en) Music reproducing apparatus and video display method thereof
JP2009080372A (en) Karaoke device