JP4160446B2

JP4160446B2 - Music playback apparatus and video display method thereof

Info

Publication number: JP4160446B2
Application number: JP2003148587A
Authority: JP
Inventors: 靖水谷; 秀太郎三島
Original assignee: Xing Inc
Current assignee: Xing Inc
Priority date: 2003-05-27
Filing date: 2003-05-27
Publication date: 2008-10-01
Anticipated expiration: 2023-05-27
Also published as: JP2004356690A

Description

【０００１】
【発明の属する技術分野】
本発明は、例えば、カラオケボックスで使用されるカラオケ装置等の音楽再生装置に関し、特に、歌詞文字映像表示機能の改良に関する。
【０００２】
【従来の技術】
複数の演奏曲のうちから選択入力された所望の演奏曲を出力させる音楽再生装置が知られている。例えば、カラオケボックス等で使用されるカラオケ装置がそれである。斯かるカラオケ装置によれば、予め記憶装置に記憶された複数の演奏曲から選択された所望の演奏曲の演奏情報を出力させると共に、その演奏曲の歌詞情報を含む映像をその出力に同期して画面に表示させることで、所望の歌のカラオケ演奏を楽しむことができる。
【０００３】
近年、所定の背景映像に歌詞文字映像（歌詞テロップ）を付加する態様のカラオケ装置が普及している。例えば、カラオケサービス提供会社のホストサーバと通信回線によって接続される通信カラオケ装置がその一例である。斯かる態様のカラオケ装置では、背景映像を複数種類の演奏曲に汎用できるため、各演奏曲にあつらえの映像を用意する必要がなく、比較的多数の曲を演奏できるという利点がある反面、背景画像が歌詞文字映像によって隠されてしまい本来の映像内容が損なわれる可能性があった。そこで、斯かる弊害を解消するための技術が提案されている。例えば、特許文献１に記載されたカラオケ装置がそれである。このカラオケ装置では、表示画面を複数の領域に分割して、その分割された各領域に背景映像及び歌詞文字映像をそれぞれ独立して表示させることで、背景映像の本来の映像内容の保全を図っている。
【０００４】
【特許文献１】
特開平９−３０７８１２号公報
【０００５】
【発明が解決しようとする課題】
しかし、前記従来の技術では、必然的に背景映像の表示される領域が狭くなることや、背景映像と歌詞文字映像とが乖離してしまい無味乾燥な印象を与えるといった新たな弊害を生じさせるものであった。所定の背景映像に歌詞文字映像を付加する態様の音楽再生装置では、その背景映像と歌詞文字映像とが融和した映像が表示されるのが理想であるが、斯かる映像を合成して表示し得る技術は、未だ提供されていないのが現状である。
【０００６】
本発明は、以上の事情を背景として為されたものであり、その目的とするところは、背景映像と歌詞文字映像とが融和した映像を表示し得る音楽再生装置及びその映像表示方法を提供することにある。
【０００７】
【課題を解決するための第１の手段】
斯かる目的を達成するために、本第１発明の要旨とするところは、複数の演奏曲のうちから選択入力された所望の演奏曲を出力させると共に、その演奏曲の歌詞文字映像と所定の背景映像とを合成して表示させる音楽再生装置の映像表示方法であって、その歌詞文字映像を表示させる位置としてその背景映像に含まれる所定の形状を指定し、その形状の時間変化に追従して前記歌詞文字映像の表示を変更することを特徴とするものである。
【０００８】
【第１発明の効果】
このようにすれば、前記歌詞文字映像を表示させる位置としてその背景映像に含まれる所定の形状を指定し、その形状の時間変化に追従して前記歌詞文字映像の表示を変更するものであることから、前記背景映像の時間変化に応じて前記歌詞文字映像を違和感なく変化させることができる。すなわち、背景映像と歌詞文字映像とが融和した映像を表示し得る音楽再生装置の映像表示方法を提供することができる。
【０００９】
【課題を解決するための第２の手段】
また、前記目的を達成するために、本第２発明の要旨とするところは、複数の演奏曲のうちから選択入力された所望の演奏曲を出力させると共に、その演奏曲の歌詞文字映像と所定の背景映像とを合成して表示させる音楽再生装置であって、その歌詞文字映像を表示させる位置としてその背景映像に含まれる所定の形状を指定する歌詞文字映像表示位置指定手段と、その歌詞文字映像表示位置指定手段により指定された位置に前記歌詞文字映像を表示させる歌詞文字映像表示手段とを、含むことを特徴とするものである。
【００１０】
【第２発明の効果】
このようにすれば、前記歌詞文字映像を表示させる位置としてその背景映像に含まれる所定の形状を指定する歌詞文字映像表示位置指定手段と、その歌詞文字映像表示位置指定手段により指定された位置に前記歌詞文字映像を表示させる歌詞文字映像表示手段とを、含むことから、前記背景映像を考慮した所定位置の上に前記歌詞文字映像を重ねることで、その背景映像と歌詞文字映像とを違和感なく合成することができる。すなわち、背景映像と歌詞文字映像とが融和した映像を表示し得る音楽再生装置を提供することができる。
【００１２】
【第２発明の他の態様】
ここで、好適には、前記背景映像に含まれる所定の形状の時間変化に追従して前記歌詞文字映像を表示させる位置を検出する歌詞文字映像表示位置検出手段を含み、前記歌詞文字映像表示手段は、その歌詞文字映像表示位置検出手段により検出された位置に前記歌詞文字映像を表示させるものである。このようにすれば、前記背景映像の時間変化に応じて前記歌詞文字映像を違和感なく変化させることができるという利点がある。
【００１３】
【実施例】
以下、本発明の好適な実施例を図面に基づいて詳細に説明する。
【００１４】
図１は、本発明が適用された音楽再生装置の一例であるカラオケ装置１０の構成を示すブロック線図である。このカラオケ装置１０は、ＣＲＴ等の映像表示装置１２と、背景映像再生装置としてのディスクプレーヤ１４と、背景映像取込装置としてのビデオキャプチャ１５と、映像合成装置としてのビデオミキサ１６と、アンプミキサ１８と、スピーカ２０と、音声入力装置としてのマイク２２と、操作パネル２４と、中央演算処理装置であるＣＰＵ２６、ＲＯＭ２８、ＲＡＭ３０、記憶装置としてのハードディスク３２、ターミナルアダプタ３４、ＣＲＴコントローラ３６、上記操作パネル２４からの入力信号を処理する入出力インターフェイス３８、演奏情報を合成して出力するためのシンセサイザ４０、及びＡ／Ｄコンバータ４２とを、備えて構成されている。
【００１５】
上記中央演算処理装置２６は、上記ＲＯＭ２８に記憶された所定のプログラムに基づいて電子情報を処理・制御する所謂コンピュータであり、ユーザ（カラオケ装置１０の利用者）により所定のカラオケ演奏曲が選曲された場合、上記ハードディスク３２から上記ＲＡＭ３０に選曲されたカラオケ演奏曲の演奏情報、歌詞情報、及び背景映像情報等を読み出したり、カラオケ演奏曲の演奏が進行するのに応じてそのＲＡＭ３０から上記シンセサイザ４０へ演奏情報を送信したり、上記ＣＲＴコントローラ３６へ歌詞情報に基づいて歌詞文字映像を生成して送ったり、選曲時には曲名文字映像をＣＲＴコントローラ３６へ送ったり、上記ディスクプレーヤ１４の制御をする等の基本的な制御を実行する。
【００１６】
前記操作パネル２４は、ユーザが歌いたいカラオケ演奏曲を選択したり、演奏曲の音程を調整したり、演奏と歌との音量バランスを調整したり、顧客を識別するために顧客毎に設定された顧客ＩＤを入力したり、その他、エコー、音量、トーン等の各種調整を行うための操作釦（スイッチ）或いはツマミを備えた入力装置である。また、前記カラオケ装置１０には、前記操作パネル２４の一部機能を遠隔で実行するために、かかる操作パネル２４と同様に入力装置として機能するリモコン４４が備えられている。
【００１７】
前記ディスクプレーヤ１４は、ユーザが歌詞を参照しながら歌を歌う際に前記映像表示装置１２に表示される背景映像（ＮＴＳＣ映像）を記憶したＣＤやＤＶＤを再生する背景映像再生装置であり、前記ビデオキャプチャ１５は、前記ディスクプレーヤ１４により再生される背景映像を取り込み、極めて短い所定時間毎の静止画像として保存する背景映像取込装置である。また、前記ビデオミキサ１６は、前記ハードディスク３２から読み出された歌詞情報に基づいて前記中央演算処理装置２６において生成され且つ前記ＣＲＴコントローラ３６から出力される歌詞文字映像と、前記ディスクプレーヤ１４から送られる背景映像とを合成して前記映像表示装置１２に表示させる映像合成装置である。
【００１８】
前記シンセサイザ４０は、前記ハードディスク３２から読み出されて送られて来る演奏曲の演奏情報に基づき、楽器の演奏信号等の音楽信号を生成する音源である。生成された音楽信号は、アナログ信号に変換されて前記アンプミキサ１８へ送られる。そのアンプミキサ１８では、送られてきた音楽信号と前記マイク２２を介して入力されるユーザの歌声とがミキシングされ、それらの信号が電気的に増幅される。そして、そのミキシングされた音が前記スピーカ２０から出力される。前記Ａ／Ｄコンバータ４２は、前記マイク２２から入力される音声をデジタル信号に変換して前記中央演算処理装置２６へ供給する。
【００１９】
図２は、前記リモコン４４の操作部を説明する図である。この図２に示すように、斯かるリモコン４４の操作部には、０から９までの数字を含む１２個の数字釦４４ａ、選曲釦４４ｂ、左右上下の矢印釦４４ｃ、及び取消釦４４ｄが設けられている。また、操作補助・確認のための表示部４４ｅが設けられている。上記数字釦４４ａは、選曲番号や顧客ＩＤを入力するための釦（スイッチ）であり、その数字釦４４ａが押されると、その数字が上記表示部４４ｅに表示され、上記選曲釦４４ｂが押されることによりその選曲番号や顧客ＩＤが出力されて選曲番号や顧客ＩＤが確定する。左右上下の矢印釦４４ｃは、前記映像表示装置１２に選択肢が表示された際、同様に表示されるカーソル等を左右上下に移動させるための釦であり、その矢印釦４４ｃが操作されると、カーソル移動信号が出力されて上記選曲釦４４ｂが押されることにより選択している項目が確定する。また、前記カラオケ装置１０によるカラオケ演奏中に左右の矢印釦４４ｃが操作されると、演奏音の音程を変更するための音程変更信号が出力される。なお、図１に示すように、これらの釦及び表示部に対応する構成が前記操作パネル２４にも設けられており、その操作パネル２４によっても同様の操作が可能とされている。
【００２０】
図３は、前記ハードディスク３２に設けられた各種データベースを説明する図である。この図３に示すように、前記ハードディスク３２には、カラオケ演奏曲の演奏情報、歌詞情報、及び背景映像指定情報等を記憶するカラオケ情報データベース、背景映像を識別するための背景映像番号、映像シーン情報、及び歌詞文字映像表示指定情報等を記憶する背景映像データベース等が設けられている。上記カラオケ情報データベースの演奏情報は、例えばＭＩＤＩ（Musical Instrument Digital Interface）形式の音楽データであり、前記シンセサイザ４０へ供給される。また、上記背景映像データベースの映像シーン情報は、前記ディスクプレーヤ１４による背景映像の再生に際して映像シーン毎に歌詞文字映像表示の開始・終了や歌詞文字映像表示位置の指定・指定解除を示すタイムコードを定めるものである。
【００２１】
図４は、上記背景映像データベースに記憶された歌詞文字映像表示指定情報の一例を示す図である。この図４に示すように、歌詞文字映像表示指定情報は、後述する各映像シーンの指定されたタイムコード毎に割付順、タイプ、表示範囲、文字サイズ、文字種、傾き、色、修飾、最大割付数、及び割付等を要素として前記歌詞情報の内容である文字又は文字列と関連付けられており、前記映像表示装置１２に表示される当初の各歌詞文字映像の表示を定めるものである。
【００２２】
前記ターミナルアダプタ３４は、前記カラオケ装置１０を公衆電話回線、有線放送用ケーブル、又は光ファイバ等による通信回線４６に接続するための装置である。カラオケボックス等の店舗にそれぞれ備えられた複数のカラオケ装置１０は、上記通信回線４６を介してカラオケサービス提供会社のホストサーバ４８に接続されており、それら複数のカラオケ装置１０によって常に新しい曲が演奏可能とされるように、随時新曲のカラオケ情報等が上記ホストサーバ４８から上記通信回線４６を介してダウンロードされ、前記ハードディスク３２の各種データベースに記憶されるようになっている。
【００２３】
図５は、前記中央演算処理装置２６による歌詞文字映像表示機能の要部を説明する機能ブロック線図である。この図５に示すカラオケ情報読込手段５０は、前記ハードディスク３２のカラオケ情報データベースに記憶されたカラオケ情報を読み込む。演奏情報抽出手段５２は、そのカラオケ情報読込手段５０により読み込まれたカラオケ情報から演奏情報を抽出して前記シンセサイザ４０へ送る。背景映像情報抽出手段５４は、上記カラオケ情報読込手段５０により読み込まれたカラオケ情報から背景映像指定情報を抽出し、その背景映像指定情報に対応する背景映像情報中の背景映像番号を前記ハードディスク３２の背景映像情報データベースから読み込んで前記ディスクプレーヤ１４へ送る。歌詞情報抽出手段５６は、上記カラオケ情報読込手段５０により読み込まれたカラオケ情報から歌詞情報を抽出して歌詞文字映像を生成し、前記ＣＲＴコントローラ３６へ送る。
【００２４】
時間計測手段５８は、内部タイマによりカラオケ演奏開始からの通し時間或いは前記背景映像を構成する映像シーン毎の経過時間を計測する。カラオケ演奏手段６０は、上記時間計測手段５８により計測されるカラオケ演奏開始からの通し時間に従い、前記演奏情報抽出手段５２により抽出される演奏情報に基づいて前記シンセサイザ４０を制御してカラオケ演奏を実行する。
【００２５】
背景映像選択手段６２は、前記背景映像情報抽出手段５４により抽出された背景映像指定情報に基づいて前記ディスクプレーヤ１４により再生される背景映像を選択する。背景映像表示手段６４は、前記ディスクプレーヤ１４を制御して上記背景映像選択手段６２により選択された背景映像を再生させる。この背景映像は、図６に示すように、一連の繋がりを有する複数の連続画面（映像シーン）から構成されており、それぞれの連続画面がシーンコードにより識別されるようになっている。
【００２６】
歌詞文字映像表示指定情報抽出手段６６は、前記背景映像情報抽出手段５４により読み込まれた背景映像情報から上記背景映像表示手段６４により再生される背景映像（映像シーン）に対応する歌詞文字映像表示指定情報を抽出する。歌詞文字映像表示位置指定手段６８は、上記歌詞文字映像表示指定情報抽出手段６６により抽出された歌詞文字映像表示指定情報に基づいて歌詞文字映像を表示させる位置として前記背景映像の一部を指定する。好適には、図７に示すように、各映像シーンを構成する個々の画面には、映像の時間経過に対応したタイムコードが付されており、その各映像シーン毎に定められたタイムコードが前記時間計測手段５８により計測される各映像シーン毎の経過時間（タイムコード）と一致することを条件として、その背景映像に含まれる所定の形状を前記歌詞文字映像を表示させる位置すなわち表示領域として指定し、その形状に歌詞文字映像をロックする。
【００２７】
歌詞文字映像表示手段７２は、前記ＣＲＴコントローラ３６を制御して上記歌詞文字映像表示位置指定手段６８により指定された位置に前記歌詞文字映像を表示させる。カラオケ画面表示手段７４は、前記ビデオミキサ１６を制御して前記背景映像表示手段６４により前記ディスクプレーヤ１４を介して再生された背景映像と、上記歌詞文字映像表示手段７２により前記ＣＲＴコントローラ３６を介して表示された歌詞文字映像とを合成して前記映像表示装置１２に表示させる。
【００２８】
図８は、前記映像表示装置１２に表示される背景映像（連続画面を構成する１静止画面）の一例を示す図である。この図８に示す背景映像７６は、眼鏡をかけた少年が複数の牌を連ねた状態で眼前に構えている構図であり、前記歌詞文字映像表示指定情報は、例えば、それら複数の牌上に歌詞文字映像を表示させるように定められている。前記歌詞文字映像表示指定情報の「表示範囲」は、歌詞文字映像を表示させる位置として画面における座標を決定するものであり、図４の歌詞文字映像表示情報に示すように、割付順「１」に対応する文字である「ど」の表示範囲が「120.345-125.350」、割付順「５」に対応する文字列である「ドアー」の表示範囲が「200.345-250.350」である場合には、それらの歌詞文字映像の表示される位置すなわち表示領域は、図９の破線に示すように指定される。図１０は、図９の歌詞文字映像に加え、割付順「２」乃至「４」に対応する文字である「こ」、「で」、「も」が表示された歌詞文字映像７８を示している。この図１０に示す破線は、図９と同様にそれぞれの文字又は文字列の表示領域を示しており、上記背景映像７６における複数の牌の形状に対応している。すなわち、図１０に示す歌詞文字映像７８を図８に示す背景映像７６上に合成することで、上記複数の牌上に歌詞文字映像が載せられた映像８０が得られる。
【００２９】
また、前記歌詞文字映像表示指定情報の「最大割付数」及び「割付」は、歌詞文字映像の「タイプ」が文字列である場合の表示領域内におけるレイアウトを定めるものであり、「最大割付数」が「３」であり「割付」が「均等」である文字列「ドアー」では、図１２に示すようなレイアウトにて、「最大割付数」が「３」であり「割付」が「右寄せ」である文字列「ドアー」では、図１３に示すようなレイアウトにて前記歌詞文字映像表示位置指定手段６８により歌詞文字映像の表示される位置が指定される。
【００３０】
背景映像を構成する各映像シーンには、図１４に示す映像シーン１のように、「000000」から始まるタイムコードが定められている。新たな映像シーンが開始されるタイムコード「000000」では、前記歌詞文字映像表示指定情報抽出手段６６によりその映像シーンに対応する歌詞文字映像表示指定情報が読み込まれると共に、先の映像シーンに対応する歌詞文字映像表示指定情報が消去され、前記歌詞文字映像表示位置指定手段６８により指定された表示領域が初期化される。歌詞文字映像表示が開始されるタイムコード「012568」では、前記歌詞文字映像表示位置指定手段６８により前記背景映像に含まれる所定の形状が前記歌詞文字映像を表示させる表示領域として指定され、前記背景映像表示手段６４、歌詞文字映像表示手段７２、及びカラオケ画面表示手段７４により前記映像表示装置１２に所定の映像が表示される。前述した図１１に示す映像８０は、このタイムコード「012568」において前記映像表示装置１２に表示される映像である。前述した図８に示す背景映像７６は、経時的に変化することでタイムコード「033982」では、図１５に示すように、少年が前記複数の牌をなげうった構図の背景映像８２となる。図８に示す背景映像７６から図１５に示す背景映像８２への変化において前記複数の牌は、図１６の破線で示す位置から一点鎖線で示す位置へと移動する。歌詞文字映像表示位置検出手段７０は、前記ビデオキャプチャ１５により取り込まれる静止画像を比較することで、前記歌詞文字映像表示位置指定手段６８により指定された所定の形状すなわち表示領域（複数の牌の外形）の時間変化に追従して前記歌詞文字映像を表示させる位置を検出する。前記歌詞文字映像表示位置指定手段６８は、その歌詞文字映像表示位置検出手段７０により検出された位置を新たな歌詞文字映像表示位置すなわち新たな表示領域として指定する。それにより、図１７に示すように、前記カラオケ画面表示手段７４により図１５に示す複数の牌上に歌詞文字映像が表示された映像８４が得られ、結果として、背景映像の経時的な変化による前記複数の牌の移動に従って歌詞文字映像が移動させられる。そして、映像シーン１が終了するタイムコード「040235」では、歌詞文字映像の表示が終了させられると共に、歌詞文字映像の表示位置指定（表示領域指定）が解除される。
【００３１】
図１８は、演奏曲の進行と背景映像、歌詞文字映像（歌詞テロップ）、及び歌詞文字映像表示指定情報制御との関係を示すタイムチャートである。この図１８において、白棒目印は、映像シーンの開始及び歌詞文字映像表示指定情報の更新を、縞棒目印は、歌詞文字映像の表示領域の確定及びその表示領域追従の開始を、黒棒目印は、歌詞文字映像表示の終了及び表示領域指定の解除を示しており、前記カラオケ装置１０によるカラオケ演奏では、背景映像を構成する映像シーン毎に斯かる制御が実行されることで、前記背景映像の経時変化に追従して前記歌詞文字映像を変化させることができるのである。
【００３２】
図１９は、前記カラオケ装置１０の中央演算処理装置２６による歌詞文字映像表示制御を説明するフローチャートであり、所定の周期で繰り返し実行されるものである。
【００３３】
先ず、ステップ（以下、ステップを省略する）Ｓ１において、前記操作パネル２４又はリモコン４４により選曲番号が入力されたか否かが判断される。このＳ１の判断が否定される場合には、Ｓ３０において、その他の作動が実行された後、Ｓ１以下の処理が再び実行されるが、Ｓ１の判断が肯定される場合には、Ｓ２において、Ｓ１にて入力された選曲番号が有効であるか否かが判断される。このＳ２の判断が否定される場合には、Ｓ３１において、前記映像表示装置１２等に選曲番号エラーである旨が表示された後、Ｓ１以下の処理が再び実行されるが、Ｓ２の判断が肯定される場合には、前記カラオケ情報読込手段５０、演奏情報抽出手段５２、背景映像情報抽出手段５４、及び歌詞情報抽出手段５６に対応するＳ３において、Ｓ１にて入力された選曲番号に対応する演奏曲のカラオケ情報が読み込まれ、そのカラオケ情報から演奏情報、背景映像指定情報、及び歌詞情報が抽出され、その背景映像指定情報に対応する背景映像情報が読み出される。次に、Ｓ４において、内部タイマがリセットされて経過時間が「000000」とされる。次に、前記カラオケ演奏手段６０に対応するＳ５において、Ｓ３にて抽出された演奏情報が前記シンセサイザ４０へ送られてカラオケ演奏が開始される。次に、前記背景映像選択手段６２及び背景映像表示手段６４に対応するＳ６において、Ｓ３にて抽出された背景映像情報の背景映像番号が前記ディスクプレーヤ１４へ送られてその背景映像番号に対応する背景映像の表示が開始される。
【００３４】
次に、前記歌詞文字映像表示指定情報抽出手段６６に対応するＳ７において、Ｓ３にて読み出された背景映像情報から歌詞文字映像表示指定情報が抽出される。次に、Ｓ８において、内部タイマにより計測される経過時間が変化したか否かが判断される。このＳ８の判断が否定されるうちは、Ｓ８の判断が繰り返されることにより待機させられるが、Ｓ８の判断が肯定される場合には、Ｓ９において、内部タイマにより計測される経過時間がＳ３にて読み出された背景映像情報に定められたタイムコードと一致するか否かが判断される。このＳ９の判断が肯定される場合には、Ｓ２３において、Ｓ９にて一致したタイムコードが歌詞文字映像表示の開始を示すものであるか否かが判断されるが、Ｓ９の判断が否定される場合には、Ｓ１０において、歌詞文字映像表示フラグがオンであるか否かが判断される。このＳ１０の判断が否定される場合には、Ｓ８以下の処理が再び実行されるが、Ｓ１０の判断が肯定される場合には、Ｓ１１において、前記ビデオキャプチャ１５により背景映像が取り込まれた後、Ｓ１２において、先のタイムコードにおける背景映像が読み出されてＳ１１にて取り込まれた背景映像と比較される。次に、Ｓ１３において、先のタイムコードにおける背景映像とＳ１１にて取り込まれた背景映像との間に変化があるか否かが判断される。このＳ１３の判断が否定される場合には、Ｓ８以下の処理が再び実行されるが、Ｓ１３の判断が肯定される場合には、Ｓ１４において、Ｓ１１にて取り込まれた背景映像が前記ＲＡＭ３０等に記憶された後、Ｓ１５において、歌詞文字映像表示位置に対応する形状（表示領域）が変化したか否かが判断される。このＳ１５の判断が否定される場合には、Ｓ８以下の処理が再び実行されるが、Ｓ１５の判断が肯定される場合には、Ｓ１６において、Ｓ１４にて記憶された背景映像における所定の形状が検出されて新たな歌詞文字映像表示領域として指定された後、前記歌詞文字映像表示手段７２に対応するＳ１７において、Ｓ１６にて指定された表示領域に歌詞文字映像が表示される。次に、前記カラオケ画面表示手段７４に対応するＳ１８において、Ｓ６にて表示された背景映像とＳ１７にて表示された歌詞文字映像とが前記ビデオミキサ１６により合成されて前記映像表示装置１２に表示される。次に、Ｓ１９において、映像シーンの終了であるか否かが判断される。このＳ１９の判断が肯定される場合には、Ｓ２２において、内部タイマがリセットされて経過時間が「000000」とされると共に、次の映像シーンが取り出された後、Ｓ６以下の処理が再び実行されるが、Ｓ１９の判断が否定される場合には、Ｓ２０において、カラオケ演奏の終了であるか否かが判断される。このＳ２０の判断が否定される場合には、Ｓ８以下の処理が再び実行されるが、Ｓ２０の判断が肯定される場合には、Ｓ２１において、歌詞文字映像及び背景映像の表示が終了させられた後、本ルーチンが終了させられる。
【００３５】
Ｓ２３の判断が否定される場合、すなわちＳ９にて一致したタイムコードが歌詞文字映像表示の開始を示すものではない場合には、Ｓ２６において、Ｓ９にて一致したタイムコードが歌詞文字映像表示領域の初期化を示すものであるか否かが判断されるが、Ｓ２３の判断が肯定される場合、すなわちＳ９にて一致したタイムコードが歌詞文字映像表示の開始を示すものである場合には、Ｓ２４において、前記ビデオキャプチャ１５により背景映像が取り込まれ、歌詞文字映像表示指定情報の表示範囲からその背景映像に含まれる所定の形状が検出されて表示領域として設定され、Ｓ２５において、歌詞文字映像表示フラグがオンとされた後、Ｓ７以下の処理が再び実行される。Ｓ２６の判断が肯定される場合、すなわちＳ９にて一致したタイムコードが歌詞文字映像表示領域の初期化を示すものである場合には、Ｓ２９において、歌詞文字映像表示領域が初期化された後、Ｓ７以下の処理が再び実行されるが、Ｓ２６の判断が否定される場合、すなわちＳ９にて一致したタイムコードが歌詞文字映像表示領域の初期化を示すものではない場合には、Ｓ２７において、Ｓ９にて一致したタイムコードが歌詞文字映像の表示終了を示すものであるか否かが判断される。このＳ２７の判断が否定される場合には、Ｓ７以下の処理が再び実行されるが、Ｓ２７の判断が肯定される場合には、Ｓ２８において、歌詞文字映像の表示が終了させられると共に、歌詞文字映像表示フラグがオフとされた後、Ｓ７以下の処理が再び実行される。以上の制御において、Ｓ４、Ｓ８、Ｓ９、及びＳ２２が前記時間計測手段５８に、Ｓ１６及びＳ２４が前記歌詞文字映像表示位置指定手段６８に、Ｓ１１乃至Ｓ１６が前記歌詞文字映像表示位置検出手段７０にそれぞれ対応する。
【００３６】
このように、本実施例によれば、前記歌詞文字映像を表示させる位置としてその背景映像に含まれる所定の形状を指定し、その形状の時間変化に追従して前記歌詞文字映像の表示を変更するものであることから、前記背景映像の時間変化に応じて前記歌詞文字映像を違和感なく変化させることができる。すなわち、背景映像と歌詞文字映像とが融和した映像を表示し得る音楽再生装置の映像表示方法を提供することができる。
【００３７】
また、前記歌詞文字映像を表示させる位置としてその背景映像の一部を指定する歌詞文字映像表示位置指定手段６８（Ｓ１６及びＳ２４）と、その歌詞文字映像表示位置指定手段６８により指定された位置に前記歌詞文字映像を表示させる歌詞文字映像表示手段７２（Ｓ１７）とを、含むことから、前記背景映像を考慮した所定位置の上に前記歌詞文字映像を重ねることで、その背景映像と歌詞文字映像とを違和感なく合成することができる。すなわち、背景映像と歌詞文字映像とが融和した映像を表示し得るカラオケ装置１０を提供することができる。
【００３８】
また、前記歌詞文字映像表示位置指定手段６８は、前記背景映像に含まれる所定の形状を前記歌詞文字映像を表示させる位置として指定するものであるため、より違和感なく前記背景映像と歌詞文字映像とを合成することができるという利点がある。
【００３９】
また、前記背景映像に含まれる所定の形状の時間変化に追従して前記歌詞文字映像を表示させる位置を検出する歌詞文字映像表示位置検出手段７０（Ｓ１１乃至Ｓ１６）を含み、前記歌詞文字映像表示手段７２は、その歌詞文字映像表示位置検出手段により検出された位置に前記歌詞文字映像を表示させるものであるため、前記背景映像の時間変化に応じて前記歌詞文字映像を違和感なく変化させることができるという利点がある。
【００４０】
以上、本発明の好適な実施例を図面に基づいて詳細に説明したが、本発明はこれに限定されるものではなく、更に別の態様においても実施される。
【００４１】
例えば、前述の実施例において、前記歌詞文字映像表示位置指定手段６８は、前記背景映像に含まれる所定の形状を前記歌詞文字映像を表示させる表示領域として指定するものであったが、曲線等の１次元的な形状に基づいて前記歌詞文字映像の表示位置を指定するものであってもよい。図２０は、風にたなびく旗の映像を背景映像として、その旗の表面に歌詞文字映像を表示させる態様について説明する図であり、前記歌詞文字映像表示位置指定手段６８は、旗の外形を構成する上側の曲線或いは下側の曲線に基づいて前記歌詞文字映像の表示位置を指定する。それにより、図２０（ａ）に示す映像８６から（ｂ）に示す映像８８へと旗の外形が変化するのに応じてその表面に表示された歌詞文字映像が変化させられる。なお、図２０に示すように、この態様では歌詞文字映像の表示位置のみならず、その傾きもまた所定の形状の変化に追従して変化させられる。すなわち、前記歌詞文字映像表示手段７２は、前記表示領域の変化に追従して前記歌詞文字映像の表示位置を変化させることに加え、更にその歌詞文字映像の傾き、大きさ、或いは色等を変化させるものであっても構わない。
【００４２】
また、前述の実施例において、前記背景映像に含まれる所定の形状の時間変化に追従して前記歌詞文字映像を表示させる位置を検出する歌詞文字映像表示位置検出手段７０を含み、前記歌詞文字映像表示手段７２は、その歌詞文字映像表示位置検出手段７０により検出された位置に前記歌詞文字映像を表示させるものであったが、前記所定の形状は必ずしも経時的に変化するものでなくともよい。図２１は、街角の風景を背景映像として、ビルディングの電光掲示板に該当する位置に歌詞文字映像を表示させる態様について説明する図であり、前記歌詞文字映像表示位置指定手段７０は、その電光掲示板に該当する部分を歌詞文字映像を表示させる位置として指定し、前記歌詞文字映像表示手段７２は、その位置に歌詞文字映像をスクロール表示させる。なお、図２１に示すように、この態様では歌詞文字映像にシアーがかけられている。
【００４３】
また、前述の実施例では、前記歌詞文字映像表示位置指定情報に基づいて歌詞文字映像の表示領域を所定の形状にロックし、その後、前記ビデオキャプチャ１５及び歌詞文字映像表示位置検出手段７０によりその所定の形状の変化を検出して表示領域を更新する態様について説明したが、背景映像の経時的な変化に対応した歌詞文字映像表示位置指定情報を予め組み込んだ態様であっても構わない。
【００４４】
また、前述の実施例において、歌詞文字映像表示位置指定情報は、前記背景映像情報に付随する情報であったが、前記カラオケ情報に含まれる情報であっても構わないことは言うまでもない。
【００４５】
その他、一々例示はしないが、本発明はその趣旨を逸脱しない範囲内において、種々の変更が加えられて実施されるものである。
【図面の簡単な説明】
【図１】本発明が適用された音楽再生装置の一例であるカラオケ装置の構成を示すブロック線図である。
【図２】図１のカラオケ装置に備えられたリモコンの操作部を説明する図である。
【図３】図１のハードディスクに設けられた各種データベースを説明する図である。
【図４】図３の背景映像データベースに記憶された歌詞文字映像表示指定情報の一例を示す図である。
【図５】図１の中央演算処理装置による歌詞文字映像表示機能の要部を説明する機能ブロック線図である。
【図６】図１のディスクプレーヤにより再生される背景映像を構成する複数の映像シーンについて概念的に説明する図である。
【図７】図１のディスクプレーヤにより再生される背景映像を概念的に説明する図である。
【図８】図１の映像表示装置に表示される背景映像の一例を示す図である。
【図９】図４の歌詞文字映像表示指定情報に基づいて図１の映像表示装置に表示される歌詞文字映像を示す図である。
【図１０】図１の映像表示装置に表示される歌詞文字映像の一例を示す図である。
【図１１】図８に示す背景映像と図１０に示す歌詞文字映像とを合成した映像を示す図である。
【図１２】図５の歌詞文字映像表示位置指定手段により指定される文字列レイアウトの一例を示す図である。
【図１３】図５の歌詞文字映像表示位置指定手段により指定される文字列レイアウトの他の一例を示す図である。
【図１４】図１のディスクプレーヤにより再生される背景映像を構成する複数の映像シーンとタイムコードとの関係を説明する図である。
【図１５】図８に示す背景映像が経時的に変化した背景映像を示す図である。
【図１６】図８から図１５への変化において背景映像の一部である複数の牌の経時的な変化を説明する図である。
【図１７】図８に示す背景画像に歌詞文字映像を合成した映像を示す図である。
【図１８】演奏曲の進行と背景映像、歌詞文字映像（歌詞テロップ）、及び歌詞文字映像表示指定情報制御との関係を示すタイムチャートである。
【図１９】図５の中央演算処理装置による歌詞文字映像表示制御を説明するフローチャートである。
【図２０】図１の映像表示装置に表示される映像の一例を示す図であり、（ａ）から（ｂ）へと経時的に変化する様子を説明している。
【図２１】図１の映像表示装置に表示される映像の他の一例を示す図である。
【符号の説明】
１０：カラオケ装置（音楽再生装置）
６８：歌詞文字映像表示位置指定手段
７０：歌詞文字映像表示位置検出手段
７２：歌詞文字映像表示手段
７６、８２：背景映像
７８：歌詞文字映像[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a music playback device such as a karaoke device used in, for example, a karaoke box, and more particularly to improvement of a lyric character image display function.
[0002]
[Prior art]
2. Description of the Related Art A music playback device that outputs a desired performance song selected and input from a plurality of performance songs is known. For example, a karaoke device used in a karaoke box or the like. According to such a karaoke apparatus, the performance information of a desired performance music selected from a plurality of performance music previously stored in the storage device is output, and the video including the lyrics information of the performance music is synchronized with the output. Karaoke performance of a desired song can be enjoyed by displaying on the screen.
[0003]
In recent years, a karaoke apparatus in a mode of adding a lyric character image (lyric telop) to a predetermined background image has become widespread. For example, a communication karaoke apparatus connected to a host server of a karaoke service providing company via a communication line is an example. In such a karaoke apparatus, since the background video can be used for a plurality of types of performance songs, there is an advantage that a relatively large number of songs can be played without having to prepare a customized video for each performance song. There is a possibility that the image is hidden by the lyric text image and the original video content is damaged. Therefore, a technique for eliminating such a harmful effect has been proposed. For example, it is a karaoke apparatus described in Patent Document 1. In this karaoke device, the display screen is divided into a plurality of areas, and the background video and the lyric text video are displayed independently in each of the divided areas, thereby maintaining the original video content of the background video. ing.
[0004]
[Patent Document 1]
Japanese Patent Laid-Open No. 9-307812
[0005]
[Problems to be solved by the invention]
However, the conventional technology inevitably causes a new adverse effect such as a narrower display area of the background video or a nuanced impression of the background video and the lyric text video. Met. In a music playback device that adds a lyric text image to a predetermined background video, it is ideal that a video in which the background video and the lyric text video are integrated is displayed. The technology to obtain has not yet been provided.
[0006]
The present invention has been made against the background of the above circumstances, and an object of the present invention is to provide a music playback apparatus and a video display method for displaying a video in which a background video and a lyric text video are integrated. There is.
[0007]
[First Means for Solving the Problems]
In order to achieve such an object, the gist of the first aspect of the present invention is to output a desired musical piece selected and inputted from a plurality of musical pieces, and to output a lyric character image of the musical piece and a predetermined A video display method for a music playback device that combines and displays a background video, and designates a predetermined shape included in the background video as a position to display the lyric character video, and follows a time change of the shape. Then, the display of the lyric character image is changed.
[0008]
[Effect of the first invention]
In this way, a predetermined shape included in the background image is designated as a position for displaying the lyric character image, and the display of the lyric character image is changed following the time change of the shape. From the above, it is possible to change the lyric character image without a sense of incongruity according to the time change of the background image. That is, it is possible to provide a video display method for a music playback apparatus that can display a video in which background video and lyrics character video are integrated.
[0009]
[Second means for solving the problem]
  In order to achieve the above object, the gist of the second invention is to output a desired musical piece selected and inputted from a plurality of musical pieces, and to output a lyric character image of the musical piece and a predetermined one. Is a music playback device that synthesizes and displays the background video of the image, and the background video as a position to display the lyric character videoThe predetermined shape included inThe lyric character video display position specifying means to be specified, and the lyric character video display means for displaying the lyric character video at the position specified by the lyric character video display position specifying means are included.
[0010]
[Effect of the second invention]
  In this way, the background image is displayed as a position for displaying the lyrics character image.The predetermined shape included inIn consideration of the background image, it includes: a lyric character video display position specifying means for specifying; and a lyric character video display means for displaying the lyric character video at a position specified by the lyric character video display position specifying means. By superimposing the lyric character image on a predetermined position, the background image and the lyric character image can be synthesized without a sense of incongruity. That is, it is possible to provide a music playback device that can display a video in which background video and lyric text video are integrated.
[0012]
[Other aspects of the second invention]
  here,Preferably, it includes lyric character image display position detecting means for detecting a position for displaying the lyric character image following a change in time of a predetermined shape included in the background image, and the lyric character image display means includes: The lyrics character image is displayed at the position detected by the lyrics character image display position detecting means. In this way, there is an advantage that the lyrics character image can be changed without a sense of incongruity according to the time change of the background image.
[0013]
【Example】
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings.
[0014]
FIG. 1 is a block diagram showing a configuration of a karaoke apparatus 10 which is an example of a music playback apparatus to which the present invention is applied. The karaoke device 10 includes a video display device 12 such as a CRT, a disc player 14 as a background video playback device, a video capture 15 as a background video capture device, a video mixer 16 as a video synthesis device, and an amplifier mixer 18. A speaker 20, a microphone 22 as a voice input device, an operation panel 24, a central processing unit CPU 26, ROM 28, RAM 30, a hard disk 32 as a storage device, a terminal adapter 34, a CRT controller 36, and the operation panel. An input / output interface 38 that processes input signals from 24, a synthesizer 40 for synthesizing and outputting performance information, and an A / D converter 42 are provided.
[0015]
The central processing unit 26 is a so-called computer that processes and controls electronic information based on a predetermined program stored in the ROM 28, and a predetermined karaoke performance piece is selected by a user (a user of the karaoke apparatus 10). In this case, the performance information, lyrics information, background video information, etc. of the selected karaoke performance song are read from the hard disk 32 to the RAM 30, or the synthesizer 40 is read from the RAM 30 as the performance of the karaoke performance song progresses. Performance information is transmitted to the CRT controller 36, a lyric character image is generated and transmitted to the CRT controller 36 based on the lyric information, a song title character image is transmitted to the CRT controller 36 at the time of music selection, the disc player 14 is controlled, etc. Perform basic control.
[0016]
The operation panel 24 is set for each customer in order to select a karaoke performance song that the user wants to sing, adjust the pitch of the performance song, adjust the volume balance between the performance and the song, and identify the customer. It is an input device provided with operation buttons (switches) or knobs for inputting a customer ID and making various adjustments such as echo, volume and tone. In addition, the karaoke apparatus 10 includes a remote controller 44 that functions as an input device in the same manner as the operation panel 24 in order to remotely execute some functions of the operation panel 24.
[0017]
The disc player 14 is a background video playback device that plays back a CD or DVD storing a background video (NTSC video) displayed on the video display device 12 when a user sings a song while referring to the lyrics. The video capture 15 is a background video capture device that captures a background video reproduced by the disc player 14 and stores it as a still image every very short predetermined time. Further, the video mixer 16 sends a lyric character image generated in the central processing unit 26 based on the lyric information read from the hard disk 32 and output from the CRT controller 36, and sent from the disc player 14. It is a video composition device that synthesizes the background video to be displayed on the video display device 12.
[0018]
The synthesizer 40 is a sound source that generates a music signal such as a musical instrument performance signal based on performance information of a performance tune read and sent from the hard disk 32. The generated music signal is converted into an analog signal and sent to the amplifier mixer 18. In the amplifier mixer 18, the transmitted music signal and the user's singing voice input via the microphone 22 are mixed, and these signals are electrically amplified. Then, the mixed sound is output from the speaker 20. The A / D converter 42 converts the sound input from the microphone 22 into a digital signal and supplies the digital signal to the central processing unit 26.
[0019]
FIG. 2 is a diagram for explaining the operation unit of the remote controller 44. As shown in FIG. 2, the operation unit of the remote controller 44 is provided with twelve number buttons 44a including numbers from 0 to 9, a music selection button 44b, left and right up / down arrow buttons 44c, and a cancel button 44d. It has been. In addition, a display unit 44e for assisting operation and confirmation is provided. The number button 44a is a button (switch) for inputting a music selection number and a customer ID. When the number button 44a is pressed, the number is displayed on the display unit 44e, and the music selection button 44b is pressed. Thus, the music selection number and customer ID are output, and the music selection number and customer ID are determined. The left / right / up / down arrow buttons 44c are buttons for moving a cursor or the like displayed in the same way when the options are displayed on the video display device 12, and when the arrow buttons 44c are operated, When the cursor movement signal is output and the music selection button 44b is pressed, the selected item is confirmed. When the left and right arrow buttons 44c are operated during the karaoke performance by the karaoke apparatus 10, a pitch change signal for changing the pitch of the performance sound is output. As shown in FIG. 1, configurations corresponding to these buttons and the display unit are also provided in the operation panel 24, and the same operation can be performed by the operation panel 24.
[0020]
FIG. 3 is a diagram for explaining various databases provided in the hard disk 32. As shown in FIG. 3, the hard disk 32 has a karaoke information database for storing performance information, lyric information, background video designation information and the like of karaoke performances, a background video number for identifying a background video, and a video scene. A background video database and the like for storing information, lyrics character video display designation information, and the like are provided. The performance information in the karaoke information database is, for example, music data in the MIDI (Musical Instrument Digital Interface) format, and is supplied to the synthesizer 40. The video scene information in the background video database includes a time code indicating start / end of lyric character video display and designation / deselection of the lyric character video display position for each video scene when the disc player 14 reproduces the background video. It is determined.
[0021]
FIG. 4 is a diagram showing an example of lyrics character video display designation information stored in the background video database. As shown in FIG. 4, the lyric character video display designation information includes an allocation order, type, display range, character size, character type, inclination, color, modification, maximum allocation for each designated time code of each video scene described later. It is associated with characters or character strings that are the contents of the lyric information by using numbers, assignments, and the like as elements, and determines the initial display of each lyric character image displayed on the image display device 12.
[0022]
The terminal adapter 34 is a device for connecting the karaoke apparatus 10 to a communication line 46 using a public telephone line, a cable for cable broadcasting, an optical fiber or the like. A plurality of karaoke apparatuses 10 provided in stores such as karaoke boxes are connected to a host server 48 of a karaoke service providing company via the communication line 46, and new tunes are always played by the plurality of karaoke apparatuses 10. As is possible, karaoke information of new songs is downloaded from the host server 48 via the communication line 46 and stored in various databases of the hard disk 32 as needed.
[0023]
FIG. 5 is a functional block diagram for explaining a main part of the lyric character image display function by the central processing unit 26. The karaoke information reading means 50 shown in FIG. 5 reads karaoke information stored in the karaoke information database of the hard disk 32. The performance information extraction means 52 extracts performance information from the karaoke information read by the karaoke information reading means 50 and sends it to the synthesizer 40. The background video information extracting unit 54 extracts background video designation information from the karaoke information read by the karaoke information reading unit 50, and sets the background video number in the background video information corresponding to the background video designation information to the hard disk 32. It is read from the background video information database and sent to the disc player 14. The lyric information extracting means 56 extracts lyric information from the karaoke information read by the karaoke information reading means 50 to generate a lyric character image and sends it to the CRT controller 36.
[0024]
The time measuring means 58 measures the elapsed time from the start of karaoke performance or the elapsed time for each video scene constituting the background video by an internal timer. The karaoke performance means 60 executes the karaoke performance by controlling the synthesizer 40 based on the performance information extracted by the performance information extraction means 52 according to the continuous time from the start of the karaoke performance measured by the time measurement means 58. To do.
[0025]
The background video selection means 62 selects a background video to be reproduced by the disc player 14 based on the background video designation information extracted by the background video information extraction means 54. The background video display means 64 controls the disc player 14 to reproduce the background video selected by the background video selection means 62. As shown in FIG. 6, the background video is composed of a plurality of continuous screens (video scenes) having a series of connections, and each continuous screen is identified by a scene code.
[0026]
The lyric character video display designation information extracting means 66 is a lyric character video display designation corresponding to a background video (video scene) reproduced by the background video display means 64 from the background video information read by the background video information extracting means 54. Extract information. The lyric character image display position specifying means 68 specifies a part of the background image as a position for displaying the lyric character image based on the lyric character image display specifying information extracted by the lyric character image display specifying information extracting means 66. . Preferably, as shown in FIG. 7, each screen constituting each video scene is given a time code corresponding to the passage of time of the video, and the time code determined for each video scene is On the condition that it matches the elapsed time (time code) for each video scene measured by the time measuring means 58, a predetermined shape included in the background video is used as a position for displaying the lyrics character video, that is, a display area. Specify and lock the lyric text image to that shape.
[0027]
The lyric character image display means 72 controls the CRT controller 36 to display the lyric character image at the position designated by the lyric character image display position designation means 68. The karaoke screen display means 74 controls the video mixer 16 to reproduce the background video reproduced by the background video display means 64 via the disc player 14 and the lyric character video display means 72 via the CRT controller 36. The displayed lyric text image is combined and displayed on the image display device 12.
[0028]
FIG. 8 is a diagram showing an example of a background video (one still screen constituting a continuous screen) displayed on the video display device 12. The background image 76 shown in FIG. 8 is a composition in which a boy wearing glasses is standing in front of a plurality of heels, and the lyric character image display designation information is, for example, on the plurality of heels. It is stipulated to display lyric text images. The “display range” of the lyric character image display designation information is to determine the coordinates on the screen as the position where the lyric character image is displayed. As shown in the lyric character image display information of FIG. If the display range of “DO” that is the character corresponding to “120” is “120.345-125.350” and the display range of “DOOR” that is the character string corresponding to the allocation order “5” is “200.345-250.350”, these The position where the lyric character image is displayed, that is, the display area is designated as shown by the broken line in FIG. FIG. 10 shows a lyric character image 78 in which “ko”, “de”, and “mo” corresponding to the assignment order “2” to “4” are displayed in addition to the lyric character image of FIG. Yes. The broken lines shown in FIG. 10 indicate the display areas of the respective characters or character strings as in FIG. 9, and correspond to the shapes of the plurality of wrinkles in the background image 76. That is, by synthesizing the lyric character image 78 shown in FIG. 10 on the background image 76 shown in FIG. 8, an image 80 in which the lyric character image is placed on the plurality of tiles is obtained.
[0029]
The “maximum number of assignments” and “assignment” of the lyric character image display designation information define the layout in the display area when the “type” of the lyric character image is a character string. "3" and "Assignment" is "Equal" The character string "Door" has a layout as shown in FIG. 12 and "Maximum number of assignments" is "3" and "Assignment" is "Right justified" In the character string “door”, the position where the lyrics character image is displayed is specified by the lyrics character image display position specifying means 68 in the layout as shown in FIG.
[0030]
For each video scene constituting the background video, a time code starting from “000000” is defined as in video scene 1 shown in FIG. In the time code “000000” at which a new video scene is started, the lyric character video display designation information extracting unit 66 reads the lyric character video display designation information corresponding to the video scene and also corresponds to the previous video scene. The lyric character image display designation information is deleted, and the display area designated by the lyric character image display position designation means 68 is initialized. In the time code “012568” at which the lyric character video display is started, a predetermined shape included in the background video is specified by the lyric character video display position specifying unit 68 as a display area for displaying the lyric character video, and the background A predetermined image is displayed on the image display device 12 by the image display means 64, the lyrics character image display means 72, and the karaoke screen display means 74. The video 80 shown in FIG. 11 described above is a video displayed on the video display device 12 at the time code “012568”. The above-described background video 76 shown in FIG. 8 changes with time, so that with the time code “033982”, as shown in FIG. In the change from the background image 76 shown in FIG. 8 to the background image 82 shown in FIG. 15, the plurality of wrinkles move from the position indicated by the broken line in FIG. 16 to the position indicated by the alternate long and short dash line. The lyric character image display position detecting means 70 compares the still images captured by the video capture 15 to obtain a predetermined shape designated by the lyric character image display position designating means 68, that is, a display area (a plurality of outlines of a plurality of tiles). ) To detect the position where the lyric text image is displayed. The lyric character image display position designating unit 68 designates the position detected by the lyric character image display position detecting unit 70 as a new lyric character image display position, that is, a new display area. As a result, as shown in FIG. 17, the karaoke screen display means 74 obtains a video 84 in which lyrics character video is displayed on the plurality of tiles shown in FIG. 15, and as a result, the background video changes over time. The lyrics character image is moved in accordance with the movement of the plurality of tiles. Then, at the time code “040235” at which the video scene 1 ends, the display of the lyric character video is terminated and the display position designation (display area designation) of the lyric character video is canceled.
[0031]
FIG. 18 is a time chart showing the relationship between the progress of a musical composition and background video, lyric character video (lyric telop), and lyric character video display designation information control. In FIG. 18, the white bar mark indicates the start of the video scene and the update of the lyric character video display designation information, and the stripe bar mark indicates the confirmation of the display area of the lyric character video and the start of the display area tracking, the black bar mark. Indicates the end of the display of the lyric character video and the designation of the display area. In the karaoke performance by the karaoke apparatus 10, the background video is obtained by executing such control for each video scene constituting the background video. The lyric character image can be changed following the change with time.
[0032]
FIG. 19 is a flowchart for explaining lyrics character image display control by the central processing unit 26 of the karaoke apparatus 10, and is repeatedly executed at a predetermined cycle.
[0033]
First, in step (hereinafter, step is omitted) S1, it is determined whether or not a music selection number is input by the operation panel 24 or the remote controller 44. If the determination at S1 is negative, the other operations are executed at S30, and then the processing after S1 is executed again. If the determination at S1 is affirmative, at S2, S1 It is determined whether or not the music selection number input in is valid. If the determination in S2 is negative, after the fact that a music selection number error has been displayed on the video display device 12 or the like in S31, the processing after S1 is executed again, but the determination in S2 is positive. In S3 corresponding to the karaoke information reading means 50, the performance information extracting means 52, the background video information extracting means 54, and the lyrics information extracting means 56, the performance corresponding to the music selection number input in S1. The karaoke information of the song is read, performance information, background video designation information, and lyrics information are extracted from the karaoke information, and background video information corresponding to the background video designation information is read out. Next, in S4, the internal timer is reset and the elapsed time is set to “000000”. Next, in S5 corresponding to the karaoke performance means 60, the performance information extracted in S3 is sent to the synthesizer 40, and karaoke performance is started. Next, in S6 corresponding to the background video selection means 62 and the background video display means 64, the background video number of the background video information extracted in S3 is sent to the disc player 14 and corresponds to the background video number. Background video display starts.
[0034]
Next, in S7 corresponding to the lyric character video display designation information extracting means 66, lyric character video display designation information is extracted from the background video information read in S3. Next, in S8, it is determined whether or not the elapsed time measured by the internal timer has changed. While the determination of S8 is denied, the process waits by repeating the determination of S8. However, when the determination of S8 is affirmed, the elapsed time measured by the internal timer is determined in S3 in S9. It is determined whether or not it matches the time code defined in the read background video information. If the determination in S9 is affirmative, it is determined in S23 whether or not the time code matched in S9 indicates the start of lyrics character image display, but the determination in S9 is denied. In this case, it is determined in S10 whether or not the lyrics character image display flag is on. If the determination in S10 is negative, the processing from S8 is executed again, but if the determination in S10 is affirmative, after the background video is captured by the video capture 15 in S11, In S12, the background video in the previous time code is read and compared with the background video captured in S11. Next, in S13, it is determined whether or not there is a change between the background video in the previous time code and the background video captured in S11. If the determination in S13 is negative, the processing from S8 onward is executed again. However, if the determination in S13 is positive, the background image captured in S11 is stored in the RAM 30 or the like in S14. After the storage, it is determined in S15 whether or not the shape (display area) corresponding to the lyrics character image display position has changed. If the determination in S15 is negative, the processing from S8 is executed again. If the determination in S15 is positive, the predetermined shape in the background image stored in S14 is determined in S16. After being detected and designated as a new lyric character image display area, in S17 corresponding to the lyric character image display means 72, the lyric character image is displayed in the display area designated in S16. Next, in S18 corresponding to the karaoke screen display means 74, the background video displayed in S6 and the lyric character video displayed in S17 are synthesized by the video mixer 16 and displayed on the video display device 12. Is done. Next, in S19, it is determined whether or not the video scene is ended. If the determination in S19 is affirmative, in S22, the internal timer is reset to set the elapsed time to “000000”, and after the next video scene is taken out, the processing from S6 onward is executed again. However, if the determination in S19 is negative, it is determined in S20 whether or not the karaoke performance has ended. If the determination in S20 is negative, the processing from S8 onward is executed again, but if the determination in S20 is positive, the display of the lyrics character image and the background image is terminated in S21. Thereafter, this routine is terminated.
[0035]
If the determination in S23 is negative, that is, if the time code matched in S9 does not indicate the start of lyric character video display, in S26, the time code matched in S9 is in the lyric character video display area. It is determined whether or not it indicates initialization, but if the determination in S23 is affirmative, that is, if the time code matched in S9 indicates the start of lyrics character video display, S24 In step S25, a background image is captured by the video capture 15, a predetermined shape included in the background image is detected from the display range of the lyrics character image display designation information, and is set as a display area. In step S25, a lyrics character image display flag is displayed. After is turned on, the processing from S7 is executed again. If the determination in S26 is affirmative, that is, if the time code matched in S9 indicates initialization of the lyric character video display area, after the lyric character video display area is initialized in S29, If the determination in S26 is negative, that is, if the time code matched in S9 does not indicate initialization of the lyrics character video display area, the process in S27 is performed in S9. It is determined whether or not the time code coincided with indicates the end of the display of the lyrics character image. If the determination in S27 is negative, the processing from S7 is executed again. If the determination in S27 is affirmative, the display of the lyric character video is terminated and the lyric character is displayed in S28. After the video display flag is turned off, the processes after S7 are executed again. In the above control, S4, S8, S9 and S22 are the time measuring means 58, S16 and S24 are the lyric character video display position specifying means 68, and S11 to S16 are the lyric character video display position detecting means 70. Each corresponds.
[0036]
As described above, according to the present embodiment, a predetermined shape included in the background image is designated as a position for displaying the lyric character image, and the display of the lyric character image is changed following the time change of the shape. Therefore, the lyrics character image can be changed without a sense of incongruity according to the time change of the background image. That is, it is possible to provide a video display method for a music playback apparatus that can display a video in which background video and lyrics character video are integrated.
[0037]
The lyrics character image display position specifying means 68 (S16 and S24) for designating a part of the background image as the position for displaying the lyrics character image, and the position specified by the lyrics character image display position specifying means 68. Since the lyric character image display means 72 (S17) for displaying the lyric character image is included, the background image and the lyric character image can be obtained by superimposing the lyric character image on a predetermined position in consideration of the background image. Can be synthesized without a sense of incongruity. That is, it is possible to provide the karaoke apparatus 10 that can display an image in which a background image and a lyric character image are integrated.
[0038]
Further, the lyric character image display position specifying means 68 is for specifying a predetermined shape included in the background image as a position for displaying the lyric character image, so that the background image and the lyric character image are more uncomfortable. There is an advantage that can be synthesized.
[0039]
The lyric character image display position detecting means 70 (S11 to S16) for detecting a position where the lyric character image is displayed following the time change of a predetermined shape included in the background image is included, and the lyric character image display The means 72 displays the lyric character image at the position detected by the lyric character image display position detecting means, so that the lyric character image can be changed comfortably according to the time change of the background image. There is an advantage that you can.
[0040]
The preferred embodiments of the present invention have been described in detail with reference to the drawings. However, the present invention is not limited to these embodiments, and may be implemented in other modes.
[0041]
For example, in the above-described embodiment, the lyric character image display position designating unit 68 designates a predetermined shape included in the background image as a display area for displaying the lyric character image. The display position of the lyric character image may be specified based on a one-dimensional shape. FIG. 20 is a diagram for explaining a mode in which a lyric character video image is displayed on the surface of a flag image fluttering in the wind as a background video image. The lyric character video image display position designating means 68 constitutes the outline of the flag. The display position of the lyrics character image is designated based on the upper curve or the lower curve. As a result, the lyric character image displayed on the surface is changed in accordance with the change in the outer shape of the flag from the image 86 shown in FIG. 20A to the image 88 shown in FIG. As shown in FIG. 20, in this aspect, not only the display position of the lyric character image but also its inclination can be changed following the change in the predetermined shape. In other words, the lyric character image display means 72 changes the display position of the lyric character image following the change in the display area, and further changes the inclination, size, color, etc. of the lyric character image. You may make it.
[0042]
Further, in the above-described embodiment, the lyric character image display position detecting means 70 for detecting a position where the lyric character image is displayed following the time change of a predetermined shape included in the background image is included, and the lyric character image The display unit 72 displays the lyric character image at the position detected by the lyric character image display position detecting unit 70. However, the predetermined shape does not necessarily change with time. FIG. 21 is a diagram for explaining a mode in which a lyric character image is displayed at a position corresponding to an electric bulletin board in a building with a street scene as a background image. The lyric character image display position specifying means 70 is displayed on the electric bulletin board. The corresponding part is designated as a position for displaying the lyric character image, and the lyric character image display means 72 scrolls the lyric character image at the position. As shown in FIG. 21, in this aspect, the lyric character image is sheared.
[0043]
In the above-described embodiment, the display area of the lyric character image is locked to a predetermined shape based on the lyric character image display position designation information, and then the video capture 15 and the lyric character image display position detecting means 70 Although the aspect of detecting the change in the predetermined shape and updating the display area has been described, it may be an aspect in which lyrics character video display position designation information corresponding to the change in the background video over time is incorporated in advance.
[0044]
In the above-described embodiment, the lyric character video display position designation information is information accompanying the background video information, but it goes without saying that it may be information included in the karaoke information.
[0045]
In addition, although not illustrated one by one, the present invention is implemented with various modifications within a range not departing from the gist thereof.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a karaoke apparatus as an example of a music playback apparatus to which the present invention is applied.
FIG. 2 is a diagram for explaining an operation unit of a remote controller provided in the karaoke apparatus of FIG.
3 is a diagram for explaining various databases provided in the hard disk of FIG. 1. FIG.
4 is a diagram illustrating an example of lyrics character image display designation information stored in the background image database of FIG. 3; FIG.
5 is a functional block diagram for explaining a main part of a lyric character image display function by the central processing unit of FIG. 1; FIG.
6 is a diagram conceptually illustrating a plurality of video scenes constituting a background video reproduced by the disc player of FIG. 1. FIG.
FIG. 7 is a diagram conceptually illustrating a background video reproduced by the disc player of FIG.
8 is a diagram showing an example of a background video displayed on the video display device of FIG. 1. FIG.
9 is a diagram showing a lyric character image displayed on the image display device of FIG. 1 based on the lyric character image display designation information of FIG. 4;
10 is a diagram showing an example of a lyric character image displayed on the image display device of FIG. 1. FIG.
11 is a diagram showing a video obtained by synthesizing the background video shown in FIG. 8 and the lyrics character video shown in FIG. 10;
12 is a diagram showing an example of a character string layout specified by the lyrics character video display position specifying means of FIG. 5. FIG.
13 is a diagram showing another example of a character string layout specified by the lyrics character video display position specifying means of FIG.
14 is a diagram for explaining the relationship between a plurality of video scenes constituting a background video reproduced by the disc player of FIG. 1 and a time code. FIG.
15 is a diagram showing a background video in which the background video shown in FIG. 8 has changed over time. FIG.
FIG. 16 is a diagram for explaining a change with time of a plurality of wrinkles that are a part of a background image in the change from FIG. 8 to FIG. 15;
17 is a diagram showing an image obtained by synthesizing a lyric character image with the background image shown in FIG. 8. FIG.
FIG. 18 is a time chart showing the relationship between the progress of a musical composition and background video, lyric character video (lyric telop), and lyric character video display designation information control;
FIG. 19 is a flowchart for explaining lyrics character image display control by the central processing unit of FIG. 5;
20 is a diagram illustrating an example of an image displayed on the image display device of FIG. 1, and illustrates a state in which the image changes from (a) to (b) with time.
FIG. 21 is a diagram showing another example of an image displayed on the image display device of FIG. 1;
[Explanation of symbols]
10: Karaoke device (music playback device)
68: Lyric character image display position designation means
70: Lyric character image display position detecting means
72: Lyric character image display means
76, 82: Background video
78: Lyric text

Claims

A video display method for a music playback device that outputs a desired musical piece selected and inputted from a plurality of musical pieces, and displays a combined lyric character video of the musical piece and a predetermined background video.
A video of a music reproducing apparatus, wherein a predetermined shape included in the background video is designated as a position for displaying the lyric character video, and the display of the lyric character video is changed following time variation of the shape Display method.

A music playback device that outputs a desired performance tune selected and input from a plurality of performance tunes and synthesizes and displays a lyric character image of the performance tune and a predetermined background image,
Lyric character image display position specifying means for specifying a predetermined shape included in the background image as a position for displaying the lyrics character image;
A music reproducing apparatus comprising: lyric character video display means for displaying the lyric character video image at a position designated by the lyric character video display position designation means.

Lyric character image display position detecting means for detecting a position where the lyric character image is displayed following a time change of a predetermined shape included in the background image, and the lyric character image display means includes the lyric character image display means. 3. The music reproducing apparatus according to claim 2 , wherein the lyric character image is displayed at a position detected by the position detecting means.