JP7308135B2

JP7308135B2 - カラオケシステム

Info

Publication number: JP7308135B2
Application number: JP2019214555A
Authority: JP
Inventors: 潤有馬
Original assignee: Daiichikosho Co Ltd
Current assignee: Daiichikosho Co Ltd
Priority date: 2019-11-27
Filing date: 2019-11-27
Publication date: 2023-07-13
Anticipated expiration: 2039-11-27
Also published as: JP2021085985A

Description

本発明はカラオケシステムに関する。

カラオケシステムに登録されている楽曲の数は膨大である。従って、利用者は歌唱する楽曲を選択するのに時間を要し、スムーズなカラオケ歌唱ができない場合がある。

そこで、特定の楽曲を推奨（レコメンド）する機能が搭載されたカラオケシステムが存在する。たとえば、特許文献１には、利用者の歌唱履歴を用いて、ある利用者と選曲傾向が似ている他の利用者が歌唱した楽曲をレコメンドする技術が開示されている。

また、カラオケシステムで提供されるサービスとして、利用者が所有するスマートフォン等で撮影した画像をカラオケ装置に送信し、カラオケ歌唱を行う際の背景映像として表示させるものがある（非特許文献１参照）。

特開２０１５－１１０８０号公報

「スマホの写真がカラオケに！」、株式会社第一興商、［令和１年１１月２４日検索］、インターネット、＜ＵＲＬ：https://www.clubdam.com/denmokuapp/index.html＞

ところで、特許文献１の技術によりレコメンドされた楽曲のカラオケ演奏を行う際、非特許文献１のサービスを利用して利用者がスマートフォンで撮影した画像を背景映像として表示させることが考えられる。しかしながら、カラオケ演奏される楽曲の歌詞の内容と背景映像との関連性が無いため、利用者は違和感を持つこととなる。

本発明の目的は、レコメンドされた楽曲のカラオケ演奏の背景映像として利用者端末に記憶されている画像を利用する際、当該レコメンドされた楽曲の歌詞と関連性の高い画像を表示可能なカラオケシステムを提供することにある。

上記目的を達成するための一の発明は、カラオケ装置と、当該カラオケ装置の利用者が所有する利用者端末とが通信可能に接続されたカラオケシステムであって、前記利用者端末は、記憶手段に記憶されている画像データに対して画像の内容に対応するキーワードを決定し、決定したキーワードを当該画像データと紐付ける決定部と、前記決定したキーワード、及び当該キーワードを識別するためのキーワード識別情報を含むキーワード情報を前記カラオケ装置に送信する第１の送信処理部と、前記カラオケ装置から受信したキーワード識別情報に基づいて画像データを特定し、当該カラオケ装置に送信する第２の送信処理部と、を有し、前記カラオケ装置は、カラオケ演奏が可能な楽曲の中から、利用者に対してカラオケ歌唱を推奨するレコメンド曲の候補となる候補曲を特定する特定部と、前記利用者端末から送信されたキーワード情報に含まれるキーワードと、候補曲毎の歌詞テロップデータとに基づいて、候補曲の歌詞中の単語に関連するキーワードを検出する検出部と、検出したキーワードの数が所定条件を満たす前記候補曲をレコメンド曲として設定し、検出したキーワードのキーワード識別情報及び歌詞中の単語を、レコメンド曲の楽曲識別情報と紐付ける設定部と、設定した前記レコメンド曲の楽曲識別情報に紐付けられたキーワード識別情報を前記利用者端末に送信し、当該キーワード識別情報に基づいて特定された画像データを受信する画像データ受信部と、楽曲のカラオケ演奏に同期して、歌詞テロップデータに基づく歌詞テロップを背景映像に重畳して表示手段に表示させる表示制御部であって、表示させる歌詞テロップ中に、検出した前記キーワードに関連する歌詞中の単語が含まれる場合、当該キーワードのキーワード識別情報に基づいて特定した画像データを用いて背景映像を表示させる表示制御部と、を有するカラオケシステムである。
本発明の他の特徴については、後述する明細書及び図面の記載により明らかにする。

本発明によれば、レコメンドされた楽曲のカラオケ演奏の背景映像として利用者端末に記憶されている画像を利用する際、当該レコメンドされた楽曲の歌詞と関連性の高い画像を表示できる。

実施形態に係るカラオケシステムの概略を示す図である。実施形態に係る利用者端末を示す図である。実施形態に係る画像データ、キーワード、及びキーワードＩＤのテーブルを示す図である。実施形態に係るカラオケ装置を示す図である。実施形態に係るカラオケ本体を示す図である。実施形態に係るキーワード及び歌詞中の単語の関係を示す図である。実施形態に係る楽曲ＩＤ、キーワードＩＤ、及び歌詞中の単語の関係を示す図である。実施形態に係る画像データ、キーワードＩＤ、及び歌詞中の単語の関係を示す図である。実施形態に係るカラオケシステムの処理を示すフローチャートである。実施形態に係るカラオケシステムの処理を示すフローチャートである。

図１～図９Ｂを参照して、実施形態に係るカラオケシステムについて説明する。

＝＝カラオケシステム＝＝
図１に示すように、本実施形態におけるカラオケシステム１は、カラオケ装置Ｋ、及び利用者端末Ｍを有する。

カラオケ装置Ｋは、カラオケ演奏、及び利用者がカラオケ歌唱を行うための装置である。

利用者端末は、利用者が所有するスマートフォン等である。図１の例において、利用者端末Ｍは利用者Ｕが所有している。本実施形態における利用者端末には、カラオケ装置Ｋに対して各種操作入力を行うための専用アプリケーションソフトウェア（以下、「カラオケアプリ」）がインストールされている。カラオケアプリは、利用者に対し、たとえば、楽曲検索やカラオケ演奏のボリューム調整等、カラオケシステム１で利用可能な様々なメニューを提供する。カラオケアプリは、サーバ装置（図示無し）や、サーバ装置が提供するＷｅｂサイトからダウンロードすることで入手できる。

利用者が利用者端末においてカラオケアプリを起動させると、カラオケ装置Ｋとのペアリングが行われる。ペアリングされたカラオケ装置Ｋと利用者端末とは、たとえば、カラオケ装置Ｋが設置されている店舗内のＬＡＮを介して通信可能に接続される。

＝＝利用者端末＝＝
図２を参照して、利用者端末Ｍの構成について説明する。図２に示すように、利用者端末Ｍは、記憶手段１０、通信手段１１、表示手段１２、入力手段１３、及び制御手段１４を備える。各構成はインターフェース（図示なし）を介してバスＢに接続されている。

［記憶手段］
記憶手段１０は、各種のデータを記憶する大容量の記憶装置である。本実施形態において、記憶手段１０は、画像データを記憶している。画像データは、利用者が利用者端末Ｍの撮影機能を利用して撮影した画像に対応するデータや、利用者が利用者端末Ｍを介してＷｅｂサイトからダウンロードした画像に対応するデータであり、一般的なファイルネームにより識別可能である。以下、「画像データ」はデータそのものを指す場合とファイルネームを指す場合の両方を含むものとする。なお、画像データの形式は特に限定されない。また、記憶手段１０は、カラオケ装置Ｋでカラオケ演奏が可能な楽曲の楽曲名や歌手名を、各楽曲の楽曲識別情報と紐付けて記憶している。楽曲識別情報は、楽曲を識別するための楽曲ＩＤ等、各楽曲に固有の情報である。

［通信手段、表示手段、入力手段］
通信手段１１は、カラオケ装置Ｋとの通信を行うためのインターフェースを提供する。表示手段１２は、各種情報を表示させるディスプレイである。入力手段１３は、利用者Ｕが各種指示入力を行うための構成である。なお、一般的なスマートフォンでは、表示手段１２がタッチパネル形式で構成されており、入力手段１３として機能する。

［制御手段］
制御手段１４は、利用者端末Ｍにおける各種の制御を行う。制御手段１４は、ＣＰＵおよびメモリ（いずれも図示無し）を備える。ＣＰＵは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。

本実施形態において、利用者端末Ｍでカラオケアプリを起動した場合、制御手段１４は、決定部１４ａ、第１の送信処理部１４ｂ、第２の送信処理部１４ｃ、報知部１４ｄ、及び予約処理部１４ｅとして機能する。

（決定部）
決定部１４ａは、記憶手段１０に記憶されている画像データから画像の内容に対応するキーワードを決定し、決定したキーワードを当該画像データと紐付ける。決定部１４ａは、たとえば利用者端末Ｍでカラオケアプリが起動されたことを契機として、キーワードの決定を行う。

画像データからキーワードを決定する方法は公知の手法を用いることができる。たとえば、決定部１４ａは、機械学習モデルを利用し、画像に所定のラベルを割り当てることにより、事前定義済みのキーワードに画像を分類することで、当該画像の内容に対応するキーワードを決定することができる（「ＧｏｏｇｌｅＣｌｏｕｄＶｉｓｏｎＡＰＩ」参照）。或いは、決定部１４ａは、画像データから検出した輪郭パターンや色度／彩度に配置パターン等の特徴情報と、予め記憶されている画像データの特徴情報とを照合し、類似する画像データの付帯情報（画像データのタイトル等）をキーワードとして決定してもよい（特開２００７－１７２１９５号公報参照）。

決定部１４ａは、決定したキーワードに対してキーワード識別情報を付与し、画像データと紐付けて記憶手段１０に記憶させる。キーワード識別情報は、キーワードを識別するためのキーワードＩＤ等、各キーワードに固有の情報である。

図３は、利用者端末Ｍに記憶されている画像データ、画像データから決定されたキーワード、及びキーワードＩＤを示したテーブルである。

なお、一の画像データから複数のキーワードが決定される場合もありうる。この場合、一の画像データに対して複数のキーワードが紐付けられる。また、各キーワードに対してキーワード識別情報が付与される。

（第１の送信処理部）
第１の送信処理部１４ｂは、キーワード情報をカラオケ装置Ｋに送信する。

具体的に、決定部１４ａがキーワードを決定した後、第１の送信処理部１４ｂは、キーワード情報をペアリングされているカラオケ装置Ｋに送信する。キーワード情報は、決定したキーワード、及び当該キーワードを識別するためのキーワード識別情報を含む。記憶手段１０に図３に示すテーブルが記憶されている場合、第１の送信処理部１４ｂは、キーワードＩＤ「ＩＤ＊＊＊０００１」～「ＩＤ＊＊＊００１０」、及びそれぞれに紐付けられているキーワードを記憶手段１０から読み出し、カラオケ装置Ｋに送信する。

（第２の送信処理部）
第２の送信処理部１４ｃは、カラオケ装置Ｋから受信したキーワード識別情報に基づいて画像データを特定し、カラオケ装置Ｋに送信する。第２の送信処理部１４ｃの詳細は後述する。

（報知部）
報知部１４ｄは、受信したレコメンド曲の楽曲識別情報に基づいてレコメンド曲を利用者に報知する。

レコメンド曲は、カラオケ装置Ｋが利用者に対してカラオケ歌唱を推奨する楽曲である。レコメンド曲の楽曲識別情報は、カラオケ装置Ｋから送信される（詳細は後述）。報知部１４ｄは、レコメンド曲の楽曲識別情報に基づいて、たとえば表示手段１２にレコメンド曲の曲名や歌手名を表示させることで、利用者に対してレコメンド曲を報知する。

（予約処理部）
予約処理部１４ｅは、報知したレコメンド曲を利用者が選曲した場合、当該レコメンド曲の楽曲識別情報をカラオケ装置Ｋに送信し、楽曲の予約を行わせる。

たとえば、上記例において利用者が入力手段１３を介してレコメンド曲を選曲したとする。この場合、予約処理部１４ｅは、レコメンド曲の楽曲ＩＤをカラオケ装置Ｋに送信する。カラオケ装置Ｋは、受信した楽曲ＩＤを予約待ち行列に登録することで楽曲の予約を行う。

＝＝カラオケ装置＝＝
カラオケ装置Ｋは、楽曲のカラオケ演奏、及び利用者がカラオケ歌唱を行うための装置である。図４に示すように、カラオケ装置Ｋは、カラオケ本体２０、スピーカ３０、表示装置４０、マイク５０、及びリモコン装置６０を備える。

カラオケ本体２０は、選曲された楽曲の演奏制御、歌詞や背景映像等の表示制御、マイク５０を通じて入力された音声信号の処理といった、カラオケ演奏やカラオケ歌唱に関する各種の制御を行う。スピーカ３０はカラオケ本体２０からの放音信号に基づいて放音するための構成である。表示装置４０はカラオケ本体２０からの信号に基づいて映像や画像を画面に表示するための構成である。表示装置４０は「表示手段」の一例である。マイク５０はカラオケ歌唱の歌唱音声をアナログの歌唱音声信号に変換してカラオケ本体２０に入力するための構成である。リモコン装置６０は、カラオケ本体２０に対する各種操作をおこなうための装置である。

図５に示すように、本実施形態に係るカラオケ本体２０は、記憶手段２０ａ、通信手段２０ｂ、入力手段２０ｃ、及び制御手段２０ｄを備える。各構成はインターフェース（図示なし）を介してバスＢに接続されている。

［記憶手段］
記憶手段２０ａは、各種のデータを記憶する大容量の記憶装置であり、たとえばハードディスクドライブなどである。記憶手段２０ａは、たとえばカラオケ装置Ｋによりカラオケ演奏を行うための複数の楽曲データを楽曲識別情報と紐付けて記憶する。

楽曲データは、演奏データ、リファレンスデータ等を含む。演奏データは、カラオケ演奏音の元となるＭＩＤＩ形式のデータである。リファレンスデータは、利用者によるカラオケ歌唱を採点する際の基準として用いられるデータである。

また、楽曲データは、楽曲のカラオケ演奏に合わせて歌詞テロップを表示装置３０等に表示させるための歌詞テロップデータ、カラオケ演奏時に表示装置３０等に表示される背景画像に対応する背景画像データ等を含む。歌詞テロップは、楽曲の歌詞を構成する複数の単語を含む。以下、このような単語を「歌詞中の単語」という場合がある。

［通信手段・入力手段］
通信手段２０ｂは、利用者端末Ｍやリモコン装置６０との通信を行うためのインターフェースを提供する。入力手段２０ｃは、利用者が各種の指示入力を行うための構成である。入力手段２０ｃは、カラオケ本体２０に設けられたボタン等である。或いは、リモコン装置６０が入力手段２０ｃとして機能してもよい。本実施形態においては、利用者が利用者端末Ｍにおいてカラオケアプリを起動させ、カラオケ装置Ｋとのペアリングが行われた後に、当該利用者端末が入力手段２０ｃとして機能する。

［制御手段］
制御手段２０ｄは、カラオケ装置Ｋにおける各種の制御を行う。制御手段２０ｄは、ＣＰＵおよびメモリ（いずれも図示無し）を備える。ＣＰＵは、メモリに記憶されたプログラムを実行することにより各種の機能を実現する。

本実施形態においてはＣＰＵがメモリに記憶されるプログラムを実行することにより、制御手段２０ｄは、特定部１００、検出部２００、設定部３００、画像データ受信部４００、及び表示制御部５００として機能する。

（特定部）
特定部１００は、カラオケ演奏が可能な楽曲の中から候補曲を特定する。候補曲は、利用者に対してカラオケ歌唱を推奨するレコメンド曲の候補となる楽曲である。

特定部１００は、たとえばカラオケ装置Ｋを利用する利用者Ｕがカラオケ装置Ｋにログインした場合に候補曲の特定を行う。

利用者Ｕは、利用者端末Ｍを介して、自己の利用者識別情報を入力する。利用者識別情報は、利用者を識別するための利用者ＩＤ等、各利用者に固有の情報である。カラオケ装置Ｋは、利用者Ｕの利用者識別情報を記憶手段２０ａに一時的に記憶させることでカラオケ装置Ｋに対する利用者Ｕ１のログインを完了する。カラオケ装置Ｋは、ログインした利用者Ｕの利用者識別情報をサーバ装置（図示なし）に送信する。サーバ装置は、利用者Ｕの歌唱履歴をカラオケ装置Ｋに送信する。歌唱履歴は、利用者がカラオケ歌唱を行った日時、楽曲名、採点結果等を記録したものである。

特定部１００は、受信した歌唱履歴に基づいて、候補曲を特定する。候補曲の特定は、様々な方法で行うことができる。たとえば、特定部１００は、予め所定の回数を設定しておき、歌唱履歴に含まれる楽曲毎に歌唱された回数を求める。特定部１００は、求めた回数が所定の回数以上である楽曲を候補曲として特定する。また、特定部１００は、求めた回数が多い方から順に所定数の曲を候補曲として特定してもよい。或いは、ログインしている利用者が複数いる場合、特定部１００は、各利用者の歌唱履歴に共通する楽曲を候補曲として特定してもよい。

（検出部）
検出部２００は、利用者端末から送信されたキーワード情報に含まれるキーワードと、候補曲毎の歌詞テロップデータとに基づいて、候補曲の歌詞中の単語に関連するキーワードを検出する。

たとえば、利用者Ｕの利用者端末Ｍから図３に示した１０のキーワードが送信されたとする。また、候補曲として楽曲Ｘ１～楽曲Ｘ１０が特定されたとする。

この場合、検出部２００は、楽曲Ｘ１～Ｘ１０それぞれの歌詞テロップデータを記憶手段２０ａから読み出す。そして、検出部２００は、受信した１０のキーワードが歌詞に含まれるかどうかを楽曲毎に確認する。たとえば、検出部２００は、歌詞の中にキーワードと完全一致または部分一致する単語がある場合、当該キーワードを歌詞中の単語に関連するキーワードとして検出する。キーワードの検出は、たとえば特開２００１－２２３６１号公報に記載の技術を利用することができる。

一方、キーワードと歌詞中の単語が一致しない場合であっても、キーワードと単語に関連性がある場合もありうる（たとえば、キーワード「運動会」に対して単語「こどもたち」）。そこで、予め、機械学習を用いて一のキーワードに対して関連性のある単語を複数紐付けることによりデータベースを構築する。そして、検出部２００は、当該データベースを利用してキーワードの検出を行ってもよい。或いは、外部のサーバを利用してキーワードと単語との関連性を検出してもよい。

図６は、楽曲Ｘ１の歌詞中の単語と、利用者端末Ｍから送信されたキーワード情報に含まれる１０のキーワードとの関係を示した図である。この例によれば、楽曲Ｘ１の歌詞中の単語に関連するキーワードは６つ検出される。

（設定部）
設定部３００は、検出したキーワードの数が所定条件を満たす候補曲をレコメンド曲として設定し、検出したキーワードのキーワード識別情報及び歌詞中の単語を、レコメンド曲の楽曲識別情報と紐付ける。

所定条件は、たとえば、「キーワードの数が●個以上」のようにレコメンド曲を設定するための条件であり、予め設定されている。

ここで、検出部２００が検出した楽曲Ｘ１～楽曲Ｘ１０のキーワードの数について、所定条件を満たすものが楽曲Ｘ１のみであったとする。この場合、設定部３００は、楽曲Ｘ１をレコメンド曲として設定する。

設定部３００は、楽曲Ｘ１について検出した６つのキーワードのキーワードＩＤ及びキーワードに対応する歌詞中の単語を、楽曲Ｘ１の楽曲ＩＤと紐付ける（図７参照）。

（画像データ受信部）
画像データ受信部４００は、設定したレコメンド曲の楽曲識別情報に紐付けられたキーワード識別情報を利用者端末に送信し、当該キーワード識別情報に基づいて特定された画像データを受信する。

設定部３００がレコメンド曲を設定した後、画像データ受信部４００は、設定したレコメンド曲の楽曲ＩＤに紐付けられたキーワードＩＤを利用者端末Ｍに送信する。

利用者端末Ｍの第２の送信処理部１４ｃは、記憶手段１０ａに記憶されている画像データの中から、カラオケ装置Ｋから受信したキーワードＩＤに対応する画像データを特定する。第２の送信処理部１４ｃは、特定した画像データをカラオケ装置Ｋに送信する。

なお、第２の送信処理部１４ｃが特定した画像データを送信するタイミングは、レコメンド曲の予約がなされた場合等、レコメンド曲のカラオケ演奏が開始されるまでであればいつでもよい。

たとえば、レコメンド曲として楽曲Ｘ１が設定された場合、画像データ受信部４００は、キーワードＩＤ「ＩＤ＊＊＊０００２」、「ＩＤ＊＊＊０００３」、「ＩＤ＊＊＊０００４」、「ＩＤ＊＊＊０００８」、「ＩＤ＊＊＊０００９」、及び「ＩＤ＊＊＊００１０」を利用者端末Ｍに送信する。

第２の送信処理部１４ｃは、記憶手段１０に記憶されているテーブル（図３参照）を参照し、受信したキーワードＩＤに対応する６つの画像データ「ＩＭＧ００２．ｊｐｇ」、「ＩＭＧ００３．ｊｐｇ」、「ＩＭＧ００４．ｊｐｇ」、「ＩＭＧ００８．ｊｐｇ」、「ＩＭＧ００９．ｊｐｇ」、及び「ＩＭＧ０１０．ｊｐｇ」を特定する。

その後、利用者Ｕが利用者端末Ｍまたはカラオケ装置Ｋを介して楽曲Ｘ１を選曲したとする。この場合、第２の送信処理部１４ｃは、特定した６つの画像データを記憶手段１０から読み出し、キーワードＩＤと併せてカラオケ装置Ｋに送信する。

画像データ受信部４００は、受信した画像データをキーワードＩＤに基づいて歌詞中の単語と紐付けを行う（図８参照）。

なお、本実施形態において、画像データ受信部４００は、キーワード識別情報と併せて、設定したレコメンド曲の楽曲識別情報を利用者端末に送信する。

たとえば、レコメンド曲として楽曲Ｘ１が設定された場合、画像データ受信部４００は、楽曲Ｘ１の楽曲ＩＤ「ＩＤ＊＊＊＊Ｘ１」を利用者端末Ｍに送信する。この場合、利用者端末Ｍの報知部１４ｄは、楽曲Ｘ１をレコメンド曲として利用者に報知することができる。

その後、利用者Ｕが入力手段１３を介して楽曲Ｘ１を選曲したとする。予約処理部１４ｅは、楽曲Ｘ１の楽曲ＩＤをカラオケ装置Ｋに送信する。この際、第２の送信処理部１４ｃは、特定した６つの画像データを記憶手段１０から読み出し、キーワードＩＤと併せてカラオケ装置Ｋに送信する。

（表示制御部）
表示制御部５００は、楽曲のカラオケ演奏に同期して、歌詞テロップデータに基づく歌詞テロップを背景映像に重畳して表示手段に表示させる。

たとえば、カラオケ装置Ｋは、利用者端末Ｍから受信した楽曲Ｘ１の楽曲ＩＤを予約待ち行列に登録することで楽曲Ｘ１の予約を行う。

その後、利用者Ｕが利用者端末Ｍまたはカラオケ装置Ｋのリモコン装置６０を介して楽曲Ｘ１のカラオケ演奏を指示したとする。この場合、カラオケ装置Ｋは、楽曲Ｘ１の楽曲データを記憶手段２０ａから読み出し、伴奏データに基づいてカラオケ演奏を開始する。またカラオケ装置Ｋは、カラオケ演奏に同期して、歌詞テロップデータに基づく歌詞テロップを、背景映像データに基づく背景映像に重畳して表示装置４０に表示させる。

ここで、本実施形態において、表示制御部５００は、表示させる歌詞テロップ中に、検出したキーワードに関連する歌詞中の単語が含まれる場合、当該キーワードのキーワード識別情報に基づいて特定した画像データを用いて背景映像を表示させる。

具体的に、表示制御部５００は、歌詞テロップを表示させる際、表示させる歌詞テロップ中に、検出したキーワードに関連する単語が含まれているかどうかを確認する。

たとえば、上記例において、楽曲Ｘ１について一の歌詞テロップＴ１を表示させる場合、歌詞テロップＴ１に含まれる単語の中に、検出されたキーワードに関連する単語「友」、「日本海」、「旅路」、「ドライブ」、「こどもたち」、「ウエディング」が含まれているかどうかを確認する。

ここで、歌詞テロップＴ１に検出したキーワードに関連する単語「友」が含まれていたとする。この場合、表示制御部５００は、単語「友」に紐付けられている画像データ「ＩＭＧ０００２．ｊｐｇ」を読み出し、画像データ「ＩＭＧ０００２．ｊｐｇ」に基づく画像を背景映像として表示させる。

一方、たとえば、歌詞テロップＴ１の次の歌詞テロップＴ２に検出したキーワードに関連する単語がいずれも含まれていなかったとする。この場合、表示制御部５００は、歌詞テロップＴ２を表示させる際には、記憶手段２０ａに記憶されている楽曲Ｘ１の背景映像データに基づく背景映像を表示させる。

表示制御部５００は、歌詞テロップを切り替える毎に同様の処理を行う。

なお、表示制御部５００は、ある歌詞テロップに検出したキーワードに関連する単語が含まれていない場合、先の歌詞テロップの表示の際に用いた画像データに基づく画像をそのまま表示させてもよい。上記例において、表示制御部５００は、歌詞テロップＴ２を表示させる際、画像データ「ＩＭＧ０００２．ｊｐｇ」に基づく画像を引き続き背景映像として表示させてもよい。

或いは、一の歌詞テロップの中に複数の単語が含まれている場合もありうる。この場合、表示制御部５００は、いずれか一の単語に紐付けられている画像データに基づく画像を表示させてもよいし、複数の単語に紐付けられている複数の画像データに基づく複数の画像を切り替えて表示させることでもよい。

＝＝カラオケシステムにおける処理について＝＝
次に、図９Ａ及び図９Ｂを参照して本実施形態に係るカラオケシステム１における処理について述べる。図９Ａ及び図９Ｂは、カラオケシステム１における処理を示すフローチャートである。この例では、利用者Ｕの所有する利用者端末Ｍではカラオケアプリが実行されているとする。

利用者端末Ｍの決定部１４ａは、記憶手段１０に記憶されている画像データに対して画像の内容に対応するキーワードを決定する（キーワードを決定。ステップ１０）。決定部１４ａは、決定したキーワードを画像データと紐付ける。

第１の送信処理部１４ｂは、ステップ１０で決定したキーワード、及び当該キーワードを識別するためのキーワードＩＤを含むキーワード情報をカラオケ装置Ｋに送信する（キーワード情報を送信。ステップ１１）。

カラオケ装置Ｋの特定部１００は、カラオケ演奏が可能な楽曲の中から、利用者に対してカラオケ歌唱を推奨するレコメンド曲の候補となる候補曲を特定する（候補曲を特定。ステップ１２）。

検出部２００は、ステップ１１で利用者端末Ｍから送信されたキーワード情報に含まれるキーワードと、ステップ１２で特定された候補曲毎の歌詞テロップデータとに基づいて、候補曲の歌詞中の単語に関連するキーワードを検出する（キーワードを検出。ステップ１３）。

設定部３００は、ステップ１４で検出したキーワードの数が所定条件を満たす候補曲をレコメンド曲として設定する（レコメンド曲を設定。ステップ１４）。設定部３００は、検出したキーワードのキーワードＩＤ及び歌詞中の単語を、レコメンド曲の楽曲ＩＤと紐付ける。

画像データ受信部４００は、ステップ１３で設定したレコメンド曲の楽曲ＩＤに紐付けられたキーワードＩＤ、及び設定したレコメンド曲の楽曲ＩＤを利用者端末Ｍに送信する（キーワードＩＤ及びレコメンド曲の楽曲ＩＤを送信。ステップ１５）。

利用者端末Ｍの報知部１４ｄは、受信したレコメンド曲の楽曲ＩＤに基づいてレコメンド曲を利用者に報知する（レコメンド曲を報知。ステップ１６）。

予約処理部１４ｅは、ステップ１６で報知したレコメンド曲を利用者Ｕが選曲した場合、当該レコメンド曲の楽曲ＩＤをカラオケ装置Ｋに送信し、楽曲の予約を行わせる（楽曲の予約を指示。ステップ１７）。カラオケ装置Ｋは、ステップ１７の指示に基づいて楽曲の予約を行う（楽曲の予約。ステップ１８）。

また、この場合、利用者端末Ｍの第２の送信処理部１４ｃは、カラオケ装置Ｋから受信したキーワードＩＤに基づいて画像データを特定し、カラオケ装置Ｋに送信する（特定した画像データを送信。ステップ１９）。画像データ受信部４００は、キーワードＩＤに基づいて特定された画像データを受信する（画像データを受信。ステップ２０）。

その後、カラオケ装置Ｋは、予約した楽曲のカラオケ演奏を行う（カラオケ演奏を開始。ステップ２１）。

表示制御部５００は、楽曲のカラオケ演奏に同期して、歌詞テロップデータに基づく歌詞テロップを背景映像に重畳して表示手段に表示させる（歌詞テロップ及び背景映像を表示。ステップ２２）。この際、表示制御部５００は、表示させる歌詞テロップ中に、検出したキーワードに関連する歌詞中の単語が含まれるかどうかを確認する。検出したキーワードに関連する歌詞中の単語が含まれる場合（ステップ２３でＹの場合）、表示制御部５００は、当該キーワードのキーワードＩＤに基づいて特定した画像データを用いて背景映像を表示させる（特定した画像データを用いて背景映像を表示。ステップ２４）。

カラオケ装置Ｋは、予約した楽曲のカラオケ演奏が終了するまで（ステップ２５でＹの場合）、ステップ２２～ステップ２４の処理を繰り返し行う。

以上から明らかなように、本実施形態に係るカラオケシステム１は、カラオケ装置Ｋと、カラオケ装置Ｋの利用者Ｕが所有する利用者端末Ｍとが通信可能に接続されたものである。利用者端末Ｍは、記憶手段１０に記憶されている画像データに対して画像の内容に対応するキーワードを決定し、決定したキーワードを当該画像データと紐付ける決定部１４ａと、決定したキーワード、及び当該キーワードを識別するためのキーワード識別情報を含むキーワード情報をカラオケ装置Ｋに送信する第１の送信処理部１４ｂと、カラオケ装置Ｋから受信したキーワード識別情報に基づいて画像データを特定し、カラオケ装置Ｋに送信する第２の送信処理部１４ｃと、を有する。カラオケ装置Ｋは、カラオケ演奏が可能な楽曲の中から、利用者に対してカラオケ歌唱を推奨するレコメンド曲の候補となる候補曲を特定する特定部１００と、利用者端末Ｍから送信されたキーワード情報に含まれるキーワードと、候補曲毎の歌詞テロップデータとに基づいて、候補曲の歌詞中の単語に関連するキーワードを検出する検出部２００と、検出したキーワードの数が所定条件を満たす候補曲をレコメンド曲として設定し、検出したキーワードのキーワード識別情報及び歌詞中の単語を、レコメンド曲の楽曲識別情報と紐付ける設定部３００と、設定したレコメンド曲の楽曲識別情報に紐付けられたキーワード識別情報を利用者端末Ｍに送信し、当該キーワード識別情報に基づいて特定された画像データを受信する画像データ受信部４００と、楽曲のカラオケ演奏に同期して、歌詞テロップデータに基づく歌詞テロップを背景映像に重畳して表示装置４０に表示させる表示制御部５００であって、表示させる歌詞テロップ中に、検出したキーワードに関連する歌詞中の単語が含まれる場合、当該キーワードのキーワード識別情報に基づいて特定した画像データを用いて背景映像を表示させる表示制御部５００と、を有する。

このようなカラオケシステム１によれば、利用者端末に記憶されている画像データに基づいてレコメンド曲を決定することができる。また、レコメンド曲の歌詞中の単語に対応する画像データを用いて背景映像を表示することができる。よって、カラオケ演奏される楽曲の歌詞の内容と背景映像とに関連性を持たせることができるため、背景映像を見た利用者が違和感を持つ可能性が少なくなる。すなわち、本実施形態に係るカラオケシステム１によれば、レコメンドされた楽曲のカラオケ演奏の背景映像として利用者端末に記憶されている画像を利用する際、当該レコメンドされた楽曲の歌詞と関連性の高い画像を表示できる。

また、画像データ受信部４００は、キーワード識別情報と併せて、設定したレコメンド曲の楽曲識別情報を利用者端末に送信する。そして、利用者端末Ｍは、受信したレコメンド曲の楽曲識別情報に基づいてレコメンド曲を利用者に報知する報知部１４ｄと、報知したレコメンド曲を利用者が選曲した場合、当該レコメンド曲の楽曲識別情報をカラオケ装置Ｋに送信し、楽曲の予約を行わせる予約処理部１４ｅを有していてもよい。このようなカラオケシステム１によれば、利用者は利用者端末を介してレコメンド曲の予約が可能となる。

＜その他＞
上記実施形態では、利用者端末側でレコメンド曲を報知する例について述べた。一方、カラオケ装置側でレコメンド曲を報知してもよい。

たとえば、レコメンド曲として楽曲Ｘ１が設定された場合、カラオケ装置Ｋは、楽曲Ｘ１の曲名や歌手名を表示装置４０またはリモコン装置６０に表示させる。

利用者がリモコン装置６０を介して楽曲Ｘ１を選曲したとする。この場合、カラオケ装置Ｋは、楽曲Ｘ１の楽曲ＩＤを予約待ち行列に登録することで楽曲Ｘ１の予約を行う。

また、画像データ受信部４００は、楽曲Ｘ１の楽曲ＩＤに紐付けられたキーワードＩＤを利用者端末Ｍに送信し、当該キーワードＩＤに基づいて特定された画像データを受信する。以降の処理は実施形態における処理と同様である。

このような構成を採用することにより、利用者端末は報知部１４ｄ及び予約処理部１４ｅを備える必要が無い。

上記実施形態は、例として提示したものであり、発明の範囲を限定するものではない。上記の構成は、適宜組み合わせて実施することが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１カラオケシステム
１４ａ決定部
１４ｂ第１の送信処理部
１４ｃ第２の送信処理部
１４ｄ報知部
１４ｅ予約処理部
１００特定部
２００検出部
３００設定部
４００画像データ受信部
５００表示制御部
Ｋカラオケ装置
Ｍ利用者端末

Claims

カラオケ装置と、当該カラオケ装置の利用者が所有する利用者端末とが通信可能に接続されたカラオケシステムであって、
前記利用者端末は、
記憶手段に記憶されている画像データに対して画像の内容に対応するキーワードを決定し、決定したキーワードを当該画像データと紐付ける決定部と、
前記決定したキーワード、及び当該キーワードを識別するためのキーワード識別情報を含むキーワード情報を前記カラオケ装置に送信する第１の送信処理部と、
前記カラオケ装置から受信したキーワード識別情報に基づいて画像データを特定し、当該カラオケ装置に送信する第２の送信処理部と、
を有し、
前記カラオケ装置は、
カラオケ演奏が可能な楽曲の中から、利用者に対してカラオケ歌唱を推奨するレコメンド曲の候補となる候補曲を特定する特定部と、
前記利用者端末から送信されたキーワード情報に含まれるキーワードと、候補曲毎の歌詞テロップデータとに基づいて、候補曲の歌詞中の単語に関連するキーワードを検出する検出部と、
検出したキーワードの数が所定条件を満たす前記候補曲をレコメンド曲として設定し、検出したキーワードのキーワード識別情報及び歌詞中の単語を、レコメンド曲の楽曲識別情報と紐付ける設定部と、
設定した前記レコメンド曲の楽曲識別情報に紐付けられたキーワード識別情報を前記利用者端末に送信し、当該キーワード識別情報に基づいて特定された画像データを受信する画像データ受信部と、
楽曲のカラオケ演奏に同期して、歌詞テロップデータに基づく歌詞テロップを背景映像に重畳して表示手段に表示させる表示制御部であって、表示させる歌詞テロップ中に、検出した前記キーワードに関連する歌詞中の単語が含まれる場合、当該キーワードのキーワード識別情報に基づいて特定した画像データを用いて背景映像を表示させる表示制御部と、
を有するカラオケシステム。
前記画像データ受信部は、前記キーワード識別情報と併せて、設定した前記レコメンド曲の楽曲識別情報を前記利用者端末に送信し、
前記利用者端末は、
受信した前記レコメンド曲の楽曲識別情報に基づいてレコメンド曲を利用者に報知する報知部と、
報知したレコメンド曲を利用者が選曲した場合、当該レコメンド曲の楽曲識別情報をカラオケ装置に送信し、楽曲の予約を行わせる予約処理部を有することを特徴とする請求項１記載のカラオケシステム。