JP5510435B2 - カラオケ装置及びプログラム - Google Patents

Description

本発明は、通信カラオケシステムにおいて投稿された歌唱音や演奏音の録音データを含む投稿データを再生するカラオケ装置に関する。

従来、通信カラオケシステムのサービス形態として、投稿データを通信カラオケシステムのサーバに投稿し、サーバに投稿された各利用者の投稿データをカラオケ装置で再生するサービスが提案されている（特許文献１参照）。投稿データは、例えば、利用者による歌唱音や楽器演奏音の音源データや動画データ等を含む。このような投稿システムでは、カラオケ装置に備え付けのカメラで撮像した歌唱者や楽器演奏者の姿が録画される。また、カラオケ装置に備え付けのマイクで入力した歌唱音や演奏音が録音される。これら録画又は録音されたデータが投稿データとして通信カラオケシステムのサーバにアップロードされる。アップロードされた投稿データは、通信カラオケシステムに接続したカラオケ装置や、パソコン、携帯電話等の端末によってインターネットを介して再生することができる。

さらに、通信カラオケシステムに接続したカラオケ装置において投稿データを再生する場合、投稿データの再生による歌唱音や演奏音の出力と同時に、そのカラオケ装置に備え付けのマイクで入力した別の歌唱音や演奏音が同時に出力される。また、同じ楽曲を歌唱又は演奏した別の投稿データが複数同時に出力される。これにより、その場にいない他人とのコラボレーションを楽しむことができるといったサービスも提案されている。

特開２０１１−５３５４１号公報

一般的に、カラオケボックス等の商用施設に設置されるカラオケ装置には、左右２チャンネルのスピーカが備え付けられるようになっている。よって、左右２チャンネルのステレオ音源で制作されたカラオケ楽曲のデータを再生する場合、左右のスピーカからそれぞれ異なる音が出力され、臨場感のあるカラオケ演奏を楽しめるようになっている。

ところが、カラオケ装置に備え付けのマイクの入力音や、歌唱音や演奏音を録音した投稿データは、一般的にはモノラル音源として作成されている。このため、たとえステレオ対応の左右２系統のスピーカが備えられていても、スピーカ出力時には左右両方のスピーカから同じ音が出力されることになる。また、複数のマイクからの入力音や投稿データによるコラボレーションをする場合、複数の外部入力音が全てミックスされて両方のスピーカから同じ音が出力されることになる。

これに対し、カラオケ装置に複数のスピーカが備え付けられていれば、投稿データやマイク入力音等の音源についても、それぞれのスピーカから異なる音声を出力させて臨場感のある音を聴きたいといった要望や、意図的に複数の音源を合成させた音声を出力させて一体感のある音を聴きたいといった利用者からの要望がある。しかしながら、そのような要望に対応できる技術は今までに実現されておらず、利用者の要望に応えられなかった。

本発明は上記課題を解決するためになされたものであり、利用者による歌唱や演奏からなる投稿データを作成する際に、単一チャンネルの音源としてスピーカ出力をしたり、複数チャンネルの音源としてスピーカ出力したりできるようにすることで、利用者の満足度を高めることを目的とする。

上記目的を達成するためになされた本発明は、カラオケシステムの利用者による歌唱音又は楽器の演奏音が録音された投稿データをカラオケシステムにおける所定の投稿サーバにアップロードするカラオケ装置に関する。本発明のカラオケ装置は、入力音取得手段と、録音手段と、設定取得手段と、判断手段と、生成手段と、アップロード手段とを備える。

入力音取得手段は、カラオケ装置の複数のチャンネルから入力可能な外部入力音であって、入力された各外部入力音を単一チャンネルの音源信号として取得する。録音手段は、入力音取得手段により取得した単一チャンネルの音源信号の録音データを生成する。設定取得手段は、録音手段により生成した録音データを、投稿データに変換する方法を示す投稿設定情報を取得する。判断手段は、設定取得手段により取得した投稿設定情報が、複数チャンネルの音源信号からなる複音の投稿データに変換することを示すかを判断する。

そして、生成手段は、判断手段により録音データを複音の投稿データに変換すると判断された場合、単一チャンネルの音源信号からなる録音データから、複数チャンネルの音源信号に変換した複音の投稿データを生成する。アップロード手段は、生成手段により生成された投稿データを、投稿サーバにアップロードする。

このような構成によれば、取得した投稿設定情報における任意の内容に応じて、録音データを所定の複数チャンネルの音源信号からなる複音の投稿データに変換することができる。なお、ここでいう複数チャンネルとは、例えば、スピーカが左右２系統に分かれたステレオ出力に対応するものや、ステレオよりも多くのチャンネルを有するサラウンド出力に対応するもの等である。

また、複音の投稿データにおける各チャンネルは、それぞれ異なる有音の音声信号のみで構成されるものであってもよいし、有音の音声信号からなるチャンネルと無音（ミュート）のチャンネルとの組合せであってもよい。さらに、外部入力音が複数系統ある場合、各系統の外部入力音の録音データをそれぞれ複数チャンネルの音源信号に変換し、それらを各チャンネルに割振るように構成することもできる。

本発明によって、利用者の歌唱や演奏を録音した投稿データを作成する際に、単一チャンネルの録音データを複数チャンネルの投稿データに変換可能としたことで、複数チャンネルの音源信号で各スピーカから異なる音声を出力させて臨場感のある音を聴けるようにしたい、といった利用者からの要望に応えることができる。

特に、投稿データ自体が複数チャンネルの音声信号で構成されているため、投稿データをダウンロードして再生する側において、再生時に単一チャンネルの音源信号を複数チャンネルに変換するといった特殊な再生方法が不要である。これにより、カラオケ装置だけでなく、例えば携帯型情報通信端末のような他の情報処理端末で本発明の投稿データを再生する場合においても、サービスの利用が容易となる。

ところで、録音データを複音の投稿データに変換するか否かを判断するための投稿設定情報の具体的な内容等については、請求項２に記載のようにすることが考えられる。すなわち、投稿設定情報は、投稿データにおける複数チャンネルの音源信号をそれぞれ個別に再生可能な第１モードが設定されているかを示している。そして、判断手段は、複音の投稿データに変換する条件として、投稿設定情報が、第１モードが設定されていることを示すかを判断する。判断手段により第１モードが設定されていると判断された場合、生成手段は、単一チャンネルの音源信号からなる録音データから、複数チャンネルの音源信号へ変換した複音の投稿データを生成する。

投稿データを作成する際、例えば、歌唱や演奏の練習をするための練習モードや複数人で行う合唱や合奏モードを指定する利用者においては、個々のチャンネルの対応するパートごとに歌唱や演奏を詳しく聴けるようにしたいといった要望があると考えられる。そこで、上記構成によれば、そのような観点において、第１モードに対応する特定のモードを指定した投稿者側の意図を反映した内容で複音の投稿データを作成することができる。

また、本発明のカラオケ装置は以下の構成を有する。カラオケ装置は、複数のスピーカと接続可能である。判断手段は、投稿設定情報に基づいて、録音データを複音の投稿データに変換するか、又は複数チャンネルの音源信号からなる単音の投稿データに変換するかを判断する。そして、生成手段は、判断手段により単音の投稿データに変換すると判断された場合、単一チャンネルの音源信号からなる録音データを、複数のスピーカにより同一の音として出力される音源信号に変換した単音の投稿データを生成する。

このような構成によれば、取得した投稿設定情報における任意の内容に応じて、録音データを所定の複数チャンネルの音源信号からなる複音の投稿データに変換したり、複数のスピーカにより同一の音として出力される単音の投稿データに変換することを選択的に行うことができる。ここでいう「複数のスピーカにより同一の音として出力される」とは、例えば、スピーカが左右２系統あるいはそれ以上に分かれている場合であれば、全てのスピーカから同じ音を出力（モノラル出力）するものである。

本発明によって、利用者の歌唱や演奏を録音した投稿データを作成する際に、録音データを複音の投稿データに変換して各スピーカから異なる音声を出力させて臨場感のある音を聴けるようにしたり、録音データを単音の投稿データに変換して各スピーカから同じように音声を出力させて一体感のある音を聴けるようしたいといった利用者からの要望に応えることができる。

ところで、録音データを複音の投稿データに変換するか、又は単音の投稿データに変換するかを判断するための投稿設定情報の具体的な内容等については、請求項３に記載のようにすることが考えられる。

すなわち、投稿設定情報は、投稿データにおける複数チャンネルの音源信号をそれぞれ個別に再生可能な第１モード、又は、投稿データにおける複数チャンネルの音源信号を複数のスピーカにより同一の音として再生可能な第２モードが設定されているかを示している。判断手段は、複音の投稿データに変換する条件として、投稿設定情報が、第１モードが設定されていることを示すかを判断する一方、単音の投稿データに変換する条件として、投稿設定情報が、第２モードが設定されていることを示すかを判断する。そして、判断手段により第１モードが設定されていると判断された場合、生成手段は、単一チャンネルの音源信号からなる録音データから、複数チャンネルの音源信号へ変換した複音の投稿データを生成する。一方、判断手段により第２モードが設定されていると判断された場合、生成手段は、単一チャンネルの音源信号からなる録音データを、複数のスピーカにより同一の音として出力される音源信号に変換した単音の投稿データを生成する。

投稿データを作成する際、例えば、練習モードや合唱・合奏モード等の特定モードを指定する利用者においては、個々のチャンネルの対応するパートごとに歌唱や演奏を詳しく聴けるようにしたいといった要望があると考えられる。一方、例えばライブ（本番）モード等の特定モードを指定する利用者においては、出力される音声全体が一体感があるように聴けるようにしたいといった要望があると考えられる。上記構成によれば、そのような観点において、第１モードに対応する特定のモード、あるいは第１モードに対応する特定のモードを指定した投稿者側の意図を反映した内容で、複音の投稿データを作成するか単音の投稿データを選択するかを選択できるので、便利である。

ところで、本発明のカラオケ装置では、自カラオケ装置において生成した投稿データのアップロードに加え、カラオケシステムにおいて数多くアップロードされた投稿データを取得し、それを再生するサービスを提供することも想定している。その投稿データの再生機能についての工夫として、請求項４に記載のように構成することが考えられる。

すなわち、カラオケシステムにおいてアップロードされた複数チャンネルの音源信号からなる投稿データを取得する投稿データ取得手段と、投稿データ取得手段により取得された投稿データに基づいて、カラオケ装置に接続された複数のスピーカから、複数チャンネルの音源信号を出力させる音声出力制御手段と、投稿データ取得手段により取得された投稿データの複数のチャンネルを、複数のスピーカそれぞれに割当てるチャンネル設定手段とを更に備える。そして、チャンネル設定手段は、各スピーカに割当てられたチャンネル数の差が所定差以内になるようにチャンネルを割当てる。

複数の投稿データを同時並行して音声出力可能としたことで、複数の利用者による投稿作品のコラボレーションを楽しむといったサービスを提供可能となる。その際、複数の投稿データにより同時出力される音声の聴き易さや臨場感を高めるといった観点においては、各スピーカから出力される音源信号のチャンネル数が、複数のスピーカの間でなるべく均等に割当てられていることが望ましい。

そこで、上記構成によれば、同時出力の対象となる複数の投稿データにおいて各スピーカに割当てられるチャンネル数の差が所定差以内になるように、チャンネルを均等に割当てることができ、同時出力される音声の聴き易さや臨場感を向上できる。

あるいは、投稿データの再生機能に関する別の工夫として、請求項５に記載のように構成することも考えられる。すなわち、音声出力制御手段は、投稿データにおける複数チャンネルの音源信号のうち、所定の設定情報に基づいてミュートする又は所定の音量を下げるチャンネルに対応する音源信号をミュートする又は所定の音量を下げる。

このような構成によれば、投稿データにおける複数チャンネルの音源信号のうち、一部のチャンネルをミュート（消音）することで、特定のチャンネルの再生音のみを出力させるといった制御を行うこともできる。このようにすると、利用者が特定の音源を聞き取りやすくなるといった効果も得られる。それに加え、どのスピーカから投稿データの再生音を出力させるかを利用者によって指定可能に構成してもよい。

なお、本発明は、請求項６に記載のように、カラオケシステムの利用者による歌唱音又は楽器の演奏音が録音された投稿データを所定の投稿サーバにアップロードする情報処理装置において実行されるプログラム、あるいは当該プログラムを記憶する記憶媒体等の態様で実現することもできる。

カラオケシステムの概略構成を示すブロック図である。 音声制御部１３の機能的構成を示す説明図である。 投稿データ作成処理の手順を示すフローチャートである。 投稿データ作成処理の手順を示すフローチャートである。 投稿データ再生時のチャンネル割当て方法の一例を示す説明図である。 投稿データ作成時のチャンネル割当て方法の一例を示す説明図である。

以下、本発明の一実施形態を図面に基づいて説明する。
［カラオケシステム１の構成の説明］
図１に示すように、カラオケシステム１は、カラオケボックス等のカラオケ店舗内に設置されるカラオケ装置１０と、外部のカラオケサーバ３０とを備える。カラオケ装置１０は、カラオケボックス内ＬＡＮ（以下、単に「ＬＡＮ」という）４０に接続されている。ＬＡＮ４０は、ルータ５０に接続されている。これにより、カラオケ装置１０は、ＬＡＮ４０、ルータ５０を介し、インターネット６０によって、カラオケサーバ３０とのデータ通信が可能となっている。

カラオケ装置１０は、装置全体の制御を司る制御部１１を中心に構成されている。制御部１１は、ＣＰＵ，ＲＯＭ，ＲＡＭ，Ｉ／Ｏ等を中心に構成された情報処理デバイスであり、ＨＤＤ１９から読込んだプログラムやデータに基づいて種々の処理を実行する。制御部１１はバスライン１２に接続されており、また、制御部１１には音声制御部１３が接続されている。

バスライン１２には、操作処理部１４、画像入力部１５、インターフェース部１６、ビデオＲＡＭ１７、映像再生部１８、及びハードディスクドライブ（ＨＤＤ）１９が接続されている。また、音声制御部１３には、２本のマイク２０ａ，２０ｂ、ＭＩＤＩ音源２２、及びステレオ出力に対応した左右２系統のスピーカ２３（左スピーカ２３ａ、右スピーカ２３ｂ）が接続されている。

操作処理部１４は、操作部１４ａからの信号を処理する。操作部１４ａからは、演奏する楽曲データを特定する曲番号、楽曲データの演奏速度、演奏キーなどの情報がユーザによって入力される。操作部１４ａは、例えば、装置本体と無線通信を行うリモコンとして具現化される。画像入力部１５には、カメラ１５ａが接続されている。カメラ１５ａは、カラオケ装置１０が設置される室内に設置され、カラオケの歌唱者や楽器の演奏者を撮影可能となっている。カメラ１５ａからの信号は、画像入力部１５にて処理され、処理された映像信号はバスライン１２を通じて出力される。インターフェース部１６は、カラオケ装置１０をＬＡＮ４０に接続するための構成である。これにより、上述したように、インターネット６０によるカラオケサーバ３０とのデータ通信が可能となる。なお、カメラ１５ａは、カラオケ装置１０の外部に設置されて、カラオケ装置１０と接続されてもよい。

ビデオＲＡＭ１７は、映像情報を一時的に記憶する。このビデオＲＡＭ１７は、映像再生部１８にも接続されている。映像再生部１８は、ビデオＲＡＭ１７からの映像情報及びバスライン１２を介して送信されてくる映像データに基づく映像の再生を行う。映像再生部１８が再生する映像としては、カラオケ演奏と共に表示する背景及び歌詞画像や、カラオケサーバ３０からダウンロードした利用者の投稿動画の映像等が含まれる。映像再生部１８には、映像制御部２４が接続されている。また、映像制御部２４には、表示部２５が接続されている。表示部２５は、モニタ装置として具現化される。このような構成により、映像制御部２４は、映像再生部１８から出力される映像を表示部２５に表示可能となっている。

ＨＤＤ１９は、いわゆるハードディスクドライブ装置であり、カラオケサーバ３０から配信されるカラオケの楽曲データを多数収録したカラオケデータベースや、カラオケ装置１０の動作を制御するシステムプログラムやアプリケーションプログラム、各種の情報コンテンツの再生に用いられるデータ等の各種データを記憶する。また、ＨＤＤ１９は、カラオケサーバ３０から取得した投稿データを記憶する。

次に、音声制御部１３に接続される構成について述べる。２本のマイク２０ａ，２０ｂは、利用者によるカラオケの歌唱音や楽器の演奏音を単一チャンネル（モノラル）の信号として入力するための入力装置である。ＭＩＤＩ音源２２は、ＭＩＤＩ（Musical Instrument Digital Interface）データに基づく楽音を発生する。上述したＨＤＤ１９に記憶される楽曲データは、楽音を発生するためのＭＩＤＩデータや、歌唱や演奏する人数を判別する情報等を含んでいる。左右のスピーカ２３ａ，２３ｂは、音声制御部１３から出力される音源信号を音に変えて出力する。

音声制御部１３は、ＨＤＤ１９に記憶されている楽曲データを、ＭＩＤＩ音源２２を介して音源信号に変換すると共に、マイク２０ａ，２０ｂからの外部入力音や、制御部１１を通じて入力される投稿データを音源信号に変換して、それらの音源信号を左右のスピーカ２３ａ，２３ｂに出力する。また、マイク２０ａ，２０ｂからの外部入力音を、単一チャンネルのモノラル音源信号としてデジタル化して録音する。

音声制御部１３は、左右２チャンネルで構成されるステレオ音源信号それぞれを左右のスピーカ２３ａ，２３ｂに個別に出力する。また、単一チャンネルで構成されるモノラル音源信号を左右のスピーカ２３ａ，２３ｂに同じ音として出力する。さらに、楽曲データの再生、並びに、それと並行して行う外部入力音（歌唱音・演奏音）の出力及び投稿データの再生において、フラグ等で示される特定の条件に応じて、マイク２０ａ，２０ｂからの外部入力音や投稿データのモノラル音源信号をステレオ音源信号に変換した上で、その変換したステレオ音源信号を左右のスピーカ２３ａ，２３ｂに振り分けて出力する（詳細な手順については後述する。）。なお、モノラル音源信号をステレオ音源信号に変換する手法については周知技術を用いることができる。

次にカラオケサーバ３０の構成について説明する。カラオケサーバ３０は、周知のサーバ装置であり、コンピュータシステムを構成している。カラオケサーバ３０は主に楽曲データを複数のカラオケ装置１０に対して配信する。ここでは特に、データベース３１を有している。このデータベース３１に、通信ネットワークを通じて複数のカラオケ装置１０からアップロードされた投稿動画のデータ（投稿データ）が蓄積されている。この投稿データは、カラオケ装置１０を利用して歌唱や演奏をした利用者の映像及び音声を記録したデータからなる。投稿データは、楽曲情報と対応付けられている。楽曲情報は、楽曲を特定可能な情報であり、この楽曲情報を基に検索可能となっている。楽曲情報は、楽曲番号や曲名としてもよいし、検索の便宜などから、歌手名を含めてもよい。

このような投稿データ及び対応付けられる各情報は、カラオケ装置１０で楽曲演奏が行われる際に作成される。例えば、投稿データは、カメラ１５ａから画像入力部１５を介して入力された利用者の映像、及びマイク２０ａ，２０ｂにて入力された利用者の歌唱音や演奏音から作成される。このとき、マイク２０ａ，２０ｂにて入力されたモノラル音源信号は、ステレオ音源信号に変換されて、投稿データが作成される。投稿データの作成時におけるモノラル音源信号からステレオ音源信号への変換手順の詳細な内容については、後述する。楽曲情報は、このとき演奏された楽曲の楽曲番号や曲名とする。

このようにして作成された投稿データは、ＨＤＤ１９に一時的に記憶され、当該投稿データの作成に関わる利用者の了承を得た上で、カラオケサーバ３０にアップロードされることが考えられる。このようにすれば、十分な数の投稿データをカラオケサーバ３０のデータベース３１に蓄積することが可能となる。そして、カラオケ装置１０は、利用者の選択した投稿データを制御部１１及びインターフェース部１６を通じてカラオケサーバ３０からダウンロードする。そして、カラオケ装置１０は、その投稿データに対応付けてある楽曲の演奏と同期して投稿データを再生すると共に、カラオケ装置１０に備え付けのマイクで入力した利用者の歌唱音や演奏音を同時に出力する。さらに、カラオケ装置１０は、同じ楽曲に対応する別の投稿データを複数同時に再生することも可能である。

［音声制御部１３の機能的構成の説明］
つぎに、カラオケ装置１０の音声制御部１３における機能的構成について、図２を参照しながら説明する。

音声制御部１３は、モノラル／ステレオ変換部１３ａと、合成部１３ｂとを備える。モノラル／ステレオ変換部１３ａは、モノラル音源信号として入力されるマイク２０ａ，２０ｂからの外部入力音をステレオ音源信号に変換し、各チャンネルの音源信号を左右のチャンネルごとに分配して出力する。合成部１３ｂは、モノラル／ステレオ変換部１３ａから出力された複数チャンネルの音源信号と、予めステレオ音源信号で作成されている投稿データの複数チャンネルの音源信号とを左右のチャンネル別にミキシングする。そして、合成部１３ｂは、それぞれを左右のスピーカ２３ａ，２３ｂに出力する。

モノラル／ステレオ変換部１３ａは、上記のように外部入力音をステレオ音源信号に変換してから出力する動作を、各種フラグで示される条件に基づく制御部１１からの制御に応じて実行する。

図２（ａ）は、モノラル／ステレオ変換部１３ａがモノラル音源信号をステレオ音源信号に変換する事例を模式的に示す説明図である。ここでは、２つの外部入力音１，２の音源信号と、２つの投稿データ１，２の音源信号が同時に再生出力される事例を想定する。

モノラル／ステレオ変換部１３ａは、入力された外部入力音１，２の各モノラル音源信号をそれぞれ左右２チャンネルのステレオ音源信号に変換する。このとき、外部入力音１については、左（Ｌ）側のみ音が出力されるようなステレオ音源信号に変換するか、あるいは左右両側から音が出力されるようなステレオ音源信号に変換したのちに右（Ｒ）側を消音（ミュート）して出力する。反対に、外部入力音２については、右（Ｒ）側のみ音が出力されるようなステレオ音源信号に変換するか、あるいは左右両側から音が出力されるようなステレオ音源信号に変換したのちに左（Ｌ）側を消音（ミュート）して出力する。このようにして、複数の外部入力音のステレオ音源信号の出力先が左右のスピーカ２３ａ，２４ｂに均等に分配されるように、各個の外部入力音のステレオ音源信号の出力先を左右のスピーカ２３ａ，２４ｂの何れかに割振る。

一方、投稿データ１，２については、ステレオ音源信号を対応するそれぞれ出力先のスピーカスピーカ２３ａ，２４ｂに割当てて出力する。ただし、左右の１組ステレオ音源信号のうち、何れか一方が消音（ミュート）された投稿データが複数存在する場合、複数の投稿データのステレオ音源信号の出力先が左右のスピーカ２３ａ，２４ｂに均等に分配されるように、各個の投稿データのステレオ音源信号の出力先を左右のスピーカ２３ａ，２４ｂの何れかに割振る。

合成部１３ｂは、外部入力音１のステレオ音源信号（Ｌ側）と、投稿データ１のステレオ音源信号（Ｌ側）と、投稿データ２のステレオ音源信号（Ｌ側）とをミキシングして左スピーカ２３ａに出力すると共に、外部入力音２のステレオ音源信号（Ｒ側）と、投稿データ１のステレオ音源信号（Ｒ側）と、投稿データ２のステレオ音源信号（Ｒ側）とをミキシングして右スピーカ２３ｂに出力する。

図２（ｂ）は、モノラル／ステレオ変換部１３ａがモノラル音源信号をステレオ音源信号に変換しないでモノラル音源信号のまま出力する事例を模式的に示す説明図である。ここでは、外部入力音１及び投稿データ１の２つの音源信号を同時に再生出力する事例を想定する。

音声制御部１３に入力された外部入力音１及び投稿データ１の音源信号は、それぞれ左右２つのチャンネルに同じ音として出力される。合成部１３ｂは、Ｌ側に出力された外部入力音１及び投稿データ１の音源信号をミキシングして左スピーカ２３ａに出力すると共に、Ｒ側に出力された外部入力音１及び投稿データ１の音源信号をミキシングして右スピーカ２３ｂに出力する。

［投稿データ作成処理の説明］
つぎに、カラオケ装置１０の制御部１１が実行する投稿データ作成処理の手順について図３，４のフローチャートに基づいて説明する。この処理は、演奏する楽曲が利用者によって選択されることで実行される。また、この処理は、利用者によって選択された楽曲の再生前、再生中及び再生後の各段階に対応して、再生前処理、再生中処理及び再生後処理の各段階に分類される。

（１）再生前処理
図３に示すとおり、制御部１１は、まず、利用者から選択された演奏対象の楽曲の属性データを参照し、当該楽曲が複数人で歌唱又は演奏すると定められた楽曲であるか否かを判定する（Ｓ１００）。演奏対象の楽曲が複数人で歌唱又は演奏する楽曲である場合（Ｓ１００：ＹＥＳ）、制御部１１はＳ１０６の処理に進み、外部出力フラグを「ステレオ」に設定する。つづいて、制御部１１はＳ１０８の処理に進み、投稿録音フラグを「ステレオ」に設定する。

なお、外部出力フラグとは、マイク２０ａ，２０ｂからの外部入力音をモノラルでスピーカから出力するか、ステレオでスピーカから出力するかを指定する設定情報であり、制御部１１のメモリ等に保持される。また、投稿録音フラグとは、マイク２０ａ，２０ｂからの外部入力音を録音して生成した投稿データに付与する投稿再生フラグをモノラルに設定するかステレオに設定するかを指定する情報であり、制御部１１のメモリ等に保持される。

一方、演奏対象の楽曲が単独で歌唱又は演奏する楽曲である場合（Ｓ１００：ＮＯ）、制御部１１は、Ｓ１０２に進み、当該楽曲が楽器演奏曲であるか否かを判定する。演奏対象の楽曲が楽器演奏曲である場合（Ｓ１０２：ＹＥＳ）、制御部１１はＳ１０６に進み、外部出力フラグを「ステレオ」に設定する。つづいて、制御部１１はＳ１０８に進み、投稿録音フラグを「ステレオ」に設定する。

一方、演奏対象の楽曲が楽器演奏曲でない場合（Ｓ１０２：ＮＯ）、制御部１１は、Ｓ１０４に進み、今回の楽曲の演奏に対して指定されている演奏モードの情報を取得し、その演奏モードを判定する。ここでいう演奏モードとは、例えば、歌唱や演奏の練習をするための専用のモードである「練習モード」や、合唱や合奏をするための専用のモードである「合唱・合奏モード」、本番として一体感を高める「ライブ（本番）モード」といった、モードごとに通常の演奏とは異なる演出効果を付加する機能である。本カラオケシステム１では、楽曲の演奏に際して利用者が所望の演奏モードを選択できるようになっている。ここでは、練習モードや合唱・合奏モードは、個々のチャンネルの対応するパートごとに歌唱や演奏を聴けるようにするためのステレオ対応モード（本発明の第１モードに相当する。）に定義されているものとする。また、ライブ（本番）モードは、出力される音声全体が一体感があるように聴けるようにするためのモノラル対応モード（本発明の第２モードに相当する。）に定義されているものとする。

「練習モード」や「合唱・合奏モード」等のステレオ対応モードが指定されている場合（Ｓ１０４：ステレオ対応モード）、制御部１１はＳ１０６に進み、外部出力フラグを「ステレオ」に設定する。つづいて、制御部１１はＳ１０８に進み、投稿録音フラグを「ステレオ」に設定する。一方、「ライブ（本番）モード」等のモノラル対応モードが指定されている場合（Ｓ１０４：モノラル対応モード）、制御部１１はＳ１１０に進み、外部出力フラグを「モノラル」に設定する。つづいて、制御部１１はＳ１１２に進み、投稿録音フラグを「モノラル」に設定する。

つぎに、Ｓ１１４では、制御部１１は、利用者から指定された楽曲の演奏と同期して、この楽曲と対応付けられている投稿データの再生を行うか否かを判定する。なお、投稿データの再生は、利用者からの選択指示によりカラオケサーバ３０からダウンロードしたデータに基づいて、制御部１１により行われる。投稿データの再生を行う場合（Ｓ１１４：ＹＥＳ）、制御部１１はＳ１１６に進む。一方、再生を行わない場合（Ｓ１１４：ＮＯ）、制御部１１はＳ２００に進む。

投稿データの再生を行う場合に進むＳ１１６では、制御部１１は、再生対象となる個々の投稿データについて、指定された特定のチャンネルをミュートするＯＦＦ設定がされているか否かを判定する。指定チャンネルのＯＦＦ設定は、再生対象となる任意の投稿データの左右何れかのチャンネルの音源信号をミュートする指示を、投稿データの再生前にユーザから予め受付けることにより設定される。

何れかの投稿データに指定チャンネルのＯＦＦ設定がされている場合（Ｓ１１６：ＹＥＳ）、制御部１１はＳ１１８に進み、該当の投稿データの指定チャンネルをミュートにする。なお、ミュートとして、投稿データの指定チャンネルの音量を所定の音量以下に下げる処理が実行されてもよい。一方、何れの投稿データにも指定チャンネルのＯＦＦ設定がされていない場合（Ｓ１１６：ＮＯ）、制御部１１はＳ１２０に進む。

つぎに、Ｓ１２０では、制御部１１は、再生対象の投稿データの中に指定チャンネルのＯＦＦ設定がされていない投稿データが複数あるか否かを判定する。ＯＦＦ設定がされていない投稿データが複数ある場合（Ｓ１２０：ＹＥＳ）、制御部１１はＳ１２２に進む。一方、ＯＦＦ設定がされていない投稿データが複数ではない場合（ＳＳ１２０：ＮＯ）、制御部１１はＳ１２４に進む。

ＯＦＦ設定がされていない投稿データが複数ある場合に進むＳ１２２では、ＯＦＦ設定のない全ての投稿データについて、Ｌ側の有音のチャンネルの合計数と、Ｒ側の有音のチャンネルの合計数とに２以上の差がある場合、その差が１又は０の最小数となるように、何れかの投稿データにおける有音のチャンネルを左右入れ替える。

この処理の具体例について図５を参照しながら説明する。ここでは、左右２チャンネルの音源信号からなる３つの投稿データ１，２，３を同時に再生する事例を想定している。ただし、これらの投稿データ１〜３については、何れも指定チャンネルのＯＦＦ設定がないものとする。各投稿データ１〜３における当初のチャンネルの割当ては、図５（ａ）に示すとおりである。すなわち、投稿データ１にはＬ・Ｒ両側のチャンネルにそれぞれ異なる音声データが含まれており、両方とも有音のチャンネルとなっている。一方、投稿データ２，３のそれぞれには、Ｌ側のチャンネルのみ音声データが含まれており、Ｒ側が無音のチャンネルとなっている。この時点で、投稿データ１〜３におけるＬ側の有音のチャンネルの合計数は３で、Ｒ側の有音のチャンネルの合計数は１となっており、左右の差が２以上となっている。

そこで、左右の有音のチャンネルの合計数の差が２以上ある不均衡な状態を解消するため、これらの投稿データ１〜３のうち、片方のチャンネルが無音となっている何れかの投稿データに含まれる有音のチャンネルを反対側のチャンネルに変換、すなわち左右のチャンネルを入替え、左右のチャンネルの合計数の差が１又は０の最小数になるようにする。チャンネル変更後における各投稿データ１〜３のチャンネルの割当ては、図５（ｂ）に示すとおりである。ここでは、投稿データ２のＬ側を無音のチャンネル、Ｒ側を有音のチャンネルに変更している。なお、この事例においては、投稿データ３の方を変更してもよい。チャンネル変更後の投稿データ１〜３におけるＬ側の有音のチャンネルの合計数は２で、Ｒ側の有音のチャンネルの合計数は２となっており、左右の差は０となっている。もし、左右全てのチャンネルの合計が奇数である場合、左右の差が１となるようにチャンネルの変更を行う。

図３のフローチャートの説明に戻る。つぎのＳ１２４では、制御部１１は、楽曲の演奏開始に合わせて、再生対象の各投稿データを各設定に従って再生する。つまり、制御部１１は、各投稿データのステレオ音源信号に基づいて、割振られた所定の出力先のスピーカに出力するように音声制御部１３を制御する。また、Ｓ１１８においてミュートに設定したチャンネルの音源信号についてはスピーカに出力しない。ここまでが投稿データ作成処理における再生前処理に相当する。以降の説明は図４を参照する（図４のＳ２００へ）。

（２）再生中処理
図４に示すとおり、Ｓ２００では、制御部１１は、楽曲の再生中においてカラオケ装置１０に備え付けのマイク２０ａ，２０ｂからの外部入力音があるか否かを判定する。外部入力音がある場合（Ｓ２００：ＹＥＳ）、制御部１１は、Ｓ２０２に進む一方、外部入力音がない場合（Ｓ２００：ＮＯ）、制御部１１は、Ｓ２１２に進む。

外部入力音が存在する場合に進むＳ２０２では、制御部１１は、外部入力音を所定形式のデータに録音する。つぎに、Ｓ２０４では、制御部１１は、上記再生前処理において設定された外部出力フラグを読取り、その外部出力フラグが「ステレオ」に設定されているか否かを判定する。外部出力フラグが「ステレオ」に設定されている場合（Ｓ２０４：ＹＥＳ）、制御部１１はＳ２０６に進む。一方、外部出力フラグが「モノラル」に設定されている場合（Ｓ２０４：ＮＯ）、制御部１１はＳ２１０に進む。

外部出力フラグが「ステレオ」に設定されている場合に進むＳ２０６では、制御部１１は、モノラル／ステレオ変換部１３ａを通じて各外部入力音のモノラル音源信号をステレオ音源信号に変換する。このとき、制御部１１は、初めから左右のどちらか１チャンネルからのみ音が出力されるようなステレオ音源信号に変換してもよいし、左右両側から音が出力されるようなステレオ音源信号に一旦変換してから、不要なチャンネルの音を消音（ミュート）して出力してもよい。つぎに、Ｓ２０６で変換を行った各外部入力音のステレオ音源信号の出力先が左右のスピーカ２３ａ，２４ｂに均等に分配されるように、制御部１１は、各外部入力音の出力先を割振り、音声制御部１３を通じて出力する（Ｓ２０８）。例えば、外部入力音が１つであれば、制御部１１は、そのステレオ音源信号の出力先を左右の何れか一方に割振って出力する。また、外部入力音が２つであれば、制御部１１は、それらのステレオ音源信号の出力先を左右に１つずつ割振って出力する。また、どのスピーカからどのマイクの外部入力音を出力させるかを利用者によって指定できるように、カラオケ装置１０が構成されていてもよい。

一方、外部出力フラグが「モノラル」に設定されている場合に進むＳ２１０では、制御部１１は、音声制御部１３を通じて外部入力音を全てのスピーカから同じ音として出力する。つぎに、Ｓ２１２では、制御部１１は、楽曲の演奏が終了したか否かを判定する。楽曲の演奏が終了していない場合（Ｓ２１２：ＮＯ）、制御部１１は、Ｓ２００に戻り、楽曲の演奏が終了した場合（Ｓ２１２：ＹＥＳ）、制御部１１は、Ｓ２１４に進む。ここまでが投稿データ作成処理における再生中処理に相当する。

（３）再生後処理
演奏が終了した場合に進むＳ２１４では、制御部１１は、今回の演奏において取得した録音データがあるか否かを判定する。録音データがある場合（Ｓ２１４：ＹＥＳ）、制御部１１は、Ｓ２１６に進み、録音データがない場合（Ｓ２１４：ＮＯ）、制御部１１は本処理を終了する。録音データがある場合に進むＳ２１６では、制御部１１は、上記再生前処理において設定された投稿録音フラグを読取り、その投稿録音フラグが「ステレオ」に設定されているか否かを判定する。投稿録音フラグが「ステレオ」に設定されている場合（Ｓ２１６：ＹＥＳ）、制御部１１はＳ２１８に進み、投稿録音フラグが「モノラル」に設定されている場合（Ｓ２１６：ＮＯ）、制御部１１はＳ２２４に進む。

投稿録音フラグが「ステレオ」に設定されている場合に進むＳ２１８では、複数の入力系統からそれぞれ入力された複数の録音データがあるか否かを判定する。録音データが複数ある場合（Ｓ２１８：ＹＥＳ）、制御部１１はＳ２２０に進み、録音データが１つの場合（Ｓ２１８：ＮＯ）、制御部１１はＳ２２２に進む。

録音データが複数ある場合に進むＳ２２０では、制御部１１は、複数の録音データのモノラル音源信号を、左右のチャンネルにほぼ均等な数に割振った複音の投稿データを作成する。この処理の具体例を図６（ａ）に示す。図６（ａ）の事例では、３つの録音データ１，２，３から複音の投稿データを作成する事例を想定している。これらの録音データ１〜３は、それぞれ音声データＡ，Ｂ，Ｃからなるモノラルの音源信号で構成されている。この場合、例えば、Ｌ側のチャンネルには音声データＡ，Ｃを合成したものを割当てる。一方、Ｒ側のチャンネルには音声データＢを割当てる。このようにして、左右で異なる音声信号で構成された複音の投稿データを作成する。もし、録音データの数が偶数であれば、左右の各チャンネルに同数の録音データを割当てる。もし、録音データの数が奇数であれば、左右の差が１となるように、左右の各チャンネルに割り当てる録音データが変更される。

図４のフローチャートの説明に戻る。録音データが１つの場合に進むＳ２２２では、録音データを左右２チャンネルのうち何れか一方に割当て、他方を無音にした複音の投稿データを作成する。この処理の具体例を図６（ｂ）に示す。図６（ｂ）の事例では、１つの録音データ１から複音の投稿データを作成する事例を想定している。この録音データ１は、音声データＡからなるモノラルの音源信号で構成されている。この場合、例えば、Ｌ側のチャンネルには音声データＡを割当て、Ｒ側のチャンネルを無音にする。このようにして、左右で異なる音声信号で構成された複音の投稿データを作成する。

図４のフローチャートの説明に戻る。投稿録音フラグが「モノラル」の場合に進むＳ２２４では、今回の演奏で作成した全ての録音データのそれぞれを左右両方のチャンネルに割振った単音の投稿データを作成する。この処理の具体例を図６（ｃ）に示す。図６（ｃ）の事例では、３つの録音データ１，２，３から単音の投稿データを作成する事例を想定している。これらの録音データ１〜３は、それぞれ音声データＡ，Ｂ，Ｃからなるモノラルの音源信号で構成されている。この場合、左右両方のチャンネルに全ての音声データＡ，Ｂ，Ｃを合成したものを割当てて、左右同じ音声信号で構成された単音の投稿データを作成する。

図４のフローチャートの説明に戻る。つぎのＳ２２６では、制御部１１は、Ｓ２２０，Ｓ２２２，Ｓ２２４の何れかで作成した投稿データと、今回の演奏時にカメラ１５ａにより撮像された映像データと、今回演奏した楽曲の楽曲情報とを対応付けてカラオケサーバ３０にアップロードし、本処理を終了する。

［実施形態の構成と特許請求の範囲に記載の構成との対応］
実施形態のカラオケ装置１０の各構成と、特許請求の範囲に記載の構成との対応は次のとおりである。実施形態の音声制御部１３が、特許請求の範囲における入力音取得手段及び録音手段に相当する。また、制御部１１が、設定取得手段、判断手段、生成手段、音声出力制御手段、及びチャンネル設定手段に相当する。また、制御部１１及びインターフェース部１６が、投稿データ取得手段に相当する。

［効果］
実施形態のカラオケ装置１０によれば、次のような効果を奏する。
演奏する楽曲の参加人数や、歌唱曲か演奏曲か、あるいは練習モードや、合唱・合奏モード、ライブ（本番）モード等の特定の演奏モードが指定されているか等の設定情報に応じて、録音データをステレオ対応の複音の投稿データに変換するか、モノラル対応の単音の投稿データに変換するかを選択できる。これにより、投稿データを作成する際に、ステレオ対応の投稿データにより各スピーカから異なる音声を出力させて臨場感のある音を聴けるようにすることができる。また、モノラル対応の投稿データにより各スピーカから同じように音声を出力させて一体感のある音を聴けるようしたいといった利用者からの要望に応えることができる。

投稿データ自体がステレオの音声信号で構成されているため、投稿データをダウンロードして再生する側において、再生時にモノラルの音源信号をステレオに変換するといった特殊な再生方法が不要である。これにより、カラオケ装置だけでなく、例えば携帯型情報通信端末のような他の情報処理端末で本発明の投稿データを再生する場合においても、サービスの利用が容易となる。

複数の投稿データを同時並行して音声出力可能としたことで、複数の利用者による投稿作品のコラボレーションを楽しむといったサービスを提供可能である。その際、同時再生の対象となる複数の投稿データにおいて各スピーカに割当てられるチャンネル数の差が所定差以内になるように、チャンネルを均等に割当てることができ、同時出力される音声の聴きやすさや臨場感を向上できる。

投稿データにおける複数チャンネルの音源信号のうち、一部のチャンネルをミュートすることで、特定のチャンネルの再生音のみを出力させることができる。このようにすると、利用者が特定の音源を聞き取りやすくなるといった効果も得られる。

［変形例］
以上、本発明の実施形態について説明したが、本発明は上記の実施形態に何ら限定されるものではなく様々な態様にて実施することが可能である。

上記実施形態のカラオケ装置１０では、マイクからの外部入力音や投稿データのモノラル音源信号を左右２チャンネルのステレオ音源信号に変換する事例について説明した。これに対し、ステレオよりも多くのチャンネルを有する４チャンネルステレオやサラウンド出力等に対応した２チャンネル以上の複数チャンネルの音源信号に変換するように構成してもよい。

また、上記実施形態では、マイクからの外部入力音をステレオ音源信号に変換したもののうち、右か左のどちらか一方のチャンネルのみ音を出力するように制御する構成であったが、スレレオ音源信号に変換したものを左右両方のチャンネルからそれぞれ音を出力するように制御する構成にしてもよい。または、マイク以外に、カラオケ装置１０と電気的に接続可能な電子楽器等から、外部入力音がカラオケ装置１０へ入力されてもよい。

１…カラオケシステム、１０…カラオケ装置、１１…制御部、１２…バスライン、１３…音声制御部、１３ａ…モノラル／ステレオ変換部、１３ｂ…合成部、１４…操作処理部、１４ａ…操作部、１５…画像入力部、１５ａ…カメラ、１６…インターフェース部、１７…ビデオＲＡＭ、１８…映像再生部、１９…ハードディスクドライブ（ＨＤＤ）、２０ａ，２０ｂ…マイク、２２…ＭＩＤＩ音源、２３ａ…左スピーカ、２３ｂ…右スピーカ、２４…映像制御部、２５…表示部、３０…カラオケサーバ、３１…データベース、４０…カラオケボックス内ＬＡＮ、５０…ルータ、６０…インターネット。

Claims (6)

1. カラオケ装置の複数のチャンネルから入力可能な外部入力音であって、入力された各外部入力音を単一チャンネルの音源信号として取得する入力音取得手段と、
   前記入力音取得手段により取得した単一チャンネルの音源信号の録音データを生成する録音手段と、
   前記録音手段により生成した録音データを、投稿データに変換する方法を示す投稿設定情報を取得する設定取得手段と、
   前記設定取得手段により取得した投稿設定情報に基づいて、前記録音データを複数チャンネルの音源信号からなる複音の投稿データに変換するか、又は前記複数チャンネルの音源信号からなる単音の投稿データに変換するかを判断する判断手段と、
   前記判断手段により前記録音データを前記複音の投稿データに変換すると判断された場合、単一チャンネルの音源信号からなる前記録音データから、前記複数チャンネルの音源信号に変換した前記複音の投稿データを生成する一方、前記判断手段により前記単音の投稿データに変換すると判断された場合、単一チャンネルの音源信号からなる前記録音データを、複数のスピーカにより同一の音として出力される音源信号に変換した単音の投稿データを生成する生成手段と、
   前記生成手段により生成された投稿データを、投稿サーバにアップロードするアップロード手段と、
   を備えることを特徴とするカラオケ装置。
2. 請求項１に記載のカラオケ装置において、
   前記投稿設定情報は、投稿データにおける複数チャンネルの音源信号をそれぞれ個別に再生可能な第１モードが設定されているかを示し、
   前記判断手段は、前記複音の投稿データに変換する条件として、前記投稿設定情報が、前記第１モードが設定されていることを示すかを判断し、
   前記判断手段により前記第１モードが設定されていると判断された場合、前記生成手段は、単一チャンネルの音源信号からなる前記録音データから、複数チャンネルの音源信号へ変換した前記複音の投稿データを生成すること
   を特徴とするカラオケ装置。
3. 請求項１又は請求項２に記載のカラオケ装置において、
   前記投稿設定情報は、投稿データにおける複数チャンネルの音源信号をそれぞれ個別に再生可能な第１モード、又は、投稿データにおける複数チャンネルの音源信号を複数のスピーカにより同一の音として再生可能な第２モードが設定されているかを示し、
   前記判断手段は、前記複音の投稿データに変換する条件として、前記投稿設定情報が、前記第１モードが設定されていることを示すかを判断する一方、前記単音の投稿データに変換する条件として、前記投稿設定情報が、前記第２モードが設定されていることを示すかを判断し、
   前記判断手段により前記第１モードが設定されていると判断された場合、前記生成手段は、単一チャンネルの音源信号からなる前記録音データから、前記複数チャンネルの音源信号へ変換した前記複音の投稿データを生成し、前記判断手段により前記第２モードが設定されていると判断された場合、前記生成手段は、単一チャンネルの音源信号からなる前記録音データを、複数のスピーカにより同一の音として出力される音源信号に変換した前記単音の投稿データを生成すること
   を特徴とするカラオケ装置。
4. 請求項１ないし請求項３の何れか１項に記載のカラオケ装置において、
   カラオケシステムにおいてアップロードされた前記複数チャンネルの音源信号からなる投稿データを取得する投稿データ取得手段と、
   前記投稿データ取得手段により取得された投稿データに基づいて、前記カラオケ装置に接続された複数のスピーカから、前記複数チャンネルの音源信号を出力させる音声出力制御手段と、
   前記投稿データ取得手段により取得された前記投稿データの前記複数のチャンネルを、前記複数のスピーカそれぞれに割当てるチャンネル設定手段とを更に備え、
   前記チャンネル設定手段は、各スピーカに割当てられたチャンネル数の差が所定差以内になるようにチャンネルを割当てること
   を特徴とするカラオケ装置。
5. 請求項１ないし請求項４の何れか１項に記載のカラオケ装置において、
   カラオケシステムにおいてアップロードされた前記複数チャンネルの音源信号からなる投稿データを取得する投稿データ取得手段と、
   前記投稿データ取得手段により取得された投稿データに基づいて、前記カラオケ装置に接続された複数のスピーカから、前記複数チャンネルの音源信号を出力させる音声出力制御手段とを更に備え、
   前記音声出力制御手段は、前記投稿データにおける前記複数チャンネルの音源信号のうち、所定の設定情報に基づいてミュートする又は所定の音量を下げるチャンネルに対応する音源信号を、ミュートする又は所定の音量を下げること
   を特徴とするカラオケ装置。
6. 情報処理装置の複数のチャンネルから入力可能な外部入力音であって、入力された各外部入力音を単一チャンネルの音源信号として取得する入力音取得ステップと、
   前記入力音取得ステップにおいて取得された、前記単一チャンネルの音源信号の録音データを生成する録音ステップと、
   前記録音ステップにおいて生成した録音データを、投稿データに変換する方法を示す投稿設定情報を取得する設定取得ステップと、
   前記設定取得ステップにおいて取得した投稿設定情報に基づいて、前記録音データを複数チャンネルの音源信号からなる複音の投稿データに変換するか、又は前記複数チャンネルの音源信号からなる単音の投稿データに変換するかを判断する判断ステップと、
   前記判断ステップにおいて前記録音データを前記複音の投稿データに変換すると判断された場合、単一チャンネルの音源信号からなる前記録音データから、前記複数チャンネルの音源信号に変換した前記複音の投稿データを生成する一方、前記判断ステップにおいて前記単音の投稿データに変換すると判断された場合、単一チャンネルの音源信号からなる前記録音データを、複数のスピーカにより同一の音として出力される音源信号に変換した単音の投稿データを生成する生成ステップと、
   前記生成ステップにおいて生成された投稿データを、投稿サーバにアップロードするアップロードステップと、
   を情報処理装置に実行させることを特徴とするプログラム。

Images