JP3890692B2 - 情報処理装置及び情報配信システム - Google Patents
情報処理装置及び情報配信システム Download PDFInfo
- Publication number
- JP3890692B2 JP3890692B2 JP23412797A JP23412797A JP3890692B2 JP 3890692 B2 JP3890692 B2 JP 3890692B2 JP 23412797 A JP23412797 A JP 23412797A JP 23412797 A JP23412797 A JP 23412797A JP 3890692 B2 JP3890692 B2 JP 3890692B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- vocal
- language
- language character
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
- G10H1/365—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems the accompaniment information being stored on a host computer and transmitted to a reproducing terminal by means of a network, e.g. public telephone lines
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
- G10H1/0041—Recording/reproducing or transmission of music for electrophonic musical instruments in coded form
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
- H04H20/65—Arrangements characterised by transmission systems for broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H40/00—Arrangements specially adapted for receiving broadcast information
- H04H40/18—Arrangements characterised by circuits or components specially adapted for receiving
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/27—Arrangements for recording or accumulating broadcast information or broadcast-related information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/68—Systems specially adapted for using specific information, e.g. geographical or meteorological information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/76—Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
Description
【０００１】
【発明の属する技術分野】
本発明は、例えば情報が蓄積される情報格納装置から情報伝送装置に情報を配信し、更に情報伝送装置にて受信した情報を出力することで、端末装置においてその情報をコピーすることができるようにした情報配信システム、及びこのような情報配信システムに備えられて、所要の情報処理を行う情報処理装置に関するものである。
【０００２】
【従来の技術】
先に本出願人により、例えばサーバに大量の楽曲データ（オーディオデータ）や映像データ等の情報をデータベースとして格納しておくと共に、この大量の情報のうちから必要とされる情報を多数の中間サーバ装置に配信することにより、この中間サーバ装置から、ユーザが個人で所有する携帯端末装置に対して指定の情報をコピー（ダウンロード）できるようにした情報配信システムが提案されている。
【０００３】
【発明が解決しようとする課題】
例えば上記のような情報配信システムにおいて、楽曲データを携帯端末装置にダウンロードする場合のサービスの形態について考えてみた場合、一般的には、楽曲単位もしくはアルバム単位の複数楽曲のオーディオ信号をデジタル情報化し、このデジタル情報化された楽曲をサーバ装置から中間サーバ装置を介して携帯端末装置に伝送することになる。
このようにデジタル情報化された情報を送信するのであれば、単にデジタル情報化された楽曲情報だけでなく、例えば情報配信システム内において、例えばある楽曲のデジタルデータを素材として扱って所要の情報処理を施すことにより、１つの楽曲情報から付随して生成される二次的な各種派生情報を、携帯端末装置のユーザに対して提供することは可能である。このような派生情報をユーザに提供できるようにすれば、情報配信システムとしての利用価値はより高められることになる。
【０００４】
【課題を解決するための手段】
本発明は上記したような課題を考慮して、第１のオーディオ情報を、上記第１のオーディオ情報よりボーカル部を抽出したボーカル情報と、上記第１のオーディオ情報よりボーカル部を取り除いた伴奏情報とに分離する楽曲情報分離手段と、上記ボーカル情報について第１の言語における音声認識を行って第１の言語文字情報を生成する音声認識手段と、上記第１の言語文字情報について第２の言語への翻訳処理を行って第２の言語文字情報を生成する翻訳手段と、上記第２の言語文字情報を利用して上記第２の言語により発音される翻訳ボーカル情報を生成し、この翻訳ボーカル情報と上記伴奏情報を合成することにより、第２のオーディオ情報を生成する情報合成手段とを備えて情報処理装置を構成することとした。
【０００５】
また、第１のオーディオ情報を選択して出力可能に構成された情報送信装置と、上記情報送信装置と通信可能とされることにより、上記情報送信装置から出力された上記第１のオーディオ情報を受信する受信動作とが可能とされると共に、情報出力動作として、少なくとも上記第１のオーディオ情報に基づいて獲得した情報を外部に対して送信出力可能とされる情報伝送装置と、情報記憶手段が備えられると共に、上記情報伝送装置と通信可能とされることで、情報記憶動作として、少なくとも上記情報伝送装置から送信出力された情報を上記情報記憶手段に対して記憶可能とされる端末装置とを備えて当該情報配信システムを構成することとした。
そして、この情報配信システムにおいて備えられる情報処理系として、上記情報送信装置から出力された第１のオーディオ情報について、ボーカル情報と伴奏情報とに分離する楽曲情報分離手段と、上記ボーカル情報について音声認識を行って第１の言語文字情報を生成する音声認識手段と、上記第１の言語文字情報について翻訳処理を行って第２の言語文字情報を生成する翻訳手段と、上記第２の言語文字情報を利用して翻訳言語により発音される翻訳ボーカル情報を生成し、この翻訳ボーカル情報と上記伴奏情報を合成することにより、第２のオーディオ情報を生成する情報合成手段とを備えることした。
【０００６】
上記した構成によれば、情報配信システムにおいて例えばボーカル入りの楽曲情報について情報処理を施して得られる派生情報として、カラオケの楽曲情報、ボーカルの歌詞情報（音声認識処理により得られる一次言語文字情報）、他の言語に翻訳されたボーカルの歌詞情報（元の歌詞情報に対して行った翻訳処理により得られる二次言語文字情報）、及び音声合成処理により生成した翻訳言語で歌うボーカルによる楽曲情報（合成楽曲情報）の各々が生成され、これら各情報を携帯端末装置にダウンロードすることが可能となる。
【０００７】
【発明の実施の形態】
以下、本発明の実施の形態について図１〜図１０を参照して説明する。
なお、以降の説明は次の順序により行うこととする。
＜１．情報配信システムの構成例＞
（１−ａ．情報配信システムの概要＞
（１−ｂ．情報配信システムを構成する各装置の構成）
（１−ｃ．ボーカル分離部の構成例）
（１−ｄ．音声認識翻訳部の構成例）
（１−ｅ．音声合成部の構成例）
（１−ｆ．基本的なダウンロード動作及びダウンロード情報の利用例）
＜２．派生情報のダウンロード＞
【０００８】
＜１．情報配信システムの構成例＞
（１−ａ．情報配信システムの概要＞
図１は、本発明の実施の形態としての情報配信システムの構成を概略的に示している。
この図において、サーバ装置１は、後述するようにして配信用データ（例えば、オーディオ情報、テキスト情報、画像情報、映像情報等）をはじめとする所要の情報が格納される大容量の記録媒体を備えており、少なくとも通信網４を介して多数の中間伝送装置２と相互通信可能に構成されている。例えば、サーバ装置１は上記通信網４を介して中間伝送装置２から送信されてくる要求情報を受信し、この要求情報が指定する情報を記録媒体に格納されている情報から検索する。
【０００９】
なお、上記のような要求情報は、例えば後述する携帯端末装置３のユーザが、携帯端末装置３又は中間伝送装置２に対して所望の情報をリクエストするための操作を行うことによって発生させることができるものとされている。そして、検索して得られた情報を通信網４を介して中間伝送装置２に対して送信する。
【００１０】
また、本実施の形態では、後述するようにしてサーバ装置１から中間伝送装置２を介してアップロードした情報を携帯端末装置３によりコピー（ダウンロード）したり、中間伝送装置２を利用して携帯端末装置３に対して充電を行うのにあたり、ユーザに対して課金が行われるのであるが、この課金処理に従ってユーザから料金を徴収するために課金通信網５が設けられる。この課金通信網５は、例えば各ユーザが当該情報配信システムの利用料金を支払うために契約した金融機関などと接続される。
【００１１】
中間伝送装置２は、例えば図のような形態により携帯端末装置３が装着可能とされ、主として、サーバ装置１より送信されてきた情報を通信制御端子２０１にて受信し、この受信情報を携帯端末装置３に対して出力する機能を有する。また、本実施の形態の中間伝送装置２には、携帯端末装置３に対して充電を行うための充電回路が備えられる。
【００１２】
本実施の形態の携帯端末装置３は、中間伝送装置２に対して装着（接続）されることで、中間伝送装置２との相互通信、及び中間伝送装置２からの電力供給が可能なようにされている。そして、携帯端末装置３は、上記のようにして中間伝送装置２から出力された情報を携帯端末装置内に内蔵された所定種類の記録媒体に対して格納するようにされる。また、必要があれば携帯端末装置３に内蔵の充電池に対して中間伝送装置２から充電を行うことも可能とされる。
【００１３】
このように、本実施の形態の情報配信システムは、サーバ装置１に格納されている大量の情報の中から、携帯端末装置３のユーザがリクエストした情報を携帯端末装置３の記録媒体にコピーすることができるといういわゆるデータ・オン・デマンドを実現するシステムとされる。
【００１４】
なお、上記通信網４としては特に限定されるものではなく、例えばＩＳＤＮ(Integrated services digital network) 、ＣＡＴＶ(Cable Television,Community Antenna Television) 、通信衛星、電話回線、ワイヤレス通信等を利用することが考えられる。
また、通信網４としてはオン・デマンドを行うために双方向通信が必要であるが、例えば既存の通信衛星等を採用した場合には一方向のみの通信となるため、このような場合には、他方向には他の通信網４を用いるという２種類以上の通信網を併用してもかまわない。
また、サーバ装置１から中間伝送装置２へ通信網４を介して直接情報を送信するためにはサーバ装置１から全ての中間伝送装置２への回線の接続等のインフラに費用がかかるばかりでなく、要求情報がサーバ装置１に一極集中し、それに応じて各々の中間伝送装置にデータを送信するためサーバ装置１に負荷がかかる可能性がある。そこでサーバ装置１と中間伝送装置２の間にデータを一時記憶する代理サーバ６を設けるようにして回線長の節約を図ると共に、代理サーバ６に予め所定のデータをダウンロードしておき、代理サーバ６と中間伝送装置２とのデータ交信のみで要求情報に応じた情報をダウンロードできるようしてもよい。
【００１５】
次に、図２の斜視図を参照して中間伝送装置２、及びこの中間伝送装置２に対して接続される携帯端末装置３についてより詳細に説明する。なお、この図において図１と同一部分には同一符号を付している。
【００１６】
中間伝送装置２は、例えば各駅にある売店、コンビニエンスストア、公衆電話、各家庭等に配され、この場合には、本体の前面部において、その動作に応じて適宜所要の内容について表示を行う表示部２０２と、例えば所望の情報の選択その他の所要の操作を行うためのキー操作部２０３等が設けられている。
また、本体上面部に設けられた通信制御端子２０１は、図１でも説明したように、サーバ装置１と通信網４を介してサーバ装置と相互通信を行うための制御端子として設けられる。
【００１７】
中間伝送装置２には、携帯端末装置３を装着するための端末装着部２０４が設けられている。例えばこの端末装着部２０４においては、情報入出力端子２０５と電源供給端子２０６が設けられている。端末装着部２０４に対して携帯端末装置３が装着された状態では、情報入出力端子２０５は携帯端末装置３の情報入出力端子３０６と接続され、電源供給端子２０６は携帯端末装置３の電源入力端子３０７と接続されるようになっている。
【００１８】
携帯端末装置３においては、例えば本体の前面部に表示部３０１、及びキー操作部３０２が設けられている。表示部３０１は、例えばユーザがキー操作部３０２に対して行った操作や動作に応じた所要の表示が行われる。また、この場合のキー操作部３０２としては、リクエストする情報を選択するためのセレクトキー３０３と、選択したリクエスト情報を確定するための決定キー３０４、及び動作キー３０５等が設けられる。本実施の形態の携帯端末装置３は、内部の記録媒体に格納された情報について再生を行うことが可能とされているが、上記動作キー３０５はこのような情報について再生操作を行うために設けられる。
【００１９】
また、携帯端末装置３の底面部には、情報入出力端子３０６及び電源入力端子３０７が備えられている。前述のように携帯端末装置３が中間伝送装置２に対して装着されることで、情報入出力端子３０６及び電源入力端子３０７は、それぞれ中間伝送装置２の情報入出力端子２０５及び電源供給端子２０６と接続される。これにより、携帯端末装置３と中間伝送装置２との情報の入出力が可能とされると共に、中間伝送装置２内の電源回路を利用した携帯端末装置３への電源供給（及び充電）が可能とされる。
また、携帯端末装置３の上面部にはオーディオ出力端子３０９及びマイク端子３１０が設けられると共に、側面部には外部のディスプレイ装置、キーボード、モデム、又はターミナルアダプタ等を接続可能なコネクタ３０８が設けられているが、これについては後述する。
【００２０】
なお、中間伝送装置２に設けられている表示部２０２及びキー操作部２０３は省略して中間伝送装置２が担当する機能を削減し、代わって、携帯端末装置３の表示部３０１及びキー操作部３０２により同様の操作が行えるようにしてもかまわない。
また、図２（及び図１）においては携帯端末装置３の本体部が中間伝送装置２に対して脱着可能な構成を採っているが、少なくとも中間伝送装置２側との情報入出力、電源入力が可能であればよいため、携帯端末１の底面、側面、或いは先端部等の所要の位置から小型装着部を有する電源供給線及び情報入出力線が伸長され、小型装着部を中間伝送装置に装着されるものであってもよい。
また、一つの中間伝送装置２に対して複数のユーザが各々の携帯端末装置３を有してアクセスを行う可能性が考えられるので、一つの中間伝送装置２に複数の携帯端末装置３が装着あるいは接続可能なように構成することも考えられる。
【００２１】
（１−ｂ．情報配信システムを構成する各装置の構成）
次に、図３のブロック図を参照して、本実施の形態の情報配信システムを形成する各装置（サーバ装置１、中間伝送装置２、及び携帯端末装置３）の内部構成について説明する。なお、図１及び図２と同一部分には同一符号を付している。
【００２２】
先ず、サーバ装置１から説明する。
図３に示すサーバ装置１は、制御部１０１、記憶部１０２、検索部１０３、照合処理部１０４、課金処理部１０５、インターフェイス部１０６を備えて構成されており、これら各機能回路部はバスラインＢ１を介してデータの送受信が可能なように接続されている。
制御部１０１は、例えばマイクロコンピュータ等を備えて構成され、通信網４からインターフェイス部１０６を介して供給された各種情報に応答して、サーバ装置１における各機能回路部に対する制御を実行する。
【００２３】
インターフェイス部１０６は、通信網４（この図では代理サーバ６の図示は省略している）を介して、中間伝送装置２と相互通信を行うために設けられる。なお、送信時の伝送プロトコルについては独自のプロトコルであってもよいし、又はインターネットで汎用となっているＴＣＰ／ＩＰ(Transmission control protocol/internet protocol ）等でパケット化されてデータ送信されるものであってもよい。
【００２４】
検索部１０３は、制御部１０１の制御によって、記憶部１０２に格納されているデータから所要のデータを検索する処理を実行するために設けられる。例えば、この検索処理は、例えば中間伝送装置２から送信され、通信網４からインターフェイス部１０６を介して制御部１０１に入力された要求情報に基づいて行われる。
【００２５】
記憶部１０２は、例えば大容量の記録媒体と、この記録媒体を駆動するためのドライバ装置等を備えて構成され、前述した配信用データの他、携帯端末装置３ごとに設定した端末ＩＤ、及び課金設定情報などのユーザ関連データをはじめとする所要の情報がデータベース化されて格納されている。
ここで、記憶部１０２に備えられる記録媒体としては、現在の放送用機器に用いられる磁気テープ等も考えられるが、本システムの特徴の一つであるオン・デマンド機能を実現するためには、ランダムアクセス可能なハードディスク、ＩＣメモリ、光ディスク、光磁気ディスク等を採用することが好ましい。
【００２６】
また、記憶部１０２に格納されるデータは、大量な複数のデータを記録する必要があるためデジタル圧縮されていることが望ましい。圧縮方法としてはＡＴＲＡＣ(Adaptive Transform Acoustic Coding)、ＡＴＲＡＣ２、ＴｗｉｎＶＱ(Transform domain Weighted Interleave Vector Quantization)等（商標）様々な手法が考えられるが、例えば中間伝送装置側で伸張可能な圧縮手法であるならば特に限定されるものではない。
【００２７】
照合処理部１０３は、例えば要求情報等と共に送信されてきた携帯端末装置の端末ＩＤと、本実施の形態の情報配信システムを現在利用可能な携帯端末装置の端末ＩＤ（例えば記憶部１０２にユーザ関連データとして格納されている）とについて照合を行い、その照合結果を制御部１０１に出力する。例えば制御部１０１ではその照合結果に基づいて、要求情報送信先の中間伝送装置２に対して接続されている携帯端末装置３に対して、当該情報配信システム利用の許可・不許可を設定するようにされる。
【００２８】
また、課金処理部１０５は、制御部１０１の制御によって、携帯端末装置３を所有するユーザによる情報配信システムの利用内容に応じた金額を課金するための処理を行う。例えば、通信網４を介して中間伝送装置２からサーバ装置１に対して、情報コピーや充電のための要求情報が供給されると、制御部１０１では、これに応答して必要な情報の送信供給や充電許可のためのデータを送信出力するが、制御部１０１では、これらの情報に基づいて実際の利用状況を把握した上で、所定規則に従ってその利用内容に見合った課金金額が課金処理部１０５にて設定されるように制御を行う。
【００２９】
次に、中間伝送装置２について説明する。
図３に示す中間伝送装置２においてはキー操作部２０２、表示部２０３、制御部２０７、記憶部２０８、インターフェイス部２０９、電源供給部（充電回路含む）２１０、装着判別部２１１、及びボーカル分離部２１２が、それぞれバスラインＢ２により接続されて構成されている。
【００３０】
制御部２０７は、マイクロコンピュータ等を備えて構成され、必要に応じて中間伝送装置２内部の各機能回路部の動作を制御する。
この場合、インターフェイス部２０９は、通信制御端子２０１と情報入出力端子２０５間に設けられており、通信網４を介したサーバ装置１との相互通信、及び携帯端末装置３との相互通信が可能とされる。つまり、このインターフェイス部２０９を介在するようにしてサーバ装置１と携帯端末装置３が通信可能な環境が得られることになる。
記憶部２０８は、例えばメモリなどにより構成され、サーバ装置１又は携帯端末装置３から送信された所要の情報を一時保持する。この記憶部２０８に対する書き込み及び読み出し制御は、制御部２０７により実行される。
【００３１】
ボーカル分離部２１２は、例えばサーバ装置１からアップロードされた配信情報のうち、所要のボーカル入りの楽曲情報について、ボーカルパートの情報（ボーカル情報）と、ボーカルパート以外の伴奏のパートの情報（カラオケ情報）とに分離して出力可能に構成される。なお、ボーカル分離部２１２の内部構成例については後述するため、ここでの詳しい説明は省略する。
【００３２】
電源供給部２１０は、例えばスイッチングコンバータ等を備えて構成され、図示しない商用交流電源を入力して所定電圧の直流電源を生成して、中間伝送装置２の各機能回路部に対して動作電源として供給する。また、この電源供給部２１０には、携帯端末装置３の充電池に対して充電を行うための充電回路が備えられ、電源供給端子２０６から携帯端末装置３の電源入力端子３０７を介して充電電力を供給可能に構成されている。
【００３３】
装着判別部２１１は、当該中間伝送装置２の端末装着部２０４に対する携帯端末装置３の装着／非装着の状態を判別する部位とされる。この装着判別部２１１は、例えばフォトインタラプタやメカスイッチなどの機構を備えて構成されてもよいし、例えば、電源供給端子２０６や情報入出力端子２０５などに含められて、中間伝送装置２に携帯端末装置３が適正に装着されることにより得られる所定端子の導通状態を検出するようにしてもよい。
【００３４】
キー操作部２０２は、例えば図２に示したように各種キーが設けられて構成されており、このキー操作部２０２に対して行われた操作情報はバスラインＢ２を介して制御部２０７に対して供給される。制御部２０７では供給された操作情報に応じて適宜所要の制御処理を実行する。
表示部２０３は、先に図１あるいは図２に示したようにして本体に表出するようにして設けられ、例えば液晶ディスプレイやＣＲＴ(Cathode-Ray Tube)などの表示デバイス及びその表示駆動回路等を備えて構成される。この表示部２０３の表示動作は制御部２０７により制御される。
【００３５】
続いて、携帯端末装置３について説明する。
図３に示す携帯端末装置３は、先に図２にて説明したようにして中間伝送装置２に対して装着されることにより、中間伝送装置２と、情報入出力端子２０５−３０６を介してデータの通信が可能なように接続されると共に、電源供給端子２０６−電源入力端子３０７を介して、中間伝送装置２の電源供給部２１０から電力が供給される。
【００３６】
この図に示す携帯端末装置３では、制御部３１１、ＲＯＭ３１２、ＲＡＭ３１３、信号処理回路３１４、Ｉ／Ｏポート３１７，３１９、音声認識部３２１、音声合成部３２２、キー操作部３０１及びキー操作部３０２が備えられ、これら各機能回路部がバスラインＢ３により接続されている。
この場合も、制御部３１１はマイクロコンピュータ等を備えて構成され、携帯端末装置３内の各機能回路部の動作についての制御を実行する。
また、ＲＯＭ３１２には、例えば制御部３１１が所要の制御処理を実行するのに必要なプログラムデータや、各種データベース等の情報が格納されているものとされる。ＲＯＭ３１３には、中間伝送装置２と通信すべき所要のデータや、制御部３１２の処理により発生したデータが一時保持される。
【００３７】
Ｉ／Ｏポート３１７は、情報入出力端子３０６を介して中間伝送装置２と相互通信を行うために設けられる。当該携帯端末装置３から送信する要求情報や、ダウンロードされるデータは、このＩ／Ｏポート３１７を介して入出力される。
【００３８】
この携帯端末装置３に設けられる記憶部３２０は、所定の記録媒体について記録再生を行うためのドライバ等を備えて構成されるものであり、サーバ装置１から中間伝送装置２を介してダウンロードした情報を格納するために設けられる。なお、この記憶部３２０に採用される記録媒体も特に限定されるものではないが、この場合にもランダムアクセス性を考慮すれば、ハードディスク、光ディスク、ＩＣメモリ等のランダムアクセスが可能な記録媒体を採用することが好ましい。
【００３９】
音声認識翻訳部３２１では、中間伝送装置２のボーカル分離部２１２において生成され、携帯端末装置３に伝送されたボーカル情報とカラオケ情報のうち、ボーカル情報を入力し、先ず、ボーカル情報について音声認識処理を行って、元のボーカルにより歌われている歌詞の文字情報（第１言語歌詞情報）を生成する。ここで、例えばボーカルが英語により歌っているのであれば、英語についての音声認識が行われて、第１言語歌詞情報としては英語の歌詞による文字情報が得られることになる。
続いて、音声認識翻訳部３２１では、上記のようにして生成した第１言語歌詞情報を利用して翻訳処理を行って、他の所定言語に翻訳された第２言語歌詞情報を生成する。例えば第２言語として日本語が設定されていれば、第２言語歌詞情報は日本語の歌詞による文字情報とされる。
【００４０】
音声合成部３２２では、先ず、上記第２言語歌詞情報に基づいて、翻訳処理後の第２言語の歌詞により歌われる新規ボーカル情報（オーディオデータ）を生成する。この際、元のボーカル情報を利用することで、オリジナルのボーカルの声質は損なわずに、第２言語に翻訳した歌詞により歌われる新規ボーカル情報を生成することができる。続いて、上記新規ボーカル情報と、このボーカル情報に対応するカラオケデータを合成することによって合成楽曲情報を生成する。
この合成楽曲情報は、同じ歌手がオリジナルの楽曲とは異なる言語で歌っている楽曲情報となる。
【００４１】
このように本実施の形態の情報配信システムでは、オリジナルの楽曲データから、少なくとも、カラオケ情報（オーディオデータ）、オリジナルの言語と翻訳言語による２種類の言語による歌詞情報（文字情報データ）、及び第２言語により歌われる合成楽曲情報（オーディオデータ）を派生情報として獲得することができる。そして、これらの情報はユーザが利用するコンテンツとして管理された状態で、携帯端末装置３の記憶部３２０に対して、他の通常のダウンロードデータと共に格納することが可能とされている。
なお、上記音声認識翻訳部３２１及び音声合成部３２２の内部構成例については後述する。
【００４２】
本実施の形態では、記憶部３２０に格納されたデータのうち、オーディオデータについては当該携帯端末装置３により再生出力することが可能とされている。このため、携帯端末装置３には信号処理回路３１４が設けられる。
信号処理回路３１４は、例えば記憶部３２０から読み出されたオーディオデータをバスラインＢ３を介して入力して所要の信号処理を行う。ここで、記憶部３２０に格納されているオーディオデータが所定形式に従って圧縮処理をはじめとする所定のエンコードが施されているのであれば、信号処理回路３１４では入力された圧縮オーディオデータについて伸張処理及び所定のデコード処理を施して、Ｄ／Ａコンバータ３１５に出力する。Ｄ／Ａコンバータ３１５でアナログオーディオ信号に変換されたオーディオデータは、オーディオ出力端子３０９に供給される。なお、この図ではオーディオ出力端子３０９にヘッドフォン８が接続された状態が示されている。
【００４３】
また、携帯端末装置３にはマイク端子３１０が設けられている。例えば、マイク端子３１０にマイクロフォン１２を接続して音声を吹き込んだとすると、この音声信号がＡ／Ｄコンバータ３１６を介してデジタルオーディオ信号に変換されて信号処理回路３１４に入力される。
この場合、信号処理回路３１４では入力されたデジタルオーディオ信号について、例えば圧縮処理及び記憶部３２０へのデータ書き込みに適合する所要のエンコード処理を施すように動作する。ここでエンコード処理が施されたデータは、例えば制御部３１１の制御によって記憶部３２０に対して格納することが可能とされている。あるいは、そのまま信号処理回路３１４の音声出力系からＤ／Ａコンバータ３１５を介してオーディオ出力端子３０９に出力することも可能である。
【００４４】
Ｉ／Ｏポート３１８は、コネクタ３０８を利用して外部と接続される機器や装置との入出力を可能とするために設けられる。コネクタ３０８には、例えばディスプレイ装置、キーボード、モデム、又はターミナルアダプタ等が接続可能とされるが、これについては、本実施の形態の携帯端末装置３の利用形態例として後述する。
【００４５】
また、携帯端末装置３に備えられるバッテリ回路部３１９は、少なくとも充電池を備えると共に、この充電池の電力を利用して携帯端末装置３内の各機能回路部の動作電源を供給するようにされた電源回路を備えて構成される。また、携帯端末装置３が中間伝送装置２に装着された状態では、電源供給端子２０６−電源入力端子３０７を介して、電源供給部２１０からバッテリ回路部３１９に対して、携帯端末装置３の回路のための動作電源及び充電電力が供給されるようになっている。
【００４６】
この図に示す携帯端末装置３の表示部３０１及びキー操作部３０２は、例えば図２に示したようにして本体に設けられているものであり、この携帯端末装置３においても、上記表示部３０１に対する表示制御は制御部２０７により実行される。また、制御部２０７は、上記キー操作部３０２から出力される操作情報に基づいて適宜所要の制御処理を実行することになる。
【００４７】
（１−ｃ．ボーカル分離部の構成例）
図３の中間伝送装置２に備えられるボーカル分離部２１２は、例えば図４のブロック図のようにして構成される。
図４において、ボーカルキャンセル部２１２は例えばデジタルフィルタ等を備えて構成され、入力されたボーカル入りの楽曲情報Ｄ１（オーディオデータ）からボーカルパートの成分をキャンセル（消去）して、伴奏パートだけのオーディオデータであるカラオケ情報Ｄ２を生成して出力する。ボーカルキャンセル部２１２の詳しい内部構成の説明は省略するが、例えばよく知られている、ステレオ音声のセンターに定位する音声を、（Ｌチャンネルデータ）−（Ｒチャンネルデータ）によりキャンセルする技術が用いられればよい。この際、バンドパスフィルタなどを用いてボーカル音声の帯域のみがキャンセルされて、伴奏楽器の音などは極力キャンセルされないようにすることが可能である。
【００４８】
ボーカルキャンセル部２１２ａで生成されたカラオケ情報Ｄ２は、ボーカル抽出部２１２ｂ及びデータ出力部２１２ｃに分岐して出力される。ボーカル抽出部２１２ｂでは、上記カラオケ情報Ｄ２及び楽曲情報Ｄ１を入力して、原理的に［楽曲情報Ｄ１−カラオケ情報Ｄ２＝ボーカル情報Ｄ３］の演算処理を行うことで、楽曲情報Ｄ１からボーカルパートのみのオーディオデータであるボーカル情報Ｄ３を抜き出してデータ出力部２１２ｃに対して出力する。
【００４９】
データ出力部２１２ｃでは、入力されたカラオケ情報Ｄ２及びボーカル情報Ｄ３について、例えば所定規則に従って時系列的に配列して送信用データ（Ｄ２＋Ｄ３）として出力する。この送信用データ（Ｄ２＋Ｄ３）は中間伝送装置２から携帯端末装置３に対して送信出力される。
【００５０】
（１−ｄ．音声認識翻訳部の構成例）
図５は、携帯端末装置３に備えられる音声認識翻訳部３２１の一構成例を示すブロック図である。
音響分析部３２１ａは、中間伝送装置２から送信用データ（Ｄ２＋Ｄ３）として送信されてきたカラオケ情報Ｄ２とボーカル情報Ｄ３のうち、ボーカル情報Ｄ３を入力して音響分析を行い、例えば所定の帯域ごとの音声パワーや、線形予測計数（ＬＰＣ）、ケプストラム係数などの音声の特徴パラメータ抽出をする。つまり、フィルタバンク等により音声信号を所定の帯域ごとにフィルタリングし、このフィルタリング結果を整流平滑化することで、所定の帯域ごとの音声のパワーを求めるようにしている。あるいは、入力音声データ（ボーカル情報Ｄ３）について線形予測分析処理を行うことで線形予測係数を求め、更にその線形予測係数からケプストラム係数を求めるようにされる。
上記のようにして音響分析部で求められた特徴パラメータは、直接、あるいは必要に応じてベクトル量子化されて認識処理部３２１ｂに出力される。
【００５１】
認識処理部３２１ｂは、音響分析部１３からの特徴パラメータ（あるいは、特徴パラメータをベクトル量子化して得られるシンボル）に基づき、例えばダイナミックプログラミング（ＤＰ）マッチング法や、隠れマルコフモデル（ＨＭＭ）などの音声認識アルゴリズムにしたがい、後述する大規模の単語辞書３２１ｃを参照して音声認識を行い、例えばボーカル情報Ｄ３としての音声に含まれる単語ごとに、音声認識結果として出力する。
【００５２】
単語辞書３２１ｃには、音声認識の対象とする単語（オリジナルのボーカルの言語）の標準パターン（あるいはモデルなど）が記憶されている。認識処理部３２１ｂでは、この単語辞書３２１ｃに記憶されている単語を対象として、音声認識を行う。
【００５３】
第１言語文格納部３２１ｅは、オリジナルのボーカルの言語による文章を数多く記憶している。
第２言語文格納部３２１ｆは、第１言語文格納部３２１ｅに記憶されている文章を、目的とする言語に翻訳した文章を記憶している。従って、第１言語文格納部３２１ｅに記憶されている言語の文章と、第２言語文格納部３２１ｆに記憶されている他言語の文章とは、１対１に対応している。
なお、例えば、第１言語文格納部３２１ｅには、日本語の文章とともに、その文章に対応する英語の文章が記憶されている第２言語文格納部３２１ｆのアドレスが記憶されている。これにより、第１言語文格納部３２１ｅに記憶されている日本語の文章に対応する英語の文章は、第２言語文格納部３２１ｆから即座に検索することができるようになされている。
【００５４】
音声認識の結果により得られた１以上の単語列は、翻訳処理部３２１ｄに出力される。翻訳処理部３２１ｄは、認識処理部３２１ｂから音声認識結果としての１以上の単語を入力すると、その単語の組み合わせと最も類似する文章を、第１言語文格納部３２１ｅに記憶されている言語による文章（第１言語文）の中から検索する。
【００５５】
上記検索処理は例えば次のようにして行われる。翻訳処理部３２１ｄは、音声認識の結果得られた単語（以下、認識単語ともいう）すべてを含む第１言語文を、第１言語文格納部３２１ｅから検索する。そのような文章が存在する場合、翻訳処理部３２１ｄは、その第１言語文を認識単語の組み合わせに最も類似するものとして、第１言語文格納部３２１ｅから読み出す。また、第１言語文格納部３２１ｅに記憶されている第１言語文の中に、認識単語をすべて含むものが存在しない場合、翻訳処理部３２１ｄは、そのうちのいずれか１単語を除いた単語をすべて含む第１言語文を検索する。そのような第１言語文が存在する場合、翻訳処理部３２１ｄは、その第１言語文を、認識単語の組み合わせにもっとも類似するものとして、第１言語文格納部３２１ｅから読み出す。また、そのような第１言語文が存在しない場合、翻訳処理部３２１ｄは、認識単語のうちいずれか２単語を除いた単語をすべて含む第１言語文を検索する。以下、同様にして認識単語の組み合わせに最も類似する第１言語文が検索される。
【００５６】
上記のようにして、認識単語の組み合わせに最も類似する第１言語文を検索すると、翻訳処理部３２１ｄでは、この第１言語文の文字情報を連結することによって第１言語歌詞情報として出力する。この第１言語歌詞情報は、派生情報の１コンテンツとして記憶部３２０に格納される。
また、翻訳処理部３２１ｄは、上記検索により得られた第１言語文を利用して、この第１言語文に対応する第２言語を第２言語文格納部３２１ｆから検索して対応付けを行う。そして、例えば認識言語単位でこの対応付け処理により得られた第２言語文を所定規則に従って連結していくことで、第１言語から第２言語に翻訳された歌詞の文字情報が得られる。翻訳処理部３２１ｄでは、これを第２言語歌詞情報として出力する。この第２言語歌詞情報は、第１言語歌詞情報と同様に派生情報の１コンテンツとして記憶部３２０に格納されるとともに、次に説明する音声合成処理部３２２に入力される。
【００５７】
（１−ｅ．音声合成部の構成例）
続いて、図６のブロック図は、携帯端末装置３に備えられる音声合成部３２２の構成例を示している。
音声分析部３２２ａにおいては、入力されるボーカル情報Ｄ３について所要の解析処理（波形分析処理等）を実行することで、ボーカルの声質を特徴づける所定のパラメータ（声質情報）を発生させると共に、時間軸に沿ったボーカルのピッチ情報（即ちボーカルパートのメロディー情報）を生成し、これらの情報をボーカル生成処理部３２２ｂに出力する。
音声発生部３２２ｄでは、入力された第２言語歌詞情報に基づいて、第２言語による音声合成処理を行い、この合成処理により得られた音声信号データ（第２言語による歌詞を発音した音声信号）をボーカル生成処理部３２２ｂに出力する。
【００５８】
ボーカル生成処理部３２２ｂでは、例えば音声分析部３２２ａから入力された声質情報に基づいて波形変形処理等を行うことによって、先ず、音声発生部３２２ｄから入力した音声信号データの声質を、ボーカル情報Ｄ３のボーカルと同等の声質となるように処理を行う。つまり、ボーカル情報Ｄ３のボーカルの声質を有しながら第２言語により歌詞を発音する音声信号データ（第２言語発音データ）を生成する。
続いて、ボーカル生成処理部３２２ｂは、上記第２言語発音データに対して、音声分析部３２２ａから入力したピッチ情報に基づいて、音階（メロディー）を与えていく処理を行う。この処理に際しては、例えば、メロディーの区切りと歌詞との区切りの一致が図られるように、音声発生部３２２ｄから出力される音声信号データと、ピッチ情報とに対して、これより以前のある処理段階においてタイムコードを付加するようにすることが考えられる。つまり、このタイムコードに従って、第２言語発音データを適宜区切っていきながら、ピッチ情報に基づく音階を与えていくことになる。
このようにして生成された音声信号データは、オリジナルの楽曲の歌手と同一の声質及び同一のメロディーでもって、翻訳後の第２言語の歌詞により歌われているボーカル情報となる。このボーカル情報が、新規ボーカル情報Ｄ４として合成部３２２ｃに入力される。
【００５９】
合成部３２２ｃでは、入力されたカラオケ情報と上記新規ボーカル情報Ｄ４を合成することによって合成楽曲情報Ｄ５を生成して出力する。合成楽曲情報Ｄ５は、聴感上では、オリジナルの楽曲に対して翻訳後の第２言語の歌詞により歌われている点が異なり、伴奏のパートやボーカルパートの歌手の声質はオリジナルの楽曲と同様とされる。
【００６０】
（１−ｆ．基本的なダウンロード動作及びダウンロード情報の利用例）
先ず、上記のようにして構成される本実施の形態の情報配信システムにおける携帯端末装置３に対するデータのダウンロードの基本的な動作について、再度図１〜図３を参照して説明する。
【００６１】
本実施の形態の場合、ユーザが所有する携帯端末装置３に対して所望の情報（例えば楽曲のオーディオデータであれば楽曲単位のデータをいうことになる）をダウンロードするのにあたり、このダウンロードすべき情報をユーザが選択する事が必要とされるが、ダウンロード情報について選択設定を行う方法としては、次のような方法が考えられる。
【００６２】
第１は、携帯端末装置３に備えられたキー操作部３０２の所定のキー（図１、図２参照）をユーザが操作して行う方法である。この場合には、例えば携帯端末装置３内の記憶部３２０に対して、当該情報配信システムによりダウンロード可能な情報がデータベース化されたメニュー情報が格納されているものとされる。このようなメニュー情報は、例えば以前に当該情報配信システムを利用して何らかの情報をダウンロードしたときに共に得られるようにされればよい。
携帯端末装置３のユーザは、例えば上記メニュー情報に基づいて得られる情報選択用のメニュー画面を表示部３０１に対して表示させ、この表示内容を見ながらセレクトキー３０３を操作して所望の情報を選択し、決定キー３０４により選択した情報を確定するようにされる。
なお、上記セレクトキー及び決定キーとしてジョグダイヤルを用い、ジョグの回転を選択操作とし、ジョグの押圧により決定を行うという操作形態を採れば、情報選択時の操作体系をより簡単にすることができる。
そして、上記のような選択設定操作が携帯端末装置３を中間伝送装置２に対して装着している状態で行われているのであれば、選択設定操作に応じた要求情報が中間伝送装置２（インターフェイス部２０９）から通信網４を介してサーバ装置１に供給されることになる。
【００６３】
また、上記のような選択設定操作により得られた設定情報が、携帯端末装置３内のＲＡＭ３１３（図３参照）に対して保持されるように構成すれば、携帯端末装置３を中間伝送装置２に装着しない状態（即ち、身近に中間伝送装置２が無いような環境）のもとでも、ユーザは、予め任意の機会で情報を選択する操作を行って、この操作により発生した要求情報を携帯端末装置３に保持させておくことが可能になる。
この場合には、例えばユーザが携帯端末装置３を中間伝送装置２に装着したときに、ＲＡＭ３１３に保持されているダウンロード情報に関する設定情報が、要求情報として中間伝送装置２（インターフェイス部２０９）から通信網４を介してサーバ装置１に伝送されることになる。
【００６４】
また、これまでの説明は、携帯端末装置３に備えられるキー操作部３０２により情報の選択設定操作を行うものであったが、中間伝送装置２に対してキー操作部２０２が備えられているのであれば、例えば携帯端末装置３が中間伝送装置２に装着された状態で、中間伝送装置２のキー操作部２０２により同様の操作が可能なように構成してもかまわない。
【００６５】
上記した何れの方法により選択設定操作を行ったとしても、携帯端末装置３を中間伝送装置２に対して装着することにより、選択設定操作に応じた要求情報が携帯端末装置３にて発生され、この要求情報が中間伝送装置２を介してサーバ装置１に対してアップロードされることになる。なお、このアップロード動作は、中間伝送装置２の装着判別部２１１における検出情報を開始トリガとするようにしてもよい。また、上記要求情報をサーバ装置に対して送信するときには、これとともに携帯端末装置３が保持している端末ＩＤの情報も送信するようにされる。
【００６６】
そして、このようなデータ送信が終了したことが確認されると、サーバ装置１では、先ず、照合処理部１０４において要求情報と共に送信された端末ＩＤについて照合を行う。
ここで、照合結果として端末ＩＤが当該情報配信システムを利用可能であることが判別されれば、記憶部１０２に格納されている情報のうちから、送信された要求情報に対応する情報を検索する処理を実行する。
この検索処理は、制御部１０１が検索部１０３を制御することにより、例えば、要求情報に含まれる識別コードと、記憶部１０２に格納されている情報ごとに与えられた識別コードとを照合していくことにより実行されればよい。このようにして、要求情報に対応する情報が検索されることにより、サーバ装置１において配信すべき情報の決定が行われたことになる。
【００６７】
なお、上述の端末ＩＤの照合処理時において、端末ＩＤが未登録であったり、残金が足りない等の理由で、送信された端末ＩＤが情報配信システムを現在利用不可であるとの判断結果が得られたときには、この内容を示すエラー情報を中間伝送装置２に送信するようにしてもよい。これにより、中間伝送装置２、あるいは携帯端末装置３に備えられる表示部（２０３、３０１）においてその警告を表示したり、あるいはスピーカなどの音声出力手段を設けて、警告音を出力させるような構成をとることが可能になる。
【００６８】
サーバ装置１では、上述のように要求情報に応じて記憶部１０２から検索した情報を中間伝送装置２に対して送信する。中間伝送装置２に装着された携帯端末装置３は、中間伝送装置２にて受信した情報を、情報入出力端子２０５−３０６を介して取り込んで内部の記憶部３２０にコピー（ダウンロード）する。
【００６９】
また、本実施の形態では、携帯端末装置３に情報のダウンロードが行われている間に、中間伝送装置２から携帯端末装置３の充電池に対して自動的に充電が行われるものとされる。
また、例えば携帯端末装置３のユーザの要望として、情報のダウンロードは必要ないが、中間伝送装置２を充電だけのために利用したいというようなことも当然考えられるので、所定の操作を行うことで、中間伝送装置２に対して充電のみを行うことができるようにもされている。
【００７０】
例えば、上述のようにして、携帯端末装置３に対して情報のダウンロードが終了すると、中間伝送装置２の表示部２０２あるいは携帯端末装置３の表示部２０２等に対して、情報のダウンロードの終了が完了したことを告げるメッセージ等が表示される。
そして、携帯端末装置３のユーザがこの表示を確認して、携帯端末装置１を中間伝送装置２から外した後は、携帯端末装置３はダウンロードにより記憶部３０６に格納したデータを再生するための再生装置として機能する。つまり、ユーザは、携帯端末装置３さえ所持していれば、特に場所や時間を問わず携帯端末装置３に格納した情報を再生して表示したり、あるいは音声として出力させることができる。この際、ユーザは携帯端末装置３に備えられている動作キー３０５により、その再生動作を任意に操作することが可能とされている。この動作キー３０５としては、例えば早送り、再生、巻戻し、停止、一時停止キーなどが備えられているものとされる。
【００７１】
例えば、オーディオデータを再生して視聴したい場合には、図７に示すように携帯端末装置３のオーディオ出力端子３０８にヘッドフォン８或いはアクティブスピーカＳＰ等を接続することにより、オーディオデータの再生音声を視聴することが可能となる。
【００７２】
また、例えば図８に示すように、マイクロフォン端子３０９に対してマイクロフォン１２を接続することにより、このマイクロフォン１２から入力した音声をＡ／Ｄコンバータ３１６→信号処理回路３１４を介することによりデータ化して、記憶部３２０に対して格納する、つまりマイク音声を録音することが可能とされる。この場合には、前述した動作キー３０５として録音キー等が設けられることになる。
さらには、例えばオーディオデータとしてカラオケを再生出力しているのであれば、マイクロフォン端子３０９に接続したマイクロフォン１２により、カラオケに合わせてユーザが歌を歌うことなどもできる。
【００７３】
また、本実施の形態の携帯端末装置３は、図８に示すように本体に備えられたコネクタ３０８に対してモニタ装置９、モデム１０（又はターミナルアダプタ）を接続可能なコネクタ３０８、キーボード１１を接続可能とされている。
例えば、携帯端末装置３自体によっても、表示部３０１によりダウンロードした画像データ等を表示出力することは可能であるが、コネクタ３０８に対してモニタ装置９を接続して、携帯端末装置３から画像データを出力すれば、より大きな画面によって画像を見ることも可能である。また、キーボード２２を接続して文字入力等を可能とすることにより、要求する情報の選択を容易にするだけでなく、より複雑なコマンド入力が可能となる。
また、モデム（ターミナルアダプタ）１０を接続すれば、中間伝送装置２を利用することなく、サーバ装置１と直接データの送受を可能とすることができる。また、ＲＯＭ３１２に保持させるプログラム等によっては、通信網４を介して他のコンピュータ或いは携帯端末装置３と通信可能に構成することが可能であり、これにより、ユーザ同士のデータ交換なども容易に行うことができる。また、これらの代わりに無線接続コントローラを用いれば、例えば中間伝送装置２と携帯端末装置３とを無線接続することも容易に可能となる。
【００７４】
＜２．派生情報のダウンロード＞
これまで説明してきた、本実施の形態の情報配信システムの構成、携帯端末装置に対する情報のダウンロードの基本動作、及び利用形態例を前提として、本実施の形態の特徴となる、派生情報のダウンロードについて、図９及び図１０を参照して説明する。図９は、派生情報をダウンロードする際の中間伝送装置２及び携帯端末装置３の動作の経緯を時間軸に従って示しており、図１０は、派生情報のダウンロードの経過に従って、例えば携帯端末装置３の表示部３０１に表示される表示内容を示している。
【００７５】
また、ここでいう「派生情報」とは、これまでの説明からわかるように、ボーカル入りのオリジナル楽曲情報から得られる、カラオケ情報、第１言語歌詞情報、第２言語歌詞情報、及び同じ歌手が第２言語により歌う合成楽曲情報とされる。
なお、派生情報のダウンロードに伴う情報配信システムを構成する各装置（サーバ装置１、中間伝送装置２、及び携帯端末装置３）の動作の詳細であるが、ダウンロード時の基本的な動作は図３により説明し、派生情報生成のための動作は、図４、図５及び図６により既に説明したことから、以降において、システムの動作についての詳しい説明は若干の補足を除いて省略し、主として、時間経過に従った動作の状態遷移について説明を行っていくこととする。
【００７６】
図９には、派生情報のダウンロードに際しての中間伝送装置２及び携帯端末装置３の動作例が示されている。ここで、図の○内の英数字は、中間伝送装置２及び携帯端末装置３の時間経過に従った動作順を示しており、以降の説明はこの動作順に従って行うこととする。
【００７７】
動作１： ここでは、先に利用形態として説明した操作方法として、携帯端末装置３のキー操作部３０２を操作することにより、ユーザが所望する「楽曲情報の派生情報」を要求するための選択設定操作が行われるものとされる。なお、利用形態として前述したように、中間伝送装置２に設けられたキー操作部２０３により同様の選択設定操作が行われるようにされてもかまわない。
【００７８】
動作２： 携帯端末装置３は、上記動作１として得られた操作情報に従った要求情報、つまり、指定の楽曲情報の派生情報を要求することを示す要求情報を送信出力する。
【００７９】
動作３： 携帯端末装置３から要求情報が送信出力され場合、これまでの説明からわかるように、この要求情報を中間伝送装置２にて受信し、さらに中間伝送装置２から通信網４を介してサーバ装置１に対して送信する。
図９には示していないが、サーバ装置１では、受信入力した要求情報に対応する楽曲情報を記憶部１０２から検索し、検索した楽曲情報を記憶部１０２から読み出して中間伝送装置２に対して送信する。なお、要求情報が派生情報とされる場合であっても、サーバ装置１から配信される楽曲情報はオリジナルの楽曲情報であり、この段階では派生情報は発生していない。図９では、ここまでの段階を動作３とする。
【００８０】
動作４： 中間伝送装置２では、サーバ装置１から送信されてきた楽曲情報を受信して、例えば一旦、記憶部２０８に格納して保持する。即ち、楽曲情報のダウンロードを行う。
動作５： 中間伝送装置２では、上記動作４として記憶部２０８に格納した楽曲情報を読み出してボーカル分離部２１２に入力する。ボーカル分離部２１２では、図４にて説明したようにして、上記楽曲情報Ｄ１についてカラオケ情報Ｄ２とボーカル情報Ｄ３に分離する。
動作６： 上記ボーカル分離部２１２では、例えば、図４により説明したように、最終段のデータ出力部２１２ｃにおいて、カラオケ情報Ｄ２とボーカル情報Ｄ３を送信情報（Ｄ２＋Ｄ３）として出力するようにされる。そして、動作６として、中間伝送装置２は送信情報（Ｄ２＋Ｄ３）を、携帯端末装置３に対して送信する処理を行う。
【００８１】
このように本実施の形態において、中間伝送装置２により派生情報を得るための動作としては、ボーカル分離部２１２での信号処理によってカラオケ情報Ｄ２とボーカル情報Ｄ３を生成する処理のみを行うようにされる。つまり、以降において生成される各種派生情報は、受信入力したカラオケ情報Ｄ２とボーカル情報Ｄ３（送信情報（Ｄ２＋Ｄ３））に基づいて、全て携帯端末装置３側において生成するようにされる。
即ち、本実施の形態では、ユーザにとってのコンテンツとなる各種派生情報を得るのにあたり、中間伝送装置２と携帯端末装置３間でその役割が分担されるように構成されるものである。これにより、例えば各種派生情報を得るのに中間伝送装置２あるいは携帯端末装置３の何れかにおいてのみ、その役割を与えるように構成した場合と比較して、中間伝送装置２と携帯端末装置３間の処理負担を軽減することが可能となる。
【００８２】
動作７： 携帯端末装置３は、上記動作６により中間伝送装置２から送信された送信情報（Ｄ２＋Ｄ３）を受信入力することになる。
動作８： そして、携帯端末装置３においては、受信入力した送信情報（Ｄ２＋Ｄ３）から、カラオケ情報Ｄ２とボーカル情報Ｄ３をそれぞれ独立に得て、先ず、カラオケ情報Ｄ２については、記憶部３２０に対して格納する。
これにより、携帯端末装置３にとっては、派生情報のコンテンツとして最初にカラオケ情報Ｄ２を獲得したことになるため、携帯端末装置３では、続いて図１０（ａ）に示すように表示部３０１に対してカラオケボタンＢ１を表示させる。このようなボタン表示は、携帯端末装置３において新しい派生情報が得られるごとに逐次表示されるものであり、派生情報のダウンロードの経過をユーザに示すものである。
また、各ボタン表示はユーザが所望のコンテンツを選択して再生するための操作用のインターフェイス画像として利用される。これは、後述する図１０（ｂ）〜図１０（ｄ）に追加表示される各ボタン表示についても同様である。
また、ボーカル情報Ｄ３は、音声認識翻訳部３２１に入力される。
【００８３】
動作９： 音声認識翻訳部３２１は、先ず、入力されたボーカル情報Ｄ３について図５にて説明したようにして音声認識を行うことで、派生情報として第１言語歌詞情報（文字情報）を生成する。ここでは、第１言語、つまり楽曲情報のボーカル言語として例えば英語が規定されているものとする。従って、ここで生成される第１言語歌詞情報としては、英語歌詞情報となる。
音声認識翻訳部３２１で生成された英語歌詞情報は、記憶部３２０に対して格納される。これにより、携帯端末装置３では２番目の派生情報を獲得したことになるため、図１０（ｂ）に示すように、表示部３０１に対してカラオケボタンＢ１に追加して英語歌詞がコンテンツ化されたことを示す英語歌詞ボタンＢ２の表示を行うようにされる。
【００８４】
動作１０： 音声認識翻訳部３２１では、動作９により生成した第１言語歌詞情報（英語歌詞情報）について翻訳を行って第２言語歌詞情報を生成する。ここでは、第２言語として日本語が設定されているものとする。このため、実際に作成される第２言語歌詞情報としては、英語による歌詞を日本語に翻訳した歌詞情報（日本語歌詞情報）となる。
そして、携帯端末装置３ではこの日本語歌詞情報を３番目に獲得すべき派生情報として記憶部３２０に格納する。そして、図１０（ｃ）に示すように表示部３０１に対して日本語歌詞がコンテンツ化されたことを示す日本語歌詞ボタンＢ３を表示させる。
【００８５】
動作１１： 続いて携帯端末装置３では、音声合成部３２２による信号処理により、合成楽曲情報Ｄ５を生成する。この合成楽曲情報Ｄ５は、たとえば図６にて説明したように、カラオケ情報Ｄ２、ボーカル情報Ｄ３、及び上記動作１０により生成された第２言語歌詞情報（この場合は日本語歌詞情報）を利用して生成される。ここでは、第１言語が英語、第２言語が日本語とされていることから、合成楽曲情報Ｄ５としては、英詩により歌われるオリジナルの楽曲を、同一の歌手が日本語の歌詞に訳して歌っている楽曲の情報となる。
そして、この合成楽曲情報Ｄ５を最後に獲得すべき派生情報として記憶部３２０に格納し、表示部３０１に対して図１０（ｄ）に示すように合成楽曲がコンテンツ化されたことを示す合成楽曲ボタンＢ４を表示させる。
この段階では、派生情報として獲得可能とされる４種類の全てのコンテンツが表示部３０１にボタン表示されて、派生情報のダウンロードが全て完了したことを示すことになる（なお、別途、ダウンロードの完了を示すメッセージ等が表示されてもよい）。また、実際に、これら全ての派生情報が携帯端末装置３の記憶部３２０に対して格納済みの状態にある。
そして、上記のようにして携帯端末装置３にダウンロードした派生情報は、例えば、先に図７及び図８により説明したようにして外部に出力して利用することができる。
【００８６】
なお、実際の使用形態に際しては、細部は適宜変更されてかまわない。例えば、図９による説明では、楽曲情報のダウンロードから派生情報の獲得までが時間的にほぼ連続する一連の動作として扱われていたが、例えば、携帯端末装置３の記憶部３２０に対して少なくとも送信情報（カラオケ情報Ｄ２＋ボーカル情報Ｄ３）を格納しておき、携帯端末装置３を中間伝送装置２から外した後の任意の機会に、所定の操作によって携帯端末装置３においてカラオケ情報Ｄ２以外の残る３つの派生情報のコンテンツを作成して獲得するように構成することも考えられる。
【００８７】
また、図９による説明では、オリジナルの英語歌詞を日本語に翻訳して最終的に合成楽曲情報を得るものとして説明したが、特にオリジナル言語（第１言語）及び翻訳言語（第２言語）としての言語は限定されるものではない。さらには、複数言語のオリジナル言語に対応可能とすると共に、翻訳言語をユーザの指定操作などによって複数言語から選択指定するように構成することも可能とされる。この場合には、音声認識翻訳部３２１において、対応する言語種類に応じて、単語辞書３２１ｃや、第１言語格納部３２１ｅ及び第２言語格納部３２１ｆに格納される言語種類数が増設されることになる。
【００８８】
また、図９による派生情報のダウンロード動作としては、オリジナルの楽曲情報は携帯端末装置３にて得られるコンテンツとしては除外されていたが、中間伝送装置２から携帯端末装置３にカラオケ情報Ｄ２とボーカル情報Ｄ３による送信情報（Ｄ２＋Ｄ３）を送信する際に、共にオリジナルの楽曲情報Ｄ１を送信し、携帯端末装置３の記憶部３２０に対して格納するように構成することも考えられる。
【００８９】
更に、図９による説明では、楽曲に関する派生情報を要求すると自動的に４種類の全ての派生情報が獲得されるものとして説明したが、例えばユーザの選択設定操作に従って、４種類の派生情報のコンテンツのうちから一部のコンテンツのみを得るようにすることも可能である。
さらには、例えば４種類の全ての派生情報のうち、所定の一部の派生情報のみを提供可能な簡易な構成による情報配信システムを構築することも可能であり、例えば、派生情報としてカラオケ情報のみを提供するのであれば、ボーカル分離部２１２におけるボーカルキャンセル部２１２ｃに相当する機能回路部が、情報配信システムを構成する装置の何れか１つに設けられるように構成すればよいことになる。
【００９０】
また、本実施の形態では、派生情報を生成するための機能回路部として、ボーカル分離部２１２のみを中間伝送装置２に設け、残る音声認識翻訳部３２１及び音声合成部３２２は携帯端末装置３に設けるようにしているが、これに限定されるものではなく、これら各機能回路部を当該情報配信システムを構成する各装置（サーバ装置１、中間伝送装置２、携帯端末装置３）に対してどのように振り分けて設けるのかについては、実際の適用条件等により変更されてかまわない。
【００９１】
【発明の効果】
以上説明したように本発明は、情報配信システムにおいて、サーバ装置から配信したオリジナルの楽曲情報を利用して、その楽曲のカラオケ情報、オリジナルの言語によるボーカルの歌詞情報、他の言語に翻訳されたボーカルの歌詞情報、及び翻訳言語の歌詞によりオリジナルと同一のボーカルにより歌われる合成楽曲情報の各々が生成され、これら各情報を携帯端末装置においてダウンロード情報として獲得することが可能となる。これにより、オリジナルの楽曲情報だけでなく、これを利用して生成した派生情報を携帯端末装置のコンテンツとすることができるため、情報配信システムとしての利用価値がより高まることになる。
この際、派生情報を生成するための各種機能回路部を、情報配信システムを構成する各装置に適宜振り分けるようにして設けることで、ある１つの装置における動作負担が重くなるのを避けることができる。
【００９２】
更に、派生情報を獲得するためのダウンロードを行っている際に、順次獲得されていく派生情報の種類に対応する表示を行うことで、たとえばユーザは派生情報のダウンロードの動作の経過を把握することが可能になるとともに、この表示を、各派生情報を呼び出して再生するための操作用インターフェイスとして機能させることで、携帯端末装置のユーザの使い勝手が更に向上されることになる。
【図面の簡単な説明】
【図１】本発明の実施の形態としての情報配信システムの構成例を概念的に示す説明図である。
【図２】中間伝送装置及び携帯端末装置の外観例を示す斜視図である。
【図３】本実施の形態の情報配信システムを形成する各装置の内部構成を示すブロック図である。
【図４】ボーカル分離部の内部構成例を示すブロック図である。
【図５】音声認識翻訳部の内部構成例を示すブロック図である。
【図６】音声合成部の内部構成例を示すブロック図である。
【図７】携帯端末装置の利用形態例を示す斜視図である。
【図８】携帯端末装置の利用形態例を示す斜視図である。
【図９】派生情報のダウンロード動作の経緯を示す説明図である。
【図１０】派生情報のダウンロードに伴う携帯端末装置の表示部の表示形態例を示す説明図である。
【符号の説明】
１ サーバ装置、２ 中間伝送装置、３ 携帯端末装置、４ 通信網、５ 課金通信網、６ 代理サーバ、８ ヘッドフォン、９ モニタ装置、１０ モデム、１１ キーボード、１２ マイクロフォン、１０１ 制御部、１０２ 記憶部、１０３ 検索部、１０４ 照合処理部、１０５ 課金処理部、１０６ インターフェイス部、Ｂ１ バスライン、２０１ 通信制御端子、２０２ キー操作部、２０３ 表示部、２０４ 端末装着部、２０５ 情報入出力端子、２０６ 電源供給端子、２０７ 制御部、２０８ 記憶部、２０９ インターフェイス部、２１０ 電源供給部、２１１ 装着判別部、２１２ ボーカル分離部、Ｂ２ バスライン、３０１ 表示部、３０２ キー操作部、３０３ セレクトキー、３０４ 決定キー、３０５ 動作キー、３０６ 情報入出力端子、３０７ 電源入力端子、３０８ コネクタ、３０９ オーディオ出力端子、３１０ マイクロフォン端子、３１１ 制御部、３１２ ＲＯＭ、３１３ ＲＡＭ、３１４ 信号処理回路、３１５ Ｄ／Ａコンバータ、３１６ Ａ／Ｄコンバータ、３１７，３１８Ｉ／Ｏポート、３１９ バッテリ回路部、３２０ 記憶部、３２１ 音声認識翻訳部、３２２ 音声合成部、Ｂ３ バスライン
【発明の属する技術分野】
本発明は、例えば情報が蓄積される情報格納装置から情報伝送装置に情報を配信し、更に情報伝送装置にて受信した情報を出力することで、端末装置においてその情報をコピーすることができるようにした情報配信システム、及びこのような情報配信システムに備えられて、所要の情報処理を行う情報処理装置に関するものである。
【０００２】
【従来の技術】
先に本出願人により、例えばサーバに大量の楽曲データ（オーディオデータ）や映像データ等の情報をデータベースとして格納しておくと共に、この大量の情報のうちから必要とされる情報を多数の中間サーバ装置に配信することにより、この中間サーバ装置から、ユーザが個人で所有する携帯端末装置に対して指定の情報をコピー（ダウンロード）できるようにした情報配信システムが提案されている。
【０００３】
【発明が解決しようとする課題】
例えば上記のような情報配信システムにおいて、楽曲データを携帯端末装置にダウンロードする場合のサービスの形態について考えてみた場合、一般的には、楽曲単位もしくはアルバム単位の複数楽曲のオーディオ信号をデジタル情報化し、このデジタル情報化された楽曲をサーバ装置から中間サーバ装置を介して携帯端末装置に伝送することになる。
このようにデジタル情報化された情報を送信するのであれば、単にデジタル情報化された楽曲情報だけでなく、例えば情報配信システム内において、例えばある楽曲のデジタルデータを素材として扱って所要の情報処理を施すことにより、１つの楽曲情報から付随して生成される二次的な各種派生情報を、携帯端末装置のユーザに対して提供することは可能である。このような派生情報をユーザに提供できるようにすれば、情報配信システムとしての利用価値はより高められることになる。
【０００４】
【課題を解決するための手段】
本発明は上記したような課題を考慮して、第１のオーディオ情報を、上記第１のオーディオ情報よりボーカル部を抽出したボーカル情報と、上記第１のオーディオ情報よりボーカル部を取り除いた伴奏情報とに分離する楽曲情報分離手段と、上記ボーカル情報について第１の言語における音声認識を行って第１の言語文字情報を生成する音声認識手段と、上記第１の言語文字情報について第２の言語への翻訳処理を行って第２の言語文字情報を生成する翻訳手段と、上記第２の言語文字情報を利用して上記第２の言語により発音される翻訳ボーカル情報を生成し、この翻訳ボーカル情報と上記伴奏情報を合成することにより、第２のオーディオ情報を生成する情報合成手段とを備えて情報処理装置を構成することとした。
【０００５】
また、第１のオーディオ情報を選択して出力可能に構成された情報送信装置と、上記情報送信装置と通信可能とされることにより、上記情報送信装置から出力された上記第１のオーディオ情報を受信する受信動作とが可能とされると共に、情報出力動作として、少なくとも上記第１のオーディオ情報に基づいて獲得した情報を外部に対して送信出力可能とされる情報伝送装置と、情報記憶手段が備えられると共に、上記情報伝送装置と通信可能とされることで、情報記憶動作として、少なくとも上記情報伝送装置から送信出力された情報を上記情報記憶手段に対して記憶可能とされる端末装置とを備えて当該情報配信システムを構成することとした。
そして、この情報配信システムにおいて備えられる情報処理系として、上記情報送信装置から出力された第１のオーディオ情報について、ボーカル情報と伴奏情報とに分離する楽曲情報分離手段と、上記ボーカル情報について音声認識を行って第１の言語文字情報を生成する音声認識手段と、上記第１の言語文字情報について翻訳処理を行って第２の言語文字情報を生成する翻訳手段と、上記第２の言語文字情報を利用して翻訳言語により発音される翻訳ボーカル情報を生成し、この翻訳ボーカル情報と上記伴奏情報を合成することにより、第２のオーディオ情報を生成する情報合成手段とを備えることした。
【０００６】
上記した構成によれば、情報配信システムにおいて例えばボーカル入りの楽曲情報について情報処理を施して得られる派生情報として、カラオケの楽曲情報、ボーカルの歌詞情報（音声認識処理により得られる一次言語文字情報）、他の言語に翻訳されたボーカルの歌詞情報（元の歌詞情報に対して行った翻訳処理により得られる二次言語文字情報）、及び音声合成処理により生成した翻訳言語で歌うボーカルによる楽曲情報（合成楽曲情報）の各々が生成され、これら各情報を携帯端末装置にダウンロードすることが可能となる。
【０００７】
【発明の実施の形態】
以下、本発明の実施の形態について図１〜図１０を参照して説明する。
なお、以降の説明は次の順序により行うこととする。
＜１．情報配信システムの構成例＞
（１−ａ．情報配信システムの概要＞
（１−ｂ．情報配信システムを構成する各装置の構成）
（１−ｃ．ボーカル分離部の構成例）
（１−ｄ．音声認識翻訳部の構成例）
（１−ｅ．音声合成部の構成例）
（１−ｆ．基本的なダウンロード動作及びダウンロード情報の利用例）
＜２．派生情報のダウンロード＞
【０００８】
＜１．情報配信システムの構成例＞
（１−ａ．情報配信システムの概要＞
図１は、本発明の実施の形態としての情報配信システムの構成を概略的に示している。
この図において、サーバ装置１は、後述するようにして配信用データ（例えば、オーディオ情報、テキスト情報、画像情報、映像情報等）をはじめとする所要の情報が格納される大容量の記録媒体を備えており、少なくとも通信網４を介して多数の中間伝送装置２と相互通信可能に構成されている。例えば、サーバ装置１は上記通信網４を介して中間伝送装置２から送信されてくる要求情報を受信し、この要求情報が指定する情報を記録媒体に格納されている情報から検索する。
【０００９】
なお、上記のような要求情報は、例えば後述する携帯端末装置３のユーザが、携帯端末装置３又は中間伝送装置２に対して所望の情報をリクエストするための操作を行うことによって発生させることができるものとされている。そして、検索して得られた情報を通信網４を介して中間伝送装置２に対して送信する。
【００１０】
また、本実施の形態では、後述するようにしてサーバ装置１から中間伝送装置２を介してアップロードした情報を携帯端末装置３によりコピー（ダウンロード）したり、中間伝送装置２を利用して携帯端末装置３に対して充電を行うのにあたり、ユーザに対して課金が行われるのであるが、この課金処理に従ってユーザから料金を徴収するために課金通信網５が設けられる。この課金通信網５は、例えば各ユーザが当該情報配信システムの利用料金を支払うために契約した金融機関などと接続される。
【００１１】
中間伝送装置２は、例えば図のような形態により携帯端末装置３が装着可能とされ、主として、サーバ装置１より送信されてきた情報を通信制御端子２０１にて受信し、この受信情報を携帯端末装置３に対して出力する機能を有する。また、本実施の形態の中間伝送装置２には、携帯端末装置３に対して充電を行うための充電回路が備えられる。
【００１２】
本実施の形態の携帯端末装置３は、中間伝送装置２に対して装着（接続）されることで、中間伝送装置２との相互通信、及び中間伝送装置２からの電力供給が可能なようにされている。そして、携帯端末装置３は、上記のようにして中間伝送装置２から出力された情報を携帯端末装置内に内蔵された所定種類の記録媒体に対して格納するようにされる。また、必要があれば携帯端末装置３に内蔵の充電池に対して中間伝送装置２から充電を行うことも可能とされる。
【００１３】
このように、本実施の形態の情報配信システムは、サーバ装置１に格納されている大量の情報の中から、携帯端末装置３のユーザがリクエストした情報を携帯端末装置３の記録媒体にコピーすることができるといういわゆるデータ・オン・デマンドを実現するシステムとされる。
【００１４】
なお、上記通信網４としては特に限定されるものではなく、例えばＩＳＤＮ(Integrated services digital network) 、ＣＡＴＶ(Cable Television,Community Antenna Television) 、通信衛星、電話回線、ワイヤレス通信等を利用することが考えられる。
また、通信網４としてはオン・デマンドを行うために双方向通信が必要であるが、例えば既存の通信衛星等を採用した場合には一方向のみの通信となるため、このような場合には、他方向には他の通信網４を用いるという２種類以上の通信網を併用してもかまわない。
また、サーバ装置１から中間伝送装置２へ通信網４を介して直接情報を送信するためにはサーバ装置１から全ての中間伝送装置２への回線の接続等のインフラに費用がかかるばかりでなく、要求情報がサーバ装置１に一極集中し、それに応じて各々の中間伝送装置にデータを送信するためサーバ装置１に負荷がかかる可能性がある。そこでサーバ装置１と中間伝送装置２の間にデータを一時記憶する代理サーバ６を設けるようにして回線長の節約を図ると共に、代理サーバ６に予め所定のデータをダウンロードしておき、代理サーバ６と中間伝送装置２とのデータ交信のみで要求情報に応じた情報をダウンロードできるようしてもよい。
【００１５】
次に、図２の斜視図を参照して中間伝送装置２、及びこの中間伝送装置２に対して接続される携帯端末装置３についてより詳細に説明する。なお、この図において図１と同一部分には同一符号を付している。
【００１６】
中間伝送装置２は、例えば各駅にある売店、コンビニエンスストア、公衆電話、各家庭等に配され、この場合には、本体の前面部において、その動作に応じて適宜所要の内容について表示を行う表示部２０２と、例えば所望の情報の選択その他の所要の操作を行うためのキー操作部２０３等が設けられている。
また、本体上面部に設けられた通信制御端子２０１は、図１でも説明したように、サーバ装置１と通信網４を介してサーバ装置と相互通信を行うための制御端子として設けられる。
【００１７】
中間伝送装置２には、携帯端末装置３を装着するための端末装着部２０４が設けられている。例えばこの端末装着部２０４においては、情報入出力端子２０５と電源供給端子２０６が設けられている。端末装着部２０４に対して携帯端末装置３が装着された状態では、情報入出力端子２０５は携帯端末装置３の情報入出力端子３０６と接続され、電源供給端子２０６は携帯端末装置３の電源入力端子３０７と接続されるようになっている。
【００１８】
携帯端末装置３においては、例えば本体の前面部に表示部３０１、及びキー操作部３０２が設けられている。表示部３０１は、例えばユーザがキー操作部３０２に対して行った操作や動作に応じた所要の表示が行われる。また、この場合のキー操作部３０２としては、リクエストする情報を選択するためのセレクトキー３０３と、選択したリクエスト情報を確定するための決定キー３０４、及び動作キー３０５等が設けられる。本実施の形態の携帯端末装置３は、内部の記録媒体に格納された情報について再生を行うことが可能とされているが、上記動作キー３０５はこのような情報について再生操作を行うために設けられる。
【００１９】
また、携帯端末装置３の底面部には、情報入出力端子３０６及び電源入力端子３０７が備えられている。前述のように携帯端末装置３が中間伝送装置２に対して装着されることで、情報入出力端子３０６及び電源入力端子３０７は、それぞれ中間伝送装置２の情報入出力端子２０５及び電源供給端子２０６と接続される。これにより、携帯端末装置３と中間伝送装置２との情報の入出力が可能とされると共に、中間伝送装置２内の電源回路を利用した携帯端末装置３への電源供給（及び充電）が可能とされる。
また、携帯端末装置３の上面部にはオーディオ出力端子３０９及びマイク端子３１０が設けられると共に、側面部には外部のディスプレイ装置、キーボード、モデム、又はターミナルアダプタ等を接続可能なコネクタ３０８が設けられているが、これについては後述する。
【００２０】
なお、中間伝送装置２に設けられている表示部２０２及びキー操作部２０３は省略して中間伝送装置２が担当する機能を削減し、代わって、携帯端末装置３の表示部３０１及びキー操作部３０２により同様の操作が行えるようにしてもかまわない。
また、図２（及び図１）においては携帯端末装置３の本体部が中間伝送装置２に対して脱着可能な構成を採っているが、少なくとも中間伝送装置２側との情報入出力、電源入力が可能であればよいため、携帯端末１の底面、側面、或いは先端部等の所要の位置から小型装着部を有する電源供給線及び情報入出力線が伸長され、小型装着部を中間伝送装置に装着されるものであってもよい。
また、一つの中間伝送装置２に対して複数のユーザが各々の携帯端末装置３を有してアクセスを行う可能性が考えられるので、一つの中間伝送装置２に複数の携帯端末装置３が装着あるいは接続可能なように構成することも考えられる。
【００２１】
（１−ｂ．情報配信システムを構成する各装置の構成）
次に、図３のブロック図を参照して、本実施の形態の情報配信システムを形成する各装置（サーバ装置１、中間伝送装置２、及び携帯端末装置３）の内部構成について説明する。なお、図１及び図２と同一部分には同一符号を付している。
【００２２】
先ず、サーバ装置１から説明する。
図３に示すサーバ装置１は、制御部１０１、記憶部１０２、検索部１０３、照合処理部１０４、課金処理部１０５、インターフェイス部１０６を備えて構成されており、これら各機能回路部はバスラインＢ１を介してデータの送受信が可能なように接続されている。
制御部１０１は、例えばマイクロコンピュータ等を備えて構成され、通信網４からインターフェイス部１０６を介して供給された各種情報に応答して、サーバ装置１における各機能回路部に対する制御を実行する。
【００２３】
インターフェイス部１０６は、通信網４（この図では代理サーバ６の図示は省略している）を介して、中間伝送装置２と相互通信を行うために設けられる。なお、送信時の伝送プロトコルについては独自のプロトコルであってもよいし、又はインターネットで汎用となっているＴＣＰ／ＩＰ(Transmission control protocol/internet protocol ）等でパケット化されてデータ送信されるものであってもよい。
【００２４】
検索部１０３は、制御部１０１の制御によって、記憶部１０２に格納されているデータから所要のデータを検索する処理を実行するために設けられる。例えば、この検索処理は、例えば中間伝送装置２から送信され、通信網４からインターフェイス部１０６を介して制御部１０１に入力された要求情報に基づいて行われる。
【００２５】
記憶部１０２は、例えば大容量の記録媒体と、この記録媒体を駆動するためのドライバ装置等を備えて構成され、前述した配信用データの他、携帯端末装置３ごとに設定した端末ＩＤ、及び課金設定情報などのユーザ関連データをはじめとする所要の情報がデータベース化されて格納されている。
ここで、記憶部１０２に備えられる記録媒体としては、現在の放送用機器に用いられる磁気テープ等も考えられるが、本システムの特徴の一つであるオン・デマンド機能を実現するためには、ランダムアクセス可能なハードディスク、ＩＣメモリ、光ディスク、光磁気ディスク等を採用することが好ましい。
【００２６】
また、記憶部１０２に格納されるデータは、大量な複数のデータを記録する必要があるためデジタル圧縮されていることが望ましい。圧縮方法としてはＡＴＲＡＣ(Adaptive Transform Acoustic Coding)、ＡＴＲＡＣ２、ＴｗｉｎＶＱ(Transform domain Weighted Interleave Vector Quantization)等（商標）様々な手法が考えられるが、例えば中間伝送装置側で伸張可能な圧縮手法であるならば特に限定されるものではない。
【００２７】
照合処理部１０３は、例えば要求情報等と共に送信されてきた携帯端末装置の端末ＩＤと、本実施の形態の情報配信システムを現在利用可能な携帯端末装置の端末ＩＤ（例えば記憶部１０２にユーザ関連データとして格納されている）とについて照合を行い、その照合結果を制御部１０１に出力する。例えば制御部１０１ではその照合結果に基づいて、要求情報送信先の中間伝送装置２に対して接続されている携帯端末装置３に対して、当該情報配信システム利用の許可・不許可を設定するようにされる。
【００２８】
また、課金処理部１０５は、制御部１０１の制御によって、携帯端末装置３を所有するユーザによる情報配信システムの利用内容に応じた金額を課金するための処理を行う。例えば、通信網４を介して中間伝送装置２からサーバ装置１に対して、情報コピーや充電のための要求情報が供給されると、制御部１０１では、これに応答して必要な情報の送信供給や充電許可のためのデータを送信出力するが、制御部１０１では、これらの情報に基づいて実際の利用状況を把握した上で、所定規則に従ってその利用内容に見合った課金金額が課金処理部１０５にて設定されるように制御を行う。
【００２９】
次に、中間伝送装置２について説明する。
図３に示す中間伝送装置２においてはキー操作部２０２、表示部２０３、制御部２０７、記憶部２０８、インターフェイス部２０９、電源供給部（充電回路含む）２１０、装着判別部２１１、及びボーカル分離部２１２が、それぞれバスラインＢ２により接続されて構成されている。
【００３０】
制御部２０７は、マイクロコンピュータ等を備えて構成され、必要に応じて中間伝送装置２内部の各機能回路部の動作を制御する。
この場合、インターフェイス部２０９は、通信制御端子２０１と情報入出力端子２０５間に設けられており、通信網４を介したサーバ装置１との相互通信、及び携帯端末装置３との相互通信が可能とされる。つまり、このインターフェイス部２０９を介在するようにしてサーバ装置１と携帯端末装置３が通信可能な環境が得られることになる。
記憶部２０８は、例えばメモリなどにより構成され、サーバ装置１又は携帯端末装置３から送信された所要の情報を一時保持する。この記憶部２０８に対する書き込み及び読み出し制御は、制御部２０７により実行される。
【００３１】
ボーカル分離部２１２は、例えばサーバ装置１からアップロードされた配信情報のうち、所要のボーカル入りの楽曲情報について、ボーカルパートの情報（ボーカル情報）と、ボーカルパート以外の伴奏のパートの情報（カラオケ情報）とに分離して出力可能に構成される。なお、ボーカル分離部２１２の内部構成例については後述するため、ここでの詳しい説明は省略する。
【００３２】
電源供給部２１０は、例えばスイッチングコンバータ等を備えて構成され、図示しない商用交流電源を入力して所定電圧の直流電源を生成して、中間伝送装置２の各機能回路部に対して動作電源として供給する。また、この電源供給部２１０には、携帯端末装置３の充電池に対して充電を行うための充電回路が備えられ、電源供給端子２０６から携帯端末装置３の電源入力端子３０７を介して充電電力を供給可能に構成されている。
【００３３】
装着判別部２１１は、当該中間伝送装置２の端末装着部２０４に対する携帯端末装置３の装着／非装着の状態を判別する部位とされる。この装着判別部２１１は、例えばフォトインタラプタやメカスイッチなどの機構を備えて構成されてもよいし、例えば、電源供給端子２０６や情報入出力端子２０５などに含められて、中間伝送装置２に携帯端末装置３が適正に装着されることにより得られる所定端子の導通状態を検出するようにしてもよい。
【００３４】
キー操作部２０２は、例えば図２に示したように各種キーが設けられて構成されており、このキー操作部２０２に対して行われた操作情報はバスラインＢ２を介して制御部２０７に対して供給される。制御部２０７では供給された操作情報に応じて適宜所要の制御処理を実行する。
表示部２０３は、先に図１あるいは図２に示したようにして本体に表出するようにして設けられ、例えば液晶ディスプレイやＣＲＴ(Cathode-Ray Tube)などの表示デバイス及びその表示駆動回路等を備えて構成される。この表示部２０３の表示動作は制御部２０７により制御される。
【００３５】
続いて、携帯端末装置３について説明する。
図３に示す携帯端末装置３は、先に図２にて説明したようにして中間伝送装置２に対して装着されることにより、中間伝送装置２と、情報入出力端子２０５−３０６を介してデータの通信が可能なように接続されると共に、電源供給端子２０６−電源入力端子３０７を介して、中間伝送装置２の電源供給部２１０から電力が供給される。
【００３６】
この図に示す携帯端末装置３では、制御部３１１、ＲＯＭ３１２、ＲＡＭ３１３、信号処理回路３１４、Ｉ／Ｏポート３１７，３１９、音声認識部３２１、音声合成部３２２、キー操作部３０１及びキー操作部３０２が備えられ、これら各機能回路部がバスラインＢ３により接続されている。
この場合も、制御部３１１はマイクロコンピュータ等を備えて構成され、携帯端末装置３内の各機能回路部の動作についての制御を実行する。
また、ＲＯＭ３１２には、例えば制御部３１１が所要の制御処理を実行するのに必要なプログラムデータや、各種データベース等の情報が格納されているものとされる。ＲＯＭ３１３には、中間伝送装置２と通信すべき所要のデータや、制御部３１２の処理により発生したデータが一時保持される。
【００３７】
Ｉ／Ｏポート３１７は、情報入出力端子３０６を介して中間伝送装置２と相互通信を行うために設けられる。当該携帯端末装置３から送信する要求情報や、ダウンロードされるデータは、このＩ／Ｏポート３１７を介して入出力される。
【００３８】
この携帯端末装置３に設けられる記憶部３２０は、所定の記録媒体について記録再生を行うためのドライバ等を備えて構成されるものであり、サーバ装置１から中間伝送装置２を介してダウンロードした情報を格納するために設けられる。なお、この記憶部３２０に採用される記録媒体も特に限定されるものではないが、この場合にもランダムアクセス性を考慮すれば、ハードディスク、光ディスク、ＩＣメモリ等のランダムアクセスが可能な記録媒体を採用することが好ましい。
【００３９】
音声認識翻訳部３２１では、中間伝送装置２のボーカル分離部２１２において生成され、携帯端末装置３に伝送されたボーカル情報とカラオケ情報のうち、ボーカル情報を入力し、先ず、ボーカル情報について音声認識処理を行って、元のボーカルにより歌われている歌詞の文字情報（第１言語歌詞情報）を生成する。ここで、例えばボーカルが英語により歌っているのであれば、英語についての音声認識が行われて、第１言語歌詞情報としては英語の歌詞による文字情報が得られることになる。
続いて、音声認識翻訳部３２１では、上記のようにして生成した第１言語歌詞情報を利用して翻訳処理を行って、他の所定言語に翻訳された第２言語歌詞情報を生成する。例えば第２言語として日本語が設定されていれば、第２言語歌詞情報は日本語の歌詞による文字情報とされる。
【００４０】
音声合成部３２２では、先ず、上記第２言語歌詞情報に基づいて、翻訳処理後の第２言語の歌詞により歌われる新規ボーカル情報（オーディオデータ）を生成する。この際、元のボーカル情報を利用することで、オリジナルのボーカルの声質は損なわずに、第２言語に翻訳した歌詞により歌われる新規ボーカル情報を生成することができる。続いて、上記新規ボーカル情報と、このボーカル情報に対応するカラオケデータを合成することによって合成楽曲情報を生成する。
この合成楽曲情報は、同じ歌手がオリジナルの楽曲とは異なる言語で歌っている楽曲情報となる。
【００４１】
このように本実施の形態の情報配信システムでは、オリジナルの楽曲データから、少なくとも、カラオケ情報（オーディオデータ）、オリジナルの言語と翻訳言語による２種類の言語による歌詞情報（文字情報データ）、及び第２言語により歌われる合成楽曲情報（オーディオデータ）を派生情報として獲得することができる。そして、これらの情報はユーザが利用するコンテンツとして管理された状態で、携帯端末装置３の記憶部３２０に対して、他の通常のダウンロードデータと共に格納することが可能とされている。
なお、上記音声認識翻訳部３２１及び音声合成部３２２の内部構成例については後述する。
【００４２】
本実施の形態では、記憶部３２０に格納されたデータのうち、オーディオデータについては当該携帯端末装置３により再生出力することが可能とされている。このため、携帯端末装置３には信号処理回路３１４が設けられる。
信号処理回路３１４は、例えば記憶部３２０から読み出されたオーディオデータをバスラインＢ３を介して入力して所要の信号処理を行う。ここで、記憶部３２０に格納されているオーディオデータが所定形式に従って圧縮処理をはじめとする所定のエンコードが施されているのであれば、信号処理回路３１４では入力された圧縮オーディオデータについて伸張処理及び所定のデコード処理を施して、Ｄ／Ａコンバータ３１５に出力する。Ｄ／Ａコンバータ３１５でアナログオーディオ信号に変換されたオーディオデータは、オーディオ出力端子３０９に供給される。なお、この図ではオーディオ出力端子３０９にヘッドフォン８が接続された状態が示されている。
【００４３】
また、携帯端末装置３にはマイク端子３１０が設けられている。例えば、マイク端子３１０にマイクロフォン１２を接続して音声を吹き込んだとすると、この音声信号がＡ／Ｄコンバータ３１６を介してデジタルオーディオ信号に変換されて信号処理回路３１４に入力される。
この場合、信号処理回路３１４では入力されたデジタルオーディオ信号について、例えば圧縮処理及び記憶部３２０へのデータ書き込みに適合する所要のエンコード処理を施すように動作する。ここでエンコード処理が施されたデータは、例えば制御部３１１の制御によって記憶部３２０に対して格納することが可能とされている。あるいは、そのまま信号処理回路３１４の音声出力系からＤ／Ａコンバータ３１５を介してオーディオ出力端子３０９に出力することも可能である。
【００４４】
Ｉ／Ｏポート３１８は、コネクタ３０８を利用して外部と接続される機器や装置との入出力を可能とするために設けられる。コネクタ３０８には、例えばディスプレイ装置、キーボード、モデム、又はターミナルアダプタ等が接続可能とされるが、これについては、本実施の形態の携帯端末装置３の利用形態例として後述する。
【００４５】
また、携帯端末装置３に備えられるバッテリ回路部３１９は、少なくとも充電池を備えると共に、この充電池の電力を利用して携帯端末装置３内の各機能回路部の動作電源を供給するようにされた電源回路を備えて構成される。また、携帯端末装置３が中間伝送装置２に装着された状態では、電源供給端子２０６−電源入力端子３０７を介して、電源供給部２１０からバッテリ回路部３１９に対して、携帯端末装置３の回路のための動作電源及び充電電力が供給されるようになっている。
【００４６】
この図に示す携帯端末装置３の表示部３０１及びキー操作部３０２は、例えば図２に示したようにして本体に設けられているものであり、この携帯端末装置３においても、上記表示部３０１に対する表示制御は制御部２０７により実行される。また、制御部２０７は、上記キー操作部３０２から出力される操作情報に基づいて適宜所要の制御処理を実行することになる。
【００４７】
（１−ｃ．ボーカル分離部の構成例）
図３の中間伝送装置２に備えられるボーカル分離部２１２は、例えば図４のブロック図のようにして構成される。
図４において、ボーカルキャンセル部２１２は例えばデジタルフィルタ等を備えて構成され、入力されたボーカル入りの楽曲情報Ｄ１（オーディオデータ）からボーカルパートの成分をキャンセル（消去）して、伴奏パートだけのオーディオデータであるカラオケ情報Ｄ２を生成して出力する。ボーカルキャンセル部２１２の詳しい内部構成の説明は省略するが、例えばよく知られている、ステレオ音声のセンターに定位する音声を、（Ｌチャンネルデータ）−（Ｒチャンネルデータ）によりキャンセルする技術が用いられればよい。この際、バンドパスフィルタなどを用いてボーカル音声の帯域のみがキャンセルされて、伴奏楽器の音などは極力キャンセルされないようにすることが可能である。
【００４８】
ボーカルキャンセル部２１２ａで生成されたカラオケ情報Ｄ２は、ボーカル抽出部２１２ｂ及びデータ出力部２１２ｃに分岐して出力される。ボーカル抽出部２１２ｂでは、上記カラオケ情報Ｄ２及び楽曲情報Ｄ１を入力して、原理的に［楽曲情報Ｄ１−カラオケ情報Ｄ２＝ボーカル情報Ｄ３］の演算処理を行うことで、楽曲情報Ｄ１からボーカルパートのみのオーディオデータであるボーカル情報Ｄ３を抜き出してデータ出力部２１２ｃに対して出力する。
【００４９】
データ出力部２１２ｃでは、入力されたカラオケ情報Ｄ２及びボーカル情報Ｄ３について、例えば所定規則に従って時系列的に配列して送信用データ（Ｄ２＋Ｄ３）として出力する。この送信用データ（Ｄ２＋Ｄ３）は中間伝送装置２から携帯端末装置３に対して送信出力される。
【００５０】
（１−ｄ．音声認識翻訳部の構成例）
図５は、携帯端末装置３に備えられる音声認識翻訳部３２１の一構成例を示すブロック図である。
音響分析部３２１ａは、中間伝送装置２から送信用データ（Ｄ２＋Ｄ３）として送信されてきたカラオケ情報Ｄ２とボーカル情報Ｄ３のうち、ボーカル情報Ｄ３を入力して音響分析を行い、例えば所定の帯域ごとの音声パワーや、線形予測計数（ＬＰＣ）、ケプストラム係数などの音声の特徴パラメータ抽出をする。つまり、フィルタバンク等により音声信号を所定の帯域ごとにフィルタリングし、このフィルタリング結果を整流平滑化することで、所定の帯域ごとの音声のパワーを求めるようにしている。あるいは、入力音声データ（ボーカル情報Ｄ３）について線形予測分析処理を行うことで線形予測係数を求め、更にその線形予測係数からケプストラム係数を求めるようにされる。
上記のようにして音響分析部で求められた特徴パラメータは、直接、あるいは必要に応じてベクトル量子化されて認識処理部３２１ｂに出力される。
【００５１】
認識処理部３２１ｂは、音響分析部１３からの特徴パラメータ（あるいは、特徴パラメータをベクトル量子化して得られるシンボル）に基づき、例えばダイナミックプログラミング（ＤＰ）マッチング法や、隠れマルコフモデル（ＨＭＭ）などの音声認識アルゴリズムにしたがい、後述する大規模の単語辞書３２１ｃを参照して音声認識を行い、例えばボーカル情報Ｄ３としての音声に含まれる単語ごとに、音声認識結果として出力する。
【００５２】
単語辞書３２１ｃには、音声認識の対象とする単語（オリジナルのボーカルの言語）の標準パターン（あるいはモデルなど）が記憶されている。認識処理部３２１ｂでは、この単語辞書３２１ｃに記憶されている単語を対象として、音声認識を行う。
【００５３】
第１言語文格納部３２１ｅは、オリジナルのボーカルの言語による文章を数多く記憶している。
第２言語文格納部３２１ｆは、第１言語文格納部３２１ｅに記憶されている文章を、目的とする言語に翻訳した文章を記憶している。従って、第１言語文格納部３２１ｅに記憶されている言語の文章と、第２言語文格納部３２１ｆに記憶されている他言語の文章とは、１対１に対応している。
なお、例えば、第１言語文格納部３２１ｅには、日本語の文章とともに、その文章に対応する英語の文章が記憶されている第２言語文格納部３２１ｆのアドレスが記憶されている。これにより、第１言語文格納部３２１ｅに記憶されている日本語の文章に対応する英語の文章は、第２言語文格納部３２１ｆから即座に検索することができるようになされている。
【００５４】
音声認識の結果により得られた１以上の単語列は、翻訳処理部３２１ｄに出力される。翻訳処理部３２１ｄは、認識処理部３２１ｂから音声認識結果としての１以上の単語を入力すると、その単語の組み合わせと最も類似する文章を、第１言語文格納部３２１ｅに記憶されている言語による文章（第１言語文）の中から検索する。
【００５５】
上記検索処理は例えば次のようにして行われる。翻訳処理部３２１ｄは、音声認識の結果得られた単語（以下、認識単語ともいう）すべてを含む第１言語文を、第１言語文格納部３２１ｅから検索する。そのような文章が存在する場合、翻訳処理部３２１ｄは、その第１言語文を認識単語の組み合わせに最も類似するものとして、第１言語文格納部３２１ｅから読み出す。また、第１言語文格納部３２１ｅに記憶されている第１言語文の中に、認識単語をすべて含むものが存在しない場合、翻訳処理部３２１ｄは、そのうちのいずれか１単語を除いた単語をすべて含む第１言語文を検索する。そのような第１言語文が存在する場合、翻訳処理部３２１ｄは、その第１言語文を、認識単語の組み合わせにもっとも類似するものとして、第１言語文格納部３２１ｅから読み出す。また、そのような第１言語文が存在しない場合、翻訳処理部３２１ｄは、認識単語のうちいずれか２単語を除いた単語をすべて含む第１言語文を検索する。以下、同様にして認識単語の組み合わせに最も類似する第１言語文が検索される。
【００５６】
上記のようにして、認識単語の組み合わせに最も類似する第１言語文を検索すると、翻訳処理部３２１ｄでは、この第１言語文の文字情報を連結することによって第１言語歌詞情報として出力する。この第１言語歌詞情報は、派生情報の１コンテンツとして記憶部３２０に格納される。
また、翻訳処理部３２１ｄは、上記検索により得られた第１言語文を利用して、この第１言語文に対応する第２言語を第２言語文格納部３２１ｆから検索して対応付けを行う。そして、例えば認識言語単位でこの対応付け処理により得られた第２言語文を所定規則に従って連結していくことで、第１言語から第２言語に翻訳された歌詞の文字情報が得られる。翻訳処理部３２１ｄでは、これを第２言語歌詞情報として出力する。この第２言語歌詞情報は、第１言語歌詞情報と同様に派生情報の１コンテンツとして記憶部３２０に格納されるとともに、次に説明する音声合成処理部３２２に入力される。
【００５７】
（１−ｅ．音声合成部の構成例）
続いて、図６のブロック図は、携帯端末装置３に備えられる音声合成部３２２の構成例を示している。
音声分析部３２２ａにおいては、入力されるボーカル情報Ｄ３について所要の解析処理（波形分析処理等）を実行することで、ボーカルの声質を特徴づける所定のパラメータ（声質情報）を発生させると共に、時間軸に沿ったボーカルのピッチ情報（即ちボーカルパートのメロディー情報）を生成し、これらの情報をボーカル生成処理部３２２ｂに出力する。
音声発生部３２２ｄでは、入力された第２言語歌詞情報に基づいて、第２言語による音声合成処理を行い、この合成処理により得られた音声信号データ（第２言語による歌詞を発音した音声信号）をボーカル生成処理部３２２ｂに出力する。
【００５８】
ボーカル生成処理部３２２ｂでは、例えば音声分析部３２２ａから入力された声質情報に基づいて波形変形処理等を行うことによって、先ず、音声発生部３２２ｄから入力した音声信号データの声質を、ボーカル情報Ｄ３のボーカルと同等の声質となるように処理を行う。つまり、ボーカル情報Ｄ３のボーカルの声質を有しながら第２言語により歌詞を発音する音声信号データ（第２言語発音データ）を生成する。
続いて、ボーカル生成処理部３２２ｂは、上記第２言語発音データに対して、音声分析部３２２ａから入力したピッチ情報に基づいて、音階（メロディー）を与えていく処理を行う。この処理に際しては、例えば、メロディーの区切りと歌詞との区切りの一致が図られるように、音声発生部３２２ｄから出力される音声信号データと、ピッチ情報とに対して、これより以前のある処理段階においてタイムコードを付加するようにすることが考えられる。つまり、このタイムコードに従って、第２言語発音データを適宜区切っていきながら、ピッチ情報に基づく音階を与えていくことになる。
このようにして生成された音声信号データは、オリジナルの楽曲の歌手と同一の声質及び同一のメロディーでもって、翻訳後の第２言語の歌詞により歌われているボーカル情報となる。このボーカル情報が、新規ボーカル情報Ｄ４として合成部３２２ｃに入力される。
【００５９】
合成部３２２ｃでは、入力されたカラオケ情報と上記新規ボーカル情報Ｄ４を合成することによって合成楽曲情報Ｄ５を生成して出力する。合成楽曲情報Ｄ５は、聴感上では、オリジナルの楽曲に対して翻訳後の第２言語の歌詞により歌われている点が異なり、伴奏のパートやボーカルパートの歌手の声質はオリジナルの楽曲と同様とされる。
【００６０】
（１−ｆ．基本的なダウンロード動作及びダウンロード情報の利用例）
先ず、上記のようにして構成される本実施の形態の情報配信システムにおける携帯端末装置３に対するデータのダウンロードの基本的な動作について、再度図１〜図３を参照して説明する。
【００６１】
本実施の形態の場合、ユーザが所有する携帯端末装置３に対して所望の情報（例えば楽曲のオーディオデータであれば楽曲単位のデータをいうことになる）をダウンロードするのにあたり、このダウンロードすべき情報をユーザが選択する事が必要とされるが、ダウンロード情報について選択設定を行う方法としては、次のような方法が考えられる。
【００６２】
第１は、携帯端末装置３に備えられたキー操作部３０２の所定のキー（図１、図２参照）をユーザが操作して行う方法である。この場合には、例えば携帯端末装置３内の記憶部３２０に対して、当該情報配信システムによりダウンロード可能な情報がデータベース化されたメニュー情報が格納されているものとされる。このようなメニュー情報は、例えば以前に当該情報配信システムを利用して何らかの情報をダウンロードしたときに共に得られるようにされればよい。
携帯端末装置３のユーザは、例えば上記メニュー情報に基づいて得られる情報選択用のメニュー画面を表示部３０１に対して表示させ、この表示内容を見ながらセレクトキー３０３を操作して所望の情報を選択し、決定キー３０４により選択した情報を確定するようにされる。
なお、上記セレクトキー及び決定キーとしてジョグダイヤルを用い、ジョグの回転を選択操作とし、ジョグの押圧により決定を行うという操作形態を採れば、情報選択時の操作体系をより簡単にすることができる。
そして、上記のような選択設定操作が携帯端末装置３を中間伝送装置２に対して装着している状態で行われているのであれば、選択設定操作に応じた要求情報が中間伝送装置２（インターフェイス部２０９）から通信網４を介してサーバ装置１に供給されることになる。
【００６３】
また、上記のような選択設定操作により得られた設定情報が、携帯端末装置３内のＲＡＭ３１３（図３参照）に対して保持されるように構成すれば、携帯端末装置３を中間伝送装置２に装着しない状態（即ち、身近に中間伝送装置２が無いような環境）のもとでも、ユーザは、予め任意の機会で情報を選択する操作を行って、この操作により発生した要求情報を携帯端末装置３に保持させておくことが可能になる。
この場合には、例えばユーザが携帯端末装置３を中間伝送装置２に装着したときに、ＲＡＭ３１３に保持されているダウンロード情報に関する設定情報が、要求情報として中間伝送装置２（インターフェイス部２０９）から通信網４を介してサーバ装置１に伝送されることになる。
【００６４】
また、これまでの説明は、携帯端末装置３に備えられるキー操作部３０２により情報の選択設定操作を行うものであったが、中間伝送装置２に対してキー操作部２０２が備えられているのであれば、例えば携帯端末装置３が中間伝送装置２に装着された状態で、中間伝送装置２のキー操作部２０２により同様の操作が可能なように構成してもかまわない。
【００６５】
上記した何れの方法により選択設定操作を行ったとしても、携帯端末装置３を中間伝送装置２に対して装着することにより、選択設定操作に応じた要求情報が携帯端末装置３にて発生され、この要求情報が中間伝送装置２を介してサーバ装置１に対してアップロードされることになる。なお、このアップロード動作は、中間伝送装置２の装着判別部２１１における検出情報を開始トリガとするようにしてもよい。また、上記要求情報をサーバ装置に対して送信するときには、これとともに携帯端末装置３が保持している端末ＩＤの情報も送信するようにされる。
【００６６】
そして、このようなデータ送信が終了したことが確認されると、サーバ装置１では、先ず、照合処理部１０４において要求情報と共に送信された端末ＩＤについて照合を行う。
ここで、照合結果として端末ＩＤが当該情報配信システムを利用可能であることが判別されれば、記憶部１０２に格納されている情報のうちから、送信された要求情報に対応する情報を検索する処理を実行する。
この検索処理は、制御部１０１が検索部１０３を制御することにより、例えば、要求情報に含まれる識別コードと、記憶部１０２に格納されている情報ごとに与えられた識別コードとを照合していくことにより実行されればよい。このようにして、要求情報に対応する情報が検索されることにより、サーバ装置１において配信すべき情報の決定が行われたことになる。
【００６７】
なお、上述の端末ＩＤの照合処理時において、端末ＩＤが未登録であったり、残金が足りない等の理由で、送信された端末ＩＤが情報配信システムを現在利用不可であるとの判断結果が得られたときには、この内容を示すエラー情報を中間伝送装置２に送信するようにしてもよい。これにより、中間伝送装置２、あるいは携帯端末装置３に備えられる表示部（２０３、３０１）においてその警告を表示したり、あるいはスピーカなどの音声出力手段を設けて、警告音を出力させるような構成をとることが可能になる。
【００６８】
サーバ装置１では、上述のように要求情報に応じて記憶部１０２から検索した情報を中間伝送装置２に対して送信する。中間伝送装置２に装着された携帯端末装置３は、中間伝送装置２にて受信した情報を、情報入出力端子２０５−３０６を介して取り込んで内部の記憶部３２０にコピー（ダウンロード）する。
【００６９】
また、本実施の形態では、携帯端末装置３に情報のダウンロードが行われている間に、中間伝送装置２から携帯端末装置３の充電池に対して自動的に充電が行われるものとされる。
また、例えば携帯端末装置３のユーザの要望として、情報のダウンロードは必要ないが、中間伝送装置２を充電だけのために利用したいというようなことも当然考えられるので、所定の操作を行うことで、中間伝送装置２に対して充電のみを行うことができるようにもされている。
【００７０】
例えば、上述のようにして、携帯端末装置３に対して情報のダウンロードが終了すると、中間伝送装置２の表示部２０２あるいは携帯端末装置３の表示部２０２等に対して、情報のダウンロードの終了が完了したことを告げるメッセージ等が表示される。
そして、携帯端末装置３のユーザがこの表示を確認して、携帯端末装置１を中間伝送装置２から外した後は、携帯端末装置３はダウンロードにより記憶部３０６に格納したデータを再生するための再生装置として機能する。つまり、ユーザは、携帯端末装置３さえ所持していれば、特に場所や時間を問わず携帯端末装置３に格納した情報を再生して表示したり、あるいは音声として出力させることができる。この際、ユーザは携帯端末装置３に備えられている動作キー３０５により、その再生動作を任意に操作することが可能とされている。この動作キー３０５としては、例えば早送り、再生、巻戻し、停止、一時停止キーなどが備えられているものとされる。
【００７１】
例えば、オーディオデータを再生して視聴したい場合には、図７に示すように携帯端末装置３のオーディオ出力端子３０８にヘッドフォン８或いはアクティブスピーカＳＰ等を接続することにより、オーディオデータの再生音声を視聴することが可能となる。
【００７２】
また、例えば図８に示すように、マイクロフォン端子３０９に対してマイクロフォン１２を接続することにより、このマイクロフォン１２から入力した音声をＡ／Ｄコンバータ３１６→信号処理回路３１４を介することによりデータ化して、記憶部３２０に対して格納する、つまりマイク音声を録音することが可能とされる。この場合には、前述した動作キー３０５として録音キー等が設けられることになる。
さらには、例えばオーディオデータとしてカラオケを再生出力しているのであれば、マイクロフォン端子３０９に接続したマイクロフォン１２により、カラオケに合わせてユーザが歌を歌うことなどもできる。
【００７３】
また、本実施の形態の携帯端末装置３は、図８に示すように本体に備えられたコネクタ３０８に対してモニタ装置９、モデム１０（又はターミナルアダプタ）を接続可能なコネクタ３０８、キーボード１１を接続可能とされている。
例えば、携帯端末装置３自体によっても、表示部３０１によりダウンロードした画像データ等を表示出力することは可能であるが、コネクタ３０８に対してモニタ装置９を接続して、携帯端末装置３から画像データを出力すれば、より大きな画面によって画像を見ることも可能である。また、キーボード２２を接続して文字入力等を可能とすることにより、要求する情報の選択を容易にするだけでなく、より複雑なコマンド入力が可能となる。
また、モデム（ターミナルアダプタ）１０を接続すれば、中間伝送装置２を利用することなく、サーバ装置１と直接データの送受を可能とすることができる。また、ＲＯＭ３１２に保持させるプログラム等によっては、通信網４を介して他のコンピュータ或いは携帯端末装置３と通信可能に構成することが可能であり、これにより、ユーザ同士のデータ交換なども容易に行うことができる。また、これらの代わりに無線接続コントローラを用いれば、例えば中間伝送装置２と携帯端末装置３とを無線接続することも容易に可能となる。
【００７４】
＜２．派生情報のダウンロード＞
これまで説明してきた、本実施の形態の情報配信システムの構成、携帯端末装置に対する情報のダウンロードの基本動作、及び利用形態例を前提として、本実施の形態の特徴となる、派生情報のダウンロードについて、図９及び図１０を参照して説明する。図９は、派生情報をダウンロードする際の中間伝送装置２及び携帯端末装置３の動作の経緯を時間軸に従って示しており、図１０は、派生情報のダウンロードの経過に従って、例えば携帯端末装置３の表示部３０１に表示される表示内容を示している。
【００７５】
また、ここでいう「派生情報」とは、これまでの説明からわかるように、ボーカル入りのオリジナル楽曲情報から得られる、カラオケ情報、第１言語歌詞情報、第２言語歌詞情報、及び同じ歌手が第２言語により歌う合成楽曲情報とされる。
なお、派生情報のダウンロードに伴う情報配信システムを構成する各装置（サーバ装置１、中間伝送装置２、及び携帯端末装置３）の動作の詳細であるが、ダウンロード時の基本的な動作は図３により説明し、派生情報生成のための動作は、図４、図５及び図６により既に説明したことから、以降において、システムの動作についての詳しい説明は若干の補足を除いて省略し、主として、時間経過に従った動作の状態遷移について説明を行っていくこととする。
【００７６】
図９には、派生情報のダウンロードに際しての中間伝送装置２及び携帯端末装置３の動作例が示されている。ここで、図の○内の英数字は、中間伝送装置２及び携帯端末装置３の時間経過に従った動作順を示しており、以降の説明はこの動作順に従って行うこととする。
【００７７】
動作１： ここでは、先に利用形態として説明した操作方法として、携帯端末装置３のキー操作部３０２を操作することにより、ユーザが所望する「楽曲情報の派生情報」を要求するための選択設定操作が行われるものとされる。なお、利用形態として前述したように、中間伝送装置２に設けられたキー操作部２０３により同様の選択設定操作が行われるようにされてもかまわない。
【００７８】
動作２： 携帯端末装置３は、上記動作１として得られた操作情報に従った要求情報、つまり、指定の楽曲情報の派生情報を要求することを示す要求情報を送信出力する。
【００７９】
動作３： 携帯端末装置３から要求情報が送信出力され場合、これまでの説明からわかるように、この要求情報を中間伝送装置２にて受信し、さらに中間伝送装置２から通信網４を介してサーバ装置１に対して送信する。
図９には示していないが、サーバ装置１では、受信入力した要求情報に対応する楽曲情報を記憶部１０２から検索し、検索した楽曲情報を記憶部１０２から読み出して中間伝送装置２に対して送信する。なお、要求情報が派生情報とされる場合であっても、サーバ装置１から配信される楽曲情報はオリジナルの楽曲情報であり、この段階では派生情報は発生していない。図９では、ここまでの段階を動作３とする。
【００８０】
動作４： 中間伝送装置２では、サーバ装置１から送信されてきた楽曲情報を受信して、例えば一旦、記憶部２０８に格納して保持する。即ち、楽曲情報のダウンロードを行う。
動作５： 中間伝送装置２では、上記動作４として記憶部２０８に格納した楽曲情報を読み出してボーカル分離部２１２に入力する。ボーカル分離部２１２では、図４にて説明したようにして、上記楽曲情報Ｄ１についてカラオケ情報Ｄ２とボーカル情報Ｄ３に分離する。
動作６： 上記ボーカル分離部２１２では、例えば、図４により説明したように、最終段のデータ出力部２１２ｃにおいて、カラオケ情報Ｄ２とボーカル情報Ｄ３を送信情報（Ｄ２＋Ｄ３）として出力するようにされる。そして、動作６として、中間伝送装置２は送信情報（Ｄ２＋Ｄ３）を、携帯端末装置３に対して送信する処理を行う。
【００８１】
このように本実施の形態において、中間伝送装置２により派生情報を得るための動作としては、ボーカル分離部２１２での信号処理によってカラオケ情報Ｄ２とボーカル情報Ｄ３を生成する処理のみを行うようにされる。つまり、以降において生成される各種派生情報は、受信入力したカラオケ情報Ｄ２とボーカル情報Ｄ３（送信情報（Ｄ２＋Ｄ３））に基づいて、全て携帯端末装置３側において生成するようにされる。
即ち、本実施の形態では、ユーザにとってのコンテンツとなる各種派生情報を得るのにあたり、中間伝送装置２と携帯端末装置３間でその役割が分担されるように構成されるものである。これにより、例えば各種派生情報を得るのに中間伝送装置２あるいは携帯端末装置３の何れかにおいてのみ、その役割を与えるように構成した場合と比較して、中間伝送装置２と携帯端末装置３間の処理負担を軽減することが可能となる。
【００８２】
動作７： 携帯端末装置３は、上記動作６により中間伝送装置２から送信された送信情報（Ｄ２＋Ｄ３）を受信入力することになる。
動作８： そして、携帯端末装置３においては、受信入力した送信情報（Ｄ２＋Ｄ３）から、カラオケ情報Ｄ２とボーカル情報Ｄ３をそれぞれ独立に得て、先ず、カラオケ情報Ｄ２については、記憶部３２０に対して格納する。
これにより、携帯端末装置３にとっては、派生情報のコンテンツとして最初にカラオケ情報Ｄ２を獲得したことになるため、携帯端末装置３では、続いて図１０（ａ）に示すように表示部３０１に対してカラオケボタンＢ１を表示させる。このようなボタン表示は、携帯端末装置３において新しい派生情報が得られるごとに逐次表示されるものであり、派生情報のダウンロードの経過をユーザに示すものである。
また、各ボタン表示はユーザが所望のコンテンツを選択して再生するための操作用のインターフェイス画像として利用される。これは、後述する図１０（ｂ）〜図１０（ｄ）に追加表示される各ボタン表示についても同様である。
また、ボーカル情報Ｄ３は、音声認識翻訳部３２１に入力される。
【００８３】
動作９： 音声認識翻訳部３２１は、先ず、入力されたボーカル情報Ｄ３について図５にて説明したようにして音声認識を行うことで、派生情報として第１言語歌詞情報（文字情報）を生成する。ここでは、第１言語、つまり楽曲情報のボーカル言語として例えば英語が規定されているものとする。従って、ここで生成される第１言語歌詞情報としては、英語歌詞情報となる。
音声認識翻訳部３２１で生成された英語歌詞情報は、記憶部３２０に対して格納される。これにより、携帯端末装置３では２番目の派生情報を獲得したことになるため、図１０（ｂ）に示すように、表示部３０１に対してカラオケボタンＢ１に追加して英語歌詞がコンテンツ化されたことを示す英語歌詞ボタンＢ２の表示を行うようにされる。
【００８４】
動作１０： 音声認識翻訳部３２１では、動作９により生成した第１言語歌詞情報（英語歌詞情報）について翻訳を行って第２言語歌詞情報を生成する。ここでは、第２言語として日本語が設定されているものとする。このため、実際に作成される第２言語歌詞情報としては、英語による歌詞を日本語に翻訳した歌詞情報（日本語歌詞情報）となる。
そして、携帯端末装置３ではこの日本語歌詞情報を３番目に獲得すべき派生情報として記憶部３２０に格納する。そして、図１０（ｃ）に示すように表示部３０１に対して日本語歌詞がコンテンツ化されたことを示す日本語歌詞ボタンＢ３を表示させる。
【００８５】
動作１１： 続いて携帯端末装置３では、音声合成部３２２による信号処理により、合成楽曲情報Ｄ５を生成する。この合成楽曲情報Ｄ５は、たとえば図６にて説明したように、カラオケ情報Ｄ２、ボーカル情報Ｄ３、及び上記動作１０により生成された第２言語歌詞情報（この場合は日本語歌詞情報）を利用して生成される。ここでは、第１言語が英語、第２言語が日本語とされていることから、合成楽曲情報Ｄ５としては、英詩により歌われるオリジナルの楽曲を、同一の歌手が日本語の歌詞に訳して歌っている楽曲の情報となる。
そして、この合成楽曲情報Ｄ５を最後に獲得すべき派生情報として記憶部３２０に格納し、表示部３０１に対して図１０（ｄ）に示すように合成楽曲がコンテンツ化されたことを示す合成楽曲ボタンＢ４を表示させる。
この段階では、派生情報として獲得可能とされる４種類の全てのコンテンツが表示部３０１にボタン表示されて、派生情報のダウンロードが全て完了したことを示すことになる（なお、別途、ダウンロードの完了を示すメッセージ等が表示されてもよい）。また、実際に、これら全ての派生情報が携帯端末装置３の記憶部３２０に対して格納済みの状態にある。
そして、上記のようにして携帯端末装置３にダウンロードした派生情報は、例えば、先に図７及び図８により説明したようにして外部に出力して利用することができる。
【００８６】
なお、実際の使用形態に際しては、細部は適宜変更されてかまわない。例えば、図９による説明では、楽曲情報のダウンロードから派生情報の獲得までが時間的にほぼ連続する一連の動作として扱われていたが、例えば、携帯端末装置３の記憶部３２０に対して少なくとも送信情報（カラオケ情報Ｄ２＋ボーカル情報Ｄ３）を格納しておき、携帯端末装置３を中間伝送装置２から外した後の任意の機会に、所定の操作によって携帯端末装置３においてカラオケ情報Ｄ２以外の残る３つの派生情報のコンテンツを作成して獲得するように構成することも考えられる。
【００８７】
また、図９による説明では、オリジナルの英語歌詞を日本語に翻訳して最終的に合成楽曲情報を得るものとして説明したが、特にオリジナル言語（第１言語）及び翻訳言語（第２言語）としての言語は限定されるものではない。さらには、複数言語のオリジナル言語に対応可能とすると共に、翻訳言語をユーザの指定操作などによって複数言語から選択指定するように構成することも可能とされる。この場合には、音声認識翻訳部３２１において、対応する言語種類に応じて、単語辞書３２１ｃや、第１言語格納部３２１ｅ及び第２言語格納部３２１ｆに格納される言語種類数が増設されることになる。
【００８８】
また、図９による派生情報のダウンロード動作としては、オリジナルの楽曲情報は携帯端末装置３にて得られるコンテンツとしては除外されていたが、中間伝送装置２から携帯端末装置３にカラオケ情報Ｄ２とボーカル情報Ｄ３による送信情報（Ｄ２＋Ｄ３）を送信する際に、共にオリジナルの楽曲情報Ｄ１を送信し、携帯端末装置３の記憶部３２０に対して格納するように構成することも考えられる。
【００８９】
更に、図９による説明では、楽曲に関する派生情報を要求すると自動的に４種類の全ての派生情報が獲得されるものとして説明したが、例えばユーザの選択設定操作に従って、４種類の派生情報のコンテンツのうちから一部のコンテンツのみを得るようにすることも可能である。
さらには、例えば４種類の全ての派生情報のうち、所定の一部の派生情報のみを提供可能な簡易な構成による情報配信システムを構築することも可能であり、例えば、派生情報としてカラオケ情報のみを提供するのであれば、ボーカル分離部２１２におけるボーカルキャンセル部２１２ｃに相当する機能回路部が、情報配信システムを構成する装置の何れか１つに設けられるように構成すればよいことになる。
【００９０】
また、本実施の形態では、派生情報を生成するための機能回路部として、ボーカル分離部２１２のみを中間伝送装置２に設け、残る音声認識翻訳部３２１及び音声合成部３２２は携帯端末装置３に設けるようにしているが、これに限定されるものではなく、これら各機能回路部を当該情報配信システムを構成する各装置（サーバ装置１、中間伝送装置２、携帯端末装置３）に対してどのように振り分けて設けるのかについては、実際の適用条件等により変更されてかまわない。
【００９１】
【発明の効果】
以上説明したように本発明は、情報配信システムにおいて、サーバ装置から配信したオリジナルの楽曲情報を利用して、その楽曲のカラオケ情報、オリジナルの言語によるボーカルの歌詞情報、他の言語に翻訳されたボーカルの歌詞情報、及び翻訳言語の歌詞によりオリジナルと同一のボーカルにより歌われる合成楽曲情報の各々が生成され、これら各情報を携帯端末装置においてダウンロード情報として獲得することが可能となる。これにより、オリジナルの楽曲情報だけでなく、これを利用して生成した派生情報を携帯端末装置のコンテンツとすることができるため、情報配信システムとしての利用価値がより高まることになる。
この際、派生情報を生成するための各種機能回路部を、情報配信システムを構成する各装置に適宜振り分けるようにして設けることで、ある１つの装置における動作負担が重くなるのを避けることができる。
【００９２】
更に、派生情報を獲得するためのダウンロードを行っている際に、順次獲得されていく派生情報の種類に対応する表示を行うことで、たとえばユーザは派生情報のダウンロードの動作の経過を把握することが可能になるとともに、この表示を、各派生情報を呼び出して再生するための操作用インターフェイスとして機能させることで、携帯端末装置のユーザの使い勝手が更に向上されることになる。
【図面の簡単な説明】
【図１】本発明の実施の形態としての情報配信システムの構成例を概念的に示す説明図である。
【図２】中間伝送装置及び携帯端末装置の外観例を示す斜視図である。
【図３】本実施の形態の情報配信システムを形成する各装置の内部構成を示すブロック図である。
【図４】ボーカル分離部の内部構成例を示すブロック図である。
【図５】音声認識翻訳部の内部構成例を示すブロック図である。
【図６】音声合成部の内部構成例を示すブロック図である。
【図７】携帯端末装置の利用形態例を示す斜視図である。
【図８】携帯端末装置の利用形態例を示す斜視図である。
【図９】派生情報のダウンロード動作の経緯を示す説明図である。
【図１０】派生情報のダウンロードに伴う携帯端末装置の表示部の表示形態例を示す説明図である。
【符号の説明】
１ サーバ装置、２ 中間伝送装置、３ 携帯端末装置、４ 通信網、５ 課金通信網、６ 代理サーバ、８ ヘッドフォン、９ モニタ装置、１０ モデム、１１ キーボード、１２ マイクロフォン、１０１ 制御部、１０２ 記憶部、１０３ 検索部、１０４ 照合処理部、１０５ 課金処理部、１０６ インターフェイス部、Ｂ１ バスライン、２０１ 通信制御端子、２０２ キー操作部、２０３ 表示部、２０４ 端末装着部、２０５ 情報入出力端子、２０６ 電源供給端子、２０７ 制御部、２０８ 記憶部、２０９ インターフェイス部、２１０ 電源供給部、２１１ 装着判別部、２１２ ボーカル分離部、Ｂ２ バスライン、３０１ 表示部、３０２ キー操作部、３０３ セレクトキー、３０４ 決定キー、３０５ 動作キー、３０６ 情報入出力端子、３０７ 電源入力端子、３０８ コネクタ、３０９ オーディオ出力端子、３１０ マイクロフォン端子、３１１ 制御部、３１２ ＲＯＭ、３１３ ＲＡＭ、３１４ 信号処理回路、３１５ Ｄ／Ａコンバータ、３１６ Ａ／Ｄコンバータ、３１７，３１８Ｉ／Ｏポート、３１９ バッテリ回路部、３２０ 記憶部、３２１ 音声認識翻訳部、３２２ 音声合成部、Ｂ３ バスライン
Claims (14)
- 第１のオーディオ情報を、上記第１のオーディオ情報よりボーカル部を抽出したボーカル情報と、上記第１のオーディオ情報よりボーカル部を取り除いた伴奏情報とに分離する楽曲情報分離手段と、
上記ボーカル情報について第１の言語における音声認識を行って第１の言語文字情報を生成する音声認識手段と、
上記第１の言語文字情報について第２の言語への翻訳処理を行って第２の言語文字情報を生成する翻訳手段と、
上記第２の言語文字情報を利用して上記第２の言語により発音される翻訳ボーカル情報を生成し、この翻訳ボーカル情報と上記伴奏情報を合成することにより、第２のオーディオ情報を生成する情報合成手段と
を備えていることを特徴とする情報処理装置。 - 上記楽曲情報分離手段、上記音声認識手段、上記翻訳手段、及び上記情報合成手段により生成される情報のうち、少なくとも何れか１種類の情報を格納することのできる情報記憶手段が設けられる
ことを特徴とする請求項１に記載の情報処理装置。 - 上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報のうちから少なくとも１つの情報を選択可能な選択操作手段と、
上記選択操作手段により選択された情報を上記情報記憶手段から読み出して出力する情報出力手段と、
を備えていること特徴とする請求項２に記載の情報処理装置。 - 表示手段が備えられ、
上記選択操作手段は、上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報のうちから所望の情報を指定するための操作に利用する操作画像を上記表示手段に対して行うように構成されている
ことを特徴とする請求項３に記載の情報処理装置。 - 上記表示手段は、上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報の各情報を獲得するための処理が完了するごとに、これら各情報に対応する項目を上記操作画像として順次表示していくように構成されている
ことを特徴とする請求項４に記載の情報処理装置。 - 第１のオーディオ情報を選択して出力可能に構成された情報送信装置と、
上記情報送信装置と通信可能とされることにより、上記情報送信装置から出力された上記第１のオーディオ情報を受信する受信動作とが可能とされると共に、情報出力動作として、少なくとも上記第１のオーディオ情報に基づいて獲得した情報を外部に対して送信出力可能とされる情報伝送装置と、
情報記憶手段が備えられると共に、上記情報伝送装置と通信可能とされることで、情報記憶動作として、少なくとも上記情報伝送装置から送信出力された情報を上記情報記憶手段に対して記憶可能とされる端末装置と
を備えて当該情報配信システムが構成され、
この情報配信システムにおいて備えられる情報処理系として、
上記情報送信装置から出力された第１のオーディオ情報について、ボーカル情報と伴奏情報とに分離する楽曲情報分離手段と、
上記ボーカル情報について音声認識を行って第１の言語文字情報を生成する音声認識手段と、
上記第１の言語文字情報について翻訳処理を行って第２の言語文字情報を生成する翻訳手段と、
上記第２の言語文字情報を利用して翻訳言語により発音される翻訳ボーカル情報を生成し、この翻訳ボーカル情報と上記伴奏情報を合成することにより、第２のオーディオ情報を生成する情報合成手段と
が備えられることを特徴とする情報配信システム。 - 上記端末装置は、
上記楽曲情報分離手段、上記音声認識手段、上記翻訳手段、及び上記情報合成手段により生成される情報のうち、少なくとも何れか１種類の情報を、上記情報記憶手段に格納するように構成されていることを特徴とする請求項６に記載の情報配信システム。 - 上記端末装置は、
上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報のうちから少なくとも１つの情報を選択可能な選択操作手段と、
上記選択操作手段により選択された情報を上記情報記憶手段から読み出して出力する情報出力手段と、
を備えていること特徴とする請求項７に記載の情報配信システム。 - 上記情報伝送装置及び上記端末装置の少なくとも何れか一方に表示手段が備えられ、
上記選択操作手段は、上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報のうちから所望の情報を指定するための操作に利用する操作画像を上記表示手段に対して行うように構成されている
ことを特徴とする請求項８に記載の情報配信システム。 - 上記表示手段は、
上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報の各情報を獲得するための処理が完了するごとに、これら各情報に対応する項目を上記操作画像として順次表示していくように構成されている
ことを特徴とする請求項９に記載の情報配信システム。 - 第１のオーディオ情報を、上記第１のオーディオ情報よりボーカル部を抽出したボーカル情報と、上記第１のオーディオ情報よりボーカル部を取り除いた伴奏情報とに分離する楽曲情報分離ステップと、
上記ボーカル情報について第１の言語における音声認識を行って第１の言語文字情報を生成する音声認識ステップと、
上記第１の言語文字情報について第２の言語への翻訳処理を行って第２の言語文字情報を生成する翻訳ステップと、
上記第２の言語文字情報を利用して、上記第２の言語により発音される翻訳ボーカル情報を生成する翻訳ボーカル生成ステップと、
上記翻訳ボーカル情報と上記伴奏情報を合成することにより、第２のオーディオ情報を生成する情報合成ステップと
を有する情報処理方法。 - 上記楽曲情報分離ステップ、上記音声認識ステップ、上記翻訳ステップ、及び上記情報合成ステップにより生成される情報のうち、少なくとも何れか１種類の情報を格納する情報記憶ステップ
を有する請求項１１に記載の情報処理方法。 - 上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報のうちから少なくとも１つの情報を選択する選択操作ステップと、
上記選択操作ステップにより選択された情報を出力する情報出力ステップと
を有する請求項１２に記載の情報処理方法。 - 上記伴奏情報、上記第１の言語文字情報、上記第２の言語文字情報、及び上記第２のオーディオ情報の各情報を獲得する処理が完了するごとに、これら各情報に対応する項目を順次表示していく表示ステップ
を有する請求項１３に記載の情報処理方法。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP23412797A JP3890692B2 (ja) | 1997-08-29 | 1997-08-29 | 情報処理装置及び情報配信システム |
| PCT/JP1998/003864 WO1999012152A1 (fr) | 1997-08-29 | 1998-08-28 | Dispositif et procede de traitement d'information |
| AU88872/98A AU8887298A (en) | 1997-08-29 | 1998-08-28 | Information processing device and information processing method |
| US09/297,038 US6931377B1 (en) | 1997-08-29 | 1998-08-28 | Information processing apparatus and method for generating derivative information from vocal-containing musical information |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP23412797A JP3890692B2 (ja) | 1997-08-29 | 1997-08-29 | 情報処理装置及び情報配信システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH1173192A JPH1173192A (ja) | 1999-03-16 |
| JP3890692B2 true JP3890692B2 (ja) | 2007-03-07 |
Family
ID=16966069
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP23412797A Expired - Fee Related JP3890692B2 (ja) | 1997-08-29 | 1997-08-29 | 情報処理装置及び情報配信システム |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US6931377B1 (ja) |
| JP (1) | JP3890692B2 (ja) |
| AU (1) | AU8887298A (ja) |
| WO (1) | WO1999012152A1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7778595B2 (en) | 2000-03-28 | 2010-08-17 | Affinity Labs Of Texas, Llc | Method for managing media |
| US8892465B2 (en) | 2001-06-27 | 2014-11-18 | Skky Incorporated | Media delivery platform |
Families Citing this family (41)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW495735B (en) * | 1999-07-28 | 2002-07-21 | Yamaha Corp | Audio controller and the portable terminal and system using the same |
| JP2001154964A (ja) | 1999-12-01 | 2001-06-08 | Fujitsu Ltd | データ資源を配付する方法 |
| US8151259B2 (en) | 2006-01-03 | 2012-04-03 | Apple Inc. | Remote content updates for portable media devices |
| US20050076376A1 (en) * | 2002-07-24 | 2005-04-07 | Raymond Lind | Video entertainment satellite network system |
| JP3927133B2 (ja) | 2003-03-05 | 2007-06-06 | 株式会社東芝 | 電子機器および同機器で用いられる通信制御方法 |
| US7724716B2 (en) | 2006-06-20 | 2010-05-25 | Apple Inc. | Wireless communication system |
| US7831199B2 (en) | 2006-01-03 | 2010-11-09 | Apple Inc. | Media data exchange, transfer or delivery for portable electronic devices |
| KR100555499B1 (ko) * | 2003-06-02 | 2006-03-03 | 삼성전자주식회사 | 2차 전방향 네트워크에 독립 해석 알고리즘을 이용하는반주/보이스 분리 장치 및 그 방법 |
| US8219390B1 (en) * | 2003-09-16 | 2012-07-10 | Creative Technology Ltd | Pitch-based frequency domain voice removal |
| US7706637B2 (en) * | 2004-10-25 | 2010-04-27 | Apple Inc. | Host configured for interoperation with coupled portable media player device |
| US20060112812A1 (en) * | 2004-11-30 | 2006-06-01 | Anand Venkataraman | Method and apparatus for adapting original musical tracks for karaoke use |
| US7536565B2 (en) | 2005-01-07 | 2009-05-19 | Apple Inc. | Techniques for improved playlist processing on media devices |
| US8300841B2 (en) | 2005-06-03 | 2012-10-30 | Apple Inc. | Techniques for presenting sound effects on a portable media player |
| JP2007079413A (ja) * | 2005-09-16 | 2007-03-29 | Yamaha Corp | オーディオ再生装置、オーディオ配信システム、オーディオ再生プログラムおよびオーサリングプログラム |
| US7930369B2 (en) | 2005-10-19 | 2011-04-19 | Apple Inc. | Remotely configured media device |
| US8654993B2 (en) * | 2005-12-07 | 2014-02-18 | Apple Inc. | Portable audio device providing automated control of audio volume parameters for hearing protection |
| US8255640B2 (en) | 2006-01-03 | 2012-08-28 | Apple Inc. | Media device with intelligent cache utilization |
| US20070166683A1 (en) * | 2006-01-05 | 2007-07-19 | Apple Computer, Inc. | Dynamic lyrics display for portable media devices |
| ATE440334T1 (de) * | 2006-02-10 | 2009-09-15 | Harman Becker Automotive Sys | System für sprachgesteuerte auswahl einer audiodatei und verfahren dafür |
| US7848527B2 (en) | 2006-02-27 | 2010-12-07 | Apple Inc. | Dynamic power management in a portable media delivery system |
| US8358273B2 (en) | 2006-05-23 | 2013-01-22 | Apple Inc. | Portable media device with power-managed display |
| US8341524B2 (en) | 2006-09-11 | 2012-12-25 | Apple Inc. | Portable electronic device with local search capabilities |
| US8090130B2 (en) | 2006-09-11 | 2012-01-03 | Apple Inc. | Highly portable media devices |
| US7729791B2 (en) | 2006-09-11 | 2010-06-01 | Apple Inc. | Portable media playback device including user interface event passthrough to non-media-playback processing |
| US7589629B2 (en) | 2007-02-28 | 2009-09-15 | Apple Inc. | Event recorder for portable media device |
| US7974838B1 (en) | 2007-03-01 | 2011-07-05 | iZotope, Inc. | System and method for pitch adjusting vocals |
| US8138409B2 (en) | 2007-08-10 | 2012-03-20 | Sonicjam, Inc. | Interactive music training and entertainment system |
| US8158872B2 (en) * | 2007-12-21 | 2012-04-17 | Csr Technology Inc. | Portable multimedia or entertainment storage and playback device which stores and plays back content with content-specific user preferences |
| KR101504522B1 (ko) * | 2008-01-07 | 2015-03-23 | 삼성전자 주식회사 | 음악 저장/검색 장치 및 방법 |
| JP4577402B2 (ja) * | 2008-04-28 | 2010-11-10 | ヤマハ株式会社 | 据置型のカラオケ装置、携帯カラオケ装置および携帯カラオケシステム |
| US8484026B2 (en) * | 2009-08-24 | 2013-07-09 | Pi-Fen Lin | Portable audio control system and audio control device thereof |
| US8731943B2 (en) * | 2010-02-05 | 2014-05-20 | Little Wing World LLC | Systems, methods and automated technologies for translating words into music and creating music pieces |
| JP4673444B1 (ja) * | 2010-07-27 | 2011-04-20 | アーツ・インテリジェンス株式会社 | データ通信システム、データ通信方法、データ通信制御プログラム及び赤外線通信装置 |
| KR101274961B1 (ko) * | 2011-04-28 | 2013-06-13 | (주)티젠스 | 클라이언트단말기를 이용한 음악 컨텐츠 제작시스템 |
| CN102821259B (zh) * | 2012-07-20 | 2016-12-21 | 冠捷显示科技（厦门）有限公司 | 具有多国语言语音翻译的tv系统及其实现方法 |
| US9367283B2 (en) * | 2014-07-22 | 2016-06-14 | Sonos, Inc. | Audio settings |
| CN104966527B (zh) * | 2015-05-27 | 2017-04-19 | 广州酷狗计算机科技有限公司 | K歌处理方法、装置以及k歌处理系统 |
| JP6580927B2 (ja) * | 2015-09-30 | 2019-09-25 | 株式会社エクシング | カラオケ用制御装置及びプログラム |
| KR20180063407A (ko) * | 2016-12-01 | 2018-06-12 | 조선연마공업(주) | 반주 음향 시스템 |
| JP7117228B2 (ja) * | 2018-11-26 | 2022-08-12 | 株式会社第一興商 | カラオケシステム、カラオケ装置 |
| CN111161695B (zh) * | 2019-12-26 | 2022-11-04 | 北京百度网讯科技有限公司 | 歌曲生成方法和装置 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4852170A (en) * | 1986-12-18 | 1989-07-25 | R & D Associates | Real time computer speech recognition system |
| JPH03106673A (ja) * | 1989-09-20 | 1991-05-07 | Fujitsu General Ltd | オーディオ装置 |
| JPH04107298U (ja) * | 1991-02-28 | 1992-09-16 | 株式会社ケンウツド | カラオケ装置 |
| JP2800465B2 (ja) * | 1991-05-27 | 1998-09-21 | ヤマハ株式会社 | 電子楽器 |
| JP2586708Y2 (ja) * | 1991-08-28 | 1998-12-09 | 株式会社ケンウッド | カラオケ装置 |
| SE9301596L (sv) * | 1993-05-10 | 1994-05-24 | Televerket | Anordning för att öka talförståelsen vid översätttning av tal från ett första språk till ett andra språk |
| JPH06324677A (ja) * | 1993-05-13 | 1994-11-25 | Kawai Musical Instr Mfg Co Ltd | 電子楽器の歌詞入力装置 |
| US5613909A (en) * | 1994-07-21 | 1997-03-25 | Stelovsky; Jan | Time-segmented multimedia game playing and authoring system |
| JP3144273B2 (ja) * | 1995-08-04 | 2001-03-12 | ヤマハ株式会社 | 自動歌唱装置 |
| JPH0981175A (ja) * | 1995-09-14 | 1997-03-28 | Toyo Commun Equip Co Ltd | 音声規則合成装置 |
| JPH09121325A (ja) * | 1995-10-26 | 1997-05-06 | Toshiba Emi Ltd | 光ディスク及びこれを用いたテロップ表示方法並びに再生装置 |
-
1997
- 1997-08-29 JP JP23412797A patent/JP3890692B2/ja not_active Expired - Fee Related
-
1998
- 1998-08-28 WO PCT/JP1998/003864 patent/WO1999012152A1/ja active Application Filing
- 1998-08-28 AU AU88872/98A patent/AU8887298A/en not_active Abandoned
- 1998-08-28 US US09/297,038 patent/US6931377B1/en not_active Expired - Fee Related
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9094802B2 (en) | 2000-03-28 | 2015-07-28 | Affinity Labs Of Texas, Llc | System and method to communicate targeted information |
| US8521140B2 (en) | 2000-03-28 | 2013-08-27 | Affinity Labs Of Texas, Llc | System and method for communicating media content |
| US7778595B2 (en) | 2000-03-28 | 2010-08-17 | Affinity Labs Of Texas, Llc | Method for managing media |
| US8359007B2 (en) | 2000-03-28 | 2013-01-22 | Affinity Labs Of Texas, Llc | System and method for communicating media center |
| US10341403B2 (en) | 2000-03-28 | 2019-07-02 | Affinity Labs Of Texas, Llc | System to communicate media |
| US8532641B2 (en) | 2000-03-28 | 2013-09-10 | Affinity Labs Of Texas, Llc | System and method for managing media |
| US8554191B2 (en) | 2000-03-28 | 2013-10-08 | Affinity Labs Of Texas, Llc | System and method for managing media |
| US7953390B2 (en) | 2000-03-28 | 2011-05-31 | Affinity Labs Of Texas, Llc | Method for content delivery |
| US9923944B2 (en) | 2000-03-28 | 2018-03-20 | Affinity Labs Of Texas, Llc | System to communicate media |
| US9621615B2 (en) | 2000-03-28 | 2017-04-11 | Affinity Labs Of Texas, Llc | System to communicate media |
| US9444868B2 (en) | 2000-03-28 | 2016-09-13 | Affinity Labs Of Texas, Llc | System to communicate media |
| US8688085B2 (en) | 2000-03-28 | 2014-04-01 | Affinity Labs Of Texas, Llc | System and method to communicate targeted information |
| US7970379B2 (en) | 2000-03-28 | 2011-06-28 | Affinity Labs Of Texas, Llc | Providing broadcast content |
| US9124717B2 (en) | 2001-06-27 | 2015-09-01 | Skky Incorporated | Media delivery platform |
| US9037502B2 (en) | 2001-06-27 | 2015-05-19 | Skky Incorporated | Media delivery platform |
| US9124718B2 (en) | 2001-06-27 | 2015-09-01 | Skky Incorporated | Media delivery platform |
| US9203956B2 (en) | 2001-06-27 | 2015-12-01 | Skky Incorporated | Media delivery platform |
| US9203870B2 (en) | 2001-06-27 | 2015-12-01 | Skky Incorporated | Media delivery platform |
| US9215310B2 (en) | 2001-06-27 | 2015-12-15 | Skky Incorporated | Media delivery platform |
| US9219810B2 (en) | 2001-06-27 | 2015-12-22 | Skky Incorporated | Media delivery platform |
| US9319516B2 (en) | 2001-06-27 | 2016-04-19 | Skky, Llc | Media delivery platform |
| US8972289B2 (en) | 2001-06-27 | 2015-03-03 | Skky Incorporated | Media delivery platform |
| US8908567B2 (en) | 2001-06-27 | 2014-12-09 | Skky Incorporated | Media delivery platform |
| US8892465B2 (en) | 2001-06-27 | 2014-11-18 | Skky Incorporated | Media delivery platform |
| US9118693B2 (en) | 2001-06-27 | 2015-08-25 | Skky Incorporated | Media delivery platform |
Also Published As
| Publication number | Publication date |
|---|---|
| AU8887298A (en) | 1999-03-22 |
| WO1999012152A1 (fr) | 1999-03-11 |
| US6931377B1 (en) | 2005-08-16 |
| JPH1173192A (ja) | 1999-03-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3890692B2 (ja) | 情報処理装置及び情報配信システム | |
| TW495735B (en) | Audio controller and the portable terminal and system using the same | |
| JP3662969B2 (ja) | カラオケシステム | |
| US6084168A (en) | Musical compositions communication system, architecture and methodology | |
| KR100769325B1 (ko) | 정보분배시스템, 정보처리 단말장치, 정보센터및 정보분배방법 | |
| US6385581B1 (en) | System and method of providing emotive background sound to text | |
| EP1019905A1 (en) | Personalized audio information delivery system | |
| JPH0574078B2 (ja) | ||
| JPH11109991A (ja) | マンマシンインターフェースシステム | |
| JP2003521005A (ja) | 単一またはいくつかのリンクされたワークステーションを用いる、音楽を表示するための装置 | |
| JP4471640B2 (ja) | 音楽再生装置 | |
| JP2020086314A (ja) | カラオケシステム | |
| JP4171680B2 (ja) | 音楽再生装置の情報設定装置、情報設定方法、及び情報設定プログラム | |
| JP5786431B2 (ja) | 端末装置およびサーバ装置 | |
| JP2002082678A (ja) | カラオケ端末装置 | |
| KR100264390B1 (ko) | 노래 반주기의 가수사진 표시 방법 | |
| JP4319054B2 (ja) | 利用者の声域を追跡的に分析して演奏キーに反映させる通信カラオケ応用システム | |
| JP4114344B2 (ja) | カラオケデータ再生装置 | |
| JP4141519B2 (ja) | カラオケ装置 | |
| JP3855290B2 (ja) | カラオケ装置 | |
| JP4011146B2 (ja) | 通信カラオケシステム | |
| JP2003140677A (ja) | 読み上げシステム | |
| JPH10288993A (ja) | 声帯模写機能付きカラオケ装置 | |
| JP3796695B2 (ja) | 通信カラオケシステム及び通信カラオケ装置 | |
| JP4410205B2 (ja) | カラオケシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040121 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040121 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060613 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060807 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060905 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060912 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20061114 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20061127 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091215 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101215 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111215 Year of fee payment: 5 |
|
| LAPS | Cancellation because of no payment of annual fees |