JP2004266576A

JP2004266576A - Media data storage apparatus, and media data storage processing program

Info

Publication number: JP2004266576A
Application number: JP2003054832A
Authority: JP
Inventors: Yoshiyuki Murata; 嘉行村田; Takashi Koshiro; 孝湖城
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2003-02-28
Filing date: 2003-02-28
Publication date: 2004-09-24

Abstract

<P>PROBLEM TO BE SOLVED: To provide a media data storage apparatus capable of acquiring media data via the Internet prior to synchronous reproduction of a variety of media. <P>SOLUTION: URLs (user requirement languages) (HP addresses) indicating Internet sites A30a/B30b/C30c for storing each of media data (caption text data/voice data/image data) to be synchronously reproduced which has time information of a reproduction speed in advance are described, correlating to a command code "URL" to be read at every processing time unit 12c1a previously set in a time code file 12c2 of a file 12b (12c) for multimedia reproduction. By only downloading each of the media data (text/voice/image) according to its HP address in response to the command code "URL" for every processing time unit 12c1a which is set, the reproduction processing of the text/voice/image data which are not originally stored in a portable device 10 can be synchronously executed as a necessary consequence. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、テキストデータ，音声データ，画像データなどの各メディアのデータを同期して再生するためのメディアデータ記憶装置、およびメディアデータ記憶処理プログラムに関する。
【０００２】
【従来の技術】
従来、音楽，画像，テキストなどのデータを同時並行して再生する技術としては、例えばＭＰＥＧ−３により情報圧縮された音声データのフレーム毎に、当該各フレームに設けられた付加データエリアに対して、音声データに同期再生すべきテキストデータや画像データの同期情報を埋め込んでおくことにより、例えばカラオケの場合では、カラオケ音声とそのイメージ画像および歌詞のテキストを同期再生するものがある。
【０００３】
しかしながら、このように従来行われているＭＰＥＧデータの付加データエリアを利用した複数種類のデータの同期再生技術では、同期情報の埋め込みが主たるＭＰ３音声データの各フレーム毎の付加データエリアに規定されるため、当該ＭＰ３音声データを再生させない限り同期情報を取り出すことが出来ず、ＭＰ３データの再生を軸としてしか他の種類のデータの同期再生を行うことが出来ない。
【０００４】
このため、例えばＭＰ３音声データにテキストデータの同期情報を埋め込んだ場合に、音声データの再生を行わない期間にあっても無音声データとして音声再生処理を継続的に行っていないと同期対象データの再生を行うことが出来ない問題がある。
【０００５】
従って、従来この複数種類のデータの同期再生処理は、ＭＰ３データの再生処理をベースとして行われるため、再生装置のＣＰＵにおける処理の負荷が重くなる問題がある。
【０００６】
一方、各種のインターネットサイトのメディアで提供される様々な番組を、時間の経過情報（タイムテーブル）に従って予め設定された各ネットサイトのアドレスにアクセスしてダウンロードし、これを単に再生することで時間の経過に伴い各種メディアの番組を順次連続再生するようにしたマルチメディアの再生処理技術も考えられている。（例えば、特許文献１参照。）
【０００７】
【特許文献１】
特開２００２−２６１７１５号公報
【０００８】
【発明が解決しようとする課題】
しかしながら、このようなマルチメディアの再生処理技術にあっても、あくまで音声，テキスト，画像の各データが前記ＰＭ３データなどをベースとして既に同期付けされている番組データそのものを再生処理するものであり、前記同様に再生装置のＣＰＵにおける処理の負荷が重くなる問題が有るばかりか、同期再生すべき音声，テキスト，画像の各データは常に同期付けられて一体化されており、複数種類のメディアのデータを組み合わせて同期再生することはできない。
【０００９】
本発明は、前記のような問題に鑑みてなされたもので、複数種類のメディアの同期再生に先立ってそのメディアデータをインターネット経由で取得することが可能になるメディアデータ記憶装置、およびメディアデータ記憶処理プログラムを提供することを目的とする。
【００１０】
【課題を解決するための手段】
すなわち、本発明の請求項１に係るメディアデータ記憶装置では、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段を有し、この記憶手段により記憶された各メディアのＵＲＬに対応付けられたメディアのデータが複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得される。
【００１１】
これによれば、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ取得手段により取得された各メディアのデータを迅速且つ確実に同期再生させることができることになる。
【００１２】
また、本発明の請求項２に係るメディアデータ記憶装置では、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段を有し、この記憶手段により記憶された各メディアのＵＲＬに対応付けられて記憶装置に記憶されている複数種類のメディアのデータが複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得され、メディアデータ記憶手段により記憶される。
【００１３】
これによれば、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ記憶手段により記憶された各メディアのデータを迅速且つ確実に同期再生させることができることになる。
【００１４】
また、本発明の請求項３に係るメディアデータ記憶装置では、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段を有し、メディアデータ取得手段によって、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられたメディアのデータがインターネット経由で取得される。
【００１５】
これによれば、各メディアのネットサイト上から同期再生すべき各種のデータを、設定経過時間に応じて各サイトのＵＲＬに従い順次取り込み、この取り込んだ複数メディアのデータを迅速且つ確実に同期再生させることができることになる。
【００１６】
また、本発明の請求項４に係るメディアデータ記憶装置では、前記請求項１または請求項２に係るメディアデータ記憶装置にあって、前記記憶手段は、複数種類のメディアのデータが同期再生されるように当該各メディア毎に予め経過時間を設定して配列された制御命令に、各メディアのＵＲＬを対応付けて記憶する制御命令記憶手段とされる。
【００１７】
これによれば、制御命令記憶手段により記憶された設定経過時間毎の制御命令に従い、これに対応付けられたＵＲＬにより各メディアのネットサイト上から同期再生すべき各種のデータを取り込み、この取り込んだ複数メディアのデータを迅速且つ確実に同期再生させることができることになる。
【００１８】
また、本発明の請求項５に係るメディアデータ記憶装置では、前記請求項１乃至請求項４の何れか１項に係るメディアデータ記憶装置にあって、前記複数種類のメディアのデータにはテキストデータが含まれ、このテキストデータは予め他の種類のメディアのデータとの同期再生のための時間情報を有する。
【００１９】
これによれば、各メディアのネットサイト上から取り込まれた同期再生すべき各種のデータのうち、テキストデータについては当該テキストデータに含まれる同期再生のための時間情報に従い、他の種類のメディアのデータと共に迅速且つ確実に同期再生させることができることになる。
【００２０】
また、本発明の請求項６に係るメディアデータ記憶装置では、前記請求項１または請求項２に係るメディアデータ記憶装置にあって、前記記憶手段は、複数種類のメディアの少なくともテキストを含むデータが同期再生されるように当該各メディア毎に予め経過時間を設定して配列された制御命令に、各メディアのＵＲＬを対応付けて記憶すると共に、前記テキストデータに対する表示制御命令を記憶する制御命令記憶手段とされる。
【００２１】
これによれば、各メディアのネットサイト上から取り込まれた同期再生すべき各種のデータのうち、テキストデータについては制御命令記憶手段により記憶された設定経過時間毎の表示制御命令に従い、他の種類のメディアのデータと共に迅速且つ確実に同期再生させることができることになる。
【００２２】
また、本発明の請求項７に係るメディアデータ記憶装置では、前記請求項１乃至請求項６の何れか１項に係るメディアデータ記憶装置にあって、前記複数種類のメディアのデータには複数の言語からなるデータが用意され、前記記憶手段により記憶されるＵＲＬは言語の指定記号を含み、前記メディアデータ取得手段は、前記記憶手段により記憶された各メディアのＵＲＬに対応付けられたメディアの指定の言語のデータをインターネット経由で取得する。
【００２３】
これによれば、指定の言語からなる各メディアのデータも単にＵＲＬで指定された各ネットサイトから取り込むだけで、言語の指定された複数メディアのデータも迅速且つ確実に同期再生させることができることになる。
【００２４】
また、本発明の請求項８に係るメディアデータ記憶処理プログラムによれば、当該プログラムをメディアデータ記憶装置にインストールすることで、このメディアデータ記憶装置のコンピュータにおいて、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、この記憶手段により記憶された各メディアのＵＲＬに対応付けられたメディアのデータが複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得される。
【００２５】
これによれば、メディアデータ記憶装置では、記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ取得手段により取得された各メディアのデータを迅速且つ確実に同期再生させることができることになる。
【００２６】
また、本発明の請求項９に係るメディアデータ記憶処理プログラムによれば、当該プログラムをメディアデータ記憶装置にインストールすることで、このメディアデータ記憶装置のコンピュータにおいて、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、この記憶手段により記憶された各メディアのＵＲＬに対応付けられて記憶装置に記憶されている複数種類のメディアのデータが複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得され、メディアデータ記憶手段により記憶される。
【００２７】
これによれば、メディアデータ記憶装置では、記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ記憶手段により記憶された各メディアのデータを迅速且つ確実に同期再生させることができることになる。
【００２８】
また、本発明の請求項１０に係るメディアデータ記憶処理プログラムによれば、当該プログラムをメディアデータ記憶装置にインストールすることで、このメディアデータ記憶装置のコンピュータにおいて、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、メディアデータ取得手段によって、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられたメディアのデータがインターネット経由で取得される。
【００２９】
これによれば、メディアデータ記憶装置では、各メディアのネットサイト上から同期再生すべき各種のデータを、設定経過時間に応じて各サイトのＵＲＬに従い順次取り込み、この取り込んだ複数メディアのデータを迅速且つ確実に同期再生させることができることになる。
【００３０】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について説明する。
【００３１】
（第１実施形態）
図１は、本発明のメディアデータ記憶装置の実施形態に係る携帯機器１０を備えたマルチメディア記憶再生システムの全体の構成を示す図である。
【００３２】
このマルチメディア記憶再生システムは、例えばＰＤＡ（ｐｅｒｓｏｎａｌｄｉｇｉｔａｌａｓｓｉｓｔａｎｔｓ）などの携帯機器１０をマルチディア再生用の端末装置とし、通信ネットワーク（インターネット）Ｎを介してアクセス可能なサーバ３０や各種メディアのネットサイト３０ａ〜３０ｃにより提供される種々のデータを選択的にダウンロードして同期再生する。
【００３３】
例えばサーバ３０から提供されるマルチメディアの再生用ファイル（ＣＡＳファイル）（図３参照）に記述されたコマンドコードとＵＲＬ（ｕｎｉｆｏｒｍｒｅｓｏｕｒｃｅｌｏｃａｔｏｒ）に従い、ネットサイトＡ３０ａから所定のテキストデータを、ネットサイトＢ３０ｂから所定の音声データを、ネットサイトＣ３０ｃから所定の画像データをダウンロードし、同期再生の処理を行う。
【００３４】
携帯機器（ＰＤＡ）１０は、各種の記録媒体に記録されたプログラム、又は、通信伝送されたプログラムを読み込んで、その読み込んだプログラムによって動作が制御されるコンピュータによって構成され、その電子回路には、ＣＰＵ（ｃｅｎｔｒａｌｐｒｏｃｅｓｓｉｎｇｕｎｉｔ）１１が備えられる。
【００３５】
ＣＰＵ１１は、メモリ１２内のＲＯＭ１２Ａに予め記憶されたＰＤＡ制御プログラム、あるいはＲＯＭカードなどの外部記録媒体１３から記録媒体読取部１４を介して前記メモリ１２に読み込まれたＰＤＡ制御プログラム、あるいはインターネットなどの通信ネットワークＮ上の他のコンピュータ端末（３０）から電送制御部１５を介して前記メモリ１２に読み込まれたＰＤＡ制御プログラムに応じて、回路各部の動作を制御するもので、前記メモリ１２に記憶されたＰＤＡ制御プログラムは、キー入力部１７ａからのユーザ操作に応じたキー入力信号、マウスやタブレットからなる座標入力装置１７ｂからのユーザ操作に応じた座標入力信号、あるいは電送制御部１５に受信される通信ネットワークＮ上の他のコンピュータ端末（３０，３０ａ〜３０ｃ）からの通信信号、あるいはＢｌｕｅｔｏｏｔｈ（Ｒ）による近距離無線接続や有線接続による通信部１６を介して受信される外部の通信機器（ＰＣ：ｐｅｒｓｏｎａｌｃｏｍｐｕｔｅｒ）２０からの通信信号に応じて起動される。
【００３６】
前記ＣＰＵ１１には、前記メモリ１２、記録媒体読取部１４、電送制御部１５、通信部１６、キー入力部１７ａ、座標入力装置１７ｂが接続される他に、ＬＣＤからなる表示部１８、マイクを備え音声を入力する音声入力部１９ａ、スピーカを備え音声を出力する音声出力部１９ｂなどが接続される。
【００３７】
また、ＣＰＵ１１には、処理時間計時用のタイマが内蔵される。
【００３８】
この携帯機器１０のメモリ１２は、ＲＯＭ１２Ａ、ＦＬＡＳＨメモリ（ＥＥＰ−ＲＯＭ）１２Ｂ、ＲＡＭ１２Ｃを備えて構成される。
【００３９】
ＲＯＭ１２Ａには、当該携帯機器１０の全体の動作を司るシステムプログラムや電送制御部１５を介して通信ネットワークＮ上の各コンピュータ端末（３０，３０ａ〜３０ｃ）とデータ通信するためのネット通信プログラム、通信部１６を介して外部の通信機器（ＰＣ）２０とデータ通信するための外部機器通信プログラムが記憶される他に、スケジュール管理プログラムやアドレス管理プログラム、そしてテキストデータの表示部１８への表示／音声データの音声出力部１９ｂからの音声出力／画像データの表示部１８への表示をそれぞれ独立に行うための各駆動プログラムである（テキスト／音声／画像）出力用プログラム１２ａ１、各種メディアにより提供される音声／テキスト／画像などのデータを同期再生するためのメディア同期再生処理プログラム１２ａ２など、種々のＰＤＡ制御プログラムが記憶される。
【００４０】
ＦＬＡＳＨメモリ（ＥＥＰ−ＲＯＭ）１２Ｂには、前記メディア同期再生処理プログラム１２ａ２に基づき再生処理の対象となる例えば外国語会話テキスト用の暗号化されたマルチメディアの再生用ファイル（ＣＡＳファイル）１２ｂが記憶される他に、前記スケジュール管理プログラムやアドレス管理プログラムに基づき管理されるユーザのスケジュール及び友人・知人のアドレスなどが記憶される。
【００４１】
ここで、前記ＦＬＡＳＨメモリ（ＥＥＰ−ＲＯＭ）１２Ｂ内に記憶される暗号化マルチメディア再生用ファイル１２ｂは、例えば外国語会話の練習を各種メディアのネットサイト３０ａ〜３０ｃから選択的にダウンロードしたテキスト・音声・画像の同期再生により行うためのファイルであり、所定のアルゴリズムにより圧縮・暗号化されている。
【００４２】
この暗号化再生用ファイル１２ｂは、例えばＣＤ−ＲＯＭに記録されて配布されたり、通信ネットワーク（インターネット）Ｎ上のファイル配信サーバ３０から配信配布されたりするもので、前記ＣＤ−ＲＯＭあるいはネットサーバ（３０）により配布された暗号化再生用ファイル１２ｂは、例えばユーザ自宅ＰＣとしての通信機器（ＰＣ）２０に読み込まれた後、携帯機器（ＰＤＡ）１０の通信部１６を介してＦＬＡＳＨメモリ（ＥＥＰ−ＲＯＭ）１２Ｂに転送格納される。
【００４３】
ＲＡＭ１２Ｃには、前記暗号化された再生用ファイル１２ｂを伸張・復号化した解読されたマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃが記憶されると共に、この解読再生ファイル１２ｃの中の画像ファイルが展開されて記憶される画像展開バッファ１２ｅが備えられる。解読されたＣＡＳファイル１２ｃは、再生命令の処理単位時間（１２ｃ１ａ）を記憶するヘッダ情報（１２ｃ１）、および後述するタイムコードファイル（１２ｃ２）、メディア内容データ（１２ｃ３）で構成される。
【００４４】
このメディア内容データ（１２ｃ３）は、タイムコードファイル（１２ｃ２）のコマンドコードに対応して記述されたＵＲＬ（ｕｎｉｆｏｒｍｒｅｓｏｕｒｃｅｌｏｃａｔｏｒ）に従って、ネットサイトＡ３０ａ〜Ａ３０ｃから別々にダウンロードされた同期再生用の時間情報を含むテキストデータ、音声データ、画像データである。これらのメディア内容データ（１２ｃ３）であるテキストデータ、音声データ、画像データは、タイムコードファイル（１２ｃ２）の各対応するコマンドコード“ＵＲＬ”に従い再生が指示され、前記（テキスト／音声／画像）出力用プログラム１２ａ１によって再生処理される。
【００４５】
そして、ＲＡＭ１２Ｃには、例えば外国語会話テキストの学習内容の指定データおよびその言語（英語／独語／仏語／…）の指定データである（学習／言語）指定データ１２ｄが記憶される。
【００４６】
さらに、ＲＡＭ１２Ｃには、その他各種の処理に応じてＣＰＵ１１に入出力される種々のデータを一時記憶するためワークエリアが用意される。
【００４７】
図２は前記マルチメディア記憶再生システムにおける第１実施形態の各メディアのネットサイト３０ａ〜３０ｃにて提供されるデータ内容を示す図であり、同図（Ａ）はサイトＡ３０ａにて用意された外国語会話練習用の字幕テキストデータを示す図、同図（Ｂ）はサイトＢ３０ｂにて用意された外国語会話練習用の音声データを示す図、同図（Ｃ）はサイトＣ３０ｃにて用意された外国語会話練習用の画像データを示す図である。
【００４８】
図２（Ａ）に示すように、ネットサイトＡ３０ａ＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ＞にて用意されたテキストデータは、例えば各外国語会話練習テキストが同一のテキスト内容であり、使用言語毎に各対応する文字のテキストデータが用意されるもので、ユーザにより任意に指定される使用言語の種類は例えば英語／独語／仏語に分けられ、各言語毎のデータは１センテンス毎に異なるＵＲＬに対応付けられて格納される。なお、このテキストデータは、携帯機器１０にダウンロードされた場合、前記テキスト出力用プログラム１２ａ１によって再生表示され、再生開始からの所定速度の練習時間経過に応じてそのテキスト文字列を順次反転表示させるための時間情報（→…）を含んでいる。この文字列反転表示用の時間情報を含んだテキストデータのＵＲＬには、字幕を意味する”ｃａｐｔｉｏｎ”の頭文字”ｃ”が付加され”…ｃｔｘｔ”とされる。また、同ＵＲＬには、指定言語に応じた頭文字ｅ（英語），ｇ（独語），ｆ（仏語）が付加され、例えば会話テキスト７−１の英語版は”…ｅｋａｉｗａ７−１．ｃｔｅｘｔ”、同７−１の独語版は”…ｇｋａｉｗａ７−１．ｃｔｅｘｔ”とされる。
【００４９】
図２（Ｂ）に示すように、ネットサイトＢ３０ｂ＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ＞にて用意された音声データは、前記サイトＡ３０ａにて用意された各外国語会話練習テキストの各テキストデータに対応する読み上げ音声データであり、各音声データのＵＲＬはそのデータ形式を示す部分のみ”ｍｐ３”として異なり、例えば会話テキスト７−１の英語版音声データは”…ｅｋａｉｗａ７−１．ｍｐ３”、同７−１の独語版音声データは”…ｇｋａｉｗａ７−１．ｍｐ３”とされる。
【００５０】
そして、この音声データにあっても、再生開始からの所定速度の練習時間経過に応じて前記テキストデータの反転表示に合うように、前記音声出力用プログラム１２ａ１によって当該音声データを再生出力させるための時間情報を含んでいる。
【００５１】
図２（Ｃ）に示すように、ネットサイトＢ３０ｃ＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ＞にて用意された画像データは、前記サイトＡ３０ａおよびサイトＢ３０ｂにて用意された各外国語会話練習テキストの各国語会話用に共通する動画の画像データであり、例えばテキスト７−１用には女性が会話している状態を示す画像データが、テキスト７−２用には男性が会話している状態を示す画像データが用意される。そして、各画像データのＵＲＬには、その指定言語の種類を示す頭文字ｅ（英語），ｇ（独語），ｆ（仏語）は付加されず、データ形式を示す部分のみ”ｍｐｅｇ”として異なり、例えば会話テキスト７−１の画像データは”…ｋａｉｗａ７−１．ｍｐｅｇ”、７−２の画像データは”…ｋａｉｗａ７−２．ｍｐｅｇ”とされる。
【００５２】
そして、この画像データにあっても、再生開始からの所定速度の練習時間経過に応じて前記テキストデータの反転表示および音声データの出力に合うように、前記画像出力用プログラム１２ａ１によって当該画像データを再生表示させるための時間情報を含んでいる。
【００５３】
これらの各ネットサイト３０ａ〜３０ｃに用意された例えば外国語会話練習テキストのテキストデータ、音声データ、画像データは、携帯機器１０でのマルチメディア再生用ファイル（ＣＡＳ）１２ｃにおけるタイムコードファイル１２ｃ２に従ったマルチメディア再生処理に伴い、当該携帯機器１０にダウンロードされてメディア内容データ１２ｃ３として格納され、各種データに応じた（テキスト／音声／画像）出力用プログラム１２ａ１に従って同期再生される。
【００５４】
図３は前記携帯機器１０のメモリ１２に格納された第１実施形態のマルチメディア再生用ファイル１２ｂ（１２ｃ）を構成するタイムコードファイル１２ｃ２を示す図である。
【００５５】
この携帯機器１０の再生対象ファイルとなるマルチメディア再生用ファイル１２ｂ（１２ｃ）は、タイムコードファイル１２ｃ２とメディア内容データ１２ｃ３との組み合わせにより構成される。
【００５６】
図３で示すタイムコードファイル１２ｃ２には、個々のメディアデータ毎に予め設定される一定時間間隔（例えば２５ｍｓ）で各種データ同期再生のコマンド処理を行うためのタイムコードが記述配列されるもので、この各タイムコードは、命令を指示するコマンドコードと、当該コマンドに関わるメディアデータの内容（図２参照）を対応付けするためのパラメータデータ、各メディアデータの取得先であるネットサイト３０ａ〜３０ｃのＵＲＬ、それと各サイト名Ａ〜Ｃ、各メディアデータの種類（字幕テキスト／音声／画像）との組み合わせにより構成される。
【００５７】
なお、このタイムコードファイル１２ｃ２がユーザによる言語指定前である場合、図３（Ｂ）に示すように、各メディアデータの取得先であるＵＲＬは、そのテキストデータのＵＲＬと音声データのＵＲＬにおいて、指定言語を示す記号部分が「＊」で記述され、例えば会話テキスト７−１のテキストデータのＵＲＬは＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／＊ｋａｉｗａ７−１．ｃｔｘｔ＞として言語未指定のＵＲＬとなる。そして、言語指定が行われた場合、図３（Ｃ）に示すように、前記指定言語の記号部分「＊」が当該指定の言語に応じた記号（英語「ｅ」、独語「ｇ」、仏語「ｆ」…）に変換され、例えば英語を指定言語とした場合には、前記会話テキスト７−１のテキストデータのＵＲＬは＜…ｅｋａｉｗａ７−１．ｃｔｘｔ＞に変換される。これにより、ユーザ指定の学習データ，指定言語である英会話テキスト７−１のテキストデータを、ネットサイトＡ３０ａから取得可能とする。
【００５８】
また、このタイムコードファイル１２ｃ２に従い順次コマンド処理を行うための一定時間間隔は、図３（Ａ）に示すように、当該タイムコードファイル１２ｃ２のヘッダ情報１２ｃ１に処理単位時間１２ｃ１ａとして記述設定される。
【００５９】
そして、メディア内容データ１２ｃ３としては、前記タイムコードファイル１２ｃ２に記述された各ＵＲＬに対応するメディアのネットサイトＡ３０ａ〜Ｃ３０ｃからダウンロードされた、ユーザ指定の学習データで且つ指定言語の同期再生用のテキストデータ、音声データ、画像データが記憶される。
【００６０】
タイムコードファイル１２ｃ２に使用されるコマンドとしては、例えばＵＲＬ（ＵＲＬメディアデータの再生指示），ＦＮ（処理終了），ＮＰ（無効）などの各コマンドがある。
【００６１】
すなわち、この携帯機器（ＰＤＡ）１０のＲＯＭ１２Ａに記憶されているメディア同期再生処理プログラム１２ａ２を起動させて、ＦＬＡＳＨメモリ１２Ｂから解読されＲＡＭ１２ｃに記憶された解読マルチメディア再生用ファイル１２ｃが、指定の学習データに応じた、例えば図３（Ａ）で示した外国語会話練習テキスト用のファイル内容であり、図３（Ｂ）で示したように、指定の言語「英語」に従ってＵＲＬの言語指定記号が変換「＊」→「ｅ」されると、当該タイムコードファイル１２ｃ２に記述されている各ＵＲＬに対応するネットサイトＡ３０ａ〜Ｃ３０ｃから英会話テキスト７−１，７−２のテキストデータ、音声データ、画像データ（図２参照）がダウンロードされ、メモリ１２内のメディア内容データ１２ｃ３として格納される。
【００６２】
そして、一定時間毎のコマンド処理に伴い１番目のコマンドコード“ＵＲＬ”が読み込まれた場合には、対応記述されたＵＲＬアドレス「…ｅｋａｉｗａ７−１．ｃｔｘｔ」に従い前記メディア内容データ１２ｃ３として格納された英会話テキスト７−１のテキストデータが読み出され、テキスト出力用プログラム１２ａ１に対してその表示処理が指示される。
【００６３】
また、同一定時間毎のコマンド処理に伴い２番目のコマンドコード“ＵＲＬ”が読み込まれた場合には、対応記述されたＵＲＬアドレス「…ｅｋａｉｗａ７−１．ｍｐ３」に従い前記メディア内容データ１２ｃ３として格納された英会話テキスト７−１の音声データが読み出され、音声出力用プログラム１２ａ１に対してその音声出力処理が指示される。
【００６４】
さらに、同一定時間毎のコマンド処理に伴い３番目のコマンドコード“ＵＲＬ”が読み込まれた場合には、対応記述されたＵＲＬアドレス「…ｋａｉｗａ７−１．ｍｐｅｇ」に従い前記メディア内容データ１２ｃ３として格納された英会話テキスト７−１の画像データが読み出され、画像出力用プログラム１２ａ１に対してその表示処理が指示される。
【００６５】
そして、前記メディア内容データ１２ｃ３から読み出されて再生処理される英会話テキストのテキストデータ、音声データ、画像データには、何れのデータにも、予め設定された時間間隔で再生開始することで、その相互に出力経過時間が合うようにした同期時間情報が予め含まれており、タイムコードファイル１２ｃ２上で予め時間経過を設定した各コマンドコード“ＵＲＬ”に従って（テキスト／音声／画像）出力用プログラム１２ａ１による再生処理が開始されるので、メディア同期再生処理プログラム１２ａ２では、ＣＰＵ１１によって特に同期付けのタイミング合わせ制御を行わなくとも、必然的に同期制御されて再生されることになる。
【００６６】
なお、この図３で示したマルチメディア再生用ファイル１２ｂ（１２ｃ）についての詳細な再生動作は、後述にて改めて説明する。
【００６７】
次に、前記構成のマルチメディア記憶再生システムの携帯機器１０による第１実施形態のメディア再生機能について説明する。
【００６８】
図４は前記携帯機器１０の第１実施形態のメディア同期再生処理プログラム１２ａ２に従った第１のマルチメディア再生処理を示すフローチャートである。
【００６９】
例えば外国語会話の練習をテキストと音声と画像のマルチメディアの同期再生によって行う際に、入力部１７ａあるいは座標入力装置１７ｂの操作によりユーザ所望の学習データ（例えば外国語会話学習）が指定されると（ステップＳ１）、例えばＣＤ−ＲＯＭから自宅ＰＣである通信機器（ＰＣ）２０に取り込まれた当該指定の学習データの暗号化されたマルチメディア再生ファイル（タイムコードファイル１２ｃ２含む）１２ｂは、携帯機器（ＰＤＡ）１０の通信部１６を介して読み込まれＦＬＡＳＨメモリ１２Ｂに格納されるか、または通信ネットワーク（インターネット）Ｎ上のサーバ３０から電送制御部１５を介してダウンロードされ、ＦＬＡＳＨメモリ１２Ｂに格納される（ステップＳ２）。
【００７０】
この際、ＦＬＡＳＨメモリ１２Ｂに格納された暗号化マルチメディア再生用ファイル（ＣＡＳファイル）１２ｂは、解読復号化され、例えば図３（Ａ）（Ｂ）で示した言語指定変換前のタイムコードファイル１２ｃ２を伴い、ＲＡＭ１２Ｃに転送されて格納される。
【００７１】
そして、この外国語会話の学習データについて、練習したい言語（英語／独語／仏語／…）が選択されて指定されると（ステップＳ３）、当該指定の言語が判断され（ステップＳ４）、「英語」が指定された場合には前記ＲＡＭ１２Ｃに格納された指定の会話学習データのマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃにおけるタイムコードファイル１２ｃ２の中のテキストデータおよび音声データに対応する各ＵＲＬ上の言語未指定記号「＊」が、図３（Ｃ）に示すように、英語指定記号「ｅ」に変換修正される（ステップＳ５ｅ）。
【００７２】
また、「独語」が指定された場合には前記ＲＡＭ１２Ｃに格納されたタイムコードファイル１２ｃ２の中のテキストデータおよび音声データに対応する各ＵＲＬ上の言語未指定記号「＊」が、独語指定記号「ｇ」に変換修正される（ステップＳ４→Ｓ５ｇ）。
【００７３】
さらに、「仏語」が指定された場合には前記ＲＡＭ１２Ｃに格納されたタイムコードファイル１２ｃ２の中のテキストデータおよび音声データに対応する各ＵＲＬ上の言語未指定記号「＊」が、仏語指定記号「ｆ」に変換修正される（ステップＳ５ｆ）。
【００７４】
こうして、ユーザ指定の言語（例えば「英語」）に応じて、前記指定の会話学習データのマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃにおけるタイムコードファイル１２ｃ２が変換修正されると（図３（Ｃ）参照）、当該タイムコードファイル１２ｃ２上の各コマンドコード“ＵＲＬ”に対応付けられて記述されているＨＰアドレスに従い、各対応するメディアのネットサイトＡ３０ａ〜Ｃ３０ｃにアクセスされ、指定の学習データで且つ指定言語「英語」の会話学習用のテキストデータ、音声データ、および各言語共通の画像データがそれぞれダウンロードされてＲＡＭ１２Ｃ内のメディア内容データ１２ｃ３として保存される（ステップＳ６）。
【００７５】
つまり、図３（Ｃ）で示したタイムコードファイル１２ｃ２に記述されたＨＰアドレス＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｃｔｘｔ＞＜…７−２．ｃｔｘｔ＞＜…７−３．ｃｔｘｔ＞…に従って、ネットサイトＡ３０ａから図２（Ａ）で示した英語版の各字幕テキストデータ「Ｅｘｃｕｓｅｍｅ．」「ＭａｙＩｈｅｌｐｙｏｕ？」…が順次ダウンロードされ、また、ＨＰアドレス＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｍｐ３＞＜…７−２．ｍｐ３＞＜…７−３．ｍｐ３＞…に従って、ネットサイトＢ３０ｂから図２（Ｂ）で示した英語版の各音声データ「イクスキューズミー」「メイアイヘウプユー」…が順次ダウンロードされ、さらに、ＨＰアドレス＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ／ｋａｉｗａ７−１．ｍｐｅｇ＞＜…７−２．ｍｐｅｇ＞＜…７−３．ｍｐｅｇ＞…に従って、ネットサイトＣ３０ｃから図２（Ｃ）で示した各言語共通の画像データ「女性動画像」「男性動画像」…が順次ダウンロードされる。
【００７６】
すると、このＲＡＭ１２Ｃに格納されたタイムコードファイル１２ｃ２およびメディア内容データ１２ｃ３からなる解読済のマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃのヘッダ情報１２ｃ１に記述された処理単位時間１２ｃ１ａ（例えば２５ｍｓ／５０ｍｓ／…）が、ＣＰＵ１１による当該マルチメディア再生用ファイル（ＣＡＳファイル）１２ｃの一定時間間隔の読み出し時間として設定される（ステップＳ７）。
【００７７】
そして、ＲＡＭ１２Ｃに格納されたメディア再生用ファイル（ＣＡＳファイル）１２ｃの先頭に読み出しポインタがセットされ（ステップＳ８）、当該再生用ファイル１２ｃの再生処理タイミングを計時するためのタイマがスタートされる（ステップＳ９）。
【００７８】
ここで、先読み処理が当該再生処理に並行して起動される（ステップＳ１０）。
【００７９】
この先読み処理では、再生用ファイル１２ｃのタイムコードファイル１２ｃ２（図３（Ｃ）参照）に従った現在の読み出しポインタの位置のコマンド処理よりも後に画像データを表示させるためのコマンドがある場合は、予め当該画像データ表示用のコマンドのパラメータデータにより指示される画像データを先読みして画像展開バッファ１２ｅに展開しておくことで、前記読み出しポインタが実際に後の画像表示用のコマンドの位置まで移動した場合に、処理に遅れなく指定の画像ファイルを直ちに出力表示できるようにする。
【００８０】
前記ステップＳ９において、処理タイマがスタートされると、前記ステップＳ７にて設定された今回の外国語会話学習用のマルチメディア再生対象ファイル１２ｃに応じた処理単位時間毎に、前記ステップＳ８にて設定された読み出しポインタの位置の当該メディア再生用ファイル１２ｃを構成するタイムコードファイル１２ｃ２（図３参照）のコマンドコードおよびそのパラメータデータが読み出される（ステップＳ１１）。
【００８１】
そして、前記再生用ファイル１２ｃにおけるタイムコードファイル１２ｃ２（図３参照）から読み出されたコマンドコードが、“ＦＮ”か否か判断され（ステップＳ１２）、“ＦＮ”と判断された場合には、その時点で当該マルチメディア再生処理の停止処理が指示実行される（ステップＳ１２→Ｓ１３）。
【００８２】
一方、前記再生用ファイル１２ｃにおけるタイムコードファイル１２ｃ２（図３参照）から読み出されたコマンドコードが、“ＦＮ”ではないと判断された場合には、当該コマンドコードが、“ＵＲＬ”か否か判断される（ステップＳ１２→Ｓ１４）。そして、“ＵＲＬ”と判断された場合には、該当ポインタ位置のＵＲＬに対応するＨＰアドレスに従いメディア内容データ１２ｃ３として保存されているテキストデータまたは音声データまたは画像データが読み出され、そのデータの種類に応じた（テキスト／音声／画像）出力用プログラム１２ａ２によって再生開始される（ステップＳ１４→Ｓ１５Ａ）。
【００８３】
つまり、コマンドコードＵＲＬの対応ＨＰアドレスに従い、メディア内容データ１２ｃ３からテキストデータ（図２（Ａ）参照）が読み出された場合には、テキスト出力用プログラム１２ａ２によって再生表示が開始され、また、音声データ（図２（Ｂ）参照）が読み出された場合には、音声出力用プログラム１２ａ２によって再生出力が開始され、また、画像データ（図２（Ｃ）参照）が読み出された場合には、音声出力用プログラム１２ａ２によって再生出力が開始される。
【００８４】
すると、再び処理タイマによる計時動作が開始され、当該タイマによる計時時間が次の処理単位時間１２ｃ１ａに到達したか否か判断される（ステップＳ１７）。
【００８５】
一方、前記ステップＳ１４において、前記再生用ファイル１２ｃにおけるタイムコードファイル１２ｃ２（図３参照）から読み出されたコマンドコードが、“ＵＲＬ”ではないと判断された場合には、他のコマンド処理へ移行される（ステップＳ１６）。この他のコマンド処理とは、他のコマンドコードのそれぞれに応じた指令の処理である。
【００８６】
そして、ステップＳ１７において、前記タイマによる計時時間が次の処理単位時間１２ｃ１ａに到達したと判断された場合には、ＲＡＭ１２Ｃに格納されたマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃに対する読み出しポインタが次の位置に更新セットされ（ステップＳ１７→Ｓ１８）、前記ステップＳ１１における当該読み出しポインタの位置のタイムコードファイル１２ｃ２（図３参照）のコマンドコードおよびそのパラメータデータ読み出しからの処理が繰り返される（ステップＳ１８→Ｓ１１〜Ｓ１７）。
【００８７】
すなわち、携帯機器１０のＣＰＵ１１は、ＲＯＭ１２Ａに記憶されたメディア同期再生処理プログラム１２ａ２に従って、マルチメディア再生用ファイル１２ｂ（１２ｃ）に予め設定記述されているコマンド処理の単位時間毎に、タイムコードファイル１２ｃ２（図３参照）に配列されたコマンドコードおよびそのパラメータデータを読み出し、そのコマンドに対応する処理を指示するだけで、当該タイムコードファイル１２ｃ２に記述された各コマンドに応じた各種メディアデータの同期再生処理が実行される。
【００８８】
ここで、図３（Ｃ）で示す英会話学習用のマルチメディア再生ファイル１２ｃに基づいた、前記メディア同期再生処理プログラム１２ａ１（図４参照）によるテキスト・音声・画像データの同期再生出力動作について詳細に説明する。
【００８９】
図５は前記図３（Ｃ）における英会話学習用のマルチメディア再生ファイル１２ｃに基づいた英会話テキスト・音声・画像データの同期再生状態を示す図である。
【００９０】
この英会話学習用のマルチメディア再生ファイル（１２ｃ）は、そのヘッダ情報（１２ｃ１）に記述設定された処理単位時間（２５ｍｓ）（図３（Ａ））毎にコマンド処理が実行されるもので、まず、タイムコードファイル１２ｃ２（図３参照）の第１コマンドコード“ＵＲＬ”およびそのパラメータデータ“００”が読み出されると、当該第１コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｃｔｘｔ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−１の字幕テキストデータ「Ｅｘｃｕｓｅｍｅ．」（図２（Ａ）参照）が読み出され、テキスト出力用プログラム１２ａ１に対して、図５（Ａ）〜図５（Ｃ）に示すように、再生表示処理が指示される。
【００９１】
これにより、英会話テキスト７−１の字幕テキストデータ「Ｅｘｃｕｓｅｍｅ．」は、表示部１８において各文字毎に下線強調表示されながらその再生表示が開始される。
【００９２】
第２コマンドコード“ＵＲＬ”およびそのパラメータデータ“０２”が読み出されると、当該第２コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｍｐ３＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−１の音声データ「イクスキューズミー」（図２（Ｂ）参照）が読み出され、音声出力用プログラム１２ａ１に対して、同図５（Ａ）〜図５（Ｃ）に示すように、再生出力処理が指示される。
【００９３】
これにより、英会話テキスト７−１の音声データ「イクスキューズミー」は、音声出力部１９ｂにおいて順次再生出力が開始される。
【００９４】
第３コマンドコード“ＵＲＬ”およびそのパラメータデータ“０２”が読み出されると、当該第３コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ／ｋａｉｗａ７−１．ｍｐｅｇ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている会話テキスト７−１の言語共通画像データ「女性動画像」（図２（Ｃ）参照）が読み出され、画像出力用プログラム１２ａ１に対して、同図５（Ａ）〜図５（Ｃ）に示すように、再生表示処理が指示される。
【００９５】
これにより、会話テキスト７−１の言語共通画像データ「女性動画像」は、表
示部１８において順次切り替えられながら再生表示が開始される。
【００９６】
さらに、タイムコードファイル１２ｃ２（図３参照）の第５コマンドコード“ＵＲＬ”およびそのパラメータデータ“０２”が読み出されると、当該第５コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−２．ｃｔｘｔ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−２の字幕テキストデータ「ＭａｙＩｈｅｌｐｙｏｕ？」（図２（Ａ）参照）が読み出され、テキスト出力用プログラム１２ａ１に対して、図５（Ｄ）〜図５（Ｆ）に示すように、再生表示処理が指示される。
【００９７】
これにより、英会話テキスト７−２の字幕テキストデータ「ＭａｙＩｈｅｌｐｙｏｕ？」は、表示部１８において各文字毎に下線強調表示されながらその再生表示が開始される。
【００９８】
第６コマンドコード“ＵＲＬ”およびそのパラメータデータ“００”が読み出されると、当該第６コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−２．ｍｐ３＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−２の音声データ「メイアイヘウプユー」（図２（Ｂ）参照）が読み出され、音声出力用プログラム１２ａ１に対して、同図５（Ｄ）〜図５（Ｆ）に示すように、再生出力処理が指示される。
【００９９】
これにより、英会話テキスト７−２の音声データ「メイアイヘウプユー」は、音声出力部１９ｂにおいて順次再生出力が開始される。
【０１００】
第７コマンドコード“ＵＲＬ”およびそのパラメータデータ“００”が読み出されると、当該第７コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ／ｋａｉｗａ７−２．ｍｐｅｇ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている会話テキスト７−２の言語共通画像データ「男性動画像」（図２（Ｃ）参照）が読み出され、画像出力用プログラム１２ａ１に対して、同図５（Ｄ）〜図５（Ｆ）に示すように、再生表示処理が指示される。
【０１０１】
これにより、会話テキスト７−２の言語共通画像データ「男性動画像」は、表示部１８において順次切り替えられながら再生表示が開始される。
【０１０２】
この場合、前記字幕テキストデータ「Ｅｘｃｕｓｅｍｅ．」「ＭａｙＩｈｅｌｐｙｏｕ？」は、前記テキスト出力用プログラム１２ａ１により再生表示されるのに伴い、その再生開始からの所定速度の時間経過に応じて各テキスト文字列を順次反転（下線強調）表示させるための時間情報（→…）を含んでおり、また、前記音声データ「イクスキューズミー」「メイアイヘウプユー」にあっても、前記音声出力用プログラム１２ａ１により再生出力されるのに伴い、その再生開始からの所定速度の時間経過に応じて前記字幕テキストデータの反転表示に合うように当該音声データを再生出力させるための時間情報を含んでおり、さらに、言語共通画像データ「女性動画像」「男性動画像」にあっても、前記画像出力用プログラム１２ａ１により再生表示されるのに伴い、その再生開始からの所定速度の時間経過に応じて前記字幕テキストデータの反転表示および音声データの出力に合うように当該画像データを切り替え再生表示させるための時間情報を含んでいるので、マルチメディア再生用ファイル１２ｂ（１２ｃ）に予め設定記述されているコマンド処理の基準単位時間（２５ｍｓ／５０ｍｓ）毎に、タイムコードファイル１２ｃ２に配列されたコマンドコードおよびそのパラメータデータを読み出し、そのＵＲＬコマンドに対応して読み出される各メディアデータの再生処理を指示するだけで、当該タイムコードファイル１２ｃ２に記述されたＵＲＬアドレスに従いダウンロードした会話学習用のテキスト・音声・画像データの同期再生処理を実行できる。
【０１０３】
従って、ＣＰＵのメイン処理の負担が軽くなり、例えば携帯機器（ＰＤＡ）１０という処理能力の比較的小さいＣＰＵでも容易にテキスト・画像・音声を含む複数種類のネットメディアデータの同期再生処理が行えるので、高性能なＣＰＵを用いない簡単な再生装置でも、これを実現できるようになる。
【０１０４】
図６は前記図３（Ｂ）における外国語会話学習用のマルチメディア再生ファイル１２ｃに対して独語を言語指定した場合の独語会話テキスト・音声・画像データの同期再生状態を示す図である。
【０１０５】
外国語会話学習用テキストの指定言語として独語を指定した場合には、ＲＡＭ１２Ｃに格納されたタイムコードファイル１２ｃ２の中のテキストデータおよび音声データに対応する各ＵＲＬ上の言語未指定記号「＊」が、独語指定記号「ｇ」に変換修正され（ステップＳ４→Ｓ５ｇ）、この独語指定修正後のＨＰアドレス＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／ｇｋａｉｗａ７−１．ｃｔｘｔ＞＜…７−２．ｃｔｘｔ＞＜…７−３．ｃｔｘｔ＞…に従って、ネットサイトＡ３０ａから図２（Ａ）で示した独語版の各字幕テキストデータ「Ｅｎｔｓｃｈｕｌｄｉｇｕｎｇ．」「Ｗａｓｋａｎｎｉｃｈ…Ｓｉｅｔｕｎ？」…が順次ダウンロードされ、また、ＨＰアドレス＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ／ｇｋａｉｗａ７−１．ｍｐ３＞＜…７−２．ｍｐ３＞＜…７−３．ｍｐ３＞…に従って、ネットサイトＢ３０ｂから図２（Ｂ）で示した独語版の各音声データ「エントシュルディグング」「… カンイッヒフュアズィ…」…が順次ダウンロードされ、さらに、ＨＰアドレス＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ／ｋａｉｗａ７−１．ｍｐｅｇ＞＜…７−２．ｍｐｅｇ＞＜…７−３．ｍｐｅｇ＞…に従って、ネットサイトＣ３０ｃから図２（Ｃ）で示した各言語共通の画像データ「女性動画像」「男性動画像」…が順次ダウンロードされる（ステップＳ６）。
【０１０６】
よって、独語指定修正後のタイムコードファイル１２ｃ２の各コマンドコードの読み出しに従い、当該コマンドコード“ＵＲＬ”に対応付けられたＨＰアドレスに対応するメディアデータ（独語版字幕テキストデータ／独語版音声データ／共通動画像データ）が読み出されてその再生が指示されることで、前記図５を参照して説明した英語版でのマルチメディア同期再生処理と全く同様に、独語での会話学習用のテキスト・音声・画像データの同期再生処理を実行できる。
【０１０７】
なお、この第１実施形態において、前記図４を参照して説明した第１のマルチメディア再生処理では、指定言語に応じてタイムコードファイル１２ｃ２に記述されている各ＵＲＬ上の言語未指定記号「＊」が、言語指定記号「ｅ」「ｇ」…に変換修正されると（ステップＳ３〜Ｓ５）、直ちにそのＨＰアドレスに従ったネットサイトＡ３０ａ〜Ｃ３０ｃへのアクセスを行い、同期再生すべき各メディアデータ（指定言語版字幕テキストデータ／指定言語版音声データ／共通動画像データ）をダウンロードしてＲＡＭ１２Ｃ内にメディア内容データ１２ｃ３として保存しておき（ステップＳ６）、タイムコードファイル１２ｃ２に従ったコマンドコード“ＵＲＬ”の読み出しに伴いそのＨＰアドレスに対応付けられた各メディアデータを前記メディア内容データ１２ｃ３から順次読み出して再生指示する手順（ステップＳ１４→Ｓ１５Ａ）としたが、次の図７を参照して説明する第２のマルチメディア再生処理にあるように、同期再生すべき各メディアデータ（指定言語版字幕テキストデータ／指定言語版音声データ／共通動画像データ）をタイムコードファイル１２ｃ２に従ったコマンドコード“ＵＲＬ”の読み出しに伴い、その都度ＨＰアドレスに従ったネットサイトＡ３０ａ〜Ｃ３０ｃへのアクセスを行い順次ダウンロードして再生指示する手順としてもよい。
【０１０８】
図７は前記携帯機器１０の第１実施形態のメディア同期再生処理プログラム１２ａ２に従った第２のマルチメディア再生処理を示すフローチャートである。
【０１０９】
この第１実施形態の第２のマルチメディア再生処理において、前記図４における第１のマルチメディア再生処理（ステップＳ１〜Ｓ１８）と同一の処理ステップについては、同一のステップ符号を付してその説明を省略する。
【０１１０】
すなわち、この第２のマルチメディア再生処理では、タイムコードファイル１２ｃ２に従ったコマンドコード“ＵＲＬ”の読み出しに伴い、その都度ＨＰアドレスに従ったネットサイトＡ３０ａ〜Ｃ３０ｃへのアクセスを行い、同期再生すべき各メディアデータ（指定言語版字幕テキストデータ／指定言語版音声データ／共通動画像データ）を順次ダウンロードしながら再生指示する手順（ステップＳ１４→Ｓ１５Ｂ）とする。
【０１１１】
すなわち、ステップＳ１４において、再生用ファイル１２ｃにおけるタイムコードファイル１２ｃ２（図３参照）から読み出されたコマンドコードが“ＵＲＬ”と判断された場合には、該当ポインタ位置のＵＲＬに対応するＨＰアドレスに従い各対応するメディアのネットサイトＡ３０ａ〜Ｃ３０ｃにアクセスされ、指定の学習データで且つ指定言語の会話学習用のテキストデータ、音声データ、および各言語共通の画像データがそれぞれダウンロードされ、そのデータの種類に応じた（テキスト／音声／画像）出力用プログラム１２ａ２によって再生開始される（ステップＳ１４→Ｓ１５Ｂ）。
【０１１２】
つまり、コマンドコードＵＲＬの対応ＨＰアドレスに従い、ネットサイトＡ３０ａからテキストデータ（図２（Ａ）参照）をダウンロードした場合に、テキスト出力用プログラム１２ａ２によって再生表示を開始し、また、音声データ（図２（Ｂ）参照）をダウンロードした場合に、音声出力用プログラム１２ａ２によって再生出力を開始し、また、画像データ（図２（Ｃ）参照）をダウンロードした場合に、音声出力用プログラム１２ａ２によって再生出力を開始する。
【０１１３】
これによれば、同期再生すべき各メディアデータ（指定言語版字幕テキストデータ／指定言語版音声データ／共通動画像データ）の全てを予めダウンロードしてＲＡＭ１２Ｃ内のメディア内容データ１２ｃ３として保存しておく必要がなくなるので、例えば携帯機器１０といった少ない容量のメモリ領域を、大きく・長い間占有せずとも、マルチメディアデータの同期再生を行うことができる。
【０１１４】
また、この第１実施形態において、前記図４、図７を参照して説明した第１、第２のマルチメディア再生処理では、何れの再生処理の場合でも、ユーザ指定された学習データに対応するマルチメディア再生用ファイル１２ｂ（１２ｃ［１２ｃ１，１２ｃ２］）を、ＣＤ−ＲＯＭから通信機器（ＰＣ）２０→通信部１６を介してＲＡＭ１２Ｃに読み込んだり、サーバ３０から通信ネットワークＮ→電送制御部１５を介してＲＡＭ１２Ｃにダウンロードしたりして、一旦携帯機器１０内に取り込んだ後に、ユーザ指定された言語に応じて、当該マルチメディア再生用ファイル１２ｃを構成するタイムコードファイル１２ｃ２中の各ＵＲＬ上の言語未指定記号「＊」を言語指定記号「ｅ」「ｇ」…に変換修正する構成としたが、次の図８を参照して説明する携帯機器１０側でのメディア再生処理とサーバ３０側でのサーバ処理とにあるように構成してもよい。
【０１１５】
図８は前記第１実施形態のマルチメディア記憶再生システムにおける他の実施形態に伴う携帯機器１０側でのメディア再生処理とサーバ３０側でのサーバ処理とを示すフローチャートである。
【０１１６】
すなわち、携帯機器１０において、学習するデータがユーザにより指定されると、この学習データの指定信号がサーバ３０へ送信される（ステップＳ１′）。
【０１１７】
サーバ３０において、前記携帯機器１０から送信された学習データの指定信号が受信されると（ステップＢ１）、指定の学習データ（例えば外国語会話学習テキスト）のタイムコードファイル１２ｃ２を有するマルチメディア再生用ファイル１２ｂ（１２ｃ）が読み出される（ステップＢ２）。
【０１１８】
また、携帯機器１０において、ユーザ所望の言語が指定されると、この言語の指定信号がサーバ１０へ送信される（ステップＳ２′）。
【０１１９】
サーバ３０において、前記携帯機器１０から送信された言語の指定信号が受信されると（ステップＢ３）、当該指定の言語が判断され（ステップＢ４）、「英語」が指定された場合には前記ステップＢ２において読み出されたユーザ指定の会話学習データのマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃにおけるタイムコードファイル１２ｃ２の中のテキストデータおよび音声データに対応する各ＵＲＬ上の言語未指定記号「＊」が、図３（Ｃ）に示すように、英語指定記号「ｅ」に変換修正される（ステップＢ５ｅ）。
【０１２０】
また、「独語」が指定された場合には前記サーバ３０にて読み出されたタイムコードファイル１２ｃ２の中のテキストデータおよび音声データに対応する各ＵＲＬ上の言語未指定記号「＊」が、独語指定記号「ｇ」に変換修正される（ステップＢ４→Ｂ５ｇ）。
【０１２１】
さらに、「仏語」が指定された場合には前記サーバ３０にて読み出されたタイムコードファイル１２ｃ２の中のテキストデータおよび音声データに対応する各ＵＲＬ上の言語未指定記号「＊」が、仏語指定記号「ｆ」に変換修正される（ステップＢ４→Ｂ５ｆ）。
【０１２２】
こうして、サーバ３０側において、ユーザ指定の言語（例えば「英語」）に応じて、指定の会話学習データのマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃにおけるタイムコードファイル１２ｃ２が変換修正されると（図３（Ｃ）参照）、当該タイムコードファイル１２ｃ２を有するマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃが前記学習データおよび言語指定元の携帯機器１０へ送信される（ステップＢ６）。
【０１２３】
すると、携帯機器１０では、ユーザ指定に応じた学習データで且つ指定の言語に応じた例えば英会話学習用のタイムコードファイル１２ｃ２を有するマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃが前記サーバ３０から受信され、メモリ１２内に格納される（ステップＳ３′）。
【０１２４】
なお、この携帯機器１０でのメディア再生処理におけるこれ以後の処理については、前記図４における第１のメディア再生処理では、ステップＳ６以降の処理に続き同様であり、また図７における第２のメディア再生処理では、ステップＳ７以降の処理に続き同様であるため、その説明は省略する。
【０１２５】
これによれば、携帯機器１０では、ユーザ所望の学習データと言語の指定を行うだけで、当該指定の学習データおよび指定の言語に応じたタイムコードファイル１２ｃ２を有するマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃはサーバ３０側にて生成されて受信取得されるので、携帯機器１０でのメディア再生処理に伴うＣＰＵ１１の負担をより軽減することができる。
【０１２６】
したがって、前記構成のマルチメディア記憶再生システムの携帯機器１０による第１実施形態のメディア再生機能によれば、マルチメディア再生用ファイル１２ｂ（１２ｃ）のタイムコードファイル１２ｃ２にて予め設定された処理単位時間１２ｃ１ａ毎に読み出されるコマンドコード“ＵＲＬ”に対応付けて、同期再生すべき予め再生速度の時間情報を有する各メディアデータ（字幕テキストデータ／音声データ／画像データ）の格納先ネットサイトＡ３０ａ／Ｂ３０ｂ／Ｃ３０ｃを示すＵＲＬ（ＨＰアドレス）を記述し、前記設定処理単位時間１２ｃ１ａ毎のコマンドコード“ＵＲＬ”に対応してそのＨＰアドレスに従いダウンロードされた各メディアデータ（字幕テキストデータ／音声データ／画像データ）それぞれの再生指示を行うだけで、携帯機器１０には元々記憶していないテキスト・音声・画像データの再生処理が必然的に同期実行される。よって、ＣＰＵ１１の負荷を非常に小さくして、高性能なＣＰＵを用いない簡単な再生装置でもテキスト／音声／画像の同期再生を実現することができる。
【０１２７】
また、前記タイムコードファイル１２ｃ２に記述される同期再生すべき時間情報を有する各メディアデータ（字幕テキストデータ／音声データ／画像データ）の格納先ネットサイトＡ３０ａ／Ｂ３０ｂ／Ｃ３０ｃを示すＵＲＬ（ＨＰアドレス）には、指定の言語に応じて変換修正される記号を付加設定し、この言語指定記号に応じて異なるＨＰアドレスに従って、指定の言語に対応する字幕テキストデータとその音声データがダウンロードされるので、各国語別に用意されたテキストデータや音声データでも、１つのタイムコードファイル１２ｃ２に基づいて容易に所望の言語のテキスト，音声データを選択的にダウンロードして同期再生することができる。
【０１２８】
なお、前記マルチメディア記憶再生システムの第１実施形態では、タイムコードファイル１２ｃ２の各コマンドコード“ＵＲＬ”に対応して記述したＨＰアドレスに従いネットサイトＡ３０ａからダウンロードされて再生処理される字幕テキストデータは、当該テキストデータ自体にその再生処理に伴い各文字を順次強調表示させるための時間情報を有するものとし、音声データや画像データの再生処理に必然的に同期表示させる構成としたが、次の第２実施形態において説明するように、タイムコードファイル１２ｃ２に記述して設定処理単位時間１２ｃ１ａ毎に実行されるコマンドコード“ＨＬ”（ハイライト表示）に従い、同期再生すべきテキストデータに対する各文字毎の強調表示を指示する構成としてもよい。
【０１２９】
（第２実施形態）
図９は前記マルチメディア記憶再生システムにおける第２実施形態の各メディアのネットサイト３０ａ〜３０ｃにて提供されるデータ内容を示す図であり、同図（Ａ）はサイトＡ３０ａにて用意された外国語会話練習用のテキストデータを示す図、同図（Ｂ）はサイトＢ３０ｂにて用意された外国語会話練習用の音声データを示す図、同図（Ｃ）はサイトＣ３０ｃにて用意された外国語会話練習用の画像データを示す図である。
【０１３０】
図９にて示す第２実施形態の各メディアのネットサイト３０ａ〜３０ｃにて提供されるデータ内容おいて、前記図２において示した第１実施形態での各メディアデータと同一のデータ内容である音声データ（図９（Ｂ）参照）および画像データ（図９（Ｃ）参照）についてはその説明を省略する。
【０１３１】
すなわち、図９（Ａ）に示すように、この第２実施形態のネットサイトＡ３０ａ＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ＞にて用意されたテキストデータは、使用言語毎に各対応する文字のテキストデータが用意され、各言語毎のデータは１センテンス毎に異なるＵＲＬに対応付けられて格納される点で、前記第１実施形態と同様であるが、テキスト文字列を順次反転表示させるための時間情報（→…）を含んでいない点で異なる。
【０１３２】
従って、この第２実施形態のテキストデータのＵＲＬには、字幕を意味する”ｃａｐｔｉｏｎ”の頭文字”ｃ”は付加されず、例えば会話テキスト７−１の英語版は”…ｅｋａｉｗａ７−１．ｔｅｘｔ”、同７−１の独語版は”…ｇｋａｉｗａ７−１．ｔｅｘｔ”とされる。
【０１３３】
図１０は前記携帯機器１０のメモリ１２に格納された第２実施形態のマルチメディア再生用ファイル１２ｂ（１２ｃ）を構成するタイムコードファイル１２ｃ２を示す図である。
【０１３４】
この第２実施形態のタイムコードファイル１２ｃ２には、まず、前記第１実施形態と同様に、個々のメディアデータ毎に予め設定される一定時間間隔（例えば２５ｍｓ）で各種データ同期再生のコマンド処理を行うためのタイムコードが記述配列されるもので、この各タイムコードは、命令を指示するコマンドコードと、当該コマンドに関わるメディアデータの内容（図９参照）を対応付けするためのパラメータデータ、各メディアデータの取得先であるネットサイト３０ａ〜３０ｃのＵＲＬ、それと各サイト名Ａ〜Ｃ、各メディアデータの種類（テキスト／音声／画像）との組み合わせにより構成される。
【０１３５】
そして、命令を指示するコマンドコードとしては、対応付けられたネットサイト３０ａ〜３０ｃのＵＲＬに従い読み出されるテキストデータ，音声データ，画像データの再生を指示するためのコマンドコード“ＵＲＬ”を主体として、例えばテキスト１センテンス分相当のテキスト，音声，画像の再生指示毎に当該テキストデータの各文字の音声に合わせた強調表示を指示するためのコマンドコード“ＨＬ”がその強調表示すべき文字数をパラメータデータとして対応付けて記述される。
【０１３６】
このコマンドコード“ＨＬ”に従ったテキストデータの各文字毎の強調表示は、そのパラメータデータとして記述する強調表示文字数が使用言語に応じて異なるため、当該タイムコードファイル１２ｃ２自体が使用言語に応じて専用のものとなり、同一内容の外国語会話学習テキストでも、英語版タイムコードファイル、独語版タイムコードファイル、仏語版タイムコードファイルなどとしてＣＤ−ＲＯＭやサーバ３０に用意される。
【０１３７】
すなわち、この携帯機器（ＰＤＡ）１０のＲＯＭ１２Ａに記憶されているメディア同期再生処理プログラム１２ａ２を起動させて、学習データおよび例えば「英語」を指定すると、当該指定の学習データ、指定の言語「英語」に応じた英語版タイムコードファイル１２ｃ２（図１０参照）を有するマルチメディア再生用ファイル１２ｂ（１２ｃ）がＣＤ−ＲＯＭやサーバ３０から本携帯機器１０のメモリ１２に取り込まれ、当該タイムコードファイル１２ｃ２に記述されている各ＵＲＬに対応するネットサイトＡ３０ａ〜Ｃ３０ｃから英会話テキスト７−１，７−２のテキストデータ、音声データ、画像データ（図９参照）がダウンロードされ、メモリ１２内のメディア内容データ１２ｃ３として格納される。
【０１３８】
そして、一定時間毎のコマンド処理に伴い１番目のコマンドコード“ＵＲＬ”が読み込まれた場合には、対応記述されたＵＲＬアドレス「…ｅｋａｉｗａ７−１．ｔｘｔ」に従い前記メディア内容データ１２ｃ３として格納された英会話テキスト７−１のテキストデータが読み出され、テキスト出力用プログラム１２ａ１に対してその表示処理が指示される。
【０１３９】
また、同一定時間毎のコマンド処理に伴い２番目のコマンドコード“ＵＲＬ”が読み込まれた場合には、対応記述されたＵＲＬアドレス「…ｅｋａｉｗａ７−１．ｍｐ３」に従い前記メディア内容データ１２ｃ３として格納された英会話テキスト７−１の音声データが読み出され、音声出力用プログラム１２ａ１に対してその音声出力処理が指示される。
【０１４０】
さらに、同一定時間毎のコマンド処理に伴い３番目のコマンドコード“ＵＲＬ”が読み込まれた場合には、対応記述されたＵＲＬアドレス「…ｋａｉｗａ７−１．ｍｐｅｇ」に従い前記メディア内容データ１２ｃ３として格納された英会話テキスト７−１の画像データが読み出され、画像出力用プログラム１２ａ１に対してその表示処理が指示される。
【０１４１】
そして、５番目，４１番目，５９番目に記述されたコマンドコード“ＨＬ”が読み込まれた場合には、このパラメータデータ“０２”“０７”“１０”によって示される文字数分だけ、前記１番目のコマンドコード“ＵＲＬ”に従い表示中の英会話テキスト７−１の各表示文字が順次強調表示される。
【０１４２】
また、これと共に再生処理される英会話テキストの音声データ、画像データには、何れのデータにも、予め設定された時間間隔で再生開始することで、その相互に出力経過時間が合うようにした同期時間情報が予め含まれており、タイムコードファイル１２ｃ２上で予め時間経過を設定した各コマンドコード“ＵＲＬ”に従って（テキスト／音声／画像）出力用プログラム１２ａ１による再生処理が開始されるので、メディア同期再生処理プログラム１２ａ２では、ＣＰＵ１１によって特に同期付けのタイミング合わせ制御を行わなくとも、必然的に同期制御されて再生されることになる。
【０１４３】
なお、この図１０で示したマルチメディア再生用ファイル１２ｂ（１２ｃ）についての詳細な再生動作は、後述にて改めて説明する。
【０１４４】
次に、前記構成のマルチメディア記憶再生システムの携帯機器１０による第２実施形態のメディア再生機能について説明する。
【０１４５】
図１１は前記携帯機器１０の第２実施形態のメディア同期再生処理プログラム１２ａ２に従った第１のマルチメディア再生処理を示すフローチャートである。
【０１４６】
例えば外国語会話の練習をテキストと音声と画像のマルチメディアの同期再生によって行う際に、入力部１７ａあるいは座標入力装置１７ｂの操作によりユーザ所望の学習データ（例えば外国語会話学習）が指定されると共に（ステップＡ１）、この外国語会話の学習データについて、練習したい言語（英語／独語／仏語／…）が選択されて指定されると（ステップＡ２）、例えばＣＤ−ＲＯＭから自宅ＰＣである通信機器（ＰＣ）２０に取り込まれた当該指定の学習データに応じた指定言語版の暗号化マルチメディア再生ファイル（タイムコードファイル１２ｃ２含む）１２ｂが、携帯機器（ＰＤＡ）１０の通信部１６を介して読み込まれＦＬＡＳＨメモリ１２Ｂに格納されるか、または通信ネットワーク（インターネット）Ｎ上のサーバ３０から電送制御部１５を介してダウンロードされ、ＦＬＡＳＨメモリ１２Ｂに格納される（ステップＡ３）。
【０１４７】
この際、ＦＬＡＳＨメモリ１２Ｂに格納された暗号化マルチメディア再生用ファイル（ＣＡＳファイル）１２ｂは、解読復号化され、例えば図１０で示した指定言語版タイムコードファイル１２ｃ２を伴い、ＲＡＭ１２Ｃに転送されて格納される。
【０１４８】
すると、ユーザ指定の言語（例えば「英語」）に応じた英語版タイムコードファイル１２ｃ２上の各コマンドコード“ＵＲＬ”に対応付けられて記述されているＨＰアドレスに従い、各対応するメディアのネットサイトＡ３０ａ〜Ｃ３０ｃにアクセスされ、指定の学習データで且つ指定言語「英語」の会話学習用のテキストデータ、音声データ、および各言語共通の画像データがそれぞれダウンロードされてＲＡＭ１２Ｃ内のメディア内容データ１２ｃ３として保存される（ステップＡ４）。
【０１４９】
つまり、図１０で示した英語版タイムコードファイル１２ｃ２に記述されたＨＰアドレス＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｔｘｔ＞＜…７−２．ｔｘｔ＞＜…７−３．ｔｘｔ＞…に従って、ネットサイトＡ３０ａから図９（Ａ）で示した英語版の各テキストデータ「Ｅｘｃｕｓｅｍｅ．」「ＭａｙＩｈｅｌｐｙｏｕ？」…が順次ダウンロードされ、また、ＨＰアドレス＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｍｐ３＞＜…７−２．ｍｐ３＞＜…７−３．ｍｐ３＞…に従って、ネットサイトＢ３０ｂから図９（Ｂ）で示した英語版の各音声データ「イクスキューズミー」「メイアイヘウプユー」…が順次ダウンロードされ、さらに、ＨＰアドレス＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ／ｋａｉｗａ７−１．ｍｐｅｇ＞＜…７−２．ｍｐｅｇ＞＜…７−３．ｍｐｅｇ＞…に従って、ネットサイトＣ３０ｃから図９（Ｃ）で示した各言語共通の画像データ「女性動画像」「男性動画像」…が順次ダウンロードされる。
【０１５０】
すると、このＲＡＭ１２Ｃに格納された英語版タイムコードファイル１２ｃ２およびメディア内容データ１２ｃ３からなる解読済のマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃのヘッダ情報１２ｃ１に記述された処理単位時間１２ｃ１ａ（例えば２５ｍｓ／５０ｍｓ／…）が、ＣＰＵ１１による当該マルチメディア再生用ファイル（ＣＡＳファイル）１２ｃの一定時間間隔の読み出し時間として設定される（ステップＡ５）。
【０１５１】
そして、ＲＡＭ１２Ｃに格納されたメディア再生用ファイル（ＣＡＳファイル）１２ｃの先頭に読み出しポインタがセットされ（ステップＡ６）、当該再生用ファイル１２ｃの再生処理タイミングを計時するためのタイマがスタートされる（ステップＡ７）。
【０１５２】
ここで、先読み処理が当該再生処理に並行して起動される（ステップＡ８）。
【０１５３】
前記ステップＡ７において、処理タイマがスタートされると、前記ステップＡ５にて設定された今回の英会話学習用のマルチメディア再生対象ファイル１２ｃに応じた処理単位時間毎に、前記ステップＡ６にて設定された読み出しポインタの位置の当該メディア再生用ファイル１２ｃを構成する英語版タイムコードファイル１２ｃ２（図１０参照）のコマンドコードおよびそのパラメータデータが読み出される（ステップＡ９）。
【０１５４】
そして、前記再生用ファイル１２ｃにおける英語版タイムコードファイル１２ｃ２（図１０参照）から読み出されたコマンドコードが、“ＦＮ”か否か判断され（ステップＡ１０）、“ＦＮ”と判断された場合には、その時点で当該マルチメディア再生処理の停止処理が指示実行される（ステップＡ１０→Ａ１１）。
【０１５５】
一方、前記再生用ファイル１２ｃにおけるタイムコードファイル１２ｃ２（図１０参照）から読み出されたコマンドコードが、“ＦＮ”ではないと判断された場合には、当該コマンドコードが、“ＵＲＬ”か否か判断される（ステップＡ１０→Ａ１２）。そして、“ＵＲＬ”と判断された場合には、該当ポインタ位置のＵＲＬに対応するＨＰアドレスに従いメディア内容データ１２ｃ３として保存されているテキストデータまたは音声データまたは画像データが読み出され、そのデータの種類に応じた（テキスト／音声／画像）出力用プログラム１２ａ２によって再生開始される（ステップＡ１２→Ａ１３Ａ）。
【０１５６】
すると、再び処理タイマによる計時動作が開始され、当該タイマによる計時時間が次の処理単位時間１２ｃ１ａに到達したか否か判断される（ステップＡ１７）。
【０１５７】
一方、前記ステップＡ１２において、前記再生用ファイル１２ｃにおける英語版タイムコードファイル１２ｃ２（図１０参照）から読み出されたコマンドコードが、“ＵＲＬ”ではないと判断された場合には、当該コマンドコードが、“ＨＬ”か否か判断される（ステップＡ１２→Ａ１４）。そして、“ＨＬ”と判断された場合には、そのパラメータデータによって示される文字数の位置まで、前記“ＵＲＬ”コマンドに応じて再生表示されているテキストデータの各文字が反転により強調表示される（ステップＡ１４→Ａ１５）。
【０１５８】
また、前記ステップＡ１４において、前記英語版タイムコードファイル１２ｃ２（図１０参照）から読み出されたコマンドコードが、“ＨＬ”ではないと判断された場合には、他のコマンド処理へ移行される（ステップＡ１６）。この他のコマンド処理とは、他のコマンドコードのそれぞれに応じた指令の処理である。
【０１５９】
そして、ステップＡ１７において、前記タイマによる計時時間が次の処理単位時間１２ｃ１ａに到達したと判断された場合には、ＲＡＭ１２Ｃに格納されたマルチメディア再生用ファイル（ＣＡＳファイル）１２ｃに対する読み出しポインタが次の位置に更新セットされ（ステップＡ１７→Ａ１８）、前記ステップＡ９における当該読み出しポインタの位置のタイムコードファイル１２ｃ２（図１０参照）のコマンドコードおよびそのパラメータデータ読み出しからの処理が繰り返される（ステップＡ１８→Ａ９〜Ａ１７）。
【０１６０】
すなわち、携帯機器１０のＣＰＵ１１は、ＲＯＭ１２Ａに記憶されたメディア同期再生処理プログラム１２ａ２に従って、マルチメディア再生用ファイル１２ｂ（１２ｃ）に予め設定記述されているコマンド処理の単位時間毎に、タイムコードファイル１２ｃ２（図１０参照）に配列されたコマンドコードおよびそのパラメータデータを読み出し、そのコマンドに対応する処理を指示するだけで、当該タイムコードファイル１２ｃ２に記述された各コマンドに応じた各種メディアデータの同期再生処理が実行される。
【０１６１】
ここで、図１０で示す英語版会話学習用のマルチメディア再生ファイル１２ｃに基づいた、前記メディア同期再生処理プログラム１２ａ１（図１１参照）によるテキスト・音声・画像データの同期再生出力動作について、前記図５で示した英会話テキスト・音声・画像データの同期再生状態を参照しながら詳細に説明する。
【０１６２】
この英語版会話学習用のマルチメディア再生ファイル（１２ｃ）は、そのヘッダ情報（１２ｃ１）に記述設定された処理単位時間（２５ｍｓ）毎にコマンド処理が実行されるもので、まず、タイムコードファイル１２ｃ２（図１０参照）の第１コマンドコード“ＵＲＬ”およびそのパラメータデータ“００”が読み出されると、当該第１コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｔｘｔ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−１のテキストデータ「Ｅｘｃｕｓｅｍｅ．」（図９（Ａ）参照）が読み出され、テキスト出力用プログラム１２ａ１に対して、図５（Ａ）〜図５（Ｃ）に示すように、再生表示処理が指示される。
【０１６３】
この時点で、英会話テキスト７−１のテキストデータ「Ｅｘｃｕｓｅｍｅ．」は、表示部１８において単にその全体文字列が再生表示される。
【０１６４】
第２コマンドコード“ＵＲＬ”およびそのパラメータデータ“０２”が読み出されると、当該第２コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−１．ｍｐ３＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−１の音声データ「イクスキューズミー」（図９（Ｂ）参照）が読み出され、音声出力用プログラム１２ａ１に対して、同図５（Ａ）〜図５（Ｃ）に示すように、再生出力処理が指示される。
【０１６５】
これにより、英会話テキスト７−１の音声データ「イクスキューズミー」は、音声出力部１９ｂにおいて順次再生出力が開始される。
【０１６６】
第３コマンドコード“ＵＲＬ”およびそのパラメータデータ“０２”が読み出されると、当該第３コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ／ｋａｉｗａ７−１．ｍｐｅｇ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている会話テキスト７−１の言語共通画像データ「女性動画像」（図９（Ｃ）参照）が読み出され、画像出力用プログラム１２ａ１に対して、同図５（Ａ）〜図５（Ｃ）に示すように、再生表示処理が指示される。
【０１６７】
これにより、会話テキスト７−１の言語共通画像データ「女性動画像」は、表
示部１８において順次切り替えられながら再生表示が開始される。
【０１６８】
そして、第５コマンドコード“ＨＬ”およびそのパラメータデータ“０２”が読み出されると、図５（Ａ）で示すように、表示中のテキストデータ「Ｅｘｃｕｓｅｍｅ．」の２文字目までの反転強調表示が指示される。
【０１６９】
また、第４１コマンドコード“ＨＬ”およびそのパラメータデータ“０７”が読み出されると、図５（Ｂ）で示すように、表示中のテキストデータ「Ｅｘｃｕｓｅｍｅ．」の７文字目までの反転強調表示が指示される。
【０１７０】
さらに、第５９コマンドコード“ＨＬ”およびそのパラメータデータ“１０”が読み出されると、図５（Ｃ）で示すように、表示中のテキストデータ「Ｅｘｃｕｓｅ
ｍｅ．」の１０文字目までの反転強調表示が指示される。
【０１７１】
この後、タイムコードファイル１２ｃ２（図１０参照）の第８１コマンドコード“ＵＲＬ”およびそのパラメータデータ“０２”が読み出されると、当該第８１コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ａｂｃ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−２．ｔｘｔ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−２の字幕テキストデータ「ＭａｙＩｈｅｌｐｙｏｕ？」（図９（Ａ）参照）が読み出され、テキスト出力用プログラム１２ａ１に対して、図５（Ｄ）〜図５（Ｆ）に示すように、再生表示処理が指示される。
【０１７２】
この時点で、英会話テキスト７−２のテキストデータ「ＭａｙＩｈｅｌｐｙｏｕ？」は、表示部１８において単にその全体文字列が再生表示される。
【０１７３】
第８２コマンドコード“ＵＲＬ”およびそのパラメータデータ“００”が読み出されると、当該第８２コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｄｅｆ．ｃｏ．ｊｐ／ｅｋａｉｗａ７−２．ｍｐ３＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている英会話テキスト７−２の音声データ「メイアイヘウプユー」（図９（Ｂ）参照）が読み出され、音声出力用プログラム１２ａ１に対して、同図５（Ｄ）〜図５（Ｆ）に示すように、再生出力処理が指示される。
【０１７４】
これにより、英会話テキスト７−２の音声データ「メイアイヘウプユー」は、音声出力部１９ｂにおいて順次再生出力が開始される。
【０１７５】
第８３コマンドコード“ＵＲＬ”およびそのパラメータデータ“００”が読み出されると、当該第８３コマンドコードに対応記述されたＨＰアドレス＜ｈｔｔｐ：／／ｈｉｊ．ｃｏ．ｊｐ／ｋａｉｗａ７−２．ｍｐｅｇ＞に従い、メディア内容データ１２ｃ３としてダウンロード保存されている会話テキスト７−２の言語共通画像データ「男性動画像」（図９（Ｃ）参照）が読み出され、画像出力用プログラム１２ａ１に対して、同図５（Ｄ）〜図５（Ｆ）に示すように、再生表示処理が指示される。
【０１７６】
これにより、会話テキスト７−２の言語共通画像データ「男性動画像」は、表示部１８において順次切り替えられながら再生表示が開始される。
【０１７７】
この場合、前記テキストデータ「Ｅｘｃｕｓｅｍｅ．」「ＭａｙＩｈｅｌｐｙｏｕ？」は、前記テキスト出力用プログラム１２ａ１により再生表示されると共にコマンドコード“ＨＬ”に応じて、その再生開始からの所定速度の時間経過に応じて各テキスト文字列が順次反転（下線強調）表示されるものであり、また、前記音声データ「イクスキューズミー」「メイアイヘウプユー」にあっても、前記音声出力用プログラム１２ａ１により再生出力されるのに伴い、その再生開始からの所定速度の時間経過に応じて前記テキストデータの反転表示に合うように当該音声データを再生出力させるための時間情報を含んでおり、さらに、言語共通画像データ「女性動画像」「男性動画像」にあっても、前記画像出力用プログラム１２ａ１により再生表示されるのに伴い、その再生開始からの所定速度の時間経過に応じて前記テキストデータの反転表示および音声データの出力に合うように当該画像データを切り替え再生表示させるための時間情報を含んでいるので、マルチメディア再生用ファイル１２ｂ（１２ｃ）に予め設定記述されているコマンド処理の基準単位時間（２５ｍｓ／５０ｍｓ）毎に、タイムコードファイル１２ｃ２に配列されたコマンドコードおよびそのパラメータデータを読み出し、そのＵＲＬコマンドに対応して読み出される各メディアデータの再生処理、ＨＬコマンドに対応したテキスト文字列の反転強調表示を指示するだけで、当該タイムコードファイル１２ｃ２に記述されたＵＲＬアドレスに従いダウンロードした会話学習用のテキスト・音声・画像データの同期再生処理を実行できる。
【０１７８】
従って、ＣＰＵのメイン処理の負担が軽くなり、例えば携帯機器（ＰＤＡ）１０という処理能力の比較的小さいＣＰＵでも容易にテキスト・画像・音声を含む複数種類のネットメディアデータの同期再生処理が行えるので、高性能なＣＰＵを用いない簡単な再生装置でも、これを実現できるようになる。
【０１７９】
なお、この第２実施形態において、前記図１１を参照して説明した第１のマルチメディア再生処理では、指定の学習データおよび指定の言語に応じた指定言語版タイムコードファイル１２ｃ２を有するマルチメディア再生ファイル１２ｂ（１２ｃ）が携帯機器１０に取り込まれると（ステップＡ１〜Ａ３）、直ちにそのタイムコードファイル１２ｃ２に記述されているＵＲＬコマンドのＨＰアドレスに従ったネットサイトＡ３０ａ〜Ｃ３０ｃへのアクセスを行い、同期再生すべき各メディアデータ（指定言語版テキストデータ／指定言語版音声データ／共通動画像データ）をダウンロードしてＲＡＭ１２Ｃ内にメディア内容データ１２ｃ３として保存しておき（ステップＡ４）、タイムコードファイル１２ｃ２に従ったコマンドコード“ＵＲＬ”の読み出しに伴いそのＨＰアドレスに対応付けられた各メディアデータを前記メディア内容データ１２ｃ３から順次読み出して再生指示する手順（ステップＡ１２〜Ａ１３Ａ）としたが、次の図１２を参照して説明する第２のマルチメディア再生処理にあるように、同期再生すべき各メディアデータ（指定言語版テキストデータ／指定言語版音声データ／共通動画像データ）をタイムコードファイル１２ｃ２に従ったコマンドコード“ＵＲＬ”の読み出しに伴い、その都度ＨＰアドレスに従ったネットサイトＡ３０ａ〜Ｃ３０ｃへのアクセスを行い順次ダウンロードして再生指示する手順としてもよい。
【０１８０】
図１２は前記携帯機器１０の第２実施形態のメディア同期再生処理プログラム１２ａ２に従った第２のマルチメディア再生処理を示すフローチャートである。
【０１８１】
この第２実施形態の第２のマルチメディア再生処理において、前記図１１における第１のマルチメディア再生処理（ステップＡ１〜Ａ１８）と同一の処理ステップについては、同一のステップ符号を付してその説明を省略する。
【０１８２】
すなわち、この第２のマルチメディア再生処理では、タイムコードファイル１２ｃ２に従ったコマンドコード“ＵＲＬ”の読み出しに伴い、その都度ＨＰアドレスに従ったネットサイトＡ３０ａ〜Ｃ３０ｃへのアクセスを行い、同期再生すべき各メディアデータ（指定言語版テキストデータ／指定言語版音声データ／共通動画像データ）を順次ダウンロードしながら再生指示する手順（ステップＡ１２→Ａ１３Ｂ）とする。
【０１８３】
すなわち、ステップＡ１２において、再生用ファイル１２ｃにおけるタイムコードファイル１２ｃ２（図１０参照）から読み出されたコマンドコードが“ＵＲＬ”と判断された場合には、該当ポインタ位置のＵＲＬに対応するＨＰアドレスに従い各対応するメディアのネットサイトＡ３０ａ〜Ｃ３０ｃにアクセスされ、指定の学習データで且つ指定言語の会話学習用のテキストデータ、音声データ、および各言語共通の画像データがそれぞれダウンロードされ、そのデータの種類に応じた（テキスト／音声／画像）出力用プログラム１２ａ２によって再生開始される（ステップＡ１２→Ａ１３Ｂ）。
【０１８４】
つまり、コマンドコードＵＲＬの対応ＨＰアドレスに従い、ネットサイトＡ３０ａからテキストデータ（図９（Ａ）参照）をダウンロードした場合に、テキスト出力用プログラム１２ａ２によって再生表示を開始し、また、音声データ（図９（Ｂ）参照）をダウンロードした場合に、音声出力用プログラム１２ａ２によって再生出力を開始し、また、画像データ（図９（Ｃ）参照）をダウンロードした場合に、音声出力用プログラム１２ａ２によって再生出力を開始する。
【０１８５】
これによれば、同期再生すべき各メディアデータ（指定言語版テキストデータ／指定言語版音声データ／共通動画像データ）の全てを予めダウンロードしてＲＡＭ１２Ｃ内のメディア内容データ１２ｃ３として保存しておく必要がなくなるので、例えば携帯機器１０といった少ない容量のメモリ領域を、大きく・長い間占有せずとも、マルチメディアデータの同期再生を行うことができる。
【０１８６】
したがって、前記構成のマルチメディア記憶再生システムの携帯機器１０による第２実施形態のメディア再生機能によれば、マルチメディア再生用ファイル１２ｂ（１２ｃ）のタイムコードファイル１２ｃ２にて予め設定された処理単位時間１２ｃ１ａ毎に読み出されるコマンドコード“ＵＲＬ”に対応付けて、同期再生すべき各メディアデータ（テキストデータ／音声データ／画像データ）の格納先ネットサイトＡ３０ａ／Ｂ３０ｂ／Ｃ３０ｃを示すＵＲＬ（ＨＰアドレス）を記述し、前記設定処理単位時間１２ｃ１ａ毎のコマンドコード“ＵＲＬ”に対応してそのＨＰアドレスに従いダウンロードされた各メディアデータ（テキストデータ／音声データ／画像データ）それぞれの再生指示を行うと共に、コマンドコード“ＨＬ”に応じてテキストデータ文字列の順次反転表示を指示するだけで、携帯機器１０には元々記憶していないテキスト・音声・画像データの再生処理が必然的に同期実行される。よって、ＣＰＵ１１の負荷を非常に小さくして、高性能なＣＰＵを用いない簡単な再生装置でもテキスト／音声／画像の同期再生を実現することができる。
【０１８７】
なお、前記実施形態において記載した携帯機器１０による各処理の手法、すなわち、図４のフローチャートに示す第１実施形態での第１のマルチメディア再生処理、図７のフローチャートに示す第１実施形態での第２のマルチメディア再生処理、図８のフローチャートに示す第１実施形態の各マルチメディア再生処理における他の実施形態に伴う携帯機器１０側でのメディア再生処理とサーバ３０側でのサーバ処理、図１１のフローチャートに示す第２実施形態での第１のマルチメディア再生処理、図１２のフローチャートに示す第２実施形態での第２のマルチメディア再生処理などの各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード（ＲＯＭカード、ＲＡＭカード、ＤＡＴＡ・ＣＡＲＤ等）、磁気ディスク（フロッピディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ等）、半導体メモリ等の外部記録媒体１３に格納して配布することができる。そして、通信ネットワーク（インターネット）Ｎとの通信機能を備えた種々のコンピュータ端末は、この外部記録媒体１３に記憶されたプログラムを記録媒体読取部１４によってメモリ１２に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記各実施形態において説明したマルチメディアデータの同期再生機能を実現し、前述した手法による同様の処理を実行することができる。
【０１８８】
また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク（インターネット）Ｎ上を伝送させることができ、この通信ネットワーク（インターネット）Ｎに接続されたコンピュータ端末から前記のプログラムデータを取り込み、前述したマルチメディアデータの同期再生機能を実現することもできる。
【０１８９】
なお、本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。
【０１９０】
【発明の効果】
以上のように、本発明の請求項１に係るメディアデータ記憶装置によれば、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、この記憶手段により記憶された各メディアのＵＲＬに対応付けられたメディアのデータを複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得することができる。このため、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ取得手段により取得された各メディアのデータを迅速且つ確実に同期再生させることができる。
【０１９１】
また、本発明の請求項２に係るメディアデータ記憶装置によれば、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、この記憶手段により記憶された各メディアのＵＲＬに対応付けられて記憶装置に記憶されている複数種類のメディアのデータを複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得でき、メディアデータ記憶手段により記憶することができる。このため、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ記憶手段により記憶された各メディアのデータを迅速且つ確実に同期再生させることができる。
【０１９２】
また、本発明の請求項３に係るメディアデータ記憶装置によれば、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、メディアデータ取得手段によって、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられたメディアのデータをインターネット経由で取得できる。このため、各メディアのネットサイト上から同期再生すべき各種のデータを、設定経過時間に応じて各サイトのＵＲＬに従い順次取り込み、この取り込んだ複数メディアのデータを迅速且つ確実に同期再生させることができる。
【０１９３】
また、本発明の請求項４に係るメディアデータ記憶装置によれば、前記請求項１または請求項２に係るメディアデータ記憶装置にあって、前記記憶手段は、複数種類のメディアのデータが同期再生されるように当該各メディア毎に予め経過時間を設定して配列された制御命令に、各メディアのＵＲＬを対応付けて記憶する制御命令記憶手段とされるので、制御命令記憶手段により記憶された設定経過時間毎の制御命令に従い、これに対応付けられたＵＲＬにより各メディアのネットサイト上から同期再生すべき各種のデータを取り込み、この取り込んだ複数メディアのデータを迅速且つ確実に同期再生させることができる。
【０１９４】
また、本発明の請求項５に係るメディアデータ記憶装置によれば、前記請求項１乃至請求項４の何れか１項に係るメディアデータ記憶装置にあって、前記複数種類のメディアのデータにはテキストデータが含まれ、このテキストデータは予め他の種類のメディアのデータとの同期再生のための時間情報を有するので、各メディアのネットサイト上から取り込まれた同期再生すべき各種のデータのうち、テキストデータについては当該テキストデータに含まれる同期再生のための時間情報に従い、他の種類のメディアのデータと共に迅速且つ確実に同期再生させることができる。
【０１９５】
また、本発明の請求項６に係るメディアデータ記憶装置によれば、前記請求項１または請求項２に係るメディアデータ記憶装置にあって、前記記憶手段は、複数種類のメディアの少なくともテキストを含むデータが同期再生されるように当該各メディア毎に予め経過時間を設定して配列された制御命令に、各メディアのＵＲＬを対応付けて記憶すると共に、前記テキストデータに対する表示制御命令を記憶する制御命令記憶手段とされるので、各メディアのネットサイト上から取り込まれた同期再生すべき各種のデータのうち、テキストデータについては制御命令記憶手段により記憶された設定経過時間毎の表示制御命令に従い、他の種類のメディアのデータと共に迅速且つ確実に同期再生させることができる。
【０１９６】
また、本発明の請求項７に係るメディアデータ記憶装置によれば、前記請求項１乃至請求項６の何れか１項に係るメディアデータ記憶装置にあって、前記複数種類のメディアのデータには複数の言語からなるデータが用意され、前記記憶手段により記憶されるＵＲＬは言語の指定記号を含み、前記メディアデータ取得手段は、前記記憶手段により記憶された各メディアのＵＲＬに対応付けられたメディアの指定の言語のデータをインターネット経由で取得するので、指定の言語からなる各メディアのデータも単にＵＲＬで指定された各ネットサイトから取り込むだけで、言語の指定された複数メディアのデータも迅速且つ確実に同期再生させることができる。
【０１９７】
また、本発明の請求項８に係るメディアデータ記憶処理プログラムによれば、当該プログラムをメディアデータ記憶装置にインストールすることで、このメディアデータ記憶装置のコンピュータにおいて、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、この記憶手段により記憶された各メディアのＵＲＬに対応付けられたメディアのデータを複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得することができる。このため、メディアデータ記憶装置では、記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ取得手段により取得された各メディアのデータを迅速且つ確実に同期再生させることができる。
【０１９８】
また、本発明の請求項９に係るメディアデータ記憶処理プログラムによれば、当該プログラムをメディアデータ記憶装置にインストールすることで、このメディアデータ記憶装置のコンピュータにおいて、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、この記憶手段により記憶された各メディアのＵＲＬに対応付けられて記憶装置に記憶されている複数種類のメディアのデータを複数種類のメディアの同期再生に先立って、メディアデータ取得手段によりインターネット経由で取得でき、メディアデータ記憶手段により記憶することができる。このため、メディアデータ記憶装置では、記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられて前記メディアデータ記憶手段により記憶された各メディアのデータを迅速且つ確実に同期再生させることができる。
【０１９９】
また、本発明の請求項１０に係るメディアデータ記憶処理プログラムによれば、当該プログラムをメディアデータ記憶装置にインストールすることで、このメディアデータ記憶装置のコンピュータにおいて、同期再生されるべき複数種類のメディア毎に予め経過時間を設定して配列された各メディアのＵＲＬを記憶している記憶手段をアクセスし、メディアデータ取得手段によって、前記記憶手段により記憶された各メディアのＵＲＬが設定された経過時間に従って順次読み出され、この読み出されたＵＲＬに対応付けられたメディアのデータをインターネット経由で取得することができる。このため、メディアデータ記憶装置では、各メディアのネットサイト上から同期再生すべき各種のデータを、設定経過時間に応じて各サイトのＵＲＬに従い順次取り込み、この取り込んだ複数メディアのデータを迅速且つ確実に同期再生させることができる。
【０２００】
よって、本発明によれば、複数種類のメディアの同期再生に先立って、そのメディアデータをインターネット経由で取得することが可能になるメディアデータ記憶装置、およびメディアデータ記憶処理プログラムを提供できる。
【図面の簡単な説明】
【図１】本発明のメディアデータ記憶装置の実施形態に係る携帯機器１０を備えたマルチメディア記憶再生システムの全体の構成を示す図。
【図２】前記マルチメディア記憶再生システムにおける第１実施形態の各メディアのネットサイト３０ａ〜３０ｃにて提供されるデータ内容を示す図であり、同図（Ａ）はサイトＡ３０ａにて用意された外国語会話練習用の字幕テキストデータを示す図、同図（Ｂ）はサイトＢ３０ｂにて用意された外国語会話練習用の音声データを示す図、同図（Ｃ）はサイトＣ３０ｃにて用意された外国語会話練習用の画像データを示す図。
【図３】前記携帯機器１０のメモリ１２に格納された第１実施形態のマルチメディア再生用ファイル１２ｂ（１２ｃ）を構成するタイムコードファイル１２ｃ２を示す図。
【図４】前記携帯機器１０の第１実施形態のメディア同期再生処理プログラム１２ａ２に従った第１のマルチメディア再生処理を示すフローチャート。
【図５】前記図３（Ｃ）における英会話学習用のマルチメディア再生ファイル１２ｃに基づいた英会話テキスト・音声・画像データの同期再生状態を示す図。
【図６】前記図３（Ｂ）における外国語会話学習用のマルチメディア再生ファイル１２ｃに対して独語を言語指定した場合の独語会話テキスト・音声・画像データの同期再生状態を示す図。
【図７】前記携帯機器１０の第１実施形態のメディア同期再生処理プログラム１２ａ２に従った第２のマルチメディア再生処理を示すフローチャート。
【図８】前記第１実施形態のマルチメディア記憶再生システムにおける他の実施形態に伴う携帯機器１０側でのメディア再生処理とサーバ３０側でのサーバ処理とを示すフローチャート。
【図９】前記マルチメディア記憶再生システムにおける第２実施形態の各メディアのネットサイト３０ａ〜３０ｃにて提供されるデータ内容を示す図であり、同図（Ａ）はサイトＡ３０ａにて用意された外国語会話練習用のテキストデータを示す図、同図（Ｂ）はサイトＢ３０ｂにて用意された外国語会話練習用の音声データを示す図、同図（Ｃ）はサイトＣ３０ｃにて用意された外国語会話練習用の画像データを示す図。
【図１０】前記携帯機器１０のメモリ１２に格納された第２実施形態のマルチメディア再生用ファイル１２ｂ（１２ｃ）を構成するタイムコードファイル１２ｃ２を示す図。
【図１１】前記携帯機器１０の第２実施形態のメディア同期再生処理プログラム１２ａ２に従った第１のマルチメディア再生処理を示すフローチャート。
【図１２】前記携帯機器１０の第２実施形態のメディア同期再生処理プログラム１２ａ２に従った第２のマルチメディア再生処理を示すフローチャート。
【符号の説明】
１０ …携帯機器
１１ …ＣＰＵ
１２ …メモリ
１２Ａ…ＲＯＭ
１２ａ…携帯機器制御プログラム
１２ａ１…（テキスト／音声／画像）出力用プログラム
１２ａ２…メディア同期再生処理プログラム
１２Ｂ…ＦＬＡＳＨメモリ
１２ｂ…暗号化されたマルチメディア再生用ファイル（ＣＡＳファイル）
１２Ｃ…ＲＡＭ
１２ｃ…解読されたマルチメディア再生用ファイル（ＣＡＳファイル）
１２ｃ１…ヘッダ情報
１２ｃ１ａ…処理単位時間
１２ｃ２…タイムコードファイル
１２ｃ３…メディア内容データ
１２ｄ…（学習／言語）指定データ
１２ｅ…画像展開バッファ
１３ …外部記録媒体
１４ …記録媒体読取部
１５ …電送制御部
１６ …通信部
１７ａ…入力部
１７ｂ…座標入力装置
１８ …表示部
１９ａ…音声入力部
１９ｂ…音声出力部
２０ …通信機器（自宅ＰＣ）
３０ …Ｗｅｂサーバ
３０ａ…ネットサイトＡ（テキスト）
３０ｂ…ネットサイトＢ（音声）
３０ｃ…ネットサイトＣ（画像）
Ｎ …通信ネットワーク（インターネット）[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a media data storage device for synchronously reproducing data of each medium such as text data, audio data, and image data, and a media data storage processing program.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, as a technique for simultaneously reproducing data such as music, images, texts, and the like, for example, for each frame of audio data information-compressed according to MPEG-3, an additional data area provided in each frame is provided. For example, in the case of karaoke, some karaoke voices are reproduced synchronously with the karaoke voice and the image and lyrics by embedding the synchronization information of text data and image data to be reproduced synchronously with the audio data.
[0003]
However, in the conventional synchronous reproduction technique of a plurality of types of data using the additional data area of the MPEG data, the embedding of the synchronization information is defined in the additional data area of each MP3 audio data frame. Therefore, synchronization information cannot be extracted unless the MP3 audio data is reproduced, and synchronous reproduction of other types of data can be performed only by reproducing MP3 data.
[0004]
For this reason, for example, when the synchronization information of the text data is embedded in the MP3 audio data, even if the audio data is not reproduced, the audio reproduction process must be continuously performed as the non-audio data even if the reproduction of the audio data is not performed. There is a problem that playback cannot be performed.
[0005]
Therefore, conventionally, the synchronous reproduction processing of a plurality of types of data is performed based on the reproduction processing of MP3 data, and thus there is a problem that the processing load on the CPU of the reproduction apparatus becomes heavy.
[0006]
On the other hand, various programs provided on media of various Internet sites are downloaded by accessing the addresses of the respective Internet sites set in advance according to the time lapse information (time table), and are simply played back. Multimedia playback processing technology that sequentially and continuously plays back programs of various media with the passage of time has been considered. (For example, refer to Patent Document 1.)
[0007]
[Patent Document 1]
JP-A-2002-261715
[0008]
[Problems to be solved by the invention]
However, even in such a multimedia reproduction processing technology, audio data, text data, and image data only reproduce the program data itself that is already synchronized based on the PM3 data and the like. As described above, there is a problem that the processing load on the CPU of the reproducing apparatus becomes heavy, and the audio, text, and image data to be reproduced synchronously are always synchronized and integrated, and the data of a plurality of types of media are reproduced. Cannot be synchronized for playback.
[0009]
The present invention has been made in view of the above-described problems, and has a media data storage device and a media data storage device capable of acquiring media data via the Internet prior to synchronous reproduction of a plurality of types of media. It is intended to provide a processing program.
[0010]
[Means for Solving the Problems]
That is, the media data storage device according to claim 1 of the present invention has storage means for storing URLs of media arranged in advance by setting an elapsed time for each of a plurality of types of media to be synchronously reproduced. Then, the data of the medium associated with the URL of each medium stored by the storage means is obtained via the Internet by the media data obtaining means prior to the synchronous reproduction of a plurality of types of media.
[0011]
According to this, the URLs of the respective media stored by the storage unit are sequentially read out according to the set elapsed time, and the respective media obtained by the media data obtaining unit are associated with the read URLs. Can be synchronously reproduced quickly and reliably.
[0012]
Further, the media data storage device according to claim 2 of the present invention has storage means for storing URLs of media arranged in advance by setting an elapsed time for each of a plurality of types of media to be synchronously reproduced. Prior to the synchronized playback of the plurality of types of media, the data of the plurality of types of media stored in the storage device in association with the URLs of the respective media stored by the storage unit are transmitted by the media data acquisition unit via the Internet. And stored by the media data storage means.
[0013]
According to this, the URLs of the respective media stored by the storage means are sequentially read out according to the set elapsed time, and the respective media stored by the media data storage means are associated with the read URLs. Can be synchronously reproduced quickly and reliably.
[0014]
Also, the media data storage device according to claim 3 of the present invention has a storage means for storing URLs of media arranged in advance by setting an elapsed time for each of a plurality of types of media to be synchronously reproduced. Then, the media data acquisition unit sequentially reads out the URLs of the respective media stored by the storage unit according to the set elapsed time, and acquires the media data associated with the read URLs via the Internet. Is done.
[0015]
According to this, various data to be synchronously reproduced from the net site of each media are sequentially fetched in accordance with the URL of each site according to the set elapsed time, and the fetched data of the plurality of media is synchronously and rapidly reproduced. You can do it.
[0016]
Also, in the media data storage device according to claim 4 of the present invention, in the media data storage device according to claim 1 or 2, the storage means reproduces data of a plurality of types of media synchronously. As described above, the control command storage means stores the control commands arranged with the elapsed time set in advance for each medium in association with the URL of each medium.
[0017]
According to this, in accordance with the control command for each set elapsed time stored by the control command storage means, various data to be synchronously reproduced from a net site of each medium are fetched by the URL associated therewith, and the fetched data is obtained. The data of a plurality of media can be synchronously and quickly reproduced.
[0018]
A media data storage device according to a fifth aspect of the present invention is the media data storage device according to any one of the first to fourth aspects, wherein the data of the plurality of types of media is text data. , And the text data has time information for synchronized reproduction with data of another type of media in advance.
[0019]
According to this, among the various data to be synchronously reproduced, which are taken in from the media website of each medium, the text data is recorded according to the time information for synchronous reproduction included in the text data, and the other types of media are reproduced. Synchronous reproduction with data can be performed quickly and reliably.
[0020]
Also, in the media data storage device according to claim 6 of the present invention, in the media data storage device according to claim 1 or 2, the storage means stores data of at least text of a plurality of types of media. A control command storage for storing a control command arranged with an elapsed time set in advance for each medium so as to be played back in synchronization with a URL of each medium, and storing a display control command for the text data. Means.
[0021]
According to this, of the various data to be synchronously reproduced taken from the media site of each medium, the text data is of another type according to the display control command for each set elapsed time stored by the control command storage means. And quickly and reliably perform synchronous reproduction together with the data of the other media.
[0022]
Further, in the media data storage device according to claim 7 of the present invention, in the media data storage device according to any one of claims 1 to 6, the data of the plurality of types of media includes a plurality of media. Language data is prepared, the URL stored by the storage unit includes a language designation symbol, and the media data acquisition unit specifies a medium associated with the URL of each medium stored by the storage unit. Data in different languages via the Internet.
[0023]
According to this, it is possible to quickly and surely synchronously reproduce data of a plurality of media in a specified language by simply taking in data of each media in a specified language from each net site specified by a URL. Become.
[0024]
According to the media data storage processing program according to claim 8 of the present invention, by installing the program in the media data storage device, a plurality of types of media to be synchronously reproduced on the computer of the media data storage device The storage means storing the URLs of the respective media arranged with the elapsed time set in advance for each of them is accessed, and the data of the media associated with the URLs of the respective media stored by the storage means are stored in a plurality of types. Prior to the synchronized playback of the media, the media data is obtained by the media data obtaining means via the Internet.
[0025]
According to this, in the media data storage device, the URLs of the respective media stored by the storage unit are sequentially read out according to the set elapsed time, and are associated with the read out URLs by the media data acquisition unit. The acquired data of each medium can be synchronized and reproduced quickly and reliably.
[0026]
According to the media data storage processing program of the ninth aspect of the present invention, by installing the program in the media data storage device, a plurality of types of media to be synchronously reproduced on a computer of the media data storage device. The storage means storing the URLs of the media arranged with the elapsed time set in advance for each of the media is accessed, and stored in the storage device in association with the URLs of the media stored by the storage means. Prior to synchronous reproduction of a plurality of types of media, data of a plurality of types of media is acquired by the media data acquisition unit via the Internet, and stored by the media data storage unit.
[0027]
According to this, in the media data storage device, the URLs of the respective media stored by the storage unit are sequentially read out according to the set elapsed time, and are associated with the read URLs by the media data storage unit. The stored data of each medium can be synchronized and reproduced quickly and reliably.
[0028]
According to the media data storage processing program according to claim 10 of the present invention, by installing the program in the media data storage device, a plurality of types of media to be synchronously reproduced on a computer of the media data storage device The storage means storing the URLs of the media arranged in advance with the elapsed time set for each is accessed, and the media data acquisition means sets the elapsed time at which the URLs of the media stored by the storage means are set. , And the media data associated with the read URL is obtained via the Internet.
[0029]
According to this, in the media data storage device, various data to be synchronously reproduced from the net site of each media are sequentially fetched according to the URL of each site in accordance with the set elapsed time, and the fetched data of the plurality of media is quickly read. In addition, synchronous reproduction can be reliably performed.
[0030]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0031]
(1st Embodiment)
FIG. 1 is a diagram showing an overall configuration of a multimedia storage / playback system including a portable device 10 according to an embodiment of a media data storage device of the present invention.
[0032]
The multimedia storage / playback system uses a portable device 10 such as a PDA (personal digital assistants) as a terminal device for multimedia playback, a server 30 accessible via a communication network (Internet) N, and a network site for various media. Various data provided by 30a to 30c are selectively downloaded and synchronously reproduced.
[0033]
For example, in accordance with a command code and a URL (uniform resource locator) described in a multimedia reproduction file (CAS file) (see FIG. 3) provided from the server 30, predetermined text data is transmitted from the net site A30a to the net site B30b. And predetermined image data from the net site C30c, and performs synchronous reproduction processing.
[0034]
The mobile device (PDA) 10 is configured by a computer that reads a program recorded on various types of recording media or a program transmitted via communication and whose operation is controlled by the read program. A CPU (central processing unit) 11 is provided.
[0035]
The CPU 11 executes a PDA control program stored in the ROM 12A in the memory 12 in advance, a PDA control program read from the external recording medium 13 such as a ROM card into the memory 12 via the recording medium reading unit 14, or the Internet or the like. In accordance with the PDA control program read from the other computer terminal (30) on the communication network N via the transmission control unit 15 into the memory 12, the operation of each circuit unit is controlled. The PDA control program is received by the key input signal corresponding to the user operation from the key input unit 17a, the coordinate input signal corresponding to the user operation from the coordinate input device 17b including a mouse or a tablet, or received by the transmission control unit 15. Other computer terminals (30, 3) on the communication network N a to 30c) or a communication signal from an external communication device (PC: personal computer) 20 which is received via the communication unit 16 by short-range wireless connection or wired connection by Bluetooth (R). Is activated.
[0036]
The CPU 11 is connected to the memory 12, the recording medium reading unit 14, the transmission control unit 15, the communication unit 16, the key input unit 17a, the coordinate input device 17b, and further includes a display unit 18 composed of an LCD and a microphone. An audio input unit 19a for inputting audio, an audio output unit 19b having a speaker and outputting audio are connected.
[0037]
The CPU 11 has a built-in timer for measuring the processing time.
[0038]
The memory 12 of the portable device 10 includes a ROM 12A, a flash memory (EEP-ROM) 12B, and a RAM 12C.
[0039]
The ROM 12A includes a system program for controlling the entire operation of the portable device 10 and a network communication program for performing data communication with each of the computer terminals (30, 30a to 30c) on the communication network N via the transmission control unit 15, In addition to storing an external device communication program for performing data communication with an external communication device (PC) 20 via the unit 16, a schedule management program, an address management program, and display / audio of text data on the display unit 18 A (text / sound / image) output program 12a1, which is a drive program for independently outputting data from the sound output unit 19b and displaying image data on the display unit 18, is provided by various media. Media synchronization for synchronous playback of audio / text / image data Such as raw processing program 12a2, various PDA control program is stored.
[0040]
The FLASH memory (EEP-ROM) 12B stores, for example, an encrypted multimedia playback file (CAS file) 12b for a foreign language conversation text to be played back based on the media synchronous playback processing program 12a2. In addition, the schedule of the user and the addresses of friends and acquaintances managed based on the schedule management program and the address management program are stored.
[0041]
Here, the encrypted multimedia playback file 12b stored in the FLASH memory (EEP-ROM) 12B is, for example, a text / language file which is obtained by selectively downloading foreign language conversation practice from various media net sites 30a to 30c. This file is used for synchronous playback of audio and video, and is compressed and encrypted by a predetermined algorithm.
[0042]
The encrypted reproduction file 12b is recorded and distributed on a CD-ROM, for example, or distributed and distributed from a file distribution server 30 on a communication network (Internet) N. 30), the encrypted playback file 12b is read into, for example, a communication device (PC) 20 as a user's home PC, and then transmitted via a communication unit 16 of the portable device (PDA) 10. (ROM) 12B.
[0043]
In the RAM 12C, a decrypted multimedia playback file (CAS file) 12c obtained by expanding and decrypting the encrypted playback file 12b is stored, and image files in the decrypted playback file 12c are expanded. An image development buffer 12e for storing and storing the image data is provided. The decrypted CAS file 12c is composed of header information (12c1) for storing the processing unit time (12c1a) of the playback command, a time code file (12c2) described later, and media content data (12c3).
[0044]
The media content data (12c3) includes time information for synchronous reproduction separately downloaded from the net sites A30a to A30c according to a URL (uniform resource locator) described in correspondence with the command code of the time code file (12c2). , Text data, audio data, and image data. The text data, audio data, and image data, which are the media content data (12c3), are instructed to be reproduced according to the corresponding command codes “URL” of the time code file (12c2), and are output as the (text / audio / image). Is reproduced by the application program 12a1.
[0045]
The RAM 12C stores (learning / language) designation data 12d which is, for example, designation data of learning content of a foreign language conversation text and designation data of the language (English / German / French / ...).
[0046]
Further, the RAM 12C is provided with a work area for temporarily storing various data input to and output from the CPU 11 in accordance with other various processes.
[0047]
FIG. 2 is a diagram showing data contents provided at the net sites 30a to 30c of respective media of the first embodiment in the multimedia storage / reproduction system, and FIG. 2 (A) shows foreign data prepared at the site A 30a. FIG. 4B shows caption text data for practicing language conversation, FIG. 4B shows voice data for practicing foreign language conversation prepared at site B30b, and FIG. 4C shows data prepared at site C30c. It is a figure which shows the image data for foreign language conversation practice.
[0048]
As shown in FIG. 2 (A), net site A30a <http: // abc. co. jp>, for example, each foreign language conversation practice text has the same text content, and text data of each corresponding character is prepared for each language used, and is arbitrarily specified by the user. The type of language used is divided into, for example, English / German / French, and data for each language is stored in association with a different URL for each sentence. When the text data is downloaded to the portable device 10, the text data is reproduced and displayed by the text output program 12a1, and the text character strings are sequentially inverted in accordance with the elapse of the practice time at a predetermined speed from the start of the reproduction. Time information (→). The URL of the text data including the time information for the character string inversion display is added with an initial letter “c” of “caption” meaning caption, and is set to “... ctxt”. In addition, initials e (English), g (German), and f (French) according to the designated language are added to the URL. For example, the English version of the conversation text 7-1 is “... ekaiwa7-1.text”. , The German version of 7-1 is "... gkaiwa 7-1.text".
[0049]
As shown in FIG. 2B, the net site B30b <http: // def. co. jp> is read-out voice data corresponding to each text data of each foreign language conversation practice text prepared at the site A30a, and the URL of each voice data is a part indicating the data format. For example, the English text data of the conversation text 7-1 is "... ekai 7-1.mp3", and the German text data of the conversation text 7-1 is "... gkaiwa 7-1.mp3".
[0050]
Then, even with this audio data, the audio output program 12a1 reproduces and outputs the audio data so as to match the reverse display of the text data in accordance with the elapse of the practice time at a predetermined speed from the start of reproduction. Contains time information.
[0051]
As shown in FIG. 2 (C), net site B30c <http: // hij. co. jp> is image data of a moving image common to each foreign language conversation text of each foreign language conversation practice text prepared at the site A 30a and the site B 30b, for example, for the text 7-1. Is image data indicating a state in which women are talking, and image data indicating a state in which men are talking is prepared for text 7-2. The initials e (English), g (German) and f (French) indicating the type of the designated language are not added to the URL of each image data, and only the part indicating the data format is different as “mpeg”. For example, the image data of the conversation text 7-1 is "... kaiwa7-1.mpeg", and the image data of the conversation text 7-1 is "... kaiwa7-2.mpeg".
[0052]
Then, even with this image data, the image data is output by the image output program 12a1 so as to match the reverse display of the text data and the output of the audio data in accordance with the elapse of the practice time at a predetermined speed from the start of reproduction. It contains time information for playback and display.
[0053]
For example, text data, voice data, and image data of a foreign language conversation practice text prepared in each of the net sites 30a to 30c follow a time code file 12c2 in a multimedia playback file (CAS) 12c in the portable device 10. Along with the multimedia reproduction process, the data is downloaded to the portable device 10 and stored as media content data 12c3, and is reproduced synchronously according to a (text / audio / image) output program 12a1 corresponding to various data.
[0054]
FIG. 3 is a diagram showing a time code file 12c2 included in the multimedia playback file 12b (12c) of the first embodiment stored in the memory 12 of the portable device 10.
[0055]
The multimedia playback file 12b (12c) serving as a playback target file of the portable device 10 is configured by a combination of a time code file 12c2 and media content data 12c3.
[0056]
In the time code file 12c2 shown in FIG. 3, time codes for performing command processing of various data synchronous reproduction at predetermined time intervals (for example, 25 ms) preset for each piece of media data are described and arranged. Each of the time codes includes a command code for instructing an instruction, parameter data for associating the contents of the media data (see FIG. 2) relating to the command, and the net sites 30a to 30c from which the respective media data is obtained. It is composed of a combination of a URL, the site name A to C, and the type of each media data (caption text / audio / image).
[0057]
When the time code file 12c2 is before the language is specified by the user, as shown in FIG. 3B, the URL from which each media data is obtained is the URL of the text data and the URL of the audio data. The symbol part indicating the designated language is described with "*". For example, the URL of the text data of the conversation text 7-1 is <http: // abc. co. jp / * kaiwa 7-1. ctxt> is a URL for which a language is not specified. Then, when the language is specified, as shown in FIG. 3C, the symbol part “*” of the specified language is changed to a symbol (English “e”, German “g”, French “F”..., For example, when English is the designated language, the URL of the text data of the conversation text 7-1 is <... Ekaiwa 7-1. ctxt>. As a result, the learning data specified by the user and the text data of the English conversation text 7-1 as the specified language can be acquired from the net site A30a.
[0058]
As shown in FIG. 3A, a fixed time interval for sequentially executing command processing according to the time code file 12c2 is described and set as a processing unit time 12c1a in the header information 12c1 of the time code file 12c2.
[0059]
As the media content data 12c3, user-designated learning data downloaded from the media net sites A30a to C30c corresponding to the URLs described in the time code file 12c2 and text for synchronous playback in a designated language. Data, audio data, and image data are stored.
[0060]
Commands used for the time code file 12c2 include, for example, URL (instruction to reproduce URL media data), FN (end of processing), and NP (invalid).
[0061]
That is, by activating the media synchronous playback processing program 12a2 stored in the ROM 12A of the portable device (PDA) 10, the decrypted multimedia playback file 12c decrypted from the FLASH memory 12B and stored in the RAM 12c is converted into the designated learning data. This is the file content for the foreign language conversation practice text shown in FIG. 3A, for example, according to the data, and as shown in FIG. 3B, the URL language designation symbol is changed according to the designated language “English”. When the conversion is changed from "*" to "e", the text data, voice data, and image of English conversation texts 7-1 and 7-2 are transmitted from the net sites A30a to C30c corresponding to the URLs described in the time code file 12c2. Data (see FIG. 2) is downloaded and stored as media content data 12c3 in memory 12. It is.
[0062]
When the first command code “URL” is read in accordance with the command processing at regular time intervals, the first command code “URL” is stored as the media content data 12c3 according to the URL address “... Ekaiwa7-1.txt” described in the corresponding manner. The text data of the English conversation text 7-1 is read, and the display processing is instructed to the text output program 12a1.
[0063]
If the second command code “URL” is read in accordance with the command processing at the same fixed time, the command code is stored as the media content data 12c3 according to the URL address “... Ekaiwa7-1.mp3” described correspondingly. The voice data of the English conversation text 7-1 is read, and the voice output processing is instructed to the voice output program 12a1.
[0064]
Further, when the third command code "URL" is read in accordance with the command processing at the same fixed time, the command code is stored as the media content data 12c3 according to the URL address "... kaiwa7-1.mpeg" described correspondingly. The image data of the English conversation text 7-1 is read, and the display processing is instructed to the image output program 12a1.
[0065]
The text data, audio data, and image data of the English conversation text read from the media content data 12c3 and reproduced are processed by starting reproduction of any data at predetermined time intervals. Synchronization time information in which the output elapsed times match each other is included in advance, and the (text / sound / image) output program 12a1 is output in accordance with each command code “URL” for which the time elapse is set in advance in the time code file 12c2. In the media synchronous reproduction processing program 12a2, the reproduction is inevitably synchronously controlled by the media synchronous reproduction program 12a2, without the need for the CPU 11 to control the synchronization timing.
[0066]
The detailed reproduction operation of the multimedia reproduction file 12b (12c) shown in FIG. 3 will be described later.
[0067]
Next, the media playback function of the portable device 10 of the multimedia storage / playback system configured as described above according to the first embodiment will be described.
[0068]
FIG. 4 is a flowchart showing a first multimedia reproduction process of the portable device 10 according to the media synchronous reproduction program 12a2 of the first embodiment.
[0069]
For example, when practicing a foreign language conversation is performed by synchronous reproduction of text, voice, and image multimedia, learning data (for example, foreign language conversation learning) desired by the user is designated by operating the input unit 17a or the coordinate input device 17b. (Step S1), for example, the encrypted multimedia playback file (including the time code file 12c2) 12b of the designated learning data taken from the CD-ROM into the communication device (PC) 20, which is a home PC, is The data is read via the communication unit 16 of the device (PDA) 10 and stored in the flash memory 12B, or downloaded from the server 30 on the communication network (Internet) N via the transmission control unit 15 and stored in the flash memory 12B. Is performed (step S2).
[0070]
At this time, the encrypted multimedia playback file (CAS file) 12b stored in the FLASH memory 12B is decrypted and decrypted, for example, the time code file 12c2 before the language designation conversion shown in FIGS. 3A and 3B. Are transferred to and stored in the RAM 12C.
[0071]
When the language (English / German / French / ...) to be practiced is selected and designated for the learning data of the foreign language conversation (step S3), the designated language is determined (step S4) and "English Is specified, the specified conversation learning data stored in the RAM 12C is stored in the URL corresponding to the text data and the audio data in the time code file 12c2 in the multimedia playback file (CAS file) 12c. The language-unspecified symbol "*" is converted and corrected into the English-specified symbol "e" as shown in FIG. 3C (step S5e).
[0072]
When "German" is designated, the language unspecified symbol "*" on each URL corresponding to text data and audio data in the time code file 12c2 stored in the RAM 12C is replaced with the German designation symbol " g ”(step S4 → S5g).
[0073]
Further, when "French" is designated, the language unspecified symbol "*" on each URL corresponding to text data and audio data in the time code file 12c2 stored in the RAM 12C is replaced with the French designation symbol " f ”(step S5f).
[0074]
In this way, when the time code file 12c2 in the multimedia playback file (CAS file) 12c of the specified conversation learning data is converted and corrected according to the user-specified language (for example, "English") (FIG. 3C). According to the HP address described in association with each command code “URL” on the time code file 12c2, the corresponding media net sites A30a to C30c are accessed, and the designated learning data is designated and designated. The text data for speech learning of the language "English", the voice data, and the image data common to each language are downloaded and stored as the media content data 12c3 in the RAM 12C (step S6).
[0075]
That is, the HP address <http: //abc.html described in the time code file 12c2 shown in FIG. co. jp / ekaiwa 7-1. ctxt><... 7-2. ctxt><... 7-3. ctxt>, the English subtitle text data “Exceme me.” “May I help you?” shown in FIG. 2A is sequentially downloaded from the net site A30a, and the HP address <http: // / Def. co. jp / ekaiwa 7-1. mp3><... 7-2. mp3><... 7-3. mp3>, the English-language audio data “Excuse Me” and “May I Help U” shown in FIG. 2B are sequentially downloaded from the net site B30b, and further, the HP address <http: // hij. . co. jp / kaiwa 7-1. mpeg><... 7-2. mpeg><... 7-3. According to mpeg>, the image data “female moving image”, “male moving image” common to each language shown in FIG. 2C is sequentially downloaded from the net site C30c.
[0076]
Then, the processing unit time 12c1a (for example, 25 ms / 50 ms / 25 ms / 50 ms / 50 ms) described in the header information 12c1 of the decrypted multimedia playback file (CAS file) 12c including the time code file 12c2 and the media content data 12c3 stored in the RAM 12C. ..) Is set as a read time of the multimedia reproduction file (CAS file) 12c at a constant time interval by the CPU 11 (step S7).
[0077]
Then, a read pointer is set at the head of the media playback file (CAS file) 12c stored in the RAM 12C (step S8), and a timer for measuring the playback processing timing of the playback file 12c is started (step S8). S9).
[0078]
Here, the pre-reading process is started in parallel with the reproduction process (step S10).
[0079]
In this pre-reading process, when there is a command for displaying image data after the command processing of the position of the current read pointer according to the time code file 12c2 (see FIG. 3C) of the reproduction file 12c, By pre-reading the image data specified by the parameter data of the image data display command and expanding the image data in the image expansion buffer 12e, the read pointer actually moves to the position of the later image display command. In this case, the designated image file can be immediately output and displayed without delay.
[0080]
In step S9, when the processing timer is started, the processing timer is set in step S8 for each processing unit time corresponding to the multimedia playback target file 12c for foreign language conversation learning set in step S7. The command code and its parameter data of the time code file 12c2 (see FIG. 3) constituting the media playback file 12c at the position of the read pointer thus read are read (step S11).
[0081]
Then, it is determined whether or not the command code read from the time code file 12c2 (see FIG. 3) in the reproduction file 12c is “FN” (step S12), and when it is determined that the command code is “FN”, At that time, a stop process of the multimedia reproduction process is instructed and executed (step S12 → S13).
[0082]
On the other hand, if it is determined that the command code read from the time code file 12c2 (see FIG. 3) in the reproduction file 12c is not "FN", it is determined whether the command code is "URL". It is determined (step S12 → S14). If it is determined that the URL is "URL", the text data, audio data, or image data stored as the media content data 12c3 is read according to the HP address corresponding to the URL at the corresponding pointer position, and the type of the data is read. The reproduction is started by the (text / sound / image) output program 12a2 corresponding to (step S14 → S15A).
[0083]
That is, when text data (see FIG. 2A) is read from the media content data 12c3 in accordance with the HP address corresponding to the command code URL, reproduction and display are started by the text output program 12a2, When the data (see FIG. 2B) is read, the reproduction output is started by the audio output program 12a2, and when the image data (see FIG. 2C) is read. The reproduction output is started by the audio output program 12a2.
[0084]
Then, the time counting operation by the processing timer is started again, and it is determined whether or not the time counted by the timer has reached the next processing unit time 12c1a (step S17).
[0085]
On the other hand, if it is determined in step S14 that the command code read from the time code file 12c2 (see FIG. 3) in the reproduction file 12c is not "URL", the process proceeds to another command process. Is performed (step S16). The other command processing is processing of a command corresponding to each of the other command codes.
[0086]
If it is determined in step S17 that the time measured by the timer has reached the next processing unit time 12c1a, the read pointer to the multimedia playback file (CAS file) 12c stored in the RAM 12C is set to the next. The position is updated and set (steps S17 → S18), and the process from the reading of the command code and the parameter data of the time code file 12c2 (see FIG. 3) at the position of the read pointer in the step S11 is repeated (step S18 → S11). To S17).
[0087]
That is, the CPU 11 of the portable device 10 executes the time code file 12c2 for each command processing unit time set and described in advance in the multimedia playback file 12b (12c) in accordance with the media synchronous playback processing program 12a2 stored in the ROM 12A. By simply reading out the command codes and their parameter data arranged in (see FIG. 3) and instructing a process corresponding to the command, synchronous reproduction of various media data corresponding to each command described in the time code file 12c2 is performed. Processing is executed.
[0088]
Here, the synchronous reproduction output operation of text / voice / image data by the media synchronous reproduction processing program 12a1 (see FIG. 4) based on the multimedia reproduction file 12c for English conversation learning shown in FIG. 3C will be described in detail. explain.
[0089]
FIG. 5 is a diagram showing a synchronized playback state of English conversation text / voice / image data based on the multimedia playback file 12c for English conversation learning in FIG. 3 (C).
[0090]
In the multimedia playback file (12c) for learning English conversation, command processing is executed for each processing unit time (25 ms) (FIG. 3A) described and set in the header information (12c1). When the first command code “URL” and its parameter data “00” of the time code file 12c2 (see FIG. 3) are read, the HP address <http: // abc. co. jp / ekaiwa 7-1. ctxt>, subtitle text data “Exuse me.” (see FIG. 2A) of the English conversation text 7-1 that is downloaded and stored as the media content data 12c3 is read out, and the text output program 12a1 is read out. As shown in FIGS. 5A to 5C, a reproduction display process is instructed.
[0091]
As a result, the subtitle text data “Exuse me.” Of the English conversation text 7-1 is reproduced and displayed while the underline is highlighted for each character on the display unit 18.
[0092]
When the second command code “URL” and its parameter data “02” are read, the HP address <http: // def. co. jp / ekaiwa 7-1. mp3>, the audio data “Excuse Me” (see FIG. 2 (B)) of the English conversation text 7-1 downloaded and stored as the media content data 12c3 is read out, and the same is sent to the audio output program 12a1. As shown in FIGS. 5A to 5C, a reproduction output process is instructed.
[0093]
As a result, the audio output unit 19b sequentially starts reproducing and outputting the audio data “Excuse Me” of the English conversation text 7-1.
[0094]
When the third command code “URL” and its parameter data “02” are read, the HP address <http: // hij. co. jp / kaiwa 7-1. mpeg>, the language common image data “female moving image” (see FIG. 2C) of the conversation text 7-1 that is downloaded and stored as the media content data 12c3 is read out, and the image output program 12a1 is read. 5 (A) to 5 (C), the reproduction display processing is instructed.
[0095]
Thereby, the language common image data “female moving image” of the conversation text 7-1 is displayed in the table.
The reproduction display is started while being sequentially switched in the display unit 18.
[0096]
Further, when the fifth command code “URL” and its parameter data “02” of the time code file 12c2 (see FIG. 3) are read, the HP address <http: // abc. co. jp / ekaiwa7-2. ctxt>, the subtitle text data “May I help you?” (see FIG. 2A) of the English conversation text 7-2, which is downloaded and stored as the media content data 12c3, is read and sent to the text output program 12a1. Then, as shown in FIGS. 5 (D) to 5 (F), a reproduction display process is instructed.
[0097]
As a result, the subtitle text data "May I help you?" Of the English conversation text 7-2 is reproduced and displayed while the underline is highlighted for each character on the display unit 18.
[0098]
When the sixth command code “URL” and its parameter data “00” are read, the HP address <http: // def. co. jp / ekaiwa7-2. mp3>, the audio data “May I Help You” (see FIG. 2 (B)) of the English conversation text 7-2 downloaded and stored as the media content data 12c3 is read out, and the audio output program 12a1 is read out. As shown in FIGS. 5D to 5F, a reproduction output process is instructed.
[0099]
As a result, the audio output unit 19b sequentially starts reproducing and outputting the audio data “May I Help You” of the English conversation text 7-2.
[0100]
When the seventh command code “URL” and its parameter data “00” are read, the HP address <http: // hij. co. jp / kaiwa 7-2. mpeg>, the language common image data “male moving image” (see FIG. 2C) of the conversation text 7-2 that is downloaded and stored as the media content data 12c3 is read out, and the image output program 12a1 is read out. As shown in FIGS. 5 (D) to 5 (F), reproduction display processing is instructed.
[0101]
As a result, the language common image data “male moving image” of the conversation text 7-2 is reproduced and displayed while being sequentially switched on the display unit 18.
[0102]
In this case, as the subtitle text data “Exuse me.” And “May I help you?” Are reproduced and displayed by the text output program 12a1, each of the subtitle text data “Exuse me.” It contains time information (→...) For sequentially inverting (underlining emphasized) the text character string, and even if the audio data “Excuse Me” or “May I Help U”, When the audio data is reproduced and output by the program 12a1, it includes time information for reproducing and outputting the audio data so as to match the reverse display of the subtitle text data in accordance with the elapse of a predetermined speed from the start of the reproduction. Further, even in the language common image data “female moving image” and “male moving image”, the image output program 12 a Time information for switching and displaying the image data in accordance with the reverse display of the subtitle text data and the output of the audio data in accordance with the elapse of a predetermined speed from the start of the reproduction. The command code and its parameter data arranged in the time code file 12c2 for each reference unit time (25 ms / 50 ms) of the command processing set and described in advance in the multimedia playback file 12b (12c). Is read, and only by instructing reproduction processing of each piece of media data read in response to the URL command, synchronization of text / voice / image data for conversation learning downloaded according to the URL address described in the time code file 12c2 is performed. Playback processing can be performed.
[0103]
Accordingly, the burden on the main processing of the CPU is reduced, and even a CPU having a relatively small processing capability, for example, the portable device (PDA) 10 can easily perform synchronous reproduction processing of a plurality of types of net media data including text, images, and sounds. This can be realized even with a simple reproducing apparatus that does not use a high-performance CPU.
[0104]
FIG. 6 is a diagram showing a synchronized reproduction state of German-language conversation text, voice, and image data when a German language is specified for the multimedia reproduction file 12c for foreign language conversation learning in FIG. 3B.
[0105]
When German is specified as the designated language of the foreign language conversation learning text, the language unspecified symbol “*” on each URL corresponding to the text data and the voice data in the time code file 12c2 stored in the RAM 12C is displayed. , Is converted to the German designation symbol "g" (steps S4 → S5g), and the HP address after the German designation modification <http: // abc. co. jp / gkaiwa 7-1. ctxt><... 7-2. ctxt><... 7-3. ctxt>, the German-language subtitle text data “Entschuldigung.” “Was kanich ... Sie tun?” shown in FIG. 2A are sequentially downloaded from the net site A30a, and the HP address <http: // def. co. jp / gkaiwa 7-1. mp3><... 7-2. mp3><... 7-3. In accordance with mp3>, the German-language version of each of the audio data “entssurdigung”, “... kan ich für zi…” shown in FIG. 2 (B) is sequentially downloaded from the net site B30b, and further, the HP address <http: // hij. co. jp / kaiwa 7-1. mpeg><... 7-2. mpeg><... 7-3. In accordance with mpeg>, the image data “female moving image”, “male moving image” common to each language shown in FIG. 2C is sequentially downloaded from the net site C30c (step S6).
[0106]
Therefore, according to the reading of each command code of the time code file 12c2 after the German language designation correction, the media data (German version subtitle text data / German version audio data / common language) corresponding to the HP address associated with the command code “URL” is read. The moving image data) is read out and the reproduction thereof is instructed, so that the text / text for learning the conversation in German is exactly the same as the multimedia synchronized reproduction processing in the English version described with reference to FIG. Synchronous reproduction processing of audio / image data can be executed.
[0107]
In the first embodiment, in the first multimedia reproduction process described with reference to FIG. 4, in the first multimedia reproduction process, a language-unspecified symbol "E" in each URL described in the time code file 12c2 according to the specified language. (*) Is converted into the language designation symbols "e", "g", etc. (steps S3 to S5), and immediately access to the net sites A30a to C30c according to the HP addresses to perform synchronous reproduction. The media data (specified language version caption text data / specified language version audio data / common moving image data) is downloaded and stored in the RAM 12C as media content data 12c3 (step S6), and a command according to the time code file 12c2 is stored. When the code “URL” is read, each piece of media data associated with the Although the procedure for sequentially reading from the media content data 12c3 and instructing reproduction is performed (step S14 → S15A), as in the second multimedia reproduction process described with reference to FIG. The media data (specified language version subtitle text data / specified language version audio data / common moving image data) is read out of the command code “URL” according to the time code file 12c2, and each time the net site A 30a to the Internet address according to the HP address is read. A procedure may be adopted in which the C30c is accessed, sequentially downloaded, and a reproduction instruction is issued.
[0108]
FIG. 7 is a flowchart showing a second multimedia reproduction process of the portable device 10 according to the media synchronous reproduction program 12a2 of the first embodiment.
[0109]
In the second multimedia reproduction processing of the first embodiment, the same processing steps as those of the first multimedia reproduction processing (steps S1 to S18) in FIG. Is omitted.
[0110]
That is, in the second multimedia reproduction processing, the command code “URL” according to the time code file 12c2 is read, and each time the access to the net sites A30a to C30c according to the HP address is performed, and the synchronous reproduction is performed. It is assumed that each media data (designated language version caption text data / designated language version audio data / common moving image data) is sequentially downloaded and a reproduction instruction is given (step S14 → S15B).
[0111]
That is, in step S14, when it is determined that the command code read from the time code file 12c2 (see FIG. 3) in the reproduction file 12c is "URL", the command code is determined according to the HP address corresponding to the URL at the corresponding pointer position. Access is made to the corresponding media net sites A30a to C30c, and the specified learning data and the text data for conversation learning in the specified language, the voice data, and the image data common to each language are downloaded. The reproduction is started by the corresponding (text / audio / image) output program 12a2 (step S14 → S15B).
[0112]
That is, when text data (see FIG. 2A) is downloaded from the net site A30a in accordance with the HP address corresponding to the command code URL, reproduction and display are started by the text output program 12a2, and audio data (FIG. (See FIG. 2B), the reproduction output is started by the audio output program 12a2, and when the image data (see FIG. 2C) is downloaded, the reproduction output is started by the audio output program 12a2. Start.
[0113]
According to this, all the media data (designated language version caption text data / designated language version audio data / common moving image data) to be synchronously reproduced are downloaded in advance and stored as media content data 12c3 in RAM 12C. This eliminates the necessity, so that the multimedia data can be synchronously reproduced without occupying a large-capacity and long memory area such as the portable device 10 for a long time.
[0114]
In the first embodiment, in the first and second multimedia reproduction processes described with reference to FIGS. 4 and 7, any of the reproduction processes corresponds to the learning data designated by the user. The multimedia playback file 12b (12c [12c1, 12c2]) is read from the CD-ROM to the RAM 12C via the communication device (PC) 20 → the communication unit 16, or the server 30 is connected to the communication network N → the transmission control unit 15. After being downloaded to the RAM 12C via the RAM 12C or once taken into the portable device 10, the language on each URL in the time code file 12c2 constituting the multimedia playback file 12c is specified in accordance with the language specified by the user. The unspecified symbol “*” is converted and corrected into the language specification symbols “e”, “g”... It may be configured to reside on a server process in the media reproducing processing and the server 30 side in a bright carrying device 10 side.
[0115]
FIG. 8 is a flowchart showing a media playback process on the portable device 10 side and a server process on the server 30 side according to another embodiment in the multimedia storage and playback system of the first embodiment.
[0116]
That is, in the portable device 10, when data to be learned is designated by the user, a designation signal of the learning data is transmitted to the server 30 (step S1 ').
[0117]
When the server 30 receives the designated signal of the learning data transmitted from the portable device 10 (step B1), the server 30 has a time code file 12c2 of the designated learning data (for example, a foreign language learning text) for multimedia reproduction. The file 12b (12c) is read (step B2).
[0118]
When a language desired by the user is specified in the mobile device 10, a signal specifying the language is transmitted to the server 10 (step S2 ').
[0119]
When the server 30 receives the language designation signal transmitted from the mobile device 10 (step B3), the designated language is determined (step B4), and if "English" is designated, the step is performed. A language unspecified symbol "*" on each URL corresponding to text data and audio data in the time code file 12c2 in the multimedia reproduction file (CAS file) 12c of the user-specified conversation learning data read in B2 Is converted and corrected into the English designation symbol "e" as shown in FIG. 3C (step B5e).
[0120]
When "German" is designated, the language unspecified symbol "*" on each URL corresponding to the text data and the audio data in the time code file 12c2 read by the server 30 is replaced with the German It is converted and corrected to the designated symbol "g" (step B4 → B5g).
[0121]
Further, when "French" is designated, the language unspecified symbol "*" on each URL corresponding to the text data and the audio data in the time code file 12c2 read by the server 30 is changed to French. It is converted and corrected to the designated symbol "f" (step B4 → B5f).
[0122]
In this manner, when the server 30 converts and corrects the time code file 12c2 in the multimedia playback file (CAS file) 12c of the specified conversation learning data according to the user-specified language (for example, "English") (FIG. 3 (C)), a multimedia playback file (CAS file) 12c having the time code file 12c2 is transmitted to the learning data and the portable device 10 which is the language designation source (step B6).
[0123]
Then, the portable device 10 receives, from the server 30, a multimedia playback file (CAS file) 12c having learning data according to the user's designation and having, for example, a time code file 12c2 for English conversation learning according to the designated language. Are stored in the memory 12 (step S3 ').
[0124]
Note that the subsequent processing in the media reproduction processing in the portable device 10 is the same as the processing in the first media reproduction processing in FIG. 4 following the processing in step S6 and subsequent steps. The reproduction processing is the same as the processing following step S7 and subsequent steps, and a description thereof will be omitted.
[0125]
According to this, the portable device 10 simply designates the learning data and language desired by the user, and executes a multimedia playback file (CAS file) having the time code file 12c2 corresponding to the designated learning data and the designated language. ) 12c is generated, received and acquired on the server 30 side, so that the burden on the CPU 11 associated with the media reproduction processing in the portable device 10 can be further reduced.
[0126]
Therefore, according to the media playback function of the portable device 10 of the multimedia storage and playback system having the above-described configuration according to the first embodiment, the processing unit time preset in the time code file 12c2 of the multimedia playback file 12b (12c) is used. In association with the command code “URL” read out for each 12c1a, the storage destination net site A30a / B30b / of each media data (caption text data / audio data / image data) having time information of the reproduction speed to be synchronously reproduced in advance. A URL (HP address) indicating C30c is described, and each media data (subtitle text data / audio data / image data) downloaded according to the HP address corresponding to the command code "URL" for each setting processing unit time 12c1a. Perform each playback instruction Only the playback process of the text, audio, and image data to the portable device 10 that is not originally stored is executed necessarily synchronized. Therefore, the load on the CPU 11 can be made very small, and synchronous playback of text / voice / image can be realized even with a simple playback device that does not use a high-performance CPU.
[0127]
Also, a URL (HP address) indicating the storage destination net site A30a / B30b / C30c of each media data (caption text data / audio data / image data) having time information to be synchronously reproduced described in the time code file 12c2. , A subtitle text data corresponding to the specified language and its audio data are downloaded according to a different HP address according to the language specification symbol. Even with text data and audio data prepared for each language, text and audio data in a desired language can be easily selectively downloaded and synchronously reproduced based on one time code file 12c2.
[0128]
In the first embodiment of the multimedia storage / playback system, the subtitle text data downloaded from the net site A30a and played back according to the HP address described corresponding to each command code “URL” of the time code file 12c2 is The text data itself has time information for sequentially highlighting each character in accordance with the reproduction processing, and the text data itself is inevitably displayed synchronously with the reproduction processing of audio data and image data. As described in the second embodiment, in accordance with a command code “HL” (highlighted display) described in the time code file 12c2 and executed for each set processing unit time 12c1a, text-to-synchronous text data to be reproduced synchronously is described. A configuration for instructing highlighting may be adopted.
[0129]
(2nd Embodiment)
FIG. 9 is a diagram showing data contents provided at the net sites 30a to 30c of respective media of the second embodiment in the multimedia storage / reproduction system, and FIG. 9 (A) shows foreign data prepared at the site A 30a. FIG. 7B shows text data for practicing language conversation, FIG. 6B shows voice data for practicing foreign language conversation prepared at site B30b, and FIG. 6C shows foreign language data prepared at site C30c. It is a figure which shows the image data for word conversation practice.
[0130]
The data contents provided by the net sites 30a to 30c of the respective media of the second embodiment shown in FIG. 9 have the same data contents as the respective media data of the first embodiment shown in FIG. The description of audio data (see FIG. 9B) and image data (see FIG. 9C) is omitted.
[0131]
That is, as shown in FIG. 9A, the net site A30a <http: // abc. co. jp>, text data of each corresponding character is prepared for each language used, and data for each language is stored in association with a different URL for each sentence. This is the same as the first embodiment, except that time information (→...) For sequentially inverting and displaying a text character string is not included.
[0132]
Therefore, the initial “c” of “caption” meaning caption is not added to the URL of the text data of the second embodiment. For example, the English version of the conversation text 7-1 is “... ekaiwa7-1.text” And the German version of 7-1 is "... gkaiwa 7-1.text".
[0133]
FIG. 10 is a diagram showing a time code file 12c2 included in the multimedia playback file 12b (12c) of the second embodiment stored in the memory 12 of the portable device 10.
[0134]
First, similarly to the first embodiment, the time code file 12c2 of the second embodiment includes command processing of various data synchronous reproduction at a fixed time interval (for example, 25 ms) preset for each piece of media data. A time code for performing the command is described and arranged. Each time code includes parameter data for associating a command code designating a command with the contents of media data (see FIG. 9) related to the command. It is configured by a combination of the URLs of the net sites 30a to 30c from which the media data is obtained, the site names A to C, and the types (text / voice / image) of each media data.
[0135]
The command code for instructing the command mainly includes a command code “URL” for instructing reproduction of text data, audio data, and image data read according to the URLs of the associated net sites 30a to 30c. The command code "HL" for instructing the highlighting in accordance with the voice of each character of the text data for each text, voice, and image reproduction instruction corresponding to one sentence of text corresponds to the number of characters to be highlighted as parameter data. Described in association with each other.
[0136]
In the highlighting of each character of the text data according to the command code “HL”, the number of highlighted characters described as the parameter data varies depending on the language used, so that the time code file 12c2 itself depends on the language used. It is a dedicated language learning textbook having the same contents, and is prepared in the CD-ROM or the server 30 as an English time code file, a German time code file, a French time code file, or the like.
[0137]
That is, when the media synchronous playback processing program 12a2 stored in the ROM 12A of the portable device (PDA) 10 is started and learning data and, for example, “English” are designated, the designated learning data and the designated language “English” are designated. The multimedia playback file 12b (12c) having the English version time code file 12c2 (see FIG. 10) corresponding to the time code is read from the CD-ROM or the server 30 into the memory 12 of the portable device 10, and is stored in the time code file 12c2. Text data, audio data, and image data (see FIG. 9) of English conversation texts 7-1 and 7-2 are downloaded from the net sites A30a to C30c corresponding to the described URLs, and the media content data 12c3 in the memory 12 is downloaded. Is stored as
[0138]
When the first command code “URL” is read in accordance with the command processing at regular time intervals, the first command code is stored as the media content data 12c3 according to the URL address “... Ekaiwa7-1.txt” described correspondingly. The text data of the English conversation text 7-1 is read, and the display processing is instructed to the text output program 12a1.
[0139]
If the second command code “URL” is read in accordance with the command processing at the same fixed time, the command code is stored as the media content data 12c3 according to the URL address “... Ekaiwa7-1.mp3” described correspondingly. The voice data of the English conversation text 7-1 is read, and the voice output processing is instructed to the voice output program 12a1.
[0140]
Further, when the third command code "URL" is read in accordance with the command processing at the same fixed time, the command code is stored as the media content data 12c3 according to the URL address "... kaiwa7-1.mpeg" described correspondingly. The image data of the English conversation text 7-1 is read, and the display processing is instructed to the image output program 12a1.
[0141]
When the command code “HL” described in the fifth, 41st, and 59th is read, the first code is written by the number of characters indicated by the parameter data “02”, “07”, and “10”. In accordance with the command code "URL", each display character of the English conversation text 7-1 being displayed is sequentially highlighted.
[0142]
In addition, the audio data and the image data of the English conversation text to be reproduced at the same time are reproduced at a preset time interval, so that the output elapsed times are synchronized with each other. Time information is included in advance, and the reproduction process by the (text / audio / image) output program 12a1 is started in accordance with each command code “URL” in which time elapse is set in advance on the time code file 12c2. In the reproduction processing program 12a2, the reproduction is inevitably synchronized and controlled by the CPU 11, even if the synchronization of the synchronization is not performed by the CPU 11.
[0143]
The detailed reproduction operation of the multimedia reproduction file 12b (12c) shown in FIG. 10 will be described later.
[0144]
Next, a description will be given of a media playback function according to the second embodiment of the portable device 10 of the multimedia storage / playback system configured as described above.
[0145]
FIG. 11 is a flowchart showing a first multimedia reproduction process of the portable device 10 according to the media synchronous reproduction process program 12a2 of the second embodiment.
[0146]
For example, when practicing a foreign language conversation is performed by synchronous reproduction of text, voice, and image multimedia, learning data (for example, foreign language conversation learning) desired by the user is designated by operating the input unit 17a or the coordinate input device 17b. At the same time (step A1), when a language (English / German / French / ...) to be practiced is selected and designated (step A2) for the learning data of the foreign language conversation, for example, communication from a CD-ROM to a home PC is performed. The specified language version of the encrypted multimedia playback file (including the time code file 12c2) 12b corresponding to the specified learning data taken into the device (PC) 20 is transmitted via the communication unit 16 of the portable device (PDA) 10. A server which is read and stored in the FLASH memory 12B or on a communication network (Internet) N 0 is downloaded via the electrical transmission control unit 15, is stored in the FLASH memory 12B (step A3).
[0147]
At this time, the encrypted multimedia playback file (CAS file) 12b stored in the FLASH memory 12B is decrypted and decoded, and is transferred to the RAM 12C with the designated language version time code file 12c2 shown in FIG. 10, for example. Is stored.
[0148]
Then, according to the HP address described in association with each command code “URL” on the English time code file 12c2 corresponding to the language specified by the user (for example, “English”), the corresponding media net site A30a To C30c, the designated learning data and the text data for conversation learning in the designated language "English", the voice data, and the image data common to each language are downloaded and stored as the media content data 12c3 in the RAM 12C. (Step A4).
[0149]
That is, the HP address <http: //abc.http described in the English version time code file 12c2 shown in FIG. co. jp / ekaiwa 7-1. txt><... 7-2. txt><... 7-3. txt>, the English-language text data “Exceme me.” and “May I help you?” shown in FIG. 9A are sequentially downloaded from the net site A30a, and the HP address <http: ///. def. co. jp / ekaiwa 7-1. mp3><... 7-2. mp3><... 7-3. mp3>, the respective English-language audio data “Excuse Me” and “Mei Heap You” shown in FIG. 9B are sequentially downloaded from the net site B30b, and further, the HP address <http: // hij. . co. jp / kaiwa 7-1. mpeg><... 7-2. mpeg><... 7-3. In accordance with mpeg>, image data “female moving image”, “male moving image” common to each language shown in FIG. 9C is sequentially downloaded from the net site C30c.
[0150]
Then, the processing unit time 12c1a (for example, 25 ms / sec.) Described in the header information 12c1 of the decrypted multimedia reproduction file (CAS file) 12c including the English time code file 12c2 and the media content data 12c3 stored in the RAM 12C. 50 ms /...) Is set as a read time of the multimedia reproduction file (CAS file) 12c at a constant time interval by the CPU 11 (step A5).
[0151]
Then, a read pointer is set at the beginning of the media playback file (CAS file) 12c stored in the RAM 12C (step A6), and a timer for measuring the playback processing timing of the playback file 12c is started (step A6). A7).
[0152]
Here, the pre-reading process is started in parallel with the reproduction process (step A8).
[0153]
In step A7, when the processing timer is started, the processing timer is set in step A6 for each processing unit time corresponding to the multimedia playback target file 12c for English conversation learning set in step A5. The command code and its parameter data of the English time code file 12c2 (see FIG. 10) constituting the media reproduction file 12c at the position of the read pointer are read (step A9).
[0154]
Then, it is determined whether the command code read from the English version time code file 12c2 (see FIG. 10) in the reproduction file 12c is "FN" (step A10), and when it is determined that the command code is "FN", Is instructed and executed at that time to stop the multimedia reproduction process (step A10 → A11).
[0155]
On the other hand, when it is determined that the command code read from the time code file 12c2 (see FIG. 10) in the reproduction file 12c is not “FN”, it is determined whether the command code is “URL”. It is determined (step A10 → A12). If it is determined that the URL is "URL", the text data, audio data, or image data stored as the media content data 12c3 is read according to the HP address corresponding to the URL at the corresponding pointer position, and the type of the data is read. The reproduction is started by the (text / sound / image) output program 12a2 corresponding to (A12 → A13A).
[0156]
Then, the time counting operation by the processing timer is started again, and it is determined whether or not the time counted by the timer has reached the next processing unit time 12c1a (step A17).
[0157]
On the other hand, if it is determined in step A12 that the command code read from the English time code file 12c2 (see FIG. 10) in the reproduction file 12c is not "URL", the command code is , “HL” (steps A12 → A14). If it is determined to be "HL", each character of the text data reproduced and displayed in response to the "URL" command is highlighted by highlighting up to the position of the number of characters indicated by the parameter data ( Step A14 → A15).
[0158]
When it is determined in step A14 that the command code read from the English version time code file 12c2 (see FIG. 10) is not "HL", the process proceeds to another command process ( Step A16). The other command processing is processing of a command corresponding to each of the other command codes.
[0159]
If it is determined in step A17 that the time measured by the timer has reached the next processing unit time 12c1a, the read pointer to the multimedia playback file (CAS file) 12c stored in the RAM 12C is set to the next. The position is updated and set (steps A17 → A18), and the processing from the reading of the command code and the parameter data of the time code file 12c2 (see FIG. 10) at the position of the read pointer in step A9 is repeated (steps A18 → A9). ~ A17).
[0160]
That is, the CPU 11 of the portable device 10 executes the time code file 12c2 for each command processing unit time set and described in advance in the multimedia playback file 12b (12c) in accordance with the media synchronous playback processing program 12a2 stored in the ROM 12A. By simply reading the command codes and their parameter data arranged in (see FIG. 10) and instructing the processing corresponding to the commands, synchronous reproduction of various media data corresponding to each command described in the time code file 12c2 is performed. Processing is executed.
[0161]
Here, the synchronous reproduction output operation of text / voice / image data by the media synchronous reproduction processing program 12a1 (see FIG. 11) based on the multimedia reproduction file 12c for learning English conversation shown in FIG. This will be described in detail with reference to the synchronized playback state of the English conversation text / voice / image data indicated by 5.
[0162]
In the English language conversation learning multimedia playback file (12c), command processing is executed for each processing unit time (25 ms) described and set in the header information (12c1). First, the time code file 12c2 When the first command code “URL” and its parameter data “00” (see FIG. 10) are read out, the HP address <http: // abc. co. jp / ekaiwa 7-1. txt>, the text data “Exuse me.” (see FIG. 9A) of the English conversation text 7-1 downloaded and stored as the media content data 12c3 is read out, and the text output program 12a1 is sent to the text output program 12a1. As shown in FIGS. 5 (A) to 5 (C), a reproduction display process is instructed.
[0163]
At this point, the entire text string of the text data “Exceme me.” Of the English conversation text 7-1 is simply reproduced and displayed on the display unit 18.
[0164]
When the second command code “URL” and its parameter data “02” are read, the HP address <http: // def. co. jp / ekaiwa 7-1. mp3>, the audio data “Excuse Me” (see FIG. 9B) of the English conversation text 7-1 that has been downloaded and stored as the media content data 12c3 is read out, and sent to the audio output program 12a1. As shown in FIGS. 5A to 5C, a reproduction output process is instructed.
[0165]
As a result, the audio output unit 19b sequentially starts reproducing and outputting the audio data “Excuse Me” of the English conversation text 7-1.
[0166]
When the third command code “URL” and its parameter data “02” are read, the HP address <http: // hij. co. jp / kaiwa 7-1. mpeg>, the language common image data “female moving image” (see FIG. 9C) of the conversation text 7-1 which is downloaded and stored as the media content data 12c3 is read out, and the image output program 12a1 is read. 5 (A) to 5 (C), the reproduction display processing is instructed.
[0167]
Thereby, the language common image data “female moving image” of the conversation text 7-1 is displayed in the table.
The reproduction display is started while being sequentially switched in the display unit 18.
[0168]
When the fifth command code “HL” and its parameter data “02” are read, as shown in FIG. 5A, the highlighted text data of the second text of the displayed text data “Exuse me.” Is displayed. Is indicated.
[0169]
When the 41st command code “HL” and its parameter data “07” are read, as shown in FIG. 5B, reverse highlighting of the displayed text data “Excuse me.” Up to the seventh character is performed. Is indicated.
[0170]
Further, when the 59th command code “HL” and its parameter data “10” are read, as shown in FIG. 5C, the text data “Excuse” being displayed is displayed.
me. "Is highlighted.
[0171]
Thereafter, when the 81st command code “URL” and its parameter data “02” of the time code file 12c2 (see FIG. 10) are read, the HP address <http: // abc described corresponding to the 81st command code is read. . co. jp / ekaiwa7-2. txt>, the subtitle text data “May I help you?” (see FIG. 9A) of the English conversation text 7-2, which is downloaded and stored as the media content data 12c3, is read out and read to the text output program 12a1. Then, as shown in FIGS. 5D to 5F, a reproduction display process is instructed.
[0172]
At this point, the entire character string of the text data “May I help you?” Of the English conversation text 7-2 is simply reproduced and displayed on the display unit 18.
[0173]
When the 82nd command code “URL” and its parameter data “00” are read, the HP address <http: // def. co. jp / ekaiwa7-2. mp3>, the audio data “May I Help You” (see FIG. 9B) of the English conversation text 7-2 downloaded and stored as the media content data 12c3 is read out, and the audio output program 12a1 is read out. As shown in FIGS. 5D to 5F, a reproduction output process is instructed.
[0174]
As a result, the audio output unit 19b sequentially starts reproducing and outputting the audio data “May I Help You” of the English conversation text 7-2.
[0175]
When the 83rd command code “URL” and its parameter data “00” are read, the HP address <http: // hij. co. jp / kaiwa 7-2. mpeg>, the language common image data “male moving image” (see FIG. 9C) of the conversation text 7-2 that is downloaded and stored as the media content data 12c3 is read out, and the image output program 12a1 is read out. As shown in FIGS. 5 (D) to 5 (F), reproduction display processing is instructed.
[0176]
As a result, the language common image data “male moving image” of the conversation text 7-2 is reproduced and displayed while being sequentially switched on the display unit 18.
[0177]
In this case, the text data "Exuse me." And "May I help you?" Are reproduced and displayed by the text output program 12a1 and, in response to a command code "HL", a predetermined time from the start of the reproduction. The text strings are sequentially inverted (underlined) according to the progress, and even if the voice data “Excuse me” or “Mei eye help u”, the voice output program 12a1 performs In response to the reproduction and output, the information includes time information for reproducing and outputting the audio data so as to match the reverse display of the text data in accordance with the lapse of time at a predetermined speed from the start of the reproduction. Even in the common image data “female moving image” and “male moving image”, the image output program 12a1 The time information for switching and displaying the image data in accordance with the reverse display of the text data and the output of the audio data in accordance with the lapse of a predetermined speed from the start of the reproduction along with the reproduction display. Therefore, the command codes arranged in the time code file 12c2 and the parameter data thereof are stored for each reference unit time (25 ms / 50 ms) of the command processing set and described in advance in the multimedia playback file 12b (12c). By simply instructing the reading and playback processing of each piece of media data read in response to the URL command, and inverting and highlighting a text character string corresponding to the HL command, downloading is performed according to the URL address described in the time code file 12c2. Text / sound / image data for conversation learning Data can be played back synchronously.
[0178]
Accordingly, the burden on the main processing of the CPU is reduced, and even a CPU having a relatively small processing capability, for example, the portable device (PDA) 10 can easily perform synchronous reproduction processing of a plurality of types of net media data including text, images, and sounds. This can be realized even with a simple reproducing apparatus that does not use a high-performance CPU.
[0179]
In the second embodiment, in the first multimedia playback processing described with reference to FIG. 11, the multimedia playback having the designated language data and the designated language version time code file 12c2 corresponding to the designated language is performed. As soon as the file 12b (12c) is taken into the portable device 10 (steps A1 to A3), access is made to the net sites A30a to C30c according to the HP address of the URL command described in the time code file 12c2, The respective media data (designated language version text data / designated language version audio data / common moving image data) to be synchronously reproduced are downloaded and stored in the RAM 12C as media content data 12c3 (step A4), and the time code file 12c2 Command code “UR Is read (steps A12 to A13A) in order to sequentially read out each piece of media data associated with the HP address from the media content data 12c3 (steps A12 to A13A). This will be described with reference to FIG. As in the second multimedia playback processing, each media data (designated language version text data / designated language version audio data / common moving image data) to be synchronously played back is command code "URL" according to the time code file 12c2. Each time the data is read, the network site A30a to C30c may be accessed in accordance with the HP address each time, and sequentially downloaded and reproduced.
[0180]
FIG. 12 is a flowchart showing a second multimedia reproduction process of the portable device 10 according to the media synchronous reproduction program 12a2 of the second embodiment.
[0181]
In the second multimedia reproduction process of the second embodiment, the same processing steps as those of the first multimedia reproduction process (steps A1 to A18) in FIG. Is omitted.
[0182]
In other words, in the second multimedia reproduction process, each time the command code “URL” is read in accordance with the time code file 12c2, access is made to the net sites A30a to C30c in accordance with the HP address, and synchronous reproduction is performed. It is assumed that the media data (designated language version text data / designated language version audio data / common moving image data) to be sequentially downloaded and the reproduction instruction is given (step A12 → A13B).
[0183]
That is, in step A12, when it is determined that the command code read from the time code file 12c2 (see FIG. 10) in the reproduction file 12c is “URL”, the command code is determined according to the HP address corresponding to the URL at the corresponding pointer position. The corresponding media web sites A30a to C30c are accessed, and specified learning data and text data for speech learning in a specified language, voice data, and image data common to each language are downloaded, and the data type is determined. The reproduction is started by the corresponding (text / voice / image) output program 12a2 (step A12 → A13B).
[0184]
That is, when text data (see FIG. 9A) is downloaded from the net site A30a in accordance with the HP address corresponding to the command code URL, reproduction display is started by the text output program 12a2, and audio data (FIG. (See FIG. 9B), the reproduction output is started by the audio output program 12a2, and when the image data (see FIG. 9C) is downloaded, the reproduction output is started by the audio output program 12a2. Start.
[0185]
According to this, all media data (designated language version text data / designated language version audio data / common moving image data) to be synchronously reproduced must be downloaded in advance and stored as media content data 12c3 in RAM 12C. Therefore, multimedia data can be synchronously reproduced without occupying a large-capacity memory area such as the portable device 10 for a long time.
[0186]
Therefore, according to the media playback function of the portable device 10 of the multimedia storage / playback system having the above-described configuration according to the second embodiment, the processing unit time preset in the time code file 12c2 of the multimedia playback file 12b (12c) is used. The URL (HP address) indicating the storage destination net site A30a / B30b / C30c of each media data (text data / audio data / image data) to be synchronously reproduced is associated with the command code "URL" read for each 12c1a. In accordance with the command code "URL" for each set processing unit time 12c1a, the reproduction instruction of each media data (text data / audio data / image data) downloaded in accordance with the HP address is performed, and the command code According to "HL" Text only instructs the sequential highlighting of the data string, the reproduction processing of text, audio, and image data to the portable device 10 that is not originally stored is executed necessarily synchronized. Therefore, the load on the CPU 11 can be made very small, and synchronous playback of text / voice / image can be realized even with a simple playback device that does not use a high-performance CPU.
[0187]
Note that the method of each processing by the mobile device 10 described in the above embodiment, that is, the first multimedia reproduction processing in the first embodiment shown in the flowchart of FIG. 4 and the first embodiment shown in the flowchart of FIG. A second multimedia playback process, a media playback process on the portable device 10 side and a server process on the server 30 side according to the other embodiments in each multimedia playback process of the first embodiment shown in the flowchart of FIG. Each of the techniques such as the first multimedia playback processing in the second embodiment shown in the flowchart of FIG. 11 and the second multimedia playback processing in the second embodiment shown in the flowchart of FIG. 12 is executed by the computer. Examples of programs that can be executed include a memory card (ROM card, RAM card, DATA / CARD, etc.), a magnetic card, Disk (floppy disk, hard disk, etc.), optical disk (CD-ROM, DVD, etc.) can be distributed and stored in the external recording medium 13 such as a semiconductor memory. Various computer terminals having a communication function with the communication network (Internet) N read the program stored in the external recording medium 13 into the memory 12 by the recording medium reading unit 14, and operate according to the read program. By being controlled, the synchronous reproduction function of the multimedia data described in each of the embodiments can be realized, and the same processing can be performed by the above-described method.
[0188]
Further, data of a program for realizing each of the above methods can be transmitted on a communication network (Internet) N in the form of a program code, and a computer terminal connected to the communication network (Internet) N transmits the program data. It is also possible to take in program data and realize the above-mentioned synchronous reproduction function of multimedia data.
[0189]
It should be noted that the present invention is not limited to the above-described embodiments, and can be variously modified in an implementation stage without departing from the scope of the invention. Furthermore, the embodiments include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some components are deleted from all the components shown in each embodiment or some components are combined, the problem described in the section of the problem to be solved by the invention can be solved. In the case where the effects described in the section of the effects of the invention can be obtained, a configuration in which this component is deleted or combined can be extracted as the invention.
[0190]
【The invention's effect】
As described above, according to the media data storage device of claim 1 of the present invention, the elapsed time is set in advance for each of a plurality of types of media to be synchronously reproduced and the URL of each media is stored. Access to the storage means, and acquiring the data of the media associated with the URL of each medium stored by the storage means via the Internet by the media data acquisition means prior to the synchronous reproduction of a plurality of types of media. it can. For this reason, the URLs of the respective media stored by the storage means are sequentially read out according to the set elapsed time, and the data of the respective media obtained by the media data obtaining means in association with the read URLs. Can be reproduced quickly and reliably.
[0191]
Further, according to the media data storage device of the present invention, the storage means for storing the URL of each of the media arranged in advance by setting the elapsed time for each of a plurality of types of media to be synchronously reproduced. Prior to the synchronous reproduction of the plurality of types of media, the data of the plurality of types of media stored in the storage device in association with the URLs of the respective media stored by the storage unit. It can be obtained via the Internet and stored by media data storage means. For this reason, the URLs of the respective media stored by the storage means are sequentially read out according to the set elapsed time, and the data of the respective media stored by the media data storage means are associated with the read URLs. Can be played back quickly and reliably.
[0192]
According to the media data storage device of the present invention, the storage means stores the URL of each of the media arranged in advance by setting the elapsed time for each of a plurality of types of media to be synchronously reproduced. And the media data acquisition unit sequentially reads out the URLs of the respective media stored by the storage unit in accordance with the set elapsed time, and transmits the media data associated with the read URLs via the Internet. Can be obtained with For this reason, it is possible to sequentially fetch various data to be synchronously reproduced from the net site of each medium in accordance with the URL of each site according to the set elapsed time, and to quickly and surely synchronously reproduce the fetched data of a plurality of media. it can.
[0193]
According to the media data storage device of claim 4 of the present invention, in the media data storage device of claim 1 or claim 2, the storage means reproduces data of a plurality of types of media synchronously. The control command storage means stores the control commands arranged with the elapsed time set in advance for each of the media in such a manner that the URLs of the respective media are associated with each other. In accordance with a control command for each set elapsed time, various types of data to be synchronously reproduced are fetched from a net site of each medium by a URL associated therewith, and the fetched data of a plurality of media is synchronously and rapidly reproduced. Can be.
[0194]
Also, according to the media data storage device according to claim 5 of the present invention, in the media data storage device according to any one of claims 1 to 4, the data of the plurality of types of media is Text data is included, and this text data has time information for synchronous reproduction with data of another type of media in advance. In accordance with the time information for synchronous reproduction included in the text data, the text data can be synchronously reproduced with data of other types of media quickly and reliably.
[0195]
According to the media data storage device of claim 6 of the present invention, in the media data storage device of claim 1 or 2, the storage means includes at least text of a plurality of types of media. A control for storing a control command arranged with an elapsed time set in advance for each medium so that data is reproduced synchronously with a URL of each medium and storing a display control command for the text data. Since the command storage means is used, the text data among the various data to be synchronously read in from the media site of each medium is displayed in accordance with the display control command for each set elapsed time stored by the control command storage means, Synchronous playback can be performed quickly and reliably with data of other types of media.
[0196]
Further, according to the media data storage device of the present invention, in the media data storage device of any one of the above-mentioned claims, the data of the plurality of types of media is Data in a plurality of languages is prepared, the URL stored by the storage means includes a language designation symbol, and the media data acquisition means includes a medium associated with the URL of each medium stored by the storage means. The data of the specified language is obtained via the Internet, so that the data of each medium in the specified language is also simply taken from each net site specified by the URL, and the data of a plurality of media specified in the language can be quickly and quickly obtained. Synchronous playback can be performed reliably.
[0197]
According to the media data storage processing program according to claim 8 of the present invention, by installing the program in the media data storage device, a plurality of types of media to be synchronously reproduced on the computer of the media data storage device The storage means storing the URLs of the respective media arranged with the elapsed time set in advance for each of the media is accessed, and the data of the media associated with the URLs of the respective media stored by the storage means are stored in a plurality of types. Prior to the synchronized reproduction of the media, the media data can be acquired by the media data acquiring means via the Internet. For this reason, in the media data storage device, the URLs of the respective media stored by the storage unit are sequentially read out according to the set elapsed time, and are obtained by the media data obtaining unit in association with the read URLs. The data of each of the media can be quickly and reliably reproduced synchronously.
[0198]
According to the media data storage processing program of the ninth aspect of the present invention, by installing the program in the media data storage device, a plurality of types of media to be synchronously reproduced in the computer of the media data storage device The storage means storing the URLs of the media arranged with the elapsed time set in advance for each of the media is accessed, and stored in the storage device in association with the URLs of the media stored by the storage means. Prior to synchronous reproduction of a plurality of types of media, data of a plurality of types of media can be acquired by the media data acquisition unit via the Internet, and can be stored by the media data storage unit. For this reason, in the media data storage device, the URLs of the respective media stored by the storage means are sequentially read out according to the set elapsed time, and are stored by the media data storage means in association with the read URLs. The data of each of the media can be quickly and reliably reproduced synchronously.
[0199]
According to the media data storage processing program according to claim 10 of the present invention, by installing the program in the media data storage device, a plurality of types of media to be synchronously reproduced on the computer of the media data storage device The storage means storing the URLs of the media arranged in advance with the elapsed time set for each is accessed, and the media data acquisition means sets the elapsed time at which the URLs of the media stored by the storage means are set. , And the media data associated with the read URL can be obtained via the Internet. For this reason, the media data storage device sequentially captures various data to be synchronously reproduced from the net site of each media in accordance with the URL of each site according to the set elapsed time, and quickly and reliably captures the captured data of the plurality of media. Can be played back synchronously.
[0200]
Therefore, according to the present invention, it is possible to provide a media data storage device and a media data storage processing program capable of acquiring media data via the Internet prior to synchronous reproduction of a plurality of types of media.
[Brief description of the drawings]
FIG. 1 is a diagram showing an overall configuration of a multimedia storage / playback system including a portable device 10 according to an embodiment of a media data storage device of the present invention.
FIG. 2 is a diagram showing data contents provided at net sites 30a to 30c of respective media of the first embodiment in the multimedia storage / reproduction system, and FIG. 2 (A) is prepared at site A 30a. Figure showing subtitle text data for practicing foreign language conversation, Figure (B) is a figure showing audio data for practicing foreign language conversation prepared at site B30b, and Figure (C) is prepared at site C30c. The figure which shows the image data for foreign language conversation practice.
FIG. 3 is a view showing a time code file 12c2 included in the multimedia playback file 12b (12c) of the first embodiment stored in the memory 12 of the portable device 10.
FIG. 4 is a flowchart showing a first multimedia playback process of the portable device 10 according to a media synchronous playback program 12a2 of the first embodiment.
FIG. 5 is a diagram showing a synchronized playback state of English conversation text, voice, and image data based on the multimedia playback file 12c for learning English conversation in FIG. 3C.
FIG. 6 is a diagram showing a synchronized reproduction state of German-language conversation text, voice, and image data when a German language is specified for the multimedia reproduction file for foreign language conversation learning 12c in FIG. 3B.
FIG. 7 is a flowchart showing a second multimedia reproduction process of the portable device 10 according to the media synchronous reproduction program 12a2 of the first embodiment.
FIG. 8 is a flowchart showing a media playback process on the portable device 10 and a server process on the server 30 according to another embodiment in the multimedia storage and playback system of the first embodiment.
FIG. 9 is a diagram showing data contents provided at net sites 30a to 30c of respective media of the second embodiment in the multimedia storage / playback system, and FIG. 9 (A) is prepared at site A 30a. Diagram showing text data for foreign language practice, FIG. (B) shows voice data for foreign language practice prepared at site B30b, and FIG. (C) shows data at site C30c. The figure which shows the image data for a foreign language conversation practice.
FIG. 10 is a view showing a time code file 12c2 constituting a multimedia playback file 12b (12c) of the second embodiment stored in the memory 12 of the portable device 10.
FIG. 11 is a flowchart showing a first multimedia playback process of the portable device 10 according to a media synchronous playback program 12a2 of the second embodiment.
FIG. 12 is a flowchart showing a second multimedia reproduction process of the portable device 10 according to a media synchronous reproduction program 12a2 of the second embodiment.
[Explanation of symbols]
10… Portable equipment
11 ... CPU
12 ... memory
12A… ROM
12a: Portable device control program
12a1 ... (text / sound / image) output program
12a2: Media synchronous playback processing program
12B: FLASH memory
12b: Encrypted multimedia playback file (CAS file)
12C ... RAM
12c: Decoded multimedia playback file (CAS file)
12c1 ... header information
12c1a: Processing unit time
12c2: Time code file
12c3 ... Media content data
12d ... (learning / language) designation data
12e: Image expansion buffer
13. External recording medium
14: Recording medium reading unit
15 ... Transmission control unit
16… Communication unit
17a ... input section
17b Coordinate input device
18 Display part
19a: Voice input unit
19b: audio output unit
20… Communication equipment (home PC)
30… Web server
30a: Net site A (text)
30b: Net site B (voice)
30c: Net site C (image)
N: Communication network (Internet)

Claims

Storage means for storing URLs of media arranged in advance by setting an elapsed time for each of a plurality of types of media to be synchronously reproduced;
Media data acquisition means for acquiring media data associated with the URL of each medium stored by the storage means via the Internet prior to synchronous playback of a plurality of types of media. Data storage device.

Storage means for storing URLs of media arranged in advance by setting an elapsed time for each of a plurality of types of media to be synchronously reproduced;
Media data acquisition means for acquiring data of a plurality of types of media stored in a storage device in association with URLs of respective media stored by the storage means via the Internet prior to synchronous reproduction of the plurality of types of media. And a media data storage unit for storing data of each medium acquired by the media data acquisition unit.

Storage means for storing URLs of media arranged in advance by setting an elapsed time for each of a plurality of types of media to be synchronously reproduced;
Media data acquisition means for sequentially reading out the URLs of the respective media stored by the storage means in accordance with the set elapsed time and acquiring data of the media associated with the read out URLs via the Internet. A media data storage device, characterized in that:

The storage means stores a control command in which the elapsed time is set in advance for each of the media such that data of a plurality of types of media are synchronously reproduced and the URL of each media is stored in association with the control command. 3. The media data storage device according to claim 1, wherein the media data storage device is a unit.

The data of the plurality of types of media includes text data, and the text data has time information for synchronized playback with data of another type of media in advance. 5. The media data storage device according to claim 4.

The storage means stores control instructions arranged in advance by setting an elapsed time for each of the media so that data including at least text of a plurality of types of media is synchronously reproduced, and associates a URL of each media with the URL. 3. The media data storage device according to claim 1, further comprising control command storage means for storing a display control command for the text data.

Data of a plurality of languages is prepared for the data of the plurality of types of media,
The URL stored by the storage means includes a language designation symbol,
7. The media data acquiring device according to claim 1, wherein the media data acquiring device acquires, via the Internet, data in a specified language of the media associated with the URL of each media stored in the storage device. A media data storage device according to any one of the preceding claims.

A media data storage processing program for controlling a computer of a media data storage device,
Said computer,
The storage means storing the URLs of the media arranged in such a manner that the elapsed time is set in advance for each of a plurality of types of media to be synchronously reproduced is associated with the URLs of the media stored by the storage means. A computer-readable medium data storage processing program functioning as media data obtaining means for obtaining the data of the obtained media via the Internet prior to the synchronous reproduction of a plurality of types of media.

A media data storage processing program for controlling a computer of a media data storage device,
Said computer,
The storage means storing the URLs of the media arranged in advance by setting the elapsed time for each of a plurality of types of media to be played back in synchronization is accessed, and the storage means is associated with the URLs of the media stored by the storage means. Media data acquisition means for acquiring data of a plurality of types of media stored in the storage device via the Internet prior to the synchronized playback of the plurality of types of media,
A computer-readable media data storage processing program functioning as media data storage means for storing data of each medium acquired by the media data acquisition means.

A media data storage processing program for controlling a computer of a media data storage device,
Said computer,
The storage means storing the URLs of the media arranged in such a manner that the elapsed time is set in advance for each of a plurality of types of media to be played back in synchronization is accessed, and the URL of each media stored by the storage means is set. A computer-readable medium data storage processing program that functions as media data acquisition means for sequentially acquiring data of the medium associated with the read URL via the Internet, according to the elapsed time.