JP3794355B2 - 再生制御装置および再生制御処理プログラム - Google Patents

再生制御装置および再生制御処理プログラム Download PDF

Info

Publication number
JP3794355B2
JP3794355B2 JP2002216585A JP2002216585A JP3794355B2 JP 3794355 B2 JP3794355 B2 JP 3794355B2 JP 2002216585 A JP2002216585 A JP 2002216585A JP 2002216585 A JP2002216585 A JP 2002216585A JP 3794355 B2 JP3794355 B2 JP 3794355B2
Authority
JP
Japan
Prior art keywords
file
playback
command
text
reproduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002216585A
Other languages
English (en)
Other versions
JP2004064206A (ja
Inventor
康治 鳥山
利久 中村
研 吉野
裕二 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2002216585A priority Critical patent/JP3794355B2/ja
Publication of JP2004064206A publication Critical patent/JP2004064206A/ja
Application granted granted Critical
Publication of JP3794355B2 publication Critical patent/JP3794355B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、音声,画像,テキストなどのファイルを再生するための再生制御装置および再生制御処理プログラムに関する。
【0002】
【従来の技術】
従来、音楽,画像,テキストなどのファイルを同時並行して再生する技術としては、例えばMPEG-3により情報圧縮された音声ファイルのフレーム毎に、当該各フレームに設けられた付加データエリアに対して、音声ファイルに同期再生すべきテキストファイルや画像ファイルの同期情報を埋め込んでおくことにより、例えばカラオケの場合では、カラオケ音声とそのイメージ画像および歌詞のテキストを同期再生するものがある。
【0003】
【発明が解決しようとする課題】
しかしながら、このように従来行われているMPEGファイルの付加データエリアを利用した複数種類のファイルの同期再生技術では、同期情報の埋め込みが主たるMP3音声ファイルの各フレーム毎の付加データエリアに規定されるため、当該MP3音声ファイルを再生させない限り同期情報を取り出すことが出来ず、MP3ファイルの再生を軸としてしか他の種類のファイルの同期再生を行うことが出来ない。
【0004】
このため、例えばMP3音声ファイルにテキストファイルの同期情報を埋め込んだ場合に、音声ファイルの再生を行わない期間にあっても無音声ファイルとして音声再生処理を継続的に行っていないと同期対象ファイルの再生を行うことが出来ない問題がある。
【0005】
従って、従来この複数種類ファイルの同期再生処理は、MP3ファイルの再生処理をベースとして行われるため、再生装置のCPUにおける処理の負荷が重くなる問題がある。
【0006】
本発明は、前記のような問題に鑑みてなされたもので、複数種類のファイルの同期再生を少ないCPUの負荷で行うことが可能になる再生制御装置および再生制御処理プログラムを提供することを目的とする。
【0007】
【課題を解決するための手段】
すなわち、本発明に係る再生制御装置は、テキストファイル、音声ファイルを含む複数種類のファイルを記憶するファイル記憶手段と、前記複数種類のファイルの再生命令と無効命令とを含む一連の命令が順に配列され、当該一連の命令が先頭から順に一定時間間隔で実行された際に、各ファイルの再生命令が当該各再生命令の配列位置に対応する時間に実行されるように無効命令の間に予め配列して記憶されている再生情報記憶手段と、時間を計時する計時手段と、この計時手段により計時された時間に基づき、前記再生情報記憶手段に記憶されている一連の命令を先頭から順に一定時間間隔で実行することにより、前記再生情報記憶手段に記憶されている前記複数種類のファイルの各再生命令を、当該各再生命令の配列位置に対応する時間に実行させる順次再生制御手段と、を備え、前記複数の再生命令は、前記ファイル記憶手段により記憶されたテキストファイルを表示させるテキスト表示命令と、前記ファイル記憶手段により記憶された音声ファイルの音声出力開始命令と、前記テキスト表示命令により表示されたテキスト中の所定文字までを識別表示するテキスト識別表示命令を有し、前記順次再生制御手段は、前記再生情報記憶手段に予め配列して記憶されているテキスト表示命令を当該テキスト表示命令の配列位置に対応する時間に実行し、音声出力開始命令を当該音声出力開始命令の配列位置に対応する時間に実行し、テキスト識別表示命令を当該テキスト識別表示命令の配列位置に対応する時間に実行することにより、音声出力とテキストの識別表示を同期させて再生するようにしたことを特徴とする。
【0008】
このような、本発明に係る再生制御装置では、テキストファイル、音声ファイルを含む複数種類のファイルを記憶するファイル記憶手段と、前記複数種類のファイルの再生命令と無効命令とを含む一連の命令が順に配列され、当該一連の命令が先頭から順に一定時間間隔で実行された際に、各ファイルの再生命令が当該各再生命令の配列位置に対応する時間に実行されるように無効命令の間に予め配列して記憶されている再生情報記憶手段とを有し、前記再生情報記憶手段に記憶されている一連の命令を先頭から順に一定時間間隔で実行することにより、前記再生情報記憶手段に記憶されている前記複数種類のファイルの各再生命令を、当該各再生命令の配列位置に対応する時間に実行させる再生処理が行われる。そして、前記再生情報記憶手段に予め配列して記憶されているテキスト表示命令を当該テキスト表示命令の配列位置に対応する時間に実行し、音声出力開始命令を当該音声出力開始命令の配列位置に対応する時間に実行し、テキスト識別表示命令を当該テキスト識別表示命令の配列位置に対応する時間に実行することにより、音声出力とテキストの識別表示を同期させて再生する。
【0009】
これにより、一連の命令が先頭から順に一定時間間隔で実行された際に、各ファイルの再生命令が当該各再生命令の配列位置に対応する時間に同期して実行されるように無効命令の間に予め配列して記憶しておけば、各ファイルの再生命令であるテキストファイルを表示させるテキスト表示命令、音声ファイルの音声出力開始命令、テキスト表示命令により表示されたテキスト中の所定文字までを識別表示するテキスト識別表示命令が、各命令の配列位置に対応する時間で、音声出力とテキスト識別表示が同期するように順次再生制御を行うことができ、複数種類のファイルの同期再生処理を容易に行うことができることになる。
【0010】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について説明する。
【0011】
図1は本発明の再生制御装置の実施形態に係る携帯機器10の電子回路の構成を示すブロック図である。
【0012】
この携帯機器(PDA:personal digital assistants)10は、各種の記録媒体に記録されたプログラム、又は、通信伝送されたプログラムを読み込んで、その読み込んだプログラムによって動作が制御されるコンピュータによって構成され、その電子回路には、CPU(central processing unit)11が備えられる。
【0013】
CPU11は、メモリ12内のROM12Aに予め記憶されたPDA制御プログラム、あるいはROMカードなどの外部記録媒体13から記録媒体読取部14を介して前記メモリ12に読み込まれたPDA制御プログラム、あるいはインターネットなどの通信ネットワークN上の他のコンピュータ端末(30)から電送制御部15を介して前記メモリ12に読み込まれたPDA制御プログラムに応じて、回路各部の動作を制御するもので、前記メモリ12に記憶されたPDA制御プログラムは、キーやタッチパネルからなる入力部17からのユーザ操作に応じた入力信号、あるいは電送制御部15に受信される通信ネットワークN上の他のコンピュータ端末(30)からの通信信号、あるいはBluetooth(R)による近距離無線接続や有線接続による通信部16を介して受信される外部の通信機器(PC:personal computer)20からの通信信号に応じて起動される。
【0014】
前記CPU11には、前記メモリ12、記録媒体読取部14、電送制御部15、通信部16、入力部17が接続される他に、LCDからなる表示部18、スピーカを備え音声を出力する音声出力部19などが接続される。
【0015】
また、CPU11には、処理時間計時用のタイマが内蔵される。
【0016】
この携帯機器10のメモリ12は、ROM12A、FLASHメモリ(EEP-ROM)12B、RAM12Cを備えて構成される。
【0017】
ROM12Aには、当該携帯機器10の全体の動作を司るシステムプログラムや電送制御部15を介して通信ネットワークN上の各コンピュータ端末(30)とデータ通信するためのネット通信プログラム、通信部16を介して外部の通信機器(PC)20とデータ通信するための外部機器通信プログラムが記憶される他に、スケジュール管理プログラムやアドレス管理プログラム、そして音声・テキスト・画像などの各種のファイルを同期再生するための再生処理プログラム12aなど、種々のPDA制御プログラムが記憶される。
【0018】
FLASHメモリ(EEP-ROM)12Bには、前記再生処理プログラム12aに基づき再生処理の対象となる暗号化された再生用ファイル(CASファイル)12bが記憶される他に、前記スケジュール管理プログラムやアドレス管理プログラムに基づき管理されるユーザのスケジュール及び友人・知人のアドレスなどが記憶される。
【0019】
ここで、前記FLASHメモリ(EEP-ROM)12B内に記憶される暗号化再生用ファイル12bは、例えば英会話の練習やカラオケをテキスト・音声・画像の同期再生により行うためのファイルであり、所定のアルゴリズムにより圧縮・暗号化されている。
【0020】
この暗号化再生用ファイル12bは、例えばCD−ROMに記録されて配布されたり、通信ネットワーク(インターネット)N上のファイル配信サーバ30から配信配布されたりするもので、前記CD−ROMあるいはネットサーバ(30)により配布された暗号化再生用ファイル12bは、例えばユーザ自宅PCとしての通信機器(PC)20に読み込まれた後、携帯機器(PDA)10の通信部16を介してFLASHメモリ(EEP-ROM)12Bに転送格納される。
【0021】
RAM12Cには、前記暗号化された再生用ファイル12bを伸張・復号化した解読された再生用ファイル(CASファイル)12cが記憶されると共に、この解読再生ファイル12cの中の画像ファイルが展開されて記憶される画像展開バッファ12eが備えられる。解読されたCASファイル12cは、再生命令の処理単位時間(12c1a)を記憶するヘッダ情報(12c1)、および後述するファイルシーケンステーブル(12c2)、タイムコードファイル(12c3)、コンテンツ内容データ(12c4)で構成される。そして、RAM12Cには、この画像展開バッファ12eに展開されて記憶された画像ファイルそれぞれの展開済の画像番号を示す画像展開済フラグ12dが記憶される。
【0022】
さらに、RAM12Cには、その他各種の処理に応じてCPU11に入出力される種々のデータを一時記憶するためワークエリアが用意される。
【0023】
図2は前記携帯機器10のメモリ12に格納された再生用ファイル12b(12c)を構成するタイムコードファイル12c3を示す図である。
【0024】
図3は前記携帯機器10のメモリ12に格納された再生用ファイル12b(12c)を構成するファイルシーケンステーブル12c2を示す図である。
【0025】
図4は前記携帯機器10のメモリ12に格納される再生用ファイル12b(12c)を構成するコンテンツ内容データ12c4を示す図である。
【0026】
この携帯機器10の再生対象ファイルとなる再生用ファイル12b(12c)は、図2〜図4で示すように、タイムコードファイル12c3とファイルシーケンステーブル12c2とコンテンツ内容データ12c4との組み合わせにより構成される。
【0027】
図2で示すタイムコードファイル12c3には、個々のファイル毎に予め設定される一定時間間隔(例えば25ms)で各種ファイル同期再生のコマンド処理を行うためのタイムコードが記述配列されるもので、この各タイムコードは、命令を指示するコマンドコードと、当該コマンドに関わるファイル内容(図4参照)を対応付けするためのファイルシーケンステーブル12c2(図3)の参照番号や指定数値からなるパラメータデータとの組み合わせにより構成される。
【0028】
なお、このタイムコードに従い順次コマンド処理を行うための一定時間間隔は、当該タイムコードファイル12c3のヘッダ情報12c1に処理単位時間12c1aとして記述設定される。
【0029】
図3で示すファイルシーケンステーブル12c2は、複数種類のファイル(HTML/画像/テキスト/音声)の各種類毎に、前記タイムコードファイル12c3(図2参照)に記述される各コマンドのパラメータデータと実際のファイル内容の格納先(ID)番号とを対応付けたテーブルである。
【0030】
図4で示すコンテンツ内容データ12c4は、前記ファイルシーケンステーブル12c2(図3参照)により前記各コマンドコードと対応付けされる実際の音声,画像,テキストなどのファイルデータが、そのそれぞれのID番号を対応付けて記憶される。
【0031】
図5は前記携帯機器10のタイムコードファイル12c3(図2参照)にて記述される各種コマンドのコマンドコードとそのパラメータデータおよび再生処理プログラム12aに基づき解析処理される命令内容を対応付けて示す図である。
【0032】
タイムコードファイル12c3に使用されるコマンドとしては、標準コマンドと拡張コマンドがあり、標準コマンドには、LT(i番目テキストロード).VD(i番目テキスト文節表示).BL(文字カウンタリセット・i番目文節ブロック指定).HN(ハイライト無し・文字カウンタカウントアップ).HL(i番目文字までハイライト・文字カウント).LS(1行スクロール・文字カウンタカウントアップ).DH(i番目HTMLファイル表示).DI(i番目イメージファイル表示).PS(i番目サウンドファイルプレイ).CS(クリアオールファイル).PP(基本タイムi秒間停止).FN(処理終了).NP(無効)の各コマンドがあり、拡張コマンドには、MI(i番目位置にイメージファイル移動).SI(i番目サイズにイメージファイル拡大).BS(サウンドファイル音量i).SS(サウンドファイルスピードi)の各コマンドがある。
【0033】
図6は前記携帯機器10のタイムコードファイル12c3(図2参照)にて記述される拡張コマンドに伴うイメージファイルの位置移動形態およびサイズ変更形態を示す図であり、同図(A)は拡張コマンドMIに伴うイメージファイルの移動位置を規定する図、同図(B)は拡張コマンドSIに伴うイメージファイルの変更サイズを規定する図である。
【0034】
例えば拡張コマンドMIのパラメータデータ(i=1)である場合には、イメージファイルは画像表示エリアの左上に移動表示され、パラメータデータ(i=9)である場合には右下に移動表示される。
【0035】
また、例えば拡張コマンドSIのパラメータデータ(i=1)である場合には、イメージファイルは標準サイズで表示され、パラメータデータ(i=2)である場合には2倍サイズで、(i=3)である場合には3倍サイズでサイズ変更表示される。
【0036】
すなわち、この携帯機器(PDA)10のROM12Aに記憶されている再生処理プログラム12aを起動させて、FLASHメモリ12Bから解読されRAM12cに記憶された解読再生用ファイル12cが、例えば図2乃至図4で示したファイル内容であり、一定時間毎のコマンド処理に伴い3番目のコマンドコード“DI”およびパラメータデータ“01”が読み込まれた場合には、このコマンド“DI”はi番目のイメージファイル表示命令であるため、パラメータデータi=01からファイルシーケンステーブル12c2(図3参照)にリンク付けられる画像ファイルのID番号=6に従い、コンテンツ内容データ12c4(図4参照)の画像Aが読み出されて表示される。
【0037】
また、例えば同一定時間毎のコマンド処理に伴い6番目のコマンドコード“VD”およびパラメータデータ“00”が読み込まれた場合には、このコマンド“VD”はi番目のテキスト文節表示命令であるため、パラメータデータi=00に従い、テキストの0番目の文節が表示される。
【0038】
さらに、例えば同一定時間毎のコマンド処理に伴い9番目のコマンドコード“NP”およびパラメータデータ“00”が読み込まれた場合には、このコマンド“NP”は無効命令であるため、現状のファイル出力状態が維持される。
【0039】
なお、この図2乃至図4で示したファイル内容の再生用ファイル12b(12c)についての詳細な再生動作は、後述にて改めて説明する。
【0040】
図7は前記携帯機器10のFLASHメモリ12Bに格納される暗号化再生用ファイル12bの各種ファイル格納状態を示す図である。
【0041】
暗号化再生用ファイル12bには、HTMLファイル、Image(画像)ファイル、Text(テキスト)ファイル、Sound(音声)ファイルの各種のファイルが纏めて格納され、この暗号化再生用ファイル12bが伸張・復号化されて解読された再生用ファイル12cとしてRAM12Cに格納され出力され、前記再生処理プログラム12aによるタイムコードファイル12c3(図2参照)の読み込み・コマンド解析に従って、当該各種ファイルの同期再生処理が実行される。
【0042】
そして、この暗号化再生用ファイル12bは、第1のファイル12b1(12b1h,12b1i,12b1t,12b1s)に属する第2のファイル12b2(12b2h,12b2i,12b2t,12b2s)との並列的な組み合わせによりさらに多様なファイルの同期再生処理も実行可能である。
【0043】
次に、前記構成の携帯機器10によるファイル再生機能について説明する。
【0044】
図8は前記携帯機器10の再生処理プログラム12aに従った再生処理を示すフローチャートである。
【0045】
例えば英語の勉強が音声とテキストと画像で行える英語教材再生ファイルやカラオケが音声とテキストと画像で行えるカラオケファイルなどを、CD−ROMや通信ネットワーク(インターネット)N上のサーバ30から自宅PCである通信機器(PC)20に取り込み、携帯機器(PDA)10の通信部16を介して当該再生用ファイル(CASファイル)12bがFLASHメモリ12Bに格納された状態において、入力部17の操作によりこの再生用ファイル12bの再生が指示されると、RAM12C内の各ワークエリアのクリア処理やフラグリセット処理などのイニシャライズ処理が行われる(ステップS1)。
【0046】
そして、前記FLASHメモリ12Bに格納された再生用ファイル(CASファイル)12bが読み込まれ(ステップS2)、当該再生用ファイル(CASファイル)12bは暗号化ファイルであるか否か判断される(ステップS3)。
【0047】
ここで、暗号化された再生用ファイル(CASファイル)12bであると判断された場合には、当該CASファイル12bは解読復号化され(ステップS3→S4)、RAM12Cに転送されて格納される(ステップS5)。
【0048】
すると、このRAM12Cに格納された解読済の再生用ファイル(CASファイル)12cのヘッダ情報12c1に記述された処理単位時間12c1a(例えば25ms/50ms/…)が、CPU11による当該解読済再生用ファイル(CASファイル)12cの一定時間間隔の読み出し時間として設定される(ステップS6)。
【0049】
そして、RAM12Cに格納された解読済再生用ファイル(CASファイル)12cの先頭に読み出しポインタがセットされ(ステップS7)、当該再生用ファイル12cの再生処理タイミングを計時するためのタイマがスタートされる(ステップS8)。
【0050】
ここで、図9における先読み処理が当該再生処理に並行して起動される(ステップS9)。この先読み処理については後述にてその詳細処理を説明する。
【0051】
前記ステップS8において、処理タイマがスタートされると、前記ステップS6にて設定された今回の再生対象ファイル12cに応じた処理単位時間毎に、前記ステップS7にて設定された読み出しポインタの位置の当該再生用ファイル12cを構成するタイムコードファイル12c3(図2参照)のコマンドコードおよびそのパラメータデータが読み出される(ステップS10)。
【0052】
そして、前記再生用ファイル12cにおけるタイムコードファイル12c3(図2参照)から読み出されたコマンドコードが、“FN”か否か判断され(ステップS11)、“FN”と判断された場合には、その時点で当該ファイル再生処理の停止処理が指示実行される(ステップS11→S12)。
【0053】
一方、前記再生用ファイル12cにおけるタイムコードファイル12c3(図2参照)から読み出されたコマンドコードが、“FN”ではないと判断された場合には、当該コマンドコードが、“PP”か否か判断され(ステップS11→S13)、“PP”と判断された場合には、その時点で当該ファイル再生処理の一時停止処理(処理タイマストップ)が指示実行される(ステップS13→S14)。この停止処理は、ユーザのマニュアル操作に応じてi秒間の停止及び停止解除が行われる。
【0054】
ここで、入力部17におけるユーザ操作に基づき一時停止解除の入力が為された場合には、再び処理タイマによる計時動作が開始され、当該タイマによる計時時間が次の処理単位時間12c1aに到達したか否か判断される(ステップS15→S16)。
【0055】
一方、前記ステップS13において、前記再生用ファイル12cにおけるタイムコードファイル12c3(図2参照)から読み出されたコマンドコードが、“PP”ではないと判断された場合には、図10における他のコマンド処理へ移行される(ステップSA)。この他のコマンド処理については後述にてその詳細処理を説明する。
【0056】
そして、ステップS16において、前記タイマによる計時時間が次の処理単位時間12c1aに到達したと判断された場合には、RAM12Cに格納された解読済再生用ファイル(CASファイル)12cに対する読み出しポインタが次の位置に更新セットされ(ステップS16→S17)、前記ステップS10における当該読み出しポインタの位置のタイムコードファイル12c3(図2参照)のコマンドコードおよびそのパラメータデータ読み出しからの処理が繰り返される(ステップS17→S10〜S16)。
【0057】
すなわち、携帯機器10のCPU11は、ROM12Aに記憶された再生処理プログラムに従って、再生用ファイル12b(12c)に予め設定記述されているコマンド処理の単位時間毎に、タイムコードファイル12c3(図2参照)に配列されたコマンドコードおよびそのパラメータデータを読み出し、そのコマンドに対応する処理を指示するだけで、当該タイムコードファイル12c3に記述された各コマンドに応じた各種ファイルの同期再生処理が実行される。
【0058】
図9は前記携帯機器10の再生処理プログラム12aに従った再生処理に伴い並列起動される先読み処理を示すフローチャートである。
【0059】
前記再生用ファイル12cの再生処理に伴いこの先読み処理が並列起動されると、RAM12Cに格納された解読済再生用ファイル(CASファイル)12cのタイムコードファイル12c3(図2参照)に対する読み出しポインタの現在位置が確認され(ステップR1)、この現在のポインタ位置より後にあるコマンドコード“DI”(画像ファイル表示命令)がサーチされる(ステップR2)。
【0060】
そして、前記タイムコードファイル12c3(図2参照)における現在の読み出しポインタのセット位置よりも後に“DI”コマンドがサーチされた場合には(ステップR3)、当該“DI”コマンドのパラメータデータに基づき指定されている画像ID番号の画像ファイルが、画像展開バッファ12eに対して展開済であるか否か、つまり直ちに表示出力可能な状態に設定されているか否かが、該当画像ID番号の画像展開済フラグ12dの有無に基づき判断される(ステップR4)。
【0061】
そして、タイムコードファイル12c3(図2参照)における現在の読み出しポインタの位置よりも後のコマンドコードして、“DI”コマンドがサーチされ、しかも当該“DI”コマンドのパラメータデータに基づき指定されている画像ID番号の画像ファイルが、画像展開バッファ12eに対して展開済みでないと判断された場合には、該指定の画像ID番号の画像ファイルがコンテンツ内容データ12c4(図4参照)から読み出され、画像展開バッファ12eに対して予め展開される(ステップR3→R4→R5)。
【0062】
つまり、再生用ファイル12cのタイムコードファイル12c3(図2参照)に従った現在の読み出しポインタの位置のコマンド処理よりも後に画像ファイル表示の“DI”コマンドがある場合は、予め当該“DI”コマンドのパラメータデータにより指示される画像ファイルを先読みして展開しておくことで、前記読み出しポインタが実際に後の“DI”コマンドの位置まで移動した場合に、処理に遅れなく指定の画像ファイルを直ちに出力表示でるようになる。
【0063】
図10は前記携帯機器10の再生処理プログラム12aに従った再生処理に伴う他のコマンド処理を示すフローチャートである。
【0064】
図11は前記携帯機器10の再生処理プログラム12aに従った再生処理に伴う他のコマンド処理それぞれの処理内容を示すフローチャートである。
【0065】
この他のコマンド処理において、前記再生用ファイル12cにおける読み出しポインタに従いタイムコードファイル12c3(図2参照)から読み出されたコマンドコードが“NP”と判断された場合には、無効処理が指定され現状のファイル出力状態がそのまま維持される(ステップA1→END(S16))。
【0066】
また、タイムコードファイル12c3から読み出されたコマンドコードが“LT”と判断された場合には、図11(A)におけるLT処理に移行される(ステップA2→AB)。
【0067】
このLT処理(i番目テキストロード)では、当該コマンドコードLTと共に読み出されたパラメータデータをテキスト番号iとして、解読された再生用ファイル12cのシーケンスファイルテーブル(図3参照)から該テキスト番号iのID番号が読み出される(ステップB1)。
【0068】
そして、このID番号に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出されるテキストデータのRAM12Cのワークエリアに対するロードが指示される(ステップB2)。
【0069】
また、タイムコードファイル12c3から読み出されたコマンドコードが“VD”と判断された場合には、図11(B)におけるVD処理に移行される(ステップA3→AC)。
【0070】
このVD処理(i番目テキスト文節表示)では、前記RAM12Cのワークエリアにロードされたi番目のテキストデータを、HTMLファイルで設定したテキストフレーム内に表示する指示が行われる(ステップC1)。
【0071】
また、タイムコードファイル12c3から読み出されたコマンドコードが“BL”と判断された場合には、図11(C)におけるBL処理に移行される(ステップA4→AD)。
【0072】
このBL処理(文字カウンタリセット・i番目文節ブロック指定)では、まず前記RAM12Cのワークエリアにロードされたテキストデータに対する文字カウンタがリセットされる(ステップD1)。
【0073】
そして、当該コマンドコードBLと共に読み出されたパラメータデータ(i)に応じて、テキストデータのi番目の文節ブロックが指定される(ステップD2)。
【0074】
また、タイムコードファイル12c3から読み出されたコマンドコードが“HN”と判断された場合には、図11(D)におけるHN処理に移行される(ステップA5→AE)。
【0075】
このHN処理(ハイライト無し・文字カウンタカウントアップ)では、テキストデータに対する文字カウンタを1カウントアップする指示が行われる(ステップE1)。
【0076】
また、タイムコードファイル12c3から読み出されたコマンドコードが“HL”と判断された場合には、図11(E)におけるHL処理に移行される(ステップA6→ステップAF)。
【0077】
このHL処理(i番目文字までハイライト・文字カウント)では、当該コマンドコードHLと共に読み出されたパラメータデータ(i)に応じて、テキストデータのi番目の文字までハイライト表示する指示が行われる(ステップF1)。
【0078】
そして、文字カウンタをi番目の文字までカウントアップする指示が行われる(ステップF2)。
【0079】
また、タイムコードファイル12c3から読み出されたコマンドコードが“LS”と判断された場合には、図11(F)におけるLS処理に移行される(ステップA7→ステップAG)。
【0080】
このLS処理(1行スクロール・文字カウンタカウントアップ)では、表示中のテキストデータに対する1行スクロールの指示が行われると共に(ステップG1)、文字カウンタを1カウントアップする指示が行われる(ステップG2)。
【0081】
また、タイムコードファイル12c3から読み出されたコマンドコードが“DH”と判断された場合には、図11(G)におけるDH処理に移行される(ステップA8→ステップAH)。
【0082】
このDH処理(i番目HTMLファイル表示)では、当該コマンドコードDHと共に読み出されたパラメータデータ(i)に応じて、ファイルシーケンステーブル12c2(図3参照)からHTML番号iのID番号が読み出される(ステップH1)。
【0083】
そして、このID番号に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出されるHTMLデータの表示部に対する画像表示フレームやテキスト表示フレームの設定が指示される(ステップH2)。
【0084】
また、タイムコードファイル12c3から読み出されたコマンドコードが“DI”と判断された場合には、図11(H)におけるDI処理に移行される(ステップA9→ステップAI)。
【0085】
このDI処理(i番目イメージファイル表示)では、当該コマンドコードDIと共に読み出されたパラメータデータ(i)に応じて、ファイルシーケンステーブル12c2(図3参照)から画像番号iのID番号が読み出される(ステップI1)。
【0086】
そして、このID番号に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出されて画像展開バッファ12eに展開された画像データを前記HTMLファイルで設定された画像表示フレーム内に表示する指示が行われる(ステップI2)。
【0087】
また、タイムコードファイル12c3から読み出されたコマンドコードが“PS”と判断された場合には、図11(I)におけるPS処理に移行される(ステップA10→ステップAJ)。
【0088】
このPS処理(i番目サウンドファイルプレイ)では、当該コマンドコードPSと共に読み出されたパラメータデータ(i)に応じて、ファイルシーケンステーブル12c2(図3参照)から音声番号iのID番号が読み出される(ステップJ1)。
【0089】
そして、このID番号に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出された音声データを音声出力部19から出力する指示が行われる(ステップJ2)。
【0090】
また、タイムコードファイル12c3から読み出されたコマンドコードが“CS”と判断された場合には、図11(J)におけるCS処理に移行される(ステップA11→AK)。
【0091】
このCS処理(クリアオールファイル)では、出力中の全ファイルをクリアする指示が行われる(ステップK1)。
【0092】
また、タイムコードファイル12c3から読み出されたコマンドコードが“MI”“SI”“BS”“SS”あるいはその他のコマンドのいずれかであると判断された場合には、図12における拡張コマンド処理に移行される(ステップA11→AL)。
【0093】
図12は前記携帯機器10の再生処理プログラム12aに従った再生処理に伴う拡張コマンド処理を示すフローチャートである。
【0094】
図13は前記携帯機器10の再生処理プログラムに従った再生処理に伴う拡張コマンド処理それぞれの処理内容を示すフローチャートである。
【0095】
タイムコードファイル12c3から読み出されたコマンドコードが“MI”と判断された場合には、図13(A)におけるMI処理に移行される(ステップL1→LM)。
【0096】
このMI処理(i番目位置にイメージファイル移動)では、当該コマンドコードMIと共に読み出されたパラメータデータ(i)に応じて、画像表示フレーム上のi番目の位置(図6(A)参照)にイメージファイルを移動表示する指示が行われる(ステップM1)。
【0097】
また、タイムコードファイル12c3から読み出されたコマンドコードが“SI”と判断された場合には、図13(B)におけるSI処理に移行される(ステップL2→LN)。
【0098】
このSI処理(i番目サイズにイメージファイル拡大)では、当該コマンドコードSIと共に読み出されたパラメータデータ(i)に応じて、画像表示フレーム上のイメージファイルをi番目のサイズ(図6(B)参照)に変更して表示する指示が行われる(ステップN1)。
【0099】
また、タイムコードファイル12c3から読み出されたコマンドコードが“BS”と判断された場合には、図13(C)におけるBS処理に移行される(ステップL3→LO)。
【0100】
このBS処理(サウンドファイル音量i)では、当該コマンドコードBSと共に読み出されたパラメータデータ(i)に応じて、音声出力部19におけるサウンドファイルの出力音量をiに変更する指示が行われる(ステップO1)。
【0101】
また、タイムコードファイル12c3から読み出されたコマンドコードが“SS”と判断された場合には、図13(D)におけるSS処理に移行される(ステップL4→LP)。
【0102】
このSS処理(サウンドファイルスピードi)では、当該コマンドコードSSと共に読み出されたパラメータデータ(i)に応じて、音声出力部19におけるサウンドファイルの出力スピードをiに変更する指示が行われる(ステップP1)。
【0103】
さらに、タイムコードファイル12c3から読み出されたコマンドコードがその他の拡張コマンドコードと判断された場合には、当該拡張コマンドに応じた他の処理へ移行される(ステップL4→LQ)。
【0104】
図14は前記図2乃至図4における英語教材再生ファイルに基づいた英語テキスト・画像・音声ファイルの同期再生状態を示す図である。
【0105】
この英語教材ファイル(12c)は、そのヘッダ情報(12c1)に記述設定された処理単位時間(50ms)(図15;12c1a)毎にコマンド処理が実行されるもので、まず、タイムコードファイル12c3(図2参照)の第1コマンドコード“CS”(クリアオールファイル)およびそのパラメータデータ“00”が読み出されると、全ファイルの出力をクリアする指示が行われ(ステップK1)、テキスト・画像・音声ファイルの出力がクリアされる。
【0106】
第2コマンドコード“DH”(i番目HTMLファイル表示)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードDHと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図3参照)からHTML番号1のID番号=2が読み出される(ステップH1)。
【0107】
そして、このID番号=2に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出されるHTMLデータの英会話テキスト・画像フレームデータに応じて、図14(A)に示すように、表示部18に対するテキスト表示フレームXや画像表示フレームYが設定される(ステップH2)。
【0108】
第3コマンドコード“DI”(i番目イメージファイル表示)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードDIと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図3参照)から画像番号1のID番号=6が読み出される(ステップI1)。
【0109】
そして、このID番号=6に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出されて画像展開バッファ12eに展開された画像データ(画像A)が、前記HTMLファイルで設定された画像表示フレームY内に表示される(ステップI2)。
【0110】
第4コマンドコード“PS”(i番目サウンドファイルプレイ)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードPSと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図3参照)から音声番号1のID番号=31が読み出される(ステップJ1)。
【0111】
そして、このID番号=31に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出された英会話音声データが音声出力部19から出力される(ステップJ2)。
【0112】
第5コマンドコード“LT”(i番目テキストロード)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードLTと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図3参照)からテキスト番号1のID番号=20が読み出される(ステップB1)。
【0113】
そして、このID番号=20に対応付けられてコンテンツ内容データ12c4(図4参照)から読み出された英会話テキストデータがRAM12Cのワークエリアにロードされる(ステップB2)。
【0114】
第6コマンドコード“VD”(i番目テキスト文節表示)およびそのパラメータデータ“00”が読み出されると、当該コマンドコードVDと共に読み出されたパラメータデータ(i=0)に応じて、ファイルシーケンステーブル12c2(図3参照)からテキスト番号0のID番号=19が読み出され、これに対応付けられてコンテンツ内容データ12c4(図4参照)にて指定された英会話タイトル文字の文節が、前記RAM12Cにロードされた英会話テキストデータの中から呼び出されて表示画面上のテキスト表示フレームX内に表示される(ステップC1)。
【0115】
第7コマンドコード“BL”(文字カウンタリセット・i番目文節ブロック指定)およびそのパラメータデータ“00”が読み出されると、前記テキスト表示フレームXで表示中の英会話文節の文字カウンタがリセットされ、0番目のブロックが指定される(ステップD1,D2)。
【0116】
第8コマンドコード“HL”(i番目文字までハイライト・文字カウント)およびそのパラメータデータ“04”が読み出されると、当該コマンドコードHLと共に読み出されたパラメータデータ(i=4)に応じて、テキストデータの4番目の文字までハイライト表示(強調表示)される(ステップF1)。
【0117】
そして、文字カウンタが4番目の文字までカウントアップされる(ステップF2)。
【0118】
第9コマンドコード“NP”が読み出されると、現在の画像および英会話テキストデータの同期表示画面および英会話音声データの同期出力状態が維持される。
【0119】
このように、前記英会話教材再生ファイル(12c)におけるタイムコードファイル12c3(図2参照)・ファイルシーケンステーブル12c2(図3参照)・コンテンツ内容データ12c4(図5参照)に従って、当該再生ファイルに予め設定された処理単位時間(25ms)毎のコマンド処理を行うことで、図14(A)〜(D)に示すように、表示画面上のテキスト表示フレームX内に英会話テキストデータが表示されると共に、画像表示フレームY内にその対応画像データが同期表示され、さらに、音声出力部19から表示中の英会話テキストを読み上げる英会話音声データが同期出力されると共に、当該英会話テキストの読み上げ文節が各文字毎に順次同期ハイライト(強調)表示されるようになる。
【0120】
これにより、携帯機器10のCPU11は、再生ファイル12b(12c)に予め記述されたコマンド処理の単位時間毎に、当該コマンドコードおよびそのパラメータデータに従った各種コマンド処理を指示するだけで、英会話テキストファイル、英会話画像ファイル、英会話音声ファイルの同期再生処理を行うことができる。
【0121】
次に、前記実施形態同様の複数種類ファイルの同期再生処理として、次の図15乃至図18で示すような、楽曲ファイルの再生処理について説明する。
【0122】
図15は前記携帯機器10のメモリ12に格納された楽曲再生用ファイル12b(12c)を構成するタイムコードファイル12c3を示す図である。
【0123】
図16は前記携帯機器10のメモリ12に格納された楽曲再生用ファイル12b(12c)を構成するファイルシーケンステーブル12c2を示す図である。
【0124】
図17は前記携帯機器10のメモリ12に格納された楽曲再生用ファイル12b(12c)を構成するコンテンツ内容データ12c4を示す図である。
【0125】
図18は前記図15乃至図17における楽曲再生用ファイルに基づいた楽曲テキスト・画像・音声ファイルの同期再生状態を示す図である。
【0126】
この楽曲再生用ファイル(12c)は、そのヘッダ情報(12c1)に記述設定された処理単位時間(50ms)(12c1a)毎にコマンド処理が実行されるもので、まず、タイムコードファイル12c3(図15参照)の第1コマンドコード“CS”(クリアオールファイル)およびそのパラメータデータ“00”が読み出されると、全ファイルの出力をクリアする指示が行われ(ステップK1)、テキスト・画像・音声ファイルの出力がクリアされる。
【0127】
第2コマンドコード“DH”(i番目HTMLファイル表示)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードDHと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図16参照)からHTML番号1のID番号=2が読み出される(ステップH1)。
【0128】
そして、このID番号=2に対応付けられてコンテンツ内容データ12c4(図17参照)から読み出されるHTMLデータの標準テキストフレームデータや音楽画像フレームデータに応じて、図18(A)に示すように、表示部18に対するテキスト表示フレームXや画像表示フレームYが設定される(ステップH2)。
【0129】
第3コマンドコード“PS”(i番目サウンドファイルプレイ)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードPSと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図16参照)から音声番号1のID番号=31が読み出される(ステップJ1)。
【0130】
そして、このID番号=31に対応付けられてコンテンツ内容データ12c4(図17参照)から読み出された音楽音声データが音声出力部19から出力される(ステップJ2)。この際の出力音量はデフォルト値i=5として設定される。
【0131】
第4コマンドコード“LT”(i番目テキストロード)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードLTと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図16参照)からテキスト番号1のID番号=20が読み出される(ステップB1)。
【0132】
そして、このID番号=20に対応付けられてコンテンツ内容データ12c4(図17参照)から読み出された音楽歌詞データがRAM12Cのワークエリアにロードされる(ステップB2)。
【0133】
第5コマンドコード“VD”(i番目テキスト文節表示)およびそのパラメータデータ“06”が読み出されると、当該コマンドコードVDと共に読み出されたパラメータデータ(i=6)に応じて、前記RAM12Cにロードされた音楽歌詞データのテキストの中から6番目の文節までが呼び出されて表示画面上のテキスト表示フレームX内に表示される(ステップC1)。
【0134】
第6コマンドコード“DI”(i番目イメージファイル表示)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードDIと共に読み出されたパラメータデータ(i=1)に応じて、ファイルシーケンステーブル12c2(図16参照)から画像番号1のID番号=6が読み出される(ステップI1)。
【0135】
そして、このID番号=6に対応付けられてコンテンツ内容データ12c4(図17参照)から読み出されて画像展開バッファ12eに展開された画像データ(画像A)が、前記HTMLファイルで設定された画像表示フレームY内に表示される(ステップI2)。この際の表示位置はデフォルト位置i=5(中央)として設定される。
【0136】
第7コマンドコード“LS”(1行スクロール・文字カウンタカウントアップ)およびそのパラメータデータ“00”が読み出されると、表示中のテキストデータ(音楽歌詞データ)が1行スクロールされて表示されると共に(ステップG1)、文字カウンタが1カウントアップされる(ステップG2)。
【0137】
第8コマンドコード“NP”が読み出されると、現在の画像および音楽歌詞テキストデータの同期表示画面および音楽音声データの同期出力状態が維持される。
【0138】
またこの後、第81コマンドコード“LS”(1行スクロール・文字カウンタカウントアップ)およびそのパラメータデータ“00”が読み出されると、図18(B)で示すように、表示中のテキストデータ(音楽歌詞データ)がさらに1行スクロールされて表示されると共に(ステップG1)、文字カウンタが1カウントアップされる(ステップG2)。
【0139】
そして、第82コマンドコード“MI”(i番目位置にイメージファイル移動)およびそのパラメータデータ“01”が読み出されると、当該コマンドコードMIと共に読み出されたパラメータデータ(i=1)に応じて、画像表示フレームY上の1番目の位置(左上:図6(A)参照)にイメージファイル(画像A)が移動表示される(ステップM1)。
【0140】
そして、第83コマンドコード“BS”(サウンドファイル音量i)およびそのパラメータデータ“07”が読み出されると、当該コマンドコードBSと共に読み出されたパラメータデータ(i=7)に応じて、音声出力部19におけるサウンドファイル(音楽音声データ)の出力音量が“7”に変更される(ステップO1)。
【0141】
さらにこの後、第161コマンドコード“LS”(1行スクロール・文字カウンタカウントアップ)およびそのパラメータデータ“00”が読み出されると、図18(C)で示すように、表示中のテキストデータ(音楽歌詞データ)がさらに1行スクロールされて表示されると共に(ステップG1)、文字カウンタが1カウントアップされる(ステップG2)。
【0142】
そして、第162コマンドコード“MI”(i番目位置にイメージファイル移動)およびそのパラメータデータ“09”が読み出されると、当該コマンドコードMIと共に読み出されたパラメータデータ(i=9)に応じて、画像表示フレームY上の9番目の位置(右下:図6(A)参照)にイメージファイル(画像A)が移動表示される(ステップM1)。
【0143】
そして、第163コマンドコード“BS”(サウンドファイル音量i)およびそのパラメータデータ“05”が読み出されると、当該コマンドコードBSと共に読み出されたパラメータデータ(i=5)に応じて、音声出力部19におけるサウンドファイル(音楽音声データ)の出力音量が“5”に変更される(ステップO1)。
【0144】
さらにこの後、第241コマンドコード“LS”(1行スクロール・文字カウンタカウントアップ)およびそのパラメータデータ“00”が読み出されると、図18(D)で示すように、表示中のテキストデータ(音楽歌詞データ)がさらに1行スクロールされて表示されると共に(ステップG1)、文字カウンタが1カウントアップされる(ステップG2)。
【0145】
そして、第242コマンドコード“SI”(i番目サイズにイメージファイル拡大)およびそのパラメータデータ“03”が読み出されると、当該コマンドコードSIと共に読み出されたパラメータデータ(i=3)に応じて、画像表示フレーム上のイメージファイル(画像A)が3番目のサイズ(縦最大サイズ:図6(B)参照)に変更されて表示される(ステップN1)。
【0146】
そして、第243コマンドコード“BS”(サウンドファイル音量i)およびそのパラメータデータ“08”が読み出されると、当該コマンドコードBSと共に読み出されたパラメータデータ(i=8)に応じて、音声出力部19におけるサウンドファイル(音楽音声データ)の出力音量が“8”に変更される(ステップO1)。
【0147】
このように、前記楽曲再生ファイル(12c)におけるタイムコードファイル12c3(図15参照)・ファイルシーケンステーブル12c2(図16参照)・コンテンツ内容データ12c4(図17参照)に従って、当該再生ファイルに予め設定された処理単位時間(50ms)毎のコマンド処理を行うことで、図18(A)〜(D)に示すように、表示画面上のテキスト表示フレームX内に音楽歌詞テキストデータが表示されると共に、画像表示フレームY内にその対応画像データが同期表示され、さらに、音声出力部19から表示中の音楽歌詞テキストの楽曲音声データが同期出力されると共に、画像ファイルの位置・サイズ変更や音声ファイルの出力音量変更なども順次同期制御されるようになる。
【0148】
これにより、携帯機器10のCPU11は、再生ファイル12b(12c)に、当該コマンドコードおよびそのパラメータデータに従った各種コマンド処理を、予め記述されたコマンド処理の単位時間毎に順次指示するだけで、楽曲テキストファイル、楽曲画像ファイル、楽曲音声ファイルの同期再生処理を行うことができる。従って、CPUのメイン処理の負担が軽くなり、処理能力の比較的小さいCPUでも容易にテキスト画像音声を含む同期再生処理が行える。
【0149】
なお、前記各実施形態におけるテキストファイル・画像ファイル・音声ファイルなどの同期再生処理では、そのテキストファイルの表示において、音声ファイルの出力に合わせた文節ハイライト(強調)表示を行う構成としたが、次の図19に示すように、文字色変更表示や文字サイズ変更表示、文字透明表示、フォント変更表示などによりファイルの再生状況に合わせたテキスト変更表示を行う構成としてもよい。
【0150】
また、前記各実施形態におけるテキストファイル・画像ファイル・音声ファイルなどの同期再生処理では、その画像ファイルの表示において、各ファイルの再生状況に合わせたの位置変更表示やサイズ変更表示を行う構成としたが、当該再生状況に合わせた画像ファイルの入れ替え表示を行う構成としてもよい。
【0151】
さらに、図19に示すように、ファイルの再生状況に合わせてHTMLファイルの入れ替えを行う構成としてもよい。
【0152】
図19は前記携帯機器10のファイル再生処理に伴うファイルの再生状況に合わせた各種変更再生状態を示す図である。
【0153】
すなわち、例えば図19(A)に示すように、HTMLファイル1のテキスト表示フレームX1において、ボキャブラリー特訓の音声ファイル出力に合わせてそのテキストデータを青色指定して色変化表示Mさせたり、さらに、テキスト表示フレームX2において、前記色変化表示Mの部分に対応する言語の意味内容の表示を、透明文字による出現表示Nやフォント変更表示などにより同期して示したりする構成としてもよい。
【0154】
さらに、図19(B)に示すように、前記各表示フレームX1,X2共に、ファイルの再生進行状況に合わせてHTMLファイルの入れ替えを行う構成としてもよい。
【0155】
したがって、前記構成の携帯機器10によるファイル再生機能によれば、ROM12Aに予め記憶された再生処理プログラム12aに従って、再生用ファイル12b(12c)に予め設定記述されているコマンド処理の単位時間(25ms/50ms)毎に、タイムコードファイル12c3に配列されたコマンドコードおよびそのパラメータデータを読み出し、そのコマンドに対応する処理を指示するだけで、当該タイムコードファイル12c3に記述された各コマンドに応じたテキスト・画像・音声ファイルなどの同期再生処理が実行されるので、CPU11の負荷を非常に小さくして各種ファイルの同期再生を行うことができる。
【0156】
また、前記構成の携帯機器10によるファイル再生機能によれば、テキスト・画像・音声ファイルなどの単なる同期再生処理だけでなく、このファイル再生状況に伴い、テキストの強調表示やスクロール表示、画像の位置変更表示やサイズ変更表示などの各種ファイルの再生効果を組み合わせて行う構成としたので、各種ファイルのより効果的な同期再生を行うことができる。
【0157】
さらに、前記構成の携帯機器10によるファイル再生機能によれば、再生用ファイル12cのタイムコードファイル12c3に従った現在のコマンド処理位置よりも後に画像ファィル表示のコマンドがある場合には、その画像ファィルを先読みして展開しておく構成としたので、実際の画像表示時点で処理に遅れなく指定の画像ファイルを直ちに表示できるようになる。
【0158】
なお、前記実施形態において記載した携帯機器10による各処理の手法、すなわち、図8のフローチャートに示すファイル再生処理、図9のフローチャートに示す前記ファイル再生処理と並列起動されるファイル先読み処理、図10のフローチャートに示す前記ファイル再生処理に伴う他のコマンド処理、図11のフローチャートに示す前記ファイル再生処理に伴う他のコマンド処理それぞれの処理、図12のフローチャートに示す前記ファイル再生処理に伴う拡張コマンド処理、図13のフローチャートに示す前記ファイル再生処理に伴う拡張コマンド処理それぞれの処理などの各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード(ROMカード、RAMカード等)、磁気ディスク(フロッピディスク、ハードディスク等)、光ディスク(CD−ROM、DVD等)、半導体メモリ等の外部記録媒体13に格納して配布することができる。そして、通信ネットワーク(インターネット)Nとの通信機能を備えた種々のコンピュータ端末は、この外部記録媒体13に記憶されたプログラムを記録媒体読取部14によってメモリ12に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記実施形態において説明した複数ファイル同期再生機能を実現し、前述した手法による同様の処理を実行することができる。
【0159】
また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク(インターネット)N上を伝送させることができ、この通信ネットワーク(インターネット)Nに接続されたコンピュータ端末から前記のプログラムデータを取り込み、前述した複数ファイル同期再生機能を実現することもできる。
【0160】
なお、本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。
【0161】
【発明の効果】
以上のように、本発明の請求項1に記載の再生制御装置によれば、一連の命令が先頭から順に一定時間間隔で実行された際に、各ファイルの再生命令が当該各再生命令の配列位置に対応する時間に同期して実行されるように無効命令の間に予め配列して記憶しておけば、各ファイルの再生命令であるテキストファイルを表示させるテキスト表示命令、音声ファイルの音声出力開始命令、テキスト表示命令により表示されたテキスト中の所定文字までを識別表示するテキスト識別表示命令が、各命令の配列位置に対応する時間で、音声出力とテキスト識別表示が同期するように同期するように順次再生制御を行うことができ、複数種類のファイルの同期再生処理を容易に行うことができる。
【0165】
また、本発明の請求項に係る再生制御装置によれば、テキスト識別表示命令は、文字色または文字サイズまたは文字フォントを他の文字列の部分と異なる表示形態で表示させる命令であるようにしたので、文字色または文字サイズまたは文字フォントを容易に他の文字列分と異なる形態で表示させることができる。
【0166】
また、本発明の請求項に係る再生制御装置によれば、ファイルの再生命令として、そのテキストファイルに含まれる文字列をスクロール表示させる命令を含むようにしたので、容易にテキストをスクロール表示させることができる。
【0167】
また、本発明の請求項に係る再生制御装置によれば、ファイルの再生命令として、その画像ファイルに含まれる画像の位置の変更表示、または画像のサイズの変更表示命令を含むようにしたので、容易に画像ファイルを位置変更表示またはサイズ変更表示させることができる。
【0168】
また、本発明の請求項に係る再生制御装置によれば、当該再生対象ファイルが音声ファイルである場合には、その音声ファイルの再生を指定された時間停止させる命令を含むようにしたので、容易に音声ファイルの再生を指定時間停止させることができる。
【0169】
また、本発明の請求項に係る再生制御装置によれば、一定時間間隔としては、複数種類の時間間隔のうちの1つの時間間隔が定められて設定されるので、必要に応じて複数種類の基準時間間隔のうちから適当な基準時間間隔を定めて設定できる。
【0171】
また、本発明の請求項に係る再生制御装置によれば、ファイルID記憶手段に記憶されたID番号に対応する再生対象ファイルを読み出して再生するようにしたので、ID番号に従って適切かつ迅速にファイルを読み出して再生することができる。
【0172】
よって、本発明によれば、複数種類のファイルの同期再生を少ないCPUの負荷で行うことが可能になる再生制御装置を提供できる。
【図面の簡単な説明】
【図1】本発明の再生制御装置の実施形態に係る携帯機器10の電子回路の構成を示すブロック図。
【図2】前記携帯機器10のメモリ12に格納された再生用ファイル12b(12c)を構成するタイムコードファイル12c3を示す図。
【図3】前記携帯機器10のメモリ12に格納された再生用ファイル12b(12c)を構成するファイルシーケンステーブル12c2を示す図。
【図4】前記携帯機器10のメモリ12に格納される再生用ファイル12b(12c)を構成するコンテンツ内容データ12c4を示す図。
【図5】前記携帯機器10のタイムコードファイル12c3(図2参照)にて記述される各種コマンドのコマンドコードとそのパラメータデータおよび再生処理プログラム12aに基づき解析処理される命令内容を対応付けて示す図。
【図6】前記携帯機器10のタイムコードファイル12c3(図2参照)にて記述される拡張コマンドに伴うイメージファイルの位置移動形態およびサイズ変更形態を示す図であり、同図(A)は拡張コマンドMIに伴うイメージファイルの移動位置を規定する図、同図(B)は拡張コマンドSIに伴うイメージファイルの変更サイズを規定する図。
【図7】前記携帯機器10のFLASHメモリ12Bに格納される暗号化再生用ファイル12bの各種ファイル格納状態を示す図。
【図8】前記携帯機器10の再生処理プログラム12aに従った再生処理を示すフローチャート。
【図9】前記携帯機器10の再生処理プログラム12aに従った再生処理に伴い並列起動される先読み処理を示すフローチャート。
【図10】前記携帯機器10の再生処理プログラム12aに従った再生処理に伴う他のコマンド処理を示すフローチャート。
【図11】前記携帯機器10の再生処理プログラム12aに従った再生処理に伴う他のコマンド処理それぞれの処理内容を示すフローチャート。
【図12】前記携帯機器10の再生処理プログラム12aに従った再生処理に伴う拡張コマンド処理を示すフローチャート。
【図13】前記携帯機器10の再生処理プログラムに従った再生処理に伴う拡張コマンド処理それぞれの処理内容を示すフローチャート。
【図14】前記図2乃至図4における英語教材再生ファイルに基づいた英語テキスト・画像・音声ファイルの同期再生状態を示す図。
【図15】前記携帯機器10のメモリ12に格納された楽曲再生用ファイル12b(12c)を構成するタイムコードファイル12c3を示す図。
【図16】前記携帯機器10のメモリ12に格納された楽曲再生用ファイル12b(12c)を構成するファイルシーケンステーブル12c2を示す図。
【図17】前記携帯機器10のメモリ12に格納された楽曲再生用ファイル12b(12c)を構成するコンテンツ内容データ12c4を示す図。
【図18】前記図15乃至図17における楽曲再生用ファイルに基づいた楽曲テキスト・画像・音声ファイルの同期再生状態を示す図。
【図19】前記携帯機器10のファイル再生処理に伴うファイルの再生状況に合わせた各種変更再生状態を示す図。
【符号の説明】
10 …携帯機器
11 …CPU
12 …メモリ
12A…ROM
12B…FLASHメモリ
12C…RAM
12c1…ヘッダ情報
12c1a…処理単位時間
12c2…ファイルシーケンステーブル
12c3…タイムコードファイル
12c4…コンテンツ内容データ
12a…再生処理プログラム
12b…暗号化された再生用ファイル(CASファイル)
12c…解読された再生用ファイル(CASファイル)
12d…画像展開済みフラグ
12e…画像展開バッファ
13 …外部記録媒体
14 …記録媒体読取部
15 …電送制御部
16 …通信部
17 …入力部
18 …表示部
19 …音声出力部
20 …通信機器(自宅PC)
30 …Webサーバ
N …通信ネットワーク(インターネット)
X …テキスト表示フレーム
Y …画像表示フレーム

Claims (9)

  1. テキストファイル、音声ファイルを含む複数種類のファイルを記憶するファイル記憶手段と、
    前記複数種類のファイルの再生命令と無効命令とを含む一連の命令が順に配列され、当該一連の命令が先頭から順に一定時間間隔で実行された際に、各ファイルの再生命令が当該各再生命令の配列位置に対応する時間に実行されるように無効命令の間に予め配列して記憶されている再生情報記憶手段と、
    時間を計時する計時手段と、
    この計時手段により計時された時間に基づき、前記再生情報記憶手段に記憶されている一連の命令を先頭から順に一定時間間隔で実行することにより、前記再生情報記憶手段に記憶されている前記複数種類のファイルの各再生命令を、当該各再生命令の配列位置に対応する時間に実行させる順次再生制御手段と、
    を備え、
    前記複数の再生命令は、前記ファイル記憶手段により記憶されたテキストファイルを表示させるテキスト表示命令と、前記ファイル記憶手段により記憶された音声ファイルの音声出力開始命令と、前記テキスト表示命令により表示されたテキスト中の所定文字までを識別表示するテキスト識別表示命令を有し、
    前記順次再生制御手段は、前記再生情報記憶手段に予め配列して記憶されているテキスト表示命令を当該テキスト表示命令の配列位置に対応する時間に実行し、音声出力開始命令を当該音声出力開始命令の配列位置に対応する時間に実行し、テキスト識別表示命令を当該テキスト識別表示命令の配列位置に対応する時間に実行することにより、音声出力とテキストの識別表示を同期させて再生するようにしたことを特徴とする再生制御装置。
  2. 前記テキスト識別表示命令は、文字色または文字サイズまたは文字フォントを他の文字列の部分と異なる表示形態で表示させる命令であることを特徴とする請求項1に記載の再生制御装置。
  3. 前記ファイルの再生命令は、当該再生対象ファイルがテキストファイルである場合に、そのテキストファイルに含まれる文字列をスクロール表示させる再生形態命令を含むことを特徴とする請求項に記載の再生制御装置。
  4. 前記ファイルの再生命令は、当該再生対象ファイルが画像ファイルである場合には、その画像ファイルに含まれる画像の位置の変更表示、または画像のサイズの変更表示命令を含むことを特徴とする請求項に記載の再生制御装置。
  5. 前記ファイルの再生命令は、当該再生対象ファイルが音声ファイルである場合には、その音声ファイルの再生を指定された時間停止させる命令を含むことを特徴とする請求項に記載の再生制御装置。
  6. 前記一定時間間隔は、複数種類の時間間隔のうちの1つの時間間隔が定められて設定されることを特徴とする請求項1乃至請求項の何れか1項に記載の再生制御装置。
  7. 前記再生情報記憶手段により記憶されるファイルの再生命令は、その再生対象ファイルの種類と該種類におけるファイルの指定情報を含み、
    前記ファイル記憶手段により記憶された複数種類のファイルは、それぞれ対応するID番号に対応付けられて記憶され、
    さらに、前記ファイル記憶手段により記憶されたファイルの種類別に、個々のファイルの指定情報とそのID番号とを対応付けて記憶するファイルID記憶手段を備え、
    前記順次再生制御手段は、前記再生情報記憶手段により記憶されたファイルの再生命令とその指定情報に応じて、前記ファイルID記憶手段により記憶されたID番号に対応する再生対象ファイルを前記ファイル記憶手段により記憶された複数種類のファイルの中から読み出し、指定されたファイルの再生処理を行わせることを特徴とする請求項1乃至請求項の何れか1項に記載の再生制御装置。
  8. 前記再生情報記憶手段により予め定められた一定時間間隔毎に順次配列記憶される複数種類のファイルの再生命令および前記ファイル記憶手段により記憶される複数種類のファイルを1つの再生用ファイルとしてまとめたことを特徴とする請求項1乃至請求項の何れか1項に記載の再生制御装置。
  9. 再生装置のコンピュータを制御するための再生制御処理プログラムであって、
    前記コンピュータを、
    テキストファイル、音声ファイルを含む複数種類のファイルを記憶するファイル記憶手段、
    前記複数種類のファイルの再生命令と無効命令とを含む一連の命令が順に配列され、当該一連の命令が先頭から順に一定時間間隔で実行された際に、各ファイルの再生命令が当該各再生命令の配列位置に対応する時間に実行されるように無効命令の間に予め配列して記憶されている再生情報記憶手段、
    時間を計時する計時手段、
    この計時手段により計時された時間に基づき、前記再生情報記憶手段に記憶されている一連の命令を先頭から順に一定時間間隔で実行することにより、前記再生情報記憶手段に記憶されている前記複数種類のファイルの各再生命令を、当該各再生命令の配列位置に対応する時間に実行させる順次再生制御手段、
    として機能させ、
    前記複数の再生命令は、前記ファイル記憶手段により記憶されたテキストファイルを表示させるテキスト表示命令と、前記ファイル記憶手段により記憶された音声ファイルの音声出力開始命令と、前記テキスト表示命令により表示されたテキスト中の所定文字までを識別表示するテキスト識別表示命令を有し、
    前記順次再生制御手段は、前記再生情報記憶手段に予め配列して記憶されているテキスト表示命令を当該テキスト表示命令の配列位置に対応する時間に実行し、音声出力開始命令を当該音声出力開始命令の配列位置に対応する時間に実行し、テキスト識別表示命令を当該テキスト識別表示命令の配列位置に対応する時間に実行することにより、音声出力とテキストの識別表示を同期させて再生するようにしたことを特徴とするコンピュータ読み込み可能な再生制御処理プログラム。
JP2002216585A 2002-07-25 2002-07-25 再生制御装置および再生制御処理プログラム Expired - Fee Related JP3794355B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002216585A JP3794355B2 (ja) 2002-07-25 2002-07-25 再生制御装置および再生制御処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002216585A JP3794355B2 (ja) 2002-07-25 2002-07-25 再生制御装置および再生制御処理プログラム

Publications (2)

Publication Number Publication Date
JP2004064206A JP2004064206A (ja) 2004-02-26
JP3794355B2 true JP3794355B2 (ja) 2006-07-05

Family

ID=31938307

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002216585A Expired - Fee Related JP3794355B2 (ja) 2002-07-25 2002-07-25 再生制御装置および再生制御処理プログラム

Country Status (1)

Country Link
JP (1) JP3794355B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7852411B2 (en) 2002-11-15 2010-12-14 Thomson Licensing Method and apparatus for composition of subtitles
US8737810B2 (en) 2002-11-15 2014-05-27 Thomson Licensing Method and apparatus for cropping of subtitle elements
JP4893076B2 (ja) * 2006-04-12 2012-03-07 株式会社Jvcケンウッド データ再生装置、データ再生方法、ならびに、プログラム

Also Published As

Publication number Publication date
JP2004064206A (ja) 2004-02-26

Similar Documents

Publication Publication Date Title
JP2010250023A (ja) テキスト表示機能付情報処理装置、データ取得方法およびデータ取得プログラム
JP2004347786A (ja) 音声表示出力制御装置、画像表示制御装置、および音声表示出力制御処理プログラム、画像表示制御処理プログラム
EP2180480A1 (en) Playlist search device, playlist search method and program
JP2004266576A (ja) メディアデータ記憶装置、およびメディアデータ記憶処理プログラム
JP2011030224A (ja) マルチメディア字幕表示システム及びマルチメディア字幕表示方法
JP2005073138A (ja) 情報再生装置および情報再生処理プログラム
JP3794355B2 (ja) 再生制御装置および再生制御処理プログラム
JP3846416B2 (ja) 再生制御装置および再生制御処理プログラム
JP4277512B2 (ja) 電子機器及びプログラム
JP4591481B2 (ja) 表示制御装置および表示制御処理プログラム
JP4407119B2 (ja) 命令コード作成装置
JP3818235B2 (ja) 情報再生装置および情報再生処理プログラム
JP4111005B2 (ja) 音声表示出力制御装置および音声表示出力制御処理プログラム
JP3838485B2 (ja) 映像配信装置および映像再生装置
JP2002313070A (ja) 記録再生装置
KR100216297B1 (ko) 디지탈 전자악기의 악보표시장치 및 방법
JP2004205782A (ja) 音声表示出力制御装置および音声表示出力制御処理プログラム
US20060004723A1 (en) Device, method, and computer product for reading tag data included in compressed data file
JP2004302286A (ja) 情報出力装置、情報出力プログラム
JP2004348012A (ja) 携帯端末におけるカラオケシステム
JP5009650B2 (ja) 合成装置、合成システム、合成方法及びプログラム
JP2004266577A (ja) メディア同期再生装置、サーバ装置、およびメディア同期再生処理プログラム、サーバ処理プログラム
JP3997763B2 (ja) 電子機器及び電子機器制御プログラム
JP4478878B2 (ja) 情報処理装置及びその方法並びにプログラム
JP4075434B2 (ja) 音楽・映像再生装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050714

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20050722

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20050810

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060210

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060322

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060404

R150 Certificate of patent or registration of utility model

Ref document number: 3794355

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090421

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100421

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110421

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120421

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120421

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130421

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130421

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140421

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees