JP3269939B2 - 端末装置 - Google Patents
端末装置Info
- Publication number
- JP3269939B2 JP3269939B2 JP15341195A JP15341195A JP3269939B2 JP 3269939 B2 JP3269939 B2 JP 3269939B2 JP 15341195 A JP15341195 A JP 15341195A JP 15341195 A JP15341195 A JP 15341195A JP 3269939 B2 JP3269939 B2 JP 3269939B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- time
- drawing data
- reproducing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/50—Centralised arrangements for answering calls; Centralised arrangements for recording messages for absent or busy subscribers ; Centralised arrangements for recording messages
- H04M3/53—Centralised arrangements for recording incoming messages, i.e. mailbox systems
- H04M3/5307—Centralised arrangements for recording incoming messages, i.e. mailbox systems for recording messages comprising any combination of audio and non-audio components
Description
【０００１】
【産業上の利用分野】本発明は、複数の端末装置がネッ
トワークを介して接続され、これら複数の端末装置間
で、連続した複数の音声データおよびこれらの音声デー
タの少なくとも一部に同期した複数の描画データを含む
マルチメディアデータを用いて作成されたメールを送受
信するマルチメディアメールシステムにおいて、メール
を受信し再生する端末装置が、メールを作成し送信した
端末装置より描画処理性能が劣る場合でも、音声データ
の再生を途切らせることなく、音声データと描画データ
との間の同期を取って、メールを再生することが可能な
技術に関する。
トワークを介して接続され、これら複数の端末装置間
で、連続した複数の音声データおよびこれらの音声デー
タの少なくとも一部に同期した複数の描画データを含む
マルチメディアデータを用いて作成されたメールを送受
信するマルチメディアメールシステムにおいて、メール
を受信し再生する端末装置が、メールを作成し送信した
端末装置より描画処理性能が劣る場合でも、音声データ
の再生を途切らせることなく、音声データと描画データ
との間の同期を取って、メールを再生することが可能な
技術に関する。
【０００２】
【従来の技術】従来、複数の端末装置がネットワークを
介して接続され、これら複数の端末装置間でメールを送
受信する電子メールシステムにおいては、テキストデー
タが中心として扱われている。すなわち、端末装置間で
送受信されるメールは、複数のテキストデータを用いて
作成されている。
介して接続され、これら複数の端末装置間でメールを送
受信する電子メールシステムにおいては、テキストデー
タが中心として扱われている。すなわち、端末装置間で
送受信されるメールは、複数のテキストデータを用いて
作成されている。
【０００３】また、音声データや描画データといったテ
キストデータ以外のデータを扱うことが可能な電子メー
ルシステムにおいても、音声データや描画データは、テ
キストデータとは、独立かつ非同期に扱われている。例
えば、複数の音声データを用いて作成されたメール、ま
たは、複数の描画データを用いて作成されたメールは、
複数のテキストデータを用いて作成されたメールに付属
するメールとして扱われ、ユーザは、必要に応じて、こ
のような付属メールを再生するようになっている。
キストデータ以外のデータを扱うことが可能な電子メー
ルシステムにおいても、音声データや描画データは、テ
キストデータとは、独立かつ非同期に扱われている。例
えば、複数の音声データを用いて作成されたメール、ま
たは、複数の描画データを用いて作成されたメールは、
複数のテキストデータを用いて作成されたメールに付属
するメールとして扱われ、ユーザは、必要に応じて、こ
のような付属メールを再生するようになっている。
【０００４】
【発明が解決しようとする課題】ところで、描画処理速
度が速い端末装置においては、複数の音声データおよび
複数の画像データを含むマルチメディアデータを扱うこ
とができるので、このような端末装置をネットワークを
介して接続することにより、マルチメディアデータを用
いて作成されたメールを送受信することが可能なマルチ
メディアメールシステムを構築することが考えられる。
度が速い端末装置においては、複数の音声データおよび
複数の画像データを含むマルチメディアデータを扱うこ
とができるので、このような端末装置をネットワークを
介して接続することにより、マルチメディアデータを用
いて作成されたメールを送受信することが可能なマルチ
メディアメールシステムを構築することが考えられる。
【０００５】しかし、ネットワークを介して接続される
全ての端末装置の描画処理速度が同じであるとは限らな
いので、メールを受信し再生する端末装置が、該メール
を作成し送信した端末装置より描画処理速度が遅かった
り、他の処理による負荷が原因で描画処理速度が遅くな
っていると、特に、連続した複数の音声データおよびこ
れらの音声データの少なくとも一部に同期したマルチメ
ディアデータを用いて作成されたメールを再生する際
に、描画データの再生が音声データの再生より遅れてし
まい、音声データと描画データとの間の同期が取れなく
なってしまうという問題点がある。
全ての端末装置の描画処理速度が同じであるとは限らな
いので、メールを受信し再生する端末装置が、該メール
を作成し送信した端末装置より描画処理速度が遅かった
り、他の処理による負荷が原因で描画処理速度が遅くな
っていると、特に、連続した複数の音声データおよびこ
れらの音声データの少なくとも一部に同期したマルチメ
ディアデータを用いて作成されたメールを再生する際
に、描画データの再生が音声データの再生より遅れてし
まい、音声データと描画データとの間の同期が取れなく
なってしまうという問題点がある。
【０００６】そこで、本発明の目的は、連続した複数の
音声データおよびこれらの少なくとも一部に同期した複
数の描画データを含むマルチメディアデータを用いて作
成されたメールを受信し再生する端末装置において、音
声データの再生を途切らせることなく、音声データと描
画データとの間の同期を取って、メールを再生すること
を可能とすることにある。
音声データおよびこれらの少なくとも一部に同期した複
数の描画データを含むマルチメディアデータを用いて作
成されたメールを受信し再生する端末装置において、音
声データの再生を途切らせることなく、音声データと描
画データとの間の同期を取って、メールを再生すること
を可能とすることにある。
【０００７】
【課題を解決するための手段】上記目的を達成するため
に、本発明は、マルチメディアデータを含むメールを再
生する端末装置であって、音声データと、前記音声デー
タの一部に同期する複数の描画データと、前記各描画デ
ータにそれぞれ付加された、前記メールの再生開始時か
ら経過時間と比較される時刻情報と、を含むメールを受
信する受信手段と、前記受信手段が受信したメールに含
まれる前記音声データを再生する音声再生手段と、前記
受信手段が受信したメールに含まれる前記複数の描画デ
ータを再生する描画データ再生手段と、を備え、前記描
画再生手段は、所定時間が経過するたびに、前記受信手
段が受信したメールに含まれる複数の描画データのなか
から、予め設定された制限数以内の数の描画データを再
生順に選択し、当該選択した描画データを、前記メール
の再生が開始された時点からの経過時間が、当該描画デ
ータに付加された時刻情報が表す時刻に達している場合
に再生する、ことを特徴とする端末装置を提供する。ま
た、上記目的を達成するため、本発明は、連続した複数
の音声データおよびこれらの音声データの少なくとも一
部に同期した複数の描画データを含むマルチデータを用
いて作成され送信されたメールを受信し再生するメール
端末装置において、 (１)上記複数の描画データの各々に、メールの作成が開
始された時点から経過した相対的な時刻を表す時刻情報
が付加されているメールを受信する受信手段、 (２)上記受信手段が受信したメールに含まれる複数の音
声データを順次再生する音声再生手段、 (３)上記受信手段が受信したメールに含まれる複数の描
画データの各々について、メールの再生が開始された時
点から経過した相対的な時刻が、該描画デーに付加され
ている時刻情報が表す時刻に達した場合に、他の描画デ
ータを再生中であれば、該描画データを廃棄する描画再
生手段、を備えるようにしている。
に、本発明は、マルチメディアデータを含むメールを再
生する端末装置であって、音声データと、前記音声デー
タの一部に同期する複数の描画データと、前記各描画デ
ータにそれぞれ付加された、前記メールの再生開始時か
ら経過時間と比較される時刻情報と、を含むメールを受
信する受信手段と、前記受信手段が受信したメールに含
まれる前記音声データを再生する音声再生手段と、前記
受信手段が受信したメールに含まれる前記複数の描画デ
ータを再生する描画データ再生手段と、を備え、前記描
画再生手段は、所定時間が経過するたびに、前記受信手
段が受信したメールに含まれる複数の描画データのなか
から、予め設定された制限数以内の数の描画データを再
生順に選択し、当該選択した描画データを、前記メール
の再生が開始された時点からの経過時間が、当該描画デ
ータに付加された時刻情報が表す時刻に達している場合
に再生する、ことを特徴とする端末装置を提供する。ま
た、上記目的を達成するため、本発明は、連続した複数
の音声データおよびこれらの音声データの少なくとも一
部に同期した複数の描画データを含むマルチデータを用
いて作成され送信されたメールを受信し再生するメール
端末装置において、 (１)上記複数の描画データの各々に、メールの作成が開
始された時点から経過した相対的な時刻を表す時刻情報
が付加されているメールを受信する受信手段、 (２)上記受信手段が受信したメールに含まれる複数の音
声データを順次再生する音声再生手段、 (３)上記受信手段が受信したメールに含まれる複数の描
画データの各々について、メールの再生が開始された時
点から経過した相対的な時刻が、該描画デーに付加され
ている時刻情報が表す時刻に達した場合に、他の描画デ
ータを再生中であれば、該描画データを廃棄する描画再
生手段、を備えるようにしている。
【０００８】
【０００９】
【００１０】
【００１１】
【作用】本発明に係る端末装置によれば、前記描画再生
手段が、所定時間が経過するたびに、前記受信手段が受
信したメールに含まれる複数の描画データのなかから、
予め設定された制限数以内の数の描画データを再生順に
選択する。そして、当該選択した描画データを、前記メ
ールの再生が開始された時点からの経過時間が、当該描
画データに付加された時刻情報が表す時刻に達している
場合に再生する。
手段が、所定時間が経過するたびに、前記受信手段が受
信したメールに含まれる複数の描画データのなかから、
予め設定された制限数以内の数の描画データを再生順に
選択する。そして、当該選択した描画データを、前記メ
ールの再生が開始された時点からの経過時間が、当該描
画データに付加された時刻情報が表す時刻に達している
場合に再生する。
【００１２】
【００１３】
【００１４】
【００１５】なお、上記描画再生手段が、上記受信手段
が受信したメールに含まれる複数の描画データの各々に
ついて、メールの再生が開始された時点から経過した相
対的な時刻が、該描画データに付加されている時刻情報
が表す時刻に達した場合に、他の描画データを再生中で
あれば、その時点で未再生の描画データの時間的な密度
に応じて、該描画データを再生するかまたは廃棄するか
を判断するようにすることもでき、このようにすれば、
１つの描画データを再生する度に、音声データと描画デ
ータとの間の同期を補正することができる。
が受信したメールに含まれる複数の描画データの各々に
ついて、メールの再生が開始された時点から経過した相
対的な時刻が、該描画データに付加されている時刻情報
が表す時刻に達した場合に、他の描画データを再生中で
あれば、その時点で未再生の描画データの時間的な密度
に応じて、該描画データを再生するかまたは廃棄するか
を判断するようにすることもでき、このようにすれば、
１つの描画データを再生する度に、音声データと描画デ
ータとの間の同期を補正することができる。
【００１６】
【００１７】
【実施例】以下、本発明の実施例について図面を参照し
て説明する。
て説明する。
【００１８】本実施例は、図１に示すような伝言（メー
ル）、すなわち、音声データ１と描画データ２とを用い
て、資料等のイメージデータやテキストデータである背
景データ３に対して指示，注釈，コメント等を加えたメ
ールを、複数の端末装置間で送受信するマルチメディア
メールシステムにおいて、メールを受信し再生する端末
装置が、該メールを作成し送信した端末装置より描画処
理速度が遅い場合でも、音声データ１と描画データ２と
の間の同期を取って、該メールを再現できるようにする
ものである。
ル）、すなわち、音声データ１と描画データ２とを用い
て、資料等のイメージデータやテキストデータである背
景データ３に対して指示，注釈，コメント等を加えたメ
ールを、複数の端末装置間で送受信するマルチメディア
メールシステムにおいて、メールを受信し再生する端末
装置が、該メールを作成し送信した端末装置より描画処
理速度が遅い場合でも、音声データ１と描画データ２と
の間の同期を取って、該メールを再現できるようにする
ものである。
【００１９】図２は本実施例に係るマルチメディアメー
ルシステムの構成例を示すブロック図である。
ルシステムの構成例を示すブロック図である。
【００２０】図２に示すように、本実施例に係るマルチ
メディアメールシステムは、メールの作成／送信／受信
／再生を行う複数台の端末装置１３と、メールを蓄積す
るファイル装置１１を備えたメールサーバ１０とが、ネ
ットワーク１２を介して接続された構成となっている。
メディアメールシステムは、メールの作成／送信／受信
／再生を行う複数台の端末装置１３と、メールを蓄積す
るファイル装置１１を備えたメールサーバ１０とが、ネ
ットワーク１２を介して接続された構成となっている。
【００２１】端末装置１３は、メールの送信時は、作成
したメールに、送信先の端末装置１３を表す宛先情報、
および、自身を表す送信元アドレス情報を付加した後、
ネットワーク１２を介してメールサーバ１０のファイル
装置１１に格納する。
したメールに、送信先の端末装置１３を表す宛先情報、
および、自身を表す送信元アドレス情報を付加した後、
ネットワーク１２を介してメールサーバ１０のファイル
装置１１に格納する。
【００２２】また、端末装置１３は、メールの受信時
は、自身を表す宛先情報が付加されているメールを、ネ
ットワーク１２を介してメールサーバ１０のファイル装
置１１から読み込む。
は、自身を表す宛先情報が付加されているメールを、ネ
ットワーク１２を介してメールサーバ１０のファイル装
置１１から読み込む。
【００２３】図３は端末装置１３の構成例を示すブロッ
ク図である。
ク図である。
【００２４】図３に示すように、端末装置１３は、ネッ
トワーク１２との間の接続を行う通信インタフェース３
０と、音声データを入力する音声データ入力部（例え
ば、マイク）２７と、音声データを出力する音声データ
出力部（例えば、スピーカ）２８と、音声データ入力部
２７および音声データ出力部２８が接続され、音声デー
タの入力および音声データの再生を行う音声ボード２９
と、入力インタフェース２６を介して接続され、テキス
トデータを入力するテキストデータ入力部（例えば、キ
ーボード）２４と、入力インタフェース２６を介して接
続され、描画データを入力する描画データ入力部（例え
ば、マウス）２５と、テキストデータおよび描画データ
を表示する表示部（例えば、ＣＲＴ）２３と、各種プロ
グラムを格納しているファイル装置２２と、プログラム
が実行時にロードされるプログラムメモリ２１と、プロ
グラムを実行するプロセッサ２０とが、バス３１を介し
て接続された構成となっている。
トワーク１２との間の接続を行う通信インタフェース３
０と、音声データを入力する音声データ入力部（例え
ば、マイク）２７と、音声データを出力する音声データ
出力部（例えば、スピーカ）２８と、音声データ入力部
２７および音声データ出力部２８が接続され、音声デー
タの入力および音声データの再生を行う音声ボード２９
と、入力インタフェース２６を介して接続され、テキス
トデータを入力するテキストデータ入力部（例えば、キ
ーボード）２４と、入力インタフェース２６を介して接
続され、描画データを入力する描画データ入力部（例え
ば、マウス）２５と、テキストデータおよび描画データ
を表示する表示部（例えば、ＣＲＴ）２３と、各種プロ
グラムを格納しているファイル装置２２と、プログラム
が実行時にロードされるプログラムメモリ２１と、プロ
グラムを実行するプロセッサ２０とが、バス３１を介し
て接続された構成となっている。
【００２５】図４は本実施例に係るマルチメディアメー
ルシステムでメールとして送受信される伝言ファイルの
ファイル構造を示す図である。
ルシステムでメールとして送受信される伝言ファイルの
ファイル構造を示す図である。
【００２６】図４に示すように、メールの先頭には、宛
先情報および送信元アドレス情報が含まれるメール識別
子４０が付加される。
先情報および送信元アドレス情報が含まれるメール識別
子４０が付加される。
【００２７】メール本体は、複数の描画データからなる
描画ブロック４４，複数の音声データからなる音声ブロ
ック４６，１つ以上の背景データからなる背景ブロック
４８が連結され、先頭に、各ブロックの大きさを表すブ
ロックサイズおよび各ブロックの先頭位置を表すポイン
タが含まれる制御情報４２が記録された構造となってい
る。なお、描画ブロック４４および音声ブロック４６の
みからなるメールである場合、すなわち、資料等のイメ
ージデータやテキストデータを用いずに作成されたメー
ルである場合は、背景ブロック４８のブロックサイズを
「０」として扱う。
描画ブロック４４，複数の音声データからなる音声ブロ
ック４６，１つ以上の背景データからなる背景ブロック
４８が連結され、先頭に、各ブロックの大きさを表すブ
ロックサイズおよび各ブロックの先頭位置を表すポイン
タが含まれる制御情報４２が記録された構造となってい
る。なお、描画ブロック４４および音声ブロック４６の
みからなるメールである場合、すなわち、資料等のイメ
ージデータやテキストデータを用いずに作成されたメー
ルである場合は、背景ブロック４８のブロックサイズを
「０」として扱う。
【００２８】なお、音声ブロック４６内の複数の音声デ
ータは、メールの作成が開始された時点から終了される
時点までの間に連続して入力された、無音データも含む
音声データである。また、描画ブロック４４内の複数の
描画データは、音声ブロック４６内の複数の音声データ
の少なくとも一部に同期して入力された描画データであ
る。
ータは、メールの作成が開始された時点から終了される
時点までの間に連続して入力された、無音データも含む
音声データである。また、描画ブロック４４内の複数の
描画データは、音声ブロック４６内の複数の音声データ
の少なくとも一部に同期して入力された描画データであ
る。
【００２９】このため、特に、描画ブロック４４には、
描画データごとに、該描画データが入力された時刻を表
す時刻情報、および、該描画データの終点の座標値が記
録されるようになっている。ここで、時刻情報は、端末
装置１３においてメールの作成が開始された時点から経
過した相対的な時刻を表すものである。また、一連の描
画軌跡を区別するために、一連の描画データの入力が開
始された時点および終了した時点に、識別子（図中で
は、「ＳＴＡＲＴ」および「ＳＴＯＰ」）が記録される
ようになっている。
描画データごとに、該描画データが入力された時刻を表
す時刻情報、および、該描画データの終点の座標値が記
録されるようになっている。ここで、時刻情報は、端末
装置１３においてメールの作成が開始された時点から経
過した相対的な時刻を表すものである。また、一連の描
画軌跡を区別するために、一連の描画データの入力が開
始された時点および終了した時点に、識別子（図中で
は、「ＳＴＡＲＴ」および「ＳＴＯＰ」）が記録される
ようになっている。
【００３０】すなわち、端末装置１３は、メールの作成
時には、入力された描画データの各々に、該描画データ
の終点の座標値に加えて、該描画データが入力された時
刻を表す時刻情報を付加するようになっている。
時には、入力された描画データの各々に、該描画データ
の終点の座標値に加えて、該描画データが入力された時
刻を表す時刻情報を付加するようになっている。
【００３１】以下、端末装置１３におけるメール再生手
順の第１例について説明する。
順の第１例について説明する。
【００３２】図５は第１例のメール再生手順を示すフロ
ーチャートである。
ーチャートである。
【００３３】図５に示すように、端末装置１３は、メー
ルの再生がユーザから指示されると、まず、初期設定処
理を行う（ステップ５０）。初期設定処理においては、
後述する処理で用いられるフラグやタイマを初期化する
と共に、音声ブロック４６内の音声データの再生を開始
する。なお、初期設定処理の詳しい処理内容について
は、後述する。
ルの再生がユーザから指示されると、まず、初期設定処
理を行う（ステップ５０）。初期設定処理においては、
後述する処理で用いられるフラグやタイマを初期化する
と共に、音声ブロック４６内の音声データの再生を開始
する。なお、初期設定処理の詳しい処理内容について
は、後述する。
【００３４】続いて、描画処理を行う（ステップ５
１）。描画処理においては、描画ブロック４４内の１つ
の描画データを再生する。なお、描画処理の詳しい処理
内容については、後述する。
１）。描画処理においては、描画ブロック４４内の１つ
の描画データを再生する。なお、描画処理の詳しい処理
内容については、後述する。
【００３５】続いて、音声ボード２９に設けられている
音声バッファに残っている音声データの残量を監視する
ことにより、音声バッファに音声データを補充するタイ
ミングであるか否かを判断する（ステップ５２）。
音声バッファに残っている音声データの残量を監視する
ことにより、音声バッファに音声データを補充するタイ
ミングであるか否かを判断する（ステップ５２）。
【００３６】例えば、音声バッファの容量が４Ｋバイト
で、音声バッファの空き容量が１Ｋバイトを超えると、
音声データを音声バッファに補充するというような仕様
である場合は、音声バッファの空き容量が１Ｋバイトに
達したか否かを監視し、空き容量が１Ｋバイトを超えた
ときに、音声データ補充タイミングであると判断する
か、または、１Ｋバイトの音声データが再生されるだけ
の時間が経過したときに、音声データ補充タイミングで
あると判断する。
で、音声バッファの空き容量が１Ｋバイトを超えると、
音声データを音声バッファに補充するというような仕様
である場合は、音声バッファの空き容量が１Ｋバイトに
達したか否かを監視し、空き容量が１Ｋバイトを超えた
ときに、音声データ補充タイミングであると判断する
か、または、１Ｋバイトの音声データが再生されるだけ
の時間が経過したときに、音声データ補充タイミングで
あると判断する。
【００３７】音声データ補充タイミングでないと判断し
た場合は、ステップ５１に戻り、音声データ補充タイミ
ングであると判断した場合は、音声ブロック４６内に未
再生の音声データが残っているか否かを調べる（ステッ
プ５３）。
た場合は、ステップ５１に戻り、音声データ補充タイミ
ングであると判断した場合は、音声ブロック４６内に未
再生の音声データが残っているか否かを調べる（ステッ
プ５３）。
【００３８】未再生の音声データが残っている場合に
は、次の音声データを読み込んで、音声ボード２９に設
けられている音声バッファに補充すると共に（ステップ
５５）、同期処理を行ってから（ステップ５６）、ステ
ップ５１に戻る。なお、同期処理の詳しい処理内容につ
いては、後述する。
は、次の音声データを読み込んで、音声ボード２９に設
けられている音声バッファに補充すると共に（ステップ
５５）、同期処理を行ってから（ステップ５６）、ステ
ップ５１に戻る。なお、同期処理の詳しい処理内容につ
いては、後述する。
【００３９】一方、未再生の音声データが残っていない
場合、すなわち、音声ブロック４６内の全ての音声デー
タを音声ボード２９に補充した状態である場合は、音声
ボード２９に設けられている音声バッファ内の音声デー
タの残量を調べ（ステップ５４）、音声データ残量が
「０」にならなければ、ステップ５１に戻り、「０」に
なったならば、メールの再生を終了する。
場合、すなわち、音声ブロック４６内の全ての音声デー
タを音声ボード２９に補充した状態である場合は、音声
ボード２９に設けられている音声バッファ内の音声デー
タの残量を調べ（ステップ５４）、音声データ残量が
「０」にならなければ、ステップ５１に戻り、「０」に
なったならば、メールの再生を終了する。
【００４０】なお、音声データを音声バッファに補充す
るタイミングとしては、音声バッファの容量が１０Ｋバ
イトの場合は、音声バッファの空き容量が２Ｋバイトを
超えた場合に補充するなど、音声バッファの容量や音声
バッファの空き容量のサイズは、上述した例に限るもの
ではない。
るタイミングとしては、音声バッファの容量が１０Ｋバ
イトの場合は、音声バッファの空き容量が２Ｋバイトを
超えた場合に補充するなど、音声バッファの容量や音声
バッファの空き容量のサイズは、上述した例に限るもの
ではない。
【００４１】また、背景データの内容は、時間の経過と
共に変化しないので、メールの再生に先立って、背景ブ
ロック４８内の背景データを再生しておけばよい。
共に変化しないので、メールの再生に先立って、背景ブ
ロック４８内の背景データを再生しておけばよい。
【００４２】図６はステップ５０の初期設定処理の詳細
な処理内容を示すフローチャートである。
な処理内容を示すフローチャートである。
【００４３】図６に示すように、初期設定処理において
は、まず、描画ブロック４４内に未再生の描画データが
残っているか否かを表すフラグ（以下、描画データフラ
グと称す。）に「１」を設定する（ステップ６２）。
は、まず、描画ブロック４４内に未再生の描画データが
残っているか否かを表すフラグ（以下、描画データフラ
グと称す。）に「１」を設定する（ステップ６２）。
【００４４】続いて、メールの再生を開始した時点から
経過した時刻を計測するためのタイマを初期化する（ス
テップ６４）。
経過した時刻を計測するためのタイマを初期化する（ス
テップ６４）。
【００４５】続いて、音声ボード２９に設けられている
音声バッファの容量分だけ、音声ブロック４６内の音声
データを読み込み、読み込んだ音声データを音声バッフ
ァに補充することにより、音声データの再生を開始する
（ステップ６６）。
音声バッファの容量分だけ、音声ブロック４６内の音声
データを読み込み、読み込んだ音声データを音声バッフ
ァに補充することにより、音声データの再生を開始する
（ステップ６６）。
【００４６】最後に、描画ブロック４４内の１つ分の描
画データを読み込み（ステップ６８）、ステップ５１の
描画処理に備える。
画データを読み込み（ステップ６８）、ステップ５１の
描画処理に備える。
【００４７】図７はステップ５１の描画処理の詳細な処
理内容を示すフローチャートである。
理内容を示すフローチャートである。
【００４８】図７に示すように、描画処理においては、
まず、描画データフラグを調べ（ステップ７０）、描画
データフラグが「０」である場合は、描画ブロック４４
内の全ての描画データを再生したと判断し、描画処理を
終了する。
まず、描画データフラグを調べ（ステップ７０）、描画
データフラグが「０」である場合は、描画ブロック４４
内の全ての描画データを再生したと判断し、描画処理を
終了する。
【００４９】一方、描画データフラグが「１」である場
合は、描画データを再生すべきタイミングに達したか否
かを判断する（ステップ７２）。ステップ７２では、詳
しくは、タイマの計測値（メールの再生を開始した時点
から経過した時刻を表す。）と、ステップ６８で読み込
んだ描画データに対応する時刻情報とを比較し、タイマ
の計測値が、時刻情報が表す時刻に達している場合に、
描画データ再生タイミングであると判断する。
合は、描画データを再生すべきタイミングに達したか否
かを判断する（ステップ７２）。ステップ７２では、詳
しくは、タイマの計測値（メールの再生を開始した時点
から経過した時刻を表す。）と、ステップ６８で読み込
んだ描画データに対応する時刻情報とを比較し、タイマ
の計測値が、時刻情報が表す時刻に達している場合に、
描画データ再生タイミングであると判断する。
【００５０】描画データ再生タイミングでないと判断し
た場合は、描画処理を終了し、描画データ再生タイミン
グであると判断した場合は、ステップ６８で読み込んだ
描画データを再生する（ステップ７４）。
た場合は、描画処理を終了し、描画データ再生タイミン
グであると判断した場合は、ステップ６８で読み込んだ
描画データを再生する（ステップ７４）。
【００５１】続いて、次回の描画処理に備える準備処理
を行ってから（ステップ７６ａ）、描画処理を終了す
る。なお、準備処理の詳しい処理内容については、後述
する。
を行ってから（ステップ７６ａ）、描画処理を終了す
る。なお、準備処理の詳しい処理内容については、後述
する。
【００５２】図８はステップ７６ａの準備処理の詳細な
処理内容を示すフローチャートである。
処理内容を示すフローチャートである。
【００５３】図８に示すように、準備処理においては、
まず、描画ブロック４４内に未再生の描画データが残っ
ているか否かを調べる（ステップ８０）。
まず、描画ブロック４４内に未再生の描画データが残っ
ているか否かを調べる（ステップ８０）。
【００５４】未再生の描画データが残っている場合に
は、描画ブロック４４内の次の１つ分の描画データを読
み込み（ステップ６８）、未再生の描画データが残って
いない場合、すなわち、全ての描画データを再生した場
合には、描画データフラグに「０」を設定する（ステッ
プ８２）。
は、描画ブロック４４内の次の１つ分の描画データを読
み込み（ステップ６８）、未再生の描画データが残って
いない場合、すなわち、全ての描画データを再生した場
合には、描画データフラグに「０」を設定する（ステッ
プ８２）。
【００５５】図９はステップ５６の同期処理の詳細な処
理内容を示すフローチャートである。
理内容を示すフローチャートである。
【００５６】図９に示すように、同期処理においては、
まず、この時点におけるタイマの計測値（メールの再生
を開始した時点から経過した時刻を表す。）Ｔｐを求め
る（ステップ９０）。
まず、この時点におけるタイマの計測値（メールの再生
を開始した時点から経過した時刻を表す。）Ｔｐを求め
る（ステップ９０）。
【００５７】続いて、描画ブロック４４内に、Ｔｐまで
に再生すべき描画データであるが、描画データの再生が
遅れているために再生されていない描画データがある場
合には、そのような描画データの再生を全てスキップす
る（ステップ９２）。
に再生すべき描画データであるが、描画データの再生が
遅れているために再生されていない描画データがある場
合には、そのような描画データの再生を全てスキップす
る（ステップ９２）。
【００５８】続いて、描画データの再生をスキップした
場合は（ステップ９４）、次回の描画処理に備える準備
処理を行ってから（ステップ７６ａ）、同期処理を終了
する。
場合は（ステップ９４）、次回の描画処理に備える準備
処理を行ってから（ステップ７６ａ）、同期処理を終了
する。
【００５９】図１０は第１例のメール再生手順により再
生される描画データの例を示す図である。
生される描画データの例を示す図である。
【００６０】図１０に示すように、描画データは、メー
ルの再生を開始した時点から経過した時刻Ｔｐが、該描
画データに対応する時刻情報が表す時刻に達してから、
前の描画データとの間に線分を引くことにより、描画軌
跡２００を形成する。
ルの再生を開始した時点から経過した時刻Ｔｐが、該描
画データに対応する時刻情報が表す時刻に達してから、
前の描画データとの間に線分を引くことにより、描画軌
跡２００を形成する。
【００６１】ただし、音声ボード２９に設けられている
音声バッファに音声データを補充すべき音声データ補充
タイミング２０２で、本来ならばその時点までに再生さ
れていなければならない描画データが再生されずに残っ
ている場合には、そのような描画データ２０４の再生を
スキップし、次の描画データ２０８を再生するときに、
前の描画データ２０６との間に線分を引くようにする。
音声バッファに音声データを補充すべき音声データ補充
タイミング２０２で、本来ならばその時点までに再生さ
れていなければならない描画データが再生されずに残っ
ている場合には、そのような描画データ２０４の再生を
スキップし、次の描画データ２０８を再生するときに、
前の描画データ２０６との間に線分を引くようにする。
【００６２】これにより、メールの再生を行う端末装置
１３が、該メールを作成し送信した端末装置１３の描画
処理速度より描画処理速度が遅い場合や、他の処理が原
因で負荷がかかっている場合でも、音声データを音声バ
ッファに補充するタイミングごとに、音声データと描画
データとの間の同期を取り直すことができる。
１３が、該メールを作成し送信した端末装置１３の描画
処理速度より描画処理速度が遅い場合や、他の処理が原
因で負荷がかかっている場合でも、音声データを音声バ
ッファに補充するタイミングごとに、音声データと描画
データとの間の同期を取り直すことができる。
【００６３】なお、第１例では、音声データを音声バッ
ファに補充するタイミングごとに、その時点までに再生
すべき描画データであるが、描画データの再生が遅れて
いるために再生されていない描画データがあるか否かを
調べるようにしているが、一定時間が経過する度や１つ
の描画データを再生する度に、その時点までに再生すべ
き描画データであるが、描画データの再生が遅れている
ために再生されていない描画データがあるか否かを調べ
るようにしてもよい。
ファに補充するタイミングごとに、その時点までに再生
すべき描画データであるが、描画データの再生が遅れて
いるために再生されていない描画データがあるか否かを
調べるようにしているが、一定時間が経過する度や１つ
の描画データを再生する度に、その時点までに再生すべ
き描画データであるが、描画データの再生が遅れている
ために再生されていない描画データがあるか否かを調べ
るようにしてもよい。
【００６４】次に、端末装置１３におけるメール再生手
順の第２例について説明する。
順の第２例について説明する。
【００６５】第２例のメール再生手順を示すフローチャ
ートは、図５に示したフローチャートと同様であるが、
ステップ５０の初期設定処理，ステップ５１の描画処
理，ステップ５６の同期処理が、各々、上述した第１例
とは異なる。
ートは、図５に示したフローチャートと同様であるが、
ステップ５０の初期設定処理，ステップ５１の描画処
理，ステップ５６の同期処理が、各々、上述した第１例
とは異なる。
【００６６】図１１はステップ５０の初期設定処理の詳
細な処理内容を示すフローチャートである。
細な処理内容を示すフローチャートである。
【００６７】図１１に示すように、初期設定処理におい
ては、まず、一定時間内に再生すべき描画データ数の制
限値Ｌｗを初期設定する（ステップ１００）。ここでい
う一定時間、すなわち、描画データ数を制限する時間間
隔としては、音声ボード２９に設けられている音声バッ
ファに音声データを補充する時間間隔を用いる。なお、
制限値Ｌｗの初期値は、後述するように、可変とするこ
とができる。
ては、まず、一定時間内に再生すべき描画データ数の制
限値Ｌｗを初期設定する（ステップ１００）。ここでい
う一定時間、すなわち、描画データ数を制限する時間間
隔としては、音声ボード２９に設けられている音声バッ
ファに音声データを補充する時間間隔を用いる。なお、
制限値Ｌｗの初期値は、後述するように、可変とするこ
とができる。
【００６８】続いて、描画データフラグに「１」を設定
し（ステップ６２）、描画ブロック４４内の描画データ
を読み込むべきであるか否かを表すフラグ（以下、描画
データ読み込みフラグと称す。）にも「１」を設定する
（ステップ１０２）。
し（ステップ６２）、描画ブロック４４内の描画データ
を読み込むべきであるか否かを表すフラグ（以下、描画
データ読み込みフラグと称す。）にも「１」を設定する
（ステップ１０２）。
【００６９】続いて、メールの再生を開始した時点から
経過した時刻を計測するためのタイマを初期化し（ステ
ップ６４）、音声ブロック４６内の音声データを、音声
ボード２９に設けられている音声バッファの容量分だけ
読み込んで、音声ボード２９に補充することにより、音
声データの再生を開始する（ステップ６６）。
経過した時刻を計測するためのタイマを初期化し（ステ
ップ６４）、音声ブロック４６内の音声データを、音声
ボード２９に設けられている音声バッファの容量分だけ
読み込んで、音声ボード２９に補充することにより、音
声データの再生を開始する（ステップ６６）。
【００７０】図１２はステップ５１の描画処理の詳細な
処理内容を示すフローチャートである。
処理内容を示すフローチャートである。
【００７１】図１２に示すように、描画処理において
は、まず、描画データフラグを調べ（ステップ７０）、
描画データフラグが「０」である場合は、描画ブロック
４４内の全ての描画データを再生したと判断し、描画処
理を終了する。
は、まず、描画データフラグを調べ（ステップ７０）、
描画データフラグが「０」である場合は、描画ブロック
４４内の全ての描画データを再生したと判断し、描画処
理を終了する。
【００７２】一方、描画データフラグが「１」である場
合は、描画データ読み込みフラグを調べ（ステップ１１
０）、描画データ読み込みフラグが「０」である場合
は、ステップ７２に進む。
合は、描画データ読み込みフラグを調べ（ステップ１１
０）、描画データ読み込みフラグが「０」である場合
は、ステップ７２に進む。
【００７３】また、描画データ読み込みフラグが「１」
である場合は、一定時間内（すなわち、次に音声ボード
２９に設けられている音声バッファに音声データを補充
するタイミングに達するまでの間）に再生すべきである
描画データを全て読み込み、読み込んだ描画データの数
を変数Ａｗに一時的に設定する。そして、変数Ａｗが制
限値Ｌｗよりも大きい場合には、実際に再生する描画デ
ータの数が制限値Ｌｗ内に納まるように、読み込んだ描
画データのうちから、実際に再生すべき描画データを選
択する（ステップ１１２）。
である場合は、一定時間内（すなわち、次に音声ボード
２９に設けられている音声バッファに音声データを補充
するタイミングに達するまでの間）に再生すべきである
描画データを全て読み込み、読み込んだ描画データの数
を変数Ａｗに一時的に設定する。そして、変数Ａｗが制
限値Ｌｗよりも大きい場合には、実際に再生する描画デ
ータの数が制限値Ｌｗ内に納まるように、読み込んだ描
画データのうちから、実際に再生すべき描画データを選
択する（ステップ１１２）。
【００７４】ステップ１１２における選択方法として
は、例えば、描画ブロック４４における順番通りに描画
データを選択するようにする。また、例えば、再生すべ
き描画データの間隔が均一になるように、１つおきまた
は２つおき、描画データを選択していくようにする。ま
た、例えば、読み込んだ描画データに対応する座標値に
基づいて、再生時の線分の長さが長くなるような組合せ
の描画データを選択するようにする。
は、例えば、描画ブロック４４における順番通りに描画
データを選択するようにする。また、例えば、再生すべ
き描画データの間隔が均一になるように、１つおきまた
は２つおき、描画データを選択していくようにする。ま
た、例えば、読み込んだ描画データに対応する座標値に
基づいて、再生時の線分の長さが長くなるような組合せ
の描画データを選択するようにする。
【００７５】続いて、ステップ１１２で選択した描画デ
ータの数を変数Ｓｗに一時的に設定し（ステップ１１
４）、一定時間内に再生した描画データの数をカウント
するためのカウンタＣｗを初期化し（ステップ１１
５）、描画データ読み込みフラグに「０」を設定してか
ら（ステップ１１６）、ステップ７２に進む。
ータの数を変数Ｓｗに一時的に設定し（ステップ１１
４）、一定時間内に再生した描画データの数をカウント
するためのカウンタＣｗを初期化し（ステップ１１
５）、描画データ読み込みフラグに「０」を設定してか
ら（ステップ１１６）、ステップ７２に進む。
【００７６】ステップ７２では、描画データを再生すべ
きタイミングに達したか否かを判断する（ステップ７
２）。ステップ７２では、詳しくは、タイマの計測値
（メールの再生を開始した時点から経過した時刻を表
す。）と、再生すべき描画データに対応する時刻情報と
を比較し、タイマの計測値が時刻情報が表す時刻に達し
ている場合に、描画データ再生タイミングであると判断
する。
きタイミングに達したか否かを判断する（ステップ７
２）。ステップ７２では、詳しくは、タイマの計測値
（メールの再生を開始した時点から経過した時刻を表
す。）と、再生すべき描画データに対応する時刻情報と
を比較し、タイマの計測値が時刻情報が表す時刻に達し
ている場合に、描画データ再生タイミングであると判断
する。
【００７７】描画データ再生タイミングでないと判断し
た場合は、描画処理を終了し、描画データ再生タイミン
グであると判断した場合は、描画データを再生する（ス
テップ７４）。
た場合は、描画処理を終了し、描画データ再生タイミン
グであると判断した場合は、描画データを再生する（ス
テップ７４）。
【００７８】続いて、カウンタＣｗに「１」を加算する
と共に（ステップ１１８）、次回の描画処理に備える準
備処理を行ってから（ステップ７６ｂ）、描画処理を終
了する。なお、準備処理の詳しい処理内容を示すフロー
チャートは、図８に示したフローチャートではなく、図
１３に示すようになる。
と共に（ステップ１１８）、次回の描画処理に備える準
備処理を行ってから（ステップ７６ｂ）、描画処理を終
了する。なお、準備処理の詳しい処理内容を示すフロー
チャートは、図８に示したフローチャートではなく、図
１３に示すようになる。
【００７９】すなわち、図１３に示すように、準備処理
においては、まず、カウンタＣｗと変数Ｓｗとを比較す
ることにより、ステップ１１２で選択した描画データの
全てを再生したか否かを調べ（ステップ１２０）、再生
した場合は、描画ブロック４４内に未再生の描画データ
が残っているか否かを調べる（ステップ８０）。
においては、まず、カウンタＣｗと変数Ｓｗとを比較す
ることにより、ステップ１１２で選択した描画データの
全てを再生したか否かを調べ（ステップ１２０）、再生
した場合は、描画ブロック４４内に未再生の描画データ
が残っているか否かを調べる（ステップ８０）。
【００８０】未再生の描画データが残っている場合に
は、描画データ読み込みフラグに「１」を設定してから
（ステップ１０２）、次回の描画処理で新たな描画デー
タを読み込むよう準備する。また、未再生の描画データ
が残っていない場合には、描画データフラグに「０」を
設定する（ステップ８２）。
は、描画データ読み込みフラグに「１」を設定してから
（ステップ１０２）、次回の描画処理で新たな描画デー
タを読み込むよう準備する。また、未再生の描画データ
が残っていない場合には、描画データフラグに「０」を
設定する（ステップ８２）。
【００８１】図１４はステップ５６の同期処理の詳細な
処理内容を示すフローチャートである。
処理内容を示すフローチャートである。
【００８２】第２例では、同期処理は、図１２に示した
描画処理におけるステップ１１０〜ステップ１１６、お
よび、図１３に示した準備処理におけるステップ１２
０，ステップ１０２に関連した処理内容となる。
描画処理におけるステップ１１０〜ステップ１１６、お
よび、図１３に示した準備処理におけるステップ１２
０，ステップ１０２に関連した処理内容となる。
【００８３】すなわち、図１４に示すように、同期処理
においては、まず、描画データ読み込みフラグに「１」
を設定する（ステップ１０２）。これにより、次回の描
画処理で、再生すべき描画データの選択が新たになされ
ることとなる。すなわち、今回の描画処理で選択された
描画データのうちの、この時点で未再生の描画データ
は、廃棄されることとなる。
においては、まず、描画データ読み込みフラグに「１」
を設定する（ステップ１０２）。これにより、次回の描
画処理で、再生すべき描画データの選択が新たになされ
ることとなる。すなわち、今回の描画処理で選択された
描画データのうちの、この時点で未再生の描画データ
は、廃棄されることとなる。
【００８４】続いて、廃棄された描画データの有無に基
づいて、一定時間内に再生すべき描画データの数の制限
値Ｌｗを再設定する（ステップ１２２）。例えば、選択
した描画データの数を表す変数Ｓｗが、一定時間内に再
生すべき描画データの数を表す変数Ａｗよりも少いとい
う状況で、廃棄された描画データがなかった場合には、
制限値Ｌｗを上げ、廃棄された描画データが多かった場
合には、制限値Ｌｗを下げるようにする。
づいて、一定時間内に再生すべき描画データの数の制限
値Ｌｗを再設定する（ステップ１２２）。例えば、選択
した描画データの数を表す変数Ｓｗが、一定時間内に再
生すべき描画データの数を表す変数Ａｗよりも少いとい
う状況で、廃棄された描画データがなかった場合には、
制限値Ｌｗを上げ、廃棄された描画データが多かった場
合には、制限値Ｌｗを下げるようにする。
【００８５】このように、ステップ１２２を除けば、制
限値Ｌｗの値を固定のまま処理することになる。
限値Ｌｗの値を固定のまま処理することになる。
【００８６】さて、ここで、制限値Ｌｗの初期値の設定
方法について説明する。
方法について説明する。
【００８７】例えば、制限値Ｌｗの初期値は、ユーザが
設定した数値とすることができる。すなわち、端末装置
１３は、図１５に示すように、制限値Ｌｗの初期値を設
定するための領域１００ａを表示部２３に表示し、領域
１００ａにおいて、ユーザがテキストデータ入力部２４
を用いて所定の枠１００ｂ内に入力した数値を、ユーザ
がボタン１００ｃを指示した時点で入手し、入手した数
値を制限値Ｌｗの初期値として用いることができる。
設定した数値とすることができる。すなわち、端末装置
１３は、図１５に示すように、制限値Ｌｗの初期値を設
定するための領域１００ａを表示部２３に表示し、領域
１００ａにおいて、ユーザがテキストデータ入力部２４
を用いて所定の枠１００ｂ内に入力した数値を、ユーザ
がボタン１００ｃを指示した時点で入手し、入手した数
値を制限値Ｌｗの初期値として用いることができる。
【００８８】また、例えば、制限値Ｌｗの初期値は、端
末装置１３のプロセッサ２０の処理能力または負荷状況
に応じた数値とすることができる。すなわち、端末装置
１３は、アプリケーションプログラムの起動に要した時
間からプロセッサ２０の処理能力または負荷状況を推定
し、図１６に示すように、予め用意されている対応表に
基づいて、アプリケーションプログラムの起動時間１０
０ｄに対応する制限値１００ｅを、制限値Ｌｗの初期値
として用いることができる。
末装置１３のプロセッサ２０の処理能力または負荷状況
に応じた数値とすることができる。すなわち、端末装置
１３は、アプリケーションプログラムの起動に要した時
間からプロセッサ２０の処理能力または負荷状況を推定
し、図１６に示すように、予め用意されている対応表に
基づいて、アプリケーションプログラムの起動時間１０
０ｄに対応する制限値１００ｅを、制限値Ｌｗの初期値
として用いることができる。
【００８９】また、例えば、制限値Ｌｗの初期値は、端
末装置１３の実際の描画処理能力に応じた数値とするこ
とができる。すなわち、端末装置１３は、図１７に示す
ように、メールの再生に先立って、試験データを用い
て、一定時間内（すなわち、音声ボード２９に設けられ
ている音声バッファに音声データを補充する時間間隔
内）に再生可能な描画データの数を何回か実測し、実測
した描画データ数（処理数）１００ｆの最大値１００ｇ
を、制限値Ｌｗの初期値として用いることができる。
末装置１３の実際の描画処理能力に応じた数値とするこ
とができる。すなわち、端末装置１３は、図１７に示す
ように、メールの再生に先立って、試験データを用い
て、一定時間内（すなわち、音声ボード２９に設けられ
ている音声バッファに音声データを補充する時間間隔
内）に再生可能な描画データの数を何回か実測し、実測
した描画データ数（処理数）１００ｆの最大値１００ｇ
を、制限値Ｌｗの初期値として用いることができる。
【００９０】図１８は第２例のメール再生手順により再
生される描画データの例を示す図である。
生される描画データの例を示す図である。
【００９１】図１８に示すように、一定時間Ｔ（２１
０）内に再生すべき描画データの数が制限されることに
より（図１８の例では、「２」に制限されている。）、
メールの再生を行う端末装置１３が、該メールを作成し
送信した端末装置１３の描画処理速度より描画処理速度
が遅い場合や、他の処理が原因で負荷がかかっている場
合でも、音声データと描画データとの間の同期を取るこ
とができる。
０）内に再生すべき描画データの数が制限されることに
より（図１８の例では、「２」に制限されている。）、
メールの再生を行う端末装置１３が、該メールを作成し
送信した端末装置１３の描画処理速度より描画処理速度
が遅い場合や、他の処理が原因で負荷がかかっている場
合でも、音声データと描画データとの間の同期を取るこ
とができる。
【００９２】なお、実際に再生すべき描画データを選択
する選択方法によって、再現される描画軌跡２１２は違
ってくるが、一定時間Ｔ（２１０）ごとに、該時間内に
実際に再生すべきである描画データを選択することによ
り、廃棄される描画データが連続する事態を避け、メー
ルの作成時に入力された描画データの特徴を残した形で
描画データを再現することができる。
する選択方法によって、再現される描画軌跡２１２は違
ってくるが、一定時間Ｔ（２１０）ごとに、該時間内に
実際に再生すべきである描画データを選択することによ
り、廃棄される描画データが連続する事態を避け、メー
ルの作成時に入力された描画データの特徴を残した形で
描画データを再現することができる。
【００９３】次に、端末装置１３におけるメール再生手
順の第３例について説明する。
順の第３例について説明する。
【００９４】第３例のメール再生手順を示すフローチャ
ートは、図５に示したフローチャートにおいて、ステッ
プ５６の同期処理を取り除いたようになる。また、ステ
ップ５１の描画処理が上述した第１例とは異なる。
ートは、図５に示したフローチャートにおいて、ステッ
プ５６の同期処理を取り除いたようになる。また、ステ
ップ５１の描画処理が上述した第１例とは異なる。
【００９５】図１９はステップ５１の描画処理の詳細な
処理内容を示すフローチャートである。
処理内容を示すフローチャートである。
【００９６】第３例において、描画処理には、取り除い
た同期処理に相当する処理が含まれるようになってい
る。
た同期処理に相当する処理が含まれるようになってい
る。
【００９７】すなわち、図１９に示すように、描画処理
においては、まず、描画データフラグを調べ（ステップ
７０）、描画データフラグが「０」である場合は、描画
処理を終了する。
においては、まず、描画データフラグを調べ（ステップ
７０）、描画データフラグが「０」である場合は、描画
処理を終了する。
【００９８】一方、描画データフラグが「１」である場
合は、タイマの計測値（メールの再生を開始した時点か
ら経過した時刻を表す。）が、現在読み込んである描画
データに対応する時刻情報が表す時刻を超過していない
かを調べる（ステップ１３０）。ステップ１３０では、
例えば、タイマの計測値から時刻情報が表す時刻を減算
した値が１秒以上である場合は、該描画データと音声デ
ータとの間の同期が取れなくなっている、すなわち、該
描画データを再生すべきタイミングを超過していると判
断する。
合は、タイマの計測値（メールの再生を開始した時点か
ら経過した時刻を表す。）が、現在読み込んである描画
データに対応する時刻情報が表す時刻を超過していない
かを調べる（ステップ１３０）。ステップ１３０では、
例えば、タイマの計測値から時刻情報が表す時刻を減算
した値が１秒以上である場合は、該描画データと音声デ
ータとの間の同期が取れなくなっている、すなわち、該
描画データを再生すべきタイミングを超過していると判
断する。
【００９９】描画データ再生タイミングを超過していな
いと判断した場合は、描画データ再生タイミングに達し
てから（ステップ７２）、ステップ１３４に進んで、描
画データの再生を行う。
いと判断した場合は、描画データ再生タイミングに達し
てから（ステップ７２）、ステップ１３４に進んで、描
画データの再生を行う。
【０１００】また、描画データ再生タイミングを超過し
ていると判断した場合は、次に再生する予定の描画デー
タに対応する時刻情報が表す時刻を参照し、この時点か
ら次の描画データを再生すべき時刻までの時間が、１つ
分の描画データを再生するのに要した時間（以下、描画
データの再生所要時間と称す。）の平均値の２倍以上で
あるか否かを比較する（ステップ１３２）。なお、描画
データの再生所要時間は、後述するステップ１３６で、
描画データを再生する度に求められている。
ていると判断した場合は、次に再生する予定の描画デー
タに対応する時刻情報が表す時刻を参照し、この時点か
ら次の描画データを再生すべき時刻までの時間が、１つ
分の描画データを再生するのに要した時間（以下、描画
データの再生所要時間と称す。）の平均値の２倍以上で
あるか否かを比較する（ステップ１３２）。なお、描画
データの再生所要時間は、後述するステップ１３６で、
描画データを再生する度に求められている。
【０１０１】ステップ１３２の比較の結果、条件を満た
している場合には、描画データ再生タイミングを超過し
ている描画データであっても、該描画データを廃棄せず
に、ステップ１３４に進んで、該描画データを再生する
ことにする。
している場合には、描画データ再生タイミングを超過し
ている描画データであっても、該描画データを廃棄せず
に、ステップ１３４に進んで、該描画データを再生する
ことにする。
【０１０２】ステップ１３４では、タイマの計測値を参
照し、描画データを再生する前の時点の時刻を入手して
おき、続いて、１つ分の描画データを再生するが（ステ
ップ７４）、このとき、描画データの再生所要時間を求
めておく（ステップ１３６）。
照し、描画データを再生する前の時点の時刻を入手して
おき、続いて、１つ分の描画データを再生するが（ステ
ップ７４）、このとき、描画データの再生所要時間を求
めておく（ステップ１３６）。
【０１０３】描画データ再生タイミングを超過した描画
データを廃棄した場合や、描画データの再生を終了した
場合は、次回の描画処理に備える準備処理を行ってから
（ステップ７６ａ）、描画処理を終了する。なお、準備
処理の詳細な処理内容は、図８のフローチャートに示し
た処理内容である。
データを廃棄した場合や、描画データの再生を終了した
場合は、次回の描画処理に備える準備処理を行ってから
（ステップ７６ａ）、描画処理を終了する。なお、準備
処理の詳細な処理内容は、図８のフローチャートに示し
た処理内容である。
【０１０４】図２０は第３例のメール再生手順により再
生される描画データの例を示す図である。
生される描画データの例を示す図である。
【０１０５】図２０に示すように、描画データは、メー
ルの再生を開始した時点から経過した時刻が、該描画デ
ータに対応する時刻情報が表す時刻に達してから、前の
描画データとの間に線分が引かれる。
ルの再生を開始した時点から経過した時刻が、該描画デ
ータに対応する時刻情報が表す時刻に達してから、前の
描画データとの間に線分が引かれる。
【０１０６】ただし、描画データ再生タイミングを超過
してしまった描画データ２２０が発生した場合は、次の
描画データ２２２を再生すべき時刻までの時間と、描画
データの再生所要時間の平均値２２４とを比較し、次の
描画データ２２２を再生すべき時刻までの時間が、平均
値２２４の２倍以上であるならば、描画データ再生タイ
ミングを超過してしまった描画データ２２０であっても
再生するようにし、そうでないならば、このような描画
データ２２０についての再生をスキップするようにす
る。
してしまった描画データ２２０が発生した場合は、次の
描画データ２２２を再生すべき時刻までの時間と、描画
データの再生所要時間の平均値２２４とを比較し、次の
描画データ２２２を再生すべき時刻までの時間が、平均
値２２４の２倍以上であるならば、描画データ再生タイ
ミングを超過してしまった描画データ２２０であっても
再生するようにし、そうでないならば、このような描画
データ２２０についての再生をスキップするようにす
る。
【０１０７】これにより、メールの再生を行う端末装置
１３が、該メールを作成し送信した端末装置１３の描画
処理速度より描画処理速度が遅い場合や、他の処理が原
因で負荷がかかっている場合に、描画データの再生が遅
れてしまうようなことがあっても、より多くの描画デー
タを再生すると共に、１つ分の描画データを再生する度
に、音声データと描画データとの間の同期を補正してい
くことができる。
１３が、該メールを作成し送信した端末装置１３の描画
処理速度より描画処理速度が遅い場合や、他の処理が原
因で負荷がかかっている場合に、描画データの再生が遅
れてしまうようなことがあっても、より多くの描画デー
タを再生すると共に、１つ分の描画データを再生する度
に、音声データと描画データとの間の同期を補正してい
くことができる。
【０１０８】次に、端末装置１３におけるメール再生手
順の第４例について説明する。
順の第４例について説明する。
【０１０９】第４例のメール再生手順を示すフローチャ
ートは、図５に示したフローチャートと同様であるが、
ステップ５０の初期設定処理，ステップ５６の同期処理
が上述した第１例とは異なる。
ートは、図５に示したフローチャートと同様であるが、
ステップ５０の初期設定処理，ステップ５６の同期処理
が上述した第１例とは異なる。
【０１１０】図２１はステップ５０の初期設定処理の詳
細な処理内容を示すフローチャートである。
細な処理内容を示すフローチャートである。
【０１１１】図２１に示すように、初期設定処理におい
ては、まず、制御情報４２に記録されている音声ブロッ
ク４６のブロックサイズを調べることにより、再生すべ
き音声データの総量を求める（ステップ１４０）。
ては、まず、制御情報４２に記録されている音声ブロッ
ク４６のブロックサイズを調べることにより、再生すべ
き音声データの総量を求める（ステップ１４０）。
【０１１２】以降の処理は、図６に示したフローチャー
トと同様に、ステップ６２〜ステップ６８の処理を行
う。なお、ステップ１４０およびステップ６２の順序
は、逆でも構わない。
トと同様に、ステップ６２〜ステップ６８の処理を行
う。なお、ステップ１４０およびステップ６２の順序
は、逆でも構わない。
【０１１３】図２２はステップ５６の同期処理の詳細な
処理内容を示すフローチャートである。
処理内容を示すフローチャートである。
【０１１４】図２２に示すように、同期処理において
は、まず、ステップ５３で求めた未再生の音声データの
データ量と、ステップ５２で求めた音声ボード２９に設
けられている音声バッファに残っている音声データのデ
ータ量とを併せた値を、初期設定処理のステップ１４０
で求めた音声データの総量から減算することにより、再
生した音声データのデータ量を求める（ステップ１４
２）。
は、まず、ステップ５３で求めた未再生の音声データの
データ量と、ステップ５２で求めた音声ボード２９に設
けられている音声バッファに残っている音声データのデ
ータ量とを併せた値を、初期設定処理のステップ１４０
で求めた音声データの総量から減算することにより、再
生した音声データのデータ量を求める（ステップ１４
２）。
【０１１５】続いて、音声データの再生処理速度が、例
えば、１ｍ秒の間に４バイトだけ再生されるというもの
であるならば、再生した音声データのデータ量を「４」
で割ることにより、音声データの再生に要した時間（以
下、音声データの再生所要時間と称す。）を求める（ス
テップ１４４）。
えば、１ｍ秒の間に４バイトだけ再生されるというもの
であるならば、再生した音声データのデータ量を「４」
で割ることにより、音声データの再生に要した時間（以
下、音声データの再生所要時間と称す。）を求める（ス
テップ１４４）。
【０１１６】続いて、ステップ１４４で求めた音声デー
タの再生所要時間とメールの再生を開始した時点から経
過した時間との差分値を、タイマ補正値として設定する
（ステップ１４６）。
タの再生所要時間とメールの再生を開始した時点から経
過した時間との差分値を、タイマ補正値として設定する
（ステップ１４６）。
【０１１７】これにより、描画処理において、描画デー
タ再生タイミングに達したか否かを判断するときに、タ
イマの計測値（メールの再生を開始した時点から経過し
た時刻を表す。）からタイマ補正値を減算し、減算した
結果と描画データに対応する時刻情報とを比較すること
となる。
タ再生タイミングに達したか否かを判断するときに、タ
イマの計測値（メールの再生を開始した時点から経過し
た時刻を表す。）からタイマ補正値を減算し、減算した
結果と描画データに対応する時刻情報とを比較すること
となる。
【０１１８】なお、音声データの再生所要時間の計算に
おいて、再生された音声データのデータ量を割る値は、
音声データの再生処理速度が１ｍ秒の間に１０バイトだ
け再生されるというものであるならば、「１０」で割る
というように、端末装置１３の仕様によって、別の値を
用いる。
おいて、再生された音声データのデータ量を割る値は、
音声データの再生処理速度が１ｍ秒の間に１０バイトだ
け再生されるというものであるならば、「１０」で割る
というように、端末装置１３の仕様によって、別の値を
用いる。
【０１１９】図２３は第４例のメール再生手順による効
果を示す図である。
果を示す図である。
【０１２０】メールの作成時２５０に、メールの作成を
開始した時点から経過した時刻の流れ（メール作成所要
時間）２５４に対する、音声データの入力に要した時間
２５２および描画データの入力に要した時間２５６が、
図２３に示すようである場合を考える。すなわち、音声
データの入力が中断されることなく、メールが作成され
た場合を考える。
開始した時点から経過した時刻の流れ（メール作成所要
時間）２５４に対する、音声データの入力に要した時間
２５２および描画データの入力に要した時間２５６が、
図２３に示すようである場合を考える。すなわち、音声
データの入力が中断されることなく、メールが作成され
た場合を考える。
【０１２１】この場合、メールの再生時２６０に、再生
が中断されてしまうと、再開時に、音声データについて
は、中断された時点から引き続いて再生することができ
るが、メールの再生を開始した時点から経過した時刻の
流れ（メール再生所要時間）２６４と音声データの再生
に要した時間２６２とが一致しなくなるので、描画デー
タについては、メールの再生を開始した時点から経過し
た時刻と描画データに対応する時刻情報が表す時刻とを
比較することで、描画データ再生タイミングに達したか
否かを判断するようにしていたのでは、２６６に示すよ
うに、音声データと描画データとの間の同期が取れなく
なる。
が中断されてしまうと、再開時に、音声データについて
は、中断された時点から引き続いて再生することができ
るが、メールの再生を開始した時点から経過した時刻の
流れ（メール再生所要時間）２６４と音声データの再生
に要した時間２６２とが一致しなくなるので、描画デー
タについては、メールの再生を開始した時点から経過し
た時刻と描画データに対応する時刻情報が表す時刻とを
比較することで、描画データ再生タイミングに達したか
否かを判断するようにしていたのでは、２６６に示すよ
うに、音声データと描画データとの間の同期が取れなく
なる。
【０１２２】一方、上述したように、音声ボード２９に
設けられている音声バッファに音声データを補充すると
きに、メール再生所要時間２６４と音声データの再生に
要した時間２６２との間のズレを、タイマ補正値として
設定し、設定したタイマ補正値を描画データ再生タイミ
ングに達したか否かを判断するときに利用することによ
り、２６８に示すように、音声データと描画データとの
間の同期を取ることができるようになる。
設けられている音声バッファに音声データを補充すると
きに、メール再生所要時間２６４と音声データの再生に
要した時間２６２との間のズレを、タイマ補正値として
設定し、設定したタイマ補正値を描画データ再生タイミ
ングに達したか否かを判断するときに利用することによ
り、２６８に示すように、音声データと描画データとの
間の同期を取ることができるようになる。
【０１２３】このように、音声データの再生が中断して
しまい、メール再生所要時間２６４と音声データの再生
に要した時間２６２とがずれてしまった場合でも、音声
データの再生を再開した後に、再び、音声データと描画
データとの間の同期を取ってメールを再生することがで
きるようになる。
しまい、メール再生所要時間２６４と音声データの再生
に要した時間２６２とがずれてしまった場合でも、音声
データの再生を再開した後に、再び、音声データと描画
データとの間の同期を取ってメールを再生することがで
きるようになる。
【０１２４】以上説明したように、第１例のメール再生
手順によれば、メールの再生を行う端末装置１３におい
て、音声ボード２９に設けられている音声バッファに音
声データを補充する時点で、該時点までに再生すべき描
画データが未再生のまま残っているならば、このような
描画データの再生をスキップしているので、描画データ
の再生が遅れるようなことがあっても、音声データを音
声バッファに補充する度に、音声データと描画データと
の間の同期を取り直すことができる。
手順によれば、メールの再生を行う端末装置１３におい
て、音声ボード２９に設けられている音声バッファに音
声データを補充する時点で、該時点までに再生すべき描
画データが未再生のまま残っているならば、このような
描画データの再生をスキップしているので、描画データ
の再生が遅れるようなことがあっても、音声データを音
声バッファに補充する度に、音声データと描画データと
の間の同期を取り直すことができる。
【０１２５】また、第２例のメール再生手順によれば、
メールの再生を行う端末装置１３において、一定時間内
に再生すべき描画データ数を制限しているので、音声デ
ータと描画データとの間の同期を取ることができる。
メールの再生を行う端末装置１３において、一定時間内
に再生すべき描画データ数を制限しているので、音声デ
ータと描画データとの間の同期を取ることができる。
【０１２６】また、第３例のメール再生手順によれば、
メールの再生を行う端末装置１３において、描画データ
再生タイミングを超過しても未再生となっている描画デ
ータの扱いを、次の描画データを再生するまでの時間と
１つ分の描画データの再生に要する時間の平均値とを比
較することで、再生可能であるか否かを判断し、再生可
能であれば再生するようにしているので、描画データの
再生が遅れるようなことがあっても、より多くの描画デ
ータを再生すると共に、１つ分の描画データを再生する
度に、音声データと描画データとの間の同期を補正する
ことができる。
メールの再生を行う端末装置１３において、描画データ
再生タイミングを超過しても未再生となっている描画デ
ータの扱いを、次の描画データを再生するまでの時間と
１つ分の描画データの再生に要する時間の平均値とを比
較することで、再生可能であるか否かを判断し、再生可
能であれば再生するようにしているので、描画データの
再生が遅れるようなことがあっても、より多くの描画デ
ータを再生すると共に、１つ分の描画データを再生する
度に、音声データと描画データとの間の同期を補正する
ことができる。
【０１２７】また、第４例のメール再生手順によれば、
メールの再生を行う端末装置１３において、描画データ
再生タイミングに達したか否かを判断するために利用す
る、メールの再生を開始した時点から経過した時刻の計
算を、再生した音声データのデータ量に基づいて補正す
るようにしているので、音声データの再生が中断した場
合でも、音声データの再生を再開した後に、再び、音声
データと描画データとの間の同期を取ることができる。
メールの再生を行う端末装置１３において、描画データ
再生タイミングに達したか否かを判断するために利用す
る、メールの再生を開始した時点から経過した時刻の計
算を、再生した音声データのデータ量に基づいて補正す
るようにしているので、音声データの再生が中断した場
合でも、音声データの再生を再開した後に、再び、音声
データと描画データとの間の同期を取ることができる。
【０１２８】
【発明の効果】以上説明したように、本発明のメール端
末装置においては、メールの再生時に、描画処理速度や
負荷状況等が原因で、描画データの再生が音声データの
再生より遅れるような場合でも、音声データの再生を優
先し、描画データを間引いて再生することにより、音声
データの再生を途切らせることなく、音声データと描画
データとの間の同期を取って、メールを再現することが
できる。
末装置においては、メールの再生時に、描画処理速度や
負荷状況等が原因で、描画データの再生が音声データの
再生より遅れるような場合でも、音声データの再生を優
先し、描画データを間引いて再生することにより、音声
データの再生を途切らせることなく、音声データと描画
データとの間の同期を取って、メールを再現することが
できる。
【図１】メールの概念を示す説明図。
【図２】本実施例に係るマルチメディアメールシステム
の構成例を示すブロック図。
の構成例を示すブロック図。
【図３】本実施例の端末装置の構成例を示すブロック構
成図。
成図。
【図４】本実施例におけるメールのファイル構造を示す
説明図。
説明図。
【図５】第１例のメール再生手順を示すフローチャー
ト。
ト。
【図６】第１例における初期設定処理の詳細な処理内容
を示すフローチャート。
を示すフローチャート。
【図７】第１例における描画処理の詳細な処理内容を示
すフローチャート。
すフローチャート。
【図８】第１例における準備処理の詳細な処理内容を示
すフローチャート。
すフローチャート。
【図９】第１例における同期処理の詳細な処理内容を示
すフローチャート。
すフローチャート。
【図１０】第１例のメール再生手順により再生される描
画データを示す説明図。
画データを示す説明図。
【図１１】第２例における初期設定処理の詳細な処理内
容を示すフローチャート。
容を示すフローチャート。
【図１２】第２例における描画処理の詳細な処理内容を
示すフローチャート。
示すフローチャート。
【図１３】第２例における準備処理の詳細な処理内容を
示すフローチャート。
示すフローチャート。
【図１４】第２例における同期処理の詳細な処理内容を
示すフローチャート。
示すフローチャート。
【図１５】一定時間内に再生すべき描画データ数の制限
値の初期値を設定する方法を示す説明図。
値の初期値を設定する方法を示す説明図。
【図１６】一定時間内に再生すべき描画データ数の制限
値の初期値を設定する方法を示す説明図。
値の初期値を設定する方法を示す説明図。
【図１７】一定時間内に再生すべき描画データ数の制限
値の初期値を設定する方法を示す説明図。
値の初期値を設定する方法を示す説明図。
【図１８】第２例のメール再生手順により再生される描
画データを示す説明図。
画データを示す説明図。
【図１９】第３例における描画処理の詳細な処理内容を
示すフローチャート。
示すフローチャート。
【図２０】第３例のメール再生手順により再生される描
画データを示す説明図。
画データを示す説明図。
【図２１】第４例における初期設定処理の詳細な処理内
容を示すフローチャート。
容を示すフローチャート。
【図２２】第４例における同期処理の詳細な処理内容を
示すフローチャート。
示すフローチャート。
【図２３】第４例のメール再生手順による効果を示す説
明図。
明図。
１０…メールサーバ、１１…ファイル装置、１２…ネッ
トワーク、１３…端末装置、２０…プロセッサ、２１…
プログラムメモリ、２２…ファイル装置、２３…表示
部、２４…テキストデータ入力部、２５…描画データ入
力部、２６…入力インタフェース、２７…音声データ入
力部、２８…音声データ出力部、２９…音声ボード、３
０…通信インタフェース、３１…バス。
トワーク、１３…端末装置、２０…プロセッサ、２１…
プログラムメモリ、２２…ファイル装置、２３…表示
部、２４…テキストデータ入力部、２５…描画データ入
力部、２６…入力インタフェース、２７…音声データ入
力部、２８…音声データ出力部、２９…音声ボード、３
０…通信インタフェース、３１…バス。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 星 徹 神奈川県川崎市麻生区王禅寺1099番地 株式会社日立製作所 システム開発研究 所内 (72)発明者 小山 俊明 神奈川県海老名市下今泉810番地 株式 会社日立製作所 オフィスシステム事業 部内 (56)参考文献 特開 平１−286563（ＪＰ，Ａ) 実開 昭62−191253（ＪＰ，Ｕ) (58)調査した分野(Int.Cl.7，ＤＢ名) H04N 1/00 H04N 1/32
Claims (11)
- 【請求項１】マルチメディアデータを含むメールを再生
する端末装置であって、 音声データと、前記音声データの一部に同期する複数の
描画データと、前記各描画データにそれぞれ付加され
た、前記メールの再生開始時から経過時間と比較される
時刻情報と、を含むメールを受信する受信手段と、 前記受信手段が受信したメールに含まれる前記音声デー
タを再生する音声再生手段と、 前記受信手段が受信したメールに含まれる前記複数の描
画データを再生する描画データ再生手段と、 を備え、 前記描画再生手段は、 所定時間が経過するたびに、前記受信手段が受信したメ
ールに含まれる複数の描画データのなかから、予め設定
された制限数以内の数の描画データを再生順に選択し、 当該選択した描画データを、前記メールの再生が開始さ
れた時点からの経過時間が、当該描画データに付加され
た時刻情報が表す時刻に達している場合に再生する、 ことを特徴とする端末装置。 - 【請求項２】マルチメディアデータを含むメールを再生
する端末装置であって、 音声データと、前記音声データの一部に同期する複数の
描画データと、前記各描画データにそれぞれ付加され
た、前記メールの再生時からの経過時間と比較される時
刻情報と、を含むメールを受信する受信手段と、 前記受信手段が受信したメールに含まれる前記音声デー
タを再生する音声再生手段と、 前記受信手段が受信したメールに含まれる前記複数の描
画データを再生する描画データ再生手段と、 を備え、 前記描画再生手段は、 所定時間が経過するたびに、再生すべき描画データを、
予め設定されている制限数以内の数、前記複数の描画デ
ータのなかから等間隔に選択し、 当該選択した描画データを、それぞれ、前記メールの再
生が開始された時点からの経過時間が、当該描画データ
に付加された時刻情報が表す時刻に達している場合に再
生する、 ことを特徴とする端末装置。 - 【請求項３】マルチメディアデータを含むメールを再生
する端末装置であって、 音声データと、前記音声データの一部に同期する複数の
描画データと、前記各描画データにそれぞれ付加され
た、前記メールの再生時からの経過時間と比較される時
刻情報と、を含むメールを受信する受信手段と、 前記受信手段が受信したメールに含まれる前記音声デー
タを再生する音声再生手段と、 前記受信手段が受信したメールに含まれる前記複数の描
画データを再生する描画データ再生手段と、 を備え、 前記描画再生手段は、 所定時間が経過するたびに、予め設定されている制限数
以内の数の描画データを、前記複数の描画データのなか
から、再生後の描画軌跡が長くなる組合せで選択し、 当該選択した描画データを、それぞれ、前記メールの再
生が開始された時点からの経過時間が、当該描画データ
に付加された時刻情報が表す時刻に達している場合に再
生する、 ことを特徴とする端末装置。 - 【請求項４】請求項１、２および３のうちのいずれか１
項に記載の端末装置であって、 前記描画再生手段は、 前記所定時間が経過するたびに、前記選択した描画デー
タのうち、前記メール の再生が開始された時点からの経
過時間が、当該未再生の描画データに付加されている時
刻情報が表す時刻を超えて再生されなった描画データを
廃棄することを特徴とする端末装置。 - 【請求項５】請求項４記載の端末装置であって、 前記描画再生手段が廃棄した描画データの数に応じて、
前記制限数を変更する制限値変更手段を備えることを特
徴とする端末装置。 - 【請求項６】請求項１、２、３および４のうちのいずれ
か１項に記載の端末装置であって、 前記描画再生手段が１の描画データを再生するのに要し
た時間に応じて、前記制限値を変更する制限値変更手段
を備えることを特徴とする端末装置。 - 【請求項７】請求項１、２、３および４のうちのいずれ
か１項に記載の端末装置であって、 予め用意された試験用の描画データを用いて、所定時間
内に再生可能な描画データの数を実測し、当該実測の結
果に応じた値を、前記制限値に設定する制限値変更手段
を備えることを特徴とする端末装置。 - 【請求項８】マルチメディアデータを含むメールを再生
する端末装置であって、 音声データと、各メールの作成が開始された時点からの
経過時間で描画データが入力された時刻を表す相対的な
時刻情報が付加された、該音声データの一部と同期する
複数の描画データとを含むメールを受信する受信手段
と、 前記受信手段が受信したメールに含まれた前記音声デー
タを再生する音声再生手段と、 前記受信手段が受信したメールに含まれた前記複数の描
画データを再生する描画データ再生手段と、 を備え、 前記描画再生手段は、 前記複数の描画データのうちの未再生の描画データであ
って、前記メールの再生が開始された時点からの経過時
間が、前記時刻情報が表す時刻を所定値超えた 描画デー
タを廃棄する、 ことを特徴とする端末装置。 - 【請求項９】マルチメディアデータを含むメールを再生
する端末装置であって、 音声データと、各メールの作成が開始された時点からの
経過時間で描画データが入力された時刻を表す相対的な
時刻情報が付加された、該音声データの一部と同期する
複数の描画データとを含むメールを受信する受信手段
と、 前記受信手段が受信したメールに含まれる前記音声デー
タを再生する音声再生手段と、 前記受信手段が受信したメールに含まれる前記描画デー
タを再生する描画データ再生手段と、 を備え、 前記描画再生手段は、 所定時間が経過するたびに、前記複数の描画データのう
ち、前記メールの再生が開始された時点からの経過時間
が、前記描画データに付加された時刻情報が表す時刻を
超えて再生されなかった描画データを廃棄する、 ことを特徴とする端末装置。 - 【請求項１０】マルチメディアデータを含むメールを再
生する方法であって、 音声データと、各メールの作成が開始された時点からの
経過時間で描画データが入力された時刻を表す相対的な
時刻情報が付加された、該音声データの一部と同期する
複数の描画データとを含むメールを受信する処理と、 前記受信したメールに含まれる前記音声データを再生す
る処理と、 前記受信したメールに含まれる前記複数の描画データを
再生する処理と、 前記複数の描画データのうちの未再生の描画データであ
って、前記メールの再生が開始された時点からの経過時
間が、前記時刻情報が表す時刻を所定値超えた描画デー
タを廃棄する処理と、 を含むことを特徴とする方法。 - 【請求項１１】マルチメディアデータを含むメールを再
生する方法であって、 音声データと、各メールの作成が開始された時点からの
経過時間で描画データが入力された時刻を表す相対的な
時刻情報が付加された、該音声データの一部と同期する
複数の描画データとを含むメールを受信する処理と、 前記受信したメールに含まれる前記音声データを再生す
る処理と、 前記受信したメールに含まれる前記描画データを再生す
る処理と、 所定時間が経過するたびに、前記複数の描画データのう
ち、前記メールの再生が開始された時点からの経過時間
が、前記描画データに付加された時刻情報が表す時刻を
超えて再生されなかった描画データを廃棄する処理と、 を含むことを特徴とする方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15341195A JP3269939B2 (ja) | 1995-06-20 | 1995-06-20 | 端末装置 |
| US08/665,951 US5758082A (en) | 1995-06-20 | 1996-06-19 | Mail terminal equipment |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15341195A JP3269939B2 (ja) | 1995-06-20 | 1995-06-20 | 端末装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH098978A JPH098978A (ja) | 1997-01-10 |
| JP3269939B2 true JP3269939B2 (ja) | 2002-04-02 |
Family
ID=15561910
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP15341195A Expired - Fee Related JP3269939B2 (ja) | 1995-06-20 | 1995-06-20 | 端末装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US5758082A (ja) |
| JP (1) | JP3269939B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6574604B1 (en) * | 1996-05-13 | 2003-06-03 | Van Rijn Percy | Internet message system |
| JPH1153279A (ja) * | 1997-06-05 | 1999-02-26 | Sony Corp | 情報処理装置および方法、情報提供装置および方法、情報処理システム、並びに提供媒体 |
| EP2355472B1 (en) * | 2010-01-22 | 2020-03-04 | Samsung Electronics Co., Ltd. | Apparatus and method for transmitting and receiving handwriting animation message |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5420801A (en) * | 1992-11-13 | 1995-05-30 | International Business Machines Corporation | System and method for synchronization of multimedia streams |
| US5680639A (en) * | 1993-05-10 | 1997-10-21 | Object Technology Licensing Corp. | Multimedia control system |
| US5497373A (en) * | 1994-03-22 | 1996-03-05 | Ericsson Messaging Systems Inc. | Multi-media interface |
| US5661665A (en) * | 1996-06-26 | 1997-08-26 | Microsoft Corporation | Multi-media synchronization |
-
1995
- 1995-06-20 JP JP15341195A patent/JP3269939B2/ja not_active Expired - Fee Related
-
1996
- 1996-06-19 US US08/665,951 patent/US5758082A/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| US5758082A (en) | 1998-05-26 |
| JPH098978A (ja) | 1997-01-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3304630B2 (ja) | マルチメディアメ−ルシステムおよびメ−ル端末装置 | |
| EP0753820B1 (en) | Multimedia playing apparatus utilizing synchronization of scenario-defined processing time points with playing of finite-time monomedia item | |
| US6542692B1 (en) | Nonlinear video editor | |
| KR101983107B1 (ko) | 라이브 비디오 스트리밍에 정보 푸시를 삽입하는 방법, 서버 및 단말 | |
| JP2009159644A (ja) | 計時されるマルチメディアコンテンツの漸進的ダウンローディング | |
| JPH09297748A (ja) | メッセージング装置及びメッセージング方法 | |
| CN110956974A (zh) | 回声消除方法及其相关装置 | |
| KR20150142596A (ko) | 동기 오디오 재생 방법, 장치 및 시스템 | |
| JPH09185570A (ja) | マルチメディアデータ取得再生方法及びシステム | |
| JP3269939B2 (ja) | 端末装置 | |
| US5950015A (en) | Method and system for reading data for a number of users | |
| CN111327956A (zh) | 一种视频播放方法、装置及电子设备 | |
| JP4576133B2 (ja) | ネットワーク会議システム、会議端末および会議サーバ | |
| CN113436639B (zh) | 一种音频流补偿方法、装置、存储介质及设备 | |
| JP2008171194A (ja) | 通信システム、通信方法、サーバ及び端末 | |
| US20220417619A1 (en) | Processing and playing control over interactive video | |
| JP2009503757A (ja) | 光ディスクプログラムの再生を制御する方法及び装置 | |
| JP4694222B2 (ja) | ネットワーク会議システムにおける議事録再生方法、会議端末及び会議サーバ。 | |
| JP2016206370A (ja) | サウンド再生プログラムおよびサウンド再生システム | |
| JP3213225B2 (ja) | マルチメディア再生装置 | |
| JP3179922B2 (ja) | メディア伝達同期再生方式 | |
| JPH11331792A (ja) | クライアント装置およびサーバクライアントシステム | |
| JP2007147818A (ja) | 楽曲再生装置、楽曲再生方法及びプログラム | |
| CN112734942B (zh) | Ar内容播放修改方法、装置、计算机设备及存储介质 | |
| CN115103222A (zh) | 一种视频音轨处理方法及相关设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080118 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080118 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090118 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090118 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100118 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110118 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110118 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120118 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130118 Year of fee payment: 11 |
|
| LAPS | Cancellation because of no payment of annual fees |