JPH1115600A - 一方の端末に作用する物理量も送信し受信画像を加工することのできる通信端末及びそれに供する送信端末並びに受信端末 - Google Patents

Abstract

(57)【要約】 【課題】 送信側で動き等を送信し、これに対応した動
作を受信側で行わせることのできる通信を実現する。 【解決手段】 送信端末装置１で、物理量検出手段１２
で検出した物理量から得られる物理量データを物理量デ
ータ出力手段で出力して送信し、受信端末装置２で、受
信した物理量データが表す物理量を解析手段２３で解析
し、動作制御手段２４で解析手段２３の解析結果に関連
する動作を所定の動作を行う動作手段２５に行わせるよ
う構成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、送信端末、受信端
末及び双方向通信を行う通信端末に関し、特に、送信端
末自体に作用する物理量、画像操作等を送信・受信する
送信端末、受信端末及び通信端末に関する。

【０００２】

【従来の技術】従来の通信装置やシステムとして、電
話、ＦＡＸ、ページャ、コンピュータ通信等がある。こ
れらの通信装置を用いることによって、音声データ、イ
メージデータ、テキストデータ、動画データ等をほぼ同
一性を保ったまま送受信を行うことができる。

【０００３】また、近年、通信端末の携帯化の要請や、
コンピュータ技術の進展に伴い、携帯のコンピュータ端
末装置により上記の複数のデータの送受信、即ち、マル
チメディア環境下での送受信が行われるようになってい
る。これらの通信装置は、いずれも、送信するデータの
表す情報を機械的に、できるかぎり劣化が少ないように
しながら、他の通信装置へ伝達することを目的としたも
のである。

【０００４】

【発明が解決しようとする課題】従って、従来の通信装
置では、例えば、送信者の動き等を送信して受信装置で
この動き等に対応する動作を行わせたりするということ
はできなかった。一方、送信者の動き等は送信者の情緒
的なものを表す手段とすることができると考えられる。
従って、動き等を送信して、受信装置でこれに対応する
動作を行わせることができれば送信者と受信者とのコミ
ュニケーションの幅を広げることが可能となる。

【０００５】従ってこの発明は送受信者間でコミュニケ
ーションの幅を広げることのできる合理的な通信端末を
提供することを第１の目的とする。本発明の第２の目的
は、送信者の感情を反映した動作を受信側に感覚的、視
覚的に察知しやすい形態で通知できる新規な通信端末を
提供することにある。本発明の第３の目的は、送信者の
行う物理的動作を、非物理的動作に変更して受信者に提
示することのできる通信端末を提供することにある。

【０００６】本発明の第４の目的は、２つの端末間で双
方の操作者の動作を互いに他方に伝達するという双方向
通信を可能とする通信端末を提供することにある。本発
明の第５の目的は、大きな伝送容量を要求することな
く、双方の動きを反映した情報を伝送し得る通信端末を
提供することにある。本発明の更に他の目的は、一方の
端末での動作を他方の端末に伝送して提示する、そのよ
うな通信システムを提供することにある。

【０００７】

【課題を解決するための手段】上記目的を達成するため
本発明にかかる通信端末は、他端末に対してデータ送信
を行う送信端末であって、端末本体又はその一部に作用
する物理量を検出する検出手段と、物理量によって加工
処理されるべき対象データ若しくはその識別子を準備す
る準備手段と、検出手段が検出した物理量データと準備
手段が準備したデータとを互いに識別可能な形態で受信
端末に送信する送信手段とを備える送信端末としたこと
を特徴とする。ここで、前記送信手段は、物理量データ
と、そのデータによって加工されるべきデータとを関連
づけるためのリンク情報を少なくとも物理データに付加
するリンク情報付加手段を含むことができる。

【０００８】また、前記物理量検出手段は、端末本体又
はその一部の経時的な動きであって操作者の操作によっ
てされた動きを検出する動き検出センサと、動き検出セ
ンサからの検出信号から、動きの種類、方向に関するデ
ータを作成し、出力する物理量データ出力部とを含むこ
ともできる。更に、送信端末は、物理量によって加工さ
れるべき対象データの画像を表示するディスプレイを含
み、前記物理量検出センサは、ディスプレイ上に設けら
れたタッチパネルとそのタッチパネルに対してなされる
操作者の操作を検出し、その検出データから押す、なぜ
る、くすぐる等の仕種を解釈する処理回路とから構成す
ることもできる。

【０００９】また、対象データが送信者を比喩的に表わ
す擬人データであり、準備手段が前記擬人データを記憶
する記憶手段を含むことができる。また、前記擬人デー
タが立体画像データであり、送信手段は、他端末との通
信の初期に立体画像データを送信する手順を実行するこ
ともできる。上記目的を達成するため、本発明に係る受
信端末は、送信端末から送られてきたデータを受信する
受信端末であって、送信端末から送られてくるデータを
受信する受信手段と、受信したデータから送信端におい
て検出された物理量を示す第１データと、物理量によっ
て加工されるべき第２データとを分離する分離手段と、
第２データを第１データによって加工する加工手段と、
加工後の第２データの内容を受信端末操作者に提示する
提示手段とを含むとしたことを特徴とする。

【００１０】ここで、分離手段は、受信したデータに付
されている識別子を検出し、その識別子から第１データ
か第２データであるかの判別を行うデータ種別判定部を
含むことができる。また、加工手段は、第１データから
送信端末に作用した物理量の種類を解析する解析部と、
第２データに対して解析結果に応じた加工態様で加工す
る加工部とを含むことができる。

【００１１】また、分離手段による分離によって得られ
た第２データが音声データと画像データを含み、音声デ
ータは送信者の会話であり、画像データは送信者を比喩
的に表わす擬人データであり、解析部は第１データから
送信端末に作用した物理量として少なくとも振動と、揺
れの解析を行い、加工部は解析結果を参照して前記音声
データ再生音がを振動するよう加工し、擬人データを左
右又は上下に首を振らせるよう加工し、前記提示手段が
スピーカとディスプレイであり、加工後の音声データに
従ってスピーカが鳴動し、加工後の擬人データの内容が
ディスプレイに表示されることができる。また、擬人デ
ータが擬人の立体画像データであり、加工部は、立体擬
人データを複数の異なったカメラアングルから撮った画
データを作成する画データ作成部と、解析結果に基づき
前記複数の画データを順番に選択し、ディスプレイに出
力する選択部とから構成することができる。

【００１２】更に上記目的を達成するため、本発明は、
送信端末から送られてきたデータを受信する受信端末で
あって、送信端末から送られてくるデータを受信する受
信手段と、受信したデータから送信端において検出され
た物理量を示す第１データと、物理量によって加工され
るべき第２データとを分離する分離手段と、第２データ
を第１データによって加工する加工手段と、加工後の第
２データの内容を受信端末操作者に提示する提示手段
と、を含むことを特徴とする受信端末と、受信したデー
タに付されている識別子を検出し、その識別子から物理
量を示す第１データか、それ以外の第２データかを判別
するデータ種別判別手段と、第１データ及び／又は第２
データに含まれているリンク情報を検出し、受信した第
１データとリンクされているデータを第２データから抽
出する被加工データ抽出手段と、抽出したデータを第１
データによって加工する加工手段と、加工後のデータの
内容を受信端末操作者に提示する提示手段とを含むこと
を特徴としている。また、上記目的を達成するため、本
発明は、受信端末は送信端末から送られてきたデータを
受信する受信端末であって、送信端末から送られてくる
データを受信する受信手段と、受信したデータから送信
端末において検出された物理量を示す第１データと、物
理量によって加工されるべきデータを特定する第２デー
タを分離する分離手段と、加工されるべきデータを格納
している記憶手段と、第２データによって特定される被
加工データを記憶手段から取り出し、第１データによっ
て加工する加工手段と、加工されたデータを受信端末操
作者に提示する提示手段とを含むことを特徴としてい
る。

【００１３】更に上記目的を達成するために、本発明
は、他端末と双方向通信する通信端末であって、ディス
プレイと、ディスプレイに表示された第１の画像に対し
てされた操作を検出して第１操作データを作製し、第２
の画像に対してされた操作を検出し第２操作データを作
製する物理量検出手段と、ディスプレイ上に表示された
第１の画像と第２の画像の少なくとも一方に相当する画
像データ及び／又は音声データを準備する準備手段と、
第１操作データと第２操作データと準備データとを識別
可能な形態で他端末に送信する送信手段と、他端末から
送られてくるデータを受信する受信手段と、受信データ
が、第１操作データ、第２操作データ、準備データのい
ずれに該当するか判定するデータ種別判定手段と、受信
した準備データを第１操作データに基づいて加工する第
１加工手段と、受信した準備データを第２操作データに
基づいて加工する第２加工手段と、データ種別判定手段
の判定結果をもとに第１加工手段、第２加工手段を選択
して起動する起動手段と、起動された加工手段によって
加工された準備データが画像データの場合、ディスプレ
イ上の対応する画像を準備データの内容に置き換えて表
示させる表示制御手段と、前記加工された準備データが
音声データの場合、その準備データの内容で発音する発
音手段とを含むとしたことを特徴としている。ここで、
前記第１の画像が自端末操作者を表わす画像、第２の画
像が他端末操作者を表わす画像とすることができる。ま
た、準備手段の保有する画像データが自端末操作者を比
喩的に表わす擬人の立体画像データとすることもでき
る。

【００１４】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照しながら説明する。図１は本実施の形態に
係る携帯用通信端末装置Ａを示す斜視図であり、図２
は、この携帯用通信端末装置Ａのハードウエア構成図で
ある。この携帯用通信端末装置Ａは、中央処理装置１０
０、ペン入力タブレット１０１ａ、マイク１０１ｂ、加
速度センサ１０１ｃ、圧力センサ１０１ｄ、ディスプレ
イ１０２ａ、スピーカー１０２ｂ、駆動部１０２ｃ、Ｌ
ＥＤ１０２ｄ、通信装置１０３、ＩＣカードリーダ１０
４ａを主な構成要素としている。

【００１５】中央処理装置１００は、演算処理を行うＣ
ＰＵ１００ａ、作業記憶領域となるＲＡＭ１００ｂ、デ
ータ処理や通信処理を行うプログラム等を格納したＲＯ
Ｍ１００ｃ等によって構成される。また、ペン入力タブ
レット１０１ａ、マイク１０１ｂ、加速度センサ１０１
ｃ、圧力センサ１０１ｄによって入力装置１０１が構成
されている。ペン入力タブレット１０１ａは、ディスプ
レイ１０２ａに重ねられ、ペン１０１ａ’でペン入力タ
ブレット１０１ａを介してディスプレイ１０２ａの一点
を押圧すると、ディスプレイ１０２ａ上のこの点の座標
を中央処理装置１００へ入力することができる。中央処
理装置１００との共同により、このペン入力タブレット
１０１ａを通じて文字や数字の入力が行われた場合に、
その解読が可能であると共に、ペン１０１ａでタブレッ
トを突く、なぜる等の物理的な操作をした場合、その動
作をストロークデータとして検出することが可能であ
る。更には、ディスプレイで表示されている画像を縦に
伸張させ、或いは圧縮させるといった動作命令の入力も
可能である。マイク１０１ｂは、音声を電気信号に変え
る。この音声データはその後の処理でデジタル量に変換
される。加速度センサ１０１ｃは、サーボ型や静電容量
型等種々のものが用いられる。この加速度センサ１０１
ｃは図１に示すように２個設けられ、それぞれ装置本体
のＸ軸、およびＹ軸方向の加速度を検出する。

【００１６】圧力センサ１０１ｄは、種々のものが採用
できるがここでは、装置本体の歪みを歪みゲージで検出
することで圧力を検出するものとする。この圧力センサ
１０１ｄは操作者がこの装置本体を持った場合に、手に
よって圧力が加えられる位置の設けてある。

【００１７】なお、ここに示す入力装置の構成として
は、上記の他に、キーボード、スキャナー、カメラ等の
入力手段を含めてもよいことは言うまでもない。それか
ら、ディスプレイ１０２ａ、スピーカー１０２ｂ、駆動
部１０２ｃ、ＬＥＤ１０２ｄにより出力装置１０２が構
成される。ディスプレイ１０２ａは画像、テキスト、メ
ニュー等を表示し、スピーカー１０２ｂは音声データを
出力する。駆動部１０２ｃはモーターにより駆動されて
振動するものであり、これにより装置全体を振動させる
ことができる。ＬＥＤ１０２ｄは赤色と緑色の２種類の
ものが並んでおり、赤色と緑色の間で色を段階的に変化
させることができる。また、装置本体のケーシングのＬ
ＥＤ１０２ｄを覆っている部分１０２ｄ’は半透明であ
ってＬＥＤ１０２ｄの光を透過できるようになってい
る。

【００１８】なお、マイク１０１ｂとスピーカー１０２
ｂは携帯用通信端末装置Ａに内蔵されるとともに、マイ
ク付きイヤホン２００にも内蔵される。このマイク付き
イヤホン２００はコードにより携帯用通信端末装置Ａに
接続され、このマイク付きイヤホンを装着した操作者
は、装置本体を手に持ってディスプレイ１０２ａを見た
り、ペン入力タブレットを操作したりしながら、スピー
カー１０２ｂから音声を聞き、マイク１０１ｂから音声
を入力することができる。

【００１９】通信装置１０３は、データを送信できる信
号に変換し、また、逆に受信した信号を中央処理装置で
処理できるように変換するモデム１０３ａ、信号を電波
で送受信するための処理を行う高周波部１０３ｂ、およ
び電波の送受信を行うアンテナ１０３ｃにより構成され
る。最後に、ＩＣカードリーダ１０４ａは、プログラム
等のデータを記録したＩＣカード１０４ｂからデータを
読み出し中央処理装置１００へ送出する。

【００２０】この携帯用通信端末装置Ａは機能的には送
信系と受信系に分けることができる。携帯用通信端末装
置Ａを送信系１と受信系２に分けた場合の送信系１の機
能ブロック図と、受信系２の機能ブロック図を図３にそ
れぞれ示す。また、送信系１、受信系２の両方にまたが
って機能するものとしてモード切換指示部３１がある。
モード切換指示部３１は自端末装置Ａ及び通信相手であ
る他端末装置のモードを切り換える指示を発する場所で
ある。切り換えるモードとしては「連続再生モード」
「普通モード」「動画・静止画・テキスト表示モード」
がある。「連続再生モード」は後述するが図２２に示す
ような一連の動作を連続して再生するモードである。
「普通モード」は両通信端末間で互いの操作者を表わす
擬人画像を送信し合って図４に示すようにディスプレイ
に両端末操作者の擬人画像を表示した状態で主として音
声通話を行うモードである。「動画・静止画・テキスト
表示モード」は擬人画像データが送られてきたり或いは
既に自装置内メモリに格納していてもそれを表示せず、
通信相手から送られてくる動画、静止画、或いはテキス
トデータを表示するモードである。これらのモードの切
り換えは操作者が入力タブレット上の所定位置を押して
モード切換画面にした上で入力することができる。モー
ド切換指示は送信系１からは命令データとして他端末に
送信されることとなる。

【００２１】送信系１は、情報データ入力部１１、物理
量検出部１２、物理量データ出力部１３、画像操作部１
４、画像操作データ出力部１５、入力データ保持部１
６、送信制御部１７、送信データ指示部１８、送信部１
９、表示部２０ａにより構成される。情報データ入力部
１１は、音声データ、テキストデータ、静止画データ、
動画データ並びに操作者を比喩的に表す擬人画像データ
等のマルチメディアデータの入力を受け付ける部分であ
る。音声データはマイク１０１ｂより、テキストデー
タ、静止画データ、動画データ並びに擬人画像データは
ペン入力タブレット１０１ａやＩＣカードリーダ１０４
ａより、それぞれ入力される。なお、擬人画像データは
立体画像が用いられる。これは、他端末へ送信する場合
のデータ量をおさえる一方、他端末においてその擬人画
像から種々の姿態を容易に作成し表示できるようにする
ためである。

【００２２】物理量検出部１２は、装置全体に作用する
所定の物理量を検出する部分であって、ここでは、携帯
用通信端末装置Ａ全体の上下及び左右方向の加速度を測
定する加速度センサ１０１ｃ、装置に与えられる圧力を
測定する圧力センサ１０１ｄにより構成される。物理量
としては、これらの他に、装置全体の回転量、回転加速
度、衝撃力、温度、照度、気圧等を公知の各種センサに
より検出するようにすることもできる。

【００２３】物理量データ出力部１３は、物理量検出部
１２の検出結果に基づいて、検出した物理量を表す情報
を物理量データとして出力する部分であり、検出された
パラメータを解析して、所定の物理量としての値を算出
し、ＣＰＵで処理できるようにデジタル量へ変換する。
ここでは、加速度センサ１０１ｃによる検出結果から、
これを積分することにより装置全体の上下左右方向の移
動速度を算出し、また、圧力センサ１０１ｄによる検出
結果から圧力の大きさを算出して、デジタル量へ変換し
て入力データ保持部１６へ出力する。

【００２４】表示部２０ａは画像操作部１４で操作され
る対象となる対象画像を表示する部分であって、ディス
プレイ１０２の所定領域内に設けられる。ここでは、対
象画像として、自端末の操作者を表す擬人画像および他
端末の操作者を表す擬人画像を用いることとするが（図
４参照）、対象画像はこれに限られず、テキスト画像等
を用いてもよい。なお、自端末操作者を表わす擬人画像
は前記情報データ入力部１１から入力されたデータを用
いるものとする。この場合、擬人データは立体画像であ
るので、カメラ位置を正面に設定して正面から視た擬人
画像を表示する。他端末操作者を表わす擬人データは当
該他端末と通信を開始した初期に送信されてくるので、
それを表示する。この場合、その擬人画像データは後述
する受信系の画像編集部にて編集され、他端末から送ら
れてくる物理量データに従って種々の姿態で表示される
ことになる。但し、自端末、他端末操作者の擬人画像は
各端末に予め記憶させておき、通信が開始したとき、相
手端末の識別子を用いて検索し、対応する擬人画像を表
示するようにしてもよいことは勿論である。画像操作部
１４は、表示部２０ａに表示された画像に対して所定の
操作を行う部分である。所定の操作として、ここでは、
他端末操作者の擬人画像に対してペン入力タブレット１
０１ａを介してペン先で押圧したり、当該画像をペン先
でこすったりする操作および、自端末操作者を表す擬人
画像の頭部部分をペン先で押圧しながら上方へペン先を
動かしたり、下方へペン先を動かしたりする操作を用い
るものとする。なお、自端末操作者を表す擬人画像の頭
部部分をペン先で押圧しながら上方へペン先を動かす
と、中央処理装置１００によって命令の入力と解釈さ
れ、表示部２０ａに表示されている自端末操作者を表す
擬人画像は縦に長く伸び、逆に下方へペン先を動かすと
当該擬人画像は縦に圧縮されて表示される。このような
擬人画像を伸張したり、圧縮したりする画像処理は、情
報データ入力部１１から入力された擬人画像データを画
像操作部１４が入手して行う。編集の方法は公知の技術
によって行えるが、一例を説明すると、立体画像である
擬人画像データから正面視の２次元画像データを抽出
し、この画像データの各点のＹ座標とペン先の初期位置
のＹ座標との比を求める共に、この比とペン先の初期位
置からの移動量との積で与えられる値を各点のＹ座標の
変移量とし、各点のＹ座標の値を変移量を加算した値に
更新することによって実現できる。対象画像の操作とし
ては、その他に、画像に対して他の画像を付加したり、
一部分を削除したり、画像を新たに入力する等の操作が
可能である。

【００２５】画像操作データ出力部１５は、画像操作部
１４の操作内容に基づいて、画像の操作内容を表す情報
を画像操作データとして出力する。具体的には、対象画
像に対する予め定められた操作が画像操作部１４に対し
てなされたときに、この操作ごとに対応する符号列を画
像操作データとして出力する。

【００２６】ここでは、他端末操作者を表す画像をペン
先で押圧する操作に対して「００」、他端末操作者を表
す画像をペン先でこする操作に対して「０１」、自端末
操作者を表す画像の頭部部分の一部をペン先で押圧しな
がら上方へ動かす操作に対して「１０」、自端末操作者
を表す画像の頭部部分の一部をペン先で押圧しながら下
方へ動かす操作に対して「１１」という符号を割り当て
るものとし、これに画像操作データであることを示すヘ
ッダを付けたものを画像操作データとして出力するもの
とする。なお、ここでは画像操作データ出力部１５は操
作者が上記の画像操作をやめて所定時間経過した場合に
は画像操作が終わったことを受信側に知らせるためのリ
セット信号を出すようにしている。なお、画像操作デー
タはタブレット上をペンで押圧したり、こすったり、い
わゆる物理的操作を行った場合に検出されるデータであ
るので、広義には物理量データの一種である。

【００２７】入力データ保持部１６は、情報データ入力
部１１、物理量データ出力部１３、画像操作データ出力
部１５より出力される各データ並びにモード切換指示部
３１からのモード切換命令データを保持する部分であ
り、ＲＡＭ１０４により構成される。図５、図６は入力
データ保持部１６に格納される情報データ、物理量デー
タの夫々のデータ構造を示している。情報データのうち
で擬人画像データは立体画像であるため、図７に単独に
示している。従って、図５の情報データの構造は擬人画
像データ以外の情報データを示している。また、モード
切換命令等の命令データ構造は図２６に示す。

【００２８】情報データのデータ構造は図５にみられる
ように「情報データ識別子」、「情報データ長」、「情
報データ種別識別子」、「情報データ」、「データ終端
識別子」とからなる。「情報データ識別子」は他の物理
量データ、擬人画像データと識別するためのＩＤであ
る。「情報データ長」は「情報データ」部分に格納され
ている情報データのデータ長を示している。「情報デー
タ」部分に格納されている情報データの量は、送信の単
位に相当する量である。従って、情報データとして音声
のようなリアルタイムで送信すべきものの場合、一送信
単位のデータ量は非常に微小時間分の音声データとな
る。静止画、動画についてもやはり、同様である。一
方、擬人画像データの場合、通信の初期に一括して送信
されるため、データ量は多い。

【００２９】「情報データ種別識別子」は、その後に続
く情報データが音声であるか、テキストデータであるか
動画静止画であるかといった種別を示す識別子である。
「データ終端識別子」は、一単位の情報データの終わり
であることを示す識別子である。物理量データのデータ
構造も基本的には情報データのデータ構造と同じであ
る。即ち、図６に示すように物理量であることを示す識
別子、後続する物理量データのデータ長、物理量データ
がＸ方向加速度、Ｙ方向加速度、圧力又は温度、湿度と
いったいずれの種別のデータであるかを示す個別物理量
識別子、データ終端を示す識別子並びに物理量データそ
のものからなっている。情報データのデータ構造と異な
っているのは、「物理量適用先識別子」が準備されてい
ることである。この識別子は、後続する物理量データが
適用されるべき情報データの種別を示している。例え
ば、物理量データが加速度データであった場合、自端末
操作者の擬人画像データがこの「物理量適用先識別子」
によって示される。その結果、他端末の受信系では擬人
画像データを加工して首を縦、又は横に振る姿態で擬人
を表示することになる（図１５，１６参照）。なお、画
像操作データもこの物理量のデータ構造と同一である。

【００３０】擬人画像データのデータ構造も情報データ
のデータ構造と基本的には同じである。異なっているの
は、図７にみられるように、立体画像の各部品毎に「部
品データ長」と「部品データ」、「部品データ終端識別
子」が準備されることと、全ての部品が「部品識別子」
と「データ終端識別子」との間に記述されることであ
る。これは既に述べたが擬人画像データは通信の初期に
一括送信するためである。

【００３１】命令データの構造も図２６にみられるよう
に先頭に命令であることを示す識別子が、２番目に命令
長、最後に終端であることを示す識別子がある点で情報
データの構造と基本的に同じである。命令データ中、
「命令種別識別子」は、命令がモード切換命令かそれ以
外の命令であるかを示す識別子である。モード切換命令
以外の命令を使用しない場合はこの識別子の欄はなくて
もかまわない。

【００３２】次に、再び図３において、送信データ指示
部１８は、操作者による送信すべきデータおよび送信を
停止すべきデータの指示を受け付ける。ここでは、操作
者によって送信すべき指示がされるデータは、情報デー
タの内の動画データ、静止画データ、テキストデータで
あり、これ以外のデータ即ち音声データは原則として、
指示がなくても送信される。また送信を停止すべき指示
がされるデータは、物理量データおよび画像操作データ
であるものとする。

【００３３】送信制御部１７は、入力データ保持部１６
に保持されているデータの送信に際して、送信するデー
タの順番やタイミングを制御する部分であって、ここで
は、情報データと、他のデータとの送信順序を、予め定
められたルールに基づいて制御する。

【００３４】具体的には、送信すべき情報データと物理
量データもしくは画像操作データが混在する場合には、
原則として情報データを優先して送信する。但し、情報
データである音声データと物理量データである移動速度
データの２つが入力データ保持部１６に記録されている
場合には、音声データが不自然とならない時間間隔を空
けて音声データの間に物理量データを分けて挿入して送
信するようにする。また、情報データである音声データ
と、「１０」もしくは「１１」を含む画像操作データと
が入力データ保持部１６に記録されている場合には、ま
ず、最初に画像操作データを送信して、それから音声デ
ータを送信するようにする。なお、画像操作データのリ
セット信号は、「００」もしくは「０１」を含む画像操
作データに準じた制御を行う。

【００３５】なお、入力データ保持部１６に物理量デー
タもしくは画像操作データがあり、情報データが優先的
に送信中の場合に、この情報データの送信時間が所定の
時間を越えると、一旦、情報データの送信を中止して、
入力データ保持部１６に記録されている物理量データも
しくは画像操作データを送信してから、再び中止した情
報データの送信を再開するようにしてもよい。また、入
力データ保持部１６に命令データが格納されている場合
は他のいずれのデータに対しても優先して送信される。
送信部１９は、送信制御部１７の制御に従って、入力デ
ータ保持部１６に記憶されているデータを他の携帯用送
受信装置へ送信する部分であり、通信装置１０３により
構成される。他装置との通信に使用される通信路はＰＨ
Ｓ等の公衆回線を用いるのが便利である。全ての加入者
と通信できるからである。

【００３６】次に、受信系２について説明する。受信系
２は、受信部２１、出力データ判定保持部２２、解析部
２３、動作制御部２４、動作部２５、情報データ出力部
２６より構成される。受信部２１は、他の携帯用送受信
装置から送信されてくる情報データ、物理量データ、画
像操作データ、命令データを受信する部分であり、通信
装置１０３により構成される。出力データ判定保持部２
２は受信部２１が受信したデータの先頭の識別子を検出
し、データの種別、即ち情報データであるか、物理量デ
ータ、画像操作データであるか、更に擬人画像データ又
は命令データであるかの判定を行い、データ別に一時的
に記憶する。そして、情報データと擬人画像データはデ
ータ編集部２５ａへ送出され、その他の物理量データ、
画像操作データ、命令データは解析部２３へ送られる。

【００３７】解析部２３は受信した物理量データ若しく
は画像操作データより、物理量データが表す物理量若し
くは画像操作データが表す画像の操作内容を解析し、命
令データについては命令文を解釈する部分である。具体
的に、ここでは、上下方向および左右方向の移動速度デ
ータに関しては、これらのデータを解析して、送信装置
が上下方向もしくは左右方向に往復運動をしているか及
びその運動の周期が所定の周期より上であるか下である
かの判定を行う。そして、この往復運動が所定の周期以
下であることがわかれば、送信装置は振動していると判
断する。また、左右方向の往復運動をしており、この往
復運動が所定の周期以上である場合には送信装置は左右
に揺さぶられていると判断し、上下方向に往復運動をし
ており、この往復運動が所定の周期以上である場合には
送信装置は上下に揺さぶられていると判断する。圧力デ
ータに関しては、これをを解析して装置にどの程度の大
きさの圧力がかけられているのかを抽出する。

【００３８】画像操作データに関しては画像に対して予
め定められた操作のうちどの操作が行われたかを抽出す
る。具体的には、画像操作データ出力部１５より出力さ
れる予め定められた各操作に付された「００」〜「１
１」までの符号を抽出する。動作部２５は、定められた
所定の動作を行う部分であって、データ編集部２５ａ、
駆動部２５ｂ、画像編集部２５ｃと、発光部２５ｄ、効
果音部２５ｅより構成される。

【００３９】データ編集部２５ａは出力データ保持部２
２から送られてくる情報データ及び他端末操作者の擬人
画像データ並びに自端末の送信系１の情報データ入力部
１１から送られてくる自端末操作者の擬人データを夫々
データ種別毎に分離し、両端末の擬人データは画像編集
部２５ｃに送出し、情報データはその種類によって、異
なった編集を行う。例えば情報データが音声データの場
合、音を振動させたり、高くしたり低くしたりするもの
とする。その他に情報データの編集としては、送信され
てきた静止画データや動画データの変形、テキストデー
タのフォントの変換等が行われる。編集されたデータは
情報データ出力部２６に送出され、ディスプレイ上に表
示される。駆動部２５ｂは装置全体もしくは一部に対す
る機械的な動きをその動作として実現するものであり、
ここでは、モーター１０２ｃによる装置全体の振動を動
作とする。駆動部２５ｂにより実現される動作として
は、この他に携帯用通信端末装置Ａの一部の屈曲動作
や、装置本体に出没動自在に設けられた何らかの意味を
表す文字や記号が描かれた板体や棒体の出没動作、アン
テナの回転動等種々のものが可能である。

【００４０】発光部２５ｄはＬＥＤにより構成され、発
光色を赤と緑の間で変更したり、点滅したりする動作を
行う。また、効果音部２５ｅはＲＯＭ１０５に記憶され
たサイレン音や動物の鳴き声等の所定の音声データをＣ
ＰＵ１００ａを介して音声としてスピーカー１０２ｂが
ら発することを動作とする。ここでは、悲鳴の音声デー
タと笑い声の音声データおよび手拍子音の音声データを
音声として発するものとする。

【００４１】画像編集部２５ｃは両端末操作者の擬人画
像データから首を左右に振るアニメーション画像、首を
縦に振るアニメーション画像、その他表現したい各種姿
態の画像を作成し、記憶する。更に画像編集部２５ｃ
は、上記擬人画像以外に端末が連続動作モードに切り換
えられた際に表示すべきアニメーション画像も記憶して
いる。なお、画像の編集として、他に画像の色を変えた
り、背景を変えたり等種々のものが採用できる。

【００４２】動作部２５は、端末が「連続動作モード」
に切り替えられることにより予め定められた所定の順番
に従って画像・音・光を用いてある動作を実演するよう
になっている。具体的には連続動作モードになると、発
光部２５ｄの赤のＬＥＤが一回点滅→効果音部２５ｅで
一回手拍子音発生→発光部２５ｄの緑のＬＥＤが一回点
滅→効果音部２５ｅで二回手拍子音という順番を繰り返
すように動作部２５の構成要素が作動し、同時にディス
プレイ上にはこのリズムに合わせてアニメーションがダ
ンスを踊るようになっている（図１８（ａ）参照）。そ
して、この順番は後述する動作制御部２４により変更さ
れる。また、連続操作モードの切り換えは他端末側で行
うことができるものとする。

【００４３】動作制御部２４は、前記解析部２３の解析
結果を参照して物理量に応じた動作を前記動作部２５に
行わせ、また、命令に応じた表示モードに動作部２５を
セットする。物理量に関しては具体的には、下記のよう
な解析部２３の解析結果に対応する動作を動作部２５に
行わせる。 (1) 他端末が振動していると判断された場合には、デー
タ編集部２５ａに音声データを振動させ、駆動部２５ｂ
を駆動させ、画像編集部２５ｃに他端末操作者の擬人画
像が振動している姿態を出力させる（図１４参照）。

【００４４】(2) 他端末が左右に揺れていると判断され
た場合には、画像編集部２５ｃに他端末操作者の擬人画
像が首を左右に振っている姿態を出力させる（図１５参
照）。 (3) 他端末が上下に振れていると判断された場合には、
画像編集部２５ｃに他端末操作者の擬人画像が首を上下
に振っている姿態を出力させる（図１６参照）。 (4) 他端末に加えられている圧力の大きさに基づき、発
光部２５ｄに圧力が大きい程、ＬＥＤを赤く発光させ、
弱い程緑色に発光させるようにする（図１７参照）。

【００４５】(5) 画像操作データとして「００」が抽出
された場合、即ち、自端末の操作者の擬人画像を他端末
においてペン先で押圧する操作がなされたと判断された
場合には、画像編集部２５ｃに自端末操作者の擬人画像
の表情を痛がっているように変えさせ、効果音部２５ｅ
に、悲鳴を発するようにさせる（図１８参照）。 (6) 画像操作データとして「０１」が抽出された場合、
即ち、自端末操作者の擬人画像をペン先でこする操作が
他端末においてなされたと判断された場合には、画像編
集部２５ｃに自端末操作者の擬人画像の表情を笑ってい
るように変えさせ、効果音部２５ｅに、笑い声を発する
ようにさせる（図１９参照）。

【００４６】(7) 画像操作データとして「１０」が抽出
された場合、即ち、他端末操作者の擬人画像の頭部部分
の一部をペン先で押圧しながら上方へ動かす操作が他端
末においてなされたと判断された場合には、データ編集
部２５ａに送信されてきた音声データの音を高くさせる
（図２０参照）。 (8) 画像操作データとして「１１」が抽出された場合、
即ち、他端末操作者の擬人画像の頭部部分の一部をペン
先で押圧しながら下方へ動かす操作が他端末においてな
されたと判断された場合には、データ編集部２５ａに送
信されてきた音声データの音を低くさせる（図２１参
照）。

【００４７】(9) 前記連続動作モード下で、他端末が振
動していると判断された場合もしくは画像操作データと
して「０１」が抽出された場合には、前記連続動作モー
ド下における動作部２５の前記所定の動作を変更する。
具体的には、発光部２５ｄのＬＥＤを赤緑交互に点灯さ
せ、効果音部２５ｅは手拍子を連打させ、ディスプレイ
１０２のアニメーションのダンスはこのリズムでより激
しく踊るようにさせる（図２２（ｂ）参照。なお、動作
制御部２４は、物理量データに関しては所定の時間、出
力データ判定保持部２２に物理量データが検出されなか
った場合に、画像操作データに関しては上述してリセッ
ト信号を検出した場合に、これらに対応する動作部２５
における動作を停止するようにしている。

【００４８】また、上記動作制御部２４が行わせている
動作は、例示であって、さらに以下のような応用例が挙
げられる。 (イ) 他端末が上下に揺れていると判断された場合には、
自端末に設けた「○」を表示したパネルを飛び出させ
る。 (ロ) 他端末の物理量検出部１２で気温を検出するように
し、この気温の高低によって、自端末において表示中の
画像の背景の色を変えさせる。 (ハ) 他端末の物理量検出部１２で気圧、湿度を検出する
ようにし、雨であると判断される場合には、自端末で表
示されている画像の背景を雨にさせる。

【００４９】(ニ) 他端末の物理量検出部１２で照度を検
出するようにし、この照度の高低によって、自端末に表
示されている画像の背景の明るさを変えさせる。 (ホ) 他端末における画像操作部１４で表示部２０ａに
「すみません」と入力することによって自端末に表示さ
れた他端末操作者の擬人画像を謝らせる。特に上記(ロ)
(ハ) (ニ) では他端末操作者の情緒的なものではなく、他
端末操作者の置かれている環境を受信側に伝えることが
でき、このような側面からもコミニュケーションの幅を
広げることが可能となる。情報データ出力部２６は、デ
ータ編集部２５ａにより編集された情報データ及び画像
編集部２５ｃで編集された画像データをディスプレイ１
０２ａやスピーカー１０２ｂへ出力する部分である。な
お、データ編集部２５ａがなにもしない場合は、情報デ
ータはそのまま出力される。

【００５０】以上の構成を有する、送信系１および受信
系２は、物理量検出部１２を構成する加速度センサ１０
１ｃ、圧力センサ１０１ｄ、駆動部２５ｂを構成するモ
ータ１０２ｃ、発光部２５ｄを構成するＬＥＤ１０２ｄ
を付加した一般的なコンピュータ端末に上記構成を実現
させるソフトウエアを内蔵させることによっても実現可
能であり、このソフトウエアは上記コンピュータ端末で
読み取り可能な記録媒体に記録することができる。ま
た、加速度センサ１０１ｃ、圧力センサ１０１ｄ、駆動
部２５ｂ、発光部２５ｄ等は一般的なコンピュータに対
して連結固定できるように構成したユニットとすること
が可能であり、このユニットを一般的なコンピュータに
連結固定すれば、上記ソフトウエアで上記送信系１およ
び上記受信系２を実現することができる。

【００５１】本実施の形態においても、かかるソフトウ
エアをＩＣカード１０４ｂに記録しておき、このＩＣカ
ード１０４ｂに記録された上記ソフトウエアをＩＣカー
ドリーダ１０４ａで読み取ることにより、上記構成を実
現するものとする。もっとも、このソフトウエアは予め
ＲＯＭ１０５に記録しておいてもよいことは言うまでも
ない。

【００５２】続いて、上記構成を有する送信系１および
受信系２の動作について以下に説明する。ここでは、通
信は図４（ａ）（ｂ）にそれぞれ示す、上記構成の送信
系１と受信系２を内蔵した、携帯用通信端末装置Ａ１と
Ａ２で行われるものとし、携帯用通信端末装置Ａ１を第
１端末、携帯用通信端末装置Ａ２を第２端末とする。

【００５３】今、第１端末から第２端末に対して呼を発
したとすると、両端末間では図８に示す手順によって通
信を行う。即ち、第１端末から第２端末に対する呼び出
しと第２端末から第１端末への呼応答を経て回線接続を
行い、続いて両端末間で夫々操作者を表す擬人画像デー
タを送信し合う。その後、マイク・スピーカを用いての
音声メッセージの交信、或いは他のデータの交信並びに
物理量データの送受信が行われる。両端末間で擬人画像
データの送信が完了した時点で第１の端末には図４(a)
に示すように第２端末操作者を表す擬人画像Ｘ２と第１
端末操作者自身を表す擬人画像Ｙ１が表示される、一
方、第２端末Ａ２には図４(b)に示されるように第１端
末操作者を表す擬人画像Ｘ１と第２端末操作者自身を表
す擬人画像Ｙ２が表示される。両端末の画面に図４(a)
(b)で示す画像を表示している状態において、物理量デ
ータと情報データの送受信がなされるが、情報データは
情報データ入力部１１より、受け付けられて入力データ
保持部１６へ出力される。物理量データは送信者が装置
全体を振動させたり、左右もしくは上下に揺さぶった
り、また、装置を強く握ったりすることで、物理量検出
部１２により検出され、検出された各物理量は物理量デ
ータ出力部１３によりデジタル値に変換されて出力され
る。画像操作データは、送信者が受信者を表す画像Ｘ２
をペン１０１ａ’でつついたり、こすったり、または、
送信者自身を表す画像Ｘ２の頭部をペン１０１ａ’で押
圧しながら上方へ動かしたり、下方へ動かしたりするこ
とで、画像操作データとして「００」〜「１１」を含む
符号として出力される。そして、出力された各データは
入力データ保持部１６に記録される。

【００５４】入力データ保持部１６に記録された各デー
タは送信制御部１７によって互いに調整されながら送信
部１９より送信される。この送信制御部１７の動作を示
すフローチャートを図９および図１０に分けて示し、こ
の図を用いて、この送信制御部１７の動作を説明する。

【００５５】まず、送信制御部１７では入力データ保持
部１６でデータが保持されているか否かを判断し（Ｓ１
０１）、なければ入力データ保持部１６にデータが記録
されるのを待つ（Ｓ１２４）。入力データ保持部１６に
データが存在する場合は、そのデータの内容を判断す
る。

【００５６】判断の結果、情報データのみの場合には、
まず音声データがあればこれを送信する（Ｓ１０３、Ｓ
１０４）。一方、それ以外のデータがある場合は、送信
指示が送信データ指示部１８によりなされていることを
条件として、これを送信する（Ｓ１０５、Ｓ１０６）。
なお、送信されたデータは入力データ保持部１６からは
消去される。これは以下の動作においても同様である。

【００５７】また、入力データ保持部１６内のデータが
物理量データと画像操作データのいずれかしか存在しな
い場合には、送信データ指示部より、送信を停止すべき
指示がなければ、このデータを送信する（Ｓ１０８〜Ｓ
１１０）。

【００５８】そして、入力データ保持部１６内に情報デ
ータと物理量データ、画像操作データが混在する場合に
は以下のように送信制御を行う。まず、情報データとし
て音声データ以外のデータがある場合には、送信データ
指示部１８からの送信指示があれば、これをまず送信す
る（Ｓ１１１〜Ｓ１１３）。

【００５９】情報データとして音声データがある場合に
は、物理量データとしての移動速度データがあるか否か
を判断し（Ｓ１１４、Ｓ１１５）、さらに、「１０」
「１１」を含む画像操作データ、即ち、音声データに影
響を与える画像操作データがあるか否かを判断する（Ｓ
１１６、Ｓ１１９）。

【００６０】判断の結果、移動速度データがなくて、
「１０」「１１」を含む画像操作データがある場合に
は、まず、「１０」「１１」を含む画像操作データを先
に送信してから、音声データを送信する（Ｓ１１７）。
移動速度データも「１０」「１１」を含む画像処理デー
タもない場合には、そのまま音声データを送信する（Ｓ
１１８）。

【００６１】また、移動速度データはあるが、「１０」
「１１」を含む画像操作データはない場合には、音声デ
ータの間に物理量データを分けて挿入して送信する（Ｓ
１２０）。そして、移動速度データも「１０」「１１」
を含む画像操作データもある場合には、「１０」「１
１」を含む画像操作データを含む画像操作データを先に
送信して、それから、音声データの間に物理量データを
分けて挿入して送信する（Ｓ１２１）。

【００６２】それから、まだ、送信されていない、物理
量データや画像操作データがある場合には、これを送信
する（Ｓ１２２、Ｓ１２３）。送信制御部１７は以上の
動作を回線が切断されるまで繰り返す（Ｓ１２４）。な
お、上記に図９、図１０に示す送信制御部１７の動作
は、動作の一例に過ぎず、事情に応じて様々な動作を採
用してもよい。

【００６３】続いて、第２端末Ａ２に内蔵された受信系
２の動作について説明する。まず、最初の動作として、
受信部２１が第１端末Ａ１から送信されてきたデータを
受信し、出力データ判定保持部２２はデータ種別を判定
した上でこれを記録する。出力データ保持部２２に記録
されたデータのうち情報データは、そのままデータ編集
部２５ａを経て、情報データ出力部２６から出力され
る。一方、出力データ保持部２２に記録された物理量デ
ータと画像操作データは解析部２３で解析され、この解
析結果に基づき、動作制御部２４は動作部２５の動作を
制御する。この動作制御部２４の動作を示すフローチャ
ートを図１１、図１２、図１３に分けて示す。この図を
用いて、以下に動作制御部２４の動作を詳細に説明す
る。なお、解析部２３で解析された物理量データ、画像
操作データおよび情報データ出力部２６で出力された情
報データは出力データ保持部２２から消去されるものと
する。

【００６４】最初に、動作制御部２４は動作部２５が前
述した連続動作モードになっているかどうかを判断し
（Ｓ２０１）、連続操作モードになっているかいないか
によって、異なる処理を行う。まず、連続操作モードに
なっていない場合について説明する。解析部２３による
解析により第１端末Ａ１が振動していると判断された場
合には、データ編集部２５ａにて音声データを振動さ
せ、駆動部２５ｂを駆動させ、画像編集部２５ｃにて第
１端末操作者を表す擬人画像を振動させる（Ｓ２０２、
Ｓ２０３）。このような動作の結果、図１４に示すよう
に第１端末Ａ１を振動させると、受信側では、第１端末
操作者の音声が震えてスピーカー１０２ｂから発せら
れ、第２端末Ａ２が振動し、第２端末Ａ２のディスプレ
イ１０２ａに表示された第１端末操作者を表す擬人画像
Ｘ１が震えることとなる。また、第１端末Ａ１が左右に
揺れていると判断された場合には、画像編集部２５ｃに
て第１端末操作者を表す擬人画像の首を左右に振らせる
（Ｓ２０４、Ｓ２０５）。このような動作の結果、図１
５に示すように、第１端末操作者が第１端末を左右に揺
らすと、受信側では、第２端末Ａ２のディスプレイ１０
２ａに表示された擬人画像Ｘ１の首が左右に振られるこ
ととなる。

【００６５】さらに、第１端末Ａ１が上下に揺れている
と判断された場合には、画像編集部２５ｃにて第１端末
操作者を表す擬人画像の首を上下に振らせる（Ｓ２０
６、Ｓ２０７）。このような動作の結果、図１６に示す
ように、第１端末操作者が第１端末Ａ１を上下に揺らす
と、受信側では、第２端末Ａ２のディスプレイ１０２ａ
に表示された擬人画像Ｘ１が肯くこととなる。それか
ら、出力データ保持部２２に圧力データが記録されてい
る場合には、この圧力の大きさに基づき、発光部２５ｄ
に圧力が大きい程、ＬＥＤを赤く発光させ、弱い程緑色
に発光させるようにする（Ｓ２０８、Ｓ２０９）。この
ような動作の結果、図１７に示すように第１端末操作者
が第１端末Ａ１を握る力を強くしたり弱くしたりするこ
とで、これに応じて第２端末Ａ２に設けられたＬＥＤ１
０２ｄの色を赤から緑色の間で変化させることができ
る。

【００６６】そして、画像操作データとして「００」が
抽出された場合、即ち、第２端末操作者を表す擬人画像
Ｘ２をペン先で押圧する操作を行ったと第２端末におい
て判断された場合には、画像編集部２５ｃにて第２端末
操作者を表す擬人画像Ｙ２の表情を痛がっているように
変えさせ、効果音部２５ｅに、悲鳴を発するようにさせ
る（Ｓ２１０、Ｓ２１１）。このような動作の結果、図
１８に示すように第１端末側操作者の操作が第２端末に
おいて画像と音声で伝わることとなる。

【００６７】また、画像操作データとして「０１」が抽
出された場合、即ち、第２端末操作者を表す擬人画像Ｘ
２をペン先でこする操作が第１端末においてなされたと
判断された場合には、画像編集部２５ｃにて第２端末操
作者を表す擬人画像の表情を笑っているように変えさ
せ、効果音部２５ｅに、笑い声を発するようにさせる
（Ｓ２１２、Ｓ２１３）。このような動作の結果、図１
９に示すように第１操作端末での操作の結果に相当する
画像と音声が第２端末において提示される。

【００６８】画像操作データとして「１０」が抽出され
た場合、即ち、第１端末操作者を表す擬人画像Ｙ１の頭
部部分の一部をペン先で押圧しながら上方へ動かす操作
が第１端末においてなされたと判断された場合には、デ
ータ編集部２５ａに送信されてきた音声データの音を高
くさせる（Ｓ２１４、Ｓ２１５）。このような動作の結
果、図２０に示すように、第１端末から同時に発した音
声が第２端末において高音で発せられるのである。

【００６９】他方、画像操作データとして「１１」が抽
出された場合、即ち、第１端末操作者を表す擬人画像Ｙ
１の頭部部分の一部をペン先で押圧しながら下方へ動か
す操作が第１端末においてなされたと判断された場合に
は、データ編集部２５ａに送信されてきた音声データの
音を低くさせる（Ｓ２１６、Ｓ２１７）。このような動
作の結果、図２１に示すように、第１端末から発した音
声が第２端末で低音で発せられることとなる。

【００７０】次に、連続操作モードになっている場合の
動作について説明する。この場合、動作制御部２４は、
解析部２３の解析により第１端末が振動していると判断
された場合もしくは画像操作データとして「０１」が抽
出された場合には、前記連続動作モード下における動作
部２５の前記所定の動作を変更する（Ｓ２１８、Ｓ２１
９）。

【００７１】これにより、まず、第１端末操作者が第２
端末動作部２５を連続操作モードにして図２２（ａ）に
示すような、赤のＬＥＤの一回点滅→一回手拍子音発生
→緑のＬＥＤ一回点滅→二回手拍子音という順番を繰り
返すように動作させ、また、このリズムでダンスするよ
うなアニメーションを表示させておき、第１端末Ａ１を
振動させるか、ディスプレイ１０２ａに表示された、第
２端末操作者を表す擬人画像をペン１０１ａ’でこす
る。すると、第２端末での動作が図２２（ｂ）に示すよ
うに、ＬＥＤが赤緑交互に点灯し、手拍子音が連打さ
れ、表示部２０ｂのアニメーションのダンスはこのリズ
ムでより激しく踊るようになる。

【００７２】動作制御部２４は以上の動作を、回線が切
断されるまで繰り返す（Ｓ２２０）。このような２つの
通信端末間の動作によって、第１端末操作者から第２端
末操作者に対して情報データをそのまま伝達するだけで
なく、操作者の情緒等を通信相手に伝えることができ
る。なお、上記実施の形態では、移動速度データに関し
ては、第１端末では振動運動、左右の往復運動、上下の
往復運動の別を問わず、そのまま送信し、この移動速度
データを第２端末で解析して、動作制御部２４で、運動
別に応じた制御をしたが、送信装置側で移動速度データ
を振動運動、左右の往復運動、上下の往復運動の別に分
けて扱ってもよい。

【００７３】例えば、画像操作データと同様に、物理量
データ出力部１３で換算した移動速度データが往復運動
をしており、この往復運動が所定の周期以下であれば、
第１端末は振動しているものとして「００」の符号を、
左右方向の往復運動をしており、この往復運動が所定の
周期以上であれば、第１端末は左右に揺さぶられている
ものとして「０１」の符号を、上下方向の往復運動をし
ており、この往復運動が所定の周期以上であれば、第１
端末は上下に揺さぶられているものとして「１０」の符
号を付して、物理量データである事をしめすヘッダを付
して物理量データとして出力するようにし、これに応じ
て送信制御部１７の制御も細かく分けるようにできる。

【００７４】また、上記実施の形態では、物理量データ
や画像操作データに対して動作部２５で行わせるべき動
作を動作制御部２４が予め用意していたが、物理量デー
タや画像操作データに対して行うべき動作の指示や当該
動作を実現するプログラムを物理量データや画像操作デ
ータとともに、第１端末から送信するようにし、動作制
御部２４はこれを用いて制御するようにしてもよい。

【００７５】次に、図２３は本発明の他の実施の形態で
ある送信系１ａと受信系２ａの機能ブロック図を示す。
この送信系１ａが上記実施の形態の送信系１と異なるの
は、送信制御部１７の代わりにリンク情報付加部１０ａ
が設けられ、送信部１９ａの動作が変更になっている点
であり、受信系２ａが上記実施の形態の受信系２と異な
るのは、関連情報抽出部２７を設けている点である。

【００７６】送信系１ａのリンク情報付加部１０ａは、
特定の情報データと特定の物理量データもしくは特定の
画像操作データとを関連付けるリンク情報を、当該情報
データと物理量データの両方に付加する部分であり、具
体的には、特定の物理量データとして移動速度データ
が、特定の画像操作データとして「１０」または「１
１」が付加された画像操作データが、情報データとし
て、これらの特定の物理量データ又は特定の画像操作デ
ータが入力されている間の音声データが用いられる。ま
た、これらの物理量データ、画像操作データ、情報デー
タはそれぞれ一まとまりの情報と扱われ、それぞれのヘ
ッダに同じ符号がリンク情報として付される。なお、画
像操作データが入力されている時間は、画像の操作がさ
れてから上記リセット信号が発せられるまでも時間とす
る。

【００７７】送信部１９ａは送信データ指示部１８の指
示を優先しながら、入力データ保持部１６のデータを常
に情報データを優先して送信する。受信系２ａの関連情
報抽出部２７は、前記リンク情報をもとに、前記特定の
物理量データもしくは前記特定の画像操作データと、前
記特定の情報データを抽出する部分であり、具体的には
移動速度データとこれと関連する音声データ、「１０」
または「１１」を含む画像操作データとこれと関連する
音声データが抽出される。

【００７８】以上の構成を有する送信系１ａ、受信系２
ａの上記構成の変更があった部分に関連する動作を以下
に説明する。図２４にかかる動作を表すフローチャート
を示す。まず、第１端末の操作者が装置を振動させなが
ら、もしくは、第１端末操作者の画像を伸ばしたり圧縮
したりたりしながら、音声を入力し、これらの物理量デ
ータもしくは画像操作データと情報データを入力データ
保持部１６に記録させる（Ｓ３０１）。

【００７９】すると、リンク情報付加部１０ａが、これ
らの関連する物理量データ、画像操作データと画像操作
データにリンク情報を付加し（Ｓ３０２）、送信部１９
ａが入力データ保持部１６に記録されている順番で情報
データを優先して、これらのデータを送信する（Ｓ３０
３）。

【００８０】第２端末の受信部２１はこれらのデータを
受信して出力データ保持部２２に保持する。それから、
関連情報抽出部２７が同一のリンク情報が付された物理
量データもしくは画像処理データと音声データを抽出す
る（Ｓ３０４）。この際、リンク情報の付された音声デ
ータが出力データ保持部２２に存在し、対応するリンク
情報が付された物理量データもしくは画像操作データ
が、まだ出力データ保持部２２に記録されていない場合
には、かかる物理量データもしくは画像操作データが出
力データ保持部２２に記録されるまで、この音声データ
は出力データ保持部２２または関連情報抽出部２７に止
められ、情報データ出力部２６から出力されることはな
い。

【００８１】それから解析部２３がリンク情報の付され
た物理量データもしくは画像操作データを解析して、動
作制御部２４がこの解析結果に応じて、情報データ編集
部２５ａに関連情報抽出部２７が抽出した音声データの
編集を行わせる（Ｓ３０５）。以上のように、図２３に
示すような構成により、情報データ編集部２５ａの編集
に関連する物理量データもしくは画像操作データと情報
データをリンク情報によって関係づけておくことで、デ
ータ編集部２５ａでの動作を適切に行わせることができ
る。

【００８２】続いて、別の変形例について説明する。上
記実施の形態では、情報データとして送受信されるデー
タとして、装置全体に作用する物理量を表す物理量デー
タと、対象画像の操作内容を表す画像操作データを用い
ているが、この応用として、入力した音声の変換を表す
データを用いることが考えられる。例えば、これは図２
５に示すような構成をもつ送信系１ｂを用いて実現する
ことができる。この送信系１ｂは、情報データの内の音
声を変換する音声変換部１０ｂとこの音声変換部１０ｂ
の変換内容に基づいて、音声の変換内容を表す情報を音
声変換データとして出力する音声変換データ出力部１０
ｃを設けている。

【００８３】音声変換部１０ｂは、入力された音声デー
タの波形を特徴部分を残したまま変換することによっ
て、出力される音声の調子を変えるものであり、ここで
は、周波数を変えることで、音程を高くしたり低くした
りするものとする。音声変換データ出力部１０ｃは、音
声の変換の程度を段階的な値の数値データに変換して、
これに音声変換データであることを表すヘッダを付して
音声変換データとして出力する。この音声変換データの
送信制御部１７での扱いは、前記「００」または「０
１」が付された画像処理データに準じるものとする。

【００８４】一方、このような構成を持つ送信データを
受信する受信系は、解析部２３と動作制御部２４が、音
声変換データに対応できるようにしておく必要がある。
即ち、解析部２３は音声変換データを解析して、変換度
合を表す数値データを抽出でき、動作制御部２４がこの
解析結果に対応して特定の動作を動作部２５に行わせる
ことができる必要がある。この特定の動作として、例え
ば、音声変換部１０ｂにより音声データの音が高く変換
された場合には、送信者を表す画像Ｘ１を女性に、音声
データの音が低く変換された場合には、送信者を表す画
像Ｘ１を男性に音程の変更度合に応じて変換していくよ
うにする等が考えられる。

【００８５】このようにすることで、上記画像操作デー
タを送受信する場合と同様に、音声変換データを送受信
する場合においても、送信者の特定の変換動作に対応し
て、受信系２に対して、特定の動作を行わせることがで
きる。上記各実施の形態以外に実施可能な例を列挙す
る。 (1)上記各例では各端末はその端末自身の操作者を表わ
す擬人画像と他の端末の操作者を表わす擬人画像を表示
していたが、相手端末の操作者の擬人画像を表示するだ
けでも実施できる。

【００８６】(2)擬人画像を表示するものに限らず、実
際に撮像した操作者の画像を用いることもできる。但
し、その場合は伝送情報量が多いので、画像データの送
信に時間がかかることは避けられない。又、擬人画像に
代えてテキストデータを用いることができる。その場合
は、首を振るといった擬人特有の動作は表現できない
が、テキストデータを破る、しわくちゃにする、頁めく
りするといった動作に代えることができる。 (3)擬人画像として実施の形態では立体画像データを用
いているが、表示に必要な全ての姿態についてのアニメ
ーションデータで代用できる。また、擬人画像データの
送信時期についても実施の形態のように通信の初期に行
わなくても、動作の都度送るようにしてもよい。

【００８７】(4)物理量データとそれによって加工され
るべきデータとは双方にリンク情報を付加したり、物理
量データに加工すべきデータを特定する識別子を付与し
たりしているが、両データを時間順に送るようにすれ
ば、それらのリンク情報や識別子は付与する必要がな
い。 (5)物理量として振動・揺れの検出は、実施の形態では
装置全体の振動・揺れを検出するようにしているが、装
置の一部、特にマウスやタッチペン等を付帯する装置に
あってはマウスやタッチペンの振動・揺れを検出するよ
うにしてもよい。

【００８８】

【発明の効果】以上ことから本発明は以下のような効果
を奏する。まず、本発明に係る物理量データを送信する
送信端末は、物理量検出手段が送信端末本体又はその一
部に作用する物理量を検出し、検出した物理量を表す情
報を物理量データとして出力し、送信手段が物理量デー
タを送信する。

【００８９】一方、この送信端末からのデータを受信す
る受信端末は、物理量データとそれによって加工される
べき対象データとを分離し、対象データを物理量データ
によって加工し、操作者に提示する。このように動作す
る送信端末および受信端末を組み合わせることにより、
送信者の情緒や、送信側の環境状態等に応じた物理量デ
ータが受信側へ送信され、受信側は、この物理量データ
に応じた動作を行うので、送信者の情緒等を受信側に伝
えることができ、従来の情報データの伝達を凌駕してコ
ミュニケーションの幅を広げることが可能となる。

【００９０】また、特定の情報データと特定の物理量デ
ータとを関連付けるリンク情報を、当該情報データと物
理量データの両方または何れか一方に付加するようにす
れば、受信端末において、この特定の情報データと特定
の物理量データとが対となり関連した動作を行う場合
に、容易に、リンク情報を手掛かりとして、この特定の
情報データと特定の物理量データの両方を抽出すること
ができる。また、受信端末の行う動作を装置全体もしく
は一部の機械的な動きとすれば、送信されてきた物理量
データに関連する動作を受信者に体感的に提示すること
が可能となる。

【００９１】さらに、受信端末装置の行う動作を表示手
段に表示された画像の編集とすれば、送信されてきた物
理量データに関連する動作を受信者に視覚的に提示する
ことが可能となる。それから、受信端末の行う動作を受
信した情報データの編集とすれば、受信者が最も注目し
ている本体の伝達対象の変化を介して、送信されてきた
物理量データに関連する動作を受信者に提示することが
できる。

【図面の簡単な説明】

【図１】実施の形態に係る携帯用通信端末装置を示す斜
視図である。

【図２】実施の形態に係る携帯用通信端末装置のハード
ウエア構成を示す図である。

【図３】実施の形態に係る通信端末装置の機能ブロック
図である。

【図４】（ａ）は送信側の携帯用通信端末装置の表示画
像例を示す図デあり、（ｂ）は受信側の携帯用通信端末
装置の表示画面例を示す図である。

【図５】通信端末間で送受信されるデータのうち情報デ
ータのデータ構造を示す図である。

【図６】物理量データのデータ構造を示す図である。

【図７】擬人データのデータ構造を示す図である。

【図８】通信端末間での通信手順を示すシーケンス図で
ある。

【図９】通信端末の送信制御動作の前半部分を示すフロ
ーチャートである。

【図１０】通信端末の送信制御動作の後半部分を示すフ
ローチャートである。

【図１１】通信端末の動作制御動作を示すフローチャー
トである。

【図１２】通信端末の動作制御動作を示すフローチャー
トである。

【図１３】通信端末の動作制御動作を示すフローチャー
トである。

【図１４】送信端末の振動動作と受信端末の動作との対
応を示す模式図である。

【図１５】送信端末の左右に揺れる動作と受信端末の動
作との対応を示す模式図である。

【図１６】送信端末の上下に揺れる動作と受信端末の動
作との対応を示す模式図である。

【図１７】送信端末に圧力をかけた状態と受信端末の動
作との対応を示す模式図である。

【図１８】送信端末に表示された受信者を表す画像を押
圧する動作と受信端末の動作との対応を示す模式図であ
る。

【図１９】送信端末に表示された受信者を表す画像をこ
する動作と受信端末の動作との対応を示す模式図であ
る。

【図２０】送信端末に表示された送信者を表す画像を伸
長する動作と受信端末の動作との対応を示す模式図であ
る。

【図２１】送信端末に表示された送信者を表す画像を圧
縮する動作と受信端末の動作との対応を示す模式図であ
る。

【図２２】（ａ）は連続操作モード時の動作部が所定の
順番で動作している状態を示す図であり、（ｂ）はこの
動作の順番が変更した状態を示す図である。

【図２３】（ａ）は送信端末の別の実施例を示す図であ
り、（ｂ）は受信端末の別の実施例を示す図である。

【図２４】図２３に示す送信端末と受信端末の動作を示
す図である。

【図２５】送信端末の更に他の実施例を示す図である。

【図２６】通信端末間で送受信されるデータのうち命令
データのデータ構造を示した図である。

【符号の説明】

Ａ 通信端末 １ 送信系 ２ 受信系 １１ 情報データ入力部 １２ 物理量検出部 １３ 物理量データ出力部 １４ 画像操作部 １５ 画像操作データ出力部 １６ 入力データ保持部 １７ 送信制御部 １８ 送信データ指示部 １９ 送信部 ２０ａ 表示部 ２１ 受信部 ２２ 出力データ判定保持部 ２３ 解析部 ２４ 動作制御部 ２５ 動作部 ２６ 情報データ出力部 １００ 中央処理装置 １０１ａ 入力タブレット １０１ｂ マイク １０１ｃ 加速度センサ １０１ｄ 圧力センサ １０２ａ ディスプレイ １０２ｂ スピーカー １０２ｃ 駆動部 １０２ｄ ＬＥＤ １０３ 通信装置 １０４ａ ＩＣカードリーダ

Claims (40)

【特許請求の範囲】
1. 【請求項１】 他端末に対してデータ送信を行う送信端
   末であって、 端末本体又はその一部に作用する物理量を検出する検出
   手段と、 物理量によって加工処理されるべき対象データ若しくは
   その識別子を準備する準備手段と、検出手段が検出した
   物理量データと準備手段が準備したデータとを互いに識
   別可能な形態で受信端末に送信する送信手段とを備える
   ことを特徴とする送信端末。
2. 【請求項２】 前記準備手段は、加工対象データの他に
   音声データ、テキストデータ及びイメージデータのいず
   れかを準備し、前記送信手段は、準備手段が準備した各
   データについても互いに識別可能な形態で送信すること
   を特徴とする請求項１記載の送信端末。
3. 【請求項３】 前記送信手段は、物理量データと、その
   データによって加工されるべきデータとを関連づけるた
   めのリンク情報を少なくとも物理データに付加するリン
   ク情報付加手段を含むことを特徴とする請求項１記載の
   送信端末。
4. 【請求項４】 前記物理量検出手段は、 端末本体又はその一部の経時的な動きであって、操作者
   の操作によってされた動きを検出する動き検出センサ
   と、動き検出センサからの検出信号から、動きの種類、
   方向に関するデータを作成し、出力する物理量データ出
   力部とを含むことを特徴とする請求項３記載の送信端
   末。
5. 【請求項５】 前記動き検出センサが、端末本体又はそ
   の一部に設けられた加速度センサ若しくは速度センサで
   あり、端末本体若しくはその一部の機械的振動、揺れを
   検出することを特徴とする請求項４記載の送信端末。
6. 【請求項６】 請求項１記載の送信端末は、 物理量によって加工されるべき対象データの画像を表示
   するディスプレイを含み、 前記物理量検出センサは、ディスプレイ上に設けられた
   タッチパネルとそのタッチパネルに対してなされる操作
   者の操作を検出し、その検出データから押す、なぜる、
   くすぐる等の仕種を解釈する処理回路とからなることを
   特徴とする送信端末。
7. 【請求項７】 物理量データと、そのデータによって加
   工されるべきデータとを関連づけるためのリンク情報を
   少なくとも物理データに付加するリンク情報付加手段を
   含むことを特徴とする請求項６記載の送信端末。
8. 【請求項８】 前記物理量検出手段は、 端末本体又はその一部の経時的な動きであって、操作者
   の操作によってされた動きを検出する動き検出センサ
   と、動き検出センサからの検出信号から、動きの種類、
   方向に関するデータを作成し、出力する物理量データ出
   力部とを含むことを特徴とする請求項７記載の送信端
   末。
9. 【請求項９】 対象データが送信者を比喩的に表わす擬
   人データであり、準備手段が前記擬人データを記憶する
   記憶手段を含むことを特徴とする請求項１記載の送信端
   末。
10. 【請求項１０】 物理量データと、そのデータによって
    加工されるべきデータとを関連づけるためのリンク情報
    を少なくとも物理データに付加するリンク情報付加手段
    を含むことを特徴とする請求項９記載の送信端末。
11. 【請求項１１】 前記擬人データが立体画像データであ
    り、 送信手段は、他端末との通信の初期に立体画像データを
    送信する手順を実行することを特徴とする請求項１０記
    載の送信端末。
12. 【請求項１２】 対象データが送信者を比喩的に表わす
    擬人データであり、他端末が予め送信端末の擬人データ
    を保有しており、 準備手段は前記擬人データを特定するための識別子を記
    憶する記憶手段を含み、送信手段は他端末と通信が確立
    した初期に前記識別子を送信することを特徴とする請求
    項１記載の送信端末。
13. 【請求項１３】 前記擬人データがアニメーションデー
    タであることを特徴とする請求項１２記載の送信端末。
14. 【請求項１４】 対象データが送信者の音声データであ
    り、 準備手段は送信者の音声を集音するマイクロフォンであ
    り、送信手段は音声データをリアルタイムに送信するこ
    とを特徴とする請求項１記載の送信端末。
15. 【請求項１５】 送信端末から送られてきたデータを受
    信する受信端末であって、 送信端末から送られてくるデータを受信する受信手段
    と、 受信したデータから送信端において検出された物理量を
    示す第１データと、物理量によって加工されるべき第２
    データとを分離する分離手段と、 第２データを第１データによって加工する加工手段と、 加工後の第２データの内容を受信端末操作者に提示する
    提示手段と、 を含むことを特徴とする受信端末。
16. 【請求項１６】 分離手段は、 受信したデータに付されている識別子を検出し、その識
    別子から第１データか第２データであるかの判別を行う
    データ種別判定部を含むことを特徴とする請求項１５記
    載の受信端末。
17. 【請求項１７】 加工手段は、 第１データから送信端末に作用した物理量の種類を解析
    する解析部と、 第２データに対して解析結果に応じた加工態様で加工す
    る加工部と、 を含むことを特徴とする請求項１６記載の受信端末。
18. 【請求項１８】 分離手段による分離によって得られた
    第２データが音声データと画像データを含み、音声デー
    タは送信者の会話であり、 画像データは送信者を比喩的に表わす擬人データであ
    り、 解析部は第１データから送信端末に作用した物理量とし
    て少なくとも振動と、揺れの解析を行い、 加工部は解析結果を参照して前記音声データ再生音がを
    振動するよう加工し、擬人データを左右又は上下に首を
    振らせるよう加工し、前記提示手段がスピーカとディス
    プレイであり、加工後の音声データに従ってスピーカが
    鳴動し、加工後の擬人データの内容がディスプレイに表
    示されることを特徴とする請求項１７記載の受信端末。
19. 【請求項１９】 擬人データが擬人の立体画像データで
    あり、加工部は、立体擬人データを複数の異なったカメ
    ラアングルから撮った画データを作成する画データ作成
    部と、解析結果に基づき前記複数の画データを順番に選
    択し、ディスプレイに出力する選択部とからなることを
    特徴とする請求項１８記載の受信端末。
20. 【請求項２０】 更に振動体を備え、物理量が送信端末
    の振動、揺れであった場合には振動体が駆動され、装置
    を振動・揺動させることを特徴とする請求項１８記載の
    受信端末。
21. 【請求項２１】 送信端末から送られてきたデータを受
    信する受信端末であって、 送信端末から送られてくるデータを受信する受信手段
    と、 受信したデータから送信端において検出された物理量を
    示す第１データと、物理量によって加工されるべき第２
    データとを分離する分離手段と、 第２データを第１データによって加工する加工手段と、 加工後の第２データの内容を受信端末操作者に提示する
    提示手段と、 を含むことを特徴とする受信端末と、 受信したデータに付されている識別子を検出し、その識
    別子から物理量を示す第１データか、それ以外の第２デ
    ータかを判別するデータ種別判別手段と、 第１データ及び／又は第２データに含まれているリンク
    情報を検出し、受信した第１データとリンクされている
    データを第２データから抽出する被加工データ抽出手段
    と、 抽出したデータを第１データによって加工する加工手段
    と、加工後のデータの内容を受信端末操作者に提示する
    提示手段とを含むことを特徴とする受信端末。
22. 【請求項２２】 加工手段は、 第１データから送信端末に作用した物理量の種類を解析
    する解析部と、 第２データに対して解析結果に応じた加工態様で加工す
    る加工部と、 を含むことを特徴とする請求項２１記載の受信端末。
23. 【請求項２３】 分離手段による抽出されたデータが音
    声データと画像データを含み、音声データは送信者の会
    話であり、 画像データは送信者を比喩的に表わす擬人データであ
    り、 解析部は第１データから送信端末に作用した物理量とし
    て少なくとも振動と、 揺れの解析を行い、 加工部は解析結果を参照して前記音声データ再生音がを
    振動するよう加工し、擬人データを左右又は上下に首を
    振らせるよう加工し、前記提示手段がスピーカとディス
    プレイであり、加工後の音声データに従ってスピーカが
    鳴動し、加工後の擬人データの内容がディスプレイに表
    示されることを特徴とする請求項２２記載の受信端末。
24. 【請求項２４】 送信端末から送られてきたデータを受
    信する受信端末であって、 送信端末から送られてくるデータを受信する受信手段
    と、 受信したデータから送信端末において検出された物理量
    を示す第１データと、物理量によって加工されるべきデ
    ータを特定する第２データを分離する分離手段と、 加工されるべきデータを格納している記憶手段と、 第２データによって特定される被加工データを記憶手段
    から取り出し、第１データによって加工する加工手段
    と、加工されたデータを受信端末操作者に提示する提示
    手段とを含むことを特徴とする受信端末。
25. 【請求項２５】 加工手段は、 第１データから送信端末に作用した物理量の種類を解析
    する解析部と、第２データによって特定される被加工デ
    ータに対して解析結果に応じた異なった加工態様で加工
    する加工部とを含むことを特徴とする請求項２４記載の
    受信端末。
26. 【請求項２６】 第２データによって特定されるデータ
    が送信者を比喩的に表わす擬人データを含み、 解析部は第１データから送信端末に作用した物理量とし
    て少なくとも振動と、揺れの解析を行い、 加工部は解析結果を参照して前記第２データによって特
    定される擬人データを左右又は上下に首を振らせるよう
    加工する、前記提示手段がディスプレイであり、加工後
    の擬人データがディスプレイに表示されることを特徴と
    する請求項２５記載の受信端末。
27. 【請求項２７】 加工手段は、 第１データから、送信端末のディスプレイに表示した絵
    に対してなされた突く、なぜる等の操作を解析する解析
    部と、第２データによって特定されるデータを解析結果
    に応じた加工態様で加工する加工部とを含むことを特徴
    とする請求項２４記載の受信端末。
28. 【請求項２８】 第２データによって特定される被加工
    データが受信者を比喩して表わした擬人データであり、 加工部は解析部の解析結果である操作の種類に応じて、
    その操作に対応する反応姿態を、受信者の擬人データが
    とるよう加工する提示手段がディスプレイであり、加工
    部が加工した擬人データを可視表示することを特徴とす
    る請求項２７記載の受信端末。
29. 【請求項２９】 擬人データが擬人の立体画像データで
    あり、加工部は、立体擬人データを複数の異なったカメ
    ラアングルから撮った画データを作成する画データ作成
    部と、解析結果に基づき前記複数の画データを順番に選
    択し、ディスプレイに出力する選択部とからなることを
    特徴とする請求項２８記載の受信端末。
30. 【請求項３０】 擬人データがアニメーションデータで
    あり、加工部は解析結果に基づいて所定のアニメーショ
    ンデータを選択し、ディスプレイに出力することを特徴
    とする受信端末。
31. 【請求項３１】 他端末と双方向通信する通信端末であ
    って、 ディスプレイと、 ディスプレイに表示された第１の画像に対してされた操
    作を検出して第１操作データを作製し、第２の画像に対
    してされた操作を検出し第２操作データを作製する物理
    量検出手段と、 ディスプレイ上に表示された第１の画像と第２の画像の
    少なくとも一方に相当する画像データ及び／又は音声デ
    ータを準備する準備手段と、 第１操作データと第２操作データと準備データとを識別
    可能な形態で他端末に送信する送信手段と、 他端末から送られてくるデータを受信する受信手段と、 受信データが、第１操作データ、第２操作データ、準備
    データのいずれに該当するか判定するデータ種別判定手
    段と、 受信した準備データを第１操作データに基づいて加工す
    る第１加工手段と、 受信した準備データを第２操作データに基づいて加工す
    る第２加工手段と、 データ種別判定手段の判定結果をもとに第１加工手段、
    第２加工手段を選択して起動する起動手段と、 起動された加工手段によって加工された準備データが画
    像データの場合、ディスプレイ上の対応する画像を準備
    データの内容に置き換えて表示させる表示制御手段と、 前記加工された準備データが音声データの場合、その準
    備データの内容で発音する発音手段とを含むことを特徴
    とする通信端末。
32. 【請求項３２】 前記第１の画像が自端末操作者を表わ
    す画像、第２の画像が他端末操作者を表わす画像である
    ことを特徴とする請求項３１記載の通信端末。
33. 【請求項３３】 準備手段の保有する画像データが自端
    末操作者を比喩的に表わす擬人の立体画像データである
    ことを特徴とする請求項３２記載の通信端末。
34. 【請求項３４】 送信手段は、第１操作データ又は第２
    操作データに、加工されるべき準備データを示す識別子
    を付与するリンク情報付与部を含むことを特徴とする請
    求項３３記載の通信端末。
35. 【請求項３５】 第１、第２加工手段は、 受信した準備データが立体画像データであった場合、そ
    の立体データから様々なカメラアングルで撮った画像を
    作成する画像編集部と、受信した操作データの内容に応
    じて所定のカメラアングルで撮った画像を選択する選択
    部とを含むことを特徴とする請求項３４記載の通信端
    末。
36. 【請求項３６】 前記選択部は操作データの内容によっ
    て決められた表情画像を選択し、特定のカメラアングル
    で撮った画像を用いて、その画像を部分的加工して擬人
    の各種表情を表わす画像を作成する表情作成部を含むこ
    とを特徴とする請求項３５記載の通信端末。
37. 【請求項３７】 ２つの通信端末間でデータの送受信を
    行う通信システムであって、 第１の通信端末は、端末本体又はその一部に作用する物
    理量を検出する検出手段と、物理量によって加工処理さ
    れるべき対象データ若しくはその識別子を準備する準備
    手段と、 検出手段が検出した物理量データと準備手段が準備した
    データとを互いに識別可能な形態で受信端末に送信する
    送信手段とを備え、 第２の通信端末は、 送信端末から送られてくるデータを受信する受信手段
    と、 受信したデータから送信端において検出された物理量を
    示す第１データと、物理量によって加工されるべき第２
    データとを分離する分離手段と、 第２データを第１データによって加工する加工手段と、 加工後の第２データの内容を受信端末操作者に提示する
    提示手段と、 を備えていることを特徴とする通信システム。
38. 【請求項３８】 送信手段は、 物理量データと、そのデータによって加工されるべきデ
    ータとを関連づけるためのリンク情報を少なくとも物理
    データに付加するリンク情報付加手段を、 分離手段は、受信したデータに付されている識別子を検
    出し、その識別子から第１データか第２データであるか
    の判別を行うデータ種別判定部を含むことを特徴とする
    請求項３７記載の通信システム。
39. 【請求項３９】 前記検出手段は、 端末本体又はその一部の経時的な動きであって、操作者
    の操作によってされた動きを検出する動き検出センサ
    と、 動き検出センサからの検出信号から、動きの種類、方向
    に関するデータを作成し、出力する物理量データ出力部
    とを含み、 加工手段は、 第１データから送信端末に作用した物理量の種類を解析
    する解析部と、第２データに対して解析結果に応じた加
    工態様で加工する加工部とを含むことを特徴とする請求
    項３８記載の通信システム。
40. 【請求項４０】 分離手段による分離によって得られた
    第２データが音声データと画像データを含み、音声デー
    タは送信者の会話であり、 画像データは送信者を比喩的に表わす擬人データであ
    り、 解析部は第１データから送信端末に作用した物理量とし
    て少なくとも振動と、揺れの解析を行い、 加工部は解析結果を参照して前記音声データ再生音がを
    振動するよう加工し、擬人データを左右又は上下に首を
    振らせるよう加工し、前記提示手段がスピーカとディス
    プレイであり、加工後の音声データに従ってスピーカが
    鳴動し、加工後の擬人データの内容がディスプレイに表
    示されることを特徴とする請求項３９記載の受信端末。