WO2005099262A1

WO2005099262A1 - 通信端末及び通信方法

Info

Publication number: WO2005099262A1
Application number: PCT/JP2005/006313
Authority: WO
Inventors: Tetsu Hada; Hideaki Matsuo; Hiroki Nogoshi; Naoyuki Suzuki; Takahiro Makino
Original assignee: Matsushita Electric Industrial Co., Ltd.
Priority date: 2004-04-07
Filing date: 2005-03-31
Publication date: 2005-10-20
Also published as: JP2005323340A; US20070139512A1

Abstract

　本発明は、自端末が要求するレベルの機能を通信相手端末に実行させることができる通信端末を提供することを目的とする。　本発明の通信端末は、通信機能を有し、テレビ電話装置２が搭載する機能と共通の機能を搭載するテレビ電話装置１であって、テレビ電話装置１が搭載する機能を実行させる為のデータ及びテレビ電話装置２が搭載する機能を実行させる為のデータを生成する表示画像生成部１３Ａと、テレビ電話装置２が搭載する機能を実行させる為のデータを送信するデータ送信部１１Ａと、を備える。

Description

明細書

通信端末及び通信方法

技術分野

[0001] 本発明は、通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載する通信端末及びその通信方法に関する。

背景技術

[0002] 従来、ユーザを撮影した映像に代わってアバターと呼ばれるキャラクタを通信相手端末に送る機能を持たせたテレビ電話装置が開発されている (例えば、特許文献 1 参照)。

[0003] 特許文献 1 :特開 2003— 109036号公報 (第 3頁、第 4頁、第 2図）

発明の開示

発明が解決しょうとする課題

[0004] し力しながら、従来のテレビ電話装置においては、全てのテレビ電話装置が同一の処理能力を有しているとは限らず、処理能力に差のあるテレビ電話装置同士間で通信を行う場合には、処理能力の低いテレビ電話装置に合わせることになり、これらのテレビ電話装置間で処理がスムーズに、かな、と、う問題がある。

[0005] 本発明は、上記事情に鑑みてなされたものであり、自端末が要求するレベルの機能を通信相手端末に実行させることができる通信端末及び通信方法を提供することを目的とする。

課題を解決するための手段

[0006] 本発明の通信端末は、通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載する通信端末であって、自端末が搭載する機能を実行させる為のデータ及び通信相手端末が搭載する機能を実行させる為のデータを生成するデータ生成手段と、前記通信相手端末が搭載する機能を実行させる為のデータを送信する送信手段と、を備える。

[0007] 上記構成によれば、自端末が搭載する機能を実行させる為のデータ及び通信相手端末が搭載する機能を実行させる為のデータを生成するデータ生成手段を備えることにより、通信相手端末の端末能力が自端末より低い場合であっても、自端末が要求するレベルの機能を通信相手端末に実行させることができる。

[0008] また、本発明の通信端末は、テレビ電話機能を有し、入力されたデータを解析する入力データ解析手段と、解析結果に基づいて、自端末側のデータと通信相手端末側のデータとを整合させたデータを前記生成手段に出力するデータ整合手段と、を有する。また、本発明の通信端末は、入力されたデータとして、画像データ、音声データ及びキー入力データ力選択した少なくとも 1つのデータを前記入力データ解析手段へ入力する入力手段を備える。上記構成によれば、入力されたデータを解析する入力データ解析手段を備えることにより、入力されたデータを反映したデータを生成できる。

[0009] さらに、本発明の通信方法は、通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載する通信端末の通信方法であって、自端末が搭載する機能を実行させる為のデータ及び通信相手端末が搭載する機能を実行させる為のデータを生成し、前記通信相手端末が搭載する機能を実行させる為のデータを送信する。発明の効果

[0010] 本発明によれば、自端末が搭載する機能を実行させる為のデータ及び通信相手端末が搭載する機能を実行させる為のデータを生成することにより、通信相手端末の端末能力が自端末より低い場合であっても、自端末が要求するレベルの機能を通信相手端末に実行させることができる。

図面の簡単な説明

[0011] [図 1]本発明の実施の形態 1を説明するためのテレビ電話システムの概略構成図 [図 2]表情'感情解析部 16における顔認識処理を示す図

[図 3]表情'感情解析部 16における顔認識処理を示す図

[図 4]動作データ生成部 17及び動作整合部 18が使用する動作テーブルの一例を示す図

[図 5]動作整合部 18の動作概要を示す図（1)

[図 6]動作整合部 18の動作概要を示す図（2)

[図 7]動作整合部 18の動作概要を示す図（3) [図 8]テレビ電話装置 1の動作を示すフローチャート

[図 9]動作整合部 18の動作を示すフローチャート

[図 10]テレビ電話装置 2の動作を示すフローチャート

[図 11]本発明の実施の形態 2を説明するためのテレビ電話システムの概略構成図 [図 12]テレビ電話装置 4の動作を示すフローチャート

[図 13]動作整合部 18Aの動作を示すフローチャート

[図 14]テレビ電話装置 5の動作を示すフローチャート

[図 15]動作整合部 18Bの動作を示すフローチャート

[図 16]本発明の実施の形態 3を説明するためのテレビ電話システムの概略構成図 [図 17]テレビ電話装置 6とテレビ電話装置 7で撮影された画像を示す図

[図 18]画像カ卩工決定部 21及び画像カ卩工整合部 22が使用する動作テーブルの一例を示す図

[図 19]画像加工整合部 22の動作概要を示す図

[図 20]テレビ電話装置 6の動作を示すフローチャート

[図 21]動作整合部 18Aの動作を示すフローチャート

[図 22]テレビ電話装置 7の動作を示すフローチャート

符号の説明

1、 2、 4、 5、 6、 7 テレビ電話装置

3 ネットワーク

10A、 10B 入力データ部

11A、 11B データ送信部

12A、 12B データ受信部

13A、 13B 表示画像生成部

14A、 14B テレビ電話表示部

15、 15A、 15B キャラクタデータ格納部

16A、 16B 表情，感情解析部

17、 17A、 17B 動作データ生成部

18、 18A、 18B 動作整合部 19A、 19B キャラクタデータ保存部

20 画像加工データ格納部

21 画像加工決定部

22 画像加工整合部

発明を実施するための最良の形態

[0013] (実施の形態 1)

図 1は、本発明の実施の形態 1を説明するためのテレビ電話システムの概略構成図である。図 1に示すテレビ電話システムは、通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載し、互いに端末能力が異なるテレビ電話装置 1及び 2を備えており、ネットワーク 3を介して互いに通信可能に構成されている。テレビ電話装置 1とテレビ電話装置 2との間の通信には例えば IP (インターネットプロトコル）が用いられる。本実施の形態では、テレビ電話装置 1の端末能力がテレビ電話装置 2の端末能力よりも高い場合について説明する。なお、テレビ電話装置 1は、テレビ電話装置 2と共通に用いられるキャラクタ（アバターと呼ばれるユーザの分身として使用されるキャラクタ）を生成する機能を有し、テレビ電話装置 2との通話中にユーザの顔画像の代りにキャラクタを表示するものとする。以下、テレビ電話装置 1とテレビ電話装置 2 に共通する部分には同一の数字を付し、さらにテレビ電話装置 1とテレビ電話装置 2 を区別するために、テレビ電話装置 1には「A」を、テレビ電話装置 2には「B」を付カロすることとする。

[0014] テレビ電話装置 1及び 2は、入力データ部 10A、 10B、データ送信部 11A、 11B、データ受信部 12A、 12B、表示画像生成部 13A、 13B、テレビ電話表示部 14A、 1 4Bを共通して有する。テレビ電話装置 1は、更にキャラクタデータ格納部 15、表情- 感情解析部 16、動作データ生成部 17、動作整合部 18を有している。テレビ電話装置 1の表示画像生成部 13Aは、テレビ電話装置 1 (自端末)が搭載する機能を実行させる為のデータ及びテレビ電話装置 2 (通信相手端末)が搭載する機能を実行させる為のデータを生成し、データ送信部 11 Aは、テレビ電話装置 2が搭載する機能を実行させる為のデータを送信する。また、テレビ電話装置 1の表情'感情解析部 16は、入力されたデータを解析し、動作データ生成部 17は、解析結果に基づいて、テレビ電話装置 1側のデータとテレビ電話装置 2側のデータとを整合させたデータを表示画像生成部 13Aに出力する。また、テレビ電話装置 1の入力データ部 10Aは、入力されたデータとして、画像データ、音声データ及びキー入力データ力選択した少なくとも 1つのデータを表情 ·感情解析部 16へ入力する。

[0015] 入力データ部 10A及び 10Bは、カメラ、マイク、キー入力部（いずれも図示略)など各種入力手段と接続され、ユーザの表情、感情、動作を表す情報 (ユーザ情報)の取得に使用される。テレビ電話装置 2の入力データ部 10Bは、入力されたデータとして、画像データ、音声データ及びキー入力データ力選択した少なくとも 1つのデータを、データ送信部 11B及びデータ受信部 12Aを介して、表情'感情解析部 16へ入力する。データ送信部 11Aは、テレビ電話装置 2に表示させる画像データを送信する。データ送信部 11Bは、テレビ電話装置 2のユーザの表情や感情を表す情報をテレビ電話装置 1に送信する。データ受信部 12Aは、テレビ電話装置 2から送信されるテレビ電話装置 2のユーザの表情や感情を表す情報を受信する。データ受信部 12B は、テレビ電話装置 1から送信される画像データを受信する。

[0016] 表示画像生成部 13Aは、入力データ部 10Aからの入力データ及び入力データ部 10Bからの入力データに基づいて、テレビ電話表示部 14Aに表示させる画像及びテレビ電話表示部 14Bに表示させる画像を生成する。また、表示画像生成部 13Aは、生成した、テレビ電話表示部 14Bに表示させる画像データをデータ送信部 11 Aに渡す。

[0017] 表示画像生成部 13Bは、データ受信部 12Bを介して取得した、表示画像生成部 1 3Aで生成された画像データから表示画像を生成する。なお、表示画像生成部 13B は、取得した画像データを加工せずにテレビ電話表示部 14Bにそのまま表示させてもよい。テレビ電話表示部 14Aは、液晶ディスプレイを有し、表示画像生成部 13Aで生成された画像を表示する。テレビ電話表示部 14Bは、液晶ディスプレイを有し、表示画像生成部 13Bで生成された画像を表示する。キャラクタデータ格納部 15には、キャラクタ画像を作成するためのデータが格納されている。キャラクタデータは、テレビ電話装置 1及び 2にキャラクタを表示するための画像データであり、動作データ生成部 17で生成される動作データに対応して複数個用意されている。なお、本実施の形態では 2種類のキャラクタを表示可能として、る。

[0018] 表情'感情解析部 16は、入力データ部 10Aからの映像データ、音声データ又はキ一入力データを基にテレビ電話装置 1のユーザの表情、感情を解析する。また、表情'感情解析部 16は、テレビ電話装置 2からの映像データ、音声データ又はキー入力データを基にテレビ電話装置 2のユーザの表情、感情を解析する。表情'感情解析部 16は、ユーザの顔画像が入力されている場合に顔画像を解析し、笑っている、怒って、る等の表情や感情を検知する。

[0019] 表情'感情を検知する方法としては、例えば周期的に取得する映像入力データから、顔認識処理を行い、検出した眉'目 ·口等の各顔部位の特徴点座標の平均値を求め、平均表情特徴点座標とする。そして、今回取得した映像入力データによって顔認識処理を行った眉'目 ·口等の各顔部位の特徴点座標と平均表情特徴点座標とを比較し、各顔部位の変化が特定の条件を満たした場合、「笑う」 ·「驚く」 ·「悲しむ」等の表情'感情を検知する。図 2は、「笑う」 '「驚く」'「悲しむ」の場合の顔認識処理を模式的に示した図である。この図において、 "□"は顔認識処理による検出点を示し、眉 •目 ·口それぞれに複数個設定される。図 2 (a)は、フレーム毎の顔認識処理による平均表情特徴点座標を示している。図 2 (b)は「笑う」の場合の表情特徴点座標、図 2 (c )は「驚く」の場合の表情特徴点座標、図 2 (d)は「悲しむ」の場合の表情特徴点座標をそれぞれ示している。

[0020] 「笑う」の場合は、眉両端が上方向に閾値 W3以上変化し、目下端が上方向に閾値 W2以上変化し、口両端が上方向に閾値 W1以上変化するという 3つの条件全て満たす。「驚く」の場合は、眉両端が上方向に閾値 Ol以上変化し、目上下幅が閾値 O 2以上増加し、口上下幅が閾値 Ol以上増加するという 3つの条件を全て満たす。「悲しむ」の場合は、眉両端が下方向に閾値 N1以上変化し、目上下幅が閾値 N2以上減少し、口両端が下方向に閾値 N3以上変化するという 3つの条件を全て満たす。

[0021] また、表情'感情解析部 16は、一定時間の顔の動きを検出することにより、「首を振る」 ·「頷く」等の動作を検知する。図 3は、「首を振る」 ·「頷く」の場合の顔認識処理を模式的に示した図である。この図において、上記同様に、 "□"は顔認識処理による検出点を示し、眉 ·目 ·口それぞれに複数個設定される。図 3 (a)は「首を振る」の場合の表情特徴点座標の変化、図 3 (b)は「頷く」の場合の表情特徴点座標の変化をそれぞれ示している。「首を振る」の場合は、表情特徴点座標が顔中心より横方向に閾値 K1以上変化、顔中心より反対方向に閾値 K2以上変化するという 2つの条件を満たす。「頷く」の場合は、表情特徴点座標が顔中心より下方向に閾値 U1以上変化、顔中心より上方向に閾値 U2以上変化するという 2つの条件を満たす。

[0022] また、表情 ·感情解析部 16は、キー入力データを解析し、各キーに対応付けられた表情'感情を検知する。ここで、キー操作部（図示略)の各キーには様々な表情、感情が対応付けされており、ユーザが通話中に自分の表情、感情に合致するキーを操作 (押下)することで、表情 ·感情解析部 16は、表情 ·感情を検知し、表情 '感情に対応する動作を決定する。例えば「怒る」という表情'感情が「1」のキーに対応付けられており、ユーザが当該キーを押下することで「怒る」という動作が確定される。また、「笑う」という表情'感情が「2」のキーに対応付けられており、ユーザが当該キーを押下することで「笑う」が確定される。また、「驚く」という表情'感情が「3」のキーに対応付けられており、ユーザが当該キーを押下することで「驚く」が確定される。また、「怯える」という表情'感情力 ^s「4」のキーに対応付けられており、ユーザが当該キーを押下することで「怯える」が確定される。

[0023] また、「手を上げる」という動作が「5」のキーに対応付けられており、ユーザが当該キ一を押下することで、「手を上げる」という動作が確定される。また、「突き飛ばす」という動作が「6」のキーに対応付けられており、ユーザが当該キーを押下することで、「突き飛ばす」という動作が確定される。また、「攻撃する」という動作が「7」のキーに対応付けられており、ユーザが当該キーを押下することで、「攻撃する」という動作が確定される。また、「手をつなぐ」という動作が「8」のキーに対応付けられており、ユーザが当該キーを押下することで、「手をつなぐ」という動作が確定される。また、「抱きつく」という動作が「9」のキーに対応付けられており、ユーザが当該キーを押下することで、「抱きつく」 t 、う動作が確定される。

[0024] 上述した顔認識処理により検知した表情 '感情から、表情 ·感情変換処理により単独動作テーブルまたは相互動作テーブルに対応づけられ、キャラクタの「笑う」、「驚く」、「悲しむ」、「首を振る」、「頷く」、「手をつなぐ」「抱きつく」という動作が確定される [0025] また、表情'感情解析部 16は、音声データを解析してユーザが大声を出した等の感情を検知する。感情を検知する方法としては、例えば音声入力データのリズムが速くなり、音が大きくなつた場合「笑う」、リズムがそのままで、音が大きくなつた場合「驚く」、リズムが遅ぐ音が小さくなつた場合「悲しむ」といったようにリズム ·音の大小の変ィ匕からユーザの感情を検知する。検知した感情から、表情'感情変換処理により単独動作テーブルまたは相互動作テーブルに対応づけられ、キャラクタの「笑う」「驚く」、「悲しむ」、「手をつなぐ」「抱きつく」という動作が確定される。

[0026] このように、表情'感情解析部 14は、映像データ、音声データ、キー入力データを基にユーザの表情、感情を解析する。そして、解析した結果を動作データ生成部 17 に入力する。なお、映像データ、音声データ、キー入力データの全てを必要とすることはなぐそのうちの 1つでも構わない。

[0027] 図 4は、動作データ生成部 17及び動作整合部 18が使用する動作テーブルの一例を示す図である。動作データ生成部 17は、表情'感情解析部 16の解析結果に基づいて、図 4に示すテーブルを参照して、テレビ電話装置 1のユーザとテレビ電話装置 2のユーザそれぞれの表情、感情に応じた動作データを生成する。図 4 (a)はテレビ電話装置 1側の単独動作テーブル TAであり、キャラクタ Ca単独の動作データの集合を示す。図 4 (b)はテレビ電話装置 2側の単独動作テーブル TBであり、キャラクタ C b単独の動作データの集合を示す。図 4 (c)はテレビ電話装置 1及び 2の相互動作テ一ブル TCであり、相手のキャラクタ Ca又は Cbに影響を与える動作データの集合を示す。

[0028] 動作データ生成部 17は、テレビ電話装置 1の入力データ IAが単独動作を示す場合は単独動作テーブル TAから動作データ DAを生成し、テレビ電話装置 2の入力データ IBが単独動作を示す場合は単独動作テーブル TBカゝら動作データ DBを生成し、テレビ電話装置 1の入力データ IAが相互動作を示す場合は相互動作テーブル TC 力動作データ DAを生成し、テレビ電話装置 2の入力データ IBが相互動作を示す場合は相互動作テーブル TC力も動作データ DBを生成する。

[0029] ここで、一例として、テレビ電話装置 1にお、て、入力データ IAとして映像データが入力された場合の映像データと動作データ DAとの関係を図 5に示す。この場合、テレビ電話装置 1の動作であるので、図 5 (a) (図 4 (a) )の単独動作テーブル TAと図 5 ( c) (図 4 (c) )の相互動作テーブル TCが使用される。また、図 5 (d)は、表情 ·感情解析部 16が使用する表情'感情解析テーブルの一例を示す図である。この表情'感情解析テーブルには、表情'感情解析部 16が解析した結果が一時的に保持される。

[0030] (1)テレビ電話装置 1の入力データ IAが「笑う」という感情を示す映像データである場合、「笑う」という動作データ DAが生成される。

(2)テレビ電話装置 1の入力データ IAが「悲しむ」 t 、う感情を示す映像データである場合、「泣く」という動作データ DAが生成される。

(3)テレビ電話装置 1の入力データ IAが「驚く」という感情を示す映像データである場合、「驚く」という動作データ DAが生成される。

(4)テレビ電話装置 1の入力データ IAが「怒り」という動作を示す映像データである場合、「攻撃する」 t 、う動作データ DAが生成される。

(5)テレビ電話装置 1の入力データ IAが「首を振る」 t 、う動作を示す映像データである場合、「突き飛ばす」という動作データ DAが生成される。

(6)テレビ電話装置 1の入力データ IAが「頷く」 t 、う動作を示す映像データである場合、「手をつなぐ」という動作データ DAが生成される。

[0031] また、テレビ電話装置 1において、入力データ IAとして音声データが入力された場合の音声データと動作データ DAとの関係を図 6に示す。この場合もテレビ電話装置 1の動作であるので、図 6 (a) (図 4 (a) )の単独動作テーブル TAと図 6 (c) (図 4 (c) ) の相互動作テーブル TCが使用される。

[0032] (1)テレビ電話装置 1の入力データ IAが「笑う」という感情を示す音声データである場合、「笑う」という動作データ DAが生成される。

(2)テレビ電話装置 1の入力データ IAが「悲しむ」という感情を示す音声データである場合、「泣く」という動作データ DAが生成される。

(3)テレビ電話装置 1の入力データ IAが「驚く」という感情を示す音声データである場合、「驚く」という動作データ DAが生成される。

(4)テレビ電話装置 1の入力データ IAが「怒る」という感情を示す音声データである場合、「攻撃する」という動作データ DAが生成される。

(5)テレビ電話装置 1の入力データ IAが「大声を出す」という感情を示す音声データである場合、「突き飛ばす」という動作データ DAが生成される。

(6)テレビ電話装置 1の入力データ IAが「無言」という感情を示す音声データである場合、「怯える」という動作データ DAが生成される。

[0033] 上記の例は、テレビ電話装置 1についてあった力テレビ電話装置 2においても、入力データ IBが映像、音声を問わず同様である。つまり、テレビ電話装置 1の入力データ IAが入力データ IBに置き換わり、動作データ DAが動作データ DBに置き換わる。また、当然ながらテレビ電話装置 2の場合は、図 4 (b)の単独動作テーブル TBと図 4 (c)相互動作テーブル TCが使用される。

[0034] 動作データ生成部 17は、上述のようにして生成した動作データ DA、 DBを表示画像生成部 13Aと動作整合部 18それぞれに入力する。動作整合部 18は、動作データ DA及び DBの整合をとるものであり、以下のように動作データ DA、 DBの整合を行う

(1)動作データ DA、動作データ DBが共に単独動作のデータの場合、そのまま動作データ DAと動作データ DBを出力する（例：キャラクタ Caが「笑、」、キャラクタ Cbが「泣く」）

[0035] 図 7は、動作整合部の動作概要を示す図であり、 (2)に示す場合の動作整合部 18 の動作概要を示す。

(2)動作データ DAが単独動作のデータで、動作データ DBが相互動作のデータの場合は、動作データ DBを優先させる。動作データ DBは相互動作テーブル TC内の主動作データを出力し、動作データ DAは相互動作テーブル TC内の主動作データに対応した受動作データを出力する（例：キャラクタ Cbが「突き飛ばす」と、キャラクタ Caが「吹き飛ぶ」）。図 7に示すように、動作整合される前は動作データ DAが「笑う」、動作データ DBが「突き飛ばす」であり、相互動作である動作データ DBが優先されること力ら、「笑う」の動作データ DAは「吹き飛ぶ」の動作データになる。

(3)動作データ DAが相互動作のデータで、動作データ DBが単独動作のデータの場合、 (2)の場合と同様である（例：キャラクタ Caが「突き飛ばす」と、キャラクタ Cbが「吹き飛ぶ」）

(4)動作データ DA、動作データ DBが共に相互動作のデータである場合、例えば時間的に早く取得された方を優先し、上位側の相互動作の動作データを出力する (例：動作データ DAが優先された場合、キャラクタ Caが「攻撃する」と、キャラクタ Cbが「倒れる」）

[0036] 動作データ生成部 17は、表情'感情解析部 16からの入力データが無い（映像データ、音声データ、キー入力データのいずれも入力されない）ときには、図 5及び図 6に示すように、単独動作テーブル TA、 TBの「デフォルト動作」の動作データを生成する。

[0037] 表示画像生成部 13Aは、動作データ生成部 17で生成された動作データ DA又は動作データ DAを動作整合部 18で整合させた動作データ ϋΑΊこ対応するキャラクタデータをキャラクタデータ格納部 15から取得し、テレビ電話表示部 14Aに画像を表示させる。また、動作データ生成部 17で生成されたテレビ電話装置 2用の動作データ DB又は動作データ DBを動作整合部 18で整合させた動作データ ϋΒΊこ対応するキャラクタデータをキャラクタデータ格納部 15から取得し、データ送信部 11 Αからテレビ電話装置 2に送信する。

[0038] テレビ電話表示部 14Aには、例えば「突き飛ばす」という相互動作の動作データ D Aと、「笑う」、「泣く」、「驚く」又は「怯える」という単独動作の動作データ DBとが生成された場合、動作データ DAによる表示即ち図 1に示すように、テレビ電話装置 1のキャラクタ Caがテレビ電話装置 2のキャラクタ Cbを突き飛ばしているキャラクタ画像が表示され、他方のテレビ電話表示部 14Bには、整合された動作データ ϋΒΊこよる表示即ち図 1に示すようにテレビ電話装置 2のキャラクタ Cbがテレビ電話装置 1のキャラクタ Caによって突き飛ばされているキャラクタ画像が表示される。

[0039] なお、図 1のテレビ電話表示部 14Aとテレビ電話表示部 14Bに表示されるキャラクタ画像は、動作データ DBが相互動作の動作データで、かつその発生タイミングが動作データ DAより後である場合も同様になる。但し、時間の前後で優先を決定しない場合はこの限りではない。

[0040] 図 8は、テレビ電話装置 1の動作を示すフローチャートである。まず、テレビ電話装置 1は、テレビ電話装置 2との間で通話を開始する（ST10)。テレビ電話装置 2と通話を開始すると、入力データ部 10Aから入力データ IAを取得する（ST11)。すなわち、映像データ、音声データ、キー入力データの少なくとも 1つを取得する。次いで、取得した入力データ IAからテレビ電話装置 1のユーザの表情、感情を解析する（ST12 )。例えば、テレビ電話装置 1のユーザの笑い顔を撮影すると、「笑う」という解析結果を得る。

[0041] 入力データ IAから表情、感情を解析した後、テレビ電話装置 2からの入力データ IB の受信を開始する（ST13)。テレビ電話装置 2から送信された入力データ IBを受信すると、入力データ IBからテレビ電話装置 2のユーザの表情、感情を解析する（ST1 4)。例えば、テレビ電話装置 2のユーザの泣いた顔を取り込んだとすると、「泣く」という解析結果を得る。入力データ IAの解析結果力動作データ DAを生成し (ST15)、続けて入力データ IBの解析結果から動作データ DBを生成する（ST16)。

[0042] 動作データ DA及び DBを生成した後、これらのうち 1つでも相互動作であれば、整合を行う（ST17)。 2つとも相互動作であれば、時間的に先に発生した入力データによる動作データが主動作となるように整合を行う。動作データ DA及び DBの整合を行つた後、テレビ電話表示部 14A及び 14Bに表示するキャラクタの表示画像を生成する（ST18)。そして、テレビ電話装置 2用のキャラクタの表示画像データをテレビ電話装置 2に送信する（ST19)。テレビ電話装置 2にキャラクタの表示画像データを送信した後、テレビ電話装置 1用のキャラクタの表示画像をテレビ電話表示部 14Aに表示する（ST20)。通話中は（ST21の Noの場合）、上記 ST11から ST20までの処理を繰り返し行い、通話が終了すると（ST21の Yesの場合）、処理を終了する。

[0043] 図 9は、動作整合部 18の動作を示すフローチャートである。まず、動作整合部 18は、動作データ DAの入力を受け（ST20)、動作データ DAの有無を判定する（ST21) 。動作データ DAが無、場合（ST21の「無し」 )は動作データ DAをデフォルトの動作データ DAに変更する（ST22)。これに対して、動作データ DAが有る場合（ST21の「有り」の場合）は動作データ DBの入力を受け（ST23)、動作データ DBの有無を判定する（ST24)。動作データ DBが無、場合 (ST24の「無し」の場合）は、動作データ DBをデフォルトの動作データ DBに変更する（ST25)。 [0044] これに対して、動作データ DBが有る場合 (ST214「有り」の場合）は、動作データ D A、 DBの組み合わせ優先順位を決定する（ST26)。この場合、単独動作と相互動作の場合は相互動作の方が優先され、相互動作同士の場合は例えば入力データが取得された時間の早い方が選択される。動作データ DA、 DBの組み合わせ優先順位を決定した後、その優先順位に従って動作データ DA、 DBを変更する（ST27)。すなわち、上述したように、動作データ DAが「笑う」、動作データ DBが「突き飛ばす」の場合、相互動作である動作データ DBが優先され、これによつて「笑う」の動作データ DAが「吹き飛ぶ」の動作データ ϋΑΊこ変更される。動作データ DA、 DBの変更後、これらを出力する（ST28)。

[0045] 図 10は、テレビ電話装置 2の動作を示すフローチャートである。まず、テレビ電話装置 2は、テレビ電話装置 1との間で通話を開始する（ST40)。テレビ電話装置 1と通話を開始すると、入力データ部 10B力も入力データ IBを取得する（ST41)。すなわち、映像データ、音声データ、キー入力データの少なくとも 1つを取得する。次いで、取得した入力データ IBをテレビ電話装置 1に送信する（ST42)。入力データ IBをテレビ電話装置 1に送信した後、キャラクタの表示画像データの受信を行う（ST43)。テレビ電話装置 1から送信されたキャラクタの表示画像データを受信できると、テレビ電話表示部 14Bにキャラクタの表示画像を表示する（ST44)。通話中は（ST45の Noの場合）、上記 ST41から ST45までの処理を繰り返し行い、通話が終了すると（ST45 の Yesの場合）、処理を終了する。

[0046] このように、以上説明したテレビ電話システムによれば、テレビ電話装置 1が、自端末で表示する画像データに加え、通信相手端末 (テレビ電話装置 2)に表示させる画像データを生成し、テレビ電話装置 2に表示させる画像データをテレビ電話装置 2に送信することにより、通信相手端末の端末能力が自端末より低い場合であっても、自端末が要求するレベルの機能を通信相手端末に実行させることができる。

[0047] なお、以上の説明では、テレビ電話装置 1及び 2に表示させるキャラクタデータをテレビ電話装置 1が有する場合について説明したが、通話開始時にテレビ電話装置 2 力もテレビ電話装置 1にキャラクタデータを送信してもよい。また、以上、動作に対応する画像データをキャラクタデータ格納部 15から取得してテレビ電話装置 2に送信する場合について説明したが、表示させる画像の基となるキャラクタデータを通話開始時に送信し、通話中にはキャラクタの動作に相当する差分データのみを送信してもよい。これにより、従来のように通話中に画像データ全てを送信するのに比べてデータ通信量が低減できる。

[0048] なお、上記実施の形態では、単独動作として「笑う」、「泣く」、「驚く」、「怯える」、「怒る」、「叫ぶ」、相互動作として「突き飛ばす」→「吹き飛ぶ」、「攻撃する」→「倒れる」、「手をつなぐ」→「手をつなぐ」、「抱きつく」→「抱きつかれる」を例に挙げた画像、これらに限定されるものではなぐ様々な例を挙げることができる。また、単独動作のデータでも相互動作のデータとすることもできる。例えば、「叫ぶ」に対して「驚く」を相互動作にすることができる。

[0049] また、上記実施の形態では、キー操作による動作の確定として、単にキーを操作 ( 押下)すると、そのキーに割り当てられた動作を確定するようにした力キーの操作の仕方 (例えば押下し続ける、断続的に押下する、強弱を付けて押下するなど）によつては新たな動作を確定できるようにしてもよ!、。

[0050] (実施の形態 2)

図 11は、本発明の実施の形態 2を説明するためのテレビ電話システムの概略構成図である。図 11に示すテレビ電話システムは、通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載し、互いに端末能力が同程度のテレビ電話装置 4及び 5を備える。図 11では、図 1の各部と共通する部分に同一の符号を付けており、さらに双方が共にキャラクタデータ格納部、表情 ·感情解析部、動作データ生成部、動作整合部を備えているので、これらのブロックに付す符号には、テレビ電話装置 4側には「A」を、テレビ電話装置 5側には「B」を付けている。また、テレビ電話装置 4及び 5は、通話開始時に互いのキャラクタデータの交換を行うので、互いに相手のキャラクタデータを保存するためのキャラクタデータ保存部 19A、 19Bを有して、る。

[0051] 図 12は、テレビ電話装置 4の動作を示すフローチャートである。まず、テレビ電話装置 4は、テレビ電話装置 5との間で通話を開始する（ST50)。テレビ電話装置 5と通話を開始すると、キャラクタデータ格納部 15Aに格納しているキャラクタデータ CAをテレビ電話装置 5に送信する（ST51)。キャラクタデータ CAの送信後、相手テレビ電話装置 5から送信されるキャラクタデータ CBの受信を開始し (S52)、キャラクタデータ C Bが送信されてくると、それをキャラクタデータ保存部 19Aに格納する（ST53)。

[0052] キャラクタデータ CBを受信し保存した後、入力データ IAを取得する（ST54)。すなわち、自機の入力データ部 10Aから映像データ、音声データ、キー入力データを少なくとも 1つ取得する。入力データ IAを取得すると、それから自機のユーザの表情、感情を解析する（ST55)。例えばユーザの笑ヽ顔を撮影した場合には「笑う」 t ヽぅ解析結果を得る。自機ユーザの表情、感情を解析した後、その解析結果から自機ュ一ザの表情、感情に応じた動作データ DAを生成する（ST56)。そして、生成した動作データ DAを相手テレビ電話装置 5に送信する（ST57)。動作データ DAの送信後、相手テレビ電話装置 5からの動作データ DBの受信を開始する（ST58)。

[0053] テレビ電話装置 5の動作データ DBを取得すると、その動作データ DBと自端末の動作データ DAのうち 1つでも相互動作であれば整合を行う（ST59)。 2つとも相互動作の場合は、例えば時間的に先に得られた方が主動作となるように整合を行う。この整合処理の詳細にっヽては後述する。動作データ DA及び DBの整合を行った後、動作データ DAを基にキャラクタの表示画像を生成して（ST60)、テレビ電話表示部 14Aに表示する（ST61)。通話中は（ST62の Noの場合）、上記 ST54から ST62までの処理を繰り返し行い、通話が終了すると（ST62の Yesの場合）、処理を終了する

[0054] 図 13は、動作整合部 18Aの動作を示すフローチャートである。まず、動作整合部 1 8Aは、動作データ生成部 17Aで生成される動作データ DAを取り込むための処理を開始し（ST70)、動作データ DAの有無を判定する（ST71)。動作データ DAの入力が無、場合（ST71の「無し」の場合）、デフォルトの動作データ DAに変更する（ST7 2)。これに対して、動作データ DAが入力された場合 (ST21の「有り」の場合）、入力された動作データ DAを相手テレビ電話装置 5に送信する（ST73)。この動作データ DAの送信後、相手テレビ電話装置 5からの動作データ DBを受信するための処理を開始し（ST74)、動作データ DBの有無を判定する（ST75)。動作データ DBが得られな力つた場合（ST76の「無し」 )は、デフォルトの動作データ DBに変更する（ST7 6)。 [0055] これに対して、動作データ DBが得られた場合（ST75の「有り」）は、動作データ DA 、 DBの組み合わせ優先順位を決定する（ST77)。この場合、単独動作と相互動作の場合は相互動作の方を優先し、相互動作同士の場合は例えば時間的に先に得られた方が選択される。但し、時間で決定する場合は、最初に通信を開始したときにテレビ電話装置 4とテレビ電話装置 5との間で時間合わせが行われる。

[0056] このようにして動作データ DA、 DBの組み合わせ優先順位を決定した後、その優先順位に従って動作データ DA、 DBを変更する（ST78)。すなわち、上述したように動作データ DA力 S「笑う」、動作データ DBが「突き飛ばす」の場合、相互動作である動作データ DBが優先され、これによつて「笑う」の動作データ DAが「吹き飛ぶ」の動作データ ϋΑΊこ変更される。動作データ DA及び DBの変更後、これらを出力する（ST 79)。

[0057] 図 14は、テレビ電話装置 5の動作を示すフローチャートである。まず、テレビ電話装置 5は、テレビ電話装置 4との間で通話を開始する（ST90)。テレビ電話装置 4と通話を開始すると、キャラクタデータ格納部 15Bに格納しているキャラクタデータ CBをテレビ電話装置 4に送信する（ST91)。キャラクタデータ CBの送信後、相手テレビ電話装置 4から送信されるキャラクタデータ CAの受信を開始し（S92)、キャラクタデータ CA が送信されてくると、それをキャラクタデータ保存部 19Bに格納する（ST93)。

[0058] キャラクタデータ CAを受信し保存した後、入力データ IBを取得する（ST94)。すなわち、自端末の入力データ部 10Bから映像データ、音声データ、キー入力データを少なくとも 1つ取得する。入力データ IBを取得すると、それから自端末のユーザの表情、感情を解析する（ST95)。例えばユーザの泣き顔を撮影した場合には「泣く」という解析結果を得る。自端末ユーザの表情、感情を解析した後、その解析結果から自端末ユーザの表情、感情に応じた動作データ DBを生成する（ST96)。そして、生成した動作データ DBを相手テレビ電話装置 4に送信する（ST97)。動作データ DBの送信後、相手テレビ電話装置 4からの動作データ DAの受信を開始する（ST98)。

[0059] 相手テレビ電話装置 4の動作データ DAを取得すると、その動作データ DAと自端末の動作データ DBのうち 1つでも相互動作であれば整合を行う（ST99)。 2つとも相互動作の場合は、例えば時間的に先に得られた方が主動作となるように整合を行う。この整合処理の詳細にっヽては後述する。動作データ DB及び D Aの整合を行った後、動作データ DBを基にキャラクタの表示画像を生成して（ST100)、テレビ電話表示部 14Bに表示する（ST101)。通話中は（ST102の Noの場合）、上記 ST94から S T102までの処理を繰り返し行い、通話が終了すると（ST102の Yesの場合）、処理を終了する。

[0060] 図 15は、動作整合部 18Bの動作を示すフローチャートである。まず、動作整合部 1 8Bは、動作データ生成部 17Bで生成される動作データ DBを取り込むための処理を開始し（ST110)、動作データ DBの有無を判定する（ST111)。動作データ DBの入力が無、場合 (ST111の「無し」の場合）、デフォルトの動作データ DBに変更する（S T112)。これに対して、動作データ DBが入力された場合（ST111の「有り」の場合）、入力された動作データ DBを相手テレビ電話装置 4に送信する（ST113)。この動作データ DBの送信後、相手テレビ電話装置 4からの動作データ DAを受信するための処理を開始し（ST114)、動作データ DAの有無を判定する（ST115)。動作データ DAが得られなかった場合（ST115の「無し」）は、デフォルトの動作データ DAに変更する（ST116)。

[0061] これに対して、動作データ DAが得られた場合（ST115の「有り」）は、動作データ D B、 DAの組み合わせ優先順位を決定する（ST117)。この場合、単独動作と相互動作の場合は相互動作の方を優先し、相互動作同士の場合は例えば時間的に先に得られた方が選択される。但し、時間で決定する場合は、最初に通信を開始したときにテレビ電話装置 5とテレビ電話装置 4との間で時間合わせが行われる。

[0062] このようにして動作データ DB、 DAの組み合わせ優先順位を決定した後、その優先順位に従って動作データ DB、 DAを変更する（ST118)。すなわち、動作データ D Bが「泣く」、動作データ DAが「突き飛ばす」の場合、相互動作である動作データ DA が優先され、これによつて「泣く」の動作データ DBが「吹き飛ぶ」の動作データに変更される。動作データ DB、 DAの変更後、これらを出力する（ST119)。

[0063] (実施の形態 3)

図 16は、本発明の実施の形態 3を説明するためのテレビ電話システムの概略構成図である。図 16に示すテレビ電話システムは、通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載し、互いに端末能力が同程度のテレビ電話装置 6及び 7を備える。図 16では、図 1の各部と共通する部分に同一の符号を付けており、さらにテレビ電話装置 6は、テレビ電話装置 1のキャラクタデータ格納部 15に代わる画像加工データ格納部 20と、動作データ生成部 17に代わる画像加工決定部 21と、動作整合部 18に代わる動作カ卩工整合部 22とを備えているので、これらのブロック〖こ付す符号には、テレビ電話装置 6側には「A」を、テレビ電話装置 7側には「B」を付けている。

[0064] 本実施の形態は、作成する表示画像及び送信画像を、キャラクタではなくカメラ入力画像を元にした加工画像として、る。テレビ電話画像はテレビ電話装置 6及び 7の双方の画像からなり、表示データの合成処理を全てテレビ電話装置 6のみで行う。なお、表示データの合成処理を全てテレビ電話装置 7のみで行うようにしても構わなヽ。図 17はテレビ電話装置 6及び 7で撮影されたカメラ画像の一例を示す図である。図 17 (a)はテレビ電話装置 6のユーザを撮影したカメラ画像 PIAであり、図 17 (b)はテレビ電話装置 7のユーザを撮影したカメラ画像 PIBである。テレビ電話装置 6及び 7で撮影されたこれらのカメラ画像 PIA、 PIBは、図 16に示すようにテレビ電話装置 6のテレビ電話表示部 14Aとテレビ電話装置 7のテレビ電話表示部 14Bそれぞれに合成された形で表示される。

[0065] 図 18は、画像加工決定部 21及び画像加工整合部 22が使用する動作テーブルの一例を示す図である。画像加工決定部 21は、表情'感情解析部 16の解析結果に基づいて、図 18に示すテーブルを参照して、テレビ電話装置 6のユーザとテレビ電話装置 7のユーザそれぞれの表情、感情に応じた画像加工データを生成する。図 18 (a )はテレビ電話装置 6側の単独加工テーブル TD、図 18 (b)はテレビ電話装置 2側の単独加工テーブル TEであり、それぞれ相手画像に影響を与えな!/ヽ画像加工データの集合を示す。図 18 (c)はテレビ電話装置 6及び 7の相互動作テーブル TFであり、相手画像に影響を与える画像加工データの集合を示す。

[0066] 画像加工決定部 21は、テレビ電話装置 6の入力データ IAが単独加工を示す場合は単独加工テーブル TDカゝら画像カ卩ェデータ DP Aを生成し、テレビ電話装置 7の入力データ IBが単独加工を示す場合は単独加工テーブル TEカゝら画像カ卩ェデータ DP Bを生成し、テレビ電話装置 6の入力データ IAが相互動作を示す場合は相互加工テ一ブル TFから画像カ卩ェデータ DAPを生成し、テレビ電話装置 7の入力データ IBが相互動作を示す場合は相互カ卩工テーブル TFカゝら画像カ卩ェデータ DPBを生成する

[0067] 一例として、以下の画像加工データを生成する。

(1)特定のキー入力があったら、カメラ画像に吹き出しを入れる画像加工データを生成する。

(2)カメラ画像で顔が笑ったら、カメラ画像にハートマークを入れる画像加工データを生成する。

(3)ユーザが大声を出したときに、カメラ画像を拡大する画像加工データを生成する画像加工決定部 21は、生成した画像加工データ DPA及び DPBを画像加工データ格納部 20に格納する。

[0068] 画像カ卩工整合部 22は、画像加工決定部 21で決定されて画像加工データ格納部 2 0に格納されたテレビ電話装置 6の画像加工データ DPAとテレビ電話装置 7の画像加工データ DPBとから画像加工方法の整合をとる。例えば、テレビ電話装置 6の画像加工データが「拡大」のときに、テレビ電話装置 7の画像加工データが「縮小」になる。

[0069] 画像カ卩工整合部 22は、画像カ卩ェデータの組み合わせにより、以下の 4通りの動作を行う。

(1)画像カ卩ェデータ DPA、画像カ卩ェデータ DPBが共に単独加工テーブル TD、 TE のデータの場合は、そのまま画像カ卩ェデータ DPAと画像カ卩ェデータ DPBを出力する。

(2)画像加工データ DPAが単独加工テーブル TDのデータで、画像加工データ DP Bが相互カ卩工テーブル TFのデータの場合は、画像加工データ DPBを優先させる。画像加工データ DPBは、相互加工テーブル TF内の主動作データを出力し、画像カロェデータ DPAは相互カ卩工テーブル TF内の主動作データに対応した受動作データを出力する。例えば、テレビ電話装置 6のユーザの画像が拡大し、テレビ電話装置 7 のユーザの画像が縮小する。

(3)画像加工データ DPAが相互加工テーブル TFのデータで、画像加工データ DP Bが単独加工テーブル TEのデータの場合も同様である。例えば、テレビ電話装置 6 のユーザの画像が拡大し、テレビ電話装置 7のユーザの画像が縮小する。

(4)画像加工データ DPA、画像加工データ DPBが共に相互加工テーブル TFのデータである場合には、時間情報力もより早く決定された画像加工データを優先し、上位側の相互カ卩工テーブル TFのデータを出力する。

[0070] 図 19は、上記（2)の場合の画像カ卩工整合部 22の動作概要を示す図である。この図に示すように、画像加工整合される前は画像加工データ DPAが「ハート」、画像加ェデータ DPBが「カナヅチ」であり、相互動作である画像カ卩ェデータ DPBが優先されることから、「ハート」の画像カ卩ェデータ DPAは「タンコブ」の画像加工データ DPA

Ίこなる。

なお、有効な入力がされていない（画像、音声、キー入力のいずれか)ために、何も画像加工データが選択されていない場合は、単独加工テーブル TD、 TEの「デフォルト」を出力する。

[0071] 図 16において、表示画像生成部 13Aは、画像カ卩工整合部 22にて整合がとられたテレビ電話装置 6のカメラ画像及び画像加工データとテレビ電話装置 7のカメラ画像及び画像加工データから表示データを生成する。表示画像生成部 13Aで生成された表示データはテレビ電話表示部 14Aに入力されて表示データに基づく画像が表示される。データ送信部 11 Aは、表示画像生成部 13Aで生成された表示データをテレビ電話装置 7へ送信する。テレビ電話装置 7では、テレビ電話装置 6のデータ送信部 11 Aから送信された表示データを受信し、それをテレビ電話表示部 14Bに表示させる。

[0072] 図 20は、テレビ電話装置 6の動作を示すフローチャートである。まず、テレビ電話装置 6は、テレビ電話装置 7との間で通話を開始する（ST130)。テレビ電話装置 7と通話を開始すると、入力データ部 10Aから入力データ IAを取得する（ST131)。すなわち、映像データ、音声データ、キー入力データの少なくとも 1つを取得する。次いで、取得した入力データ IAからテレビ電話装置 6のユーザの表情、感情を解析する（ST 132)。例えば、テレビ電話装置 6のユーザの笑い顔を撮影すると、「笑う」という解析結果を得る。

[0073] 入力データ IAから表情、感情を解析した後、テレビ電話装置 7からの入力データ IB の受信を開始する（ST133)。テレビ電話装置 7から送信された入力データ IBを受信すると、入力データ IBからテレビ電話装置 7のユーザの表情、感情を解析する（ST1 34)。例えば、テレビ電話装置 7のユーザの泣いた顔を取り込んだとすると、「泣く」と V、う解析結果を得る。入力データ IAの解析結果力画像カ卩ェデータ DPAを決定し（ ST135)、続けて入力データ IBの解析結果力も画像カ卩ェデータ DPBを決定する（S T136)。

[0074] 画像加工データ DPA及び DPBを生成した後、これらのうち 1つでも相互動作であれば、整合を行う（ST137)。 2つとも相互動作であれば、時間的に先に発生した入力データによる動作データが主動作となるように整合を行う。画像加工データ DPA 及び DPBの整合を行った後、テレビ電話表示部 14A及び 14Bに表示するキャラクタの表示画像を生成する（ST138)。そして、テレビ電話装置 7用のキャラクタの表示画像データをテレビ電話装置 7に送信する（ST139)。テレビ電話装置 7にキャラクタの表示画像データを送信した後、テレビ電話装置 6用のキャラクタの表示画像をテレビ電話表示部 14Aに表示する（ST140)。通話中は（ST141の Noの場合）、上記 ST1 31から ST140までの処理を繰り返し行い、通話が終了すると（ST141の Yesの場合 )、処理を終了する。

[0075] 図 21は、画像カ卩工整合部 22の動作を示すフローチャートである。まず、画像加工整合部 22は、画像カ卩ェデータ DPAの入力を受け（ST150)、画像カ卩ェデータ DPA の有無を判定する（ST151)。画像加工データ DPAが無、場合（ST151の「無し」 ) は画像加工データ DPAをデフォルトの画像加工データ DPAに変更する（ST152)。これに対して、画像カ卩ェデータ DPAが有る場合 (ST151の「有り」の場合）は画像加ェデータ DPBの入力を受け（ST153)、画像カ卩ェデータ DPBの有無を判定する（S T154)。画像カ卩ェデータ DPBが無い場合（ST154の「無し」の場合）は、画像加工データ DPBをデフォルトの画像カ卩ェデータ DPBに変更する（ST155)。

[0076] これに対して、画像カ卩ェデータ DPBが有る場合 (ST154の「有り」の場合）は、画像加工データ DPA、 DPBの組み合わせ優先順位を決定する（SI 56)。この場合、単独加工と相互加工の場合は相互加工の方が優先され、相互加工同士の場合は例えば入力データが取得された時間の早い方が選択される。画像加工データ DPA、 DP Bの組み合わせ優先順位を決定した後、その優先順位に従って画像加工データ DP A、 DPBを変更する（ST157)。すなわち、上述したように、画像カ卩ェデータ DPAが「ハート」、画像カ卩ェデータ DPBが「カナヅチ」の場合、相互動作である画像力卩ェデ一タ DPBが優先され、これによつて「ハート」の画像カ卩ェデータ DPAが「タンコブ」の画像カ卩ェデータ ϋΡΑΊこ変更される。画像加工データ DPA、 DPBの変更後、これらを出力する（ST158)。

[0077] 図 22は、テレビ電話装置 7の動作を示すフローチャートである。まず、テレビ電話装置 7は、テレビ電話装置 6との間で通話を開始する（ST160)。テレビ電話装置 6と通話を開始すると、入力データ部 10Bから入力データ IBを取得する（ST161)。すなわち、映像データ、音声データ、キー入力データの少なくとも 1つを取得する。次いで、取得した入力データ IBをテレビ電話装置 6に送信する（ST162)。入力データ IBをテレビ電話装置 6に送信した後、画像加工された表示画像データの受信を行う (ST16 3)。テレビ電話装置 6から送信された表示画像データを受信できると、テレビ電話表示部 14Bに表示する（ST164)。通話中は（ST165の Noの場合）、上記 ST161から ST165までの処理を繰り返し行い、通話が終了すると（ST165の Yesの場合）、処理を終了する。

[0078] 本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。

本出願は、 2004年 4月 7日出願の日本特許出願（特願 2004— 112854)、 2005年 3月 24日出願の日本特許出願 (特願 2005— 086335)に基づくものであり、その内容はここに参照として取り込まれる。

産業上の利用可能性

[0079] 本発明は、自端末が搭載する機能を実行させる為のデータ及び通信相手端末が搭載する機能を実行させる為のデータを生成することにより、通信相手端末の端末能力が自端末より低い場合であっても、自端末が要求するレベルの機能を通信相手端末に実行させることができる効果を有し、通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載する通信端末及びその通信方法等に有用である。

Claims

請求の範囲

[1] 通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載する通信端末であって、

自端末が搭載する機能を実行させる為のデータ及び通信相手端末が搭載する機能を実行させる為のデータを生成するデータ生成手段と、

前記通信相手端末が搭載する機能を実行させる為のデータを送信する送信手段とを備える通信端末。

[2] 請求項 1記載の通信端末であって、

テレビ電話機能を有し、

入力されたデータを解析する入力データ解析手段と、

解析結果に基づ!、て、自端末側のデータと通信相手端末側のデータとを整合させたデータを前記生成手段に出力するデータ整合手段と、

を有する通信端末。

[3] 請求項 2記載の通信端末であって、

入力されたデータとして、画像データ、音声データ及びキー入力データから選択した少なくとも 1つのデータを前記入力データ解析手段へ入力する入力手段を備える迪信端末。

[4] 通信機能を有し、通信相手端末が搭載する機能と共通の機能を搭載する通信端末の通信方法であって、

自端末が搭載する機能を実行させる為のデータ及び通信相手端末が搭載する機能を実行させる為のデータを生成し、

前記通信相手端末が搭載する機能を実行させる為のデータを送信する通信方法。