JP2947113B2

JP2947113B2 - 画像通信端末用ユーザインタフェース装置

Info

Publication number: JP2947113B2
Application number: JP7049639A
Authority: JP
Inventors: 敏彦広明
Original assignee: Nippon Electric Co Ltd
Current assignee: NEC Corp
Priority date: 1995-03-09
Filing date: 1995-03-09
Publication date: 1999-09-13
Anticipated expiration: 2014-09-13
Also published as: US5786846A; JPH08251561A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用上分野】画像通信端末用ユーザインタフ
ェース装置に関し、特に、利用者がカメラの撮影範囲か
ら外れずに適切な位置で端末を利用できるようにし、円
滑に自然に会話が行える画像通信端末用ユーザインタフ
ェース装置に関する。

【０００２】

【従来の技術】カメラで利用者を撮影しその画像を遠隔
地の相手と画像をやり取りしながら対話を行う端末装置
としてはテレビ電話やテレビ会議システム、グループウ
ェアにおけるリアルタイム系在席会議システム等がある
が、これら装置を利用する際において、従来は自分がカ
メラに対して適切な位置に在るかを判断する場合には、
自地点の画像あるいはその鏡像画像を自地点側の端末画
面に表示する方法がとられていた。具体的には、相手側
画像と自地点側画像との表示切替を行ったり、図１５
（ａ）に示すように自地点側の画像を相手側画像を表示
している画面の中に別の小ウィンドウとして表示したり
（ピクチャーインピクチャ方式）、あるいは、図１５
（ｂ）に示すように画面を４分割表示にしその中の一小
画面に自地点側画像を表示したり、さらには、相手側画
像を表示するものとは別のディスプレイを設置し自地点
側画像を表示する、といった方法が用いられてきた。コ
ンピュータを利用した画像通信端末装置では画像表示用
の小ウィンドウを複数同時に表示できるものがあるが、
この場合には図１５（ｃ）に示すように相手側画像を表
示するウィンドウとは別に自地点側の画像を表示するウ
ィンドウを表示する方法が用いられていた。

【０００３】自地点側の画像の表示を行う従来の画像通
信端末装置の構成の一例を図１６に示す。カメラ部６０
２で撮影された自地点側画像６９０は、画像信号分配部
１６０１において、通信処理部６０１を介して相手地点
へ送る信号と自地点側のディスプレイ６０３へ表示する
ために表示画面処理部１６０２へ送る信号とに分配され
る。画像通信部は自地点側の画像を遠隔地へ送信し、ま
た、相手側から送られてきた画像の受信を行う。受信し
た相手側画像２９０は表示画面処理部へと送られる。表
示画面処理部では、通常時は相手側画像２９０をディス
プレイへ送り、利用者が画面操作命令入力手段１６０３
（例えばスイッチやキーボード、マウスなど）を用い
て、ディスプレイに自地点側画像を表示するように命令
した場合には、ディスプレイへ自地点側画像を送信す
る、あるいは、相手側画像に自地点側画像のはめ込み合
成を行うといった画像切替や画像処理を実行し、端末利
用者がディスプレイ上で自地点側で撮影している画像が
見られるようにする。

【０００４】利用者がカメラの撮影範囲から外れていた
場合には、従来の端末ではカメラの設置箇所や光軸を動
かしたり、カメラにズーム機能を設けたり、また、カメ
ラ筐体を電動雲台上に設置し雲台の姿勢制御を行うなど
して、カメラの撮影範囲を変更する方法がとられてい
た。また、カメラを複数台設置し、それぞれのカメラの
撮影範囲が異なるようにカメラを設置し、カメラの切替
を行うことで撮影範囲の制御を行う方法も用いられてい
る。

【０００５】利用者がカメラの操作を行うことなく、カ
メラの撮影範囲から逸脱することなく会話が行えるよう
にする技術には、特開平４−２３９２８４「テレビ電
話」および特開平３−２９５３８２「話者追跡型テレビ
電話装置」に示された、被写体である話者（端末利用
者）および話者の位置を検出し、話者の位置を追従しな
がらカメラの撮影範囲を変更する方法がある。

【０００６】

【発明が解決しようとする課題】相手側画像以外の画像
を表示する方法は端末利用者の関心を会話内容や相手以
外の事物へ分散させ、相手との対面感を低下させる。ま
た、自地点側画像を端末利用者に対して指示した場合に
は、端末利用者はカメラの存在やカメラによって撮影さ
れているという印象を強め、その結果、利用者が撮影範
囲外へ移ろうとするなどの消極的行動を引き起こしやす
くなる。

【０００７】自地点側や相手側を問わず、各地のカメラ
の撮影範囲を変更する操作は煩雑さを伴い利用者の関心
を会話の内容以外へ向ける作用を及ぼし、対面のように
自然で流暢な会話を行う際の障害となっている。カメラ
操作の存在自体がカメラの存在を利用者に印象づけてい
る。カメラの撮影範囲が変更できることで、逆にカメラ
がどこを撮影しているのかが容易にはわからなくなり、
その結果、端末利用者が撮影範囲を知るために自地点側
端末に自地点側のカメラが撮影した画像を表示する必要
が生じている。撮影範囲が可変でかつ相手が自地点側の
カメラの撮影範囲を制御できる場合には、被写体側のプ
ライバシーを侵害する可能性を高める。相手に自地点側
のカメラ操作をどこまで許可するのか、その操作権利の
やり取りをどのようにやり取りするのか、カメラの操作
が同時に起こった場合にそれをどのように調整し排他制
御するのか、といったカメラの制御に関する問題を処理
する必要もある。

【０００８】特開平４−２３９２８４および特開平３−
２９５３８２が示すような、被写体である利用者の位置
に追従してカメラの撮影範囲を自動的に変更する方法で
は、カメラ画像を見ている利用者にとっては、意図しな
いのに機械が勝手に撮影範囲を変更し、自分の意思とは
無関係に利用者の視野が変更されてしまうといった状況
が発生する。これは、画面を見ている利用者の画面に対
する方向感を失わせたり不快感を与えたり、場合によっ
ては（例えば被写体である利用者が激しい運動や頻繁な
左右往復運動を行った場合など）酔いや目眩感を与えて
しまう。また、常にカメラが自動的に被写体を追従する
状況は、場合によっては被写体である利用者に「常にカ
メラによって写されている」という緊張感やストレスを
与える可能性も高い。カメラの撮影範囲を変更する場合
は利用者の積極的な意図によって行われる方が利用者に
心理的な負担を与えない。

【０００９】対面で相手と会話を行う場合には、相手の
顔は常に見えている状態にある。つまり、利用者にとっ
ては、対面で会話を行う状態とは相手の顔が見える状態
を示す。一般の利用者にとってはこの対面での会話状況
が自然で違和感のないものとなる。ところが、従来の画
像通信端末装置においては、相手の顔は見えないが自分
の顔は相手が見ているといった状況が発生し、例えば、
本人は画面に向かってしゃべっているつもりでも、相手
側にはその利用者の顔が映っておらず、被写体である本
人はそのことに気づかないといった事がある。また、場
合によっては相手から一方的に監視されているような印
象を利用者に与えている。このような非対称性は、対面
会話との著しい差を利用者に印象づけるだけでなく、相
手が何をしているか、どのような表情をしているかとい
った、円滑で豊かな会話を行うために重要な働きをする
ノンバーバル情報の伝達を不十分なものにしている。こ
のような互いに相手の姿を向かい合って見ていることが
保障されない環境、つまり、相手が端末の前に居るか、
また、端末上の自分の姿（画像）を相手はどの位置から
見ているかを推測できない環境では、自分の見ている画
像と相手との位置関係の首尾一貫性が損なわれ、相手と
の対面感や臨場感が失われている。相手が自分側の地点
のどこを見ているかを直感的に判断できなくなっている
ので、自地点側の画像を自地点側で表示する必要が生じ
る一因ともなっている。

【００１０】本発明の目的は、画像をやり取りしながら
会話を行う通信環境において対面対話のように自然な会
話を実現するために、自地点側画像を表示する必要が無
く、かつ、会話中にはカメラの撮影範囲を変更する操作
を伴わず、さらに、利用者に不快感を与えない画像通信
端末用ユーザインタフェース装置を実現することであ
る。

【００１１】

【課題を解決するための手段】第１の発明の画像通信端
末用ユーザインタフェース装置は、端末利用者を撮影す
るカメラ部と画像を表示するディスプレイ部と遠隔地と
の画像のやり取りを行う画像通信処理部とを備え遠隔地
の相手と画像をやり取りしながら対話を行う画像通信端
末装置に用いられる画像通信端末用ユーザインタフェー
ス装置において、前記カメラ部の被写体である端末利用
者の位置を検出し位置情報を出力する利用者位置検出部
と、前記位置情報をもとに端末利用者が前記カメラ部の
撮影範囲から逸脱したかを判断し通知制御情報を出力す
る利用者位置判別部と、端末利用者が前記カメラ部の撮
影範囲から逸脱した場合には前記通知制御情報に基づき
前記端末利用者に対して相手から送られてくる画像によ
って撮影範囲から逸脱したことを知らせる通知部とを備
えて構成されることを特徴とする。

【００１２】第２の発明の画像通信端末用ユーザインタ
フェース装置は、第１の発明において、前記通知部が、
前記通知制御情報に基づいて前記カメラ部の被写体であ
る端末利用者が前記カメラ部の撮影範囲内外のどちらに
いるかを表現する画像処理を相手側から送られてきた画
像に対して施し、前記画像処理後の画像を前記ディスプ
レイ部に出力する受信画像処理部によって構成されるこ
とを特徴とする。

【００１３】第３の発明の画像通信端末用ユーザインタ
フェース装置は、第１の発明において、前記通知部が、
前記カメラ部の撮影範囲から被写体である端末利用者が
逸脱していることを表現する通知用画像を生成する通知
用画像生成部と、前記通知制御情報に基づき、相手側か
ら送られてきた画像と前記通知用画像との切替または合
成の処理を行い、処理後の画像を前記ディスプレイ部に
出力する画像合成切替処理部とから構成されることを特
徴とする。

【００１４】第４の発明の画像通信端末用ユーザインタ
フェース装置は、第１の発明において、前記通知部が、
前記通知制御情報に基づいて前記カメラ部の被写体であ
る端末利用者が前記カメラ部の撮影範囲内外のどちらか
にいるかを表現する画像処理を相手側から送られてきた
画像に対して施し、前記画像処理後の画像を出力する受
信画像処理部と、前記カメラ部の撮影範囲から被写体で
ある端末利用者が逸脱していることを表現する通知用画
像を生成する通知用画像生成部と、前記通知制御情報に
基づいて、前記通知用画像と前記受信画像処理部が生成
した画像とを切替または合成する処理を行い、処理後の
画像を前記ディスプレイ部に出力する画像合成切替処理
部とから構成されることを特徴とする。

【００１５】第５の発明の画像通信端末用ユーザインタ
フェース装置は、第１の発明において、前記通知部が、
前記通知用制御情報に基づきカメラ部の撮影範囲から被
写体である端末利用者が逸脱していることを表現する通
知用情報を生成する通知情報生成部と、前記端末利用者
に対して前記通知用情報を出力する通知用情報出力部と
から構成されることを特徴とする。

【００１６】第６の発明の画像通信端末用ユーザインタ
フェース装置は、第２、第３、または第４の発明におい
て、前記通知部が、前記通知用制御情報に基づきカメラ
部の撮影範囲から被写体である端末利用者が逸脱してい
ることを表現する通知用情報を生成する通知用情報生成
部と、前記端末利用者に対して前記通知用情報を出力す
る通知用情報出力部とを更に備えることを特徴とする。

【００１７】第７の発明の画像通信端末用ユーザインタ
フェース装置は、第５または第６の発明において、前記
通知用情報出力部が、前記通知用情報として音声を前記
端末利用者に対して出力することを特徴とする。

【００１８】第８の発明の画像通信端末用ユーザインタ
フェース装置は、第１、第２、第４または第６の発明に
おいて、前記通知部は端末利用者の位置がカメラ部の撮
影範囲から逸脱していることを、前記ディスプレイ部に
表示する相手側画像の描画範囲の変更、または、ディス
プレイ部上における相手側画像の描画位置の変更によっ
て表すことを特徴とする。

【００１９】第９の発明の画像通信端末用ユーザインタ
フェース装置は、第１、第２、第４または第６の発明に
おいて、前記通知部は端末利用者の位置がカメラ部の撮
影範囲から逸脱していることを、ディスプレイ部に表示
する相手側画像の表示サイズの変更によって表すことを
特徴とする。

【００２０】第１０の発明の画像通信端末用ユーザイン
タフェース装置は、第１、第２、第４または第６の発明
において、前記通知部は端末利用者の位置がカメラ部の
撮影範囲から逸脱していることを、ディスプレイ部に表
示する相手側画像の明るさに関する特性の変更によって
表すことを特徴とする。

【００２１】第１１の発明の画像通信端末用ユーザイン
タフェース装置は、第１、第２、第４または第６の発明
において、前記通知部は端末利用者の位置がカメラ部の
撮影範囲から逸脱していることを、ディスプレイ部に表
示する相手側画像の色相に関する特性の変更によって表
すことを特徴とする。

【００２２】第１２の発明の画像通信端末用ユーザイン
タフェース装置は、第１、第２、第３、第４または第６
の発明において、前記ディスプレイ部で表示する前記遠
隔地の相手の画像をウィンドウ表示する場合において、
前記通知部は前記端末利用者の位置がカメラ部の撮影範
囲から逸脱していることを、前記ウィンドウの枠の表示
を変化させることで表すことを特徴とする。

【００２３】第１３の発明の画像通信端末用ユーザイン
タフェース装置は、第１、第２、第３、第４、第５、第
６、第７、第８、第９、第１０、第１１または第１２の
発明において、前記通知部が、前記利用者の前記カメラ
部の撮影範囲からの逸脱量または逸脱している方向ある
いは逸脱した状態から復帰するための状態を更に通知す
ることを特徴とする。

【００２４】第１４の発明の画像通信端末用ユーザイン
タフェース装置は、第１、第２、第３、第４、第５、第
６、第７、第８、第９、第１０、第１１、第１２または
第１３の発明において、前記通知部が、端末利用者が前
記カメラ部の撮影範囲から逸脱している場合には相手側
画像を前記ディスプレイ上に非表示にすることを特徴と
する。

【００２５】第１５の発明の画像通信端末用ユーザイン
タフェース装置は、第１４の発明において、前記通知部
が、端末利用者がカメラ部の撮影範囲から逸脱している
場合にはその逸脱量に応じて相手側画像の前記ディスプ
レイ上の表示を表示状態と非表示状態との間で段階的に
変化させることを特徴とする。

【００２６】

【作用】第１の発明の画像通信端末用ユーザインタフェ
ース装置によれば、利用者位置検出部が端末利用者の位
置を検出し位置情報を生成して利用者位置判別部へ送
る。利用者位置判別部には、カメラ部の撮影範囲に関す
る情報が格納されており、端末利用者がカメラ部の撮影
範囲内に在るかを判定し、判定結果である通知制御情報
を生成し通知部へ送る。通知部は通知制御情報に従い、
端末利用者に自身がカメラ部の撮影範囲内に在るか撮影
範囲外に在るかを端末利用者に対して通知する。通知に
は例えば、逸脱した時には逸脱を示す情報を提供し、逸
脱から復帰した際にはその情報の提示を停止し通常の状
態へ戻すといった方法をとる。

【００２７】第２の発明の画像通信端末用ユーザインタ
フェース装置によれば、受信画像処理部は通知制御情報
に従い、端末利用者がカメラ部の撮影範囲内に在る場合
には画像通信部で受信した相手側画像を、画像処理を加
えること無くあるいは無処理のままで画像信号としてデ
ィスプレイ部へ送り、また、端末利用者がカメラ部の撮
影範囲外に在る場合には受信した相手側画像に対して端
末利用者が撮影範囲外にあることを表現する画像処理を
施し、処理後の画像信号をディスプレイ部へ送る。

【００２８】第３の発明の画像通信端末用ユーザインタ
フェース装置によれば、通知用画像生成部では端末利用
者がカメラ部の撮影範囲から逸脱したことを表現する画
像を生成し通知用画像を画像合成切替処理部へ送る。画
像合成切替処理部は通知制御情報に従い、端末利用者が
カメラ部の撮影範囲内に在る場合には画像通信部で受信
した相手側画像を無処理で画像信号としてディスプレイ
部へ送り、端末利用者がカメラ部の撮影範囲外に在る場
合には通知用画像を画像信号としてディスプレイ部へ送
るあるいは相手側画像と通知用画像とを合成し画像信号
としてディスプレイ部へ送る。

【００２９】第４の発明の画像通信端末用ユーザインタ
フェース装置によれば、利用者位置判別部は通知制御情
報を画像合成切替処理部と受信画像処理部へ送る。通知
用画像生成部では端末利用者がカメラ部の撮影範囲から
逸脱したことを表現する画像を生成し通知用画像を画像
合成切替処理部へ送る。受信画像処理部は通知制御情報
に従い、端末利用者がカメラ部の撮影範囲内に在る場合
には画像通信部で受信した相手側画像を無処理で画像信
号として画像合成切替処理部へ送り、また、端末利用者
がカメラ部の撮影範囲外にある場合には受信した相手側
画像に対して端末利用者が撮影範囲外にあることを表現
する画像処理を施し、処理後の画像信号を画像合成切替
処理部へ送る。画像合成切替処理部は通知制御情報に従
い、端末利用者がカメラ部の撮影範囲内に在る場合には
画像信号を無処理で画像信号としてディスプレイ部へ送
り、端末利用者がカメラ部の撮影範囲外に在る場合には
通知用画像を画像信号としてディスプレイ部へ送るある
いは画像信号と通知用画像とを合成し画像信号としてデ
ィスプレイ部へ送る。

【００３０】第５の発明の画像通信端末用ユーザインタ
フェース装置によれば、通知用情報生成部は通知用制御
情報に基づきカメラ部の撮影範囲から被写体である端末
利用者が逸脱していることを表現する通知用情報を生成
し通知用情報出力部へ送る。通知用情報出力部は送られ
てきた通知用情報を端末利用者へ向けて出力を行う。

【００３１】第６の発明の画像通信端末用ユーザインタ
フェース装置によれば、利用者位置判別部は通知制御情
報を通知用情報生成部と、受信画像処理部または画像合
成切替処理部とへ送る。通知用情報生成部と受信画像処
理部または画像合成切替処理部は、通知制御情報に基づ
きカメラ部の撮影範囲から被写体である端末利用者が逸
脱していることを端末利用者に対して通知する動作を行
う。

【００３２】第７の発明の画像通信端末用ユーザインタ
フェース装置によれば第５、第６の発明において通知用
情報出力部が音声を端末利用者に対して出力する。

【００３３】第８の発明の画像通信端末用ユーザインタ
フェース装置によれば、端末利用者がカメラ部の撮影範
囲から逸脱した際には、ディスプレイ部に表示する相手
側画像の撮影範囲の変更、または、ディスプレイ部上に
おける相手側画像の描画位置の変更が行われる。

【００３４】第９の発明の画像通信端末用ユーザインタ
フェース装置によれば、端末利用者がカメラ部の撮影範
囲から逸脱した際には、ディスプレイ部に表示する相手
側画像の表示サイズの変更が行われる。

【００３５】第１０の発明の画像通信端末用ユーザイン
タフェース装置によれば、端末利用者がカメラ部の撮影
範囲から逸脱した際には、ディスプレイ部に表示する相
手側画像の明るさに関する特性の変更が行われる。

【００３６】第１１の発明の画像通信端末用ユーザイン
タフェース装置によれば、端末利用者がカメラ部の撮影
範囲から逸脱した際には、ディスプレイ部に表示する相
手側画像の色相に関する特性の変更が行われる。

【００３７】第１２の発明の画像通信端末用ユーザイン
タフェース装置によれば、端末利用者がカメラ部の撮影
範囲から逸脱した際には、相手側画像を表示するウィン
ドウの枠の表示の変更が行われる。

【００３８】第１３の発明の画像通信端末用ユーザイン
タフェース装置によれば、端末利用者がカメラ部の撮影
範囲から逸脱した際には、その逸脱量あるいは方向、ま
たは、逸脱した状態から復帰するための情報の提示が行
われる。

【００３９】第１４の発明の画像通信端末用ユーザイン
タフェース装置によれば、端末利用者がカメラ部の撮影
範囲から逸脱した際には、相手側画像を非表示状態にす
る。

【００４０】第１５の発明の画像通信端末用ユーザイン
タフェース装置によれば、端末利用者がカメラ部の撮影
範囲から逸脱した際には、その逸脱量に応じて相手側画
像の表示を表示状態と非表示状態との間で段階的に変化
させる。

【００４１】

【実施例】本発明の説明および記述にあたって、「端末
利用者」とは端末設置地点において端末を利用する自地
点側の利用者を指し、遠隔地の利用者（相手側利用者）
と区別している。また、以下の説明では、遠隔地の相手
とやり取りする画像は動画像あるいは準動画像を想定し
て説明するが、静止画像をやり取りする場合においても
目的とする効果の全てあるいは一部が得られる。また、
画像のみを通信する場合と、画像と音声の双方を通信す
る場合との双方に本発明を実施できる。画像と音声に加
えてさらに別の種類の情報をやり取りする場合であって
もよい。

【００４２】離れた場所にいる利用者同士が互いに画像
をやり取りしながら相手と会話や作業を行う環境（本明
細書ではこれを画像通信環境と呼ぶ）において対面のよ
うに自然な会話を実現するために、自地点側画像を表示
する必要が無く、かつ、利用者の意図的な要求が無い限
りにおいては、会話中にはカメラ部の撮影範囲の変更お
よび変更のための操作を伴わない端末ユーザインタフェ
ースが必要となる。以下、本発明のユーザインタフェー
スによれば、画像通信環境において自地点側画像を表示
することなく、かつ、会話中にカメラ部の撮影範囲を変
更する操作を伴わない、対面対話のような自然な会話が
行えるようになる。

【００４３】第１の発明の実施例について図面を用いて
説明する。図１に第１の発明の画像通信端末用ユーザイ
ンタフェース装置の一実施例を構成図で示す。利用者位
置検出部１０１が端末利用者の位置を検出し位置情報１
０４を生成して利用者位置判別部１０２へ送る。利用者
位置判別部１０２には、カメラ部の撮影範囲に関する情
報が格納されており、端末利用者がカメラ部の撮影範囲
内に在るかを判定し、判定結果である通知制御情報１０
５を生成し通知部１０３へ送る。通知部１０３は通知制
御情報１０５に従い、端末利用者に自身がカメラ部の撮
影範囲内に在るか撮影範囲外に在るかを端末利用者に対
して通知する。通知には例えば、端末利用者が撮影範囲
から逸脱した時には逸脱を示す情報を提示し、逸脱から
復帰した際には逸脱していたことを示していた情報の提
示を停止し通常の状態へ戻すといった方法をとること等
が考えられる。

【００４４】利用者位置検出部１０１についてさらに説
明する。利用者位置検出部は端末利用者の存在を検出し
たり端末利用者の位置を測定し、端末利用者の位置情報
１０４を出力する。位置情報は、特定の空間座標点を原
点（あるいは基準点）とした絶対的位置座標値や、また
は、端末装置やカメラ部と利用者との相対的な位置関係
を反映する情報や相対的な座標値（例えば絶対的位置座
標値の増減値など）であり、情報自体は数値やテキスト
情報、あるいは、電気信号や電磁波（光）、音波などの
物理量の変化として表され伝達される。利用者位置検出
部は位置センサなどの位置検出手段を内蔵する。この位
置検出手段は端末利用者と画像通信端末装置やカメラ部
との位置関係を実時間（あるいは実時間と同等の効果を
もつ時間間隔や遅延内）で測定できるもので、例えば磁
気センサ、超音波センサ、圧力センサ、加速度センサ、
赤外線センサの利用や、カメラ部入力画像に演算処理を
施すなどといった方式の利用が挙げられる。端末利用者
の利便性や会話の快適性の向上を図る点では、位置検出
手段には利用者にセンサや器具を接触あるいは装着する
必要のない非接触型のものを用いる方が良い。

【００４５】また、利用者位置判別部１０２についてさ
らに説明する。利用者位置判別部には位置情報１０４を
もとに端末利用者がカメラ部の撮影範囲内に存在するか
どうかを判断するために必要とする情報が格納される。
例えば、カメラ部の撮影範囲は座標値の範囲（−１＜ｘ
＜１など：ｘは座標値）として表され、利用者位置検出
部から送られてきた位置情報とを数値比較しカメラ部範
囲内かを判定する。位置情報が電気信号の変位として与
えられた場合にはカメラ部の撮影範囲を信号の物理量の
閾値や範囲（例えば、０．５Ｖ以上、あるいは、０．５
Ｖ〜０．８Ｖなど）として定めることもできる。

【００４６】利用者位置検出部と利用者位置判別部にお
ける処理に用いられる位置座標系について説明する。位
置情報の座標系の選び方については、利用者位置検出部
と利用者位置判別部とで共通の座標系をとるか、また
は、異なる座標系であっても適切な座標変換を行いカメ
ラ部の撮影範囲内にあるかどうかの判別が行えるように
する。この判別が行える限りにおいては、座標系（例え
ば直交座標系か極座標系かなど）の選択や、その座標原
点を実際の空間のどこに設定するかなどは任意に決めて
良いが、処理の簡素化の点で、座標原点は画像通信端末
装置またはカメラ部または利用者位置検出部などに設定
する方が効率的である。

【００４７】カメラ部の撮影範囲の位置座標値が動的に
変わる利用形態では、カメラ部の光軸の向きやカメラ部
の移動と連動して、利用者位置検出部や利用者位置判別
部の座標系が変更される。この場合には、利用者位置検
出部がカメラ部と端末利用者との相対的な位置関係を検
出し出力する方法、または、利用者位置検出部や利用者
位置判別部の座標系は固定で利用者判別部内のカメラ部
の撮影範囲に関する情報を更新する方法をとる。前者の
例としては、カメラ部に利用者位置検出部を固定設置す
る方法が挙げられる。この方法によるとカメラ部の動き
に連動して利用者位置検出部の座標系が自動的に変更さ
れるので、利用者位置検出部は常に端末利用者とカメラ
部との相対的な位置関係を検出することになる。さら
に、この方法では利用者位置判別部に格納してあるカメ
ラ部の撮影範囲に関する情報は固定したままで判別が可
能である。後者の例については、利用者位置判別部がカ
メラ部の撮影範囲をセンサなどで動的に検出しその結果
に基づき位置判定に必要な数値（例えばカメラ部範囲を
示す座標値など）を修正、変更する方法が挙げられる。
このようなカメラ部の撮影範囲が変わるような状況と
は、カメラ部あるいはカメラ部を含む端末装置を移動さ
せたり、カメラ部の撮影範囲を変更するような場合が挙
げられる。本発明を実施することで、例えば端末の電源
投入時にカメラ部の撮影範囲の座標値の設定や測定ある
いはキャリブレーションを行うだけで、その後のカメラ
操作を行わずに済むようにできる。カメラ部の撮影範囲
が固定できる用途では、端末設置時に撮影範囲の設定を
行うだけで済む。端末使用中にカメラ部の撮影範囲を変
化させる場合には、変更の度に撮影範囲の座標値を設定
や測定をするようにする。

【００４８】カメラ部の撮影範囲の設定、つまり、カメ
ラを向ける方向やレンズ特性（焦点距離など）の設定
は、例えば、双方の端末利用者が相対した状況を作り出
す場合には、相手側画像に対して端末利用者が適切な距
離間隔をもって相対する位置（ディスプレイ画面を正視
する位置など）に位置した際に端末利用者がカメラ部に
よって、適切に撮影されるように設定する。また、この
ように双方が相対するような光学系（ディスプレイ画面
およびカメラ）の配置を選ぶ方が自然な会話環境を実現
する上では効果が高い。

【００４９】利用者位置判別部１０２についてさらに説
明する。利用者位置判別部は端末利用者がカメラ部の撮
影範囲内にいるかを判定するが、その判定は、「いる／
いない」などの２値的な場合と、どの程度だけ撮影範囲
から外れているかといった連続的な逸脱量として判定す
る場合とがある。人物像のカメラ部撮影範囲からの逸脱
は連続的な現象、つまり、顔や人体の部位が段階的かつ
連続的に逸脱してゆくため、２値的な値として判定する
場合にはどの逸脱状態までが撮影範囲外に該当するかを
定めておく。一方、逸脱しているかどうかを連続値とし
て判定する場合の具体例としては、人物像における代表
点（例えば頭部の中心など）と、撮影範囲の代表点（例
えば撮影範囲を多面体として近似した場合の重心など）
や撮影範囲の境界との間の距離を算出しその数値をもっ
て逸脱量とする例が挙げられる。また、人物像がカメラ
部撮影範囲に占める面積の比率として表す方法も連続値
の一例である。

【００５０】端末利用者の位置判定結果は、通知制御情
報１０５として出力されるが、その判定結果を２値と連
続値のどちらとして出力するかは通知部の特性に依存す
る。通知部の出力特性が２値的、つまり、情報の出力が
ＯＮかＯＦＦかといった制御で中間的な出力表現が出来
ない場合については、逸脱の有無の判定は２値的に行う
方がよい。また、利用者位置検出部の出力する位置情報
が２値的な場合についても判定は２値的に行う方が良
い。通知の際の情報が連続的に変化するような場合に
は、連続値として表されるような通知制御情報が出力さ
れる。

【００５１】通知制御情報には、判定結果だけでなく通
知部の装置を制御するコマンドを含めることが出来る。
この情報自体は文字列や数値などの記号列として、ある
いは、接点信号、電圧や電流、電磁波、音波といった物
理量の変化として表され伝達される。また、通知部が複
数の処理部や情報出力装置を備える場合には、特定の処
理部や出力装置を選択的に動作するコマンド体系とす
る。具体的には、コマンドにＩＤのようなヘッダを設け
ることで実現される。

【００５２】位置情報や通知制御情報の伝送を無線によ
り行うことも可能である。この場合には、通知部や利用
者位置判別部や利用者位置検出部の配置を任意に行える
ようになる。例えば、利用者位置検出部や通知部を端末
から分離し利用者に携帯させる、といった事ができるよ
うになる。室内に複数の利用者位置検出部や通知部を設
置する場合にも、室内や端末周辺に電線を張り巡らす必
要がなくなり自由にかつ効率よく設置できる。

【００５３】ここで、通知部１０３について説明する。
通知部は端末利用者がカメラ部の撮影範囲から外れた事
をカメラ部の被写体である端末利用者へ通知する。その
通知方法には、端末利用者がカメラ部の撮影範囲から外
れたことを知覚し認識できる方法を用いる。例えば、Ｃ
ＲＴやＬＣＤといったディスプレイ装置上において情報
を提示または消去する方法、ランプや発光ダイオードな
どの発光体を点滅あるいは明滅させる方法、物体をモー
タなどの駆動装置によって連動させる方法、音波を出力
する方法、端末利用者へ振動や圧力の伝達あるいは物体
接触といった力学的な作用を及ぼす方法、電気的な刺激
を身体特に皮膚に対して与える方法、匂いなどの気体成
分の放出する方法などが挙げられる。ただし、快適な端
末利用環境を実現するためのユーザインタフェースとし
ては、撮影範囲から外れたことを直感的にかつ容易に理
解できるものであり、また、複雑な操作手順を行わず、
かつ、違和感の少ないものが望ましい。

【００５４】以下、端末利用者への通知方法やその表現
方法に関して具体的に説明する。本発明が提供するユー
ザインタフェースは、端末利用者の位置がカメラ部の撮
影範囲から外れたことを端末利用者が直感的にかつ容易
に理解でき、複雑な操作手順を伴わず違和感の少ない通
信対話環境を提供する。この端末利用者への通知に関し
ては以下に説明するＡ，Ｂ，Ｃの３つの単独方式、ある
いは、それら単独方式を組み合わせることによって実現
する。

【００５５】Ａ方式は、利用者位置がカメラ部の撮影範
囲内ならば相手側画像を正常表示し、撮影範囲外ならば
相手側画像の表示形態を変更する。端末利用者は自分自
身がカメラ部の撮影範囲内に在るかどうかを、相手側画
像が正常表示されているか否かによって知る方法であ
る。

【００５６】Ｂ方式は、利用者がカメラ部の撮影範囲外
にある場合には、端末利用者が撮影範囲外に在ること
を、相手側画像とは別の画像を生成して提示し通知する
方法である。相手側画像に別の画像やイメージをオーバ
ーレイする方法や、相手側画像を表示している以外の表
示領域に画像やメッセージ（文字、ＣＧ、イメージ情
報）を表示する方法がある。

【００５７】Ｃ方式は、利用者がカメラ部の撮影範囲外
にある場合には、相手側画像の表示形態はそのまま継続
し、相手側画像を表示しているディスプレイ部とは独立
した手段によって撮影範囲外であることを端末利用者に
通知する方法である。具体的には、音声の利用、通知用
表示灯の点滅、別のディスプレイ手段によるメッセージ
（文字、ＣＧ、イメージ情報）の表示、振動や接触とい
った力学的な手段によって利用者に通知する方法があ
る。

【００５８】Ａ方式は第２の発明によって、Ｂ方式は第
３の発明によって、Ｃ方式は第５の発明によって実現さ
れる。第４の発明はＡ方式とＢ方式を複合したものであ
る。第６の発明はＡ＋Ｃ、またはＢ＋Ｃ、または、Ａ＋
Ｂ＋Ｃ方式といった、Ａ、Ｂ各方式にＣ方式を複合した
ものである。各方式の複合によって表現自由度の高い多
彩な通知表現が得られるようになる。

【００５９】第２の発明の実施例について図面を用いて
説明する。図２に第２の発明の画像通信端末用ユーザイ
ンタフェース装置の一実施例を構成図で示す。受信画像
処理部２０１は通知制御情報１０５に従い、端末利用者
がカメラ部の撮影範囲内に在る場合には画像通信部で受
信した相手側画像２９０を、画像処理を加えること無く
あるいは無処理のままで画像信号２９１としてディスプ
レイ部へ送り、また、端末利用者がカメラ部の撮影範囲
外にある場合には受信した相手側画像に対して端末利用
者が撮影範囲外にあることを表現する画像処理を施し、
処理後の画像信号２９１をディスプレイ部へ送る。

【００６０】撮影範囲外にあることを表現する画像処理
について説明する。画像処理には通常表示（あるいは正
常表示、つまり、相手側画像がそのまま表示されている
状態）との差を際立たせる処理を用いる。例えば、相手
側画像のスクロールや描画位置の変化、切り取りなどの
描画部分の変化、明度や色相の変更、拡大縮小や変形な
どの処理、微分または積分等を含む画像の数値的な処
理、静止画表示、コマ送りあるいはコマ落ち表示、モザ
イクやワイプといった特殊効果の付加、上下左右の反
転、回転、画面分割、クロマキー合成といった画像処理
が挙げられる。施す処理としては、カメラ部の撮影範囲
から外れていることを直感的に理解する方法を用いる方
が効率が良い。この例として、端末利用者の位置にあわ
せて処理を加える値や深さを変化させる方法がある。

【００６１】第３の発明の実施例について図面を用いて
説明する。図３に第３の発明の画像通信端末用ユーザイ
ンタフェース装置の一実施例を構成図で示す。通知用画
像生成部３０２では端末利用者がカメラ部の撮影範囲か
ら逸脱したことを表現する画像を生成し通知用画像３９
０を画像合成切替処理部３０１へ送る。画像合成切替処
理部３０１は通知制御情報１０５に従い、端末利用者が
カメラ部の撮影範囲内に在る場合には画像通信部で受信
した相手側画像２９０を無処理で画像信号３９１として
ディスプレイ部へ送り、端末利用者がカメラ部の撮影範
囲外に在る場合には通信用画像３９０を画像信号３９１
としてディスプレイ部へ送るあるいは相手側画像２９０
と通知用画像３９０とを合成し画像信号３９１としてデ
ィスプレイ部へ送る。

【００６２】ここで、通知用画像３９０について説明す
る。通知用画像は相手側画像と切り替えて表示する場合
と、相手側画像にオーバーレイまたはスーパーインポー
ズして表示する場合とがある。通知用画像には通知によ
り相手側から送られてきている相手側画像以外の画像を
用いる。また、提示する通知画像には、カメラ部の撮影
範囲から外れていることを端末利用者が直感的に理解で
きる画像が良い。例えば、「カメラに映っていません」
「相手から見えない位置に立っています」といった撮影
範囲外にあることを警告する内容のテキスト文字を画面
に表示したり、矢印や×印といった警告を意味する記号
やシンボルを表示したり、撮影範囲外にあることを示す
イラストや画像を表示する。また、警告を意味しなくて
も、相手側とは全く異なる画像、例えば、相手がいると
ころとは別の場所の風景画像、といった会話とは無関係
な画像を提示することでも目的とする効果が得られる。
また、発明の目的をカメラの撮影範囲から外れているこ
とを端末利用者に通知することに限定するならば、通知
用画像として自地点側のカメラ部が撮影している画像を
利用することもできる。

【００６３】第２の発明および第３の発明における画像
信号２９１，３９１および表示画像について説明する。
第２の発明および第３の発明においてディスプレイ部へ
送る画像は、画面全体が相手側画像あるいは処理を施し
た相手側画像によって占められる場合と、相手側画像は
画面全体の中の小ウィンドウとして表示される場合とが
ある。後者は相手側画像を単独で表示する場合である。
後者の例としては背景となる画像の上に相手側画像をウ
ィンドウとしてオーバーレイ表示する場合や、相手側画
像を縮小し表示領域の一部分として表示する場合が挙げ
られる。ウィンドウ表示を行う場合の背景となる画像
は、第２の発明では受信画像処理部またはディスプレイ
部側で生成される。背景画像と相手側画像との合成は、
背景画像の生成を受信画像処理部で行う場合には受信画
像処理部において行われる。また、背景画像がディスプ
レイ部側で生成される場合には、ディスプレイ部が背景
画像の生成および背景画像と相手側画像との合成および
合成後の画像の表示を行う機能を有する。第３の発明で
は、背景となる画像の生成は第２の発明の例で示したデ
ィスプレイ部側で生成する場合に加えて、通知用画像生
成部において生成する場合が挙げられる。この場合に
は、相手側画像と背景画像との合成は画像切替合成部に
おいて行われる。

【００６４】第４の発明の実施例について図面を用いて
説明する。図４に第４の発明の画像通信端末用ユーザイ
ンタフェース装置の一実施例を構成図で示す。利用者位
置判別部１０２は通知制御情報１０５を画像合成切替処
理部３０１と受信画像処理部２０１へ送る。通知用画像
生成部３０２では端末利用者がカメラ部の撮影範囲から
逸脱したことを表現する画像を生成し通知用画像３９０
を画像合成切替処理部へ送る。受信画像処理部２０１は
通知制御情報に従い、端末利用者がカメラ部の撮影範囲
内に在る場合には画像通信部で受信した相手側画像を無
処理で画像信号２９１として画像合成切替処理部３０１
へ送り、また、端末利用者がカメラ部の撮影範囲外に在
る場合には受信した相手側画像に対して端末利用者が撮
影範囲外にあることを表現する画像処理を施し、処理後
の画像信号２９１を画像合成切替処理部３０１へ送る。
画像合成切替処理部３０１は通知制御情報１０５に従
い、端末利用者がカメラ部の撮影範囲内に在る場合には
画像信号２９１を無処理で画像信号３９１としてディス
プレイ部へ送り、端末利用者がカメラ部の撮影範囲外に
在る場合には通知用画像３９０を画像信号４９１として
ディスプレイ部へ送るあるいは画像信号２９１と通知用
画像３９０とを合成し画像信号４９１としてディスプレ
イ部へ送る。

【００６５】図４に示す実施例では、利用者位置判別部
から受信画像処理部と画像合成切替処理部との双方に通
知制御情報１０５が送られるが、通知制御情報に、受信
画像処理部と画像合成切替処理部とを独立に制御できる
命令、あるいは、同一命令だが受信画像処理部と画像合
成切替処理部とを互いに排他的に制御する命令を設ける
ことで、画像合成切替処理部と受信画像処理部の双方ま
たはどちらか一方のみを機能させる（つまり端末利用者
への通知を行う状態にする）ことができるようになり端
末利用者への通知画像表現を、相手側画像へ処理を施す
タイプと、通知用画像へ切り替えるタイプと、この両方
の画像を合成するタイプといった具合に、その表現の種
類を増やすことができる。また、利用者位置判別部にお
いて、画像合成切替処理部と受信画像処理部とのどちら
か一方へのみ通知制御情報を送る機能を設けることによ
っても、通知表現の自由な切替や選択が可能となる。

【００６６】画像の切替の方法には、相手側画像を瞬時
に消去した後に通知用画像を瞬時に表示する方法と、相
手側画像と通知用画像との表示面積を制御しながら徐々
に切り替える方法（ワイプ手法など）と、２つの画像信
号を合成し両方の画像の信号の比率を制御しながら切り
替える方法（オーバーラップ切替手法など）がある。

【００６７】第５の発明の実施例について図面を用いて
説明する。図５に第５の発明の画像通信端末用ユーザイ
ンタフェース装置の一実施例を構成図で示す。通知用情
報生成部５０１は通知制御情報１０５に基づきカメラ部
の撮影範囲から被写体である端末利用者が逸脱している
ことを表現する通知情報５０３を生成し通知用情報出力
部５０２へ送る。通知用情報出力部５０２は送られてき
た通知情報５０３を端末利用者へ向けて出力を行う。

【００６８】ここで、通知用情報生成部５０１および通
知用情報出力部５０２について説明する。通知用情報生
成部は通知制御情報１０５を解析し端末利用者に提示す
る情報の生成を行う。通知用情報５０３は電気信号また
は光を含む電磁波による信号として通知用情報生成部か
ら通知用情報出力部へと送られる。通知用情報出力部は
通知情報を端末利用者が知覚認知できる物理量に変換す
る装置である。通知用情報生成部において出力される通
知情報の信号の種類は通知用情報出力部の入力特性に依
存し、通知用情報出力部がディスプレイ部ならば画像信
号（映像信号）が、増幅器やスピーカなどを含めた音声
出力装置ならば音声信号が、発光ダイオードや電球など
の発光体あるいはブザーやリレーやモータといった電流
の導通により動作する装置ならばそれらを動作させるた
めの電流あるいは接点信号が、文字や数字や記号を表示
する装置ならばそれらを電気的に符号化した情報が、記
号化された制御コマンドで動作する場合には制御コマン
ドがそれぞれ生成され、通知用情報出力部へ送られる。
通知用情報出力部が作動することにより、画像あるいは
文字あるいは音声あるいは振動や接触感といった力学的
な作用が端末利用者に対して提示される。

【００６９】また、通知用情報出力部が複数個から成る
構成も効果的である。これには同種の通知用情報出力部
だけで構成する場合と、画像と音声といった異なる種類
の情報を出力する通知用情報出力部から構成する場合と
がある。例えば、複数の同種の通知用情報出力部をそれ
ぞれを離して配置することで、端末利用者が通知を知覚
認知できる空間を広げることができる。また、複数の異
種の通知用情報出力部を動作させた場合には、通知用情
報出力部の個々の欠点を補う使い方を可能にする。画像
と音声、または、画像とブザーの振動を同時に提示す
る、利用者に振動体を携帯させてその振動と画像音声の
提示とを同時に行う、といった方法をとることで、端末
利用者が画像に注目していない場合や、あるいは、視覚
と聴覚のいずれかの障害を持つ端末利用者に対して通知
を行うことが可能となる。複数個の通知用情報出力部を
制御する場合には、通知用情報生成部は通知用情報出力
部のそれぞれに対して独立に通知情報を送れるように通
知情報の出力選択手段を内蔵する。

【００７０】第２、第３、第４の発明と、第５の発明と
の違いを図面を用いて説明する。第２、第３、第４の発
明を画像端末装置に適用した一実施例を図６に示す。こ
れら発明では相手側から送られてきた相手側画像２９０
の表示状態あるいは相手側画像２９０の周辺の表示状態
（例えばウィンドウ表示をしている場合には背景となる
画像や相手側画像のウィンドウの枠などの表示状態）を
変化させ、その変化をもって端末利用者への通知を行
う。一方、第５の発明では、図７に示すように、通知部
はディスプレイ部と独立しており、端末利用者への通知
を相手側画像の表示環境とは独立した手段によって行
う。

【００７１】第６の発明の実施例について図面を用いて
説明する。図８に第６の発明の画像通信端末用ユーザイ
ンタフェース装置の一実施例を構成図で示す。利用者位
置判別部１０２は通知制御状態１０５を通知用情報生成
部５０１と、受信画像処理部２０１または画像合成切替
処理部３０１とへ送る。通知用情報生成部５０１と受信
画像処理部２０１または画像合成切替処理部３０１は、
通知制御情報に基づきカメラ部の撮影範囲から被写体で
ある端末利用者が逸脱していることを端末利用者に対し
て通知する動作を行う。第６の発明では、相手側画像の
表示状態の変化による通知と、それとは独立した通知手
段とを選択して利用することができるようになり、通知
に対する表現の種類を多くできる。また、相手側画像を
利用する方式と音声による通知手段とを組み合わせるこ
とで、視覚と聴覚との双方のモーダルを利用した欠点の
少ない通知（例えば、常に画面に注目していなくても自
分が撮影範囲から外れているのだとわかる、など）が実
現する。

【００７２】第７の発明は、第５または第６の発明にお
いて通知用情報出力部が音声を端末利用者に対して出力
するものである。

【００７３】第８の発明の実施例について図面を用いて
説明する。図９は端末利用者がカメラ部の撮影範囲から
逸脱したことをディスプレイ部に表示する相手側画像の
描画範囲の変更、または、ディスプレイ部上における相
手側画像の描画位置の変更によって表すことを示した一
例である。図９（ａ）は相手側画像９００がディスプレ
イ画面９０１上で小ウィンドウ９０２として表示されて
いる状態を示す。ただし、相手側の利用者もカメラの撮
影範囲内にあるとしている。小ウィンドウ９０２に表示
されるのは相手側画像９００の全体あるいは一部分であ
る。以下の説明では、この図９（ａ）の表示状態が端末
利用者がカメラ部の撮影範囲内にある事を意味し、これ
以外の表示状態であれば端末利用者がカメラ部の撮影範
囲外にいることを示すものとして説明する。また、この
ように相手側画像と正面から相対しているように表示さ
れる形式あるいはそれに準ずる表示形式を、本発明では
正常表示または通常表示と呼んでいる。ただし、端末利
用者が通常または正常または撮影範囲外へ逸脱した状態
から復帰したと認知する表示形式であるならば、図９
（ａ）に示した以外の表示形式を正常表示として設定し
ても良い。図９（ｂ）は、端末利用者がカメラ部の撮影
範囲から外れた場合には相手側画像９００が小ウィンド
ウ９０２内でスクロールする様子を示す。９０３は描画
されなかった領域あるいは相手側画像とは異なる画像領
域を表す。図９（ｃ）は、端末利用者がカメラ部の撮影
範囲から外れた場合には、相手側画像９００の描画開始
位置を変更し、一部分のみが表示される様子を示す。９
０４は描画されなかった領域あるいは相手側画像とは異
なる画像領域を表す。図９（ｄ）は、端末利用者がカメ
ラ部の撮影範囲から外れた場合には、相手側画像の一部
分を切り出し表示した例を示す。なお、図９（ａ）、図
９（ｂ）、図９（ｃ）における小ウィンドウ９０２がデ
ィスプレイ画面９０１と一致している場合であっても目
的とする効果が得られる。

【００７４】ディスプレイ部上における相手側画像の描
画位置の変更する別の例を図１０に示す。図１０は相手
側画像を小ウィンドウ９０２としてディスプレイ画面９
０１上に表示する一例である。ディスプレイ画面９０１
にはさらに枠１００１が表示される。小ウィンドウ９０
２は端末利用者の位置にあわせて表示位置を変更する。
端末利用者がカメラ部の撮影範囲内にいる場合には小ウ
ィンドウは枠１００１の内部に表示され、範囲外にいる
場合には小ウィンドウが枠からはみ出して表示するよう
にする。また、枠１００１を表示しないで、ディスプレ
イ画面９０１の輪郭を枠１００１と同じように機能させ
ることもできる。枠１００１は表示せずに小ウィンドウ
９０２をディスプレイ画面９０１上で移動させ、かつ、
小ウィンドウ９０２の移動量が大きく小ウィンドウ９０
２がディスプレイ画面９０１からはみ出す場合にははみ
出した領域を表示しないあるいは小ウィンドウ９０２全
体を表示しない、とすることでも目的とする効果が得ら
れる。

【００７５】第９の発明の実施例について図面を用いて
説明する。図１１は端末利用者がカメラ部の撮影範囲か
ら逸脱したことをディスプレイ部に表示する相手側画像
の表示サイズの変更によって表すことを示した一例であ
る。端末利用者がカメラ部の撮影範囲から外れた場合に
は、相手側画像を拡大あるいは縮小表示する。拡大ある
いは縮小に際しては、元の画像の縦横の比率を保存す
る、または、画像が表現する形状が変わらないようにし
て行う場合と、縦のみ、あるいは、横のみといった具合
に画像自体に変形を伴う場合とがあり、そのどちらでも
目的とする効果が得られる。小ウィンドウ９０２がディ
スプレイ画面９０１を仮想的にはみ出すような表示であ
っても良い。

【００７６】第１０の発明の実施例について説明する。
第１０の発明では端末利用者がカメラ部の撮影範囲から
逸脱したことをディスプレイ部に表示する相手側画像の
明るさに関する特性の変更によって表す。明るさに関す
る特性とは具体的には明度やコントラストなどを指す。
例えば、利用者がカメラ部の撮影範囲内にあるときに図
９（ａ）に示すような相手側画像９００の表示を適切な
明度によって表示し、撮影範囲から逸脱した場合には相
手側画像９００の明度を高くする、あるいは低くする、
あるいは明度を時間的に変化させブリンキングする、コ
ントラストを過度に強調する、あるいはコントラストを
過度に平滑化するといった表示を行う。

【００７７】第１１の発明の実施例について説明する。
第１１の発明では端末利用者がカメラ部の撮影範囲から
逸脱したことをディスプレイ部に表示する相手側画像の
色相に関する特性の変更によって表す。例えば、利用者
がカメラ部の撮影範囲内にあるときには図９（ａ）に示
すような相手側画像９００の表示を適切な色相の数値あ
るいは色相のバランスがとれた状態で表示し、撮影範囲
から逸脱した場合には相手側画像９００の色相を変更す
る。色相の変更には例えば写真などのネガ表示にした
り、ＲＧＢといった色相を決定する数値を強制的に変更
し見た目に違和感のある表示になるようにする、カラー
表示を白黒表示にする、特定の色だけを強調するといっ
た方法が挙げられる。

【００７８】第１２の発明の実施例について図面を用い
て説明する。図１２は端末利用者がカメラ部の撮影範囲
から逸脱したことを、相手側画像を表示するウィンドウ
の枠の表示を変化させることで表すことを示した一例で
ある。端末利用者がカメラ部の撮影範囲から逸脱した場
合には、ウィンドウの枠を強調する表示を行う。例え
ば、画像の外側を囲むようにＣＧ等を用いて枠を描く、
あるいは、その枠を太く描く、枠の色を変更する、枠の
明るさを変えブリンキングさせるといった方法がある。
また、枠ではなく、ウィンドウにＣＧなどを用いて影や
立体感を付けるといった方法を用いても目的とする効果
が得られる。

【００７９】第１３の発明の実施例について説明する。
第１３の発明では端末利用者がカメラ部の撮影範囲から
逸脱したことを、その逸脱量あるいは方向、または、逸
脱した状態から復帰するための情報を通知する。例えば
相手側画像などに加える処理の量（例えば、変形の大き
さやスクロールの大きさなど）を、端末利用者がカメラ
部の撮影範囲からどの程度離れているか、どの方向に移
動したかといった情報に対応づけて通知を行う。逸脱量
または逸脱した方向の通知方法の具体例は、図９（ｂ）
に示した画像をスクロールする表示形式や図９（ｃ）に
示す相手側画像の描画開始位置を変更する表示形式にお
いてスクロール量や描画開始位置をカメラ部の撮影範囲
からの逸脱量や逸脱した方向と関連づける方法がある。
逸脱量が大きくなればなるほどスクロールする量を増や
したり、描画開始位置をずらして表示される面積を少な
くする、といった方法が挙げられる。図１０に示したデ
ィスプレイ画面上の基準から相手側画像をずらして表示
する手段では、ズレの量や方向をカメラ部の撮影範囲の
逸脱量や方向と関連づけることで実現できる。また、図
１３（ａ）に示すように画面上に矢印などの記号１３０
１を表示したり、図１３（ｂ）に示すように逸脱してい
ることを示す文字情報１３０２を表示したり、図１３
（ｃ）に示すように逸脱量や方向に関連づけて相手側画
像９００を変形したり、図１３（ｄ）に示すように相手
側画像を覆い隠すことができる表示物１３０３を逸脱量
や逸脱の方向と関連づけて画面上で移動あるいはスクロ
ールさせるといった方法がある。図１３（ｅ）に示すよ
うに相手側画像の上に矢印などの記号１３０４を合成表
示し逸脱量や逸脱の方向を示すことができる。逸脱して
いる量については、図１３（ａ）および図１３（ｅ）の
ように矢印で表す場合には矢印の大きさや長さや色、明
るさによって表すことができる。図１３（ｂ）のように
文字で表す場合には逸脱量を数値や文字で具体的に表し
たり、形容詞、副詞による修飾表現を用いて逸脱の程度
を表す方法をとる。図１３（ｃ）に示す表現では逸脱量
は変形の程度や面積比として表される。図１３（ｄ）で
は逸脱量は相手側画像が覆い隠されている面積に対応づ
ける。逸脱している方向については、図１３（ｃ）に示
す表現では変形している角度や形によって表される。図
１３（ｄ）に示す表現では相手側画像を覆い隠す位置や
移動やスクロール動作の方向として表される。

【００８０】逸脱した状態から復帰するための情報につ
いて説明する。端末利用者がカメラ部の撮影範囲から逸
脱した場合には、逸脱した状況を示す方法以外に、どち
らの方向へどれだけの位置だけ移動すればカメラの撮影
範囲に復帰できるかを通知する方法がある。例えば、図
１３（ｂ）では端末利用者がどちらへ移動すれば良いか
を文字情報で示している。図１３（ａ）の矢印は、逸脱
している方向を示す場合と、カメラの撮影範囲内に復帰
するための方向とを示す場合とがある。端末利用者を混
乱させないためには、逸脱の状態を示すのか、復帰のた
めの情報を示すのかを、どちらか一方に統一しておけば
よい。また、図１３（ｃ）のように擬似的な立体感のあ
る表示を利用すれば、端末利用者がどちらへ移動すれば
相手側画像と正視する状態になるかが直感的に理解でき
る（図では右側へ移動すれば、相手と相対する位置にな
ることが表されている）。図１３（ｄ）では、相手側画
像が隠される面積が少なくなるように移動することで端
末利用者が移動すべき方向や量が表される。また、図９
（ｂ）、図９（ｃ）、図１０に示す表示形式によって
も、スクロール量や描画開始位置を逸脱した状態から復
帰するための情報として関連づけを表すことで目的とす
る効果が得られる。

【００８１】逸脱した状態はカメラに対して上下左右だ
けでなく、前後関係においても存在する。例えば、カメ
ラのフレームから被写体がはみ出したり焦点が合わせら
れなくなったり、あるいは、端末利用者がカメラから離
れすぎて小さく表示されるといった障害が起こる場合が
ある。その場合には、図９（ｄ）や図１１や図１２に示
すような表示形式を用いることで前後の逸脱の様子を表
現することができる。最適なカメラ撮影位置から逸脱し
た場合には、図９（ｄ）では相手側画像の表示が欠ける
ように見え、図１１の表示では相手が小さく表示された
り大きく表示され、図１２の表示では枠が強調されて表
示される。特に、図９（ｄ）や図１１の表示は遠近感と
の関連性があり、前後に逸脱している様子を利用者に直
感的に伝えられる。また、矢印や文字などを表示する方
法でも目的とする効果が得られる。

【００８２】第１４の発明について説明する。第１４の
発明では、端末利用者がカメラ部の撮影範囲から逸脱し
ている場合には相手側画像を非表示状態にする。非表示
状態とは、相手側の様子がディスプレイ画面上に映って
いない状態を指し、例えば図１４に示すように小ウィン
ドウ９０２に相手側画像が表示されていない状態や相手
側画像とは別の画像が表示されている状態、小ウィンド
ウの上に相手側画像とは別の画像がオーバーレイ表示さ
れて相手側画像が見えなくなっている状態、ディスプレ
イ画面から相手側画像を表示するための小ウィンドウが
消滅した状態などを指す。図１４は端末利用者がカメラ
部の撮影範囲から逸脱した場合にはディスプレイ画面に
は非表示画像１４０１が表示される様子を表している。
非表示画像には無信号による黒色の画面表示の他に、端
末利用者が非表示状態であることがわかる画像を表示し
ても良い。

【００８３】端末利用者がカメラ部の撮影範囲から逸脱
した場合に相手側画像を非表示にすることの有効性につ
いて説明する。対面で相手と会話を行う場合には、通常
は互いに相手の顔が常に見えている状態にある。一般の
利用者にとってはこの対面での会話状況が自然で違和感
のないものとなる。ところが、従来の画像通信端末装置
においては、相手の姿は見えないが自分は相手から見ら
れている（あるいはその逆）といった状況が発生する。
これは例えば片側の利用者が自地点側のカメラの撮影方
向を自分自身が映らない方向に向けた場合などに相当す
る。また、カメラ部の撮影範囲外であっても従来の端末
ではディスプレイ上の相手側画像は見ることができる。
このような、どちらか一方の利用者だけが他方の利用者
の姿を見ているという状況は、対面環境とは著しい差異
であり不自然な印象を利用者に与える。また、見られて
いる側の利用者にとっては監視されているといった悪い
印象を与える。このような不均衡が生じる対話環境は結
果として対話相手に自分の姿が見えているか、また、相
手側には自分がどのように映っているかを判断できなく
しており、そのため、自地点側画像を表示し相手にどの
ような画像を送信しているかを端末利用者がモニタする
必要性を生じている。これら問題を解決するためには、
相手が映っている場合には自分も相手から見られている
（つまり、自分がカメラの撮影範囲から逸脱していると
きには相手側の画像を見ることは出来ない）という状況
を作り出せばよい。双方の端末利用者がカメラの撮影範
囲に居るときにはじめて画像を介した会話が可能となる
ので、仮想的に互いの利用者が相対したような状況を作
り出すだけでなく、カメラの撮影範囲内に立つように自
然に端末利用者を誘導することにもつながる。また、自
分の動き（位置の変化）と画面上の表示とが連動するの
で、利用者の関心はカメラよりもむしろ画面上の変化の
方へ引きつけられる。このことは間接的にはカメラの存
在を隠蔽するのにも貢献し、カメラで撮影されるといっ
た心理的な緊張感や違和感を除去または軽減することが
できる。

【００８４】第１４の発明では、片方の端末利用者がカ
メラの撮影範囲から逸脱した状況では、双方の利用者が
互いに相手の姿が見えない状態になる。つまり、逸脱し
た側では本発明のユーザインタフェースにより相手側画
像が非表示状態になり、また、相手側では、利用者がカ
メラの撮影範囲から逸脱しているので、必然的に相手が
映っていない画面を見ていることになる。相手側画像が
見える範囲がカメラの撮影範囲となるので、相手が自分
側のどの範囲までを見ているのかという事を、自分の立
つ位置によって直感的に理解できるようになる。言い換
えれば、相手側画像が表示されない位置に立てば自分は
相手から見えていないことになり、プライバシーやセキ
ュリティの確保が行いやすくなる。従来は自地点側画像
をモニタする必要があり端末に接近した位置でなければ
確認できなかったが、本発明では相手側画像が表示され
ているか否かで知ることができるので、端末から離れた
位置でも相手側画像の表示状態を見るだけで自分が相手
側に映っているかを確認できるようになるといったメリ
ットもある。片方の利用者がカメラの撮影範囲から逸脱
した場合には、双方の端末において本発明のユーザイン
タフェースにより相手側画像を非表示状態にすることで
も同じ効果が得られる。その場合には、逸脱した側から
相手側へ非表示状態にするための制御コマンドを送信す
るようにし、そのための通信インタフェースを備えるこ
とで実現できる。その際にやり取りされる制御コマンド
は利用者位置判別部などで解析するようにする。このよ
うに、本発明では相手の画像を正しく見たい場合には自
分も撮影範囲内に居なければならないので、互いに相手
の姿を観察しあう環境が自然に作り出される。さらに、
相手から一方的に監視されているような印象が強い従来
の画像通信の欠点をも軽減する効果がある。

【００８５】第１５の発明について説明する。第１５の
発明では、端末利用者がカメラ部の撮影範囲から逸脱し
ている場合には、その逸脱量に応じて相手側画像の表示
を表示状態と非表示状態との間で段階的に変化させる。
段階的な変化とは基本的には連続的な変化を意味する
が、表示状態と非表示状態の間に有限個の中間状態を設
定しその中間状態のいくつかを経由して別の表示状態へ
至るような離散的な変化であっても目的とする効果を得
ることは可能である。第１５の発明の実施には例えば端
末利用者へカメラ部の撮影範囲からの逸脱量が通知でき
る表示形式を応用する。具体的には、図９（ｂ）、図９
（ｃ）、図９（ｄ）に示す表示形式において逸脱量を反
映する表示を行い、かつ、利用者がカメラ部の撮影範囲
から逸脱した場合に相手側画像が表示されなくなるよう
にすればよい。同様に、図１０、図１１、図１３
（ｃ）、図１３（ｄ）に示す表示方式でも表示状態と非
表示状態を段階的に変化させることができ、目的とする
効果が得られる。

【００８６】表示状態と非表示状態との間を段階的に変
化させることの有効性について説明する。表示状態と非
表示状態を瞬間的に切り替えた場合には端末が正常に動
作しているにもかかわらず、通信が切断された、あるい
は、端末が故障した、端末が誤動作したなどといった誤
解を端末利用者に与える可能性がある。表示と非表示と
を連続的な変化として表すことで、端末が相手側画像の
表示の様子を意図的に変化させているということを理解
させやすくなり、利用者が機能を誤解する可能性を低減
できる。

【００８７】対面会話では、相手が瞬時に姿を表したり
消したりといった状況はほとんど発生しない。稀にその
ような相手が突然現れるような状況が生じたとしても、
それは利用者を驚かしたり不安にさせる場合がほとんど
である。つまり、会話を行うことを目的とした環境にお
いて、相手側の画像を瞬時に表示したり非表示にしたり
することは、自然な端末インタフェースの観点から相応
しくない。この点からも相手側の画像を表示状態と非表
示状態の間で段階的に変化させることは有効に働く。

【００８８】対面での会話では相手が瞬時に姿を消すこ
とが無いのと同時に、画像を通信し会話を行う状況にお
いても、端末利用者とカメラ部の撮影範囲との位置関係
は、端末利用者が瞬時に撮影範囲から逸脱する、あるい
は、瞬時に撮影範囲内に入るといった２値的な現象とし
て生じるのではなく、体の一部位は逸脱したが別の部位
はまだ撮影範囲内に留まっている、といった段階的ある
いは連続的な現象として生じるのが一般的である。逸脱
していることを示す場合には、単に逸脱量や方向を示す
だけでなく、その時間変化を画面表示の段階的あるいは
連続的な変化として提示することで、カメラ部の撮影範
囲から逸脱している状況がより正確にかつわかりやすく
示すことができる。例えば相手側画像を表示する小ウィ
ンドウの運動や挙動として自分の逸脱の状況をリアルタ
イム表示する場合には、端末利用者は画面の様子を自身
の行動へフィードバックしながら、自分の意図する行
動、たとえば、撮影範囲内に入り相手と相対するのか、
相手から見えない位置へ移動するのかといった行動を行
いやすくなる。端末と自分（端末利用者）とが相互作用
している感覚を生みだし、臨場感を高めたり、端末利用
者の通信環境への興味を持続あるいは興味を亢進すると
いった事に対しても効果がある。

【００８９】

【発明の効果】本発明を用いることで利用者は自地点側
の画像を自地点側において一切表示することなく自分が
カメラの撮影範囲内に位置するかを判断できるようにな
る。また、会話への関心を分散させるような、カメラの
撮影範囲を変更したりそのために必要な制御操作をした
りする必要性を排除または低減できる。

【００９０】また、本発明では相手側画像と端末利用者
が相対して会話する状況を違和感無く作り出される。こ
の結果、相手の顔や表情といったノンバーバル情報が盛
んにやり取りされながら会話が行われるようになり、従
来の画像通信端末装置に較べて会話や意思疎通が促進さ
れる。相手の姿が見えないときには自分も相手から見ら
れていないという、互いの画像の通信状況が理解しやす
い環境が提供される。これは同時に、相手から見えない
位置に立つことも容易となり、セキュリティやプライバ
シーの保護が行いやすくなる。カメラによって撮影され
ることを端末利用者は意識しなくて済むようになるので
相手と自然に対話が行えるようになる。

【００９１】このような効果を合わせ持つことで、本発
明は画像通信環境において対面対話のように自然かつ不
快感を与えない端末ユーザインタフェースが実現でき
る。

【図面の簡単な説明】

【図１】第１の発明の画像通信端末用ユーザインタフェ
ース装置の構成の一実施例を示すブロック図である。

【図２】第２の発明の画像通信端末用ユーザインタフェ
ース装置の構成の一実施例を示すブロック図である。

【図３】第３の発明の画像通信端末用ユーザインタフェ
ース装置の構成の一実施例を示すブロック図である。

【図４】第４の発明の画像通信端末用ユーザインタフェ
ース装置の構成の一実施例を示すブロック図である。

【図５】第５の発明の画像通信端末用ユーザインタフェ
ース装置の構成の一実施例を示すブロック図である。

【図６】第２、第３、第４の発明の画像通信端末装置の
構成の一実施例を示すブロック図である。

【図７】第５の発明の画像通信端末装置の構成の一実施
例を示すブロック図である。

【図８】第６の発明の画像通信端末用ユーザインタフェ
ース装置の構成の一実施例を示すブロック図である。

【図９】第８の発明の画像通信端末用ユーザインタフェ
ース装置の画面表示例を示す図である。

【図１０】第８の発明の画像通信端末用ユーザインタフ
ェース装置の画面表示の別の例を示す図である。

【図１１】第９の発明の画像通信端末用ユーザインタフ
ェース装置の画面表示例を示す図である。

【図１２】第１２の発明の画像通信端末用ユーザインタ
フェース装置の画面表示例を示す図である。

【図１３】第１３の発明の画像通信端末用ユーザインタ
フェース装置の画面表示例を示す図である。

【図１４】第１４の発明の画像通信端末用ユーザインタ
フェース装置の画面表示例を示す図である。

【図１５】従来の画像通信端末装置の画面表示例を示す
図である。

【図１６】従来の自地点側画像を表示する画像通信端末
装置の構成を示すブロック図である。

【符号の説明】１０１利用者位置検出部１０２利用者位置判別部１０３通知部１０４位置情報１０５通知制御情報２０１受信画像処理部２９０相手側画像または相手側から送られてきた画像
信号２９１画像信号または表示用画像３０１画像合成切替処理部３０２通知用画像生成部３９０通知用画像３９１画像信号または表示用画像４９１画像信号または表示用画像５０１通知用情報生成部５０２通知用情報出力部５０３通知用情報６００画像通知端末装置６０１通知処理部６０２カメラまたはカメラ部６０３ディスプレイまたはディスプレイ部６９０自地点側画像または自地点側のカメラで生成さ
れた画像信号９００相手側画像９０１ディスプレイ画面９０２相手側画像を表示する小ウィンドウ９０３描画されなかった領域または相手側画像とは異
なる画像領域９０４描画されなかった領域または相手側画像とは異
なる画像領域１００１ディスプレイ画面上に表示された枠１２０１強調表示された小ウィンドウ１３０１逸脱した量や方向を表す矢印記号１３０２逸脱した量や方向、および、復帰のための指
針を示す情報１３０３小ウィンドウの表示を隠す画像または情報１３０４逸脱した量や方向を表す矢印記号１４０１非表示画像または非表示状態の一例１５０１相手側画像を表示するディスプレイ画面また
はウィンドウ１５０２自地点側画像を表示する小ウィンドウ１６０１画像信号分配部１６０２表示画面処理部１６０３画面操作命令入力手段１６０４画像信号または表示用画像１６０５画面操作命令

Claims

(57)【特許請求の範囲】

【請求項１】端末利用者を撮影するカメラ部と画像を表
示するディスプレイ部と遠隔地との画像のやり取りを行
う画像通信処理部とを備え遠隔地の相手と画像をやり取
りしながら対話を行う画像通信端末装置に用いられる画
像通信端末用ユーザインタフェース装置において、前記カメラ部の被写体である端末利用者の位置を検出し
位置情報を出力する利用者位置検出部と、前記位置情報をもとに端末利用者が前記カメラ部の撮影
範囲から逸脱したかを判断し通知制御情報を出力する利
用者位置判別部と、端末利用者が前記カメラ部の撮影範囲から逸脱した場合
には前記通知制御情報に基づき前記端末利用者に対して
相手から送られてくる画像によって撮影範囲から逸脱し
たことを知らせる通知部とを備えて構成されることを特
徴とする画像通信端末用ユーザインタフェース装置。
【請求項２】前記通知部が、前記通知制御情報に基づい
て前記カメラ部の被写体である端末利用者が前記カメラ
部の撮影範囲内外のどちらにいるかを表現する画像処理
を相手側から送られてきた画像に対して施し、前記画像
処理後の画像を前記ディスプレイ部に出力する受信画像
処理部によって構成されることを特徴とする請求項１に
記載の画像通信端末用ユーザインタフェース装置。
【請求項３】前記通知部が、前記カメラ部の撮影範囲か
ら被写体である端末利用者が逸脱していることを表現す
る通知用画像を生成する通知用画像生成部と、前記通知
制御情報に基づき、相手側から送られてきた画像と前記
通知用画像との切替または合成の処理を行い、処理後の
画像を前記ディスプレイ部に出力する画像合成切替処理
部とから構成されることを特徴とする請求項１に記載の
画像通信端末用ユーザインタフェース装置。
【請求項４】前記通知部が、前記通知制御情報に基づい
て前記カメラ部の被写体である端末利用者が前記カメラ
部の撮影範囲内外のどちらかにいるかを表現する画像処
理を相手側から送られてきた画像に対して施し、前記画
像処理後の画像を出力する受信画像処理部と、前記カメ
ラ部の撮影範囲から被写体である端末利用者が逸脱して
いることを表現する通知用画像を生成する通知用画像生
成部と、前記通知制御情報に基づいて、前記通知用画像
と前記受信画像処理部が生成した画像とを切替または合
成する処理を行い、処理後の画像を前記ディスプレイ部
に出力する画像合成切替処理部とから構成されることを
特徴とする請求項１に記載の画像通信端末用ユーザイン
タフェース装置。
【請求項５】前記通知部が、前記通知制御情報に基づき
前記カメラ部の撮影範囲から被写体である端末利用者が
逸脱していることを表現する通知用情報を生成する通知
用情報生成部と、前記端末利用者に対して前記通知用情
報を出力する通知用情報出力部とから構成されることを
特徴とする請求項１に記載の画像通信端末用ユーザイン
タフェース装置。
【請求項６】前記通知部が、前記通知制御情報に基づき
前記カメラ部の撮影範囲から被写体である端末利用者が
逸脱していることを表現する通知用情報を生成する通知
用情報生成部と、前記端末利用者に対して前記通知用情
報を出力する通知用情報出力部とを更に備えることを特
徴とする請求項２、３または４に記載の画像通信端末用
ユーザインタフェース装置。
【請求項７】前記通知用情報出力部が、前記通知用情報
として音声を前記端末利用者に対して出力することを特
徴とする請求項５または６に記載の画像通信端末用ユー
ザインタフェース装置。
【請求項８】前記通知部は端末利用者の位置が前記カメ
ラ部の撮影範囲から逸脱していることを、前記ディスプ
レイ部に表示する相手側画像の描画範囲の変更、また
は、前記ディスプレイ部上における相手側画像の描画位
置の変更によって表すことを特徴とする請求項１、２、
４または６に記載の画像通信端末用ユーザインタフェー
ス装置。
【請求項９】前記通知部は端末利用者の位置が前記カメ
ラ部の撮影範囲から逸脱していることを、前記ディスプ
レイ部に表示する相手側画像の表示サイズの変更によっ
て表すことを特徴とする請求項１、２、４または６に記
載の画像通信端末用ユーザインタフェース装置。
【請求項１０】前記通知部は端末利用者の位置が前記カ
メラ部の撮影範囲から逸脱していることを、前記ディス
プレイ部に表示する相手側画像の明るさに関する特性の
変更によって表すことを特徴とする請求項１、２、４ま
たは６に記載の画像通信端末用ユーザインタフェース装
置。
【請求項１１】前記通知部は端末利用者の位置が前記カ
メラ部の撮影範囲から逸脱していることを、前記ディス
プレイ部に表示する相手側画像の色相に関する特性の変
更によって表すことを特徴とする請求項１、２、４また
は６に記載の画像通信端末用ユーザインタフェース装
置。
【請求項１２】前記ディスプレイ部で表示する前記遠隔
地の相手の画像をウィンドウ表示する場合、前記通知部
は前記端末利用者の位置がカメラ部の撮影範囲から逸脱
していることを、前記ウィンドウの枠の表示を変化させ
ることで表すことを特徴とする請求項１、２、３、４ま
たは６に記載の画像通信端末用ユーザインタフェース装
置。
【請求項１３】前記通知部が、前記利用者の前記カメラ
部の撮影範囲からの逸脱量または逸脱している方向ある
いは逸脱した状態から復帰するための状態を更に通知す
ることを特徴とする請求項１、２、３、４、５、６、
７、８、９、１０、１１または１２に記載の画像通信端
末用ユーザインタフェース装置。
【請求項１４】前記通知部が、端末利用者が前記カメラ
部の撮影範囲から逸脱している場合には相手側画像を前
記ディスプレイ上に非表示にすることを特徴とする請求
項１、２、３、４、５、６、７、８、９、１０、１１、
１２または１３に記載の画像通信端末用ユーザインタフ
ェース装置。
【請求項１５】前記通知部が、端末利用者が前記カメラ
部の撮影範囲から逸脱している場合にはその逸脱量に応
じて相手側画像の前記ディスプレイ上の表示を表示状態
と非表示状態との間で段階的に変化させることを特徴と
する請求項１４に記載の画像通信端末用ユーザインタフ
ェース装置。