JP2004056207A

JP2004056207A - コミュニケーション装置およびそのプログラム

Info

Publication number: JP2004056207A
Application number: JP2002207166A
Authority: JP
Inventors: Yoko Takano; 高野　陽子
Original assignee: Oki Electric Industry Co Ltd
Current assignee: Oki Electric Industry Co Ltd
Priority date: 2002-07-16
Filing date: 2002-07-16
Publication date: 2004-02-19

Abstract

【課題】実際の対面によるコミュニケーションの形態と略同等のコミュニケーションを行うことができるコミュニケーション装置を提供する。
【解決手段】コミュニケーション装置が、操作者を撮影する対面カメラと撮影対象物の書画映像を撮影する書画カメラと対面映像を表示する対面ディスプレイと対面ディスプレイの下方に並べて配置された書画映像を表示する書画ディスプレイとを備え、対面ディスプレイに相手側の対面カメラが撮影した相手側の操作者の上半身の対面映像を表示し、書画ディスプレイに相手側の書画カメラが撮影した相手側の操作者の側を対面ディスプレイの側に表示した書画映像を表示する。
【選択図】　　　　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、遠隔地との間で互いに相手側の映像を表示して双方向に対話を行うコミュニケーション装置およびそのプログラムに関する。
【０００２】
【従来の技術】
この種のコミュニケーション装置の従来技術としては、特開平７−８７２１０号および特開平１１−１５１２０７号の技術がある。
特開平７−８７２１０号は、遠隔地との間で静止画や動画等の資料画像を互いに表示し、これを共有して対話を行うという技術である。
【０００３】
また、特開平１１−１５１２０７号は、対話用のマイクおよびスピーカを備え、患者に送信する画像は、書画カメラによってフラットヘッド型バックライト上に載せられた印刷物または現像済みのレントゲンフィルム等を撮影した画像、モニタディスプレイの手前に別に設けた対話用カメラによって撮影した医師の顔およびデータベースに記録されているＣＴスキャン等の資料画像を切替えて遠隔地の患者へ送信して表示するという技術である。
【０００４】
【発明が解決しようとする課題】
しかしながら、上述した従来の技術においては、音声による双方向通信の環境下で対話を行いながら資料画像や書画カメラによる撮影画像、対話用カメラによる医師の顔を切替えて相手側に表示するコミュニケーション装置であり、講演会場における発表者と聴衆の関係に近いコミュニケーションの形態であるため、実際の対面によるコミュニケーションの形態とは異なり、相手の状態、つまり相手の満足度や理解度等を的確に把握することができないという問題がある。
【０００５】
本発明は、上記の問題点を解決するためになされたもので、実際の対面によるコミュニケーションの形態と略同等のコミュニケーションを行うことができるコミュニケーション装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
本発明は、上記課題を解決するために、コミュニケーション装置が、操作者を撮影する対面カメラと、撮影対象物の書画映像を撮影する書画カメラと、対面映像を表示する対面ディスプレイと、該対面ディスプレイの下方に並べて配置され、書画映像を表示する書画ディスプレイとを備え、前記対面ディスプレイに相手側の対面カメラが撮影した相手側の操作者の対面映像を表示し、前記書画ディスプレイに相手側の書画カメラが撮影した相手側の書画映像を表示することを特徴とする。
【０００７】
また、撮影対象物の書画映像を撮影する書画カメラと、書画映像を表示する書画ディスプレイとに接続し、通信回線と接続されたコンピュータに、通信回線を介して相手側へ画像データを送信する画像データ送信ステップと、通信回線を介して相手側の画像データを受信する画像データ受信ステップと、前記画像データが書画映像であるときに該書画映像を前記書画ディスプレイに表示する書画映像表示ステップと、前記書画映像の反転要求があったときに前記書画映像を反転して前記書画ディスプレイに表示する反転書画映像表示ステップと、前記画像データが資料画像であるときに該資料画像を前記書画ディスプレイに表示する資料画像表示ステップとを実行させることを特徴とする。
【０００８】
【発明の実施の形態】
以下に、図面を参照して本発明によるコミュニケーション装置の実施の形態について説明する。
なお、以下に説明する本発明の実施の形態は、本発明を具現化するための一例であって、本発明はその記載に限定されるものではない。
【０００９】
図１は本発明の第１実施の形態を示す斜視図、図２はその側面図、図３はそのブロック図である。
図１、図２、図３において、１はコミュニケーション装置である。
２は対面カメラであり、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）を用いたビデオカメラ等の撮影した映像を画像データに変換する機能を有するカメラであり、自動焦点機能を備えている。
【００１０】
この対面カメラ２は、コミュニケーション装置１の操作者と対向する位置、つまり操作者の正面映像を撮影するように配置されており、操作者の上半身の正面映像を撮影できるように構成されている。
３は書画カメラであり、コミュニケーション装置１の基台４上に載せられたスキャナ５の平らな上蓋６と対向する位置に配置され、ＣＣＤを用いたビデオカメラ等の撮影した映像を画像データに変換する機能を有するカメラであり、自動焦点機能を備えており、上蓋６の略全面が撮影できるように構成されている。
【００１１】
なお、スキャナ５の平らな上蓋６は通常は閉められた状態で使用され、その上に書類や資料等の印刷物やサンプル等の撮影対象物を載せる机の機能を兼備しており、書画カメラ３はこの机上に載せられた撮影対象物を撮影する。
７は対面ディスプレイであり、コミュニケーション装置１の操作者の略正面に配置され、遠隔地等の離れた場所（以下、相手側という。）に設置された同様のコミュニケーション装置１の対面カメラ２が撮影したコミュニケーション装置１の操作者の手を含む上半身の正面映像（以下、対面映像という。）を表示することができるＬＣＤ等の表示画面を有している。
【００１２】
８は書画ディスプレイであり、相手側の書画カメラ３がコミュニケーション装置１の基台４上のスキャナ５の机を兼ねた平らな上蓋６に載せられた撮影対象物と書画カメラ３の視野にある操作者の身体の一部を同時に撮影した映像（以下、書画映像という。）を表示することができるＬＣＤ等の表示画面と、この表示画面を覆いそれが透視可能なタッチパネル等との組合せ等で構成されている。
【００１３】
この書画ディスプレイ８は、対面ディスプレイ７の下方に操作者が視認しやすいように傾斜させて並べて配置されている。
９はマイクであり、コミュニケーション装置１の操作者の声を集音する。
１０はスピーカであり、相手側のマイク９が集音した相手側の操作者の声を出力する。
【００１４】
１１はコンピュータであり、通信回線を介して相手側のコンピュータ１１と接続しており、書画カメラ３が撮影した書画映像を相互に送受する機能を有している。
また、受信した相手側の書画映像を書画ディスプレイ８に表示する機能、スキャナ５によってスキャナ画像を読取る機能、通信回線を介してインターネット等に接続する機能等を有しており、その記憶部には文書や表、画像等をデータファイル化した資料データファイルが格納されている。
【００１５】
１２は通信制御装置であり、通信回線を介して相手側の通信制御装置１２と接続しており、対面カメラ２が撮影した対面映像やマイク９による音声を相互に送受する機能を有している。
また、受信した対面映像を対面ディスプレイ７に表示する機能や受信した音声をスピーカ１０へ出力する機能等を有している。
【００１６】
上記各部位の接続は、図３に示すように書画カメラ３とスキャナ５の出力はコンピュータ１１へ入力され、書画ディスプレイ８へはコンピュータ１１からの出力が入力される。
対面カメラ２とマイク９の出力は通信制御装置１２へ入力され、対面ディスプレイ７とスピーカ１０へは通信制御装置１２からの出力が入力される。
【００１７】
外部との通信は、電話回線等の公衆網やインターネット、専用回線等の通信回線と接続することによってなされ、相手側との双方向のデータ通信を可能としている。
上述した構成の作用について説明する。
コミュニケーション装置１によって対話を行う場合には、互いに接続している通信制御装置１２は、対面カメラ２が撮影した対面映像を相互に送受し、互いに相手側の操作者の対面映像を対面ディスプレイ７に表示する。
【００１８】
マイク９によって集音された操作者の音声は、上記と同様に通信制御装置１２によって送受されて互いに相手側の操作者の音声がスピーカ１０から出力され、手の表情を加えた対面映像と音声によって対話が行われる。
この対話が行われている間に、コンピュータ１１が行う書画ディスプレイ表示処理の作動について、図４に示すフローチャートを用い、Ｓで示すステップに従って説明する。
【００１９】
Ｓ１、コミュニケーション装置１の電源が投入されると、コンピュータ１１は制御プログラムを立上げる。
これと同時に、通信制御装置１２は、対面カメラ２が撮影した対面映像の画像データやマイク９が集音した音声の音声データを通信回線を介して相手側の通信装置１２へ向けて送信することを開始する。
【００２０】
Ｓ２、コンピュータ１１は、書画ディスプレイ８に図５に示す操作ボタンを表示すると共に書画カメラ３が撮影した書画映像の画像データを通信回線を介して相手側のコンピュータ１１へ向けて送信することを開始する。
この時、相手側のコミュニケーション装置１の電源が投入されていない等のために送信ができない場合は、その旨が書画ディスプレイ８に表示される。
【００２１】
また、書画ディスプレイ８には、書画映像を反転させるための「反転」ボタン、コンピュータ１１の資料データを表示するための「ファイル」ボタン、その資料データを相手側に送信するための「資料送信」ボタン、スキャナ５で読取った資料データを送付するための「スキャナ」ボタンおよび対話を終了させるための「終了」ボタン等の操作ボタンが表示され、操作者が操作ボタンに触れたときに書画ディスプレイ８に設けられたタッチパネル等がその座標位置を検出し、予め設定されている各操作ボタンの座標位置を参照してどの操作ボタンが押下されたかを検知する。
【００２２】
この操作ボタンの表示と同時に、コンピュータ１１は書画映像を反転させるための反転識別子を「１」として図示しない記憶部に保存する。
Ｓ３、コンピュータ１１は操作ボタンの押下または相手側からの画像データの着信を待つ入力待状態で待機し、前記入力を検知したことを契機としてステップＳ４へ分岐する。
【００２３】
Ｓ４、コンピュータ１１は、検知した入力が「反転」ボタンが押下された信号であればステップＳ５へ、それ以外の入力であればステップＳ６へ移行する。
Ｓ５、コンピュータ１１は、記憶部に保存されている反転識別子に「１」を加えて更新する。
Ｓ６、コンピュータ１１は、検知した入力が「反転」ボタン以外の他のボタンが押下された信号であればステップＳ１０へ、それ以外の入力、つまり他のボタンが押下されていないときにはステップＳ７へ移行する。
【００２４】
Ｓ７、コンピュータ１１は、受信した画像データが動画であれば書画映像と判断してステップＳ８へ移行し、静止画であれば資料画像と判断してステップＳ１６へ移行する。
Ｓ８、コンピュータ１１は、記憶部に保存されている反転識別子によって書画映像の反転要求の有無を判断する。
【００２５】
すなわち、コンピュータ１１は反転識別子が奇数であれば反転要求が無いとしてステップＳ１６へ、反転識別子が偶数であれば反転要求が有るとしてステップＳ９へ移行する。
なお、本実施の形態において、通常は相手側の書画カメラ３が撮影した書画映像は書画ディスプレイ８に図５（ａ）に示すように相手側の操作者の側が対面ディスプレイ７の側になるように、つまり対面ディスプレイ７に表示される上半身の正面映像の下方に並べて前記書画映像を表示することによって、実際に机をはさんで相手と対面して対話を行うときと略同等の形態が表示される。
【００２６】
Ｓ９、コンピュータ１１は、受信した書画映像を反転させる。
すなわち、操作者が相手側の机上に載せられた書類等が逆向きになっているためにその内容が読取りにくい等の理由によって通常の書画映像を反転させて表示することを要求した場合には、コンピュータ１１は図５（ｂ）に示すように操作ボタンの表示はそのままにして受信した書画映像の画像データを１８０度回転させて反転させ、これを書画ディスプレイ８に表示する書画映像としてステップＳ１６へ移行する。
【００２７】
なお、図５に示す書画ディスプレイ８には相手側の操作者の頭部の一部や手が示されているが、これは相手側の操作者の印刷物等の特定の部位を指し示したとき、印刷物等を覗き込んだとき等に書画カメラ３の視野に操作者の身体の一部が入ったときに書画カメラ３が撮影した書画映像であり、操作者の側が対面ディスプレイ７の側にあることの理解を容易にするために示したものである。
【００２８】
Ｓ１０、コンピュータ１１は、検知した入力が「終了」ボタンが押下された信号であれば制御プログラムを終了させ、コミュニケーション装置１の電源を遮断する。それ以外の入力であればステップＳ１１へ移行する。
Ｓ１１、コンピュータ１１は、検知した入力が「スキャナ」ボタンが押下された信号であればステップＳ１２へ、それ以外の入力、つまり「ファイル」または「資料送信」ボタンが押下された信号であればステップＳ１３へ移行する。
【００２９】
Ｓ１２、コンピュータ１１は、操作者がスキャナ５にセットした書類等の印刷物のスキャナ画像をスキャナ５によって読取り、このスキャナ画像を資料画像として相手側のコンピュータ１１へ向けて送信してステップＳ４へ戻る。
なお、相手側のコミュニケーション装置１においては、このスキャナ６が読取った資料画像を受信すると、上記ステップＳ７を経由してステップＳ１６へ移行し、その資料画像が書画ディスプレイ８に表示される。
【００３０】
Ｓ１３、コンピュータ１１はファイル画像の作成を行う。
すなわち、コンピュータ１１は、その記憶部に格納されている資料データファイルの項目一覧表を書画ディスプレイ８に表示する。
操作者は表示された項目一覧表から必要な資料データの項目等に触れて選択し、コンピュータ１１はこれをタッチパネル等で検出して該当する資料データを抽出し、ファイル画像を作成する。
【００３１】
この時、インターネット上に開設されているウェブサイトのアドレス（以下、ＵＲＬ（Ｕｎｉｆｏｒｍ　Ｒｅｓｏｕｒｃｅ　Ｌｏｃａｔｏｒ）という。）を資料データファイルと共に格納しておき、項目一覧表と共に表示して選択するようにしてもよい。
この場合に、コンピュータ１１は選択されたＵＲＬによってインターネットを介してウェブサイトに接続し、操作者は必要なウェブページを選定して書画ディスプレイ８に表示する。
【００３２】
コンピュータ１１は、操作者が選定して表示したウェブページをハードコピーすることによってファイル画像を作成する。
Ｓ１４、コンピュータ１１は、「資料送信」ボタンが押下されたか否かによって相手側へのファイル画像の送信を判断する。
すなわち、操作者が後述するステップＳ１６で書画ディスプレイ８に表示されたファイル画像を相手側にも資料画像として送信して表示し、これを相手側と共有して対話することが必要と判断した場合は、その時点で書画ディスプレイ８の「資料送信」ボタンを押下する。
【００３３】
「資料送信」ボタンが押下されているときには、コンピュータ１１はステップＳ１５へ移行する。「資料送信」ボタンが押下されていないとき、つまり操作者がファイル画像の参照のみのために表示した場合等のときはステップＳ１６へ移行する。
Ｓ１５、コンピュータ１１は、作成したファイル画像を資料画像として相手側のコンピュータ１１へ向けて送信する。
【００３４】
なお、相手側のコミュニケーション装置１においては、上記ステップＳ１２で説明したのと同様にしてその資料画像が書画ディスプレイ８に表示される。
Ｓ１６、コンピュータ１１は、書画ディスプレイ８へ受信した書画映像、反転した書画映像、またはファイル画像や受信した資料画像等の資料画像を書画ディスプレイ８へ出力して表示し、ステップＳ４へ戻る。
【００３５】
なお、対面ディスプレイ７や書画ディスプレイ８への各種画面の表示は、常に上書きされてその表示が更新される。
このようにして「終了」ボタンが押下されるまで、通信制御装置１２による相手側の対面映像の表示と音声の伝達およびコンピュータ１１による相手側の書画映像や資料画像の表示が双方向で行われて対話が継続する。
【００３６】
以上説明したように、本実施の形態では、対面カメラが撮影した相手側の操作者の上半身の対面映像によって、相手の顔の表情だけでなく、手の動きによる表情をも伝えることができ、相手の態度や表情等により相手の要求や思考、満足度、理解度等を的確に把握することができる。
また、書画カメラが撮影した書画映像を相手側の操作者の側が対面ディスプレイの側に表示されるようにし、対面映像の下方に並べて表示するようにしたことによって、実際に相手と向かい合って対話するときと略同等の形態で対話を行うことが可能となり、より実際的なコミュニケーションを図ることができる。
【００３７】
更に、書画映像を反転させて表示することができるようにしたことによって、相手側が示した印刷物やサンプル等の内容を容易に確認することができる。
更に、書画ディスプレイにコンピュータに格納した資料データやインターネットのウェブページ等を切替えて表示できるようにし、これを相手側の書画ディスプレイにも表示できるようにしたことによって、更にコミュニケーションの充実を図ることができる。
【００３８】
更に、書画カメラの視野に入った相手側の机上の様子を撮影した書画映像を書画ディスプレイに表示するようにしたことによって、相手が指し示した部位が容易に確認でき、相手側が用意した印刷物やサンプルもリアルタイムで見ながら対話を行うことが可能となり、対話の内容の理解をより深めることが可能となる。
更に、平らな上蓋を有するスキャナをコミュニケーション装置の基台上に配置して机の機能を兼備させるようにしたことによって、スキャナを操作者の身近な位置に配置することが可能となり、手元の書類等を送信する場合には、上蓋を開けるだけで直ぐにその書類等を読取ったスキャナ画像を相手側に送付することができ、鮮明な資料画像を送付することができる。
【００３９】
これにより、相手側ではこの資料画像をデータファイル化して保存することができると共に、コミュニケーション装置にプリンタ等を付設すれば、これを出力して印刷することも可能となる。
なお、本発明のコミュニケーション装置を金融機関等の窓口業務に適用すれば、以下のような新たな効果が得られる。
【００４０】
すなわち、金融機関の集中センタにコミュニケーション装置を設置してオペレータが操作するようにし、金融機関の複数の営業店や無人店舗に設置したコミュニケーション装置を顧客が操作するようにして商品への問合や新規口座の開設等の各種の申込を受付けるようにする。
そして、上記実施の形態例で示したと同様にして、窓口で向かい合って対話を行っているような形態で顧客との間のコミュニケーションを行い、例えば申込用紙の記入の状況をオペレータが確認しながらアドバイスを行ったり、捺印の状況をオペレータが確認したりすることが可能となる。
【００４１】
また、証明書類等のコピーが必要な場合にはスキャナによってその画像を取得して印刷することも可能となる。
これによって、遠隔地に駐在するオペレータによってもよりきめ細かいアドバイスや確認が行えるようになり、顧客の利便性や満足度を向上することができると共に窓口業務の効率化を行うことができる。
【００４２】
このように本発明のコミュニケーション装置は、対面しての対話が基本であるが、３以上のコミュニケーション装置を接続しておき、それぞれのアドレス等を設定して任意の２箇所のコミュニケーション装置によって対話を行う構成としても本発明の効果を損なうものではない。
このことは、旅行代理店や自動車販売店、官公庁、化粧品販売店等の対面によって商品の案内やその問合、予約の申込、各種の手続、相談等を受付ける業務の場合も同様である。
【００４３】
また、本コミュニケーション装置にカード発行機や通帳発行機を付設すれば、無人契約機としての機能を発揮することも可能となる。
なお、上記実施の形態例においては、スキャナの上蓋を机として利用するとして説明したが、スキャナを省略して基台またはその他の部位を机として利用するようにしてもよい。これによって、コミュニケーション装置の簡素化を図ることができる。
【００４４】
また、コンピュータと通信制御装置は別々に設置するとして説明したが、これらを統合して構成するようにしてもよい。これによって、コミュニケーション装置の簡素化を図ることができる。
更に、上記ステップＳ１で説明したコミュニケーション装置の起動は、コミュニケーション装置を常に省電力状態等で待機させ、一方のコミュニケーション装置に主電源を投入したときに相手側にこの信号を送信して、相手側のコミュニケーション装置を自動的に起動するようにしてもよく、コミュニケーション装置に設けた「開始」ボタン等によって互いのコミュニケーション装置の主電源を投入するようにしてもよい。
【００４５】
更に、ステップＳ９で説明した書画映像の反転表示は、ステップＳ８で反転要求が有ると判断したときに、相手側のコンピュータにその旨を送信して相手側の書画カメラを回転させて反転表示を行うようにしてもよい。
更に、ステップＳ１２で説明したスキャナ画像の送信は、ファイル画像と同様に一旦書画ディスプレイに表示して、スキャナ画像の読取り状態を確認した後に「資料送信」ボタンを押下して相手側へ資料画像として送信するようにしてもよい。
【００４６】
更に、ステップＳ１３で説明したインターネットのウェブページのハードコピーによるファイル画像の送信は、そのウェブページのＵＲＬを相手側のコンピュータへ送信して相手側のコンピュータがそのウェブページを取得して表示するようにしてもよい。
【００４７】
【発明の効果】
以上述べたように、本発明は、対面カメラが撮影した相手側の操作者の上半身の対面映像によって、相手の顔の表情だけでなく、手の動きによる表情をも伝えることができ、相手の態度や表情等により相手の要求や思考、満足度、理解度等を的確に把握することができる。
【００４８】
また、書画カメラが撮影した書画映像を相手側の操作者の側が対面ディスプレイの側に表示されるようにし、対面映像の下方に並べて表示するようにしたことによって、実際に相手と向かい合って対話するときと略同等の形態で対話を行うことが可能となり、より実際的なコミュニケーションを図ることができるという効果が得られる。
【図面の簡単な説明】
【図１】本発明の実施の形態を示す斜視図
【図２】本発明の実施の形態を示す側面図
【図３】本発明の実施の形態を示すブロック図
【図４】実施の形態の書画ディスプレイ表示処理を示すフローチャート
【図５】実施の形態の画面表示例を示す説明図
【符号の説明】
１　　コミュニケーション装置
２　　対面カメラ
３　　書画カメラ
４　　基台
５　　スキャナ
６　　上蓋
７　　対面ディスプレイ
８　　書画ディスプレイ
９　　マイク
１０　スピーカ
１１　コンピュータ
１２　通信制御装置

Claims

操作者を撮影する対面カメラと、撮影対象物の書画映像を撮影する書画カメラと、対面映像を表示する対面ディスプレイと、該対面ディスプレイの下方に並べて配置され、書画映像を表示する書画ディスプレイとを備え、
前記対面ディスプレイに相手側の対面カメラが撮影した相手側の操作者の対面映像を表示し、前記書画ディスプレイに相手側の書画カメラが撮影した相手側の書画映像を表示することを特徴とするコミュニケーション装置。
請求項１において、
前記対面ディスプレイが、相手側の操作者の上半身の映像を表示することを特徴とするコミュニケーション装置。
請求項１または請求項２において、
前記書画ディスプレイが、相手側の操作者の側を前記対面ディスプレイの側に表示することを特徴とするコミュニケーション装置。
請求項３において、
前記書画ディスプレイの書画映像を、反転させて表示することを特徴とするコミュニケーション装置。
請求項１から請求項４において、
平らな上蓋を有するスキャナを設け、該スキャナを前記書画カメラと対向する位置に配置したことを特徴とするコミュニケーション装置。
請求項１から請求項５において、
前記書画ディスプレイに、前記書画映像に替えて資料画像を表示することを特徴とするコミュニケーション装置。
撮影対象物の書画映像を撮影する書画カメラと、書画映像を表示する書画ディスプレイとに接続し、通信回線と接続されたコンピュータに、
通信回線を介して相手側へ画像データを送信する画像データ送信ステップと、
通信回線を介して相手側の画像データを受信する画像データ受信ステップと、
前記画像データが書画映像であるときに該書画映像を前記書画ディスプレイに表示する書画映像表示ステップと、
前記書画映像の反転要求があったときに前記書画映像を反転して前記書画ディスプレイに表示する反転書画映像表示ステップと、
前記画像データが資料画像であるときに該資料画像を前記書画ディスプレイに表示する資料画像表示ステップとを実行させることを特徴とするコミュニケーション装置のプログラム。