JPH08140071A - 画像通信装置 - Google Patents

Abstract

(57)【要約】 【目的】 送信及び受信した画像を１台のモニタにて合
成表示を行うことのできる画像通信装置を提供する。 【構成】 ＶＴＲ１５により再生された送受信画像デー
タは、第１の切替スイッチ２を介し、Ａ／Ｄ変換器３に
てディジタルの送受信画像データに変換され出力され
る。この送受信画像データは、メモリ制御部９の書き込
み制御により、送信画像データは送信用メモリ４に、受
信画像データは受信用メモリ８に記憶される。送信用メ
モリ４及び受信用メモリ８に記憶された画像データは、
メモリ制御部９により、制御部１６によって定められた
合成表示モードに合わせたメモリ読み出し制御を行う。
読み出された画像データは合成処理部１７に渡され、制
御部１６によって定められた合成表示モードに合わせ
て、送信用メモリ４より読み出された画像データと受信
用メモリ８より読み出された画像データとを切り替えて
出力する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像通信装置に関し、
より詳細には、テレビ電話等のカメラなどにより取り込
んだ画像と音声を通信回線を用いて送信するとともに、
相手より送信された画像を受信する画像通信装置に関す
るものである。

【０００２】

【従来の技術】図２１及び図２２は、従来の画像通信装
置の全体構成図で、図中、７１はカメラ、７２は第１の
切替スイッチ、７３はＡ／Ｄ変換器、７４は送信用メモ
リ、７５はコーデック部、７６は回線インタフェイス
部、７７は第２の切替スイッチ、７８は受信用メモリ、
７９はメモリ制御部、８０は第１のＤ／Ａ変換器、８１
はモニタ、８２は第３の切替スイッチ、８３は記録合成
部、８４は第２のＤ／Ａ変換器、８５はＶＴＲ（Ｖideo
Ｔape Ｒecorder）、８６は制御部、８７は第２モニタ
である。

【０００３】送信者を撮影するカメラ７１と、該カメラ
７１にて取り込んだ画像か後述するＶＴＲ８５から再生
される送受信画像かを選択するための第１の切替スイッ
チ７２と、該第１の切替スイッチ７２により切替制御さ
れて得られるカメラ７１にて取り込んだ画像或いはＶＴ
Ｒ８５から再生される送受信画像をディジタルデータに
変換するＡ／Ｄ変換器７３と、ディジタル変換されたデ
ータを記憶する送信用メモリ７４と、送受信するデータ
を圧縮伸張符号復合化を行うコーデック部７５と、回線
とデータをやりとりするための回線インタフェイス部７
６と、該回線インタフェイス部７６にて受信され、前記
コーディック部７５にて伸張復合化された受信データ受
信したデータか、前記Ａ／Ｄ変換器７３によりディジタ
ルデータに変換されたデータかを選択するための第２の
切替スイッチ７７と、該第２の切替スイッチ７７により
切替制御されて得られる前記受信データ或いはＡ／Ｄ変
換器７３によりディジタルデータに変換されたデータを
記憶する受信用メモリ７８と、Ａ／Ｄ変換器７３により
得られるデータと第２の切替スイッチ７７により得られ
るデータを送信用メモリ７４と受信用メモリ７８に書き
込む制御と後述する第１のＤ／Ａ変換器８０と記録合成
部８３へ読み出す制御を備えたメモリ制御部７９と、受
信用メモリ７８から読み出されたデータをアナログ信号
に変換する第１のＤ／Ａ変換器８０と、送信または受信
内容を表示するモニタ８１と、該モニタ８１に表示する
内容において送信画像あるいは受信画像とを選択する第
３の切換スイッチ８２と、送信用メモリ７４から読み出
したデータと受信用メモリ７８から読み出したデータと
を１フィールド毎に交互に合成する記録合成部８３と、
該記録合成部８３で合成された送受信画像のデータをア
ナログデータに変換する第２のＤ／Ａ変換器８４と、ア
ナログデータに変換された送受信画像信号をビデオテー
プに記録／再生するＶＴＲ８５とを備え、さらに、シス
テム全体を制御する制御部８６とを備えてなるものであ
る。

【０００４】前述のように構成された画像通信装置にお
いて、先ずは記録時の動作について、図２１を用いて説
明する。図２１に示すとおり、記録時において第１の切
替スイッチ７２は７２ａ側に、第２の切替スイッチ７７
は７７ａ側に切り替わるように制御部８６により制御さ
れる。カメラ７１により撮影された送信画像は、第１の
切替スイッチ７２を介してＡ／Ｄ変換器７３にてディジ
タルの送信画像データに変換される。該送信画像データ
はメモリ制御部７９の書き込み制御により送信用メモリ
７４に記憶される。該送信画像データはメモリ制御部７
９により読み出されてコーデック部７５へ入力される。
そして、コーデック部７５内で、データを送受信する
際、効率よくデータを受け渡しするためにデータ圧縮を
行い、その結果に対して符号化を行った後、回線インタ
フェイス部７６で通信回線にのせる通信の制御を行って
相手側端末にデータが送られる。

【０００５】一方、通信回線を介して送られてきたデー
タは、回線インタフェイス部７６で受けてコーデック部
７５に渡される。該コーデック部７５内では、受信した
データに対して復合化及び伸張を行い、もとのデータに
復元する。復元された受信画像データは、第２の切替ス
イッチ７７を介してメモリ制御部７９の書き込み制御に
より受信用メモリ７８に記憶される。該記憶された受信
画像データはメモリ制御部７９により読み出され第１の
Ｄ／Ａ変換器８０に送られる。該第１のＤ／Ａ変換器８
０ではアナログデータに変換されビデオ信号として出力
される。制御部８０によって切替制御される第３の切替
スイッチ８２が８２ａ側にスイッチされているときは前
記第１のＤ／Ａ変換器８０にて変換されてアナログデー
タが出力されモニタ８１に表示される。第３の切替スイ
ッチ８２が８２ｂ側に制御されているときは、カメラ７
１により撮影された送信者の画像データがモニタ８１に
表示される。

【０００６】記録合成部８３には、制御部８６の制御信
号に基づき、送信用メモリ７４からの１フィールド分の
データと受信用メモリ７８からのデータとを交互に入力
される。記録合成部８３は入力されたそれぞれのデータ
を１つにまとめ、合成された送受信画像のデータとし出
力する。したがって、合成された送受信画像のデータ
は、第２のＤ／Ａ変換器８４にてアナログデータに変換
され、ＶＴＲ８５にてビデオテープに記録されるもので
ある。なお、音声については、送信側音声信号はディジ
タルデータに変換される前に、受信側音声信号は図示し
ない音声用コーデックにてアナログデータに変換された
後に、ＶＴＲ８５のそれぞれ決められた音声トラックに
記録される。また、上記動作においては、制御部８６に
よって、コーデック部７５と回線インターフェイス部７
６を便宜制御するようになっている。

【０００７】次に、再生時の動作について、図２２を用
いて説明する。図２２に示すとおり、再生時において第
１の切替スイッチ７２は７２ｂ側に、第２の切替スイッ
チ７７は７７ｂ側に切り替わるように制御部８６により
制御される。ＶＴＲ８５により再生された送受信画像デ
ータは、第１の切替スイッチ７２を介してＡ／Ｄ変換器
７３にてディジタルの送受信画像データに変換される。
該送受信画像データは、メモリ制御部７９の書き込み制
御により送信用メモリ７４及び受信用メモリ７８に記憶
される。この送信用メモリ７４及び受信用メモリ７８に
記憶される送信画像データ及び受信画像データはそれぞ
れ片フィールド分の情報しか有さないので、時間的に欠
けた情報を補うために、送信用メモリ７４及び受信用メ
モリ７８からのデータの読み出しは同じデータを２回読
み出す。

【０００８】記録合成部８３は制御部８６により送信用
メモリ７４から読み出されるデータをそのまま出力され
るように制御される。送信用メモリ７４より読み出され
た制送信画像データは記録合成部８３を介し、第２のＤ
／Ａ変換器８４にてアナログデータに変換された後、ビ
デオ信号として出力され、第２のモニタ８７に表示され
るか、第３のスイッチ８２が８２ｂに位置するように制
御されている時は、第３のスイッチ８２を介しモニタ８
１に表示される。受信用メモリ７３より読み出された受
信画像データは、第１のＤ／Ａ変換器８０にてアナログ
データに変換された後ビデオ信号として出力され、第３
のスイッチ８２が８２ａに位置するように制御されてい
る時、第３のスイッチ８２を介し受信画像用モニタ８１
に表示される。

【０００９】なお、先に提案した特願平５−１０４５７
９号公報のものは、送信する信号と受信した信号とをフ
ィールドまたはフレーム単位、ライン単位、あるいは画
素単位等に分割した後、所定単位で切り替えて組み合わ
せたビデオ信号出力を記録手段にて１つの記録媒体に記
録することにより、送信する画像と受信した画像とを同
一の記録媒体に同時に記録することができるようにした
ものである。

【００１０】

【発明が解決しようとする課題】前述のように、従来の
画像通信装置においては、記録された送信する画像と受
信した画像とを再生して見る場合、送信用と受信用の２
台のモニタを用意するか、１台のモニタを切り替えて表
示させる必要があるという問題点があった。

【００１１】本発明は、このような実情に鑑みてなされ
たもので、送信及び受信した画像を１台のモニタにて合
成表示を行うことのできる画像通信装置を提供すること
を目的としている。

【００１２】

【課題を解決するための手段】本発明は、上記課題を解
決するために、（１）カメラ等により取り込んだ画像を
通信回線を用いて送信する画像と、相手より送信され受
信した画像とを記録する画像通信装置において、送信す
る信号と受信した信号とを同期して１つの記録媒体に記
録及び再生する記録再生手段と、該記憶再生手段により
再生された送信する画像と受信した画像をメモリに記憶
し、分割して読み出すメモリ制御手段と、該メモリ制御
手段により送信及び受信した画像の合成処理を行う合成
処理手段とを有すること、更には、（２）前記送信及び
受信した画像の合成画像の表示方法を切り替えるための
切替制御手段を有し、前記メモリ制御手段及び合成処理
手段は前記切替制御手段によって制御方法を切り替える
こと、更には、（３）前記再生手段によって再生された
送信及び受信した画像内の送信側話者と受信側話者の各
々の数を検出する検出手段を有し、前記メモリ制御手段
及び合成処理手段は前記検出手段にて得られた話者の数
により制御方法を切り替えること、更には、（４）前記
送信及び受信した画像の合成画像の表示位置を調節する
表示位置制御手段を有し、前記メモリ制御手段及び合成
処理手段は前記表示位置制御手段によって得られた制御
信号により制御方法を切り替えること、更には、（５）
前記送信及び受信した画像内の送信側話者と受信側話者
の各々の表示位置を検出する話者位置検出手段を有し、
前記メモリ制御手段及び合成処理手段は前記話者位置検
出手段によって得られた制御信号により制御方法を切り
替えること、更には、（６）前記記録再生手段より再生
された送信する音声と受信した音声にて送信話者或いは
受信側話者のどちらが話しているかを検出する話者検出
手段を有し、前記メモリ制御手段及び合成処理手段は前
記話者検出手段によって得られた制御信号により制御方
法を切り替えることを特徴としたものである。

【００１３】

【作用】

（１）第１の発明に係る画像通信装置によれば、前記記
録再生手段により再生された送信する画像と受信した画
像をメモリに記憶し、分割して読み出すメモリ制御手段
と、送信及び受信した画像の合成画像を表示する合成表
示手段とを備えたことにより送信及び受信した画像を１
台のモニタにて合成表示可能となる。 （２）第２の発明に係る画像通信装置によれば、切替制
御手段とそれによって制御方法が切り替わるメモリ制御
手段及び合成処理手段を備えることにより、表示内容に
あわせた画面構成の有効な見やすい合成画像の表示の切
り替え可能となる。 （３）第３の発明に係る画像通信装置によれば、送信及
び受信した画像内の送信側話者と受信側話者の各々の数
を検出する検出手段を備えたことにより、話者の数にあ
わせて表示内容にあわせた画面構成の有効な見やすい合
成画像の表示の自動切替が可能となる。

【００１４】（４）第４の発明に係る画像通信装置によ
れば、送信及び受信した合成画像の表示位置を調節する
表示位置制御手段を備えたことにより、画像内の話者の
位置にあわせた表示位置の制御が可能となる。 （５）第５の発明に係る画像通信装置によれば、送信及
び受信した画像内の送信側話者と受信側話者の各々の表
示位置を検出する話者位置検出手段を備えたことによ
り、画像内の話者の位置にあわせた表示位置の自動制御
が可能となる。 （６）第６の発明に係る画像通信装置によれば、送信側
話者或いは受信側話者のどちらが話しているかを検出す
る話者検出手段を備えたことにより、発言している方の
表示領域の優位性を高くした見やすい合成画像の表示の
自動切替可能となる。

【００１５】

【実施例】実施例について、図面を参照して以下に説明
する。図１は、本発明による画像通信装置の一実施例を
説明するための構成図で、図中、１はカメラ、２は第１
の切替スイッチ、３はＡ／Ｄ変換器、４は送信用メモ
リ、５はコーデック部、６は回線インタフェイス部、７
は第２の切替スイッチ、８は受信用メモリ、９はメモリ
制御部、１０は第１のＤ／Ａ変換器、１１はモニタ、１
２は第３の切替スイッチ、１３は記録合成部、１４は第
２のＤ／Ａ変換器、１５はＶＴＲ（Ｖideo Ｔape Ｒeco
rder）、１６は制御部、１７は合成処理部である。

【００１６】送信者を撮影するカメラ１と、カメラ１に
て取り込んだ画像か、後述するＶＴＲ１５から再生され
る送受信画像かを選択するための第１の切替スイッチ２
と、第１の切替スイッチ２により切替制御されて得られ
るカメラ１にて取り込んだ画像或いはＶＴＲ１５から再
生される送受信画像をディジタルデータに変換するＡ／
Ｄ変換器３と、ディジタル変換されたデータを記憶する
送信用メモリ４と、送受信するデータを圧縮伸張符号復
合化を行うコーデック部５と、回線とデータをやりとり
するための回線インタフェイス部６と、該回線インタフ
ェイス部６にて受信され、コーディック部５にて伸張復
合化された受信データ受信したデータかＡ／Ｄ変換器３
によりディジタルデータに変換されたデータかを選択す
る第２の切替スイッチ７と、該第２の切替スイッチ７に
より切替制御されて得られる前記受信データ或いはＡ／
Ｄ変換器３によりディジタルデータに変換されたデータ
を記憶する受信用メモリ８と、Ａ／Ｄ変換器３により得
られるデータと第２の切替スイッチ７により得られるデ
ータを、送信用メモリ４と受信用メモリ８に書き込む制
御と後述する第１のＤ／Ａ変換器１０と記録合成部１３
へ読み出す制御を備えたメモリ制御部９と、受信用メモ
リ８から読み出されたデータをアナログ信号に変換する
第１のＤ／Ａ変換器１０と、送信または受信内容を表示
するモニタ１１と、該モニタ１１に表示する内容におい
て送信画像あるいは受信画像とを選択する第３の切替ス
イッチ１２と、送信用メモリ４から読み出したデータと
受信用メモリ８から読み出したデータとを１フィールド
毎に交互に合成する記録合成部１３と、該記録合成部１
３で合成された送受信画像のデータをアナログデータに
変換する第２のＤ／Ａ変換器１４と、アナログデータに
変換された送受信画像信号をビデオテープに記録／再生
するＶＴＲ１５と、さらに、システム全体を制御する制
御部１６とを備えており、さらに、ＶＴＲ１５により再
生された送信する画像と受信した画像を、それぞれ送信
用メモリ４と受信用メモリ８に記憶し、分割して読み出
すメモリ制御部９により読み出された送信及び受信した
画像の合成処理を行う合成処理部１７とを備えている。

【００１７】前述のように構成した画像通信装置におい
て、ＶＴＲ１５により再生された送受信画像データは、
図２に示すように、１フィールドごとに送信画像データ
と受信画像データが交互に繰り返された信号になってい
る。該送受信画像データは第１の切替スイッチ２を介
し、Ａ／Ｄ変換器３にてディジタルの送受信画像データ
に変換され出力される。この送受信画像データは、メモ
リ制御部９に書き込み制御により、送信画像データは送
信用メモリ４に、受信画像データは受信用メモリ８に記
憶される。

【００１８】この送信用メモリ４及び受信用メモリ８に
記憶される送信画像データ及び受信画像データは、それ
ぞれ片フィールド分の情報しか有さないので、時間的に
欠けた情報を補うために、送信用メモリ４及び受信用メ
モリ８からのデータの読み出しは同じデータを２回読み
出す。送信用メモリ４及び受信用メモリ８に記憶された
画像データは、メモリ制御部９により制御部１６によっ
て定められた後述する合成表示モードにあわせたメモリ
読み出し制御を行う。読み出された画像データは合成処
理部１７に渡され、制御部１６によって定められた合成
表示モードにあわせて送信用メモリ４より読み出された
画像データと受信用メモリ８より読み出された画像デー
タとを切り替えて出力する。その後は従来例と同じく、
第１のＤ／Ａ変換器１０にてアナログデータに変換され
た後にビデオ信号として出力され、第３のスイッチ１２
が１２ａに位置するように制御されている時、第３のス
イッチ１２を介してモニタ１１に表示される。

【００１９】図３〜図５は、前述の制御部によって定め
られる合成表示モードにおいて、送信側及び受信側の話
者数にあわせた合成表示例を示す図である。図３は、送
信側受信側共に話者数が１人の場合の合成表示例を示す
図である。送信画像及び受信画像内の垂直方向に画像上
下まで延びた線Ａ，Ｂは読出領域境界線であり、読出領
域境界線Ａ，Ｂに挟まれた部分のみデータを切り出し、
画像データとしてメモリ制御部９により読み出される。
送信画像及び受信画像の読み出されるタイミングは、図
３の表示画面中に示した垂直方向に画面上下まで延びた
中心線Ｃ、つまり分割境界線Ｃにおいて左半分が表示さ
れる期間は受信画像が、右半分が表示される期間は送信
画像が読み出される。読み出されたデータは合成処理部
１７に送られる。該合成処理部１７では上述の読み出し
タイミングと同様に、分割境界線Ｃにおいて左半分が表
示される期間は受信画像が、右半分が表示される期間は
送信画像が表示されるように切り替えられ、合成画像デ
ータが生成され、第１のＤ／Ａ変換器１０、第３のスイ
ッチ１２を介してモニタ１１に左右分割画像が表示され
る。

【００２０】図４は、送信側或いは受信側の話者数が２
人以上の場合の合成表示例２を示す図である。送信画像
及び受信画像内の水平方向に画面左右まで延びた線Ｄ，
Ｅは読出領域境界線であり、読出領域境界線Ｄ，Ｅに挟
まれた部分のみデータを切り出し画像データとしてメモ
リ制御部９により読み出される。前述の送信側受信側共
に話者数が１人の場合と同じく、送信画像及び受信画像
の読み出されるタイミングは、図４の表示画面中に示し
た水平方向に画面左右まで延びた中心線Ｆ、つまり分割
境界線Ｆにおいて上半分が表示される期間は受信画像
が、下半分が表示される期間は送信画像が読み出され
る。読み出されたデータは合成処理部１７に送られる。
合成処理部１７では前述の読み出しタイミングと同様
に、分割境界線Ｃにおいて上半分が表示される期間は受
信画像が、下半分が表示される期間は送信画像が表示さ
れるように切り替えられ合成画像データが生成され、第
１のＤ／Ａ変換器１０と第３のスイッチ１２を介してモ
ニタ１１に上下分割画像が表示される。

【００２１】図５は、前述の送信側受信側共に話者数が
１人の場合の違う合成表示例３を示す図である。受信画
像は従来例と同じ制御方法にてメモリ制御部９により読
み出されるが、送信画像は図５の表示画面に示すような
子画面表示ができるように、図示しない垂直水平方向に
画像情報を間引き処理や補間処理を行った後にメモリ制
御部９により読み出す。送信画像及び受信画像の読み出
されるタイミングは、図５の表示画面中に示した子画面
表示領域境界線Ｇの外側が表示される期間は受信画像
が、子画面表示領域境界線Ｇの内側が表示される期間は
送信画像が読み出される。読み出されたデータは合成処
理部１７に送られる。合成処理部１７では前述の読み出
しタイミングと同様に、子画面表示領域境界線Ｇの外側
が表示される期間は受信画像が、子画面表示領域境界線
Ｇの内側が表示される期間は送信画像が表示されるよう
に切り替えられ、合成画像データが生成され、第１のＤ
／Ａ変換器１０と第３のスイッチ１２を介してモニタ１
１に親子合成画像が表示される。

【００２２】図６は、本発明による画像通信装置の他の
実施例を説明するための構成図で、図中、２０は切替制
御部で、その他、図１と同じ作用をする部分は同一の符
号を付してある。第１の発明における実施例１の構成と
異なる点は、図６に示す実施例２の全体構成図のとお
り、合成表示モードの切り替え制御を行う切替制御部２
０が追加された点である。切替制御部２０は、図７に示
すような左右分割キー２１と上下分割キー２２と親子合
成キー２３の入力キーによって構成されている。

【００２３】前述のように構成した画像通信装置におい
て、図７中の左右分割キー２１は、前述の合成表示例１
及び図３で説明した左右分割表示に対応し、上下分割キ
ー２２は前述の合成表示例２及び図４で説明した上下分
割表示に対応し、親子合成キー２３は前述の合成表示例
３及び図５で説明した親子合成表示に対応し、キーが押
されると各キーに対応した制御信号が制御部１６に送ら
れる。制御部１６では受けた制御信号に応じて合成表示
例に対応したメモリ読み出し制御及び合成処理を行うよ
うメモリ制御部９及び合成処理部１７に制御信号が送ら
れ、前述した合成表示例に対応するメモリ読み出し制御
及び合成処理が行われる。

【００２４】図８及び図９は、本発明による画像通信装
置の更に他の実施例を説明するための構成図で、図中、
３０は話者数検出部、３１はメモリ選択スイッチ、３２
は顔画像領域抽出部、３３は顔画像領域数検出部、３４
は合成表示モード切替制御部で、その他、図１と同じ作
用をする部分は同一の符号を付してある。

【００２５】第１の発明における実施例１の構成と異な
る点は、図８に示す実施例３の全体構成図のとおり、Ｖ
ＴＲ１５によって再生された送信及び受信した画像内の
送信側話者と受信側話者の各々の数を検出する話者数検
出部３０が追加された点である。前記話者数検出部３０
は、図９に示す話者数検出部構成図のように、送信用メ
モリ４または受信用メモリ８から画像データを取り込む
際のメモリ選択スイッチ３１と、画像の色成分判定によ
って肌色部分を抽出する顔画像領域抽出部３２と、該顔
画像領域抽出部３２によって抽出された顔画像領域の数
を検出する顔画像領域数検出部３３と、該顔画像領域数
検出部３３によって検出された顔画像領域の数に応じて
合成表示モードを切り替えるための合成表示モード切替
制御部３４によって構成されている。

【００２６】前述のように構成した画像通信装置におい
て、ＶＴＲ１５によって再生された送信及び受信した画
像を送信用メモリ４及び受信用メモリ８それぞれに取り
込んだ状態において、合成表示モード切替制御部３４は
話者数の検出対象を受信画像と送信画像のどちらに対し
て行うのかをメモリ選択スイッチ３１を制御して切り替
えることで画像データを取り込むメモリを決定する。該
決定されたメモリに対し、まず画像の色成分判定により
肌色部分を抽出することで顔画像領域抽出部３２は顔画
像領域の抽出を行う。それにより得られた顔画像領域の
数を顔画像領域数検出部３３により検出する。受信画像
或いは送信画像のどちらかの話者数が検出されると、合
成表示モード切替制御部３４は検出されていない方の画
像に対し、メモリ選択スイッチ３１を制御し切り替える
ことで同様な手法にて話者数の検出を繰り返す。

【００２７】送信画像の話者数と受信画像の話者数各々
について、話者数検出が行われた後に合成表示モード切
替制御部３４は、送信側受信側共に話者数が１人の場合
は実施例１で述べた左右分割表示もしくは親子合成表示
に、送信側或いは受信側の話者数が２人以上の場合は実
施例１で述べた上下分割表示に対応したメモリ読み出し
制御及び合成処理を行うようメモリ制御部９及び合成処
理部１７に制御信号が送られ、前述した合成表示例に対
応するメモリ読み出し制御及び合成処理が行われる。

【００２８】図１０は、本発明による画像通信装置の更
に他の実施例を説明するための構成図で、図中、４０は
表示位置制御部で、その他、図６と同じ作用をする部分
は同一の符号を付してある。第１の発明における実施例
１の構成と異なる点は、図１０に示す実施例４の全体構
成図のとおり、切り出し画像の表示部分を移動できるよ
うに表示位置の制御を行う表示位置制御部４０が追加さ
れた点である。表示位置制御部４０は図１１に示すよう
に左右キー４１と上下キー４２の入力キーによって構成
されている。

【００２９】前述のように構成した画像通信装置におい
て、前記前記入力キー４１，４２が押されると表示位置
制御部４０から各キーに対応した制御信号が制御部１６
に送られる。このとき制御部１６によって制御される合
成表示モードが左右分割表示になっている場合で左右キ
ー４１が押されたとき、表示位置制御部４０で得られる
制御信号により、図１２に示す合成画面中の分割境界線
Ｃは左右キー４１の左右に対応した方向へ移動する。い
まここで右方向へキーが押され、分割境界線Ｃが移動し
てＣ１の位置に移動したとする。その場合、受信画像の
表示される領域、つまりメモリ制御部９により受信用メ
モリ８から読み出される画像領域は受信画像中に示した
読出領域境界線Ａ１，Ｂ１の挟まれる領域になる。同様
に送信画像の表示される領域、つまりメモリ制御部９に
より送信用メモリ４から読み出される画像領域は、読出
領域境界線Ａ２，Ｂ２の挟まれる領域になる。

【００３０】送信画像及び受信画像の読み出されるタイ
ミングは、図１２の表示画面中に示す分割境界線Ｃ１の
左部分が表示される期間は受信画像が読み出され、右部
分が表示される期間は送信画像が読み出される。読み出
されたデータは合成処理部１７に渡され、該合成処理部
１７では前述の読み出しタイミングと同様に、分割境界
線Ｃにおいて左部分が表示される期間は受信画像が表示
され、右部分が表示される期間は送信画像が表示される
ように切り替えられ合成画像データが生成される。した
がって、左右キー４１が押されることで制御部１６では
受けた制御信号に応じて、前述のようにメモリ読み出し
制御及び合成処理を行うようメモリ制御部９及び合成処
理部１７に制御信号が送られる。

【００３１】また、制御部１６によって制御される合成
表示モードが上下分割表示になっている場合で上下キー
４２が押されたとき、表示位置制御部４０で得られる制
御信号により、図１２に示す合成画面中の分割境界線Ｆ
は上下キー４２の上下に対応した方向へ移動する。いま
ここで下方向へキーが押され、分割境界線Ｆが移動して
Ｆ１の位置に移動したとする。その場合、受信画像の表
示される領域、つまりメモリ制御部９により受信用メモ
リ８から読み出される画像領域は、受信画像中に示した
読出領域境界線Ｄ１，Ｅ１の挟まれる領域になり、送信
画像の表示される領域、つまりメモリ制御部９により送
信用メモリ４から読み出される画像領域は、読出領域境
界線Ｄ２，Ｅ２の挟まれる領域になる。

【００３２】送信画像及び受信画像の読み出されるタイ
ミングは、図１３の表示画面中に示す分割境界線Ｆ１の
上部分が表示される期間は受信画像が読み出され、下部
分が表示される期間は送信画像が読み出される。読み出
されたデータは合成列理部１７に渡され、合成処理部１
７では前述の読み出しタイミングと同様に、分割境界線
Ｆ１において上部分が表示される期間は受信画像が表示
され、下部分が表示される期間は送信画像が表示される
ように切り替えられ合成画像データが生成される。した
がって、上下キー４２が押されることで制御部１６では
受けた制御信号に応じて上述のようにメモリ読み出し制
御及び合成処理を行うようメモリ制御部９及び合成処理
部１７に制御信号が送られる。

【００３３】図１４及び図１５は、本発明による画像通
信装置の更に他の実施例を説明するための構成図で、図
中、５０は話者位置検出部で、その他、図８と同じ作用
をする部分は同一の符号を付してある。第１の発明にお
ける実施例１の構成と異なる点は、図１４に示す実施例
５の全体構成図のとおり、ＶＴＲ１５によって再生され
た送信及び受信した画像内の送信側話者と受信側話者の
各々の位置を検出する話者位置検出部５０が追加された
点である。

【００３４】前記話者位置検出部５０は、図１５に示す
話者位置検出部構成図のように、送信用メモリ４または
受信用メモリ８から画像データを取り込む際のメモリ選
択スイッチ５１と、画像の色成分判定によって肌色部分
を抽出する顔画像領域抽出部５２と、該顔画像領域抽出
部５２によって抽出された顔画像領域の中心位置を検出
する顔画像領域中心位置検出部５３と、該顔画像領域中
心位置検出部５３によって検出された顔画像領域の中心
位置に応じて切り出し画像り表示部分を移動できるよう
表示位置の制御を行う表示位置制御部５４によって構成
されている。

【００３５】前述のように構成した画像通信装置におい
て、ＶＴＲ１５によって再生された送信及び受信した画
像を送信用メモリ４及び受信用メモリ８それぞれに取り
込んだ状態において、表示位置制御部５４は話者数の検
出対象を受信画像と送信画像のどちらに対して行うのか
をメモリ選択スイッチ５１を制御して切り替えることで
画像データを取り込むメモリを決定する。

【００３６】図１６（ａ）〜（ｄ）は、表示位置移動制
御の説明図（その１）である。まず、受信用メモリ８の
画像内容が、図１６（ａ）に示す受信画像のように、話
者が１人の場合について説明する。今、メモリ選択スイ
ッチ５１は、図１５に示す５１ａ側になっており、顔画
像領域抽出部５２はメモリ選択スイッチ５１を介し、受
信用メモリ８から画像データを読み出すことで、図１６
（ｂ）の顔画像抽出画像に示すような顔画像領域の抽出
を行う。得られた顔画像領域において、図１６（ｂ）の
顔画像抽出画像のように、顔画像領域において水平幅が
最大の画像の１ラインに注目し、画像の色成分判定によ
って肌色部分と判定されない領域から判定された領域に
変化する地点を変化点Ｈとし、肌色部分と判定された領
域から判定されない領域に変化する地点を変化点Ｉとす
る。前記変化点Ｈと変化点Ｉの中心位置を中心点Ｊと
し、中心点Ｊの水平方向及び垂直方向の座標を顔画像領
域の中心位置座標として、顔画像領域中心位置検出部５
３により出力される。

【００３７】ここで、図１６（ｃ）に示す受信画像の読
出画像領域のように、顔画像領域中心位置検出部５３に
より得られた顔画像領域の中心点Ｊを含む垂直方向に画
面上下まで延びた線を読出領域中心線Ｃ２とする。表示
位置制御部５４では、前記読出領域中心線Ｃ２を中心と
した図１６（ｃ）の受信画像の読出画像領域中に示した
読出領域境界線Ａ５，Ｂ５の挟まれる領域が受信画像の
表示領域となり、図１６（ｄ）に示す表示画像のよう
に、受信画像の表示領域が移動する。得られた読出領域
境界線Ａ５，Ｂ５をメモリ制御部９に送ることで、該メ
モリ制御部９は読出領域境界線Ａ５，Ｂ５の挟まれる領
域に対し、受信用メモリ８から切り出し画像データを読
み出すよう制御される。

【００３８】同じように、メモリ選択スイッチ５１を図
１５に示す５１ｂ側にメモリ選択スイッチ５１を介し、
送信用メモリ４から画像データを読み出すことで、送信
画像に対しても中心位置を検出し、得られた中心点を含
む読出領域中心線を中心とし、読出領域境界線を生成
し、メモリ制御部９は前記読出領域境界線の挟まれる領
域に対し、送信用メモリ４から切り出し、画像データを
読み出すよう制御される。送信画像及び受信画像の読み
出されるタイミングと、合成処理部１７での切り替えタ
イミングは、実施例４と同様になる。したがって、話者
位置検出部５０によって得られる受信及び送信画像の表
示領域に応じて、前述のようにメモリ読み出し制御及び
合成処理を行う。

【００３９】図１７（ａ）〜（ｄ）は表示位置移動制御
の説明図（その２）である。次に、受信用メモリ８の画
像内容が、図１７（ａ）に示す受信画像のように、話者
が２人以上の場合について説明する。顔画像領域抽出部
５２は、メモリ選択スイッチ５１を介し、受信用メモリ
８から画像データを読み出すことで、図１７（ｂ）の顔
画像抽出画像に示すような顔画像領域の抽出を行う。得
られた顔画像領域において、図１７（ｂ）の顔画像抽出
画像のように、それぞれの顔画像領域に対し、垂直幅が
最大の画像の１垂直ラインに注目し、画像の色成分判定
によって、肌色部分と判定されない領域から判定された
領域に変化する地点を変化点Ｈ１，Ｈ２とし、肌色部分
と判定された領域から判定されない領域に変化する地点
を変化点Ｉ１，Ｉ２とする。前記変化点Ｈ１，Ｈ２と変
化点Ｉ１，Ｉ２の中心位置をそれぞれ中心点Ｊ１，Ｊ２
とし、さらに中心点Ｊ１，Ｊ２との中心点を中心点Ｋと
し、画像全体の中心点を求める。中心点Ｋの水平方向及
び垂直方向の座標を顔画像領域の中心位置座標として、
顔画像領域中心位置検出部５３により出力される。

【００４０】ここで、図１７（ｃ）に示す受信画像の読
出画像領域のように、顔画像領域中心位置検出部５３に
より得られた顔画像領域の中心点Ｋを含む水平方向に画
面左右まで延びた線を読出領域中心線Ｆ２とする。表示
位置制御部５４では、前記読出領域中心線Ｆ２を中心と
した図１７（ｃ）の受信画像の読出画像領域中に示した
読出領域境界線Ｄ５，Ｅ５の挟まれる領域が受信画像の
表示領域となり、図１７（ｄ）に示す表示画像のよう
に、受信画像の表示領域が移動する。得られた読出領域
境界線Ｄ５，Ｅ５をメモリ制御部９に送ることで、メモ
リ制御部９は読出領域境界線Ｄ５，Ｅ５の挟まれる領域
に対し、受信用メモリ８から切り出して画像データを読
み出すよう制御される。

【００４１】送信画像に対してもメモリ選択スイッチ５
１への切替制御を行い、以後は前述と同様な処理を行う
ことで、話者を中心とした切り出し画像データを読み出
し制御が行われる。なお、受信画像或いは送信画像にお
いて、２人以上の場合においても各話者の顔画像領域の
中心点の数が増えるだけで、すべての中心点において画
像全体の中心点を求めることで、前記と同様に各話者を
中心とした切り出し画像データを読み出し制御が可能と
なる。

【００４２】図１８及び図１９は、本発明による画像通
信装置の更に他の実施例を説明するための構成図で、図
中、６０は話者検出部、６１，６２は音声レベル検出
部、６３は話者検出制御信号生成部、６４は画像合成順
位制御部で、その他、図１と同じ作用をする部分は同一
の符号を付してある。第１の発明における実施例１の構
成と異なる点は、図１８に示す実施例６の全体構成図の
とおり、ＶＴＲ１５より再生された送信する音声と受信
した音声にて送信側話者或いは受信側話者のどちらが話
しているかを検出する話者検出部６０が追加された点で
ある。

【００４３】前記話者検出部６０は、図１９に示す話者
検出部構成図のように、受信音声の音声レベルを検出す
る第１の音声レベル検出部６１と、送信音声の音声レベ
ルを検出する第２の音声レベル検出部６２と、前記第１
及び第２の音声レベル検出部６１，６２より得られた各
々の音声レベルより送信側話者或いは受信側話者のどち
らが話しているかを検出し、制御信号を生成する話者検
出制御信号生成部６３と、該話者検出制御信号生成部６
３にて得られた制御信号により、合成表示モードに合わ
せて合成画像の合成順位を制御する画像合成順位制御部
６４によって構成されている。

【００４４】前述のように構成した画像通信装置におい
て、図１９に示すように、ＶＴＲ１５より再生された受
信音声は、第１の音声レベル検出部６１に第２の音声レ
ベル検出部６２に入力される。前記第１及び第２の音声
レベル検出部６１，６２は、各々の音声レベルを話者検
出制御信号生成部６３に入力する。該話者検出制御信号
生成部６３では、各々の音声レベルを監視し、音声レベ
ルが検出されてからある一定期間無音状態になるまで音
声レベルが検出された方を発言者とみなし、発言者が送
信側話者或いは受信側話者であるかの制御信号を出力す
る。

【００４５】ここで、今、合成表示モードが前述の左右
分割表示或いは上下分割表示で前記話者検出制御信号生
成部６３にて受信画像が発言者とみなされた場合、画像
合成順位制御部６４は、受信画像の表示領域に対し、図
２０（ａ）,（ｂ）に示すような枠線を重畳するようメ
モリ制御部９及び合成処理部１７に制御信号を送る。ま
た、合成表示モードが親子合成表示で前記発言者検出部
６３にて受信画像が発言者とみなされた場合、画像合成
順位制御部６４は、図２０（ｃ）に示すように、受信画
像を親画面とし、送信画像を子画面となるようにメモリ
制御部９及び合成処理部１８に制御信号を送る。なお、
前記本発明の第２の発明から第６の発明までの各実施例
は、各々構成を組み合わせることが可能であり、各実施
例で説明した構成のみに限定されるものではない。

【００４６】

【発明の効果】以上の説明から明らかなように、本発明
によると、以下のような効果がある。 （１）請求項１に対応する効果：送信する信号と受信し
た信号とを同期して１つの記録媒体に記録及び再生する
記録再生手段と、該記憶再生手段により再生された送信
する画像と受信した画像をメモリに記憶し、分割して読
み出すメモリ制御手段と、該メモリ制御手段により送信
及び受信した画像の合成処理を行う合成処理手段にて合
成表示可能としたので、送信及び受信した画像を１台の
モニタにて合成表示可能となり、複数台のモニタを用意
する必要がなくなる。 （２）請求項２に対応する効果：送信及び受信した画像
の合成画像の表示方法を切り替えるための切替制御手段
を有し、前記メモリ制御手段及び合成処理手段が前記切
替制御手段によって前記メモリ制御手段の制御方法を切
り替わることにより合成表示の切り替えを可能としたの
で、表示内容に合わせた画面構成の有効な見やすい合成
画像の表示の切り替え可能となる。 （３）請求項３に対応する効果：前記再生手段によって
再生された送信及び受信した画像内の送信側話者と受信
側話者の各々の数を検出する検出手段を有し、前記メモ
リ制御手段は、前記検出手段にて得られた話者の数によ
り、前記メモリ制御手段の制御方法を切り替えて合成表
示可能としたので、話者の数に合わせて表示内容に合わ
せた画面構成の有効な見やすい合成画像の表示の自動切
替が可能となり、通話中に送信側或いは受信側の話者数
が変わったときでも、自動的に合成画像の表示が切り替
わり、操作性の向上となる。 （４）請求項４に対応する効果：送信及び受信した画像
の合成画像の表示位置を調節する表示位置制御手段を有
し、前記メモリ制御手段及び合成処理手段は、前記表示
位置制御手段によって得られた制御信号により制御方法
を切り替えて合成表示可能としたので、話者以外の画像
部分を見たい場合や話者の位置が偏っている場合、画像
内の話者の位置に合わせた表示位置の制御が可能とな
る。 （５）請求項５に対応する効果：送信及び受信した画像
内の送信側話者と受信側話者の各々の表示位置を検出す
る話者位置検出手段を有し、前記メモリ制御手段及び合
成処理手段は、前記話者位置検出手段によって得られた
制御信号により制御方法を切り替えて合成表示可能とし
たので、話者の位置が偏っている場合、画像内の話者の
位置に合わせた表示位置の自動制御が可能となり、操作
性の向上につながる。 （６）請求項６に対応する効果：前記記録再生手段より
再生された送信する音声と受信した音声にて、送信側話
者或いは受信側話者のどちらが話しているかを検出する
話者検出手段を有し、前記メモリ制御手段及び合成処理
手段は前記話者検出手段によって得られた制御信号によ
り制御方法を切り替えて合成表示可能としたので、発言
している方の表示領域の優位性を高くした見やすい合成
画像の表示の自動切替可能となる。

【図面の簡単な説明】

【図１】本発明による画像通信装置の一実施例を説明す
るための構成図である。

【図２】本発明におけるＶＴＲにより記録再生される送
受信画像データを示す図である。

【図３】本発明における第１の合成表示例を示す図であ
る。

【図４】本発明における第２の合成表示例を示す図であ
る。

【図５】本発明における第３の合成表示例を示す図であ
る。

【図６】本発明による画像通信装置の他の実施例を説明
するための構成図である。

【図７】本発明における切替制御部の説明図である。

【図８】本発明による画像通信装置の更に他の実施例を
説明するための構成図である。

【図９】図８における話者数検出部の構成図である。

【図１０】本発明による画像通信装置の更に他の実施例
を説明するための構成図である。

【図１１】本発明における表示位置制御部の説明図であ
る。

【図１２】本発明における表示位置制御部の第１の説明
図である。

【図１３】本発明における表示位置制御部の第２の説明
図である。

【図１４】本発明による画像通信装置の更に他の実施例
を説明するための構成図である。

【図１５】図１４における話者位置検出部の構成図であ
る。

【図１６】本発明における表示位置移動制御の第１の説
明図である。

【図１７】本発明における表示位置移動制御の第２の説
明図である。

【図１８】本発明による画像通信装置の更に他の実施例
を説明するための構成図である。

【図１９】図１８における話者検出部の構成図である。

【図２０】本発明における合成表示例を示す図である。

【図２１】従来の画像通信装置の構成図である。

【図２２】従来の画像通信装置の構成図である。

【符号の説明】

１…カメラ、２…第１の切替スイッチ、３…Ａ／Ｄ変換
器、４…送信用メモリ、５…コーデック部、６…回線イ
ンタフェイス部、７…第２の切替スイッチ、８…受信用
メモリ、９…メモリ制御部、１０…第１のＤ／Ａ変換
器、１１…モニタ、１２…第３の切替スイッチ、１３…
記録合成部、１４…第２のＤ／Ａ変換器、１５…ＶＴ
Ｒ、１６…制御部、１７…合成処理部、２０…切替制御
部、３０…話者数検出部、３１…メモリ選択スイッチ、
３２…顔画像領域抽出部、３３…顔画像領域数検出部、
３４…合成表示モード切替制御部、４０…表示位置制御
部、４１…左右キー、４２…上下キー、５０…話者位置
検出部、５２…顔画像領域抽出部、５３…顔画像領域中
心位置検出部、５４…表示位置制御部、６０…話者検出
部、６１，６２…音声レベル検出部、６３…話者検出制
御信号生成部、６４…画像合成順位制御部。

Claims (6)

【特許請求の範囲】
1. 【請求項１】 カメラ等により取り込んだ画像を通信回
   線を用いて送信する画像と、相手より送信され受信した
   画像とを記録する画像通信装置において、送信する信号
   と受信した信号とを同期して１つの記録媒体に記録及び
   再生する記録再生手段と、該記憶再生手段により再生さ
   れた送信する画像と受信した画像をメモリに記憶し、分
   割して読み出すメモリ制御手段と、該メモリ制御手段に
   より送信及び受信した画像の合成処理を行う合成処理手
   段とを有することを特徴とする画像通信装置。
2. 【請求項２】 前記送信及び受信した画像の合成画像の
   表示方法を切り替えるための切替制御手段を有し、前記
   メモリ制御手段及び合成処理手段は前記切替制御手段に
   よって制御方法を切り替えることを特徴とする請求項１
   記載の画像通信装置。
3. 【請求項３】 前記再生手段によって再生された送信及
   び受信した画像内の送信側話者と受信側話者の各々の数
   を検出する検出手段を有し、前記メモリ制御手段及び合
   成処理手段は前記検出手段にて得られた話者の数により
   制御方法を切り替えることを特徴とする請求項１記載の
   画像通信装置。
4. 【請求項４】 前記送信及び受信した画像の合成画像の
   表示位置を調節する表示位置制御手段を有し、前記メモ
   リ制御手段及び合成処理手段は前記表示位置制御手段に
   よって得られた制御信号により制御方法を切り替えるこ
   とを特徴とする請求項１記載の画像通信装置。
5. 【請求項５】 前記送信及び受信した画像内の送信側話
   者と受信側話者の各々の表示位置を検出する話者位置検
   出手段を有し、前記メモリ制御手段及び合成処理手段は
   前記話者位置検出手段によって得られた制御信号により
   制御方法を切り替えることを特徴とする請求項１記載の
   画像通信装置。
6. 【請求項６】 前記記録再生手段より再生された送信す
   る音声と受信した音声にて送信話者或いは受信側話者の
   どちらが話しているかを検出する話者検出手段を有し、
   前記メモリ制御手段及び合成処理手段は前記話者検出手
   段によって得られた制御信号により制御方法を切り替え
   ることを特徴とする請求項１記載の画像通信装置。