JPH09200714A - テレビ電話付き画像処理装置 - Google Patents

Abstract

(57)【要約】 【課題】 テレビ電話によって相手側に撮影画像を送信
する際に、相手に見られたくない部分を隠したり、実際
とは異なる画像を組み合せる等、撮影画像を効果的に加
工して送信する。 【解決手段】 モード切替スイッチＭＯＤは通常モー
ド、画像加工モード等に切り替えるもので、ＣＰＵ１は
このモードの切り替え状態を判別する。画像加工モード
にセットされている際に、テレビ電話回線が接続される
と、ＣＰＵ１は画像撮影部４によって撮影された自画像
の一部にモザイクパターンを重ね合せることにより撮影
画像を加工する。これによって加工された画像はモデム
内蔵回線制御部５を介して相手側に送信される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は電話回線、モデム
を介して通信相手との間で撮影画像の送受信を行うテレ
ビ電話付き画像処理装置に関する。

【０００２】

【従来の技術】近年、公衆電話回線を利用したテレビ電
話システムが各家庭にも普及する傾向にあり、通信相手
との間で撮影画像を送受信することにより効果的なコミ
ュニケーションを可能とする。また、相手側からの撮影
画像（テレビ画面）をテキスト画面上にウインドウ表示
し、テレビ画面をテキストデータとして取り込むように
したテレビ電話付きパーソナルコンピュータも開発さ
れ、その応用範囲も拡大される傾向にある。

【０００３】

【発明が解決しようとする課題】しかしながら、テレビ
電話やそれを利用した何れのシステムにおいても、自己
の撮影画像を静止画像あるいは動画像としてそのまま相
手側に送信するものであり、必ずしもコミュニケーショ
ン機能を効果的に発揮できるとは言えない場合もあっ
た。すなわち、撮影される部屋が煩雑で、ちらかってい
たり、身だしなみが乱れているような場合には、相手に
その状態を見られたくないのが、通常であるが、従来に
おいてはその状態までも正確に相手側に送信されてしま
う。この発明の課題は、テレビ電話によって相手側に撮
影画像を送信する際に、相手に見られたくない部分を隠
したり、実際とは異なる画像を組み合せる等、撮影画像
を効果的に加工して送信できるようにすることである。

【０００４】

【課題を解決するための手段】この発明の手段は次の通
りである。電話回線、モデムを介して通信相手との間で
撮影画像の送受信を行うテレビ電話付き画像処理装置に
おいて、 （１）、モード切替手段は相手側に送信する撮影画像を
そのまま送信する通常モードと、撮影画像を加工して送
信する画像加工モードとを切り替える入力装置である。 （２）、モード判別手段はこのモード切替手段によって
切り替えられているモードを判別する。 （３）、人物画像特定手段はこのモード判別手段によっ
て画像加工モードに切り替えられていることが判別され
た際に、相手側に送信する撮影画像の中から人物に対応
する画像範囲を特定する。 （４）、撮影画像加工手段は前記画像加工モードに切り
替えられている場合に、相手側に送信する撮影画像の少
なくとも一部を前記人物画像特定手段によって特定され
た画像範囲に基づいて加工するもので、これによって加
工された撮影画像は相手側に送信される。 なお、前記撮影画像加工手段は撮影画像のうち前記人物
画像特定手段によって特定された画像範囲を除く背景部
分に予め決められた固定画像パターンを重ね合せること
により撮影画像を加工するようにしてもよい。ここで、
固定画像パターンとは例えば背景部分の鮮明さをぼかす
ためのモザイクパターンあるいは実際の背景とは異なる
背景パターン、つまり、高級家具等を整然と配置した仮
想の背景パターン等である。また、前記人物画像特定手
段は熱線の分布状態を検出する熱センサを有し、この熱
センサによって検出された熱線分布状態に基づいて人物
に対応する画像範囲を特定するようにしてもよい。この
場合、前記人物画像特定手段は熱センサによって検出さ
れた熱線分布状態に基づいてその強弱を判別し、熱線が
強い顔部分を人物画像として特定するようにしてもよ
い。また、前記撮影画像加工手段は撮影画像のうち前記
人物画像特定手段によって特定された画像範囲に予め決
められた固定画像パターンを重ね合せることにより撮影
画像を加工するようにしてもよい。いま、テレビ電話の
発信あるいは着信時において、テレビ電話の回線が接続
されるとモード判別手段は現在セットされているモード
状態を判別し、画像加工モードにセットされていること
を判別すると、人物画像特定手段は相手に送信する撮影
画像の中から人物に対応する画像範囲を特定する。する
と、撮影画像加工手段は前記画像加工モードに切り替え
られている場合に、相手側に送信する撮影画像の少なく
とも一部を前記人物画像特定手段によって特定された画
像範囲に基づいて加工する。これによって加工された撮
影画像は相手側に送信される。したがって、テレビ電話
によって相手側に撮影画像を送信する際に、相手に見ら
れたくない部分を隠したり、実際とは異なる画像を組み
合せる等、撮影画像を効果的に加工して送信することが
できる。

【０００５】

【発明の実施の形態】以下、図１〜図６を参照してこの
発明の一実施形態について説明する。ＣＰＵ１はＲＯＭ
２に格納されている各種プログラムにしたがってこのテ
レビ電話付き画像処理装置の全体動作を制御する中央演
算処理装置である。ＲＯＭ２は入出力制御プログラム等
の各種プログラムの他、自己の撮影画像（自画像）を相
手側に送信する際に、この自画像の一部を隠す（ぼか
す）ためのモザイクパターンが格納されている。このモ
ザイクパターンは１文字サイズで、このパターンを自画
像の背景部分等に順次埋め込むことにより背景部分等の
ぼかしに使用される。

【０００６】入力部３は通常備えられている各種のキー
の他、モード切替スイッチＭＯＤが設けられている。こ
のモード切替スイッチＭＯＤは相手側に撮影画像（自画
像）を送信する際に、自画像をそのまま送信する通常モ
ードと、自画像を加工して送信する画像加工モード（背
景ぼかしモード、顔のみモード、いたずら防止モード）
と、自画像の送信を止めて音声のみを送信する声だけモ
ードとに切り替える回転式スイッチやスライド式スイッ
チ等である。ここで、背景ぼかしモードは自画像の背景
部分にモザイクパターンを埋め込むことによって背景部
分をぼかす画像加工処理を指示するためのモードであ
る。また、顔のみモードは自画像のうち顔を除く全ての
部分にモザイクパターンを埋め込んで当該部分をぼかす
画像加工処理を指示するためのモードである。更に、い
たずら防止モードはいたずら電話に対する対応策として
人物部分にモザイクパターンを埋め込んで顔等の人物を
ぼかす画像加工処理を指示するためのモードであると共
に、音声を加工する音声加工処理を指示するためのモー
ドである。

【０００７】画像撮影部４はビデオカメラを構成するも
ので、固体撮像素子（例えば、ＣＣＤイメージセンサ）
を有し、この固体撮像素子に受光された被写体像は光電
変換されると共にホワイトバランスやカラー調整が施さ
れ、アナログ信号からデジタル信号に変換されてＣＰＵ
１に取り込まれる。ここで、ＣＰＵ１はモード切替スイ
ッチＭＯＤによってセットされている現在のモードを判
別し、その結果、画像加工モードにセットされている場
合には、それに応じた画像加工処理を行い、これによっ
て加工した自画像はモデム内蔵回線制御部５で変調され
相手側に送信される。

【０００８】モデム内蔵回線制御部５は音声データ、画
像データを変復調するもので、受信バッファ６、発信バ
ッファ７を介して相手側との間で音声データ、画像デー
タの送受信を行う。ここで、相手側から送信されて来た
音声データ、画像データはモデム内蔵回線制御部５によ
って復調され、相手画像はモニタ表示部８にそのまま表
示出力され、音声データは音声入出力部９を構成するス
ピーカから音声出力される。

【０００９】音声入出力部９はマイクロホン、スピーカ
を有する構成で、ＣＰＵ１はモード切替スイッチＭＯＤ
がいたずら防止モードにセットされている際にマイクロ
ホンからの入力音声を加工して相手側に送信する。ここ
で、入力音声の加工は発信者の低音をカットするか、発
信者の音声を認識して機械音を音声発生部１０から発音
させるかの処理を行うもので、その加工音の選択は入力
部３上の特定キーを操作することによって行われる。

【００１０】熱センサ１１は非接触型温度センサで、人
体の表面温度に応じた赤外線を検出し、その強度に応じ
た熱分布状態はデジタル信号に変換されてＣＰＵ１に取
り込まれ、熱分布メモリ１２に格納される。この場合、
顔の部分と衣服を着ている部分とでは温度差があり、温
度が高い程、放射される赤外線の波長が短かくなるた
め、その熱分布状態によって顔の部分と衣服を着ている
部分とを識別することが可能となる。ここで、ＣＰＵ１
は自画像を加工する際に、熱分布メモリ１２の内容に基
づいて人物と背景部分との識別や顔とそれ以外との識別
を行い、これによって自画像の加工範囲を特定し、モザ
イクパターンを当該加工範囲に埋め込む。その際、ＣＰ
Ｕ１は画像合成メモリ１３を用いて自画像とモザイクパ
ターンとを合成し、この合成画像を相手側に送信する。

【００１１】図２はテレビ電話付き画像処理装置の外観
を概略的に示したもので、モニタ表示部８の上側にはビ
デオカメラを構成する画像撮影部４およびその近傍に熱
センサ１１が、またその上側には入力部３が設けられて
いる。すなわち、発信者の正面を撮影する画像撮影部４
の近傍に、熱センサ１１が設けられており、熱センサ１
１は撮影画像（自画像）と同等の被写体の熱分布状態を
その正面から検出可能な位置に設置されている。

【００１２】次に、このテレビ電話付き画像処理装置の
動作を図３および図４に示すフローチャートにしたがっ
て説明する。いま、テレビ電話の回線が接続された際、
つまり発信時あるいは着信時において、相手側から送信
されて来た音声および撮影画像はモデム内蔵回線制御部
５を介して取り込まれ、そのまま音声出力／画像出力さ
れる。一方、相手側に送信する自己の撮影画像や音声は
モード切替スイッチＭＯＤによって設定されている現在
のモード（通常モード、画像加工モード、声だけモー
ド）に応じたものとなる。したがって、発信時にはモー
ド切替スイッチＭＯＤによって所望のモードに切り替え
てから発信し、また着信時にはオンフックする前に所望
のモードに切り替えておく。勿論、通話中に通常モード
に切り替えてもよく、モードの切り替えは必要に応じて
行うことができる。

【００１３】図３は音声送信処理を示したフローチャー
トである。先ず、ＣＰＵ１はモード切替スイッチＭＯＤ
の切替状態を判別し（ステップＡ１）、いたずら防止モ
ードでなければ、通常と同様にマイクロホンからの入力
音声をモデム内蔵回線制御部５を介してそのまま相手側
に送信するが（ステップＡ２）、いたずら防止モードに
セットされている場合には、予め設定されている声の選
択状態を判別する（ステップＡ３）。ここで、送信音と
して男性の声、女性の声、特に低い声、高い声、若い
声、しぶい声等の疑似音を入力部３上のキー操作によっ
て任意に選択可能となっており、これらの何れかの疑似
音が選択されているか否かを判別し、何れも選択されて
いなければ、発信音の低い音域をカットすると共に、こ
の加工音を相手側に送信する（ステップ４）。一方、疑
似音の何れかが選択されている場合には、入力音声を音
声認識し（ステップＢ５）、この音声認識によって得ら
れた音声コードに基づいて選択された疑似音に対応する
音声を音声発生部１０から発生させ、この音声を相手側
に送信する（ステップＡ６）。このようにいたずら防止
モードにセットされている場合には、入力音声を加工し
た加工音が相手側に送信されることになる。

【００１４】図４は画像送信処理を示したフローチャー
トである。先ず、ＣＰＵ１はモード切替スイッチＭＯＤ
の切替状態を判別し（ステップＢ１）、声だけモードに
セットされている場合にはこのフローから抜けるが、そ
の他のモードにセットされている場合には、画像加工モ
ードか通常モードかをチェックする（ステップＢ２）。
いま、通常モードにセットされていれば、画像撮影部４
によって得られた撮影画像（自画像）をそのまま画像合
成メモリ１３にセットすると共に（ステップＢ３）、こ
の画像合成メモリ１３の内容をモデム内蔵回線制御部５
を介して相手側に送信する（ステップＢ９）。

【００１５】一方、画像加工モードにセットされている
場合には熱センサ１１を起動させて被写体の熱分布状態
を検出すると共に（ステップＢ４）、この熱分布状態を
解析し、その強弱に応じた輪郭パターンに変換し、熱分
布メモリ１２にセットする（ステップＢ５）。これによ
って、人物の顔輪郭および身体の輪郭パターンが得ら
れ、熱分布メモリ１２にセットされることになる。そし
て、画像加工モードの種類を判別する（ステップＢ６〜
Ｂ８）。ここで、背景ぼかしモードにセットされている
場合には（ステップＢ６）、人体の輪郭パターンを除く
背景部分を特定するために、撮影画像と熱分布メモリ１
２の内容とを比較し、撮影画像の中から人体を除く背景
部分を特定し、この背景部分にモザイクパターンを順次
埋め込んで画像合成メモリ１３にセットする（ステップ
Ｂ１０）。すなわち、１画面分の撮影画像をそのまま画
像合成メモリ１３内に展開配置し、熱分布メモリ１２を
参照することによって特定された背景部分に１文字サイ
ズのモザイクパターン（縦×横が所定ドットの市松パタ
ーン等）を順次埋め込んでゆく。図５（Ａ）はこの場合
の様子を示した図で、１画面分の撮影画像の左上からモ
ザイクパターンを順次埋め込んで配置してゆくが、その
際、人体部分と重なるモザイクパターンについては人体
の輪郭に沿って重合部分がカットされる。したがって、
人体画像はその輪郭線に沿って鮮明な画像となるが、背
景部分はモザイクパターンによってぼかされたものとな
る。このようにして画像加工された画像合成メモリ１３
の内容が相手側に送信される（ステップＢ９）。図６
（Ａ）はこの背景ぼかしモードにおいて、相手側に送信
される撮影画像を示している。

【００１６】また、顔のみモードにセットされている場
合（ステップＢ７）、ＣＰＵ１は熱分布メモリ１２を参
照することによって撮影画像の中から顔の部分を特定
し、顔を除く他の全てにモザイクパターンを埋め込んで
画像合成メモリ１３にセットする（ステップＢ１１）。
すなわち、熱分布メモリ１２には熱分布状態の強弱に応
じた輪郭パターンがセットされており、顔の部分と衣服
を着ている部分とでは温度差があり、温度が高い程、放
射される熱線の波長が短かくなるため、それに応じた輪
郭パターンに基づいてＣＰＵ１は顔の輪郭パーンを特定
し、それ以外（背景部分、衣服を着ている部分）にモザ
イクパターンを埋め込む。このようにして画像加工され
た画像合成メモリ１３の内容を相手側に送信する（ステ
ップＢ９）、図６（Ｂ）は顔のみモードにおいて相手側
に送信される画像を示している。

【００１７】また、いたずら防止モードにセットされて
いる場合（スイッチＢ８）、ＣＰＵ１は熱分布メモリ１
２を参照することによって撮影画像の人体部分を特定
し、人体部分をぼかす画像加工処理を行う（ステップＢ
１２）、すなわち、ＣＰＵ１は熱分布メモリ１２にセッ
トされている人体部分の輪郭パターンに基づいて撮影画
像の中の人物を特定し、この人物の内部にモザイクパタ
ーンを順次埋め込んでゆく。図６（Ｂ）はこの様子を示
したもので、モザイクパターンを人物の上に埋め込む際
に人物よりも大き目にモザイクパターンを配置する。す
なわち、撮影画像の左上からモザイクパターンを埋め込
むか否かを決定する際に、図示のようにモザイクパター
ンの一部でも人物と重なる場合には、その位置を埋め込
み対象として決定することにより人物よりも大き目にモ
ザイクパターンが埋め込まれることになる。このように
して画像加工された画像合成メモリ１３の内容が相手側
に送信される（ステップＢ９）、図６（Ｃ）はいたずら
防止モードにおいて相手側に送信される画像を示してい
る。

【００１８】以上のように構成されたテレビ電話付き画
像処理装置によれば、モード切替スイッチＭＯＤによっ
て切り替えられている現在のモードに応じて撮影画像を
加工して送信することができるので、相手側に見られた
くない部分をモザイクパターンによって隠すことができ
る。また画像の加工もモードの切り替え位置によってそ
の種類を選択することができるので、相手に見られたく
ない部分を選択することが可能となる。また、撮影画像
の中から人物を特定する際に、熱センサ１１を用いて被
写体の熱分布状態を検出するようにしたから、人物と背
景部分、人物の顔部分を容易に識別することが可能とな
る。更に、いたずら防止モードでは画像の他に音声も加
工することができるため、その防止効果を有効に発揮す
ることが可能となる。

【００１９】なお、人物と背景とのぼかし程度が異なる
ように、２種類のモザイクパターンを用意しておいても
よい。また、撮影画像を加工するための固定画像パター
ンとしては、モザイクパターンに限らず、任意である。
すなわち、モザイクパターンで背景等をぼかすようにし
たが、着色パターンや模様パターンを埋め込むことによ
って相手側に見せたくない部分を完全に隠すようにして
もよい。また、実際の背景とは異なる背景パターン、例
えば、高級家具等を整然と配置した仮想の背景パターン
や海、山等の風景パターンを埋め込むようにすれば、相
手側に違和感を与えず、より効果的なものとなる。更
に、撮影画像を加工するための固定画像パターンを複数
種用意しておき、その中から所望するパターンを選択で
きるようにしてもよい。また、人物自身を加工するよう
にしてもよい。例えば、衣服に着色を施したり、他の衣
服に置き替えるようにしてもよい。この場合、動画像で
あれば、身体の動きに応じて画像加工を施すようにすれ
ばよい。また、人物を特定する場合、熱センサ１１によ
って検出された熱分布状態を解析することによって特定
するようにしたが、人物の撮影位置が決まっている場合
には、予め人物パターンを記憶させておくことにより人
物を特定するようにしてもよい。

【００２０】

【発明の効果】この発明によれば、テレビ電話によって
相手側に撮影画像を送信する際に、相手に見られたくな
い部分を隠したり、実際とは異なる画像を組み合せる
等、撮影画像を効果的に加工して送信することができる
ので、実情に即したものとなる。

【図面の簡単な説明】

【図１】テレビ電話付き画像処理装置のブロック構成
図。

【図２】テレビ電話付き画像処理装置の外観を概略的に
示した図。

【図３】音声送信処理を示したフローチャート。

【図４】画像送信処理を示したフローチャート。

【図５】撮影画像にモザイクパターンを埋め込む際の様
子を示したもので、（Ａ）は背景部分への埋め込み、
（Ｂ）は人物部分への埋め込みを示した図。

【図６】モードに応じた送信画像を示し、（Ａ）は背景
ぼかしモード、（Ｂ）は顔のみモード、（Ｃ）はいたず
ら防止モードの送信画像を示した図。

【符号の説明】

１ ＣＰＵ ２ ＲＯＭ ３ 入力部 ４ 画像撮影部 ５ モデム内蔵回線制御部 ６ 受信バッファ ７ 発信バッファ ８ モニタ表示部 ９ 音声入出力部 １１ 熱センサ １２ 熱分布メモリ １３ 画像合成メモリ ＭＯＤ モード切替スイッチ

Claims (5)

【特許請求の範囲】
1. 【請求項１】電話回線、モデムを介して通信相手との間
   で撮影画像の送受信を行うテレビ電話付き画像処理装置
   において、 相手側に送信する撮影画像をそのまま送信する通常モー
   ドと、撮影画像を加工して送信する画像加工モードとを
   切り替えるモード切替手段と、 このモード切替手段によって切り替えられているモード
   を判別するモード判別手段と、 このモード判別手段によって画像加工モードに切り替え
   られていることが判別された際に、相手側に送信する撮
   影画像の中から人物に対応する画像範囲を特定する人物
   画像特定手段と、 前記画像加工モードに切り替えられている場合に、相手
   側に送信する撮影画像の少なくとも一部を前記人物画像
   特定手段によって特定された画像範囲に基づいて加工す
   る撮影画像加工手段とを具備し、この撮影画像加工手段
   によって加工された撮影画像を相手側に送信するように
   したことを特徴とするテレビ電話付き画像処理装置。
2. 【請求項２】前記撮影画像加工手段は撮影画像のうち前
   記人物画像特定手段によって特定された画像範囲を除く
   背景部分に予め決められた固定画像パターンを重ね合せ
   ることにより撮影画像を加工するようにしたことを特徴
   とする請求項（１）記載のテレビ電話付き画像処理装
   置。
3. 【請求項３】前記人物画像特定手段は熱線の分布状態を
   検出する熱センサを有し、この熱センサによって検出さ
   れた熱線分布状態に基づいて人物に対応する画像範囲を
   特定するようにしたことを特徴とする請求項（１）記載
   のテレビ電話付き画像処理装置。
4. 【請求項４】前記人物画像特定手段は熱センサによって
   検出された熱線分布状態に基づいてその強弱を判別し、
   熱線が強い顔部分を人物画像として特定するようにした
   ことを特徴とする請求項（３）記載のテレビ電話付き画
   像処理装置。
5. 【請求項５】前記撮影画像加工手段は撮影画像のうち前
   記人物画像特定手段によって特定された画像範囲に予め
   決められた固定画像パターンを重ね合せることにより撮
   影画像を加工するようにしたことを特徴とする請求項
   （１）記載のテレビ電話付き画像処理装置。