JPH0946703A

JPH0946703A - 画像通信システムおよび画像通信装置

Info

Publication number: JPH0946703A
Application number: JP7193593A
Authority: JP
Inventors: Shinjiro Hori; 信二郎堀
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1995-07-28
Filing date: 1995-07-28
Publication date: 1997-02-14

Abstract

(57)【要約】【課題】資料を撮影した画像の解像度を低下させるこ
となく、画像中のどの部分を指しているかを明確すると
ともに、説明を行う際の操作性を向上させる。【解決手段】撮影領域の画像を複数の領域に分割して
符号化する分割符号化手段２と、符号化された画像デー
タを送受信する送信手段３および受信手段４と、受信さ
れた画像データを各分割領域ごとに復号化する分割復号
化手段５と、各分割領域ごとに復号化された画像データ
から１つの画像データを合成する合成手段６とを設け、
資料中の任意の位置を指し示すための指示手段を含めて
撮影領域の画像を撮影することにより、どのような指示
を行ってもその指示情報を画像データ中に含めて受信側
に確実に送信できるようにするとともに、撮影領域を分
割した複数の領域ごとに符号化／復号化を行い、その後
に各画像を合成することにより、分割数に応じて見かけ
上の解像度を向上させることができるようにする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像通信システム
および画像通信装置に関するものである。

【０００２】

【従来の技術】近年、画像圧縮符号化技術の発達とディ
ジタル通信回線の普及により、テレビ会議やテレビ電話
等のＡＶ（Audio Visual）サービス用のサービス規定や
プロトコル規定、あるいはマルチメディア多重化フレー
ム構成規定などの勧告が整備されている。これに伴い、
テレビ会議システム等に適用される画像通信方法や装置
が数多く提案されている。

【０００３】これらの装置の１つとして、書画カメラ装
置などの映像入力装置を用いた画像通信装置がある。こ
の書画カメラ装置を使用する目的は、テレビ会議などを
行う際に、紙などに印刷された資料を撮影し、その映像
または静止画像を通信相手に送信して説明を行うことで
ある。

【０００４】したがって、書画カメラ装置を適用した画
像通信装置には、可能な限り高解像度で資料の映像を得
ることができ、かつ、説明を行うために資料の一部を簡
単に指し示すことができること、およびどの部分を指し
示しているかの情報を通信相手に確実に送信することが
できることが要求される。

【０００５】この要求を満たすために従来の画像通信装
置では、例えば図８（ａ）に示すように、指や指示ペン
などの指示手段８０２を用いて資料８０１中のある点ま
たは領域を指し示している状態を書画カメラ装置を用い
て撮影し、それをそのまま動画像として送信する方法が
採られていた。

【０００６】また、図８（ｂ）に示すように、資料全体
を書画カメラ装置を用いて撮影し、それを自端末（送信
側端末）に表示させる。その後、図示しないマウスやタ
ッチパネルなどの入力手段で自分の指し示したい点や領
域を指示し、その指示情報を相手端末へ送信する。相手
端末では、あらかじめ受信しておいた資料画像８０３
と、上記指示情報を基に生成される指示画像８０４とを
合成して表示する方法を採用する場合もあった。

【０００７】

【発明が解決しようとする課題】一般的に使用されてい
るカメラ部の解像度は、例えばＮＴＳＣ用のＣＣＤを用
いた場合は水平７６８画素×垂直４９４ラインであり、
ＰＡＬ用のＣＣＤでは水平７５２画素×垂直５８２ライ
ンである。しかし、送信画像を符号化する符号化方式と
してＩＴＵ−Ｔ勧告Ｈ.261を採用すると、解像度は水平
３５２画素×垂直２８８ライン、または水平１７６画素
×垂直１４４ラインと小さくなる。

【０００８】このため、図８（ａ）に示した従来例の場
合、撮影可能な解像度に対して送信可能な画像データの
解像度は、１／２または１／４になってしまう。このよ
うに解像度が低下すると、Ａ４サイズの資料を使用する
場合、この解像度では不足になってしまう。

【０００９】このような解像度不足を解消するため、画
像の分割取り込みや画素ずらし取り込みを行う方法が提
案されている。前者の分割取り込みは、画面（資料）を
複数の領域に分割して撮影し、各領域の画像を入力した
後で各画面の境界をあわせて一画面に合成する方法であ
る。また、後者の画素ずらし取り込みは、光軸を小数画
素単位にずらして画像を取り込んだ後で各々の画像を合
成する方法である。

【００１０】このような方法により自端末に取り込まれ
た画像データは、圧縮符号化された後、通信回線を介し
て受信側の相手端末に送信される。受信側においては、
受信した画像データに復号化処理が施され、これにより
得られる画像がモニタに表示され、あるいはプリンタよ
り出力される。

【００１１】しかしながら、これらの方法によると、取
り込んだ画像のデータ量が多くなってしまうため、画像
データの転送時間が増大することによってフレームレー
トが低下し、資料中のどこの部分を指し示しているのか
が不明確になってしまうという欠点があった。

【００１２】また、図８（ｂ）の従来例の場合は、あら
かじめ資料の画像データを相手端末に送信しておき、そ
の後で指示情報のみを送信しているため、図８（ａ）の
従来例に比べて即応性には優れているが、複数箇所の指
示を同時に行うことができない。また、説明をしている
ときに資料にコメントを書き加えるなどの事態には対応
できないため、説明を行う際の操作が柔軟性に欠けると
いう欠点があった。

【００１３】本発明は、このような欠点を解決するため
に成されたものであり、資料等を撮影した画像の解像度
を低下させることなく、画像中においてどの部分を指し
示しているのかを明確することができるようにするとと
もに、説明を行う際の操作性を向上させることができる
ようにすることを目的としている。

【００１４】

【課題を解決するための手段】本発明の画像通信システ
ムは、撮影領域中の任意の位置を指し示すための指示手
段を含んだ画像を通信する画像通信システムであって、
上記撮影領域の画像を複数の領域に分割して符号化する
符号化手段と、上記符号化手段により各分割領域ごとに
符号化された画像データを順次送信する送信手段と、上
記送信手段により各分割領域ごとに送信された画像デー
タを順次受信する受信手段と、上記受信手段により受信
された画像データを各分割領域ごとに復号化する復号化
手段と、上記復号化手段により各分割領域ごとに復号化
された画像データから１つの画像データを合成する合成
手段とを有する。

【００１５】本発明の他の特徴とするところは、上記符
号化手段および上記送信手段は、最初に各分割領域ごと
の画像データを全て符号化して送信した後は、上記複数
の分割領域のうちの特定領域の画像データのみを順次符
号化して送信するようになされ、上記復号化手段および
上記合成手段は、上記受信手段で最初に受信した各分割
領域ごとの画像データを復号化して１つの画像を合成し
た後は、その後に送られくる上記特定領域の画像データ
でもって上記合成した画像中の対応する分割領域を更新
することにより画像を再合成するようになされている。

【００１６】本発明のその他の特徴とするところは、撮
影領域中の任意の位置を指し示すための指示手段を含ん
だ画像を通信する画像通信システムであって、上記撮影
領域を複数の領域に分割して撮影する撮影手段と、上記
撮影手段による撮影によって得られた画像データを各分
割領域ごとに符号化する符号化手段と、上記符号化手段
により各分割領域ごとに符号化された画像データを順次
送信する送信手段と、上記送信手段により各分割領域ご
とに送信された画像データを順次受信する受信手段と、
上記受信手段により受信された画像データを各分割領域
ごとに復号化する復号化手段と、上記復号化手段により
各分割領域ごとに復号化された画像データから１つの画
像データを合成する合成手段とを有する。

【００１７】本発明のその他の特徴とするところは、上
記撮影手段は、分割した各領域を最初に全て撮影した後
は、上記複数の分割領域のうちの特定領域のみを撮影す
るようになされ、上記符号化手段および上記送信手段
は、最初に各分割領域ごとの画像データを全て符号化し
て送信した後は、上記特定領域の画像データのみを順次
符号化して送信するようになされ、上記復号化手段およ
び上記合成手段は、上記受信手段で最初に受信した各分
割領域ごとの画像データを復号化して１つの画像を合成
した後は、その後に送られくる上記特定領域の画像デー
タでもって上記合成した画像中の対応する分割領域を更
新することにより画像を再合成するようになされてい
る。

【００１８】本発明のその他の特徴とするところは、上
記撮影手段は、分割した各領域を最初に全て撮影した後
は、上記撮影領域全体を撮影するようになされ、上記符
号化手段および上記送信手段は、最初に各分割領域ごと
の画像データを全て符号化して送信した後は、上記撮影
領域全体の画像データを順次符号化して送信するように
なされ、上記復号化手段および上記合成手段は、上記受
信手段で最初に受信した各分割領域ごとの画像データを
復号化して１つの画像を合成した後は、その後に送られ
くる上記撮影領域全体の画像データでもって上記合成し
た画像中の特定の分割領域を更新することによって画像
を再合成するようになされている。

【００１９】本発明の画像通信装置は、撮影領域中の任
意の位置を指し示すための指示手段を含んだ画像を複数
の領域に分割して符号化する符号化手段と、上記符号化
手段により各分割領域ごとに符号化された画像データを
順次送信する送信手段とを有する。

【００２０】本発明の他の特徴とするところは、任意の
位置を指し示すための指示手段を含んだ撮影領域を複数
の領域に分割して撮影する撮影手段と、上記撮影手段に
よる撮影によって得られた画像データを各分割領域ごと
に符号化する符号化手段と、上記符号化手段により各分
割領域ごとに符号化された画像データを順次送信する送
信手段とを有する。

【００２１】本発明のその他の特徴とするところは、撮
影領域が複数に分割された各領域ごとの符号化画像デー
タを順次受信する受信手段と、上記受信手段により受信
された画像データを各分割領域ごとに復号化する復号化
手段と、上記復号化手段により各分割領域ごとに復号化
された画像データから１つの画像データを合成する合成
手段とを有する。

【００２２】

【作用】上記のように構成した本発明によれば、画像デ
ータ自体の中に任意の位置を指し示す指示情報を含んだ
状態で通信が行われることとなり、画像データとは別個
に指示情報を生成して送信する場合と異なり、指示手段
を用いてどのような指示でも行うことが可能であり、そ
の指示情報が確実に受信側に送信されるようになる。ま
た、その際、撮影領域の全体について符号化／復号化が
一度に行われるのではなく、撮影領域を複数に分割した
各領域ごとに符号化／復号化が行われ、それらの復号化
画像が合成されて１つの画像が生成されるので、分割数
に応じて見かけ上の解像度を向上させることが可能とな
る。

【００２３】また、本発明の他の特徴によれば、最初に
各分割領域ごとの画像データを全て符号化して送信する
とともに、受信した各分割領域ごとの画像データを復号
化して合成し、１つの画像を生成した後は、特定領域の
画像データのみが符号化されて送信されるようになるの
で、送信される画像データのデータ量が少なくなり、画
像データの送信時間が短くなって、フレームレートの低
下が防止される。

【００２４】

【発明の実施の形態】以下、本発明の一つの実施形態に
ついて図面に基づいて説明する。図１は、本実施形態の
画像通信システムの要部構成を示すブロック図である。
図１に示す画像通信システムは、撮影領域中の任意の位
置を指し示すための指示手段を含んだ画像を通信するこ
とを前提としている。すなわち、図１において、１は撮
影手段であり、図８（ａ）に示したように、指や指示ペ
ンなどの指示手段８０２を用いて資料８０１中のある点
または領域を指し示している状態を撮影する。

【００２５】２は分割符号化手段であり、上記撮影手段
１によって撮影された撮影領域の画像を複数の分割領域
に分割して符号化する。分割の方法については後ほど詳
述する。この分割符号化手段２は、最初に各分割領域ご
との画像データを全て符号化した後は、上記複数の画素
領域のうちの何れか１つの特定領域の画像データのみを
順次符号化する。

【００２６】３は送信手段であり、上記分割符号化手段
２により各分割領域ごとに符号化された画像データを通
信回線に順次送信する。この送信手段３は、各分割領域
ごとに符号化された画像データを最初に全て送信した後
は、上記特定領域の符号化された画像データのみを順次
送信する。

【００２７】４は受信手段であり、上記送信手段３によ
り各分割領域ごとに送信された画像データを順次受信す
る。この受信手段４は、各分割領域ごとに符号化された
画像データを最初に全て受信した後は、上記特定領域の
符号化された画像データのみを順次受信する。

【００２８】５は分割復号化手段であり、上記受信手段
４により受信された画像データを各分割領域ごとに復号
化する。この分割復号化手段５は、各分割領域ごとに符
号化された画像データを最初に全て復号化した後は、上
記特定領域の符号化された画像データのみを順次復号化
する。

【００２９】６は合成手段であり、上記分割復号化手段
５により各分割領域ごとに復号化された画像データから
１つの画像データを合成する。この合成手段６は、最初
に送られてきた各分割領域ごとの画像データから１つの
画像を合成した後は、その後に送られくる上記特定領域
の画像データでもって上記合成した画像中の対応する分
割領域を更新することによって画像を再合成する。７は
表示手段であり、上記合成手段６によって合成された画
像を表示する。

【００３０】次に、本発明の画像通信装置の第１の実施
形態について、図２を参照しながら説明する。なお、図
２に示す画像通信装置は、図１に示した各手段を全て具
備したものであり、このような画像通信装置を複数用
い、通信回線を介して接続することにより、相互にデー
タのやり取りを行うことができるように構成される。

【００３１】図２において、２０１はカメラ部であり、
標準として使用される映像フォーマットのコンポジット
信号（ＮＴＳＣ，ＰＡＬなど）を出力するカメラモジュ
ールを使用する。２０２は駆動部であり、カメラ部２０
１の撮影方向、ズーム、フォーカスなどの制御を行う。
これらのカメラ部２０１および駆動部２０２によって図
１の撮影手段１が構成される。

【００３２】２０３は映像入力処理部であり、カメラ部
２０１から入力されるコンポジット信号をＹ信号（輝度
信号）とＣ信号（色差信号）とにＹＣ分離するととも
に、分離したＣ信号を更にＣｒ信号とＣｂ信号とに色差
分離し、それぞれの信号をＡ／Ｄ変換する。また、必要
に応じてＹ，Ｃｒ，Ｃｂ信号をＲ（赤成分），Ｇ（緑成
分），Ｂ（青成分）信号に色空間変換する。映像入力処
理部２０３はまた、解像度変換や画像拡大／縮小、画素
密度変換やそれに伴うフィルタなどの補完処理なども行
う。

【００３３】これらの制御は、全体制御部２０９が行
う。本実施形態では、後段の符号化／復号化部の方式と
してＩＴＵ−Ｔ勧告Ｈ.261を想定して、カメラ部２０１
からのＮＴＳＣのコンポジット信号を水平７０４画素×
垂直５７６ラインのＲＧＢ各８ビットのデジタル画像デ
ータにフォーマット変換するように制御する。

【００３４】２０４は入力メモリ制御部であり、映像入
力処理部２０３から入力される画像データを、全体制御
部２０９によって指定される符号化用メモリ部２０５内
の領域に格納する。画像データを格納する領域は２つの
領域に分けられており、そのうちの一方の領域をこれか
ら符号化する画像データの符号化領域として使用し、映
像入力処理部２０３から供給される最新の画像データを
格納する。もう一方の領域は、符号化のための参照画像
領域として使用する。これらの領域は、符号化部２０７
を監視している全体制御部２０９によって適時切り替え
られる。

【００３５】２０６は出力メモリ制御部であり、符号化
部２０７の要求するタイミングで、符号化用メモリ部２
０５に格納されている画像データの中から符号化を行う
ために必要なデータ（複数に分割された個々の領域の画
像データ）を符号化部２０７に順次供給する。

【００３６】ＩＴＵ−Ｔ勧告Ｈ.261に従えば、出力メモ
リ制御部２０６は、符号化用メモリ部２０５に格納され
ている画像データを更に１／２倍に縮小し、ＣＩＦ（Co
mmonIntermediate Format）と呼ばれる共通中間フォー
マットにして符号化部２０７に供給する。符号化部２０
７は、出力メモリ制御部２０６から供給される画像デー
タをＩＴＵ−Ｔ勧告Ｈ.261に従って各分割領域ごとに符
号化する。これらの出力メモリ制御部２０６および符号
化部２０７によって図１の分割符号化手段２が構成され
る。

【００３７】符号化部２０７で符号化された各分割領域
の画像データは、通信ｉ／ｆ部２０８に供給される。通
信ｉ／ｆ部２０８は、符号化された画像データと、復号
化に必要な制御データと、図示しないマイクなどの音声
入力手段によって取り込まれた音声データを符号化した
音声データとを多重化し、それを符号化データとして回
線網を介して相手端末へ送信する。

【００３８】一方、通信ｉ／ｆ部２０８で受信された符
号化データは、画像データと制御データと音声データと
に分離され、それぞれ復号化部２１３、全体制御部２０
９、図示しない音声復号化部へと供給される。この通信
ｉ／ｆ部２０８は、図１の送信手段３および受信手段４
を兼ねている。

【００３９】復号化部２１３は、供給された画像データ
をＩＴＵ−Ｔ勧告Ｈ.261に従って各分割領域ごとに復号
化する。この復号化部２１３は、図１の分割復号化手段
６に相当する。上記復号化部２１３で復号化された各分
割領域の画像データは、表示メモリ制御部２１２によっ
て表示用メモリ部２１４に格納され、１つの画像データ
に合成される。これらの表示メモリ制御部２１２および
表示用メモリ部２１４によって図１の合成手段が構成さ
れる。

【００４０】このとき、表示メモリ制御部２１２は、マ
ウスやキーボードなどで構成される入力部２１０を用い
てユーザが指示した大きさで指示した場所に全体制御部
２０９で生成される表示データが表示されるように、上
記復号化された画像データと上記表示データとを合成し
て格納する。

【００４１】また、表示メモリ制御部２１２は、表示部
２１１の制御用タイミング信号と、そのタイミング信号
に合わせた表示用メモリ部２１４に格納されているデー
タとをＤ／Ａ変換して表示部２１１に供給する。

【００４２】次に、本実施形態において特徴的な動作
を、図３〜図５を用いて更に詳しく説明する。図３は、
カメラ部２０１で撮影され、映像入力処理部２０３でフ
ォーマット変換された画像データの領域分割の様子を示
した図である。

【００４３】図３において、撮影領域の横軸をｘ、縦軸
をｙとし、各画素をｐ（ｘ，ｙ）で表すとする。この例
では、ｘ，ｙがともに偶数となる画素ｐ₀₀（ｘ，ｙ）
と、ｘが偶数でｙが奇数となる画素ｐ₀₁（ｘ，ｙ）と、
ｘが奇数でｙが偶数となる画素ｐ₁₀（ｘ，ｙ）と、ｘ，
ｙがともに奇数となる画素ｐ₁₁（ｘ，ｙ）との４つに各
画素を分類する。それぞれの分類の画素は、図３中の符
号３０１、３０２、３０２、３０４で示されている。

【００４４】図４および図５は、本実施形態による通信
動作の流れを示すフローチャートであり、図４は送信側
の動作を示し、図５は受信側の動作を示している。ま
ず、図４に示す送信側の動作として、最初にステップＳ
１で、ユーザは、資料全体が撮影視野内に納まるように
駆動部２０２を制御して、カメラ部２０１で資料を撮影
する。そして、本実施形態に従って動作させることを入
力部２１０を用いて全体制御部２０９に通知する。

【００４５】上記カメラ部２０１で撮影された画像デー
タは、映像入力処理部２０３で水平７０４画素×垂直５
７６ラインのＲＧＢ各８ビットのデジタル画像データに
フォーマット変換され、その画像データが符号化用メモ
リ部２０５内の参照画像領域に格納される。全体制御部
２０９は、このようにして１フレーム分の画像データが
上記参照画像領域に格納され、その後に入力される画像
データが符号化領域に格納されるようになったことを確
認して、動作可能であることを、その旨のメッセージを
表示部２１１に表示させることによってユーザに知らせ
る。

【００４６】ユーザは、動作準備の確認を行った後、入
力部２１０を操作して開始コマンドを全体制御部２０９
に入力する。ステップＳ２では、開始コマンドの入力が
有ったかどうかを判断し、入力があったときはステップ
Ｓ３に進む。開始コマンドの入力がなければ、ステップ
Ｓ１の処理に戻る。

【００４７】次に、ステップＳ３〜Ｓ６で、出力メモリ
制御部２０６および符号化部２０７は、ｐ₀₀（ｘ，
ｙ）、ｐ₀₁（ｘ，ｙ）、ｐ₁₀（ｘ，ｙ）、ｐ₁₁（ｘ，
ｙ）の順に各分割領域の画像データを取り出して符号化
する。このとき、ＩＴＵ−Ｔ勧告Ｈ.261で規定されてい
るフレーム内符号化を行うようにする。そして、このよ
うにして符号化した各領域ごとの画像データを相手端末
に順次送信する。

【００４８】ステップＳ６の処理が終わると、その時点
で水平７０４画素×垂直５７６ラインの解像度を持った
画像データを１枚送信したことになる。それ以降は、ス
テップＳ７〜Ｓ１０に示すように、画素ｐ₁₁（ｘ，ｙ）
の領域の画像データのみについて符号化および送信を行
う。このとき、フレーム内符号化またはフレーム間符号
化を勧告に準拠するように行いながら送信する。

【００４９】すなわち、ステップＳ７で、フレーム内符
号化を行うかどうかを判断し、フレーム内符号化を行う
場合は、ステップＳ８に進んで画素ｐ₁₁（ｘ，ｙ）の領
域の画像データに対してフレーム内符号化を行い、それ
により得られる画像データを相手端末に送信する。ま
た、上記ステップＳ７でフレーム内符号化を行わないと
判断したときは、ステップＳ９に進んで画素ｐ₁₁（ｘ，
ｙ）の領域の画像データに対してフレーム間符号化を行
い、それにより得られる画像データを相手端末に送信す
る。

【００５０】そして、ステップＳ１０で、通信動作を終
了するかどうかを判断し、終了しないと判断したとき、
すなわち通信動作を継続するときは、ステップＳ７の処
理に戻る。そして、その時点における画素ｐ₁₁（ｘ，
ｙ）の領域の画像データに対し、フレーム内符号化また
はフレーム間符号化を行い、相手端末に送信する。

【００５１】つまり、本実施形態においては、上記水平
７０４画素×垂直５７６ラインの解像度を持った１フレ
ーム分の画像データを送信した後は、ユーザが指や指示
ペンなどで資料を指し示しながら説明を行うと、その様
子を撮影することによって得られた画像データのうち、
画素ｐ₁₁（ｘ，ｙ）の領域の画像データのみが相手端末
に送信されることになる。

【００５２】したがって、本実施形態によれば、送信画
像のデータ量が多くならないようにして、画像データの
転送時間を短くすることができ、フレームレートが低く
ならないようにすることができるようになる。

【００５３】一方、受信側では、本実施形態に従って動
作する場合、まず図５のステップＳ２１〜Ｓ２４で、送
信側から順次送られてくる各画素ｐ₀₀（ｘ，ｙ）、ｐ₀₁
（ｘ，ｙ）、ｐ₁₀（ｘ，ｙ）、ｐ₁₁（ｘ，ｙ）の領域の
画像データを復号化部２１３で順次復号化し、その復号
化した画像データを表示メモリ制御部２１２に供給す
る。

【００５４】表示メモリ制御部２１２は、次のステップ
Ｓ２５で、上記４つの復号化された画像データを、図３
に示すような元の状態に合成して表示用メモリ部２１４
に格納するとともに、図３のような状態で表示部２１１
に表示させる。このとき、４つの復号化画像データがす
べて揃った後に初めて表示させてもよいし、１つの復号
化画像データが得られるごとに順次重ねて表示させても
よい。つまり、最終的に４つの復号化画像データを合成
させて表示させればよい。

【００５５】上記ステップＳ２５の処理が終わると、そ
れ以降は、画素ｐ₁₁（ｘ，ｙ）の領域の画像データしか
送信されてこないので、次のステップＳ２６〜Ｓ２８で
は、画素ｐ₁₁（ｘ，ｙ）の領域の画像データを復号化し
た後で、その復号化した画像データのみを更新し、それ
を残りの領域の画像データと再合成して表示部２１１に
表示させる。

【００５６】すなわち、ステップＳ２６で、画素ｐ
₁₁（ｘ，ｙ）の領域の符号化された画像データを復号化
し、ステップＳ２７で、その復号化した画像データと残
りの領域の画像データとを再合成して表示部２１１に表
示する。そして、ステップＳ２８で、通信動作を終了す
るかどうかを判断し、終了しないと判断したときは、ス
テップＳ２６の処理に戻って通信動作を継続する。

【００５７】以上のように、本実施形態では、動画像と
して更新されるのは全画像データの１／４に過ぎないた
め、手などで資料をなぞっていても、手そのものは歯抜
けの状態でしか表示されない。しかし、手の画像が合成
される資料の画像（最初に送信した全領域の画像）は水
平７０４画素×垂直５７６ラインの十分な解像度を持っ
た画像であり、しかも、上述したように手の画像のフレ
ームレートも十分高く維持できているので、手が指し示
している位置は容易に判別することができ、十分に指示
情報を送信していると言える。

【００５８】なお、ここまでの説明では、符号化方式と
してＩＴＵ−Ｔ勧告Ｈ.261を採用した場合を例にとって
説明したが、符号化方式はこれに限定されるものではな
く、ＭＰＥＧなどの国際標準規格の符号化方式を採用し
てもよい。また、画素ｐ₀₀（ｘ，ｙ）、ｐ₀₁（ｘ，
ｙ）、ｐ₁₀（ｘ，ｙ）の領域と画素ｐ₁₁（ｘ，ｙ）の領
域の最初の１枚目のみは静止画符号化方式であるＪＰＥ
Ｇで符号化しておき、画素ｐ₁₁（ｘ，ｙ）の領域の２フ
レーム目以降の画像データについてはＭＰＥＧで符号化
するなど、符号化方式を適時組み合わせて使用してもよ
い。

【００５９】また、画像の領域分割方法は、図３に示す
ような分割方法に限定されるものではなく、例えば、画
像をチェッカー模様に分割して１／２の画像データを送
信するようにしてもよい。

【００６０】以上に述べた第１の実施形態に示した例で
は、最初に１画面全体の画像データを符号化して送信し
た後は、画素ｐ₁₁（ｘ，ｙ）の領域の画像データだけし
か送信していないので、撮影可能な解像度の１／４の解
像度しか実際的には使用しておらず、効率が悪い。この
点を改善するための第２、第３の実施形態を以下に説明
する。

【００６１】第２の実施形態は、図６に示すような画素
ずらし取り込み方法を実施することが可能なカメラ部６
００を採用することによって、第１の実施形態の欠点を
改善するものである。ここで、図６中に示した６０１は
資料である。また、２枚のガラス板６０２ａ，６０２ｂ
の間にシリコンオイル６０３が封入されており、これら
のガラス板６０２ａ，６０２ｂの角度を変化させること
で資料６０１に対する光路を微小変化させる。

【００６２】そして、このようにして光路を微小に変化
させながら画素を水平方向および垂直方向にずらして取
り込んだ複数の画像データをそれぞれ符号化し、相手端
末に順次送信する。受信側では、送信されたきた複数の
画像データをそれぞれ復号化し、それらを１つの画像デ
ータに合成して表示部２１１に表示させることで、解像
度を高めることができる。

【００６３】更に詳しく説明すると、図６のようなカメ
ラ部６００の中心を通る水平軸と垂直軸とを中心にして
２枚のガラス板６０２ａ，６０２ｂを微小角度回転でき
るようにしておく。そして、１枚の画像を撮影するごと
に水平軸または垂直軸の何れか一方を中心として２枚の
ガラス板６０２ａ，６０２ｂを回転させることにより、
見かけ上の解像度を２倍にして４つの画像を順次撮影す
る。

【００６４】このようにして撮影した４つの画像のう
ち、始めに撮影した３つの画像を第１の実施形態で述べ
た画素ｐ₀₀（ｘ，ｙ）、ｐ₀₁（ｘ，ｙ）、ｐ₁₀（ｘ，
ｙ）の領域の画像データと考え、残りの画像を同じく第
１の実施形態で述べた画素ｐ₁₁（ｘ，ｙ）の領域の画像
データと考える。そして、これらの各領域の画像データ
を利用して第１の実施形態で述べたのと同じ処理を行え
ば、カメラ部６００の解像度を最大限に利用することが
可能となる。

【００６５】以上は２枚のガラス板６０２ａ，６０２ｂ
を用い、その角度を変化させることによって光路を微小
変化させていたが、これに限定されない。例えば、平行
平板プリズムを用い、その角度を変化させることによっ
て光路を微小変化させるようにしてもよい。

【００６６】第３の実施形態は、図７に示すような画面
分割取り込み方法を実施することが可能なカメラ部７０
３を採用することによって、第１の実施形態の欠点を改
善するものである。すなわち、この第３の実施形態は、
資料７０１を４つの領域Ｐ１，Ｐ２，Ｐ３，Ｐ４に分割
し、駆動部７０２によりカメラ部７０３全体の向きを上
下左右に変えて、それぞれの領域ごとに画像を取り込む
ものである。

【００６７】この例では、あらかじめ資料７０１を４つ
の領域Ｐ１，Ｐ２，Ｐ３，Ｐ４に分割する。そして、そ
れぞれの領域に対してカメラ部７０３の向き、ズーム
率、フォーカスを順次合わせ、個々に画像を取り込んで
符号化し、順次相手端末に送信する。受信端末では、送
信されてきた４つの画像データを復号化し、それらを１
つの画像データに合成して表示部２１１に表示させてお
く。

【００６８】次に、資料７０１全体を撮影し、それを相
手端末に送信する。受信端末では、上述のようにして４
つの領域Ｐ１，Ｐ２，Ｐ３，Ｐ４を合成した画像データ
のうち、画素ｐ₁₁（ｘ，ｙ）の領域に相当する画像デー
タを、上記全体を撮影した画像データに置き換えて表示
部２１１に表示させる。この場合も、第２の実施形態と
同様に、カメラ部７０３の解像度を最大限に利用するこ
とが可能である。

【００６９】

【発明の効果】本発明は上述したように、任意の位置を
指し示すための指示手段を含めて撮影領域を撮影し、そ
れにより得られる画像データを処理して送信するように
したので、指示手段を用いてどのような指示でも行うこ
とが可能となり、その指示情報を画像データ自体の中に
含めた状態で受信側に確実に送信することができるよう
になる。また、撮影領域を複数の領域に分割して各領域
ごとに符号化／復号化を行い、その後に各画像を合成す
るようにしたので、分割数に応じて見かけ上の解像度を
向上させることができるようになる。その結果、画像の
解像度を低下させることなく、画像中においてどの部分
を指し示しているかの指示情報を十分に送信することが
でき、しかも説明を行う際に柔軟性の高い操作性を実現
することができる。

【００７０】また、本発明の他の特徴によれば、最初に
各分割領域ごとの画像データを全て符号化して送信した
後は、特定領域の画像データのみを順次符号化して送信
し、受信側では、その特定領域の復号化画像データでも
って、最初に合成した画像中の対応する分割領域を更新
することによって画像を再合成するようにしたので、送
信する画像データのデータ量を少なくして画像データの
送信時間を短くすることができ、指示情報を含んだ画像
のフレームレートが低下しないようにして、画像中にお
いてどの部分を指し示しているのかを一層明確にするこ
とができる。

【図面の簡単な説明】

【図１】本発明の一つの実施形態である画像通信システ
ムの要部構成を示すブロック図である。

【図２】本発明の一つの実施形態である画像通信装置の
概略構成を示すブロック図である。

【図３】画像分割の一例を示す図である。

【図４】本実施形態による送信側の通信動作の流れを示
すフローチャートである。

【図５】本実施形態による受信側の通信動作の流れを示
すフローチャートである。

【図６】画素ずらし取り込み方法の原理を示す図であ
る。

【図７】画面分割取り込み方法の原理を示す図である。

【図８】従来例を説明するための図である。

【符号の説明】

１撮影手段２分割符号化手段３送信手段４受信手段５分割復号化手段６合成手段７表示手段２０１カメラ部２０２駆動部２０６出力メモリ制御部２０７符号化部２０８通信ｉ／ｆ部２１２表示メモリ制御部２１３復号化部２１４表示用メモリ部

Claims

【特許請求の範囲】

【請求項１】撮影領域中の任意の位置を指し示すため
の指示手段を含んだ画像を通信する画像通信システムで
あって、上記撮影領域の画像を複数の領域に分割して符号化する
符号化手段と、上記符号化手段により各分割領域ごとに符号化された画
像データを順次送信する送信手段と、上記送信手段により各分割領域ごとに送信された画像デ
ータを順次受信する受信手段と、上記受信手段により受信された画像データを各分割領域
ごとに復号化する復号化手段と、上記復号化手段により各分割領域ごとに復号化された画
像データから１つの画像データを合成する合成手段とを
有することを特徴とする画像通信システム。
【請求項２】上記撮影領域の横軸方向の画素番号を
ｘ、縦軸方向の画素番号をｙで表したときに、上記符号
化手段は、ｘ，ｙがともに偶数の画素領域と、ｘが偶数
でｙが奇数の画素領域と、ｘが奇数でｙが偶数の画素領
域と、ｘ，ｙがともに奇数の画素領域との４つの領域に
分割して符号化することを特徴とする請求項１に記載の
画像通信システム。
【請求項３】上記符号化手段および上記送信手段は、
最初に各分割領域ごとの画像データを全て符号化して送
信した後は、上記複数の分割領域のうちの特定領域の画
像データのみを順次符号化して送信するようになされ、上記復号化手段および上記合成手段は、上記受信手段で
最初に受信した各分割領域ごとの画像データを復号化し
て１つの画像を合成した後は、その後に送られくる上記
特定領域の画像データでもって上記合成した画像中の対
応する分割領域を更新することにより画像を再合成する
ようになされていることを特徴とする請求項１または２
に記載の画像通信システム。
【請求項４】撮影領域中の任意の位置を指し示すため
の指示手段を含んだ画像を通信する画像通信システムで
あって、上記撮影領域を複数の領域に分割して撮影する撮影手段
と、上記撮影手段による撮影によって得られた画像データを
各分割領域ごとに符号化する符号化手段と、上記符号化手段により各分割領域ごとに符号化された画
像データを順次送信する送信手段と、上記送信手段により各分割領域ごとに送信された画像デ
ータを順次受信する受信手段と、上記受信手段により受信された画像データを各分割領域
ごとに復号化する復号化手段と、上記復号化手段により各分割領域ごとに復号化された画
像データから１つの画像データを合成する合成手段とを
有することを特徴とする画像通信システム。
【請求項５】上記撮影手段は、上記撮影領域に対する
光路を微小変化させながら撮影することによって分割撮
影を行うことを特徴とする請求項４に記載の画像通信シ
ステム。
【請求項６】上記撮影手段は、上記撮影領域に対する
光路を決定するための２枚のガラス板を有しており、上
記ガラス板の角度を変化させることで上記光路を微小変
化させながら撮影することによって分割撮影を行うこと
を特徴とする請求項４に記載の画像通信システム。
【請求項７】上記撮影手段は、上記撮影領域に対する
光路を決定するための平行平板プリズムを有しており、
上記平行平板プリズムの角度を変化させることで上記光
路を微小変化させながら撮影することによって分割撮影
を行うことを特徴とする請求項４に記載の画像通信シス
テム。
【請求項８】上記撮影手段は、分割した各領域を最初
に全て撮影した後は、上記複数の分割領域のうちの特定
領域のみを撮影するようになされ、上記符号化手段および上記送信手段は、最初に各分割領
域ごとの画像データを全て符号化して送信した後は、上
記特定領域の画像データのみを順次符号化して送信する
ようになされ、上記復号化手段および上記合成手段は、上記受信手段で
最初に受信した各分割領域ごとの画像データを復号化し
て１つの画像を合成した後は、その後に送られくる上記
特定領域の画像データでもって上記合成した画像中の対
応する分割領域を更新することにより画像を再合成する
ようになされていることを特徴とする請求項５〜７の何
れか１項に記載の画像通信システム。
【請求項９】上記撮影手段は、上記撮影手段の撮影状
態を変更するための駆動手段により上記撮影領域内の撮
影視野を移動させながら撮影することによって分割撮影
を行うことを特徴とする請求項４に記載の画像通信シス
テム。
【請求項１０】上記撮影手段は、分割した各領域を最
初に全て撮影した後は、上記撮影領域全体を撮影するよ
うになされ、上記符号化手段および上記送信手段は、最初に各分割領
域ごとの画像データを全て符号化して送信した後は、上
記撮影領域全体の画像データを順次符号化して送信する
ようになされ、上記復号化手段および上記合成手段は、上記受信手段で
最初に受信した各分割領域ごとの画像データを復号化し
て１つの画像を合成した後は、その後に送られくる上記
撮影領域全体の画像データでもって上記合成した画像中
の特定の分割領域を更新することによって画像を再合成
するようになされていることを特徴とする請求項９に記
載の画像通信システム。
【請求項１１】撮影領域中の任意の位置を指し示すた
めの指示手段を含んだ画像を複数の領域に分割して符号
化する符号化手段と、上記符号化手段により各分割領域ごとに符号化された画
像データを順次送信する送信手段とを有することを特徴
とする画像通信装置。
【請求項１２】任意の位置を指し示すための指示手段
を含んだ撮影領域を複数の領域に分割して撮影する撮影
手段と、上記撮影手段による撮影によって得られた画像データを
各分割領域ごとに符号化する符号化手段と、上記符号化手段により各分割領域ごとに符号化された符
号化画像データを順次送信する送信手段とを有すること
を特徴とする画像通信装置。
【請求項１３】撮影領域が複数に分割された各領域ご
との画像データを順次受信する受信手段と、上記受信手段により受信された画像データを各分割領域
ごとに復号化する復号化手段と、上記復号化手段により各分割領域ごとに復号化された画
像データから１つの画像データを合成する合成手段とを
有することを特徴とする画像通信装置。