JPS6284689A - 画像伝送表示方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔概要〕 画像伝送表示方式であって、被写体の撮像画像情報全体
をその選択的な一部のみよりも早い時点で伝送し、受信
側では伝送時点の異なる情報信号を合成して再生表示す
るように構成して、画像特定部の情報の再現性を高度に
維持し得る態様での画像の圧縮符号化伝送を可能にする
。

（産業上の利用分野〕 本発明は、画像伝送表示方式に関し、特に、画像を圧縮
符号化して低速で伝送して表示するようにした画像伝送
表示方式に関するものである。

例えば画像情報伝送の分野では、伝送効率を高めるため
に送るべき情報を圧縮して符号化した後に伝送経路に載
せることが多い。その場合、受信側で表示される再現性
は低下する。

そこで、例えば動画像部分について高再現度を維持した
まま画像情報の伝送速度を高めるように画像の圧縮符号
化を図る方式が要望されている。

〔従来の技術〕

例えば、被写体が静止していない場合、これに追従する
形での画像伝送表示方式において従来採られてきた画像
圧縮符号化手段としては、撮像用のテレビジョンカメラ
から得られる全体画像に対してその変化に着目していた
。つまり、変化に応じて圧縮符号化を行ない、低速ビッ
トレートの回線に２動画像を伝送していた。受信側では
、この２動画像を合成して再現表示を行なうようにして
いた。

〔発明が解決しようとする問題点〕

しかしながら、このような従来の方式にあっては、例え
ば全体画像の変化が激しいときには動画像のリアルタイ
ムに対する動きに追従できないといった問題点があった
。

かような問題点に関しては、適当に変化分を無視して圧
縮符号化を行なうような手段を講じていた。しかし、自
ずと表示、された再現像には自然性が失われていた。例
えば、テレビジョンを利用した遠隔地相互での会議にお
ける発言者を被写体とした場合、その口の動きを忠実に
再現できないといった欠点があった。

本発明はこのような点に鑑みて創作されたもので、簡易
な構成で画像圧縮符号化を行ない、しかも再現性の良い
画像伝送表示方式を提供することを目的としている。

〔問題点を解決するための手段〕

第１図は本発明の画像伝送表示方式の原理ブロック図を
示す。

図において、撮像部１１５は、被写体１１１を撮影して
その撮像画像情報１１３を出力する。

選択部１２１は、撮像画像情報１１３の全体を表す第１
情報信号１１７と、その一部を選択的に取捨選択して第
２情報信号１１９として出力する。

伝送手段１２３は、第１情報信号１１７を第２情報信号
１１９より早い時点で、また画情報信号１１７及び１１
９を圧縮符号化して伝送する。

受信手段１２５は、伝送手段１２３によって送られでき
た第１及び第２情報信号１１７及び１１９を受信する。

合成手段１２９は、受信手段１２５によって受信され第
２情報信号１１９との合成を行なうのに十分な時間保持
される第１情報信号１１７及び受信される第２情報信号
１１９に基づき、選択した部分は第２情報信号１１９、
その他の部分は第１情報信号１１７の情報により画面を
形成する表示情報信号１２７に複合合成する。

表示部１３１は、表示情報信号１２７に含まれる情報に
基づいて表示を行なう。

従って、構成全体として、被写体１１１の画像が再生さ
れて表示されるようになっている。

〔作用〕

被写体１１１に応じた撮像画像情＠１１１３が得られる
ので、これの一部のみの情報を第２情報信号１１９とし
、その全体情報は第１情報信号１１７となる。このよう
にして得られた第１情報信号１１７を第２情報信号１１
９よりも早い時点で伝送する。この場合、画像は圧縮符
号化されて伝送される。

受信側では、伝送されてくる情報信号に基づいて画像の
複合合成を行なった後に表示を行なう。

本発明では、選択部１２１で画像の圧縮化を行なって伝
送手段１２３で伝送するようにしたことにより、構成を
複雑とすることなく再現性の良い最終画像を得ることが
可能となる。

〔実施例〕

第２図は本発明の一実施例を示す。ここで、テレビジョ
ンカメラ２１０からの撮像信号２１１は送信袋？！２２
０に供給される。

この送信装置２２０は、撮像信号２１１のアナログ信号
をデジタル信号に変換するアナログ−デジタル（Ａ／Ｄ
）変換器２２１と、そのデジタル化された画像信号２２
３における情報の一部を切り出す切り出し回路２２５を
含む。それの切り出し情報信号２２７及びモード情報入
力信号２２９は、エリアメモリ２３１及びモード情報回
路２３３に印加される。

また、Ａ／Ｄ変換器２２１からはフレームメモリ２３５
に別なデジタル信号である情報信号２３７が供給され、
このフレームメモリ２３５の読み出し信号２３９及びエ
リアメモリ２３１からの読み出し信号２４１が切換スイ
ッチ２４３に印加される。この切換スイッチ２４３の切
換え動作は、モード情報回路２３３からのモード選択信
号２４５に依って行なわれる。その切換え動作によって
得られた符号化入力信号２４７は圧縮符号化回路２４９
に供給され、その圧縮符号化信号２５１とモード情報回
路２３３からのモード情報出力信号２５３とが多重化回
路２５５に供給される。

多重化された信号２５７は回線インタフェース回路２５
９を介して伝送信号２６１として通信回線に載せられる
。

ところで、切り出し回路２２５における切り出し制御信
号２６３は、複数のマイク２６５Ａ−Ｃから得られる音
声信号２６７Ａ−Ｃを検出する検出部２６９から発生さ
れる音声検出信号２７１と、キーボード２７３からのキ
ーボード入力信号２７５との論理和をとるオアゲート回
路２７９から論理和出力信号として与えられる。

伝送信号２６１を受信するように通信回線に接続された
受信装置２８０の初段として、回線インタフェース回路
２８１がある。これから得られる受信情報信号２８３は
、分離部２８５によって符号化情報信号２８７とモード
パターン信号２８８とに分けられる。

この符号化情報信号２８７は圧縮符号復号化部２８９に
よって復号され、その復号化情報信号２９１が切換えス
イッチ２９３の切換え接点側に印加される。

モードパターン信号２８８はモードパターン回路２９５
に供給されて、切換え制御信号２９７及び合成制御信号
２９９を発生する。

切換えスイッチ２９３の一対の切換え端子から得られる
フレーム情報信号３０１及びエリア情報信号３０３は、
フレームメモリ３０５及びエリアメモリ３０７に対応し
て印加される。

フレームメモリ３０５及びエリアメモリ３０７から読み
出される第１画像信号３０９及び第２画像信号３１１は
合成部３１３によって合成される。

この合成動作は、合成制御信号２９９に基づいて行なわ
れる。合成後の信号３１５はデジタル信号であるから、
デジタル−アナログ（Ｄ／Ａ）変換器３１７によってア
ナログ信号に変換される。このＤ／Ａ変換後の再生信号
３１９に基づいて、例えばＣＲＴで成る表示部３２０に
よって画像表示される。

第３図は本発明実施例において撮影対象となる被写体を
示す。

いま、遠隔地相互間でのテレビジョンを利用した会議を
例にとって動作説明する。

第３図に示すように一方での会議出席者は３３ＩＡ−Ｃ
の３人とし、それぞれにはマイクロホン２６５Ａ−Ｃが
対応して置かれている。Ｉ　ＩＩｌのテレビジョンカメ
ラ２１０が出席者３３１Ａ〜Ｃの３人全員に向けられて
おり、第３図に示す枠内の画像が重要であるものとする
。

いま、第３図にて点線で示すＡ領域を再現性良く伝送表
示する場合をみる。この場合、例えば司会者（図示せず
）が出席者３３１Ａを指名して発言するものとする。

その前に、司会者はキーボード２７３を操作して、切り
出し制御信号２６３によって“切り出しを行なわない”
旨の信号として切り出し回路２２５に供給する。すると
、この切り出し回路２２５は切り出し動作を行なわない
で、“切り出しでない”モードを表すモード情報信号２
２９を発生する。モード情報回路２３３からのモード選
択信号２４５によって、切換えスイッチ２４３は接点す
側に倒されて、フレームメモリ２３５側の読み出し信号
２３９が符号化入力信号２４７となる。

この状態では、テレビジョンカメラ２１０は第３図に示
す３人の出席者３３１Ａ−Ｃの全員を映しており、その
全景像による撮像信号２１１の情報がＡ／Ｄ変換されて
フレームメモリ２３５に記憶される。この記憶情報に応
じた圧縮符号化信号２５１とモード情報出力信号２５３
とが多重化されて受信装置２８０に伝送される。

受信装置２８０側では、復号を行なって２つの信号に分
離する。つまり、撮像情報を有する符号化情報信号２８
７とモード情報を有するモードパターン信号２８８とに
分離される。

上述したとおり、現在のモードは“切り出しでない”モ
ードであるから、これを表すモードパターン信号２８８
に応じて、切換えスイッチ２９３は接点す側に倒される
。

また、符号化情報信号２８７を復号して得られる復号化
情報信号２９１はフレーム情報信号３０１となって、撮
像情報がフレームメモリ３０５に記憶（ロック）される
。この記憶情報に応じて表示部３２０では、テレビジョ
ンカメラ２１０によって撮像された全景像が画面表示さ
れる。

次に、出席者３３１Ａが司会者の指名に応じて発言を始
めたものとする。司会者はキーボード２７３を操作して
、“切り出しを行なう”旨の信号２６３を切り出し回路
２２５に供給する。但し、出席者３３１Ａに対しては、
第３図に示すような点線の領域Ａが画像上切り出される
ものとして予め定めであるものとする。これは、他の出
席者３３１Ｂ、３３１Ｃについても同様である。

テレビジョンカメラ２１０からの撮像信号２１１のＡ／
Ｄ変換された信号は、フレームメモリ２３５の他切り出
し回路２２５にも共に供給される。

そのため、切り出し回路２２５は切り出し制御信号２６
３に応じて、第３図にて示す領域Ａに相当する部分の画
像情報を切り出して切り出し情報信号２２７として出力
する。この切り出し情報信号２２７に含まれる撮像情報
がエリアメモリ２３１に格納される。このような切り出
し動作が行なわれているときは、それに同期した形でモ
ード情報入力信号２２９が発生される。

従って、切換えスイッチ２４３が接点ａ側に倒されるの
で、領域Ａに相当する部分（切り出された部分）の撮像
情報が伝送される。つまり、符号化入力信号２４７は領
域Ａ部分の画像情報のみが含まれていることになる。こ
れが圧縮符号化部２４９によって圧縮符号化される。

圧縮符号化信号２５１とモード情報出力信号２５３との
多重化された信号が伝送信号２６１となり、受信装置２
８０に伝送される。

この受信側では、分離された符号化情報信号２８７が圧
縮符号復号化部２８９に依って復号される。また、分離
されたモードパターン信号２８８に応じて、スイッチ２
９３の切換えを制御する切換え制御信号２９７を発生す
る。

切換えスイッチ２９３が接点ａ側に倒されて、領域Ａの
みの情報が復号化情報信号２９１となってエリアメモリ
３０７に格納される。

従って、復号された画像情報のうち領域Ａについてはエ
リアメモリ３０７に、また、全景情報についてはフレー
ムメモリ３０５にそれぞれ分けて格納される。これら両
格納情報は読み出されて、合成制御信号２９９の制御指
令に応じて合成部３１３は、両読み出し信号３０９及び
３１１に基づき、フレームメモリ３０５の格納全景情報
の中に、エリアメモリ３０７の格納切り出し情報を合成
過程で挿入して、合成信号３１５を得る。この合成信号
３１５に基づく画面情報が表示部３２０にて表示される
。この表示状態では、領域Ａの部分のみが連続的に動く
が、その他の部分は前にロックした情報を用いるので動
画でない。しかし、発言者は出席者３３１Ａのみである
から当該出席者３３１Ａの動作（発言）がきちんと受信
側で忠実に再現されて、会議出席者に判別できればよい
。

第４図は本発明の別実施例を示す。これは、カメラを２
台使用する場合である。

第４図において、別に設けたテレビジョンカメラ４１０
は、例えば会議中における最も動きのある者（第３図の
発言者３３１Ａに相当）を集中的に映す人物カメラであ
り、電動式ズームレンズ４１１を有している。このカメ
ラ４１０による撮像情報信号４１１は新たに設けたＡ／
Ｄ変換器４２１でＡ／Ｄ変換され、そのデジタル信号４
２３がフレームメモリ４３５に供給されて、発言者のみ
の撮像情報が専ら格納されるようになっている。

全景像の情報は、第２図の場合と同様にカメラ２１０に
依り、フレームメモリ２３５に格納される。

その他は、第２図に述べたと同じなのでその詳細は省略
する。

発言前は、切り出し制御信号２６３に応じて、全景像の
みが伝送されて（切換えスイッチ２４３は接点ａ側にあ
る）、表示部３２０で表示される。

ある特定の出席者が指名されて発言するものとする。キ
ーボード２７３の操作により、人物カメラ４１０がその
発言者に向けられるように操作され且つ電動ズームレン
ズ４１１でズームアツプする。この撮像情報がフレーム
メモリ４３５に記憶された後、人物カメラ４１０の作動
に連動するように制御信号２６３が切り出される。その
際、切換えスイッチ２４３は接点す側に倒されているの
で、発言者の撮像情報のみが切り出されて、モード情報
と共に伝送される。

受信側では、送られてくるモード情報に応じて切り出し
情報を復号し、第５図に示すように１画面上の特定画面
領域Ａ５に入るように画面情報を合成する。なお、領域
Ａ５以外は、前に送ってロックした全景情報である。

なお、上述した再実施例にあっては切換え制御信号２６
３をキーボード２７３の操作で得ていたが、これに限ら
れることはない。通常会議中である時点における発言者
は１人であるから、複数のマイクにおける最も大きい音
量に基づいて切り出し領域Ａを定めたり人物カメラ４１
０の作動を制御するようにしてもよい。

〔発明の効果〕

以上述べてきたように本発明によれば、例えば発言者の
動き等の重要な部分については忠実に送り、その他の部
分は以前の情報を用いて疑似的な画面表示を得ることに
より、結果として低速回線によって高品質の画像伝送が
可能となる。

【図面の簡単な説明】

第１図は本発明の画像伝送表示方式の原理ブロック図、 第２図は本発明の一実施例を示すブロック図、第３図は
被写体の説明図、 第４図は本発明の別実施例を示すブロック図、第５図は
第４図に示す方式によって得られる表示画面の説明図で
ある。 第１図において、 １１１は被写体、 １１５は撮像部、 １２１は選択部、 １２３は伝送手段、 １２５は受信手段、 １２９は合成手段、 １３１は表示部である。 第２図〜第４図において、 ２１０．４１０はテレビジョンカメラ、２１１．４１１
は撮像信号、 ２２０は送信装置、 ２２５は切り出し回路、 ２４９は圧縮符号化回路、 ２６５Ａ−Ｃはマイクロホン、 ２８０は受信装置、 ２８９は圧縮符号復合化部、 ３１３は合成部、 ３３１Ａ−Ｃは出席者である。

Claims (3)

【特許請求の範囲】
1. （１）被写体（１１１）を撮影して、その撮像画像情報
   （１１３）を出力する撮像部（１１５）と、前記撮像画
   像情報の全体を表す第１情報信号（１１７）と前記撮像
   画像情報の一部を選択的に取捨選択した第２情報信号（
   １１９）とを出力する選択部（１２１）と、 前記第１情報信号を第２情報信号より時間的に早く且つ
   当該両情報信号を圧縮符号化して伝送する伝送手段（１
   ２３）と、 該伝送手段によって送られてきた前記第１及び第２情報
   信号を受信する受信手段（１２５）と、該受信手段によ
   って受信され第２情報信号との合成を行なうのに十分な
   時間保持される第１情報信号及び受信される第２情報信
   号に基づいて、前記選択した部分は前記第２情報信号、
   その他の部分は前記第１情報信号の情報により画面を形
   成する表示情報信号（１２７）に複合合成する合成手段
   （１２９）と、 前記表示情報信号に含まれる情報に基づいて表示を行な
   う表示部（１３１）とを有し、前記被写体の画像を再生
   して表示するように構成したことを特徴とする画像伝送
   表示方式。
2. （２）前記撮像部は１台のテレビジョンカメラを含み、
   １系統の撮像画像情報を出力するようにし、この撮像画
   像情報を基にして前記選択部は前記第１及び第２情報信
   号を出力するように構成したことを特徴とする特許請求
   の範囲第１項記載の画像伝送表示方式。
3. （３）前記撮像部は複数台のテレビジョンカメラを含み
   、それぞれから撮像画像情報を得て複数系統の撮像画像
   情報を出力するようにし、そのうちの１台のテレビジョ
   ンカメラに相当する撮像画像情報を選択して前記第１情
   報信号、その他を前記第２情報信号として前記選択部に
   よって発生するように構成したことを特徴とする特許請
   求の範囲第１項記載の画像伝送表示方式。