JPH0575233B2 - - Google Patents

Description

【発明の詳細な説明】 〔概 要〕 画像伝送表示方式において、被写体の撮像画像
情報全体を送信側フレームメモリに、その一部を
送信側エリアメモリにタイムシエアリング方式で
順次に書き込むと共に、その識別をするモード情
報を出力する。両メモリから読み出された撮像画
像情報全体及びその一部を圧縮してモード情報と
共に順次に伝送する。受信側では伝送されて来た
モード情報に応答して画像受信全体を送信側フレ
ームメモリに、又その一部を送信側エリアメモリ
に書き込んだ後に読み出して表示部に表示させ
る。このようにして、画像情報の一部を再現性高
く維持しつつ、その一部を受信画面内の撮像位置
とは無関係な所定の位置に表示させる。

〔産業上の利用分野〕

本発明は、画像伝送表示方式に関し、特に、画
像を圧縮符号化して低速で伝送して表示するよう
にした画像伝送表示方式に関するものである。

例えば画像情報伝送の分野では、伝送効率を高
めるために送るべき情報を圧縮して符号化した後
に伝送経路に載せることが多い。その場合、受信
側で表示される再現性は低下する。

そこで、例えば動画像部分について高再現度を
維持したまま画像情報の伝送速度を高めるように
画像の圧縮符号化を図る方式が要望されている。

〔従来の技術〕

例えば、被写体が静止していない場合、これに
追従する形での画像伝送表示方式において従来採
られてきた画像圧縮符号化手段としては、撮像用
のテレビジヨンカメラから得られる全体画像に対
してその変化に着目していた。つまり、変化に応
じて圧縮符号化を行ない、低速ビツトレートの回
線に２動画像を伝送していた。受信側では、この
２動画像を合成して再現表示を行なうようにして
いた。

〔発明が解決しようとする問題点〕

しかしながら、このような従来の方式にあつて
は、例えば全体画像の変化が激しいときには動画
像のリアルタイムに対する動きに追従できないと
いつた問題点があつた。

かような問題点に関しては、適当に変化分を無
視して圧縮符号化を行なうような手段を講じてい
た。しかし、自ずと表示された再現像には自然性
が失われていた。例えば、テレビジヨンを利用し
た遠隔地相互での会議における発言者を被写体と
した場合、その口の動きを忠実に再現できないと
いつた欠点があつた。

本発明は、このような点に鑑みて創作されたも
ので、画像の一部を再現性良く受信画面内の撮像
位置とは無関係な所定の位置に表示させる画像伝
送表示方式を提供することを目的としている。

〔問題点を解決するための手段〕

第１図は本発明の画像伝送表示方式の原理ブロ
ツク図を示す。

図に示すように、本発明は、被写体を撮像して
発生されたデイジタル画像情報を圧縮符号化部１
４９で圧縮符号化し、圧縮符号化されたデイジタ
ル画像情報を伝送手段１２３を介して伝送し、受
信側で受信したデイジタル画像信号を圧縮符号復
号化部１８９で復号して表示部１２０に表示させ
る画像伝送表示方式に次の構成要件を設ける。そ
の構成要件として、送信側フレームメモリ１３５
と、送信側エリアメモリ１３１と、前記被写体の
一画面分のデイジタル画像情報を前記フレームメ
モリ１３５に書き込むと共に、前記一画面分のデ
イジタル画像情報の一部を前記送信側エリアメモ
リ１３１に書き込み、且つ前記一画面分のデイジ
タル画像情報、又は前記一部を識別するモード情
報を出力する送信側書き込み制御部１３６と、前
記送信側フレームメモリ１３５及び送信側エリア
メモリ１３１から読み出されたデイジタル画像情
報のうちの前記送信側書き込み制御部１１６から
出力されたモード情報に対応したデイジタル画像
情報を前記圧縮符号化部１４９へ出力する選択部
１２１と、前記圧縮符号化部１４９から出力され
た圧縮デイジタル画像情報と、前記送信側書き込
み制御部１３６から出力されたモード情報とを多
重化して前記伝送手段１２３へ出力する多重化部
１５５とが送信側に設けられる一方、伝送されて
来たデイジタル画像情報とモード情報とを分離し
て分離されたデイジタル画像情報を前記圧縮符号
復号化部１８９へ出力する分離部１８５と、受信
側フレームメモリ１０５と、受信側エリアメモリ
１０７と、前記圧縮符号復号化部１８９から復号
出力されたデイジタル画像情報を前記受信側フレ
ームメモリ１０５及び受信側エリアメモリ１０７
のうちの前記分離部１８５で分離されたモード情
報に対応するメモリへ出力する受信側書き込み制
御部１９３と、前記受信側フレームメモリ１０５
及び受信側エリアメモリ１０７から読み出された
デイジタル画像情報を合成して前記表示部１２０
へ出力する合成部１１３とが受信側に設けられ
る。

これらの構成要件によつて、本発明の特徴部分
が構成されている。

〔作 用〕

被写体を撮像して発生されたデイジタル画像情
報は、フレームメモリ１３５に、その一部画像情
報は、エリアメモリ１３１に送信側書き込み制御
部１３６の制御の下にタイムシエアリング方式で
順次に書き込まれる。その際に、送信側書き込み
制御部１３６からモード情報が出力される。

モード情報は、選択部１２１へ供給され、フレ
ームメモリ１３５から読み出されたデイジタル画
像情報及びエリアメモリ１３１から読み出された
デイジタル画像情報の一部のいずれか一方を選択
して圧縮符号化部１４９へ出力する。この圧縮符
号化部１４９でそれらデイジタル画像情報は、圧
縮符号化される。圧縮符号化部１４９からの圧縮
符号化されたデイジタル画像情報は、多重化部１
５５でモード情報と多重化されて伝送手段１２３
から伝送される。

受信側では、伝送されて来た圧縮符号化画像情
報内の圧縮されているデイジタル画像情報と、モ
ード情報とを分離部１８５で分離する。デイジタ
ル画像情報は、受信側書き込み制御部１９３の制
御によつてモード情報対応の情報側フレームメモ
リ１０５、又は受信側エリアメモリ１０７のいず
れか一方に書き込まれる。

そして、受信側フレームメモリ１０５及び受信
側エリアメモリ１０７から読み出されたデイジタ
ル画像情報を合成部１１３で合成して表示部１２
０に表示させる。

このようにして、送信側エリアメモリ１３１へ
の書き込みが、送信側フレームメモリ１３５への
書き込みとタイムシエアリング方式で順次に書き
込まれるから、送信側エリアメモリ１３１への書
き込みフレーム数を送信側フレームメモリ１３５
より多くすることができる。又前記画像の一部は
画像全体との位置に拘束されない送信側エリアメ
モリ１３１に書き込まれるから、受信側で対応す
る受信側エリアメモリ１０７へ書き込まれ、読み
出されて表示部１２０に表示されたとき、受信画
像内の撮像位置とは無関係な所定の位置に、画像
の一部を表示させることができる。

〔実施例〕

第２図は本発明の一実施例を示す。ここで、テ
レビジヨンカメラ２１０からの撮像信号２１１は
送信装置２２０に供給される。

この送信装置２２０は、撮像信号２１１のアナ
ログ信号をデジタル信号に変換するアナログ−デ
ジタル（Ａ／Ｄ）変換器２２１と、そのデジタル
化された画像信号２２３における情報の一部を切
り出す切り出し回路２２５を含む。それの切り出
し情報信号２２７及びモード情報入力信号２２９
は、エリアメモリ２３１及びモード情報回路２３
３に印加される。

また、Ａ／Ｄ変換器２２１からはフレームメモ
リ２３５に別なデジタル信号である情報信号２３
７が供給され、このフレームメモリ２３５の読み
出し信号２３９及びエリアメモリ２３１からの読
み出し信号２４１が切換スイツチ２４３に印加さ
れる。この切換スイツチ２４３の切換え動作は、
モード情報回路２３３からのモード選択信号２４
５に依つて行なわれる。その切換え動作によつて
得られた符号化入力信号２４７は圧縮符号化回路
２４９に供給され、その圧縮符号化信号２５１と
モード情報回路２３３からのモード情報出力信号
２５３とが多重化回路２５５に供給される。

多重化された信号２５７は回線インタフエース
回路２５９を介して伝送信号２６１として通信回
線に載せられる。

ところで、切り出し回路２２５における切り出
し制御信号２６３は、複数のマイク２６５Ａ〜Ｃ
から得られる音声信号２６７Ａ〜Ｃを検出する検
出部２６９から発生される音声検出信号２７１
と、キーボード２７３からのキーボード入力信号
２７５との論理和をとるオアゲート回路２７９か
ら論理和出力信号として与えられる。

伝送信号２６１を受信するように通信回線に接
続された受信装置２８０の初段として、回線イン
タフエース回路２８１がある。これから得られる
受信情報信号２８３は、分離部２８５によつて符
号化情報信号２８７とモードパターン信号２８８
とに分けられる。

この符号化情報信号２８７は圧縮符号復号化部
２８９によつて復号され、その復号化情報信号２
９１が切換えスイツチ２９３の切換え接点側に印
加される。

モードパターン信号２８８はモードパターン回
路２９５に供給されて、切換え制御信号２９７及
び合成制御信号２９９を発生する。

切換えスイツチ２９３の一対の切換え端子から
得られるフレーム情報信号３０１及びエリア情報
信号３０３は、フレームメモリ３０５及びエリア
メモリ３０７に対応して印加される。

フレームメモリ３０５及びエリアメモリ３０７
から読み出される第１画像信号３０９及び第２画
像信号３１１は合成部３１３によつて合成され
る。この合成動作は、合成制御信号２９９に基づ
いて行なわれる。成後の信号３１５はデジタル信
号であるから、デジタル−アナログ（Ｄ／Ａ）変
換器３１７によつてアナログ信号に変換される。
このＤ／／Ａ変換後の再生信号３１９に基づい
て、例えばCRTで成る表示部３２０によつて画
像表示される。

第３図は本発明実施例において撮影対象となる
被写体を示す。

いま、遠隔地相互間でのテレビジヨンを利用し
た会議を例にとつて動作説明する。

第３図に示すように一方での会議出席者は３３
１Ａ〜Ｃの３人とし、それぞれにはマイクロホン
２６５Ａ〜Ｃが対応して置かれている。１個のテ
レビジヨンカメラ２１０が出席者３３１Ａ〜Ｃの
３人全員に向けられており、第３図に示す枠内の
画像が重要であるものとする。

いま、第３図にて点線で示すＡ領域を再現性良
く伝送表示する場合をみる。この場合、例えば司
会者（図示せず）が出席者３３１Ａを指名して発
言するものとする。

その前に、司会者はキーボード２７３を操作し
て、切り出し制御信号２６３によつて“切り出し
を行なわない”旨の信号として切り出し回路２２
５に供給する。すると、この切り出し回路２２５
は切り出し動作を行なわないで、“切り出しでな
い”モードを表すモード情報信号２２９を発生す
る。モード情報回路２３３からのモード選択信号
２４５によつて、切換えスイツチ２４３は接点ｂ
側に倒されて、フレームメモリ２３５側の読み出
し信号２３９が符号化入力信号２４７となる。

この状態では、テレビジヨンカメラ２１０は第
３図に示す３人の出席者３３１Ａ〜Ｃの全員を映
しており、その全景像による撮像信号２１１の情
報がＡ／Ｄ変換されてフレームメモリ２３５に記
憶される。この記憶情報に応じた圧縮符号化信号
２５１とモード情報出力信号２５３とが多重化さ
れて受信装置２８０に伝送される。

受信装置２８０側では、復号を行なつて２つの
信号に分離する。つまり、撮像情報を有する符号
化情報信号２８７とモード情報を有するモードパ
ターン信号２８８とに分離される。

上述したとおり、現在のモードは“切り出しで
ない”モードであるから、これを表すモードパタ
ーン信号２８８に応じて、切換えスイツチ２９３
は接点ａ側に倒される。

また、符号化情報信号２８７を復号して得られ
る復号化情報信号２９１はフレーム情報信号３０
１となつて、撮像情報がフレームメモリ３０５に
記憶（ロツク）される。この記憶情報に応じて表
示部３２０では、テレビジヨンカメラ２１０によ
つて撮像された全背像が画面表示される。

次に、出席者３３１Ａが司会者の指名に応じて
発言を始めたものとする。司会者はキーボード２
７３を操作して、“切り出しを行なう”旨の信号
２６３を切り出し回路２２５に供給する。但し、
出席者３３１Ａに対しては、第３図に示すような
点線の領域Ａが画像上切り出されるものとして予
め定めてあるものとする。これは、他の出席者３
３１Ｂ，３３１Ｃについても同様である。

テレビジヨンカメラ２１０からの撮像信号２１
１のＡ／Ｄ変換された信号は、フレームメモリ２
３５の他、切り出し回路２２５にも共に供給され
る。そのため、切り出し回路２２５は切り出し制
御信号２６３に応じて、第３図にて示す領域Ａに
相当する部分の画像信号を切り出して切り出し情
報信号２２７として出力する。この切り出し情報
信号２２７に含まれる撮像情報がエリアメモリ２
３１に格納される。このような切り出し動作が行
なわれているときは、それに同期した形でモード
情報入力信号２２９が発生される。

従つて、切換えスイツチ２４３が接点ａ側に倒
されるので、領域Ａに相当する部分（切り出され
た部分）の撮像情報が伝送される。つまり、符号
化入力信号２４７は領域Ａ部分の画像情報のみが
含まれていることになる。これが圧縮符号化部２
４９によつて圧縮符号化される。

圧縮符号化信号２５１とモード情報出力信号２
５３との多重化された信号が伝送信号２６１とな
り、受信装置２８０に伝送される。

この受信側では、分離された符号化情報信号２
８７が圧縮符号復号化部２８９に依つて復号され
る。また、分離されたモードパターン信号２８８
に応じて、スイツチ２９３の切換えを制御する切
換え制御信号２９７を発生する。

切換えスイツチ２９３が接点ｂ側に倒されて、
領域Ａのみの情報が復号化情報信号２９１となつ
てエリアメモリ３０７に格納される。

従つて、復号された画像情報のうち領域Ａにつ
いてはエリアメモリ３０７に、また、全背情報に
ついてはフレームメモリ３０５にそれぞれ分けて
格納される。これら両格納情報は読み出されて、
合成制御信号２９９の制御指令に応じて合成部３
１３は、両読み出し信号３０９及び３１１に基づ
き、フレームメモリ３０５の格納全背情報の中
に、エリアメモリ３０７の格納切り出し情報を合
成過程で挿入して、合成信号３１５を得る。この
合成信号３１５に基づく画面情報が表示部３２０
にて表示される。この表示状態では、領域Ａの部
分のみが連続的に動くが、その他の部分は前にロ
ークした情報を用いるので動画でない。しかし、
発言者は出席者３３１Ａのみであるから当該出席
者３３１Ａの動作（発言）がきちんと受信側で忠
実に再現されて、会議出席者に判別できればよ
い。

第４図は本発明の別実施例を示す。これは、カ
メラを２台使用する場合である。

第４図において、別に設けたテレビジヨンカメ
ラ４１０は、例えば会議中における最も動きのあ
る者（第３図の発言者３３１Ａに相当）を集中的
に映す人物カメラであり、電動式ズームレンズ４
１１を有している。このカメラ４１０による撮像
情報信号４１１は新たに設けたＡ／Ｄ変換器４２
１でＡ／Ｄ変換され、そのデジタル信号４２３が
フレームメモリ４３５に供給されて、発言者のみ
の撮像情報が専ら格納されるようになつている。
全背像の情報は、第２図の場合と同様にカメラ２
１０に依り、フレームメモリ２３５に格納され
る。その他は、第２図に述べたと同じなのでその
詳細は省略する。

発言前は、切り出し制御信号２６３に応じて、
全景像のみが伝送されて（切換えスイツチ２４３
は接点ａ側にある）、表示部３２０で表示される。

ある特定の出席者が指名されて発言するものと
する。キーボード２７３の操作により、人物カメ
ラ４１０がその発言者に向けられるように操作さ
れ且つ電動ズームレンズ４１１でズームアツプす
る。この撮像情報がフレームメモリ４３５に記憶
された後、人物カメラ４１０の作動に連動するよ
うに制御信号２６３が切り出される。その際、切
換えスイツチ２４３は接点ｂ側に倒されているの
で、発言者の撮像情報のみが切り出されて、モー
ド情報と共に伝送される。

受信側では、送られてくるモード情報に応じて
切り出し情報を復号し、第５図に示すように１画
面上の特定画面領域Ａ５に入るように画面情報を
合成する。なお、領域Ａ５以外は、前に送つてロ
ツクした全景情報である。

なお、上述した両実施例にあつては切換え制御
信号２６３をキーボード２７３の操作で得ていた
が、これに限られることはない。通常会議中であ
る時点における発言者は１人であるから、複数の
マイクにおける最も大きい音量に基づいて切り出
し領域Ａを定めたり人物カメラ４１０の作動を制
御するようにしてもよい。

〔発明の効果〕

以上述べてきたように本発明によれば、フレー
ムメモリとエリアメモリとにタイムシエアリング
方式で順次に書き込み、そして読み出すようにし
ているから、例えば、発言者の動き等の画像部分
を再現性良く受信画面内の、撮像位置とは無関係
な所定の位置に表示させることができる。

【図面の簡単な説明】

第１図は本発明の画像伝送表示方式の原理ブロ
ツク図、第２図は本発明の一実施例を示すブロツ
ク図、第３図は被写体の説明図、第４図は本発明
の別実施例を示すブロツク図、第５図は第４図に
示す方式によつて得られる表示画面の説明図であ
る。 第１図において、１１１は被写体、１１５は撮
像部、１２１は選択部、１２３は伝送手段、１２
５は受信手段、１２９は合成手段、１３１は表示
部である。第２図〜第４図において、２１０，４
１０はテレビジヨンカメラ、２１１，４１１は撮
像信号、２２０は送信装置、２２５は切り出し回
路、２４９は圧縮符号化回路、２６５Ａ〜Ｃはマ
イクロホン、２８０は受信装置、２８９は圧縮符
号復号化部、３１３は合成部、３３１Ａ〜Ｃは出
席者である。

Claims (1)

1. 【特許請求の範囲】 １ 被写体を撮像して発生されたデイジタル画像
   情報を圧縮符号化部１４９で圧縮符号化し、圧縮
   符号化されたデイジタル画像情報を伝送手段１２
   ３を介して伝送し、受信側で受信したデイジタル
   画像信号を圧縮符号復号化部１８９で復号して表
   示部１２０に表示させる画像伝送表示方式におい
   て、 送信側フレームメモリ１３５と、 送信側エリアメモリ１３１と、 前記被写体の一画面分のデイジタル画像情報を
   前記フレームメモリ１３５に書き込むと共に、前
   記一画面分のデイジタル画像情報の一部を前記送
   信側エリアメモリ１３１に書き込み、且つ前記一
   画面分のデイジタル画像情報、又は前記一部を識
   別するモード情報を出力する送信側書き込み制御
   部１３６と、 前記送信側フレームメモリ１３５及び送信側エ
   リアメモリ１３１から読み出されたデイジタル画
   像情報のうちの前記送信側書き込み制御部１１６
   から出力されたモード情報に対応したデイジタル
   画像情報を前記圧縮符号化部１４９へ出力する選
   択部１２１と、 前記圧縮符号化部１４９から出力された圧縮デ
   イジタル画像情報と、前記送信側書き込み制御部
   １３６から出力されたモード情報とを多重化して
   前記伝送手段１２３へ出力する多重化部１５５と
   を送信側に設ける一方、 伝送されて来たデイジタル画像情報とモード情
   報とを分離して分離されたデイジタル画像情報を
   前記圧縮符号復号化部１８９へ出力する分離部１
   ８５と 受信側フレームメモリ１０５と、 受信側エリアメモリ１０７と、 前記圧縮符号復号化部１８９から復号出力され
   たデイジタル画像情報を前記受信側フレームメモ
   リ１０５及び受信側エリアメモリ１０７のうちの
   前記分離部１８５で分離されたモード情報に対応
   するメモリへ出力する受信側書き込み制御部１９
   ３と、 前記受信側フレームメモリ１０５及び受信側エ
   リアメモリ１０７から読み出されたデイジタル画
   像情報を合成して前記表示部１２０へ出力する合
   成部１１３とを受信側に設けたことを特徴とする
   画像伝送表示方式。