JP2819566B2

JP2819566B2 - 動画像伝送システム

Info

Publication number: JP2819566B2
Application number: JP22748988A
Authority: JP
Inventors: ゆかり加村
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 1988-09-13
Filing date: 1988-09-13
Publication date: 1998-10-30
Anticipated expiration: 2013-10-30
Also published as: JPH0276078A

Description

【発明の詳細な説明】〔産業上の利用分野〕本発明は動画像伝送システムに関するものである。

〔従来の技術〕

従来、この種の動画像伝送システムは、送・受信時の
いずれにおいても解像度を変化させずに、固定の解像度
を用いて伝送するのが常であつた。

〔発明が解決しようとする課題〕

上述した従来の動画像伝送システムは、送・受信時の
いずれにおいても、通常のテレビジヨン信号程度の必ず
しも高くない解像度を用いているので、解像度が高くき
め細かい美しい画像の合成ができないという課題があつ
た。

〔課題を解決するための手段〕

本発明の動画像伝送システムは、第１の解像度で送ら
れてきた動画像を補間により解像度をあげて第２の解像
度の動画像を得、上記第１の解像度で送られてきた動画
像より抽出される輪郭を表わす情報を用いて予め用意さ
れた上記第２の解像度をもつ複数のメニュー画像に含ま
れるサンプルパタンの任意の１つと上記第２の解像度の
動画像からその第２の解像度をもつ合成画像を発生し、
上記第１の解像度で送られてきた動画像の送信元へ送り
出すようにしたものである。

〔作用〕

本発明においては、第１の解像度で送られてきた動画
像を補間により解像度をあげ第２の解像度の動画像を
得、予め用意された第２の解像度をもつ画像と合成す
る。

〔実施例〕

以下、図面に基づき本発明の実施例を詳細に説明す
る。

第１図は本発明の一実施例を示すブロツク図である。

図において、１は端末を示したものであり、２は中央
処理センターを示したものである。

端末１における10は選択器、11はカメラ、12はテレビ
モニタ（TVモニタ）、13は符号化復号化装置である。

中央処理センター２における20は符号化復号化装置、
21は補間回路、22は画面合成回路である。

なお、a,bは線を示し、c,dは伝送路、e,f,g,h,iは線
を示す。

そして、第１の解像度で送られてきた動画像を補間に
より解像度をあげ第２の解像度の動画像を得、第１の解
像度で送られてきた動画像より抽出される輪郭を表わす
情報を用いて予め用意された第２の解像度をもつ複数の
メニユー画像に含まれるサンプルパタンの任意の１つと
第２の解像度の動画像から第２の解像度をもつ合成画像
を発生し、第１の解像度で送られてきた動画像の送信元
へ送り出すように構成されている。

また、画像伝送時において、送信側で第１の解像度を
もつ動画像を符号化圧縮して伝送し、これに対し復号化
により得られた画像を用いて合成画像をつくるように構
成されている。

また、画像合成時において、送られてきた動画像から
抽出される輪郭の変形に応じてサンプルパタンを変形さ
せ、合成するように構成されている。

つぎにこの第１図に示す実施例の動作を説明する。

まず、カメラ11で撮つた動画像を線ｅを介して符号化
復号化装置13の符号化部へ供給する。そして、この符号
化復号化装置13では送られてきた画像、例えば、通常の
TV信号程度の解像度の画像を符号化し圧縮して伝送路ｃ
を介して符号化復号化装置20の復号化部へ供給する。

つぎに、符号化復号化装置20では送られてきた符号化
された画像を復号化し、線ｇを介して補間回路21へ供給
する。この補間回路21では送られてきた通常のTV信号程
度の第１の解像度をもつ画像のサンプル数やライン数、
すなわち、画素密度を補間により増やし、解像度をあ
げ、第２の解像度の画像として線ｈを介して画面合成回
路22へ供給する。ここで、補間回路21はその方法に特に
制約はなく、一次補間や高次の補間など何でもよい。

第２図に画面合成回路22の詳細を示す。

第１図における画面合成回路22の実施例を示す第２図
において第１図と同一符号のものは相当部分を示し、22
3は輪郭抽出部、224はサンプルパタン記憶部、225は切
替器である。なお、j,kは線を示す。

そして、サンプルパタン記憶部224には、予め用意さ
れた多数の第２の解像度のメニユー画像が記憶されてい
る。すなわち、複数種類のメニユー画像のグループがあ
り、各グループ内に多数の互いにわずかずつ異なるサン
プルパタンが含まれている。このサンプルパタン記憶部
224における記憶機能としては、大容量の磁気デイスク
やメモリが使用可能である。このメニユー画像のうち、
どのグループのサンプルパタンを用いて送られてきた動
画像と合成を行うかを指定する信号は、選択器10から入
力され線ｂを介してサンプルパタン記憶部224および切
替器225に供給される。

サンプルパタン記憶部224では、この信号によつて合
成部分の決定されたメニユー画像のうちの１グループが
選択され、選択器10から入力され線ａを介して供給され
た信号によりそのグループの中の１つのサンプルパタン
画像が選択される。

そして、切替器225では、選択器10から線ｂを介して
供給された信号に基づき、補間回路21から線ｈを介して
供給された復号画像の何れかを選択する。そして、サン
プルパタン記憶部224から線ｋを介して供給されたサン
プルパタンの画像を、輪郭抽出部223から線ｊを介して
供給される情報に基づいて選択する。そして、選択され
た復号画像と選択されたサンプルパタンの画像とを合成
し、線ｉを介して符号化復号化装置20の符号化部に供給
する。

輪郭抽出部223においては、入力された複合カラー信
号からＹ信号をとり出し、このＹ信号を垂直および水平
に微分することにより輪郭情報を得る。

つぎに、合成した画像の送信元への伝送について説明
する。

第１図に示す符号化復号化装置20では、この合成した
画像を符号化部において符号化，圧縮し、伝送路ｄを介
して符号化復号化装置13の復号化部に供給する。この符
号化復号化装置13の復号化部では供給された画像を復号
化し、線ｆを介してTVモニタ12に映し出す。

つぎに本発明に係る実施例につき、変形例を説明す
る。

上記実施例の画面合成時に輪郭抽出部223の信号、す
なわち、輪郭情報は通常動きに伴なう変形情報を含んで
いるので、これを画像の変形情報として、動画像の動き
に合わせて、サンプルパタン記憶部224に記憶されてい
るサンプルパタンを合成して用いる際に変形させる。

第３図にこのときの画面合成回路、すなわち、画面変
形機能をもたせた画面合成回路22の一例を示す。

第１図における画面合成回路22の他の実施例を示す第
３図において第２図と同一符号のものは相当部分を示
し、226は変形回路である。なお、l,m,nは線を示す。

輪郭抽出部223の信号を線ｌを介して変形回路226に供
給する。この輪郭抽出部223からの変形情報により、サ
ンプルパタン記憶部224より線ｍを介して供給された画
像を変形し、線ｎを介して切替器225に供給する。

変形の具体的方法を人間の顔の場合を例にとつて説明
する。

対面通話時を想定するとき、人間の顔は通常正立した
顔が多いので、この場合について説明することにする。

サンプルパタン画像および入力動画像を共に正規化
し、第４図および第５図に示すように縦，横，斜め（縦
横の線に対して45°）の規準線をおく。

第４図，第５図および第６図は第３図の動作説明に供
する図で、第４図は輪郭情報による画像変形時の入力動
画像における規準線図を示し、第５図は輪郭情報による
画像変形時のサンプルパタン画像における規準線図を示
す。

そして、規準線の本数は８本とは限らず、多ければ多
いほど（斜めの線の角度が45°だけでなく等角度間隔に
細かく区切れば区切る程）より精密な変形が可能とな
る。ここでは、一例として、８本の規準線の場合につい
て説明する。

規準線の中心をサンプルパタン画像，入力動画像共に
縦・横の長さの中点におく。そして、この中心からサン
プルパタン画像の輪郭部と規準線x₁との交点Ａまでの距
離ｙと、中心から入力動画像の輪郭部と規準線x₁′との
交点Ａ′までの距離ｙ′を求め、サンプルパタン画像に
おける中心から交点までの距離に対する入力動画像にお
ける中心から交点までの距離の比率（y:y′＝1:y′/y）
を求める。

同様にしてすべての規準線における縮尺比を求め、こ
れをもとにサンプルパタン画像を規準線方向に縮少ある
いは拡大し、サンプルパタン画像を入力動画像と同形に
変形する。この結果として輪郭情報による画像変形後の
サンプルパタン画像図である第６図に示すような変形を
加えた合成画像が得られる。このとき、より滑らかな輪
郭を再現する場合の規準線からはずれている部分の縮尺
あるいは拡大方法については、例えば、隣り合つた規準
線間の縮尺比の差を段階的に等間隔に割りあてる。

〔発明の効果〕

以上説明したように本発明は、第１の解像度で送られ
てきた動画像を補間により解像度をあげ第２の解像度の
動画像を得、予め用意された第２の解像度をもつ画像と
合成することができる。つまり、異つた解像度の画像の
合成および解像度を向上させての伝送ができる効果があ
る。

例えば、画像処理サービスにおいて、入力画像の解像
度はたとえ低くても、合成などを含むもとの画像よりも
高い解像度できめ細かな処理画像を送り返すことはシス
テム全体のコスト低減のためには重要な問題であり、以
上のようにこの発明を実用に供するとその効果は極めて
大きい。

【図面の簡単な説明】

第１図は本発明の一実施例を示すブロツク図、第２図は
第１図における画面合成回路の実施例を示すブロツク
図、第３図は第１図における画面合成回路の他の実施例
を示すブロツク図、第４図，第５図および第６図は第３
図の動作説明に供する図である。１……端末、２……中央処理センタ、10……選択器、11
……カメラ、12……TVモニタ、13,20……符号化復号化
装置、21……補間回路、22……画面合成回路、223……
輪郭抽出部、224……サンプルパタン記憶部、225……切
替器、226……変形回路。

Claims

(57)【特許請求の範囲】

【請求項１】第１の解像度で送られてきた動画像を補間
により解像度をあげて第２の解像度の動画像を得、前記第１の解像度で送られてきた動画像より抽出される
輪郭を表わす情報を用いて予め用意された前記第２の解
像度をもつ複数のメニュー画像に含まれるサンプルパタ
ンの任意の１つと前記第２の解像度の動画像から該第２
の解像度をもつ合成画像を発生し、前記第１の解像度で送られてきた動画像の送信元へ送り
出すようにしたことを特徴とする動画像伝送システム。