JPH08331452A

JPH08331452A - 画像処理システム

Info

Publication number: JPH08331452A
Application number: JP12998295A
Authority: JP
Inventors: Kazuo Kimura; 一夫木村; Kazutake Kamihira; 員丈上平; Takahiro Muraki; 隆浩村木
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1995-05-29
Filing date: 1995-05-29
Publication date: 1996-12-13
Anticipated expiration: 2016-12-04
Also published as: JP3234851B2

Abstract

(57)【要約】【目的】複数映像ソースの画像情報中から多数ユーザ
ーが同時、リアルタイムに、任意視野画像を選択、合
成、切出しできる画像処理システムを提供する。【構成】１台以上の映像ソース１０１から出力された
画像信号を、映像信号分配手段１０３を用いて各ユーザ
ーに対応した画像信号処理手段１１０−１〜ｋにリアル
タイムに分配する。さらに、その画像信号をそれぞれの
画像信号処理手段１１０−１〜ｋで各ユーザーの希望に
そった形で独立に画像処理する。【効果】多数のユーザーが、同時に同じ画像信号ソー
スを処理できる。また、複数枚の画像信号は即時に分配
されるので、その複数枚の画像信号を記憶しておく大容
量の画像メモリが不要となる。従って、非常に低コスト
に構成できる利点がある。また、映像信号分配手段１０
３に接続できる画像信号処理手段１１０−１〜ｋは何台
でも接続可能となるので、非常に拡張性に優れている。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、複数台の映像ソースか
ら出力された複数枚の画像を１枚の画像に合成したり、
あるいは、前記複数枚の撮像画像の中から希望する任意
の視野の画像をリアルタイムで切り出したりすることが
可能な画像処理システムに関するものである。

【０００２】

【従来の技術】複数台のカメラで撮像された映像を、リ
アルタイムにつなぎ合わせて１枚の高精細な画像を構成
する画像処理装置に関しては、既に、参考文献「林正
樹、“パノラマ広画角映像について”、テレビジョン学
会誌、Ｖｏｌ．４８、Ｎｏ．１１、ｐｐ．１４１６−１
４２０、１９９４．」に提案されている。

【０００３】この参考文献記載の画像処理装置の構成例
を図１２に示す。図１２に示した画像処理装置は、６台
のＮＴＳＣ用ＣＣＤカメラ５０１で撮像した６枚分の画
像信号を１枚に合成して、ハイビジョン画像信号を生成
する装置である。その装置の動作は、次の通りである。
６台（＃１〜＃６）のＮＴＳＣ用ＣＣＤカメラ５０１で
撮像した画像信号は、それぞれＡ／Ｄ変換器５０２でデ
ィジタル信号に変換され、さらに色及びレベル調整手段
５０３によって色及び輝度補正を施され、さらに、幾何
変換手段５０４により画面接合のための幾何変換を施さ
れ、ハイビジョン画像メモリ５０６のしかるべきアドレ
スに画像情報として書き込まれる。この動作により、ハ
イビジョン画像メモリ５０６上で、６枚（＃１〜＃６）
のＮＴＳＣ画像情報が１枚のハイビジョン画像に接合さ
れる。その後、前記ハイビジョン画像メモリ５０６上の
画像データをハイビジョンレートで読み出して、Ｄ／Ａ
変換器５０７でアナログ信号に変換することにより、ハ
イビジョン出力５０８を得ている。なお、色及びレベル
調整手段５０３と幾何変換手段５０４は、コンピュータ
５０５により制御されている。

【０００４】この参考文献記載の画像処理装置の特徴
は、異なるインターフェースを有した入力と出力の画像
信号を、画像メモリを介して時分割でアクセスすること
により、両者独立に機能させたことにある。

【０００５】一方、画像メモリに記憶された画像情報か
ら任意の領域の画像情報を切り出す画像処理装置につい
ては、例えば、参考文献「林正樹、下田茂、金次保明、
“シンセビジョンのシステム設計”、テレビジョン学会
技術報告、Ｖｏｌ．１４、Ｎｏ．１３、ｐｐ．７−１
２、１９９０．」に記載された例がある。

【０００６】この参考文献の例では、ハイビジョン画像
メモリの画像情報から、任意の画像切り出し位置を指定
し、リアルタイムで標準テレビ画像信号を生成する装置
について記載している。その具体的な画像信号の切り出
し手法は、切り出すべき画像に対応した画像メモリの読
み出しアドレスを指定することで行なっている。

【０００７】

【発明が解決しようとする課題】前述のように、従来の
技術では、複数台の撮像装置で撮像したＮＴＳＣ画像を
リアルタイムで１枚の連続したハイビジョン画像に変換
する画像処理装置や、あるいは、大容量な画像メモリか
らその部分画像をリアルタイムに抽出する画像処理装置
等、それぞれ機能を特定した画像処理装置については既
に提案がなされている。

【０００８】しかしながら、本発明の目的とするよう
な、複数台の撮像装置で撮像した画像情報の中から複数
のユーザーが同時に、かつ、リアルタイムに、しかも、
それぞれ異なった任意視野の画像情報を選択し、合成、
あるいは、切り出しできるような画像処理システムにつ
いては提案されていなかった。

【０００９】本発明はこのような事情に基づきなされた
ものであり、その目的は、複数台の映像ソースから出力
された画像情報の中から、多数のユーザーが同時に、か
つ、リアルタイムに、しかも、任意の視野の画像を選
択、合成、及び、切り出しできる画像処理システムを提
供することにある。

【００１０】

【課題を解決するための手段】本発明のうち、上記の目
的を達成するための代表的な手段の概略を簡単に説明す
れば、以下の通りである。

【００１１】《手段１》本発明の第１の手段の画像処理
システムは、少なくとも１台以上の映像ソースと、少な
くとも１台以上の独立した画像信号処理手段と、前記少
なくとも１台以上の映像ソースから出力された画像信号
を、前記１台以上の独立した画像信号処理手段に分配す
る映像信号分配手段を具備し、入力となる複数枚の撮像
画像信号を前記映像信号分配手段を介して、各ユーザー
に対応する画像信号処理手段に分配し、その画像信号処
理手段において、それぞれ独立に前記分配された画像信
号を処理（合成、切り出し等を含む）する分散処理型の
システム構成としたことを特徴とする。また、多数のユ
ーザーの希望を同時に実現するために、各ユーザーに対
応した画像信号処理手段を設け、さらに、それらを制御
し希望する視野の画像を選択するための画像選択手段を
設け、さらに、前記画像選択手段により選択された画像
信号により画像信号処理手段から出力される画像信号を
表示する表示手段を具備することを特徴とする。

【００１２】《手段２》本発明の第２の手段の画像処理
システムは、前記第１の手段の構成のそれぞれのユーザ
ー対応に設置した画像信号処理手段において、１台以上
の映像ソースから出力された複数の画像信号の中から、
所定の２つの画像信号を選択する信号選択手段と、前記
信号選択手段で選択された画像信号を可変に遅延させる
可変信号遅延手段と、前記遅延を施された画像信号を合
成する信号合成手段と、画像選択手段からの信号に基づ
き、前記信号選択手段、及び、可変遅延手段、及び、信
号合成手段を制御する制御手段を具備することを特徴と
する。

【００１３】《手段３》本発明の第３の手段の画像処理
システムは、前記第１、第２の手段の構成において、１
台以上の映像ソースから出力された複数の画像信号を１
枚分の画像信号として合成する画像合成手段を具備し、
合成した１枚分の画像信号を画像信号処理手段に分配す
ることを特徴とする。

【００１４】《手段４》本発明の第４の手段の画像処理
システムは、前記第１、第２、第３の手段の構成におい
て、１台以上の映像ソースから出力された複数の画像信
号の各画像間の継ぎ目を補正する画像補正手段を具備す
ることを特徴とする。

【００１５】《手段５》本発明の第５の手段の画像処理
システムは、前記第１から第４までの手段の構成におい
て、画像信号処理手段と、画像選択手段及び表示手段と
の間が、双方向ネットワークや公衆網、専用線等の双方
向の通信回線を介して接続されていることを特徴とす
る。

【００１６】

【作用】第１の手段の画像処理システムでは、１台以上
の映像ソースから出力された画像信号を、映像信号分配
手段を用いて各ユーザーに対応した画像信号処理手段に
リアルタイムに分配し、さらに、その画像信号をそれぞ
れの画像信号処理手段で各ユーザーの希望にそった形で
独立に画像処理することにより、多数のユーザーが、同
時に、かつ、リアルタイムに、同じ画像信号ソースを処
理できるようにする。また、出力された複数枚の画像信
号を即時に分配することにより、その複数枚の画像信号
を記憶しておく大容量の画像メモリを基本的に不要と
し、非常に低コストにシステムを構成可能にする。

【００１７】第２の手段の画像処理システムでは、それ
ぞれユーザー対応に設置した前記画像信号処理手段にお
いて、１台以上の映像ソースから出力された複数の画像
信号の中から、ある２つの画像信号を選択し、選択され
た画像信号を可変に遅延させて合成することにより、例
えば、前記１台以上の映像ソースから出力された画像が
それぞれ水平方向に連続した視野を撮像した画像であ
り、また、それぞれの画像の重なりが画面の１／２以下
であるような場合等において、前記撮像した複数の画像
の中のある連続した２つの画像信号から、その任意の中
間視野の画像を、大容量の画像メモリを使用することな
く合成できるようにする。

【００１８】第３の手段の画像処理システムでは、１台
以上の映像ソースから出力された画像信号を１枚分の画
像信号へ変換する画像合成手段を具備することにより、
前記映像ソースから同時に出力された複数枚の画像を、
１枚分の画像としてリアルタイムで合成できるようにす
る。すなわち、例えば、前記映像ソースから同時に出力
された複数枚の画像が連続した３６０度全周画像の部分
画像であるような場合等において、前記複数枚の画像を
合成して全周画像とし、この画像を新たに各ユーザーに
リアルタイムで提供できるようにする。さらに、例え
ば、前記複数台の映像ソースから出力された全周画像よ
り、任意の視野の画像をリアルタイムで切り出すような
画像処理を実施する場合等において、切り出す画像と全
体の画像との位置関係は常に明確にしておく必要があ
り、その切り出す画像の背景となる全体画像をリアルタ
イムに生成する上で、必須の技術を提供する。

【００１９】第４の手段の画像処理システムでは、１台
以上の映像ソースから出力された画像信号を合成する際
に、その画像間の継ぎ目をリアルタイムに補正する手段
を具備することにより、画像の継ぎ目に起因する不連続
感を低減する。例えば、前記１台以上の映像ソースから
出力された画像が、連続視野画像であった場合に、非常
に有効に機能する。

【００２０】第５の手段の画像処理システムでは、画像
信号処理手段と、画像選択手段及び表示手段との間を、
双方向の通信回線を介して接続することにより、遠隔地
から各ユーザーが希望する画像処理を独立に実行できる
ようにする。

【００２１】

【実施例】以下、本発明の実施例を、図面を参照して詳
細に説明する。

【００２２】《実施例１》図１は、本発明による第１の
実施例を示す図である。本構成は、ｎ台（＃１〜＃ｎ、
ｎは整数）の映像ソース（ここでは、撮像装置を想定し
ているが、例えばＶＴＲ等のように映像信号ソースであ
れば何でもよい）１０１と、前記映像ソース１０１から
出力された映像信号を分配する映像信号分配手段１０３
と、分配された映像信号を処理するｋ個（ｋは整数、同
時に使用するユーザーの数に相当する）の独立した画像
信号処理手段１１０−ｌ〜ｋと、前記画像信号処理手段
１１０−ｌ〜ｋに接続されたＤ／Ａ変換器１３１−ｌ〜
ｋと、それに接続された表示手段１３２−ｌ〜ｋと、画
像信号処理手段１１０−ｌ〜ｋ毎に希望する画像をリア
ルタイムに選択する画像選択手段１３３−ｌ〜ｋから構
成されている。

【００２３】次に、本実施例の動作について説明する。
前記映像信号分配手段１０３には、ｎ台（ｎは整数）の
映像ソースから出力された画像データが同時に出力さ
れ、各独立した画像信号処理手段１１０−ｌ〜ｋに分配
される。各ユーザーは、おのおの画像信号処理手段１１
０−ｌ〜ｋに対して、希望する画像選択信号を画像選択
手段１３３−ｌ〜ｋを介して入力する。これにより、前
記独立した画像信号処理手段１１０−ｌ〜ｋがそれぞれ
独立に制御され、希望する画像がリアルタイムに表示手
段１３２−ｌ〜ｋに表示される。従って、同時に各ユー
ザーが本システムをアクセスしても、全く問題なくリア
ルタイムに処理できる。前記Ｄ／Ａ変換器１３１−ｌ〜
ｋは、ディジタル信号をアナログ信号に変換するもので
あり、画像信号処理手段１１０−ｌ〜ｋと表示手段１３
２−ｌ〜ｋとのインターフェースとして機能する。

【００２４】《実施例２》図２は、本発明による第２の
実施例を示す図である。本実施例では、第１の実施例の
構成の画像信号処理手段１１０−ｌ〜ｋが、映像信号分
配手段１０３より希望する２本の信号（隣接した画像を
撮像した２台の映像ソース、＃ｉ、＃ｉ＋１、ここでｉ
は整数、１≦ｉ≦ｎ）を選択する信号選択手段１１１
と、その選択された２本の映像信号を可変に遅延できる
可変信号遅延手段１１２と、その遅延された２つの信号
を多重化して１本の信号に変換する信号合成手段１１４
と、そして、前記各手段１１１、１１２、１１４を制御
する制御手段１１３とから構成されている。

【００２５】次に、本実施例の動作について説明する。
本実施例の説明においては、図６に示すように映像ソー
スとしてｎ台（＃１〜＃８、すなわち、図６に図示した
のはｎ＝８の例である）の撮像装置（図６では代表とし
て＃２の撮像装置１８３−２を図示）を用い、３６０度
全周画像を撮像する場合を前提として説明することにす
る。また、そのｎ台の撮像装置の画像の継ぎ目について
は、予め補正（補正の手法については、後記する第４の
実施例において説明する）されていることを前提とす
る。

【００２６】まず、始めに、各ユーザー対応の画像信号
処理手段１１０−ｌ〜ｋの動作について説明する。図
７、図８に、その動作を説明する図を示す。図７の＃１
〜＃ｎの信号波形は、前記映像信号分配手段１０３上の
画像信号波形である。ここでは、説明を容易にするため
アナログの信号波形を用いて説明しているが、実際に映
像信号分配手段１０３上に出力される信号はディジタル
信号である。ここでの前記画像信号処理手段１１０−ｌ
〜ｋは、図８に示したｎ台の撮像装置で撮像された３６
０度全周画像２０１より、各ユーザーから送信されてき
た画像選択信号をもとに、その部分画像２０２を切り出
すことにある。

【００２７】その動作の一例を、具体的に図７のタイミ
ングチャートで説明する。図７において、＃１〜＃ｉ、
＃ｉ＋１、〜、＃ｎは映像ソース（撮像装置）からの映
像出力信号（図中では、わかりやすいようにアナログ信
号で記載しているが、実際の信号はディジタルフォーマ
ットである）、Ｏｕｔｐｕｔは出力信号、ｔ_HSは水平同
期期間である。各ユーザーから送信されてきた画像選択
信号は、３６０度全周画像２０１のどの部分画像を選択
するかの情報を含んでいる。この情報から、少なくとも
具体的に選択すべき連続した２つ（＃ｉ、＃ｉ＋１、ｉ
は整数）の画像信号を特定でき、さらに、その画面位置
（切り出し位置）から画像を切り出すタイミングｔ₀を
決定することができる。撮像装置における１画面の水平
同期期間ｔ_HSは一定のため、前述のｔ₀を決定するのと
同時に、＃ｉの画像の切り出しタイミングｔ₁と、＃ｉ
＋１の画像の切り出しタイミングｔ₂が同様に決定でき
る。このタイミングの検出は、制御手段１１３（ＬＳＩ
等の電子回路で実現できる）でリアルタイムに実行す
る。この切り出しタイミングを可変遅延手段１１２（シ
フトレジスタ等の電子回路を用いて構成できる）に与え
ることにより、目的とする出力信号Ｏｕｔｐｕｔを生成
することができる。図示した例では、＃ｉの画像に対し
ては、ｔ_HS−ｔ₂遅延させ、＃ｉ＋１の画像に対して
は、ｔ_HS＋ｔ₁遅延させて合成してＯｕｔｐｕｔの信号
を生成している。このＯｕｔｐｕｔの信号は、画像２０
２に相当する。

【００２８】前述の説明は、図６の画像の重なり、すな
わち撮像装置の画角１８１の重なり部分１８２が存在し
ない場合の動作例についての説明であった。実際には、
図６に示すように隣接画像の重なり部分すなわち撮像装
置の画角の重なり部分１８２が存在する。このような場
合においても、予めその重なり部分を特定しておけは、
その重なり部分に対応したオフセットタイミングを前記
タイミングに加えることにより柔軟に対応することがで
きる。また、前記２つの信号間のタイミングは相対的な
ものであるので、図示した例以外のタイミングでも同様
な動作が実現可能なことは容易に類推できる。

【００２９】本実施例のような構成では、大容量の画像
メモリが必要なく、非常に簡単な構成で装置を構成でき
る特徴がある。

【００３０】《実施例３》図３は、本発明による第３の
実施例を示す図である。本実施例では、第２の実施例
に、ｎ枚の画像を１枚に合成する画像合成手段１２０を
付加した例である。前記画像合成手段１２０は、映像信
号分配手段１０３から分配された映像信号を通常の１／
ｎ（ｎは撮像装置の台数）の幅のタイムスロットでサン
プリングして１つの画像信号に多重化する信号合成手段
１２１と、タイミング調整のための信号遅延手段１２２
と、また、前記信号遅延手段１２２から出力された画像
信号から特定ラインを間引き１枚の縮小画像に変換する
信号間引き手段１２３と、さらに、それらの手段１２
１、１２２、１２３を制御する制御手段１２４とから構
成されている。各画像処理手段１１０−１〜ｋには信号
合成手段１１４の後にさらに信号合成手段１１５が設け
られ、前記間引き手段１２３から出力される映像信号３
０５は前記信号合成手段１１５に分配される。

【００３１】次に、ｎ枚の画像を１枚に合成する映像合
成手段１２０の動作について説明する。ここでも、図６
に示すように映像ソースとしてｎ台（＃１〜＃８、すな
わち図６に図示したのはｎ＝８の例である）の撮像装置
（図６では代表として＃２の撮像装置１８３−２を図
示）を用い、３６０度全周画像を撮像する場合を前提と
して説明することにする。図９、図１０にその動作を説
明する図を示す。本実施例における前記画像合成手段１
２０の目的は、図１０に示した３６０度全周画像３１１
から、１／ｎに縮小した１枚の画像３１３を生成するこ
とにある。なお、縮小した１枚の画像３１３は、縮小画
像データ部３０６と、無信号データ部３０７で構成され
る。

【００３２】この動作の一例を、図９のタイミングチャ
ートを用いて説明する。まず、３６０度全周画像３１１
から水平方向を１／ｎに縮小した画像を生成するため、
＃ｉ〜＃ｎの画像信号の中からそれぞれΔｔ＝ｔ_D／ｎ
おきに順次サンプリングし、また、そのそれぞれの信号
にｔ_HS（水平同期期間）の遅延をかけて合成する。この
動作は、信号合成手段１２１と信号遅延手段１２２で実
現できる。この合成された出力はＯｕｔｐｕｔ−１であ
り、図１０の画像３１２に相当する。この合成された出
力信号Ｏｕｔｐｕｔ−１を、さらに、１／ｎ毎の走査線
でサンプリングして、さらに、そのそれぞれの画像信号
に図９に示すように適宜遅延をかけて合成することによ
り、最終的にＯｕｔｐｕｔ−２の画像信号を得ることが
できる。前述の各手段をコントロールするのは制御手段
１２４である。Ｏｕｔｐｕｔ−２の画像信号は、図１０
の画像３１３に相当する信号である。この画像３１３の
画像信号３０５は、図８の選択画像２０２の画像信号と
信号合成手段１１５で合成することができる。

【００３３】前記画像信号処理は、ある画像の１フレー
ム期間内にほぼリアルタイムで終了させることができ
る。すなわち、本構成により、ほぼリアルタイムでの画
像合成動作が実現可能である。

【００３４】《実施例４》図４は、本発明による第４の
実施例を示す図である。本実施例は、第３の実施例の構
成に、画像補正手段１０２を付加した例である。また、
前記画像補正手段１０２及び撮像装置１０１を制御する
ために制御手段１０４を設けたものである。前記画像補
正手段１０２では、今回目的とする画像の継ぎ目補正の
他に、撮像信号の色補正、レベル補正等の補正も行な
う。前記色補正、レベル補正等の補正は、ルックアップ
テーブルを用いた手法等で実現可能である。また、これ
ら補正値の修正は、前記制御手段１０４でソフト的に実
行できる。

【００３５】次に、画像の継ぎ目補正の手法について説
明する。本実施例では、画像の継ぎ目補正は、画像信号
処理手段１０２で実施する。その具体的な動作の一例
を、図１１に示す。本実施例では、＃ｉの画像４０１と
＃ｉ＋１の画像４０２の継ぎ目の輝度変化を連続、か
つ、線形に補間した例である。図中の４０３が、画像４
０１と画像４０２の継ぎ目の輝度変化を連続、かつ、線
形に補間した例である。このような簡単な線形演算は、
画像信号処理手段１０２でリアルタイムに実行すること
ができる。ここで、図中の４０４は、比較のため示した
画像４０１と４０２の輝度の単純平均値である。この輝
度の単純平均値では、輝度の変化値の大きいところで不
連続感を感じてしまう。

【００３６】上記実施例では、画像の継ぎ目補正に、連
続かつ線形近似の輝度補間を行なったが、これ以外の連
続な輝度補間法（スプライン補間、ベッセル補間等）を
用いる手法についても、本発明の特許請求の範囲内であ
る。

【００３７】《実施例５》図５は、本発明による第５の
実施例を示す図である。本実施例は、第４の実施例の構
成において、送信側のセンター装置１５０と、受信側の
加入者（ユーザー）装置１３０−ｌ〜ｋが、双方向のネ
ットワーク（通信回線）１４０で接続されている例であ
る。すなわち、センター装置１５０の画像信号処理手段
１１０−１〜ｋと、加入者装置１３０−１〜ｋの画像選
択手段１３３−１〜ｋ及びＡ／Ｄ変換器１３１−１〜ｋ
を介した表示手段１３２−１〜ｋとの間が、双方向のネ
ットワーク１４０を介して接続されている。これらのネ
ットワーク１４０は、ＬＡＮであっても、公衆網であっ
ても、あるいは、専用線であってもよい。このような、
ネットワーク１４０を介した構成では、各ユーザーが遠
隔で画像処理を実行できる。

【００３８】

【発明の効果】以上説明したように、本発明の第１の手
段の画像処理システムによれば、１台以上の映像ソース
から出力された画像信号を、映像信号分配手段を用いて
各ユーザーに対応した画像信号処理手段にリアルタイム
に分配し、さらに、その画像信号をそれぞれの画像信号
処理手段で各ユーザーの希望にそった形で独立に画像処
理するため、多数のユーザーが、同時に、かつ、リアル
タイムに、同じ画像信号ソースを処理することができ
る。また、出力された複数枚の画像信号が即時に分配さ
れるので、その複数枚の画像信号を記憶しておく大容量
の画像メモリが基本的に不要となる。従って、非常に低
コストにシステムを構成できる利点が得られる。しか
も、前記映像信号分配手段に接続できる画像信号処理手
段は、何台でも接続可能となるので、非常に拡張性に優
れたシステムが構成できる。すなわち、従来のように大
容量な画像メモリが必要なく、非常に低コスト、かつ、
高機能、かつ、拡張性にも優れたインタラクティブな動
作が可能な画像処理システムを実現することができる。

【００３９】本発明の第２の手段の画像処理システムに
よれば、第１の手段のそれぞれのユーザー対応に設置し
た画像信号処理手段において、１台以上の映像ソースか
ら出力される複数の画像信号の中から、ある２つの画像
信号を選択し、その選択された画像信号を可変に遅延さ
せて合成する信号合成手段を具備するので、例えば、前
記１台以上の映像ソースから出力された画像がそれぞれ
水平方向に連続した視野を撮像した画像であり、また、
それぞれの画像の重なりが画面の１／２以下であるよう
な場合を想定すると、前記撮像した複数の画像の中のあ
る連続した２つの画像信号から、その任意の中間視野の
画像を合成することができる。すなわち、従来には存在
しなかった３６０度全周画像から任意の視野を切り出す
というような新しいインタラクティブ画像処理システム
等を実現することができる。さらに、前記の中間視野の
画像は大容量の画像メモリを使用することなく合成でき
るので、その装置コストを大幅に低減することができ
る。

【００４０】本発明の第３の手段の画像処理システムに
よれば、１台以上の映像ソースから出力された画像信号
を１枚分の画像信号へ変換する画像合成手段を具備する
ので、前記映像ソースから同時に出力された複数枚の画
像を、１枚分の画像としてリアルタイムで合成すること
ができる。すなわち、例えば、前記映像ソースから同時
に出力された複数枚の画像が連続した３６０度全周画像
の部分画像であるような場合を想定した場合、前記複数
枚の画像を合成した画像は全周画像となり、この画像を
新たに各ユーザーにリアルタイムで提供できるようにな
る。さらに、例えば、前記複数台の映像ソースから出力
された全周画像より、任意の視野の画像をリアルタイム
で切り出すような画像処理を実施する場合を想定する
と、切り出す画像と全体の画像との位置関係は常に明確
にしておく必要があり、その切り出す画像の背景となる
全体画像をリアルタイムに生成する上で、必須の技術を
提供することができる。

【００４１】本発明の第４の手段の画像処理システムに
よれば、１台以上の映像ソースから出力された画像信号
を合成する際に、その画像間の継ぎ目をリアルタイムに
補正する手段を具備しているので、画像の継ぎ目に起因
する不連続感を低減することができる。例えば、１台以
上の映像ソースから出力された画像が、連続視野画像で
あった場合に、非常に有効に機能する。

【００４２】本発明の第５の手段の画像処理システムに
よれば、前記画像信号処理手段と、画像選択手段及び表
示手段との間が、双方向の通信回線を介して接続されて
いるので、遠隔地からでも各ユーザーが希望する画像処
理を独立に実行することができる。

【図面の簡単な説明】

【図１】本発明の第１の実施例の構成を示すブロック図
である。

【図２】本発明の第２の実施例の構成を示すブロック図
である。

【図３】本発明の第３の実施例の構成を示すブロック図
である。

【図４】本発明の第４の実施例の構成を示すブロック図
である。

【図５】本発明の第５の実施例の構成を示すブロック図
である。

【図６】上記実施例の動作を説明する図である。

【図７】上記第２の実施例の動作を説明する図である。

【図８】上記第２の実施例の動作を説明するもう一つの
図である。

【図９】上記第３の実施例の動作を説明する図である。

【図１０】上記第３の実施例の動作を説明するもう一つ
の図である。

【図１１】上記第４の実施例における画像の継ぎ目の補
正方法を説明する図である。

【図１２】従来の画像処理装置の構成例を示す図であ
る。

【符号の説明】

１０１…映像ソース（撮像装置）１０２…画像補正手段１０３…映像信号分配手段１０４…制御手段１１０−ｌ〜ｋ…画像信号処理手段１１１…信号選択手段１１２…可変信号遅延手段１１３…制御手段１１４…信号合成手段１１５…信号合成手段１２０…画像合成手段１２１…信号合成手段１２２…信号遅延手段１２３…信号間引き手段１２４…制御手段１３０−ｌ〜ｋ…加入者装置１３１−ｌ〜ｋ…Ａ／Ｄ変換器１３２−ｌ〜ｋ…表示手段１３３−ｌ〜ｋ…画像選択手段１４０…ネットワーク（通信回線）１５０…センター装置１８１…撮像装置の画角１８２…撮像装置の画角の重なり部分１８３−２…＃２の撮像装置２０１…＃１〜＃ｎの撮像装置で撮像した全周画像２０２…＃ｉ、＃ｉ＋１の撮像装置からの映像信号より
合成した全周画像の部分画像３０１…垂直帰線期間３０２…映像信号データ部３０４…水平方向を１／ｎ（ｎは撮像装置の台数）にサ
ンプルして合成した映像信号３０５…垂直方向を１／ｎ（ｎは撮像装置の台数）にサ
ンプルして合成した映像信号３０６…縮小画像データ部３０７…無信号データ部３１１…＃１〜＃ｎの撮像装置で撮像した全周画像３１２…映像信号３０４の画像３１３…映像信号３０５の画像４０１…＃ｉの画像４０２…＃ｉ＋１の画像４０３…補正後の輝度変化４０４…補正前の輝度変化

Claims

【特許請求の範囲】

【請求項１】少なくとも１台以上の映像ソースと、少なくとも１台以上の独立した画像信号処理手段と、前記少なくとも１台以上の映像ソースから出力された画
像信号を、前記１台以上の独立した画像信号処理手段に
即時に分配する映像信号分配手段と、前記映像ソースから出力された複数の画像信号の中から
希望する任意の領域の画像を前記画像信号処理手段を制
御してリアルタイムに選択させる画像選択手段と、前記選択された画像信号により画像信号処理手段から出
力される画像信号を表示する表示手段と、を具備することを特徴とする画像処理システム。
【請求項２】画像信号処理手段は、１台以上の映像ソースから出力された複数の画像信号の
中から、所定の２つの画像信号を選択する信号選択手段
と、前記選択された画像信号を可変に遅延させる可変信号遅
延手段と、前記遅延を施された画像信号を合成する信号合成手段
と、画像選択手段からの信号に基づき前記信号選択手段、及
び、可変遅延手段、及び、信号合成手段を制御する制御
手段と、を具備することを特徴とする請求項１記載の画像処理シ
ステム。
【請求項３】１台以上の映像ソースから出力された複
数の画像信号を、１枚分の画像信号にリアルタイムに合
成する画像合成手段を具備し、前記合成された１枚分の画像信号を画像信号処理手段に
分配することを特徴とする請求項１あるいは請求項２記
載の画像処理システム。
【請求項４】１台以上の映像ソースから出力された複
数の画像信号の各画像間の継ぎ目を補正する画像補正手
段を具備することを特徴とする請求項１あるいは請求項
２あるいは請求項３記載の画像処理システム。
【請求項５】画像信号処理手段と、画像選択手段及び
表示手段との間が、双方向の通信回線を介して接続され
ていることを特徴とする請求項１または請求項２または
請求項３または請求項４のいずれかに記載の画像処理シ
ステム。