JP4467224B2 - 画像送受信システム、画像送信装置並びに画像受信装置 - Google Patents
画像送受信システム、画像送信装置並びに画像受信装置 Download PDFInfo
- Publication number
- JP4467224B2 JP4467224B2 JP2002098413A JP2002098413A JP4467224B2 JP 4467224 B2 JP4467224 B2 JP 4467224B2 JP 2002098413 A JP2002098413 A JP 2002098413A JP 2002098413 A JP2002098413 A JP 2002098413A JP 4467224 B2 JP4467224 B2 JP 4467224B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- difference
- noise
- receiving
- reception
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Description
【発明の属する技術分野】
本発明は、画像送受信システム、画像送信装置並びに画像受信装置に係り、連続する映像等の画像を画像送信装置から画像受信装置に送信する画像送受信システム、画像送信装置並びに画像受信装置に関する。
【0002】
【従来の技術】
従来の特開平6−62409号の公報には、複数のビデオカメラのうち、動きのある画像を撮像しているビデオカメラからの映像信号のみを記録することで、動きのない不要な映像を記録することなく、効率の高い監視を行うことが可能な監視用映像信号記録装置が示されている。
【0003】
当該監視用映像信号記録装置では、3台のビデオカメラより入力された映像信号が第1の切換器と第2の切換器に入力されている。第2の切換器の出力はフレームメモリ回路と比較回路とに加えられ、比較回路においてフレームメモリ回路を経由した1フレーム前の信号と比較され、動き判別回路が画像の動きを検出する。動きのある映像を撮像しているビデオカメラを検出した入力切換回路は第1の切換器と識別信号付加回路を制御し、動きのある映像信号にビデオカメラに対応する識別信号を付加して記録するように構成されている。
【0004】
また、画像中から動きの大きな物体の含まれる領域を取り出し拡大して表示し追尾動作を安定させるテレビドアフォンが、特開平5−68195号の公報に示されている。
【0005】
当該ドアフォンでは、以下の処理を行うことによって、画像の拡大表示を行っている。先ず、CCDカメラにより撮像しA/D変換器によりデジタル化し画像メモリに記憶させる。動き検出手段により現在の画像と前の画像とを比較し、動きがある部分を検出する。画像は各領域に分割され、計算手段により動き検出手段により検出した動きのある場所の大きさを比較判定する。分割領域の動き判定手段により分割画像の動きがあるしきい値の範囲内であるかどうかを判断し、その判断結果により記録した画像を拡大表示している。
【0006】
【発明が解決しようとする課題】
しかしながら、従来の特開平6−62409号の公報に示されている監視用映像信号記録装置では、監視カメラのCCD等の撮像手段又はその撮像手段の後段の増幅回路等で発生する映像信号のノイズのために、実際には動きのある被写体が含まれていないにも関わらず画像が切り換わってしまうという不具合を生ずる。特に監視カメラのように、暗い被写体を撮影する可能性が高い場合には、映像信号のレベルに対して撮像手段等から発生するノイズの割合が増えるために、何も動く被写体が存在してないにもかかわらず動き識別回路が映像信号の変化によって被写体に動きがあると判断して、ノイズの多い映像を記録し続けることになる。
【0007】
また、監視カメラシステムのように、監視カメラから監視用映像信号記録装置までの距離が長い場合には、監視カメラではノイズの発生が少なくても、映像信号が伝送される経路で外部から電磁波等の影響を受けて映像信号にノイズが乗る可能性が高い。特にビルに設けられた監視カメラでは、信号を伝送する経路が長いことと、エレベータや空調機、シャッター等の動力源や動力線から発生する電磁ノイズの影響を受けやすい。このような場合にも、実際には動く被写体が存在してないにもかかわらず動き識別回路が映像信号の変化によって被写体に動きがあると判断して、ノイズが含まれている映像を記録し続けることになる。
【0008】
また、特開平6−62409号の公報に示されている監視用映像信号記録装置や、特開平5−68195号の公報に示されているテレビドアフォンでは、監視カメラが撮像した画像の画角全体の映像信号を、別の場所又は遠隔地に存在する画像の処理回路等に伝送する必要がある。一般に映像信号の情報量は大変多いので、数Mbps以上の転送レートを確保するとともにノイズに強い配線を用いる必要がある。また、監視カメラが複数台備えられている場合には、それぞれの監視カメラ毎に専用の映像信号の配線を設ける必要があった。これは、ビル等の建物内や屋外、遠隔地の複数の場所に監視カメラを設置して映像を管理する際には、たいへんな設置費用を要するものである。
【0009】
この映像信号の伝送にあたって、デジタル情報化した画像データをパケット通信等の通信手段を用いて混合して伝送することによって、複数台の監視カメラで撮像した画像を少ない本数の送信線を共用して送信することが可能となるのであるが、その際には画像の画素数や階調を例えば1/10〜1/100程度に大幅に減少させて伝送するようにしないと、全ての映像情報を送信することができない。
【0010】
従って従来の監視カメラでは、撮影した映像信号をLANやインターネット等の通信網を介して離れた場所に送信する場合に、撮像した画像のフレーム数を極端に減少して送信するか、又は1フレームの画像サイズや階調が極端に減少させてから送信しなければならず、結果的に高画質な監視映像を送信することができないという不具合を生じていた。
【0011】
本発明は、このような事情に鑑みてなされたもので、画像送信装置にて記憶している画像の各フレームの最大差分範囲のみを送信することによって、映像の伝送に必要な情報量を減少させつつ、画像受信装置側では高画質な映像を表示又は記録することが可能な画像送信装置並びに画像送受信システムを提供することを目的としている。
【0012】
また本発明は、画像送信装置等の通信機器から動きのある部分の映像情報又は画像の最大差分範囲のみを受信して、少ない情報の伝送量で高画質な映像を表示又は記録することが可能な画像送受信システム並びに画像受信装置を提供することを目的としている。
【0013】
【課題を解決するための手段】
前記目的を達成するために、本発明に係る画像送受信システムは、画像を記憶する記憶手段から、前画像である第1の画像と現画像である第2の画像とを読み出して、両画像の差である差分画像を抽出し、該抽出した差分画像に含まれるノイズ成分を除去したノイズ除去差分画像を生成し、前記ノイズ除去差分画像について最大差分範囲を検出し、検出された最大差分範囲以外の部分の色を黒もしくは透明に設定、検出された最大差分範囲以外の部分の色情報を零に設定または検出された最大差分範囲以外の部分を削除する処理を行う送信側情報処理手段と、前記処理の行われたノイズ除去差分画像を他の通信機器に送信する送信手段とを備えたことを特徴としている。
【0014】
本発明によれば、画像送信装置にて記憶している画像の各フレームの最大差分範囲のみを送信することによって、映像の伝送に必要な情報量を減少させることが可能となる。
【0015】
また、前記目的を達成するために、本発明に係る画像受信装置は、本発明に係る画像送信装置から、最大差分範囲以外の部分の色が黒もしくは透明に設定、最大差分範囲以外の部分の色情報が零に設定または最大差分範囲以外の部分が削除されたノイズ除去差分画像を受信する受信手段と、初期値を零とする全画像を記憶する受信側記憶手段と、前記受信側記憶手段に記憶された全画像と前記受信手段の受信したノイズ除去差分画像とを加算した画像を生成し、該生成した画像を、最新の全画像として前記受信側記憶手段に記憶するとともに、該生成した画像を表示手段または記録手段に出力する第1の処理を実施する受信側情報処理手段とを備えたことを特徴としている。
【0016】
本発明によれば、動きのある部分の映像情報又は画像の最大差分範囲のみを受信して、少ない情報の伝送量で高画質な映像を表示又は記録することが可能となる。
【0017】
【発明の実施の形態】
以下添付図面に従って、本発明に係る画像送受信システム、画像送信装置並びに画像受信装置の好ましい実施の形態について詳説する。
【0018】
図1は、本発明に係る画像送受信システムの全体構成図を示す。
【0019】
同図に示すように画像送信システムには、被写体像を撮像した画像の各フレームの差分画像を抽出してLANやインターネット等の通信網12を介して画像受信装置90に送信するカメラ10、10A、10Bと、カメラ10にて撮像した画像を画像受信装置90に送信する際に差分画像の画像信号を中継する無線基地局14及び無線通信網16とが設けられている。
【0020】
例えばカメラ10等で撮像された画像の各フレームの差分画像は、無線基地局14と無線通信網16と、通信網12とを介して画像受信装置90に送信される。カメラ10から通信網12等を介して画像の各フレームの差分を受信した画像受信装置90では、現在までに記憶手段等に記録されている全画像と新たに受信した差分画像とから、最新の全画像を生成する処理を行って、該生成した全画像を表示手段に表示したり、記録手段に記録する処理を行う。
【0021】
図2に、本発明に係る画像送信装置の信号処理系ブロック図を示す。
【0022】
同図に示すように画像送信装置の一形態であるカメラ10の撮像処理部には、撮像レンズを介して受光面に結像した被写体像を光電変換して画像信号として出力する撮像手段150と、アナログ信号用の画像処理手段153と、アナログの画像信号をデジタルの画像データに変換するA/D変換器154とが設けられている。
【0023】
また、画像データ等の情報を通信網12や無線基地局14を介して画像受信装置90等の他の通信機器と送受信するための通信手段として、画像データ等の情報を電波等の搬送波に乗せて送信又は受信する送受信手段157(送信手段)と、搬送波及び画像データ等を送受信するアンテナ156と、画像データ等の情報を通信ケーブルを介して他の通信機器と送受信する通信コネクタ162とが設けられている。
【0024】
また、カメラ10には、画像データに対して圧縮処理等を実施する圧縮伸張手段167と、各種の文字を画像とともに表示手段168にオンスクリーンディスプレイするOSD169と、画像データに対してホワイトバランス処理を実施したり、ガンマ変換、YC変換処理、画素数の変換処理、電子ズーム処理、トリミング処理等を実施する信号処理手段170と、表示用の画像データを一時的に記憶しておくフレームメモリ171と、デジタルの画像データを表示用のコンポジット信号等に変換するD/A変換器172とが設けられている。
【0025】
また、カメラ10には、電源スイッチやモード切替スイッチ等から構成される入力手段174と、入力手段174を介して入力された入力情報のインターフェースとなるI/O175と、記録媒体177(記憶手段、記録手段)を着脱可能に装着する記録媒体装着部178と、記録媒体177に対して画像データ等の情報を記録したり読み出したりする記録媒体インターフェース179とが設けられている。
【0026】
また、カメラ10には、カメラ10全体の制御を行うとともに画像処理や通信処理を実施する情報処理手段180(差分抽出手段、ノイズ除去手段の機能を備えていてもよい)と、情報の書き換えが可能であるとともに記憶した調整用の各種定数等を記憶する不揮発性メモリ182(記憶手段、記録手段)と、カメラ10の動作プログラムや定数等が記憶されているROM183と、プログラム実行時の作業領域となるRAM184(記憶手段)とが設けられている。
【0027】
また、カメラ10には、時を刻むカレンダ時計190と、カメラ10を駆動するための各種電力を供給する電源191と、カメラ10を駆動する電力を貯蔵している電池191Aと、撮像時に必要に応じて光を発光して被写体の光量不足を補う発光手段193と、該発光手段193の発光タイミングや発光時間等の調節を行う発光制御手段194とが設けられている。なお、カメラ10の動作電源として電池191Aを使用する代わりに、外部の電源から電力の供給を受けるようにしてもよい。
【0028】
また、電子カメラ10には、撮像した最新の画像の1フレームと前回サンプリングした1フレームの画像の差分画像を抽出する差分抽出手段195と、2つの画像の差分を抽出した際等に発生するノイズ成分若しくはレベルの低い画像情報の除去若しくは減衰を実施してノイズ除去差分画像を生成するノイズ除去手段196とが設けられている。
【0029】
また、カメラ10に周囲の音声を集音して音声信号に変換するマイクと、該音声信号を増幅するとともに情報処理手段180で読み取り可能なデジタルデータに変換するA/D変換器を備え、画像とともに各サンプリングにおける音声の差分データ又は変化率のみを記録媒体177に記録したり、送受信手段157を介して画像受信装置90に送信するようにしてもよい。
【0030】
不揮発性メモリ182やRAM184又は記録媒体177等の記憶手段には、撮像手段150が撮像した画像等の第1の画像と、撮像した時刻の異なる第2の画像を記憶することが可能となっている。
【0031】
また、差分抽出手段195(又は情報処理手段180)は、不揮発性メモリ182やRAM184又は記録媒体177等の記憶手段に記憶されている第1の画像と第2の画像との差である差分画像を抽出することが可能となっている。
【0032】
また、不揮発性メモリ182、ROM183又は記録媒体177等の記録手段には、差分抽出手段195が抽出した差分画像を形成している差分情報に含まれるノイズ成分を除去する際に、除去するノイズの除去基準となる閾値を記録することが可能となっている。
【0033】
また、ノイズ除去手段196(又は情報処理手段180)は、差分抽出手段195が抽出した差分画像を形成している差分情報のうち、不揮発性メモリ182又は記録媒体177等の記録手段に記録されている閾値よりも小さい部分における差分情報を除去した、ノイズ除去差分画像を生成することが可能となっている。
【0034】
また、送受信手段157(送信手段)は、ノイズ除去手段196が生成したノイズ除去差分画像を、画像受信装置90等の他の通信機器に送信することが可能となっている。
【0035】
図3に、本発明に係る画像送信装置が実施する画像の差分情報を抽出してネットワークに送信する処理のフローチャートを示す。
【0036】
情報処理手段180は、ステップS100「一定の周期で画像をサンプリングする」(以降S100のように省略して記載する。)にて、最新の画像をサンプリングする処理を行う。
【0037】
撮像する像はレンズによって撮像手段150の受光面に結像され、結像した被写体像は所定のサンプリング周期毎に光電変換されて画像処理手段153に出力される。画像処理手段153では、この画像信号に対して相関二重サンプリングや増幅、ノイズの低減処理等の画像処理を実施し、A/D変換器154にてデジタルデータに変換する。そして、情報処理手段180の指令により信号処理手段170に転送され、画像のホワイトバランスやガンマ補正、YC変換、ズーム処理、画素数変換処理等の画像処理が施され、一時期VRAM又はRAM184等の記憶手段に記憶する。
【0038】
このようにしてカメラ10にて、最新の画像の1フレームがサンプリングされた状態になる。また、前回サンプリングした1フレームの画像も消去せずにRAM184等の記憶手段に記憶しておく。
【0039】
図4に、画像送信装置が実施する画像の差分抽出処理とノイズ除去処理を実施する際の画像処理の経過を示す。
【0040】
同図では、最新の画像の1フレームを「N」とし、前回サンプリングした1フレームの画像を「N−1」としている。なお、画像「N」及び画像「N−1」には、撮像手段150や画像処理手段153、A/D変換器154等で発生するノイズが部分的に含まれている。なお、ノイズは、後述する差分抽出の演算時にも、画像「N」と画像「N−1」の若干の違い等によって発生する可能性がある。なおこのノイズには、画像「N」等に含まれる植物の葉や影の移動、小生物の移動、反射した光の照射等が含まれる。
【0041】
次のS102「前画像と現画像の差分抽出」にて情報処理手段180は、RAM184等の記憶手段に記録されている最新の画像の1フレーム(第2の画像)と前回サンプリングした1フレーム画像(第1の画像)を読み出して、差分抽出手段195に出力し、前記両画像の差を算出する処理を指示する。なお、この両画像の差分抽出処理を差分抽出手段195が実施する代わりに、情報処理手段180や圧縮伸張手段167、信号処理手段170等が実施するようにしても本発明の目的を達成することが可能である。S102にて、前画像と現画像の差分を抽出して得られる差分画像の例を、図4の(20)に示す。
【0042】
次のS104「差が特定値以上の箇所抽出、二値化」にて情報処理手段180は、S102にて差分抽出手段195が算出した差分画像を形成している差分情報をノイズ除去手段196に出力する。そして、ノイズ除去手段196に対して、画像の差分情報に対して二値化する旨の指示を出力する。
【0043】
前記ノイズ除去の指示を情報処理手段180から取得したノイズ除去手段196では、取得した画像の差分情報について特定の閾値以上の値のみを抽出する処理を行って、抽出した部分について二値化処理又は数値化処理を行う。ノイズ除去手段196にて二値化処理が終了すると、情報処理手段180はS106「差の大きさが小さい領域を削除」にて、ノイズ除去手段196に対して、二値化した際の差の大きさが所定の閾値よりも小さい値を有する領域を削除する処理を行う。
【0044】
この閾値は、差分情報に含まれるノイズ成分を除去する際に除去するノイズの除去基準となる閾値であって、ROM183や不揮発性メモリ182等に予め記録されており、情報処理手段180又はノイズ除去手段196がその記録されている閾値を読み出して演算に利用する。S104及びS106にてノイズ除去を実施した後に得られるノイズ除去差分画像の例を、図4の(22)に示す。
【0045】
次にS108「最大差分エリア算出」にて情報処理手段180は、ノイズ除去手段196に対して、前記差の大きさが小さい領域を削除した後の画像の差分について、最大差分範囲を検出する処理を指示する。該最大差分エリア検出の指示を取得したノイズ除去手段196は、ノイズ除去後の差分画像に対して差分の値の大きいエリアを検出する処理を行う。
【0046】
次にS110「最大差分エリア以外の部分を黒く塗り潰す」にて情報処理手段180は、ノイズ除去手段196に対して、前記最大差分エリアの色情報を「黒」に設定する指示を出力する。該最大差分エリア以外の部分を黒く塗りつぶす旨の指示を取得したノイズ除去手段196は、差分の値の大きいエリア以外の部分についての色情報を「黒」に設定して塗りつぶす処理を行う。本実施例では「黒」に塗りつぶす例で説明したが、差分の大きいエリア以外の部分を削除してもよいし、差分の大きいエリア以外の部分の色を透明にしてもよいし、差分の大きいエリア以外の部分の色情報(階調等)を「0」に設定するようにしてもよい。S108及びS110にて最大差分エリアを抽出した後のノイズ除去差分画像の例を図4の(24)に示す。
【0047】
なお上記の説明では、S104〜S110にて実施するノイズ除去処理を、ノイズ除去手段196が実施する例で説明したが、情報処理手段180自身が実施するようにしてもよいし、圧縮伸張手段167又は信号処理手段170が実施するようにしても、本発明の目的を達成することが可能である。
【0048】
S110にてノイズ除去手段196が最大差分エリア以外の部分を黒く塗りつぶす処理が終了すると、情報処理手段180はS112「処理後の元画像を高周波数成分間引き圧縮する」にて、ノイズ除去手段196がノイズ除去処理を実施した後の最大差分エリア検出後の画像を、圧縮伸張手段167に伝送する処理を行う。また、情報処理手段は、ノイズ除去手段196がノイズ除去処理を実施した後のノイズ除去差分画像等を、圧縮伸張手段167に伝送するようにしてもよい。
【0049】
特に、差分の値の大きいエリア以外の部分についての色情報を「黒」に設定して塗りつぶす処理を行なった画像は、圧縮の際に真っ黒の部分は最低周波数成分となるので、元画像と比べて非常に高圧縮を実現することが可能となる。したがって、後段で差分画像を画像受信措置90に送信する際に送信する画像の情報量を減少させることが可能となり、通信網12等の通信負荷を軽くすることが可能となる。また、通信網12等の通信負荷に余裕がある場合には、より多くのフレーム数を画像受信装置90に送信することが可能となる。したがって、全てのフレームを送信する場合と比較して、結果的に送信する動画像の品質を高めることが可能となる。
【0050】
そして情報処理手段180は、前記最大差分エリア検出後の画像、又はノイズ除去差分画像に対して圧縮処理の実施を指示する情報を、圧縮伸張手段167に対して出力する。圧縮伸張手段167では、情報処理手段180からの圧縮処理の指示に基づいて、所定の圧縮フォーマットにて最大差分エリアの画像の圧縮処理を実施する。当該圧縮処理は、JPEG、GIFその他の圧縮形式を用いるようにしてもよい。
【0051】
前記のS110にて最大差分エリア以外の部分を黒く塗りつぶしたり削除した画像又は、S102にて抽出した差分画像を画像受信装置等の他の通信機器に送信する画像とすることによって、圧縮処理後の画像データの画像サイズを大幅に減少させることが可能となる。特に定点撮影カメラや監視カメラでは、動きのない部分が大部分であるために、本発明のように動きのある部分(第1の画像と第2の画像の差分画像)のみを記録又は送信することによって、送信する画像のデータ量を大幅に減少させることが可能となる。また、従来のMPEG等の動画像の圧縮手法でも時間軸方向に圧縮することによって映像情報を圧縮しているが、1グループの映像中に必ず1画面内で閉じた情報による複合化画面が挿入されるので、本発明に係る画像の差分を抽出して送信する方法の方がはるかに送信する画像の情報量が少なくて済む。
【0052】
該圧縮処理が終了した最大差分エリア等の画像は、情報処理手段180の指示に基づいて一時期RAM184等の記憶手段に一時記憶される。該最大差分エリアの画像を画像受信装置90に送信する場合には、情報処理手段180はS114「ネットワークに送信」にて、RAM184等の記憶手段に記憶されている最大差分エリア等の画像データに対して、画像受信装置90固有のアドレスと、抽出した最大差分エリア等の元画像に対する場所情報とを関連付けて、送受信手段157に対して出力する処理を行う。該画像データは、アンテナ156又は通信コネクタ162を介して通信網12に出力され、画像受信装置90に送信される。
【0053】
なお、前記画像データと関連付けて送信する「抽出した最大差分エリア等の元画像に対する場所情報」は、図4の(22)に示す座標(X,Y)などの位置情報等である。
【0054】
また、前記最大差分エリアの画像を記録媒体177に記録する場合には、情報処理手段180はRAM184等の記録手段に記憶されている最大差分エリアの画像データと、抽出した最大差分エリアの元画像に対する場所情報とを関連付けて、記録媒体インターフェース179に対して出力する。記録媒体インターフェース179は、前記情報処理手段180から取得した画像データ等を、記録媒体177に対して記録する処理を行う。
【0055】
なお、上記の説明では画像送信装置を撮像手段を備えたカメラとした実施の形態で説明したが、本発明はこれに限定されるものではなく、連続した動画の等の画像を記憶する記憶手段から画像を読み出して、他の通信機器に送信することが可能なパソコンやPDA(Personal Data Assistance)、携帯電話その他の電子機器であっても本発明の目的を達成することが可能である。
【0056】
図5に、本発明に係る画像受信装置の信号処理系ブロック図を示す。
【0057】
同図によれば、画像受信装置90の情報送受信部には、通信回線960とインターネット等の通信網12を介して他の通信機器(カメラ10、10A、10B等)と差分画像等の情報の送受信を行うための送受信手段965(受信手段)が設けられている。
【0058】
また、画像受信装置90には、カメラ10等の画像送信装置から受信した画像や文字等の情報を表示する表示手段968と、情報処理手段の指令に基づいて表示手段968に対して表示用の画像信号を出力する表示制御手段969(出力手段)と、管理者が入力手段974を介して入力した各種情報を読み取って後述する情報処理手段に伝達したり、情報処理手段からの指示に基づいてLED等の通知手段に表示指令を出力するI/O975とが設けられている。
【0059】
また、画像受信装置90には、画像受信装置90の全体の制御や全画像の生成等の各種処理を行う情報処理手段(CPU)980(出力手段)と、情報処理手段980を動作させるプログラムや各種定数が記録されているROMや情報処理手段980が処理を実行する際の作業領域となる記憶手段であるRAMとから構成されるメモリ981と、画像受信装置90の処理に関する各種定数やネットワーク上の自己の属性情報、URL(Uniform Resource Locators)、アドレス、サイトアドレス、ゲートウェイ情報DNS(Domain Name System)等の接続情報等の情報や画像を記録するハードディスク等の記録手段986(記憶手段)と、時刻を刻むカレンダ時計990とが設けられている。
【0060】
同図に示すように情報処理手段980と、表示制御手段969、I/O975、メモリ981、記録手段986、カレンダ時計990等を含む各周辺回路はバス999で接続されており、情報処理手段980は各々の周辺回路を制御することが可能であるとともに、情報処理手段980が実行する処理プログラムに基づいて周辺の各機器を制御することが可能となっている。
【0061】
前記送受信手段965(受信手段)は、画像送信装置(カメラ10、10A、10B等)から差分画像を受信することが可能となっている。また、メモリ981又は記録手段986等の記憶手段には、前記送受信手段965が受信した差分画像を記憶することが可能となっている。
【0062】
また、前記情報処理手段980は、前記メモリ981又は記録手段986等の記憶手段に記憶されている全画像、及び差分画像を読み出して加算し、最新の全画像を生成することが可能となっている。
【0063】
また表示制御手段969(出力手段)は、情報処理手段980の指示に基づいて、前記生成した全画像を、表示手段968に出力することが可能となっている。また、情報処理手段980は、前記生成した全画像を、記録手段986やビデオテープ、DVDその他の記録手段に出力することが可能となっている。
【0064】
図6に、画像受信装置が実施する画像生成処理の状態を示す。
【0065】
電源投入後その他のような最初の状態では、画像送信装置(カメラ10等)からは差分画像(ノイズ除去差分画像)を未だ受信していないので、記録手段986又はメモリ981等の記憶手段に記憶されている「M−3」の画像の情報は「零」である。
【0066】
送受信手段965が、通信網12と通信回線960を介して差分画像(図6に示す「n−2」の差分画像)を受信すると、該受信した差分画像は一時期メモリ981又は記録手段986に記憶される。次に情報処理手段980は、メモリ981又は記録手段986に記録されている全画像「M−3」と差分画像「n−2」とを読み出して、前記画像「M−3」と、差分画像「n−2」とを加算する処理を実施して、最新の全画像「M−2」を生成する。この場合には、画像「M−3」の画像としての情報が「零」であったので、差分画像が最新の全画像となる。したがって、全画像「M−2」と差分画像「n−2」とは同一の画像となる。
【0067】
なお、画像受信装置90が受信した画像を表示手段968に表示する場合には、情報処理手段980が生成した全画像を表示手段968に表示する旨の指示を表示制御手段969に対して出力する。すると表示手段968には、「M−2」の全画像が表示される。
【0068】
次に送受信手段965が、通信網12と通信回線960を介して差分画像(図6に示す「n−1」の差分画像)を受信すると、該受信した差分画像は一時期メモリ981又は記録手段986に記憶される。次に情報処理手段980は、メモリ981又は記録手段986に記録されている全画像「M−2」と差分画像「n−1」とを読み出して、前記画像「M−2」と、差分画像「n−1」とを加算する処理を実施して、最新の全画像「M−1」を生成する。この時点で最新の全画像「M−1」として、カメラ10にて撮像した画像「N−1」(図4参照)が再現される。
【0069】
画像受信装置が受信した画像を表示手段968に表示する場合には、情報処理手段980が生成した最新の全画像と、表示手段968に表示する旨の指示を表示制御手段969に対して出力する。すると表示手段968には、「M−1」の全画像が表示される。
【0070】
次に送受信手段965が、通信網12と通信回線960を介して差分画像(図6に示す「n」の差分画像)を受信すると、該受信した差分画像は一時期メモリ981又は記録手段986に記憶される。次に情報処理手段980は、メモリ981又は記録手段986に記録されている全画像「M−1」と差分画像「n」とを読み出して、前記全画像「M−1」と、差分画像「n」とを加算する処理を実施して、最新の全画像「M」を生成する。この時点で最新の全画像「M」として、カメラ10にて撮像した画像「N」(図4参照)が再現される。
【0071】
画像受信装置が受信した画像を表示手段968に表示する場合には、情報処理手段980が生成した全画像と、表示手段968に表示する旨の指示を表示制御手段969に対して出力する。すると表示手段968には、「M」の全画像が表示される。
【0072】
また、画像受信装置が受信した画像を記録手段986に記録する場合に情報処理手段980は、情報処理手段980が生成した全画像を記録手段986に記録する処理を行う。また、生成した全画像を記録手段986に記録する代わりに、送受信手段965が画像送信手段から受信した差分画像をそのまま記録手段986に記録しておき、画像の再生時に記録手段986に記録されている差分画像を読み出して、画像生成処理を実施するようにしてもよい。
【0073】
上記の処理を繰り返して実施することによって画像受信装置90では、受信した差分画像に基づいて、カメラ10等の画像送信装置にて撮像した画像を再現することが可能となる。このときに、カメラ10等の画像送信装置から画像受信装置90に送信される画像は、ノイズ除去差分画像のような撮像した画像の一部であるために、その差分画像の情報量は少ない情報量となる。また、カメラ10等にて撮像した画像に動きがない場合(時間的に変化がない場合)や、動きがあっても所定の閾値よりも小さい場合においては、画像受信装置90側に送信する画像の情報量はたいへん少ない情報量となる。
【0074】
特に監視カメラや交差点における監視カメラのような定点撮像を実施する場合には、撮像した画像に殆ど動きがないので、監視カメラの画像データをカメラ10等の画像送信装置から画像受信装置90に送信する際には、画像の情報量を大幅に減少させることが可能となる。したがって、画像の伝送に際して設備費の安価なインターネットやLAN等の通信網12を介して連続した画像又は映像を送信することが可能となる。
【0075】
【発明の効果】
以上説明したように本発明によれば、画像送信装置にて記憶している画像の各フレームの最大差分範囲のみを送信することによって、映像の伝送に必要な情報量を減少させることが可能となる。
【0076】
また、本発明によれば、動きのある部分の映像情報又は画像の最大差分範囲のみを受信して、少ない情報の伝送量で高画質な映像を表示又は記録することが可能となる。
【図面の簡単な説明】
【図1】本発明に係る画像送受信システムの全体構成図
【図2】本発明に係る画像送信装置の信号処理系ブロック図
【図3】画像の差分情報を抽出してネットワークに送信する処理のフローチャート
【図4】画像送信装置が実施する画像の差分抽出処理とノイズ除去処理を実施する際の画像処理の経過を示す図
【図5】本発明に係る画像受信装置の信号処理系ブロック図
【図6】 画像受信装置が実施する画像生成処理の状態を示す図
【符号の説明】
10、10A、10B…カメラ、12…通信網、14…無線基地局、16…無線通信網、90…画像受信装置、150…撮像手段、153…画像処理手段、154…A/D変換器、156…アンテナ、157…送受信手段、162…通信コネクタ、167…圧縮伸張手段、168…表示手段、169…OSD、170…信号処理手段、171…フレームメモリ、172…D/A変換器、174…入力手段、175…I/O、177…記録媒体、178…記録媒体装着部、179…記録媒体インターフェース、180…情報処理手段、182…不揮発性メモリ、183…ROM、184…RAM、190…カレンダ時計、191…電源、193…発光手段、194…発光制御手段、195…差分抽出手段、196…ノイズ除去手段、199…バス、960…通信回線、965…送受信手段、968…表示手段、969…表示制御手段、974…入力手段、975…I/O、980…情報処理手段、981…メモリ、986…記録手段、990…カレンダ時計、999…バス
Claims (7)
- 画像を記憶する記憶手段から、前画像である第1の画像と現画像である第2の画像とを読み出して、両画像の差である差分画像を抽出し、該抽出した差分画像に含まれるノイズ成分を除去したノイズ除去差分画像を生成し、前記ノイズ除去差分画像について最大差分範囲を検出し、検出された最大差分範囲以外の部分の色を黒もしくは透明に設定、検出された最大差分範囲以外の部分の色情報を零に設定または検出された最大差分範囲以外の部分を削除する処理を行う送信側情報処理手段と、前記処理の行われたノイズ除去差分画像を他の通信機器に送信する送信手段とを備えた画像送信装置と、前記画像送信装置から前記ノイズ除去差分画像を受信する受信手段と、初期値を零とする全画像を記憶する受信側記憶手段と、前記受信側記憶手段に記憶された全画像と前記受信手段の受信したノイズ除去差分画像とを加算した画像を生成し、該生成した画像を、最新の全画像として前記受信側記憶手段に記憶するとともに、該生成した画像を表示手段または記録手段に出力する第1の処理を実施する受信側情報処理手段とを備えた画像受信装置と、から構成されることを特徴とする画像送受信システム。
- 前記受信側情報処理手段は、新たなノイズ除去差分画像の受信に応じて前記第1の処理を繰り返す第2の処理を実施することを特徴とする請求項1記載の画像送受信システム。
- 前記画像送信装置は、前記検出された最大差分範囲以外の部分の色が黒に設定されたノイズ除去差分画像を所定のフォーマットにて圧縮する圧縮手段をさらに備え、
前記送信手段は圧縮されたノイズ除去差分画像を他の通信機器に送信することを特徴とする請求項1または2記載の画像送受信システム。 - 画像を記憶する記憶手段から、前画像である第1の画像と現画像である第2の画像とを読み出して、両画像の差である差分画像を抽出し、該抽出した差分画像に含まれるノイズ成分を除去したノイズ除去差分画像を生成し、前記ノイズ除去差分画像について最大差分範囲を検出し、検出された最大差分範囲以外の部分の色を黒もしくは透明に設定、検出された最大差分範囲以外の部分の色情報を零に設定または検出された最大差分範囲以外の部分を削除する処理を行う送信側情報処理手段と、前記処理の行われたノイズ除去差分画像を他の通信機器に送信する送信手段とを備えた画像送信装置。
- 前記検出された最大差分範囲以外の部分の色が黒に設定されたノイズ除去差分画像を所定のフォーマットにて圧縮する圧縮手段をさらに備え、
前記送信手段は圧縮されたノイズ除去差分画像を他の通信機器に送信することを特徴とする請求項4記載の画像送信装置。 - 請求項4または5記載の画像送信装置から、最大差分範囲以外の部分の色が黒もしくは透明に設定、最大差分範囲以外の部分の色情報が零に設定または最大差分範囲以外の部分が削除されたノイズ除去差分画像を受信する受信手段と、初期値を零とする全画像を記憶する受信側記憶手段と、前記受信側記憶手段に記憶された全画像と前記受信手段の受信したノイズ除去差分画像とを加算した画像を生成し、該生成した画像を、最新の全画像として前記受信側記憶手段に記憶するとともに、該生成した画像を表示手段または記録手段に出力する第1の処理を実施する受信側情報処理手段とを備えた画像受信装置。
- 前記受信側情報処理手段は、新たなノイズ除去差分画像の受信に応じて前記第1の処理を繰り返す第2の処理を実施することを特徴とする請求項6記載の画像受信装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002098413A JP4467224B2 (ja) | 2002-04-01 | 2002-04-01 | 画像送受信システム、画像送信装置並びに画像受信装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002098413A JP4467224B2 (ja) | 2002-04-01 | 2002-04-01 | 画像送受信システム、画像送信装置並びに画像受信装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003299088A JP2003299088A (ja) | 2003-10-17 |
JP4467224B2 true JP4467224B2 (ja) | 2010-05-26 |
Family
ID=29387936
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002098413A Expired - Lifetime JP4467224B2 (ja) | 2002-04-01 | 2002-04-01 | 画像送受信システム、画像送信装置並びに画像受信装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4467224B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007135010A (ja) * | 2005-11-10 | 2007-05-31 | Kumahira Safe Co Inc | 画像処理方法 |
JP5034388B2 (ja) * | 2006-09-08 | 2012-09-26 | カシオ計算機株式会社 | 画像処理装置および画像処理のプログラム |
DE102007013239A1 (de) * | 2007-03-15 | 2008-09-18 | Mobotix Ag | Überwachungsanordnung |
JP5375490B2 (ja) * | 2009-09-29 | 2013-12-25 | ソニー株式会社 | 送信装置、受信装置、通信システム及びプログラム |
JP6550307B2 (ja) * | 2015-09-11 | 2019-07-24 | 大和ハウス工業株式会社 | 画像表示システム及び画像表示方法 |
JP6363130B2 (ja) * | 2016-05-25 | 2018-07-25 | 株式会社Nexpoint | 監視カメラシステムにおける監視方法、差分画像作成方法、画像復元方法、及び差分検出装置 |
-
2002
- 2002-04-01 JP JP2002098413A patent/JP4467224B2/ja not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JP2003299088A (ja) | 2003-10-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20100110212A1 (en) | Camera device | |
JPH08223341A (ja) | 電子スチルカメラにおける画像データ伝送システム | |
JP2002232680A (ja) | 携帯機器、携帯電話、画像送信システム、画像送信方法 | |
JP4467224B2 (ja) | 画像送受信システム、画像送信装置並びに画像受信装置 | |
KR100819243B1 (ko) | 카메라 폰에서 이미지 촬영 및 저장방법 | |
JP4561649B2 (ja) | 画像圧縮装置、画像圧縮プログラム及び画像圧縮方法、hdr画像生成装置、hdr画像生成プログラム及びhdr画像生成方法、並びに画像処理システム、画像処理プログラム及び画像処理方法 | |
JP2003169284A (ja) | 画像変換装置並びに画像変換プログラム | |
JP2003134386A (ja) | 撮像装置および撮像方法 | |
EP2515543B1 (en) | Image capturing apparatus and image capturing method | |
JP4745715B2 (ja) | 撮像装置、ネットワークカメラシステム、情報処理装置、ネットワークカメラシステムの制御方法、及び制御方法 | |
KR100476828B1 (ko) | 복수의 영상 이미지를 이용한 합성 이미지 생성 방법 및장치 | |
JP2002314984A (ja) | 監視カメラシステム | |
JP5024331B2 (ja) | ビデオカメラ及び情報送信方法 | |
JP2005260640A (ja) | 撮像処理装置 | |
JP4202546B2 (ja) | 撮像装置および方法 | |
KR100769672B1 (ko) | 화상 통신이 가능한 이동통신단말기 | |
JP3988075B2 (ja) | 画像送信機器 | |
US7817195B2 (en) | Apparatus and method for automatic conversion to digital zoom mode | |
KR101015753B1 (ko) | 문서 이미지 전송 기능을 갖춘 이동 단말과 이를 위한문서 이미지 변환 방법 | |
KR20080006126A (ko) | 무선송신이 가능한 촬영장치 및 그 제어방법 | |
JP2001209782A (ja) | 撮像装置およびその文字撮影方法 | |
JP2007158786A (ja) | 撮影装置、ネットワーク撮像システム、プログラム、及び記録媒体 | |
KR100736936B1 (ko) | 재생영상의 색일치방법 및 이를 적용한 촬영장치 | |
JP2003348542A (ja) | ディジタルビデオカムコーダ | |
JP4465655B2 (ja) | ビデオカメラ及び情報送信方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050125 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061207 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070119 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070314 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070906 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100223 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 3 |