JP2004254236A - Image processing apparatus, image viewing apparatus, and image communication system - Google Patents

Image processing apparatus, image viewing apparatus, and image communication system Download PDF

Info

Publication number
JP2004254236A
JP2004254236A JP2003044943A JP2003044943A JP2004254236A JP 2004254236 A JP2004254236 A JP 2004254236A JP 2003044943 A JP2003044943 A JP 2003044943A JP 2003044943 A JP2003044943 A JP 2003044943A JP 2004254236 A JP2004254236 A JP 2004254236A
Authority
JP
Japan
Prior art keywords
image
image data
unit
acquired
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2003044943A
Other languages
Japanese (ja)
Inventor
Kazuo Kawaguchi
一雄 川口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2003044943A priority Critical patent/JP2004254236A/en
Publication of JP2004254236A publication Critical patent/JP2004254236A/en
Withdrawn legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processing apparatus, an image viewing apparatus, and an image communication system capable of reliably recognizing changes in a captured image. <P>SOLUTION: The image communication system 10 includes an image processing apparatus 20 and an image browsing apparatus 40 which are connected to the system 10 via a network 12. The image processing apparatus 20 includes: an image capture section 22 for periodically capturing an image; a first storage section 24 for storing reference image data; an image change detection section 26 for comparing the acquired image data being image data of an acquired image captured by the image capture section 22 with the reference image data and detecting whether the captured image has changed by using the reference image as a reference; an image data transmission section 28 for transmitting the acquired image data via a network 12; and an image change detection signal transmission section 29 for transmitting, via the network 12 or other network than the network 12, an image change detection signal denoting the occurrence of a change in the acquired image on the condition that the occurrence of the change in the acquired image is detected. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、画像処理装置、画像閲覧装置及び画像通信システムに関する。
【０００２】
【従来の技術】
通信網を介して、画像データを送受信する画像通信システムがある。画像通信システムでは、遠く離れた位置で取り込まれ画像を閲覧することができる。このような画像通信システムの用途は広く、例えば防犯システムに適用される。
【０００３】
防犯システムでは、監視すべき場所の画像が監視カメラで取り込まれ、取り込まれた画像が監視装置に向けて送信される。監視装置は、監視カメラからの画像を受信して表示出力を行う。これにより、表示出力された画像を見た監視員は、監視すべき場所の様子の変化を把握することができる。
【０００４】
このような監視カメラとして、いわゆるＷｅｂカメラを用いることができる。Ｗｅｂカメラは、コンピュータネットワークとしてのインターネットに接続されるカメラである。Ｗｅｂカメラで取り込まれた画像は、Ｗｅｂカメラから遠く離れた位置で監視員が注視する表示装置に送られる。
【０００５】
【特許文献１】
特開平１１−７２３４８号公報
【０００６】
【発明が解決しようとする課題】
しかしながら、監視側では、監視カメラから受信した画像を表示出力させる。そのため、監視側の表示装置を常に立ち上げておく必要がある。また、監視カメラが取り込んだ画像を監視員が表示装置を注視しておく必要がある。したがって、疲労等が原因で監視員の集中力が低下し、監視すべき場所の様子の変化を見逃してしまい、防犯の目的を達成することができない場合がある。
【０００７】
このような画像通信システムでは、閲覧側において、遠隔地での画像変化を確実に把握できることが望ましい。
【０００８】
本発明は、以上のような技術的課題に鑑みてなされたものであり、その目的とするところは、取り込んだ画像の変化を確実に認識することができる画像処理装置、画像閲覧装置及び画像通信システムを提供することにある。
【０００９】
【課題を解決するための手段】
上記課題を解決するために本発明は、通信網に接続される画像処理装置であって、周期的に画像を取り込む画像取込部と、基準画像の画像データである基準画像データを記憶する第１の記憶部と、前記画像取込部によって取り込まれた取得画像の画像データである取得画像データと前記基準画像データとを比較して、前記基準画像を基準として前記取得画像が変化したか否かを検出する画像変化検出部と、前記取得画像データを前記通信網を介して送信する画像データ送信部と、前記画像変化検出部によって前記取得画像が変化したことが検出されたことを条件として、前記取得画像が変化したことを示す画像変化検出信号を、前記通信網又は該通信網と異なる別の通信網を介して送信する画像変化検出信号送信部とを含む画像処理装置に関係する。
【００１０】
本発明によれば、取得画像データを通信網を介して送信すると共に、画像変化検出信号を通信網又は該通信網と異なる別の通信網を介して送信するようにしたので、画像データの受信側では、取り込んだ画像の変化の有無を常時監視しておく必要がなく、画像変化検出信号により画像が変化した旨の通知を受けてから画像を表示出力させることができる。したがって、通信網を介して受信される画像の監視負担を軽減させると共に、通信トラフィックを軽減する画像処理装置を提供することができる。
【００１１】
また本発明は、通信網に接続される画像処理装置であって、周期的に画像を取り込む画像取込部と、基準画像の画像データである基準画像データを記憶する第１の記憶部と、前記画像取込部によって取り込まれた取得画像の画像データである取得画像データと前記基準画像データとを比較して、前記基準画像を基準として前記取得画像が変化したか否かを検出する画像変化検出部と、前記画像変化検出部によって前記取得画像が変化したことが検出されたことを示す画像変化検出フラグと、前記取得画像データとを含む送信データを生成する送信データ生成部と、前記送信データを前記通信網を介して送信する画像データ送信部とを含む画像処理装置に関係する。
【００１２】
本発明においては、周期的に取り込まれた取得画像データと、取得画像が基準画像を基準として変化したことが検出されたことを示す画像変化検出フラグとが設定された送信データが生成される。そして、該送信データが通信網を介して送信される。こうすることで、画像処理装置では、画像変化検出の有無に応じて処理を変える必要がないため、画像処理装置の構成及び制御の簡素化を図ることができる。また送信データの受信側では、画像処理装置からの送信データを監視するのみで、変化後の画像を取得することができるので、受信側の構成及び制御を簡素化する画像処理装置を提供することができる。
【００１３】
また本発明に係る画像処理装置では、前記取得画像データが、前記送信データの予め決められたデータフィールドに設定され、前記画像変化検出フラグが、前記送信データの空きフィールドに設定されてもよい。
【００１４】
本発明では、送信データの空きフィールドに画像変化検出フラグを設定するようにしたので、既存の画像データの通信システムへの適用が可能となる。
【００１５】
また本発明に係る画像処理装置では、前記画像変化検出部によって前記取得画像が変化しなかったことが検出されたことを条件として、前記画像取込部によって取り込まれた取得画像データを前記基準画像データとして前記第１の記憶部に格納することができる。
【００１６】
本発明によれば、画像の取り込みを行う場所の環境の変化に対して、画像変化の検出精度の低下を最小限に抑えることができる。
【００１７】
また本発明に係る画像処理装置では、通常モード又は赤外線モードを設定するためのモード設定部を更に含み、前記画像取込部は、赤外線撮像デバイスを有し、前記モード設定部によって赤外線モードが設定されている状態では、前記第１の記憶部には、前記赤外線撮像デバイスにより赤外線を検知して生成された第１の赤外線画像の画像データが基準画像データとして格納され、前記画像変化検出部は、前記赤外線撮像デバイスにより取り込まれた取得画像としての第２の赤外線画像の画像データと前記第１の赤外線画像の画像データとを比較して、基準画像を基準として取得画像が変化したか否かを検出し、前記画像データ送信部は、前記第２の赤外線画像の画像データを前記取得画像データとして送信し、前記画像変化検出信号送信部は、前記取得画像が変化したことを示す画像変化検出信号を送信することができる。
【００１８】
本発明によれば、撮影環境の明るさの変化に対して、画像変化の検出精度の低下を抑えることができる。
【００１９】
また本発明に係る画像処理装置では、前記取得画像データ及び前記基準画像データの画素が、輝度成分、第１及び第２の色差成分を含む場合に、前記画像変化検出部は、前記取得画像データの第１の色差成分と、前記基準画像データの第１の色差成分とを比較する画像データ比較部を含み、前記画像データ比較部は、前記取得画像データ及び前記基準画像データの第１の色差成分が異なると判断されたとき、前記取得画像が変化したことを検出することができる。
【００２０】
本発明によれば、１つの色差成分のみを比較することで、データ量の削減と処理負荷の軽減を図ることができる。例えば基準画像データ及び取得画像データのＣｂ成分のみを比較するように構成した場合、暗い撮影環境で取り込まれた画像の変化を精度良く検出することができる。
【００２１】
また本発明に係る画像処理装置では、前記画像変化検出部は、前記取得画像データの比較領域の画像データを抽出する取得画像データ抽出部と、前記取得画像データ抽出部によって抽出された画像データと、前記基準画像データの画像領域のうち前記比較領域に対応する領域の画像データとを比較する画像データ比較部とを含み、前記画像データ比較部は、前記取得画像データ抽出部によって抽出された画像データと、前記基準画像データの画像領域のうち前記比較領域に対応する領域の画像データとが異なると判断されたとき、前記取得画像が変化したことを検出することができる。
【００２２】
本発明によれば、画像領域の比較対象となる領域を小さくするため、画像変化の検出に伴うデータ量の削減と処理負荷の軽減を図ることができる
また本発明に係る画像処理装置では、前記基準画像データの画素の輝度成分の値を平均した平均値は、画像変化が検出されるときの取得画像データの画素の輝度成分の値を平均した平均値より小さく、前記画像変化検出部は、前記取得画像データの輝度成分と、前記基準画像データの輝度成分とを比較する画像データ比較部を含み、前記画像データ比較部は、前記取得画像データの輝度成分と、前記基準画像データの輝度成分とに基づいて、前記取得画像が変化したことを検出することができる。
【００２３】
また本発明に係る画像処理装置では、前記画像データ比較部は、前記基準画像データに対する前記取得画像データの画素の輝度成分の値の変化率を平均した平均値が正の第１の基準値を超えるとき、前記取得画像が変化したことを検出することができる。
【００２４】
また本発明に係る画像処理装置では、前記画像変化検出部は、画素ごとに、前記取得画像データの輝度成分と前記基準画像データの輝度成分とを比較する画像データ比較部を含み、前記画像データ比較部は、前記基準画像データの輝度成分の絶対値を基準に、前記取得画像データの輝度成分の絶対値が変化したことを条件に、前記取得画像が変化したことを検出することができる。
【００２５】
また本発明に係る画像処理装置では、前記画像データ比較部は、前記基準画像データの輝度成分の絶対値を基準に、前記取得画像データの輝度成分の絶対値が増加したことを条件に、前記取得画像が変化したことを検出することができる。
【００２６】
本発明では、基準画像として、いわゆる暗い画像が採用されることになる。したがって、画像が変化したときに明るい画像となるため、画像変化の検出精度を向上させることができる。
【００２７】
また本発明に係る画像処理装置では、前記取得画像データ及び前記基準画像データの画素が、輝度成分、第１及び第２の色差成分を含む場合に、前記画像変化検出部は、前記取得画像データの輝度成分を離散コサイン変換して得られた周波数成分のうち第１の閾値より低い周波数成分と、前記基準画像データの輝度成分を離散コサイン変換して得られた周波数成分のうち前記第１の閾値より低い周波数成分とを比較する輝度成分比較部と、前記取得画像データの第１の色差成分を離散コサイン変換して得られた周波数成分のうち第２の閾値より低い周波数成分と、前記基準画像データの第１の色差成分を離散コサイン変換して得られた周波数成分のうち前記第２の閾値より低い周波数成分とを比較する第１の色差成分比較部と、前記取得画像データの第２の色差成分を離散コサイン変換して得られた周波数成分のうち第３の閾値より低い周波数成分と、前記基準画像データの第２の色差成分を離散コサイン変換して得られた周波数成分のうち前記第３の閾値より低い周波数成分とを比較する第２の色差成分比較部とを含み、前記画像データ比較部は、前記輝度成分比較部の比較結果、前記第１の色差成分比較部の比較結果及び前記第２の色差成分比較部の比較結果に基づいて、前記取得画像が変化したこと検出することができる。
【００２８】
本発明によれば、得られた周波数成分のうち低い周波数成分のみを用いるようにしたので、画像変化が大きい場合の画像変化のみ検出することができ、検出誤差を低減することができる。
【００２９】
また本発明は、通信網に接続される画像閲覧装置であって、取り込まれた取得画像が、基準画像を基準として変化したことを示す画像変化検出信号を前記通信網を介して受信する画像変化検出信号受信部と、前記画像変化検出信号受信部によって前記画像変化検出信号が受信されたことを条件として、前記通信網又は該通信網とは異なる別の通信網において前記取得画像を取り込んだ画像処理装置との通信路を確立して該画像処理装置からの画像データを受信する画像データ受信部と、前記画像データ受信部によって受信された画像データを記憶する記憶部とを含む画像閲覧装置に関係する。
【００３０】
また本発明に係る画像閲覧装置では、前記通信網又は該通信網とは異なる別の通信網において前記画像処理装置に関連付けられたアドレス情報を記憶する画像データ送信元アドレス情報記憶部を含み、前記画像データ受信部は、前記画像データ送信元アドレス情報記憶部に記憶されたアドレス情報を用いて前記画像処理装置との通信路を確立することができる。
【００３１】
また本発明に係る画像閲覧装置では、前記通信網又は該通信網とは異なる別の通信網において前記画像処理装置に関連付けられたアドレス情報が、前記通信網又は該通信網とは異なる別の通信網を介して取得され、前記画像データ受信部が、前記アドレス情報を用いて前記画像処理装置との通信路を確立することができる。
【００３２】
本発明によれば、画像変化検出信号を受信したことを条件に、画像データの送信元との間で通信接続を行って、取り込まれた取得画像データを受信することができる。したがって、本装置の監視負担を大幅に軽減することができ、取り込んだ画像の変化後の様子を確実に把握することができる。
【００３３】
また本発明は、通信網に接続される画像閲覧装置であって、取り込まれた取得画像のデータである取得画像データと、基準画像を基準として前記取得画像が変化したことを示す画像変化検出フラグとを含む通信データを前記通信網を介して受信する受信部と、前記受信部によって受信された通信データに含まれる前記画像変化検出フラグに基づいて、前記取得画像の変化が検出されたか否かを解析する解析部と、前記解析部によって前記取得画像の変化が検出されたことが解析されたとき、前記通信データに含まれる前記取得画像データを抽出する抽出部と、前記抽出部によって抽出された前記取得画像データを記憶する記憶部とを含む画像閲覧装置に関係する。
【００３４】
本発明によれば、取得画像データと画像変化検出フラグとを含む通信データを監視して、画像変化が検出されたときに当該通信データに含まれる取得画像データを取り出して表示出力することができる。したがって、本装置において、変化した画像データの取得を行うための構成及び制御を簡素化することができる。
【００３５】
また本発明は、通信網を介して、画像データを通信する画像通信システムであって、上記記載の画像処理装置と、上記いずれか記載の画像閲覧装置とを含み、前記画像閲覧装置は、前記通信網を介して、前記画像処理装置によって送信された前記画像変化検出信号に基づいて、前記画像処理装置によって送信された取得画像データを取り込む画像通信システムに関係する。
【００３６】
また本発明は、通信網を介して、画像データを通信する画像通信システムであって、上記記載の画像処理装置と、上記記載の画像閲覧装置とを含み、前記画像閲覧装置は、前記通信網を介して、前記画像処理装置からの前記画像変化検出フラグに基づいて、前記画像処理装置からの取得画像データを取り込む画像通信システムに関係する。
【００３７】
また本発明に係る画像通信システムでは、前記画像変化検出部によって前記取得画像が変化しなかったことが検出されたことを条件として、前記画像取込部によって取り込まれた取得画像データを前記基準画像データとして前記第１の記憶部に格納することができる。
【００３８】
また本発明に係る画像通信システムでは、前記画像処理装置は、通常モード又は赤外線モードを設定するためのモード設定部を更に含み、前記画像取込部は、赤外線撮像デバイスを有し、前記モード設定部によって赤外線モードが設定されている状態では、前記第１の記憶部には、前記赤外線撮像デバイスにより赤外線を検知して生成された第１の赤外線画像の画像データが基準画像データとして格納され、前記画像変化検出部は、前記赤外線撮像デバイスにより取り込まれた取得画像としての第２の赤外線画像の画像データと前記第１の赤外線画像の画像データとを比較して、基準画像を基準として取得画像が変化したか否かを検出し、前記画像データ送信部は、前記第２の赤外線画像の画像データを前記取得画像データとして送信し、前記画像変化検出信号送信部は、前記取得画像が変化したことを示す画像変化検出信号を送信することができる。
【００３９】
また本発明に係る画像通信システムでは、前記取得画像データ及び前記基準画像データの画素が、輝度成分、第１及び第２の色差成分を含む場合に、前記画像変化検出部は、前記取得画像データの第１の色差成分と、前記基準画像データの第１の色差成分とを比較する画像データ比較部を含み、前記画像データ比較部は、前記取得画像データ及び前記基準画像データの第１の色差成分が異なると判断されたとき、前記取得画像が変化したことを検出することができる。
【００４０】
また本発明に係る画像通信システムでは、前記画像変化検出部は、前記取得画像データの比較領域の画像データを抽出する取得画像データ抽出部と、前記取得画像データ抽出部によって抽出された画像データと、前記基準画像データの画像領域のうち前記比較領域に対応する領域の画像データとを比較する画像データ比較部とを含み、前記画像データ比較部は、前記取得画像データ抽出部によって抽出された画像データと、前記基準画像データの画像領域のうち前記比較領域に対応する領域の画像データとが異なると判断されたとき、前記取得画像が変化したことを検出することができる。
【００４１】
また本発明に係る画像通信システムでは、前記基準画像データの画素の輝度成分の値を平均した平均値は、画像変化が検出されるときの取得画像データの画素の輝度成分の値を平均した平均値より小さく、前記画像変化検出部は、前記取得画像データの輝度成分と、前記基準画像データの輝度成分とを比較する画像データ比較部を含み、前記画像データ比較部は、前記取得画像データの輝度成分と、前記基準画像データの輝度成分とに基づいて、前記取得画像が変化したことを検出することができる。
【００４２】
また本発明に係る画像通信システムでは、前記画像データ比較部は、前記基準画像データに対する前記取得画像データの画素の輝度成分の値の変化率を平均した平均値が正の第１の基準値を超えるとき、前記取得画像が変化したことを検出することができる。
【００４３】
また本発明に係る画像通信システムでは、前記取得画像データ及び前記基準画像データの画素が、輝度成分、第１及び第２の色差成分を含む場合に、前記画像変化検出部は、前記取得画像データの輝度成分を離散コサイン変換して得られた周波数成分のうち第１の閾値より低い周波数成分と、前記基準画像データの輝度成分を離散コサイン変換して得られた周波数成分のうち前記第１の閾値より低い周波数成分とを比較する輝度成分比較部と、前記取得画像データの第１の色差成分を離散コサイン変換して得られた周波数成分のうち第２の閾値より低い周波数成分と、前記基準画像データの第１の色差成分を離散コサイン変換して得られた周波数成分のうち前記第２の閾値より低い周波数成分とを比較する第１の色差成分比較部と、前記取得画像データの第２の色差成分を離散コサイン変換して得られた周波数成分のうち第３の閾値より低い周波数成分と、前記基準画像データの第２の色差成分を離散コサイン変換して得られた周波数成分のうち前記第３の閾値より低い周波数成分とを比較する第２の色差成分比較部とを含み、前記画像データ比較部は、前記輝度成分比較部の比較結果、前記第１の色差成分比較部の比較結果及び前記第２の色差成分比較部の比較結果に基づいて、前記取得画像が変化したことを検出することができる。
【００４４】
【発明の実施の形態】
以下、本発明の好適な実施の形態について図面を用いて詳細に説明する。なお、以下に説明する実施の形態は、特許請求の範囲に記載された本発明の内容を不当に限定するものではない。また以下で説明される構成の全てが本発明の必須構成要件であるとは限らない。
【００４５】
１． 第１の実施形態
図１に、第１の実施形態における画像通信システムのブロック図を示す。画像通信システム１０は、所与のネットワーク（通信網）１２を介して互いに接続される画像処理装置２０と、画像閲覧装置４０とを含む。ネットワーク１２としては、インターネット、電話回線、移動通信網、専用線等がある。
【００４６】
画像処理装置２０は、取り込んだ画像の画像データを、常時ネットワーク１２を介して送信する。また画像処理装置２０は、基準画像を基準として、取り込んだ画像が変化したことを検出し、該画像が変化したことを示す画像変化検出信号をネットワーク１２又は該ネットワーク１２とは別のネットワークを介して画像閲覧装置４０に対して送信する。画像閲覧装置４０は、画像処理装置２０からの画像変化検出信号を受信すると、画像処理装置２０によりネットワーク１２に送信された画像データを取得する。こうして画像閲覧装置４０は、画像処理装置２０において取得された画像の変化直後からの画像を受信することができる。
【００４７】
画像通信システム１０が上述の防犯システムに適用される場合、画像処理装置２０は監視カメラの機能を有し、画像閲覧装置４０は監視装置の機能を有する。
【００４８】
図２に、第１の実施形態における画像処理装置２０の機能ブロック図を示す。画像処理装置２０は、画像取込部２２、第１の記憶部２４、画像変化検出部２６、送信部２７を含む。送信部２７は、画像データ送信部２８、画像変化検出信号送信部２９を含む。
【００４９】
画像取込部２２は、周期的に画像を取り込む。画像取込部２２の機能は、Ｗｅｂカメラにより実現される。
【００５０】
第１の記憶部２４は、基準画像の画像データである基準画像データを記憶する。第１の記憶部２４の機能は、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などの揮発性メモリや、ＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ或いはＲＯＭ（Ｒｅａ ｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等の不揮発性メモリにより実現される。
【００５１】
画像変化検出部２６は、画像取込部２２によって取り込まれた取得画像の画像データである取得画像データと、基準画像データとを比較する。そして画像変化検出部２６は、その比較結果により、基準画像を基準として取得画像が変化したか否かを検出する。画像変化検出部２６は、取得画像が変化したことを検出したとき、画像変化検出信号を出力する（変化させる）。画像変化検出部２６は、取得画像が変化したことを検出しないとき（変化しなかったことが検出されたとき）、画像変化検出信号を出力しない（変化させない）。画像変化検出部２６の機能は、特定用途向けＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）や、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのハードウェアをファームウェアやソフトウェア等により制御することで実現される。
【００５２】
送信部２７は、取得画像データ及び画像変化検出信号を、同じネットワーク１２又は該ネットワーク１２とは別のネットワークを介して、送信する。例えば、画像データ送信部２８がインターネットを介して取得画像データを送信する場合、画像変化検出信号送信部２９がインターネット又は電話回線を介して画像変化検出信号を送信する。なお画像データ送信部２８によって送信される取得画像データは、画像取込部２２によって取り込まれた後、図示しないバッファに一旦記憶させてもよい。このような送信部２７の各部は、ネットワークを介して接続される画像閲覧装置４０との間で所与のプロトコル処理を行うことができるようになっている。送信部２７の各部の機能は、ＡＳＩＣや通信用ＩＣなどのハードウェアをファームウェアやソフトウェア等により制御することで実現される。
【００５３】
このような画像処理装置２０は、ＣＰＵ（図示せず）及びメモリ（図示せず）を有する。そして画像処理装置２０では、メモリに記憶されたプログラムにしたがって処理を行ったＣＰＵにより、以下に示す制御が行われる。
【００５４】
図３に、第１の実施形態における画像処理装置の動作フローの一例を示す。
【００５５】
画像処理装置２０では、まず画像取込部２２によって基準画像の取り込みが行われる（ステップＳ１０）。取り込まれた基準画像は、第１の記憶部２４に保存される（ステップＳ１１）。
【００５６】
これ以降、画像処理装置２０では、画像取込部２２により、周期的に画像の取り込みが行われる。まず、画像取込部２２によって、新たに画像が取得画像として取り込まれる（ステップＳ１２）。
【００５７】
取得画像は、第１の記憶部２４に保存された基準画像と比較される（ステップＳ１３）。すなわち、取得画像の画像データである取得画像データと、基準画像の画像データである基準画像データとを比較することで、両画像が一致するか否かが検出される。
【００５８】
両画像が不一致と判断されたとき（ステップＳ１３：Ｙ）、取得画像の画像データ（取得画像データ）が、画像データ送信部２８によりネットワーク１２を介して画像閲覧装置４０に対して送信される（ステップＳ１４）。また画像変化検出部２６により、基準画像を基準として、取得画像が変化したことを示す画像変化検出信号が出力される。該画像変化検出信号は、画像変化検出信号送信部２９により、ネットワーク１２又は該ネットワーク１２とは別のネットワークを介して送信される（ステップＳ１５）。
【００５９】
処理が終了のとき（ステップＳ１６：Ｙ）一連の処理を終了するが（エンド）、処理が終了ではないとき（ステップＳ１６：Ｎ）、ステップＳ１２に戻る。ステップＳ１３において、両画像が不一致ではないと判断されたとき（ステップＳ１３：Ｎ）、同様にステップＳ１２に戻る。
【００６０】
このような画像処理装置２０は、取得画像データをネットワーク１２を介して画像閲覧装置４０に対して送信すると共に、基準画像を基準として取得画像が変化したことを示す画像変化検出信号を画像閲覧装置４０に対して送信する。このとき、画像処理装置２０は、該画像変化検出信号をネットワーク１２又はこれとは別個のネットワークを介して送信することができる。こうすることで、変化した画像データの受信側では、取り込んだ画像の変化の有無を常時監視しておく必要がなく、画像変化検出信号により画像が変化した旨の通知を受けてから画像を表示出力させることができる。したがって、ネットワークを介して受信される画像の監視負担を軽減することができる。
【００６１】
図４に、画像処理装置２０の具体的構成例を示すブロック図を示す。画像処理装置２０は、例えばカメラ３１を含むことができる。カメラ３１によって取り込まれた画像は、例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）フォーマットの画像データとしてＲＡＭ３２に保存される。ＣＰＵ３４は、内蔵するＲＯＭに記憶されたプログラムにしたがって、ＲＡＭ３２に保存された画像データを、ネットワーク１２を介して送信することができる。
【００６２】
センサ３６は、例えばＣＭＯＳセンサにより構成される。センサ３６には予め取り込まれた基準画像データが保存される。センサ３６は、該基準画像データと、ＲＡＭ３２に保存された取得画像データとを比較する。そして、基準画像を基準として取得画像が変化したと判断されたときには、取得画像の画像データを不揮発性メモリ３７に保存する。
【００６３】
ＣＰＵ３４は、リアルタイムクロック（ＲｅａｌＴｉｍｅ Ｃｌｏｃｋ：ＲＴＣ）３５を有する。ＲＴＣ３５は、時計機能及びカレンダ機能を有し、現在の日付、時刻をカウントする。そしてセンサ３６によって不揮発性メモリ３７に取得画像の画像データが保存される際に、取得画像が取得された日付及び時刻が、該画像データに関連付けて不揮発性メモリ３７に記憶されるようになっている。またＣＰＵ３４によりＲＡＭ３２に保存された取得画像の画像データには、該取得画像が取得された日付及び時刻が、該画像データに関連付けてネットワーク１２を介して送信されるようになっている。
【００６４】
不揮発性メモリ３７に保存された取得画像の画像データは、ＣＰＵ３４により、変化画像データとしてネットワーク１２を介して送信されるようにしてもよい。
【００６５】
このように図４における画像処理装置２０は、カメラ３１で取り込まれた画像をそのままネットワーク１２に送信することができると共に、センサ３６において基準画像を基準として取得画像が変化したと判断されたときに、該取得画像が変化したことを示す画像変化検出信号を、ネットワーク１２に送信することができるようになっている。
【００６６】
図５に、第１の実施形態における画像閲覧装置４０の機能ブロック図を示す。画像閲覧装置４０は、受信部４２、記憶部４４、表示部４６、制御部４８を含む。受信部４２は、画像変化検出信号受信部５０、画像データ受信部５２を含む。
【００６７】
またネットワーク１２を介して接続される画像処理装置２０によって送信される画像データを取得するために、画像データ受信部５２は、該画像データの送信元である画像処理装置２０に固有に割り当てられたアドレス情報を用いて、画像処理装置２０にアクセスすることができる。このため画像閲覧装置４０は、画像データ送信元アドレス記憶部５４を含むことができる。アドレス情報は、ネットワーク１２に接続される装置それぞれに対して、固有に割り当てられた情報である。アドレス情報としては、ドメインネーム、ＩＰアドレス等がある。
【００６８】
画像変化検出信号受信部５０は、ネットワーク１２又は該ネットワーク１２とは別のネットワークを介して、画像処理装置２０からの画像変化検出信号を受信する。
【００６９】
画像データ受信部５２は、画像変化検出信号受信部５０によって画像変化検出信号が受信されたことを条件として、該画像変化検出信号が伝送されたネットワーク又は該ネットワークとは別のネットワークに接続された画像処理装置２０との間の通信路を確立して、画像処理装置２０からの画像データを受信する。画像データ受信部５２による画像処理装置２０との間の通信路は、画像データ送信元アドレス記憶部５４において予め記憶されている画像処理装置２０のアドレス情報により接続先が特定され、所与のプロトコル処理を行うことで確立される。なお画像閲覧装置４０が画像データ送信元アドレス記憶部５４を含まずに、ネットワーク１２又は該ネットワーク１２とは別のネットワークを介して画像処理装置２０のアドレス情報を受信するようにしてもよい。この場合、画像データ受信部５２は、受信したアドレス情報を用いて取得画像データを取得する。
【００７０】
このような画像変化検出信号受信部５０及び画像データ受信部５２を含む受信部４２の機能は、ＡＳＩＣや通信用ＩＣなどのハードウェアをファームウェアやソフトウェア等により制御することで実現される。
【００７１】
記憶部４４は、受信部４２の画像データ受信部５２によって受信された画像データを記憶する。記憶部４４の機能は、ＤＲＡＭなどの揮発性メモリや、ＳＲＡＭやフラッシュメモリ等の不揮発性メモリにより実現される。
【００７２】
表示部４６は、記憶部４４に記憶された画像データに基づいて表示出力を行う。表示部４６の機能は、ＣＲＴ（Ｃａｔｈｏｄｅ−Ｒａｙ Ｔｕｂｅ）やＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ
Ｄｉｓｐｌａｙ）等の表示装置により実現される。
【００７３】
制御部４８は、受信部４２、記憶部４４及び表示部４６の制御を司る。制御部４８は、ＣＰＵ、ＲＡＭ又はＲＯＭを有する。ＲＡＭ又はＲＯＭに記憶されたプログラムにしたがって処理を行ったＣＰＵが、受信部４２の各部、記憶部４４及び表示部４６を制御することができる。
【００７４】
図６に、画像閲覧装置４０の制御部４８の処理フローの一例を示す。制御部４８は、まず受信部４２の画像変化検出信号受信部５０において画像変化検出信号の受信を監視する（ステップＳ２０）。すなわち、画像変化検出信号受信部５０において画像変化検出信号が受信されるまでステップＳ２０を繰り返す（ステップＳ２０：Ｎ）。
【００７５】
画像変化検出信号が受信されたとき（ステップＳ２０：Ｙ）、制御部４８に制御された画像データ受信部５２は、例えば画像データ送信元アドレス記憶部５４に記憶されたアドレス情報を用いてネットワーク１２において一意に決められる画像処理装置２０を特定し、該画像処理装置２０との間の通信路を確立するための接続処理を行う（ステップＳ２１）。そして、画像処理装置２０で取り込まれた取得画像データを受信する（ステップＳ２２）。
【００７６】
その後、制御部４８は、画像データ受信部５２で受信された画像データを記憶部４４に保存する（ステップＳ２３）。続いて制御部４８は、記憶部４４に保存された画像データを表示部４６に供給する（ステップＳ２４）。表示部４６は、供給された画像データに基づく表示出力を行う。
【００７７】
続いて画像データ受信部５２により画像データの受信を行うとき（ステップＳ２５：Ｙ）、ステップＳ２２に戻る。一方、ステップＳ２５において、続いて画像データ受信部５２により画像データの受信を行わないとき（ステップＳ２５：Ｎ）、画像処理装置２０との間の通信路を切断する処理を行う（ステップＳ２６）。
【００７８】
処理が終了のとき（ステップＳ２７：Ｙ）一連の処理を終了するが（エンド）、処理が終了ではないとき（ステップＳ２７：Ｎ）、ステップＳ２０に戻る。
【００７９】
このように画像閲覧装置４０は、画像処理装置２０からの画像変化検出信号を受信したことを条件に、画像処理装置２０との間で通信接続を行って、画像処理装置２０で取り込まれた取得画像データを受信し、表示出力することができる。したがって、画像閲覧装置４０の表示部の監視負担を大幅に軽減することができる。そのため、画像閲覧装置４０側では、取り込んだ画像の変化後の様子を確実に把握することができる。
【００８０】
１．１ 変形例
１．１．１ 第１の変形例
第１の記憶部に保存される基準画像データは、所与の期間をおいて更新されるようにしてもよい。第１の変形例における画像処理装置は、第１の記憶部に保存される基準画像データを更新することができる。
【００８１】
図７に、第１の変形例における画像処理装置の機能ブロック図を示す。ここで、図２に示す画像処理装置２０と同一部分には同一符号を付し、適宜説明を省略する。
【００８２】
第１の変形例における画像処理装置６０が、図２に示す画像処理装置２０と異なる点は、第１の記憶部２４に、取得画像データが所与の周期で格納される点にある。ここで、画像処理装置６０は、図２に示す画像変化検出部２６と同様に、取得画像の変化を検出する画像変化検出部６２を含む。
【００８３】
画像処理装置６０では、画像変化検出部６２によって取得画像が変化しなかったことが検出されたことを条件として、画像取込部２２によって取り込まれた取得画像データが基準画像データとして第１の記憶部２４に格納される。画像が取り込まれるたびに第１の記憶部２４に取得画像データが格納されるようにしてもよいし、所与の期間を置いて第１の記憶部２４に取得画像データが格納されるようにしてもよい。
【００８４】
これにより、夕方から夜にかけて画像取込部２２によって画像が取り込まれる場所の明るさが変化した場合にも、取得画像と基準画像の変化の検出精度を低下を抑えることができる。
【００８５】
画像処理装置６０でも、ＣＰＵ（図示せず）及びメモリ（図示せず）を有する。そして画像処理装置６０では、メモリに記憶されたプログラムにしたがって処理を行ったＣＰＵにより、以下に示す制御が行われる。
【００８６】
図８に、第１の変形例における画像処理装置６０の動作フローの一例を示す。画像処理装置６０では、まず画像取込部２２によって基準画像の取り込みが行われる（ステップＳ３０）。取り込まれた基準画像は、第１の記憶部２４に保存される（ステップＳ３１）。
【００８７】
これ以降、画像処理装置６０では、画像取込部２２により、周期的に画像の取り込みが行われる。まず、画像取込部２２によって、新たに画像が取得画像として取り込まれる（ステップＳ３２）。
【００８８】
取得画像は、第１の記憶部２４に保存された基準画像と比較される（ステップＳ３３）。すなわち、取得画像の画像データである取得画像データと、基準画像の画像データである基準画像データとを比較することで、両画像が一致するか否かが検出される。
【００８９】
両画像が不一致と判断されたとき（ステップＳ３３：Ｙ）、取得画像の画像データが、画像データ送信部２８によってネットワーク１２を介して送信される（ステップＳ３４）。また基準画像を基準として、取得画像が変化したことを示す画像変化検出信号が、画像変化検出信号送信部２９によりネットワーク１２又は該ネットワーク１２とは別のネットワークを介して送信される（ステップＳ３５）。
【００９０】
処理が終了のとき（ステップＳ３６：Ｙ）一連の処理を終了するが（エンド）、処理が終了ではないとき（ステップＳ３６：Ｎ）、ステップＳ３２に戻る。
【００９１】
ステップＳ３３において、両画像が不一致ではないと判断されたとき（ステップＳ３３：Ｎ）、取得画像データが第１の記憶部２４に格納され（ステップＳ３７）、ステップＳ３２に戻る。すなわち、第１の記憶部２４では、保存されていた基準画像データが上書きされる。次のタイミングで取り込まれた取得画像の画像変化の検出の際には、ステップＳ３７で上書きされた取得画像データを基準画像データが用いられる。なおステップＳ３７では、所与の基準画像の更新タイミングのときにのみ取得画像データの上書きを行うことが望ましい。
【００９２】
このような画像処理装置６０は、所与の周期で基準画像を更新することで、画像の取り込みを行う場所の環境の変化に対して、画像変化の検出精度の低下を最小限に抑えることができる。
【００９３】
１．１．２ 第２の変形例
また、画像取込部に赤外線撮像デバイスを設け、赤外線撮像デバイスの機能のオン・オフ制御を行って赤外線を検知して生成された赤外線画像により、画像の変化を検出するようにしてもよい。第２の変形例における画像処理装置は、上述の画像変化の検出に加えて、赤外線撮像デバイスにより取り込まれた赤外線画像の変化を検出することができる。
【００９４】
図９に、第２の変形例における画像処理装置の機能ブロック図を示す。ここで、図２に示す画像処理装置２０と同一部分には同一符号を付し、適宜説明を省略する。
【００９５】
第２の変形例における画像処理装置７０が、図２に示す画像処理装置２０と異なる点は、画像取込部に赤外線撮像デバイスが含まれる点である。すなわち、画像処理装置７０の画像取込部７２は、赤外線撮像デバイス７３を含む。赤外線撮像デバイス７３は、被写体が発する赤外線を検知し、赤外線の波長に応じて表示色が変化する画像を生成する。
【００９６】
赤外線撮像デバイス７３は、モード設定部７４の設定内容にしたがって、その機能がオン状態又はオフ状態にされる。モード設定部７４は、図示しないＣＰＵによって、通常モード又は赤外線モードに設定される。
【００９７】
赤外線モードでは、赤外線撮像デバイス７３がオン状態となる。赤外線撮像デバイス７３がオン状態の場合、被写体の赤外線を検知して赤外線画像を生成することができる。
【００９８】
通常モードでは、赤外線撮像デバイス７３がオフ状態となる。赤外線撮像デバイス７３がオフ状態の場合、画像取込部７２は図２に示すように通常の画像を生成することができる。
【００９９】
画像処理装置７０でも、ＣＰＵ（図示せず）及びメモリ（図示せず）を有する。そして画像処理装置７０では、メモリに記憶されたプログラムにしたがってＣＰＵにより、以下に示す制御が行われる。
【０１００】
図１０に、第２の変形例における画像処理装置の動作フロー図の一例を示す。まず、画像取込部７２による撮影環境が明るいか否かが判別される（ステップＳ４０）。撮影環境の明るさは、例えば照度計により測定される。そして、照度計により測定された照度が、所与の照度基準値より大きいか、小さいかを判別することで、撮影環境が明るいか否かが判断される。
【０１０１】
撮影環境が明るいと判別されたとき（ステップＳ４０：Ｙ）、モード設定部７４では、通常モードに設定される。画像処理装置７０では、画像取込部７２によって通常モードで基準画像の取り込みが行われる（ステップＳ４１）。取り込まれた基準画像は、第１の記憶部２４に保存される（ステップＳ４２）。
【０１０２】
第１の記憶部２４に保存された後、所与のウェイト時間だけ待つ（ステップＳ４３）。ウェイト時間は、例えば１分〜５分とすることができる。こうすることで、基準画像を取り込んだ後、画像取込部７２の設置や調整等を行った者が続いて取り込まれる取得画像に映り、画像変化として検出されてしまうことを回避することができる。なお、ステップＳ４３におけるウェイト処理は、図３又は図８でも行うことが可能である。
【０１０３】
これ以降、画像処理装置７０では、画像取込部７２により、周期的に画像の取り込みが行われる。まず、画像取込部７２によって、新たに画像が取得画像として取り込まれる（ステップＳ４４）。
【０１０４】
取得画像は、第１の記憶部２４に保存された基準画像と比較される（ステップＳ４５）。すなわち、取得画像の画像データである取得画像データと、基準画像の画像データである基準画像データとを比較することで、両画像が一致するか否かが検出される。
【０１０５】
両画像が不一致と判断されたとき（ステップＳ４５：Ｙ）、取得画像の画像データは、画像データ送信部２８によりネットワークを介して送信される（ステップＳ４６）。また基準画像を基準として取得画像が変化したことを示す画像変化検出信号を、ネットワーク１２又はネットワーク１２とは異なる別のネットワークを介して画像閲覧装置に対して送信する（ステップＳ４７）。
【０１０６】
処理が終了のとき（ステップＳ４８：Ｙ）一連の処理を終了するが（エンド）、処理が終了ではないとき（ステップＳ４８：Ｎ）、ステップＳ４４に戻る。ステップＳ４５において、両画像が不一致ではないと判断されたとき（ステップＳ４５：Ｎ）、同様にステップＳ４４に戻る。
【０１０７】
一方、ステップＳ４０において撮影環境が明るくないと判別されたとき（ステップＳ４０：Ｎ）、モード設定部７４では、赤外線モードに設定される。画像処理装置７０では、画像取込部７２の赤外線撮像デバイス７３がオン状態となり（ステップＳ４９）、赤外線画像の取り込みが行われる。すなわち、赤外線画像である基準画像の取り込みが行われる（ステップＳ５０）。取り込まれた基準画像は、第１の記憶部２４に保存される（ステップＳ５１）。
【０１０８】
第１の記憶部２４に保存された後、所与のウェイト時間だけ待つ（ステップＳ５２）。ウェイト時間は、例えば１分〜５分とすることができる。
【０１０９】
これ以降、画像処理装置７０では、画像取込部７２により、周期的に赤外線画像の取り込みが行われる。赤外線モードでは、例えば画像取り込みを行う期間のみ赤外線撮像デバイス７３の機能がオンするようになっている。そのため、まずモード設定部７４では、赤外線モードに設定される。画像処理装置７０では、画像取込部７２の赤外線撮像デバイス７３がオン状態となり（ステップＳ５３）、赤外線画像の取り込みが行われる（ステップＳ５４）。
【０１１０】
取り込まれた赤外線画像の取得画像データは、第１の記憶部２４に保存された基準画像と比較される（ステップＳ５５）。
【０１１１】
両画像が不一致と判断されたとき（ステップＳ５５：Ｙ）、取得画像として取り込まれた赤外線画像がネットワークを介して送信される（ステップＳ５６）。また取得画像が変化したことを示す画像変化検出信号が、ネットワーク１２又はネットワーク１２とは異なる別のネットワークを介して送信される（ステップＳ５７）。
【０１１２】
処理が終了のとき（ステップＳ５８：Ｙ）一連の処理を終了するが（エンド）、処理が終了ではないとき（ステップＳ５８：Ｎ）、ステップＳ５３に戻る。ステップＳ５５において、両画像が不一致ではないと判断されたとき（ステップＳ５５：Ｎ）、同様にステップＳ５３に戻る。
【０１１３】
なお、画像処理装置７０では、図７及び図８で説明したように、第１の記憶部２４に記憶される赤外線画像である基準画像を周期的に更新するようにしてもよい。
【０１１４】
このような画像処理装置７０は、撮影環境の明るさの変化に対して、画像変化の検出精度の低下を抑えることができる。
【０１１５】
１．２ 画像変化検出部の構成
次に、画像変化検出部２６、６２の構成例について具体的に説明する。
【０１１６】
１．２．１ 第１の構成例
図１１に、第１の構成例における画像変化検出部の動作を説明する図を示す。ここでは、画像取込部からの取得画像データがＲＧＢフォーマットであるものとして説明するが、これに限定されるものではない。ＲＧＢフォーマットの画像データは、各画素がＲＧＢの原色信号により表される。
【０１１７】
第１の構成例では、ＲＧＢフォーマットの取得画像データが、Ｙ成分（輝度成分）、Ｃｂ成分及びＣｒ成分からなる画像データに変換される。そして、画像変化検出部は、取得画像データのＣｂ成分と、基準画像データのＣｂ成分とを比較する。或いは、画像変化検出部は、取得画像データのＣｒ成分と、基準画像データのＣｂ成分とを比較する。Ｃｂ成分を第１の色差成分としたときは、Ｃｒ成分を第２の色差成分と言うことができる。またＣｂ成分を第２の色差成分としたときは、Ｃｒ成分を第１の色差成分と言うことができる。
【０１１８】
このように、１つの色差成分のみを比較することで、データ量の削減と処理負荷の軽減を図ることができる。基準画像データ及び取得画像データのＣｂ成分のみを比較するように構成した場合、暗い撮影環境で取り込まれた画像の変化を精度良く検出することができる。
【０１１９】
図１２に、第１の構成例における画像変化検出部の機能ブロック構成例を示す。第１の構成例における画像変化検出部７５は、少なくとも画像データ比較部７７を含む。取得画像データのフォーマットがＲＧＢフォーマットの場合には、画像データフォーマット変換部７６を更に含む。なお取得画像データのフォーマットが輝度成分及び第１及び第２の色差成分からなるフォーマットである場合には、画像データフォーマット変換部７６を省略した構成とすることができる。
【０１２０】
画像データフォーマット変換部７６及び画像データ比較部７７の機能は、組み合わせ回路、ＡＳＩＣ又はソフトウェアによる制御されるＣＰＵによって実現される。
【０１２１】
画像データフォーマット変換部７６は、ＲＧＢフォーマットの取得画像データを、Ｙ成分、Ｃｂ成分及びＣｒ成分を有するフォーマットの画像データに変換する。すなわち、画素単位で、原色信号が、輝度成分、第１及び第２の色差成分に変換される。
【０１２２】
画像データ比較部７７は、同一種類の色差成分について、取得画像データと基準画像データとを比較する。そして、該色差成分について両画像データが一致すると判断されたときは画像変化検出信号を出力しない（画像変化検出信号を変化させない）。一方、該色差成分について両画像データが不一致である（異なる）と判断されたときは画像変化検出信号を出力する（画像変化検出信号を変化させる）。
【０１２３】
１．２．２ 第２の構成例
図１３に、第２の構成例における画像変化検出部の動作を説明する図を示す。第２の構成例では、取得画像の一部を比較領域とし、取得画像の該比較領域における画像データと、基準画像データの画像領域のうち該比較領域に対応する領域の画像データとが比較される。
【０１２４】
取得画像データの画像領域が、スタートアドレスＳＡ０及びエンドアドレスＥＡ０で表される矩形領域であるものとする。第２の構成例では、スタートアドレスＳＡ及びエンドアドレスＥＡで表される矩形の抽出領域の画像データが抽出される。そして、該抽出領域を比較領域として両画像データの比較が行われる。
【０１２５】
このように、画像領域の比較対象となる領域を小さくすることで、データ量の削減と処理負荷の軽減を図ることができる。
【０１２６】
図１４に、第２の構成例における画像変化検出部の機能ブロック構成例を示す。第２の構成例における画像変化検出部８０は、取得画像データ抽出部８２、基準画像データ抽出部８４、画像データ比較部８６を含む。
【０１２７】
取得画像データ抽出部８２、基準画像データ抽出部８４及び画像データ比較部８６の機能は、組み合わせ回路、ＡＳＩＣ又はソフトウェアによる制御されるＣＰＵによって実現される。
【０１２８】
取得画像データ抽出部８２は、取得画像データから、比較領域の画像データを抽出する。取得画像データは、スタートアドレスＳＡ０及びエンドアドレスＥＡ０により指定される矩形領域を画像領域とする。比較領域は、スタートアドレスＳＡ及びエンドアドレスＥＡにより指定される矩形領域である。比較領域のスタートアドレスＳＡ及びエンドアドレスＥＡは、図示しないＣＰＵによって指定される抽出領域指定データにより特定される。
【０１２９】
基準画像データ抽出部８４は、基準画像データから、比較領域の画像データを抽出する。基準画像データは、スタートアドレスＳＡ０及びエンドアドレスＥＡ０により指定される矩形領域を画像領域とする。比較領域は、スタートアドレスＳＡ及びエンドアドレスＥＡにより指定される矩形領域である。基準画像データ抽出部８４では、上述の抽出領域指定データにより比較領域が特定される。
【０１３０】
画像データ比較部８６は、取得画像データ抽出部８２によって抽出領域指定データにより特定される比較領域の画像データと、基準画像データの画像領域のうち該比較領域に対応する領域の画像データとを比較する。そして、両画像データの例えば同一種類の色差成分について一致すると判断されたときは画像変化検出信号を出力しない。一方、該色差成分について両画像データが不一致であると判断されたときは画像変化検出信号を出力する。
【０１３１】
１．２．３ 第３の構成例
図１５（Ａ）、（Ｂ）に、第３の構成例における画像変化検出部の動作を説明する図を示す。図１５（Ａ）は、基準画像取り込み時のイメージを示す。図１５（Ｂ）は、取得画像取り込み時のイメージを示す。
【０１３２】
画像取込部が、ドア９０を有する部屋の内部の画像を取り込むものとする。ドア９０の部分の画像データは、いわゆる暗いデータである。暗いデータは、輝度の値が小さいデータである。そこで図１５（Ａ）に示すように、画像変化の検出が行われる領域の中心位置（例えば画像取込部の焦点９２）を、ドア９０の部分にもってくる。
【０１３３】
次に、図１５（Ｂ）に示すようにドア９０が開くと、画像変化の検出が行われる領域の中心位置の輝度が大幅に変化する。部屋の外部では、夜であっても一般的に月明かり、外灯や部屋の外の廊下の灯りがある。そのため、夜であっても画像の変化の検出精度を向上させることができる。これは、基準画像データとして暗いデータを採用したからである。
【０１３４】
図１６に、第３の構成例における画像変化検出部の機能ブロック構成例を示す。第３の構成例における画像変化検出部１００は、少なくとも画像データ比較部１０４を含む。取得画像データのフォーマットがＲＧＢフォーマットの場合には、画像データフォーマット変換部１０２を更に含む。なお取得画像データのフォーマットが輝度成分及び第１及び第２の色差成分からなるフォーマットである場合には、画像データフォーマット変換部１０２を省略した構成とすることができる。
【０１３５】
画像データフォーマット変換部１０２及び画像データ比較部１０４の機能は、組み合わせ回路、ＡＳＩＣ又はソフトウェアによる制御されるＣＰＵによって実現される。
【０１３６】
画像データフォーマット変換部１０２は、ＲＧＢフォーマットの取得画像データを、Ｙ成分、Ｃｂ成分及びＣｒ成分を有するフォーマットの画像データに変換する。
【０１３７】
そして、基準画像データとして、少なくともその輝度成分が記憶されている。基準画像データの画素の輝度成分の値を平均した平均値は、画像変化が検出されるときの取得画像データの画素の輝度成分の値を平均した平均値より小さい。ここで、平均値とは、画像データの複数の画素の輝度成分を平均したものである。
【０１３８】
例えば基準画像の画像領域の大半部分が、図１５（Ａ）に示すドア９０のように輝度成分の値が小さい画像となるようにする。こうすることで、図１５（Ｂ）に示すようにドア９０が開くと、外部からの明かりによって、基準画像の輝度成分の値より大きい輝度成分を有する取得画像が得られる。
【０１３９】
画像データ比較部１０４は、基準画像データの各画素の輝度成分と、取得画像データの各画素の輝度成分とを比較する。そして、各画素について基準画像データの輝度成分の値に対する取得画像データの輝度成分の値の変化率を求め、これらの変化率の平均値が正の変化基準値（第１の基準値）以下のときには、画像変化検出信号を出力しない。一方、該変化率の平均値が上記した変化基準値を超えたときは画像変化検出信号を出力する。
【０１４０】
なお、画像変化検出部１００が含む画像データ比較部１０４において、画素ごとに、取得画像データの輝度成分と基準画像データの輝度成分とを比較するようにしてもよい。この場合、画像データ比較部１０４は、基準画像データの輝度成分の絶対値を基準に、取得画像データの輝度成分の絶対値が変化したことを条件に、取得画像が変化したことを検出する。より具体的には、画像データ比較部１０４は、基準画像データの輝度成分の絶対値を基準に、取得画像データの輝度成分の絶対値が増加したことを条件に、取得画像が変化したことを検出する。
【０１４１】
このように基準画像として暗い画像を採用することで、画像が変化したときに明るい画像となるため、画像変化の検出精度を向上させることができる。ここで明るい画像とは、暗い画像に対してその一部又は全体の領域において輝度成分の値が大きい画像をいう。
【０１４２】
また基準画像として採用される暗い画像として、明度が低ければ低いほど、画像が変化したときの色差成分の変化率が大きくなる画像ということもできる。
【０１４３】
１．２．４ 第４の構成例
図１７に、第４の構成例における画像変化検出部の動作を説明する図を示す。第４の構成例では、基準画像及び取得画像のＹ成分、Ｃｂ成分及びＣｒ成分について、離散コサイン変換（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍａｔｉｏｎ：ＤＣＴ）して得られた周波数成分が用いられる。画像変化が大きいとき、ＤＣＴによって得られた周波数成分のうち高い周波数成分から低い周波数成分までが大きく変化する。これに対して、画像変化がごく僅かのとき、ＤＣＴによって得られた周波数成分のうち高い周波数成分のみが大きく変化し、低い周波数成分の変化はほとんどない。
【０１４４】
そこで第４の構成例では、例えば取得画像データがＲＧＢフォーマットの場合、まず該取得画像データのＲＧＢ成分の各データを、Ｙ成分、Ｃｂ成分及びＣｒ成分に変換する。取得画像データのＹ成分についてＤＣＴを行い、各周波数成分のデータが得られる。得られたデータのうち、所与のＹ成分用閾値（第１の閾値）より低い周波数成分のデータのみが抽出される。同様にして基準画像データについてもＤＣＴにより得られた各周波数成分のデータのうち、該Ｙ成分用閾値より低い周波数成分のデータのみが抽出される。そして、両画像データのＤＣＴにより得られ該Ｙ成分用閾値より低い周波数成分のデータ同士で比較する。
【０１４５】
同様に、両画像データのＣｂ成分、Ｃｒ成分についても、各成分用閾値より低い周波数成分同士で比較する。
【０１４６】
そして、各成分の比較結果に基づいて、両画像が一致するか否かが検出される。こうすることで、画像変化の検出精度を大幅に向上させることができるようになる。またＲ成分、Ｇ成分及びＢ成分ではなく、Ｙ成分、Ｃｂ成分及びＣｒ成分についてＤＣＴにより得られた周波数成分について比較を行うことで、画像の明暗を精度良く検出することができる。
【０１４７】
図１８に、第４の構成例における画像変化検出部の機能ブロック構成例を示す。第４の構成例における画像変化検出部１１０は、少なくともＤＣＴ演算部１１２−Ｙ、１１２−Ｃｂ、１１２−Ｃｒ、データ抽出部１１４−Ｙ、１１４−Ｃｂ、１１４−Ｃｒ、画像データ比較部１１６を含む。画像データ比較部１１６は、Ｙ成分比較部１１７−Ｙ、Ｃｂ成分比較部１１７−Ｃｂ、Ｃｒ成分比較部１１７−Ｃｒを含む。取得画像データのフォーマットがＲＧＢフォーマットの場合には、画像データフォーマット変換部１１８を更に含む。なお取得画像データのフォーマットが輝度成分及び色差成分からなるフォーマットである場合には、画像データフォーマット変換部１１８を省略した構成とすることができる。
【０１４８】
ＤＣＴ演算部１１２−Ｙ、１１２−Ｃｂ、１１２−Ｃｒ、データ抽出部１１４−Ｙ、１１４−Ｃｂ、１１４−Ｃｒ、画像データ比較部１１６及び画像データフォーマット変換部１１８の各機能は、組み合わせ回路、ＡＳＩＣ又はソフトウェアによる制御されるＣＰＵによって実現される。
【０１４９】
画像データフォーマット変換部１１８は、ＲＧＢフォーマットの取得画像データを、Ｙ成分、Ｃｂ成分及びＣｒ成分を有するフォーマットの画像データに変換する。
【０１５０】
ＤＣＴ演算部１１２−Ｙは、画像データフォーマット変換部１１８によりフォーマット変換された取得画像データのＹ成分について、ＤＣＴを行って得られた各周波数成分のデータを出力する。
【０１５１】
ＤＣＴ演算部１１２−Ｃｂは、画像データフォーマット変換部１１８によりフォーマット変換された取得画像データのＣｂ成分について、ＤＣＴを行って得られた各周波数成分のデータを出力する。
【０１５２】
ＤＣＴ演算部１１２−Ｃｒは、画像データフォーマット変換部１１８によりフォーマット変換された取得画像データのＣｒ成分について、ＤＣＴを行って得られた各周波数成分のデータを出力する。
【０１５３】
データ抽出部１１４−Ｙには、ＤＣＴ演算部１１２−ＹからＹ成分についてＤＣＴにより得られた各周波数成分のデータと、Ｙ成分用閾値Ｙ−ｔｈ（第１の閾値）とが入力される。データ抽出部１１４−Ｙは、ＤＣＴ演算部１１２−ＹからＹ成分についてＤＣＴにより得られた各周波数成分のデータから、Ｙ成分用閾値Ｙ−ｔｈより低い周波数成分のデータを抽出する。
【０１５４】
データ抽出部１１４−Ｃｂには、ＤＣＴ演算部１１２−ＣｂからＣｂ成分についてＤＣＴにより得られた各周波数成分のデータと、Ｃｂ成分用閾値Ｃｂ−ｔｈ（第２の閾値）とが入力される。データ抽出部１１４−Ｃｂは、ＤＣＴ演算部１１２−ＣｂからＣｂ成分についてＤＣＴにより得られた各周波数成分のデータから、Ｃｂ成分用閾値Ｃｂ−ｔｈより低い周波数成分のデータを抽出する。
【０１５５】
データ抽出部１１４−Ｃｒには、ＤＣＴ演算部１１２−ＣｒからＣｒ成分についてＤＣＴにより得られた各周波数成分のデータと、Ｃｒ成分用閾値Ｃｒ−ｔｈ（第３の閾値）とが入力される。データ抽出部１１４−Ｃｒは、ＤＣＴ演算部１１２−ＣｒからＣｒ成分についてＤＣＴにより得られた各周波数成分のデータから、Ｃｒ成分用閾値Ｃｒ−ｔｈより低い周波数成分のデータを抽出する。
【０１５６】
画像データ比較部１１６には、基準画像データのＹ成分、Ｃｂ成分及びＣｒ成分について同様に得られたデータと、データ抽出部１１４−Ｙ、１１４−Ｃｂ、１１４−Ｃｒにより抽出されたデータとが入力される。基準画像データについては、そのＹ成分、Ｃｂ成分及びＣｒ成分についてそれぞれＤＣＴを行って得られた周波数成分のうち、それぞれＹ成分用閾値Ｙ−ｔｈ、Ｃｂ成分用閾値Ｃｂ−ｔｈ及びＣｒ成分用閾値Ｃｒ−ｔｈより低い周波数成分のデータが入力される。
【０１５７】
そして、各成分ごとに比較され、各成分の比較結果に基づいて、両画像が一致するか否かが判別される。
【０１５８】
より具体的には、画像データ比較部１１６において、Ｙ成分比較部１１７−Ｙ（輝度成分比較部）が、取得画像データのＹ成分をＤＣＴして得られた周波数成分のうちＹ成分用閾値Ｙ−ｔｈ（第１の閾値）より低い周波数成分と、基準画像データのＹ成分をＤＣＴして得られた周波数成分のうちＹ成分用閾値Ｙ−ｔｈより低い周波数成分とを比較する。またＣｂ成分比較部１１７−Ｃｂ（第１の色差成分比較部）が、取得画像データのＣｂ成分（第１の色差成分）をＤＣＴして得られた周波数成分のうちＣｂ成分用閾値Ｃｂ−ｔｈ（第２の閾値）より低い周波数成分と、基準画像データのＣｂ成分をＤＣＴして得られた周波数成分のうちＣｂ成分用閾値Ｃｂ−ｔｈより低い周波数成分とを比較する。更にＣｒ成分比較部１１７−Ｃｒ（第２の色差成分比較部）が、取得画像データのＣｒ成分（第２の色差成分）をＤＣＴして得られた周波数成分のうちＣｒ成分用閾値Ｃｒ−ｔｈ（第３の閾値）より低い周波数成分と、基準画像データのＣｒ成分をＤＣＴして得られた周波数成分のうちＣｒ成分用閾値Ｃｒ−ｔｈより低い周波数成分とを比較する。そして、画像データ比較部１１６は、Ｙ成分比較部１１７−Ｙ、Ｃｂ成分比較部１１７−Ｃｂ及びＣｒ成分比較部１１７−Ｃｒの各比較結果に基づいて、基準画像を基準として取得画像が変化したことを示す画像変化検出信号を出力する。
【０１５９】
画像データ比較部１１６は、例えば各比較部の比較結果が全て一致のときに両画像が一致すると判断して画像変化検出信号を出力しない。一方、画像データ比較部１１６は、例えば各比較部の比較結果のいずれか１つが不一致のときに両画像が不一致であると判断して画像変化検出信号を出力する。また画像データ比較部１１６は、各比較部の比較結果を多数決して両画像の一致を判別するようにしてもよい。或いは、画像データ比較部１１６は、各比較部の比較結果をそれぞれ重み付けして両画像の一致を判別するようにしてもよい。
【０１６０】
２． 第２の実施形態
第１の実施形態では、画像変化が検出されるとその変化後の画像を画像閲覧装置に対して送信していたが、これに限定されるものではない。
【０１６１】
図１９に、第２の実施形態における画像通信システムのブロック図を示す。画像通信システム２００は、所与のネットワーク（通信網）２０２を介して互いに接続される画像処理装置２１０と、画像閲覧装置２３０とを含む。
【０１６２】
画像処理装置２１０は、取り込んだ画像を取得画像データとしてネットワーク２０２を介して送信すると共に、該画像が基準画像を基準として変化したことを検出して、取り込んだ画像が変化したことを示す画像変化検出フラグをネットワーク２０２を介して送信する。画像処理装置２１０は、例えば取得画像データと画像変化検出フラグとを含む送信パケットをネットワーク２０２を介して送信することができる。
【０１６３】
画像変化検出フラグは、第１の実施形態における画像変化検出部と同様にして生成される。
【０１６４】
画像閲覧装置２３０では、ネットワーク２０２上のパケットを監視する。より具体的には、画像処理装置２１０からの送信パケットを取り込んで、画像変化検出フラグにより画像が変化したことが通知されたとき、該送信パケットに含まれる取得画像データを取り出して、表示出力等を行うことができる。
【０１６５】
これにより、画像処理装置２１０によるパケットの生成と、画像閲覧装置２３０によるパケットの監視という非常に簡素な構成と制御で低コスト化を図ることができ、かつ画像閲覧装置２３０において画像変化を確実に把握することができる。
【０１６６】
図２０に、第２の実施形態における画像処理装置２１０の機能ブロック図を示す。ここで図２に示す画像処理装置２０と同一部分には同一符号を付し、適宜説明を省略する。
【０１６７】
画像処理装置２１０は、画像取込部２２、第１の記憶部２４、画像変化検出部２１２、送信データ生成部２１４、送信部２１６を含む。
【０１６８】
画像変化検出部２１２は、上述の画像変化検出部２６、６２と同様の機能を有する。画像変化検出部２１２は、基準画像を基準として、取得画像が変化したことを示す画像変化検出フラグを出力することができる。例えば画像変化検出フラグが「１」のとき取得画像が変化したことが検出されたことを示し、画像変化検出フラグが「０」のとき取得画像が変化したことが検出されなかったことを示す。
【０１６９】
送信データ生成部２１４は、画像取込部２２によって取り込まれた取得画像データと、画像変化検出部２１２からの画像変化検出フラグとを含む送信データ（広義には通信データ）を生成する。
【０１７０】
図２１に、送信データの構成例を示す。送信データは、所定のフォーマットを有する。例えば送信データは、少なくともヘッダ情報が設定されるヘッダフィールドと、取得画像データが設定されるデータフィールドとを含んで構成される。また送信データは、ヘッダ情報及び取得画像データ等が設定されない空きフィールド（空き領域）を有する。
【０１７１】
ヘッダ情報は、送信データの送信先、送信元といった通信制御情報である。空きフィールドには、画像変化検出フラグが設定される。
【０１７２】
送信データは、固定長のデータであってもよいし、可変長のデータであってもよい。送信データの各フィールドの情報（少なくとも取得画像データ、画像変化検出フラグ）が、送信側と受信側とで共通して認識されていればよい。送信データ生成部２１４は、図２１に示す構成の送信パケットを生成する。
【０１７３】
図２０において、送信部２１６は、送信データ生成部２１４により生成された送信パケットをネットワークを介して送信する。
【０１７４】
送信データ生成部２１４の機能は、ＡＳＩＣや、ＣＰＵなどのハードウェアをファームウェアやソフトウェア等により制御することで実現される。送信部２１６の機能は、ＡＳＩＣや通信用ＩＣなどのハードウェアをファームウェアやソフトウェア等により制御することで実現される。
【０１７５】
このような画像処理装置２１０は、ＣＰＵ（図示せず）及びメモリ（図示せず）を有する。そして画像処理装置２１０では、メモリに記憶されたプログラムにしたがってＣＰＵにより、以下に示す制御が行われる。
【０１７６】
図２２に、第２の実施形態における画像処理装置の制御フローの一例を示す。
【０１７７】
画像処理装置２１０では、まず画像取込部２２によって基準画像の取り込みが行われる（ステップＳ１００）。取り込まれた基準画像は、第１の記憶部２４に保存される（ステップＳ１０１）。
【０１７８】
これ以降、画像処理装置２１０では、画像取込部２２により、周期的に画像の取り込みが行われる。まず、画像取込部２２によって、新たに画像が取得画像として取り込まれる（ステップＳ１０２）。取得画像は、第１の記憶部２４に保存された基準画像と比較され、画像変化検出部２１２が画像変化検出フラグが生成する（ステップＳ１０３）。
【０１７９】
そして、送信データ生成部２１４により、取得画像データと画像変化検出フラグとが設定された送信パケットが生成される（ステップＳ１０４）。
【０１８０】
処理が終了のとき（ステップＳ１０５：Ｙ）一連の処理を終了するが（エンド）、処理が終了ではないとき（ステップＳ１０５：Ｎ）、ステップＳ１０２に戻る。
【０１８１】
このような画像処理装置２１０では、周期的に取り込まれた取得画像の画像データと、取得画像が基準画像を基準として変化したことが検出されたことを示す画像変化検出フラグとが設定された送信データが生成される。そして、該送信データがネットワークを介して送信される。こうすることで、画像処理装置２１０では、画像変化検出の有無に応じて処理フローを変える必要がないため、画像処理装置２１０の構成及び制御の簡素化を図ることができる。また画像閲覧装置２３０では、ネットワーク上に画像処理装置２１０からの送信データを監視するのみで、変化後の画像を取得することができる。
【０１８２】
図２３に、第２の実施形態における画像閲覧装置２３０の機能ブロック図を示す。ここで、画像閲覧装置２３０が図５に示す画像閲覧装置４０と同一部分には同一符号を付し、適宜説明を省略する。
【０１８３】
画像閲覧装置２３０は、受信部２３２、解析部２３４、抽出部２３６、記憶部４４、表示部４６、制御部２３８を含む。
【０１８４】
受信部２３２は、画像処理装置２１０により、ネットワーク２０２を介して送信された通信データを受信する。通信データには、画像処理装置２１０において取り込まれた取得画像のデータである取得画像データと、基準画像を基準として取得画像が変化したことを示す画像変化検出フラグとが含まれる。受信部２３２の機能は、ＡＳＩＣや通信用ＩＣなどのハードウェアをファームウェアやソフトウェア等により制御することで実現される。
【０１８５】
解析部２３４は、受信部２３２によって受信された通信データに含まれる画像変化検出フラグに基づいて、取得画像が変化したか否かを解析する。受信された通信データに含まれる画像変化検出フラグが「１」のとき、解析部２３４は、例えば基準画像を基準として、取得画像が変化したことが検出されたと判別することができる。また受信された通信データに含まれる画像変化検出フラグが「０」のとき、解析部２３４は、例えば基準画像を基準として、取得画像が変化したことが検出されなかったと判別することができる。
【０１８６】
抽出部２３６は、解析部２３４によって取得画像が変化したことが検出されたとき、通信データに含まれる取得画像データを抽出する。
【０１８７】
このような解析部２３４及び抽出部２３６の機能は、ソフトウェア又はファームウェアにより制御されるＣＰＵにより実現される。
【０１８８】
抽出部２３６によって抽出された取得画像データは、記憶部４４に格納される。
【０１８９】
制御部２３８は、受信部２３２、解析部２３４、抽出部２３６、記憶部４４、表示部４６の制御を司る。制御部２３８は、ＣＰＵ、ＲＡＭ又はＲＯＭを有する。ＲＡＭ又はＲＯＭに記憶されたプログラムにしたがって処理を行ったＣＰＵが、受信部２３２、解析部２３４、抽出部２３６、記憶部４４、表示部４６を制御することができる。
【０１９０】
図２４に、画像閲覧装置２３０の制御部２３８の処理フローの一例を示す。制御部２３８は、まず受信部２３２により、画像処理装置２１０から送信される通信データの受信を監視する（ステップＳ１２０）。すなわち、受信部２３２では、通信データが受信されるまでステップＳ１２０を繰り返す（ステップＳ１２０：Ｎ）。
【０１９１】
受信部２３２において画像処理装置２１０からの通信データが受信されたとき（ステップＳ１２０：Ｙ）、制御部２３８は、解析部２３４により通信データに含まれる画像変化検出フラグを参照して、取得画像が変化したことが検出されたか否かを判別する（ステップＳ１２１）。
【０１９２】
その結果、取得画像の変化が検出されたと判別されたとき（ステップＳ１２２：Ｙ）、制御部２３８は、抽出部２３６により、当該通信データに含まれる取得画像データを抽出させる（ステップＳ１２３）。
【０１９３】
続いて制御部２３８は、抽出部２３６二より抽出された取得画像データを記憶部４４に保存する（ステップＳ１２４）。続いて制御部２３８は、記憶部４４に保存された画像データを表示部４６に供給する（ステップＳ１２５）。表示部４６は、供給された画像データに基づく表示出力を行う。
【０１９４】
処理が終了のとき（ステップＳ１２６：Ｙ）一連の処理を終了するが（エンド）、処理が終了ではないとき（ステップＳ１２６：Ｎ）、ステップＳ１２０に戻る。なおステップＳ１２２で、取得画像の変化が検出されなかったことが判別されたとき（ステップＳ１２２：Ｎ）、ステップＳ１２０に戻る。
【０１９５】
このように画像閲覧装置２３０は、取得画像データと画像変化検出フラグとを含む通信データを監視して、画像変化が検出されたときに当該通信データに含まれる取得画像データを取り出して表示出力することができる。したがって、画像閲覧装置２３０では、変化した画像データの取得を行うための構成及び制御を簡素化することができる。
【０１９６】
第２の実施形態における画像処理装置２１０においても、第１の実施形態の第１の変形例と同様に、基準画像を周期的に更新させることができる。
【０１９７】
また第２の実施形態における画像処理装置２１０においても、第１の実施形態の第２の変形例と同様に、赤外線による画像の取得を行うようにすることができる。
【０１９８】
なお、本発明は上述した実施の形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形実施が可能である。
【０１９９】
第１及び第２の実施形態における画像通信システムでは、防犯用途に用いることができるが、これに限定されるものではない。ネットワークを介して画像の取り込みを行う画像処理装置と、該画像処理装置により取り込まれた画像を表示出力する画像閲覧装置とを含むシステムに適用可能である。
【０２００】
なお上記した画像通信システムの画像閲覧装置では、受信した画像データを記憶部に一旦格納しているが、そのまま表示部に供給して画像データに基づく表示出力を行うようにすることも可能である。
【０２０１】
また上述の実施形態では、画像として静止画や動画を送信することも考えられる。
【０２０２】
更に上述の実施形態では、Ｙ成分、Ｃｂ成分及びＣｒ成分からなる画像のフォーマットについて述べたが、これに限定されるものではない。画像フォーマットが、Ｙ成分、Ｃｂ成分及びＣｒ成分から求められる別フォーマットであってもよい。
【０２０３】
また、本発明のうち従属請求項に係る発明においては、従属先の請求項の構成要件の一部を省略する構成とすることもできる。また、本発明の１の独立請求項に係る発明の要部を、他の独立請求項に従属させることもできる。
【図面の簡単な説明】
【図１】第１の実施形態における画像通信システムの構成ブロック図。
【図２】第１の実施形態における画像処理装置の機能ブロック図。
【図３】第１の実施形態における画像処理装置の動作例を示すフロー図。
【図４】画像処理装置の具体的構成例を示すブロック図。
【図５】画像閲覧装置の機能ブロック図。
【図６】画像閲覧装置の制御部の処理例を示すフロー図。
【図７】第１の変形例における画像処理装置の機能ブロック図。
【図８】第１の変形例における画像処理装置の動作例を示すフロー図。
【図９】第２の変形例における画像処理装置の機能ブロック図。
【図１０】第２の変形例における画像処理装置の動作例を示すフロー図。
【図１１】第１の構成例における画像変化検出部の動作説明図。
【図１２】第１の構成例における画像変化検出部の機能ブロック図。
【図１３】第２の構成例における画像変化検出部の動作説明図。
【図１４】第２の構成例における画像変化検出部の機能ブロック図。
【図１５】図１５（Ａ）、（Ｂ）は、第３の構成例における画像変化検出部の動作説明図。
【図１６】第３の構成例における画像変化検出部の機能ブロック図。
【図１７】第４の構成例における画像変化検出部の動作説明図。
【図１８】第４の構成例における画像変化検出部の機能ブロック図。
【図１９】第２の実施形態における画像通信システムのブロック図。
【図２０】第２の実施形態における画像処理装置の機能ブロック図。
【図２１】第２の実施形態における送信データの構成例を示す説明図。
【図２２】第２の実施形態における画像処理装置の処理例を示すフロー図。
【図２３】第２の実施形態における画像閲覧装置の機能ブロック図。
【図２４】画像閲覧装置の制御部の処理例を示すフロー図。
【符号の説明】
１０、２００ 画像通信システム、 １２、２０２ ネットワーク、
２０、６０、７２、２１０ 画像処理装置、 ２２、７２ 画像取込部、
２４ 第１の記憶部、 ２６、６２、７５、８０、１００、１１０、
２１２ 画像変化検出部、 ２７、２１６ 送信部、 ２８ 画像データ送信部、 ２９ 画像変化検出信号送信部、 ３１ カメラ、 ３２ ＲＡＭ、 ３４ＣＰＵ、 ３５ ＲＴＣ、 ３６ センサ、 ３７ 不揮発性メモリ、 ４０、２３０ 画像閲覧装置、 ４２、２３２ 受信部、 ４４ 記憶部、 ４６ 表示部、 ４８、２３８ 制御部、 ５０ 画像変化検出信号受信部、 ５２ 画像データ受信部、 ５４ 画像データ送信元アドレス記憶部、 ７３ 赤外線撮像デバイス、 ７４ モード設定部、 ７６、１０２、１１８ 画像データフォーマット変換部、 ７７、８６、１０４、１１６ 画像データ比較部、 ８２取得画像データ抽出部、 ８４ 基準画像データ抽出部、 １１２−Ｙ、１１２−Ｃｂ、 １１２−Ｃｒ ＤＣＴ演算部、 １１４−Ｙ、１１４−Ｃｂ、１１４−Ｃｒ データ抽出部、 １１７−Ｙ Ｙ成分比較部、 １１７−Ｃｂ Ｃｂ成分比較部、 １１７−Ｃｒ Ｃｒ成分比較部、 ２１４ 送信データ生成部、２３４ 解析部、 ２３６ 抽出部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an image processing device, an image browsing device, and an image communication system.
[0002]
[Prior art]
There is an image communication system that transmits and receives image data via a communication network. In an image communication system, images captured at a remote location can be viewed. Such image communication systems are widely used, for example, for security systems.
[0003]
In a security system, an image of a place to be monitored is captured by a monitoring camera, and the captured image is transmitted to a monitoring device. The monitoring device receives an image from the monitoring camera and performs display output. Thus, the observer who sees the displayed and output image can grasp the change in the state of the place to be monitored.
[0004]
A so-called Web camera can be used as such a monitoring camera. A Web camera is a camera connected to the Internet as a computer network. The image captured by the Web camera is sent to a display device that is watched by a supervisor at a position far away from the Web camera.
[0005]
[Patent Document 1]
JP-A-11-72348
[0006]
[Problems to be solved by the invention]
However, on the monitoring side, the image received from the monitoring camera is displayed and output. Therefore, the display device on the monitoring side must always be started up. Also, it is necessary for the observer to watch the display device for the image captured by the monitoring camera. Therefore, the concentration of the observer is reduced due to fatigue or the like, and a change in the state of the place to be monitored may be overlooked, and the purpose of crime prevention may not be achieved.
[0007]
In such an image communication system, it is desirable that the viewer can reliably grasp the image change at a remote place.
[0008]
The present invention has been made in view of the above technical problems, and an object of the present invention is to provide an image processing apparatus, an image browsing apparatus, and an image communication apparatus capable of reliably recognizing a change in a captured image. It is to provide a system.
[0009]
[Means for Solving the Problems]
In order to solve the above-described problems, the present invention is an image processing apparatus connected to a communication network, comprising: an image capturing unit that periodically captures an image; and a second image processing unit that stores reference image data that is image data of the reference image. 1, comparing the acquired image data, which is the image data of the acquired image captured by the image capturing unit, with the reference image data, and determining whether the obtained image has changed with respect to the reference image. An image change detecting unit for detecting whether the acquired image data has been changed by the image change transmitting unit, and an image data transmitting unit for transmitting the acquired image data via the communication network. An image change detection signal transmitting unit that transmits an image change detection signal indicating that the acquired image has changed through the communication network or another communication network different from the communication network. To.
[0010]
According to the present invention, the acquired image data is transmitted via the communication network, and the image change detection signal is transmitted via the communication network or another communication network different from the communication network. The side does not need to constantly monitor the presence or absence of a change in the captured image, and can display and output the image after receiving a notification that the image has changed by the image change detection signal. Therefore, it is possible to provide an image processing apparatus that reduces the burden of monitoring images received via a communication network and reduces communication traffic.
[0011]
The present invention is also an image processing device connected to a communication network, wherein the image capturing unit periodically captures an image, a first storage unit that stores reference image data that is image data of the reference image, An image change that compares the acquired image data, which is the image data of the acquired image acquired by the image acquisition unit, with the reference image data, and detects whether the acquired image has changed based on the reference image. A detection unit, an image change detection flag indicating that the image change has been detected by the image change detection unit, and a transmission data generation unit that generates transmission data including the obtained image data; An image data transmitting unit that transmits data via the communication network.
[0012]
In the present invention, transmission data is generated in which acquired image data taken in periodically and an image change detection flag indicating that the acquired image has been changed with reference to the reference image are set. Then, the transmission data is transmitted via the communication network. By doing so, the image processing apparatus does not need to change the processing according to the presence or absence of the image change detection, so that the configuration and control of the image processing apparatus can be simplified. Further, on the receiving side of the transmission data, the image after the change can be obtained only by monitoring the transmission data from the image processing apparatus. Therefore, an image processing apparatus that simplifies the configuration and control of the receiving side is provided. Can be.
[0013]
In the image processing apparatus according to the present invention, the acquired image data may be set in a predetermined data field of the transmission data, and the image change detection flag may be set in an empty field of the transmission data.
[0014]
In the present invention, since the image change detection flag is set in the empty field of the transmission data, it is possible to apply the existing image data to the communication system.
[0015]
Further, in the image processing apparatus according to the present invention, the acquired image data captured by the image capturing unit is converted to the reference image on the condition that the captured image has not been changed by the image change detection unit. The data can be stored in the first storage unit.
[0016]
ADVANTAGE OF THE INVENTION According to this invention, the fall of the detection accuracy of an image change can be minimized with respect to the change of the environment of the place which takes in an image.
[0017]
The image processing apparatus according to the present invention further includes a mode setting unit for setting a normal mode or an infrared mode, wherein the image capturing unit has an infrared imaging device, and the infrared mode is set by the mode setting unit. In this state, the first storage unit stores, as reference image data, image data of a first infrared image generated by detecting infrared rays by the infrared imaging device, and the image change detection unit Comparing the image data of the second infrared image as the acquired image captured by the infrared imaging device with the image data of the first infrared image to determine whether the acquired image has changed with respect to the reference image. The image data transmitting unit transmits the image data of the second infrared image as the acquired image data, and the image change detection signal transmitting unit It can transmit the image change detection signal indicating that the acquired image is changed.
[0018]
ADVANTAGE OF THE INVENTION According to this invention, the fall of the detection accuracy of an image change with respect to the change of the brightness of an imaging environment can be suppressed.
[0019]
Further, in the image processing apparatus according to the present invention, when the pixels of the acquired image data and the reference image data include a luminance component and first and second color difference components, the image change detection unit may include the acquired image data. A first color difference component of the reference image data and a first color difference component of the reference image data. The image data comparison unit includes a first color difference component of the acquired image data and the first color difference component of the reference image data. When it is determined that the components are different, it can be detected that the acquired image has changed.
[0020]
According to the present invention, it is possible to reduce the data amount and the processing load by comparing only one color difference component. For example, when only the Cb component of the reference image data and the acquired image data are compared, it is possible to accurately detect a change in an image captured in a dark shooting environment.
[0021]
Further, in the image processing device according to the present invention, the image change detection unit, the obtained image data extraction unit that extracts the image data of the comparison area of the obtained image data, and the image data extracted by the obtained image data extraction unit An image data comparison unit that compares image data of an area corresponding to the comparison area in the image area of the reference image data, wherein the image data comparison unit includes an image extracted by the acquired image data extraction unit. When it is determined that the data is different from the image data of the area corresponding to the comparison area in the image area of the reference image data, it can be detected that the acquired image has changed.
[0022]
ADVANTAGE OF THE INVENTION According to this invention, since the area | region compared with an image area | region is made small, reduction of the data amount accompanying the detection of an image change and reduction of a processing load can be achieved.
Further, in the image processing device according to the present invention, the average value obtained by averaging the luminance component values of the pixels of the reference image data is an average value obtained by averaging the luminance component values of the pixels of the acquired image data when an image change is detected. Smaller than the value, the image change detection unit includes a luminance component of the acquired image data and an image data comparison unit that compares a luminance component of the reference image data, and the image data comparison unit includes A change in the acquired image can be detected based on a luminance component and a luminance component of the reference image data.
[0023]
Further, in the image processing device according to the present invention, the image data comparing unit may determine a first reference value having a positive average value obtained by averaging a change rate of a luminance component value of a pixel of the acquired image data with respect to the reference image data. If it exceeds, it can be detected that the acquired image has changed.
[0024]
Further, in the image processing apparatus according to the present invention, the image change detection unit includes, for each pixel, an image data comparison unit that compares a luminance component of the acquired image data with a luminance component of the reference image data, The comparison unit can detect that the acquired image has changed on condition that the absolute value of the luminance component of the acquired image data has changed with reference to the absolute value of the luminance component of the reference image data.
[0025]
Further, in the image processing device according to the present invention, the image data comparing unit is based on an absolute value of a luminance component of the reference image data, on the condition that an absolute value of a luminance component of the acquired image data increases. It is possible to detect that the acquired image has changed.
[0026]
In the present invention, a so-called dark image is adopted as the reference image. Therefore, a bright image is obtained when the image changes, so that the detection accuracy of the image change can be improved.
[0027]
Further, in the image processing apparatus according to the present invention, when the pixels of the acquired image data and the reference image data include a luminance component and first and second color difference components, the image change detection unit may include the acquired image data. Among the frequency components obtained by performing a discrete cosine transform of the luminance component, and the first component among the frequency components obtained by performing a discrete cosine transform of the luminance component of the reference image data. A luminance component comparison unit that compares a frequency component lower than a threshold, a frequency component lower than a second threshold among frequency components obtained by performing a discrete cosine transform of the first color difference component of the acquired image data, A first color difference component comparison unit that compares a frequency component obtained by performing a discrete cosine transform of the first color difference component of the image data with a frequency component lower than the second threshold value; Data components obtained by performing discrete cosine transform on the frequency components lower than a third threshold value among the frequency components obtained by performing discrete cosine transform on the second color difference component of the data and the second color difference component of the reference image data. A second chrominance component comparison unit for comparing a frequency component lower than the third threshold value among the frequency components, wherein the image data comparison unit compares the first chrominance component with the comparison result of the luminance component comparison unit. A change in the acquired image can be detected based on the comparison result of the comparison unit and the comparison result of the second color difference component comparison unit.
[0028]
According to the present invention, only the low frequency component among the obtained frequency components is used, so that only the image change when the image change is large can be detected, and the detection error can be reduced.
[0029]
The present invention is also directed to an image browsing apparatus connected to a communication network, wherein the captured image obtained through the communication network receives an image change detection signal indicating that the captured image has changed with reference to the reference image. A detection signal receiving unit, and an image obtained by capturing the acquired image in the communication network or another communication network different from the communication network, provided that the image change detection signal is received by the image change detection signal receiving unit. An image data receiving unit that establishes a communication path with the processing device and receives image data from the image processing device; and an image browsing device that includes a storage unit that stores the image data received by the image data receiving unit. Involved.
[0030]
The image browsing device according to the present invention includes an image data transmission source address information storage unit that stores address information associated with the image processing device in the communication network or another communication network different from the communication network, The image data receiving unit can establish a communication path with the image processing device using the address information stored in the image data transmission source address information storage unit.
[0031]
Further, in the image browsing device according to the present invention, in the communication network or another communication network different from the communication network, the address information associated with the image processing device is different from the communication network or another communication different from the communication network. Acquired via a network, the image data receiving unit can establish a communication path with the image processing apparatus using the address information.
[0032]
According to the present invention, on the condition that the image change detection signal is received, a communication connection can be made with the transmission source of the image data, and the captured image data can be received. Therefore, the monitoring load of the present apparatus can be greatly reduced, and the state of the captured image after the change can be reliably grasped.
[0033]
The present invention also relates to an image browsing apparatus connected to a communication network, wherein the acquired image data is data of an acquired image, and an image change detection flag indicating that the acquired image has changed with reference to a reference image. And a receiving unit that receives communication data including the communication data via the communication network, and based on the image change detection flag included in the communication data received by the receiving unit, whether a change in the acquired image is detected. An analysis unit that analyzes the extracted image data included in the communication data when the analysis unit detects that a change in the acquired image has been detected, and an extraction unit that extracts the acquired image data included in the communication data. And a storage unit for storing the acquired image data.
[0034]
According to the present invention, communication data including acquired image data and an image change detection flag can be monitored, and when an image change is detected, the acquired image data included in the communication data can be extracted and displayed and output. . Therefore, in the present apparatus, the configuration and control for acquiring the changed image data can be simplified.
[0035]
Further, the present invention is an image communication system for communicating image data via a communication network, including the image processing device described above and the image browsing device according to any one of the above, wherein the image browsing device is The present invention relates to an image communication system that captures acquired image data transmitted by the image processing device based on the image change detection signal transmitted by the image processing device via a communication network.
[0036]
According to another aspect of the present invention, there is provided an image communication system for communicating image data via a communication network, the image communication device including the image processing device described above and the image browsing device described above, wherein the image browsing device includes the communication network Via the image processing apparatus, based on the image change detection flag from the image processing apparatus.
[0037]
Further, in the image communication system according to the present invention, the acquired image data captured by the image capturing unit is converted to the reference image on the condition that the captured image is not changed by the image change detection unit. The data can be stored in the first storage unit.
[0038]
Further, in the image communication system according to the present invention, the image processing device further includes a mode setting unit for setting a normal mode or an infrared mode, the image capturing unit includes an infrared imaging device, In a state where the infrared mode is set by the unit, the first storage unit stores, as reference image data, image data of a first infrared image generated by detecting infrared light by the infrared imaging device, The image change detection unit compares image data of a second infrared image and image data of the first infrared image as an acquired image captured by the infrared imaging device, and obtains an acquired image based on a reference image. The image data transmitting unit transmits the image data of the second infrared image as the acquired image data, and detects whether the Image change detection signal transmitting unit can transmit the image change detection signal indicating that the acquired image is changed.
[0039]
Further, in the image communication system according to the present invention, when the pixels of the acquired image data and the reference image data include a luminance component and first and second color difference components, the image change detection unit includes the acquired image data. A first color difference component of the reference image data and a first color difference component of the reference image data. The image data comparison unit includes a first color difference component of the acquired image data and the first color difference component of the reference image data. When it is determined that the components are different, it can be detected that the acquired image has changed.
[0040]
Further, in the image communication system according to the present invention, the image change detection unit is an acquisition image data extraction unit that extracts image data of a comparison region of the acquisition image data, and the image data extracted by the acquisition image data extraction unit. An image data comparison unit that compares image data of an area corresponding to the comparison area in the image area of the reference image data, wherein the image data comparison unit includes an image extracted by the acquired image data extraction unit. When it is determined that the data is different from the image data of the area corresponding to the comparison area in the image area of the reference image data, it can be detected that the acquired image has changed.
[0041]
Further, in the image communication system according to the present invention, the average value obtained by averaging the luminance component values of the pixels of the reference image data is an average value obtained by averaging the luminance component values of the pixels of the acquired image data when an image change is detected. Smaller than the value, the image change detection unit includes a luminance component of the acquired image data and an image data comparison unit that compares a luminance component of the reference image data, and the image data comparison unit includes A change in the acquired image can be detected based on a luminance component and a luminance component of the reference image data.
[0042]
Further, in the image communication system according to the present invention, the image data comparing unit may calculate a first reference value having a positive average value obtained by averaging a change rate of a luminance component value of a pixel of the acquired image data with respect to the reference image data. If it exceeds, it can be detected that the acquired image has changed.
[0043]
Further, in the image communication system according to the present invention, when the pixels of the acquired image data and the reference image data include a luminance component and first and second color difference components, the image change detection unit includes the acquired image data. Among the frequency components obtained by performing a discrete cosine transform of the luminance component, and the first component among the frequency components obtained by performing a discrete cosine transform of the luminance component of the reference image data. A luminance component comparison unit that compares a frequency component lower than a threshold, a frequency component lower than a second threshold among frequency components obtained by performing a discrete cosine transform of the first color difference component of the acquired image data, A first color difference component comparison unit that compares a frequency component obtained by performing a discrete cosine transform on a first color difference component of the image data with a frequency component lower than the second threshold value; Among the frequency components obtained by performing discrete cosine transform on the second color difference component of the image data, the frequency component lower than the third threshold value and the second color difference component of the reference image data are obtained by performing discrete cosine transform. A second chrominance component comparison unit for comparing a frequency component lower than the third threshold value among the frequency components, wherein the image data comparison unit compares the first chrominance component with the comparison result of the luminance component comparison unit. A change in the acquired image can be detected based on the comparison result of the comparison unit and the comparison result of the second color difference component comparison unit.
[0044]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings. The embodiments described below do not unduly limit the contents of the invention described in the claims. In addition, all of the configurations described below are not necessarily essential components of the invention.
[0045]
1. First embodiment
FIG. 1 shows a block diagram of an image communication system according to the first embodiment. The image communication system 10 includes an image processing device 20 and an image browsing device 40 connected to each other via a given network (communication network) 12. The network 12 includes the Internet, a telephone line, a mobile communication network, a dedicated line, and the like.
[0046]
The image processing device 20 constantly transmits the image data of the captured image via the network 12. Further, the image processing device 20 detects that the captured image has changed with reference to the reference image, and outputs an image change detection signal indicating that the image has changed via the network 12 or another network different from the network 12. To the image browsing device 40. When receiving the image change detection signal from the image processing device 20, the image browsing device 40 acquires the image data transmitted to the network 12 by the image processing device 20. Thus, the image browsing device 40 can receive the image immediately after the change of the image acquired by the image processing device 20.
[0047]
When the image communication system 10 is applied to the security system described above, the image processing device 20 has a function of a monitoring camera, and the image browsing device 40 has a function of a monitoring device.
[0048]
FIG. 2 shows a functional block diagram of the image processing device 20 according to the first embodiment. The image processing device 20 includes an image capture unit 22, a first storage unit 24, an image change detection unit 26, and a transmission unit 27. The transmission unit 27 includes an image data transmission unit 28 and an image change detection signal transmission unit 29.
[0049]
The image capturing unit 22 periodically captures an image. The function of the image capturing unit 22 is realized by a Web camera.
[0050]
The first storage unit 24 stores reference image data that is image data of the reference image. The function of the first storage unit 24 is realized by a volatile memory such as a DRAM (Dynamic Random Access Memory), a nonvolatile memory such as an SRAM (Static Random Access Memory), a flash memory, or a ROM (Read Only Memory). You.
[0051]
The image change detection unit 26 compares the acquired image data, which is the image data of the acquired image captured by the image capturing unit 22, with the reference image data. Then, the image change detection unit 26 detects whether or not the acquired image has changed based on the reference image based on the comparison result. The image change detection unit 26 outputs (changes) an image change detection signal when detecting that the acquired image has changed. The image change detection unit 26 does not output (does not change) an image change detection signal when it does not detect that the acquired image has changed (when it is detected that no change has occurred). The function of the image change detection unit 26 is realized by controlling hardware such as an application-specific integrated circuit (ASIC) or a CPU (Central Processing Unit) using firmware or software.
[0052]
The transmission unit 27 transmits the acquired image data and the image change detection signal via the same network 12 or another network different from the network 12. For example, when the image data transmission unit 28 transmits the acquired image data via the Internet, the image change detection signal transmission unit 29 transmits the image change detection signal via the Internet or a telephone line. Note that the acquired image data transmitted by the image data transmitting unit 28 may be temporarily stored in a buffer (not shown) after being captured by the image capturing unit 22. Each unit of the transmission unit 27 can perform a given protocol process with the image browsing device 40 connected via a network. The function of each unit of the transmission unit 27 is realized by controlling hardware such as an ASIC and a communication IC with firmware and software.
[0053]
Such an image processing device 20 has a CPU (not shown) and a memory (not shown). In the image processing apparatus 20, the following control is performed by the CPU that has performed the processing according to the program stored in the memory.
[0054]
FIG. 3 shows an example of an operation flow of the image processing apparatus according to the first embodiment.
[0055]
In the image processing device 20, first, the reference image is captured by the image capturing unit 22 (step S10). The captured reference image is stored in the first storage unit 24 (Step S11).
[0056]
Thereafter, in the image processing device 20, the image capturing unit 22 periodically captures the image. First, a new image is captured by the image capturing unit 22 as an acquired image (step S12).
[0057]
The acquired image is compared with the reference image stored in the first storage unit 24 (Step S13). That is, by comparing the acquired image data that is the image data of the acquired image with the reference image data that is the image data of the reference image, it is detected whether the two images match.
[0058]
When it is determined that the two images do not match (step S13: Y), the image data of the acquired image (acquired image data) is transmitted from the image data transmitting unit 28 to the image browsing device 40 via the network 12 ( Step S14). Further, the image change detection unit 26 outputs an image change detection signal indicating that the acquired image has changed with reference to the reference image. The image change detection signal is transmitted by the image change detection signal transmitting unit 29 via the network 12 or another network different from the network 12 (step S15).
[0059]
When the process is completed (step S16: Y), a series of processes is completed (end), but when the process is not completed (step S16: N), the process returns to step S12. In step S13, when it is determined that the two images do not match (step S13: N), the process similarly returns to step S12.
[0060]
The image processing device 20 transmits the acquired image data to the image browsing device 40 via the network 12 and outputs an image change detection signal indicating that the acquired image has changed based on the reference image. Send to 40. At this time, the image processing device 20 can transmit the image change detection signal via the network 12 or a network separate from the network 12. In this way, the receiving side of the changed image data does not need to constantly monitor for the presence or absence of a change in the captured image, and displays the image after receiving a notification that the image has changed by the image change detection signal. Can be output. Therefore, it is possible to reduce the burden of monitoring images received via the network.
[0061]
FIG. 4 is a block diagram illustrating a specific configuration example of the image processing device 20. The image processing device 20 can include, for example, a camera 31. The image captured by the camera 31 is stored in the RAM 32 as image data in, for example, a JPEG (Joint Photographic Coding Experts Group) format. The CPU 34 can transmit the image data stored in the RAM 32 via the network 12 according to a program stored in a built-in ROM.
[0062]
The sensor 36 is constituted by, for example, a CMOS sensor. The sensor 36 stores reference image data taken in advance. The sensor 36 compares the reference image data with the acquired image data stored in the RAM 32. Then, when it is determined that the acquired image has changed with reference to the reference image, the image data of the acquired image is stored in the nonvolatile memory 37.
[0063]
The CPU 34 has a real-time clock (Real Time Clock: RTC) 35. The RTC 35 has a clock function and a calendar function, and counts the current date and time. When the image data of the acquired image is stored in the nonvolatile memory 37 by the sensor 36, the date and time when the acquired image is acquired are stored in the nonvolatile memory 37 in association with the image data. I have. Further, in the image data of the acquired image stored in the RAM 32 by the CPU 34, the date and time when the acquired image was acquired are transmitted via the network 12 in association with the image data.
[0064]
The image data of the acquired image stored in the non-volatile memory 37 may be transmitted by the CPU 34 as changed image data via the network 12.
[0065]
As described above, the image processing apparatus 20 in FIG. 4 can transmit the image captured by the camera 31 to the network 12 as it is, and when the sensor 36 determines that the acquired image has changed based on the reference image. An image change detection signal indicating that the acquired image has changed can be transmitted to the network 12.
[0066]
FIG. 5 shows a functional block diagram of the image browsing device 40 according to the first embodiment. The image browsing device 40 includes a receiving unit 42, a storage unit 44, a display unit 46, and a control unit 48. The receiving unit 42 includes an image change detection signal receiving unit 50 and an image data receiving unit 52.
[0067]
Further, in order to obtain image data transmitted by the image processing device 20 connected via the network 12, the image data receiving unit 52 is uniquely assigned to the image processing device 20 that is the transmission source of the image data. The image processing device 20 can be accessed using the address information. Therefore, the image browsing device 40 can include the image data transmission source address storage unit 54. The address information is information uniquely assigned to each device connected to the network 12. The address information includes a domain name, an IP address, and the like.
[0068]
The image change detection signal receiving unit 50 receives an image change detection signal from the image processing device 20 via the network 12 or another network different from the network 12.
[0069]
The image data receiving unit 52 is connected to a network to which the image change detection signal has been transmitted or another network, provided that the image change detection signal has been received by the image change detection signal receiving unit 50. A communication path with the image processing device 20 is established, and image data from the image processing device 20 is received. A communication path between the image processing apparatus 20 and the image processing apparatus 20 by the image data receiving unit 52 is specified by the address information of the image processing apparatus 20 stored in the image data transmission source address storage unit 54 in advance, and a given protocol is specified. It is established by performing processing. Note that the image browsing device 40 may receive the address information of the image processing device 20 via the network 12 or a network different from the network 12 without including the image data transmission source address storage unit 54. In this case, the image data receiving unit 52 acquires the acquired image data using the received address information.
[0070]
The functions of the receiving unit 42 including the image change detection signal receiving unit 50 and the image data receiving unit 52 are realized by controlling hardware such as an ASIC and a communication IC with firmware and software.
[0071]
The storage unit 44 stores the image data received by the image data receiving unit 52 of the receiving unit 42. The function of the storage unit 44 is realized by a volatile memory such as a DRAM or a nonvolatile memory such as an SRAM or a flash memory.
[0072]
The display unit 46 performs display output based on the image data stored in the storage unit 44. The function of the display unit 46 is a CRT (Cathode-Ray Tube) or an LCD (Liquid Crystal).
(Display).
[0073]
The control unit 48 controls the reception unit 42, the storage unit 44, and the display unit 46. The control unit 48 has a CPU, a RAM, or a ROM. The CPU that has performed the processing according to the program stored in the RAM or the ROM can control each unit of the receiving unit 42, the storage unit 44, and the display unit 46.
[0074]
FIG. 6 shows an example of a processing flow of the control unit 48 of the image browsing device 40. The control unit 48 first monitors the reception of the image change detection signal in the image change detection signal receiving unit 50 of the receiving unit 42 (Step S20). That is, Step S20 is repeated until the image change detection signal is received by the image change detection signal receiving unit 50 (Step S20: N).
[0075]
When the image change detection signal is received (step S20: Y), the image data receiving unit 52 controlled by the control unit 48 uses, for example, the address information stored in the image data transmission source address storage unit 54 to transmit the network 12 In step S21, an image processing apparatus 20 uniquely determined is specified, and a connection process for establishing a communication path with the image processing apparatus 20 is performed. Then, the acquired image data captured by the image processing device 20 is received (step S22).
[0076]
Thereafter, the control unit 48 stores the image data received by the image data receiving unit 52 in the storage unit 44 (Step S23). Subsequently, the control unit 48 supplies the image data stored in the storage unit 44 to the display unit 46 (Step S24). The display unit 46 performs a display output based on the supplied image data.
[0077]
Subsequently, when image data is received by the image data receiving unit 52 (Step S25: Y), the process returns to Step S22. On the other hand, in step S25, when the image data receiving unit 52 does not subsequently receive image data (step S25: N), a process of disconnecting the communication path with the image processing apparatus 20 is performed (step S26).
[0078]
When the process is completed (step S27: Y), a series of processes is completed (end), but when the process is not completed (step S27: N), the process returns to step S20.
[0079]
As described above, the image browsing device 40 establishes a communication connection with the image processing device 20 on condition that the image change detection signal is received from the image processing device 20, and acquires the image captured by the image processing device 20. Image data can be received and displayed and output. Therefore, the monitoring load on the display unit of the image browsing device 40 can be significantly reduced. Therefore, the image browsing device 40 can reliably grasp the state of the captured image after the change.
[0080]
1.1 Modifications
1.1.1 First Modified Example
The reference image data stored in the first storage unit may be updated after a given period. The image processing device according to the first modification can update the reference image data stored in the first storage unit.
[0081]
FIG. 7 shows a functional block diagram of an image processing apparatus according to the first modification. Here, the same parts as those of the image processing apparatus 20 shown in FIG.
[0082]
The image processing apparatus 60 according to the first modification differs from the image processing apparatus 20 shown in FIG. 2 in that the first storage unit 24 stores acquired image data at a given cycle. Here, the image processing device 60 includes an image change detection unit 62 that detects a change in the acquired image, similarly to the image change detection unit 26 illustrated in FIG.
[0083]
In the image processing device 60, the acquired image data captured by the image capturing unit 22 is stored as reference image data in a first storage, on condition that the image change detecting unit 62 detects that the obtained image has not changed. It is stored in the unit 24. The acquired image data may be stored in the first storage unit 24 every time an image is captured, or the acquired image data may be stored in the first storage unit 24 after a given period. You may.
[0084]
Thus, even when the brightness of the place where the image is captured by the image capturing unit 22 changes from evening to night, it is possible to suppress a decrease in the detection accuracy of the change between the acquired image and the reference image.
[0085]
The image processing device 60 also has a CPU (not shown) and a memory (not shown). In the image processing apparatus 60, the following control is performed by the CPU that has performed the processing according to the program stored in the memory.
[0086]
FIG. 8 shows an example of an operation flow of the image processing device 60 in the first modification. In the image processing device 60, first, the reference image is captured by the image capturing unit 22 (step S30). The captured reference image is stored in the first storage unit 24 (Step S31).
[0087]
Thereafter, in the image processing device 60, the image capturing unit 22 periodically captures the image. First, a new image is captured by the image capturing unit 22 as an acquired image (Step S32).
[0088]
The acquired image is compared with the reference image stored in the first storage unit 24 (Step S33). That is, by comparing the acquired image data that is the image data of the acquired image with the reference image data that is the image data of the reference image, it is detected whether the two images match.
[0089]
When it is determined that the two images do not match (step S33: Y), the image data of the acquired image is transmitted by the image data transmitting unit 28 via the network 12 (step S34). Further, an image change detection signal indicating that the acquired image has changed is transmitted by the image change detection signal transmitting unit 29 via the network 12 or another network different from the network 12 with reference to the reference image (step S35). .
[0090]
When the process is completed (step S36: Y), a series of processes is completed (end), but when the process is not completed (step S36: N), the process returns to step S32.
[0091]
When it is determined in step S33 that the two images do not match (step S33: N), the acquired image data is stored in the first storage unit 24 (step S37), and the process returns to step S32. That is, in the first storage unit 24, the stored reference image data is overwritten. At the time of detecting an image change of the acquired image captured at the next timing, the reference image data is used for the acquired image data overwritten in step S37. In step S37, it is desirable that the acquired image data be overwritten only at the update timing of the given reference image.
[0092]
By updating the reference image at a given cycle, such an image processing device 60 can minimize a decrease in the detection accuracy of the image change with respect to a change in the environment of the place where the image is captured. it can.
[0093]
1.1.2 Second Modification
Further, an infrared imaging device may be provided in the image capturing unit, and a change in the image may be detected by an infrared image generated by detecting the infrared by performing on / off control of the function of the infrared imaging device. The image processing apparatus according to the second modification can detect a change in an infrared image captured by an infrared imaging device in addition to the above-described detection of an image change.
[0094]
FIG. 9 shows a functional block diagram of an image processing apparatus according to the second modification. Here, the same parts as those of the image processing apparatus 20 shown in FIG.
[0095]
An image processing apparatus 70 according to the second modification differs from the image processing apparatus 20 shown in FIG. 2 in that an image capturing unit includes an infrared imaging device. That is, the image capturing unit 72 of the image processing device 70 includes the infrared imaging device 73. The infrared imaging device 73 detects an infrared ray emitted from the subject and generates an image whose display color changes according to the wavelength of the infrared ray.
[0096]
The function of the infrared imaging device 73 is turned on or off according to the setting contents of the mode setting unit 74. The mode setting section 74 is set to a normal mode or an infrared mode by a CPU (not shown).
[0097]
In the infrared mode, the infrared imaging device 73 is turned on. When the infrared imaging device 73 is in the on state, the infrared image of the subject can be detected to generate an infrared image.
[0098]
In the normal mode, the infrared imaging device 73 is turned off. When the infrared imaging device 73 is in the off state, the image capturing unit 72 can generate a normal image as shown in FIG.
[0099]
The image processing device 70 also has a CPU (not shown) and a memory (not shown). Then, in the image processing device 70, the following control is performed by the CPU according to the program stored in the memory.
[0100]
FIG. 10 shows an example of an operation flowchart of the image processing apparatus according to the second modification. First, it is determined whether or not the shooting environment by the image capturing unit 72 is bright (step S40). The brightness of the shooting environment is measured by, for example, an illuminometer. Then, it is determined whether the photographic environment is bright by determining whether the illuminance measured by the illuminometer is larger or smaller than a given illuminance reference value.
[0101]
When it is determined that the shooting environment is bright (step S40: Y), the mode setting unit 74 sets the normal mode. In the image processing apparatus 70, the reference image is captured in the normal mode by the image capturing unit 72 (step S41). The captured reference image is stored in the first storage unit 24 (Step S42).
[0102]
After being stored in the first storage unit 24, the process waits for a given wait time (step S43). The wait time can be, for example, 1 minute to 5 minutes. By doing so, it is possible to prevent a person who has installed or adjusted the image capturing unit 72 after capturing the reference image from appearing in a subsequently captured image and being detected as an image change. . The weight process in step S43 can be performed also in FIG. 3 or FIG.
[0103]
Thereafter, in the image processing apparatus 70, the image capturing section 72 periodically captures the image. First, a new image is captured as an acquired image by the image capturing unit 72 (step S44).
[0104]
The acquired image is compared with the reference image stored in the first storage unit 24 (Step S45). That is, by comparing the acquired image data that is the image data of the acquired image with the reference image data that is the image data of the reference image, it is detected whether the two images match.
[0105]
When it is determined that the two images do not match (step S45: Y), the image data of the acquired image is transmitted by the image data transmitting unit 28 via the network (step S46). Further, an image change detection signal indicating that the acquired image has changed based on the reference image is transmitted to the image browsing device via the network 12 or another network different from the network 12 (step S47).
[0106]
When the process is completed (step S48: Y), a series of processes is completed (end), but when the process is not completed (step S48: N), the process returns to step S44. When it is determined in step S45 that the two images do not match (step S45: N), the process returns to step S44.
[0107]
On the other hand, when it is determined in step S40 that the shooting environment is not bright (step S40: N), the mode setting unit 74 sets the mode to the infrared mode. In the image processing device 70, the infrared imaging device 73 of the image capturing unit 72 is turned on (step S49), and the infrared image is captured. That is, a reference image, which is an infrared image, is captured (step S50). The captured reference image is stored in the first storage unit 24 (Step S51).
[0108]
After being stored in the first storage unit 24, the process waits for a given wait time (step S52). The wait time can be, for example, 1 minute to 5 minutes.
[0109]
Thereafter, in the image processing apparatus 70, the image capturing section 72 periodically captures the infrared image. In the infrared mode, for example, the function of the infrared imaging device 73 is turned on only during a period during which an image is captured. Therefore, first, the mode setting unit 74 sets the infrared mode. In the image processing device 70, the infrared imaging device 73 of the image capturing section 72 is turned on (step S53), and an infrared image is captured (step S54).
[0110]
The acquired image data of the captured infrared image is compared with the reference image stored in the first storage unit 24 (Step S55).
[0111]
When it is determined that the two images do not match (step S55: Y), the infrared image captured as the acquired image is transmitted via the network (step S56). Further, an image change detection signal indicating that the acquired image has changed is transmitted via the network 12 or another network different from the network 12 (step S57).
[0112]
When the process ends (step S58: Y), a series of processes ends (end), but when the process does not end (step S58: N), the process returns to step S53. When it is determined in step S55 that the two images do not match (step S55: N), the process returns to step S53.
[0113]
Note that the image processing device 70 may periodically update the reference image, which is an infrared image, stored in the first storage unit 24, as described with reference to FIGS.
[0114]
Such an image processing device 70 can suppress a decrease in detection accuracy of an image change with respect to a change in brightness of a shooting environment.
[0115]
1.2 Configuration of Image Change Detection Unit
Next, a configuration example of the image change detection units 26 and 62 will be specifically described.
[0116]
1.2.1 First Configuration Example
FIG. 11 is a diagram illustrating the operation of the image change detection unit in the first configuration example. Here, a description will be given assuming that the image data acquired from the image capturing unit is in the RGB format, but the present invention is not limited to this. In image data in the RGB format, each pixel is represented by an RGB primary color signal.
[0117]
In the first configuration example, the acquired image data in the RGB format is converted into image data including a Y component (luminance component), a Cb component, and a Cr component. Then, the image change detection unit compares the Cb component of the acquired image data with the Cb component of the reference image data. Alternatively, the image change detection unit compares the Cr component of the acquired image data with the Cb component of the reference image data. When the Cb component is used as the first color difference component, the Cr component can be called the second color difference component. When the Cb component is used as the second color difference component, the Cr component can be called the first color difference component.
[0118]
Thus, by comparing only one color difference component, it is possible to reduce the data amount and the processing load. When the configuration is such that only the Cb component of the reference image data and the acquired image data is compared, it is possible to accurately detect a change in an image captured in a dark shooting environment.
[0119]
FIG. 12 shows a functional block configuration example of the image change detection unit in the first configuration example. The image change detection unit 75 in the first configuration example includes at least an image data comparison unit 77. When the format of the obtained image data is the RGB format, the image data format conversion unit 76 is further included. When the format of the acquired image data is a format including the luminance component and the first and second color difference components, the image data format converter 76 may be omitted.
[0120]
The functions of the image data format conversion unit 76 and the image data comparison unit 77 are realized by a combination circuit, an ASIC, or a CPU controlled by software.
[0121]
The image data format converter 76 converts the acquired image data in the RGB format into image data in a format having a Y component, a Cb component, and a Cr component. That is, the primary color signal is converted into a luminance component and first and second color difference components on a pixel-by-pixel basis.
[0122]
The image data comparing unit 77 compares the acquired image data with the reference image data for the same type of color difference component. When it is determined that the two image data match for the color difference component, no image change detection signal is output (the image change detection signal is not changed). On the other hand, when it is determined that the two image data do not match (different) with respect to the color difference component, an image change detection signal is output (the image change detection signal is changed).
[0123]
1.2.2 Second configuration example
FIG. 13 is a diagram illustrating the operation of the image change detection unit in the second configuration example. In the second configuration example, a part of the acquired image is set as a comparison area, and image data in the comparison area of the acquired image is compared with image data of an area corresponding to the comparison area in the image area of the reference image data. You.
[0124]
It is assumed that the image area of the acquired image data is a rectangular area represented by a start address SA0 and an end address EA0. In the second configuration example, image data of a rectangular extraction area represented by a start address SA and an end address EA is extracted. Then, the two image data are compared with the extracted area as a comparison area.
[0125]
As described above, by reducing the area to be compared with the image area, it is possible to reduce the data amount and the processing load.
[0126]
FIG. 14 illustrates a functional block configuration example of the image change detection unit in the second configuration example. The image change detection unit 80 in the second configuration example includes an acquired image data extraction unit 82, a reference image data extraction unit 84, and an image data comparison unit 86.
[0127]
The functions of the acquired image data extraction unit 82, the reference image data extraction unit 84, and the image data comparison unit 86 are realized by a combination circuit, an ASIC, or a CPU controlled by software.
[0128]
The acquired image data extraction unit 82 extracts the image data of the comparison area from the acquired image data. The acquired image data has a rectangular area specified by the start address SA0 and the end address EA0 as an image area. The comparison area is a rectangular area specified by the start address SA and the end address EA. The start address SA and end address EA of the comparison area are specified by extraction area specification data specified by a CPU (not shown).
[0129]
The reference image data extraction unit 84 extracts the image data of the comparison area from the reference image data. The reference image data has a rectangular area specified by the start address SA0 and the end address EA0 as an image area. The comparison area is a rectangular area specified by the start address SA and the end address EA. In the reference image data extraction unit 84, a comparison area is specified by the above-described extraction area designation data.
[0130]
The image data comparison unit 86 compares the image data of the comparison area specified by the extraction area designation data by the acquired image data extraction unit 82 with the image data of the area corresponding to the comparison area among the image areas of the reference image data. I do. If it is determined that both image data match, for example, for the same type of color difference component, no image change detection signal is output. On the other hand, when it is determined that the two image data do not match for the color difference component, an image change detection signal is output.
[0131]
1.2.3 Third configuration example
FIGS. 15A and 15B are diagrams illustrating the operation of the image change detection unit in the third configuration example. FIG. 15A shows an image at the time of capturing the reference image. FIG. 15B shows an image at the time of capturing an acquired image.
[0132]
It is assumed that the image capturing unit captures an image inside the room having the door 90. The image data of the door 90 is so-called dark data. Dark data is data with a small luminance value. Therefore, as shown in FIG. 15A, the center position (for example, the focal point 92 of the image capturing unit) of the area where the image change is detected is brought to the door 90.
[0133]
Next, when the door 90 is opened as shown in FIG. 15 (B), the luminance at the center position of the area where the image change is detected changes significantly. Outside the room, even at night, there is generally moonlight, outside lights and hallway lights outside the room. Therefore, the detection accuracy of a change in an image can be improved even at night. This is because dark data was adopted as the reference image data.
[0134]
FIG. 16 shows a functional block configuration example of the image change detection unit in the third configuration example. The image change detection unit 100 in the third configuration example includes at least an image data comparison unit 104. When the format of the acquired image data is the RGB format, the image data format conversion unit 102 is further included. When the format of the acquired image data is a format including the luminance component and the first and second color difference components, the image data format conversion unit 102 may be omitted.
[0135]
The functions of the image data format conversion unit 102 and the image data comparison unit 104 are realized by a combination circuit, an ASIC, or a CPU controlled by software.
[0136]
The image data format conversion unit 102 converts the acquired image data in the RGB format into image data in a format having a Y component, a Cb component, and a Cr component.
[0137]
At least the luminance component is stored as reference image data. The average value obtained by averaging the luminance component values of the pixels of the reference image data is smaller than the average value obtained by averaging the luminance component values of the pixels of the acquired image data when an image change is detected. Here, the average value is obtained by averaging the luminance components of a plurality of pixels of the image data.
[0138]
For example, most of the image area of the reference image is an image having a small luminance component value, such as a door 90 shown in FIG. Thus, when the door 90 is opened as shown in FIG. 15B, an acquired image having a luminance component larger than the luminance component value of the reference image is obtained by external light.
[0139]
The image data comparing unit 104 compares the luminance component of each pixel of the reference image data with the luminance component of each pixel of the acquired image data. Then, for each pixel, the rate of change of the value of the luminance component of the acquired image data with respect to the value of the luminance component of the reference image data is obtained, and the average value of these rates of change is equal to or less than a positive change reference value (first reference value). Sometimes, the image change detection signal is not output. On the other hand, when the average value of the change rate exceeds the above-mentioned change reference value, an image change detection signal is output.
[0140]
The image data comparison unit 104 included in the image change detection unit 100 may compare the luminance component of the acquired image data with the luminance component of the reference image data for each pixel. In this case, the image data comparing unit 104 detects that the acquired image has changed on the condition that the absolute value of the luminance component of the acquired image data has changed with reference to the absolute value of the luminance component of the reference image data. More specifically, the image data comparing unit 104 determines that the acquired image has changed on the condition that the absolute value of the luminance component of the acquired image data has increased based on the absolute value of the luminance component of the reference image data. To detect.
[0141]
By employing a dark image as the reference image in this way, a bright image is obtained when the image changes, so that the detection accuracy of the image change can be improved. Here, the bright image refers to an image in which the value of the luminance component is larger in a part or the whole of the dark image.
[0142]
Also, it can be said that as a dark image used as a reference image, the lower the brightness, the larger the change rate of the color difference component when the image changes.
[0143]
1.2.4 Fourth configuration example
FIG. 17 is a diagram illustrating the operation of the image change detection unit in the fourth configuration example. In the fourth configuration example, a frequency component obtained by performing Discrete Cosine Transform (DCT) on the Y component, the Cb component, and the Cr component of the reference image and the acquired image is used. When the image change is large, a high frequency component to a low frequency component among the frequency components obtained by DCT greatly change. On the other hand, when the image change is very small, only the high frequency component of the frequency components obtained by the DCT greatly changes, and the low frequency component hardly changes.
[0144]
Therefore, in the fourth configuration example, for example, when the acquired image data is in the RGB format, first, each of the RGB components of the acquired image data is converted into a Y component, a Cb component, and a Cr component. DCT is performed on the Y component of the acquired image data, and data of each frequency component is obtained. From the obtained data, only data of a frequency component lower than a given Y component threshold (first threshold) is extracted. Similarly, as for the reference image data, of the frequency component data obtained by DCT, only data of frequency components lower than the Y component threshold value is extracted. Then, data of frequency components obtained by DCT of both image data and lower than the Y component threshold are compared.
[0145]
Similarly, the Cb component and the Cr component of both image data are compared between frequency components lower than each component threshold.
[0146]
Then, based on the comparison result of each component, it is detected whether or not both images match. This makes it possible to greatly improve the detection accuracy of the image change. Further, by comparing not only the R component, the G component, and the B component but also the frequency components obtained by DCT with respect to the Y component, the Cb component, and the Cr component, it is possible to accurately detect the brightness of an image.
[0147]
FIG. 18 shows an example of a functional block configuration of the image change detection unit in the fourth configuration example. The image change detection unit 110 in the fourth configuration example includes at least the DCT calculation units 112-Y, 112-Cb, 112-Cr, the data extraction units 114-Y, 114-Cb, 114-Cr, and the image data comparison unit 116. Including. Image data comparing section 116 includes a Y component comparing section 117-Y, a Cb component comparing section 117-Cb, and a Cr component comparing section 117-Cr. When the format of the acquired image data is the RGB format, the image data format conversion unit 118 is further included. When the format of the acquired image data is a format including a luminance component and a chrominance component, the image data format conversion unit 118 may be omitted.
[0148]
Each function of the DCT operation units 112-Y, 112-Cb, 112-Cr, the data extraction units 114-Y, 114-Cb, 114-Cr, the image data comparison unit 116, and the image data format conversion unit 118 includes a combination circuit, It is realized by an ASIC or a CPU controlled by software.
[0149]
The image data format converter 118 converts the acquired image data in the RGB format into image data in a format having a Y component, a Cb component, and a Cr component.
[0150]
The DCT operation unit 112-Y outputs data of each frequency component obtained by performing DCT on the Y component of the acquired image data that has been format-converted by the image data format conversion unit 118.
[0151]
The DCT operation unit 112-Cb outputs data of each frequency component obtained by performing DCT on the Cb component of the acquired image data that has been format-converted by the image data format conversion unit 118.
[0152]
The DCT operation unit 112-Cr outputs data of each frequency component obtained by performing DCT on the Cr component of the acquired image data that has been format-converted by the image data format conversion unit 118.
[0153]
The data of each frequency component obtained by DCT for the Y component from the DCT operation unit 112-Y and the threshold Y-th (first threshold) for the Y component are input to the data extraction unit 114-Y. The data extraction unit 114-Y extracts frequency component data lower than the Y component threshold Y-th from the data of each frequency component obtained by DCT for the Y component from the DCT calculation unit 112-Y.
[0154]
The data of each frequency component obtained by DCT for the Cb component from the DCT operation unit 112-Cb and the threshold Cb-th (second threshold) for the Cb component are input to the data extraction unit 114-Cb. The data extraction unit 114-Cb extracts data of frequency components lower than the Cb component threshold Cb-th from the data of each frequency component obtained by DCT for the Cb component from the DCT calculation unit 112-Cb.
[0155]
The data of each frequency component obtained by DCT for the Cr component from the DCT operation unit 112-Cr and the threshold Cr-th (third threshold) for the Cr component are input to the data extraction unit 114-Cr. The data extraction unit 114-Cr extracts data of frequency components lower than the threshold Cr-th for the Cr component from the data of each frequency component obtained by DCT for the Cr component from the DCT calculation unit 112-Cr.
[0156]
The image data comparing unit 116 stores data obtained similarly for the Y component, Cb component, and Cr component of the reference image data, and data extracted by the data extracting units 114-Y, 114-Cb, and 114-Cr. Is entered. Regarding the reference image data, among the frequency components obtained by performing DCT on the Y component, the Cb component, and the Cr component, respectively, the threshold value for the Y component, the threshold value for the Cb component, and the threshold value for the Cr component, respectively. Data of a frequency component lower than Cr-th is input.
[0157]
Then, a comparison is made for each component, and it is determined based on the comparison result of each component whether the two images match.
[0158]
More specifically, in the image data comparing unit 116, the Y component comparing unit 117-Y (luminance component comparing unit) sets the threshold value Y for the Y component among the frequency components obtained by DCT of the Y component of the acquired image data. A frequency component lower than −th (first threshold) is compared with a frequency component lower than a threshold Y-th for the Y component among frequency components obtained by DCT of the Y component of the reference image data. In addition, the Cb component comparison unit 117-Cb (first color difference component comparison unit) performs a DCT on the Cb component (first color difference component) of the acquired image data, and the threshold Cb-th for the Cb component among the frequency components obtained by DCT. A frequency component lower than the (second threshold) is compared with a frequency component lower than the Cb component threshold Cb-th among the frequency components obtained by DCT of the Cb component of the reference image data. Further, the Cr component comparing unit 117-Cr (second color difference component comparing unit) performs a DCT on the Cr component (second color difference component) of the acquired image data, and the threshold Cr-th for the Cr component among the frequency components obtained by DCT. A frequency component lower than (third threshold) is compared with a frequency component lower than the Cr component threshold Cr-th among the frequency components obtained by DCT of the Cr component of the reference image data. Then, based on the comparison results of the Y component comparison unit 117-Y, the Cb component comparison unit 117-Cb, and the Cr component comparison unit 117-Cr, the image data comparison unit 116 changes the acquired image based on the reference image. And outputs an image change detection signal indicating the fact.
[0159]
The image data comparing unit 116 determines that the two images match, for example, when all the comparison results of the comparing units match, and does not output the image change detection signal. On the other hand, for example, when any one of the comparison results of the comparison units does not match, the image data comparison unit 116 determines that the two images do not match, and outputs an image change detection signal. Further, the image data comparing unit 116 may determine the coincidence of the two images based on the number of comparison results of each comparing unit. Alternatively, the image data comparing unit 116 may determine the coincidence of the two images by weighting the comparison result of each comparing unit.
[0160]
2. Second embodiment
In the first embodiment, when an image change is detected, the image after the change is transmitted to the image browsing device. However, the present invention is not limited to this.
[0161]
FIG. 19 is a block diagram of an image communication system according to the second embodiment. The image communication system 200 includes an image processing device 210 and an image browsing device 230 connected to each other via a given network (communication network) 202.
[0162]
The image processing device 210 transmits the captured image as acquired image data via the network 202, detects that the image has changed with reference to the reference image, and detects an image change indicating that the captured image has changed. The detection flag is transmitted via the network 202. The image processing device 210 can transmit a transmission packet including the acquired image data and the image change detection flag via the network 202, for example.
[0163]
The image change detection flag is generated in the same manner as the image change detection unit according to the first embodiment.
[0164]
The image browsing device 230 monitors packets on the network 202. More specifically, when a transmission packet from the image processing apparatus 210 is captured, and when the image change detection flag notifies that the image has changed, the acquired image data included in the transmission packet is extracted and displayed and output. It can be performed.
[0165]
Accordingly, cost can be reduced by a very simple configuration and control of packet generation by the image processing device 210 and packet monitoring by the image browsing device 230, and image changes in the image browsing device 230 can be reliably performed. I can figure it out.
[0166]
FIG. 20 shows a functional block diagram of an image processing device 210 according to the second embodiment. Here, the same parts as those of the image processing apparatus 20 shown in FIG. 2 are denoted by the same reference numerals, and the description will be appropriately omitted.
[0167]
The image processing device 210 includes an image capture unit 22, a first storage unit 24, an image change detection unit 212, a transmission data generation unit 214, and a transmission unit 216.
[0168]
The image change detection unit 212 has the same function as the above-described image change detection units 26 and 62. The image change detection unit 212 can output an image change detection flag indicating that the acquired image has changed with reference to the reference image. For example, when the image change detection flag is “1”, it indicates that the acquired image has been changed, and when the image change detection flag is “0”, it indicates that the acquired image has not been changed.
[0169]
The transmission data generation unit 214 generates transmission data (communication data in a broad sense) including the acquired image data captured by the image capturing unit 22 and the image change detection flag from the image change detection unit 212.
[0170]
FIG. 21 shows a configuration example of transmission data. The transmission data has a predetermined format. For example, the transmission data includes at least a header field in which header information is set and a data field in which acquired image data is set. The transmission data has an empty field (empty area) in which header information, acquired image data, and the like are not set.
[0171]
The header information is communication control information such as a transmission destination and a transmission source of transmission data. An image change detection flag is set in the empty field.
[0172]
The transmission data may be fixed-length data or variable-length data. It suffices that the information (at least the acquired image data and the image change detection flag) of each field of the transmission data is commonly recognized by the transmission side and the reception side. The transmission data generation unit 214 generates a transmission packet having the configuration shown in FIG.
[0173]
In FIG. 20, transmission section 216 transmits the transmission packet generated by transmission data generation section 214 via a network.
[0174]
The function of the transmission data generation unit 214 is realized by controlling hardware such as an ASIC and a CPU with firmware and software. The function of the transmission unit 216 is realized by controlling hardware such as an ASIC and a communication IC with firmware and software.
[0175]
Such an image processing device 210 has a CPU (not shown) and a memory (not shown). Then, in the image processing device 210, the following control is performed by the CPU according to the program stored in the memory.
[0176]
FIG. 22 illustrates an example of a control flow of the image processing apparatus according to the second embodiment.
[0177]
In the image processing device 210, first, the reference image is captured by the image capturing unit 22 (step S100). The captured reference image is stored in the first storage unit 24 (Step S101).
[0178]
Thereafter, in the image processing device 210, the image capturing unit 22 periodically captures the image. First, a new image is captured by the image capturing unit 22 as an acquired image (step S102). The acquired image is compared with the reference image stored in the first storage unit 24, and the image change detection unit 212 generates an image change detection flag (Step S103).
[0179]
Then, the transmission data generation unit 214 generates a transmission packet in which the acquired image data and the image change detection flag are set (Step S104).
[0180]
When the process ends (step S105: Y), a series of processes ends (end), but when the process does not end (step S105: N), the process returns to step S102.
[0181]
In such an image processing device 210, the transmission in which the image data of the acquired image periodically captured and the image change detection flag indicating that the acquired image has been changed with reference to the reference image are set. Data is generated. Then, the transmission data is transmitted via the network. By doing so, in the image processing device 210, there is no need to change the processing flow in accordance with the presence or absence of image change detection, so that the configuration and control of the image processing device 210 can be simplified. Further, the image browsing device 230 can acquire the changed image only by monitoring the transmission data from the image processing device 210 on the network.
[0182]
FIG. 23 shows a functional block diagram of an image browsing device 230 according to the second embodiment. Here, the same parts of the image browsing apparatus 230 as those of the image browsing apparatus 40 shown in FIG.
[0183]
The image browsing device 230 includes a receiving unit 232, an analyzing unit 234, an extracting unit 236, a storage unit 44, a display unit 46, and a control unit 238.
[0184]
The receiving unit 232 receives communication data transmitted from the image processing device 210 via the network 202. The communication data includes acquired image data, which is data of an acquired image captured by the image processing device 210, and an image change detection flag indicating that the acquired image has changed with reference to the reference image. The function of the receiving unit 232 is realized by controlling hardware such as an ASIC and a communication IC with firmware and software.
[0185]
The analysis unit 234 analyzes whether or not the acquired image has changed based on the image change detection flag included in the communication data received by the reception unit 232. When the image change detection flag included in the received communication data is “1”, the analysis unit 234 can determine that a change in the acquired image has been detected based on, for example, the reference image. When the image change detection flag included in the received communication data is “0”, the analysis unit 234 can determine that a change in the acquired image has not been detected based on, for example, the reference image.
[0186]
The extracting unit 236 extracts the acquired image data included in the communication data when the analysis unit 234 detects that the acquired image has changed.
[0187]
The functions of the analysis unit 234 and the extraction unit 236 are realized by a CPU controlled by software or firmware.
[0188]
The acquired image data extracted by the extraction unit 236 is stored in the storage unit 44.
[0189]
The control unit 238 controls the reception unit 232, the analysis unit 234, the extraction unit 236, the storage unit 44, and the display unit 46. The control unit 238 has a CPU, a RAM, or a ROM. The CPU that has performed the processing in accordance with the program stored in the RAM or the ROM can control the receiving unit 232, the analyzing unit 234, the extracting unit 236, the storing unit 44, and the display unit 46.
[0190]
FIG. 24 illustrates an example of a processing flow of the control unit 238 of the image browsing device 230. The control unit 238 first monitors reception of communication data transmitted from the image processing device 210 by the receiving unit 232 (step S120). That is, the receiving unit 232 repeats step S120 until communication data is received (step S120: N).
[0191]
When the receiving unit 232 receives the communication data from the image processing device 210 (step S120: Y), the control unit 238 refers to the image change detection flag included in the communication data by the analysis unit 234, and determines whether the acquired image is It is determined whether or not the change has been detected (step S121).
[0192]
As a result, when it is determined that a change in the acquired image has been detected (step S122: Y), the control unit 238 causes the extraction unit 236 to extract the acquired image data included in the communication data (step S123).
[0193]
Subsequently, the control unit 238 stores the acquired image data extracted by the extraction unit 2362 in the storage unit 44 (Step S124). Subsequently, the control unit 238 supplies the image data stored in the storage unit 44 to the display unit 46 (Step S125). The display unit 46 performs a display output based on the supplied image data.
[0194]
When the process is completed (step S126: Y), a series of processes is completed (end), but when the process is not completed (step S126: N), the process returns to step S120. When it is determined in step S122 that a change in the acquired image has not been detected (step S122: N), the process returns to step S120.
[0195]
As described above, the image browsing device 230 monitors the communication data including the obtained image data and the image change detection flag, and when the image change is detected, extracts the obtained image data included in the communication data, and displays and outputs the obtained image data. be able to. Therefore, in the image browsing device 230, the configuration and control for acquiring the changed image data can be simplified.
[0196]
Also in the image processing device 210 according to the second embodiment, the reference image can be updated periodically, similarly to the first modification of the first embodiment.
[0197]
Further, in the image processing device 210 according to the second embodiment, similarly to the second modification of the first embodiment, an image can be obtained by infrared rays.
[0198]
Note that the present invention is not limited to the above-described embodiment, and various modifications can be made within the scope of the present invention.
[0199]
The image communication system according to the first and second embodiments can be used for crime prevention, but is not limited to this. The present invention is applicable to a system including an image processing device that captures an image via a network, and an image browsing device that displays and outputs an image captured by the image processing device.
[0200]
In the above-described image browsing apparatus of the image communication system, the received image data is temporarily stored in the storage unit. However, the received image data may be supplied to the display unit as it is and a display output based on the image data may be performed. .
[0201]
In the above-described embodiment, a still image or a moving image may be transmitted as an image.
[0202]
Further, in the above-described embodiment, the format of the image including the Y component, the Cb component, and the Cr component has been described. However, the present invention is not limited to this. The image format may be another format determined from the Y component, the Cb component, and the Cr component.
[0203]
Further, in the invention according to the dependent claims of the present invention, a configuration in which some of the constituent elements of the dependent claims are omitted may be adopted. In addition, a main part of the invention according to one independent claim of the present invention can be made dependent on another independent claim.
[Brief description of the drawings]
FIG. 1 is a configuration block diagram of an image communication system according to a first embodiment.
FIG. 2 is a functional block diagram of the image processing apparatus according to the first embodiment.
FIG. 3 is a flowchart illustrating an operation example of the image processing apparatus according to the first embodiment.
FIG. 4 is a block diagram illustrating a specific configuration example of an image processing apparatus.
FIG. 5 is a functional block diagram of the image browsing apparatus.
FIG. 6 is a flowchart showing a processing example of a control unit of the image browsing device.
FIG. 7 is a functional block diagram of an image processing apparatus according to a first modification.
FIG. 8 is a flowchart showing an operation example of the image processing apparatus according to the first modification.
FIG. 9 is a functional block diagram of an image processing apparatus according to a second modification.
FIG. 10 is a flowchart showing an operation example of an image processing apparatus according to a second modification.
FIG. 11 is an explanatory diagram of the operation of the image change detection unit in the first configuration example.
FIG. 12 is a functional block diagram of an image change detection unit in the first configuration example.
FIG. 13 is an explanatory diagram of the operation of the image change detection unit in the second configuration example.
FIG. 14 is a functional block diagram of an image change detection unit in the second configuration example.
FIGS. 15A and 15B are explanatory diagrams of the operation of the image change detection unit in the third configuration example.
FIG. 16 is a functional block diagram of an image change detection unit in a third configuration example.
FIG. 17 is a diagram illustrating an operation of an image change detection unit in a fourth configuration example.
FIG. 18 is a functional block diagram of an image change detection unit in a fourth configuration example.
FIG. 19 is a block diagram of an image communication system according to a second embodiment.
FIG. 20 is a functional block diagram of the image processing apparatus according to the second embodiment.
FIG. 21 is an explanatory diagram showing a configuration example of transmission data according to the second embodiment.
FIG. 22 is a flowchart illustrating a processing example of the image processing apparatus according to the second embodiment.
FIG. 23 is a functional block diagram of the image browsing device according to the second embodiment.
FIG. 24 is a flowchart showing a processing example of a control unit of the image browsing device.
[Explanation of symbols]
10, 200 image communication system, 12, 202 network,
20, 60, 72, 210 image processing device, 22, 72 image capturing unit,
24 first storage unit, 26, 62, 75, 80, 100, 110,
212 image change detection section, 27, 216 transmission section, 28 image data transmission section, 29 image change detection signal transmission section, 31 camera, 32 RAM, 34 CPU, 35 RTC, 36 sensor, 37 non-volatile memory, 40, 230 image browsing Device, 42, 232 receiving section, 44 storage section, 46 display section, 48, 238 control section, 50 image change detection signal receiving section, 52 image data receiving section, 54 image data transmission source address storage section, 73 infrared imaging device, 74 mode setting unit, 76, 102, 118 image data format conversion unit, 77, 86, 104, 116 image data comparison unit, 82 acquired image data extraction unit, 84 reference image data extraction unit, 112-Y, 112-Cb, 112-Cr DCT operation unit, 114-Y, 114-Cb, 114-Cr data Out portion, 117-Y Y component comparison portion, 117-Cb Cb component comparison portion, 117-Cr Cr component comparison portion, 214 a transmission data generating unit, 234 analyzer, 236 extractor

Claims (19)

通信網に接続される画像処理装置であって、
周期的に画像を取り込む画像取込部と、
基準画像の画像データである基準画像データを記憶する第１の記憶部と、
前記画像取込部によって取り込まれた取得画像の画像データである取得画像データと前記基準画像データとを比較して、前記基準画像を基準として前記取得画像が変化したか否かを検出する画像変化検出部と、
前記取得画像データを前記通信網を介して送信する画像データ送信部と、
前記画像変化検出部によって前記取得画像が変化したことが検出されたことを条件として、前記取得画像が変化したことを示す画像変化検出信号を、前記通信網又は該通信網と異なる別の通信網を介して送信する画像変化検出信号送信部と、
を含むことを特徴とする画像処理装置。An image processing device connected to a communication network,
An image capturing unit that periodically captures an image,
A first storage unit that stores reference image data that is image data of the reference image;
An image change that detects whether or not the acquired image has changed with reference to the reference image, by comparing acquired image data that is image data of an acquired image acquired by the image acquisition unit with the reference image data. A detection unit;
An image data transmitting unit that transmits the obtained image data via the communication network,
On condition that the image change detection unit detects that the acquired image has changed, the image change detection signal indicating that the acquired image has changed is transmitted to the communication network or another communication network different from the communication network. An image change detection signal transmitting unit for transmitting via
An image processing apparatus comprising: 通信網に接続される画像処理装置であって、
周期的に画像を取り込む画像取込部と、
基準画像の画像データである基準画像データを記憶する第１の記憶部と、
前記画像取込部によって取り込まれた取得画像の画像データである取得画像データと前記基準画像データとを比較して、前記基準画像を基準として前記取得画像が変化したか否かを検出する画像変化検出部と、
前記画像変化検出部によって前記取得画像が変化したことが検出されたことを示す画像変化検出フラグと、前記取得画像データとを含む送信データを生成する送信データ生成部と、
前記送信データを前記通信網を介して送信する画像データ送信部と、
を含むことを特徴とする画像処理装置。An image processing device connected to a communication network,
An image capturing unit that periodically captures an image,
A first storage unit that stores reference image data that is image data of the reference image;
An image change that detects whether or not the acquired image has changed with reference to the reference image, by comparing acquired image data that is image data of an acquired image acquired by the image acquisition unit with the reference image data. A detection unit;
An image change detection flag indicating that the obtained image has been changed by the image change detection unit, and a transmission data generation unit that generates transmission data including the obtained image data.
An image data transmitting unit that transmits the transmission data via the communication network,
An image processing apparatus comprising: 請求項２において、
前記取得画像データが、前記送信データの予め決められたデータフィールドに設定され、
前記画像変化検出フラグが、前記送信データの空きフィールドに設定されることを特徴とする画像処理装置。In claim 2,
The acquired image data is set in a predetermined data field of the transmission data,
An image processing apparatus, wherein the image change detection flag is set in an empty field of the transmission data. 請求項１乃至３のいずれかにおいて、
前記画像変化検出部によって前記取得画像が変化しなかったことが検出されたことを条件として、前記画像取込部によって取り込まれた取得画像データを前記基準画像データとして前記第１の記憶部に格納することを特徴とする画像処理装置。In any one of claims 1 to 3,
The acquired image data captured by the image capturing unit is stored in the first storage unit as the reference image data, on condition that the image change detecting unit detects that the obtained image has not changed. An image processing apparatus, comprising: 請求項１乃至４のいずれかにおいて、
通常モード又は赤外線モードを設定するためのモード設定部を更に含み、
前記画像取込部は、赤外線撮像デバイスを有し、
前記モード設定部によって赤外線モードが設定されている状態では、
前記第１の記憶部には、前記赤外線撮像デバイスにより赤外線を検知して生成された第１の赤外線画像の画像データが基準画像データとして格納され、
前記画像変化検出部は、前記赤外線撮像デバイスにより取り込まれた取得画像としての第２の赤外線画像の画像データと前記第１の赤外線画像の画像データとを比較して、基準画像を基準として取得画像が変化したか否かを検出し、
前記画像データ送信部は、前記第２の赤外線画像の画像データを前記取得画像データとして送信し、
前記画像変化検出信号送信部は、前記取得画像が変化したことを示す画像変化検出信号を送信することを特徴とする画像処理装置。In any one of claims 1 to 4,
Further includes a mode setting unit for setting a normal mode or an infrared mode,
The image capturing unit has an infrared imaging device,
In the state where the infrared mode is set by the mode setting unit,
In the first storage unit, image data of a first infrared image generated by detecting infrared light by the infrared imaging device is stored as reference image data,
The image change detection unit compares the image data of the second infrared image as the acquired image captured by the infrared imaging device with the image data of the first infrared image, and obtains an image based on a reference image. Detects whether or not has changed,
The image data transmitting unit transmits image data of the second infrared image as the acquired image data,
The image processing device, wherein the image change detection signal transmitting unit transmits an image change detection signal indicating that the acquired image has changed. 請求項１乃至５のいずれかにおいて、
前記取得画像データ及び前記基準画像データの画素が、輝度成分、第１及び第２の色差成分を含む場合に、
前記画像変化検出部は、
前記取得画像データの第１の色差成分と、前記基準画像データの第１の色差成分とを比較する画像データ比較部を含み、
前記画像データ比較部は、
前記取得画像データ及び前記基準画像データの第１の色差成分が異なると判断されたとき、前記取得画像が変化したことを検出することを特徴とする画像処理装置。In any one of claims 1 to 5,
When the pixels of the acquired image data and the reference image data include a luminance component and first and second color difference components,
The image change detection unit,
An image data comparison unit that compares a first color difference component of the acquired image data with a first color difference component of the reference image data;
The image data comparing unit includes:
An image processing apparatus, wherein when it is determined that the first color difference components of the acquired image data and the reference image data are different, it is detected that the acquired image has changed. 請求項１乃至５のいずれかにおいて、
前記画像変化検出部は、
前記取得画像データの比較領域の画像データを抽出する取得画像データ抽出部と、
前記取得画像データ抽出部によって抽出された画像データと、前記基準画像データの画像領域のうち前記比較領域に対応する領域の画像データとを比較する画像データ比較部とを含み、
前記画像データ比較部は、
前記取得画像データ抽出部によって抽出された画像データと、前記基準画像データの画像領域のうち前記比較領域に対応する領域の画像データとが異なると判断されたとき、前記取得画像が変化したことを検出することを特徴とする画像処理装置。In any one of claims 1 to 5,
The image change detection unit,
An acquired image data extraction unit that extracts image data of a comparison area of the acquired image data,
The image data extracted by the obtained image data extraction unit, including an image data comparison unit that compares the image data of the area corresponding to the comparison area in the image area of the reference image data,
The image data comparing unit includes:
When it is determined that the image data extracted by the obtained image data extraction unit is different from the image data of the area corresponding to the comparison area in the image area of the reference image data, it is determined that the obtained image has changed. An image processing device for detecting. 請求項１乃至５のいずれかにおいて、
前記基準画像データの画素の輝度成分の値を平均した平均値は、画像変化が検出されるときの取得画像データの画素の輝度成分の値を平均した平均値より小さく、
前記画像変化検出部は、
前記取得画像データの輝度成分と、前記基準画像データの輝度成分とを比較する画像データ比較部を含み、
前記画像データ比較部は、
前記取得画像データの輝度成分と、前記基準画像データの輝度成分とに基づいて、前記取得画像が変化したことを検出することを特徴とする画像処理装置。In any one of claims 1 to 5,
The average of the values of the luminance components of the pixels of the reference image data is smaller than the average of the values of the luminance components of the pixels of the acquired image data when an image change is detected,
The image change detection unit,
Including a luminance component of the obtained image data, an image data comparison unit that compares the luminance component of the reference image data,
The image data comparing unit includes:
An image processing apparatus for detecting a change in the acquired image based on a luminance component of the acquired image data and a luminance component of the reference image data. 請求項８において、
前記画像データ比較部は、
前記基準画像データに対する前記取得画像データの画素の輝度成分の値の変化率を平均した平均値が正の第１の基準値を超えるとき、前記取得画像が変化したことを検出することを特徴とする画像処理装置。In claim 8,
The image data comparing unit includes:
When an average value obtained by averaging a change rate of a luminance component value of a pixel of the acquired image data with respect to the reference image data exceeds a first reference value, detecting that the acquired image has changed. Image processing device. 請求項１乃至５のいずれかにおいて、
前記画像変化検出部は、
画素ごとに、前記取得画像データの輝度成分と前記基準画像データの輝度成分とを比較する画像データ比較部を含み、
前記画像データ比較部は、
前記基準画像データの輝度成分の絶対値を基準に、前記取得画像データの輝度成分の絶対値が変化したことを条件に、前記取得画像が変化したことを検出することを特徴とする画像処理装置。In any one of claims 1 to 5,
The image change detection unit,
For each pixel, including an image data comparison unit that compares the luminance component of the acquired image data and the luminance component of the reference image data,
The image data comparing unit includes:
An image processing apparatus for detecting that the acquired image has changed on the condition that the absolute value of the luminance component of the acquired image data has changed with reference to the absolute value of the luminance component of the reference image data. . 請求項１０において、
前記画像データ比較部は、
前記基準画像データの輝度成分の絶対値を基準に、前記取得画像データの輝度成分の絶対値が増加したことを条件に、前記取得画像が変化したことを検出することを特徴とする画像処理装置。In claim 10,
The image data comparing unit includes:
An image processing apparatus for detecting that the acquired image has changed on the condition that the absolute value of the luminance component of the acquired image data has increased based on the absolute value of the luminance component of the reference image data. . 請求項１乃至５のいずれかにおいて、
前記取得画像データ及び前記基準画像データの画素が、輝度成分、第１及び第２の色差成分を含む場合に、
前記画像変化検出部は、
前記取得画像データの輝度成分を離散コサイン変換して得られた周波数成分のうち第１の閾値より低い周波数成分と、前記基準画像データの輝度成分を離散コサイン変換して得られた周波数成分のうち前記第１の閾値より低い周波数成分とを比較する輝度成分比較部と、
前記取得画像データの第１の色差成分を離散コサイン変換して得られた周波数成分のうち第２の閾値より低い周波数成分と、前記基準画像データの第１の色差成分を離散コサイン変換して得られた周波数成分のうち前記第２の閾値より低い周波数成分とを比較する第１の色差成分比較部と、
前記取得画像データの第２の色差成分を離散コサイン変換して得られた周波数成分のうち第３の閾値より低い周波数成分と、前記基準画像データの第２の色差成分を離散コサイン変換して得られた周波数成分のうち前記第３の閾値より低い周波数成分とを比較する第２の色差成分比較部とを含み、
前記画像データ比較部は、
前記輝度成分比較部の比較結果、前記第１の色差成分比較部の比較結果及び前記第２の色差成分比較部の比較結果に基づいて、前記取得画像が変化したこと検出することを特徴とする画像処理装置。In any one of claims 1 to 5,
When the pixels of the acquired image data and the reference image data include a luminance component and first and second color difference components,
The image change detection unit,
Among the frequency components obtained by performing a discrete cosine transform on the luminance component of the acquired image data, a frequency component lower than a first threshold, and a frequency component obtained by performing a discrete cosine transform on the luminance component of the reference image data A luminance component comparison unit that compares a frequency component lower than the first threshold,
A frequency component lower than a second threshold value among frequency components obtained by performing a discrete cosine transform on the first color difference component of the acquired image data and a first color difference component of the reference image data obtained by performing a discrete cosine transform. A first color difference component comparison unit that compares a frequency component lower than the second threshold value among the obtained frequency components;
A frequency component lower than a third threshold value among frequency components obtained by performing a discrete cosine transform on the second color difference component of the acquired image data and a second color difference component of the reference image data obtained by performing a discrete cosine transform. And a second color difference component comparing unit that compares a frequency component lower than the third threshold value among the obtained frequency components.
The image data comparing unit includes:
A change in the acquired image is detected based on a comparison result of the luminance component comparison unit, a comparison result of the first color difference component comparison unit, and a comparison result of the second color difference component comparison unit. Image processing device. 通信網に接続される画像閲覧装置であって、
取り込まれた取得画像が、基準画像を基準として変化したことを示す画像変化検出信号を前記通信網を介して受信する画像変化検出信号受信部と、
前記画像変化検出信号受信部によって前記画像変化検出信号が受信されたことを条件として、前記通信網又は該通信網とは異なる別の通信網において前記取得画像を取り込んだ画像処理装置との通信路を確立して該画像処理装置からの画像データを受信する画像データ受信部と、
前記画像データ受信部によって受信された画像データを記憶する記憶部と、
を含むことを特徴とする画像閲覧装置。An image browsing device connected to a communication network,
An image change detection signal receiving unit that receives, via the communication network, an image change detection signal indicating that the captured image has been changed with reference to the reference image,
A communication path between the image processing apparatus and the image processing apparatus that captures the acquired image in the communication network or another communication network different from the communication network, on condition that the image change detection signal is received by the image change detection signal receiving unit; An image data receiving unit that establishes and receives image data from the image processing apparatus,
A storage unit for storing image data received by the image data receiving unit,
An image browsing apparatus characterized by including: 請求項１３において、
前記通信網又は該通信網とは異なる別の通信網において前記画像処理装置に関連付けられたアドレス情報を記憶する画像データ送信元アドレス情報記憶部を含み、
前記画像データ受信部は、
前記画像データ送信元アドレス情報記憶部に記憶されたアドレス情報を用いて前記画像処理装置との通信路を確立することを特徴とする画像閲覧装置。In claim 13,
An image data transmission source address information storage unit that stores address information associated with the image processing apparatus in the communication network or another communication network different from the communication network,
The image data receiving unit,
An image browsing apparatus, wherein a communication path with the image processing apparatus is established using address information stored in the image data transmission source address information storage unit. 請求項１３において、
前記通信網又は該通信網とは異なる別の通信網において前記画像処理装置に関連付けられたアドレス情報が、前記通信網又は該通信網とは異なる別の通信網を介して取得され、
前記画像データ受信部が、
前記アドレス情報を用いて前記画像処理装置との通信路を確立することを特徴とする画像閲覧装置。In claim 13,
Address information associated with the image processing apparatus in the communication network or another communication network different from the communication network is obtained via the communication network or another communication network different from the communication network,
The image data receiving unit,
An image browsing apparatus, wherein a communication path with the image processing apparatus is established using the address information. 通信網に接続される画像閲覧装置であって、
取り込まれた取得画像のデータである取得画像データと、基準画像を基準として前記取得画像が変化したことを示す画像変化検出フラグとを含む通信データを前記通信網を介して受信する受信部と、
前記受信部によって受信された通信データに含まれる前記画像変化検出フラグに基づいて、前記取得画像の変化が検出されたか否かを解析する解析部と、
前記解析部によって前記取得画像の変化が検出されたことが解析されたとき、前記通信データに含まれる前記取得画像データを抽出する抽出部と、
前記抽出部によって抽出された前記取得画像データを記憶する記憶部と、
を含むことを特徴とする画像閲覧装置。An image browsing device connected to a communication network,
A receiving unit that receives, via the communication network, communication data including captured image data that is data of the captured image that has been captured, and an image change detection flag indicating that the obtained image has changed based on a reference image.
Based on the image change detection flag included in the communication data received by the receiving unit, an analysis unit that analyzes whether a change in the acquired image has been detected,
When it is analyzed that the change of the acquired image is detected by the analysis unit, an extraction unit that extracts the acquired image data included in the communication data,
A storage unit that stores the obtained image data extracted by the extraction unit,
An image browsing apparatus characterized by including: 通信網を介して、画像データを通信する画像通信システムであって、
請求項１記載の画像処理装置と、
請求項１３乃至１５のいずれか記載の画像閲覧装置とを含み、
前記画像閲覧装置は、
前記通信網を介して、前記画像処理装置によって送信された前記画像変化検出信号に基づいて、前記画像処理装置によって送信された取得画像データを取り込むことを特徴とする画像通信システム。An image communication system for communicating image data via a communication network,
An image processing apparatus according to claim 1,
An image browsing device according to any one of claims 13 to 15,
The image viewing device,
An image communication system, characterized by taking in acquired image data transmitted by the image processing device via the communication network based on the image change detection signal transmitted by the image processing device. 通信網を介して、画像データを通信する画像通信システムであって、
請求項２又は３記載の画像処理装置と、
請求項１６記載の画像閲覧装置とを含み、
前記画像閲覧装置は、
前記通信網を介して、前記画像処理装置からの前記画像変化検出フラグに基づいて、前記画像処理装置からの取得画像データを取り込むことを特徴とする画像通信システム。An image communication system for communicating image data via a communication network,
An image processing apparatus according to claim 2 or 3,
An image browsing device according to claim 16,
The image viewing device,
An image communication system, comprising: acquiring image data acquired from the image processing device via the communication network based on the image change detection flag from the image processing device. 請求項１７又は１８において、
前記画像変化検出部によって前記取得画像が変化しなかったことが検出されたことを条件として、前記画像取込部によって取り込まれた取得画像データを前記基準画像データとして前記第１の記憶部に格納することを特徴とする画像通信システム。In claim 17 or 18,
The acquired image data captured by the image capture unit is stored in the first storage unit as the reference image data, on condition that the image change detection unit detects that the acquired image has not changed. An image communication system, comprising:
JP2003044943A 2003-02-21 2003-02-21 Image processing apparatus, image viewing apparatus, and image communication system Withdrawn JP2004254236A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003044943A JP2004254236A (en) 2003-02-21 2003-02-21 Image processing apparatus, image viewing apparatus, and image communication system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003044943A JP2004254236A (en) 2003-02-21 2003-02-21 Image processing apparatus, image viewing apparatus, and image communication system

Publications (1)

Publication Number Publication Date
JP2004254236A true JP2004254236A (en) 2004-09-09

Family

ID=33027499

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003044943A Withdrawn JP2004254236A (en) 2003-02-21 2003-02-21 Image processing apparatus, image viewing apparatus, and image communication system

Country Status (1)

Country Link
JP (1) JP2004254236A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011066797A (en) * 2009-09-18 2011-03-31 Canon Inc Image collation system, imaging apparatus, transmitter, and program
CN104980700A (en) * 2015-06-23 2015-10-14 中山市安领星电子科技有限公司 Wireless network indoor machine
CN104980705A (en) * 2015-06-23 2015-10-14 中山市安领星电子科技有限公司 Multifunctional monitoring system
CN104980702A (en) * 2015-06-23 2015-10-14 中山市安领星电子科技有限公司 Novel monitoring system
CN108819895A (en) * 2018-05-23 2018-11-16 浙江吉利汽车研究院有限公司 A kind of vehicle-mounted panoramic image system

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011066797A (en) * 2009-09-18 2011-03-31 Canon Inc Image collation system, imaging apparatus, transmitter, and program
US9160913B2 (en) 2009-09-18 2015-10-13 Canon Kabushiki Kaisha Image matching system, providing apparatus, imaging apparatus, image matching method, and program
CN104980700A (en) * 2015-06-23 2015-10-14 中山市安领星电子科技有限公司 Wireless network indoor machine
CN104980705A (en) * 2015-06-23 2015-10-14 中山市安领星电子科技有限公司 Multifunctional monitoring system
CN104980702A (en) * 2015-06-23 2015-10-14 中山市安领星电子科技有限公司 Novel monitoring system
CN108819895A (en) * 2018-05-23 2018-11-16 浙江吉利汽车研究院有限公司 A kind of vehicle-mounted panoramic image system

Similar Documents

Publication Publication Date Title
CN105611188B (en) Camera occlusion detection method and device based on automatic exposure
US7304681B2 (en) Method and apparatus for continuous focus and exposure in a digital imaging device
US9277165B2 (en) Video surveillance system and method using IP-based networks
EP3151552A1 (en) Monitoring system and camera device
US9497425B2 (en) Motion detection method and device using the same
EP2739049A1 (en) Method and system for generating real-time motion video
US20110050927A1 (en) Information processing apparatus and control method therefor
JP4741283B2 (en) Integrated circuit device, microcomputer and surveillance camera system
KR100554579B1 (en) Display device and network system
JP2008236353A (en) Camera abnormality detection device
JP2003348387A (en) Document presentation apparatus
JP2004254236A (en) Image processing apparatus, image viewing apparatus, and image communication system
US20040001153A1 (en) Camera system
EP1071071A2 (en) Display with sticking preventing function and sticking preventing method
US9591230B2 (en) Systems and methods for reduced image flicker
JP4508043B2 (en) Video surveillance device and video surveillance program
JP2004254235A (en) Image processing apparatus, image viewing apparatus, and image communication system
US20060244850A1 (en) Image pickup apparatus and image pickup method
KR101583598B1 (en) Camera, service server, system and method for processing high-resolution image
JP2017200098A (en) Movement monitoring device
JP5988725B2 (en) Imaging device and developing device
KR101076372B1 (en) Monitoring system and apparatus using camera module
JP5153420B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
KR20150095080A (en) Apparatus and Method for Transmitting Video Data
KR101324229B1 (en) Security system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050930

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080304

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20080507