【０００１】
【発明の属する技術分野】
本発明は、監視カメラで撮影された画像をモニタ付き携帯端末に伝送して表示する監視システムと、その画像処理を行う画像処理回路と、そのシステムを構成する携帯端末やカメラなどの装置と、その画像処理方法を規定するプログラムに関し、特に、表示画像の輝度に対する適正な補正を可能にするものである。
【０００２】
【従来の技術】
近年、宅内や家の周囲などに設置したカメラで撮影された画像を利用者のＴＶモニタ付き携帯端末に伝送する監視システムが開発されている。このシステムでは、外出中の利用者が、携帯端末の画面を通して自宅の様子を監視することができる。
【０００３】
このように、カメラで撮影した画像を携帯端末に伝送する場合には、解像度を携帯端末のモニタに合わせて落とした画像が送られる。そのため、携帯端末のモニタ上での視認性は悪くなる。下記特許文献１には、こうした点を改善するため、利用者が鮮明に見たい画像領域を指定すると、指定された領域の解像度を高めた画像が送られてくる動画像通信システムが開示されている。
【０００４】
このシステムでは、利用者が、受信端末に表示された画像の中から、詳しく見たい領域（関心領域）をマウスなどで指定する操作を行うと、受信端末の画面に解像度指定用のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）が表示され、利用者が解像度の指定操作を行うと、カメラの画像を提供している送信側に、関心領域の位置データと解像度の指定データとが伝送される。送信側は、カメラの１フレーム分の画像をメモリに取り込むと、関心領域の画像データを切り出して、指定された解像度の画像データに変換し、また、関心領域以外の背景領域の画像データを低い解像度に変換する。このとき背景領域の画像データの解像度は、関心領域のデータ量と背景領域のデータ量とを合わせたデータ量がネットワーク負荷の条件を満たすように設定される。この関心領域の画像データ及び背景領域の画像データは受信端末に送信され、受信端末の画面には、関心領域が詳細に表示され、背景領域が粗く表示される。
【０００５】
【特許文献１】
特開平７−２８８８０６号公報
【０００６】
【発明が解決しようとする課題】
しかし、カメラで撮影した画像を携帯端末などの画面で見る場合は、画像の輝度が見易さに大きく影響する。カメラの設置場所や照射条件によって、全体的に低照度の画像しか撮れない場合は、画像の解像度を上げても、視認性の向上には限度がある。
また、画面内に暗所と明所とが混在する場合には、暗所領域が視認できるように画面全体に対して一様に輝度補正を行うと、それまで視認性が確保されていた明所領域が明るくなり過ぎて視認性が低下するという問題が発生する。
【０００７】
本発明は、こうした従来の問題点を解決するものであり、被写体への照射条件に因らずに、カメラで撮影された画像を端末に鮮明に表示することができる監視システムを提供し、また、その画像処理を行う画像処理回路、そのシステムを構成する装置、及び、その画像処理方法を規定するコンピュータプログラムを提供することを目的としている。
【０００８】
【課題を解決するための手段】
そこで、本発明では、画像処理回路に、入力画像を複数の領域に分割し、前記領域のそれぞれの輝度レベルに応じた補正パラメータを決定する判定部と、前記判定部によって決定された前記補正パラメータにしたがって該当する前記領域の輝度レベルを補正する補正部とを設けている。
この画像処理回路は、画像の輝度を局部的に補正することができる。そのため、画面内に局所的に明部と暗部とが混在する場合でも、暗部の輝度だけを補正して画面全体を見やすい輝度に保つことができ、視認性が向上する。
【０００９】
また、本発明では、監視システムを、監視カメラと、前記監視カメラで撮影された画像の局所的な輝度レベルを補正する画像処理部と、前記画像処理部で処理された画像データを公衆網に伝送する通信部と、前記画像データを無線回線を介して受信し、表示するモニタ付き携帯端末とで構成し、前記画像処理部に、入力画像を複数の領域に分割して前記領域のそれぞれの輝度レベルに応じた補正パラメータを決定する判定部と、前記判定部によって決定された前記補正パラメータにしたがって該当する前記領域の輝度レベルを補正する補正部と、前記補正部で補正された画像データを符号化する符号化部とを設けている。
そのため、利用者は、遠隔地に居るときでも、監視カメラに映る画像をモニタ付き携帯端末で鮮明に見ることができる。
【００１０】
また、本発明では、監視システムを、監視カメラと、前記監視カメラで撮影された画像を符号化する符号化部と、前記符号化部で符号化された画像データを公衆網に伝送する通信部と、公衆網を介して受信した前記画像データを復号化して画像の局所的な輝度レベルを補正する画像処理部と、前記画像処理部で処理された画像データを無線回線を介して受信し、表示するモニタ付き携帯端末とで構成し、前記画像処理部に、符号化されている画像データを復号化する復号化部と、復号化された画像を複数の領域に分割して前記領域のそれぞれの輝度レベルに応じた補正パラメータを決定する判定部と、前記判定部によって決定された前記補正パラメータにしたがって該当する前記領域の輝度レベルを補正する補正部と、前記補正部で補正された画像データを符号化する符号化部とを設けている。
このシステムでは、画像処理部をサービスプロバイダのサーバに設けることができ、システム導入に際して、利用者の負担を軽減することができる。
【００１１】
また、本発明では、監視システムを、監視カメラと、前記監視カメラで撮影された画像を符号化する符号化部と、前記符号化部で符号化された画像データを公衆網に伝送する通信部と、画像の局所的な輝度レベルを補正する処理が規定されたプログラムを保持するサーバと、前記サーバから前記プログラムをダウンロードし、無線回線を介して受信した前記監視カメラの画像の局所的な輝度レベルを補正して表示するモニタ付き携帯端末とで構成している。
このシステムでは、携帯端末がサーバからプログラムをダウンロードすることにより、携帯端末において、局所的輝度補正が可能になる。
【００１２】
また、本発明では、デジタルコードレス親機に、子機から送られる符号化された画像データを受信する受信部と、前記画像データを復号化する復号化部と、復号化された画像を複数の領域に分割して前記領域のそれぞれの輝度レベルに応じた補正パラメータを決定する判定部と、前記判定部によって決定された前記補正パラメータにしたがって該当する前記領域の輝度レベルを補正する補正部と、前記補正部で補正された画像データを符号化する符号化部と、復号化された画像を表示する表示器とを設けている。
このデジタルコードレス親機と、カメラを搭載したデジタルコードレス子機とを用いて、宅内などの監視システムを簡単に構成することができる。
【００１３】
また、本発明では、カメラに、被写体を撮像する撮像部と、前記撮像部で撮像された画像を複数の領域に分割して前記領域のそれぞれの輝度レベルに応じた補正パラメータを決定する判定部と、前記判定部によって決定された前記補正パラメータにしたがって該当する前記領域の輝度レベルを補正する補正部と、前記補正部で補正された画像データを符号化する符号化部とを設けている。
このカメラは、撮影した画像の局所的輝度補正処理を行うことができる。
【００１４】
また、本発明では、モニタ付き携帯端末に、無線回線を介して受信した画像データを復号化する復号化部と、前記復号化部で復号化された画像を複数の領域に分割して前記領域のそれぞれの輝度レベルに応じた補正パラメータを決定する判定部と、前記判定部によって決定された前記補正パラメータにしたがって該当する前記領域の輝度レベルを補正する補正部と、前記補正部で補正された画像を表示する表示器とを設けている。
この携帯端末は、局所的輝度補正処理を行って見やすい画面を表示することができる。
【００１５】
また、本発明では、プログラムで、入力画像を複数の領域に分割する手順と、前記領域のそれぞれの輝度レベルを算出する手順と、前記輝度レベルが所定値以下の前記領域に対して、前記輝度レベルを補正するための補正パラメータを決定する手順と、前記補正パラメータにしたがって該当する前記領域の輝度レベルを補正する手順とをコンピュータに実行させるように規定している。
このプログラムをオンラインで、あるいは、記録媒体を介して、機器にダウンロードすることにより、その機器での局所的輝度補正処理が可能になる。
【００１６】
【発明の実施の形態】
（第１の実施形態）
本発明の第１の実施形態における監視システムは、図１に示すように、玄関に設置された来訪者撮影用のドアホンカメラ１１と、宅内やその周囲を撮影するために宅内や屋外に設置された住居用監視カメラ１２と、ドアホンカメラ１１及び監視カメラ１２で撮影された画像を切り替えて出力する切り換え器１３と、切り換え器１３から出力された画像データの輝度の補正と符号化とを行う画像処理部１４と、宅内の機器をネットワーク接続する宅内ネットワーク１５と、画像データを宅外に送信する通信部１６と、この通信部１６から送信された画像データを、公衆網１７及び基地局１８を介して受信し、画像を画面に表示するＴＶモニタ付き携帯端末１９とを備えている。
また、画像処理部１４は、画像の暗所領域の輝度補正量を判定する判定部１４１と、判定部１４１の判定結果に基づいて局所的な輝度の補正を行う補正部１４２と、輝度が補正された画像データを符号化する符号化部１４３とを備えている。
【００１７】
このシステムでは、切り換え器１３がドアホンカメラ１１または監視カメラ１２で撮影された画像を選択して出力する。画像処理部１４は、切り換え器１３から出力された画像の暗所領域の輝度を補正し、次いで、画像データを符号化する。符号化された画像データは、宅内ネットワーク１５及び通信部１６を通じて公衆網１７に送信され、基地局１８から無線回線で利用者の携帯端末１９に伝送される。携帯端末１９は、受信した画像データを復号化し、画面に画像を表示する。
利用者は、携帯端末１９の画面に映る被写体が暗くて見にくい場合に、携帯端末１９を操作して、見えにくい部分を指定する。この情報は、逆のルートを辿って画像処理部１４に送られ、画像処理部１４は、指定された画像領域の輝度を再度補正する処理を行い、輝度の補正された画像が携帯端末１９に送られる。
【００１８】
画像処理部１４の処理について詳しく説明する。
画像処理部１４の判定部１４１は、入力画像への局所的輝度補正を行うため、入力画像を１フレーム分ずつメモリに取り込み、この１フレームの画像を複数のブロックに分割する。例えば、１ブロックに含まれる画素を１６×１６個とし、１フレームの画像を２２×１８＝３９６個のブロックに分割し、各ブロックに含まれる画素の平均輝度を算出する。ここでは、ブロックｉの平均輝度をＹｉとする。
画像処理部１４は、各ブロックの平均輝度が図２の太線上に載るように、各ブロックの画素の輝度を補正する。
【００１９】
即ち、平均輝度Ｙｉが基準輝度Ｙ０以上のブロックｉの画素については、輝度の補正は行わない。
平均輝度Ｙｉが基準輝度Ｙ０より低く、輝度Ｙａ以上であるブロックｉに含まれる画素の輝度ｙｉｊは、補正パラメータα１（＝１／ｋ１）（但し、α１＞１）を用いて、
（１−ｋ１）Ｙ０ ＋ ｋ１・ｙｉｊ
に補正する。
平均輝度Ｙｉが輝度Ｙａより低く、輝度Ｙｂ以上であるブロックｉに含まれる画素の輝度ｙｉｊは、補正パラメータα２（＝１／ｋ２）（但し、α２＞α１＞１）を用いて、
（１−ｋ２）Ｙａ ＋ ｋ２・ｙｉｊ
に補正する。
【００２０】
判定部１４１は、補正パラメータα１、α２、・・を記憶するＲＯＭ（不図示）を有しており、各ブロックの平均輝度Ｙｉから、そのブロックに含まれる画素の補正方針を判定すると、補正部１４２に、そのブロックについて補正するか否かを示す補正オン／オフ信号と、そのブロックの補正に必要な補正パラメータαｉとを出力する。補正部１４２は、補正信号がオンのブロックに含まれる各画素の輝度値を、補正パラメータαｉを用いて算出し、入力画像に対するブロック単位の局所的輝度補正を実行する。
【００２１】
また、携帯端末１９の画面には、図３（ａ）のように、局所的輝度補正が行われた画像が表示される。
利用者は、携帯端末１９に表示された画像を確認し、画面上で被写体が暗くて見にくい場合には、図３（ｂ）に示すように、見えにくい部分をカーソルなどで指定する操作を行う。指定領域の情報は、携帯端末１９から画像処理部１４に送られ、判定部１４１は、この情報を基に、指定領域に含まれるブロックの輝度補正に用いた補正パラメータαｉの値をｎ倍（ｎ＞１）に高めて、以後の入力画像に対するブロック単位の局所的輝度補正を補正部１４２に行わせる。
こうして局所的輝度補正を強めることにより、携帯端末１９の画面は、図３（ｃ）に示すように見易くなる。
【００２２】
また、図４に示すように、携帯端末１９の画面に、輝度補正の補正度合いを数値で表示し、利用者が、この数値を変更する操作を行った場合に、画像処理部１４の判定部１４１が、変更された数値に基づいて、全ての補正パラメータαｉの値を高めるようにしてもよい。
【００２３】
このように、この監視システムでは、画像の局所的な輝度レベルに応じて局所的な輝度補正を行っているため、暗い箇所の輝度だけが補正され、明るい箇所が補正により見にくくなる逆効果は発生しない。従って、画面内に明部と暗部とが混在するシーンや全体的に低照度のシーンに対しても、輝度補正により画面全体の視認性を高めることができる。そのため、遠隔地にいても宅内やその他の情況を的確に把握することができる。
【００２４】
また、このシステムでは、携帯端末から局所レベル補正の補正度合いを強めたい領域が指定できるため、利用者は、表示画像を確認した後に所望の領域に対して局所レベル補正を行うことができる。
また、携帯端末から輝度の補正度合いを定量的に指定することも可能であり、利用者は、表示画像を確認した後、補正度合いを指定して所望の視認性を得ることができる。
なお、ここに示した画像処理部１４における補正方法は、一例であって、本発明は、これに限るものではない。また、補正パラメータは、入力画像を増幅する増幅器の増幅度を指定するようなものであっても良い。
【００２５】
（第２の実施形態）
本発明の第２の実施形態では、時間帯によって局所的な輝度補正の補正パラメータを変更するシステムについて説明する。
このシステムでは、図５に示すように、画像処理部１４が時計１４４を備えており、判定部１４１は、時計１４４から入力する時刻データに基づいて、補正部１４２に出力する補正パラメータを変更する。その他の構成は第１の実施形態と変わりがない。
【００２６】
判定部１４１は、例えば、夕方以降の照度が下がる時間帯においては、補正度合いを強めるように補正パラメータを設定し、昼間の照度が充分な時間帯においては、補正度合いを弱めるように補正パラメータを選択する。
時刻データと補正パラメータとの関係は、判定部１４１が有するＲＯＭ（不図示）に記憶されており、判定部１４１は、時計１４４から入力する時刻データをＲＯＭのアドレスと対応させて、ＲＯＭから、その時刻に該当する補正パラメータを読み出し、補正部１４２に出力する。
【００２７】
このシステムでは、こうした処理により、時刻による照射条件の変化で画面内の明部と暗部との混在度合いや画面全体の照度が変わる場合でも、その照射条件に合わせた局所レベル補正を行うことができ、時間帯に依らずに、画面全体の均一な視認性が得られる。
【００２８】
（第３の実施形態）
本発明の第３の実施形態では、ドアホンカメラや監視カメラの露光制御と画像処理部の局所的な輝度補正とを連動させるシステムについて説明する。
カメラの撮影視野が暗い場合、露光を大きく設定して画像の明るさを確保しようとすると、暗所情報が失われる可能性がある。このシステムでは、こうした事態を防ぐため、図６に示すように、画像処理部１４の判定部１４１から局所的輝度補正のために出力される補正オン／オフ信号を、補正部１４２だけで無く、ドアホンカメラ１１や監視カメラ１２にも入力している。その他の構成は、第１の実施形態（図１）と変わりがない。
【００２９】
１フレームの入力画像に対して、判定部１２２からオフの補正信号だけが出力される場合、即ち、画像が明るい場合には、ドアホンカメラ１１や監視カメラ１２で通常の露光制御が行われる。また、判定部１２２からオンの補正信号が出力される場合は、ドアホンカメラ１１や監視カメラ１２で暗所情報を残すような露光制御を行う。この露光制御によって生じる画面上の暗所は、画像処理部１４の局所的輝度補正で見易い明るさに補正され、暗所情報の視認が可能になる。
なお、局所的な輝度補正に必要なレベルの撮像輝度が得られないような極低照度の画像に対しては、ドアホンカメラ１１や監視カメラ１２において、複数フレームの画像を蓄積する積分機能を有効にして局所的な輝度補正に必要な最低輝度を確保する。
【００３０】
このように、ドアホンカメラ１１や監視カメラ１２の露光制御と、画像処理部１４の局所的輝度補正との連動を図ることにより、逆光などの画面内に局所的に暗所、明所が混在するようなシーンや、全体的に低照度のシーンにおいても、暗所情報の欠落を防ぐことができる。
【００３１】
（第４の実施形態）
本発明の第４の実施形態では、画像処理部の局所的輝度補正の判定動作を簡略化したシステムについて説明する。
このシステムの画像処理部は、図７に示すように、判定部１４１から補正オン信号が出力されたとき、所定のタイミングで、一定数に達するまで、タイミング信号を補正部１４２に出し続けるカウンタ１４５を備えている。判定部１４１は、画像の暗所領域の輝度を補正するための補正パラメータとして１つの補正パラメータα１だけを使用し、また、カウンタ１４５がタイミング信号を出力している間は、局所的輝度補正の判定動作を停止する。補正部１４２は、判定部１４１から補正オン信号が入力したとき、及び、カウンタ１４５からタイミング信号が入力したときに補正パラメータα１を用いて局所的輝度補正を実行する。その他の構成は第１の実施形態（図１）と変わりがない。
【００３２】
このシステムの判定部１４１は、入力画像を複数のブロックに分割し、局所的輝度補正が必要なブロックに対応して、補正オン信号と補正パラメータα１とを補正部１４２に出力する。補正部１４２は、これを受けて、そのブロックに対する局所的輝度補正を実行する。この補正オン信号は、判定部１４１からカウンタ１４５にも出力され、これを受けたカウンタ１４５は、以降の入力画像の該当するブロックが補正部１４２に渡る周期でタイミング信号を出力し、そのタイミング信号を出力するごとにカウント値を１つインクリメントする。カウンタ１４５は、カウント値が一定数に達するまで、この動作を続ける。この一定数は、ドアホン１１や監視カメラ１２におけるシーンチェンジの頻度を考慮して設定される。
【００３３】
なお、入力画像に局所的輝度補正の必要なブロックが複数存在する場合には、カウンタ１４５は、それら全てのブロックに対応したタイミング信号を出力する。
判定部１４１は、カウンタ１４５からタイミング信号が出力されている間、即ち、入力画像が一定数に達するまで、局所的輝度補正の判定動作を停止する。
補正部１４２は、判定部１４１から補正オン信号が入力したとき、及び、カウンタ１４５からタイミング信号が入力したときに、補正パラメータα１を用いて該当するブロックの局所的輝度補正を行う。
【００３４】
このシステムでは、画像処理部における局所的輝度補正の補正量決定のタイミングを間引くことができるため、局所的輝度補正に必要な処理量の削減が可能になる。その結果、システム全体のハードウエア及びソフトウエアリソースを節約することができ、その分を他の信号処理に割り当てることができ、また、システム全体のコストダウンを図ることができる。
【００３５】
（第５の実施形態）
本発明の第５の実施形態では、画像処理部をサービスプロバイダのサーバに設置した監視システムについて説明する。
このシステムは、図８（ａ）に示すように、公衆網１７に接続するサービスプロバイダのサーバ２０が画像処理部２１を有しており、利用者の住居内には、画像データを圧縮符号化する符号化部１４３だけが在る。画像処理部２１は、図８（ｂ）に示すように、入力する画像データを復号化する復号化部２１０と、復号化された画像の暗所領域の輝度補正量を判定する判定部２１１と、判定部２１１の判定結果に基づいて局所的な輝度の補正を行う補正部２１２と、輝度が補正された画像データを符号化する符号化部２１３とを備えている。その他の構成は第１の実施形態（図１）と同様である。
【００３６】
このシステムでは、ドアホンカメラ１１や住居用監視カメラ１２で撮影された画像が切り換え器１３に送られ、切り換え器１３で選択された画像が、符号化部１４３で符号化され、宅内ネットワーク１５、通信部１６を経て送信され、公衆網１７を経て、サービスプロバイダのサーバ２０上に備えられた画像処理部２１に送られる。
【００３７】
画像処理部２１では、復号化部２１０が、公衆網１７を介して入力された画像データを復号化する。判定部２１１は、第１の実施形態と同様に、入力画像を複数のブロックに分割し、ブロック毎の輝度レベルに応じた補正パラメータを決定する。補正部２１３は、判定部２１１で決定された補正パラメータに従って局所レベル輝度補正を行い、符号化部２１３は、再符号化する。
画像処理部２１で処理された画像データは、基地局１８を介して携帯端末１９に伝送され画面に表示される。
このように、画像処理部をサービスプロバイダのサーバに設けることにより、システム導入の際に利用者にかかる負担が軽減される。
【００３８】
（第６の実施形態）
本発明の第６の実施形態では、異常時の監視カメラの映像が警備会社や警備員のＴＶモニタ付き携帯端末に伝送される監視システムについて説明する。
このシステムは、図９に示すように、宅内または屋外に設置された異常検知センサ２２を備えており、また、この家を警備する警備会社の警備員がＴＶモニタ付き携帯端末１９を所持している。その他の構成は第１の実施形態（図１）と変わりがない。
このシステムの異常検知センサ２２は、異常を検知すると異常通報を発し、この異常通報は、通信部１６から公衆網１７、基地局１８を経て、警備会社２３及び、警備員が所持するＴＶモニタ付き携帯端末１９に伝送される。
【００３９】
一方、ドアホンカメラ１１や住居用監視カメラ１２で撮影された画像は、切り換え器１３に送られ、切り換え器１３で選択された画像は、画像処理部１４で局所的輝度補正処理及び符号化処理が行われた後、通信部１６から公衆網１７、基地局１８を介して、警備会社２３と、異常発生場所に出向く警備員のＴＶモニタ付き携帯端末１９とに伝送され、この携帯端末１９の画面、及び警備会社２３の端末画面に表示される。
【００４０】
このシステムでは、警備員が異常発生場所に到着する前に携帯端末の画面でその情況を把握することができ、例えば異常検知センサの通報が誤報であるときは現場に駆けつけなくても済む。また、現場での不審人物との鉢合わせを回避することができ、警備員の安全を確保することができる。
【００４１】
（第７の実施形態）
本発明の第７の実施形態では、カメラ付きデジタルコードレス子機で撮影した画像を伝送する監視システムについて説明する。
このシステムは、図１０（ａ）に示すように、カメラ２４２付きのデジタルコードレス子機２４と、宅内ネットワークとして機能するデジタルコードレス親機２５とを備えている。デジタルコードレス子機２４は、カメラ２４２の他に、画像データを符号化する符号化部２４３を備えている。デジタルコードレス親機２５は、図１０（ｂ）に示すように、入力する画像データを復号化する復号化部２６０と、復号化された画像を表示する表示器２６４と、復号化された画像の暗所領域の輝度補正量を判定する判定部２６１と、判定部２６１の判定結果に基づいて局所的な輝度補正を行う補正部２６２と、輝度が補正された画像データを符号化する符号化部２６３とを備えている。その他の構成は第１の実施形態（図１）と同様である。
【００４２】
カメラ付きデジタルコードレス子機２６のカメラ２４２で撮影された画像は、符号化部２４３で符号化され、デジタルコードレスのＰＨＳ回線経由で、デジタルコードレス親機２５に伝送される。
デジタルコードレス親機２５の画像処理部２６では、復号化部２６０が、カメラ付きデジタルコードレス子機２４から伝送された符号化された画像データを復号化し、表示器２６４に表示する。一方、判定部２６１は、入力画像を複数のブロックに分割してブロック毎の輝度レベルに応じた補正パラメータを決定し、補正部２６２は、判定部２６２で決定された補正パラメータを用いて局所的輝度補正を行い、符号化部２６３は再符号化する。
【００４３】
デジタルコードレス親機２５で処理された画像データは、通信部１６を経て送信され、公衆網１７及び基地局１８を介して、携帯端末１９に伝送され、表示される。
このように、宅内ネットワークにデジタルコードレスを使用することによって、新たにシステムを導入する際に、ケーブル配線工事を行わずにスムーズな導入ができ、また、予めデジタルコードレス電話が設置されている家庭では、新たなネットワーク機器の購入も不要で利用者の負担が軽減される。
【００４４】
また、デジタルコードレス親機で局所的輝度補正処理を行うことによって、子機のハードウエア及びソフトウエアリソースを節約することができる。また、子機導入台数に関わらず、局所的輝度補正処理を行う場所を１箇所に集中させているため、システム全体のコストダウンを図ることができる。
【００４５】
（第８の実施形態）
本発明の第８の実施形態では、カメラの内部に画像処理部を設ける場合について説明する。
このシステムは、図１１（ａ）に示すように、宅内やその周囲を撮影するために宅内や屋外などに設置された住居用監視カメラ２７と、宅内ネットワーク１５と、画像データを送信する通信部１６とが利用者の住居に設けられている。カメラ２７は、図１１（ｂ）に示すように、撮像部２７０と、判定部２７１と、補正部２７２と、符号化部２７３とを備えている。その他の構成は第１の実施形態（図１）と同様である。
【００４６】
この住居用監視カメラ２７の撮像部２７０で撮影された画像は、判定部２７１に入力し、判定部２７１は、入力画像を複数のブロックに分割してブロック毎の輝度レベルに応じた補正パラメータを決定する。補正部２７２は判定部２７１で決定された補正パラメータに従って局所的輝度補正処理を行い、符号化部２７３が符号化を行う。
【００４７】
このカメラの導入により、画面内に局所的に明部と暗部とが混在するシーンや全体的に低照度のシーンであっても、局所的な輝度レベルに応じたレベル補正が行われることにより、画面全体が均一に視認できるようになる。そのため遠隔地にいても宅内やその他の情況を的確に把握することができる。
【００４８】
（第９の実施形態）
本発明の第９の実施形態では、携帯端末の内部に画像処理部を設ける場合について説明する。
この携帯端末は、図１２に示すように、無線回線を経て伝送された画像データを受信する受信部１９０と、符号化された画像データを復号化する復号化部１９１と、復号化された画像を複数のブロックに分割しブロック毎の輝度レベルに応じた補正パラメータを決定する判定部１９２と、判定部１９２で決定された補正パラメータに従って局所的輝度補正を行う補正部１９３と、補正部１９３で補正された画像を表示する表示器１９４とから構成されている。
【００４９】
携帯端末１９に伝送された画像データは、受信部１９０を経て、復号化部１９１で復号化される。復号化された画像に対し、判定部１９２で入力画像の暗所領域の存在が判定され、必要に応じて補正部１９３で局所的輝度補正処理が行われ、輝度補正された画像が表示器１９４に表示される。
このシステムでは、局所的輝度補正処理がシステムの末端で行われるため、カメラで撮影された画像が動画像であった場合でも、符号化画像のフレームの相関を崩すことなく、この補正処理を行うことができる。
【００５０】
（第１０の実施形態）
本発明の第１０の実施形態では、携帯端末での画像処理を可能にするプログラムがサービスプロバイダのサーバから携帯端末にダウンロードされるシステムについて説明する。
このシステムでは、図１３に示すように、利用者の住居内に符号化部１４３を備え、サービスプロバイダのサーバ２０に画像処理のプログラム２０１を備え、携帯端末１９は、サーバ２０より転送されたプログラム２０１によって画像処理を行う。その他の構成は第１の実施形態と同様である。
このシステムでは、サービスプロバイダのサーバ２０に置かれた画像処理プログラム２０１が、基地局１８を介して、携帯端末１９に転送され、携帯端末１９のメモリに格納される。
【００５１】
一方、ドアホンカメラ１１や住居用監視カメラ１２で撮影された画像は切り換え器１３に送られ、切り換え器１３で選択された画像は、符号化部１４３で符号化処理が行われた後、通信部１６から公衆網１７、基地局１８を介して、ＴＶモニタ付き携帯端末１９に伝送される。携帯端末１９に伝送された画像データは、プログラム２０１により処理され表示される。
【００５２】
図１４のフローチャートは、この画像処理プログラムの手順を示している。
まず処理対象となる画像データを取得する（ステップ１）。次に、符号化されている画像データの復号化処理を行い（ステップ２）、その画像を複数のブロックに分割して、ブロック毎の輝度レベルに応じた補正パラメータを決定する（ステップ３）。次に、補正パラメータに従って局所的輝度補正処理を行う（ステップ４）。
【００５３】
このように、画像処理プログラムをサーバに置き、携帯端末が、サーバから転送されたプログラムに基づいて画像処理を行うことにより、携帯端末のハードウエアリソースが節約でき、また、携帯端末の種類によらず、画像処理を行うことが可能になる。また、局所的輝度補正処理がシステムの末端で行われるため、第９の実施形態で述べたように、カメラから動画像が送られて来る場合でも、符号化画像のフレームの相関を崩すことなく、局所的輝度補正処理を行うことができる。
【００５４】
【発明の効果】
以上の説明から明らかなように、本発明の監視システムでは、局所的輝度補正処理を行う画像処理回路を用いることにより、監視カメラの映像を表示するモニタ付き携帯端末の画面上の視認性を高めることができる。そのため、この携帯端末を保持する利用者や警備員は、遠隔地に居ても、来訪者や宅内の様子、異常発生場所の状況などを鮮明に見ることができる。
【図面の簡単な説明】
【図１】本発明の第１の実施形態における監視システムの構成を示すブロック図
【図２】本発明の第１の実施形態における局所的輝度補正処理を説明する図
【図３】本発明の第１の実施形態における携帯端末の表示画面を示す図
【図４】本発明の第１の実施形態における携帯端末の他の表示画面を示す図
【図５】本発明の第２の実施形態における画像処理部の構成を示すブロック図
【図６】本発明の第３の実施形態における監視システムの構成を示すブロック図
【図７】本発明の第４の実施形態における画像処理部の構成を示すブロック図
【図８】本発明の第５の実施形態における監視システム（ａ）及び画像処理部（ｂ）の構成を示すブロック図
【図９】本発明の第６の実施形態における監視システムの構成を示すブロック図
【図１０】本発明の第７の実施形態における監視システム（ａ）及び画像処理部（ｂ）の構成を示すブロック図
【図１１】本発明の第８の実施形態における監視システム（ａ）及びカメラ（ｂ）の構成を示すブロック図
【図１２】本発明の第９の実施形態における携帯端末の構成を示すブロック図
【図１３】本発明の第１０の実施形態における監視システムの構成を示すブロック図
【図１４】本発明の第１０の実施形態におけるプログラムの処理手順を示すフローチャート
【符号の説明】
１１ ドアホンカメラ
１２ 住居用監視カメラ
１３ 切り換え器
１４ 画像処理部
１５ 宅内ネットワーク
１６ 通信部
１７公衆網
１８ 基地局
１９ ＴＶモニタ付き携帯端末
２０ サーバ
２１ 画像処理部
２２ センサ
２３ 警備会社
２４ デジタルコードレス子機
２５ デジタルコードレス親機
２６ 画像処理部
２７ カメラ
１４１ 判定部
１４２ 補正部
１４３ 符号化部
１４４ 時計
１４５ カウンタ
１９０ 受信部
１９１ 復号化部
１９２ 判定部
１９３ 補正部
１９４ 表示器
２０１ プログラム
２１０ 復号化部
２１１ 判定部
２１２ 補正部
２１３ 符号化部
２４２ カメラ
２４３ 符号化部
２６０ 復号化部
２６１ 判定部
２６２ 補正部
２６３ 符号化部
２６４ 表示器
２７０ 撮像部
２７１ 判定部
２７２ 補正部
２７３ 符号化部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention provides a monitoring system that transmits and displays an image captured by a monitoring camera to a mobile terminal with a monitor, an image processing circuit that performs image processing thereof, and devices such as a mobile terminal and a camera that configure the system. The present invention relates to a program for defining the image processing method, and particularly to a program for appropriately correcting the luminance of a display image.
[0002]
[Prior art]
2. Description of the Related Art In recent years, a monitoring system for transmitting an image captured by a camera installed in a house or around a house to a portable terminal with a TV monitor of a user has been developed. In this system, a user who is out can monitor the state of his / her home through the screen of the mobile terminal.
[0003]
As described above, when an image captured by a camera is transmitted to a mobile terminal, an image whose resolution is reduced according to the monitor of the mobile terminal is transmitted. Therefore, the visibility on the monitor of the portable terminal is deteriorated. Patent Document 1 listed below discloses a moving image communication system in which when a user specifies an image area that the user wants to see clearly, an image with an increased resolution of the specified area is transmitted. I have.
[0004]
In this system, when a user performs an operation of designating a region (region of interest) to be viewed in detail from an image displayed on the receiving terminal with a mouse or the like, a GUI (Graphical) for specifying a resolution is displayed on the screen of the receiving terminal. User Interface) is displayed, and when the user performs a resolution designation operation, the position data of the region of interest and the resolution designation data are transmitted to the transmission side that provides the image of the camera. When the image of one frame of the camera is taken into the memory, the transmitting side cuts out the image data of the region of interest, converts it into image data of the designated resolution, and lowers the image data of the background region other than the region of interest. Convert to resolution. At this time, the resolution of the image data of the background area is set so that the data amount obtained by adding the data amount of the region of interest and the data amount of the background region satisfies the condition of the network load. The image data of the region of interest and the image data of the background region are transmitted to the receiving terminal, and on the screen of the receiving terminal, the region of interest is displayed in detail, and the background region is coarsely displayed.
[0005]
[Patent Document 1]
JP-A-7-288806
[0006]
[Problems to be solved by the invention]
However, when an image captured by a camera is viewed on a screen of a mobile terminal or the like, the brightness of the image greatly affects the visibility. If only low-illuminance images can be taken as a whole due to the installation location of the camera and the irradiation conditions, there is a limit to the improvement in visibility even if the resolution of the images is increased.
Further, when a dark place and a bright place are mixed in the screen, if the brightness correction is uniformly performed on the entire screen so that the dark place area can be visually recognized, the brightness which has been ensured until then is secured. A problem arises in that the location area becomes too bright and visibility deteriorates.
[0007]
The present invention is to solve such a conventional problem, and provides a monitoring system that can clearly display an image captured by a camera on a terminal regardless of irradiation conditions on a subject. It is an object of the present invention to provide an image processing circuit that performs the image processing, an apparatus that configures the system, and a computer program that defines the image processing method.
[0008]
[Means for Solving the Problems]
Therefore, in the present invention, an image processing circuit divides an input image into a plurality of regions, and determines a correction parameter according to a luminance level of each of the regions, and a correction parameter determined by the determination unit. And a correction unit for correcting the luminance level of the corresponding area according to the following.
This image processing circuit can locally correct the luminance of an image. Therefore, even when a bright portion and a dark portion are locally mixed in the screen, it is possible to correct only the brightness of the dark portion and maintain the brightness of the entire screen so that the entire screen can be easily seen, thereby improving the visibility.
[0009]
In the present invention, a surveillance system includes a surveillance camera, an image processing unit that corrects a local luminance level of an image captured by the surveillance camera, and image data processed by the image processing unit to a public network. A communication unit for transmitting, and a mobile terminal with a monitor for receiving and displaying the image data via a wireless line, and configured to divide the input image into a plurality of regions, A determining unit that determines a correction parameter according to a luminance level, a correcting unit that corrects a luminance level of the area corresponding to the correction parameter determined by the determining unit, and image data corrected by the correcting unit. And an encoding unit for encoding.
Therefore, even when the user is at a remote location, the user can clearly see the image reflected by the surveillance camera on the mobile terminal with a monitor.
[0010]
According to the present invention, a surveillance system includes a surveillance camera, an encoding unit that encodes an image captured by the surveillance camera, and a communication unit that transmits image data encoded by the encoding unit to a public network. And, an image processing unit that decodes the image data received via the public network and corrects a local luminance level of the image, and receives the image data processed by the image processing unit via a wireless line, The image processing unit, a decoding unit for decoding encoded image data, and each of the regions divided into a plurality of regions by decoding the decoded image. A determining unit that determines a correction parameter corresponding to the luminance level of the correction unit, a correction unit that corrects the luminance level of the corresponding area according to the correction parameter determined by the determination unit, The image data is provided an encoding unit for encoding.
In this system, the image processing unit can be provided in the server of the service provider, and the burden on the user can be reduced when introducing the system.
[0011]
According to the present invention, a surveillance system includes a surveillance camera, an encoding unit that encodes an image captured by the surveillance camera, and a communication unit that transmits image data encoded by the encoding unit to a public network. A server holding a program in which processing for correcting a local brightness level of an image is specified; and a local brightness of an image of the surveillance camera received via a wireless line after downloading the program from the server. It is composed of a mobile terminal with a monitor that corrects and displays the level.
In this system, when the portable terminal downloads the program from the server, local luminance correction can be performed in the portable terminal.
[0012]
Further, in the present invention, the digital cordless master unit has a receiving unit that receives encoded image data sent from the slave unit, a decoding unit that decodes the image data, and a plurality of decoded images. A determination unit that divides the region and determines a correction parameter according to each luminance level of the region, and a correction unit that corrects the luminance level of the region according to the correction parameter determined by the determination unit. An encoding unit for encoding the image data corrected by the correction unit and a display for displaying the decoded image are provided.
Using this digital cordless master unit and a digital cordless slave unit equipped with a camera, a monitoring system for a house or the like can be easily configured.
[0013]
Further, according to the present invention, the camera includes an imaging unit that captures an image of a subject, and a determination unit that divides the image captured by the imaging unit into a plurality of regions and determines a correction parameter according to a luminance level of each of the regions. A correction unit that corrects the luminance level of the area corresponding to the correction parameter determined by the determination unit; and an encoding unit that encodes the image data corrected by the correction unit.
This camera can perform a local luminance correction process on a captured image.
[0014]
Also, in the present invention, the monitor-equipped mobile terminal includes a decoding unit for decoding image data received via a wireless line, and an image decoded by the decoding unit divided into a plurality of regions. A determining unit that determines a correction parameter according to each of the luminance levels, a correcting unit that corrects the luminance level of the corresponding region according to the correction parameter that is determined by the determining unit, A display for displaying an image.
This portable terminal can display an easy-to-view screen by performing local brightness correction processing.
[0015]
Further, in the present invention, a step of dividing an input image into a plurality of regions by a program, a step of calculating a luminance level of each of the regions, and a step of calculating the luminance level for the region whose luminance level is a predetermined value or less. It is stipulated that a computer executes a procedure of determining a correction parameter for correcting a level and a procedure of correcting a luminance level of the corresponding area according to the correction parameter.
By downloading this program to a device online or via a recording medium, local brightness correction processing in the device becomes possible.
[0016]
BEST MODE FOR CARRYING OUT THE INVENTION
(1st Embodiment)
As shown in FIG. 1, a monitoring system according to a first embodiment of the present invention is installed in a door phone camera 11 for photographing a visitor installed at a front entrance, and installed in a house or outdoors to photograph the inside of a house or its surroundings. Surveillance camera 12 for residence, switch 13 for switching and outputting images taken by doorphone camera 11 and surveillance camera 12, and image for correcting and encoding brightness of image data output from switch 13 A processing unit 14, a home network 15 for connecting home devices to a network, a communication unit 16 for transmitting image data outside the home, and an image data transmitted from the communication unit 16 to a public network 17 and a base station 18. And a portable terminal 19 with a TV monitor for receiving images via the screen and displaying images on the screen.
Further, the image processing unit 14 includes a determining unit 141 that determines a luminance correction amount of a dark place area of the image, a correcting unit 142 that locally corrects luminance based on the determination result of the determining unit 141, And an encoding unit 143 for encoding the obtained image data.
[0017]
In this system, the switch 13 selects and outputs an image captured by the door phone camera 11 or the surveillance camera 12. The image processing unit 14 corrects the brightness of the dark area of the image output from the switch 13 and then encodes the image data. The encoded image data is transmitted to the public network 17 through the home network 15 and the communication unit 16 and transmitted from the base station 18 to the user's portable terminal 19 via a wireless line. The mobile terminal 19 decodes the received image data and displays the image on the screen.
When the subject reflected on the screen of the mobile terminal 19 is dark and difficult to see, the user operates the mobile terminal 19 to specify a part that is difficult to see. This information is sent to the image processing unit 14 following the reverse route, and the image processing unit 14 performs a process of correcting the luminance of the designated image region again, and the image whose luminance has been corrected is transmitted to the mobile terminal 19. Sent.
[0018]
The processing of the image processing unit 14 will be described in detail.
The determination unit 141 of the image processing unit 14 fetches the input image into the memory one frame at a time and divides the one frame image into a plurality of blocks in order to perform local luminance correction on the input image. For example, 16 × 16 pixels are included in one block, one frame image is divided into 22 × 18 = 396 blocks, and the average luminance of the pixels included in each block is calculated. Here, the average luminance of block i is Yi.
The image processing unit 14 corrects the luminance of the pixels of each block so that the average luminance of each block is on the thick line in FIG.
[0019]
That is, the correction of the luminance is not performed on the pixels of the block i whose average luminance Yi is equal to or higher than the reference luminance Y0.
The luminance yij of the pixels included in the block i whose average luminance Yi is lower than the reference luminance Y0 and equal to or higher than the luminance Ya is calculated using a correction parameter α1 (= 1 / k1) (where α1> 1).
(1-k1) Y0 + k1 · yij
To be corrected.
The luminance yij of the pixel included in the block i whose average luminance Yi is lower than the luminance Ya and is equal to or higher than the luminance Yb is calculated using a correction parameter α2 (= 1 / k2) (where α2>α1> 1).
(1-k2) Ya + k2 · yij
To be corrected.
[0020]
The determination unit 141 has a ROM (not shown) that stores correction parameters α1, α2,..., And determines a correction policy of the pixels included in each block from the average luminance Yi of each block. A correction on / off signal indicating whether or not to correct the block and a correction parameter αi required for correcting the block are output to 142. The correction unit 142 calculates the luminance value of each pixel included in the block for which the correction signal is on by using the correction parameter αi, and performs local luminance correction of the input image in block units.
[0021]
In addition, an image on which local luminance correction has been performed is displayed on the screen of the mobile terminal 19 as shown in FIG.
The user checks the image displayed on the mobile terminal 19, and when the subject is dark and difficult to see on the screen, performs an operation of designating an invisible portion with a cursor or the like as shown in FIG. 3B. . The information of the designated area is sent from the mobile terminal 19 to the image processing unit 14, and based on this information, the determination unit 141 increases the value of the correction parameter αi used for the luminance correction of the block included in the designated area by n times ( n> 1), and causes the correction unit 142 to perform local luminance correction on a subsequent input image in block units.
By enhancing the local luminance correction in this manner, the screen of the mobile terminal 19 becomes easy to see as shown in FIG.
[0022]
Further, as shown in FIG. 4, the correction degree of the luminance correction is displayed on the screen of the portable terminal 19 by a numerical value, and when the user performs an operation of changing the numerical value, the determination unit of the image processing unit 14. 141 may increase the values of all the correction parameters αi based on the changed numerical values.
[0023]
As described above, in this monitoring system, since the local luminance correction is performed according to the local luminance level of the image, only the luminance of the dark part is corrected, and the adverse effect that the bright part becomes difficult to see due to the correction occurs. do not do. Therefore, the visibility of the entire screen can be improved by the luminance correction even for a scene in which a bright portion and a dark portion are mixed in the screen or a scene with low illuminance as a whole. Therefore, even in a remote place, it is possible to accurately grasp the inside of the house and other conditions.
[0024]
Further, in this system, since a region in which the degree of correction of the local level correction is desired to be increased can be designated from the portable terminal, the user can perform the local level correction on a desired region after checking the display image.
It is also possible to specify the degree of luminance correction quantitatively from the mobile terminal, and the user can obtain the desired visibility by specifying the degree of correction after confirming the display image.
Note that the correction method in the image processing unit 14 shown here is an example, and the present invention is not limited to this. Further, the correction parameter may specify an amplification degree of an amplifier that amplifies an input image.
[0025]
(Second embodiment)
In the second embodiment of the present invention, a system for changing a correction parameter for local brightness correction depending on a time zone will be described.
In this system, as shown in FIG. 5, the image processing unit 14 includes a clock 144, and the determination unit 141 changes a correction parameter output to the correction unit 142 based on time data input from the clock 144. . Other configurations are the same as those of the first embodiment.
[0026]
For example, the determination unit 141 sets a correction parameter to increase the correction degree in a time zone where the illuminance decreases after evening, and sets the correction parameter to weaken the correction degree in a time zone in which the illuminance in the daytime is sufficient. select.
The relationship between the time data and the correction parameter is stored in a ROM (not shown) of the determination unit 141. The determination unit 141 associates the time data input from the clock 144 with the address of the ROM, The correction parameter corresponding to the time is read and output to the correction unit 142.
[0027]
With this system, even if the degree of coexistence of bright and dark areas in the screen or the illuminance of the entire screen changes due to changes in the irradiation conditions with time, local level correction can be performed according to the irradiation conditions. In addition, uniform visibility of the entire screen can be obtained regardless of the time zone.
[0028]
(Third embodiment)
In the third embodiment of the present invention, a system will be described in which exposure control of a door phone camera or a surveillance camera is linked with local brightness correction of an image processing unit.
In the case where the field of view of the camera is dark, dark place information may be lost if the exposure is set to be large and the brightness of the image is to be ensured. In this system, in order to prevent such a situation, as shown in FIG. 6, the correction on / off signal output for the local luminance correction from the determination unit 141 of the image processing unit 14 The data is also input to the door phone camera 11 and the surveillance camera 12. Other configurations are the same as those of the first embodiment (FIG. 1).
[0029]
When only the OFF correction signal is output from the determination unit 122 to the input image of one frame, that is, when the image is bright, normal exposure control is performed by the door phone camera 11 and the surveillance camera 12. When an ON correction signal is output from the determination unit 122, the door phone camera 11 and the surveillance camera 12 perform exposure control to leave dark place information. A dark place on the screen caused by this exposure control is corrected to a brightness that is easy to see by local brightness correction of the image processing unit 14, and the dark place information can be visually recognized.
For an image with extremely low illuminance such that an imaging luminance of a level necessary for local luminance correction cannot be obtained, the integration function of accumulating images of a plurality of frames in the door phone camera 11 or the surveillance camera 12 is effective. To secure the minimum luminance required for local luminance correction.
[0030]
In this way, by interlocking the exposure control of the intercom camera 11 and the surveillance camera 12 with the local brightness correction of the image processing unit 14, a dark place and a bright place are locally mixed in a screen such as a backlight. Even in such a scene or a scene with low illuminance as a whole, it is possible to prevent lack of dark place information.
[0031]
(Fourth embodiment)
In a fourth embodiment of the present invention, a system that simplifies the determination operation of the local luminance correction of the image processing unit will be described.
As shown in FIG. 7, when the correction ON signal is output from the determination unit 141, the image processing unit of this system keeps outputting a timing signal to the correction unit 142 at a predetermined timing until a predetermined number is reached. It has. The determination unit 141 uses only one correction parameter α1 as a correction parameter for correcting the luminance of a dark place area of an image, and performs local luminance correction while the counter 145 outputs a timing signal. Stop the judgment operation. The correction unit 142 performs local brightness correction using the correction parameter α1 when the correction ON signal is input from the determination unit 141 and when the timing signal is input from the counter 145. Other configurations are the same as those of the first embodiment (FIG. 1).
[0032]
The determination unit 141 of this system divides an input image into a plurality of blocks, and outputs a correction-on signal and a correction parameter α1 to the correction unit 142 corresponding to blocks requiring local luminance correction. Receiving this, the correction unit 142 performs local luminance correction on the block. The correction ON signal is also output from the determination unit 141 to the counter 145, and upon receiving the signal, the counter 145 outputs a timing signal in a cycle in which a subsequent block of the input image passes to the correction unit 142, and the timing signal Every time is output, the count value is incremented by one. The counter 145 continues this operation until the count value reaches a certain number. This fixed number is set in consideration of the frequency of scene changes in the door phone 11 and the surveillance camera 12.
[0033]
When there are a plurality of blocks requiring local luminance correction in the input image, the counter 145 outputs timing signals corresponding to all the blocks.
The determination unit 141 stops the local brightness correction determination operation while the timing signal is being output from the counter 145, that is, until the input image reaches a certain number.
The correction unit 142 performs local brightness correction of the corresponding block using the correction parameter α1 when the correction ON signal is input from the determination unit 141 and when the timing signal is input from the counter 145.
[0034]
In this system, the timing of determining the correction amount of the local luminance correction in the image processing unit can be thinned out, so that the processing amount required for the local luminance correction can be reduced. As a result, the hardware and software resources of the entire system can be saved, the corresponding amount can be allocated to other signal processing, and the cost of the entire system can be reduced.
[0035]
(Fifth embodiment)
In a fifth embodiment of the present invention, a monitoring system in which an image processing unit is installed in a service provider server will be described.
In this system, as shown in FIG. 8A, a server 20 of a service provider connected to a public network 17 has an image processing unit 21, and image data is compression-encoded in a user's residence. There is only an encoding unit 143 that performs the encoding. The image processing unit 21 includes, as shown in FIG. 8B, a decoding unit 210 that decodes input image data, a determination unit 211 that determines a luminance correction amount of a dark region of the decoded image. , A correction unit 212 that locally corrects luminance based on the determination result of the determination unit 211, and an encoding unit 213 that encodes image data whose luminance has been corrected. Other configurations are the same as those of the first embodiment (FIG. 1).
[0036]
In this system, an image photographed by the door phone camera 11 or the monitoring camera 12 for home is sent to the switch 13, and the image selected by the switch 13 is encoded by the encoding unit 143, and the home network 15 The data is transmitted via the unit 16 and is transmitted via the public network 17 to the image processing unit 21 provided on the server 20 of the service provider.
[0037]
In the image processing unit 21, the decoding unit 210 decodes the image data input via the public network 17. The determination unit 211 divides an input image into a plurality of blocks and determines a correction parameter according to a luminance level for each block, as in the first embodiment. The correction unit 213 performs local level luminance correction according to the correction parameter determined by the determination unit 211, and the encoding unit 213 performs re-encoding.
The image data processed by the image processing unit 21 is transmitted to the mobile terminal 19 via the base station 18 and displayed on a screen.
As described above, by providing the image processing unit in the server of the service provider, the burden on the user when introducing the system is reduced.
[0038]
(Sixth embodiment)
In the sixth embodiment of the present invention, a surveillance system in which an image of a surveillance camera at the time of an abnormality is transmitted to a mobile terminal with a TV monitor of a security company or a security officer will be described.
As shown in FIG. 9, this system includes an abnormality detection sensor 22 installed in a house or outdoors, and a guard of a security company guarding the house carries a portable terminal 19 with a TV monitor. I have. Other configurations are the same as those of the first embodiment (FIG. 1).
When the abnormality detection sensor 22 of this system detects an abnormality, it issues an abnormality report. The abnormality report is transmitted from the communication unit 16 via the public network 17 and the base station 18 to a security company 23 and a TV monitor carried by security personnel. The data is transmitted to the mobile terminal 19.
[0039]
On the other hand, an image photographed by the door phone camera 11 or the residential monitoring camera 12 is sent to the switch 13, and the image selected by the switch 13 is subjected to local brightness correction processing and encoding processing by the image processing unit 14. After that, the information is transmitted from the communication unit 16 via the public network 17 and the base station 18 to a security company 23 and a portable terminal 19 with a TV monitor of a guard who goes to the location where the abnormality has occurred. , And on the terminal screen of the security company 23.
[0040]
In this system, the security staff can grasp the situation on the screen of the mobile terminal before arriving at the place where the abnormality has occurred. For example, when a report from the abnormality detection sensor is a false report, it is not necessary to rush to the site. In addition, it is possible to avoid matching with a suspicious person at the site, and it is possible to ensure the security of security guards.
[0041]
(Seventh embodiment)
In a seventh embodiment of the present invention, a surveillance system for transmitting an image captured by a digital cordless handset with a camera will be described.
As shown in FIG. 10A, this system includes a digital cordless handset 24 with a camera 242 and a digital cordless base unit 25 functioning as a home network. The digital cordless handset 24 includes an encoding unit 243 for encoding image data, in addition to the camera 242. As shown in FIG. 10B, the digital cordless master device 25 includes a decoding unit 260 that decodes input image data, a display unit 264 that displays the decoded image, and a display unit 264 that displays the decoded image. A determining unit 261 that determines the amount of luminance correction in a dark place area, a correcting unit 262 that performs local luminance correction based on the determination result of the determining unit 261, and an encoding unit that encodes image data whose luminance has been corrected. 263. Other configurations are the same as those of the first embodiment (FIG. 1).
[0042]
The image captured by the camera 242 of the digital cordless handset 26 with a camera is encoded by the encoding unit 243 and transmitted to the digital cordless base unit 25 via the digital cordless PHS line.
In the image processing unit 26 of the digital cordless parent device 25, the decoding unit 260 decodes the encoded image data transmitted from the digital cordless child device with camera 24, and displays it on the display 264. On the other hand, the determination unit 261 divides the input image into a plurality of blocks and determines a correction parameter according to the luminance level of each block. The correction unit 262 uses the correction parameter determined by the determination unit 262 to locally determine a correction parameter. After performing luminance correction, the encoding unit 263 performs re-encoding.
[0043]
The image data processed by the digital cordless master unit 25 is transmitted via the communication unit 16, transmitted to the portable terminal 19 via the public network 17 and the base station 18, and displayed.
In this way, by using digital cordless for the home network, when introducing a new system, it can be smoothly introduced without performing cable wiring work, and in homes where digital cordless telephones are installed in advance, In addition, it is unnecessary to purchase a new network device, and the burden on the user is reduced.
[0044]
In addition, by performing local luminance correction processing in the digital cordless master, hardware and software resources of the slave can be saved. Further, regardless of the number of slave units installed, the locations where the local brightness correction processing is performed are concentrated at one location, so that the cost of the entire system can be reduced.
[0045]
(Eighth embodiment)
In the eighth embodiment of the present invention, a case where an image processing unit is provided inside a camera will be described.
As shown in FIG. 11 (a), this system includes a residential monitoring camera 27 installed in a house or outdoors for taking pictures of the house or its surroundings, a house network 15, and a communication unit for transmitting image data. 16 are provided in the user's residence. As shown in FIG. 11B, the camera 27 includes an imaging unit 270, a determination unit 271, a correction unit 272, and an encoding unit 273. Other configurations are the same as those of the first embodiment (FIG. 1).
[0046]
The image captured by the image capturing unit 270 of the residential monitoring camera 27 is input to the determining unit 271, and the determining unit 271 divides the input image into a plurality of blocks and calculates a correction parameter corresponding to the luminance level of each block. decide. The correction unit 272 performs a local luminance correction process according to the correction parameter determined by the determination unit 271, and the encoding unit 273 performs encoding.
[0047]
With the introduction of this camera, even in a scene where a bright part and a dark part are locally mixed in the screen or a scene with low illuminance as a whole, level correction according to the local luminance level is performed, The entire screen can be viewed evenly. Therefore, even in a remote place, it is possible to accurately grasp the inside of the house and other situations.
[0048]
(Ninth embodiment)
In a ninth embodiment of the present invention, a case will be described in which an image processing unit is provided inside a mobile terminal.
As shown in FIG. 12, the portable terminal includes a receiving unit 190 that receives image data transmitted via a wireless line, a decoding unit 191 that decodes encoded image data, and a decoded image Is divided into a plurality of blocks to determine a correction parameter according to the luminance level of each block, a correction unit 193 that performs local luminance correction according to the correction parameter determined by the determination unit 192, and a correction unit 193. And a display 194 for displaying the corrected image.
[0049]
The image data transmitted to the mobile terminal 19 passes through the receiving unit 190 and is decoded by the decoding unit 191. The determination unit 192 determines the presence of a dark area in the input image with respect to the decoded image, and performs a local luminance correction process in the correction unit 193 as necessary, and displays the luminance-corrected image on the display 194. Will be displayed.
In this system, since the local brightness correction processing is performed at the end of the system, even if the image captured by the camera is a moving image, the correction processing is performed without breaking the correlation between the frames of the encoded image. be able to.
[0050]
(Tenth embodiment)
In a tenth embodiment of the present invention, a system in which a program that enables image processing on a mobile terminal is downloaded from a service provider server to the mobile terminal will be described.
In this system, as shown in FIG. 13, an encoding unit 143 is provided in a user's residence, an image processing program 201 is provided in a service provider server 20, and a portable terminal 19 is provided with a program transferred from the server 20. Image processing is performed by 201. Other configurations are the same as those of the first embodiment.
In this system, an image processing program 201 placed on a server 20 of a service provider is transferred to a portable terminal 19 via a base station 18 and stored in a memory of the portable terminal 19.
[0051]
On the other hand, an image captured by the door phone camera 11 or the residential monitoring camera 12 is sent to the switching unit 13, and the image selected by the switching unit 13 is subjected to encoding processing by the encoding unit 143, and then to the communication unit. 16 to a portable terminal 19 with a TV monitor via a public network 17 and a base station 18. The image data transmitted to the mobile terminal 19 is processed and displayed by the program 201.
[0052]
The flowchart of FIG. 14 shows the procedure of the image processing program.
First, image data to be processed is obtained (step 1). Next, decoding processing of the encoded image data is performed (step 2), the image is divided into a plurality of blocks, and correction parameters corresponding to the luminance level of each block are determined (step 3). Next, local brightness correction processing is performed according to the correction parameters (step 4).
[0053]
As described above, the image processing program is placed on the server, and the mobile terminal performs the image processing based on the program transferred from the server, so that the hardware resources of the mobile terminal can be saved. Instead, image processing can be performed. In addition, since the local luminance correction processing is performed at the end of the system, even when a moving image is transmitted from the camera, the correlation between the frames of the encoded image is maintained, as described in the ninth embodiment. , A local brightness correction process can be performed.
[0054]
【The invention's effect】
As is clear from the above description, in the monitoring system of the present invention, by using the image processing circuit for performing the local luminance correction processing, the visibility on the screen of the mobile terminal with the monitor that displays the image of the monitoring camera is improved. be able to. Therefore, even if the user or the security guard holding the portable terminal is at a remote place, he / she can clearly see the visitor, the state of the house, the situation of the place where the abnormality has occurred, and the like.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a monitoring system according to a first embodiment of the present invention.
FIG. 2 is a view for explaining local luminance correction processing according to the first embodiment of the present invention.
FIG. 3 is a diagram showing a display screen of the mobile terminal according to the first embodiment of the present invention.
FIG. 4 is a diagram showing another display screen of the mobile terminal according to the first embodiment of the present invention.
FIG. 5 is a block diagram illustrating a configuration of an image processing unit according to a second embodiment of the present invention.
FIG. 6 is a block diagram illustrating a configuration of a monitoring system according to a third embodiment of the present invention.
FIG. 7 is a block diagram illustrating a configuration of an image processing unit according to a fourth embodiment of the present invention.
FIG. 8 is a block diagram illustrating a configuration of a monitoring system (a) and an image processing unit (b) according to a fifth embodiment of the present invention.
FIG. 9 is a block diagram showing a configuration of a monitoring system according to a sixth embodiment of the present invention.
FIG. 10 is a block diagram illustrating a configuration of a monitoring system (a) and an image processing unit (b) according to a seventh embodiment of the present invention.
FIG. 11 is a block diagram showing a configuration of a monitoring system (a) and a camera (b) according to an eighth embodiment of the present invention.
FIG. 12 is a block diagram showing a configuration of a mobile terminal according to a ninth embodiment of the present invention.
FIG. 13 is a block diagram showing a configuration of a monitoring system according to a tenth embodiment of the present invention.
FIG. 14 is a flowchart showing a processing procedure of a program according to the tenth embodiment of the present invention;
[Explanation of symbols]
11 Door phone camera
12 Residential surveillance camera
13 Switch
14 Image processing unit
15 home network
16 Communication unit
17 public network
18 base stations
19 Portable terminal with TV monitor
20 servers
21 Image processing unit
22 sensors
23 Security Company
24 Digital Cordless Handset
25 Digital cordless parent machine
26 Image processing unit
27 Camera
141 Judgment unit
142 Correction unit
143 Encoding unit
144 clock
145 counter
190 Receiver
191 Decoding unit
192 Judgment unit
193 Correction unit
194 display
201 Program
210 Decoding unit
211 Judgment unit
212 Correction unit
213 Encoding unit
242 camera
243 encoding unit
260 Decoding unit
261 Judgment unit
262 Correction unit
263 Encoding unit
H.264 display
270 Imaging unit
271 Judgment unit
272 Correction unit
273 Encoding unit
