JP5934993B2 - 画像送信装置及び画像送受信システム - Google Patents

画像送信装置及び画像送受信システム Download PDF

Info

Publication number
JP5934993B2
JP5934993B2 JP2011217432A JP2011217432A JP5934993B2 JP 5934993 B2 JP5934993 B2 JP 5934993B2 JP 2011217432 A JP2011217432 A JP 2011217432A JP 2011217432 A JP2011217432 A JP 2011217432A JP 5934993 B2 JP5934993 B2 JP 5934993B2
Authority
JP
Japan
Prior art keywords
image
image data
monitoring target
data
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011217432A
Other languages
English (en)
Other versions
JP2013078030A (ja
Inventor
公士 京面
公士 京面
大西 克則
克則 大西
山中 睦裕
睦裕 山中
庄司 武正
武正 庄司
阪本 英雄
英雄 阪本
恵一 吉田
恵一 吉田
前田 一成
一成 前田
池田 光治
光治 池田
守雄 中村
守雄 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2011217432A priority Critical patent/JP5934993B2/ja
Publication of JP2013078030A publication Critical patent/JP2013078030A/ja
Application granted granted Critical
Publication of JP5934993B2 publication Critical patent/JP5934993B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、撮像された画像(動画)をフレーム間差分方式の圧縮方式で圧縮して送信する画像送信装置、及びその画像送信装置と、画像送信装置から送信された画像データを受信する受信装置とを備えた画像送受信システムに関する。
近年、画像データを圧縮して送信する技術は、家屋内外の要所に配設されたカメラで撮像された画像を家屋内のモニタで表示可能とするいわゆるホームセキュリティシステムへの応用が検討されている。ホームセキュリティシステムにおいては、監視カメラ(画像送信装置)からモニタ装置(画像受信装置)に画像データを送信する際に、無線LANを用いる技術の他、特定小電力無線を用いる技術が検討されている。
特定小電力無線は、無線LANと比較すると低消費電力で長距離通信が可能という長所を有しているが、その反面、通信に使用できる周波数帯域は狭い。そのため、ホームセキュリティシステムに特定小電力無線を適用する場合には、画像データを圧縮することにより、送信に必要なビットレートを少なくすることが要求される。
画像データを圧縮する技術としては、H.264やMPEG等の規格が知られている。ホームセキュリティシステムの用途において良好な画質を得るためには、QVGA相当の解像度(320×240ドット)では、15〜30fps程度のフレームレートが必要とされる。また、VGA相当の解像度(640×480ドット)では、7.5〜15fps程度のフレームレートが必要とされる。ところが、上記解像度とフレームレートの組み合わせによる画像データをH.264やMPEG等の規格を適用して圧縮した場合であっても、特定小電力無線で伝送可能なビットレートを超えることがある。そこで、監視カメラとモニタ装置の間の通信に特定小電力無線を適用してホームセキュリティシステムを構築するためには、実用上問題となる監視領域の画質の低下を抑制しつつ、さらなる低ビットレート化を実現する技術が要求されている。
例えば特許文献1には、連続して撮像された第1画像と第2画像の画像データの差分を取り、第2画像に変化がある場合に、第2画像のうち変化した領域のみを抽出して送信する技術が開示されている(請求項1)。また、連続して撮像された第1画像と第2画像の画像データの差分を取り、第2画像に変化が生じていないときは画像データを間引いて送信し、変化が生じているときは画像データを間引かずに送信する技術が開示されている(請求項3)。
特開2001−320707号公報
上記特許文献1の前者の技術によれば、送信された第2画像の変化領域の画像を貼り付けるための背景画像データが、画像受信装置側に記憶されていなければならず、また背景画像データに受信した画像データを合成する機能を有していなければならない。そのため、画像送信装置と画像受信装置がそれぞれ専用のものでなければならず、特に、既存の画像受信装置(モニタ装置等)に画像送信装置(カメラ等)を追加してホームセキュリティシステムを構築することができない。また、第2画像における変化領域が広範囲である場合、第2画像の全画像データに対する抽出された画像データの量が多く、特定小電力無線を用いた画像データの送信が不可能となる場合もあり得る。また、後者の技術によれば、撮像領域に連続して移動する人や自動車等の物体が写り込んでいるときは、画像送信装置から常にデータ量の多い画像データが送信されることになり、特定小電力無線を用いた画像データの送信が不可能となる場合もあり得る。
本発明は、上記課題を解決するためになされたものであり、既存の画像受信装置に対して画像データを送信することも可能であり、監視対象領域の画質の低下を抑制しつつ、さらなる低ビットレート化を実現可能な画像送信装置、及びその画像送信装置と、画像送信装置から送信された画像データを受信する受信装置とを備えた画像送受信システムを提供することを目的とする。
上記目的を達成するために本発明の画像送信装置は、
あらかじめ用意されている基準画像の画像データを記憶するための画像データ記憶手段と、
入力画像を撮像し、撮像した前記入力画像の画像データを出力する撮像装置と、
所定の検出範囲に人が進入したことを検知したときに、前記撮像装置を起動して撮像を開始するためのトリガ信号を出力する人体検知センサと、
前記入力画像の画像データと前記基準画像の画像データとを比較し、前記入力画像の画像データから、画像データが変化した領域のうち所定の条件を満たす監視対象領域の画像データを抽出する画像データ抽出手段と、
前記基準画像の画像データに前記監視対象領域の画像データを合成する画像データ合成手段と、
前記合成された画像データをフレーム間差分方式で圧縮する画像データ圧縮手段と、
圧縮された画像データを送信する画像データ送信手段を備え、
前記入力画像の画像データは、前記人体検知センサによりトリガ信号が入力されたときに、前記撮像装置により一定間隔で撮像される画像データであり、
前記基準画像の画像データは、前記トリガ信号とは別に、前記撮像装置により撮像され、前記画像データ記憶手段に記憶されている画像データであることを特徴とする。
前記画像データ抽出手段は、前記入力画像の画像データと前記基準画像の画像データを比較解析して移動体の検出を行い、その結果に基づいて、前記移動体を含む所定の範囲を前記監視対象領域とすることが好ましい。
前記画像データ抽出手段は、前記入力画像の画像データと前記基準画像の画像データを比較解析して顔画像又は人体画像の検出を行い、その結果に基づいて、前記顔画像又は前記人体画像を含む所定の範囲を前記監視対象領域とすることが好ましい。
または、前記画像データ抽出手段は、前記入力画像の画像データに所定のパターンマッチング処理を施して特定の被写体の画像の検出を行い、その結果に基づいて、前記特定の被写体を含む所定の範囲を前記監視対象領域とすることが好ましい。
または、前記画像データ抽出手段は、前記入力画像の画像データを解析して顔画像又は人体画像の検出を行い、特定形状の被写体の画像を含む所定の範囲を前記監視対象領域とすることが好ましい。
または、前記監視対象領域は、前記入力画像におけるあらかじめ設定された範囲であることが好ましい。
前記移動体の検出において、検出された移動体の移動量を所定の閾値と比較し、該所定の閾値よりも小さい場合、前記検出された移動体を含む領域を前記監視対象領域から除外することを特徴とする請求項に記載の画像送信装置。
前記基準画像の画像データと前記抽出された監視対象領域の画像データを合成する際、前記抽出された監視対象領域の画像データの境界の画素の色調を、それらの画素と隣接する前記基準画像の画像データの画素の色調とその色調の中間の色調に補正することが好ましい。
または、前記監視対象領域の広さは、この画像送信装置の利用者が任意に変更できることが好ましい。
前記画像送信装置は、画像受信装置との間で画像データ以外の信号の送受信を行う通信手段と、前記通信手段による通信状態の良否を特定する通信状態特定手段と、前記通信状態特定手段により特定された通信手段の通信状態の良否に応じて、前記画像受信装置に送信する画像データのデータ量を変化させるデータ量可変手段を備えることが好ましい。
前記データ量可変手段は、前記通信手段のノイズ又はビットエラーレートが所定の閾値よりも小さいときは、前記合成した画像データを第1の圧縮率で圧縮し、前記通信手段のノイズ又はビットエラーレートが所定の閾値よりも大きいときは、前記合成した画像データを前記第1の圧縮率よりも高い第2の圧縮率で圧縮することが好ましい。
また、本発明に係る画像送受信システムは、上記いずれかの画像送信装置と、前記画像送信装置から送信された画像データを受信する受信装置とを備えたことを特徴とする。
本発明によれば、撮像装置等から入力された入力画像の画像データから、比較的重要な情報が含まれている監視対象領域の画像データを抽出し、あらかじめ用意されている基準画像データと抽出された監視対象領域の画像データを合成し、合成した画像データをフレーム間差分方式で圧縮して送信する。フレーム間差分方式で画像データを圧縮する際、前フレームの画像データと今回送信するフレームの画像データの差分を取るが、基準画像データは変化していないので、第2フレーム以降は、実質的に監視対象領域の画像データのみが送信されることになる。そのため、低ビットレートで画像データを送信しても、監視対象領域の画質の低下を抑制することができる。また、画像受信装置は、圧縮された画像データを復元(伸張)する機能を有していればよく、それ以外の機能を特に必要としない。そのため、既存の画像受信装置を用いてホームセキュリティシステム等の画像送受信システムを構築することができる。
本発明の一実施形態による画像送信装置及び画像受信装置の一例として、ホームセキュリティシステムのブロック構成を示す図。 撮像装置によって撮像された基準画像(背景画像)の一例を示す図。 撮像装置によって撮像された入力画像の一例を示す図。 監視対象領域と非監視対象領域に分離された入力画像を示す図。 移動体を検出することにより、監視対象としての重要度を判断する例を示す図。 顔画像を検出することにより、監視対象としての重要度を判断する例を示す図。 特定の被写体の画像を検出することにより、監視対象としての重要度を判断する例を示す図。 入力画像を構成する画素領域に基づいて、監視対象としての重要度を判断する例を示す図。 監視対象領域の抽出と基準画像と監視対象領域の画像の合成を概念的に示す図。
本発明の一実施形態に係る画像送信装置及び画像送受信システムについて説明する。図1は、本実施形態による画像送信装置を用いたホームセキュリティシステム(画像送受信システム)1を例示する。また、画像送信装置10は、例えば屋外に配置されるドアホン子機又は監視カメラであり、画像受信装置20は屋内に設置されるドアホン親機である。なお、画像送信装置10と画像受信装置20の間で音声データも送受信されるが、音声データは画像データよりもデータ量が圧倒的に少ないため、通信に特定小電力無線を用いる場合であっても、従来の音声データ圧縮方法を用いても問題となることはない。また、監視カメラの場合、必ずしも集音したり、音声データを送信したりする必要はない。そのため、以下の説明においても画像送信装置及び画像受信装置と称する。
画像送信装置10は、撮像装置11によって撮像した画像データ及びマイク13によって集音した音声データを送信する。画像受信装置20は、ドアホン子機10から送信された画像データ及び音声データを受信して、モニタ22及びスピーカ24によって再生する。これにより、訪問者等の画像や音声を確認でき、これらの情報は、必要に応じて、画像受信装置20側の第2記憶部26等に保存される。画像送信装置10と画像受信装置20とは、例えば特定小電力無線を用いて画像データや音声データ、その他の制御信号等の送受信を行う。
画像送信装置10がドアホン子機である場合、所定の範囲の画像を撮像する撮像装置11と、訪問者に操作される呼び出しボタン等のスイッチ12と、訪問者と会話を行うためのマイク13及びスピーカ14を備えている。また、ドアホン子機10は、所定の範囲に人が立ち入ったことを検出するための人体感知センサ18やその所定の範囲の明るさを検出するための照度センサ19等を備えていてもよい。一方、画像送信装置10が監視カメラである場合、撮像装置11と、人体感知センサ18と、照度センサ19と、また、必要に応じてマイク13を備えていればよい。さらに、画像送信装置10は、撮像装置11等を制御する第1制御部15と、撮像装置11により撮像された画像データや所定の制御プログラム等を記憶する第1記憶部16と、画像受信装置20との間で画像データ等の送受信を行う第1送受信部17を備えている。なお、図示していないが、画像送信装置10は、乾電池等の独立した電源を備えている。
撮像装置11は、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の撮像素子(Image Sensor)を有し、画像送信装置10の周辺の画像を撮像し、電子的な画像データに変換して出力する。マイク13は、画像送信装置10の周辺の音声を集音し、電子的な音声データに変換して出力する。制御部15は、例えばCPU等で構成されている。第1送受信部17は、撮像装置11から出力された画像データ及びマイク13から出力された音声データや、その他の信号を特定小電力無線にて送信し、画像受信装置20から送信された音声データや各種の信号を受信する。特定小電力無線は、送信に要する電力を抑制できるので、電池の消耗を抑制し、その交換サイクルを長くすることができる。
画像受信装置20は、第1送受信部17から送信された画像データ等を受信する第2送受信部27と、受信した画像データを再生するモニタ22と、訪問者と会話を行うためのマイク23及びスピーカ24を備えている。また、画像受信装置20は、これら第2送受信部27等を制御するための第2制御部25と、受信した画像データや所定の制御プログラム等を一時的に記憶するための第2記憶部26を備えている。第2送受信部27は、第1送受信部17から送信された画像データ及び音声データや、その他の信号を受信すると共に、マイク23から出力された音声データや、その他の信号を第1送受信部17に送信する。
図2は、撮像装置11によりあらかじめ撮像された基準画像(又は背景画像)40の一例を示す。この基準画像40は、第1制御部15が、例えば人体感知センサ18の出力に基づいて、所定の検出領域に人が存在していないことを確認したときに、撮像装置11により撮像され、その画像データが第1記憶部16に記憶される。基準画像40は、あらかじめ設定された時刻に撮像してもよいし、あるいは、照度センサ19により検出された上記所定の検出領域の輝度変化が所定の閾値を超えたときに撮像するように構成してもよい。基準画像40は静止画であって、通常は1フレームのみ撮像される。
人体感知センサ18が所定の検出領域内に人の存在を検出すると又は訪問者が呼び出しボタン等のスイッチ12を操作すると、第1制御部15は、これら人体感知センサ18又はスイッチ12から出力されるトリガ信号に応じて、撮像装置11を起動し、図3に示すような入力画像41を撮像する。入力画像41は動画であり、一定間隔(例えば1秒間に15フレーム、30フレーム等)で撮像される。撮像装置11から出力される画像データは、順に第1制御部15に入力される。第1制御部15は画像データ抽出手段として機能し、入力された画像データと第1記憶部16に記憶されている基準画像の画像データを比較し、変化分(差分データ)を抽出する。そして、第1制御部15は画像データ合成手段として機能し、基準画像の画像データと差分データを合成して出力する。撮像装置11から1コマ分の画像データが出力されるたびに、第1制御部15はこの画像データ処理を行う。
ところで、撮像装置11により撮像される画像には、訪問者31以外の背景等も含まれる。画像送信装置10が集合住宅のエントランス等に設置されている場合は、背景画像はあまり変化しない。一方、画像送信装置10が戸建て住宅の屋外等に設置されている場合は、例えば図2及び図3に示すように、背景には樹木30や小動物32等の変化又は移動するものが多く含まれ、背景画像全体の変化量は、決して少なくない。そのため、基準画像の画像データと入力画像の画像データを単純に比較し、変化分(差分データ)を全て抽出したとすると、基準画像の画像データに差分データを貼り付けた画像データは、入力画像の画像データそのものと大差なくなる。そこで、第1制御部15は、入力画像の画像データを解析して、画像が変化した領域のうち、所定の条件を満たす監視対象領域の画像データを抽出し、基準画像の画像データと監視対象領域の画像データを合成する。
そこで、図4に示すように、本実施形態においては、基準画像の画像データと入力画像の画像データを比較して抽出した差分データを第1制御部15がさらに解析して、重要な監視対象が存在する監視対象領域42を抽出する。図4においては、第1制御部15によって、重要な監視対象としての訪問者31が存在する領域が監視対象領域42と判断され、樹木30や小動物32等の背景要素が存在するが重要な監視対象が存在しない領域は、非監視対象領域43と判断される。なお、第1制御部15が入力画像41から監視対象領域42を抽出する際には、必要に応じて、入力画像41の画像データが第1記憶部16に記憶される。
以下、図5乃至図8を参照して、入力画像41のうち、重要な監視対象が存在する監視対象領域42を抽出する方法について説明する。図5は、第1制御部15が差分データを解析して移動体33の検出を行い、その結果に基づいて、監視対象領域42として、監視対象としての移動体33を含む所定の範囲を抽出する例を示す。同図においては、移動体33として訪問者31が検出され、背景の樹木30や小動物32等は移動体として検出されない。
差分データは、第1記憶部16に記憶されている基準画像40の画像データと撮像装置11から入力される入力画像41の画像データを比較し、データ(輝度、彩度、色相等)が一定量以上変化している画素のデータを抽出することにより得られる。基準画像40には訪問者31及び小動物32は存在していないため、入力画像41の画像データにおけるこれら訪問者31及び小動物32に相当する画素のデータは、基準画像40の画像データにおけるそれらの画素のデータから大きく変化している。また、これら訪問者31及び小動物32に相当する画素は連続している。基準画像40の画像データと入力画像41の画像データの比較においては、例えば、各画素の輝度情報を空間微分することにより輝度勾配を算出し、それを小領域ごとに比較することにより、樹木の揺れや動物の移動等の比較的小さな動きを無視しつつ、監視対象としての重要な物体(変化量の大きな範囲)を検出することができる。輝度勾配の比較は、小領域ごとにヒストグラムを作成し、連続する入力画像の間でその類似度を算出することによりなされる。類似度が所定の閾値以上であれば、移動体であると判断でき、類似度が閾値以下であれば、移動体ではないと判断できる。
なお、監視対象領域42として抽出される移動体を含む所定の範囲は、垂直方向及び水平方向における移動体として認識された範囲の最大高さ及び最大幅又はそれらよりも一定量だけ大きい寸法をそれぞれ縦寸法及び横寸法とする矩形領域等が考えられる。また、移動体の検出方法はこれに限定されるものではなく、同じパターンの画像データが連続する領域を抽出し、その領域の座標から対象領域が移動しているか否かを判定し、検出された移動体の移動量を所定の閾値と比較し、該所定の閾値よりも小さい場合、検出された移動体を含む領域を監視対象領域から除外するように構成してもよい。
図6は、第1制御部15が入力画像41の画像データを解析して目、鼻、口等の画像によって特徴づけられる人間の顔画像の検出を行い(パターンマッチング)、その結果に基づいて、監視対象としての重要度を判断する例を示す。同図においては、検出された顔画像を含む小領域が監視対象領域と扱われる。顔画像の検出は、第1制御部15が入力画像41の画像データを検索し、その中に多数の顔画像から予め標準化された特徴と類似する情報が含まれているか否か、について判断することによりなされる。この例においては、顔画像の検出に替えて、頭、胴体、手、脚等の画像によって特徴づけられる人体画像の検出を行ってもよい。監視対象領域42として抽出される顔画像又は人体画像を含む所定の範囲は、垂直方向及び水平方向におけるそれらの最大高さ及び最大幅又はそれらよりも一定量だけ大きい寸法をそれぞれ縦寸法及び横寸法とする矩形領域等が考えられる。
図7は、第1制御部15が入力画像41の画像データを解析して特定の被写体34の画像の検出を行い(パターンマッチング)、その結果に基づいて、監視対象としての重要度を判断する例を示す。図7においては、特定の被写体34の例として、トラック等の車両が検出されている。車両の検出は、例えば、入力画像41の画像データ中に、車両の特徴である円筒形の車輪の画像と類似する情報が含まれているか否か、について判断することによりなされる。その際、車輪の軸間距離も考慮して判断してもよい。監視対象領域42として抽出される特定の被写体34を含む所定の範囲は、垂直方向及び水平方向における特定の被写体として認識された範囲の最大高さ及び最大幅又はそれらよりも一定量だけ大きい寸法をそれぞれ縦寸法及び横寸法とする矩形領域等が考えられる。
第1制御部15が画像として検出する車両は、トラックに限られることなく、乗用車や二輪車であってよく、また工場内に画像送信装置10を設置する場合には、その工場で用いられている台車等であってもよい。さらには、第1制御部15が画像として検出する被写体は、特定の特徴を有する対象物であれば、特に限定されない。例えば、車両のナンバープレート又は動物等の顔や身体であってもよい。
図8は、第1制御部15が入力画像41を構成する画素領域に基づいて、監視対象としての重要度を判断する例を示す。同図においては、入力画像41の中央領域に人物等の監視対象物が存在する可能性が高いとみなして、当該領域を監視対象領域42として、その他の領域を非監視対象領域43として扱う。住居の入り口における撮像装置11の配置によっては、訪問者31が現れる領域は、特定の領域に限られることがある。また、不審者が侵入しようとする領域も、特定の領域に限られることがある。このような場合、訪問者や不審者が現れる可能性が高い特定の領域を予め定めて監視対象領域42とみなすことにより、第1制御部15の負担が軽減され、画像送信装置10の消費電力を低減できる。なお、監視対象領域の広さは、このホームセキュリティシステム1(画像送信装置10)の利用者が任意に変更できるように構成されていてもよい。
上記のようにして監視対象領域42が特定されると、第1制御部15は、第1記憶部16に記憶されている基準画像40の画像データを読み出すと共に、入力画像41の画像データから監視対象領域42の画像データを抽出し、基準画像40の画像データに抽出した監視対象領域42の画像データを合成して出力する。図9は、監視対象領域42の抽出と基準画像40と監視対象領域42の画像の合成を概念的に示したものである。合成された出力画像44と入力画像41を比較すると、出力画像44から、例えば小動物32等が除去されていることがわかる。次に、第1制御部15は、このようにして合成された出力画像44の画像データを画像受信装置20に送信するために、圧縮処理を実行する。このような画像データ合成処理は、撮像装置11から入力画像41が出力されるたびに実行される。一方、監視対象領域42の抽出は、撮像装置11から入力画像41が出力されるたびに実行してもよいし、一度監視対象領域42が決定されると、撮像装置11の撮像が終了するまで監視対象領域42を固定してもよい。
また、基準画像40の画像データと抽出された監視対象領域42の画像データを合成する際、抽出された監視対象領域42の画像データの境界の画素の色調を、それらの画素と隣接する基準画像40の画像データの画素の色調とその色調の中間の色調に補正するように構成してもよい。それによって、基準画像40に合成(貼り付け)した監視対象領域42の輪郭をぼかすことができ、自然な画像を提供することができる。
次に、上記のように合成された出力画像44の画像データの圧縮処理について説明する。撮像素子11からは入力画像41が一定間隔で順次出力され、それに応じて出力画像44の画像データが一定間隔で順次合成される。それと平行して、第1制御部15は画像データ圧縮手段として機能し、MPEG4やH.264等のフレーム間差分方式で圧縮する。最初に出力画像44の画像データ(第1フレームの画像データとする)が合成されたとき、比較されるべき前フレームの画像は存在しない。従って、第1制御部15は、第1フレームの画像データを所定の圧縮処理を施して第1送受信部17に出力し、第1送受信部17は、圧縮処理された第1フレームの画像データを画像受信装置20の第2送受信部27に、例えば特定小電力無線等を用いて送信する。次に出力画像44の画像データ(第2フレームの画像データとする)が合成されると、第1制御部15は、第2フレームの画像データと第1フレームの画像データを比較して差分データを抽出し、差分データに圧縮処理を施して第1送受信部17に出力する。
ここで、第1フレームの画像データと第2フレームの画像データを比較すると、合成前の基準画像40の画像データは全く同じである。従って、監視対象領域42が固定されている場合は、監視対象領域42の画像データ同士が比較されることになり、実質的に監視対象領域42での画像の変化のみが抽出され、差分データのデータ量は非常に少なくなる。一方、フレーム毎に監視対象領域42が変化する場合であっても、監視対象領域42及びその周辺の画像データ同士が比較されることになり、抽出される差分データのデータ量は少なくて済む。その結果、特定小電力無線を用いても動画の画像データの送受信が可能であり、特定小電力無線で伝送可能なビットレートを超えることもない。
画像受信装置20の第2送受信部27は、画像送信装置10の第1送受信部17から送信される出力画像44の画像データを受信すると、受信した出力画像44の画像データを第2制御部25に出力する。第2制御部25は画像データ復元手段として機能し、受信した出力画像44の画像データを復元(伸張)すると共に、一時的に第2記憶部26にコピーして記憶させる。第1フレームの画像データはそのまま復元され、モニタ22の画面上に表示される。第2フレーム以降の画像データは実質的に差分データのみが送信されてくるので、記憶部26に記憶されている前フレームの画像データを用いて復元され、モニタ22の画面上に表示される。なお、第2記憶部26に記憶されている前フレームの画像データは順次更新されてもよい。
このように、画像受信装置20は、フレーム間差分方式で圧縮された画像データを復元(伸張)して、モニタ22の画面上に表示する機能を有していればよい。そのため、既存の画像受信装置20と本実施形態に係る画像送信装置10を組み合わせてホームセキュリティシステムを構築することが可能である。また、既存のホームセキュリティシステムに監視カメラ等の画像送信装置10を容易に増設することも可能である。
本実施形態では、画像送信装置10の第1送受信部17と画像受信装置20の第2送受信部27(通信手段)は、画像データ以外の音声データやその他の信号を双方向通信可能である。そこで、画像送信装置10の第1制御部15に通信状態特定手段及びデータ量可変手段の機能を持たせてもよい。通信状態特定手段として機能する第1制御部15は、第1送受信部17が受信する信号のノイズ(S/N)又はビットエラーレート等と所定の閾値との比較結果に基づいて、第1送受信部17と第2送受信部27の間の通信状態の良否を判断する。ノイズ又はビットエラーレートが所定の値よりも小さいときは、第1制御部15は、データ量可変手段として機能し、合成した画像データを第1の圧縮率で圧縮する。一方、ノイズ又はビットエラーレートが所定の値よりも大きいときは、第1制御部15は、合成した画像データを第1の圧縮率よりも高い第2の圧縮率で圧縮する。それによって、第1送受信部17と第2送受信部27の間の通信状態が良好であるときは、高いビットレートで画像データを送信することができ、モニタ22の画面上に鮮明な画像を表示することができる。一方、第1送受信部17と第2送受信部27の間の通信状態が良好でないときは、低いビットレートで画像データを送信することにより、通信エラーを防止することができる。
なお、本発明の画像送信装置は、少なくとも撮像装置によって撮像された画像データをフレーム間差分方式の圧縮方式で圧縮して送信するものであればよく、その用途や構造は上記実施形態の記載には限定されない。すなわち、画像送信装置自体に撮像装置が設けられていなくてもよく、入力画像の画像データと基準画像の画像データとを比較し、入力画像の画像データから監視対象領域の画像データを抽出し、基準画像の画像データに抽出された監視対象領域の画像データを合成し、合成された画像データをフレーム間差分方式で圧縮して送信できればよい。また、画像データの送信に関しても、特定小電力無線による必要はなく、その他の無線通信方式や有線方式であってもよい。
1 ホームセキュリティシステム(画像送受信システム)
10 画像送信装置
11 撮像装置
12 スイッチ
15 第1制御部(画像データ抽出手段、画像データ合成手段、画像データ圧縮手段、通信状態特定手段、データ量可変手段)
16 第1記憶部(画像記憶手段)
17 第1送受信部(画像データ送信手段、通信手段)
18 人体感知センサ
20 画像受信装置
40 基準画像
41 入力画像
42 監視対象領域
44 出力画像

Claims (12)

  1. あらかじめ用意されている基準画像の画像データを記憶するための画像データ記憶手段と、
    入力画像を撮像し、撮像した前記入力画像の画像データを出力する撮像装置と、
    所定の検出範囲に人が進入したことを検知したときに、前記撮像装置を起動して撮像を開始するためのトリガ信号を出力する人体検知センサと、
    前記入力画像の画像データと前記基準画像の画像データとを比較し、前記入力画像の画像データから、画像データが変化した領域のうち所定の条件を満たす監視対象領域の画像データを抽出する画像データ抽出手段と、
    前記基準画像の画像データに前記監視対象領域の画像データを合成する画像データ合成手段と、
    前記合成された画像データをフレーム間差分方式で圧縮する画像データ圧縮手段と、
    圧縮された画像データを送信する画像データ送信手段を備え、
    前記入力画像の画像データは、前記人体検知センサによりトリガ信号が入力されたときに、前記撮像装置により一定間隔で撮像される画像データであり、
    前記基準画像の画像データは、前記トリガ信号とは別に、前記撮像装置により撮像され、前記画像データ記憶手段に記憶されている画像データであることを特徴とする画像送信装置。
  2. 前記画像データ抽出手段は、前記入力画像の画像データと前記基準画像の画像データを比較解析して移動体の検出を行い、その結果に基づいて、前記移動体を含む所定の範囲を前記監視対象領域とすることを特徴とする請求項に記載の画像送信装置。
  3. 前記画像データ抽出手段は、前記入力画像の画像データと前記基準画像の画像データを比較解析して顔画像又は人体画像の検出を行い、その結果に基づいて、前記顔画像又は前記人体画像を含む所定の範囲を前記監視対象領域とすることを特徴とする請求項に記載の画像送信装置。
  4. 前記画像データ抽出手段は、前記入力画像の画像データに所定のパターンマッチング処理を施して特定の被写体の画像の検出を行い、その結果に基づいて、前記特定の被写体を含む所定の範囲を前記監視対象領域とすることを特徴とする請求項に記載の画像送信装置。
  5. 前記画像データ抽出手段は、前記入力画像の画像データを解析して顔画像又は人体画像の検出を行い、特定形状の被写体の画像を含む所定の範囲を前記監視対象領域とすることを特徴とする請求項に記載の画像送信装置。
  6. 前記監視対象領域は、前記入力画像におけるあらかじめ設定された範囲であることを特徴とする請求項に記載の画像送信装置。
  7. 前記移動体の検出において、検出された移動体の移動量を所定の閾値と比較し、該所定の閾値よりも小さい場合、前記検出された移動体を含む領域を前記監視対象領域から除外することを特徴とする請求項に記載の画像送信装置。
  8. 前記基準画像の画像データと前記抽出された監視対象領域の画像データを合成する際、前記抽出された監視対象領域の画像データの境界の画素の色調を、それらの画素と隣接する前記基準画像の画像データの画素の色調とその色調の中間の色調に補正することを特徴とする請求項乃至請求項のいずれか一項に記載の画像送信装置。
  9. 前記監視対象領域の広さは、この画像送信装置の利用者が任意に変更できることを特徴とする請求項乃至請求項のいずれか一項に記載の画像送信装置。
  10. 前記画像送信装置は、画像受信装置との間で画像データ以外の信号の送受信を行う通信手段と、前記通信手段による通信状態の良否を特定する通信状態特定手段と、前記通信状態特定手段により特定された通信手段の通信状態の良否に応じて、前記画像受信装置に送信する画像データのデータ量を変化させるデータ量可変手段を備えることを特徴とする請求項1乃至請求項9のいずれか一項に記載の画像送信装置。
  11. 前記データ量可変手段は、前記通信手段のノイズ又はビットエラーレートが所定の閾値よりも小さいときは、前記合成した画像データを第1の圧縮率で圧縮し、前記通信手段のノイズ又はビットエラーレートが所定の閾値よりも大きいときは、前記合成した画像データを前記第1の圧縮率よりも高い第2の圧縮率で圧縮することを特徴とする請求項10に記載の画像送信装置。
  12. 請求項1乃至請求項11のいずれか一項に記載の画像送信装置と、前記画像送信装置から送信された画像データを受信する受信装置とを備えたことを特徴とする画像送受信システム。
JP2011217432A 2011-09-30 2011-09-30 画像送信装置及び画像送受信システム Expired - Fee Related JP5934993B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011217432A JP5934993B2 (ja) 2011-09-30 2011-09-30 画像送信装置及び画像送受信システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011217432A JP5934993B2 (ja) 2011-09-30 2011-09-30 画像送信装置及び画像送受信システム

Publications (2)

Publication Number Publication Date
JP2013078030A JP2013078030A (ja) 2013-04-25
JP5934993B2 true JP5934993B2 (ja) 2016-06-15

Family

ID=48481180

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011217432A Expired - Fee Related JP5934993B2 (ja) 2011-09-30 2011-09-30 画像送信装置及び画像送受信システム

Country Status (1)

Country Link
JP (1) JP5934993B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6410356B2 (ja) * 2015-03-10 2018-10-24 アイホン株式会社 映像伝送量を軽くしたインターホンシステム
US11910110B2 (en) * 2019-08-20 2024-02-20 Sony Interactive Entertainment Inc. Transfer control device, image processing device, transfer control method, and program

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06217323A (ja) * 1993-01-18 1994-08-05 Mitsubishi Denki Eng Kk 画像表示装置
JP2000261774A (ja) * 1999-03-09 2000-09-22 Matsushita Electric Ind Co Ltd 人物画切り出し伝送方法
JP2001160966A (ja) * 1999-12-02 2001-06-12 Sharp Corp 動画像符号化装置
JP2005318027A (ja) * 2004-04-27 2005-11-10 Hitachi Omron Terminal Solutions Corp 監視画像の人物抽出及び画像復元方法

Also Published As

Publication number Publication date
JP2013078030A (ja) 2013-04-25

Similar Documents

Publication Publication Date Title
US9141862B2 (en) Unattended surveillance device and associated methods
US10063777B2 (en) Motion-based camera mode control to reduce rolling shutter artifacts
US11538316B2 (en) Surveillance system and control method thereof
US10574991B2 (en) Apparatus and method for processing image
JP7213662B2 (ja) 画像処理装置、画像処理方法
CN102117484B (zh) 使用图像色彩信息的处理系统、处理方法与图像分类方法
WO2022141333A1 (zh) 一种图像处理方法以及装置
CN104504852A (zh) 一种基于图像预警婴儿安全监护器及婴儿安全判断方法
JP2013090004A (ja) 画像受信装置
EP3499880A1 (en) Systems and methods for transmitting a high quality video image from a low power sensor
JP5934993B2 (ja) 画像送信装置及び画像送受信システム
KR102372164B1 (ko) 촬영 장치, 그의 오브젝트 감지 방법 및 비일시적 컴퓨터 판독가능 기록매체
CN102104721A (zh) 双模智能视觉传感系统架构
KR20140022670A (ko) 배경 영상을 제외한 단순화된 움직임 정보를 전송하고 아바타를 이용하여 디스플레이하는 장치와 그 방법
JP4882768B2 (ja) 人体検出装置
JP7050509B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2013070187A (ja) 画像送信装置及びそれを用いた画像伝送システム
JP2013070129A (ja) 画像情報抽出装置及びそれを用いた画像送信装置と画像受信装置並びに画像伝送システム
KR20040084517A (ko) 동영상 휴대 전화기를 이용한 보안 감시 시스템
KR100669511B1 (ko) 스마트 네트워크 카메라
JP2019029750A (ja) 撮像装置
CN113785582A (zh) 从原影像流生成有用影像流的程序、装置以及方法
CN107205130B (zh) 一种基于双摄像头的录像方法、终端及计算机可读介质
JP5769468B2 (ja) 物体検出システム及び物体検出方法
CN111523350B (zh) 图像识别方法及装置、存储介质、终端、图像识别系统

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140611

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20141008

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20141023

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150217

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150420

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150728

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150916

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160308

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160401

R151 Written notification of patent or utility model registration

Ref document number: 5934993

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees