JPWO2010024281A1 - 監視システム - Google Patents

監視システム Download PDF

Info

Publication number
JPWO2010024281A1
JPWO2010024281A1 JP2010526736A JP2010526736A JPWO2010024281A1 JP WO2010024281 A1 JPWO2010024281 A1 JP WO2010024281A1 JP 2010526736 A JP2010526736 A JP 2010526736A JP 2010526736 A JP2010526736 A JP 2010526736A JP WO2010024281 A1 JPWO2010024281 A1 JP WO2010024281A1
Authority
JP
Japan
Prior art keywords
video
storage means
reference information
monitoring system
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010526736A
Other languages
English (en)
Other versions
JP5047361B2 (ja
Inventor
俊和 赤間
俊和 赤間
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Syusei Co.,Ltd.
Original Assignee
Syusei Co.,Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Syusei Co.,Ltd. filed Critical Syusei Co.,Ltd.
Priority to JP2010526736A priority Critical patent/JP5047361B2/ja
Publication of JPWO2010024281A1 publication Critical patent/JPWO2010024281A1/ja
Application granted granted Critical
Publication of JP5047361B2 publication Critical patent/JP5047361B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/04Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438Sensor means for detecting
    • G08B21/0476Cameras to detect unsafe condition, e.g. video cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Gerontology & Geriatric Medicine (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Burglar Alarm Systems (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を物体基準情報記憶手段1に記憶し、入力された映像の中から物体の形状が物体基準記憶手段1に記憶された基準情報の上下限内であるか否かを映像分析手段3で判断することによって、所望の形状のみを対象とし、監視者の人件費や労力の低減を実現することが可能な監視システム。

Description

本発明は監視システムに関する。詳しくは、防犯や見守りを目的として、不審者や見守りたい者の行動を監視する監視システムに係るものである。
従来の監視システムは、カメラからの映像信号を、モニターと、VTRなどの録画装置につなぎ、単に映像を録画するだけの機能を持つものが一般的であった。
そのため、犯罪を事前に抑止するためには、映っている人物の様子を常に人が見ていなければならないなど、監視する人(監視者)の人件費や労力の面で問題があった。
近年、インターネット回線などを利用して遠隔地の映像を見ることができるカメラ(以下、「ネットワークカメラ」と称する)も普及しつつあり、これらを使うと現場に映像の確認に行く手間を削減することができる。
しかし、こうしたネットワークカメラの場合でも、カメラ映像を常に見ておく必要があり、ネットワークカメラを使用しただけでは、監視者の人件費や労力の面での問題点を改善できない。
また、監視システムは、上述した防犯目的だけでなく、「見守り」という点でも社会ニーズが増加している。
例えば、独り暮らしの老人(以下、「独居老人」と称する)が、孤独死する問題などが発生しており、日々の安否状況を把握して事前に事故を防止するには、常に誰かが現場に常駐するか、もしくは、現場にネットワークカメラを設置して、遠隔地から誰かがネットワークカメラから送信される映像を常に監視している必要がある。
即ち、「見守り」についても、従来の監視システムを利用した場合には人件費や労力の面で問題があった。
ところで、上記の問題点を軽減する一つの手法として、不審者や犯罪者の存在を検知するために、カメラとは別に、人物などに反応する熱センサー等を併設し、かつ、インターネット回線などの通信手段を備え、例えば、熱センサーが人を検知した場合に、インターネット回線を通じて遠隔地にいる監視者に例えば電子メールを送信して、人を検知したことを通知する方法が考えられる。
しかし、こうした方法は、熱センサーを設置できない箇所(例えば自宅前の公道)では不審者を検知することができないという問題があった。
また、例えば、独居老人の生活を見守るために、独居老人宅の屋内にネットワークカメラと、熱センサーを設置して、かつ、インターネット回線を備えることによる対応が考えられる。
しかし、不審者の侵入時だけでなく、暮らしている老人にも熱センサーが反応するため、その度に、遠隔地の監視者に通知が行われてしまい、監視者は、頻繁に現場映像を目視確認しなければならないことになり、監視者の労力を軽減することができない。
上記において、熱センサーの代わりに、動体検知センサーを使う方法もある。動体検知センサーとは、カメラからの映像信号を解析して、画面の変化を検出する手法である。この場合、熱センサーは不要となる。
なお、動体検知センサーの具体的な手法は、異なる時刻の複数の映像(フレーム)を記憶しておく。例えば、現在のフレームと、直前のフレームを記憶しておく。そして、現在のフレームと直前のフレームのフレーム間の差分の絶対値を得て変化量とし、その変化量がある閾値より大きい場合に動きがあると判断するのである。
しかしながら、これら従来の監視システムには以下に述べる様々な課題が存在する。
先ず、従来の監視システムにおける第1の課題は、熱センサーや、動体検知センサーが、動くものや被写体があれば、犬や猫などの小動物にも反応して「異常あり」と判断してしまう点である。
例えば、屋外での防犯目的に利用の場合、侵入者だけでなく、犬や猫などの小動物にも反応してしまうのである。また、例えば、敷地内を猫が通るたびに熱センサー、もしくは動体検知センサーが反応して、インターネット回線を通じて監視者に「異常あり」という通知を行う場合、犯罪の可能性が無いにも関わらず、監視者は、現場の安全状況の確認のために、ネットワークカメラの映像を確認したり、現場に人を派遣したりするなど、状況確認の作業に追われることになり、良い監視システムとは言えない。
また、従来の監視システムにおける第2の課題は、動体検知センサーが、動くものや被写体があれば、人以外の物体にまで反応して「異常あり」と判断してしまう点である。
例えば、屋外での防犯目的に利用の場合、侵入者だけでなく、例えば、敷地の前の道路を通行している自動車であっても、反応してしまうのである。また、例えば、自動車が道路を通るたびに動体検知センサーが反応して、インターネット回線を通じて監視者に「異常あり」という通知を行う場合、犯罪の可能性が無いにも関わらず、監視者は現場の安全状況の確認のために、ネットワークカメラの映像を確認したり、現場に人を派遣したりするなど、状況確認の作業に追われることになり、良い監視システムとは言えない。
また、従来の監視システムにおける第3の課題は、例えば、独居老人の生活を見守るために、独居老人宅の屋内に熱センサー、もしくは動体検知センサーを設置したとしても、例えば、老人が体の具合が悪くなって、うずくまっていたり、倒れていたりしても、その状態と通常の状態を判別することができず、誰かが現場に常駐するか、頻繁に現場確認に訪れるか、もしくは、ネットワークカメラの映像を常に見続ける必要があり、監視者の人件費や労力の面でも問題が残るという点である。
本発明は、以上の点に鑑みて創案されたものであって、第1から第3の課題を解決することができる監視システムを提供することを目的とするものである。
上記の目的を達成するために、本発明の監視システムでは、映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段とを備える。
ここで、映像の中から検出したい物体の基準情報として、物体基準情報記憶手段に物体の形状の上限(例えば、大矩形)と下限(例えば、小矩形)の情報を記憶し、映像分析手段を用いて入力された映像の中の物体の形状が物体基準情報記憶手段に記憶された基準情報の上下限内であるか否かを判断することによって、上記の第1の課題と第2の課題を解決することができる。
具体的には、例えば、侵入者などの人だけを検出したい場合、大矩形を人の大きさよりやや大きな矩形とし、小矩形を小動物より大きな矩形とすることで、小矩形より小さな小動物や大矩形より大きな自動車などを検出対象から除外することができるため、上述の様に、上記第1の課題と第2の課題を解決することができるのである。
また、例えば、人が倒れた状態に相当する形状と大きさに対応する大矩形と小矩形を設定することで、老人が体の具合が悪くなって倒れてしまうような状態を検出することができ、上記の第3の課題も解決することができる。
また、上記の目的を達成するために、本発明の監視システムでは、映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、撮像される領域中の所定領域を特定する情報を有効領域情報として記憶する有効領域情報記憶手段と、入力された映像の中の物体が前記有効領域情報記憶手段に記憶された前記有効領域情報内に位置するか否かを判断すると共に、同物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段とを備える。
ここで、撮像される領域中の所定領域を特定する情報を有効領域情報として有効領域情報記憶手段に記憶し、映像分析手段を用いて入力された映像の中の物体が有効領域情報記憶手段に記憶された有効領域情報内に位置するか否かを判断することによって、上記の第1の課題をより高精度に解決することができる。
具体的には、例えば、遠方の人間と近くの鳥は、実際には大きさが全く違うにも関わらず、画面上では同じくらいの大きさで、鳥も人間と同じように検出対象となってしまう可能性がある。こうした場合に、例えば有効領域情報を遠方だけに制限しておくことで、近くの鳥を検出してしまう問題を回避することができ、小動物と人とを区別することを目的としている上記の第1の課題をより高精度に解決することができるのである。
なお、映像分析手段に入力される映像を表示する映像表示手段と、物体基準情報記憶手段に基準情報を入力する物体基準情報入力手段とを備えることによって、カメラ等の撮像装置の設置現場の状況に左右されることなく、上記の第1の課題、第2の課題及び第3の課題を解決することができる。
具体的には、例えば、映像を表示する映像表示手段としてテレビモニターを利用し、物体基準情報記憶手段に記憶する検出したい物体の基準情報を入力する物体基準情報入力手段としてコンピュータで使用するマウスを利用するとし、テレビモニターの画面に映っている人の形や大きさを目視しながら、例えば人の形と大きさに近い矩形をマウスを使って指定することで、カメラの設置位置によって物体(例えば人)の形や大きさが変わっても、物体(人)を検出することができて、カメラの設置現場の状況に左右されることなく、上記の第1の課題、第2の課題及び第3の課題を解決することができるのである。
同様に、映像分析手段に入力される映像を表示する映像表示手段と、有効領域情報記憶手段に有効領域情報を入力する有効領域情報入力手段とを備えることによって、カメラ等の撮像装置の設置現場の状況に左右されることなく、上記の第1の課題、第2の課題及び第3の課題を解決することができる。
具体的には、例えば、映像を表示する映像表示手段としてテレビモニターを利用し、有効領域情報記憶手段に記憶する検出したい物体の有効領域情報を入力する有効領域情報入力手段としてコンピュータで使用するマウスを利用するとし、テレビモニターの画面に映っている人の形や大きさを目視しながら、有効領域情報をマウスを使って指定することで、カメラの設置現場の状況に左右されることなく、上記の第1の課題、第2の課題及び第3の課題を解決することができるのである。
また、映像分析手段の判断結果を告知する分析結果告知手段によって、監視者に状況を告知することが可能となる。
例えば、分析結果告知手段として、インターネットを用いた通信手段を利用することで、遠隔地の監視者に状況を通知することが可能となる。また、例えば、分析結果告知手段として、スピーカー等を用いた音響手段を利用することで、監視者に状況を音声を使って通知することができる。更に、分析結果告知手段として、ランプ等を用いた発光手段を利用することで、監視者に状況をランプの点灯を使って通知することができる。
また、通信回線を介して接続された端末に対して映像分析手段に入力された映像を送信可能に構成された映像送信手段を備える場合において、映像分析手段の判断結果に応じて映像送信手段で映像の送信を行うことによって、プライバシーの保護を実現することができる。
なお、ここでの「通信回線」とは、信号の送受信のための通路を意味しており、有線の場合、無線の場合の双方を含むものであり、「通信回線を介して接続された端末」とは、LANケーブル等の有線ケーブルで接続されている端末、無線LANで接続されている端末、携帯電話機端末等が含まれる。
例えば、遠隔地の端末に監視システムの映像を送信するにあたって、常に監視システムからの映像を送信するのではなく、緊急事態が発生した場合のみ監視システムからの映像を送信することによって、監視システムによって監視されている者のプライバシーを保護することができる。
なお、常に監視システムからの映像を送信したとしても、緊急状態であるか否かの信号をも併せて送信し、緊急状態である信号を受信した場合のみ端末側で受信した映像を表示可能に構成することによってもプライバシーの保護は実現する。
また、上記の目的を達成するために、本発明の監視システムでは、映像の中から検出したい第1の物体の基準情報として同第1の物体の形状の上限と下限の情報を記憶すると共に、映像の中から検出したい第2の物体の基準情報として同第2の物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記第1の物体の基準情報の上下限内であるか否かを判断する第1の映像分析手段と、入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記第2の物体の基準情報の上下限内であるか否かを判断する第2の映像分析手段と、少なくとも前記第1の映像分析手段の判断結果及び前記第2の映像分析手段の判断結果に基づいて論理判定を行う論理判定手段とを備える。
ここで、少なくとも第1の映像分析手段の判断結果及び第2の映像分析手段の判断結果に基づいて論理判定(例えば、第1の映像分析手段の判断結果及び第2の映像分析手段の判断結果のアンドやナンドによる論理判定)を行う論理判定手段によって、上記の第3の課題の解決が可能となる。
具体的には、例えば、2台のカメラの映像信号から、第1カメラは転倒者を検知し、第2カメラは転倒者とは別の歩行者を検知するものとする。通常、第1カメラが転倒者を検知した場合は助けを呼ぶために通知が必要であるが、第2カメラが別の歩行者を検知した場合は転倒者のそばに歩行者(すなわち介助できる人)が存在するケースであり、新たな助けを呼ぶ必要が無い。よって、論理判定手段で、第2カメラが歩行者を検知した場合は、第1カメラの転倒者の検知をナンド(否定)することで、助けを呼ばないような使い方により、監視者の労力を抑えることができ、上記の第3の課題の解決が可能となるのである。
なお、「少なくとも第1の映像分析手段の判断結果及び第2の映像分析手段の判断結果に基づいて」とは、「第1の映像分析手段の判断結果及び第2の映像分析手段の判断結果」に基づいて論理判定を行う場合の他、「第1の映像分析手段の判断結果、第2の映像分析手段の判断結果」に加えて、「その他の要素(例えば、第3の映像分析手段の判断結果)」に基づいて論理判定を行う場合も含まれる。
また、上記の目的を達成するために、本発明の監視システムでは、映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段と、通信回線を介して接続された端末に対して前記映像分析手段に入力された映像を送信可能に構成された映像送信手段を、それぞれ有する第1の監視システム、第2の監視システムと、少なくとも前記第1の監視システムの映像送信手段及び前記第2の監視システムの映像送信手段から送信された映像と共に同映像の受信履歴情報を読み出し可能に記憶する記憶手段と、該記憶手段に記憶された前記受信履歴情報を表示する表示手段を有し、前記表示手段に表示された前記受信履歴情報を選択することで、同受信履歴情報に対応する映像が前記表示手段に表示可能に構成された端末とを備える。
また、上記の目的を達成するために、本発明の監視システムでは、映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、撮像される領域中の所定領域を特定する情報を有効領域情報として記憶する有効領域情報記憶手段と、入力された映像の中の物体が前記有効領域情報記憶手段に記憶された前記有効領域情報内に位置するか否かを判断すると共に、同物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段と、通信回線を介して接続された端末に対して前記映像分析手段に入力された映像を送信可能に構成された映像送信手段を、それぞれ有する第1の監視システム、第2の監視システムと、少なくとも前記第1の監視システムの映像送信手段及び前記第2の監視システムの映像送信手段から送信された映像と共に同映像の受信履歴情報を読み出し可能に記憶する記憶手段と、該記憶手段に記憶された前記受信履歴情報を表示する表示手段を有し、前記表示手段に表示された前記受信履歴情報を選択することで、同受信履歴情報に対応する映像が前記表示手段に表示可能に構成された端末とを備える。
ここで、表示手段に表示された受信履歴情報を選択することで、受信履歴情報に対応する映像が表示手段に表示可能に構成されたことによって、複数の監視カメラから一斉に映像を受信したとしても、受信履歴情報に基づいて所望の映像を確認することが可能となる。
なお、ここでの「通信回線」とは、信号の送受信のための通路を意味しており、有線の場合、無線の場合の双方を含むものであり、「通信回線を介して接続された端末」とは、LANケーブル等の有線ケーブルで接続されている端末、無線LANで接続されている端末、携帯電話機端末等が含まれる。
また、「少なくとも第1の監視システムの映像送信手段及び第2の監視システムの映像手段から送信された映像」とは、「第1の監視システムの映像送信手段及び第2の監視システムの映像手段から送信された映像」の場合の他、「第1の監視システムの映像送信手段及び第2の監視システムの映像送信手段から送信された映像」に加えて、「その他の監視システム(例えば、第3の監視システム)からの映像」の場合も含まれる。
本発明の監視システムでは、上記した第1から第3の課題を解決することができる。
本発明の監視システムの実施例1の構成を示した図である。 カメラが上から人を撮影した場合の状態を示した図である。 カメラが横から水平に人を撮影した場合の状態を示した図である。 小矩形と大矩形の状態を示した図(1)である。 小矩形と大矩形の状態を示した図(2)である。 物体(人)の縦の長さと横の長さを示した図である。 人と自動車の形状や大きさを示した図である。 過去フレームと現在フレームのどちらにも人が存在しない場合の差分の絶対値の状態を示した図である。 現在フレームに人が存在する場合の差分の絶対値の状態を示した図である。 人が倒れている様子をカメラが横から撮影している状態を示した図である。 カメラの映像における人が倒れている状態を示した図である。 人が倒れている様子をカメラが横から撮影している状態を示した図である。 カメラの映像における人が倒れている状態を示した図である。 倒れている人を検出するための矩形セットの例を示した図である。 倒れている人を検出するための矩形セットの例を示した図である。 立っている人をカメラが上から撮影している状態を示した図である。 立っている人をカメラが上から撮影した場合のカメラ映像を示した図である。 倒れている人をカメラが上から撮影している状態を示した図である。 倒れている人をカメラが上から撮影した場合のカメラ映像を示した図である。 倒れている人を検出するための矩形セットの例を示した図である。 矩形以外の物体基準情報の例を示した図である。 カメラから遠くの人と遠くの鳥の様子を示した図である。 カメラから遠くの人と近くの鳥の様子を示した図である。 物体基準情報を適用する有効エリア矩形の例を示した図である。 カメラ1で転倒者を、カメラ2で別の歩行者を撮影している例を示した図である。 本発明の監視システムの実施例2の構成を示した図である。 本発明の監視システムの実施例3の構成を示した図である。
以下、本発明を実施するための形態(以下、「実施例」と称する。)について図面を参酌しながら説明を行う。
以下に、上記従来の監視システムの課題を解決するための、本発明の実施例1について
説明する。
図1に、本発明の実施例1の監視システムの構成を示す。
図1において、1は、映像信号を記憶する映像記憶手段で、例として時刻の異なる複数のフレームの映像を記憶するものとする。2は、映像中の被写体の中から検出したい物体の基準情報を記憶する物体基準情報記憶手段で、3は、映像記憶手段1に記憶されている映像信号を分析し、被写体が物体基準情報記憶手段2に記憶されている物体基準情報に合致するかどうかを判断する映像分析手段で、4は、映像分析手段3の分析結果情報を記憶する分析結果情報記憶手段で、5はコンピュータで、例として、映像記憶手段1と物体基準情報記憶手段2と映像分析手段3と分析結果情報記憶手段4は、コンピュータ5上のソフトウェアプログラムとして実装されるものとする。6はカメラで、7は映像を表示するモニター(映像表示手段)である。8はマウスであり、物体基準情報入力手段として活用する。カメラ6は、アナログの映像信号をデジタルに変換してコンピュータ5に入力できるものとする。
まず、この監視システムの動作の概要を述べる。
例えば、屋外での防犯目的での利用においては、侵入者(人)を検出して、例えば、警報を鳴らしたり、遠隔地の監視者に通知したりするような利用方法が考えられる。
しかしながら、屋外には、人だけでなく、例えば、犬や猫などの小動物も存在する。犬や猫が通るたび警報が鳴ったり、遠隔地に通知が行われたりすると監視者は現場の映像の確認作業が増えてしまうため、侵入者(人)が現れるなどの重要な事象の場合のみ通知が行われるようなシステムが望まれる。
それを実現するために、本実施例では、カメラ6の映像信号を映像記憶手段1に記憶し、その記憶した映像を、映像分析手段3で分析して、被写体の形状や大きさを判断する。なお、あらかじめ検出したい侵入者(人)の形状や大きさの情報を、物体基準情報として物体基準情報記憶手段2に記憶しておき、この物体基準情報と、被写体の形状と大きさを比較して合致するかどうか、すなわち、侵入者(人)の形状や大きさを満たしているかどうかを判断し、その結果を分析結果情報記憶手段4に保存する。
次に、この監視システムの動作の詳細を述べる。
犬や猫などの小動物には無反応(警報や、遠隔地への通知を行わない)で、侵入者(人)のみを検出して反応する(警報や、遠隔地へ通知を行う)ためには、小動物と人を自動的に判別する必要がある。そして、そのためには、図1のカメラ6の映像中の被写体の形状や大きさを判断する必要がある。
しかしながら、映像中の被写体の形状や大きさは、カメラと被写体との距離や角度によって変化するため、例えば「人」を検出したい物体とした場合、その形や大きさの情報(物体基準情報)が固定のものであっては対応できないという問題が発生する。
具体的には、図2(a)のようにカメラ6が上から、下にいる人を撮影した場合と、図3(a)のように、カメラ6が横から水平に人を撮影した場合では、同じ人を撮影した場合でも形状が大きく異なって見える。そして、カメラの設置位置は、図3(a)のように常に水平になるように設置できるとは限らず、カメラと被写体との距離や角度は、状況によって無限の組み合わせが存在することになる。
なお、図2(b)は図2(a)で示す様に、カメラが上から下にいる人を撮影した場合のカメラ映像を模式的に示しており、図3(b)は図3(a)で示す様に、カメラが横から水平に人を撮影した場合のカメラ映像を模式的に示している。
このように、カメラの設置位置によって被写体の形状と大きさが変わってしまう問題に柔軟に対応できるように、検出したい物体の物体基準情報(形状と大きさ)を入力する機能を具備する点が本発明の重要な特徴の一つである。
本発明の監視システムでは、まず、検出したい物体(例:人)の形や大きさの情報(物体基準情報)を、物体基準情報記憶手段2に記憶させる。
物体基準情報を入力する方法の例として、図1のモニター7の映像を見ながら、マウス8を使って図4のように、物体基準情報の、下限として小さい矩形(以下、「小矩形」と称する)Bと、上限として大きい矩形(以下、「大矩形」と称する)Aを設定する。
ここで、図4の小矩形は、小動物(猫)bより、やや大きい矩形を設定する。図4の大矩形は、人aの大きさより、やや大きい矩形を設定する。例えば、この小矩形と大矩形のそれぞれの縦の長さと横の長さを、検出したい物体の基準情報として、図1の物体基準情報記憶手段2に記憶するのである。
上記の様に小矩形Bと大矩形Aを設定した場合には、図5のように、小矩形Bより大きく、大矩形Aより小さい物体(図5中の斜線部分に該当する大きさと形を有する物体)を検知することとなる。
具体的には、図6は、物体(人)Cの縦の長さDと、横の長さEを示した図であるが、この縦の長さDが、図5の小矩形の縦の長さ以上で、大矩形の縦の長さ以下で、かつ、図6の横の長さEが、図5の小矩形の横の長さ以上で、大矩形の横の長さ以下であった場合には、こうした物体(人)を検出することとなる。
このように小矩形Bと大矩形Aを定めることで、図4のように小矩形より小さい猫のような小動物は、検出の対象から除外されることになる。そして、大矩形より小さい「人」が検出対象となり、犬や猫のような小動物に反応しない優れた監視システムを構築できる。
ここで、小矩形だけでなく、大矩形を設定することも重要な意味がある。
例えば、図7のように、映像中に、人dより十分大きな自動車eなどが映るような状況を想定する。具体的には、屋外で敷地の前の道路を自動車が通行して通り抜けるケースなどである。その場合、自動車は道路を単に通り抜けるだけで、防犯上は特に問題が無いのであるが、この自動車が通るたびに反応する(警報や、遠隔地への通知が行われる)ようでは、監視者の負担を軽減できない問題につながる。そこで、大矩形を設定して、大矩形よりも大きな自動車などを無視して、大矩形よりも小さい「人」を検出できるようにすることで、例えば、建物や敷地内に侵入しようとする「人」だけに反応することとなる(警報で威嚇したり、遠隔地の監視者に通知したりする)。
そして、このことによって監視者にとって労力の負担が小さい効率的な監視システムを構築できるため、上述した様に、小矩形だけでなく、大矩形を設定することが重要となるのである。
次に、本発明の監視システムでは、図1のカメラ6からの映像信号を映像記憶手段1に記憶し、映像分析手段3で、被写体の形状や大きさを分析する。
その分析方法としては限定されるものではなく、例えば、被写体(移動物体)が何も映っていない数秒前の過去フレームと、被写体が存在する現在フレームの、フレーム間差分の絶対値を得る方法が挙げられる。
具体的には、図8(図8(a)は過去フレームを示しており、図8(b)は現在フレームを示しており、図8(c)は差分の絶対値を示している。)のように、過去フレームに背景のみが映っていて、現在フレームも背景のみが映っている場合は、過去フレームと現在フレームの差分の絶対値が小さくなる。しかし、図9(図9(a)は過去フレームを示しており、図9(b)は現在フレームを示しており、図9(c)は差分の絶対値を示している。)のように過去フレームは背景のみのであるが、現在フレームには人fが映っている場合は、過去フレームと現在フレームの差分の絶対値が大きくなる。即ち、人が映っている部分の差分の絶対値が大きくなることになる。
よって、この差分の絶対値の大きい部分を抽出することで被写体の形状や大きさを知ることができる。
本実施例では、図1の物体基準情報記憶手段2に記憶しておいた検出したい「人」の形や大きさの情報(物体基準情報)と、被写体の形状と大きさを比較して合致するかどうかを判断し、その結果を分析結果情報記憶手段4に保存する。
なお、本実施例の監視システムとインターネット回線を接続するなど、目的に応じて外部のシステムと連携することで、分析結果情報記憶手段4に記憶されている結果が、「侵入者(人)がいる」という判断結果である場合は、例えば、電子メールで遠隔地の人に通知したり、外部のスピーカーを通じて警告音声を発したり、外部のライトの光を発したり、というように目的に応じて様々な応用が可能になる。
ここで、本実施例の監視システムと外部のシステムと連携することで、遠隔地の端末(例えば、据え置き型のパソコンや携帯可能な小型パソコンなど)に監視システムの映像を送信し、遠隔地の端末で映像を確認することが可能となるのであるが、プライバシー保護の問題を考慮すると、通常状態(異常が発生していない状態)では映像を非表示とし、人が倒れる等の緊急事態が発生した場合のみ映像(動画や静止画)を表示するといった構成とすることが好ましい。
また、本実施例の監視システムを複数(例えば、2つ)利用して、複数の場所の見守りを行っている状況で、複数のカメラで同時に、若しくは、次々に異常発生の映像が送信された場合には、先発の映像が後発の映像に切り替えられる等によって、監視者の見落としが生じることも考えられる。そのため、監視者の端末には履歴を表示し、履歴の中から選択した映像を閲覧できるような構成とすることが好ましい。
また、本実施例の監視システムでは、矩形セット(図1の物体基準情報記憶手段2に記憶した小矩形と大矩形の組み合わせを意味する)を指定することで、犬や猫などの小動物や、自動車が通過するのを無視することができる。そのため、小動物や自動車が通るたびに、監視者は現場の確認のために奔走しなくて済むようになり、侵入者(人)が存在するときのみ対応すれば良く、効率の良い監視システムを構築することができる。
また、本実施例の監視システムでは、矩形セットの設定を変更することで、様々な用途に対応することができる。
例えば、子供と大人を区別するような使い方が挙げられる。その場合、幼児や児童よりも少し大きい形の小矩形を設定し、大人の人よりも少し大きい大矩形を設定しておく。このように設定しておくことで例えば、幼稚園や小学校において、幼児や児童には反応せずに、大人(不審者)が入ってきた場合に、職員室に自動通知するシステムとして応用することができる。
なお、このような機能を持たない従来の熱センサーや動体検知センサーであれば、大人だけでなく、子供(幼児や児童)にも反応して通知が発生するため、防犯上、重要ではない通知が多発してしまうことになり、通知のたびに、人が確認しなければならず、監視する人の労力を減らすことができなくなってしまったり、もしくは、通知があっても「また子供(幼児や児童)が通ったのだろう」という思い込みにより、本当に不審者が侵入しているようなケースを見落としてしまったりする事態に発展してしまう恐れがある。これに対して、本実施例の監視システムでは、このような問題を大幅に軽減できる。
本実施例の監視システムでは、カメラの設置位置によって被写体が違う形に見える問題に柔軟に対応することができる。
例えば、図3(a)のようにカメラが横から水平に人を撮影した場合、映像中の人(被写体)は、縦に長い長方形に近いような形に見える。それに対して、例えば図2(a)のように、カメラが上から人を撮影した場合は、カメラの映像は、円形もしくは正方形に近い形に見える。このように同じ人(被写体)でも、撮影するカメラの位置との相対関係により、違う形に見える。こうした状況に鑑みて、本実施例の監視システムでは、カメラを設置した状態で、画面を見ながら、現場に応じて検出したい物体の形を指定できるために、設置場所に左右されにくいシステムを構築することができる。
また、本実施例の監視システムでは、複数の矩形セットを設定することで、「人が倒れた状態」を検出することもできる。
例えば、独り暮らしの老人が、体の具合が悪くなって倒れてしまって、そのまま数日間、放置されてしまうと命を落としてしまうような重大な事故を招いてしまうかもしれない。このような独居老人の重大な事故については、「人が倒れた状態」を検出することで未然に防ぐことも可能となる。
ただし、「人が倒れた状態」は、カメラの設置位置と、倒れた人の位置との相対関係によって、カメラの映像としては、違う形状と大きさで見える。例えば、図10のように、人が倒れている状態を、カメラが横から水平に撮影した場合は、カメラの映像は、図11のように見える。また、図12のように倒れている人を、カメラが横から水平に撮影した場合、カメラの映像は、図13のように見える。図11と図13を比較すると分かるように、倒れている人を同じ位置からカメラが撮影しても、倒れる向きによって、これほど違って見える。
これらのような場合においても、本実施例の監視システムでは充分に対応することができる。即ち、図11及び図13のいずれも人が倒れた状態であるとして検出できる様に、複数の矩形セットを指定して、これらを検出したい物体の基準情報として、図1の物体基準情報記憶手段2に記憶し、映像分析手段3において、この複数の矩形セットのいずれかに合致する被写体を検知したら、「人が倒れている」と判定することで、「人が倒れた状態」を充分に検出することが可能となる。
具体的には、図11のような倒れた状態を検出するために、図14のような矩形セットを指定し、図13のような倒れた状態を検出するために、図15のような矩形セットを指定する。他にも倒れ方に応じた複数の矩形セットを指定することで、人が倒れている状態を検出する精度を高めることができる。なお、図14及び図15中の符号Aは大矩形を示し、符号Bは小矩形を示している。
他にも、例えば、図16のようにカメラ6が人を上から撮影するように設置した場合、立っている人は、カメラの映像では、図17のように見える。しかし、図18のように倒れている人を上から撮影した場合、カメラの映像は、図19のように見える。カメラが上から人を撮影した場合の図19のカメラの映像は、カメラが横から人を撮影した場合のカメラの映像(図11と図13)とは違った形になる。よって、図19のような倒れた映像に対応するために、図20のような矩形セットが必要になる。このように、複数の矩形セットを指定できることで、カメラの設置位置の変更にも柔軟に対応して「人が倒れた状態」を検出できるシステムを実現できる。なお、図20中の符号Aは大矩形を示し、符号Bは小矩形を示している。
また、上記は例として、物体基準情報を矩形で表現したが、矩形に限定する必要はなく、例えば、図21のように、人のいろいろな状態でのモデルを準備して、これらの中から利用したいものを選択して利用したり、選択したモデルの形状や大きさを調整(拡大、縮小、変形)して利用したりしても良い。
また、用途によって、検出したいものも変わるので、モデルも、人の形のものに限らず、動物や自動車など様々な物体のモデルを準備して物体基準情報として利用することで、例えば自動車の数や、人の数を区別して集計できるようなシステムとしても利用できる。
なお、図1の映像記憶手段1に記憶される映像はフレームに限定する必要はなく、フィールドであっても良いし、例えば輝度と色差に変換されている場合は、輝度だけ、あるいは色差だけといった構成でも良く、また、拡大や縮小、もしくは、一部の抜粋であったり、周波数変換されていたりするものや、時間軸方向または空間方向において微分などのフィルタリング処理、色数の変更や、量子化により各信号の諧調変更などが行われていても良い。
なお、本実施例では、図1のカメラ6は、アナログの映像信号をデジタルに変換してコンピュータ5に入力できるものとしたが、カメラ6がアナログ信号を出力するものであれば、コンピュータ5とカメラ6の間か、コンピュータ5内にデジタル信号に変換する機能を具備する構成としても良いし、また、カメラ6の映像信号が何らかの圧縮がなされていれば、コンピュータ5とカメラ6の間か、コンピュータ5内に圧縮されている信号を伸長する手段を具備する構成としても良い。
また、本実施例では、映像信号をカメラ6からコンピュータ5に直接入力しながら利用する構成としたが、カメラ6の映像をインターネット回線などを用いて、遠隔地のコンピュータ5に送信する形としても同様の意味を成す。
なお、カメラ6の被写体の形状や大きさを抽出する方法については、本実施例に示した方法に限定するものではない。
また、本実施例では監視システムの主な構成を、コンピュータ上で動作するソフトウェアとしたが、その場合はコンピュータのプロセッサ上で動作するプログラムという形態となり、各種制御はCPUで行われ、各種記憶手段はコンピュータ上のメモリやハードディスクなどで構成される。これらの機能は、システムLSIや、その他のハードウェア、またはコンピュータ上で動作するソフトウェア、またはコンピュータに組み込まれるハードウェア、またはソフトウェアとハードウェアの両方、という構成を取っても良い。更に、コンピュータ上で動作するプログラムを記録した記録媒体であっても良い。
なお、本実施例ではカメラが1台の場合を示したが、カメラが複数台であっても良い。
また、カラーカメラのような可視光線を受光するものに限らず、例えば赤外線受光機などの、何らかの光信号を受信可能なものは、実質的に映像を取得できるため、これらも本実施例で述べたカメラに含まれるものとする。
以下に、上記従来の監視システムの課題を解決するための、本発明の実施例2について説明する。
図26に、本発明の実施例2の監視システムの構成を示す。
図26において、1は、映像信号を記憶する映像記憶手段で、例として時刻の異なる複数のフレームの映像を記憶するものとする。2は、映像中の被写体の中から検出したい物体の基準情報を記憶する物体基準情報記憶手段で、3は、映像記憶手段1に記憶されている映像信号を分析し、被写体が物体基準情報記憶手段2に記憶されている物体基準情報に合致するかどうかを判断する映像分析手段で、4は、映像分析手段3の分析結果情報を記憶する分析結果情報記憶手段で、5はコンピュータで、例として、映像記憶手段1と物体基準情報記憶手段2と映像分析手段3と分析結果情報記憶手段4は、コンピュータ5上のソフトウェアプログラムとして実装されるものとする。6はカメラで、7は映像を表示するモニター(映像表示手段)である。8はマウスであり、物体基準情報入力手段として活用する。カメラ6は、アナログの映像信号をデジタルに変換してコンピュータ5に入力できるものであり、以上は、実施例1の図1の構成と同様のものである。9は、物体の基準情報の、画面内における有効エリアの座標を有効エリア情報とし、有効エリア情報を記憶する有効エリア情報記憶手段である。8のマウスを効エリア情報入力手段としても活用する。
なお、実施例1との違いは、この有効エリア情報記憶手段9が具備されている点である。
まず、この監視システムの動作の概要を述べる。
例えば、屋外での防犯目的での利用においては、侵入者(人)を検出して、例えば、警報を鳴らしたり、遠隔地の監視者に通知したりするような利用方法が考えられる。
しかしながら、屋外には、人だけでなく、例えば、犬や猫などの小動物も存在する。犬や猫が通るたび警報が鳴ったり、遠隔地に通知が行われたりすると監視者は現場の映像の確認作業が増えてしまうため、侵入者(人)が現れるなどの重要な事象の場合のみ通知が行われるようなシステムが望まれる。
それを実現するために、本実施例では、カメラ6の映像信号を映像記憶手段1に記憶し、その記憶した映像を、映像分析手段3で分析して、被写体の形状や大きさを判断する。なお、あらかじめ検出したい侵入者(人)の形状や大きさの情報を、物体基準情報として物体基準情報記憶手段2に記憶しておき、この物体基準情報と、被写体の形状と大きさを比較して合致するかどうか、すなわち、侵入者(人)の形状や大きさを満たしているかどうかを判断し、その結果を分析結果情報記憶手段4に保存する。
ここまでは、実施例1と同様の動作である。
本実施例が、実施例1と異なるのは、画面内において、物体基準情報を適用する有効エリアの座標を有効エリア情報記憶手段9に記憶しておき、有効エリアを制限することで、鳥などの小動物と人間を判別する精度を向上させるという点である。
図22は、遠方に人gと鳥hが存在している様子を示したものである。人も鳥も、どちらもカメラから同じくらいの距離に存在しており、この場合、それぞれの大きさが全く異なるため、物体基準情報として鳥より十分大きな小矩形を設定しておくことで、鳥を人と誤認識することはない。
しかしながら、図23のようなケースは問題がある。即ち、図23は、人gは遠方に存在し、鳥hはカメラの近くに存在する状態を示しており、本来、人間より十分小さい鳥であっても、カメラに近づくことで、画面中の大きさとしては、鳥が人と同等くらいの大きさに映るケースが問題となる。この場合、大きさや形の違いが小さいため、鳥を人と誤認識してしまう可能性がある。
このような問題を抑制するために、本実施例では、物体基準情報を適用するエリアの座標を、有効エリア矩形Xとして図24のように設定することで、遠方の人にのみ物体基準情報が適用されることとし、近くに存在している鳥を人であると誤認識することを回避することができる。
次に、この監視システムの動作の詳細を述べる。
犬や猫などの小動物には無反応(警報や、遠隔地への通知を行わない)で、侵入者(人)のみを検出して反応する(警報や、遠隔地へ通知を行う)ようにしたい場合は、小動物と人を自動的に判別する必要がある。そのためには、図26のカメラ6の映像中の被写体の形状や大きさを判断する必要がある。
しかしながら、映像中の被写体の形状や大きさは、カメラと被写体との距離や角度によって変化するため、例えば「人」を検出したい物体とした場合、その形や大きさの情報(物体基準情報)が固定のものであっては対応できないという問題が発生する。
具体的には、図2(a)のようにカメラ6が上から、下にいる人を撮影した場合と、図3(a)のように、カメラ6が横から水平に人を撮影した場合では、同じ人を撮影した場合でも形状が大きく異なって見える。そして、カメラの設置位置は、図3(a)のように常に水平になるように設置できるとは限らず、カメラと被写体との距離や角度は、状況によって無限の組み合わせが存在することになる。
このように、カメラの設置位置によって被写体の形状と大きさが変わってしまう問題に柔軟に対応できるように、検出したい物体の物体基準情報(形状と大きさ)を入力する機能を具備する点が本発明の重要な特徴の一つである。
本発明の監視システムでは、まず、検出したい物体(例:人)の形や大きさの情報(物体基準情報)を、物体基準情報記憶手段2に記憶させる。
物体基準情報を入力する方法の例として、図26のモニター7の映像を見ながら、マウス8を使って図4のように、物体基準情報の、下限として小矩形Bと、上限として大矩Aを設定する。
ここで、図4の小矩形は、小動物(猫)bより、やや大きい矩形を設定する。図4の大矩形は、人aの大きさより、やや大きい矩形を設定する。例えば、この小矩形と大矩形のそれぞれの縦の長さと横の長さを、検出したい物体の基準情報として、図26の物体基準情報記憶手段2に記憶するのである。
上記の様に小矩形Bと大矩形Aを設定した場合には、図5のように、小矩形Bより大きく、大矩形Aより小さい物体(図5の中の斜線部分に該当する大きさと形を有する物体)を検知することとなる。
具体的には、図6は、物体(人)Cの縦の長さDと、横の長さEを示した図であるが、この縦の長さDが、図5の小矩形の縦の長さ以上で、大矩形の縦の長さ以下で、かつ、図6の横の長さEが、図5の小矩形の横の長さ以上で、大矩形の横の長さ以下であった場合には、こうした物体(人)を検出することとする。
このように小矩形Bと大矩形Aを定めることで、図4のように小矩形より小さい猫のような小動物は、検出の対象から除外されることになる。そして、大矩形より小さい「人」が検出対象となり、犬や猫のような小動物に反応しない優れた監視システムを構築できる。
ここで、小矩形だけでなく、大矩形を設定することも重要な意味がある。
例えば、図7のように、映像中に、人dより十分大きな自動車eなどが映るような状況を想定する。具体的には、屋外で敷地の前の道路を自動車が通行して通り抜けるケースなどである。その場合、自動車は道路を単に通り抜けるだけで、防犯上は特に問題が無いのであるが、この自動車が通るたびに反応する(警報や、遠隔地への通知が行われる)ようでは、監視者の負担を軽減できない問題につながる。そこで、大矩形を設定して、大矩形よりも大きな自動車などを無視して、大矩形よりも小さい「人」を検出できるようにすることで、例えば、建物や敷地内に侵入しようとする「人」だけに反応することとなる(警報で威嚇したり、遠隔地の監視者に通知したりする)。
そして、このことによって監視者にとって労力の負担が小さい効率的な監視システムを構築できるため、上述した様に、小矩形だけでなく、大矩形を設定することが重要となるのである。
次に、本発明の監視システムでは、図26のカメラ6からの映像信号を映像記憶手段1に記憶し、映像分析手段3で、被写体の形状や大きさを分析する。
その分析方法としては限定されるものではなく、例えば、被写体(移動物体)が何も映っていない数秒前の過去フレームと、被写体が存在する現在フレームの、フレーム間差分の絶対値を得る方法が挙げられる。
具体的には、図8のように、過去フレームに背景のみが映っていて、現在フレームも背景のみが映っている場合は、過去フレームと現在フレームの差分の絶対値が小さくなる。しかし、図9のように過去フレームは背景のみのであるが、現在フレームには人fが映っている場合は、過去フレームと現在フレームの差分の絶対値が大きくなる。即ち、人が映っている部分の差分の絶対値が大きくなることになる。
よって、この差分の絶対値の大きい部分を抽出することで被写体の形状や大きさを知ることができる。
なお、本実施例では、図26のモニター7の映像を見ながら、マウス8を使って、例えば図24のように有効エリア矩形を設定する。この有効エリアの例えば左上端と、右下端の座標情報を、有効エリア情報として、図26の有効エリア情報記憶手段9に記憶することとなる。
本発明の監視システムでは、図26の物体基準情報記憶手段2に記憶しておいた検出したい「人」の形や大きさの情報(物体基準情報)と、被写体の形状と大きさを比較して合致するかどうかを判断し、かつ、その被写体が、有効エリア情報記憶手段9に記憶されている有効エリア内に存在しているかを判断して、その結果を分析結果情報記憶手段4に保存する。このように物体基準情報を適用する有効エリアを設けることで、図24のように、有効エリア内の遠くの人間のみを検知して、有効エリア外の近くの鳥を人であると誤認識することを抑えることができる。
なお、本発明の監視システムとインターネット回線を接続するなど、目的に応じて外部のシステムと連携することで、分析結果情報記憶手段4に記憶されている結果が、「侵入者(人)がいる」という判断結果である場合は、例えば、電子メールで遠隔地の人に通知したり、外部のスピーカーを通じて警告音声を発したり、外部のライトの光を発したり、というように目的に応じて様々な応用が可能になる。
また、本実施例では、複数の異なる矩形セットを設定し、画面内のある有効エリア内では人を検知して、別の有効エリア内では車を検知するなど、目的に応じた柔軟な設定が可能な監視システムを構築できる。
更に、本実施例では、物体基準情報を適用する有効エリアを設けることで、実施例1の構成のメリットを備えた上で、図24のように、有効エリア内の遠くの人間のみを検知して、有効エリア外の近くの鳥を人であると誤認識することを抑えることができるため、実施例1より更に高精度で誤報の少ない監視システムを実現できる。
以下に、上記従来の監視システムの課題を解決するための、本発明の実施例3について説明する。
図27に、本発明の実施例3の監視システムの構成を示す。
実施例2では、カメラが1台の場合を例に示したが、本実施例では、カメラが2台で、それに対応する各種手段を具備する構成としている。図27において、1は、映像信号を記憶する映像記憶手段で、例として時刻の異なる複数のフレームの映像を記憶するものとする。2は、映像中の被写体の中から検出したい物体の基準情報を記憶する物体基準情報記憶手段で、3は、映像記憶手段1に記憶されている映像信号を分析し、被写体が物体基準情報記憶手段2に記憶されている物体基準情報に合致するかどうかを判断する映像分析手段で、4は、映像分析手段3の分析結果情報を記憶する分析結果情報記憶手段で、9は、物体の基準情報の、画面内における有効エリアの座標を有効エリア情報とし、有効エリア情報を記憶する有効エリア情報記憶手段であり、6がカメラで、以上は、カメラ6用の手段である。
図27において、11は、映像信号を記憶する映像記憶手段で、例として時刻の異なる複数のフレームの映像を記憶するものとする。12は、映像中の被写体の中から検出したい物体の基準情報を記憶する物体基準情報記憶手段で、13は、映像記憶手段11に記憶されている映像信号を分析し、被写体が物体基準情報記憶手段12に記憶されている物体基準情報に合致するかどうかを判断する映像分析手段で、14は、映像分析手段13の分析結果情報を記憶する分析結果情報記憶手段で、15は、物体の基準情報の、画面内における有効エリアの座標を有効エリア情報とし、有効エリア情報を記憶する有効エリア情報記憶手段であり、10がカメラで、以上は、カメラ10用の手段である。16は、カメラ6に対応した分析結果と、カメラ10に対応した分析結果のナンドなどの論理的な判定を行う論理判定手段である。これは、複数カメラの分析結果を総合的に考慮して、検出状態の重要性を判断するものである。目的に応じてアンドやナンドを使い分けることが可能である。
5はコンピュータで、例として、映像記憶手段1と映像記憶手段11と物体基準情報記憶手段2と物体基準情報記憶手段12と映像分析手段3と映像分析手段13と分析結果情報記憶手段4と分析結果情報記憶手段14と論理判定手段16は、コンピュータ5上のソフトウェアプログラムとして実装されるものとする。7は映像を表示するモニター(映像表示手段)である。8はマウスであり、物体基準情報入力手段として活用する。カメラ6とカメラ10は、アナログの映像信号をデジタルに変換してコンピュータ5に入力できるものである。
まず、この監視システムの動作の概要を述べる。
図25に、各カメラの設置例を示し、それぞれのカメラの役割を説明する。
カメラ6は、上から撮影し、転倒者の検知に用いる。カメラ10は、横から撮影して、転倒者とは別の歩行者の検知に用いる。通常、カメラ6が転倒者を検知した場合は、助けを呼ぶために、通知が必要であるが、カメラ10が別の歩行者を検知した場合、転倒者のそばに歩行者(すなわち介助できる人)が存在するケースであり、新たに助けを呼ぶ必要が無い。よって、論理判定手段16で、カメラ10が歩行者を検知した場合は、カメラ6の転倒者の検知をナンド(否定)することで、新たに助けを呼ばないような使い方に適用する。助けが必要ないケースにおいては、通知を行わないことは、監視者の現場確認や、人の現場への派遣のための労力を削減することができる。
次に、この監視システムの動作の詳細を述べる。
まず、カメラ6で検出したい物体(この場合は、「転倒者」)の形や大きさの情報(物体基準情報)を、物体基準情報記憶手段2に記憶させる。
続いて、カメラ10で検出したい物体(この場合は、「転倒者とは別の歩行者」)の形や大きさの情報(物体基準情報)を、物体基準情報記憶手段12に記憶させる。
物体基準情報を入力する方法の例として、図27のモニター7の映像を見ながら、マウス8を使って物体基準情報の、下限として小矩形と、上限として大矩形を設定する。同様に必要に応じて有効エリア情報を、有効エリア情報記憶手段15に記憶する。以下、分析結果が分析結果情報記憶手段14に記憶されるまでの流れは、名称が同一の手段については、実施例2と同様の動作がなされる。
本実施例では、論理判定手段16で、カメラ10が歩行者jを検知した場合は、カメラ6の転倒者kの検知をナンド(否定)する。すなわち、転倒者を手助けすることが可能な歩行者がいる場合は、通知が必要な重要な状況では無いと判定するのである。
なお、本実施例の監視システムとインターネット回線を接続するなど、外部のシステムと連携することで、転倒者がいて、なおかつ、手助けが可能な歩行者がいない場合は、例えば、電子メールで遠隔地の人に通知し、手助けが可能な歩行者がいる場合は、通知しないことで、監視者の負担を大幅に削減することができる。
1 映像記憶手段
2 物体基準情報記憶手段
3 映像分析手段
4 分析結果情報記憶手段
5 コンピュータ
6 カメラ
7 モニター
8 マウス
9 有効エリア情報記憶手段
10 カメラ
11 映像記憶手段
12 物体基準情報記憶手段
13 映像分析手段
14 分析結果情報記憶手段
15 有効エリア情報記憶手段
16 論理判定手段

Claims (12)

  1. 映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、
    入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段とを備える
    監視システム。
  2. 映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、
    撮像される領域中の所定領域を特定する情報を有効領域情報として記憶する有効領域情報記憶手段と、
    入力された映像の中の物体が前記有効領域情報記憶手段に記憶された前記有効領域情報内に位置するか否かを判断すると共に、同物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段とを備える
    監視システム。
  3. 入力された映像を記憶する映像記憶手段を備え、
    前記映像分析手段は、前記映像記憶手段に記憶された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する
    請求項1に記載の監視システム。
  4. 入力された映像を記憶する映像記憶手段を備え、
    前記映像分析手段は、前記映像記憶手段に記憶された映像の中の物体が前記有効領域情報記憶手段に記憶された前記有効領域情報内に位置するか否かを判断すると共に、同物体が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する
    請求項2に記載の監視システム。
  5. 前記映像分析手段の判断結果を記憶する分析結果情報記憶手段を備える
    請求項1、請求項2、請求項3または請求項4に記載の監視システム。
  6. 前記映像分析手段の判断結果を告知する告知手段を備える
    請求項1、請求項2、請求項3または請求項4に記載の監視システム。
  7. 前記映像分析手段に入力される映像を表示する映像表示手段と、
    前記物体基準情報記憶手段に前記基準情報を入力する物体基準情報入力手段とを備える
    請求項1、請求項2、請求項3または請求項4に記載の監視システム。
  8. 前記映像分析手段に入力される映像を表示する映像表示手段と、
    前記有効領域情報記憶手段に前記有効領域情報を入力する有効領域情報入力手段とを備える
    請求項2または請求項4に記載の監視システム。
  9. 通信回線を介して接続された端末に対して前記映像分析手段に入力された映像を送信可能に構成された映像送信手段を備え
    前記映像分析手段の判断結果に応じて前記映像送信手段は同映像分析手段に入力された映像を送信する
    請求項1、請求項2、請求項3または請求項4に記載の監視システム。
  10. 映像の中から検出したい第1の物体の基準情報として同第1の物体の形状の上限と下限の情報を記憶すると共に、映像の中から検出したい第2の物体の基準情報として同第2の物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、
    入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記第1の物体の基準情報の上下限内であるか否かを判断する第1の映像分析手段と、
    入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記第2の物体の基準情報の上下限内であるか否かを判断する第2の映像分析手段と、
    少なくとも前記第1の映像分析手段の判断結果及び前記第2の映像分析手段の判断結果に基づいて論理判定を行う論理判定手段とを備える
    監視システム。
  11. 映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、入力された映像の中の物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段と、通信回線を介して接続された端末に対して前記映像分析手段に入力された映像を送信可能に構成された映像送信手段を、それぞれ有する第1の監視システム、第2の監視システムと、
    少なくとも前記第1の監視システムの映像送信手段及び前記第2の監視システムの映像送信手段から送信された映像と共に同映像の受信履歴情報を読み出し可能に記憶する記憶手段と、該記憶手段に記憶された前記受信履歴情報を表示する表示手段を有し、前記表示手段に表示された前記受信履歴情報を選択することで、同受信履歴情報に対応する映像が前記表示手段に表示可能に構成された端末とを備える
    監視システム。
  12. 映像の中から検出したい物体の基準情報として、物体の形状の上限と下限の情報を記憶する物体基準情報記憶手段と、撮像される領域中の所定領域を特定する情報を有効領域情報として記憶する有効領域情報記憶手段と、入力された映像の中の物体が前記有効領域情報記憶手段に記憶された前記有効領域情報内に位置するか否かを判断すると共に、同物体の形状が前記物体基準情報記憶手段に記憶された前記基準情報の上下限内であるか否かを判断する映像分析手段と、通信回線を介して接続された端末に対して前記映像分析手段に入力された映像を送信可能に構成された映像送信手段を、それぞれ有する第1の監視システム、第2の監視システムと、
    少なくとも前記第1の監視システムの映像送信手段及び前記第2の監視システムの映像送信手段から送信された映像と共に同映像の受信履歴情報を読み出し可能に記憶する記憶手段と、該記憶手段に記憶された前記受信履歴情報を表示する表示手段を有し、前記表示手段に表示された前記受信履歴情報を選択することで、同受信履歴情報に対応する映像が前記表示手段に表示可能に構成された端末とを備える
    監視システム。
JP2010526736A 2008-08-28 2009-08-26 監視システム Active JP5047361B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010526736A JP5047361B2 (ja) 2008-08-28 2009-08-26 監視システム

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2008219635 2008-08-28
JP2008219635 2008-08-28
JP2009146442 2009-06-19
JP2009146442 2009-06-19
JP2010526736A JP5047361B2 (ja) 2008-08-28 2009-08-26 監視システム
PCT/JP2009/064844 WO2010024281A1 (ja) 2008-08-28 2009-08-26 監視システム

Publications (2)

Publication Number Publication Date
JPWO2010024281A1 true JPWO2010024281A1 (ja) 2012-01-26
JP5047361B2 JP5047361B2 (ja) 2012-10-10

Family

ID=41721448

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010526736A Active JP5047361B2 (ja) 2008-08-28 2009-08-26 監視システム

Country Status (2)

Country Link
JP (1) JP5047361B2 (ja)
WO (1) WO2010024281A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5545977B2 (ja) * 2010-04-16 2014-07-09 セコム株式会社 画像監視装置
JP5789187B2 (ja) * 2011-12-26 2015-10-07 旭化成株式会社 転倒検出装置、転倒検出方法、情報処理装置及びプログラム
KR101767497B1 (ko) 2013-01-29 2017-08-11 유겐가이샤 라므롯쿠에조우기쥬츠켄큐쇼 감시 시스템
JP2014149584A (ja) * 2013-01-31 2014-08-21 Ramrock Co Ltd 通知システム
JP6529855B2 (ja) * 2015-08-07 2019-06-12 株式会社Ihiエアロスペース 移動体とその障害物検出方法
CN105336074A (zh) * 2015-10-28 2016-02-17 小米科技有限责任公司 报警方法及装置
JP6912881B2 (ja) * 2016-12-01 2021-08-04 キヤノン株式会社 情報処理装置、情報処理方法およびプログラム
JP7378223B2 (ja) * 2018-08-07 2023-11-13 キヤノン株式会社 検知装置およびその制御方法
JP7172376B2 (ja) * 2018-09-27 2022-11-16 株式会社リコー 情報提供装置、情報提供システム、情報提供方法、及びプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6286990A (ja) * 1985-10-11 1987-04-21 Matsushita Electric Works Ltd 異常監視装置
JPH11339169A (ja) * 1998-05-26 1999-12-10 Noritz Corp 入浴監視装置
JP2001160146A (ja) * 1999-12-01 2001-06-12 Matsushita Electric Ind Co Ltd 画像認識方法および画像認識装置
JP2007157005A (ja) * 2005-12-07 2007-06-21 Matsushita Electric Ind Co Ltd オブジェクト行動検知・通知システム、センター装置、コントローラ装置及びオブジェクト行動検知・通知方法並びにオブジェクト行動検知・通知プログラム
JP2008059487A (ja) * 2006-09-01 2008-03-13 Basic:Kk 看視装置及び看視方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6286990A (ja) * 1985-10-11 1987-04-21 Matsushita Electric Works Ltd 異常監視装置
JPH11339169A (ja) * 1998-05-26 1999-12-10 Noritz Corp 入浴監視装置
JP2001160146A (ja) * 1999-12-01 2001-06-12 Matsushita Electric Ind Co Ltd 画像認識方法および画像認識装置
JP2007157005A (ja) * 2005-12-07 2007-06-21 Matsushita Electric Ind Co Ltd オブジェクト行動検知・通知システム、センター装置、コントローラ装置及びオブジェクト行動検知・通知方法並びにオブジェクト行動検知・通知プログラム
JP2008059487A (ja) * 2006-09-01 2008-03-13 Basic:Kk 看視装置及び看視方法

Also Published As

Publication number Publication date
JP5047361B2 (ja) 2012-10-10
WO2010024281A1 (ja) 2010-03-04

Similar Documents

Publication Publication Date Title
JP5047361B2 (ja) 監視システム
US9311794B2 (en) System and method for infrared intruder detection
KR101544019B1 (ko) 합성 영상을 이용한 화재감지시스템 및 방법
WO2016150045A1 (zh) 一种非法入室告警方法及装置
KR101467352B1 (ko) 위치기반 통합관제시스템
US9053621B2 (en) Image surveillance system and image surveillance method
JP2007257122A (ja) 監視システム
KR20120140518A (ko) 스마트폰 기반의 원격 감시 시스템 및 제어방법
KR101381924B1 (ko) 카메라 감시 장치를 이용한 보안 감시 시스템 및 방법
US20040216165A1 (en) Surveillance system and surveillance method with cooperative surveillance terminals
JP2013109440A (ja) 防犯カメラ装置
KR20200132137A (ko) 움직임 감지와 레이더 센서를 이용한 탐지 객체 위치 산출 장치
KR20150041939A (ko) 실시간 이벤트 감지를 통한 도어 감시시스템 및 그 방법
JP2009015536A (ja) 不審者通報装置、不審者監視装置及びこれを用いた遠隔監視システム
KR101046819B1 (ko) 소프트웨어 휀스에 의한 침입감시방법 및 침입감시시스템
JP4692437B2 (ja) 監視カメラ装置
JP2001069268A (ja) 通信装置
JP4702184B2 (ja) 監視カメラ装置
JP4516715B2 (ja) 非常報知システム
JP2005309965A (ja) 宅内セキュリティ装置
JP2006003941A (ja) 緊急通報システム
JP6754451B2 (ja) 監視システム、監視方法及びプログラム
JP2008148138A (ja) 監視システム
JP4096953B2 (ja) 人体検知器
Teja et al. Home security system using raspberry PI with IOT

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120703

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120717

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150727

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5047361

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250