JP6807247B2 - Monitoring system and monitoring method - Google Patents
Monitoring system and monitoring method Download PDFInfo
- Publication number
- JP6807247B2 JP6807247B2 JP2017032499A JP2017032499A JP6807247B2 JP 6807247 B2 JP6807247 B2 JP 6807247B2 JP 2017032499 A JP2017032499 A JP 2017032499A JP 2017032499 A JP2017032499 A JP 2017032499A JP 6807247 B2 JP6807247 B2 JP 6807247B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- current
- past
- abnormality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims description 73
- 238000000034 method Methods 0.000 title claims description 23
- 230000005856 abnormality Effects 0.000 claims description 63
- 230000002159 abnormal effect Effects 0.000 claims description 22
- 238000003384 imaging method Methods 0.000 claims description 17
- 238000010191 image analysis Methods 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 47
- 238000001514 detection method Methods 0.000 description 16
- 238000012545 processing Methods 0.000 description 15
- 230000010485 coping Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Telephonic Communication Services (AREA)
- Alarm Systems (AREA)
Description
本発明は、カメラを用いて監視エリアを監視する技術に関する。 The present invention relates to a technique for monitoring a monitoring area using a camera.
カメラを用いて所定の場所を監視するシステムにおいて、カメラの画像に含まれる監視対象を分かりやすくする加工をしてから表示する技術が、特許文献1に記載されている。具体的には、特許文献1の技術では、監視対象者が監視領域に存在する場合に、当該監視領域を出発する移動体の数を監視対象者に対応付けて計数し、計数した数が閾値を超える場合に、監視対象者を識別するためのマークを表示する。 Patent Document 1 describes a technique for displaying a monitoring target included in an image of a camera after processing it so that it is easy to understand in a system for monitoring a predetermined place using a camera. Specifically, in the technique of Patent Document 1, when the monitored person exists in the monitored area, the number of moving objects departing from the monitored area is counted in association with the monitored person, and the counted number is the threshold value. When the number exceeds, a mark for identifying the monitored person is displayed.
監視カメラは通常、人の目線より高い位置に設置される。監視カメラの撮像範囲や撮像方向は監視員の視野と異なるため、監視カメラの画像を監視員等が目視した場合に、実空間のどこを撮像した画像か容易に認識できないことがある。このため、異常に対処する監視員は、監視カメラの撮像範囲と自分の位置との関係を把握することが難しい場合がある。
そこで、本発明は、異常に対処する人員が監視エリアを撮像した画像を確認する際、画像上における自分の位置を容易に把握可能にすることを目的とする。
Surveillance cameras are usually installed higher than the human eye. Since the imaging range and imaging direction of the surveillance camera are different from the field of view of the observer, when the observer or the like visually observes the image of the surveillance camera, it may not be possible to easily recognize where in the real space the image was captured. For this reason, it may be difficult for the observer who deals with the abnormality to grasp the relationship between the imaging range of the surveillance camera and his / her position.
Therefore, an object of the present invention is to enable a person who deals with an abnormality to easily grasp his / her position on the image when confirming the image of the monitoring area.
上述した課題を解決するため、本発明の監視システムは、監視エリアに設置されたカメラ装置により撮像された画像を取得する取得部と、前記カメラ装置により過去に撮像された画像である過去画像を記憶する記憶部と、前記監視エリアで発生した異常に対処する人員の現在位置を特定する第1位置特定部と、前記特定した現在位置に基づいて、前記記憶された過去画像上に前記人員の現在位置を明示した第1画像を生成する第1生成部と、前記第1画像を出力する第1出力部とを備える。 In order to solve the above-mentioned problems, the monitoring system of the present invention captures an image captured by a camera device installed in a monitoring area and a past image which is an image previously captured by the camera device. Based on the storage unit to be stored, the first position specifying unit for specifying the current position of the person to deal with the abnormality generated in the monitoring area, and the specified current position, the person is placed on the stored past image. It includes a first generation unit that generates a first image in which the current position is clearly specified, and a first output unit that outputs the first image.
本発明の監視システムにおいて、前記第1生成部は、少なくとも前記異常の発生時に撮像された異常時画像を含む前記過去画像上に、前記人員の現在位置を明示した前記第1画像を生成してもよい。
本発明の監視システムにおいて、前記第1位置特定部は、前記対処する人員が所持する携帯端末の位置情報を取得し、当該位置情報に基づき前記画像上における人員の現在位置を特定してもよい。
本発明の監視システムにおいて、前記第1位置特定部は、前記取得された画像に対する画像解析に基づき前記対処する人員を識別し、当該人員の前記画像上の現在位置を特定してもよい。
In the monitoring system of the present invention, the first generation unit generates the first image in which the current position of the personnel is clearly shown on the past image including at least the image at the time of abnormality captured when the abnormality occurs. May be good.
In the monitoring system of the present invention, the first position specifying unit may acquire the position information of the mobile terminal possessed by the corresponding person and specify the current position of the person on the image based on the position information. ..
In the monitoring system of the present invention, the first position specifying unit may identify the person to be dealt with based on the image analysis of the acquired image, and may specify the current position of the person on the image.
本発明の監視システムにおいて、前記監視エリア内の前記異常が発生した位置である異常位置を特定する第2位置特定部と、前記特定した異常位置に基づいて、前記取得された現在の監視エリアが撮像された現画像上に前記異常位置を明示した第2画像を生成する第2生成部と、前記第2画像を出力する第2出力部とを備えてもよい。 In the monitoring system of the present invention, the second position specifying unit that specifies the abnormal position, which is the position where the abnormality occurs in the monitoring area, and the acquired current monitoring area based on the specified abnormal position A second generation unit that generates a second image in which the abnormal position is clearly shown on the captured current image and a second output unit that outputs the second image may be provided.
本発明の監視システムにおいて、前記第1生成部は、前記カメラ装置の撮像範囲における現在の混雑度合いが所定の条件を満たす場合に前記第1画像を生成してもよい。 In the monitoring system of the present invention, the first generation unit may generate the first image when the current degree of congestion in the imaging range of the camera device satisfies a predetermined condition.
本発明の監視方法は、監視エリアに設置されたカメラ装置により撮像された画像を取得するステップと、前記カメラ装置により過去に撮像された画像である過去画像を記憶するステップと、前記監視エリアで発生した異常に対処する人員の現在位置を特定するステップと、前記特定した現在位置に基づいて、前記記憶された過去画像上に前記人員の現在位置を明示した第1画像を生成するステップと、前記第1画像を出力するステップとを備える。 The monitoring method of the present invention includes a step of acquiring an image captured by a camera device installed in the monitoring area, a step of storing a past image which is an image captured in the past by the camera device, and a step of storing the past image in the monitoring area. A step of specifying the current position of a person to deal with an abnormality that has occurred, and a step of generating a first image in which the current position of the person is clearly shown on the stored past image based on the specified current position. It includes a step of outputting the first image.
本発明によれば、異常に対処する人員が監視エリアを撮像した画像を確認する際、画像上における自分の位置を容易に把握可能にすることができる。 According to the present invention, when a person dealing with an abnormality confirms an image obtained by capturing an image of a monitoring area, he / she can easily grasp his / her position on the image.
以下、図面を参照して本発明の実施形態を説明する。
図1は、本発明の一実施形態に係る監視システム1の全体構成を示す図である。監視システム1は、マラソン競技等のイベントの開催場所を監視するシステムである。監視システム1は、サーバ装置10と、複数のカメラ装置20と、複数の携帯端末30と、オペレーション端末40とを備える。サーバ装置10は、複数のカメラ装置20、及び複数の携帯端末30の各々と通信回線NW2経由で通信を行う情報処理装置である。通信回線NW2は、例えば、インターネット、及び無線通信網を含む公衆の通信回線である。サーバ装置10は、オペレーション端末40と通信回線NW1経由で通信を行う。通信回線NW1は、LAN(Local Area Network)を含む通信回線である。サーバ装置10、及びオペレーション端末40は、イベントの開催場所を監視するための監視センタに配置される。
なお、通信回線NW1,NW2は、有線及び無線のいずれの通信回線であってもよい。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram showing an overall configuration of a monitoring system 1 according to an embodiment of the present invention. The monitoring system 1 is a system for monitoring the venue of an event such as a marathon competition. The monitoring system 1 includes a
The communication lines NW1 and NW2 may be either wired or wireless communication lines.
サーバ装置10は、複数のカメラ装置20の各々により撮像された画像を、携帯端末30に送信するための処理を行う。複数のカメラ装置20は、予め決められた場所に設置(固定)されている。カメラ装置20は、自装置に割り当てられた監視エリアTを撮像し、撮像した画像を、サーバ装置10へ送信する。カメラ装置20は、例えば、街灯や電柱等の高所に設置され、例えば斜め下方向を撮像する。ただし、カメラ装置20の設置場所はいかなる場所でもよいし、撮像方向もいかなる方向でもよい。
The
携帯端末30は、監視員Uによって携帯される端末装置である。携帯端末30は、例えば、スマートフォンである。ただし、携帯端末30は、タブレット型コンピュータ等の、通信機能及び表示機能を有する携帯端末であればよい。携帯端末30は、監視員Uの身体の部位に装着されるウェアラブル型端末(例えば、腕時計型端末)であってもよい。携帯端末30は、カメラ装置20が撮像した現画像、及び過去画像に基づいて画像の表示を行う。現画像は、カメラ装置20が撮像した現在の画像であって監視エリアTの現在の様子を撮像した画像である。過去画像は、カメラ装置20が過去に撮像した画像であって監視エリアTの過去の様子の画像である。
The
監視員Uは、イベントの開催場所で異常が発生した場合には、その異常への対処を行う人員である。「異常」とは、本実施形態では、不審者、不審物(例えば、危険物)、及び負傷者のような、開催者又は参加者にとってイベントの進行を妨げられ得る事象のことをいう。どのような事象を異常と認めるかについては、予め決められていてもよい。監視員Uは、イベントの開催場所に配置され、自身が担当する場所を監視する。監視員Uには、例えば、警備を担当する人員、医療救護を担当する人員、又はイベントの運営に関わる人員等の、様々な役割の人員がいる。 Observer U is a person who deals with an abnormality when an abnormality occurs at the venue of the event. "Abnormal" means, in the present embodiment, an event such as a suspicious person, a suspicious object (for example, a dangerous object), and an injured person, which may hinder the progress of the event for the organizer or participants. What kind of event is recognized as abnormal may be decided in advance. Observer U is assigned to the venue of the event and monitors the location he is in charge of. The observer U has personnel in various roles, such as personnel in charge of security, personnel in charge of medical relief, and personnel involved in the operation of an event.
オペレーション端末40は、イベントの開催場所を監視センタから監視するオペレータにより使用されるコンピュータ装置である。オペレーション端末40は、複数のカメラ装置20から取得した画像に基づいて、イベントの開催場所の画像を表示する。また、オペレーション端末40は、サーバ装置10に対する情報の入出力に用いられる。
The
図2は、サーバ装置10の構成の一例を示す図である。図2に示すように、サーバ装置10は、制御部11と、第1通信部12と、第2通信部13と、記憶部14とを備える。制御部11は、サーバ装置10の各部を制御する。制御部11は、演算処理装置としてのCPU(Central Processing Unit)、ROM(Read Only Memory)、及びRAM(Random Access Memory)を含むプロセッサを有する。CPUは、ROM又は記憶部14に記憶されたプログラムをRAMに読み出して実行することにより、サーバ装置10の各部を制御する。第1通信部12は、通信回線NW2経由で、カメラ装置20、及び携帯端末30と通信する。第2通信部13は、通信回線NW1経由で、オペレーション端末40と通信する。第1通信部12、及び第2通信部13は、例えばモデムを備える。
FIG. 2 is a diagram showing an example of the configuration of the
記憶部14は、制御部11により実行されるプログラム、過去画像を記憶する。また、記憶部14は、カメラ装置20に関する情報として、カメラ装置20毎に、装置を識別するID情報、設置位置を示す情報、撮像範囲を示す領域情報を記憶する。設置位置を示す情報、撮像範囲を示す領域情報は、緯度及び経度で表される座標情報であり、記憶部14には、撮像された画像上の各位置と実空間における座標情報との対応関係が記憶される。この他、記憶部14は、携帯端末30を識別する情報等、サーバ装置10で実行される処理に必要な各種の情報を記憶する。記憶部14は、例えばハードディスクを備える。
The
制御部11は、取得部111と、記録部112と、異常検知部113と、選定部114と、第1位置特定部115と、第1生成部116と、第1出力部117と、第2位置特定部118と、第2生成部119と、第2出力部120とを有する。制御部11の各機能は、プロセッサ、及びプロセッサにより実行されるプログラムの協働により実現される。
The
取得部111は、第1通信部12を用いて、カメラ装置20により撮像された画像を取得する。記録部112は、取得部111が取得した画像に基づいて過去画像を記憶部14に記録する。異常検知部113は、監視エリアT内で発生し得る異常を検知する処理である「異常検知処理」を実行する。異常検知部113は、例えば、取得部111が取得した画像(過去画像又は現画像)を解析することにより、異常を検知する。この解析には、公知の画像解析を用いることができる。異常検知部113は、画像上に異常対象(不審者や不審物体)を検出した場合、その画像上(つまり、その画像を撮像したカメラ装置20の撮像範囲)における異常対象の位置(異常位置)を特定し、異常情報として記憶部14に記憶する。また、異常検知部113は、オペレータにより入力された情報を、第2通信部13を用いてオペレーション端末40から取得し、この情報に基づいて異常を検知することもできる。異常の検知方法は、特に問わない。選定部114は、異常検知部113により異常が検知されたと判定した場合に、その異常に対する対処指示を行う監視員Uの選定を行う。選定部114は、第1通信部12を用いて、選定した監視員Uの携帯端末30宛てに対処指示を行う。
The
第1位置特定部115は、監視エリアTで発生した異常に対処する監視員Uの位置を特定する。第1位置特定部115は、例えば、監視員Uが所持する携帯端末30から、第1通信部12を用いて携帯端末30の位置情報を取得する。位置情報は、GPS(Global Positioning System)等を用いて求められ、緯度及び経度で表される座標情報である。そして、第1位置特定部115は、表示対象として指定されたカメラ装置20の撮像範囲と監視員Uの位置とを対比し、画像上における監視員Uの位置を特定する。
The first
第1生成部116は、記憶部14に記憶された過去画像を読み出し、読み出した過去画像上に特定した監視員Uの位置を明示した画像を生成する。第1生成部116が生成した画像は、出力用の画像で、本発明の「第1画像」に対応する。第1出力部117は、この出力用の画像を、第1通信部12を用いて、監視員Uの携帯端末30へ送信する。なお、「送信」は、「出力」の一態様である。
The
第2位置特定部118は、監視エリアT内の異常が発生した位置を特定する。第2位置特定部118は、記憶部14に記憶された異常情報に基づき、表示対象として指定されたカメラ装置20から取得した現画像における異常対象の位置を特定する。第2生成部119は、取得部111が取得した画像に基づいて、現画像上に異常の発生位置を明示した画像を生成する。第2生成部119が生成した画像は、出力用の画像で、本発明の「第2画像」に対応する。第2出力部120は、この出力用の画像を、第1通信部12を用いて、監視員Uの携帯端末30へ送信する。
The second
図3は、カメラ装置20の構成の一例を示す図である。図3に示すように、カメラ装置20は、制御部21と、撮像部22と、記憶部23と、通信部24とを備える。
制御部21は、カメラ装置20の各部を制御する。制御部21は、演算処理装置としてのCPU、ROM、及びRAMを含むプロセッサを有する。CPUは、ROM又は記憶部23に記憶されたプログラムをRAMに読み出して実行することにより、カメラ装置20の各部を制御する。撮像部22は、監視エリアTを撮像する。撮像部22は、CCD(Charge Coupled Device)で例示される撮像素子及びレンズを含む。記憶部23は、制御部21により実行されるプログラムを記憶する。記憶部23は、例えばハードディスク装置を備える。通信部24は、通信回線NW2経由で、サーバ装置10と通信する。通信部24は、例えばモデムを備える。
FIG. 3 is a diagram showing an example of the configuration of the
The
図4は、携帯端末30の構成の一例を示す図である。図4に示すように、携帯端末30は、制御部31と、表示部32と、入力部33と、記憶部34と、通信部35と、測位部36とを備える。
制御部31は、携帯端末30の各部を制御する。制御部31は、演算処理装置としてのCPU、ROM、及びRAMを含むプロセッサを有する。CPUは、ROM又は記憶部34に記憶されたプログラムをRAMに読み出して実行することにより、携帯端末30の各部を制御する。表示部32は、取得した画像や操作画面、受信した対処指示に関する情報等を表示面に表示する。表示部32は、例えば液晶ディスプレイを備える。入力部33は、監視員Uからの情報の入力を受け付ける。入力部33は、例えば、表示部32の表示面に重ねて設けられたタッチパネル、及び物理ボタンを備える。記憶部34は、制御部31により実行されるプログラムを記憶する。記憶部34は、例えばフラッシュメモリを備える。通信部35は、通信回線NW2経由で通信を行う。通信部35は、例えば無線通信回路及びアンテナを備える。測位部36は、携帯端末30の位置を測定し、測定した位置を示す位置情報を生成する。測位部36は、例えばGPSで測位するための回路及びアンテナを備える。
以上が、監視システム1の構成である。次に、監視システム1の動作を説明する。
FIG. 4 is a diagram showing an example of the configuration of the
The
The above is the configuration of the monitoring system 1. Next, the operation of the monitoring system 1 will be described.
<対処指示>
図5は、監視システム1で実行される対処指示に係る処理を示すシーケンスチャートである。
カメラ装置20において制御部21は、撮像部22を用いて監視エリアTを撮像し(ステップS1)、現画像を、通信部24を用いてサーバ装置10へ送信する(ステップS2)。カメラ装置20は、ステップS1,S2の処理を繰り返し行う。
<Countermeasure instructions>
FIG. 5 is a sequence chart showing processing related to a coping instruction executed by the monitoring system 1.
In the
サーバ装置10において取得部111は、第1通信部12を用いて、現画像を取得する(ステップS3)。記録部112は、取得部111が取得した現画像に基づいて、過去画像を記憶部14に記録する(ステップS4)。次に、異常検知部113は、異常検知処理を実行する(ステップS5)。次に、異常検知部113は、この検知結果に基づいて異常が発生したどうかを判定する(ステップS6)。ステップS6で「NO」と判定した場合、異常検知部113は、ステップS3〜S6の処理を繰り返し行う。
In the
異常検知部113により異常が発生したと判定された場合(ステップS6;YES)、選定部114は、その異常に対する対処指示を行う監視員Uを選定する(ステップS7)。選定部114は、例えば、異常発生位置に最も近い位置の監視員Uを選定する。選定部114は、発生した異常の種類、又は監視員Uの役割に基づいて、監視員Uの選定を行ってもよい。
When the
監視員Uを選定すると、選定部114は、第1通信部12を用いて、選定された監視員Uの携帯端末30へ対処指示を行う(ステップS8)。対処指示は、画像取得に用いる対処キーや、異常の発生位置、異常の内容等、監視員Uが異常への対処にあたり必要な情報を含む。携帯端末30において制御部31は、対処指示を取得すると、監視員Uへの通知を行う(ステップS9)。通知の方法としては、表示部32を用いた対処指示の内容の表示があるが、音の出力、又はバイブレーション機能の振動等が用いられてもよい。この対処指示に従って、監視員Uは発生した異常への対処を行う。
以上により、監視員Uへの対処指示が完了する。
When the observer U is selected, the
With the above, the coping instruction to the observer U is completed.
監視員Uは携帯端末30からの対処指示に通知を受けると、携帯端末30は、カメラ装置20の撮像した画像として、過去画像、及び現画像を表示することができる。以下、それぞれの画像の表示に係る処理を説明する。
When the observer U is notified of the coping instruction from the
<過去画像の表示>
図6は、監視システム1で実行される過去画像の表示に係る処理を示すシーケンスチャートである。
携帯端末30において制御部31は、監視員Uによる過去画像の取得要求の操作に応じて、通信部35を用いて、過去画像の送信をサーバ装置10に要求する(ステップS11)。この要求の際、制御部31は、測位部36により生成された位置情報、及び過去画像を特定する情報を送信する。過去画像を特定する情報は、例えば、どのカメラ装置20の過去画像を表示するかを特定する情報、及びいつ撮像された画像を表示するかを特定する情報を含む。特に、監視員Uが確認したい画像は異常発生時に撮像された画像である異常時画像であるため、異常時画像を指定する操作が可能であり、一方、異常時画像以外の画像については表示を開始する撮像日時や期間を指定する操作が可能である。異常時画像が指定された場合、異常時画像を含む前後数秒〜数十秒の記録画像が指定されたものとして扱う。なお、監視員Uが携帯端末30を用いて過去画像の一覧表示から表示した画像を選択できる構成が採用されてもよい。
<Display of past images>
FIG. 6 is a sequence chart showing a process related to the display of the past image executed by the monitoring system 1.
In the
サーバ装置10において第1位置特定部115は、携帯端末30からの要求の後、監視員Uの位置を特定する(ステップS12)。第1位置特定部115は、携帯端末30から取得した位置情報に基づいて、過去画像上の監視員Uの位置を特定する。次に、第1生成部116は、記憶部14に記憶された過去画像のうち、送信が要求された過去画像を読み出す。そして、第1生成部116は、読み出した過去画像上に監視員Uの位置を明示した出力用の画像を生成する(ステップS13)。
In the
図7は、ステップS13の処理の一例を示す図である。図7の左側の図は、過去画像IM1を示す。過去画像IM1には、不審物Wが表示されている。しかし、過去画像IM1を見ても、カメラ装置の撮像範囲における現在の監視員Uの位置や向きが不明である。よって、監視員Uは、自身と不審物Wとの位置関係が把握しづらい。そこで、第1生成部116は、図7の右側の図に示すように、出力用の画像として加工画像IM2を生成する。加工画像IM2は、過去画像IM1上に監視員Uの位置を明示した画像である。ここでは、過去画像IM1上の監視員Uの現在位置に対応する位置に、目印画像MIが重畳させられている。目印画像MIは、ここでは人を模した画像であるが、監視員Uの位置や向きが認識できるのであれば丸印や矢印等の他の画像が用いられてもよい。
FIG. 7 is a diagram showing an example of the process of step S13. The figure on the left side of FIG. 7 shows the past image IM1. A suspicious object W is displayed on the past image IM1. However, even when looking at the past image IM1, the position and orientation of the current observer U in the imaging range of the camera device are unknown. Therefore, it is difficult for the observer U to grasp the positional relationship between himself and the suspicious object W. Therefore, the
第1出力部117は、出力用の画像を、第1通信部12を用いて携帯端末30へ送信する(ステップS14)。携帯端末30において制御部31は、通信部35を用いてこの画像を取得すると、加工画像を表示部32に表示させる(ステップS15)。表示部32には、図7で説明した加工画像IM2が表示される。
よって、監視システム1によれば、異常に対処する監視員が監視エリアTをカメラ装置20で撮像した画像の過去画像を閲覧する際、表示させた過去画像上における自分の位置、及び異常の発生位置と自分の位置との関係を、容易に把握することができる。
The
Therefore, according to the monitoring system 1, when the observer dealing with the abnormality browses the past image of the image captured by the
<現画像の表示>
図8は、監視システム1で実行される現画像の表示に係る処理を示すシーケンスチャートである。
携帯端末30において制御部31は、監視員Uによる現画像の取得要求の操作に応じて、通信部35を用いて、現画像の送信をサーバ装置10に要求する(ステップS21)。この要求の際、制御部31は、カメラIDを送信する。
<Display of current image>
FIG. 8 is a sequence chart showing processing related to display of the current image executed by the monitoring system 1.
In the
サーバ装置10において第2位置特定部118は、携帯端末30からの要求の後、異常の発生位置を特定する(ステップS22)。第2位置特定部118は、異常検知部113により記憶された異常の発生位置を示す位置情報に基づいて、画像上の異常の発生位置を特定する。次に、第2生成部119は、取得部111により取得された現画像上に異常の発生位置を明示した出力用の画像を生成する(ステップS23)。第2生成部119は、携帯端末30からのカメラIDに基づいて、どのカメラ装置20からの現画像を用いるかを決定する。
In the
図9は、ステップS23の処理の一例を示す図である。図9の左側の図は、現画像IM3を示す。この例では、過去に不審物の存在が異常として検出された後、その不審物の行方が不明になった場合が示されている。現画像IM3には、監視エリアT内に存在する監視員Uが表示されている。しかし、不審物が表示されていないので、現画像IM3を見ても、監視員Uは自身と不審物があった位置との位置関係が把握しづらい。よって、監視員Uは、不審物が移動させられたのか、又は自身が間違った場所に来たのかが分からない。 FIG. 9 is a diagram showing an example of the process of step S23. The figure on the left side of FIG. 9 shows the current image IM3. This example shows the case where the suspicious object's whereabouts became unknown after the existence of the suspicious object was detected as abnormal in the past. In the current image IM3, the observer U existing in the monitoring area T is displayed. However, since the suspicious object is not displayed, it is difficult for the observer U to grasp the positional relationship between himself and the position where the suspicious object was located even when looking at the current image IM3. Therefore, the observer U does not know whether the suspicious object has been moved or whether he / she has come to the wrong place.
そこで、第2生成部119は、図9の右側の図に示すように、出力用の画像として加工画像IM4を生成する。加工画像IM4は、現画像IM3上に不審物の位置を明示した画像である。ここでは、現画像IM3上の異常発生位置に対応する位置に、目印画像WIが重畳させられている。目印画像WIは、不審物の位置を分かりやすくするために不審物を模した画像を示す。ただし、不審物の位置を認識できるのであれば、丸印や矢印等の他の画像が用いられてもよい。なお、現在もなお不審物が存在している、つまり異常の発生が継続している場合は、当該異常の発生位置を明示する表示が行われてもよいし、行われなくてもよい。
Therefore, the
第2出力部120は、出力用の画像を、第1通信部12を用いて携帯端末30へ送信する(ステップS24)。携帯端末30において制御部31は、通信部35を用いてこの画像を取得すると、加工画像を、表示部32に表示させる(ステップS25)。表示部32には、図9で説明した加工画像IM4が表示される。
よって、監視システム1によれば、異常に対処する監視員が監視エリアTをカメラ装置20で撮像した現在の画像を閲覧する際、現画像上における自分の位置、異常の発生位置と自分の位置との関係を、容易に把握することができる。
The
Therefore, according to the monitoring system 1, when the observer dealing with the abnormality browses the current image of the monitoring area T captured by the
[変形例]
本発明は、上述した実施形態と異なる形態で実施してもよい。また、以下に示す変形例は、各々を組み合わせてもよい。
カメラ装置20の周辺の混雑度合いが高いほど、その監視エリアTの状況が分かりづらい。そこで、第1生成部116は、現在のカメラ装置20の撮像範囲における混雑度合いが所定の条件を満たす場合に、過去画像上に監視員Uの位置を明示し、満たさない場合には、過去画像上に監視員Uの位置を明示しないようにしてもよい。混雑度合いを監視エリアTに存在する人の数とした場合、所定の条件は当該人の数が閾値以上であることを示す。混雑度合いは、サーバ装置10においてカメラ装置20の現画像が解析されることで特定されてもよいし、オペレータにより指定されてもよく、混雑度合いの特定方法は特に問わない。また、第2生成部119は、現在のカメラ装置20の撮像範囲における混雑度合いが所定の条件を満たす場合に、現画像上に異常の発生位置を明示し、満たさない場合には、現画像上に異常の発生位置を明示しないようにしてもよい。
このようにすれば、混雑度合いが高い場合には、異常の発生位置と監視員の位置との関係を分かりやすくして表示することができる。更に、混雑度合いが低い場合には、サーバ装置10の処理負荷や通信回線NW2の通信負荷の軽減を図ることができる。
[Modification example]
The present invention may be implemented in a form different from the above-described embodiment. Moreover, each of the modification shown below may be combined.
The higher the degree of congestion around the
In this way, when the degree of congestion is high, the relationship between the position where the abnormality occurs and the position of the observer can be displayed in an easy-to-understand manner. Further, when the degree of congestion is low, the processing load of the
上述した実施形態の監視システム1では、監視員Uの位置を測定するために、GPSが用いられた。測位の方法はこれに限られない。監視システム1では、例えば、カメラ装置20の現画像を用いて画像認識を行うことにより現画像に写っている監視員Uを識別し、その監視員Uの画像上の位置を特定してもよい。この場合、服装や顔等の所定の特徴に基づいて画像認識が行われればよい。また、タグ測位等の更に別の方法が用いられてもよい。
In the monitoring system 1 of the above-described embodiment, GPS was used to measure the position of the observer U. The positioning method is not limited to this. In the monitoring system 1, for example, the observer U shown in the current image may be identified by performing image recognition using the current image of the
上述した実施形態の監視システム1では、出力用の画像が携帯端末30に出力されていたが、他の装置に出力されてもよい。例えば、監視センタの人員が、過去画像又は現画像を見ることができるように、オペレーション端末40に出力されてもよい。また、携帯端末30にて過去画像及び現画像を同時に表示可能としてもよい。
In the monitoring system 1 of the above-described embodiment, the image for output is output to the
上述した実施形態で説明したハードウェア回路、機能又は動作の一部が省略されてもよい。例えば、本発明は、現画像に異常の発生位置を明示する処理を行わなくてもよい。 Some of the hardware circuits, functions or operations described in the embodiments described above may be omitted. For example, the present invention does not have to perform a process of clearly indicating the position where an abnormality occurs in the current image.
上述した実施形態のサーバ装置10が有していた機能の一部を、カメラ装置20、携帯端末30、又はオペレーション端末40が有してもよい。上述した実施形態で説明したハードウェア回路、機能又は動作の一部が省略されてもよい。例えば、本発明の監視システムは、過去画像の表示と、現画像の表示との一方のみを行うシステムであってもよい。また、異常の検知だけでなく、監視員の選定がオペレータの判定により行われてもよい。また、オペレータの行う行為がオペレータの行う行為は人工知能の技術を用いて自動化されてもよい。また、本発明の監視システムは、イベントの開催場所の監視に限られず、公共の場所等の任意の場所の監視に適用し得る。
The
上述した実施形態の監視システムが実現する各機能は、1又は複数のハードウェア回路により実現されてもよいし、1又は複数のプログラムを実行することにより実現されてもよいし、これらの組み合わせにより実現されてもよい。監視システムの機能がプログラムを用いて実現される場合、このプログラムは、磁気記録媒体(磁気テープ、磁気ディスク(HDD(Hard Disk Drive)、FD(Flexible Disk))等)、光記録媒体(光ディスク等)、光磁気記録媒体、半導体メモリ等のコンピュータ読み取り可能な記録媒体に記憶した状態で提供されてもよいし、ネットワークを介して配信されてもよい。また、本発明は、監視方法として把握することも可能である。 Each function realized by the monitoring system of the above-described embodiment may be realized by one or more hardware circuits, may be realized by executing one or more programs, or may be realized by a combination thereof. It may be realized. When the function of the monitoring system is realized by using a program, this program is used for magnetic recording media (magnetic tape, magnetic disk (HDD (Hard Disk Drive), FD (Flexible Disk), etc.)), optical recording medium (optical disk, etc.). ), It may be provided in a state of being stored in a computer-readable recording medium such as an optical magnetic recording medium or a semiconductor memory, or may be distributed via a network. The present invention can also be grasped as a monitoring method.
本願の発明は、上述した実施形態に限定されることなく、請求の範囲に記載した発明の範囲内で種々の変形が可能であり、それらも本発明の範囲内に含まれることはいうまでもない。 It goes without saying that the invention of the present application is not limited to the above-described embodiment, and various modifications can be made within the scope of the invention described in the claims, and these are also included in the scope of the present invention. Absent.
1…監視システム、10…サーバ装置、11,21,31…制御部、12…第1通信部、13…第2通信部、14,23,34…記憶部、111…取得部、112…記録部、113…異常検知部、114…選定部、115…第1位置特定部、116…第1生成部、117…第1出力部、118…第2位置特定部、119…第2生成部、120…第2出力部、20…カメラ装置、22…撮像部、24,35…通信部、30…携帯端末、36…測位部、40…オペレーション端末。 1 ... Monitoring system, 10 ... Server device, 11,21,31 ... Control unit, 12 ... First communication unit, 13 ... Second communication unit, 14, 23, 34 ... Storage unit, 111 ... Acquisition unit, 112 ... Recording Unit, 113 ... Abnormality detection unit, 114 ... Selection unit, 115 ... First position identification unit, 116 ... First generation unit, 117 ... First output unit, 118 ... Second position identification unit, 119 ... Second generation unit, 120 ... 2nd output unit, 20 ... camera device, 22 ... imaging unit, 24, 35 ... communication unit, 30 ... mobile terminal, 36 ... positioning unit, 40 ... operation terminal.
Claims (7)
前記カメラ装置により過去に撮像された画像である過去画像を記憶する記憶部と、
前記監視エリアで発生した異常に対処する人員の現在位置を特定する第1位置特定部と、
前記特定した現在位置に基づいて、前記記憶された過去画像上に前記人員の現在位置を明示した第1画像を生成する第1生成部と、
前記第1画像を出力する第1出力部と
を備える監視システム。 An acquisition unit that acquires images captured by a camera device installed in the monitoring area,
A storage unit that stores past images, which are images captured in the past by the camera device,
The first position identification unit that specifies the current position of the personnel who deal with the abnormality that occurred in the monitoring area,
A first generation unit that generates a first image in which the current position of the personnel is clearly shown on the stored past image based on the specified current position.
A monitoring system including a first output unit that outputs the first image.
請求項1に記載の監視システム。 The monitoring system according to claim 1, wherein the first generation unit generates the first image in which the current position of the personnel is clearly indicated on the past image including at least the image at the time of abnormality captured when the abnormality occurs. ..
ことを特徴とする請求項1又は2に記載の監視システム。 Claim 1 or 2 is characterized in that the first position specifying unit acquires the position information of the mobile terminal possessed by the person to be dealt with and identifies the current position of the person on the image based on the position information. The monitoring system described in.
ことを特徴とする請求項1又は2に記載の監視システム。 The first position specifying unit according to claim 1 or 2, wherein the first position specifying unit identifies the person to be dealt with based on image analysis of the acquired image, and specifies the current position of the person on the image. Monitoring system.
前記特定した異常位置に基づいて、前記取得された現在の監視エリアが撮像された現画像上に前記異常位置を明示した第2画像を生成する第2生成部と、
前記第2画像を出力する第2出力部と
を備えることを特徴とする請求項1から4のいずれか1項に記載の監視システム。 A second position specifying unit that identifies the abnormal position in the monitoring area, which is the position where the abnormality has occurred,
Based on the identified abnormal position, a second generation unit that generates a second image in which the abnormal position is clearly shown on the current image in which the acquired current monitoring area is captured, and
The monitoring system according to any one of claims 1 to 4, further comprising a second output unit that outputs the second image.
ことを特徴とする請求項1から請求項5のいずれか1項に記載の監視システム。 Any one of claims 1 to 5, wherein the first generation unit generates the first image when the current degree of congestion in the imaging range of the camera device satisfies a predetermined condition. The monitoring system described in.
前記カメラ装置により過去に撮像された画像である過去画像を記憶するステップと、
前記監視エリアで発生した異常に対処する人員の現在位置を特定するステップと、
前記特定した現在位置に基づいて、前記記憶された過去画像上に前記人員の現在位置を明示した第1画像を生成するステップと、
前記第1画像を出力するステップと
を備える監視方法。 Steps to acquire images captured by camera devices installed in the surveillance area,
A step of storing a past image, which is an image captured in the past by the camera device,
Steps to identify the current location of personnel to deal with anomalies that occur in the monitoring area,
A step of generating a first image in which the current position of the person is clearly shown on the stored past image based on the specified current position, and
A monitoring method including a step of outputting the first image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017032499A JP6807247B2 (en) | 2017-02-23 | 2017-02-23 | Monitoring system and monitoring method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017032499A JP6807247B2 (en) | 2017-02-23 | 2017-02-23 | Monitoring system and monitoring method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018136872A JP2018136872A (en) | 2018-08-30 |
JP6807247B2 true JP6807247B2 (en) | 2021-01-06 |
Family
ID=63365596
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017032499A Active JP6807247B2 (en) | 2017-02-23 | 2017-02-23 | Monitoring system and monitoring method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6807247B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020144738A (en) * | 2019-03-08 | 2020-09-10 | 三菱電機株式会社 | Security device and security method |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1351174A4 (en) * | 2001-01-12 | 2008-10-29 | Secom Co Ltd | Search supporting apparatus, search supporting system, operation instructing terminal, search supporting method, and operation instructing system |
JP3898212B2 (en) * | 2005-05-30 | 2007-03-28 | 財団法人砂防フロンティア整備推進機構 | Position providing photo providing system and program thereof |
JP2007243342A (en) * | 2006-03-06 | 2007-09-20 | Yokogawa Electric Corp | Image-monitoring apparatus and image-monitoring system |
JP2015228615A (en) * | 2014-06-02 | 2015-12-17 | パナソニックIpマネジメント株式会社 | Object tracking method and object tracking system |
CN105933656B (en) * | 2016-05-16 | 2017-11-24 | 国网山东省电力公司菏泽供电公司 | A kind of intelligent locating method on logistics personnel |
-
2017
- 2017-02-23 JP JP2017032499A patent/JP6807247B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018136872A (en) | 2018-08-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108476304B (en) | Discarded object monitoring device, discarded object monitoring system provided with same, and discarded object monitoring method | |
JP5150067B2 (en) | Monitoring system, monitoring apparatus and monitoring method | |
JP2016100696A (en) | Image processing device, image processing method, and image processing system | |
JP2018160219A (en) | Moving route prediction device and method for predicting moving route | |
JP2020194493A (en) | Monitoring system for nursing-care apparatus or hospital and monitoring method | |
JP4958600B2 (en) | Watch system and masking method | |
CN111228706A (en) | GIS-based building interior fire fighting equipment control method and device | |
JP6807247B2 (en) | Monitoring system and monitoring method | |
WO2016194275A1 (en) | Flow line analysis system, camera device, and flow line analysis method | |
WO2019176222A1 (en) | Anomaly sensing system, anomaly sensing method, and anomaly sensing program | |
JP2015233204A (en) | Image recording device and image recording method | |
JP6720010B2 (en) | Information processing apparatus, information processing method, and program | |
JP6941458B2 (en) | Monitoring system | |
JP6979643B2 (en) | Surveillance video display system, surveillance video display device, surveillance information management server, and surveillance video display method | |
JP2020166590A (en) | Monitoring system, monitoring device, monitoring method, and monitoring program | |
JP5824332B2 (en) | Monitoring device | |
WO2020241034A1 (en) | Monitoring system and monitoring method | |
JP2012208850A (en) | Abnormality detection apparatus | |
JP6877176B2 (en) | Monitoring system | |
JP5909709B1 (en) | Flow line analysis system, camera device, and flow line analysis method | |
JP5909712B1 (en) | Flow line analysis system, camera device, and flow line analysis method | |
JP2020074506A (en) | Person behavior monitoring apparatus and person behavior monitoring system | |
JP6921550B2 (en) | Monitoring system and monitoring method | |
JP6854150B2 (en) | Monitoring system and monitoring method | |
JP6903451B2 (en) | Monitoring system and monitoring method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200221 |
|
TRDD | Decision of grant or rejection written | ||
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201118 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201207 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6807247 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |