JP6887352B2 - Monitoring system - Google Patents
Monitoring system Download PDFInfo
- Publication number
- JP6887352B2 JP6887352B2 JP2017174881A JP2017174881A JP6887352B2 JP 6887352 B2 JP6887352 B2 JP 6887352B2 JP 2017174881 A JP2017174881 A JP 2017174881A JP 2017174881 A JP2017174881 A JP 2017174881A JP 6887352 B2 JP6887352 B2 JP 6887352B2
- Authority
- JP
- Japan
- Prior art keywords
- shooting
- photographing
- preset
- monitoring target
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims description 139
- 238000001514 detection method Methods 0.000 claims description 152
- 238000003384 imaging method Methods 0.000 claims description 38
- 238000004364 calculation method Methods 0.000 claims description 26
- 238000012545 processing Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 17
- 238000006243 chemical reaction Methods 0.000 description 15
- 230000005540 biological transmission Effects 0.000 description 13
- 238000012790 confirmation Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000000034 method Methods 0.000 description 7
- 238000009434 installation Methods 0.000 description 5
- 238000005315 distribution function Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000004397 blinking Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Description
この発明は、監視対象領域に存在する対象物を撮像する撮影装置の制御を行う監視システムに関するものである。 The present invention relates to a monitoring system for controlling the imaging apparatus for imaging an object existing in the monitored area.
従来、撮影装置の撮影方向を自動的に制御する技術が存在する。例えば、特許文献1には、センサカメラで撮影された広角画像内から撮影対象の被写体を認識すると共に被写体の現在位置を逐次計測し、撮影用カメラのあらかじめ定められた視点を原点とした三次元空間内での当該被写体の現在位置等を示す情報に基づき、被写体の動きに応じて撮影用カメラを自動的に駆動制御する技術が開示されている。 Conventionally, there is a technique for automatically controlling the shooting direction of a shooting device. For example, Patent Document 1 describes a three-dimensional image in which a subject to be photographed is recognized from a wide-angle image captured by a sensor camera, the current position of the subject is sequentially measured, and a predetermined viewpoint of the camera for photographing is used as the origin. A technique for automatically driving and controlling a shooting camera according to the movement of a subject is disclosed based on information indicating the current position of the subject in space.
特許文献1に記載された技術では、センサカメラが被写体を認識できれば、当該被写体の現在位置が現在の撮影用カメラの向きからみて撮影範囲外にあったとしても、当該被写体を撮影するように撮影用カメラを駆動制御することができる。
しかし、被写体がセンサカメラの認識範囲外に存在する場合は、センサカメラにおいて当該被写体が認識できず、その結果、撮影用カメラの向きを変えれば撮影可能な範囲内に当該被写体が存在する場合であっても、当該撮影用カメラでは当該被写体を撮影することができないという課題があった。
In the technique described in Patent Document 1, if the sensor camera can recognize the subject, even if the current position of the subject is out of the shooting range when viewed from the direction of the current shooting camera, the subject is photographed so as to be photographed. The camera can be driven and controlled.
However, if the subject is outside the recognition range of the sensor camera, the sensor camera cannot recognize the subject, and as a result, the subject is within the range that can be photographed by changing the direction of the shooting camera. Even so, there is a problem that the subject cannot be photographed by the photographing camera.
この発明は、上記のような課題を解決するためになされたもので、現在の撮影装置の撮影範囲には存在しない監視対象を撮影するように撮影装置を制御することができる監視システムを提供することを目的とする。 The present invention has been made to solve the above-mentioned problems, and provides a monitoring system capable of controlling a photographing device so as to photograph a monitoring target that does not exist in the photographing range of the current photographing device. The purpose is.
この発明に係る監視システムは、監視対象領域を撮影する撮影装置と、監視対象領域内の特定位置から発信された監視対象が存在する方向を指示する信号を検知する検知装置と、検知装置が検知した監視対象が存在する方向を指示する信号に基づき、撮影装置の撮影方向を制御する撮影方向制御装置とを備え、検知装置は、監視対象が存在する方向を指示する信号が空間内のいずれの方位から来ても当該監視対象が存在する方向を指示する信号を検知可能な複数の検知領域を有することを特徴とする。 The monitoring system according to the present invention is detected by a photographing device that captures a monitored area, a detection device that detects a signal that indicates a direction in which a monitored object is present, and a detection device that is transmitted from a specific position in the monitored area. any and monitored based on the signal indicating the direction in which there was, eh Bei a photographing direction control device for controlling the photographing direction of the photographing device, the sensing device, a signal for indicating a direction in which the monitoring target exists in space It is characterized by having a plurality of detection regions capable of detecting a signal indicating the direction in which the monitoring target exists even if it comes from the direction of .
この発明によれば、現在の撮影装置の撮影範囲には存在しない監視対象を撮影するように撮影装置を制御することができる。 According to the present invention, the photographing device can be controlled so as to photograph a monitoring target that does not exist in the photographing range of the current photographing device.
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態1.
図1は、実施の形態1に係る監視システムの全体構成の一例を示す図である。
この実施の形態1の監視システムにおいては、監視対象領域内に存在し、監視対象領域を直接目視で監視する現場監督者と、監視対象領域から離れた場所から、監視対象領域を撮影した映像等を確認することで当該監視対象領域を監視する遠隔監視者とによって、監視作業が行われるものとする。
Hereinafter, in order to explain the present invention in more detail, a mode for carrying out the present invention will be described with reference to the accompanying drawings.
Embodiment 1.
FIG. 1 is a diagram showing an example of the overall configuration of the monitoring system according to the first embodiment.
In the monitoring system of the first embodiment, a site supervisor who exists in the monitored area and directly and visually monitors the monitored area, and an image obtained by shooting the monitored area from a place away from the monitored area, etc. By confirming, the monitoring work shall be performed by the remote monitor who monitors the monitored area.
監視システムは、撮影装置101と、検知装置102と、指示装置103と、表示装置104と、記録装置105と、制御装置106とを備える。撮影装置101は、撮影方向制御装置107を搭載する。
撮影装置101は、監視対象領域を、画像または映像として撮影する。撮影装置101は、例えば、監視カメラ、スマートフォン、または、デジタルカメラ等である。
撮影装置101は、撮影した画像または映像を、表示装置104、および、記録装置105に出力する。制御装置106は、撮影装置101の制御を行う。例えば、撮影装置101の向きを制御する。制御装置106は、表示装置104に接続してもよい。制御装置106の具体例としては、コントローラ、リモコン、マウス等がある。
また、撮影装置101は、撮影方向制御装置107の制御に基づき、撮影方向を変更して、監視対象領域を撮影する。
The monitoring system includes a
The photographing
The photographing
Further, the photographing
撮影方向制御装置107は、検知装置102から送信された情報に基づき、撮影装置101の撮影方向を制御する。検知装置102から送信される情報の詳細、および、撮影装置101の撮影方向を制御する具体的な動作については後述する。
なお、この実施の形態1では、図1に示すように、撮影装置101が撮影方向制御装置107を搭載するものとするが、これに限らず、撮影方向制御装置107は、撮影装置101の外部に設けられるものとし、ネットワーク等を介して、撮影装置101の外部から撮影装置101の撮影方向を制御するようにしてもよい。
The shooting
In the first embodiment, as shown in FIG. 1, the photographing
指示装置103は、監視対象領域内の特定位置から監視対象が存在する方向を指示する信号を発信するためのものである。指示装置103は、例えば、レーザポインタ等であり、現場監督者が当該指示装置103を携帯している。監視対象領域内の特定位置とは、監視対象領域内の実際の何れかの場所であり、検知装置102を一端として監視対象の位置を通る半直線上の場所、または、当該半直線近傍の場所である。特定位置は、監視対象が存在する位置に応じて、現場監督者が選択するものであり、固定的なものではない。
具体的には、指示装置103がレーザポインタである場合、例えば、現場監督者がレーザポインタからの光線を、監視対象領域内に存在する監視対象に対して投光することで、監視対象によって反射された光線を監視対象が存在する方向を指示する信号として発信する。この場合の特定位置は、監視対象が存在する位置である。
また、同様に指示装置103がレーザポインタである場合、例えば、監視対象領域内にいる現場監督者がレーザポインタからの光線を検知装置102に対して直接投光することによって、当該光線を監視対象が存在する方向を指示する信号として発信する。この場合の特定位置は、指示装置103が存在する位置である。
The
Specifically, when the
Similarly, when the
検知装置102は、指示装置103によって発信された信号に基づき、監視対象が存在する方向を検知する。検知装置102は、例えば、光センサ等である。
具体的には、検知装置102は、例えば、それぞれがセンサ素子からなる1つ以上の検知領域を有している。
検知装置102は、例えば、指示装置103がレーザポインタである場合であって、当該レーザポインタからの光線が監視対象に対して投光された場合、当該監視対象から反射された反射光を当該検知領域で検知することで、監視対象が存在する方向を検知する。また、例えば、レーザポインタからの光線が、検知装置102に対して直接投光された場合、検知装置102は、レーザポインタから投光された光線を検知領域で検知することで、当該レーザポインタが存在する方向を、監視対象が存在する方向として検知する。
検知装置102は、監視対象が存在する方向を検知した検知領域に関する情報を、検知領域情報として撮影方向制御装置107に送信する。
The
Specifically, the
For example, when the indicating
The
表示装置104は、撮影装置101が出力した画像または映像を表示する。表示装置104は、例えば、ディスプレイ、スマートフォン、テレビ、または、ビデオモニタ等である。当該表示装置104は、例えば、監視室等の、監視対象領域とは離れた場所において使用されることを想定している。遠隔監視者は、当該表示装置104に表示される画像または映像を確認することで監視対象領域を監視する。
The
記録装置105は、撮影装置101が出力した画像または映像を記録する。記録装置105は、例えば、レコーダ、または、スマートフォン等である。
The
制御装置106は、撮影装置101を制御する。具体的には、例えば、制御装置106は、撮影装置101のズーム、フォーカス、パン、または、チルト等の動作を制御する。制御装置106は、例えば、制御用のソフトウェアがインストール済みのPC(Personal Computer)、または、コントローラ等である。
The
撮影装置101、表示装置104、記録装置105、および、制御装置106は、相互に通信可能に接続される。
また、撮影装置101と検知装置102とは通信可能に接続される。
また、検知装置102と指示装置103とは通信可能に接続される。
The photographing
Further, the photographing
Further, the
図1に示したような監視システムにおける、撮影装置101の撮影方向を制御する動作について説明する。
図2は、実施の形態1において、撮影装置101の撮影方向を制御する動作の一例を説明するためのフローチャートである。
なお、図2では、現場監督者が監視対象領域内に監視対象となる人物を発見した場合に、当該監視対象を含む範囲を撮影装置101の撮影範囲とするよう、当該撮影装置101の撮影方向を制御する動作を説明する。
また、以下の説明では、一例として、検知装置102は球状のセンサ、指示装置103はレーザポインタとする。
The operation of controlling the photographing direction of the photographing
FIG. 2 is a flowchart for explaining an example of an operation of controlling the photographing direction of the photographing
In FIG. 2, when the on-site supervisor finds a person to be monitored in the monitoring target area, the shooting direction of the
Further, in the following description, as an example, the
指示装置103は、監視対象となる人物が存在する方向を指示する(ステップST201)。具体的には、現場監督者が、携帯している指示装置103を用いて、監視対象となる人物に光線を投光する。
The
検知装置102は、ステップST201において指示装置103から監視対象となる人物に投光されて当該人物によって反射された光線を、監視対象が存在する方向を指示する信号として検知する。検知装置102は、当該信号を検知した検知領域に関する情報を、検知領域情報として、撮影装置101に搭載された撮影方向制御装置107に送信する(ステップST202)。
In step ST201, the
撮影方向制御装置107は、ステップST202において検知装置102から送信された情報に基づき、撮影装置101の撮影方向を制御する(ステップST203)。そして、撮影装置101は、撮影方向制御装置107の制御に従った撮影方向で監視対象領域を撮影する。
The shooting
以上のように動作することで、例え監視対象が撮影装置101の現在の撮影範囲外に存在していたとしても、指示装置103から発信された監視対象が存在する方向を指示する信号を検知することで、当該監視対象が撮影装置101の撮影範囲内に含まれるように撮影装置101の撮影方向を制御することができる。
By operating as described above, even if the monitoring target exists outside the current shooting range of the photographing
以下、監視システムを構成する検知装置102、および、撮影方向制御装置107を搭載する撮影装置101の、構成および動作の詳細について、それぞれ説明する。
Hereinafter, details of the configuration and operation of the
まず、検知装置102について説明する。
図3は、実施の形態1の検知装置102の全体構成の一例を説明するための図である。
図3Aでは、検知装置102が、指示装置103から投光された光線を直接に検知領域302で検知することで、当該指示装置103が存在する方向を監視対象305が存在する方向として検知する場合を示しており、図3Bでは、検知装置102が、指示装置103から監視対象305に対して投光されて当該監視対象305によって反射された光線を検知することで、監視対象305が存在する方向を検知する場合を示している。
First, the
FIG. 3 is a diagram for explaining an example of the overall configuration of the
In FIG. 3A, when the
図3において、座標軸301は、x−y−z座標軸であり、例えば、原点が検知装置102の中心である。また、z軸方向は、鉛直方向とする。
検知装置102は、複数の検知領域302を有する。図3では、複数の検知領域302のうち1つの検知領域302のみを示している。また、図3では、一例として、各検知領域は、球状の検知装置102の表面上に設けられるものとしている。
検知領域302は、それぞれ、例えば、指示装置103から発信された信号を検知するための単体のセンサ素子で構成されている。
検知装置102には、監視対象領域内で投光される光線がいずれの方位から来ても検知できるように、複数の検知領域が設けられていればよい。複数の検知領域の配置および複数の検知領域の具体的な数については、後述する。
In FIG. 3, the coordinate
The
Each of the
The
監視対象305は、その存在する方向が検知装置102の検知対象となるものである。
図3Aに示すように、指示装置103から直接に検知装置102に投光された光線を検知装置102が検出することで、検知装置102は、監視対象305の存在する方向を検出可能である。図3Aには監視対象305は図示されていないが、この場合の監視対象305は、検知装置102を一端として指示装置103の位置を通る半直線上、または、当該半直線の近傍に存在する。
また、図3Bに示すように、指示装置103から監視対象305に投光されて当該監視対象305から反射された光線を検知装置102が検知することで、検知装置102は、監視対象305の存在する方向を検出可能となる。
検知装置102は、監視対象305の存在する方向を指示する信号として、指示装置103から直接に検知装置102に投光された光線、または、指示装置103から監視対象305に投光されて当該監視対象305から反射された光線を検知して、撮影方向制御装置107に対し、監視対象305の存在する方向を撮影するよう、撮影装置101を制御する。
The direction in which the
As shown in FIG. 3A, the
Further, as shown in FIG. 3B, when the
The
ここで、撮影装置101は、例えば、120度の広角レンズを用いて広範な視野を撮影できる。よって、撮影装置101の視野内に監視対象305を映り込ませることさえできれば、その後は撮影装置101が元々備えている、既存の、例えば、被写体の顔検出を用いた認識機能等を活用して、所望の監視業務を行うことが可能である。
したがって、検知装置102の検知領域302は、例えば、撮影装置101の中心からみた、水平方向の360度をおよそ均等に3分割した3方向を区別できる配置とすることも可能である。また、例えば、鉛直方向を加味するならば、撮影装置101の中心からみた、鉛直方向の180度をおよそ均等に2分割した2方向を区別できる配置とする。具体的には、検知領域302は、撮影装置101の中心からみて、例えば、水平方向360度を均等に3分割し、鉛直方向180度を均等に2分割した領域とする場合、図4のように、2つの三角錐を組み合わせたものとなる。この場合の検知領域302の数は6個となる。
検知装置102の検知領域302の配置および検知領域302の数は、上記のように2つの三角錐を組み合わせたようなものに限らず、撮影装置101の視野、すなわち、広角度合いを考慮したうえで、監視対象305が存在する方向を指示する光線の向きを区別可能に、適宜配置すればよい。例えば、水平4方向および鉛直3方向を区別可能とし、検知領域302を12個とする形状等、撮影装置101を向かせたい向きに面して検知領域302を配置すればいかなる形状でもよい。
Here, the photographing
Therefore, the
The arrangement of the
検知装置102が、図3で示したような球状のセンサで構成される場合、x−y−z座標軸301の各軸の交点である、球の中心を視点とし、検知装置102の球表面越しに現実空間を見ると仮定すると、現実空間と検知装置102の球表面とを対応付けてマッピングすることができる。
このように、現実空間と対応付けてマッピングが可能な検知装置102の球表面を、撮影装置101による撮影範囲の死角が生じないように、かつ、制御座標の分解能が十分となるように分割した複数のセンサ素子で構成する。例えば、ユニバーサル横メルカトル図法を用いて、球表面を60分割してできた各領域を各検知領域302とし、各検知領域302に単体の光センサ素子を割当てる等して、検知装置102を構成する。
When the
In this way, the spherical surface of the
x−y−z座標軸301は、空間図形の描画を補助する。
図3Aに示された検知領域302は、検知装置102が有する複数の検知領域302のうち、特に、指示装置103から直接に検知装置102に投光された光線を検知した検知領域302を示している。
図3Bに示された検知領域302は、検知装置102が有する複数の検知領域302のうち、特に、指示装置103から監視対象305に投光されて当該監視対象305から反射された光線を検知した検知領域を示している。
検知装置102は、例えば、図3Aまたは図3Bに示された検知領域302のような、監視対象305が存在する方向を指示する光線を検知した検知領域302に関する情報を、検知領域情報として撮影方向制御装置107に送信する。
The xyz coordinate
The
Of the plurality of
The
撮影方向制御装置107では、検知装置102から送信された検知領域情報を受信して、撮影装置101の撮影方向を決定する。撮影方向制御装置107は、例えば、撮影装置101のレンズが120度の広角レンズである場合、360度の撮影装置101の視野を3分割できるので、監視対象305の精確な位置情報を特定しなくても、撮影装置101の視野内に被写体を捉えられる撮影方向を決定することができる。
The shooting
なお、検知装置102で検知する光線には、外乱光等も含まれ得るため、検知装置102から送信される検知領域情報には、外乱光等を検知したことによる誤った検知領域情報もあり得る。そこで、例えば、監視対象305が存在する方向を指示する光線を特定のパターン(点滅)とすることで、検知装置102は、監視対象305が存在する方向を指示する光線と外乱光とを識別する精度が格段に向上し、検知精度が向上する。
検知装置102は、予め決められたパターンの光線を受信した場合に撮影方向制御装置107へ検知領域情報を通知し、それ以外の光線を受信した場合は、情報は破棄する等する。このように、検知装置102において、受信した光線の妥当性を判断し、誤検知を軽減することができる。撮影方向制御装置107の詳細な構成および動作については後述する。
Since the light rays detected by the
The
なお、上述した現実空間と検知装置102の表面とのマッピングは、検知装置102が球状以外のセンサで構成された場合においても、所定の視点を定めることで行うことが可能である。
The mapping between the real space and the surface of the
図5は、この実施の形態1における検知装置102の動作の一例を説明するフローチャートである。
すなわち、図5は、図2のステップST202の詳細な動作の一例を説明するフローチャートである。
検知装置102は、検知領域302において、指示装置103から監視対象305が存在する方向を指示する信号として発せられた光線を検知する(ステップST501)。
FIG. 5 is a flowchart illustrating an example of the operation of the
That is, FIG. 5 is a flowchart illustrating an example of the detailed operation of step ST202 of FIG.
The
検知装置102は、ステップST501において光線を検知した検知領域302に関する情報を検知領域情報として、撮影方向制御装置107に送信する(ステップST502)。
The
次に撮影方向制御装置107を搭載した撮影装置101について説明する。
図6は、実施の形態1において、撮影方向制御装置107を搭載した撮影装置101の全体構成の一例を説明するための図である。
図6に示すように、撮影装置101は、撮影方向制御装置107を搭載している。また、図6に示すように、撮影装置101は、撮影部1011、焦点整合処理部1012、および、旋回処理部1013を備える。
Next, a photographing
FIG. 6 is a diagram for explaining an example of the overall configuration of the photographing
As shown in FIG. 6, the photographing
撮影部1011は、監視対象領域の画像または映像を撮影する。撮影部1011は、撮影した、監視対象領域の画像または映像を、表示装置104、記録装置105、および、制御装置106に送信する(図1参照)。
焦点整合処理部1012は、撮影方向制御装置107からの制御に基づき、撮影部1011を焦点整合させる。
旋回処理部1013は、撮影方向制御装置107からの制御に基づき、撮影部1011を旋回させる。
The photographing
The focus
The
撮影方向制御装置107は、検知装置102と通信可能に接続され、当該撮影方向制御装置107が有する受信部(図示省略)によって、検知装置102から検知領域情報を受信する。
撮影方向制御装置107は、受信部が検知装置102から受信した検知領域情報に基づき、検知装置102を基準とした場合の監視対象305が存在する方向へ撮影装置101の方向を制御する。
撮影方向制御装置107は、撮影制御部1071、および、変換部1072を備える。
撮影制御部1071は、制御装置106、または、変換部1072から取得したパラメータに基づき、焦点整合処理部1012、および、旋回処理部1013の動作を制御する。制御装置106は、例えば、上、下、左、または、右等を示す情報を、撮影制御部1071が求めるI/F(interface)に合うように変換し、変換後のパラメータを制御情報として撮影制御部1071に出力する。なお、当該制御装置106からの情報に基づく制御は、例えば、遠隔監視者がコントローラを操作して行う手動制御を想定している。
変換部1072は、受信部から、当該受信部が検知装置102から検知領域情報を取得し、当該検知領域情報を、撮影制御部1071が求めるI/Fに合うように変換し、変換後のパラメータを制御情報として撮影制御部1071に出力する。
撮影制御部1071が、制御装置106、または、変換部1072から取得したパラメータに基づき、焦点整合処理部1012、または、旋回処理部1013の動作を制御することで、撮影部1011の旋回処理等の動作が制御される。
The shooting
The shooting
The shooting
The
The
The photographing
図7は、この実施の形態1の撮影方向制御装置107が撮影装置101を制御する動作の一例を説明するフローチャートである。
撮影方向制御装置107の受信部が、検知装置102から送信される検知領域情報を受信する(ステップST701)。受信部は、受信した検知領域情報を変換部1072に出力する。
FIG. 7 is a flowchart illustrating an example of an operation in which the photographing
The receiving unit of the shooting
変換部1072は、ステップST701において受信部から出力された検知領域情報を、撮影制御部1071が求めるI/Fに合うように変換し、変換後のパラメータを制御情報として撮影制御部に出力する(ステップST702)。具体的には、変換部1072は、図8に示すような変換表に基づき、検知領域情報の変換を行う。例えば、変換部1072は、受信部を介して、検知装置102から受信した検知領域Aを示す検知領域情報を取得した場合、当該検知領域情報を、パン角度が基準より0度、チルト角度が基準より45度の制御情報に変換し、撮影制御部1071へ出力する。検知領域A等は、検知装置102または現実空間に座標軸を設け、座標で指定してもよい。なお、図8に示すような変換表は、予め作成され、撮影方向制御装置107が参照可能な場所に保存されている。
The
撮影制御部1071は、ステップST702において変換部1072から出力された制御情報に基づき、焦点整合処理部1012、または、旋回処理部1013の動作を制御する。これにより、撮影部1011の旋回処理等の動作が制御される(ステップST703)。
撮影部1011は、撮影した画像または映像を、表示装置104、および、記録装置105に送信する。
The photographing
The photographing
以下、この発明の実施の形態1の監視システムの適用例を、図9〜11を用いて説明する。
以下では、例えば、この発明の実施の形態1の監視システムを、駅のホームおよび線路を監視する監視システムに適用した例を示す。この場合、駅のホームおよび線路が監視対象領域となる。また、現場監督者は、駅のホームにいる駅員1001であり、遠隔監視者は、管理室等にいて、当該管理室等に設置された表示装置に表示された画像または映像を確認することで、駅のホームを監視する駅員である。
当該監視システムにおいては、撮影装置101である監視カメラ801が駅のホーム902および線路901を撮影可能な位置に旋回可能に設置され、現場監督者である駅員1001が指示装置103であるレーザポインタ1002を携帯するものとする。
また、監視カメラ801の近傍には、検知装置102である球状のセンサが設置されるものとする。なお、以下の説明で用いる図9〜図11においては、検知装置102の記載は省略している。
Hereinafter, application examples of the monitoring system according to the first embodiment of the present invention will be described with reference to FIGS. 9 to 11.
In the following, for example, an example in which the monitoring system of the first embodiment of the present invention is applied to a monitoring system for monitoring a platform of a station and a railroad track will be shown. In this case, the platform of the station and the railroad track are the monitoring target areas. In addition, the on-site supervisor is a
In the monitoring system, the
Further, it is assumed that a spherical sensor, which is a
図9は、実施の形態1において、監視カメラ801の撮影範囲802と撮影可能範囲803の一例を示す模式図である。図9において上に示す図が、撮影範囲802を示す図であり、図9において下に示す図が、撮影可能範囲803を示す図である。
ここでは、撮影範囲802とは、現在の設置位置における監視カメラ801の撮影範囲をいう。また、撮影可能範囲803とは、現在の設置位置では監視カメラ801の撮影範囲外ではあるが、監視カメラ801を旋回させる等の制御を行うことで撮影可能となる撮影範囲をいう。
監視カメラ801は、ズーム、フォーカス、パン、および、チルトのカメラ制御が可能な撮影装置101である。
FIG. 9 is a schematic view showing an example of the
Here, the
The
図10は、実施の形態1の監視システムを駅のホーム902および線路901を監視する監視システムに適用した例における、監視カメラ801の設置環境の一例を示す図である。
図10に示すように、列車の線路901、および、駅のホーム902の状況を監視できる位置に、監視カメラ801が設置される。
FIG. 10 is a diagram showing an example of the installation environment of the
As shown in FIG. 10, the
図11は、図10に示すような監視システムにおいて、駅員1001が監視対象者1003を発見した場合に監視カメラ801の撮影方向が制御される動作の一例を説明するための図である。
監視カメラ801は、時刻t1において、ある向き(図11のaで示す)を撮影し、時刻t2において時刻t1とは異なる向き(図11のbで示す)を撮影する。
時刻t1において、監視カメラ801がaの向きを向いており、ホーム902にいる駅員1001が監視対象となる不審者を発見したとする。当該不審者を監視対象者1003とする。
駅員1001は、当該監視対象者1003に対し、携帯しているレーザポインタ1002で投光する(投光された光線を図11のcで示す)。
FIG. 11 is a diagram for explaining an example of an operation in which the shooting direction of the
The
It is assumed that at time t1, the
The
そうすると、図11のaの向きを撮影していた監視カメラ801は、図11のaの向きを撮影する撮影範囲から、図11のbの向きを撮影する撮影範囲となる位置まで旋回する。
具体的には、検知装置102が有する検知領域が、監視対象者1003によって反射されたレーザポインタ1002からの光線を検知し、検知装置102は、検知領域情報を撮影方向制御装置107に送信する。
撮影方向制御装置107では、検知領域情報に基づき、監視対象者1003が存在する方向を撮影方向とするよう、監視カメラ801の焦点整合処理部1012、または、旋回処理部1013を制御する。その結果、監視カメラ801の撮影方向が制御され、監視カメラ801の撮影範囲に監視対象者1003が含まれるようになる。
Then, the
Specifically, the detection area included in the
The shooting
なお、レーザポインタ1002が投光する光線は、可視光であっても不可視光であってもよく、常時点灯であっても点滅であってもよい。つまり、光線の見た目上の色は問わず、投光パターンも任意でよい。また、レーザポインタ1002は、1つ以上の光線を同時に投光するものであってもよいし、非同時に発光するものであってもよい。
The light beam emitted by the
このように、実施の形態1の監視システムにおいては、例えば、現場監督者等の当該監視システムのユーザは、指示装置103を用いて、検知装置102に直接投光する、または、監視対象に投光するという簡易な手段によって、撮影装置101を監視対象が存在する方向に向けることができる。これにより、例えば、現場監督者が、監視対象が存在する方向を把握したタイミングで、撮影装置101の撮影範囲を速やかに当該監視対象に向けることが可能になるとともに、撮影装置101から遠隔地にある表示装置に対して、速やかに監視対象の映りこんだ画像または映像を送信することが可能となる。
As described above, in the monitoring system of the first embodiment, for example, a user of the monitoring system, such as a site supervisor, uses the
上述した従来技術では、広角画像を撮影するセンサカメラの撮影範囲外に監視対象が存在する場合、撮影用カメラで当該監視対象を撮影するためには、例えば、当該センサカメラ付近にいる現場監督者が当該監視対象を認識し、監視対象領域から離れた場所にいる遠隔監視者に対して、監視対象を認識した旨を知らせる必要がある。しかし、この場合、現場監督者が当該監視対象に関する情報を伝える際に、認識の齟齬、あるいは、人的ミス等が生じる可能性がある。
また、現場監督者は、センサカメラの設置場所付近に表示装置が設置されていなければ、監視対象が当該センサカメラの撮影範囲内に含まれているかどうかを確認することもできない。
このように、従来技術では、撮影装置が撮影可能な範囲内に存在するものの現在の撮影装置の撮影範囲には含まれていない監視対象が認識された場合に、当該監視対象を含む範囲を撮影装置の撮影範囲とするよう撮影装置の制御ができない場合があり、その場合、撮影装置を制御するのに労力を要し、また、撮影装置の撮影範囲に監視対象が含まれるように撮影装置の向きを正確に調整することが困難となる。
また、従来技術では、センサカメラの撮影範囲内に監視対象が存在していても、当該監視対象が予め定められた条件に合致していなければ、監視対象を認識することができず、撮影用カメラを監視対象に向けることができない。
In the above-mentioned conventional technique, when a monitoring target exists outside the shooting range of the sensor camera that shoots a wide-angle image, in order to shoot the monitoring target with the shooting camera, for example, a site supervisor near the sensor camera Recognizes the monitoring target and notifies the remote monitor who is located away from the monitoring target area that the monitoring target has been recognized. However, in this case, when the on-site supervisor conveys information on the monitoring target, there is a possibility that a discrepancy in recognition or a human error may occur.
In addition, the on-site supervisor cannot confirm whether or not the monitoring target is included in the shooting range of the sensor camera unless the display device is installed near the installation location of the sensor camera.
As described above, in the prior art, when a monitoring target that is within the shooting range of the shooting device but is not included in the shooting range of the current shooting device is recognized, the range including the monitoring target is shot. In some cases, it may not be possible to control the imaging device so that it is within the imaging range of the device. In that case, it takes a lot of effort to control the imaging device, and the imaging device is set so that the imaging range of the imaging device includes the monitoring target. It becomes difficult to adjust the orientation accurately.
Further, in the prior art, even if the monitoring target exists within the shooting range of the sensor camera, if the monitoring target does not meet the predetermined conditions, the monitoring target cannot be recognized and is used for shooting. The camera cannot be aimed at the surveillance target.
これに対し、本願の実施の形態1の監視システムでは、上述のとおり、現場監督者が携帯する指示装置103を用いて、検知装置102に直接投光する、または、監視対象に対して投光することで、監視対象の存在する方向を指示し、撮影装置101の撮影方向を制御することができる。
その際、現場監督者が遠隔監視者に対して監視対象が存在する方向を説明する等の動作が必要となることがないため、現場監督者と遠隔監視者の間で認識の齟齬、あるいは、人的ミス等が生じる可能性も抑制できる。
また、現場監督者が、指示装置103を用いて監視対象が存在する方向を指示することになるため、人の判断によって監視対象の判断、および、指示がなされ、より柔軟に、あるいは、より正確に、撮影装置101によって監視すべき監視対象を捉えることができる。
On the other hand, in the monitoring system of the first embodiment of the present application, as described above, the
At that time, since the on-site supervisor does not need to explain the direction in which the monitoring target exists to the remote observer, there is a discrepancy in recognition between the on-site supervisor and the remote observer, or The possibility of human error can be suppressed.
In addition, since the on-site supervisor uses the
図12A、図12Bは、この発明の実施の形態1に係る撮影方向制御装置107のハードウェア構成の一例を示す図である。
この発明の実施の形態1において、撮影制御部1071は、処理回路111により実現される。すなわち、撮影方向制御装置107は、検知装置102から受信した検知領域情報に基づき、撮影装置101の撮影方向の制御を行うための処理回路111を備える。
処理回路111は、図12Aに示すように専用のハードウェアであっても、図12Bに示すようにメモリ115に格納されるプログラムを実行するCPU(Central Processing Unit)116であってもよい。
12A and 12B are diagrams showing an example of the hardware configuration of the photographing
In the first embodiment of the present invention, the
The
処理回路111が専用のハードウェアである場合、処理回路111は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field−Programmable Gate Array)、またはこれらを組み合わせたものが該当する。
When the
処理回路111がCPU116の場合、撮影制御部1071の機能は、ソフトウェア、ファームウェア、または、ソフトウェアとファームウェアとの組み合わせにより実現される。すなわち、撮影制御部1071は、HDD(Hard Disk Drive)112、メモリ115等に記憶されたプログラムを実行するCPU116、システムLSI(Large−Scale Integration)等の処理回路により実現される。また、処理回路111内にプログラムを記憶してもよい。また、HDD112、メモリ115等に記憶されたプログラムは、撮影制御部1071の手順や方法をコンピュータに実行させるものであるとも言える。ここで、メモリ115とは、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable Read Only Memory)、EEPROM(Electrically Erasable Programmable Read−Only Memory)、HDD112等の、不揮発性または揮発性の半導体メモリや、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、DVD(Digital Versatile Disc)等が該当する。
When the
また、撮影方向制御装置107は、撮影装置101、あるいは、検知装置102等の装置との通信を行う入力インタフェース装置113、出力インタフェース装置114を有する。受信部は、例えば、入力インタフェース装置113によって構成される。
Further, the photographing
以上のように、この実施の形態1によれば、監視システムは、監視対象領域を撮影する撮影装置101と、監視対象領域内の特定位置から発信された監視対象が存在する方向を指示する信号を検知する検知装置102と、検知装置102が検知した監視対象が存在する方向を指示する信号に基づき、撮影装置101の撮影方向を制御する撮影方向制御装置107とを備えるように構成したので、現在の撮影装置の撮影範囲には存在しない監視対象を撮影するように撮影装置を制御することができる。
As described above, according to the first embodiment, the monitoring system is a signal indicating the direction in which the photographing
実施の形態2.
実施の形態1では、検知装置102が指示装置103からの指示を検知し、当該検知装置102が検知した検知領域情報に基づいて、撮影方向制御装置107が撮影装置101の撮影方向を制御するようにしていた。
この実施の形態2では、さらに、撮影方向制御装置107が制御した撮影装置101の撮影方向の履歴から、頻度の高い撮影方向を学習する実施の形態について説明する。
Embodiment 2.
In the first embodiment, the
In the second embodiment, an embodiment in which a frequent shooting direction is learned from the history of the shooting direction of the
図13は、実施の形態2に係る監視システムの全体構成の一例を示す図である。
図13において、実施の形態1において図1を用いて説明した構成と同様の構成については、同じ符号を付して重複した説明を省略する。なお、この実施の形態2においても、一例として、図13に示すように、撮影装置101aが撮影方向制御装置107を搭載するものとするが、これに限らず、撮影方向制御装置107は撮影装置101aの外部に備えられるものとしてもよい。
撮影方向制御装置107の構成については、実施の形態1において図6を用いて説明した構成と同様であるため、同じ符号を付して重複した説明を省略する。
FIG. 13 is a diagram showing an example of the overall configuration of the monitoring system according to the second embodiment.
In FIG. 13, the same reference numerals are given to the same configurations as those described with reference to FIG. 1 in the first embodiment, and duplicate description will be omitted. In the second embodiment as well, as an example, as shown in FIG. 13, the photographing
Since the configuration of the photographing
図13に示す監視システムは、図1に示す監視システムとは、撮影装置101a、表示装置104aおよび記録装置105aの詳細な構成が異なる。実施の形態1の監視システムにおける撮影装置101は、メタデータ(例えば、パン角度、チルト角度、ズーム値等)配信機能を備えていなかったのに対し、実施の形態2の監視システムにおける撮影装置101aは、メタデータ配信機能を備える点が異なる。また、実施の形態1の監視システムにおける表示装置104は、予め指定した撮影装置の撮影方向(パン角度、チルト角度、ズーム値等)をプリセット位置とし、プリセット位置に撮影装置を制御するプリセット機能を有する表示制御装置108を備えていなかったのに対し、実施の形態2の監視システムにおける表示装置104aは、プリセット機能を有する表示制御装置108を備える点が異なる。また、実施の形態1の監視システムにおける記録装置105は、頻度の高い撮影方向を学習する学習機能を備えていなかったのに対し、実施の形態2の監視システムにおける記録装置105aは、学習機能を備える点が異なる。
The monitoring system shown in FIG. 13 differs from the monitoring system shown in FIG. 1 in the detailed configurations of the photographing
撮影装置101aは、メタデータ配信機能を備える。メタデータは映像データと同様にストリームとして配信してもよいし、映像ストリームにメタデータを埋め込んでもよい。具体的には、メタストリームを配信する、メタデータ値を画像データとして映像データに重畳する、JPEGのヘッダ領域であるAPPnに格納する、H.264|MPEG−4 AVCのヘッダ領域であるSEIに格納する等である。
The photographing
表示装置104aは、表示制御装置108を搭載する。
なお、実施の形態2では、一例として、図13に示すように、表示装置104aが表示制御装置108を搭載するものとするが、これに限らず、表示制御装置108は表示装置104aの外部に備えられるものとしてもよい。
表示制御装置108は、外部装置(例えば、記録装置105a)からプリセット候補を提案できるように、外部I/F(interface)を公開している。また、プリセット位置は表示制御装置108で保存してもよいし、記録装置105aで記録してもよい。
表示制御装置108は、図13に示すように、制御部1081と受付部1082とを備える。
制御部1081は、受付部1082からの各種指示を実行する。
受付部1082は、外部I/F(記録装置105a、遠隔監視者等)からの各種指示を受け付け、必要に応じて制御部1081に送信する。
受付部1082は、記録装置105aから送信されるプリセット候補に関する情報(以下、提案プリセット情報という)を受け付け、表示装置104aに、プリセット候補を提案する画面等を表示させる。また、受付部1082は、遠隔監視者が確認指示画面を選択することによる、プリセット候補の内容確認を行う旨の指示情報(第1の指示情報)を受け付けた場合、制御部1081に、撮影方向制御装置107の撮影制御部1071に対して、記録装置105a(詳細は後述する)から受信済みの提案プリセット情報を送信し、表示装置104aにプリセット化実施有無を選択する画面等を表示させる。また、受付部1082は、表示装置104aより受信したプリセット化を行う、あるいは、プリセット化を行わない旨の指示情報(第2の指示情報)を、記録装置105aに送信する。
The
In the second embodiment, as an example, as shown in FIG. 13, the
The
As shown in FIG. 13, the
The
The
The
記録装置105aは、提案プリセット送受信制御部1051と、記録制御部1052と、記録部1053と、提案プリセット演算部1054とを備える。
提案プリセット送受信制御部1051は、提案プリセット演算部1054から出力される提案プリセット情報を、表示制御装置108へ送信する。また、提案プリセット送受信制御部1051は、表示制御装置108から送信される第2の指示情報を受信し、提案プリセット演算部1054に出力する。
The
The proposed preset transmission /
記録制御部1052は、撮影方向制御装置107から送信された撮影装置101aの撮影方向の制御情報を受信し、学習データとして記録部1053に記録する。
記録部1053は、記録制御部1052の制御に基づき、撮影装置101aの撮影方向の制御情報を、学習データとして記録する。
なお、この実施の形態2では、撮影方向制御装置107の撮影制御部1071は、撮影装置101aの撮影方向を変更する制御を行うと、変更後の撮影方向の画像データまたは映像データ、および、その制御時のパラメータを、記録装置105aに送信する。例えば、画像データまたは映像データ、および、制御パラメータは、撮影装置101aから各々ストリームとして配信する。
The
The
In the second embodiment, when the
提案プリセット演算部1054は、記録部1053に記録された学習データに基づき、撮影装置101aの撮影方向を学習し、頻度の高い撮影方向を、プリセット候補として提案する撮影方向と決定する。記録部1053に記録された学習データとは、上述のとおり撮影方向の制御情報を含むデータであり、具体的には、制御時のパラメータであるパン角度、チルト角度、ズーム値等を含むデータである。
提案プリセット演算部1054は、プリセット候補として提案する撮影方向の制御情報を、提案プリセット情報として、提案プリセット送受信制御部1051に出力する。
The proposed
The proposed
実施の形態2の監視システムの動作について説明する。
図14は、実施の形態2の監視システムの動作の一例を説明するフローチャートである。
実施の形態2では、上述のとおり、撮影方向制御装置107の撮影制御部1071は、撮影装置101aに対して撮影方向の制御を行うと、撮影方向の制御情報を、記録装置105aの記録制御部1052に送信する。
図14を用いて以下に説明する動作は、例えば、現場監督者からの指示を受け付けたタイミングで行われるものとする。なお、これは一例に過ぎず、以下に説明する動作は、その他のタイミングで行われるものとしてもよい。
The operation of the monitoring system of the second embodiment will be described.
FIG. 14 is a flowchart illustrating an example of the operation of the monitoring system according to the second embodiment.
In the second embodiment, as described above, when the photographing
The operation described below with reference to FIG. 14 shall be performed, for example, at the timing of receiving an instruction from the on-site supervisor. Note that this is only an example, and the operations described below may be performed at other timings.
記録装置105aの記録制御部1052は、撮影方向制御装置107から送信された、撮影方向の制御情報を受信し(ステップST1401)、学習データとして記録部1053に記録させる(ステップST1402)。
The
提案プリセット演算部1054は、記録部1053に記録されている学習データに基づき、撮影方向の頻度を学習する(ステップST1403)。
提案プリセット演算部1054は、撮影装置101aの撮影方向の頻度を、例えばクラスタリング等の機械学習により学習する。
具体的には、提案プリセット演算部1054は、記録部1053に記録されている学習データに基づき、撮影方向の頻度を、学習する。撮影方向の頻度とは、例えば、該当の撮影方向が指定された直近1週間の指定回数、該当の撮影方向が指定された合計指定回数、該当の撮影方向が指定された連続指定時間等である。提案プリセット演算部1054は、学習の結果、比較的高い頻度で現れる撮影方向を「高頻度」の撮影方向として分類する。
The proposed
The proposed
Specifically, the proposed
提案プリセット演算部1054は、ステップST1403で学習した結果、高頻度に分類される撮影方向があるかどうかを判定する(ステップST1404)。
As a result of learning in step ST1403, the proposed
ステップST1404において、高頻度に分類される撮影方向がないと判定した場合(ステップST1404の“NO”の場合)、ステップST1401に戻る。 If it is determined in step ST1404 that there is no shooting direction classified as high frequency (in the case of “NO” in step ST1404), the process returns to step ST1401.
ステップST1404において、高頻度に分類される撮影方向があると判定した場合(ステップST1404の“YES”の場合)、提案プリセット演算部1054は、高頻度に分類されると判定した撮影方向の制御情報を、提案プリセット情報として、提案プリセット送受信制御部1051に出力する。なお、例えば、提案プリセット演算部1054は、高頻度に分類されると判定した撮影方向が複数ある場合は、一番頻度が高いと判定した撮影方向の制御情報を、提案プリセット情報とする。
提案プリセット送受信制御部1051は、提案プリセット演算部1054から提案プリセット情報を取得すると、表示制御装置108に対して、当該提案プリセット情報を送信する(ステップST1405)。
When it is determined in step ST1404 that there is a shooting direction classified as high frequency (when “YES” in step ST1404), the proposed
When the proposed preset transmission /
記録装置105aから提案プリセット情報を受信すると、表示制御装置108の受付部1082は、表示装置104aに対して、受信した提案プリセット情報に基づく頻度の高い撮影方向について、その内容の確認を行うかどうかの指定を遠隔監視者から受け付けるための、確認指示画面を表示させる。確認指示画面の表示は、例えば、GUI(Graphical User Interface)を用いて行われる。
ここで、図15は、実施の形態2において、表示制御装置108の受付部1082が、提案プリセット情報を受信した際に表示装置104aに表示させる画面の一例を説明する図であり、図15Aが、確認指示画面の一例である。図15Bおよび図15Cで示す画面例については後述する。
When the proposed preset information is received from the
Here, FIG. 15 is a diagram illustrating an example of a screen to be displayed on the
表示装置104aに、図15Aに示すような確認指示画面が表示されると、遠隔監視者は、当該確認指示画面を確認し、頻度の高い撮影方向の内容確認を行うかどうかを判断する。
そして、遠隔監視者は、内容確認を行う、または、内容確認を行わない旨の指示を、確認指示画面から、タッチパネル、マウス、キーボード等の入力装置(図示省略)を用いて入力する。
例えば、図15Aの確認指示画面でいうと、遠隔監視者は、内容確認を行う場合は「はい」を、内容確認を行わない場合は「いいえ」をタッチパネルで選択する等して、入力する。
表示制御装置108の受付部1082は、入力装置から入力された、内容確認を行う、または、内容確認を行わない旨の第1の指示情報を受け付け、記録装置105aより受信済みの提案プリセット情報を、制御部1081に送信する。
When the confirmation instruction screen as shown in FIG. 15A is displayed on the
Then, the remote monitor inputs an instruction to confirm the content or not to confirm the content from the confirmation instruction screen using an input device (not shown) such as a touch panel, a mouse, or a keyboard.
For example, in the confirmation instruction screen of FIG. 15A, the remote observer inputs by selecting "Yes" when confirming the content and "No" when not confirming the content on the touch panel.
The
受付部1082は、内容確認を行う旨の第1の指示情報を受け付けたかどうかを判定する(ステップST1406)。
ステップST1406において、内容確認を行う旨の第1の指示情報を受け付けていない場合(ステップST1406の“NO”の場合)、すなわち、内容確認を行わない旨の第1の指示情報を受け付けた場合、ステップST1401に戻る。なお、遠隔監視者から内容確認を行わない旨の第1の指示情報を受け付けた場合、受付部1082は、ステップST1405において記録装置105aの提案プリセット送受信制御部1051から受信した提案プリセット情報を破棄する。
The
In step ST1406, when the first instruction information for confirming the content is not received (when "NO" in step ST1406), that is, when the first instruction information for not confirming the content is accepted. Return to step ST1401. When the remote monitor receives the first instruction information that the content is not confirmed, the
ステップST1406において、内容確認を行う旨の第1の指示情報を受け付けた場合(ステップST1406の“YES”の場合)、受付部1082は、制御部1081に対して、ステップST1405において、記録装置105aから受信済みの提案プリセット情報を送信し、制御部1081は、撮影方向制御装置107の撮影制御部1071に対して、同情報を送信する。
撮影制御部1071は、制御部1081から提案プリセット情報を受信すると、受信した提案プリセット情報に基づく撮影方向となるよう、撮影装置101aの撮影方向を制御する。具体的な動作は、実施の形態1で説明した撮影方向の制御動作と同様であるため重複した説明を省略する(図7のステップST703参照)。
撮影制御部1071により撮影装置101aの撮影方向が制御されると、撮影装置101aの撮影部1011は、撮影方向制御装置107の制御に基づく撮影方向で、監視対象領域の画像または映像を撮影し、当該画像または映像、および、制御パラメータを、表示装置104a、および、記録装置105aに送信する。
実施の形態2では、このとき、撮影装置101aの撮影部1011は、確認内容による制御指示時の制御パラメータが学習データとなるのを防ぐため、例えば、その旨を、画像または映像とあわせて記録装置105aに送信する。なお、これは一例に過ぎず、提案プリセットによる制御時の制御パラメータであることが判別できるようになっていればよい。
When the first instruction information for confirming the content is received in step ST1406 (when “YES” in step ST1406), the
When the
When the shooting direction of the
In the second embodiment, at this time, in order to prevent the control parameter at the time of the control instruction according to the confirmation content from becoming learning data, the photographing
表示装置104aでは、撮影部1011から送信された画像または映像が表示される。
表示制御装置108の受付部1082は、表示装置104aに対して、表示している画像または映像が撮影された撮影方向をプリセット化するかどうかを確認するプリセット化要否指示画面を表示させる。
The
The
図15Bは、実施の形態2において、表示制御装置108の受付部1082が表示装置104aに表示させるプリセット化要否指示画面の一例を示す図である。受付部1082は、表示装置104aに、図15Bに示すようなプリセット化要否指示画面を、例えば、ポップアップ画面等で表示させる。
遠隔監視者は、現在、表示装置104aに表示されている画像または映像を確認し、当該画像または映像が撮影された撮影方向をプリセット化する、または、プリセット化しない旨の指示を、プリセット化要否指示画面から入力装置を用いて入力する。
例えば、図15Bのプリセット化要否指示画面でいうと、遠隔監視者は、プリセット化を行う場合は「はい」を、行わない場合は「いいえ」をタッチパネルで選択する等して、入力する。
表示制御装置108の受付部1082は、入力装置から入力された、プリセット化を行う、または、プリセット化を行わない旨の第2の指示情報を受け付ける。
受付部1082は、入力装置から入力された、プリセット化を行う、あるいは、プリセット化を行わない旨の第2の指示情報を、記録装置105aに送信する。このとき、受付部1082は、例えば、ステップST1405において記録装置105aの提案プリセット送受信制御部1051から受信した提案プリセット情報に第2の指示情報を付与して、記録装置105aに送信するようにする。
受付部1082は、入力装置から入力された、プリセット化を行う、あるいは、プリセット化を行わない旨の第2の指示情報を、記録装置105aに送信後、表示装置104aに、登録完了画面を表示させる。
図15Cは、実施の形態2において、受付部1082が表示装置104aに表示させる登録完了画面の一例を示す図である。プリセット名称はデフォルト設定として、プリセット化を行う旨の第2の指示情報を受け付けた際に受付部1082が設定するようにしてもよいし、遠隔監視者に対して、当該遠隔監視者がプリセット化を行う旨の第2の指示情報を入力する際に、その都度入力させてもよい。
FIG. 15B is a diagram showing an example of a presetting necessity instruction screen to be displayed on the
The remote monitor needs to check the image or video currently displayed on the
For example, in the presetting necessity instruction screen of FIG. 15B, the remote monitor inputs by selecting "Yes" when performing presetting and "No" when not performing presetting on the touch panel.
The
The
The
FIG. 15C is a diagram showing an example of a registration completion screen displayed on the
記録装置105aの提案プリセット送受信制御部1051は、表示制御装置108から、プリセット化を行う旨の第2の指示情報を受信したかどうかを判定する(ステップST1407)。
ステップST1407において、プリセット化を行う旨の第2の指示情報を受信していない場合(ステップST1407の“NO”の場合)、すなわち、プリセット化を行わない旨の第2の指示情報を受信した場合、提案プリセット送受信制御部1051は、提案プリセット演算部1054に対し、プリセット化を行わない旨をフィードバックし(ステップST1411)、ステップST1409へ進む。
The proposed preset transmission /
In step ST1407, when the second instruction information indicating that presetting is not performed is not received (when “NO” in step ST1407), that is, when the second instruction information indicating that presetting is not performed is received. , The proposed preset transmission /
ステップST1407において、プリセット化を行う旨の第2の指示情報を受信した場合(ステップST1407の“YES”の場合)、提案プリセット送受信制御部1051は、提案プリセット演算部1054に対し、プリセット化を行う旨をフィードバックする(ステップST1408)。
When the second instruction information for presetting is received in step ST1407 (when “YES” in step ST1407), the proposed preset transmission /
プリセット化を行う旨、または、プリセット化を行わない旨がフィードバックされると、提案プリセット演算部1054は、例えば、プリセット化を行う旨のフィードバックである場合、ステップST1404において提案プリセット情報とした、撮影装置101aの制御情報を学習の対象外とする。これは一例に過ぎず、遠隔監視者が選択する正解の情報を、学習システムにフィードバックし効率化を図る構成とすればよい。
When feedback is given to the effect that presetting is to be performed or not to be preset, the proposed
なお、上記の説明では、提案プリセット演算部1054は、高頻度に分類されると判定した撮影方向が複数ある場合は、一番頻度が高いと判定した撮影装置101aの撮影方向の制御情報を、提案プリセット情報としていたが、これに限らず、例えば、提案プリセット演算部1054は、高頻度に分類されると判定した全ての撮影方向について、提案プリセット情報を作成するようにしてもよい。この場合、表示制御装置108では、例えば、確認指示画面において、どの撮影方向に関する提案プリセット情報の確認を行うかの指定を受け付けられるようにし、遠隔監視者は、任意に指定し制御された単一または複数の画像または映像から、所望の提案プリセット情報を任意に選択するようにする。
In the above description, when the proposed
以上のように、実施の形態2によれば、監視システムは、あらかじめ撮影方向の制御情報を指定し保持しておけるプリセット機能を有する表示制御装置108、または、記録装置105aを備え、撮影方向制御装置107が制御したことによる、撮影装置101aの撮影方向の制御情報を受信する記録制御部1052と、記録制御部1052が受信した撮影装置101aの撮影方向の制御情報を学習データとして記録する記録部1053と、記録部1053が記録した前記学習データに基づき、撮影装置101aの撮影方向を学習し、高頻度の撮影方向をプリセット候補とする提案プリセット演算部1054とを有する記録装置105aを備えるように構成したので、過去の制御状況に基づき、高頻度に指定される撮影方向を自動で抽出し、プリセット化させることができる。
これにより、例えば、遠隔監視者が見落としている撮影範囲を、現場監督者の撮影方向の指定情報から特定できる。監視システムにおいて、現場監督者の撮影方向の指定情報から撮影方向の重要度を学習し、遠隔監視者がプリセット化していない見落とし範囲における撮影方向についても、プリセット化の提案をすることで、監視対象を逃す事態を低減することができる。
As described above, according to the second embodiment, the monitoring system includes a
Thereby, for example, the shooting range overlooked by the remote monitor can be specified from the shooting direction designation information of the on-site supervisor. In the monitoring system, the importance of the shooting direction is learned from the specified information of the shooting direction of the on-site supervisor, and the shooting direction in the overlooked range that is not preset by the remote monitor is also proposed to be preset to be monitored. It is possible to reduce the situation of missing.
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。 In the present invention, within the scope of the invention, it is possible to freely combine each embodiment, modify any component of each embodiment, or omit any component in each embodiment. ..
101、101a 撮影装置、102 検知装置、103 指示装置、104、104a 表示装置、105、105a 記録装置、106 制御装置、107 撮影方向制御装置、108 表示制御装置、111 処理回路、112 HDD、113 入力インタフェース装置、114 出力インタフェース装置、115 メモリ、116 CPU、302 検知領域、305 監視対象、801、801a 監視カメラ、802 撮影範囲、803 撮影可能範囲、901 線路、902 ホーム、1001 現場監督者、1002 レーザポインタ、1003 監視対象者、1011 撮影部、1012 焦点整合処理部、1013 旋回処理部、1051 送受信制御部、1052 記録制御部、1053 記録部、1054 プリセット演算部、1071 撮影制御部、1072 変換部、1081 制御部、1082 受付部。 101, 101a imaging device, 102 detection device, 103 instruction device, 104, 104a display device, 105, 105a recording device, 106 control device, 107 imaging direction control device, 108 display control device, 111 processing circuit, 112 HDD, 113 inputs Interface device, 114 output interface device, 115 memory, 116 CPU, 302 detection area, 305 monitoring target, 801, 801a surveillance camera, 802 shooting range, 803 shooting range, 901 line, 902 home, 1001 site supervisor, 1002 laser Pointer, 1003 Monitored person, 1011 Imaging unit, 1012 Focus matching processing unit, 1013 Turning processing unit, 1051 Transmission / reception control unit, 1052 Recording control unit, 1053 Recording unit, 1054 Preset calculation unit, 1071 Imaging control unit, 1072 Conversion unit, 1081 control unit, 1082 reception unit.
Claims (9)
前記監視対象領域内の特定位置から発信された監視対象が存在する方向を指示する信号を検知する検知装置と、
前記検知装置が検知した前記監視対象が存在する方向を指示する信号に基づき、前記撮影装置の撮影方向を制御する撮影方向制御装置とを備え、
前記検知装置は、前記監視対象が存在する方向を指示する信号が空間内のいずれの方位から来ても当該監視対象が存在する方向を指示する信号を検知可能な複数の検知領域を有する
ことを特徴とする監視システム。 An imaging device that captures the monitored area and
A detection device that detects a signal indicating the direction in which the monitoring target exists, which is transmitted from a specific position in the monitoring target area, and
Said sensing device based on the signal indicating the direction in which there is the monitoring target is detected, e Bei a photographing direction control device for controlling the photographing direction of the photographing device,
The detection device has a plurality of detection regions capable of detecting a signal indicating the direction in which the monitoring target exists regardless of the direction in which the signal indicating the direction in which the monitoring target exists comes from any direction in the space.
A monitoring system characterized by that.
前記検知装置は、前記指示装置によって発信された前記監視対象が存在する方向を指示する信号を検知する
ことを特徴とする請求項1記載の監視システム。 Further comprising an instruction unit for transmitting a signal indicating the direction in which the monitoring target is present from a specific position of the monitored area,
The sensing device monitoring system of claim 1, wherein the detecting a signal indicating the direction in which the monitoring target originated by the pointing device is present.
ことを特徴とする請求項2記載の監視システム。 The instruction device, the a specific position the position where the monitoring target is present in the monitored area, according to claim 2, wherein the transmitting a signal indicating the direction in which the monitoring target is present from the specific position Monitoring system.
ことを特徴とする請求項3記載の監視システム。 The pointing device is for emitting a light beam, the light beam is projected on the monitored, the light rays reflected by the monitoring target, that transmits a signal indicating the direction in which the monitoring target is present The monitoring system according to claim 3, wherein the monitoring system is characterized.
ことを特徴とする請求項2記載の監視システム。 The monitoring system according to claim 2, wherein the instruction device emits a light ray, and emits a light ray directly projected onto the detection device as a signal instructing a direction in which a monitoring target exists.
前記記録制御部が受信した前記撮影装置の撮影方向の制御情報を学習データとして記録する記録部と、
前記記録部が記録した前記学習データに基づき、前記撮影装置の撮影方向を学習し、高頻度の撮影方向をプリセット候補とする提案プリセット演算部とを有する記録装置
を備えた請求項1から請求項5のうちのいずれか1項記載の監視システム。 A recording control unit that receives control information of the shooting direction of the shooting device, which is controlled by the shooting direction control device, and a recording control unit.
A recording unit that records control information of the imaging direction of the imaging device received by the recording control unit as learning data, and a recording unit.
Claims 1 to 1 include a recording device including a proposed preset calculation unit that learns the shooting direction of the shooting device based on the learning data recorded by the recording unit and uses a high-frequency shooting direction as a preset candidate. The monitoring system according to any one of 5.
前記表示制御装置が前記プリセット候補に基づく、あらかじめ指定された撮影方向をプリセット化する第2の指示情報を受け付けた場合、当該表示制御装置、または、前記記録装置は、前記プリセット候補に基づく、あらかじめ指定された撮影方向の制御情報を、プリセット位置の情報として保持する
ことを特徴とする請求項6記載の監視システム。 Further equipped with a display control device that receives an instruction as to whether or not to preset the shooting direction specified in advance based on the preset candidate.
When the display control device receives a second instruction information for presetting a predetermined shooting direction based on the preset candidate, the display control device or the recording device is based on the preset candidate in advance. The monitoring system according to claim 6, wherein the control information of the designated shooting direction is held as the information of the preset position.
ことを特徴とする請求項6記載の監視システム。 The proposed preset calculation unit is characterized in that it learns the shooting direction of the shooting device based on the second instruction information for instructing the shooting direction of the shooting device as the preset candidate to be the preset position and the preset position. The monitoring system according to claim 6.
前記撮影方向制御装置は、前記受付部から前記プリセット候補に関する情報を受信した場合、当該プリセット候補に基づく撮影方向となるよう前記撮影装置の撮影方向を制御し、
前記受付部は、前記撮影方向制御装置が制御した撮影方向をプリセット化する第2の指示情報を受け付けた場合に、前記提案プリセット演算部に対して当該第2の指示情報を送信し、
前記提案プリセット演算部は、前記プリセット候補とした前記撮影装置の撮影方向をプリセット化する
ことを特徴とする請求項6記載の監視システム。 When the information on the preset candidate determined by the proposed preset calculation unit is received and the first instruction information for confirming the content of the preset candidate is received, the shooting direction control device is referred to the preset candidate. Further equipped with a display control device having a reception unit for transmitting information,
When the shooting direction control device receives information about the preset candidate from the reception unit, the shooting direction control device controls the shooting direction of the shooting device so that the shooting direction is based on the preset candidate.
When the reception unit receives the second instruction information for presetting the shooting direction controlled by the shooting direction control device, the receiving unit transmits the second instruction information to the proposed preset calculation unit.
The monitoring system according to claim 6, wherein the proposed preset calculation unit presets the shooting direction of the shooting device as the preset candidate.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017083686 | 2017-04-20 | ||
JP2017083686 | 2017-04-20 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018182712A JP2018182712A (en) | 2018-11-15 |
JP6887352B2 true JP6887352B2 (en) | 2021-06-16 |
Family
ID=64276296
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017174881A Active JP6887352B2 (en) | 2017-04-20 | 2017-09-12 | Monitoring system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6887352B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6895669B1 (en) * | 2020-05-01 | 2021-06-30 | 株式会社エクサウィザーズ | Terminals, servers, programs and methods |
CN113573015A (en) * | 2021-06-30 | 2021-10-29 | 南京轩世琪源软件科技有限公司 | Video information access method, system, equipment and medium for monitoring |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3309496B2 (en) * | 1993-06-17 | 2002-07-29 | 松下電器産業株式会社 | Camera direction control device |
JPH10304344A (en) * | 1997-04-22 | 1998-11-13 | Kyocera Corp | Cordless monitoring camera apparatus |
JP2000148972A (en) * | 1998-11-06 | 2000-05-30 | Canon Inc | Image recognition device |
JP2001006058A (en) * | 1999-06-18 | 2001-01-12 | Fujitsu General Ltd | Setting method of monitoring area of picture and abnormality monitoring system |
JP2011258031A (en) * | 2010-06-09 | 2011-12-22 | Dx Antenna Co Ltd | Tracker for monitoring camera |
-
2017
- 2017-09-12 JP JP2017174881A patent/JP6887352B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018182712A (en) | 2018-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100353388C (en) | Omnibearing monitoring and control system, omnibearing monitoring and control method, omnibearing monitoring and control program and computer readable record medium | |
JP5136060B2 (en) | Image processing apparatus, image processing method, program thereof, recording medium recording the program, and imaging apparatus | |
US10796543B2 (en) | Display control apparatus, display control method, camera system, control method for camera system, and storage medium | |
US8711218B2 (en) | Continuous geospatial tracking system and method | |
JP4188394B2 (en) | Surveillance camera device and surveillance camera system | |
US10404947B2 (en) | Information processing apparatus, information processing method, camera system, control method for camera system, and storage medium | |
JP2006523043A (en) | Method and system for monitoring | |
KR20130130544A (en) | Method and system for presenting security image | |
JP4475164B2 (en) | Monitoring system and monitoring method | |
JP2016127571A (en) | Camera system, display control device, display control method, and program | |
JP6887352B2 (en) | Monitoring system | |
US11832016B2 (en) | 3D tour photographing apparatus and method | |
EP2648406B1 (en) | Method for switching viewing modes in a camera | |
CN111083438A (en) | Unmanned inspection method, system and device based on video fusion and storage medium | |
KR101452342B1 (en) | Surveillance Camera Unit And Method of Operating The Same | |
KR101204870B1 (en) | Surveillance camera system and method for controlling thereof | |
KR101821159B1 (en) | System for tracking moving path of objects using multi-camera | |
KR100585822B1 (en) | Monitor system use panorama image and control method the system | |
US8692879B2 (en) | Image capturing system, image capturing device, information processing device, and image capturing method | |
JP2001264059A (en) | Method of measuring displacement quantity of measured object | |
CN109151298B (en) | Pan-tilt camera control method, device and system based on screen | |
JP5955114B2 (en) | Imaging apparatus, control method thereof, and program | |
JP2002101408A (en) | Supervisory camera system | |
KR101434878B1 (en) | Monitering camera system | |
JP7085925B2 (en) | Information registration device, information processing device, control method of information registration device, control method of information processing device, system, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200306 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201211 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210205 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20210205 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210420 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210518 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6887352 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |