JP2018182712A - Monitor system and imaging direction control device - Google Patents
Monitor system and imaging direction control device Download PDFInfo
- Publication number
- JP2018182712A JP2018182712A JP2017174881A JP2017174881A JP2018182712A JP 2018182712 A JP2018182712 A JP 2018182712A JP 2017174881 A JP2017174881 A JP 2017174881A JP 2017174881 A JP2017174881 A JP 2017174881A JP 2018182712 A JP2018182712 A JP 2018182712A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- monitoring target
- photographing
- preset
- control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 169
- 238000012544 monitoring process Methods 0.000 claims abstract description 196
- 238000001514 detection method Methods 0.000 claims abstract description 144
- 238000004364 calculation method Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 description 25
- 238000012790 confirmation Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 18
- 230000005540 biological transmission Effects 0.000 description 13
- 238000006243 chemical reaction Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 10
- 238000000034 method Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 5
- 238000009434 installation Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000005315 distribution function Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
この発明は、監視対象領域に存在する対象物を撮像する撮影装置の制御を行う監視システムおよび撮影方向制御装置に関するものである。 The present invention relates to a monitoring system and an imaging direction control device that control an imaging device that captures an object present in a monitoring target area.
従来、撮影装置の撮影方向を自動的に制御する技術が存在する。例えば、特許文献1には、センサカメラで撮影された広角画像内から撮影対象の被写体を認識すると共に被写体の現在位置を逐次計測し、撮影用カメラのあらかじめ定められた視点を原点とした三次元空間内での当該被写体の現在位置等を示す情報に基づき、被写体の動きに応じて撮影用カメラを自動的に駆動制御する技術が開示されている。 Conventionally, there is a technology for automatically controlling the imaging direction of the imaging device. For example, Patent Document 1 recognizes a subject to be photographed from within a wide-angle image photographed by a sensor camera and sequentially measures the current position of the subject, and uses a predetermined viewpoint of a camera for photographing as an origin. There is disclosed a technology for automatically driving and controlling a photographing camera according to the movement of a subject based on information indicating the current position or the like of the subject in a space.
特許文献1に記載された技術では、センサカメラが被写体を認識できれば、当該被写体の現在位置が現在の撮影用カメラの向きからみて撮影範囲外にあったとしても、当該被写体を撮影するように撮影用カメラを駆動制御することができる。
しかし、被写体がセンサカメラの認識範囲外に存在する場合は、センサカメラにおいて当該被写体が認識できず、その結果、撮影用カメラの向きを変えれば撮影可能な範囲内に当該被写体が存在する場合であっても、当該撮影用カメラでは当該被写体を撮影することができないという課題があった。
In the technique described in Patent Document 1, if the sensor camera can recognize the subject, the subject is photographed so as to photograph the subject even if the current position of the subject is out of the photographing range as viewed from the current orientation of the camera for photographing Drive control can be performed.
However, when the subject is out of the recognition range of the sensor camera, the subject can not be recognized by the sensor camera, and as a result, when the subject is within the range which can be photographed by changing the direction of the photographing camera. Even if there is a problem, there is a problem that the photographing camera can not photograph the subject.
この発明は、上記のような課題を解決するためになされたもので、現在の撮影装置の撮影範囲には存在しない監視対象を撮影するように撮影装置を制御することができる監視システムを提供することを目的とする。 The present invention has been made to solve the above-described problems, and provides a monitoring system capable of controlling a photographing apparatus to photograph a monitoring target that does not exist in the photographing range of the present photographing apparatus. The purpose is
この発明に係る監視システムは、監視対象領域を撮影する撮影装置と、監視対象領域内の特定位置から発信された監視対象が存在する方向を指示する信号を検知する検知装置と、検知装置が検知した監視対象が存在する方向を指示する信号に基づき、撮影装置の撮影方向を制御する撮影方向制御装置とを備えたものである。 A monitoring system according to the present invention includes an imaging device for imaging a monitoring target area, a detection device for detecting a signal indicating a direction in which the monitoring target is transmitted from a specific position in the monitoring target area, and a detection device And an imaging direction control device for controlling the imaging direction of the imaging device based on a signal indicating the direction in which the monitoring target exists.
この発明によれば、現在の撮影装置の撮影範囲には存在しない監視対象を撮影するように撮影装置を制御することができる。 According to the present invention, it is possible to control the imaging device to capture a monitoring target that does not exist in the current imaging range of the imaging device.
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態1.
図1は、実施の形態1に係る監視システムの全体構成の一例を示す図である。
この実施の形態1の監視システムにおいては、監視対象領域内に存在し、監視対象領域を直接目視で監視する現場監督者と、監視対象領域から離れた場所から、監視対象領域を撮影した映像等を確認することで当該監視対象領域を監視する遠隔監視者とによって、監視作業が行われるものとする。
Hereinafter, in order to explain the present invention in more detail, a mode for carrying out the present invention will be described according to the attached drawings.
Embodiment 1
FIG. 1 is a diagram showing an example of the entire configuration of a monitoring system according to a first embodiment.
In the monitoring system according to the first embodiment, a field supervisor who is present in the monitoring target area and directly monitors the monitoring target area by visual observation, and a video of the monitoring target area captured from a place apart from the monitoring target area The monitoring operation is performed by the remote monitor who monitors the monitoring target area by confirming the above.
監視システムは、撮影装置101と、検知装置102と、指示装置103と、表示装置104と、記録装置105と、制御装置106とを備える。撮影装置101は、撮影方向制御装置107を搭載する。
撮影装置101は、監視対象領域を、画像または映像として撮影する。撮影装置101は、例えば、監視カメラ、スマートフォン、または、デジタルカメラ等である。
撮影装置101は、撮影した画像または映像を、表示装置104、および、記録装置105に出力する。制御装置106は、撮影装置101の制御を行う。例えば、撮影装置101の向きを制御する。制御装置106は、表示装置104に接続してもよい。制御装置106の具体例としては、コントローラ、リモコン、マウス等がある。
また、撮影装置101は、撮影方向制御装置107の制御に基づき、撮影方向を変更して、監視対象領域を撮影する。
The monitoring system includes an
The
The
Further, the
撮影方向制御装置107は、検知装置102から送信された情報に基づき、撮影装置101の撮影方向を制御する。検知装置102から送信される情報の詳細、および、撮影装置101の撮影方向を制御する具体的な動作については後述する。
なお、この実施の形態1では、図1に示すように、撮影装置101が撮影方向制御装置107を搭載するものとするが、これに限らず、撮影方向制御装置107は、撮影装置101の外部に設けられるものとし、ネットワーク等を介して、撮影装置101の外部から撮影装置101の撮影方向を制御するようにしてもよい。
The photographing
In the first embodiment, as shown in FIG. 1, the photographing
指示装置103は、監視対象領域内の特定位置から監視対象が存在する方向を指示する信号を発信するためのものである。指示装置103は、例えば、レーザポインタ等であり、現場監督者が当該指示装置103を携帯している。監視対象領域内の特定位置とは、監視対象領域内の実際の何れかの場所であり、検知装置102を一端として監視対象の位置を通る半直線上の場所、または、当該半直線近傍の場所である。特定位置は、監視対象が存在する位置に応じて、現場監督者が選択するものであり、固定的なものではない。
具体的には、指示装置103がレーザポインタである場合、例えば、現場監督者がレーザポインタからの光線を、監視対象領域内に存在する監視対象に対して投光することで、監視対象によって反射された光線を監視対象が存在する方向を指示する信号として発信する。この場合の特定位置は、監視対象が存在する位置である。
また、同様に指示装置103がレーザポインタである場合、例えば、監視対象領域内にいる現場監督者がレーザポインタからの光線を検知装置102に対して直接投光することによって、当該光線を監視対象が存在する方向を指示する信号として発信する。この場合の特定位置は、指示装置103が存在する位置である。
The
Specifically, when the
Similarly, when the
検知装置102は、指示装置103によって発信された信号に基づき、監視対象が存在する方向を検知する。検知装置102は、例えば、光センサ等である。
具体的には、検知装置102は、例えば、それぞれがセンサ素子からなる1つ以上の検知領域を有している。
検知装置102は、例えば、指示装置103がレーザポインタである場合であって、当該レーザポインタからの光線が監視対象に対して投光された場合、当該監視対象から反射された反射光を当該検知領域で検知することで、監視対象が存在する方向を検知する。また、例えば、レーザポインタからの光線が、検知装置102に対して直接投光された場合、検知装置102は、レーザポインタから投光された光線を検知領域で検知することで、当該レーザポインタが存在する方向を、監視対象が存在する方向として検知する。
検知装置102は、監視対象が存在する方向を検知した検知領域に関する情報を、検知領域情報として撮影方向制御装置107に送信する。
The
Specifically, the
For example, when the
The
表示装置104は、撮影装置101が出力した画像または映像を表示する。表示装置104は、例えば、ディスプレイ、スマートフォン、テレビ、または、ビデオモニタ等である。当該表示装置104は、例えば、監視室等の、監視対象領域とは離れた場所において使用されることを想定している。遠隔監視者は、当該表示装置104に表示される画像または映像を確認することで監視対象領域を監視する。
The
記録装置105は、撮影装置101が出力した画像または映像を記録する。記録装置105は、例えば、レコーダ、または、スマートフォン等である。
The
制御装置106は、撮影装置101を制御する。具体的には、例えば、制御装置106は、撮影装置101のズーム、フォーカス、パン、または、チルト等の動作を制御する。制御装置106は、例えば、制御用のソフトウェアがインストール済みのPC(Personal Computer)、または、コントローラ等である。
The
撮影装置101、表示装置104、記録装置105、および、制御装置106は、相互に通信可能に接続される。
また、撮影装置101と検知装置102とは通信可能に接続される。
また、検知装置102と指示装置103とは通信可能に接続される。
The
Further, the
Further, the
図1に示したような監視システムにおける、撮影装置101の撮影方向を制御する動作について説明する。
図2は、実施の形態1において、撮影装置101の撮影方向を制御する動作の一例を説明するためのフローチャートである。
なお、図2では、現場監督者が監視対象領域内に監視対象となる人物を発見した場合に、当該監視対象を含む範囲を撮影装置101の撮影範囲とするよう、当該撮影装置101の撮影方向を制御する動作を説明する。
また、以下の説明では、一例として、検知装置102は球状のセンサ、指示装置103はレーザポインタとする。
An operation of controlling the imaging direction of the
FIG. 2 is a flowchart for explaining an example of an operation of controlling the shooting direction of the
In FIG. 2, when the on-site supervisor finds a person to be monitored in the monitoring target area, the imaging direction of the
In the following description, as an example, the
指示装置103は、監視対象となる人物が存在する方向を指示する(ステップST201)。具体的には、現場監督者が、携帯している指示装置103を用いて、監視対象となる人物に光線を投光する。
The instructing
検知装置102は、ステップST201において指示装置103から監視対象となる人物に投光されて当該人物によって反射された光線を、監視対象が存在する方向を指示する信号として検知する。検知装置102は、当該信号を検知した検知領域に関する情報を、検知領域情報として、撮影装置101に搭載された撮影方向制御装置107に送信する(ステップST202)。
In step ST201, the
撮影方向制御装置107は、ステップST202において検知装置102から送信された情報に基づき、撮影装置101の撮影方向を制御する(ステップST203)。そして、撮影装置101は、撮影方向制御装置107の制御に従った撮影方向で監視対象領域を撮影する。
The photographing
以上のように動作することで、例え監視対象が撮影装置101の現在の撮影範囲外に存在していたとしても、指示装置103から発信された監視対象が存在する方向を指示する信号を検知することで、当該監視対象が撮影装置101の撮影範囲内に含まれるように撮影装置101の撮影方向を制御することができる。
By operating as described above, even if the monitoring target is present outside the current shooting range of the
以下、監視システムを構成する検知装置102、および、撮影方向制御装置107を搭載する撮影装置101の、構成および動作の詳細について、それぞれ説明する。
The details of the configuration and operation of the
まず、検知装置102について説明する。
図3は、実施の形態1の検知装置102の全体構成の一例を説明するための図である。
図3Aでは、検知装置102が、指示装置103から投光された光線を直接に検知領域302で検知することで、当該指示装置103が存在する方向を監視対象305が存在する方向として検知する場合を示しており、図3Bでは、検知装置102が、指示装置103から監視対象305に対して投光されて当該監視対象305によって反射された光線を検知することで、監視対象305が存在する方向を検知する場合を示している。
First, the
FIG. 3 is a diagram for explaining an example of the entire configuration of the
In FIG. 3A, the detecting
図3において、座標軸301は、x−y−z座標軸であり、例えば、原点が検知装置102の中心である。また、z軸方向は、鉛直方向とする。
検知装置102は、複数の検知領域302を有する。図3では、複数の検知領域302のうち1つの検知領域302のみを示している。また、図3では、一例として、各検知領域は、球状の検知装置102の表面上に設けられるものとしている。
検知領域302は、それぞれ、例えば、指示装置103から発信された信号を検知するための単体のセンサ素子で構成されている。
検知装置102には、監視対象領域内で投光される光線がいずれの方位から来ても検知できるように、複数の検知領域が設けられていればよい。複数の検知領域の配置および複数の検知領域の具体的な数については、後述する。
In FIG. 3, the coordinate
The
Each of the
The
監視対象305は、その存在する方向が検知装置102の検知対象となるものである。
図3Aに示すように、指示装置103から直接に検知装置102に投光された光線を検知装置102が検出することで、検知装置102は、監視対象305の存在する方向を検出可能である。図3Aには監視対象305は図示されていないが、この場合の監視対象305は、検知装置102を一端として指示装置103の位置を通る半直線上、または、当該半直線の近傍に存在する。
また、図3Bに示すように、指示装置103から監視対象305に投光されて当該監視対象305から反射された光線を検知装置102が検知することで、検知装置102は、監視対象305の存在する方向を検出可能となる。
検知装置102は、監視対象305の存在する方向を指示する信号として、指示装置103から直接に検知装置102に投光された光線、または、指示装置103から監視対象305に投光されて当該監視対象305から反射された光線を検知して、撮影方向制御装置107に対し、監視対象305の存在する方向を撮影するよう、撮影装置101を制御する。
The
As shown in FIG. 3A, the
Further, as shown in FIG. 3B, the
The
ここで、撮影装置101は、例えば、120度の広角レンズを用いて広範な視野を撮影できる。よって、撮影装置101の視野内に監視対象305を映り込ませることさえできれば、その後は撮影装置101が元々備えている、既存の、例えば、被写体の顔検出を用いた認識機能等を活用して、所望の監視業務を行うことが可能である。
したがって、検知装置102の検知領域302は、例えば、撮影装置101の中心からみた、水平方向の360度をおよそ均等に3分割した3方向を区別できる配置とすることも可能である。また、例えば、鉛直方向を加味するならば、撮影装置101の中心からみた、鉛直方向の180度をおよそ均等に2分割した2方向を区別できる配置とする。具体的には、検知領域302は、撮影装置101の中心からみて、例えば、水平方向360度を均等に3分割し、鉛直方向180度を均等に2分割した領域とする場合、図4のように、2つの三角錐を組み合わせたものとなる。この場合の検知領域302の数は6個となる。
検知装置102の検知領域302の配置および検知領域302の数は、上記のように2つの三角錐を組み合わせたようなものに限らず、撮影装置101の視野、すなわち、広角度合いを考慮したうえで、監視対象305が存在する方向を指示する光線の向きを区別可能に、適宜配置すればよい。例えば、水平4方向および鉛直3方向を区別可能とし、検知領域302を12個とする形状等、撮影装置101を向かせたい向きに面して検知領域302を配置すればいかなる形状でもよい。
Here, the
Therefore, the
The arrangement of the
検知装置102が、図3で示したような球状のセンサで構成される場合、x−y−z座標軸301の各軸の交点である、球の中心を視点とし、検知装置102の球表面越しに現実空間を見ると仮定すると、現実空間と検知装置102の球表面とを対応付けてマッピングすることができる。
このように、現実空間と対応付けてマッピングが可能な検知装置102の球表面を、撮影装置101による撮影範囲の死角が生じないように、かつ、制御座標の分解能が十分となるように分割した複数のセンサ素子で構成する。例えば、ユニバーサル横メルカトル図法を用いて、球表面を60分割してできた各領域を各検知領域302とし、各検知領域302に単体の光センサ素子を割当てる等して、検知装置102を構成する。
When the
As described above, the sphere surface of the
x−y−z座標軸301は、空間図形の描画を補助する。
図3Aに示された検知領域302は、検知装置102が有する複数の検知領域302のうち、特に、指示装置103から直接に検知装置102に投光された光線を検知した検知領域302を示している。
図3Bに示された検知領域302は、検知装置102が有する複数の検知領域302のうち、特に、指示装置103から監視対象305に投光されて当該監視対象305から反射された光線を検知した検知領域を示している。
検知装置102は、例えば、図3Aまたは図3Bに示された検知領域302のような、監視対象305が存在する方向を指示する光線を検知した検知領域302に関する情報を、検知領域情報として撮影方向制御装置107に送信する。
The x-y-z coordinate
The
The
The
撮影方向制御装置107では、検知装置102から送信された検知領域情報を受信して、撮影装置101の撮影方向を決定する。撮影方向制御装置107は、例えば、撮影装置101のレンズが120度の広角レンズである場合、360度の撮影装置101の視野を3分割できるので、監視対象305の精確な位置情報を特定しなくても、撮影装置101の視野内に被写体を捉えられる撮影方向を決定することができる。
The imaging
なお、検知装置102で検知する光線には、外乱光等も含まれ得るため、検知装置102から送信される検知領域情報には、外乱光等を検知したことによる誤った検知領域情報もあり得る。そこで、例えば、監視対象305が存在する方向を指示する光線を特定のパターン(点滅)とすることで、検知装置102は、監視対象305が存在する方向を指示する光線と外乱光とを識別する精度が格段に向上し、検知精度が向上する。
検知装置102は、予め決められたパターンの光線を受信した場合に撮影方向制御装置107へ検知領域情報を通知し、それ以外の光線を受信した場合は、情報は破棄する等する。このように、検知装置102において、受信した光線の妥当性を判断し、誤検知を軽減することができる。撮影方向制御装置107の詳細な構成および動作については後述する。
Note that since the light beam detected by the
The
なお、上述した現実空間と検知装置102の表面とのマッピングは、検知装置102が球状以外のセンサで構成された場合においても、所定の視点を定めることで行うことが可能である。
The mapping between the above-described real space and the surface of the
図5は、この実施の形態1における検知装置102の動作の一例を説明するフローチャートである。
すなわち、図5は、図2のステップST202の詳細な動作の一例を説明するフローチャートである。
検知装置102は、検知領域302において、指示装置103から監視対象305が存在する方向を指示する信号として発せられた光線を検知する(ステップST501)。
FIG. 5 is a flow chart for explaining an example of the operation of the
That is, FIG. 5 is a flowchart for explaining an example of the detailed operation of step ST202 of FIG.
The
検知装置102は、ステップST501において光線を検知した検知領域302に関する情報を検知領域情報として、撮影方向制御装置107に送信する(ステップST502)。
The
次に撮影方向制御装置107を搭載した撮影装置101について説明する。
図6は、実施の形態1において、撮影方向制御装置107を搭載した撮影装置101の全体構成の一例を説明するための図である。
図6に示すように、撮影装置101は、撮影方向制御装置107を搭載している。また、図6に示すように、撮影装置101は、撮影部1011、焦点整合処理部1012、および、旋回処理部1013を備える。
Next, the
FIG. 6 is a diagram for explaining an example of the entire configuration of the
As shown in FIG. 6, the
撮影部1011は、監視対象領域の画像または映像を撮影する。撮影部1011は、撮影した、監視対象領域の画像または映像を、表示装置104、記録装置105、および、制御装置106に送信する(図1参照)。
焦点整合処理部1012は、撮影方向制御装置107からの制御に基づき、撮影部1011を焦点整合させる。
旋回処理部1013は、撮影方向制御装置107からの制御に基づき、撮影部1011を旋回させる。
The
The focus
The turning
撮影方向制御装置107は、検知装置102と通信可能に接続され、当該撮影方向制御装置107が有する受信部(図示省略)によって、検知装置102から検知領域情報を受信する。
撮影方向制御装置107は、受信部が検知装置102から受信した検知領域情報に基づき、検知装置102を基準とした場合の監視対象305が存在する方向へ撮影装置101の方向を制御する。
撮影方向制御装置107は、撮影制御部1071、および、変換部1072を備える。
撮影制御部1071は、制御装置106、または、変換部1072から取得したパラメータに基づき、焦点整合処理部1012、および、旋回処理部1013の動作を制御する。制御装置106は、例えば、上、下、左、または、右等を示す情報を、撮影制御部1071が求めるI/F(interface)に合うように変換し、変換後のパラメータを制御情報として撮影制御部1071に出力する。なお、当該制御装置106からの情報に基づく制御は、例えば、遠隔監視者がコントローラを操作して行う手動制御を想定している。
変換部1072は、受信部から、当該受信部が検知装置102から検知領域情報を取得し、当該検知領域情報を、撮影制御部1071が求めるI/Fに合うように変換し、変換後のパラメータを制御情報として撮影制御部1071に出力する。
撮影制御部1071が、制御装置106、または、変換部1072から取得したパラメータに基づき、焦点整合処理部1012、または、旋回処理部1013の動作を制御することで、撮影部1011の旋回処理等の動作が制御される。
The imaging
The photographing
The shooting
The
The
The
図7は、この実施の形態1の撮影方向制御装置107が撮影装置101を制御する動作の一例を説明するフローチャートである。
撮影方向制御装置107の受信部が、検知装置102から送信される検知領域情報を受信する(ステップST701)。受信部は、受信した検知領域情報を変換部1072に出力する。
FIG. 7 is a flow chart for explaining an example of the operation of controlling the photographing
The receiving unit of the photographing
変換部1072は、ステップST701において受信部から出力された検知領域情報を、撮影制御部1071が求めるI/Fに合うように変換し、変換後のパラメータを制御情報として撮影制御部に出力する(ステップST702)。具体的には、変換部1072は、図8に示すような変換表に基づき、検知領域情報の変換を行う。例えば、変換部1072は、受信部を介して、検知装置102から受信した検知領域Aを示す検知領域情報を取得した場合、当該検知領域情報を、パン角度が基準より0度、チルト角度が基準より45度の制御情報に変換し、撮影制御部1071へ出力する。検知領域A等は、検知装置102または現実空間に座標軸を設け、座標で指定してもよい。なお、図8に示すような変換表は、予め作成され、撮影方向制御装置107が参照可能な場所に保存されている。
The
撮影制御部1071は、ステップST702において変換部1072から出力された制御情報に基づき、焦点整合処理部1012、または、旋回処理部1013の動作を制御する。これにより、撮影部1011の旋回処理等の動作が制御される(ステップST703)。
撮影部1011は、撮影した画像または映像を、表示装置104、および、記録装置105に送信する。
The
The photographing
以下、この発明の実施の形態1の監視システムの適用例を、図9〜11を用いて説明する。
以下では、例えば、この発明の実施の形態1の監視システムを、駅のホームおよび線路を監視する監視システムに適用した例を示す。この場合、駅のホームおよび線路が監視対象領域となる。また、現場監督者は、駅のホームにいる駅員1001であり、遠隔監視者は、管理室等にいて、当該管理室等に設置された表示装置に表示された画像または映像を確認することで、駅のホームを監視する駅員である。
当該監視システムにおいては、撮影装置101である監視カメラ801が駅のホーム902および線路901を撮影可能な位置に旋回可能に設置され、現場監督者である駅員1001が指示装置103であるレーザポインタ1002を携帯するものとする。
また、監視カメラ801の近傍には、検知装置102である球状のセンサが設置されるものとする。なお、以下の説明で用いる図9〜図11においては、検知装置102の記載は省略している。
Hereinafter, the application example of the monitoring system of Embodiment 1 of this invention is demonstrated using FIGS. 9-11.
In the following, for example, an example is shown in which the monitoring system according to the first embodiment of the present invention is applied to a monitoring system that monitors a station home and a track. In this case, the station's home and track become the monitoring target area. In addition, the site supervisor is
In the monitoring system, a
Further, in the vicinity of the
図9は、実施の形態1において、監視カメラ801の撮影範囲802と撮影可能範囲803の一例を示す模式図である。図9において上に示す図が、撮影範囲802を示す図であり、図9において下に示す図が、撮影可能範囲803を示す図である。
ここでは、撮影範囲802とは、現在の設置位置における監視カメラ801の撮影範囲をいう。また、撮影可能範囲803とは、現在の設置位置では監視カメラ801の撮影範囲外ではあるが、監視カメラ801を旋回させる等の制御を行うことで撮影可能となる撮影範囲をいう。
監視カメラ801は、ズーム、フォーカス、パン、および、チルトのカメラ制御が可能な撮影装置101である。
FIG. 9 is a schematic diagram showing an example of the
Here, the
The
図10は、実施の形態1の監視システムを駅のホーム902および線路901を監視する監視システムに適用した例における、監視カメラ801の設置環境の一例を示す図である。
図10に示すように、列車の線路901、および、駅のホーム902の状況を監視できる位置に、監視カメラ801が設置される。
FIG. 10 is a diagram showing an example of an installation environment of the
As shown in FIG. 10, a
図11は、図10に示すような監視システムにおいて、駅員1001が監視対象者1003を発見した場合に監視カメラ801の撮影方向が制御される動作の一例を説明するための図である。
監視カメラ801は、時刻t1において、ある向き(図11のaで示す)を撮影し、時刻t2において時刻t1とは異なる向き(図11のbで示す)を撮影する。
時刻t1において、監視カメラ801がaの向きを向いており、ホーム902にいる駅員1001が監視対象となる不審者を発見したとする。当該不審者を監視対象者1003とする。
駅員1001は、当該監視対象者1003に対し、携帯しているレーザポインタ1002で投光する(投光された光線を図11のcで示す)。
FIG. 11 is a diagram for explaining an example of the operation in which the shooting direction of the
The
At time t1, it is assumed that the
The
そうすると、図11のaの向きを撮影していた監視カメラ801は、図11のaの向きを撮影する撮影範囲から、図11のbの向きを撮影する撮影範囲となる位置まで旋回する。
具体的には、検知装置102が有する検知領域が、監視対象者1003によって反射されたレーザポインタ1002からの光線を検知し、検知装置102は、検知領域情報を撮影方向制御装置107に送信する。
撮影方向制御装置107では、検知領域情報に基づき、監視対象者1003が存在する方向を撮影方向とするよう、監視カメラ801の焦点整合処理部1012、または、旋回処理部1013を制御する。その結果、監視カメラ801の撮影方向が制御され、監視カメラ801の撮影範囲に監視対象者1003が含まれるようになる。
Then, the
Specifically, the detection area of the
The photographing
なお、レーザポインタ1002が投光する光線は、可視光であっても不可視光であってもよく、常時点灯であっても点滅であってもよい。つまり、光線の見た目上の色は問わず、投光パターンも任意でよい。また、レーザポインタ1002は、1つ以上の光線を同時に投光するものであってもよいし、非同時に発光するものであってもよい。
The light beam emitted by the
このように、実施の形態1の監視システムにおいては、例えば、現場監督者等の当該監視システムのユーザは、指示装置103を用いて、検知装置102に直接投光する、または、監視対象に投光するという簡易な手段によって、撮影装置101を監視対象が存在する方向に向けることができる。これにより、例えば、現場監督者が、監視対象が存在する方向を把握したタイミングで、撮影装置101の撮影範囲を速やかに当該監視対象に向けることが可能になるとともに、撮影装置101から遠隔地にある表示装置に対して、速やかに監視対象の映りこんだ画像または映像を送信することが可能となる。
As described above, in the monitoring system of the first embodiment, for example, the user of the monitoring system such as a field supervisor directly projects light to the
上述した従来技術では、広角画像を撮影するセンサカメラの撮影範囲外に監視対象が存在する場合、撮影用カメラで当該監視対象を撮影するためには、例えば、当該センサカメラ付近にいる現場監督者が当該監視対象を認識し、監視対象領域から離れた場所にいる遠隔監視者に対して、監視対象を認識した旨を知らせる必要がある。しかし、この場合、現場監督者が当該監視対象に関する情報を伝える際に、認識の齟齬、あるいは、人的ミス等が生じる可能性がある。
また、現場監督者は、センサカメラの設置場所付近に表示装置が設置されていなければ、監視対象が当該センサカメラの撮影範囲内に含まれているかどうかを確認することもできない。
このように、従来技術では、撮影装置が撮影可能な範囲内に存在するものの現在の撮影装置の撮影範囲には含まれていない監視対象が認識された場合に、当該監視対象を含む範囲を撮影装置の撮影範囲とするよう撮影装置の制御ができない場合があり、その場合、撮影装置を制御するのに労力を要し、また、撮影装置の撮影範囲に監視対象が含まれるように撮影装置の向きを正確に調整することが困難となる。
また、従来技術では、センサカメラの撮影範囲内に監視対象が存在していても、当該監視対象が予め定められた条件に合致していなければ、監視対象を認識することができず、撮影用カメラを監視対象に向けることができない。
In the above-described prior art, when a monitoring target is present outside the imaging range of a sensor camera that captures a wide-angle image, in order to capture the monitoring target with the imaging camera, for example, a site supervisor who is in the vicinity of the sensor camera It is necessary to recognize the target to be monitored and to notify the remote monitor who is away from the monitoring target area that the target to be monitored has been recognized. However, in this case, when the on-site supervisor conveys information on the subject of monitoring, there is a possibility that a misunderstanding or human error may occur.
In addition, the on-site supervisor can not confirm whether the monitoring target is included in the imaging range of the sensor camera if the display device is not installed near the installation place of the sensor camera.
As described above, in the related art, when the monitoring target that is within the range where the imaging device can capture is recognized but not included in the current imaging range of the imaging device is recognized, the range including the monitoring target is captured In some cases, it may not be possible to control the imaging device to set the imaging range of the device, in which case labor is required to control the imaging device, and the monitoring target is included in the imaging range of the imaging device. It becomes difficult to adjust the direction accurately.
Further, in the prior art, even if the monitoring target exists within the shooting range of the sensor camera, the monitoring target can not be recognized if the monitoring target does not match the predetermined condition, and the shooting The camera can not be directed to the monitoring target.
これに対し、本願の実施の形態1の監視システムでは、上述のとおり、現場監督者が携帯する指示装置103を用いて、検知装置102に直接投光する、または、監視対象に対して投光することで、監視対象の存在する方向を指示し、撮影装置101の撮影方向を制御することができる。
その際、現場監督者が遠隔監視者に対して監視対象が存在する方向を説明する等の動作が必要となることがないため、現場監督者と遠隔監視者の間で認識の齟齬、あるいは、人的ミス等が生じる可能性も抑制できる。
また、現場監督者が、指示装置103を用いて監視対象が存在する方向を指示することになるため、人の判断によって監視対象の判断、および、指示がなされ、より柔軟に、あるいは、より正確に、撮影装置101によって監視すべき監視対象を捉えることができる。
On the other hand, in the monitoring system according to the first embodiment of the present invention, as described above, the
At that time, since the field supervisor does not need to perform an operation such as explaining the direction in which the surveillance target exists to the remote surveillance, there is a need for a recognition trap between the field surveillance and the remote surveillance, or It is also possible to suppress the possibility of human error or the like.
In addition, since the on-site supervisor instructs the direction in which the monitoring target is present using the
図12A、図12Bは、この発明の実施の形態1に係る撮影方向制御装置107のハードウェア構成の一例を示す図である。
この発明の実施の形態1において、撮影制御部1071は、処理回路111により実現される。すなわち、撮影方向制御装置107は、検知装置102から受信した検知領域情報に基づき、撮影装置101の撮影方向の制御を行うための処理回路111を備える。
処理回路111は、図12Aに示すように専用のハードウェアであっても、図12Bに示すようにメモリ115に格納されるプログラムを実行するCPU(Central Processing Unit)116であってもよい。
12A and 12B are diagrams showing an example of a hardware configuration of the photographing
In the first embodiment of the present invention, the
The
処理回路111が専用のハードウェアである場合、処理回路111は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field−Programmable Gate Array)、またはこれらを組み合わせたものが該当する。
When the
処理回路111がCPU116の場合、撮影制御部1071の機能は、ソフトウェア、ファームウェア、または、ソフトウェアとファームウェアとの組み合わせにより実現される。すなわち、撮影制御部1071は、HDD(Hard Disk Drive)112、メモリ115等に記憶されたプログラムを実行するCPU116、システムLSI(Large−Scale Integration)等の処理回路により実現される。また、処理回路111内にプログラムを記憶してもよい。また、HDD112、メモリ115等に記憶されたプログラムは、撮影制御部1071の手順や方法をコンピュータに実行させるものであるとも言える。ここで、メモリ115とは、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable Read Only Memory)、EEPROM(Electrically Erasable Programmable Read−Only Memory)、HDD112等の、不揮発性または揮発性の半導体メモリや、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、DVD(Digital Versatile Disc)等が該当する。
When the
また、撮影方向制御装置107は、撮影装置101、あるいは、検知装置102等の装置との通信を行う入力インタフェース装置113、出力インタフェース装置114を有する。受信部は、例えば、入力インタフェース装置113によって構成される。
The imaging
以上のように、この実施の形態1によれば、監視システムは、監視対象領域を撮影する撮影装置101と、監視対象領域内の特定位置から発信された監視対象が存在する方向を指示する信号を検知する検知装置102と、検知装置102が検知した監視対象が存在する方向を指示する信号に基づき、撮影装置101の撮影方向を制御する撮影方向制御装置107とを備えるように構成したので、現在の撮影装置の撮影範囲には存在しない監視対象を撮影するように撮影装置を制御することができる。
As described above, according to the first embodiment, the monitoring system transmits a signal indicating the direction in which the monitoring target is present, which is transmitted from a specific position within the monitoring target area, and the
実施の形態2.
実施の形態1では、検知装置102が指示装置103からの指示を検知し、当該検知装置102が検知した検知領域情報に基づいて、撮影方向制御装置107が撮影装置101の撮影方向を制御するようにしていた。
この実施の形態2では、さらに、撮影方向制御装置107が制御した撮影装置101の撮影方向の履歴から、頻度の高い撮影方向を学習する実施の形態について説明する。
Second Embodiment
In the first embodiment, the
In the second embodiment, an embodiment will be described in which the shooting direction with high frequency is learned from the history of the shooting direction of the
図13は、実施の形態2に係る監視システムの全体構成の一例を示す図である。
図13において、実施の形態1において図1を用いて説明した構成と同様の構成については、同じ符号を付して重複した説明を省略する。なお、この実施の形態2においても、一例として、図13に示すように、撮影装置101aが撮影方向制御装置107を搭載するものとするが、これに限らず、撮影方向制御装置107は撮影装置101aの外部に備えられるものとしてもよい。
撮影方向制御装置107の構成については、実施の形態1において図6を用いて説明した構成と同様であるため、同じ符号を付して重複した説明を省略する。
FIG. 13 is a diagram showing an example of the entire configuration of a monitoring system according to a second embodiment.
In FIG. 13, the same components as those described with reference to FIG. 1 in the first embodiment are denoted by the same reference numerals, and redundant description will be omitted. In the second embodiment, as an example, as shown in FIG. 13, the photographing
The configuration of the photographing
図13に示す監視システムは、図1に示す監視システムとは、撮影装置101a、表示装置104aおよび記録装置105aの詳細な構成が異なる。実施の形態1の監視システムにおける撮影装置101は、メタデータ(例えば、パン角度、チルト角度、ズーム値等)配信機能を備えていなかったのに対し、実施の形態2の監視システムにおける撮影装置101aは、メタデータ配信機能を備える点が異なる。また、実施の形態1の監視システムにおける表示装置104は、予め指定した撮影装置の撮影方向(パン角度、チルト角度、ズーム値等)をプリセット位置とし、プリセット位置に撮影装置を制御するプリセット機能を有する表示制御装置108を備えていなかったのに対し、実施の形態2の監視システムにおける表示装置104aは、プリセット機能を有する表示制御装置108を備える点が異なる。また、実施の形態1の監視システムにおける記録装置105は、頻度の高い撮影方向を学習する学習機能を備えていなかったのに対し、実施の形態2の監視システムにおける記録装置105aは、学習機能を備える点が異なる。
The monitoring system illustrated in FIG. 13 is different from the monitoring system illustrated in FIG. 1 in detailed configurations of the
撮影装置101aは、メタデータ配信機能を備える。メタデータは映像データと同様にストリームとして配信してもよいし、映像ストリームにメタデータを埋め込んでもよい。具体的には、メタストリームを配信する、メタデータ値を画像データとして映像データに重畳する、JPEGのヘッダ領域であるAPPnに格納する、H.264|MPEG−4 AVCのヘッダ領域であるSEIに格納する等である。
The
表示装置104aは、表示制御装置108を搭載する。
なお、実施の形態2では、一例として、図13に示すように、表示装置104aが表示制御装置108を搭載するものとするが、これに限らず、表示制御装置108は表示装置104aの外部に備えられるものとしてもよい。
表示制御装置108は、外部装置(例えば、記録装置105a)からプリセット候補を提案できるように、外部I/F(interface)を公開している。また、プリセット位置は表示制御装置108で保存してもよいし、記録装置105aで記録してもよい。
表示制御装置108は、図13に示すように、制御部1081と受付部1082とを備える。
制御部1081は、受付部1082からの各種指示を実行する。
受付部1082は、外部I/F(記録装置105a、遠隔監視者等)からの各種指示を受け付け、必要に応じて制御部1081に送信する。
受付部1082は、記録装置105aから送信されるプリセット候補に関する情報(以下、提案プリセット情報という)を受け付け、表示装置104aに、プリセット候補を提案する画面等を表示させる。また、受付部1082は、遠隔監視者が確認指示画面を選択することによる、プリセット候補の内容確認を行う旨の指示情報(第1の指示情報)を受け付けた場合、制御部1081に、撮影方向制御装置107の撮影制御部1071に対して、記録装置105a(詳細は後述する)から受信済みの提案プリセット情報を送信し、表示装置104aにプリセット化実施有無を選択する画面等を表示させる。また、受付部1082は、表示装置104aより受信したプリセット化を行う、あるいは、プリセット化を行わない旨の指示情報(第2の指示情報)を、記録装置105aに送信する。
The
In the second embodiment, as an example, as shown in FIG. 13, the
The
The
The
The receiving
The accepting
記録装置105aは、提案プリセット送受信制御部1051と、記録制御部1052と、記録部1053と、提案プリセット演算部1054とを備える。
提案プリセット送受信制御部1051は、提案プリセット演算部1054から出力される提案プリセット情報を、表示制御装置108へ送信する。また、提案プリセット送受信制御部1051は、表示制御装置108から送信される第2の指示情報を受信し、提案プリセット演算部1054に出力する。
The
The proposal preset transmission /
記録制御部1052は、撮影方向制御装置107から送信された撮影装置101aの撮影方向の制御情報を受信し、学習データとして記録部1053に記録する。
記録部1053は、記録制御部1052の制御に基づき、撮影装置101aの撮影方向の制御情報を、学習データとして記録する。
なお、この実施の形態2では、撮影方向制御装置107の撮影制御部1071は、撮影装置101aの撮影方向を変更する制御を行うと、変更後の撮影方向の画像データまたは映像データ、および、その制御時のパラメータを、記録装置105aに送信する。例えば、画像データまたは映像データ、および、制御パラメータは、撮影装置101aから各々ストリームとして配信する。
The
The
In the second embodiment, when the
提案プリセット演算部1054は、記録部1053に記録された学習データに基づき、撮影装置101aの撮影方向を学習し、頻度の高い撮影方向を、プリセット候補として提案する撮影方向と決定する。記録部1053に記録された学習データとは、上述のとおり撮影方向の制御情報を含むデータであり、具体的には、制御時のパラメータであるパン角度、チルト角度、ズーム値等を含むデータである。
提案プリセット演算部1054は、プリセット候補として提案する撮影方向の制御情報を、提案プリセット情報として、提案プリセット送受信制御部1051に出力する。
The proposal
The proposal
実施の形態2の監視システムの動作について説明する。
図14は、実施の形態2の監視システムの動作の一例を説明するフローチャートである。
実施の形態2では、上述のとおり、撮影方向制御装置107の撮影制御部1071は、撮影装置101aに対して撮影方向の制御を行うと、撮影方向の制御情報を、記録装置105aの記録制御部1052に送信する。
図14を用いて以下に説明する動作は、例えば、現場監督者からの指示を受け付けたタイミングで行われるものとする。なお、これは一例に過ぎず、以下に説明する動作は、その他のタイミングで行われるものとしてもよい。
The operation of the monitoring system of the second embodiment will be described.
FIG. 14 is a flowchart for explaining an example of the operation of the monitoring system of the second embodiment.
In the second embodiment, as described above, when the photographing
The operation described below with reference to FIG. 14 is assumed to be performed, for example, at the timing when an instruction from the on-site supervisor is received. Note that this is merely an example, and the operations described below may be performed at other timings.
記録装置105aの記録制御部1052は、撮影方向制御装置107から送信された、撮影方向の制御情報を受信し(ステップST1401)、学習データとして記録部1053に記録させる(ステップST1402)。
The
提案プリセット演算部1054は、記録部1053に記録されている学習データに基づき、撮影方向の頻度を学習する(ステップST1403)。
提案プリセット演算部1054は、撮影装置101aの撮影方向の頻度を、例えばクラスタリング等の機械学習により学習する。
具体的には、提案プリセット演算部1054は、記録部1053に記録されている学習データに基づき、撮影方向の頻度を、学習する。撮影方向の頻度とは、例えば、該当の撮影方向が指定された直近1週間の指定回数、該当の撮影方向が指定された合計指定回数、該当の撮影方向が指定された連続指定時間等である。提案プリセット演算部1054は、学習の結果、比較的高い頻度で現れる撮影方向を「高頻度」の撮影方向として分類する。
The proposal
The proposal
Specifically, the proposal preset
提案プリセット演算部1054は、ステップST1403で学習した結果、高頻度に分類される撮影方向があるかどうかを判定する(ステップST1404)。
As a result of learning in step ST1403, the proposal preset
ステップST1404において、高頻度に分類される撮影方向がないと判定した場合(ステップST1404の“NO”の場合)、ステップST1401に戻る。 When it is determined in step ST1404 that there is no shooting direction classified into high frequency (in the case of “NO” in step ST1404), the process returns to step ST1401.
ステップST1404において、高頻度に分類される撮影方向があると判定した場合(ステップST1404の“YES”の場合)、提案プリセット演算部1054は、高頻度に分類されると判定した撮影方向の制御情報を、提案プリセット情報として、提案プリセット送受信制御部1051に出力する。なお、例えば、提案プリセット演算部1054は、高頻度に分類されると判定した撮影方向が複数ある場合は、一番頻度が高いと判定した撮影方向の制御情報を、提案プリセット情報とする。
提案プリセット送受信制御部1051は、提案プリセット演算部1054から提案プリセット情報を取得すると、表示制御装置108に対して、当該提案プリセット情報を送信する(ステップST1405)。
If it is determined in step ST 1404 that there is a shooting direction classified into high frequency (in the case of “YES” in step ST 1404), the control information of the shooting direction determined to be classified into high frequency Are output to the proposed preset transmission /
When the proposal preset transmission /
記録装置105aから提案プリセット情報を受信すると、表示制御装置108の受付部1082は、表示装置104aに対して、受信した提案プリセット情報に基づく頻度の高い撮影方向について、その内容の確認を行うかどうかの指定を遠隔監視者から受け付けるための、確認指示画面を表示させる。確認指示画面の表示は、例えば、GUI(Graphical User Interface)を用いて行われる。
ここで、図15は、実施の形態2において、表示制御装置108の受付部1082が、提案プリセット情報を受信した際に表示装置104aに表示させる画面の一例を説明する図であり、図15Aが、確認指示画面の一例である。図15Bおよび図15Cで示す画面例については後述する。
When the proposal preset information is received from the
Here, FIG. 15 is a diagram for explaining an example of a screen displayed on the
表示装置104aに、図15Aに示すような確認指示画面が表示されると、遠隔監視者は、当該確認指示画面を確認し、頻度の高い撮影方向の内容確認を行うかどうかを判断する。
そして、遠隔監視者は、内容確認を行う、または、内容確認を行わない旨の指示を、確認指示画面から、タッチパネル、マウス、キーボード等の入力装置(図示省略)を用いて入力する。
例えば、図15Aの確認指示画面でいうと、遠隔監視者は、内容確認を行う場合は「はい」を、内容確認を行わない場合は「いいえ」をタッチパネルで選択する等して、入力する。
表示制御装置108の受付部1082は、入力装置から入力された、内容確認を行う、または、内容確認を行わない旨の第1の指示情報を受け付け、記録装置105aより受信済みの提案プリセット情報を、制御部1081に送信する。
When the confirmation instruction screen as shown in FIG. 15A is displayed on the
Then, the remote monitoring person confirms the content or inputs an instruction not to confirm the content from the confirmation instruction screen using an input device (not shown) such as a touch panel, a mouse, and a keyboard.
For example, in the confirmation instruction screen of FIG. 15A, the remote monitoring person inputs “Yes” to confirm the content, “No” on the touch panel when the content confirmation is not performed, or the like.
The
受付部1082は、内容確認を行う旨の第1の指示情報を受け付けたかどうかを判定する(ステップST1406)。
ステップST1406において、内容確認を行う旨の第1の指示情報を受け付けていない場合(ステップST1406の“NO”の場合)、すなわち、内容確認を行わない旨の第1の指示情報を受け付けた場合、ステップST1401に戻る。なお、遠隔監視者から内容確認を行わない旨の第1の指示情報を受け付けた場合、受付部1082は、ステップST1405において記録装置105aの提案プリセット送受信制御部1051から受信した提案プリセット情報を破棄する。
The receiving
In step ST1406, if the first instruction information to perform content confirmation has not been received (in the case of “NO” in step ST1406), that is, if the first instruction information to not perform content confirmation is received, It returns to step ST1401. When the first instruction information to the effect that content confirmation is not performed is received from the remote monitoring person, the
ステップST1406において、内容確認を行う旨の第1の指示情報を受け付けた場合(ステップST1406の“YES”の場合)、受付部1082は、制御部1081に対して、ステップST1405において、記録装置105aから受信済みの提案プリセット情報を送信し、制御部1081は、撮影方向制御装置107の撮影制御部1071に対して、同情報を送信する。
撮影制御部1071は、制御部1081から提案プリセット情報を受信すると、受信した提案プリセット情報に基づく撮影方向となるよう、撮影装置101aの撮影方向を制御する。具体的な動作は、実施の形態1で説明した撮影方向の制御動作と同様であるため重複した説明を省略する(図7のステップST703参照)。
撮影制御部1071により撮影装置101aの撮影方向が制御されると、撮影装置101aの撮影部1011は、撮影方向制御装置107の制御に基づく撮影方向で、監視対象領域の画像または映像を撮影し、当該画像または映像、および、制御パラメータを、表示装置104a、および、記録装置105aに送信する。
実施の形態2では、このとき、撮影装置101aの撮影部1011は、確認内容による制御指示時の制御パラメータが学習データとなるのを防ぐため、例えば、その旨を、画像または映像とあわせて記録装置105aに送信する。なお、これは一例に過ぎず、提案プリセットによる制御時の制御パラメータであることが判別できるようになっていればよい。
In step ST1406, when the first instruction information to confirm the content is received (in the case of “YES” in step ST1406), the accepting
When the
When the shooting direction of the
In the second embodiment, at this time, the photographing
表示装置104aでは、撮影部1011から送信された画像または映像が表示される。
表示制御装置108の受付部1082は、表示装置104aに対して、表示している画像または映像が撮影された撮影方向をプリセット化するかどうかを確認するプリセット化要否指示画面を表示させる。
The
The
図15Bは、実施の形態2において、表示制御装置108の受付部1082が表示装置104aに表示させるプリセット化要否指示画面の一例を示す図である。受付部1082は、表示装置104aに、図15Bに示すようなプリセット化要否指示画面を、例えば、ポップアップ画面等で表示させる。
遠隔監視者は、現在、表示装置104aに表示されている画像または映像を確認し、当該画像または映像が撮影された撮影方向をプリセット化する、または、プリセット化しない旨の指示を、プリセット化要否指示画面から入力装置を用いて入力する。
例えば、図15Bのプリセット化要否指示画面でいうと、遠隔監視者は、プリセット化を行う場合は「はい」を、行わない場合は「いいえ」をタッチパネルで選択する等して、入力する。
表示制御装置108の受付部1082は、入力装置から入力された、プリセット化を行う、または、プリセット化を行わない旨の第2の指示情報を受け付ける。
受付部1082は、入力装置から入力された、プリセット化を行う、あるいは、プリセット化を行わない旨の第2の指示情報を、記録装置105aに送信する。このとき、受付部1082は、例えば、ステップST1405において記録装置105aの提案プリセット送受信制御部1051から受信した提案プリセット情報に第2の指示情報を付与して、記録装置105aに送信するようにする。
受付部1082は、入力装置から入力された、プリセット化を行う、あるいは、プリセット化を行わない旨の第2の指示情報を、記録装置105aに送信後、表示装置104aに、登録完了画面を表示させる。
図15Cは、実施の形態2において、受付部1082が表示装置104aに表示させる登録完了画面の一例を示す図である。プリセット名称はデフォルト設定として、プリセット化を行う旨の第2の指示情報を受け付けた際に受付部1082が設定するようにしてもよいし、遠隔監視者に対して、当該遠隔監視者がプリセット化を行う旨の第2の指示情報を入力する際に、その都度入力させてもよい。
FIG. 15B is a diagram showing an example of a presetting necessity indication screen that the
The remote monitor checks the image or video currently displayed on the
For example, in the preset necessity indication screen of FIG. 15B, the remote monitoring person inputs “Yes” when performing preset, “No” when not performing with the touch panel, or the like.
The receiving
The
The
FIG. 15C is a diagram showing an example of a registration completion screen displayed by the
記録装置105aの提案プリセット送受信制御部1051は、表示制御装置108から、プリセット化を行う旨の第2の指示情報を受信したかどうかを判定する(ステップST1407)。
ステップST1407において、プリセット化を行う旨の第2の指示情報を受信していない場合(ステップST1407の“NO”の場合)、すなわち、プリセット化を行わない旨の第2の指示情報を受信した場合、提案プリセット送受信制御部1051は、提案プリセット演算部1054に対し、プリセット化を行わない旨をフィードバックし(ステップST1411)、ステップST1409へ進む。
The proposed preset transmission /
In step ST1407, when the second instruction information indicating that preset is to be performed has not been received (“NO” in step ST1407), that is, the second instruction information indicating that preset is not performed is received. The proposed preset transmission /
ステップST1407において、プリセット化を行う旨の第2の指示情報を受信した場合(ステップST1407の“YES”の場合)、提案プリセット送受信制御部1051は、提案プリセット演算部1054に対し、プリセット化を行う旨をフィードバックする(ステップST1408)。
In step ST1407, when the second instruction information indicating that preset is to be performed is received (in the case of “YES” in step ST1407), the proposed preset transmission /
プリセット化を行う旨、または、プリセット化を行わない旨がフィードバックされると、提案プリセット演算部1054は、例えば、プリセット化を行う旨のフィードバックである場合、ステップST1404において提案プリセット情報とした、撮影装置101aの制御情報を学習の対象外とする。これは一例に過ぎず、遠隔監視者が選択する正解の情報を、学習システムにフィードバックし効率化を図る構成とすればよい。
When feedback to the effect that presetting is to be performed or nonpresetting is to be fed back, for example, in the case where feedback to the effect that presetting is to be performed, the proposed
なお、上記の説明では、提案プリセット演算部1054は、高頻度に分類されると判定した撮影方向が複数ある場合は、一番頻度が高いと判定した撮影装置101aの撮影方向の制御情報を、提案プリセット情報としていたが、これに限らず、例えば、提案プリセット演算部1054は、高頻度に分類されると判定した全ての撮影方向について、提案プリセット情報を作成するようにしてもよい。この場合、表示制御装置108では、例えば、確認指示画面において、どの撮影方向に関する提案プリセット情報の確認を行うかの指定を受け付けられるようにし、遠隔監視者は、任意に指定し制御された単一または複数の画像または映像から、所望の提案プリセット情報を任意に選択するようにする。
In the above description, when there are a plurality of shooting directions determined to be classified as high frequency, the proposed
以上のように、実施の形態2によれば、監視システムは、あらかじめ撮影方向の制御情報を指定し保持しておけるプリセット機能を有する表示制御装置108、または、記録装置105aを備え、撮影方向制御装置107が制御したことによる、撮影装置101aの撮影方向の制御情報を受信する記録制御部1052と、記録制御部1052が受信した撮影装置101aの撮影方向の制御情報を学習データとして記録する記録部1053と、記録部1053が記録した前記学習データに基づき、撮影装置101aの撮影方向を学習し、高頻度の撮影方向をプリセット候補とする提案プリセット演算部1054とを有する記録装置105aを備えるように構成したので、過去の制御状況に基づき、高頻度に指定される撮影方向を自動で抽出し、プリセット化させることができる。
これにより、例えば、遠隔監視者が見落としている撮影範囲を、現場監督者の撮影方向の指定情報から特定できる。監視システムにおいて、現場監督者の撮影方向の指定情報から撮影方向の重要度を学習し、遠隔監視者がプリセット化していない見落とし範囲における撮影方向についても、プリセット化の提案をすることで、監視対象を逃す事態を低減することができる。
As described above, according to the second embodiment, the monitoring system includes the
Thus, for example, the shooting range overlooked by the remote monitor can be specified from the designation information of the shooting direction of the on-site supervisor. In the surveillance system, the importance of the shooting direction is learned from the specified information of the shooting direction of the on-site supervisor, and the monitoring target is proposed by suggesting the shooting direction in the oversight range that is not preset by the remote monitoring person. Can be reduced.
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。 In the scope of the invention, the present invention allows free combination of each embodiment, or modification of any component of each embodiment, or omission of any component in each embodiment. .
101、101a 撮影装置、102 検知装置、103 指示装置、104、104a 表示装置、105、105a 記録装置、106 制御装置、107 撮影方向制御装置、108 表示制御装置、111 処理回路、112 HDD、113 入力インタフェース装置、114 出力インタフェース装置、115 メモリ、116 CPU、302 検知領域、305 監視対象、801、801a 監視カメラ、802 撮影範囲、803 撮影可能範囲、901 線路、902 ホーム、1001 現場監督者、1002 レーザポインタ、1003 監視対象者、1011 撮影部、1012 焦点整合処理部、1013 旋回処理部、1051 送受信制御部、1052 記録制御部、1053 記録部、1054 プリセット演算部、1071 撮影制御部、1072 変換部、1081 制御部、1082 受付部。 101, 101a imaging apparatus, 102 detection apparatus, 103 instruction apparatus, 104, 104a display apparatus, 105, 105a recording apparatus, 106 control apparatus, 107 imaging direction control apparatus, 108 display control apparatus, 111 processing circuit, 112 HDD, 113 inputs Interface device, 114 output interface device, 115 memory, 116 CPU, 302 detection area, 305 monitoring target, 801, 801 a surveillance camera, 802 imaging range, 803 imaging available range, 901 line, 902 home, 1001 field supervisor, 1002 laser Pointer, 1003 monitoring target, 1011 imaging unit, 1012 focus alignment processing unit, 1013 rotation processing unit, 1051 transmission / reception control unit, 1052 recording control unit, 1053 recording unit, 1054 preset operation unit, 107 Imaging control unit, 1072 conversion unit, 1081 control unit, 1082 receiving unit.
Claims (10)
前記監視対象領域内の特定位置から発信された監視対象が存在する方向を指示する信号を検知する検知装置と、
前記検知装置が検知した監視対象が存在する方向を指示する信号に基づき、前記撮影装置の撮影方向を制御する撮影方向制御装置
とを備えた監視システム。 An imaging device for imaging the monitoring target area;
A detection device for detecting a signal indicating a direction in which the monitoring target is present, which is transmitted from a specific position in the monitoring target area;
A monitoring direction control device configured to control a shooting direction of the shooting device based on a signal indicating a direction in which a monitoring target detected by the detection device is present.
前記検知装置は、前記指示装置によって発信された監視対象が存在する方向を指示する信号を検知する
ことを特徴とする請求項1記載の監視システム。 It further comprises an indication device for emitting a signal indicating the direction in which the monitoring target exists from a specific position in the monitoring target area,
The monitoring system according to claim 1, wherein the detection device detects a signal indicating the direction in which the monitoring target transmitted by the pointing device is present.
ことを特徴とする請求項2記載の監視システム。 The pointing device transmits a signal indicating a direction in which the monitoring target is present from the specific position, with the position where the monitoring target is present in the monitoring target area as a specific position. Monitoring system.
ことを特徴とする請求項3記載の監視システム。 The pointing device emits a light beam, projects the light beam to the monitoring target, and transmits the light beam reflected by the monitoring target as a signal indicating a direction in which the monitoring target is present. The monitoring system according to claim 3, wherein
ことを特徴とする請求項2記載の監視システム。 The monitoring system according to claim 2, wherein the pointing device emits a light beam and transmits the light beam directly projected to the detection device as a signal indicating a direction in which a monitoring target exists.
前記記録制御部が受信した前記撮影装置の撮影方向の制御情報を学習データとして記録する記録部と、
前記記録部が記録した前記学習データに基づき、前記撮影装置の撮影方向を学習し、高頻度の撮影方向をプリセット候補とする提案プリセット演算部とを有する記録装置
を備えた請求項1から請求項5のうちのいずれか1項記載の監視システム。 A recording control unit that receives control information of the imaging direction of the imaging device under control of the imaging direction control device;
A recording unit that records, as learning data, control information of the imaging direction of the imaging device received by the recording control unit;
A recording apparatus comprising: a proposed preset calculation unit which learns the photographing direction of the photographing device based on the learning data recorded by the recording unit, and takes a high frequency photographing direction as a preset candidate. 5. A monitoring system according to any one of 5.
前記表示制御装置が前記プリセット候補に基づく、あらかじめ指定された撮影方向をプリセット化する第2の指示情報を受け付けた場合、当該表示制御装置、または、前記記録装置は、前記プリセット候補に基づく、あらかじめ指定された撮影方向の制御情報を、プリセット位置の情報として保持する
ことを特徴とする請求項6記載の監視システム。 The display control apparatus further includes a display control device that receives an instruction as to whether or not to preset a shooting direction designated in advance based on the preset candidate.
When the display control device receives the second instruction information for presetting the imaging direction specified based on the preset candidate, the display control device or the recording device is previously based on the preset candidate. 7. The monitoring system according to claim 6, wherein control information of a designated imaging direction is held as information of a preset position.
ことを特徴とする請求項6記載の監視システム。 The proposed preset operation unit learns the photographing direction of the photographing device based on the second instruction information for instructing the photographing direction of the photographing device as the preset candidate to be the preset position and the preset position. The monitoring system according to claim 6, wherein
前記撮影方向制御装置は、前記受付部から前記プリセット候補に関する情報を受信した場合、当該プリセット候補に基づく撮影方向となるよう前記撮影装置の撮影方向を制御し、
前記受付部は、前記撮影方向制御装置が制御した撮影方向をプリセット化する第2の指示情報を受け付けた場合に、前記提案プリセット演算部に対して当該第2の指示情報を送信し、
前記提案プリセット演算部は、前記プリセット候補とした前記撮影装置の撮影方向をプリセット化する
ことを特徴とする請求項6記載の監視システム。 When the information regarding the preset candidate determined by the proposed preset calculation unit is received, and the first instruction information for confirming the content of the preset candidate is received, the photographing direction control device relates to the preset candidate. The display control apparatus further includes a reception unit that transmits information.
When the information regarding the preset candidate is received from the reception unit, the shooting direction control device controls the shooting direction of the shooting device to be the shooting direction based on the preset candidate.
The reception unit transmits the second instruction information to the proposal preset operation unit when the second instruction information for presetting the imaging direction controlled by the imaging direction control device is received,
The surveillance system according to claim 6, wherein the proposal preset operation unit presets the photographing direction of the photographing device as the preset candidate.
前記受信部が受信した信号に基づき、前記監視対象領域を撮影する撮影装置の撮影方向を制御する撮影制御部
とを備えた撮影方向制御装置。 A receiving unit that receives a signal indicating a direction in which the monitoring target is present, which is transmitted from a specific position in the monitoring target area by the pointing device;
And a photographing control unit configured to control a photographing direction of a photographing apparatus for photographing the monitoring target area based on a signal received by the receiving unit.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017083686 | 2017-04-20 | ||
JP2017083686 | 2017-04-20 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018182712A true JP2018182712A (en) | 2018-11-15 |
JP6887352B2 JP6887352B2 (en) | 2021-06-16 |
Family
ID=64276296
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017174881A Active JP6887352B2 (en) | 2017-04-20 | 2017-09-12 | Monitoring system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6887352B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021176219A (en) * | 2020-05-01 | 2021-11-04 | 株式会社エクサウィザーズ | Terminal, server, program, and method |
WO2023272901A1 (en) * | 2021-06-30 | 2023-01-05 | 南京轩世琪源软件科技有限公司 | Video information storage and access method used for surveillance, system, device, and medium |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH077654A (en) * | 1993-06-17 | 1995-01-10 | Matsushita Electric Ind Co Ltd | Camera direction controller |
JPH10304344A (en) * | 1997-04-22 | 1998-11-13 | Kyocera Corp | Cordless monitoring camera apparatus |
JP2000148972A (en) * | 1998-11-06 | 2000-05-30 | Canon Inc | Image recognition device |
JP2001006058A (en) * | 1999-06-18 | 2001-01-12 | Fujitsu General Ltd | Setting method of monitoring area of picture and abnormality monitoring system |
JP2011258031A (en) * | 2010-06-09 | 2011-12-22 | Dx Antenna Co Ltd | Tracker for monitoring camera |
-
2017
- 2017-09-12 JP JP2017174881A patent/JP6887352B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH077654A (en) * | 1993-06-17 | 1995-01-10 | Matsushita Electric Ind Co Ltd | Camera direction controller |
JPH10304344A (en) * | 1997-04-22 | 1998-11-13 | Kyocera Corp | Cordless monitoring camera apparatus |
JP2000148972A (en) * | 1998-11-06 | 2000-05-30 | Canon Inc | Image recognition device |
JP2001006058A (en) * | 1999-06-18 | 2001-01-12 | Fujitsu General Ltd | Setting method of monitoring area of picture and abnormality monitoring system |
JP2011258031A (en) * | 2010-06-09 | 2011-12-22 | Dx Antenna Co Ltd | Tracker for monitoring camera |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021176219A (en) * | 2020-05-01 | 2021-11-04 | 株式会社エクサウィザーズ | Terminal, server, program, and method |
WO2023272901A1 (en) * | 2021-06-30 | 2023-01-05 | 南京轩世琪源软件科技有限公司 | Video information storage and access method used for surveillance, system, device, and medium |
Also Published As
Publication number | Publication date |
---|---|
JP6887352B2 (en) | 2021-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10796543B2 (en) | Display control apparatus, display control method, camera system, control method for camera system, and storage medium | |
US10404947B2 (en) | Information processing apparatus, information processing method, camera system, control method for camera system, and storage medium | |
JP5136060B2 (en) | Image processing apparatus, image processing method, program thereof, recording medium recording the program, and imaging apparatus | |
JP2003259350A (en) | Omnidirectional monitor control system, omnidirectional monitor control method, and omnidirectional monitor control program | |
JP2007249722A (en) | Object detector | |
US11190747B2 (en) | Display control apparatus, display control method, and storage medium | |
JP2016127571A (en) | Camera system, display control device, display control method, and program | |
US20190371000A1 (en) | Information processing apparatus, information processing method, and storage medium | |
JP6887352B2 (en) | Monitoring system | |
EP2648406B1 (en) | Method for switching viewing modes in a camera | |
KR101452342B1 (en) | Surveillance Camera Unit And Method of Operating The Same | |
JP2016092693A (en) | Imaging apparatus, imaging apparatus control method, and program | |
JP5574551B2 (en) | Image processing apparatus and image processing method | |
US12047712B2 (en) | Surveillance device, surveillance system, and surveillance method | |
JP5955114B2 (en) | Imaging apparatus, control method thereof, and program | |
CN109151298B (en) | Pan-tilt camera control method, device and system based on screen | |
JP6581280B1 (en) | Monitoring device, monitoring system, monitoring method, monitoring program | |
KR102518863B1 (en) | Monitoring system recommending viewer mode | |
JP2017011598A (en) | Monitoring system | |
JP2021029028A (en) | Object tracking system, object tracking apparatus, object tracking method and program | |
JP2020017932A (en) | Medical video system | |
CN109542123A (en) | Optical system and its operating method | |
JP6234506B2 (en) | Computer apparatus, control method thereof, and program | |
JP2012244311A (en) | Camera remote controller and camera remote control method | |
KR102473078B1 (en) | Location Calculating Device of a surveillance area photographed by a plurality of PTZ cameras |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200306 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201211 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210205 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20210205 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210420 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210518 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6887352 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |