JP2017152964A - Monitoring device and program therefor - Google Patents

Monitoring device and program therefor Download PDF

Info

Publication number
JP2017152964A
JP2017152964A JP2016034399A JP2016034399A JP2017152964A JP 2017152964 A JP2017152964 A JP 2017152964A JP 2016034399 A JP2016034399 A JP 2016034399A JP 2016034399 A JP2016034399 A JP 2016034399A JP 2017152964 A JP2017152964 A JP 2017152964A
Authority
JP
Japan
Prior art keywords
area
monitoring
unit
congestion
degree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016034399A
Other languages
Japanese (ja)
Inventor
智美 牧下
Tomomi Makishita
智美 牧下
良一 井上
Ryoichi Inoue
良一 井上
千晴 島田
Chiharu Shimada
千晴 島田
義雄 舩橋
Yoshio Funabashi
義雄 舩橋
利枝子 岡安
Rieko Okayasu
利枝子 岡安
芳彦 山邉
Yoshihiko Yamabe
芳彦 山邉
ゴック タン グエン
Ngoc Tan Nguyen
ゴック タン グエン
健太 花木
Kenta Hanaki
健太 花木
裕一 花田
Yuichi Hanada
裕一 花田
Original Assignee
株式会社東芝
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社東芝, Toshiba Corp filed Critical 株式会社東芝
Priority to JP2016034399A priority Critical patent/JP2017152964A/en
Publication of JP2017152964A publication Critical patent/JP2017152964A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a monitoring device and program therefor, capable of contributing to high comfort of a facility included in a zone to be monitored by easily acquiring a degree of congestion of people or vehicles in the zone, thereby improving safe operation and convenience of the facility.SOLUTION: The monitoring device acquires an image in a zone to be monitored with a camera 2 of a drone 3. A recognition part 7 recognizes a person on an image picked up by the camera 2 of the drone 3. A calculation part 8 calculates a degree of congestion in each zone on the basis of a ratio of an area which a person recognized by the recognition part 7 occupies to the total area of the zone to be monitored.SELECTED DRAWING: Figure 1

Description

本発明の実施形態は、監視対象の画像を取得して、その画像上に存在する人や車両といった移動体の混雑度を求める監視装置及び監視装置用プログラムに関する。   Embodiments described herein relate generally to a monitoring apparatus and a monitoring apparatus program for obtaining an image to be monitored and obtaining a degree of congestion of a moving object such as a person or a vehicle existing on the image.
駅や空港等の公共施設、ショッピングモール、デパート、ホテルなどの商業施設、テーマパーク、遊園地、動物園や水族館などのアミューズメント施設、イベント会場、更には広い駐車場などには、多くの人や車両が集まることが見込まれる。そのため、施設の混雑度合いによっては、施設の安全運用が妨げられる可能性がある。   Public facilities such as stations and airports, shopping malls, department stores, commercial facilities such as hotels, theme parks, amusement parks, amusement facilities such as zoos and aquariums, event venues, and large parking lots Is expected to gather. Therefore, depending on the congestion level of the facility, the safe operation of the facility may be hindered.
そこで、大規模な施設では、監視カメラなどの監視装置を設置して、監視員や施設管理者が施設の混雑状況を監視している。監視装置は通常、監視情報を一元的に管理し、その情報を可視化して、監視員や施設管理者などへ提示するようになっている。このような監視装置によれば、施設の安全運用はもとより、利用者がいないエリアでは設備の制御レベルを低くすることで、省エネルギー化にも寄与することができる。   Therefore, in a large-scale facility, a monitoring device such as a monitoring camera is installed, and a supervisor or facility manager monitors the congestion state of the facility. The monitoring device normally manages monitoring information in a centralized manner, visualizes the information, and presents the information to a supervisor or facility manager. According to such a monitoring apparatus, it is possible to contribute to energy saving by lowering the control level of the facility in an area where there is no user as well as the safe operation of the facility.
特開2003−259337号公報JP 2003-259337 A
しかし、時間帯や天候などに応じて、施設の混雑状況は大きく変動することがあり、多数の監視員が空いている施設を監視するといったことがある。また、屋外で開催されるイベント会場や駐車エリアが点在する駐車場などでは、監視カメラを設置可能な建造物が少ないため、監視体制が不十分となる可能性がある。そこで従来から、広い区域を監視対象として、そこに存在する人や車両の混雑状況を、正確に把握することが望まれていた。   However, depending on the time of day, the weather, etc., the congestion status of the facility may fluctuate greatly, and a large number of observers may monitor a vacant facility. In addition, in event halls held outdoors or in parking lots where parking areas are scattered, there are few buildings where surveillance cameras can be installed, so the monitoring system may be insufficient. Therefore, conventionally, it has been desired to accurately grasp the congestion situation of people and vehicles existing in a wide area as a monitoring target.
本発明の実施形態は、上記の課題を解決するために提案されたものであり、監視対象となる区域での人や車両の混雑度を簡単に求めることにより、区域に含まれる施設の安全運用及び利便性を高めて、施設の快適性向上に貢献する監視装置および監視装置用プログラムを提供することを目的とする。   Embodiments of the present invention have been proposed to solve the above-described problems, and by simply obtaining the degree of congestion of people and vehicles in the monitored area, the safe operation of the facilities included in the area It is another object of the present invention to provide a monitoring device and a monitoring device program that improve convenience and contribute to improving the comfort of facilities.
上記の目的を達成するため、本発明の実施形態に係る監視装置は、次の構成要素(1)〜(3)を有している。
(1)任意の広さを持つ区域を監視対象として当該監視対象の画像を取得する取得部。
(2)前記取得部が取得した画像上に存在する移動体を認識する認識部。
(3)前記認識部が認識した移動体の数を求めて前記区域における前記移動体の混雑度を算出する算出部。
In order to achieve the above object, a monitoring apparatus according to an embodiment of the present invention includes the following components (1) to (3).
(1) An acquisition unit that acquires an image of a monitoring target using an area having an arbitrary area as a monitoring target.
(2) A recognition unit for recognizing a moving body existing on the image acquired by the acquisition unit.
(3) A calculation unit that calculates the degree of congestion of the moving body in the area by obtaining the number of moving bodies recognized by the recognition unit.
なお、本発明の実施形態は、他の態様として、上記各部の機能をコンピュータに実行させる監視装置用プログラムとして捉えることもできる。   As another aspect, the embodiment of the present invention can also be understood as a monitoring device program that causes a computer to execute the functions of the above-described units.
本実施形態の構成を示すブロック図。The block diagram which shows the structure of this embodiment. 本実施形態の模式的なイメージ図。The typical image figure of this embodiment. 本実施形態のおける一般ユーザ所持端末の表示画面例Display screen example of a general user possession terminal in this embodiment 本実施形態のおける一般ユーザ向け施設内表示器の表示画面例Example of a display screen of an in-facility display for general users in this embodiment
(実施形態)
(構成)
図1〜図4を参照して本実施形態に係る監視装置1について具体的に説明する。監視装置1は、テーマパークや遊園地などの屋外施設を監視対象としたものである。図1は、本実施形態の構成を示すブロック図、図2は本実施形態の模式的なイメージ図である。
(Embodiment)
(Constitution)
The monitoring device 1 according to the present embodiment will be specifically described with reference to FIGS. The monitoring device 1 targets outdoor facilities such as theme parks and amusement parks. FIG. 1 is a block diagram showing a configuration of the present embodiment, and FIG. 2 is a schematic image diagram of the present embodiment.
これらの施設には、建造物が複数建てられており、施設内を巡る利用者は、建造物、例えばアトラクションなどをランドマークとして人為的に分けられた区域を、施設内のエリアとして認識される。例えば、図2では、施設全体が9つの区域に分割されている。   In these facilities, multiple buildings are built, and the users who visit the facilities are recognized as areas within the facility that are artificially divided into buildings, such as attractions, as landmarks. . For example, in FIG. 2, the entire facility is divided into nine areas.
本実施形態を適用した施設では、定期的にパレードが開催されるものとして、パレードのコース(図2の太実線に示す)に対応させて、9つの区域が3つの大きなエリアA〜Cに分割されている。また、パレードなどのイベントでは、混雑が予想される区域を絞り、例えば、「パレードスタート地点」や「サーカス前」などの地点についても、区域として設定するようにしてもよい。   In the facility to which this embodiment is applied, assuming that a parade is held regularly, nine areas are divided into three large areas A to C corresponding to the course of the parade (shown by the thick solid line in FIG. 2). Has been. Further, in an event such as a parade, areas where congestion is expected may be narrowed down, and for example, a point such as “Parade start point” or “Before the circus” may be set as an area.
監視装置1は、所定の区域を監視対象とした装置であり、図1に示すように、監視対象である区域の画像を取得する取得部として、撮影機器を付設した飛行体、例えばカメラ2付きのドローン3を配備している。区域の大きさは適宜設定可能である。   The monitoring device 1 is a device that targets a predetermined area as a monitoring target. As shown in FIG. 1, as an acquisition unit that acquires an image of the monitoring target area, a flying object with a photographing device, for example, a camera 2 is attached. The drone 3 is deployed. The size of the area can be set as appropriate.
カメラ2は、静止画や動画を撮影するデジタルカメラやビデオカメラ等であり、監視対象となる区域を上空から撮影する。カメラ2は、レンズ及び固定撮像素子を有しており、入射された被写体像を表す光がCCDの受光面に結像し、カメラ信号処理回路及びA/D変換器等を介して、画像のデータをドローン3の通信装置31に送る。通信装置31は、画像のデータを情報処理サーバ4に送信する際、ドローン3の位置情報、自機の識別情報、取得時の時刻情報なども、カメラ2が撮影した画像のデータと関連付けて送信する。   The camera 2 is a digital camera, a video camera, or the like that captures still images or moving images, and captures an area to be monitored from above. The camera 2 includes a lens and a fixed image sensor, and light representing an incident subject image is formed on the light receiving surface of the CCD, and the image is transmitted via a camera signal processing circuit and an A / D converter. Data is sent to the communication device 31 of the drone 3. When the communication device 31 transmits image data to the information processing server 4, the position information of the drone 3, identification information of the own device, time information at the time of acquisition, and the like are also transmitted in association with the image data captured by the camera 2. To do.
ドローン3とは、三次元的な移動が可能な飛行体である。ドローン3は、カメラ2が撮影した画像のデータを情報処理サーバ4に送信するための通信装置31と、位置情報など自機の状態を検知するセンサ群32を備えている。センサ群32には、3軸加速度計、3軸ジャイロスコープ、気圧計、速度測定用カメラ、磁気センサ、対地面の高度測定用超音波センサ、障害物を検知する障害物監視レーダー等が含まれる。   The drone 3 is a flying object capable of three-dimensional movement. The drone 3 includes a communication device 31 for transmitting image data taken by the camera 2 to the information processing server 4 and a sensor group 32 for detecting the state of the own device such as position information. The sensor group 32 includes a three-axis accelerometer, a three-axis gyroscope, a barometer, a camera for speed measurement, a magnetic sensor, an ultrasonic sensor for measuring altitude against the ground, an obstacle monitoring radar for detecting an obstacle, and the like. .
これらのセンサ群32には、様々なタイプが適用可能である。例えば、障害物監視レーダーとしては、撮影画像を解析して障害物を検出するステレオカメラ、レーザー光を照射し、反射した光で障害物を検出するレーザーレーダー、又は、電波を送信、反射した電波で障害物を検出するミリ波レーダー等を用いるようにしてもよい。   Various types can be applied to the sensor group 32. For example, as an obstacle monitoring radar, a stereo camera that analyzes a captured image to detect an obstacle, a laser radar that irradiates laser light and detects an obstacle with reflected light, or a radio wave that transmits and reflects radio waves A millimeter wave radar or the like that detects an obstacle may be used.
ドローン3は、CPUからなる制御部33を備えている。制御部33は、センサ群32からドローン3の位置情報を得てカメラ2の撮影方向を制御する。カメラ2の撮影方向は、カメラ2のレンズ部分を駆動させて所望の撮影方向に向けてもよいし、ドローン3自体を駆動させて、カメラ2のレンズ部分を所望の撮影方向に向けるようにしてもよい。   The drone 3 includes a control unit 33 composed of a CPU. The control unit 33 obtains the position information of the drone 3 from the sensor group 32 and controls the shooting direction of the camera 2. The shooting direction of the camera 2 may be directed to the desired shooting direction by driving the lens portion of the camera 2, or the drone 3 itself is driven to point the lens portion of the camera 2 to the desired shooting direction. Also good.
制御部33は、カメラ2の撮影制御も行う。カメラ2の撮影制御には、カメラ2に組み込まれたレンズ、シャッター、絞り、フォーカス機構、ズーム機構等の制御がある。さらに、制御部33は、カメラ2に組み込まれたイメージセンサに露光させる撮像光の調整などを行うようにしてもよい。   The control unit 33 also performs shooting control of the camera 2. The shooting control of the camera 2 includes control of a lens, a shutter, an aperture, a focus mechanism, a zoom mechanism, and the like incorporated in the camera 2. Further, the control unit 33 may adjust the imaging light to be exposed by the image sensor incorporated in the camera 2.
図2にドローン3の外観を示す。図2に示すように、ドローン3は、ディスク状の胴体部34と、胴体部34からX状に延びる4本のアーム35と、各アーム35の先端部分に取り付けられたメインロータ36と、着陸時の衝撃を吸収しつつ胴体部34を支えるランディングギア37とが設けられている。カメラ2は胴体部34の下面部に取り付けられている。   FIG. 2 shows the appearance of the drone 3. As shown in FIG. 2, the drone 3 includes a disk-shaped body portion 34, four arms 35 extending in an X shape from the body portion 34, a main rotor 36 attached to a tip portion of each arm 35, and a landing A landing gear 37 that supports the body portion 34 while absorbing the impact of the time is provided. The camera 2 is attached to the lower surface portion of the body portion 34.
メインロータ36は、回転によって上向きの揚力を発生させる回転翼である。メインロータ36は、アーム35の先端部に鉛直方向に設けられた回転軸と、回転軸に水平に取り付けられた複数の羽根部と、羽根部の外周に設けられたリングとから構成される。ドローン3は、4つのメインロータ36が制御部33によって制御されて回転することで、垂直方向及び水平方向への移動、更には地上から見て空中の一点に留まるホバリングが可能である。   The main rotor 36 is a rotary blade that generates upward lift by rotation. The main rotor 36 includes a rotary shaft provided in the vertical direction at the tip of the arm 35, a plurality of blade portions attached horizontally to the rotary shaft, and a ring provided on the outer periphery of the blade portion. The drone 3 can move in the vertical direction and the horizontal direction as well as hovering that stays at one point in the air when viewed from the ground, by rotating the four main rotors 36 controlled by the control unit 33.
監視装置1は、情報処理サーバ4を有している。情報処理サーバ4は、ドローン3の通信装置31から送られた画像のデータを処理する装置であり、画像上に存在する移動体を認識する認識部7と、認識部7が認識した移動体の数を求めて区域における移動体の混雑度を算出する算出部8を備えている。   The monitoring device 1 has an information processing server 4. The information processing server 4 is a device that processes image data sent from the communication device 31 of the drone 3. The information processing server 4 recognizes a moving body present on the image, and the moving body recognized by the recognizing unit 7. A calculation unit 8 is provided for calculating the congestion degree of the moving object in the area by obtaining the number.
図1に戻って、情報処理サーバ4の内部構成について説明する。情報処理サーバ4は、前記の認識部7および算出部8に加えて、データの受信部5、記憶部6、編集部9、出力部10、送信部11を実装している。受信部5はドローン3の通信装置31から画像のデータを受信する。   Returning to FIG. 1, the internal configuration of the information processing server 4 will be described. In addition to the recognition unit 7 and the calculation unit 8, the information processing server 4 includes a data reception unit 5, a storage unit 6, an editing unit 9, an output unit 10, and a transmission unit 11. The receiving unit 5 receives image data from the communication device 31 of the drone 3.
記憶部6は、受信部5が受信した画像のデータを記憶する。つまり、受信部5および記憶部6を有する情報処理サーバ4は、ドローン3のカメラ2が撮影した画像のデータを保存するファイリングサーバ機能を持つことになる。なお、記憶部6は、カメラ2が撮影した画像のデータだけではなく、区域全体の面積や、人ひとりが立っている状態で占める面積、ドローン3を識別あるいは管理するためのデータなど各種のデータを保存、蓄積する。   The storage unit 6 stores image data received by the receiving unit 5. That is, the information processing server 4 having the receiving unit 5 and the storage unit 6 has a filing server function for storing image data captured by the camera 2 of the drone 3. The storage unit 6 is not limited to the image data captured by the camera 2, but various data such as the area of the entire area, the area occupied by a person standing alone, and data for identifying or managing the drone 3. Save and accumulate.
認識部7は、ドローン3のカメラ2が撮影した画像のデータに基づいて、画像データ上に映る人を、移動体として認識する。認識部7が採用する人の認識技術は、種々の既存の手法を適用可能である。例えば、輝度勾配方向ヒストグラムを利用して、移動する人の画像を抽出する手法などが代表的である。   The recognizing unit 7 recognizes a person shown on the image data as a moving object based on the image data captured by the camera 2 of the drone 3. Various existing methods can be applied to the human recognition technology employed by the recognition unit 7. For example, a technique of extracting an image of a moving person using a luminance gradient direction histogram is representative.
算出部8は、認識部7が認識した人の数を求めて、人が占める面積を算出する。さらに算出部8は、人が存在する区域全体の面積を記憶部6から読み込み、求めた人の面積と区域全体の面積との比を基にして、当該区域における人の混雑度を算出する。区域全体の面積とは、例えば図2に示した9つの区域を単位としてもよいし、複数の区域を含む図2でのエリアA〜Cを区域全体の面積としてもよい。さらに、区域の中の所定の地点について人の混雑度を算出するようにしてもよい。   The calculation unit 8 obtains the number of people recognized by the recognition unit 7 and calculates the area occupied by the people. Further, the calculation unit 8 reads the area of the entire area where the person exists from the storage unit 6 and calculates the degree of congestion of the person in the area based on the ratio of the calculated area of the person and the area of the entire area. The area of the entire area may be, for example, the nine areas shown in FIG. 2, or the areas A to C in FIG. 2 including a plurality of areas may be the area of the entire area. Furthermore, the degree of congestion of people may be calculated for a predetermined point in the area.
各区域での混雑度は、混雑状況を%で示すようにする。混雑度を示す%は100%が最大値である必要は無い。例えば、100%が「定員乗車」の状態である電車における混雑率に準じて、200%では「体が触れ合い、相当な圧迫感がある」状態というように定義してもよい。   The degree of congestion in each area indicates the congestion status in%. 100% of the percentage indicating the degree of congestion need not be the maximum value. For example, in accordance with the congestion rate in a train in which 100% is in the “capacity boarding” state, it may be defined as a state in which 200% is “the body touches and there is a considerable feeling of pressure”.
編集部9は、算出部8の算出結果から、表示用の画面データを編集する。例えば、編集部9は、混雑状況を示すテキスト、画像、レイアウトの情報などを生成する。一般ユーザと施設管理者あるいは監視員では、混雑度を含む情報の活用目的が異なるため、編集部9は、情報を提供するユーザに合わせた形で画面データの編集を行う。   The editing unit 9 edits the screen data for display from the calculation result of the calculation unit 8. For example, the editing unit 9 generates text, an image, layout information, and the like indicating the congestion status. Since the general user and the facility manager or the supervisor have different purposes of using information including the degree of congestion, the editing unit 9 edits the screen data in a form that matches the user who provides the information.
出力部10は、編集部9が生成した画面データを送信部11に出力する。一般ユーザと施設管理者あるいは監視員では出力される端末や機器が異なることがある。そのため、情報を提供する相手によって複数種類の端末や機器を想定し、出力部10では、各ユーザの端末や機器に合わせて画面データを提供するものとする。   The output unit 10 outputs the screen data generated by the editing unit 9 to the transmission unit 11. Terminals and devices that are output may differ between general users and facility managers or supervisors. Therefore, it is assumed that a plurality of types of terminals and devices are assumed depending on the other party who provides information, and the output unit 10 provides screen data according to each user's terminal or device.
送信部11は、出力部10から出力された画面データのうち、一般ユーザ用の画面データを、ヒューマンインターフェース装置12およびネットワークNを介して、一般ユーザ所持端末13や、大型ビジョンなどの一般ユーザ向け施設内表示器14に送信する(図2にも図示)。一般ユーザ向け施設内表示器14は、施設内の予め決められた場所に設置されている。なお、ネットワークNは、無線通信網を含み、通信プロトコルTCP/IPを用いて種々の通信回線に接続して構築される分散型の通信ネットワークである。   The transmission unit 11 sends screen data for general users out of the screen data output from the output unit 10 to the general user possession terminal 13 and general users such as a large vision via the human interface device 12 and the network N. It transmits to the in-facility indicator 14 (also shown in FIG. 2). The in-facility in-facility display 14 is installed at a predetermined location in the facility. The network N includes a wireless communication network and is a distributed communication network constructed by connecting to various communication lines using the communication protocol TCP / IP.
一般ユーザ所持端末13とは、CPUによる演算処理機能や無線通信機能を有する携帯電話機やスマートホンといった端末である。これらの端末13では、一般のOSやブラウザソフトなどのアプリケーションを実行する機能を有し、ブラウザソフトを実行することによって、Webページを閲覧するためのブラウザ機能を有している。ブラウザ機能としては、インターネットからHTMLファイルや画像ファイルなどをダウンロードし、レイアウトを解析して表示画面上に表示するようになっている。このとき、メモリ内に蓄積された地図情報の地図上に一般ユーザ自身の位置情報を表示するようにしてもよい。   The general user possession terminal 13 is a terminal such as a mobile phone or a smart phone having an arithmetic processing function by a CPU and a wireless communication function. These terminals 13 have a function of executing an application such as a general OS or browser software, and have a browser function for browsing a Web page by executing the browser software. As a browser function, an HTML file, an image file, or the like is downloaded from the Internet, and the layout is analyzed and displayed on the display screen. At this time, the position information of the general user may be displayed on the map of the map information stored in the memory.
また、送信部11は、出力部10から出力された画面データのうち、、施設管理者用あるいは監視員用の画面データを、ヒューマンインターフェース装置15を介して、管理室あるいは監視室16の表示装置17(液晶ディスプレイなどからなる)に送信する(図2にも図示)。なお、表示装置17にはプリンタなどの出力装置が接続されていてもよい。   The transmission unit 11 also displays screen data for facility managers or monitoring personnel among the screen data output from the output unit 10 via the human interface device 15 in the display device of the management room or the monitoring room 16. 17 (consisting of a liquid crystal display or the like) (also shown in FIG. 2). Note that an output device such as a printer may be connected to the display device 17.
ヒューマンインターフェース装置12、15は、情報処理サーバ4側で持っている情報や演算結果を、ユーザ毎の画面にてそれぞれ編集可能な装置である。ヒューマンインターフェース装置12、15としては、たとえば、キーボード、ポインティングデバイスとなるマウス、タッチパッド、タッチパネル、スキャナ等、現在又は将来において利用可能なあらゆる入力装置を含む。また、ヒューマンインターフェース装置12、15は、上記の記憶部6に記憶される情報を入力することも可能である。   The human interface devices 12 and 15 are devices that can edit information and calculation results on the information processing server 4 side on a screen for each user. Examples of the human interface devices 12 and 15 include any input device that can be used at present or in the future, such as a keyboard, a mouse serving as a pointing device, a touch pad, a touch panel, and a scanner. The human interface devices 12 and 15 can also input information stored in the storage unit 6.
(作用と効果)
以上の構成を有する監視装置1では、ドローン3に取り付けられたカメラ2を有しており、ドローン3を飛ばしてカメラ2により監視対象である区域を上空から撮影する。カメラ2は撮影した画像のデータをドローン3の通信装置31に送り、通信装置31が画像のデータを情報処理サーバ4に送る。
(Action and effect)
The monitoring apparatus 1 having the above configuration includes the camera 2 attached to the drone 3, and the drone 3 is skipped and the area to be monitored is photographed from the sky by the camera 2. The camera 2 sends the captured image data to the communication device 31 of the drone 3, and the communication device 31 sends the image data to the information processing server 4.
情報処理サーバ4では、認識部7が、ドローン3から送られてきた画像のデータから、画像上に存在する人を認識する。そして、算出部8が、人が占める面積を求めて、この面積と、記憶部6に予め記憶され区域全体の面積との比から、当該区域での人の混雑度を算出する。   In the information processing server 4, the recognition unit 7 recognizes a person existing on the image from the image data sent from the drone 3. Then, the calculation unit 8 obtains the area occupied by the person, and calculates the degree of congestion of the person in the area from the ratio of this area and the area of the entire area stored in the storage unit 6 in advance.
編集部9は、一般ユーザ、施設管理者あるいは監視員といった異なるユーザに対して、各ユーザに見合った情報を提供するように画面データの編集を行い、出力部10は、各ユーザの出力デバイスに合わせて画面データを出力して、送信部11が、一般ユーザ所持端末12、一般ユーザ向け施設内表示器14、管理室あるいは監視室16の表示装置17に対して、ユーザ毎に編集された画面データを送信する。以下にユーザ毎の混雑度情報の活用例を示す。   The editing unit 9 edits the screen data so as to provide different users such as general users, facility managers, or monitoring personnel with information appropriate for each user, and the output unit 10 outputs to each user's output device. Screen data is also output, and the transmission unit 11 edits the screen for each user on the general user possession terminal 12, the in-facility in-facility display 14, and the display device 17 in the management room or monitoring room 16. Send data. Examples of utilization of congestion degree information for each user are shown below.
[1]一般ユーザ:一般ユーザは、一般ユーザ所持端末13や一般ユーザ向け施設内表示器14の画面を確認することで、各区域の混雑度を遠方からリアルタイムで把握することが可能となり、混雑度を考慮した上で行先を選択できる。例えば、図3では一般ユーザ所持端末13の表示画面例を示しており、図4では一般ユーザ向け施設内表示器14の表示例を示している。 [1] General user: The general user can grasp the degree of congestion in each area in real time from a distance by checking the screen of the general user possession terminal 13 and the in-facility display 14 for general users. The destination can be selected in consideration of the degree. For example, FIG. 3 shows a display screen example of the general user possessing terminal 13, and FIG. 4 shows a display example of the in-facility facility display 14.
図3の表示画面例の上段では、パレード時のエリアA〜Cの混雑度を示している。各エリアA〜Cの中のさらに細かい区域の混雑度について、一般ユーザが知りたいと考えた場合、例えば、エリアCが表示されている部分をタッチすると、エリアCに含まれる狭い区域、例えば、「キャッスル前」や「パレードゴール地点」といった地点での混雑度が表示されるものとする(図3の表示画面例の下段)。   The upper part of the display screen example in FIG. 3 shows the degree of congestion in areas A to C during the parade. When the general user wants to know about the degree of congestion of a finer area in each of the areas A to C, for example, when a part where the area C is displayed is touched, a narrow area included in the area C, for example, It is assumed that the degree of congestion at a point such as “before castle” or “parade goal” is displayed (lower part of the display screen example in FIG. 3).
また、図4の画面データ例では、例えば施設内でパレードが行われるとして、そのコースと関連付けながら、エリアA〜Cに含まれる細かい区域での混雑度を提示している。これらの画面データを見た一般ユーザは、区域ごとの混雑度を、正確に且つリアルタイムで把握できる。そのため、施設の利便性が高まり、施設での快適性がより向上する。   Further, in the screen data example of FIG. 4, for example, assuming that a parade is performed in a facility, the degree of congestion in a fine area included in areas A to C is presented while being associated with the course. A general user who sees the screen data can accurately and in real time grasp the degree of congestion for each area. Therefore, the convenience of the facility is enhanced and the comfort in the facility is further improved.
[2]施設管理者:施設管理者もまた、管理室の表示装置17の監視画面を確認することで、区域ごとの混雑度を、正確に且つリアルタイムで把握できる。そのため、タイムリーな館内放送が可能となり、混雑緩和対策や売上向上施策を迅速に実施することができる。また、一時的な混雑度情報だけでなく、過去データも合わせて利用することでトレンド分析が可能となり、一般ユーザの傾向や動線の分析、テナント料の算出等にも活用可能である。 [2] Facility manager: The facility manager can also grasp the degree of congestion in each area accurately and in real time by checking the monitoring screen of the display device 17 in the management room. Therefore, it is possible to broadcast in the building in a timely manner, and it is possible to quickly implement congestion mitigation measures and sales improvement measures. Also, trend analysis is possible by using past data as well as temporary congestion level information, and it can be used for analysis of general user trends and traffic lines, calculation of tenant fees, and the like.
[3]監視員:監視員は、監視員用の表示装置17の監視画面から各区域の混雑度を確認することで、施設内の異変や異常を検出する指標とすることが可能となり、事態へ素早く対処することでリスクを低減、回避することができる。また、過度な混雑度が算出された区域に対しては誘導員を向かわせるなど、事故の発生を未然に防ぐことが可能となり、優れた安全性を発揮することができる。 [3] Monitor: The monitor can check the congestion level of each area from the monitor screen of the display device 17 for the monitor, and can use it as an index for detecting an abnormality or abnormality in the facility. Risks can be reduced and avoided by quickly dealing with In addition, it is possible to prevent an accident from occurring by, for example, directing a guide to an area where an excessive degree of congestion has been calculated, and excellent safety can be exhibited.
以上のような監視装置によれば、人の混雑度を監視することで混雑を原因としたトラブルへの事前対策が可能となる。また、監視員だけではなく、人の混雑度という情報を一般ユーザや施設管理者にも提供することで、混雑緩和の効果向上が期待できる。したがって、一般ユーザの利便性や快適性向上につながる。さらに、施設内の混雑状況を定量化することが可能となり、施設運営におけるデータ分析、マーケティングなどにも活用可能な情報を取得することができる。   According to the monitoring apparatus as described above, it is possible to take precautions against troubles caused by congestion by monitoring the degree of congestion of people. In addition, not only the monitoring staff but also information on the degree of congestion of people is provided to general users and facility managers, so that the effect of reducing congestion can be expected. Therefore, it leads to improvement of convenience and comfort for general users. Furthermore, it becomes possible to quantify the congestion situation in the facility, and it is possible to acquire information that can be used for data analysis, marketing, etc. in facility operation.
(他の実施形態)
本実施形態は、上記の態様に限定されるものではない。
(1)認識部7が車両を移動体として認識するようにしてもよい。特に、駐車エリアである区域が離れて点在する駐車場の場合、各区域に誘導員や監視員を配置する必要がないため、監視効率が高くなり、人件費などのコストが低減するといったメリットがある。
(Other embodiments)
The present embodiment is not limited to the above aspect.
(1) The recognition unit 7 may recognize the vehicle as a moving body. In particular, in the case of parking lots where parking areas are scattered apart, there is no need to place guides or observers in each area, which increases the monitoring efficiency and reduces labor costs and other costs. There is.
(2)算出部8による混雑度の算出に際しては、例えば区域に含まれる設備に応じて、重み付けを行うようにしてもよい。区域に含まれる設備としては、例えば、アトラクションなどがある。アトラクションへの入場者数が多い区域では、その区域に存在する人数が多かったとしても、実際にはその場での待ち時間が短いこともある。 (2) When calculating the degree of congestion by the calculation unit 8, for example, weighting may be performed according to the equipment included in the area. Examples of the equipment included in the area include attractions. In an area where there are many visitors to the attraction, even if there are a large number of people in the area, the waiting time at the place may actually be short.
このような場合には、一般ユーザは混雑度を高いとは感じ難いので、混雑度を低めに算出するようにしてもよい。また、通常であれば人が入り込むことがなく混雑度は0であることが想定されるような区域において、極めて低いとしても混雑度が求められた場合、何らかの事態が起きていると考えることができる。このため、本実施形態では、迷子の捜索や警備の強化といった場合にも有効である。   In such a case, since it is difficult for a general user to feel that the degree of congestion is high, the degree of congestion may be calculated to be low. In addition, in an area where people would normally not enter and the degree of congestion is assumed to be 0, if the degree of congestion is calculated even if it is extremely low, it may be considered that something is happening. it can. For this reason, this embodiment is also effective in cases such as searching for lost children or strengthening security.
(3)屋外に設置されるテーマパークや遊園地などに限らず、天井高が高いドーム施設や展示場施設などドローン3の飛行可能な施設であれば、本実施形態を適用可能である。ドーム施設や展示場施設は、同一の施設であっても、実施されるイベントの内容によって混雑する区域が大きく異なる場合がある。そのため、監視カメラに依存した監視装置では、混雑度を知りたい区域への対応が遅くなる、あるいは把握しにくくなるおそれがあり、監視効率が低い。 (3) The present embodiment can be applied to any facility capable of flying the drone 3 such as a dome facility or an exhibition hall facility with a high ceiling, not limited to a theme park or amusement park installed outdoors. Even if the dome facility and the exhibition hall facility are the same facility, the crowded area may vary greatly depending on the contents of the event to be performed. Therefore, in a monitoring device that relies on a monitoring camera, the response to an area where the degree of congestion is desired may be delayed or difficult to grasp, and monitoring efficiency is low.
これに対して、ドローン3を利用した本実施形態では、監視対象となる区域を自由に選択することができるため、監視したい区域の混雑度を、迅速且つリアルタイムに把握することが可能である。したがって、本実施形態はドーム施設や展示場施設の監視に極めて有効である。   On the other hand, in the present embodiment using the drone 3, since the area to be monitored can be freely selected, it is possible to grasp the congestion degree of the area to be monitored quickly and in real time. Therefore, this embodiment is extremely effective for monitoring the dome facility and the exhibition facility.
(4)取得部であるドローン3のカメラ2が取得した画像上で、任意の区域を指定する区域指定部を設けておき、算出部8は、区域指定部が指定した区域の面積を算出してから、その区域での混雑度を算出するようにしてもよい。この実施形態では、区域の面積を記憶部6に予め記憶しておく必要が無く、ユーザーが希望する区域に関して人の混雑度を求めることが可能である。 (4) On the image acquired by the camera 2 of the drone 3 as the acquisition unit, an area specifying unit for specifying an arbitrary area is provided, and the calculation unit 8 calculates the area of the area specified by the area specifying unit. Then, the degree of congestion in that area may be calculated. In this embodiment, it is not necessary to store the area of the area in the storage unit 6 in advance, and it is possible to obtain the degree of congestion of the person regarding the area desired by the user.
(5)監視対象の区域において移動体が占める面積の変化率に基づいて混雑度の予想値を算出する予想値算出部を有するようにしてもよい。例えば、予想値算出部は、監視対象の区域において認識部7が認識した単位時間当たりの移動体数の変化を抽出することで、当該区域の混雑度の予想値を算出するようにしてもよい。このような実施形態によれば、混雑度の予想値を一般ユーザに提示することができるので、一般ユーザに混雑の継続時間を認識させることができる。したがって、混雑による一般ユーザのストレス軽減化に寄与することができる。 (5) You may make it have an expected value calculation part which calculates the expected value of a congestion degree based on the change rate of the area which a mobile body occupies in the area to be monitored. For example, the predicted value calculation unit may calculate a predicted value of the degree of congestion of the area by extracting a change in the number of moving objects per unit time recognized by the recognition unit 7 in the monitored area. . According to such an embodiment, since the expected value of the degree of congestion can be presented to the general user, the general user can be made aware of the duration of the congestion. Therefore, it is possible to contribute to reducing general user stress due to congestion.
(6)取得部が取得した画像の中に、予め登録された登録移動体が存在するか否かを検出する検出部を有し、送信部11は、検出部が検出した登録移動体の所在を、情報端末に送信するようにしてもよい。登録移動体としては、警備員やスタッフ、施設のマスコットなど、適宜選択可能である。 (6) The image acquired by the acquisition unit includes a detection unit that detects whether or not a registered mobile body registered in advance exists, and the transmission unit 11 includes the location of the registered mobile body detected by the detection unit. May be transmitted to the information terminal. As the registered mobile body, security guards, staff, facility mascots, and the like can be selected as appropriate.
例えば、管理室あるいは監視室16の表示装置17に、警備員やスタッフという登録移動体の所在を送信するようにした実施形態によれば、混雑度の緩和対策が迅速に取られていることを確認することができる。また、一般ユーザ所持端末13に施設のマスコットの所在を送信するようにした実施形態によれば、一般ユーザは区域が混雑している理由が分かり、混雑度を参照しつつ、その区域に向かうか否かを判断することができる。   For example, according to the embodiment in which the location of a registered mobile body such as a security guard or a staff is transmitted to the display device 17 of the management room or the monitoring room 16, it is confirmed that measures for reducing the congestion degree are taken quickly. Can be confirmed. Further, according to the embodiment in which the location of the facility mascot is transmitted to the general user possessing terminal 13, the general user knows the reason why the area is congested, and refers to the degree of congestion. It can be determined whether or not.
(7)記憶部6は、監視対象の区域に含まれる設備、例えばアトラクションなどの位置を予め記憶しておき、認識部7は、ドローン3からの画像のデータに基づき、アトラクション付近での人の行列パターンを認識して、算出部8によって、認識した行列パターンの長さを算出するにしてもよい。この実施形態によれば、ある設備に対する行列といった局所的な混雑度を、正確に求めることができる。 (7) The storage unit 6 stores in advance the positions of the equipment included in the monitored area, for example, attractions, and the recognition unit 7 is based on the image data from the drone 3, and the person near the attraction The matrix pattern may be recognized, and the length of the recognized matrix pattern may be calculated by the calculation unit 8. According to this embodiment, the local congestion degree such as a matrix for a certain facility can be accurately obtained.
(8)また、認識部7が行列を認識した設備と共通あるいは同一種類の設備が、施設内に複数存在する場合には、その所在地および行列の長さを、情報端末に送信するようにしてもよい。例えば、レストランなどの飲食店は通常、施設の中に複数存在するので、行列ができている飲食店の所在地と、そこでの行列の長さを、一般ユーザ所持端末13に送信する。この実施形態によれば、行列の短い飲食店に一般ユーザを誘導することが可能となり、一般ユーザの利便性も飲食店の収益性も共に向上する。 (8) In addition, when there are a plurality of facilities in the facility that are common or the same type as the facilities whose recognition unit 7 has recognized the matrix, the location and the length of the matrix are transmitted to the information terminal. Also good. For example, since there are usually a plurality of restaurants such as restaurants, the location of the restaurant where there is a queue and the length of the queue are transmitted to the general user possessing terminal 13. According to this embodiment, it becomes possible to guide a general user to a restaurant with a short queue, and both convenience for the general user and profitability of the restaurant are improved.
(9)上記の実施形態では、ヒューマンインターフェース装置12、15は、情報処理サーバ4側で持っている情報や演算結果を、ユーザ毎の画面にてそれぞれ編集可能な装置としているので、情報処理サーバ4がデータの演算だけを行うようにしても良いし、情報処理サーバ4が演算結果の編集までも行うことで、ヒューマンインターフェース装置12、15を省くようにしてもよい。 (9) In the above embodiment, the human interface devices 12 and 15 are devices that can edit information and calculation results on the information processing server 4 side on the screen for each user. 4 may perform only the calculation of the data, or the information processing server 4 may perform the editing of the calculation result, so that the human interface devices 12 and 15 may be omitted.
(10)本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 (10) Although several embodiments of the present invention have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. These embodiments and their modifications are included in the scope and gist of the invention, and are also included in the invention described in the claims and the equivalents thereof.
1…監視装置
2…カメラ
3…ドローン
4…情報処理サーバ
5…受信部
6…記憶部
7…認識部
8…算出部
9…編集部
10…出力部
11…送信部
12、15…ヒューマンインターフェース装置
13…一般ユーザ所持端末
14…一般ユーザ向け施設内表示器
16…管理室あるいは監視室
17…表示装置
31…通信装置
32…センサ群
33…制御部
34…胴体部
35…アーム
36…メインロータ
37…ランディングギア
N…ネットワーク
DESCRIPTION OF SYMBOLS 1 ... Monitoring apparatus 2 ... Camera 3 ... Drone 4 ... Information processing server 5 ... Reception part 6 ... Storage | storage part 7 ... Recognition part 8 ... Calculation part 9 ... Editing part 10 ... Output part 11 ... Transmission part 12, 15 ... Human interface apparatus 13 ... General user-owned terminal 14 ... Facility display 16 for general users ... Management room or monitoring room 17 ... Display device 31 ... Communication device 32 ... Sensor group 33 ... Control unit 34 ... Body 35 ... Arm 36 ... Main rotor 37 ... Landing Gear N ... Network

Claims (8)

  1. 任意の広さを持つ区域を監視対象として当該監視対象の画像を取得する取得部と、
    前記取得部が取得した画像上に存在する移動体を認識する認識部と、
    前記認識部が認識した移動体の数を求めて前記区域における前記移動体の混雑度を算出する算出部と、
    を有することを特徴とする監視装置。
    An acquisition unit for acquiring an image of the monitoring target with an area having an arbitrary area as a monitoring target;
    A recognition unit for recognizing a moving object existing on the image acquired by the acquisition unit;
    A calculation unit that calculates the degree of congestion of the moving object in the area by obtaining the number of moving objects recognized by the recognition unit;
    The monitoring apparatus characterized by having.
  2. 前記算出部が算出した混雑度を、情報端末に送信する送信部を有することを特徴とする請求項1記載の監視装置。   The monitoring apparatus according to claim 1, further comprising: a transmission unit that transmits the degree of congestion calculated by the calculation unit to the information terminal.
  3. 前記取得部は、飛行体に取り付けられたカメラであることを特徴とする請求項1又は2に記載の監視装置。   The monitoring apparatus according to claim 1, wherein the acquisition unit is a camera attached to a flying object.
  4. 前記算出部は、前記認識部が認識した移動体が占める面積と所定の区域全体の面積との比を基にして区域ごとに混雑度を算出するように構成したことを特徴とする請求項1〜3のいずれかに記載の監視装置。   The said calculating part is comprised so that the congestion degree might be calculated for every area based on the ratio of the area which the mobile body which the said recognition part recognized and the area of the whole predetermined area. The monitoring apparatus in any one of -3.
  5. 前記取得部が取得した画像上で任意の区域を指定する区域指定部を有し、
    前記算出部は、前記区域指定部が指定した区域の面積を算出してから、その区域での混雑度を算出するように構成したことを特徴とする請求項4記載の監視装置。
    An area designating unit for designating an arbitrary area on the image obtained by the obtaining unit;
    The monitoring device according to claim 4, wherein the calculation unit is configured to calculate the congestion degree in the area after calculating the area of the area specified by the area specifying unit.
  6. 監視対象の区域において移動体が占める面積の変化率に基づいて混雑度の予想値を算出する予想値算出部を有することを特徴とする請求項1〜5のいずれかに記載の監視装置。   The monitoring apparatus according to claim 1, further comprising an expected value calculation unit that calculates an expected value of the degree of congestion based on a change rate of an area occupied by the moving object in the monitored area.
  7. 前記取得部が取得した画像の中に、予め登録された登録移動体が存在するか否かを検出する検出部を有し、
    前記送信部は、前記検出部が検出した前記登録移動体の所在を、情報端末に送信するように構成したことを特徴とする請求項1〜6のいずれかに記載の監視装置。
    In the image acquired by the acquisition unit, having a detection unit for detecting whether there is a registered mobile body registered in advance,
    The monitoring device according to claim 1, wherein the transmission unit is configured to transmit the location of the registered mobile body detected by the detection unit to an information terminal.
  8. コンピュータに、
    任意の広さを持つ区域を監視対象として当該監視対象の画像を取得する取得処理と、
    前記取得処理により取得した画像上に存在する移動体を認識する認識処理と、
    前記認識処理が認識した移動体数に基づいて前記区域における前記移動体の混雑度を算出する算出処理と、
    を実行させることを特徴とする監視装置用プログラム。
    On the computer,
    An acquisition process for acquiring an image of the monitoring target with an area having an arbitrary area as a monitoring target;
    A recognition process for recognizing a moving object present on the image acquired by the acquisition process;
    A calculation process for calculating the degree of congestion of the moving objects in the area based on the number of moving objects recognized by the recognition process;
    A program for a monitoring device, characterized by causing
JP2016034399A 2016-02-25 2016-02-25 Monitoring device and program therefor Pending JP2017152964A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016034399A JP2017152964A (en) 2016-02-25 2016-02-25 Monitoring device and program therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016034399A JP2017152964A (en) 2016-02-25 2016-02-25 Monitoring device and program therefor

Publications (1)

Publication Number Publication Date
JP2017152964A true JP2017152964A (en) 2017-08-31

Family

ID=59742086

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016034399A Pending JP2017152964A (en) 2016-02-25 2016-02-25 Monitoring device and program therefor

Country Status (1)

Country Link
JP (1) JP2017152964A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107776513A (en) * 2017-10-10 2018-03-09 湖州华科信息咨询有限公司 A kind of remote vehicle control method and device for Safari Park
CN109448365A (en) * 2018-10-16 2019-03-08 北京航空航天大学 Across the scale space base land regions road traffic system integrated supervision method of one kind
US10755109B2 (en) 2018-03-28 2020-08-25 Canon Kabushiki Kaisha Monitoring system, monitoring method, and non-transitory computer-readable storage medium

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107776513A (en) * 2017-10-10 2018-03-09 湖州华科信息咨询有限公司 A kind of remote vehicle control method and device for Safari Park
US10755109B2 (en) 2018-03-28 2020-08-25 Canon Kabushiki Kaisha Monitoring system, monitoring method, and non-transitory computer-readable storage medium
CN109448365A (en) * 2018-10-16 2019-03-08 北京航空航天大学 Across the scale space base land regions road traffic system integrated supervision method of one kind

Similar Documents

Publication Publication Date Title
JP6469962B2 (en) Monitoring system and monitoring method
JP2017152964A (en) Monitoring device and program therefor
JP6716845B2 (en) How to use the capacity of multiple facilities at a ski resort, fair, amusement park or stadium
US10171646B2 (en) Systems and methods for providing geolocation services
US9607501B2 (en) Systems and methods for providing emergency resources
KR20130133478A (en) Mobile augmented reality system and method for fire extinguish equipment inspection
KR20180040908A (en) Airport robot
WO2020152851A1 (en) Digital search security system, method, and program
KR101147296B1 (en) Climbing Support System and Method
JP2020202000A (en) Image collection system, image collection method, and program
JP6327438B2 (en) Pedestrian alarm server and portable terminal device
KR20180003727A (en) Stalker drone
US10715653B2 (en) Systems and methods for providing geolocation services
JP6483326B2 (en) Monitoring system and terminal device
US20200057891A1 (en) Image recognition system and image recognition method
KR20140141869A (en) System and method for managing information of road safety institution
JP6565061B2 (en) Viewing system
JP6796000B2 (en) Monitoring support device and monitoring system
Sakata et al. ALTAIR: Automatic location tracking system using active IR-tag
WO2021084612A1 (en) Digital safety response security system, method, and program
KR102245769B1 (en) System and method for navigating fire exit using augmented reality
US10911893B1 (en) Contact tracing via location service
JP2020160991A (en) Reporting system, information processing device, and program
JP6941457B2 (en) Monitoring system
JP6829105B2 (en) Monitoring system

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20170913

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20170913

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171107

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20171225