JP4663446B2

JP4663446B2 - Monitoring system and monitoring method

Info

Publication number: JP4663446B2
Application number: JP2005233799A
Authority: JP
Inventors: 充史三沢; 雅彦杉本
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2005-08-11
Filing date: 2005-08-11
Publication date: 2011-04-06
Anticipated expiration: 2025-08-11
Also published as: JP2007049577A

Description

本発明は、監視システム、及び監視方法に関する。特に、本発明は、所定の方向の動画を撮像する監視システム、及び監視方法に関する。 The present invention relates to a monitoring system and a monitoring method. In particular, the present invention relates to a monitoring system and a monitoring method for capturing a moving image in a predetermined direction.

近年、撮像装置を用いた監視システムが様々な場所に配置され、侵入者の検知等に用いられている。通常の監視システムに用いられている撮像装置においては、撮像装置の視野角が限られているので、単独の撮像装置でカバーできる撮像領域には限度があった。したがって、広い範囲の撮像領域をカバーするためには、複数台の撮像装置を設置するか、又は、広い視野角を有する広角レンズを備えた撮像装置を用いることで、撮像領域を広げている。 In recent years, monitoring systems using imaging devices have been placed in various places and used for detecting intruders and the like. In an imaging device used in a normal monitoring system, since the viewing angle of the imaging device is limited, there is a limit to the imaging area that can be covered by a single imaging device. Therefore, in order to cover a wide imaging area, the imaging area is expanded by installing a plurality of imaging apparatuses or using an imaging apparatus having a wide-angle lens having a wide viewing angle.

また、撮像装置の撮像領域内の音声を集音して、撮像領域内における異常を音圧の変化に基づいて検知する。続いて、音圧の変化が検出された場合に、撮像領域から動体の抽出、撮像領域のズーム処理、及び抽出された動体が含まれる画像の圧縮率を変化させる監視装置が提案されている（例えば、特許文献１参照）。
特開２００４−１２０５９５号公報 In addition, sound in the imaging area of the imaging device is collected and an abnormality in the imaging area is detected based on a change in sound pressure. Subsequently, when a change in sound pressure is detected, a monitoring device is proposed that extracts a moving object from an imaging region, zooms the imaging region, and changes the compression rate of an image including the extracted moving object ( For example, see Patent Document 1).
JP 2004-120595 A

監視装置は、撮像領域内で検知された人物の行動を監視することを目的として、広い領域の画像を取得することが要求される。しかしながら、複数台の撮像装置を用いる場合には、撮像装置の設置場所の確保、メンテナンスの手間等により、コストがかかる。また、広角レンズを備えた撮像装置で撮像する場合においては、侵入者等の動きを検出することはできるものの、単位監視面積当たりの解像度が低いので、侵入者等の行動を明確に把握するのが困難な場合がある。 The monitoring device is required to acquire a wide area image for the purpose of monitoring the behavior of the person detected in the imaging area. However, when a plurality of imaging devices are used, the cost is increased due to securing the installation location of the imaging devices, maintenance work, and the like. Also, when imaging with an imaging device equipped with a wide-angle lens, it is possible to detect the movement of an intruder, etc., but the resolution per unit monitoring area is low, so the behavior of the intruder etc. can be clearly understood May be difficult.

また、特許文献１に記載の発明においては、音圧の変化に基づいて撮像領域内における異常を検知することにより画像を撮像する方法が提案されている。係る場合において、侵入者等が忍び込んできた場合における音圧の変化が、予め定められた基準値よりも小さい場合には、撮像画像の圧縮率を変化させて画像を撮像することができない場合がある。したがって、侵入者等の行動を適確に撮像できない場合がある。また、特許文献１に記載の発明においては、予め定められた範囲の領域についてしか撮像できないので、例えば、室内等の全領域を監視する場合には、複数の監視装置を要するので、メンテナンス、及びコスト等の面が問題となる場合がある。 Moreover, in the invention described in Patent Document 1, a method for capturing an image by detecting an abnormality in an imaging region based on a change in sound pressure is proposed. In such a case, when the change in sound pressure when an intruder or the like has sneaked into is smaller than a predetermined reference value, it may not be possible to capture an image by changing the compression rate of the captured image. is there. Therefore, there are cases where the action of an intruder or the like cannot be captured accurately. Further, in the invention described in Patent Document 1, since only an area within a predetermined range can be imaged, for example, when monitoring an entire area such as a room, a plurality of monitoring devices are required. Cost and other aspects may be a problem.

そこで本発明は、上記課題を解決することができる監視システム、及び監視方法を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。 Then, an object of this invention is to provide the monitoring system and monitoring method which can solve the said subject. This object is achieved by a combination of features described in the independent claims. The dependent claims define further advantageous specific examples of the present invention.

上記課題を解決するために、本発明の第１の形態においては、監視システムであって、ミラー部と、ミラー部が反射した画像を撮像する撮像部と、ミラー部が複数の異なる領域の画像を連続して撮像部の方向に反射するように、ミラー部を回転させるミラー回転制御部と、ミラー部の回転毎に、ミラー部が所定の方向を向いているときにミラー部が撮像部の方向に反射している所定の領域を撮像部に撮像させることによって、所定の領域の動画を取得する撮像制御部とを備える。 In order to solve the above-described problem, in the first embodiment of the present invention, the monitoring system is a mirror unit, an imaging unit that captures an image reflected by the mirror unit, and an image of a plurality of different areas in which the mirror unit is different. A mirror rotation control unit that rotates the mirror unit so that the mirror unit is continuously reflected in the direction of the imaging unit, and the mirror unit is An imaging control unit that acquires a moving image of the predetermined region by causing the imaging unit to capture a predetermined region that is reflected in the direction.

また、撮像制御部は、ミラー部の回転毎に、ミラー部が複数の方向をそれぞれ向いているときにミラー部が撮像部の方向にそれぞれ反射している複数の領域のそれぞれを撮像部に撮像させることによって、複数の領域の動画を取得してよい。そして、撮像部が連続して撮像した複数の領域のフレーム画像を、ミラー部の回転周期に同期したタイミングで間引いて選択する表示制御部と、表示制御部が選択したフレーム画像を順次表示することで、所定の領域の動画を再生する表示部とをさらに備えてもよい。更に、撮像部が撮像した動画に含まれる人物を抽出する人物抽出部と、人物抽出部が抽出した人物の移動ベクトルを算出する移動ベクトル算出部と、移動ベクトル算出部が算出した移動ベクトルに基づいて、人物の動きを予測する動き予測部とをさらに備え、撮像制御部は、撮像部の露光タイミングを変化させることによって、撮像部に撮像させる複数の領域を動き予測部が予測した人物の動きに追従させて回転させてもよい。 The imaging control unit captures each of the plurality of areas reflected by the mirror unit in the direction of the imaging unit when the mirror unit is rotated in a plurality of directions for each rotation of the mirror unit. By doing so, moving images of a plurality of regions may be acquired. Then, a display control unit that thins out and selects frame images of a plurality of areas continuously captured by the imaging unit at a timing synchronized with the rotation period of the mirror unit, and a frame image selected by the display control unit are sequentially displayed. And a display unit for playing back a moving image in a predetermined area. Further, based on the person extraction unit that extracts a person included in the moving image captured by the imaging unit, the movement vector calculation unit that calculates the movement vector of the person extracted by the person extraction unit, and the movement vector calculated by the movement vector calculation unit A motion prediction unit that predicts the motion of the person, and the imaging control unit changes the exposure timing of the imaging unit, thereby causing the motion prediction unit to predict a plurality of areas to be captured by the imaging unit. You may make it follow and rotate.

また、本発明の第２の形態においては、監視方法であって、ミラー部が反射した画像を撮像する撮像段階と、ミラー部が複数の異なる領域の画像を連続して撮像部の方向に反射するように、ミラー部を回転させるミラー回転制御段階と、ミラー部の回転毎に、ミラー部が所定の方向を向いているときにミラー部が撮像部の方向に反射している所定の領域を撮像部に撮像させることによって、所定の領域の動画を取得する撮像制御段階とを備える。 In the second embodiment of the present invention, the monitoring method is an imaging step of capturing an image reflected by the mirror unit, and the mirror unit continuously reflects images of a plurality of different areas in the direction of the imaging unit. A mirror rotation control stage for rotating the mirror unit, and for each rotation of the mirror unit, a predetermined region where the mirror unit reflects in the direction of the imaging unit when the mirror unit is facing a predetermined direction An imaging control step of acquiring a moving image of a predetermined region by causing the imaging unit to capture an image.

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。 The above summary of the invention does not enumerate all the necessary features of the present invention, and sub-combinations of these feature groups can also be the invention.

本発明によれば、所定の領域の動画を撮像すると共に、動画に含まれる人物の行動を追従して動画を撮像することができる。 According to the present invention, it is possible to capture a moving image of a predetermined area and also to capture a moving image by following the actions of a person included in the moving image.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。 Hereinafter, the present invention will be described through embodiments of the invention. However, the following embodiments do not limit the invention according to the scope of claims, and all combinations of features described in the embodiments are included. It is not necessarily essential for the solution of the invention.

図１は、本発明の一実施形態に係る監視システム１００の機能構成の一例を示す。監視システム１００は、ミラー部１０、回転軸１２、撮像部２０、ミラー回転制御部３０、撮像制御部４０、画像格納部５０、表示制御部６０、表示部７０、人物抽出部８０、移動ベクトル算出部８２、及び動き予測部８４を備える。また、撮像部２０は、光学系、及び受光デバイスを有してよい。更に、受光デバイスは、複数の受光素子を含んでいてよい。本実施形態に係る監視システム１００は、所定の領域の動画を撮像すると共に、撮像領域に含まれる人物の行動を追従して、動画を撮像することを目的とする。 FIG. 1 shows an example of a functional configuration of a monitoring system 100 according to an embodiment of the present invention. The monitoring system 100 includes a mirror unit 10, a rotary shaft 12, an imaging unit 20, a mirror rotation control unit 30, an imaging control unit 40, an image storage unit 50, a display control unit 60, a display unit 70, a person extraction unit 80, and a movement vector calculation. Unit 82 and motion prediction unit 84. The imaging unit 20 may include an optical system and a light receiving device. Furthermore, the light receiving device may include a plurality of light receiving elements. An object of the monitoring system 100 according to the present embodiment is to capture a moving image while capturing a moving image of a predetermined region and following the actions of a person included in the imaging region.

回転軸１２は、ミラー回転制御部３０の制御に基づいて、ミラー部１０を回転させる。そして、ミラー部１０は、回転軸１２に沿って回転することにより、撮像領域の全方位の画像を、撮像部２０の方向に反射する。なお、ミラー部１０は、平面ミラー、及び多角形ミラー等であってよい。ミラー部１０が多角形ミラーである場合には、多角形ミラーが有する複数のミラーに含まれる一のミラー面を介して、撮像領域の全方位の画像を、撮像部２０の方向に反射する。ここで、ミラー部１０の回転は、撮像領域の少なくとも一部を含む領域を、撮像部２０の方向に反射するように回転させてもよい。例えば、撮像領域の画像を撮像部２０の方向に反射する場合において、ミラー部１０は、３６０°よりも小さい角度で回転させてもよい。これにより、監視システム１００を、例えば、室内の天井の隅に設定した場合には、ミラー部１０の回転は、３６０°よりも小さな角度で回転させるだけで、当該室内を撮像できる。 The rotation shaft 12 rotates the mirror unit 10 based on the control of the mirror rotation control unit 30. The mirror unit 10 rotates along the rotation axis 12 to reflect an image in all directions of the imaging region in the direction of the imaging unit 20. The mirror unit 10 may be a plane mirror, a polygon mirror, or the like. When the mirror unit 10 is a polygonal mirror, an omnidirectional image of the imaging region is reflected in the direction of the imaging unit 20 through one mirror surface included in the plurality of mirrors included in the polygonal mirror. Here, the rotation of the mirror unit 10 may be performed so that a region including at least a part of the imaging region is reflected in the direction of the imaging unit 20. For example, when the image of the imaging region is reflected in the direction of the imaging unit 20, the mirror unit 10 may be rotated at an angle smaller than 360 °. Thereby, when the monitoring system 100 is set at, for example, the corner of the ceiling of the room, the mirror unit 10 can be imaged only by rotating the mirror unit 10 at an angle smaller than 360 °.

撮像部２０は、撮像制御部４０の制御に基づいて、回転しているミラー部１０において反射された画像を撮像する。撮像部２０は、撮像領域に人物が含まれていない場合には、複数の受光素子から読み出される画素データを間引くことにより、低画質の画像を撮像してよい。また、撮像部２０は、撮像領域に人物が含まれていない場合には、低解像度の画像を撮像するか、又は、撮像された画像を圧縮することにより、撮像される画像のデータ量を低減してもよい。また、撮像部２０は、撮像領域に人物が含まれている場合には、複数の受光素子から読み出される画素データを間引かずに、撮像領域の画像を撮像して、撮像領域に人物が含まれていない場合に撮像された画像よりも高解像度の画像を撮像してもよい。更に、撮像部２０は、撮像領域に人物が含まれている場合には、撮像された画像を圧縮する圧縮率を下げることにより、撮像領域に人物が含まれていない場合に撮像された画像よりも解像度を高くしてもよい。撮像部２０は、撮像された画像を、人物抽出部８０、及び画像格納部５０に供給する。 The imaging unit 20 captures an image reflected by the rotating mirror unit 10 based on the control of the imaging control unit 40. When no person is included in the imaging area, the imaging unit 20 may capture a low-quality image by thinning out pixel data read from the plurality of light receiving elements. Further, when no person is included in the imaging region, the imaging unit 20 captures a low-resolution image or compresses the captured image to reduce the data amount of the captured image. May be. Further, when a person is included in the imaging area, the imaging unit 20 captures an image of the imaging area without thinning out pixel data read from the plurality of light receiving elements, and the person is included in the imaging area. An image having a higher resolution than that of the image captured when the image is not captured may be captured. Further, when a person is included in the imaging area, the imaging unit 20 reduces the compression rate for compressing the captured image, thereby reducing the image captured when the person is not included in the imaging area. Also, the resolution may be increased. The imaging unit 20 supplies the captured image to the person extraction unit 80 and the image storage unit 50.

ミラー回転制御部３０は、ミラー部１０が複数の異なる領域の画像を連続して撮像部２０の方向に反射するように、回転軸１２を制御して、ミラー部１０の回転を制御する。ミラー回転制御部３０は、ミラー部１０の回転周期に関する制御情報に基づいて、回転軸１２の回転を制御してよい。ミラー回転制御部３０は、撮像制御部４０、及び画像格納部５０に、ミラー部１０の回転周期に関する情報を供給する。 The mirror rotation control unit 30 controls the rotation of the mirror unit 10 by controlling the rotation axis 12 so that the mirror unit 10 continuously reflects a plurality of different region images in the direction of the imaging unit 20. The mirror rotation control unit 30 may control the rotation of the rotating shaft 12 based on control information related to the rotation period of the mirror unit 10. The mirror rotation control unit 30 supplies information related to the rotation period of the mirror unit 10 to the imaging control unit 40 and the image storage unit 50.

撮像制御部４０は、ミラー部１０の回転ごとに、ミラー部１０が所定の方向を向いているときに、ミラー部１０が撮像部２０の方向に反射している所定の領域のフレーム画像を、撮像部２０に撮像させる。そして、撮像制御部４０は、当該所定の領域の動画を撮像部２０に取得させる。具体的には、撮像制御部４０は、ミラー回転制御部３０から受け取ったミラー部１０の回転周期に基づいて、ミラー部１０の回転ごとに、ミラー部１０が撮像領域の複数の方向をそれぞれ向いているときに、ミラー部１０が撮像部２０の方向にそれぞれ反射している複数の領域のそれぞれを、撮像部２０に撮像させる。より具体的には、撮像制御部４０は、撮像部２０の露光タイミングを変化させることによって、ミラー部１０が撮像部２０の方向に反射している複数の領域のそれぞれのフレーム画像を撮像する。 Whenever the mirror unit 10 is rotated, the imaging control unit 40 captures a frame image of a predetermined region reflected by the mirror unit 10 in the direction of the imaging unit 20 when the mirror unit 10 faces a predetermined direction. The imaging unit 20 is caused to capture an image. And the imaging control part 40 makes the imaging part 20 acquire the moving image of the said predetermined | prescribed area | region. Specifically, the imaging control unit 40 is configured so that the mirror unit 10 faces each of a plurality of directions of the imaging region for each rotation of the mirror unit 10 based on the rotation period of the mirror unit 10 received from the mirror rotation control unit 30. The mirror unit 10 causes each of the plurality of areas reflected in the direction of the imaging unit 20 to be imaged by the imaging unit 20. More specifically, the imaging control unit 40 changes the exposure timing of the imaging unit 20 to capture each frame image of a plurality of areas reflected by the mirror unit 10 in the direction of the imaging unit 20.

また、撮像制御部４０は、撮像部２０に撮像させる複数の領域を、動き予測部８４から受け取った情報に基づいて回転させて、撮像部２０に複数の領域を撮像させてもよい。例えば、撮像制御部４０が、動き予測部８４から撮像領域に人物がいる旨の情報、及び当該人物が含まれる予想位置の情報を受け取った場合には、撮像制御部４０は、当該人物の動きに追従させて、当該人物が含まれると予想される位置が撮像されるように、撮像部２０の露光タイミングを変化させてよい。なお、撮像制御部４０は、人物が含まれる場合には、撮像部２０に高解像度の画像を撮像させてもよい。撮像制御部４０は、撮像を指示する旨の情報、及び撮像の露光時間に関する情報を、撮像部２０に供給する。 In addition, the imaging control unit 40 may cause the imaging unit 20 to image a plurality of regions by rotating the plurality of regions to be imaged by the imaging unit 20 based on the information received from the motion prediction unit 84. For example, when the imaging control unit 40 receives information indicating that there is a person in the imaging region from the motion prediction unit 84 and information on an expected position where the person is included, the imaging control unit 40 detects the motion of the person. The exposure timing of the imaging unit 20 may be changed so that the position where the person is expected to be captured is imaged. Note that the imaging control unit 40 may cause the imaging unit 20 to capture a high-resolution image when a person is included. The imaging control unit 40 supplies the imaging unit 20 with information for instructing imaging and information regarding the exposure time of imaging.

人物抽出部８０は、撮像部２０において撮像された動画に含まれる人物を抽出する。人物抽出部８０は、撮像部２０から受け取った撮像画像に含まれる複数のフレーム画像から、人物を抽出する。人物抽出部８０は、輪郭抽出処理、及び色分布分析処理等の画像処理により、フレーム画像に含まれる被写体を検出する。そして、人物抽出部８０は、予め人物の顔に固有の特徴量を格納してもよい。人物の顔に固有の特徴量は、例えば、顔の輪郭、目、鼻、口、眉、及びこれらの顔に含まれる部位間の距離等であってよい。人物抽出部８０は、フレーム画像に含まれる被写体から、人物の顔に固有の特徴量をマッチング等により検出して、被写体が人物であるか否かを判断してよい。また、人物抽出部８０は、肌色抽出等の画像処理により、フレーム画像に含まれる被写体が人物であるか否かを判断してもよい。そして、人物抽出部８０は、フレーム画像に含まれる被写体が人物であると判断された場合には、人物が含まれるフレーム画像、及びフレーム画像に人物が含まれている旨の情報を、移動ベクトル算出部８２に供給する。 The person extraction unit 80 extracts a person included in the moving image captured by the imaging unit 20. The person extraction unit 80 extracts a person from a plurality of frame images included in the captured image received from the imaging unit 20. The person extraction unit 80 detects a subject included in the frame image by image processing such as contour extraction processing and color distribution analysis processing. Then, the person extraction unit 80 may store a characteristic amount unique to a person's face in advance. The characteristic amount specific to the face of a person may be, for example, the face outline, eyes, nose, mouth, eyebrows, and the distance between parts included in these faces. The person extraction unit 80 may detect a characteristic amount specific to the face of the person from the subjects included in the frame image by matching or the like, and determine whether or not the subject is a person. The person extraction unit 80 may determine whether or not the subject included in the frame image is a person by image processing such as skin color extraction. When it is determined that the subject included in the frame image is a person, the person extraction unit 80 converts the frame image including the person and information indicating that the person is included in the frame image into the movement vector. It supplies to the calculation part 82.

移動ベクトル算出部８２は、人物抽出部８０において抽出された人物の移動ベクトルを算出する。移動ベクトル算出部８２は、人物抽出部８０から受け取った複数のフレーム画像について、ブロックマッチング、及び勾配法等の画像処理を施すことにより、フレーム画像に含まれている人物の移動ベクトルを算出してよい。移動ベクトル算出部８２は、算出された移動ベクトルの情報、及びフレーム画像に人物が含まれている旨の情報を、動き予測部８４に供給する。動き予測部８４は、移動ベクトル算出部８２から受け取った移動ベクトルの情報に基づいて、フレーム画像に含まれる人物の動きを予測する。動き予測部８４は、例えば、フレーム画像に含まれる人物の移動ベクトルから、所定の時間が経過した後に、当該人物が撮像領域のどの領域に存在するかを予測する。また、動き予測部８４は、所定時間経過後の当該人物のフレーム画像に含まれる背景領域に対する移動量と、フレーム周期とに基づいて当該人物の移動速度を算出する。そして、動き予測部８４は、所定時間経過後の当該人物の予測位置を算出することにより、フレーム画像に含まれる人物の動きを予測してもよい。動き予測部８４は、フレーム画像に人物が含まれている旨の情報、及びフレーム画像に含まれる人物の所定時間経過後の予測位置の情報を撮像制御部４０に供給する。 The movement vector calculation unit 82 calculates the movement vector of the person extracted by the person extraction unit 80. The movement vector calculation unit 82 calculates the movement vector of the person included in the frame image by performing image processing such as block matching and a gradient method on the plurality of frame images received from the person extraction unit 80. Good. The motion vector calculation unit 82 supplies the calculated motion vector information and information indicating that a person is included in the frame image to the motion prediction unit 84. The motion prediction unit 84 predicts the motion of a person included in the frame image based on the motion vector information received from the motion vector calculation unit 82. For example, the motion prediction unit 84 predicts in which region of the imaging region the person is present after a predetermined time has elapsed from the movement vector of the person included in the frame image. Further, the motion prediction unit 84 calculates the movement speed of the person based on the movement amount with respect to the background area included in the frame image of the person after a predetermined time has passed and the frame period. Then, the motion prediction unit 84 may predict the motion of the person included in the frame image by calculating the predicted position of the person after a predetermined time has elapsed. The motion prediction unit 84 supplies information indicating that a person is included in the frame image and information on a predicted position of the person included in the frame image after a predetermined time has elapsed to the imaging control unit 40.

画像格納部５０は、撮像部２０から受け取った撮像画像を格納する。より具体的には、画像格納部５０は、撮像部２０から受け取った複数のフレーム画像を、フレーム画像を一意に識別できる識別子に対応づけて格納する。また、画像格納部５０は、フレーム画像が撮像されたタイミングを当該識別子に対応づけて格納してもよい。更に、画像格納部５０は、フレーム画像が撮像された時のミラー部１０の回転周期に関する情報をミラー回転制御部３０から受け取る。そして、画像格納部５０は、複数のフレーム画像を、それぞれのフレーム画像が撮像された方向に対応づけて格納してもよい。画像格納部５０は、格納されている画像、及びミラー部１０の回転周期に関する情報を表示制御部６０に供給する。また、画像格納部５０は、複数のフレーム画像を、当該複数のフレーム画像が撮像された方向に対応づけて、表示制御部６０に供給してもよい。 The image storage unit 50 stores the captured image received from the imaging unit 20. More specifically, the image storage unit 50 stores a plurality of frame images received from the imaging unit 20 in association with identifiers that can uniquely identify the frame images. The image storage unit 50 may store the timing at which the frame image is captured in association with the identifier. Further, the image storage unit 50 receives from the mirror rotation control unit 30 information regarding the rotation period of the mirror unit 10 when the frame image is captured. The image storage unit 50 may store a plurality of frame images in association with the direction in which each frame image is captured. The image storage unit 50 supplies the stored image and information related to the rotation period of the mirror unit 10 to the display control unit 60. Further, the image storage unit 50 may supply the plurality of frame images to the display control unit 60 in association with the direction in which the plurality of frame images are captured.

表示制御部６０は、画像格納部５０から受け取ったミラー部１０の回転周期に関する情報に基づいて、撮像部２０において連続して撮像された複数の領域のフレーム画像を、ミラー部１０の回転周期に同期したタイミングで間引いて選択する。例えば、表示制御部６０は、ミラー部１０の回転ごとに、ミラー部１０が複数の方向をそれぞれ向いているときに撮像部２０において撮像された、複数のフレーム画像を選択する。より具体的には、表示制御部６０は、ミラー部１０の回転周期に基づいて、複数の方向のそれぞれにおいて撮像された複数のフレーム画像のうち、同一の領域について撮像された複数のフレーム画像を選択する。また、表示制御部６０は、画像格納部５０から受け取ったフレーム画像が、フレーム画像が撮像された方向に対応付けられていた場合には、フレーム画像が対応づけられている、フレーム画像の撮像された方向に基づいて、複数のフレーム画像を選択してもよい。そして、表示制御部６０は、選択された複数のフレーム画像を表示部７０に供給する。 Based on the information regarding the rotation cycle of the mirror unit 10 received from the image storage unit 50, the display control unit 60 sets the frame images of a plurality of areas that are continuously captured by the imaging unit 20 to the rotation cycle of the mirror unit 10. Select by thinning out at synchronized timing. For example, for each rotation of the mirror unit 10, the display control unit 60 selects a plurality of frame images captured by the imaging unit 20 when the mirror unit 10 faces a plurality of directions. More specifically, the display control unit 60 displays a plurality of frame images captured for the same region among a plurality of frame images captured in each of a plurality of directions based on the rotation period of the mirror unit 10. select. In addition, when the frame image received from the image storage unit 50 is associated with the direction in which the frame image is captured, the display control unit 60 captures the frame image that is associated with the frame image. A plurality of frame images may be selected based on the selected direction. Then, the display control unit 60 supplies the selected plurality of frame images to the display unit 70.

表示部７０は、表示制御部６０から受け取った、表示制御部６０において選択された複数のフレーム画像を順次表示することで、所定の領域の動画を再生する。表示部７０は、モニタ等に複数のフレーム画像を順次表示してよい。なお、表示部７０は、表示制御部６０から受け取った、表示制御部６０において選択された複数のフレーム画像を、インターネット等のネットワークを介して、人物認証装置等に供給してもよい。これにより、撮像部２０において高解像度のフレーム画像が撮像された場合には、当該高解像度のフレーム画像に含まれる人物の認証をすることができる。 The display unit 70 reproduces a moving image in a predetermined area by sequentially displaying a plurality of frame images selected by the display control unit 60 received from the display control unit 60. The display unit 70 may sequentially display a plurality of frame images on a monitor or the like. The display unit 70 may supply a plurality of frame images selected by the display control unit 60 received from the display control unit 60 to a person authentication device or the like via a network such as the Internet. Accordingly, when a high-resolution frame image is captured by the imaging unit 20, a person included in the high-resolution frame image can be authenticated.

本実施形態に係る監視システム１００によれば、撮像部２０において連続して撮像された複数の領域のフレーム画像を、複数の領域ごとに選択して、選択された複数のフレーム画像をモニタ等に順次表示できる。これにより、監視システム１００は、撮像領域に含まれる複数の領域について、動画により監視することができる。 According to the monitoring system 100 according to the present embodiment, frame images of a plurality of regions continuously captured by the imaging unit 20 are selected for each of the plurality of regions, and the selected plurality of frame images are used as a monitor or the like. Can be displayed sequentially. Thereby, the monitoring system 100 can monitor a plurality of areas included in the imaging area with a moving image.

また、本実施形態に係る監視システム１００によれば、フレーム画像に人物が含まれる場合に、当該人物の動きを予測して、当該人物の動きを追従して動画を撮像できる。これにより、監視システム１００は、当該人物の行動を、途切れることなく監視できる。 Further, according to the monitoring system 100 according to the present embodiment, when a person is included in a frame image, a motion of the person can be predicted and a moving image can be captured following the movement of the person. Thereby, the monitoring system 100 can monitor the action of the person without interruption.

図２は、本実施形態に係る監視システム１００において動画を取得する方法の一例を示す。監視システム１００において、撮像制御部４０は、ミラー部１０の回転ごとに、ミラー部１０が複数の方向をそれぞれ向いている場合に、ミラー部１０が撮像部２０の方向にそれぞれ反射している複数の領域の各々について、撮像部２０に撮像させる。例えば、撮像制御部４０は、模式図２００に示すように、所定の画角ごとに、各画角に対応する撮像領域の画像を撮像部２０に撮像させる。すなわち、撮像制御部４０は、ミラー部１０が画角２０２、画角２０４、及び画角２０６に対応する方向に向いている場合に、ミラー部１０によって撮像部２０の方向に反射されるそれぞれの画像を、撮像部２０に撮像させる。なお、撮像制御部４０は、撮像部２０において撮像される画像が静止画となるように、撮像部２０の露光時間、及び露光タイミングを制御してよい。 FIG. 2 shows an example of a method for acquiring a moving image in the monitoring system 100 according to the present embodiment. In the monitoring system 100, the imaging control unit 40 includes a plurality of mirror units 10 reflecting in the direction of the imaging unit 20 when the mirror unit 10 faces a plurality of directions for each rotation of the mirror unit 10. The imaging unit 20 causes each of the areas to be imaged. For example, as illustrated in a schematic diagram 200, the imaging control unit 40 causes the imaging unit 20 to capture an image of an imaging region corresponding to each angle of view for each predetermined angle of view. That is, when the mirror unit 10 is oriented in the direction corresponding to the angle of view 202, the angle of view 204, and the angle of view 206, each of the imaging control units 40 is reflected by the mirror unit 10 in the direction of the imaging unit 20. The image is captured by the imaging unit 20. Note that the imaging control unit 40 may control the exposure time and the exposure timing of the imaging unit 20 so that the image captured by the imaging unit 20 becomes a still image.

そして、撮像部２０は、例えば、ミラー部１０が画角２０２に対応する方向に向いている場合には、ミラー部１０によって撮像部２０の方向に反射される、画角２０２に対応する方向の領域の画像を、フレーム画像２１２、フレーム画像２１４、及びフレーム画像２１６等として撮像する。また、ミラー部１０が画角２０４に対応する方向に向いている場合には、ミラー部１０によって撮像部２０の方向に反射される画像を、フレーム画像２２２、フレーム画像２２４、及びフレーム画像２２６等として撮像する。同様に、撮像部２０は、ミラー部１０が画角２０６に対応する方向に向いている場合には、フレーム画像２３２、フレーム画像２３４、フレーム画像２３６、及びフレーム画像２３８等を撮像する。 For example, when the mirror unit 10 is oriented in a direction corresponding to the angle of view 202, the imaging unit 20 reflects in the direction corresponding to the angle of view 202 reflected by the mirror unit 10 in the direction of the imaging unit 20. The image of the area is captured as a frame image 212, a frame image 214, a frame image 216, and the like. Further, when the mirror unit 10 is oriented in a direction corresponding to the angle of view 204, an image reflected by the mirror unit 10 in the direction of the imaging unit 20 is a frame image 222, a frame image 224, a frame image 226, or the like. As an image. Similarly, the imaging unit 20 captures the frame image 232, the frame image 234, the frame image 236, the frame image 238, and the like when the mirror unit 10 is oriented in the direction corresponding to the angle of view 206.

撮像部２０において撮像された複数のフレーム画像は、画像格納部５０に供給される。画像格納部５０は、撮像部２０から受け取った複数のフレーム画像を、各フレーム画像を一意に識別できる識別子に対応づけて格納する。また、画像格納部５０は、ミラー回転制御部３０からミラー部１０の回転周期に関する情報を受け取る。そして、画像格納部５０は、複数のフレーム画像を、それぞれのフレーム画像が撮像された方向に対応づけて格納する。画像格納部５０は、格納されているフレーム画像、ミラー部１０の回転周期、及び複数のフレーム画像を、当該複数のフレーム画像が撮像された方向に対応づけて表示制御部６０に供給する。表示制御部６０は、画像格納部５０から受け取ったミラー部１０の回転周期に同期したタイミングで、画像格納部５０から受け取ったフレーム画像を間引いて選択する。例えば、表示制御部６０が、画像格納部５０からフレーム画像２１２、フレーム画像２１４、フレーム画像２１６、フレーム画像２２２、フレーム画像２２４、及びフレーム画像２２６を受け取った場合には、表示制御部６０は、ミラー部１０が画角２０２に対応する方向に向いている場合において撮像されたフレーム画像として、フレーム画像２１２、フレーム画像２１４、及びフレーム画像２１６を選択する。また、表示制御部６０は、ミラー部１０が画角２０４に対応する方向に向いている場合に撮像されたフレーム画像として、フレーム画像２２２、フレーム画像２２４、及びフレーム画像２２６を選択する。 The plurality of frame images captured by the imaging unit 20 are supplied to the image storage unit 50. The image storage unit 50 stores a plurality of frame images received from the imaging unit 20 in association with identifiers that can uniquely identify each frame image. Further, the image storage unit 50 receives information related to the rotation period of the mirror unit 10 from the mirror rotation control unit 30. Then, the image storage unit 50 stores a plurality of frame images in association with the direction in which each frame image is captured. The image storage unit 50 supplies the stored frame image, the rotation period of the mirror unit 10, and the plurality of frame images to the display control unit 60 in association with the direction in which the plurality of frame images are captured. The display control unit 60 thins out and selects the frame image received from the image storage unit 50 at a timing synchronized with the rotation cycle of the mirror unit 10 received from the image storage unit 50. For example, when the display control unit 60 receives the frame image 212, the frame image 214, the frame image 216, the frame image 222, the frame image 224, and the frame image 226 from the image storage unit 50, the display control unit 60 A frame image 212, a frame image 214, and a frame image 216 are selected as frame images captured when the mirror unit 10 is oriented in a direction corresponding to the angle of view 202. In addition, the display control unit 60 selects the frame image 222, the frame image 224, and the frame image 226 as the frame images captured when the mirror unit 10 is oriented in the direction corresponding to the angle of view 204.

表示制御部６０は、選択された複数のフレーム画像を表示部７０に供給する。表示部７０は、表示制御部６０から受け取った複数のフレーム画像を順次表示することで、所定の領域の動画を再生する。例えば、表示部７０が表示制御部６０からフレーム画像２３２、フレーム画像２３４、フレーム画像２３６、及びフレーム画像２３８を受け取った場合には、フレーム画像２３２ないしフレーム画像２３８を順次表示して、動画２３０を再生する。また、表示部７０が表示制御部６０からフレーム画像２２２、フレーム画像２２４、及びフレーム画像２２６を受け取った場合には、フレーム画像２２２ないしフレーム画像２２６を順次表示して、動画２２０を再生する。これにより、監視システム１００は、各領域の動画を取得できる。また、監視システム１００は、フレーム画像に人物９００が含まれている場合には、人物９００の行動を監視できる。 The display control unit 60 supplies the selected plurality of frame images to the display unit 70. The display unit 70 displays a plurality of frame images received from the display control unit 60 in order to reproduce a moving image in a predetermined area. For example, when the display unit 70 receives the frame image 232, the frame image 234, the frame image 236, and the frame image 238 from the display control unit 60, the frame image 232 through the frame image 238 are sequentially displayed, and the moving image 230 is displayed. Reproduce. Further, when the display unit 70 receives the frame image 222, the frame image 224, and the frame image 226 from the display control unit 60, the frame image 222 to the frame image 226 are sequentially displayed and the moving image 220 is reproduced. Thereby, the monitoring system 100 can acquire the moving image of each area. The monitoring system 100 can monitor the behavior of the person 900 when the person 900 is included in the frame image.

本実施形態に係る監視システム１００によれば、撮像領域の所定の領域ごとに複数のフレーム画像を撮像して、複数の領域ごとに撮像されたフレーム画像を順次表示することにより動画を再生できる。これにより、撮像部２０を回転させて、所定の領域を撮像して、更にまた撮像部２０を回転させて当該所定の領域とは異なる領域を撮像させることなしに、所定の領域ごとの動画を取得できる。 According to the monitoring system 100 according to the present embodiment, a moving image can be reproduced by capturing a plurality of frame images for each predetermined region of the imaging region and sequentially displaying the frame images captured for each of the plurality of regions. As a result, the imaging unit 20 is rotated to capture a predetermined area, and the imaging unit 20 is further rotated to capture an image different from the predetermined area. You can get it.

図３は、本実施形態に係る監視システム１００が被写体を追従する方法の一例を示す図である。監視システム１００においては、ミラー部１０の回転ごとに、ミラー部１０が所定の方向を向いているときにミラー部１０により撮像部２０の方向に反射される所定の領域の画像が撮像される。そして、監視システム１００が備える撮像制御部４０において、撮像部２０の露光タイミングを変えることによって、ミラー部１０の回転ごとに、撮像部２０において撮像される所定の領域を変化させることができる。これにより、監視システム１００は、撮像領域を複数の領域に分割して撮像することができる。例えば、模式図４００のように、監視システム１００は、撮像部２０の露光タイミングを変化させて、撮像領域を複数の画角に対応する複数の領域に分けて、複数の領域の画像を撮像できる。 FIG. 3 is a diagram illustrating an example of a method in which the monitoring system 100 according to the present embodiment follows a subject. In the monitoring system 100, for each rotation of the mirror unit 10, an image of a predetermined region reflected in the direction of the imaging unit 20 is captured by the mirror unit 10 when the mirror unit 10 is facing a predetermined direction. And in the imaging control part 40 with which the monitoring system 100 is provided, the predetermined area | region imaged in the imaging part 20 can be changed for every rotation of the mirror part 10 by changing the exposure timing of the imaging part 20. FIG. As a result, the monitoring system 100 can divide the imaging area into a plurality of areas for imaging. For example, as shown in a schematic diagram 400, the monitoring system 100 can capture images of a plurality of regions by changing the exposure timing of the imaging unit 20 and dividing the imaging region into a plurality of regions corresponding to a plurality of angles of view. .

例えば、模式図４００において、ミラー部１０が画角４０２に対応する撮像方向４０４を向いている場合には、ミラー部１０は、撮像方向４０４に対応する領域の画像を撮像部２０の方向に反射させる。そして、撮像制御部４０は、撮像方向４０４に対応する領域が撮像されるように撮像部２０の露光タイミングを制御して、撮像部２０に撮像方向４０４に対応する領域を撮像させる。係る場合において、撮像部２０において撮像された動画５００に含まれる複数のフレーム画像５０２、フレーム画像５０４、及びフレーム画像５０６等に人物９１０が含まれていた場合には、移動ベクトル算出部８２において、人物９１０の移動ベクトルが算出される。そして、移動ベクトル算出部８２において算出された人物９１０の移動ベクトルに基づいて、人物９１０の動きが動き予測部８４において予測される。 For example, in the schematic diagram 400, when the mirror unit 10 faces the imaging direction 404 corresponding to the angle of view 402, the mirror unit 10 reflects an image in an area corresponding to the imaging direction 404 in the direction of the imaging unit 20. Let Then, the imaging control unit 40 controls the exposure timing of the imaging unit 20 so that an area corresponding to the imaging direction 404 is imaged, and causes the imaging unit 20 to image the area corresponding to the imaging direction 404. In such a case, when the person 910 is included in the plurality of frame images 502, the frame images 504, the frame images 506, and the like included in the moving image 500 captured by the imaging unit 20, the movement vector calculation unit 82 A movement vector of the person 910 is calculated. Then, based on the movement vector of the person 910 calculated by the movement vector calculation unit 82, the movement of the person 910 is predicted by the motion prediction unit 84.

そして、撮像制御部４０は、動き予測部８４において予測された人物９１０の所定時間経過後における予測位置に基づいて、撮像部２０の露光タイミングを変化させる。例えば、撮像制御部４０は、ミラー部１０の回転ごとに、ミラー部１０が画角４０６に対応する撮像方向４０８における画像を撮像部２０の方向に反射させるタイミングに同期させて、当該領域の画像が撮像部２０において撮像されるように、露光タイミングを変化させる。続いて、撮像制御部４０は、撮像部２０に撮像方向４０８に対応する領域を撮像させる。そして、撮像部２０は、撮像方向４０８に対応する領域の複数のフレーム画像５１０、フレーム画像５１２、及びフレーム画像５１４等を撮像する。これにより、監視システム１００は、撮像方向４０８の動画５０８を取得できる。なお、撮像制御部４０は、撮像部２０において撮像されるフレーム画像に人物９１０が含まれていると判断される間は、動き予測部８４において予測される人物９１０の予想位置に基づいて、人物９１０の動きを追従して、人物９１０の行動を監視できるように、撮像部２０の露光タイミングを変化させてよい。 Then, the imaging control unit 40 changes the exposure timing of the imaging unit 20 based on the predicted position of the person 910 predicted by the motion prediction unit 84 after a predetermined time has elapsed. For example, every time the mirror unit 10 rotates, the imaging control unit 40 synchronizes with the timing at which the mirror unit 10 reflects an image in the imaging direction 408 corresponding to the angle of view 406 in the direction of the imaging unit 20, and the image of the region The exposure timing is changed so that the image is captured by the imaging unit 20. Subsequently, the imaging control unit 40 causes the imaging unit 20 to image a region corresponding to the imaging direction 408. Then, the imaging unit 20 captures a plurality of frame images 510, frame images 512, frame images 514, and the like in a region corresponding to the imaging direction 408. Thereby, the monitoring system 100 can acquire the moving image 508 in the imaging direction 408. Note that while it is determined that the person 910 is included in the frame image captured by the imaging unit 20, the imaging control unit 40 is based on the predicted position of the person 910 predicted by the motion prediction unit 84. The exposure timing of the imaging unit 20 may be changed so that the movement of the person 910 can be monitored following the movement of the person 910.

本実施形態に係る監視システム１００によれば、撮像領域に人物が含まれており、当該人物に動きがある場合には、当該人物の動きに追従させて撮像部２０の露光タイミングを変化させることができる。そして、監視システム１００は、当該人物の動画を撮像できる。これにより、監視システム１００は、人物の動きについて、途切れることのない動画を取得できる。 According to the monitoring system 100 according to the present embodiment, when a person is included in the imaging region and the person has a movement, the exposure timing of the imaging unit 20 is changed by following the movement of the person. Can do. The monitoring system 100 can capture a moving image of the person. Thereby, the monitoring system 100 can acquire an uninterrupted moving image regarding the movement of the person.

図４は、本実施形態に係る監視システム１００が被写体を追従する方法の一例を示す図である。模式図６００において、ミラー部１０が画角６０６に対応する撮像方向６０２の画像を撮像部２０の方向に反射させており、撮像方向６０２に対応する領域が撮像されるように撮像部２０の露光タイミングが設定されている場合には、撮像部２０は、撮像方向６０２に対応する領域を撮像する。また、ミラー部１０が画角６０８に対応する撮像方向６０４の画像を撮像部２０の方向に反射させるタイミングにおいて、撮像方向６０４に対応する領域が撮像されるように、撮像部２０の露光タイミングが設定されている場合には、撮像部２０は、撮像方向６０４に対応する領域を撮像する。監視システム１００は、ミラー部１０が所定の画角に対応する所定の撮像方向の画像を撮像部２０の方向に反射させている場合に、当該撮像方向に対応する領域が撮像されるように撮像部２０の露光タイミングを設定して、複数の領域の画像を撮像できる。 FIG. 4 is a diagram illustrating an example of a method in which the monitoring system 100 according to the present embodiment follows a subject. In the schematic diagram 600, the mirror unit 10 reflects an image in the imaging direction 602 corresponding to the angle of view 606 in the direction of the imaging unit 20, and exposure of the imaging unit 20 is performed so that an area corresponding to the imaging direction 602 is captured. When the timing is set, the imaging unit 20 captures an area corresponding to the imaging direction 602. Further, the exposure timing of the imaging unit 20 is set so that the region corresponding to the imaging direction 604 is captured at the timing when the mirror unit 10 reflects the image in the imaging direction 604 corresponding to the angle of view 608 in the direction of the imaging unit 20. When set, the imaging unit 20 captures an area corresponding to the imaging direction 604. The monitoring system 100 captures an image so that a region corresponding to the imaging direction is captured when the mirror unit 10 reflects an image in a predetermined imaging direction corresponding to a predetermined angle of view in the direction of the imaging unit 20. By setting the exposure timing of the unit 20, it is possible to capture images of a plurality of regions.

ここで、模式図６００に示すように、撮像方向６０２、及び撮像方向６０４の方向に人物が含まれていた場合には、監視システム１００は、撮像方向６０２、及び撮像方向６０４のそれぞれに含まれる人物の動きを追従して動画を撮像する。例えば、模式図６３０に示すように、画角６１６に対応する撮像方向６１２の領域、及び画角６２６に対応する撮像方向６２２の領域に人物が含まれていた場合を考える。係る場合において、監視システム１００は、撮像方向６１２に含まれる人物の動きに追従して、撮像部２０に撮像させる領域を、回転方向６１０の方向に回転させる。そして、監視システム１００は、画角６１８に対応する撮像方向６１４の領域の動画を撮像する。具体的には、監視システム１００は、撮像部２０の露光タイミングを変化させて、ミラー部１０が撮像方向６１４に向いているときに、ミラー部１０において撮像部２０の方向に反射されている領域の画像を撮像部２０に撮像させる。これにより監視システム１００は、撮像方向６１４の領域の動画を撮像できる。 Here, as illustrated in a schematic diagram 600, when a person is included in the imaging direction 602 and the imaging direction 604, the monitoring system 100 is included in each of the imaging direction 602 and the imaging direction 604. A moving image is captured following the movement of a person. For example, as shown in a schematic diagram 630, a case is considered where a person is included in an area in the imaging direction 612 corresponding to the angle of view 616 and an area in the imaging direction 622 corresponding to the angle of view 626. In such a case, the monitoring system 100 follows the movement of the person included in the imaging direction 612 and rotates the area to be imaged by the imaging unit 20 in the direction of the rotation direction 610. Then, the monitoring system 100 captures a moving image in an area in the imaging direction 614 corresponding to the angle of view 618. Specifically, the monitoring system 100 changes the exposure timing of the imaging unit 20, and the area reflected by the mirror unit 10 in the direction of the imaging unit 20 when the mirror unit 10 faces the imaging direction 614. The image is captured by the imaging unit 20. Accordingly, the monitoring system 100 can capture a moving image in the region of the imaging direction 614.

一方、監視システム１００は、撮像方向６２２に含まれる人物の動きに追従して、撮像部２０に撮像させる領域を、回転方向６２０の方向に回転させる。そして、監視システム１００は、画角６２８に対応する撮像方向６２４の領域の動画を撮像する。具体的には、監視システム１００は、撮像部２０の露光タイミングを変化させて、ミラー部１０が撮像方向６２４の方向に向いているときに、ミラー部１０において撮像部２０の方向に反射されている、撮像方向６２４の領域の画像を撮像部２０に撮像させる。これにより監視システム１００は、撮像方向６２４の領域の動画も撮像できる。 On the other hand, the monitoring system 100 follows the movement of the person included in the imaging direction 622 and rotates the area to be imaged by the imaging unit 20 in the direction of the rotation direction 620. Then, the monitoring system 100 captures a moving image in an area in the imaging direction 624 corresponding to the angle of view 628. Specifically, the monitoring system 100 changes the exposure timing of the imaging unit 20, and is reflected in the direction of the imaging unit 20 by the mirror unit 10 when the mirror unit 10 is oriented in the imaging direction 624. The imaging unit 20 is caused to capture an image of the area in the imaging direction 624. As a result, the monitoring system 100 can also capture a moving image in the region of the imaging direction 624.

本実施形態に係る監視システム１００によれば、複数の領域に人物が含まれている場合に、人物が含まれている各領域の動画を撮像すると共に、各人物の動きに追従させて撮像部２０の露光タイミングを変化させることができる。これにより、監視システム１００は、複数の人物の動きについて、途切れることのない動画をそれぞれ取得できる。 According to the monitoring system 100 according to the present embodiment, when a person is included in a plurality of areas, the moving image of each area including the person is imaged, and the imaging unit is made to follow the movement of each person. The exposure timing of 20 can be changed. Thereby, the monitoring system 100 can acquire uninterrupted moving images for the movements of a plurality of persons.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。 As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.

監視システム１００の機能構成を示すブロック図である。2 is a block diagram showing a functional configuration of a monitoring system 100. FIG. 監視システム１００において動画を取得する方法を示す図である。3 is a diagram illustrating a method of acquiring a moving image in the monitoring system 100. FIG. 監視システム１００が被写体を追従する方法を示す図である。It is a figure which shows the method the monitoring system 100 tracks a to-be-photographed object. 監視システム１００が被写体を追従する方法を示す図である。It is a figure which shows the method the monitoring system 100 tracks a to-be-photographed object.

Explanation of symbols

１０ミラー部
１２回転軸
２０撮像部
３０ミラー回転制御部
４０撮像制御部
５０画像格納部
６０表示制御部
７０表示部
８０人物抽出部
８２移動ベクトル算出部
８４動き予測部
１００監視システム
２００模式図
２０２、２０４、２０６画角
２１０、２２０、２３０動画
２１２、２１４、２１６フレーム画像
２２２、２２４、２２６フレーム画像
２３２、２３４、２３６、２３８フレーム画像
４００模式図
４０２、４０６画角
４０４、４０８撮像方向
５００、５０８動画
５０２、５０４、５０６フレーム画像
５１０、５１２、５１４フレーム画像
６００、６３０模式図
６０２、６０４撮像方向
６０６、６０８画角
６１６、６１８、６２６、６２８画角
６１０、６２０回転方向
６１２、６１４、６２２、６２４撮像方向
９００、９１０人物 DESCRIPTION OF SYMBOLS 10 Mirror part 12 Rotating axis 20 Imaging part 30 Mirror rotation control part 40 Imaging control part 50 Image storage part 60 Display control part 70 Display part 80 Person extraction part 82 Movement vector calculation part 84 Motion prediction part 100 Monitoring system 200 Schematic 202 204, 206 Angle of view 210, 220, 230 Movie 212, 214, 216 Frame image 222, 224, 226 Frame image 232, 234, 236, 238 Frame image 400 Schematic diagram 402, 406 Angle of view 404, 408 Imaging direction 500, 508 Movie 502, 504, 506 Frame image 510, 512, 514 Frame image 600, 630 Schematic diagram 602, 604 Imaging direction 606, 608 Angle of view 616, 618, 626, 628 Angle of view 610, 620 Rotation direction 612, 614, 622, 62 4 Imaging direction 900, 910 People

Claims

Mirror part,
An imaging unit that captures an image reflected by the mirror unit;
A mirror rotation control unit that rotates the mirror unit so that the mirror unit continuously reflects images of a plurality of different areas in the direction of the imaging unit;
For each rotation of the mirror portion, and the realm you are reflected in the direction of the mirror portion is the imaging unit is imaging in the imaging unit when the mirror portion is oriented in a predetermined direction, said region An imaging control unit that acquires
A person extraction unit for extracting a person included in the moving image captured by the imaging unit;
A movement vector calculation unit for calculating a movement vector of the person extracted by the person extraction unit;
A motion prediction unit that predicts a person's motion based on the movement vector calculated by the movement vector calculation unit;
With
The imaging control unit is a monitoring system in which an exposure timing of the imaging unit is changed to rotate a region to be imaged by the imaging unit in accordance with the movement of the person predicted by the motion prediction unit .

For each rotation of the mirror unit, the imaging control unit applies each of the plurality of regions that the mirror unit reflects in the direction of the imaging unit when the mirror unit is facing a plurality of directions, respectively. The monitoring system according to claim 1, wherein the monitoring unit acquires images of a plurality of areas by causing the imaging unit to capture images.

A display control unit that thins out and selects frame images of a plurality of regions captured continuously by the imaging unit at a timing synchronized with a rotation period of the mirror unit;
The monitoring system according to claim 2, further comprising: a display unit that reproduces a moving image in a predetermined region by sequentially displaying the frame images selected by the display control unit.

An imaging stage for capturing an image reflected by the mirror unit;
A mirror rotation control step of rotating the mirror unit so that the mirror unit continuously reflects images of a plurality of different areas in the direction of the imaging unit;
For each rotation of the mirror portion, and the realm you are reflected in the direction of the mirror portion is the imaging unit is imaging in the imaging unit when the mirror portion is oriented in a predetermined direction, said region Imaging control stage to acquire
A person extracting step of extracting a person included in the moving image captured by the imaging unit;
A movement vector calculation stage for calculating a movement vector of the person extracted in the person extraction stage;
A motion prediction stage for predicting a person's movement based on the movement vector calculated in the movement vector calculation stage;
With
In the imaging control step, the exposure timing of the imaging unit is changed to rotate a region to be imaged by the imaging unit in accordance with the movement of the person predicted by the motion prediction unit .