JP2006101028A

JP2006101028A - Supervisory system

Info

Publication number: JP2006101028A
Application number: JP2004282612A
Authority: JP
Inventors: Kazuhiro Igarashi; 和広五十嵐
Original assignee: Hitachi Kokusai Electric Inc
Current assignee: Hitachi Kokusai Electric Inc
Priority date: 2004-09-28
Filing date: 2004-09-28
Publication date: 2006-04-13

Abstract

PROBLEM TO BE SOLVED: To provide a supervisory system capable of selecting a video image with a particular object imaged thereon in an optimum state and distributing the selected video image. SOLUTION: A wireless tag T1 is fitted to an object 21, a wireless signal transmitted from the wireless tag T1 is respectively received at installed positions of cameras C1 to C4, and an ID reception history database 13a stores the received ID and the reception strength of the object by each of the cameras C1 to C4. When user terminals PC1 to PCn and a mobile terminal MP transmit a video distribution request, a camera imaging the object of a supervisory object is particularized by searching the ID reception history database 13a on the basis of the ID of the object of the supervisory object included in the distribution request. Further, when there are a plurality of cameras having imaged the object of the supervisory object within the same time zone, one of the cameras with the highest reception strength stored in the ID reception history database 13a is selected, and video data imaged by the camera are selected and transmitted to a terminal of a request source. COPYRIGHT: (C)2006,JPO&NCIPI

Description

この発明は、監視カメラ等の撮像装置で撮影された画像をネットワーク経由で閲覧者に配信する監視システムに関する。 The present invention relates to a monitoring system that distributes an image captured by an imaging device such as a monitoring camera to a viewer via a network.

近年、Ｗｅｂカメラやネットワークカメラにより撮影した映像を、インターネットやＬＡＮ（Local Area Network）などの各種通信ネットワークを介して閲覧者の端末へ配信するシステムへの関心が高まっている。この種のシステムを利用すると、通信ネットワークに接続されたパーソナル・コンピュータなどの端末において、ブラウザ・ソフトウェアを用いることでカメラ映像を簡単に見ることができ、閲覧者は居ながらにして遠隔地のリアルな映像を閲覧することができる。 In recent years, there has been an increasing interest in systems that distribute video captured by a Web camera or network camera to a viewer's terminal via various communication networks such as the Internet or a LAN (Local Area Network). Using this type of system, it is possible to easily view the camera video on a terminal such as a personal computer connected to a communication network by using browser software. You can browse the video.

例えば、幼稚園や保育園、託児所などにＷｅｂカメラやネットワークカメラを設置して、子供の様子を家庭や職場からリアルタイムに監視するシステムが提案されている。しかし、リアルタイム配信であると、幼稚園などが開園している時間内に閲覧しなければならないので、勤務時間中に監視することはできないし、常時リアルタイムで見ることは困難である。そこで、カメラで撮影された映像を蓄積し、リアルタイムまたは蓄積した映像を選択して配信するシステムが提案されている（例えば、特許文献１を参照。）。 For example, a system has been proposed in which a Web camera or a network camera is installed in a kindergarten, nursery school, day nursery, etc., and the state of a child is monitored in real time from a home or workplace. However, in the case of real-time distribution, since it must be viewed within the time when the kindergarten is open, it cannot be monitored during working hours, and it is difficult to always see in real time. In view of this, a system has been proposed in which videos taken by a camera are accumulated, and real-time or accumulated videos are selected and distributed (see, for example, Patent Document 1).

特開２００４−１１２１６７公報JP 2004-112167 A

ところが、園内に複数のカメラを設置したシステムの場合、特定の被写体を見つけるのは困難である。例えば、幼稚園や保育園では制服や体操着などを着用していることがあり、自分の子供を見分けるのが難しい場合がある。また、子供たちは自由に動き回るため、１つのカメラで撮像された映像に収まっていることは稀である。このため、保護者は複数のカメラ映像を見比べ、その中から絶えず自分の子供を捜さなければならない。 However, in a system in which a plurality of cameras are installed in the garden, it is difficult to find a specific subject. For example, a kindergarten or a nursery school may wear uniforms or gym clothes, and it may be difficult to distinguish one's own child. In addition, since children move around freely, it is rare that they are contained in an image captured by one camera. For this reason, parents must compare multiple camera images and constantly search for their children.

この発明は上記事情に着目してなされたもので、その目的とするところは、複数のカメラを用いた監視システムにおいて、特定の被写体が最適な状態で撮像されている映像を選択して配信可能な監視システムを提供することにある。 The present invention has been made paying attention to the above circumstances, and the object of the present invention is to select and deliver a video in which a specific subject is imaged in an optimal state in a monitoring system using a plurality of cameras. Is to provide a simple monitoring system.

上記目的を達成するためにこの発明は、監視対象エリアを撮像して監視画像を出力する複数の撮像装置と、上記複数の撮像装置と信号伝送路を介して接続されると共に、外部端末と通信ネットワークを介して接続されるサーバ装置と、上記監視対象エリア内に存在する被写体が上記複数の撮像装置の撮像範囲のいずれに位置するかを検出する被写体検出装置とを備える。そして、上記サーバ装置は、上記複数の撮像装置から出力される監視画像を、上記信号伝送路を介してそれぞれ収集し、収集した監視画像ごとに、監視画像中に含まれる上記被写体の撮像状態を検出する。さらに、上記外部端末から特定の被写体を含む監視画像の配信要求が送られた場合に、上記被写体検出装置による検出結果及び検出された撮像状態に基づいて、収集された複数の監視画像の中から特定の被写体を含みかつ当該被写体の撮像状態が最も良い監視画像を選択する。そして、この選択された監視画像を配信要求元の外部端末へ通信ネットワークを介して送信するようにしたものである。 In order to achieve the above object, the present invention is connected to a plurality of imaging devices that image a monitoring target area and output a monitoring image, and are connected to the plurality of imaging devices via a signal transmission path and communicate with an external terminal. A server device connected via a network; and a subject detection device that detects in which of the imaging ranges of the plurality of imaging devices the subject existing in the monitoring target area is located. Then, the server device collects the monitoring images output from the plurality of imaging devices through the signal transmission path, and sets the imaging state of the subject included in the monitoring image for each collected monitoring image. To detect. Further, when a monitoring image delivery request including a specific subject is sent from the external terminal, based on the detection result by the subject detection device and the detected imaging state, a plurality of collected monitoring images are selected. A monitoring image including a specific subject and having the best imaging state of the subject is selected. Then, the selected monitoring image is transmitted to the external terminal as the distribution request source via the communication network.

このように構成することにより、配信される監視画像には常に閲覧を希望する特定の被写体が撮像されているため、閲覧者は複数の撮像装置が撮像した監視画像の内から特定の被写体を検索する時間や負担を軽減することが可能となる。さらに、同時刻に複数の撮像装置によって被写体が撮像されていた場合は、検出された撮像状態に基づいて、当該被写体の撮像状態が最も良い監視画像が選択されて配信されるため、閲覧者は特定の被写体が最適な状態で撮像されている監視画像を閲覧することが可能となる。 With this configuration, since a specific subject desired to be browsed is always captured in the distributed monitoring image, the viewer searches for a specific subject from among the monitoring images captured by a plurality of imaging devices. It becomes possible to reduce the time and burden to do. Furthermore, when a subject is imaged by a plurality of imaging devices at the same time, since the monitoring image with the best imaging state of the subject is selected and distributed based on the detected imaging state, the viewer can It is possible to view a monitoring image in which a specific subject is captured in an optimal state.

したがってこの発明によれば、複数のカメラを用いた監視システムにおいて、特定の被写体が最適な状態で撮像されている映像を選択して配信可能な監視システムを提供することができる。 Therefore, according to the present invention, it is possible to provide a monitoring system that can select and distribute a video in which a specific subject is captured in an optimal state in a monitoring system using a plurality of cameras.

図１は、この発明に係わる監視システムの一実施形態を示す概略構成図である。このシステムは、カメラＣ１〜Ｃ４、サーバ装置ＳＶ、及び通信ネットワークＮＷを備える。
カメラＣ１〜Ｃ４は、ネットワーク・インタフェースが設けられたネットワークカメラやＷｅｂカメラなどで構成される。そして、撮像管やＣＣＤ（Charge Coupled Device）等の固体撮像素子により撮像された映像をデジタル処理し、ネットワーク・インタフェースを介して映像を配信する機能を有する。カメラＣ１〜Ｃ４は、例えば図１に示すように監視対象エリアに一定の間隔で配置され、監視対象エリア内で移動する被写体２１を分担して撮像する。カメラＣ１〜Ｃ４により撮像された映像信号は、カメラに設けられたネットワーク・インタフェースにより信号ケーブル又はＬＡＮ（Local Area Network）を介してサーバ装置ＳＶに送信される。 FIG. 1 is a schematic configuration diagram showing an embodiment of a monitoring system according to the present invention. This system includes cameras C1 to C4, a server device SV, and a communication network NW.
The cameras C1 to C4 are configured by a network camera or a web camera provided with a network interface. Then, it has a function of digitally processing an image picked up by a solid-state image pickup device such as an image pickup tube or a CCD (Charge Coupled Device) and distributing the image via a network interface. For example, as shown in FIG. 1, the cameras C1 to C4 are arranged at regular intervals in the monitoring target area, and shoot the subject 21 moving within the monitoring target area. Video signals captured by the cameras C1 to C4 are transmitted to the server apparatus SV via a signal cable or a LAN (Local Area Network) by a network interface provided in the camera.

サーバ装置ＳＶは、上記カメラＣ１〜Ｃ４により撮像された映像信号を上記信号ケーブル又はＬＡＮを介して受信する機能を備える。また、閲覧者が使用するユーザ端末ＰＣ１〜ＰＣｎに対して、通信ネットワークＮＷを介して接続される。ユーザ端末ＰＣ１〜ＰＣｎは例えばパーソナル・コンピュータにより構成され、ブラウザ・ソフトウェアを備えている。通信ネットワークＮＷは、例えばＬＡＮ、或いはインターネットに代表されるコンピュータ・ネットワークとこのコンピュータ・ネットワークとユーザ端末との間を接続するための加入者網とから構成される。なお、上記ユーザ端末には携帯電話機やＰＤＡ（Personal Digital Assistants）等の携帯端末ＭＰも含まれる。これらの携帯端末ＭＰは図示しない移動通信網を経由して上記コンピュータ・ネットワークに接続される。 The server device SV has a function of receiving the video signal captured by the cameras C1 to C4 via the signal cable or the LAN. Moreover, it connects via the communication network NW with respect to user terminal PC1-PCn which a viewer uses. The user terminals PC1 to PCn are constituted by personal computers, for example, and are provided with browser software. The communication network NW includes, for example, a computer network represented by a LAN or the Internet, and a subscriber network for connecting the computer network and a user terminal. The user terminals include mobile terminals MP such as mobile phones and PDAs (Personal Digital Assistants). These portable terminals MP are connected to the computer network via a mobile communication network (not shown).

また、閲覧者は予めサーバ装置ＳＶにユーザ登録され、アカウントとパスワードを付与されている。このアカウントとパスワードをユーザ端末ＰＣ１〜ＰＣｎ及び携帯電話ＭＰから、通信ネットワークＮＷを介してサーバ装置ＳＶに対して送信し、ユーザ認証を行うことで、カメラＣ１〜Ｃ４により撮像された映像を閲覧可能となる。 In addition, the viewer is registered in advance in the server device SV and given an account and a password. By transmitting this account and password from the user terminals PC1 to PCn and the mobile phone MP to the server device SV via the communication network NW and performing user authentication, the images captured by the cameras C1 to C4 can be viewed. It becomes.

さて、カメラＣ１〜Ｃ４による被写体２１の撮像動作について図２を用いて説明する。カメラＣ１〜Ｃ４は構成が同一であるため、ここではカメラＣ１について説明を行う。幼稚園児や保育園児などの被写体２１に取着された名札やバッヂには、無線タグＴ１が設けられている。この無線タグＴ１は、例えば、ＲＦＩＤ（Radio Frequency IDentification）タグからなり、被写体ごとにユニークに設定された個別識別情報（以下、ＩＤと呼称する）を無線信号として発信する。 Now, the imaging operation of the subject 21 by the cameras C1 to C4 will be described with reference to FIG. Since the cameras C1 to C4 have the same configuration, the camera C1 will be described here. A wireless tag T1 is provided on a name tag or badge attached to a subject 21 such as a kindergarten child or a nursery school child. The wireless tag T1 is composed of, for example, an RFID (Radio Frequency IDentification) tag, and transmits individual identification information (hereinafter referred to as ID) uniquely set for each subject as a wireless signal.

一方、カメラＣ１にはタグリーダＲ１が付設されている。タグリーダＲ１は、被写体２１に取着された無線タグＴ１が発する無線信号を受信する。そして、受信した信号から被写体のＩＤを認識する。また、タグリーダＲ１は、無線タグＴ１が発する無線信号の受信強度を測定する機能を有する。カメラＣ１〜Ｃ４は、撮像により得られた映像信号と共に、上記認識されたＩＤ及び測定された受信強度を表す情報をサーバ装置ＳＶに送信する。 On the other hand, a tag reader R1 is attached to the camera C1. The tag reader R1 receives a wireless signal emitted from the wireless tag T1 attached to the subject 21. Then, the subject ID is recognized from the received signal. The tag reader R1 has a function of measuring the reception intensity of a radio signal emitted from the radio tag T1. The cameras C1 to C4 transmit information representing the recognized ID and the measured reception intensity to the server device SV together with the video signal obtained by imaging.

サーバ装置ＳＶは、例えば次のように構成される。図３は、その機能構成を示すブロック図である。すなわち、サーバ装置ＳＶはマイクロプロセッサなどのＣＰＵ（Central Processing Unit）１１を備える。このＣＰＵ１１には、バス１２を介して、データメモリ１３及びプログラムメモリ１４が接続され、さらにカメラ入力インタフェース（カメラ入力Ｉ／Ｆ）１５と通信インタフェース（通信Ｉ／Ｆ）１６が接続されている。カメラ入力Ｉ／Ｆ１５は、前述したカメラＣ１〜Ｃ４からの映像信号と被写体のＩＤ及び受信強度を表す情報の受信処理を行う。通信Ｉ／Ｆ１６は、通信ネットワークＮＷを介してユーザ端末ＰＣ１〜ＰＣｎ及び携帯電話ＭＰとの間でデータの送受信を行う。 The server device SV is configured as follows, for example. FIG. 3 is a block diagram showing the functional configuration. That is, the server apparatus SV includes a CPU (Central Processing Unit) 11 such as a microprocessor. A data memory 13 and a program memory 14 are connected to the CPU 11 via a bus 12, and a camera input interface (camera input I / F) 15 and a communication interface (communication I / F) 16 are further connected. The camera input I / F 15 performs reception processing of the video signal from the cameras C1 to C4 described above and information representing the subject ID and reception intensity. The communication I / F 16 transmits / receives data to / from the user terminals PC1 to PCn and the mobile phone MP via the communication network NW.

データメモリ１３は、記憶媒体として例えばＲＡＭまたはハードディスクなどを使用する。データメモリ１３には、カメラＣ１〜Ｃ４に対応付けてＩＤ受信履歴データベース１３ａ及び蓄積映像データベース１３ｂが記憶される。ＩＤ受信履歴データベース１３ａには、タグリーダＲ１により受信された無線タグＴ１のＩＤと受信強度が受信時刻に対応付けて記憶される。蓄積映像データベース１３ｂは、カメラ入力Ｉ／Ｆを介して受信されたカメラＣ１〜Ｃ４の映像データが記憶される。 The data memory 13 uses, for example, a RAM or a hard disk as a storage medium. The data memory 13 stores an ID reception history database 13a and an accumulated video database 13b in association with the cameras C1 to C4. The ID reception history database 13a stores the ID and reception intensity of the wireless tag T1 received by the tag reader R1 in association with the reception time. The stored video database 13b stores video data of the cameras C1 to C4 received via the camera input I / F.

プログラムメモリ１４には、この発明に係わる制御プログラムとして、ＩＤ受信履歴作成プログラム１４ａ、ライブ映像配信プログラム１４ｂ及び蓄積映像配信プログラム１４ｃが格納される。ＩＤ受信履歴作成プログラム１４ａは、前述のＩＤ受信履歴データベース１３ａの作成を行う。ライブ映像配信プログラム１４ｂは、ユーザ端末ＰＣ１〜ＰＣｎ及び携帯端末ＭＰからの映像配信要求に応じて、カメラＣ１〜Ｃ４により撮像された映像データをリアルタイムで配信する。蓄積映像配信プログラム１４ｃは、ユーザ端末ＰＣ１〜ＰＣｎ及び携帯端末ＭＰからの映像配信要求に応じて、蓄積映像データベース１３ｂから該当するカメラ映像を読み出して配信する。 The program memory 14 stores an ID reception history creation program 14a, a live video distribution program 14b, and a stored video distribution program 14c as control programs according to the present invention. The ID reception history creation program 14a creates the ID reception history database 13a described above. The live video distribution program 14b distributes video data captured by the cameras C1 to C4 in real time in response to video distribution requests from the user terminals PC1 to PCn and the portable terminal MP. The stored video distribution program 14c reads and distributes the corresponding camera video from the stored video database 13b in response to video distribution requests from the user terminals PC1 to PCn and the portable terminal MP.

ところで、上記ライブ映像配信プログラム１４ｂ及び蓄積映像配信プログラム１４ｃはいずれも配信対象映像の選択制御機能を備えている。配信対象映像の選択制御機能は、ユーザ端末ＰＣ１〜ＰＣｎ及び携帯端末ＭＰから映像配信要求が送られた場合に、この配信要求から監視対象の被写体のＩＤを抽出する。そして、カメラＣ１〜Ｃ４に対応して設けられたＩＤ受信履歴データベース１３ａを検索することで、上記抽出されたＩＤに対応する被写体を撮像したカメラを特定する。そして、同一時間帯に上記被写体を撮像したカメラが複数台存在する場合には、ＩＤ受信履歴データベース１３ａに記憶された受信強度が最も大きいカメラを１台選択し、このカメラにより撮像された映像データを選択して送信させる。 By the way, both the live video distribution program 14b and the stored video distribution program 14c have a distribution target video selection control function. When a video distribution request is sent from the user terminals PC1 to PCn and the portable terminal MP, the distribution target video selection control function extracts the ID of the subject to be monitored from the distribution request. And the camera which imaged the to-be-photographed object corresponding to the said extracted ID is specified by searching the ID reception log | history database 13a provided corresponding to the cameras C1-C4. If there are a plurality of cameras that capture the subject in the same time period, one camera having the highest reception intensity stored in the ID reception history database 13a is selected, and the video data captured by the camera is selected. Select to send.

次に、以上のように構成されたシステムによる監視に関わる動作について説明する。
カメラＣ１〜Ｃ４は、被写体２１が存在する監視対象領域を保育園または幼稚園の開園時刻から閉園時刻まで連続して撮像する。また、被写体２１に取着された無線タグＴ１は、被写体のＩＤを無線信号としてある一定の周期（この実施例では１分間）ごとに発信する。カメラＣ１〜Ｃ４に付設されたタグリーダＲ１は、受信した無線信号からＩＤを認識し、さらに無線信号の受信強度を測定する。そして、カメラＣ１〜Ｃ４は、撮像した映像と共に、上記受信されたＩＤ及び測定された受信強度をサーバ装置ＳＶに対して送信する。 Next, operations related to monitoring by the system configured as described above will be described.
The cameras C 1 to C 4 continuously image the monitoring target area where the subject 21 exists from the opening time of the nursery school or the kindergarten to the closing time. Further, the wireless tag T1 attached to the subject 21 transmits the subject ID as a wireless signal every certain period (1 minute in this embodiment). The tag reader R1 attached to the cameras C1 to C4 recognizes the ID from the received wireless signal, and further measures the reception strength of the wireless signal. Then, the cameras C1 to C4 transmit the received ID and the measured received intensity to the server device SV together with the captured video.

これに対して、サーバ装置ＳＶでは、常駐プログラムとしてＩＤ受信履歴作成プログラム１４ａが実行されている。このＩＤ受信履歴作成プログラム１４ａに従いサーバ装置ＳＶのＣＰＵ１１は、カメラ入力Ｉ／Ｆ１５により受信された上記カメラ映像を、受信時刻を表すタイムスタンプを付して蓄積映像データベース１３ｂに蓄積する。またそれと共に、受信されたＩＤ及び受信強度をＩＤ受信履歴データベース１３ａに受信時刻に対応付けて記憶する。その一例を図４に示す。 On the other hand, in the server apparatus SV, an ID reception history creation program 14a is executed as a resident program. In accordance with the ID reception history creation program 14a, the CPU 11 of the server device SV stores the camera video received by the camera input I / F 15 in the stored video database 13b with a time stamp indicating the reception time. At the same time, the received ID and reception intensity are stored in the ID reception history database 13a in association with the reception time. An example is shown in FIG.

次に、上記作成されたＩＤ受信履歴データベース１３ａを利用して、撮像中のカメラ映像や蓄積映像データベース１３ｂに記憶されたカメラ映像を通信ネットワークＮＷを介してユーザ端末ＰＣ１〜ＰＣｎ及び携帯電話ＭＰに対して配信する動作について説明する。 Next, using the created ID reception history database 13a, the camera video being captured and the camera video stored in the stored video database 13b are transmitted to the user terminals PC1 to PCn and the mobile phone MP via the communication network NW. An operation for distributing the content will be described.

（Ａ）ライブ映像の配信
図５は、ライブ映像配信制御の処理手順と処理内容を示すフローチャートである。
ユーザ端末ＰＣ１〜ＰＣｎにおいて閲覧者がライブ映像の閲覧操作を行うと、当該ユーザ端末ＰＣ１〜ＰＣｎからサーバ装置ＳＶに対し、通信ネットワークＮＷを介して監視対象の被写体２１のＩＤを含むライブ映像閲覧要求が送信される。 (A) Live video distribution
FIG. 5 is a flowchart showing a processing procedure and processing contents of live video distribution control.
When the viewer performs a live video browsing operation on the user terminals PC1 to PCn, a live video browsing request including the ID of the subject 21 to be monitored is transmitted from the user terminals PC1 to PCn to the server SV via the communication network NW. Is sent.

サーバ装置ＳＶは、上記ライブ映像閲覧要求が通信Ｉ／Ｆ１６において受信されると、以後ライブ映像配信プログラム１４ｂに従い以下のようにライブ配信制御を実行する。すなわち、ＣＰＵ１１は先ずステップＳ５ａにおいて、上記受信されたライブ映像閲覧要求から監視対象の被写体２１のＩＤを抽出する。続いてステップＳ５ｂにより、上記抽出されたＩＤをもとに各ＩＤ受信履歴データベース１３ａを検索して、該当する被写体を撮像したカメラを特定する。なお、ＩＤ受信履歴データベース１３ａに現在時刻と一致する受信時刻が記憶されていない場合には、現在時刻に最も近い受信時刻を選択し、この受信時刻に対応付けて記憶されている受信ＩＤをもとにカメラを特定する。 When the live video browsing request is received in the communication I / F 16, the server device SV subsequently performs live distribution control according to the live video distribution program 14 b as follows. That is, first, in step S5a, the CPU 11 extracts the ID of the subject 21 to be monitored from the received live video browsing request. Subsequently, in step S5b, each ID reception history database 13a is searched based on the extracted ID, and the camera that captured the corresponding subject is specified. If the reception time that matches the current time is not stored in the ID reception history database 13a, the reception time closest to the current time is selected, and the reception ID stored in association with this reception time is also stored. And identify the camera.

次にＣＰＵ１１は、上記検索処理により特定されたカメラが複数台存在するか否かをステップＳ５ｃにより判定する。この判定により、複数のカメラが存在すると判定された場合は、ステップＳ５ｄに移行し、各カメラのＩＤ受信履歴データベース１３ａにアクセスし、記憶されている受信強度が最も大きいカメラを選択する。かくして、監視対象の被写体が最も大きく写っているカメラが選択される。 Next, the CPU 11 determines whether or not there are a plurality of cameras specified by the search process in step S5c. If it is determined by this determination that there are a plurality of cameras, the process proceeds to step S5d, the ID reception history database 13a of each camera is accessed, and the camera having the highest received intensity is selected. In this way, the camera in which the subject to be monitored is shown as the largest is selected.

そしてＣＰＵ１１は、ステップＳ５ｅにより、以後上記選択されたカメラから送られる映像データを通信ネットワークＮＷを介して配信要求元のユーザ端末ＰＣ１〜ＰＣｎ又は携帯端末ＭＰへ送信する。また、ステップＳ５ｄの判定において、被写体２１を撮像中のカメラが１台のみ検索された場合には、ステップＳ５ｅに移行して、以後上記検索されたカメラから送られた映像データを配信要求元のユーザ端末ＰＣ１〜ＰＣｎ又は携帯端末ＭＰへ送信する。 Then, in step S5e, the CPU 11 transmits the video data sent from the selected camera to the user terminals PC1 to PCn or the portable terminal MP as the distribution request source via the communication network NW. If it is determined in step S5d that only one camera that is imaging the subject 21 is searched, the process proceeds to step S5e, and the video data sent from the searched camera is transmitted to the distribution request source. It transmits to user terminal PC1-PCn or portable terminal MP.

さらに、上記配信中にＣＰＵ１１は、ステップＳ５ｆにおいて、ユーザ端末ＰＣ１〜ＰＣｎ又は携帯端末ＭＰから閲覧終了要求が受信されたか否かの判定を行い、受信されない場合にはステップＳ５ｇに移行する。そしてステップＳ５ｇにおいて、ある単位時間（例えば１分）の時刻経過を検知すると、ステップＳ５ｂに戻り、先に述べた動作を繰り返し行う。これに対しステップＳ５ｆの終了判定において閲覧終了要求の受信を検出すると、サーバ装置ＳＶはライブ映像の配信を終了する。 Furthermore, during the distribution, the CPU 11 determines whether or not a browsing end request is received from the user terminals PC1 to PCn or the portable terminal MP in step S5f. If not received, the process proceeds to step S5g. In step S5g, when a time elapse of a certain unit time (for example, 1 minute) is detected, the process returns to step S5b to repeat the above-described operation. On the other hand, when the reception end request is detected in the end determination in step S5f, the server device SV ends the live video distribution.

（Ｂ）蓄積映像の配信
図６は、蓄積映像配信制御の処理手順と処理内容を示すフローチャートである。
ユーザ端末ＰＣ１〜ＰＣｎ又は携帯端末ＭＰにおいて閲覧者が蓄積映像の閲覧操作を行うと、当該ユーザ端末ＰＣ１〜ＰＣｎ又は携帯端末ＭＰからサーバ装置ＳＶに対し、通信ネットワークＮＷを介して、閲覧対象期間を指定する情報及び監視対象の被写体２１のＩＤを含む蓄積映像閲覧要求が送信される。 (B) Distribution of stored video
FIG. 6 is a flowchart showing the processing procedure and processing contents of the stored video distribution control.
When the viewer performs an operation for browsing the stored video in the user terminals PC1 to PCn or the portable terminal MP, the user terminal PC1 to PCn or the portable terminal MP sends the browsing target period to the server device SV via the communication network NW. A stored image browsing request including information to be specified and the ID of the subject 21 to be monitored is transmitted.

これに対しサーバ装置ＳＶは、上記蓄積映像閲覧要求が通信Ｉ／Ｆ１６において受信されると、以後蓄積映像配信プログラム１４ｃに従い以下のように蓄積配信制御を実行する。すなわち、ＣＰＵ１１は、先ずステップＳ６ａにおいて、上記受信された蓄積映像閲覧要求から閲覧対象期間の指定情報及び監視対象の被写体２１のＩＤをそれぞれ抽出する。そして、上記指定された閲覧期間の開始時刻及び終了時刻を設定し、以後上記設定された開始時刻から終了時刻まで一定時間置きに蓄積映像を送信するための処理をステップＳ６ｂループ開始からステップＳ６ｈのループ終了まで繰り返し行う。 On the other hand, when the stored video browsing request is received in the communication I / F 16, the server device SV subsequently executes storage distribution control according to the stored video distribution program 14c as follows. That is, first, in step S6a, the CPU 11 extracts the browsing target period designation information and the monitoring subject ID 21 from the received stored video browsing request. Then, the start time and end time of the designated browsing period are set, and the process for transmitting the stored video at regular intervals from the set start time to the end time is performed from the start of the step S6b loop to the step S6h. Repeat until the end of the loop.

すなわち、ＣＰＵ１１は先ずステップＳ６ｃにおいて、上記抽出されたＩＤをもとに各ＩＤ受信履歴データベース１３ａを検索して、該当する被写体を撮像したカメラを特定する。なお、ＩＤ受信履歴データベース１３ａに上記設定時刻と一致する受信時刻が記憶されていない場合には、上記設定時刻に最も近い受信時刻を選択し、この受信時刻に対応付けて記憶されている受信ＩＤをもとにカメラを特定する。 That is, first, in step S6c, the CPU 11 searches each ID reception history database 13a based on the extracted ID, and specifies the camera that captured the corresponding subject. If the reception time that matches the set time is not stored in the ID reception history database 13a, the reception time closest to the set time is selected, and the reception ID stored in association with the reception time is selected. Identify the camera based on

次にＣＰＵ１１は、上記検索処理により特定されたカメラが複数台存在するか否かをステップＳ６ｄにより判定する。この判定により、複数のカメラが存在すると判定された場合は、ステップＳ６ｅに移行し、各カメラのＩＤ受信履歴データベース１３ａにアクセスし、記憶されている受信強度が最も大きいカメラを選択する。かくして、監視対象の被写体が最も大きく写っているカメラが選択される。 Next, the CPU 11 determines in step S6d whether there are a plurality of cameras specified by the search process. If it is determined by this determination that there are a plurality of cameras, the process proceeds to step S6e, the ID reception history database 13a of each camera is accessed, and the camera having the highest received intensity is selected. In this way, the camera in which the subject to be monitored is shown as the largest is selected.

そしてＣＰＵ１１は、ステップＳ６ｆにより、上記選択されたカメラに対応する蓄積映像データベース１３ｂをアクセスし、この蓄積映像データベース１３ｂから設定された時刻に対応する監視映像データを読み出す。そして、この読み出された監視映像データを、通信ネットワークＮＷを介して配信要求元のユーザ端末ＰＣ１〜ＰＣｎ又は携帯端末ＭＰへ送信する。 In step S6f, the CPU 11 accesses the stored video database 13b corresponding to the selected camera, and reads the monitoring video data corresponding to the set time from the stored video database 13b. Then, the read monitoring video data is transmitted to the distribution request source user terminals PC1 to PCn or the portable terminal MP via the communication network NW.

また、ステップＳ６ｄの判定において、被写体２１を撮像中のカメラが１台のみ検索された場合には、そのままステップＳ６ｆに移行する。そして、上記検索されたカメラに対応する蓄積映像データベース１３ｂをアクセスして、上記設定された時刻に対応する監視映像データを読み出し、この読み出された監視映像データを通信ネットワークＮＷを介して配信要求元のユーザ端末ＰＣ１〜ＰＣｎ又は携帯端末ＭＰへ送信する。 If it is determined in step S6d that only one camera that is imaging the subject 21 is searched, the process proceeds to step S6f. Then, the stored video database 13b corresponding to the searched camera is accessed, the monitoring video data corresponding to the set time is read out, and the read monitoring video data is requested to be distributed via the communication network NW. Transmit to the original user terminals PC1 to PCn or the portable terminal MP.

そうしてある設定時刻における映像データの送信が終了すると、ＣＰＵ１１はステップＳ６ｇに移行して次の時刻を設定し、ステップＳ６ｂのループ開始からステップＳ６ｈのループ終了まで蓄積映像の配信処理を繰り返す。
例えば、図７の期間Ｇ〜期間Ｌに示すように被写体２１がカメラＣ１〜Ｃ４によりそれぞれ撮像されたとする。このうち期間Ｋと期間Ｌにおいては、被写体２１がカメラＣ３及びカメラＣ４の両方で撮像されている。この場合、蓄積映像配信プログラム１４ｂは、ＩＤ受信履歴データベース１３ａをアクセスして、期間Ｋと期間Ｌにおける無線タグＴ１から発信された無線信号の受信強度をそれぞれ読み出す。そして、期間Ｋの受信強度がレベル５、期間Ｌの受信強度がレベル３であった場合、撮影時間が重複している時間に関しては、受信強度の大きいカメラＣ３を優先する。かくして、その時刻ごとに無線タグＴ１からの受信レベルが最も大きい映像データ、つまり監視対象の被写体２１が最も大きく写っていると推測される監視映像データが選択され、閲覧者の端末へ配信される。 When the transmission of the video data at the set time is completed, the CPU 11 proceeds to step S6g to set the next time, and repeats the accumulated video distribution process from the start of the loop in step S6b to the end of the loop in step S6h.
For example, it is assumed that the subject 21 is captured by the cameras C1 to C4 as shown in the period G to the period L in FIG. Among these, in the period K and the period L, the subject 21 is imaged by both the camera C3 and the camera C4. In this case, the stored video distribution program 14b accesses the ID reception history database 13a and reads out the reception strengths of the wireless signals transmitted from the wireless tag T1 in the period K and the period L, respectively. When the reception intensity in the period K is level 5 and the reception intensity in the period L is level 3, priority is given to the camera C3 having a high reception intensity for the time when the imaging times overlap. Thus, the video data having the highest reception level from the wireless tag T1 at that time, that is, the monitoring video data that is estimated to be the largest subject 21 to be monitored is selected and distributed to the viewer's terminal. .

以上述べたようにこの実施形態では、被写体２１に無線タグＴ１を取着すると共に、これらの無線タグＴ１から送信される無線信号を各カメラＣ１〜Ｃ４の設置位置においてそれぞれ受信し、受信された被写体のＩＤ及び受信強度をカメラＣ１〜Ｃ４ごとにＩＤ受信履歴データベース１３ａに記憶する。そして、ユーザ端末ＰＣ１〜ＰＣｎ及び携帯端末ＭＰから映像配信要求が送られた場合に、この配信要求に含まれる監視対象の被写体のＩＤをもとに上記ＩＤ受信履歴データベース１３ａを検索することで、上記監視対象の被写体を撮像したカメラを特定する。また、同一時間帯に上記監視対象の被写体を撮像したカメラが複数台存在する場合には、ＩＤ受信履歴データベース１３ａに記憶された受信強度が最も大きいカメラを１台選択し、このカメラにより撮像された映像データを選択して要求元の端末へ送信するようにしている。 As described above, in this embodiment, the wireless tag T1 is attached to the subject 21, and the wireless signals transmitted from these wireless tags T1 are received and received at the installation positions of the cameras C1 to C4, respectively. The subject ID and reception intensity are stored in the ID reception history database 13a for each of the cameras C1 to C4. Then, when a video distribution request is sent from the user terminals PC1 to PCn and the portable terminal MP, by searching the ID reception history database 13a based on the ID of the subject to be monitored included in the distribution request, A camera that images the subject to be monitored is specified. In addition, when there are a plurality of cameras that capture the subject to be monitored in the same time zone, one camera having the highest reception intensity stored in the ID reception history database 13a is selected and captured by this camera. The selected video data is selected and transmitted to the requesting terminal.

したがってこの実施形態によれば、配信される映像データには常に閲覧を希望する特定の被写体２１が撮像されているため、閲覧者はカメラＣ１〜Ｃ４が撮像した映像の内から特定の被写体２１を検索する時間や負担を軽減することが可能となる。さらに、同時刻に複数のカメラＣ１〜Ｃ４によって被写体が撮像されていた場合は、被写体２１に取着された無線タグＴ１が発する無線信号の受信強度に基づいて、受信強度が最も大きいカメラが選択されてその撮像映像データが配信されるため、閲覧者は常に特定の被写体が最も大きく写されている映像データを閲覧することが可能となり、これにより例えば自身の子供の様子をより明瞭に確認することが可能となる。 Therefore, according to this embodiment, since the specific subject 21 desired to be browsed is always captured in the video data to be distributed, the viewer selects the specific subject 21 from the images captured by the cameras C1 to C4. Search time and burden can be reduced. Furthermore, when the subject is captured by a plurality of cameras C1 to C4 at the same time, the camera with the highest reception strength is selected based on the reception strength of the wireless signal emitted from the wireless tag T1 attached to the subject 21. Since the captured video data is distributed, the viewer can always browse the video data in which the specific subject is the largest image, thereby more clearly confirming the state of the child, for example. It becomes possible.

なお、この発明は上記実施形態に限定されるものではない。例えば、被写体２１の撮像に用いられるカメラの台数やタグリーダＲ１は、システム規模によって変更可能である。また、タグリーダＲ１は、対応するカメラが撮像している被写体に取着された無線タグＴ１からの無線信号を受信可能な位置にあれば、カメラと同じ位置にある必要はない。その場合、タグリーダＲ１とサーバ装置ＳＶを通信ケーブルなどで接続し、タグリーダＲ１が受信したＩＤをサーバ装置ＳＶに直接入力するようにしてもよい。 The present invention is not limited to the above embodiment. For example, the number of cameras used for imaging the subject 21 and the tag reader R1 can be changed depending on the system scale. The tag reader R1 does not have to be at the same position as the camera as long as the tag reader R1 is in a position where it can receive a wireless signal from the wireless tag T1 attached to the subject imaged by the corresponding camera. In this case, the tag reader R1 and the server device SV may be connected by a communication cable or the like, and the ID received by the tag reader R1 may be directly input to the server device SV.

また、被写体２１が同時刻に複数のカメラで撮像されている場合に、前記実施形態では無線タグＴ１から発せられた無線信号の受信強度を利用して選択優先順位を決定した。しかし、選択優先順位を決定するための被写体画像の状態情報としては、例えば顔が正面を向いているかどうか、映像中の中央に位置するかどうか、被写体が欠けていないかどうかなどを採用してもよく、さらにはこれらの条件を組み合わせることにより、選択優先順位を決定することも可能である。さらに、閲覧者がどのような条件の映像を閲覧するかを選択できるように構成する。このようにすると、閲覧者の希望にさらに合致する映像を提供することが可能となる。 Further, when the subject 21 is captured by a plurality of cameras at the same time, the selection priority is determined using the reception intensity of the wireless signal emitted from the wireless tag T1 in the embodiment. However, the state information of the subject image for determining the selection priority order adopts, for example, whether the face is facing the front, whether it is located in the center of the video, whether the subject is missing, etc. It is also possible to determine the selection priority by combining these conditions. Furthermore, it is configured so that the viewer can select what conditions the video should be viewed. In this way, it is possible to provide an image that further matches the viewer's wishes.

また、映像データの配信時に、閲覧者が指定した被写体以外の被写体には、マスキングやモザイクをかける画像処理を施した上で配信してもよい。このように構成することにより、被写体に対するプライバシーが保たれ、閲覧者は安心してこのシステムを利用することができる。 Further, at the time of distributing the video data, a subject other than the subject designated by the viewer may be delivered after performing image processing that applies masking or mosaic. With this configuration, privacy for the subject is maintained, and the viewer can use this system with peace of mind.

さらに前記実施形態では、監視対象エリア内に存在する被写体が複数の撮像装置の撮像範囲のいずれに位置するかを、無線タグＴ１を用いて特定するようにした。しかし、それに限定されるものではなく、例えば撮像された映像データから顔の特徴を認識したり目の虹彩を認識する技術を利用することにより特定するようにしてもよい。さらに、これらの特定手法を組み合わせて使用することにより、被写体２１をより正確に認識することが可能となる。 Furthermore, in the above-described embodiment, the wireless tag T1 is used to specify in which of the imaging ranges of the plurality of imaging devices the subject existing in the monitoring target area is located. However, the present invention is not limited to this. For example, it may be specified by using a technique for recognizing facial features from the captured video data or recognizing the iris of the eyes. Further, by using a combination of these specific methods, the subject 21 can be recognized more accurately.

また前記実施形態では、被写体２１として保育園や幼稚園などの園児を想定したが、例えば、老人ホームにいる高齢者の様子を遠隔地からモニタリングしたり、ペット預かり所に預けられたペットの監視など様々な用途に利用することができる。
さらに、データメモリ１３に記憶されるＩＤ受信履歴データベース１３ａ及び蓄積映像データベース１３ｂの構成や記憶される項目、プログラムメモリ１４に格納される各プログラムの処理手順、処理内容についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。 In the above embodiment, the subject 21 is assumed to be a child such as a nursery school or a kindergarten. It can be used for various purposes.
Further, the structure of the ID reception history database 13a and the stored video database 13b stored in the data memory 13 and the items to be stored, the processing procedure of each program stored in the program memory 14, and the processing contents are also included in the gist of the present invention. Various modifications can be made without departing from the scope.

要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。 In short, the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. Further, various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, you may combine suitably the component covering different embodiment.

この発明に係わる監視システムの一実施形態を実現するシステムの概略構成図。BRIEF DESCRIPTION OF THE DRAWINGS The schematic block diagram of the system which implement | achieves one Embodiment of the monitoring system concerning this invention. 信号発信機から発信された識別情報を信号受信機により受信する様子を示す図。The figure which shows a mode that the identification information transmitted from the signal transmitter is received by the signal receiver. 図１に示すシステムのサーバ装置の機能構成を示すブロック図。The block diagram which shows the function structure of the server apparatus of the system shown in FIG. 図３に示すサーバ装置に設けられるＩＤ受信履歴データベースの構成を示す図。The figure which shows the structure of ID reception log | history database provided in the server apparatus shown in FIG. 図３に示すサーバ装置によるライブ映像配信の処理手順と処理内容を示すフローチャート。The flowchart which shows the process sequence and process content of the live video delivery by the server apparatus shown in FIG. 図３に示すサーバ装置による蓄積映像配信の処理手順と処理内容を示すフローチャート。The flowchart which shows the process sequence and process content of the accumulation | storage video delivery by the server apparatus shown in FIG. 蓄積映像配信における配信映像の選択過程を示す図。The figure which shows the selection process of the delivery video in stored video delivery.

Explanation of symbols

Ｃ１〜Ｃ４…カメラ、２１…被写体、ＳＶ…サーバ装置、ＮＷ…ネットワーク、ＰＣ１〜ＰＣｎ…ユーザ端末、ＭＰ…携帯電話、Ｔ１…無線タグ、Ｒ1…タグリーダ、１１…ＣＰＵ、１２…バス、１３…データメモリ、１３ａ…ＩＤ受信履歴データベース、１３ｂ…蓄積映像データベース、１４…プログラムメモリ、１４ａ…ＩＤ受信履歴作成プログラム、１４ｂ…ライブ映像配信プログラム、１４ｃ…蓄積映像配信プログラム、１５…カメラ入力Ｉ／Ｆ、１６…通信Ｉ／Ｆ。 C1 to C4 ... Camera, 21 ... Subject, SV ... Server device, NW ... Network, PC1 to PCn ... User terminal, MP ... Mobile phone, T1 ... Wireless tag, R1 ... Tag reader, 11 ... CPU, 12 ... Bus, 13 ... Data memory, 13a ... ID reception history database, 13b ... Stored video database, 14 ... Program memory, 14a ... ID reception history creation program, 14b ... Live video distribution program, 14c ... Stored video distribution program, 15 ... Camera input I / F 16 Communication I / F.

Claims

A plurality of imaging devices that image a monitoring target area and output a monitoring image;
A server device connected to the plurality of imaging devices via a signal transmission path and connected to an external terminal via a communication network;
A subject detection device for detecting in which of the imaging ranges of the plurality of imaging devices a subject existing in the monitoring target area;
The server device
Means for collecting monitoring images output from the plurality of imaging devices through the signal transmission path;
For each collected monitoring image, state detection means for detecting an imaging state of the subject included in the monitoring image;
When a distribution request for a monitoring image including a specific subject is sent from the external terminal, a plurality of collected monitoring images are selected based on a detection result by the subject detection device and a detection result by the state detection unit. Means for selecting a monitoring image including the specific subject and having the best imaging state of the subject;
A monitoring system comprising: means for transmitting the selected monitoring image to the distribution request source external terminal via the communication network.