JP6176619B2 - IMAGING DEVICE, RECORDING DEVICE, VIDEO DISPLAY METHOD, AND COMPUTER PROGRAM - Google Patents
IMAGING DEVICE, RECORDING DEVICE, VIDEO DISPLAY METHOD, AND COMPUTER PROGRAM Download PDFInfo
- Publication number
- JP6176619B2 JP6176619B2 JP2016186692A JP2016186692A JP6176619B2 JP 6176619 B2 JP6176619 B2 JP 6176619B2 JP 2016186692 A JP2016186692 A JP 2016186692A JP 2016186692 A JP2016186692 A JP 2016186692A JP 6176619 B2 JP6176619 B2 JP 6176619B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- mask
- image
- unprocessed
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Analysis (AREA)
- Image Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Closed-Circuit Television Systems (AREA)
Description
本発明は、監視エリアを撮像してその映像を閲覧装置に出力する撮像装置、撮像装置から出力される映像を蓄積してその映像を閲覧装置に出力する録画装置、映像を閲覧装置に出力する映像表示方法およびコンピュータプログラムに関するものである。 The present invention relates to an imaging device that images a monitoring area and outputs the video to a browsing device, a recording device that accumulates video output from the imaging device and outputs the video to the browsing device, and outputs the video to the browsing device. The present invention relates to a video display method and a computer program .
コンビニエンスストアなどの店舗においては、店舗内を撮影するカメラを設置して、そのカメラの映像で店舗内の状況を監視する監視システムが広く普及しているが、防犯や防災のための監視の目的以外、すなわち、店舗の効率的な運営を図るためのマーケティング分析や、顧客サービスの向上などを目的として映像を利用する場合には、顧客のプライバシーを保護する必要がある。 In stores such as convenience stores, a monitoring system that installs a camera that shoots the inside of the store and monitors the situation inside the store using the image of the camera is widely used, but the purpose of surveillance for crime prevention and disaster prevention In other cases, that is, when using video for the purpose of marketing analysis for efficient operation of the store or improvement of customer service, it is necessary to protect customer privacy.
このような顧客のプライバシーを保護する要望に対して、従来、カメラで撮影された映像内の人物領域を特定のマスク画像に変更するマスク処理(隠蔽処理)を行う技術が知られている(特許文献1,2参照)。特に、特許文献1に開示された技術では、マスク画像に特徴点を表示させることで、人物の身体の動きを把握しやすくしている。また、特許文献2に開示された技術では、マスク画像を透過性とすることで、背景に対して人物の行動を把握しやすくしている。
In response to such a demand for protecting the privacy of customers, there is conventionally known a technique for performing a mask process (a concealment process) for changing a person area in a video shot by a camera to a specific mask image (patent).
さて、近年、カメラに、ネットワーク接続可能な、いわゆるIPカメラを採用し、また、レコーダにもネットワーク接続可能なものを採用して、このカメラやレコーダにPCなどの閲覧装置をネットワークを介して接続して、映像を閲覧するシステムが普及しており、このようなシステムでは、マスク処理が施されていない未処理映像が流出するリスクがあり、プライバシー保護の観点から改善が望まれるが、前記従来の技術では、このような未処理映像の流出の問題に関して何の考慮もなされておらず、未処理映像が流出するリスクを十分に低減することができないという問題があった。 Nowadays, a so-called IP camera that can be connected to the network is adopted for the camera, and a recorder that can also be connected to the network is adopted, and a browsing device such as a PC is connected to the camera or recorder via the network. In such a system, there is a risk that unprocessed video that has not been subjected to mask processing leaks, and improvement is desired from the viewpoint of privacy protection. In this technique, no consideration is given to such a problem of unprocessed video leakage, and there is a problem that the risk of unprocessed video leakage cannot be sufficiently reduced.
そこで、本発明は、マスク処理が施されていない未処理映像が流出するリスクを低減することができる撮像装置、録画装置、映像表示方法およびコンピュータプログラムを提供することを目的とする。 Accordingly, an object of the present invention is to provide an imaging device, a recording device , a video display method, and a computer program that can reduce the risk of unprocessed video that has not been subjected to mask processing being leaked.
本発明の撮像装置は、監視エリアを撮像してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力するプロセッサを備えた撮像装置であって、前記プロセッサは、前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する構成とする。 The imaging device of the present invention is an imaging device including a processor that images a monitoring area and outputs a mask processed video or an unprocessed video corresponding to the video to a browsing device via a network, By detecting all persons appearing in the video, performing mask processing to change the inside of the outline of all the persons to a transparent mask image, and superimposing the mask image on the background image, generates the masking image to be limited to the observation of the motion background image, the mask processing image or any image of the unprocessed image the mask processing has not been performed to select a user's instruction And outputting to the browsing device via the network .
また、本発明の録画装置は、撮像装置から出力される映像を蓄積してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力するプロセッサを備えた録画装置であって、前記プロセッサは、前記撮像装置から入力される映像を蓄積し、この蓄積された映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する構成とする。 The recording device of the present invention is a recording device including a processor that accumulates video output from the imaging device and outputs masked video or unprocessed video corresponding to the video to a browsing device via a network. The processor stores the video input from the imaging device , detects all persons appearing in the stored video, and changes the inside of the outline of all the persons to a transparent mask image. And generating the mask processing video limited to the observation of the movements of all the persons and the background image by superimposing the mask image on the background image, and the mask processing video or the mask processing Any video of the unprocessed video that has not been applied is selected by a user instruction and output to the browsing device via the network .
また、本発明の映像表示方法は、監視エリアを撮像してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力する撮像装置を用いた映像表示方法であって、前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する構成とする。 The video display method of the present invention is a video display method using an imaging device that images a monitoring area and outputs a masked video or an unprocessed video corresponding to the video to a browsing device via a network, All the persons appearing in the video are detected by performing mask processing for changing the inside of the outline of all the persons into a transparent mask image, and superimposing the mask image on a background image, thereby The mask-processed video limited to the observation of the movement and the background image is generated, and either the mask-processed video or the unprocessed video that has not been subjected to the mask processing is selected by a user instruction. And output to the browsing device via the network .
本発明によれば、ユーザの指示により、映像に現れる全ての人物に対してマスク処理が施されたマスク処理映像を生成して出力する状態に設定することができるため、マーケティング分析などの監視以外の目的で映像を閲覧するユーザに対して有用であり、しかもマスク処理が施されていない未処理映像がネットワークを介して流出するリスクを低減することができる。 According to the present invention, by an instruction of the user, it is possible to set the state for generating and outputting a masking image subjected to the mask process with respect to all persons appearing in the video, other than the monitoring of the marketing analysis This is useful for users who browse videos for the purpose of, and can reduce the risk that unprocessed videos that have not been subjected to mask processing will flow out via the network.
前記課題を解決するためになされた第1の発明は、監視エリアを撮像してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力するプロセッサを備えた撮像装置であって、前記プロセッサは、前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する構成とする。 A first invention made to solve the above-described problem is an imaging device including a processor that images a monitoring area and outputs a masked video or an unprocessed video corresponding to the video to a browsing device via a network. The processor detects all persons appearing in the video, performs a mask process for changing the inside of the outline of all the persons into a transparent mask image, and superimposes the mask image on the background image. Thus, the mask-processed video limited to the observation of the movements of all the persons and the background image is generated, and either the mask-processed video or the unprocessed video that has not been subjected to the mask process is generated. Is selected by a user's instruction and output to the browsing device via the network .
これによると、ユーザの指示により、映像に現れる全ての人物に対してマスク処理が施されたマスク処理映像を生成して出力する状態に設定することができるため、マーケティング分析などの監視以外の目的で映像を閲覧するユーザに対して有用であり、しかもマスク処理が施されていない未処理映像がネットワークを介して流出するリスクを低減することができる。 According to this, the instruction of the user, it is possible to set the state for generating and outputting a masking image subjected to the mask process with respect to all persons appearing in the video, the purpose other than monitoring, such as marketing analysis This is useful for a user who browses video, and can reduce the risk that an unprocessed video that has not been subjected to mask processing will flow out via the network.
また、第2の発明は、前記プロセッサは、ユーザの識別情報の入力により、前記マスク処理が施されていない前記未処理映像を出力する構成とする。 According to a second aspect of the present invention, the processor outputs the unprocessed video that has not been subjected to the masking process in response to input of user identification information .
これによると、未処理映像の閲覧権限を有するユーザのみが未処理映像の出力を行うことができる。 According to this, only a user who has the authority to view the unprocessed video can output the unprocessed video .
また、第3の発明は、前記プロセッサは、前記閲覧装置への前記未処理映像の出力が行われない休止状態に移行した時点からの経過時間が所定の復帰時間に達すると、前記映像の出力状態を前記マスク処理映像に切り替える構成とする。 According to a third aspect of the present invention, the processor outputs the video when the elapsed time from the transition to the sleep state where the unprocessed video is not output to the browsing device reaches a predetermined return time. a configuration to switch the state to the masking image.
これによると、閲覧装置で未処理映像を閲覧しない状態が継続すると、映像出力部をマスク処理映像に切り替えることから、未処理映像が流出するリスクをより一層低減することができる。 According to this, when the state in which the browsing device does not browse the unprocessed video continues, the video output unit is switched to the mask processing video, so that the risk of the unprocessed video flowing out can be further reduced.
また、第4の発明は、撮像装置から出力される映像を蓄積してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力するプロセッサを備えた録画装置であって、前記プロセッサは、前記撮像装置から入力される映像を蓄積し、この蓄積された映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する構成とする。 According to a fourth aspect of the present invention, there is provided a recording apparatus comprising a processor for accumulating video output from an imaging device and outputting mask processed video or unprocessed video corresponding to the video to a browsing device via a network. The processor accumulates video input from the imaging device , detects all persons appearing in the accumulated video, and performs mask processing for changing the inside of the outline of all the persons into a transparent mask image. The mask processing image generated by superimposing the mask image on a background image is limited to observation of the movements of all the persons and the background image, and the mask processing image or the mask processing is performed. Any one of the unprocessed videos that has not been applied is selected by a user instruction and output to the browsing device via the network .
これによると、第1の発明と同様に、マーケティング分析などの監視以外の目的で映像を閲覧するユーザに対して有用であり、しかもマスク処理が施されていない未処理映像がネットワークを介して流出するリスクを低減することができる。 According to this, as in the first invention, unprocessed video that is useful for users who browse videos for purposes other than monitoring such as marketing analysis and that has not been subjected to mask processing flows out via the network. Can reduce the risk.
また、第5の発明は、監視エリアを撮像してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力する撮像装置を用いた映像表示方法であって、前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する構成とする。 The fifth invention is a video display method using an imaging device that images a monitoring area and outputs a masked video or an unprocessed video corresponding to the video to a browsing device via a network. The movement of all the persons is detected by superimposing the mask image on the background image by performing mask processing for detecting all persons appearing in the image, changing the inside of the outline of all the persons to a transparent mask image, and Generating the mask processed video limited to the observation of the background image, selecting either the mask processed video or the unprocessed video that has not been subjected to the mask processing according to a user instruction , It is set as the structure output to the said browsing apparatus via the said network .
これによると、第1の発明と同様に、マーケティング分析などの監視以外の目的で映像を閲覧するユーザに対して有用であり、しかもマスク処理が施されていない未処理映像がネットワークを介して流出するリスクを低減することができる。
また、第6の発明は、撮像装置から出力される映像を蓄積してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力する録画装置を用いた映像表示方法であって、前記撮像装置から入力される映像を蓄積し、この蓄積された映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する構成とする。
これによると、第1の発明と同様に、マーケティング分析などの監視以外の目的で映像を閲覧するユーザに対して有用であり、しかもマスク処理が施されていない未処理映像がネットワークを介して流出するリスクを低減することができる。
また、第7の発明は、監視エリアを撮像してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力する、撮像装置に、前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成するステップと、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力するステップと、を実行させるコンピュータプログラムとする。
これによると、第1の発明と同様に、マーケティング分析などの監視以外の目的で映像を閲覧するユーザに対して有用であり、しかもマスク処理が施されていない未処理映像がネットワークを介して流出するリスクを低減することができる。
また第8の発明は、撮像装置から出力される映像を蓄積してその映像に対応するマスク処理映像または未処理映像をネットワークを介して閲覧装置に出力する、録画装置に、前記撮像装置から入力される映像を蓄積し、この蓄積された映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成するステップと、前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力するステップと、を実行させるコンピュータプログラムとする。
これによると、第1の発明と同様に、マーケティング分析などの監視以外の目的で映像を閲覧するユーザに対して有用であり、しかもマスク処理が施されていない未処理映像がネットワークを介して流出するリスクを低減することができる。
According to this, as in the first invention, unprocessed video that is useful for users who browse videos for purposes other than monitoring such as marketing analysis and that has not been subjected to mask processing flows out via the network. Can reduce the risk.
A sixth invention is a video display method using a recording device that accumulates video output from an imaging device and outputs masked video or unprocessed video corresponding to the video to a browsing device via a network. there are, accumulated images input from the imaging device, the accumulated detect all persons appearing in the video, and perform mask processing for changing the contour within that all the persons in the permeability of the mask image Then, by superimposing the mask image on a background image, the mask processing image limited to the observation of the movement of all the persons and the background image is generated, and the mask processing image or the mask processing is performed. Any video of the unprocessed video that has not been selected is selected by a user instruction and output to the browsing device via the network .
According to this, as in the first invention, unprocessed video that is useful for users who browse videos for purposes other than monitoring such as marketing analysis and that has not been subjected to mask processing flows out via the network. Can reduce the risk.
In addition, the seventh aspect of the present invention detects all persons appearing in the video by imaging the monitoring area and outputting a masked video or an unprocessed video corresponding to the video to the browsing device via the network. Then, by performing a mask process for changing the inside of the outline of all the persons into a transparent mask image and superimposing the mask image on the background image, it is possible to observe the movement of all the persons and the background image. Generating the limited mask-processed video, selecting either the mask-processed video or the unprocessed video that has not been subjected to the mask process according to a user instruction , and via the network And outputting to the browsing device .
According to this, as in the first invention, unprocessed video that is useful for users who browse videos for purposes other than monitoring such as marketing analysis and that has not been subjected to mask processing flows out via the network. Can reduce the risk.
According to an eighth aspect of the present invention, the video output from the imaging device is accumulated, and the masked video or unprocessed video corresponding to the video is output to the browsing device via the network. A mask process for detecting all persons appearing in the stored video, changing the inside of the outline of all the persons into a transparent mask image, and converting the mask image into a background image Generating the mask-processed video limited to the observation of the movements of all the persons and the background image by superimposing on the mask-processed video or the unprocessed video that has not been subjected to the mask process. one of video selected by a user's instruction, and a computer program for executing the steps of outputting to the browsing device via the network That.
According to this, as in the first invention, unprocessed video that is useful for users who browse videos for purposes other than monitoring such as marketing analysis and that has not been subjected to mask processing flows out via the network. Can reduce the risk.
以下、本発明の実施の形態を、図面を参照しながら説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
(第1実施形態)
図1は、第1実施形態に係るモニタリングシステムの全体構成図である。このモニタリングシステムは、コンビニエンスストアなどの小売チェーン店などを対象にして構築されるものであり、カメラ(撮像装置)1と、レコーダ(録画装置)2と、PC(閲覧装置)3と、を備えている。
(First embodiment)
FIG. 1 is an overall configuration diagram of a monitoring system according to the first embodiment. This monitoring system is constructed for retail chain stores such as convenience stores, and includes a camera (imaging device) 1, a recorder (recording device) 2, and a PC (browsing device) 3. ing.
カメラ1は店舗(施設)内の適所に設置され、カメラ1により店舗内が撮像される。このカメラ1はネットワーク接続が可能な、いわゆるIPカメラであり、レコーダ2もネットワーク接続が可能に構成され、このカメラ1およびレコーダ2は店舗内に設置されたLANに接続されており、カメラ1から出力される映像がレコーダ2に蓄積される。
The
また、PC3もLANに接続されており、カメラ1およびレコーダ2から出力される映像がPC3に入力され、PC3に接続されたモニタ(表示装置)7に映像が表示される。これにより、店長などの店舗側のユーザが、カメラ1で撮影された店舗内の映像をリアルタイムで閲覧することができ、また、レコーダ2に録画された過去の店舗内の映像を閲覧することができる。
The
また、カメラ1、レコーダ2およびPC3は、複数の店舗の各々に設置されており、複数の店舗を総括する本部にはPC11が設置されており、このPC11は、WANを介して、各店舗のカメラ1およびレコーダ2に接続されている。これにより、本部側のユーザ、例えば、担当する地域の各店舗に対して指導や提案を行うスーパーバイザーなどが、カメラ1で撮影された店舗内の映像をリアルタイムで閲覧することができ、また、レコーダ2に録画された過去の店舗内の映像を閲覧することができる。
The
次に、店舗のレイアウトおよびカメラ1の設置状況について説明する。図2は、店舗のレイアウトおよびカメラ1の設置状況を説明する店舗の平面図である。
Next, the store layout and the installation status of the
店舗には、出入口、陳列棚およびレジカウンタなどが設けられている。陳列棚は、弁当、ペットボトル、おにぎりなどの商品の種類に分けて設置されている。顧客は、出入口から入店し、陳列棚の間の通路を通って店舗内を移動し、所望の商品が見つかると、その商品を持ってレジカウンタに向かい、レジカウンタで会計(代金の支払い)を済ませた後に出入口から退店する。 The store is provided with an entrance, a display shelf, a cashier counter, and the like. Display shelves are divided into different types of products such as bento boxes, plastic bottles, and rice balls. The customer enters the store from the entrance, moves through the passage between the display shelves, finds the desired product, and goes to the checkout counter with the product and pays at the checkout counter (payment). After exiting, exit from the entrance.
また、店舗には、店舗内(監視エリア)を撮影する複数のカメラ1が設置されている。このカメラ1は、店舗内の天井の適宜な位置に設置されている。特に、図2に示す例では、カメラ1に、魚眼レンズを用いて360度の撮影範囲を有する全方位カメラが採用され、このカメラ1により、出入口から店舗に出入りする人物や店舗内に滞在する人物を撮影することができる。
In the store, a plurality of
次に、図1に示したカメラ1で行われる処理の概要について説明する。図3は、カメラ1で行われる処理の概要を説明する説明図である。
Next, an outline of processing performed by the
カメラ1により撮影された映像を、防犯や防災のための監視の目的で閲覧する場合には問題とならないが、防犯や防災のための監視の目的以外、すなわち、店舗の効率的な運営を図るためのマーケティング分析や、顧客サービスの向上などを目的として映像を利用する場合には、顧客のプライバシーを保護する必要がある。
There is no problem when viewing images taken by the
そこで、本実施形態では、映像内に現れる人物の画像領域の位置情報を取得して、人物の輪郭内部をマスク画像に変更するマスク処理を実施する。具体的には、映像から人物の画像領域を検出して、人物の画像領域の輪郭に関する情報を取得し、その輪郭に関する情報に基づいて、人物の画像領域の全体に対応したマスク画像(人物の輪郭内部を塗りつぶした画像)を生成して、このマスク画像を背景画像上に重畳したマスク処理映像を生成する。図3(A)に示す例では、映像に5人の人物P1〜P5が写っており、図3(B)に示すように、人物P1〜P5の各画像領域がマスク画像M1〜M5に変更されている。 In view of this, in the present embodiment, the position information of the image area of the person appearing in the video is acquired, and a mask process for changing the inside of the outline of the person to a mask image is performed. Specifically, a person's image area is detected from the video, information about the outline of the person's image area is acquired, and based on the information about the outline, a mask image (person's An image in which the inside of the contour is filled) is generated, and a mask processing image in which the mask image is superimposed on the background image is generated. In the example shown in FIG. 3A, five persons P1 to P5 are shown in the video, and as shown in FIG. 3B, the image areas of the persons P1 to P5 are changed to mask images M1 to M5. Has been.
そして、本実施形態では、防犯や防災のための監視の目的で映像を閲覧するユーザの場合には、図3(A)に示す未処理映像(動画)が表示され、一方、マーケティング分析などの監視以外の目的で映像を閲覧するユーザの場合には、図3(B)に示すマスク処理映像(動画)が表示され、このようなマスク処理映像でも、映像内のマスク画像を観察することで、人物の動きをユーザが把握することができる。 And in this embodiment, in the case of the user who browses an image | video for the purpose of surveillance for crime prevention or disaster prevention, the unprocessed image | video (video) shown in FIG. 3 (A) is displayed, On the other hand, marketing analysis etc. In the case of a user who browses video for purposes other than monitoring, the mask processing video (moving image) shown in FIG. 3B is displayed. Even with such mask processing video, the mask image in the video is observed. The user can grasp the movement of the person.
なお、本実施形態では、マスク画像を透過性としているため、背景画像が透けて見える状態となっている。また、マスク画像の表示要素、例えば色、濃淡、パターン(模様)、輪郭線、および透過率などの表示要素は、予め設定されたものとしてもよいが、マスク画像の表示要素をユーザが適宜に変更することができるようにしてもよい。 In this embodiment, since the mask image is made transparent, the background image can be seen through. Further, display elements of the mask image, for example, display elements such as color, shading, pattern (pattern), contour line, and transmittance may be set in advance. It may be possible to change it.
次に、図1に示したカメラ1およびPC3の概略構成について説明する。図4は、カメラ1およびPC3の概略構成を示す機能ブロック図である。
Next, schematic configurations of the
カメラ1は、撮像部21と、映像蓄積部22と、映像処理部23と、映像出力部24と、統計情報生成部25と、制御部26と、ユーザ認証部27と、タイマー28と、復帰時間設定部29と、インタフェース30と、を備えている。
The
撮像部21は、撮像素子およびその制御回路などで構成され、監視エリアを撮像した映像を出力する。この撮像部21から出力される映像は映像蓄積部22に蓄積される。
The
映像蓄積部22は、メモリカード、ハードディスクドライブおよびソリッドステートドライブなどの記憶デバイスからなる。この映像蓄積部22は、カメラ1に内蔵することから、比較的小容量の記憶デバイスが採用され、記憶容量の範囲内で直近の映像が蓄積される。
The
映像処理部23では、映像に対して、人物の輪郭内部をマスク画像に変更するマスク処理が行われる。この映像処理部23で行われる処理については、後に詳しく説明する。
In the
映像出力部24では、制御部26からの指示に応じて、映像処理部23においてマスク処理が施されたマスク処理映像、およびマスク処理が施されていない未処理映像のいずれか一方を出力する処理が行われる。本実施形態では、マスク処理映像を出力する状態を第1の出力モードとし、未処理映像を出力する状態を第2の出力モードとする。
In the
なお、現在の映像をリアルタイムに表示するモードでは、撮像部21から出力される映像が映像処理部23および映像出力部24に入力される。また、過去の映像を再生するモードでは、映像処理部23および映像出力部24が映像蓄積部22から映像を取得する。
In the mode in which the current video is displayed in real time, the video output from the
タイマー28では、PC3からの映像の出力要求がなく、映像出力部24で映像出力が行われない休止状態に移行した時点からの経過時間を計時して、その経過時間が所定の復帰時間に達すると、復帰時間に達したことを表す通知を制御部26に出力する処理が行われる。
The
復帰時間設定部29では、タイマー28で用いられる復帰時間を設定する処理が行われる。本実施形態では、任意の時間を入力するユーザの操作入力に応じて復帰時間が設定され、ユーザが復帰時間を任意に指定することができる。
In the return
ユーザ認証部27では、未処理映像の閲覧権限を有するユーザに関する認証情報が保持され、PC3においてユーザにより入力された入力情報を認証情報と照合して、PC3において映像を閲覧するユーザが、未処理映像の閲覧権限を有するユーザか否かを検証するユーザ認証が行われる。
In the
制御部26では、映像出力部24での映像出力を制御する映像出力制御が行われる。特に制御部26では、自装置の起動時に、マスク処理映像を出力する第1の出力モードに設定する出力モードの初期化が行われる。また、制御部26では、PC3でのユーザの操作入力に応じて、映像出力部24の出力モードを切り替える制御が行われ、特に、ユーザ認証部27においてユーザ認証が成功した場合にのみ、映像出力部24を第2の出力モードに切り替える。また、制御部26では、映像出力部24を第2の出力モードに切り替えた後に、タイマー28からの通知、すなわちPC3への映像出力が行われない休止状態に移行した時点からの経過時間が復帰時間に達したことを表す通知を受けると、映像出力部24を第1の出力モードに復帰させる制御が行われる。
In the
なお、カメラ1に、ユーザの操作で動作する出力モード切換用のスイッチ(図示せず)を設けて、このスイッチによりユーザが出力モードの切り替えを指示するものとしてもよく、この場合、制御部26では、スイッチの出力信号に基づいて映像出力部24の出力モードを切り替える制御を行う。
The
統計情報生成部25では、映像蓄積部22に蓄積された映像に基づいて、監視エリア内での人物の滞留状況に関する統計情報を生成する処理が行われる。この統計情報生成部25で行われる処理については、後に詳しく説明する。
The statistical
インタフェース30は、LANを介してPC3やレコーダ2などとの間で情報の送受信を行うものである。
The
PC3は、インタフェース31と、ヒートマップ画像生成部32と、入出力制御部33と、を備えている。
The
インタフェース31は、LANを介してカメラ1やレコーダ2などとの間で情報の送受信を行うものである。
The
ヒートマップ画像生成部32では、カメラ1に設けられた統計情報生成部25で生成した統計情報を可視化したヒートマップ画像を生成する処理が行われる。
In the heat map
入出力制御部33は、GUI(Graphical User Interface)を構成するものであり、モニタ7に画面を表示させて、その画面上でマウスおよびキーボードなどの入力デバイス6を用いたユーザの画面操作および入力操作に応じて、ユーザによる指示情報および入力情報を取得する。
The input /
特に入出力制御部33では、カメラ1から入力された映像(マスク処理映像または未処理映像)、およびヒートマップ画像生成部32で生成したヒートマップ画像を表示するモニタリング画面に関する表示情報を生成する処理が行われる。これにより、モニタリング画面(図6参照)がモニタ7に表示される。また、入出力制御部33では、出力モード変更画面(図8参照)、ユーザ認証画面(図8参照)、メニュー画面(図10参照)、認証情報設定画面(図11参照)、および復帰時間設定画面(図12参照)をモニタ7に表示させる処理が行われる。
In particular, the input /
なお、図4に示したPC3の各部は、PC3のCPUでモニタリング(映像閲覧)用のアプリケーションプログラムを実行させることで実現される。このプログラムは、情報処理装置としてのPC3に予め導入して専用の装置として構成する他、汎用OS上で動作するアプリケーションプログラムとして適宜なプログラム記録媒体に記録して、またネットワークを介して、ユーザに提供されるようにしてもよい。
Each part of the
次に、図4に示した映像処理部23で行われる処理について説明する。図5は、カメラ1の構成の一部を表したものであり、映像処理部23で行われる処理を説明する機能ブロック図である。
Next, processing performed by the
映像処理部23は、映像に対して、人物の輪郭内部をマスク画像に変更するマスク処理を実施して、マスク処理映像を生成するものであり、背景画像生成部41と、人物領域取得部42と、マスク画像生成部43と、マスク処理映像生成部44と、を備えている。
The
背景画像生成部41では、映像から人物の画像(前景画像)を除去した背景画像を生成する処理が行われる。この処理では、直近の所定の学習期間における複数の映像(フレーム)から背景画像を生成し、新たな映像(フレーム)を取得するのに応じて背景画像が逐次更新される。この背景画像生成部41で行われる処理には、公知の技術を用いればよい。上述のように、背景画像が逐次更新されることが好ましいが、予め記憶保存しておいた固定の背景画像を用いることもできる。
The background
人物領域取得部42では、背景画像生成部41で生成した背景画像に基づいて、映像内に存在する人物の画像領域の位置情報を取得する処理が行われる。この処理では、注目する時刻(リアルタイム処理では現在時刻)の映像と、それ以前の学習期間で取得した背景画像との差分から、人物の画像領域を特定する。なお、この人物領域取得部42で行われる処理にも、公知の技術を用いればよい。
The person
なお、本実施形態における背景画像には、いわゆる「背景モデル」が含まれ、背景画像生成部41において、学習期間における複数の画像から背景モデルを構築し、人物領域取得部42において、注目する時刻の映像と背景モデルとの比較により、人物の画像領域(前景領域)と背景領域とを分割して、人物の画像領域の位置情報を取得する。
The background image in the present embodiment includes a so-called “background model”. The background
マスク画像生成部43では、人物領域取得部42で取得した人物の画像領域の位置情報に基づいて、人物の画像領域の全体に対応するマスク画像を生成する処理が行われる。この処理では、人物の画像領域の位置情報から、人物の画像領域の輪郭に関する情報を生成し、その輪郭に関する情報に基づいて、輪郭の内部を透過性の画像で塗り潰したマスク画像を生成する。
The mask
マスク処理映像生成部44では、背景画像生成部41で生成した背景画像上に、マスク画像生成部43で生成したマスク画像を重畳して、マスク処理映像を生成する処理が行われる。本実施形態では、例えば、青色のマスク画像を透過状態で背景画像上に重畳し、マスク処理映像では、背景画像が透けて見える状態となるようにしている(図3参照)。
The mask processing
次に、図4に示したモニタ7に表示されるモニタリング画面について説明する。図6は、モニタ7に表示されるモニタリング画面を示す説明図である。
Next, the monitoring screen displayed on the
このモニタリング画面は、店舗内での顧客の活動状況を把握するためにユーザが閲覧するものであり、このモニタリング画面には、店舗選択部51と、開始ボタン52と、設定ボタン53と、動作モード選択部54と、日時表示部55と、日時設定ボタン56と、映像操作部57と、映像表示部58と、ヒートマップ表示部59と、表示時刻操作部60と、が設けられている。
This monitoring screen is browsed by the user in order to grasp the customer's activity status in the store. The monitoring screen includes a
店舗選択部51では、プルダウンメニューにより店舗をユーザが選択する。開始ボタン52は、PC3でモニタリング処理を開始させるものである。設定ボタン53は、モニタリング処理での各種の条件を設定するものであり、本実施形態では、設定ボタン53を操作すると、ポップアップでメニュー画面(図10参照)が表示される。動作モード選択部54は、動作モードを選択するものであり、売場モニタリング、商品モニタリング、陳列アラート、および欠品アラートなどの動作モードが用意されており、売場モニタリングを選択することで、このモニタリング画面が表示される。
In the
日時表示部55は、日時を表示するものであり、日時設定ボタン56は、日時を設定するものであり、日時設定ボタン56を操作すると、図示しない日時設定画面が表示され、ここで日時を選択することで、選択した日時が日時表示部55に表示され、また、選択した日時の映像が映像表示部58に表示される。
The date and
映像表示部58には、カメラ1から出力された映像が動画で表示される。本実施形態では、カメラ1における映像出力部24(図4参照)の出力モードに応じてマスク処理映像および未処理映像のいずれかが映像表示部58に表示される。図7は第1の出力モードの場合を示しており、映像表示部58にマスク処理映像が表示されているが、第2のモードに切り替えると、図3(A)に示した未処理映像が映像表示部58に表示される。なお、ここでは、映像表示部58に表示されるマスク処理映像や未処理映像は、1画面構成となっているが、撮影範囲の異なる他の撮影映像を表示することもできる。その場合、売場モニタリングの開始に伴い、例えば、各売場のサムネイル一覧などを表示し、所望の売場を選択することで、その売場の撮影映像を表示することができる。また、映像表示部58に関する設定操作によってマルチ画面で複数の売場の映像を表示することもできる。
The
映像操作部57は、映像表示部58に表示される映像の再生に関する操作を行うものであり、通常再生、早送り再生、巻き戻し再生、および停止の各操作ボタンが設けられており、これらの操作ボタンを操作することで、長時間に及ぶ映像を効率的に閲覧することができる。
The
表示時刻操作部60は、映像表示部58に表示される映像の表示時刻を調整するものであり、この表示時刻操作部60を操作することで、所望の時刻の映像に切り替えることができる。具体的には、マウスなどの入力デバイス6を用いてスライダ61をずらすと、そのスライダ61が指し示す時刻の映像が映像表示部58に表示される。
The display
ヒートマップ表示部59には、PC3のヒートマップ画像生成部32(図4参照)で生成されたヒートマップ画像(ヒートマップバー)が表示される。このヒートマップ画像は、人物の滞留状況に関する統計情報、具体的には滞留度数(滞留人数)、すなわち監視エリア内に滞留する人物の人数の時間的な推移状況を表すものである。このヒートマップ画像では、統計情報の数値の大きさが、表示要素(画像の属性)を変更することで表現され、具体的には色(色相や濃度など)を変更することで表現される。特に、図7に示す例では、色の濃さで滞留度数(滞留人数)が表現されており、滞留度数が高いほど色が濃くなる。
The heat
このヒートマップ画像により、滞留度数の時間的な推移状況、すなわち各時間帯でどの程度の人数の顧客が売場に滞留しているかをユーザが把握することができ、このヒートマップ画像は、防犯や防災のための監視の用途およびマーケティング分析などの監視以外の用途のいずれでも活用することができる。 With this heat map image, the user can grasp how the stay frequency changes over time, that is, how many customers are staying at the sales floor in each time slot. It can be used for any purpose other than surveillance such as monitoring for disaster prevention and marketing analysis.
次に、図6に示したモニタリング画面に表示されるヒートマップ画像を生成する処理について説明する。図7は、ヒートマップ画像を生成する処理に係る要部の機能ブロック図である。 Next, processing for generating a heat map image displayed on the monitoring screen shown in FIG. 6 will be described. FIG. 7 is a functional block diagram of the main part relating to the process of generating the heat map image.
本実施形態では、カメラ1に設けられた統計情報生成部25において、監視エリア内での人物の滞留状況に関する統計情報を生成し、PC3に設けられたヒートマップ画像生成部32において、統計情報生成部25で生成した統計情報を可視化したヒートマップ画像を生成する。
In the present embodiment, the statistical
カメラ1の統計情報生成部25は、位置情報取得部71と、位置情報蓄積部72と、統計処理部73と、を備えている。
The statistical
位置情報取得部71は、映像蓄積部22から映像を取得して、映像(フレーム)に出現する人物ごとの位置情報を取得する処理が行われる。本実施形態では、人物ごとの位置情報として、人物ごとの動線を取得する。この位置情報取得部71で取得した人物ごとの動線に関する情報は、位置情報蓄積部72に蓄積される。なお、位置情報取得部71で取得する位置情報には、人物が検出された映像の撮影時刻から取得した人物ごとの検出時刻などに関する時間情報が含まれる。また、この位置情報取得部71で行われる処理には、公知の画像認識技術を用いればよい。
The position
統計処理部73では、位置情報蓄積部72に蓄積された人物ごとの位置情報(動線情報)に対して時間的な統計処理を行って、人物の滞留状況に関する統計情報を取得する処理が行われる。本実施形態では、統計情報として、滞留度数(滞留人数)、すなわち対象エリア内に滞留する人物の人数を取得する。この滞留度数を取得する処理では、対象期間において対象エリアを通過した動線の本数をカウントして、対象期間における滞留度数を求める。
The
このようにして、カメラ1の統計情報生成部25において統計情報が生成されると、この統計情報がカメラ1からPC3に送信され、PC3のヒートマップ画像生成部32において、統計情報(滞留度数)を可視化したヒートマップ画像を生成する処理が行われ、入出力制御部33において、ヒートマップ画像を表示するモニタリング画面に関する表示情報が生成される。
When statistical information is generated in the statistical
なお、本実施形態では、統計情報生成部25において統計情報として滞留度数を取得して、滞留度数に関するヒートマップ画像を表示するようにしたが、滞留時間、すなわち対象エリア内で人物が滞留する時間を取得して、滞留時間に関するヒートマップ画像を表示するようにしてもよい。さらに、滞留度数および滞留時間の双方を取得して、滞留度数に関するヒートマップ画像と滞留時間に関するヒートマップ画像との両方を並べて表示するようにしてもよい。
In the present embodiment, the statistical
また、統計情報として滞留時間を取得する場合には、まず、対象期間における人物ごとの滞留時刻(対象エリアに対する進入時刻および退出時刻)から、人物ごとの対象エリアでの滞留時間を取得し、次に、この人物ごとの滞留時間から、平均化などの適宜な統計処理により滞留時間を取得すればよい。 In addition, when acquiring the residence time as statistical information, first, the residence time in the target area for each person is obtained from the residence time for each person in the target period (the entry time and the exit time for the target area). Furthermore, the residence time may be acquired from the residence time for each person by appropriate statistical processing such as averaging.
次に、出力モードを変更する操作について説明する。図8は、出力モードを変更する際にモニタ7に表示される画面を説明する説明図である。
Next, an operation for changing the output mode will be described. FIG. 8 is an explanatory diagram illustrating a screen displayed on the
モニタリング画面(図6参照)における動作モード選択部54で売場モニタリングを選択する操作を行うと、出力モード変更画面がモニタ7に表示される。この出力モード変更画面では、未処理映像を出力する第2の出力モードに切り換える出力モードの変更を行うか否かをユーザが選択する。この出力モード変更画面で、Yesボタンを操作すると、ユーザ認証画面がモニタ7に表示される。このユーザ認証画面では、ユーザIDおよびパスワードをユーザが入力する。このユーザ認証画面で、ユーザIDおよびパスワードを入力して決定ボタンを操作すると、ユーザ認証部27(図4参照)においてユーザ認証が行われ、ユーザ認証が成功すると、第2の出力モードに切り換えられて、モニタリング画面に未処理映像が表示される。一方、出力モード変更画面で、Noボタンを選択すると、モニタリング画面にマスク処理映像が表示される。
When an operation for selecting sales floor monitoring is performed by the operation
なお、カメラ1に、出力モード切換用のスイッチを設けて、このスイッチでユーザが第2の出力モードへの切り替えを指示した場合には、PC3においてモニタリング用のアプリケーションを起動させてモニタリング画面を開く操作を行った際に、ユーザ認証画面をモニタ7に表示させるようにすればよい。
When the
次に、図4に示したカメラ1の制御部26で行われる映像出力制御の手順について説明する。図9は、カメラ1の制御部26で行われる映像出力制御の手順を示すフロー図である。
Next, a video output control procedure performed by the
カメラ1の制御部26では、カメラ1が起動する、すなわち、カメラ1の電源が投入されると(ST101)、マスク処理映像を出力する第1の出力モードに設定する出力モードの初期化が行われる(ST102)。
In the
ついで、モニタ7に出力モード変更画面(図8参照)を表示させて、この出力モード変更画面で、未処理映像を出力する第2の出力モードに切り換える出力モードの変更をユーザが選択すると(ST103でYes)、モニタ7にユーザ認証画面(図8参照)を表示させて、このユーザ認証画面で、ユーザIDおよびパスワードをユーザに入力させる(ST104)。そして、ユーザ認証部27においてユーザ認証が成功すると(ST105でYes)、映像出力部24を第2の出力モードに切り換える制御が行われ(ST106)、映像出力部24から未処理映像を出力させる(ST107)。
Next, when the output mode change screen (see FIG. 8) is displayed on the
一方、出力モード変更画面(図8参照)で、第2の出力モードに切り換える出力モードの変更をユーザが選択しない場合(ST103でNo)や、ユーザ認証が失敗した場合(ST105でNo)には、映像出力部24を第1の出力モードのままとして、映像出力部24からマスク処理映像を出力させる(ST113)。
On the other hand, when the user does not select the output mode change to switch to the second output mode on the output mode change screen (see FIG. 8) (No in ST103) or when the user authentication fails (No in ST105). Then, the
また、映像出力部24を第2の出力モードに切り換えて(ST106)、未処理映像を出力させた後に(ST107)、PC3からの映像の出力要求がなくなり、映像出力部24が映像出力を行わない休止状態となると(ST108でYes)、タイマー28による経過時間の計時を開始させる(ST109)。そして、休止状態が解除されないまま(ST110でYes)、タイマー28による経過時間が所定の復帰時間に達すると(ST111でYes)、映像出力部24を第1の出力モードに復帰させる(ST112)。これにより、以降、PC3から映像の出力要求があると、映像出力部24からマスク処理映像が出力される(ST113)。
Further, after switching the
次に、認証情報(ユーザIDおよびパスワード)および復帰時間を設定する操作について説明する。図10は、認証情報および復帰時間を設定する際にモニタ7に表示されるメニュー画面を示す説明図である。図11は、モニタ7に表示される認証情報設定画面を示す説明図である。図12は、モニタ7に表示される復帰時間設定画面を示す説明図である。
Next, an operation for setting authentication information (user ID and password) and return time will be described. FIG. 10 is an explanatory diagram showing a menu screen displayed on the
モニタリング画面(図6参照)の設定ボタン53を操作すると、メインメニュー画面がモニタ7に表示される。このメインメニュー画面では、映像出力管理およびヒートマップ設定などの各設定項目が表示され、いずれかの設定項目をユーザが選択する。このメインメニュー画面で映像出力管理を選択すると、映像出力管理用のメニュー画面がモニタ7に表示される。この映像出力管理用のメニュー画面では、ユーザID・パスワード設定および復帰時間設定の各設定項目が表示され、いずれかの設定項目をユーザが選択する。
When the setting button 53 on the monitoring screen (see FIG. 6) is operated, the main menu screen is displayed on the
なお、メインメニュー画面においてヒートマップ設定を選択すると、ヒートマップ画像を生成する際の各種の条件(対象期間など)を設定する画面がモニタ7に表示される。
When heat map setting is selected on the main menu screen, a screen for setting various conditions (such as a target period) when generating the heat map image is displayed on the
映像出力管理用のメニュー画面でユーザID・パスワード設定を選択すると、図11に示す認証情報設定画面がモニタ7に表示される。この認証情報設定画面では、認証情報(ユーザIDおよびパスワードのセット)をユーザが変更する。この認証情報設定画面で新たな認証情報が入力されると、ユーザ認証部27(図4参照)において認証情報の更新が行われる。 When the user ID / password setting is selected on the video output management menu screen, an authentication information setting screen shown in FIG. On this authentication information setting screen, the user changes authentication information (a set of user ID and password). When new authentication information is input on this authentication information setting screen, the user authentication unit 27 (see FIG. 4) updates the authentication information.
図11は、デフォルトの設定内容(ユーザID:admin、パスワード:0000)を変更する場合を示しており、管理者が任意のユーザIDおよびパスワードを設定することができる。なお、カメラ1の設置時に認証情報の変更を催促するガイダンスを表示するようにするとよい。また、ユーザIDおよびパスワードのセットを複数設定することができるようにして、未処理映像の閲覧権限を複数のユーザに与えるようにしてもよい。
FIG. 11 shows a case where default setting contents (user ID: admin, password: 0000) are changed, and the administrator can set an arbitrary user ID and password. It should be noted that guidance for prompting the change of the authentication information may be displayed when the
図10に示した映像出力管理用のメニュー画面で復帰時間設定を選択すると、図12に示す復帰時間設定画面がモニタ7に表示される。この復帰時間設定画面では、タイマー28で用いられる復帰時間をユーザが入力する。図12に示す例では、復帰時間を表す数値を入力することができ、復帰時間を任意の時間に設定することができる。この復帰時間設定画面で復帰時間が入力されると、復帰時間設定部29(図4参照)において復帰時間を設定する処理が行われる。
When the return time setting is selected on the video output management menu screen shown in FIG. 10, the return time setting screen shown in FIG. 12 is displayed on the
以上のように本実施形態では、カメラ1がネットワークに接続されているため、マスク処理が施されていない未処理映像が流出するリスクが大きくなるが、カメラ1の制御部26において、自装置の起動時に、映像出力部24の出力モードを、マスク処理が施されたマスク処理映像を出力する第1の出力モードに設定する出力モードの初期化が行われるため、未処理映像が流出するリスクを低減することができる。
As described above, in the present embodiment, since the
また、本実施形態では、カメラ1のユーザ認証部27において、PC3で映像を閲覧しようとする人物が、未処理映像の閲覧権限を有するユーザか否かのユーザ認証を行い、制御部26において、ユーザ認証が成功した場合にのみ、映像出力部24を、未処理映像を出力する第2の出力モードに切り替える制御を行うようにしたため、未処理映像の閲覧権限を有するユーザのみが第2の出力モードに切り替えることができることから、容易に第2の出力モードに変更されないため、未処理映像が流出するリスクをより一層低減することができる。
In the present embodiment, the
また、本実施形態では、カメラ1の制御部26において、映像出力部24を第2の出力モードに切り替えた後に、PC3への映像出力が行われない休止状態に移行した時点からの経過時間が所定の復帰時間に達すると、映像出力部24を第1の出力モードに戻す制御を行うようにしたため、未処理映像を出力する第2の出力モードが長期間放置されることを避けることができることから、未処理映像が流出するリスクをより一層低減することができる。
Further, in the present embodiment, after the
また、本実施形態では、モニタリング画面(図6参照)に表示されるヒートマップ画像を生成するための統計情報を、カメラ1の統計情報生成部25で生成するようにしており、これにより、統計情報の元になる映像をカメラ1から出力する必要がなく、この点でも未処理映像が流出するリスクを低減することができる。
In the present embodiment, the statistical information for generating the heat map image displayed on the monitoring screen (see FIG. 6) is generated by the statistical
(第2実施形態)
次に、第2実施形態に係るモニタリングシステムについて説明する。なお、ここで特に言及しない点は第1実施形態と同様である。図13は、第2実施形態におけるカメラ101およびレコーダ102の概略構成を示す機能ブロック図である。
(Second Embodiment)
Next, a monitoring system according to the second embodiment will be described. The points not particularly mentioned here are the same as in the first embodiment. FIG. 13 is a functional block diagram showing a schematic configuration of the
第1実施形態(図4参照)では、カメラ1を、ネットワーク接続が可能な、いわゆるネットワークカメラ(IPカメラ)としたが、この第2実施形態では、カメラ101が、専用の通信ケーブル(例えば同軸ケーブル)を介してレコーダ102に接続されている。レコーダ(録画装置)102はネットワーク接続が可能に構成され、店舗内に設置されたLANを介してPC3と接続されている。
In the first embodiment (see FIG. 4), the
また、この第2実施形態では、第1実施形態においてカメラ1に設けられた映像処理部23、映像出力部24、統計情報生成部25、制御部26、ユーザ認証部27、タイマー28、および復帰時間設定部29が、レコーダ102に設けられており、カメラ101では、撮像部21から出力される映像がそのまま撮像出力部105からレコーダ102に出力され、レコーダ102では、カメラ1から入力された映像が映像入力部103を介して映像蓄積部104および映像処理部23に入力される。
In the second embodiment, the
レコーダ102の各部では、第1実施形態と同様の処理が行われ、マスク処理映像および未処理映像のいずれか一方がレコーダ102からPC3に出力される。なお、映像蓄積部104には大容量の記憶デバイス、例えばハードディスクドライブが採用され、長期間の映像が蓄積される。
In each part of the
このように本実施形態では、カメラ101が、専用の通信ケーブルを介してレコーダ102に接続され、カメラ101がネットワークに直接接続されていないため、カメラ101から未処理映像が流出するリスクを低減することができる。そして、カメラ101に接続されたレコーダ102において、自装置の起動時に行われる出力モードの初期化により、マスク処理映像を出力する状態に設定されるため、レコーダ102から未処理映像が流出するリスクを低減することができる。
As described above, in this embodiment, the
(第3実施形態)
次に、第3実施形態に係るモニタリングシステムについて説明する。なお、ここで特に言及しない点は第1実施形態と同様である。図14は、第3実施形態におけるカメラ111およびレコーダ102の概略構成を示す機能ブロック図である。
(Third embodiment)
Next, a monitoring system according to the third embodiment will be described. The points not particularly mentioned here are the same as in the first embodiment. FIG. 14 is a functional block diagram showing a schematic configuration of the
この第3実施形態では、第1実施形態と同様に、カメラ111が映像処理部23を備えているが、第1実施形態においてカメラ1(図4参照)に設けられていた映像蓄積部22が省略されている。また、この第3実施形態では、第2実施形態と同様に、カメラ111が専用の通信ケーブル(例えば同軸ケーブル)を介してレコーダ102に接続されている。
In the third embodiment, as in the first embodiment, the
この第3実施形態では、カメラ111において、撮像部21から出力される映像に対して映像処理部23でマスク処理が施されたマスク処理映像、およびマスク処理が施されていない未処理映像が映像出力部24からリアルタイムに出力される。したがって、PC3において現在の映像をリアルタイムに閲覧する場合には、カメラ111からレコーダ102に入力されるマスク処理映像および未処理映像のいずれか一方をそのままレコーダ102からPC3に出力すればよい。
In the third embodiment, in the
一方、レコーダ102は第2実施形態と同様であり、カメラ111から出力される映像が映像蓄積部104に蓄積される。ここで、カメラ111から出力されるマスク処理映像および未処理映像をともに映像蓄積部104に蓄積することも可能であるが、カメラ111から出力される未処理映像のみを映像蓄積部104に蓄積し、第1の出力モードでマスク処理映像を出力する際に、レコーダ102の映像処理部23でマスク処理を行うようにすると、映像蓄積部104の容量を節約することができる。
On the other hand, the
なお、カメラ111は、マスク処理映像および未処理映像をそれぞれ出力する2系統の映像出力が可能なように構成して、マスク処理映像および未処理映像を同時に出力することができるようにするとよい。また、カメラ111に、出力モード切換用のスイッチを設けて、このスイッチの信号に基づいて制御部112において映像出力部113の出力モードを切り替えるようにしてもよい。
Note that the
このように本実施形態では、第2実施形態と同様に、カメラ111が、専用の通信ケーブルを介してレコーダ102に接続され、カメラ111がネットワークに直接接続されていないため、カメラ111から未処理映像が流出するリスクを低減することができる。そして、カメラ111が映像処理部23を備えているため、カメラ111からマスク処理映像および未処理映像をリアルタイムに出力することができるため、店舗内の映像をリアルタイムに表示するモードにおけるレコーダ102の処理を簡略化することができる。
As described above, in this embodiment, as in the second embodiment, the
(第4実施形態)
次に、第4実施形態に係るモニタリングシステムについて説明する。なお、ここで特に言及しない点は第1実施形態と同様である。図15は、第4実施形態におけるアダプタ121の概略構成を示す機能ブロック図である。
(Fourth embodiment)
Next, a monitoring system according to the fourth embodiment will be described. The points not particularly mentioned here are the same as in the first embodiment. FIG. 15 is a functional block diagram illustrating a schematic configuration of the
この第4実施形態では、カメラ101に接続されてPC3への映像出力を制御するアダプタ(映像出力制御装置)121がカメラ101とPC3との間に介装されており、カメラ101とアダプタ121は、専用の通信ケーブルを介して接続され、アダプタ121とPC3は、LANを介して接続されている。
In the fourth embodiment, an adapter (video output control device) 121 that is connected to the
アダプタ121は、第2実施形態におけるレコーダ102(図13参照)から映像蓄積部104を省略したものであり、専用の通信ケーブルで映像を出力する構成のカメラ101をネットワークに接続するネットワークコンバータとして機能する。アダプタ121の各部では、第2実施形態と同様の処理が行われ、マスク処理映像および未処理映像のいずれか一方がアダプタ121からPC3に出力される。なお、第1実施形態におけるカメラ1に設けられた映像蓄積部22、例えば、メモリカード、ハードディスクドライブおよびソリッドステートドライブなどの記憶デバイスをアダプタ121へ内蔵し、その記憶容量の範囲内で直近の映像を蓄積するようにしてもよい。
The
このように本実施形態では、カメラ101が、専用の通信ケーブルを介してアダプタ121に接続され、カメラ101がネットワークに直接接続されていないため、カメラ101から未処理映像が流出するリスクを低減することができる。そして、カメラ101に接続されたアダプタ121において、自装置の起動時に行われる出力モードの初期化により、マスク処理映像を出力する状態に設定されるため、アダプタ121から未処理映像が流出するリスクを低減することができる。
Thus, in this embodiment, since the
なお、本実施形態では、カメラ101を、撮像部21から出力される映像をそのままアダプタ121に出力する構成のものとしたが、第3実施形態における映像処理部23を備えたカメラ111を、本実施形態におけるアダプタ121に接続するようにしてもよい。
In the present embodiment, the
以上、本発明を特定の実施形態に基づいて説明したが、これらの実施形態はあくまでも例示であって、本発明はこれらの実施形態によって限定されるものではない。また、上記実施形態に示した本発明に係る撮像装置、録画装置および映像出力制御装置の各構成要素は、必ずしも全てが必須ではなく、少なくとも本発明の範囲を逸脱しない限りにおいて適宜取捨選択することが可能である。 As mentioned above, although this invention was demonstrated based on specific embodiment, these embodiment is an illustration to the last, Comprising: This invention is not limited by these embodiment. In addition, all the components of the imaging device, the recording device, and the video output control device according to the present invention described in the above embodiments are not necessarily essential, and may be appropriately selected as long as they do not depart from the scope of the present invention. Is possible.
例えば、前記の実施形態では、コンビニエンスストアなどの小売店舗の例について説明したが、このような小売店舗に限定されるものではなく、小売店舗以外の業務形態の店舗、例えば飲食店や銀行などに適用することも可能である。さらに、店舗以外の監視エリアを対象とした用途に適用することも可能である。 For example, in the above-described embodiment, an example of a retail store such as a convenience store has been described. However, the present invention is not limited to such a retail store, and is not limited to a retail store such as a restaurant or a bank. It is also possible to apply. Furthermore, it is also possible to apply to uses intended for monitoring areas other than stores.
また、前記の実施形態では、図2に示したように、カメラ1を、魚眼レンズを用いて360度の撮影範囲を有する全方位カメラとしたが、所定の画角を有するカメラ、いわゆるボックスカメラでも可能である。
In the above embodiment, as shown in FIG. 2, the
また、前記の実施形態では、店舗に設置されたLANを介してカメラ1、レコーダ102およびアダプタ121に接続された店舗のPC3を、店舗内の映像を閲覧する閲覧装置とした例について説明したが、図1に示したように、店舗外のネットワーク、すなわちWANなどの広域ネットワークを介してカメラ1、レコーダ102およびアダプタ121に本部のPC11を接続して、この本部のPC11を閲覧装置としてもよく、さらに、スマートフォン13やタブレット端末14などの携帯型端末を閲覧装置としてもよく、これにより店舗や本部の他に外出先などの任意の場所で店舗内の映像を閲覧することができる。
Moreover, although the said embodiment demonstrated the example which used PC3 of the store connected to the
また、前記の実施形態では、閲覧装置であるPC3に、ヒートマップ画像生成部32やGUIを構成する入出力制御部33を設けたが、このヒートマップ画像生成部や入出力制御部をカメラやレコーダやアダプタに設けることも可能である。さらに、ヒートマップ画像生成部や入出力制御部を、図1に示したように、クラウドコンピューティングシステムを構成するクラウドコンピュータ12に設けるようにしてもよい。この場合、PC3などの閲覧装置では、ウェブブラウザを用いて所要の画面をモニタに表示させるようにすればよい。
In the above-described embodiment, the
また、前記の実施形態では、ユーザIDとパスワードのセットをユーザに入力させてユーザ認証を行うものとしたが、パスワードのみでユーザ認証を行うようにしてもよい。また、ユーザ認証には、公知の種々のユーザ認証方法を採用することができ、例えば、従業員カードなどのICカードによるカード認証や、指紋認証などのバイオメトリクス認証を行うようにしてもよい。 In the above-described embodiment, the user authentication is performed by causing the user to input a set of the user ID and the password. However, the user authentication may be performed using only the password. For user authentication, various known user authentication methods can be employed. For example, card authentication using an IC card such as an employee card or biometric authentication such as fingerprint authentication may be performed.
また、前記の実施形態では、顧客のプライバシーを保護するため、映像処理部23において人物の輪郭内部をマスク画像に変更するマスク処理を撮影映像に対して実施するようにしたが、マスク処理とは異なる映像処理で人物のプライバシーを保護する、例えば、秘密分散の手法を用いて人物のプライバシーを保護するようにしてもよい。
In the above embodiment, in order to protect the privacy of the customer, the
具体的には、カメラの映像処理部において、撮影映像から空間周波数の低周波成分を抽出した低周波映像、および撮影映像と低周波映像との差分である差分映像を生成し、カメラからPCなどの閲覧装置に対して低周波映像のみを出力し、差分映像はレコーダに蓄積する。そして、閲覧装置からレコーダにアクセスして、ユーザ認証が成功した場合にのみ、レコーダから閲覧装置に差分映像が出力され、閲覧装置では、低周波映像と差分映像とを合成することで元の撮影映像を復元することができる。これにより、閲覧権限を有するユーザのみ元の撮影映像を閲覧することができる。 Specifically, the camera image processing unit generates a low-frequency image obtained by extracting a low-frequency component of the spatial frequency from the captured image, and a difference image that is a difference between the captured image and the low-frequency image, and the camera or the like Only the low-frequency video is output to the viewing device, and the differential video is stored in the recorder. Then, only when the browsing device accesses the recorder and the user authentication is successful, the differential video is output from the recorder to the browsing device, and the browsing device synthesizes the low-frequency video and the differential video to capture the original image. The video can be restored. Thereby, only the user who has browsing authority can browse the original captured video.
ここで、低周波映像には、高周波成分により表現される輪郭などの細かい部分に関する情報は含まれておらず、低周波映像は、焦点がボケたりモザイクをかけたりしたような映像となる。このため、低周波映像では、監視エリアの大まかな状況は把握できるものの、監視エリアの詳細な状況を確認することができないため、顧客のプライバシーを保護することができる。 Here, the low-frequency video does not include information on fine parts such as the contour expressed by the high-frequency component, and the low-frequency video is an image whose focus is blurred or mosaiced. For this reason, although the rough situation of the monitoring area can be grasped in the low-frequency video, the detailed situation of the monitoring area cannot be confirmed, so that the customer's privacy can be protected.
なお、低周波映像は、映像全体を対象にして低周波成分を抽出したものの他、人物の画像領域のみを対象にして低周波成分を抽出したものであってもよい。また、ここではカメラの映像処理部で人物のプライバシーを保護する映像処理を実施するものとしたが、このような映像処理をレコーダやアダプタで行うものとしてもよい。 Note that the low-frequency video may be one in which the low-frequency component is extracted for only the image area of a person in addition to the low-frequency component extracted for the entire video. In this example, the video processing unit of the camera performs video processing for protecting the privacy of a person. However, such video processing may be performed by a recorder or an adapter.
また、近年、モニタとして高画質化を追及した4Kテレビなどが開発されており、このような4Kテレビに対応したカメラを採用することで、人物の識別性能を高めることができ、人物が多数存在するような環境下でも、ユーザはマスク再生映像から人物の行動を容易に把握することができる。 In recent years, 4K televisions and the like that have pursued high image quality have been developed as monitors, and by employing a camera that supports such 4K televisions, the ability to identify people can be improved, and there are many people. Even in such an environment, the user can easily grasp the action of the person from the mask reproduction video.
本発明に係る撮像装置、録画装置、映像表示方法およびコンピュータプログラムは、マスク処理が施されていない未処理映像が流出するリスクを低減することができる効果を有し、監視エリアを撮像してその映像を閲覧装置に出力する撮像装置、撮像装置から出力される映像を蓄積してその映像を閲覧装置に出力する録画装置、映像を閲覧装置に出力する映像表示方法およびコンピュータプログラムなどとして有用である。 The imaging device, the recording device , the video display method, and the computer program according to the present invention have the effect of reducing the risk that unprocessed video that has not been subjected to masking processing will flow out. Useful as an imaging device that outputs video to a browsing device , a recording device that accumulates video output from the imaging device and outputs the video to the browsing device, a video display method that outputs video to the browsing device, and a computer program .
1 カメラ(撮像装置)
2 レコーダ
3 PC(閲覧装置)
6 入力デバイス
7 モニタ
11 PC
13 スマートフォン
14 タブレット端末
21 撮像部
22 映像蓄積部
23 映像処理部
24 映像出力部
26 制御部
27 ユーザ認証部
28 タイマー
29 復帰時間設定部
102 レコーダ(録画装置)
111 カメラ(撮像装置)
121 アダプタ(映像出力制御装置)
1 Camera (imaging device)
2
6
13
111 Camera (imaging device)
121 Adapter (video output control device)
Claims (8)
前記プロセッサは、
前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、
前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力することを特徴とする撮像装置。 An imaging device including a processor that images a monitoring area and outputs a masked video or an unprocessed video corresponding to the video to a browsing device via a network,
The processor is
All the persons appearing in the video are detected by performing mask processing for changing the inside of the outline of all the persons into a transparent mask image, and superimposing the mask image on a background image, thereby Generating the masked video limited to observation of the movement and the background image,
An image pickup apparatus that selects either the mask-processed video or the unprocessed video that has not been subjected to the mask process according to a user instruction and outputs the selected video to the browsing device via the network .
前記閲覧装置への前記未処理映像の出力が行われない休止状態に移行した時点からの経過時間が所定の復帰時間に達すると、前記映像の出力状態を前記マスク処理映像に切り替えることを特徴とする請求項1または請求項2のいずれかに記載の撮像装置。 The processor is
The output state of the video is switched to the masked video when the elapsed time from the transition to the pause state where the unprocessed video is not output to the browsing device reaches a predetermined return time. The imaging apparatus according to claim 1 or 2.
前記プロセッサは、
前記撮像装置から入力される映像を蓄積し、この蓄積された映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、
前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力することを特徴とする録画装置。 A recording device including a processor that accumulates video output from an imaging device and outputs a masked video or unprocessed video corresponding to the video to a browsing device via a network,
The processor is
Accumulated images input from the imaging device, the accumulated detect all persons appearing in the video, and perform mask processing for changing the contour within that all the persons in the permeability of the mask image, wherein By superimposing a mask image on a background image, generate the mask processing video limited to the movement of all the persons and observation of the background image,
One of the masked video and the unprocessed video that has not been subjected to the mask processing is selected by a user instruction and output to the browsing device via the network. .
前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、
前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する、ことを特徴とする映像表示方法。 A video display method using an imaging device that images a monitoring area and outputs a masked video or an unprocessed video corresponding to the video to a browsing device via a network,
All the persons appearing in the video are detected by performing mask processing for changing the inside of the outline of all the persons into a transparent mask image, and superimposing the mask image on a background image, thereby Generating the masked video limited to observation of the movement and the background image,
A video selected from either the mask processed video or the unprocessed video not subjected to the mask processing is selected by a user instruction and output to the browsing device via the network. Display method.
前記撮像装置から入力される映像を蓄積し、この蓄積された映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成し、
前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力する、ことを特徴とする映像表示方法。 A video display method using a recording device that accumulates video output from an imaging device and outputs a masked video or unprocessed video corresponding to the video to a browsing device via a network,
Accumulated images input from the imaging device, the accumulated detect all persons appearing in the video, and perform mask processing for changing the contour within that all the persons in the permeability of the mask image, wherein By superimposing a mask image on a background image, generate the mask processing video limited to the movement of all the persons and observation of the background image,
A video selected from either the mask processed video or the unprocessed video not subjected to the mask processing is selected by a user instruction and output to the browsing device via the network. Display method.
前記映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成するステップと、
前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力するステップと、を実行させるための、コンピュータプログラム。 To the imaging device that images the monitoring area and outputs the masked video or unprocessed video corresponding to the video to the browsing device via the network,
All the persons appearing in the video are detected by performing mask processing for changing the inside of the outline of all the persons into a transparent mask image, and superimposing the mask image on a background image, thereby Generating the masked video limited to observation of the movement and the background image ;
Selecting either the mask-processed video or the unprocessed video that has not been subjected to the masking process according to a user instruction and outputting the selected video to the browsing device via the network. Computer program.
前記撮像装置から入力される映像を蓄積し、この蓄積された映像に現れる全ての人物を検出し、その全ての人物の輪郭内部を透過性のマスク画像に変更するマスク処理を実施して、前記マスク画像を背景画像に重畳することにより、前記全ての人物の動きと前記背景画像の観察に限定される前記マスク処理映像を生成するステップと、
前記マスク処理映像または、前記マスク処理が施されていない前記未処理映像のいずれかの映像をユーザの指示により選択して、前記ネットワークを介して前記閲覧装置に出力するステップと、を実行させるための、コンピュータプログラム。 To the recording device that accumulates the video output from the imaging device and outputs the masked video or unprocessed video corresponding to the video to the browsing device via the network,
Accumulated images input from the imaging device, the accumulated detect all persons appearing in the video, and perform mask processing for changing the contour within that all the persons in the permeability of the mask image, wherein Generating the mask processing video limited to observation of the background image and the movement of all the persons by superimposing a mask image on the background image ;
Selecting either the mask-processed video or the unprocessed video that has not been subjected to the masking process according to a user instruction and outputting the selected video to the browsing device via the network. Computer program.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016186692A JP6176619B2 (en) | 2016-09-26 | 2016-09-26 | IMAGING DEVICE, RECORDING DEVICE, VIDEO DISPLAY METHOD, AND COMPUTER PROGRAM |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016186692A JP6176619B2 (en) | 2016-09-26 | 2016-09-26 | IMAGING DEVICE, RECORDING DEVICE, VIDEO DISPLAY METHOD, AND COMPUTER PROGRAM |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014238680A Division JP6024999B2 (en) | 2014-11-26 | 2014-11-26 | Imaging device, recording device, and video output control device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017127054A Division JP2017184288A (en) | 2017-06-29 | 2017-06-29 | Imaging device, video recording device, video display method, and computer program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017011759A JP2017011759A (en) | 2017-01-12 |
JP6176619B2 true JP6176619B2 (en) | 2017-08-09 |
Family
ID=57761950
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016186692A Active JP6176619B2 (en) | 2016-09-26 | 2016-09-26 | IMAGING DEVICE, RECORDING DEVICE, VIDEO DISPLAY METHOD, AND COMPUTER PROGRAM |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6176619B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110443748A (en) * | 2019-07-31 | 2019-11-12 | 思百达物联网科技(北京)有限公司 | Human body screen method, device and storage medium |
KR20240077189A (en) | 2022-11-24 | 2024-05-31 | (주)피플앤드테크놀러지 | Artificial intelligence-based masking method using object detection and segmentation model and system therefor |
CN116320242B (en) * | 2023-05-22 | 2023-07-25 | 深圳市盛烽网络技术有限公司 | Video monitoring safety analysis method and system |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4402998B2 (en) * | 2004-03-29 | 2010-01-20 | 三菱電機株式会社 | Surveillance system and camera with masking function, and mask release device used with the camera |
JP4508038B2 (en) * | 2005-03-23 | 2010-07-21 | 日本ビクター株式会社 | Image processing device |
JP2009124618A (en) * | 2007-11-19 | 2009-06-04 | Hitachi Ltd | Camera apparatus, and image processing device |
JP5159381B2 (en) * | 2008-03-19 | 2013-03-06 | セコム株式会社 | Image distribution system |
JP5709367B2 (en) * | 2009-10-23 | 2015-04-30 | キヤノン株式会社 | Image processing apparatus and image processing method |
JP5408156B2 (en) * | 2011-02-24 | 2014-02-05 | 三菱電機株式会社 | Image processing device for monitoring |
JP5871485B2 (en) * | 2011-05-17 | 2016-03-01 | キヤノン株式会社 | Image transmission apparatus, image transmission method, and program |
JP5865710B2 (en) * | 2012-01-12 | 2016-02-17 | セコム株式会社 | Image processing device |
JP5955171B2 (en) * | 2012-09-11 | 2016-07-20 | キヤノン株式会社 | TRANSMISSION DEVICE, RECEPTION DEVICE, TRANSMISSION METHOD, RECEPTION METHOD, AND PROGRAM |
-
2016
- 2016-09-26 JP JP2016186692A patent/JP6176619B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017011759A (en) | 2017-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6024999B2 (en) | Imaging device, recording device, and video output control device | |
JP5866564B1 (en) | MONITORING DEVICE, MONITORING SYSTEM, AND MONITORING METHOD | |
US10178356B2 (en) | Monitoring apparatus, and moving image output method | |
JP6399356B2 (en) | Tracking support device, tracking support system, and tracking support method | |
JP5938808B2 (en) | MONITORING DEVICE, MONITORING SYSTEM, AND MONITORING METHOD | |
JP5834193B2 (en) | MONITORING DEVICE, MONITORING SYSTEM, AND MONITORING METHOD | |
JP5707562B1 (en) | MONITORING DEVICE, MONITORING SYSTEM, AND MONITORING METHOD | |
JP5834196B2 (en) | MONITORING DEVICE, MONITORING SYSTEM, AND MONITORING METHOD | |
JP5999395B1 (en) | Imaging device, recording device, and video output control device | |
JP4561657B2 (en) | Video surveillance system and video surveillance program | |
JP5707561B1 (en) | MONITORING DEVICE, MONITORING SYSTEM, AND MONITORING METHOD | |
CA3091605A1 (en) | Investigation generation in an observation and surveillance system | |
JP6176619B2 (en) | IMAGING DEVICE, RECORDING DEVICE, VIDEO DISPLAY METHOD, AND COMPUTER PROGRAM | |
JP6415061B2 (en) | Display control apparatus, control method, and program | |
KR20110093040A (en) | Apparatus and method for monitoring an object | |
JP2017184288A (en) | Imaging device, video recording device, video display method, and computer program | |
JP6214762B2 (en) | Image search system, search screen display method | |
JP2017055373A (en) | Salesroom crime prevention program, tablet terminal and salesroom | |
US9767564B2 (en) | Monitoring of object impressions and viewing patterns | |
JP7047638B2 (en) | Image processing device for gas visualization, image processing method for gas visualization, image processing program for gas visualization, and gas detection system | |
JP6366022B2 (en) | MONITORING DEVICE, MONITORING SYSTEM, AND MONITORING METHOD | |
KR101698864B1 (en) | Media Being Recorded with the Program Executing Method for Detecting Image Using Metadata | |
EP3016080A1 (en) | Calibration of metadata event rules | |
KR101198172B1 (en) | Apparatus and method for displaying a reference image and a surveilliance image in digital video recorder | |
JP2003173432A (en) | Image retrieving system and image retrieving method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161124 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20161124 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20161227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170110 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170404 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170518 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170606 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170703 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6176619 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |