JP2005094710A - Reflex action information acquisition apparatus and method - Google Patents

Reflex action information acquisition apparatus and method Download PDF

Info

Publication number
JP2005094710A
JP2005094710A JP2003329151A JP2003329151A JP2005094710A JP 2005094710 A JP2005094710 A JP 2005094710A JP 2003329151 A JP2003329151 A JP 2003329151A JP 2003329151 A JP2003329151 A JP 2003329151A JP 2005094710 A JP2005094710 A JP 2005094710A
Authority
JP
Japan
Prior art keywords
reflex
behavior
reflection
image
information acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003329151A
Other languages
Japanese (ja)
Inventor
Yoshihiro Omori
善啓 大盛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2003329151A priority Critical patent/JP2005094710A/en
Publication of JP2005094710A publication Critical patent/JP2005094710A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an information acquisition apparatus for improving identifiability since a conventional information acquisition apparatus only passively photographs an identification target and when only such information disadvantageous for identification is obtained that the identification target turns its back to a camera, the occasional occurrence of a state advantageous for detecting the identification target is to be just waited, so that identification accuracy becomes low. <P>SOLUTION: In the reflex action information acquisition apparatus, identification accuracy is improved by actively creating a status advantageous for identification by inducing the reflex action of the identification target and the reflex action information acquisition apparatus comprises: an image input part 100 for inputting information of the identification target; an image display part 101 for displaying the inputted image of the identification target; an instruction input part 102 for inputting an instruction for the induction of the reflex action; a reflex action induction part 103 for applying a physical operation to induce the reflex action of the identification target; a reaction result input part 105 for inputting a result of the reflex action as an image; and a reaction result presentation part 106 for performing at least one of display, storage and recognition of the reaction result. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、対象物や人間の反射行動情報を獲得する装置に関し、監視装置や識別装置などに用いられるものである。   The present invention relates to an apparatus that acquires information about an object and human reflex behavior, and is used for a monitoring apparatus, an identification apparatus, and the like.

従来の代表的な監視装置として、銀行や商店の店内に設置されるカメラと撮影した映像を録画するビデオデッキで構成されるビデオ監視装置が挙げられる。ビデオ監視装置では、カメラの画角を広くすると広範囲を監視できるが解像度が低くなるために後で解析が困難になる問題がある。逆にカメラの画角を狭くすると解像度は上がるが監視範囲が狭くなるために、多数の監視カメラを設置しなければならず、コストが高くなる問題がある。   As a typical conventional monitoring device, there is a video monitoring device composed of a camera installed in a bank or a store of a store and a video deck for recording captured images. In the video monitoring apparatus, when the angle of view of the camera is widened, a wide range can be monitored, but there is a problem that analysis becomes difficult later because the resolution becomes low. On the other hand, if the angle of view of the camera is narrowed, the resolution increases, but the monitoring range becomes narrow. Therefore, a large number of monitoring cameras have to be installed, and there is a problem that costs increase.

特許文献1や特許文献2の偽造防止監視装置は、映像の中にレーザー光線によって特殊なパターンを一緒に記憶することによって監視画像の偽造を防止するものであるが、レーザー光線は監視対象物の反射行動を引き起こすために使用されない。   The anti-counterfeit monitoring devices of Patent Document 1 and Patent Document 2 prevent forgery of a monitoring image by storing a special pattern together with a laser beam in an image. Not used to cause.

特許文献3の指紋認証装置は、指紋映像の採取中に指に熱などの刺激を与えて被検出体に応答させることにより、被検出体が模造品かどうかを判定する識別装置である。その変形例として電気刺激を与えて被検出体に条件反射を起こさせてこれを検出するものがあるが、条件反射は被検出体が模造品であるかどうかを判定するためのみに誘発させるのであって、例えば指紋認識処理に有利な状態を得るために適正な圧力でセンサーを押させるために用いられるのではない。
特許第3083784号公報 米国特許第5764769号明細書 特許第2943337号公報
The fingerprint authentication device of Patent Document 3 is an identification device that determines whether or not a detected object is a counterfeit by applying a stimulus such as heat to a finger while collecting a fingerprint image and causing the detected object to respond. As a modification, there is one that applies electrical stimulation to cause a conditional reflection to occur on the detected object and detects this, but the conditional reflection is triggered only to determine whether the detected object is a counterfeit. For example, it is not used for pressing the sensor with an appropriate pressure in order to obtain an advantageous state for the fingerprint recognition process.
Japanese Patent No. 3083784 US Pat. No. 5,764,769 Japanese Patent No. 2943337

以上により、従来の識別装置は識別対象物を受動的に撮影するのみであり、識別対象物がカメラに対して後ろの方向を向いているなどの識別に不利な情報しか得られない場合には、識別対象物の検出に有利な状態が偶発的に起こるのを待つしかなかったため識別精度が低くいという問題点がある。   As described above, when the conventional identification device only captures the identification object passively and only obtains information that is disadvantageous for identification, such as the identification object is facing backward with respect to the camera. There is a problem that the identification accuracy is low because there is no choice but to wait for an accidental occurrence of a state advantageous for detection of the identification object.

そこで、本発明は、動物や人間の反射行動を利用してより識別精度が高い反射行動情報を入力できる反射行動情報の獲得装置及びその方法を提供する。   Therefore, the present invention provides a reflection behavior information acquisition apparatus and method that can input reflection behavior information with higher identification accuracy using the reflection behavior of animals and humans.

請求項1に係る発明は、対象物に反射行動を誘発させるための物理的作用を与える反射行動誘発手段と、前記反射行動誘発手段へ前記物理的作用を起こすように指示する情報獲得指示手段と、前記反射行動誘発手段が前記物理的作用を起こした時の前記対象物の反射行動を撮影した静止画、動画、赤外線画像、または、前記反射行動により発生した音、振動、超音波のうち少なくとも一つを反射行動情報として入力する反射結果入力手段と、前記反射結果入力手段に入力した反射行動情報を表示、記憶、または、前記識別対象物の認識のうち少なくとも一つを行う反射結果提示手段と、を有することを特徴とする反射行動情報の獲得装置である。   The invention according to claim 1 is a reflex behavior inducing means for giving a physical action to induce reflex behavior on an object, and an information acquisition instruction means for instructing the reflex behavior inducing means to cause the physical action. , At least one of a still image, a moving image, an infrared image, or a sound, vibration, or ultrasonic wave generated by the reflection behavior, which is obtained by photographing the reflection behavior of the object when the reflection behavior inducing means causes the physical action. Reflection result input means for inputting one as reflection behavior information, and reflection result presentation means for displaying, storing, or recognizing the identification object for reflecting behavior information input to the reflection result input means And an apparatus for acquiring reflex behavior information.

請求項2に係る発明は、人間に対し反射行動を誘発させるための物理的作用を与える反射行動誘発手段と、前記反射行動誘発手段へ前記物理的作用を起こすように指示する情報獲得指示手段と、前記反射行動誘発手段が前記物理的作用を起こした時に、反射行動を行った前記人間の顔を撮影して、その顔画像を入力する反射結果入力手段と、前記反射結果入力手段で入力した顔画像を表示、記憶、または、前記顔認識のうち少なくとも一つを行う反射結果提示手段と、を有することを特徴とする反射行動情報の獲得装置である。   According to a second aspect of the present invention, there is provided a reflex action inducing means for giving a physical action for inducing a reflex action to a human, and an information acquisition instruction means for instructing the reflex action inducing means to cause the physical action. When the reflex action inducing means causes the physical action, the human face that has performed the reflex action is photographed, and the reflex result input means for inputting the face image is input by the reflex result input means. A reflection behavior information acquisition device comprising: a reflection result presentation means for displaying, storing, or performing at least one of the face recognition.

請求項3に係る発明は、前記反射結果入力手段は、反射行動を起こしたときの人間の顔を撮影できる位置にカメラを配置していることを特徴とする請求項2記載の反射行動情報の獲得装置である。   The invention according to claim 3 is characterized in that the reflection result input means has a camera arranged at a position where a human face can be photographed when the reflection action occurs. It is an acquisition device.

請求項4に係る発明は、前記反射結果入力手段は、前記情報獲得指示手段が指示した時のみ、精細度を変更して前記人間の顔画像を撮影するか、または、前記人間の顔をズームインして撮影することを特徴とする請求項1または2に記載の反射行動情報の獲得装置である。   According to a fourth aspect of the present invention, the reflection result input means changes the definition and captures the human face image only when instructed by the information acquisition instruction means, or zooms in on the human face. The reflex behavior information acquisition apparatus according to claim 1, wherein the reflex action information acquisition device is used.

請求項5に係る発明は、前記情報獲得指示手段は、前記対象物または前記人間の有無を検出し、前記対象物または前記人間を検出した時に前記指示を行うことを特徴とする請求項1または2記載の反射行動情報の獲得装置である。   The invention according to claim 5 is characterized in that the information acquisition instruction means detects the presence or absence of the object or the person, and gives the instruction when the object or the person is detected. 2. A device for acquiring reflex behavior information according to 2.

請求項6に係る発明は、前記情報獲得指示手段は、周期的、または、ランダムに前記指示を行うか、または、人による操作で前記指示を行うことを特徴とする請求項1または2記載の反射行動情報の獲得装置である。   The invention according to claim 6 is characterized in that the information acquisition instruction means performs the instruction periodically or randomly, or performs the instruction by a human operation. This is an apparatus for acquiring reflex behavior information.

請求項7に係る発明は、前記反射行動誘発手段は、光、音のうち少なくとも一つの物理的作用を用いて前記対象物または前記人間に反射行動を誘発させることを特徴とする請求項1または2記載の反射行動情報の獲得装置である。   The invention according to claim 7 is characterized in that the reflex behavior inducing means induces reflex behavior in the object or the human using at least one physical action of light or sound. 2. A device for acquiring reflex behavior information according to 2.

請求項8に係る発明は、前記情報獲得指示手段は、前記対象物または前記人間の画像を入力して、画像の輝度の変化、動きベクトル、背景差分量のうち少なくとも一つの手段で前記対象物または前記人間の有無を検出することを特徴とする請求項5記載の反射行動情報の獲得装置である。   According to an eighth aspect of the present invention, the information acquisition instruction means inputs the object or the human image, and the object is at least one of a change in luminance of the image, a motion vector, and a background difference amount. 6. The apparatus according to claim 5, wherein the presence / absence of the person is detected.

請求項9に係る発明は、前記反射行動情報、または、前記顔画像を記憶する情報記憶手段を有することを特徴とする請求項1または2記載の反射行動情報の獲得装置である。   The invention according to claim 9 is the apparatus for acquiring reflex behavior information according to claim 1 or 2, further comprising information storage means for storing the reflex behavior information or the face image.

請求項10に係る発明は、前記情報情報記憶手段は、前記対象物または前記人間を検出した時のみ記憶することを特徴とする請求項9記載の反射行動情報の獲得装置である。   The invention according to claim 10 is the apparatus for acquiring reflex behavior information according to claim 9, wherein the information information storage means stores only when the object or the person is detected.

請求項11に係る発明は、情報獲得指示手段からの指示によって反射行動誘発手段が対象物に反射行動を誘発させるための物理的作用を起こした時の前記対象物の反射行動を撮影した静止画、動画、赤外線画像、または、前記反射行動により発生した音、振動、超音波のうち少なくとも一つを反射行動情報として入力する反射結果入力ステップと、前記入力した反射行動情報を表示、記憶、または、前記識別対象物の認識のうち少なくとも一つを行う反射結果提示ステップと、を有することを特徴とする反射行動情報の獲得方法である。   According to an eleventh aspect of the present invention, a still image obtained by photographing the reflex behavior of the object when the reflex behavior inducing means causes a physical action to induce the reflex behavior on the object by an instruction from the information acquisition instruction means. A reflection result input step of inputting at least one of a moving image, an infrared image, or a sound, vibration, or ultrasonic wave generated by the reflection behavior as reflection behavior information; and displaying, storing, or storing the input reflection behavior information, or And a reflection result presentation step for performing at least one of recognition of the identification object.

請求項12に係る発明は、情報獲得指示手段からの指示によって反射行動誘発手段が人間に反射行動を誘発させるための物理的作用を起こした時に、反射行動を行った前記人間の顔を撮影して、その顔画像を入力する反射結果入力ステップと、前記入力した顔画像を表示、記憶、または、前記顔認識のうち少なくとも一つを行う反射結果提示ステップと、を有することを特徴とする反射行動情報の獲得方法である。   According to a twelfth aspect of the present invention, when the reflex action inducing means causes a physical action for inducing a reflex action on a human by an instruction from the information acquisition instruction means, the human face that has performed the reflex action is photographed. A reflection result input step for inputting the face image, and a reflection result presentation step for displaying, storing, or performing at least one of the face recognition. This is a method for acquiring behavior information.

本発明の請求項1、11に係る発明の反射行動情報の獲得装置であると、対象物に物理的な作用を与えて振り向かせたり声を発声させたりするなどの反射行動を誘発させて、対象物の判別に有利な映像や音を効果的に得ることによって、識別精度を高めることができる。   In the reflection behavior information acquisition device of the invention according to claims 1 and 11 of the present invention, a physical action is applied to an object to induce reflex behavior such as turning around or uttering a voice, The identification accuracy can be increased by effectively obtaining images and sounds advantageous for the discrimination of the object.

本発明の請求項2、12に係る発明の反射行動情報の獲得装置であると、人間に光や音などの物理的な作用を与えて反射行動を誘発させて、その時の顔画像を入力することにより、その人間の顔画像を正面から撮影することができる。   In the reflection behavior information acquisition device according to the second and twelfth aspects of the present invention, a physical action such as light or sound is applied to a person to induce the reflection behavior, and the face image at that time is input. Thus, the human face image can be taken from the front.

(第1の実施形態)
以下に図1と図2を参照して、本発明の第1の実施形態の反射行動情報の獲得装置(以下、単に情報獲得装置という)を説明する。
(First embodiment)
With reference to FIGS. 1 and 2, a reflex action information acquisition apparatus (hereinafter simply referred to as an information acquisition apparatus) according to a first embodiment of the present invention will be described.

本実施形態の情報獲得装置は、空港の搭乗ゲートに設置して不審な人物を特定する監視装置として説明する。   The information acquisition device of this embodiment will be described as a monitoring device that is installed at a boarding gate in an airport and identifies a suspicious person.

(1)情報獲得装置の構成
図1は、本実施形態による情報獲得装置の概略構成図である。
(1) Configuration of Information Acquisition Device FIG. 1 is a schematic configuration diagram of an information acquisition device according to this embodiment.

識別対象物104の映像L100を入力する画像入力部100と、入力映像L101を監視員に表示する画像表示部101と、監視員による反射行動誘発の指示を入力する指示入力部102と、反射行動を誘発させる指示信号L102によって識別対象物104に物理的な作用L103を与えて反射行動を誘発させる反射行動誘発部103と、識別対象物104がどのような反射行動を起こすかを映像で入力する反射結果入力部105と、反射結果入力部105で入力した映像を監視員に提示する反射結果提示部106と、から構成される。   An image input unit 100 for inputting the video L100 of the identification object 104, an image display unit 101 for displaying the input video L101 to the monitor, an instruction input unit 102 for inputting an instruction for reflex behavior induction by the monitor, and a reflective behavior A reflex action inducing unit 103 that induces a reflex action by giving a physical action L103 to the identification object 104 by an instruction signal L102 for inducing the image, and what kind of reflex action the identification object 104 causes is input as an image. The reflection result input unit 105 and the reflection result presentation unit 106 that presents an image input by the reflection result input unit 105 to a monitor.

画像入力部100は、例えばビデオカメラで構成され、識別対象物104の映像L100を1秒間に30枚の静止画列からなるNTSCビデオ信号などの映像信号L101に変換する。   The image input unit 100 is composed of, for example, a video camera, and converts the video L100 of the identification object 104 into a video signal L101 such as an NTSC video signal composed of 30 still image sequences per second.

画像表示部101は、例えばビデオモニターで構成され、入力映像L101を画面上に表示して監視員に提示する。   The image display unit 101 is composed of, for example, a video monitor, displays the input video L101 on the screen, and presents it to the monitor.

指示入力部102は、情報の獲得を指示する手段であり、例えば押しボタンスイッチで構成され、識別対象物104に反射行動を誘発させたいときに押すと、指示信号L102を出力する。   The instruction input unit 102 is a means for instructing the acquisition of information. The instruction input unit 102 includes, for example, a push button switch, and outputs an instruction signal L102 when pressed when it is desired to induce a reflex action on the identification object 104.

画像表示部101と指示入力部102は、例えば空港の搭乗ゲートとは別室に設けられた監視室に設置する。   The image display unit 101 and the instruction input unit 102 are installed, for example, in a monitoring room provided in a separate room from the boarding gate at the airport.

反射行動誘発部103は、例えば画像入力部100の近傍に設置されたフラッシュライトで構成され、指示信号L102を受信するとフラッシュライトを点灯する。画像入力部100と反射行動誘発部103は、空港の搭乗ゲート全体を見渡すことができるように例えば高い場所に設置する。   The reflex behavior inducing unit 103 is composed of, for example, a flashlight installed in the vicinity of the image input unit 100, and turns on the flashlight when receiving the instruction signal L102. The image input unit 100 and the reflex behavior inducing unit 103 are installed, for example, in a high place so that the entire boarding gate of the airport can be seen.

反射結果入力部105は、画像入力部100を構成するビデオカメラが兼ねており、反射行動誘発部103が識別対象物に物理的な作用を及ぼした結果を画像で入力する。   The reflection result input unit 105 also serves as a video camera constituting the image input unit 100, and inputs the result of the physical action of the reflection behavior inducing unit 103 on the identification target as an image.

反射結果提示部106は、画像表示部101を構成するビデオモニターが兼ねており、反射行動入力部105で入力した画像を監視員に提示する。   The reflection result presentation unit 106 also serves as a video monitor that constitutes the image display unit 101, and presents the image input by the reflection action input unit 105 to the monitor.

(2)処理手順
以下に、空港の搭乗ゲートを人物が通過した場合の処理手順を述べる。
(2) Processing Procedure The processing procedure when a person passes through the boarding gate at the airport is described below.

例えば監視員が画像表示部101に表示された監視映像を見て不審な人物がいることを確認した場合に、その人物が誰かを特定するために指示入力部102のボタンを押すと、反射行動誘発部103のフラッシュライトが点灯する。   For example, when the monitoring person confirms that there is a suspicious person by looking at the monitoring video displayed on the image display unit 101, when the button of the instruction input unit 102 is pressed to specify who the person is, the reflection action The flash light of the inducing unit 103 is turned on.

すると、識別対象物104が人物であった場合には光源の方向を振り向くという反射行動を起こす。生物はフラッシュライトのような強烈な光を浴びると、この光が鍵刺激となって光源の方向を見るという定型行動を起こすことが知られている[参考文献:」脳と行動」、青木 清、朝倉書房、1986、pp.12-41]。そのため、本明細書では、「反射行動」とは、人間や動物が上記のように鍵刺激によって、その人間などが意図せずに起こす行動をいう。   Then, when the identification object 104 is a person, a reflection action of turning around the light source is caused. It is known that when living organisms are exposed to intense light such as flashlight, this light will be a key stimulus and cause a typical behavior of looking at the direction of the light source [Reference: “Brain and Behavior”, Kiyoshi Aoki Asakura Shobo, 1986, pp.12-41]. Therefore, in this specification, the “reflective behavior” refers to behavior that a human or an animal causes unintentionally by a key stimulus as described above.

反射行動誘発部103は画像入力部100の近傍に設置されているため、強烈な光に反応して、識別対象物104の人物は反射的に反射結果入力部105のビデオカメラに顔を向ける。そのため、ビデオカメラから見て、識別対象物104の人物の顔を正面からとらえることができる。このような反射行動を起こさせる理由は、空港の搭乗ゲートを人間が歩いている場合には、下向きに歩いたり、または、犯罪者のように悪意でビデオカメラの方に向かないことがあると、その人物の顔を認識できないため、上記のように人間の反射行動を利用して正面からの顔画像を写すものである。   Since the reflection behavior inducing unit 103 is installed in the vicinity of the image input unit 100, the person of the identification object 104 reflects his face to the video camera of the reflection result input unit 105 in response to intense light. Therefore, the face of the person of the identification object 104 can be seen from the front as viewed from the video camera. The reason for this kind of reflex behavior is that if a person is walking at the boarding gate of the airport, they may walk downward or may not be maliciously facing the video camera like a criminal. Since the person's face cannot be recognized, the face image from the front is copied using the reflection behavior of the person as described above.

反射結果入力部105はビデオカメラに正対した識別対象物104の人物の顔画像を入力して、反射結果提示部106のビデオモニターに表示される。すると、監視員は識別対象物104の人物が誰であるかを容易に特定できる。   The reflection result input unit 105 inputs the face image of the person of the identification object 104 facing the video camera and displays it on the video monitor of the reflection result presentation unit 106. Then, the monitoring person can easily specify who the person of the identification object 104 is.

もしも識別対象物104が動物の場合には、振り向きの反射行動は起こすが正面の顔画像を見ることができるため、たとえ動物の影が人間に似ていたとしても人物でないことが容易に識別できる。あるいは、風で木の葉が揺れて人物が動いているように見えたとしても、反射行動が起こらないために容易に識別できる。   If the object 104 to be identified is an animal, it can be recognized as a person even if the animal's shadow resembles a human being because the face image of the front can be seen though a reflex behavior occurs. . Alternatively, even if the leaves appear to be moving due to the swaying of the leaves in the wind, the reflex behavior does not occur so that the person can be easily identified.

図2は、本実施形態の情報獲得装置を用いて監視作業を行う処理手順をフローチャートで表したものである。   FIG. 2 is a flowchart showing a processing procedure for performing monitoring work using the information acquisition apparatus of this embodiment.

画像入力部100は識別対象映像L100を入力し続け、画像表示部101は入力信号L101をモニター画面上に表示し続ける。監視員はモニター画面上に表示された映像を見て、識別対象の人物の顔をはっきり見たいときに指示入力部102の押しボタンを押す。指示入力部102は押しボタンが押されたかどうかを調べて、押されていない場合はステップS200に戻る(ステップ200)。押された場合は、指示入力部102が指示信号L102を発生し(ステップS201)、反射行動誘発部103はフラッシュライトを点灯する(S202)。すると、識別対象の人物は反射的にフラッシュライトの光源の方向に振り向き、この映像が反射結果入力部105により入力されて反射結果提示部106に表示される。   The image input unit 100 continues to input the identification target video L100, and the image display unit 101 continues to display the input signal L101 on the monitor screen. The monitor looks at the video displayed on the monitor screen and presses the push button of the instruction input unit 102 when he wants to clearly see the face of the person to be identified. The instruction input unit 102 checks whether or not the push button has been pressed, and if not, returns to step S200 (step 200). When the button is pressed, the instruction input unit 102 generates an instruction signal L102 (step S201), and the reflex action inducing unit 103 turns on the flashlight (S202). Then, the person to be identified turns in a reflective manner toward the light source of the flashlight, and this image is input by the reflection result input unit 105 and displayed on the reflection result presentation unit 106.

(3)第1の実施形態の効果
以上の説明によって、本実施形態の情報獲得装置において、監視員は識別対象の人物の顔映像をはっきりと見ることができない状態でも、識別対象の人物が偶然にカメラの方向に顔を正対するのを待たずに、識別対象の人物にカメラの方向に振り向くという反射行動を引き起こさせて正面顔の映像をはっきり見ることによって、人物特定の精度を上げることができる。
(3) Effects of First Embodiment According to the above description, in the information acquisition apparatus of this embodiment, even if the monitoring person cannot clearly see the face image of the person to be identified, the person to be identified is a coincidence. It is possible to improve the accuracy of person identification by causing the person to be identified to reflect in the direction of the camera and clearly see the image of the front face without waiting for the face to face the camera. it can.

(第1の実施形態の変形例)
以下、第1の実施形態について変形例を説明する。
(Modification of the first embodiment)
Hereinafter, modifications of the first embodiment will be described.

(1)変更例1
第1の実施形態は空港の搭乗ゲートへの適用であったが、これに限らず、商店、街頭などへも適用できる。
(1) Modification 1
Although the first embodiment is applied to an airport boarding gate, the present invention is not limited to this and can be applied to shops, streets, and the like.

銀行やコンビニエンスストアなどの商店に来店する顧客の監視に第1の実施形態の情報獲得装置を適用する場合には、店の出入り口付近、レジスター付近、店内に画像入力部100、反射行動誘発部103、及び反射結果入力部105を設置すると、強盗や万引きなどが起こった際に犯人の正対顔画像を撮影できる。特に、深夜営業時に店の外の出入り口付近に設置すると、効果的に反射行動を誘発できる。   When the information acquisition apparatus according to the first embodiment is applied to monitor a customer who visits a store such as a bank or a convenience store, the image input unit 100 and the reflex behavior induction unit 103 are located near the store entrance / exit, near the register, and in the store. When the reflection result input unit 105 is installed, a face image of the criminal can be taken when a burglar or shoplifting occurs. In particular, when it is installed near the doorway outside the store at night, it can effectively induce reflex behavior.

街頭の通行人を監視するのに第1の実施形態の情報獲得装置を適用する場合には、道をよく見渡せる高い場所に画像入力部100、反射行動誘発部103、及び反射結果105を設置すると、置き引き、ひったくり、すりなどが起こった際に犯人の正対顔画像を撮影できる。   When the information acquisition apparatus of the first embodiment is applied to monitor street passers-by, the image input unit 100, the reflex action induction unit 103, and the reflex result 105 are installed at a high place where the road can be well looked at. , You can take a face-to-face image of the criminal when there is a placement, snatching, slipping, etc.

空港の監視でも搭乗ゲートだけでなく、チェックインカウンター、セキュリティーチェックカウンター、ロビーに画像入力部100、反射行動誘発部103、及び反射結果105を設置すると、効果的に手配犯や不審人物の正対顔画像を撮影できる。   In addition to boarding gates in airport monitoring, installing the image input unit 100, the reflex action inducing unit 103, and the reflex result 105 in the check-in counter, security check counter, and lobby can effectively confront the arranger and suspicious person. A face image can be taken.

(2)変更例2
第1の実施形態では反射結果入力部105を画像入力部100が兼ねたが、これに限らず独立したビデオカメラで反射結果入力部105を構成してもよい。
(2) Modification example 2
In the first embodiment, the image input unit 100 also serves as the reflection result input unit 105. However, the present invention is not limited to this, and the reflection result input unit 105 may be configured by an independent video camera.

同様に、反射結果提示部106を画像表示部101が兼ねたが、これに限らず独立したビデオモニターで反射結果提示部106を構成しても良い。   Similarly, although the image display unit 101 also serves as the reflection result presentation unit 106, the reflection result presentation unit 106 may be configured with an independent video monitor.

(3)変更例3
第1の実施形態では、入力映像L101は画像表示部101に表示されて保存されなかったが、保存してもよい。
(3) Modification 3
In the first embodiment, the input video L101 is displayed on the image display unit 101 and is not saved, but may be saved.

この場合には、画像入力部100と画像表示部101の間に、例えばVTR(Video Tape Recorder)から構成される記憶部105を設けて、画像入力部100で撮影した入力映像L101を常時記憶すればよい。   In this case, a storage unit 105 composed of, for example, a VTR (Video Tape Recorder) is provided between the image input unit 100 and the image display unit 101, and the input video L101 captured by the image input unit 100 is always stored. That's fine.

これにより、識別対象の人物の顔映像を後から再生して詳細な確認ができるため、人物特定の精度をさらに上げることができる。また記憶した映像を証拠として使用することもできる。あるいは、指示入力部102が押されたことをイベントとして記憶部105に記憶することによって、長時間撮影された映像の中から識別対象の人物が反射行動を起こしているシーンを効率よく検索してもよい。   As a result, since the face image of the person to be identified can be reproduced later for detailed confirmation, the accuracy of person identification can be further increased. The stored video can also be used as evidence. Alternatively, the fact that the instruction input unit 102 has been pressed is stored in the storage unit 105 as an event, so that a scene in which a person to be identified has caused a reflex action can be efficiently searched from images taken for a long time. Also good.

(4)変更例4
第1の実施形態の反射行動誘発部103はフラッシュライトを点灯したが、これに限らず、識別精度を上げることができる反射行動を誘発させるものであれば何でも良い。例えば、光、音、電磁波、振動、風を使ってもよい。
(4) Modification 4
The reflex behavior inducing unit 103 of the first embodiment turns on the flashlight. However, the present invention is not limited to this, and any device may be used as long as it induces a reflex behavior that can improve the identification accuracy. For example, light, sound, electromagnetic waves, vibration, or wind may be used.

特に、夜間の野外でフラッシュライトを点灯すると、反射的に光りの方向を振り向く反射行動を効果的に誘発できる。昼間はフラッシュライトが目立たないため夜間ほどの効果は期待できないが、フラッシュライトを明るくしたり、例えば赤色などの有色のフラッシュライトを使用したり、音を同時に発生させても良い。   In particular, when the flashlight is turned on in the outdoors at night, it is possible to effectively induce a reflective behavior that turns around the direction of the light in a reflective manner. In the daytime, the flashlight is inconspicuous, so the effect of nighttime is not expected. However, the flashlight may be brightened, for example, a colored flashlight such as red may be used, or sound may be generated simultaneously.

電磁波の場合には、例えば、識別対象物104の人物が持っている携帯電話に対して電磁波を用いて発信音を鳴らす指示を出力することによって、識別対象物104の人物に携帯電話を取り出す反射行動を誘発する。あるいは、識別対象物104の人物がラジオを聞きながら車を運転している場合に、電磁波を用いてラジオに雑音を発生させることによって、ボリュームを下げる反射行動を誘発しても良い。   In the case of electromagnetic waves, for example, by outputting an instruction to sound a dial tone using electromagnetic waves to a mobile phone held by the person of the identification object 104, the reflection of taking out the mobile phone to the person of the identification object 104 Trigger behavior. Alternatively, when a person of the identification object 104 is driving a car while listening to the radio, a reflection action that lowers the volume may be induced by generating noise in the radio using electromagnetic waves.

あるいは、放電音を発生すると音の発生源の方向を振り向く反射行動や、周辺をきょろきょろ見渡す反射行動を誘発しても良い。   Alternatively, when a discharge sound is generated, a reflex action that turns around the direction of the sound source or a reflex action that looks around the surroundings may be induced.

(5)変更例5
第1の実施形態の反射行動誘発部103は、監視員が指示入力部102を押すとフラッシュライトを点灯したが、これに限らず、識別に有利な状態が得られるタイミングであれば何でもよい。例えば、周期的、ランダム、あるいは入力映像L101の輝度の平均値を算出して変化が大きいときでもよい。
(5) Modification 5
The reflex behavior inducing unit 103 of the first embodiment turns on the flashlight when the supervisor presses the instruction input unit 102, but the present invention is not limited to this, and any timing can be used as long as an advantageous state for identification can be obtained. For example, it may be periodic, random, or when the average value of the luminance of the input video L101 is calculated and the change is large.

(6)変更例6
第1の実施形態の画像入力部100は常時同じ解像度で映像を撮影したが、識別対象物が反射を起こす時のみを高精細で入力してもよい。
(6) Modification 6
Although the image input unit 100 of the first embodiment always captures video with the same resolution, it may be input with high definition only when the identification target is reflected.

例えば、画像入力部100は常時はQVGAの解像度で撮影しているとすると、反射行動は作用してから非常に短い時間に起こることを利用して、指示入力部102が押されてから10秒のみ高精細のVGAの解像度で入力してもよい。あるいは、記憶部105は通常は3倍モードで録画しているとすると、指示入力部102が押されてから10秒のみ標準モードで記憶しても良い。   For example, if the image input unit 100 is always shooting at a resolution of QVGA, 10 seconds after the instruction input unit 102 is pressed using the fact that the reflex action occurs in a very short time after acting. Only high resolution VGA resolution may be input. Alternatively, if the storage unit 105 normally records in the triple mode, the storage unit 105 may store the standard mode only for 10 seconds after the instruction input unit 102 is pressed.

あるいは、反射行動を起こしている映像をはっきりと撮影するために、指示入力部102が押されてから10秒間のみスポットライトを点灯させて識別対象物を照らしても良い。反射行動は識別対象物の意図とは関係なく誘発されているため、反射行動を起こしている最中にスポットライトを浴びせても反射行動を阻害しない。   Alternatively, in order to clearly capture an image that causes a reflection action, a spotlight may be turned on only for 10 seconds after the instruction input unit 102 is pressed to illuminate the identification target. Since the reflex behavior is induced regardless of the intention of the identification object, the reflex behavior is not hindered even if the spotlight is exposed during the reflex behavior.

あるいは、画面中で変化が大きい場所を特定して、その箇所をズームで撮影しても良い。あるいは、反射行動を高精細ビデオカメラやデジタルスチルカメラなどの、画像入力部100とは別の高精細な撮影装置で撮影しても良い。   Alternatively, a place where the change is large in the screen may be specified, and the place may be photographed with zoom. Alternatively, the reflection behavior may be photographed by a high-definition photographing apparatus different from the image input unit 100 such as a high-definition video camera or a digital still camera.

図3は、反射行動と高精細モードで入力するタイミングを説明するためのものである。反射行動は鍵刺激となる作用を与えてから神経伝達時間だけ遅れて開始され、この遅れ時間は非常に短く、個人差も少ない。一方、反射行動が完了するのに必要な時間は識別対象物の姿勢や個人差が大きい。そこで、作用300を与えると、即座に高精細モードで入力を開始し、十分な時間の後に通常モードに戻るように高精細モードの記憶時間を設定する。   FIG. 3 is a diagram for explaining the input timing in the reflection behavior and the high-definition mode. The reflex behavior is delayed by the nerve transmission time after giving a key stimulus action, and this delay time is very short and there are few individual differences. On the other hand, the time required for the completion of the reflex behavior is largely dependent on the posture of the identification object and individual differences. Therefore, when the action 300 is applied, the input is immediately started in the high-definition mode, and the storage time in the high-definition mode is set so as to return to the normal mode after a sufficient time.

(7)変更例7
第1の実施形態の反射結果入力部105はビデオ映像を入力したが、これに
限らず、識別対象物を識別できるものであれば何でもよい。例えば、音、超音波、静止画、動画、振動、指紋を入力してもよい。
(7) Modification example 7
The reflection result input unit 105 of the first embodiment inputs a video image. However, the present invention is not limited to this, and any object can be used as long as it can identify an identification target. For example, sound, ultrasonic waves, still images, moving images, vibrations, and fingerprints may be input.

電気刺激によって奇声を発生させる場合には反射結果として音を入力する。例えば、電気刺激によってびっくりして足踏みさせる場合には反射結果として振動を入力する。   When a strange voice is generated by electrical stimulation, a sound is input as a reflection result. For example, when the user is surprised and stepped on by electrical stimulation, vibration is input as a reflection result.

同様に、例えば指の背に電気刺激を加えることによって指の腹を強く押させる場合には反射結果として指紋を入力する。   Similarly, for example, when the finger is pressed strongly by applying electrical stimulation to the back of the finger, the fingerprint is input as a reflection result.

(8)変更例8
第1の実施形態では、反射行動誘発部103を画像入力部100の近傍に設置して、強烈な光に反応して、識別対象物104の人物は反射的に反射結果入力部105のビデオカメラに顔を向ける構造としている。
(8) Modification 8
In the first embodiment, the reflection behavior inducing unit 103 is installed in the vicinity of the image input unit 100, and the person of the identification object 104 reflects the video camera of the reflection result input unit 105 in response to intense light. It has a structure that faces the

しかし、人間の反応は、全て同じでなく、光がまぶしい場合には、光の方向と逆の方向に向く可能性もある。そのため、それを考慮して、反射行動誘発部103を画像入力部100と反対側に設けてもよい。   However, human reactions are not all the same, and if the light is bright, it may be in the opposite direction of the light. Therefore, in consideration thereof, the reflex action inducing unit 103 may be provided on the opposite side to the image input unit 100.

また、画像入力部100を用意し、そのうち1個の画像入力部100は、反射行動誘発部103の近傍に設け、他の1個の画像入力部100は、反射行動誘発部103の反対側に設けてもよい。このようにすることで、人間がどのような反応しても顔を正面から撮影することができる。   Also, an image input unit 100 is prepared, of which one image input unit 100 is provided in the vicinity of the reflex action inducing unit 103 and the other one image input unit 100 is on the opposite side of the reflex action inducing unit 103. It may be provided. In this way, the face can be photographed from the front regardless of the human reaction.

(第2の実施形態)
本発明の第2の実施形態の情報獲得装置を図4と図5に基づいて説明する。
(Second Embodiment)
An information acquisition apparatus according to a second embodiment of the present invention will be described with reference to FIGS.

本実施形態の情報獲得装置は、空港の搭乗ゲートに設置して、ゲートを通過する全ての乗客の顔画像を自動的に撮影する監視装置として説明する。   The information acquisition device of this embodiment will be described as a monitoring device that is installed at a boarding gate in an airport and automatically captures the face images of all passengers passing through the gate.

(1)情報獲得装置の構成
図4は、本実施形態の情報獲得装置を説明するための概略構成図である。
(1) Configuration of Information Acquisition Device FIG. 4 is a schematic configuration diagram for explaining the information acquisition device of the present embodiment.

識別対象物104の映像L100を入力する画像入力部100と、入力映像L101から識別対象物104が存在することを検出して反射行動誘発の指示信号L102を出力する検出部107と、指示信号L102を入力すると識別対象物104に物理的な作用L103を与えて反射行動を誘発させる反射行動誘発部103と、識別対象物104が反射行動を起こした結果を映像で入力する反射結果入力部105と、反射結果入力部105で入力した映像を記憶する提示部106と、から構成される。   An image input unit 100 that inputs the video L100 of the identification target object 104, a detection unit 107 that detects the presence of the identification target object 104 from the input video L101 and outputs an instruction signal L102 for inducing reflex behavior, and an instruction signal L102 Is input, the reflex action inducing unit 103 that induces the reflex behavior by giving a physical action L103 to the identification target object 104, and the reflection result input unit 105 that inputs the result of the reflex action of the identification target object 104 as an image, And a presentation unit 106 for storing the video input by the reflection result input unit 105.

画像入力部100、反射行動誘発部103、反射結果入力部105は第1の
実施形態と同様に構成され、画像入力部100は反射結果入力部105を兼ねている。
The image input unit 100, the reflex behavior inducing unit 103, and the reflex result input unit 105 are configured in the same manner as in the first embodiment, and the image input unit 100 also serves as the reflex result input unit 105.

検出部107は、情報の獲得を指示する手段であり、例えば映像取り込み機能を持つ計算機により構成され、入力映像L101を取り込んで全画素の輝度について平均を計算して、この値が急激に変化した場合に、監視対象物104が画面内に撮影されたと検出して指示信号L102を出力する。   The detection unit 107 is a means for instructing acquisition of information. For example, the detection unit 107 is configured by a computer having a video capturing function. The detection unit 107 captures the input video L101, calculates the average of the luminance of all pixels, and this value changes rapidly. In this case, it is detected that the monitoring object 104 is photographed on the screen, and the instruction signal L102 is output.

提示部106は、ハードディスクで構成され、反射結果入力部105で入力した画像を記憶する。   The presentation unit 106 includes a hard disk, and stores the image input by the reflection result input unit 105.

(2)処理手順
空港の搭乗ゲートを人物が通過した場合の処理手順を説明する。
(2) Processing procedure A processing procedure when a person passes through the boarding gate of the airport will be described.

検出部107は画像入力部100から空港の搭乗ゲートの映像を入力して輝度値の平均値を常時計算しており、カメラの前を何も通過しなければ同じ値を演算するが、背景と異なる色の人物や物体が画面内を横切ると輝度値の平均値が変化する。この変化量が予め設定されたしきい値を超えた場合には識別対象物104がカメラの前を通過したと検出する。輝度値の変化量を用いることによって、例えば、直射日光が当たる場所で監視している場合に、太陽の位置が変化する自然現象によって影の形が変化したとしても、この変化は非常に遅いために検出部106で検出される輝度値の変化量は小さいために、検出部106は識別対象物を検出しなくてすむ。検出部107は識別対象物104を検出すると指示信号L102を出力する。但し、識別対象物104が映像内で動き続けた場合に、指示信号L102を連続して出力しないように、指示信号L102を出力した後の例えば10秒間は指示信号L102を出力しない。   The detection unit 107 inputs the image of the airport boarding gate from the image input unit 100 and constantly calculates the average value of the luminance value. If nothing passes in front of the camera, the detection unit 107 calculates the same value. When a person or object of a different color crosses the screen, the average luminance value changes. When the amount of change exceeds a preset threshold value, it is detected that the identification object 104 has passed in front of the camera. By using the amount of change in luminance value, for example, when monitoring in a place exposed to direct sunlight, even if the shape of the shadow changes due to a natural phenomenon that changes the position of the sun, this change is very slow. In addition, since the change amount of the luminance value detected by the detection unit 106 is small, the detection unit 106 does not need to detect the identification target. When the detection unit 107 detects the identification object 104, the detection unit 107 outputs an instruction signal L102. However, the instruction signal L102 is not output for, for example, 10 seconds after the instruction signal L102 is output so that the instruction signal L102 is not continuously output when the identification object 104 continues to move in the video.

反射行動誘発部103は第1の実施形態と同様にフラッシュライトを点灯して識別対象104に反射結果入力部105のビデオカメラの方向を振り向かせる反射行動を誘発させる。すると反射結果入力部105はただ単に識別対象104がゲートを通過する映像を入力するのではなく、正面顔の映像を入力することができる。入力した顔画像は提示部106のハードディスクに記憶する。   Similar to the first embodiment, the reflex behavior inducing unit 103 turns on the flashlight to induce reflex behavior to turn the identification target 104 in the direction of the video camera of the reflex result input unit 105. Then, the reflection result input unit 105 can input the image of the front face, not just the image of the identification target 104 passing through the gate. The input face image is stored in the hard disk of the presentation unit 106.

図5は、第2の実施形態の処理手順をフローチャートで示したものである。   FIG. 5 is a flowchart showing the processing procedure of the second embodiment.

なお、提示部106は検出部107で識別対象物104を検出したときのみ画像の記憶を行うものであり、これ以外の構成の処理手順についてのみ説明する。   Note that the presentation unit 106 stores an image only when the detection unit 107 detects the identification object 104, and only the processing procedure of the other configuration will be described.

画像入力部100は識別対象物104の映像を入力し(ステップS500)、検出部107で識別対象物が存在する可能性が高いと検出した場合には反射行動誘発の指示信号L102を出力してステップS502に進み、そうでない場合にはステップS500に戻る(ステップS501)。ステップS502では反射行動誘発部103がフラッシュライトを識別対象物104に対して点灯して、カメラの近くに設置されたカメラの方向を振り向く反射行動を起こさせてステップS500に戻る(ステップS502)。   The image input unit 100 inputs an image of the identification target 104 (step S500), and outputs a reflex action induction instruction signal L102 when the detection unit 107 detects that there is a high possibility that the identification target exists. It progresses to step S502, and when that is not right, it returns to step S500 (step S501). In step S502, the reflex action inducing unit 103 turns on the flashlight with respect to the identification object 104, causes the reflex action to turn around the camera installed near the camera, and returns to step S500 (step S502).

(3)情報獲得装置の効果
以上の説明によって、本発明の情報獲得装置による第2の実施形態は、入力画像内に識別対象物104が存在する可能性が高いことを検出して、このときに自動的に識別対象物104に反射行動を誘発させることによって、人物特定に有利な映像を効率よく記憶できることを示した。
(3) Effect of Information Acquisition Device From the above description, the second embodiment of the information acquisition device of the present invention detects that there is a high possibility that the identification object 104 exists in the input image, and at this time, It has been shown that by automatically inducing a reflective action on the identification object 104, an image advantageous for identifying a person can be efficiently stored.

(第2の実施形態の変形例)
以下、第2の実施形態の種々の変形例を説明する。
(Modification of the second embodiment)
Hereinafter, various modifications of the second embodiment will be described.

第2の実施形態の情報獲得装置は、空港の登場ゲートへの適用であったが、これに限らず、第1の実施形態と同様に商店、街頭、キャッシュディスペンサー、自動車速度取締装置などへも適用できる。   The information acquisition device of the second embodiment is applied to an airport entrance gate, but is not limited to this, and it can be applied to a store, a street, a cash dispenser, an automobile speed control device, etc. as in the first embodiment. Applicable.

以下に、自動車速度取締装置に適用する場合について説明する。   Below, the case where it applies to a motor vehicle speed control apparatus is demonstrated.

図6は、本実施形態の情報獲得装置を自動車速度取締装置に適用した外観の一例を示している。   FIG. 6 shows an example of an appearance in which the information acquisition device of this embodiment is applied to an automobile speed control device.

反射行動誘発部103と反射結果入力部105は道路を見渡せる高い場所に設置して、画像入力部100は速度計測器で構成されて道路に埋め込む。速度計測器は、例えば、電波を上方に発信して上部に物体があることを電波の反射波で検知できる装置を2個道路に埋め込むことによって、2点間の距離と物体を検知した時間のずれから自動車の速度を計測するものであり、既に普及しているものを使用する。図には示さないが、検出部107は画像入力部103で入力した自動車の速度が予め設定されたしきい値を超えると、反射行動を誘発させる指示信号L102を反射行動誘発部に出力する。するとフラッシュライトが点灯されて反射結果入力部105はユーザがカメラの方向を振り向いたときの映像を記憶する。図には示さないが、提示部106はハードディスクにより構成され、反射結果入力部105で撮影したドライバーの顔画像を記憶する。   The reflection behavior inducing unit 103 and the reflection result input unit 105 are installed at a high place overlooking the road, and the image input unit 100 is composed of a speed measuring device and is embedded in the road. For example, the speed measuring device can divide the distance between two points and the time when the object is detected by embedding two devices in the road that can detect the presence of an object in the upper part by transmitting the radio wave upward. The vehicle speed is measured from the deviation, and the one that is already in widespread use is used. Although not shown in the drawing, when the speed of the vehicle input by the image input unit 103 exceeds a preset threshold value, the detection unit 107 outputs an instruction signal L102 for inducing reflex behavior to the reflex behavior induction unit. Then, the flashlight is turned on, and the reflection result input unit 105 stores an image when the user turns around the camera. Although not shown in the figure, the presentation unit 106 is configured by a hard disk, and stores the driver's face image captured by the reflection result input unit 105.

これによると、速度違反を起こしていたときのドライバーの顔画像を鮮明に記憶することができる。   According to this, it is possible to clearly store the driver's face image when the speed violation occurred.

このように、画像入力部100は画像以外にも例えば電磁波、音、光、などの識別対象物104の有無を検出できるものであれば何でも良い。   As described above, the image input unit 100 may be anything other than the image as long as it can detect the presence or absence of the identification object 104 such as electromagnetic waves, sound, and light.

(第3の実施形態)
本発明の第3の実施形態の情報獲得装置を図7と図8に基づいて説明する。
(Third embodiment)
An information acquisition apparatus according to a third embodiment of the present invention will be described with reference to FIGS.

本実施形態の情報獲得装置は、空港の搭乗ゲートに設置して、予め顔画像が登録された不審人物を顔画像認識で識別する監視装置として説明する。   The information acquisition device of this embodiment will be described as a monitoring device that is installed at a boarding gate in an airport and identifies a suspicious person whose face image is registered in advance by facial image recognition.

(1)情報獲得装置の構成
図7は、本実施形態の情報獲得装置の概略構成図である。
(1) Configuration of Information Acquisition Device FIG. 7 is a schematic configuration diagram of the information acquisition device of this embodiment.

識別対象物104の映像L100を入力する画像入力部100と、入力映像L101から識別対象物104が存在することを検出して反射行動誘発の指示信号L102を出力する検出部107と、指示信号L102を入力すると識別対象物104に物理的な作用L103を与えて反射行動を誘発させる反射行動誘発部103と、識別対象物104が反射行動を起こした結果を映像で入力する反射結果入力部105と、反射結果入力部105で入力した映像を認識する認識部108と、から構成される。   An image input unit 100 that inputs the video L100 of the identification target object 104, a detection unit 107 that detects the presence of the identification target object 104 from the input video L101 and outputs an instruction signal L102 for inducing reflex behavior, and an instruction signal L102 Is input, the reflex action inducing unit 103 that induces the reflex behavior by giving a physical action L103 to the identification target object 104, and the reflection result input unit 105 that inputs the result of the reflex action of the identification target object 104 as an image, And a recognition unit 108 for recognizing an image input by the reflection result input unit 105.

画像入力部100、反射行動誘発部103、反射結果入力部105は第1の
実施形態と同様に構成され、画像入力部100は反射結果入力部105を兼ねている。
The image input unit 100, the reflex behavior inducing unit 103, and the reflex result input unit 105 are configured in the same manner as in the first embodiment, and the image input unit 100 also serves as the reflex result input unit 105.

検出部107は、例えば映像取り込み機能を持つ計算機により構成され、入力映像L101を取り込んで全画素の輝度について平均を計算して、この値が急激に変化した場合に、監視対象物104が画面内に撮影されたと検出して指示信号L102を出力する。   The detection unit 107 is configured by, for example, a computer having a video capturing function, captures the input video L101, calculates the average of the luminance of all pixels, and when this value changes abruptly, the monitoring object 104 is displayed on the screen. It is detected that the image is taken and the instruction signal L102 is output.

認識部108は、例えば映像取り込み機能を持つ計算機により構成され、入力映像L101を取り込んで、人間の顔画像を予め用意した顔画像のテンプレートとブロックマッチング処理を行うことにより認識する。認識の結果予め用意した顔画像と一致する場合には、監視員に異常を知らせることができるように警報音を発するスピーカーを備える。   The recognition unit 108 is configured by, for example, a computer having a video capturing function, captures an input video L101, and recognizes a human face image by performing a block matching process with a face image template prepared in advance. As a result of the recognition, a speaker that emits an alarm sound is provided so as to be able to notify the monitoring person of the abnormality when it matches the face image prepared in advance.

(3)具体例
ここで、空港の搭乗ゲートを予め顔画像が登録された人物が通過した場合を考える。
(3) Specific example Here, consider a case where a person whose face image is registered in advance passes through a boarding gate at an airport.

検出部107は画像入力部100から空港の搭乗ゲートの映像を入力して輝度値の平均値を常時計算しており、カメラの前を何も通過しなければ同じ値を演算するが、背景と異なる色の人物や物体が画面内を横切ると輝度値の平均値が変化する。この変化量が予め設定されたしきい値を超えた場合には識別対象物104がカメラの前を通過したと検出する。輝度値の変化量を用いることによって、例えば、直射日光が当たる場所で監視している場合に、太陽の位置が変化する自然現象によって影の形が変化したとしても、この変化は非常に遅いために検出部106は識別対象物を検出しなくてすむ。検出部107は識別対象物104を検出すると指示信号L102を出力する。但し、識別対象物104が映像内で動き続けた場合に、指示信号L102を連続して出力しないように、指示信号L102を出力した後の例えば10秒間は指示信号L102を出力しない。   The detection unit 107 inputs the image of the airport boarding gate from the image input unit 100 and constantly calculates the average value of the luminance value. If nothing passes in front of the camera, the detection unit 107 calculates the same value. When a person or object of a different color crosses the screen, the average luminance value changes. When the amount of change exceeds a preset threshold value, it is detected that the identification object 104 has passed in front of the camera. By using the amount of change in luminance value, for example, when monitoring in a place exposed to direct sunlight, even if the shape of the shadow changes due to a natural phenomenon that changes the position of the sun, this change is very slow. In addition, the detection unit 106 does not need to detect the identification object. When the detection unit 107 detects the identification object 104, the detection unit 107 outputs an instruction signal L102. However, the instruction signal L102 is not output for, for example, 10 seconds after the instruction signal L102 is output so that the instruction signal L102 is not continuously output when the identification object 104 continues to move in the video.

反射行動誘発部103は第1の実施形態と同様にフラッシュライトを点灯して識別対象104に反射結果入力部105のビデオカメラの方向を振り向かせる反射行動を誘発させる。   Similar to the first embodiment, the reflective behavior inducing unit 103 turns on the flashlight to induce the reflective behavior to turn the identification target 104 in the direction of the video camera of the reflection result input unit 105.

認識部108は反射結果入力部105で撮影した映像を常時入力して、入力した映像に予め登録された顔画像が含まれているかどうかを認識する。   The recognizing unit 108 always inputs the video imaged by the reflection result input unit 105 and recognizes whether or not a face image registered in advance is included in the input video image.

識別対象物104が画像入力部のカメラの方向を偶然振り向いた場合には、認識部108は識別対象物104を認識できるが、この場合には識別対象物104は必ずしもカメラの方向を振り向くとは限らないため認識精度は低い。識別対象物104の人物が反射行動を誘発された場合には、ビデオカメラに正対した顔画像を入力できるため、識別対象物104が偶然に反射結果入力部105のビデオカメラの方向を振り向くのを受動的に待つよりは、認識部108は精度良く顔認識できる。   If the identification object 104 accidentally turns around the camera of the image input unit, the recognition unit 108 can recognize the identification object 104. In this case, however, the identification object 104 does not necessarily turn around the camera. The recognition accuracy is low because it is not limited. When the person of the identification object 104 is induced to reflect, a face image facing the video camera can be input, so the identification object 104 accidentally turns around the direction of the video camera of the reflection result input unit 105. Rather than waiting passively, the recognition unit 108 can accurately recognize the face.

例えば、木の葉が揺れる自然現象が起きて検出部106が識別対象物104を検出して反射行動誘発部103がフラッシュライトを浴びせたとしても、木の葉は認識部108で顔でないものとして認識されるため認識精度に悪影響は与えない。あるいは、例えば猫がカメラの前を横切って検出部106が識別対象物104を検出して、反射行動誘発部103によって猫にカメラの方向を振り向かせたとしても、認識部108は人間の顔画像のみの認識するために認識精度に悪影響は与えない。   For example, even if a natural phenomenon in which a leaf fluctuates occurs and the detection unit 106 detects the identification object 104 and the reflex action inducing unit 103 is exposed to a flashlight, the leaf is recognized by the recognition unit 108 as not being a face. The recognition accuracy is not adversely affected. Alternatively, for example, even if the cat crosses the front of the camera, the detection unit 106 detects the identification object 104, and the reflex action induction unit 103 turns the camera toward the cat, the recognition unit 108 does not recognize the human face image. Only the recognition does not adversely affect the recognition accuracy.

(4)情報獲得装置の効果
以上の説明によって、本発明の情報獲得装置による第3の実施形態は、入力画像内に識別対象物104が存在する可能性が高いことを検出して、このときに自動的に識別対象物104に反射行動を誘発させることによって、顔画像認識による人物特定の精度を上げることができる。
(4) Effects of Information Acquisition Device According to the above description, the third embodiment of the information acquisition device of the present invention detects that there is a high possibility that the identification target object 104 is present in the input image. By automatically inducing a reflex behavior in the identification object 104, it is possible to improve the accuracy of person identification by face image recognition.

(第3の実施形態の変形例)
以下、第3の実施形態の種々の変形例を説明する。
(Modification of the third embodiment)
Hereinafter, various modifications of the third embodiment will be described.

(1)変更例1
第3の実施形態の情報獲得装置は、空港の登場ゲートへの適用であったが、これに限らず、第1の実施形態と同様に商店、街頭、キャッシュディスペンサー、顔画像認識装置などへも適用できる。
(1) Modification 1
The information acquisition device of the third embodiment is applied to an airport entrance gate, but is not limited to this, and it is also applicable to stores, streets, cash dispensers, face image recognition devices, etc., as in the first embodiment. Applicable.

以下に、顔画像認識装置に適用する場合について説明する。   Below, the case where it applies to a face image recognition apparatus is demonstrated.

図8は、本変更例の顔画像認識装置に適用した外観の一例を示している。   FIG. 8 shows an example of the appearance applied to the face image recognition device of this modification.

筐体800にビデオカメラ801、ビデオモニター802、フラッシュライト803が組み込まれている。ビデオカメラ801は画像入力部100と反射結果入力部105を構成し、ビデオモニター802はビデオカメラ801で入力した映像を常時表示する。フラッシュライト803は反射行動誘発部103を構成する。   A video camera 801, a video monitor 802, and a flash light 803 are incorporated in the housing 800. The video camera 801 constitutes the image input unit 100 and the reflection result input unit 105, and the video monitor 802 always displays the video input by the video camera 801. The flashlight 803 constitutes the reflex behavior inducing unit 103.

この顔画像認識装置で自分の顔画像を認識させるときの一般的な問題として、ユーザはビデオモニター802に映った自分の映像を見てしまってビデオカメラ801で正面顔の映像を撮影できないために、認識精度が低くなってしまう。特に、顔画像の学習に正面顔の映像を使用した場合には認識精度の低下は顕著になってしまう。しかし、本変更例によると、ユーザが装置の前に来ると検出部107がユーザの存在を検出してフラッシュライト803を点灯させることによって、ユーザをビデオカメラ801の方向に振り向かせることができる。これによって顔画像認識の精度を上げることができ、音声や画面表示などによってユーザに注意を促す必要もない。   As a general problem when recognizing his / her face image with this face image recognition device, the user cannot see the image of the front face with the video camera 801 because he / she sees his / her image on the video monitor 802. , Recognition accuracy will be low. In particular, when the image of the front face is used for learning the face image, the reduction in recognition accuracy becomes significant. However, according to this modified example, when the user comes in front of the apparatus, the detection unit 107 detects the presence of the user and turns on the flashlight 803, so that the user can be turned toward the video camera 801. As a result, the accuracy of face image recognition can be improved, and there is no need to call the user's attention by voice or screen display.

キャッシュディスペンサーに適用した場合には、反射映像入力部は通常装置の上部に取り付けられているにも関わらず、使用者は下部に設置された画面を見ながら操作するために下を向いてしまって正面顔の映像を入力できない。しかし反射行動誘発部をカメラの周辺に配置することによってこの問題を解決できる。   When applied to a cash dispenser, the reflection image input unit is usually attached to the upper part of the device, but the user turns down to operate while looking at the screen installed at the lower part. The front face image cannot be input. However, this problem can be solved by arranging the reflex behavior inducing part around the camera.

(2)変更例2
第3の実施形態では、顔画像が認識された場合には警報音を発したが、これに限らず、異常を監視員に伝えることができる提示方法であれば何でも良い。例えば、認識イベントを記憶して、さらにそのときの入力映像と時刻を記憶してもよい。
(2) Modification example 2
In the third embodiment, an alarm sound is generated when a face image is recognized. However, the present invention is not limited to this, and any presentation method can be used as long as it can transmit an abnormality to a monitor. For example, the recognition event may be stored, and the input video and time at that time may be stored.

(3)変更例3
第3の実施形態の認識部108は常に同じ認識方法で認識を行ったが、これに限らず、検出部107で識別対象物104が検出された場合には別のモードで認識しても良い。例えば、検出部107で識別対象物104が検出された場合には、映像を9分割してどの領域に識別対象物104が検出されたかを認識部108に通知して、認識部108はその領域内で検出された認識結果の候補の重みを増やしても良い。
(3) Modification 3
The recognition unit 108 of the third embodiment always performs recognition using the same recognition method. However, the recognition unit 108 is not limited thereto, and may be recognized in another mode when the identification target 104 is detected by the detection unit 107. . For example, when the identification object 104 is detected by the detection unit 107, the image is divided into nine parts, and the recognition unit 108 is notified to which area the identification object 104 is detected, and the recognition unit 108 recognizes the area. You may increase the weight of the candidate of the recognition result detected within.

これにより複数の候補がある場合でも、高い精度で認識できる。あるいは、識別対象物104が検出されたときのみ認識部108が顔画像認識を行うことによって、背景映像の雑音による顔画像認識の誤認識を軽減することができる。   Thereby, even when there are a plurality of candidates, it can be recognized with high accuracy. Alternatively, the recognition unit 108 performs face image recognition only when the identification object 104 is detected, thereby reducing misrecognition of face image recognition due to background image noise.

本発明は、空港の登場ゲート、商店、街頭、キャッシュディスペンサーでの人間に対する監視装置、自動車速度取締装置などにおいて適用できる。   The present invention can be applied to an airport entrance gate, a store, a street, a human monitoring device at a cash dispenser, an automobile speed control device, and the like.

本発明の第1の実施形態に係る情報獲得装置の概略構成図である。It is a schematic block diagram of the information acquisition apparatus which concerns on the 1st Embodiment of this invention. 識別対象物に反射行動を誘発させる処理手順を示すフローチャートである。It is a flowchart which shows the process sequence which induces a reflective action to an identification target object. 反射行動を高精細で入力するタイミングを説明するための図である。It is a figure for demonstrating the timing which inputs reflective action in high definition. 本発明の第2の実施形態に係る情報獲得装置の概略構成図である。It is a schematic block diagram of the information acquisition apparatus which concerns on the 2nd Embodiment of this invention. 識別対象物に自動的に反射行動を誘発させる処理手順を示すフローチャートである。It is a flowchart which shows the process sequence which induces a reflective action automatically to an identification target object. 本発明の第2の実施形態を自動車速度取締に適用した外観の一例である。It is an example of the external appearance which applied the 2nd Embodiment of this invention to the automobile speed control. 本発明の第3の実施形態に係る情報獲得装置の概略構成図である。It is a schematic block diagram of the information acquisition apparatus which concerns on the 3rd Embodiment of this invention. 本発明の第3の実施形態を顔画像認識装置に適用した外観の一例である。It is an example of the external appearance which applied the 3rd Embodiment of this invention to the face image recognition apparatus.

符号の説明Explanation of symbols

100…画像入力部、
101…画像表示部、
102…指示入力部、
103…反射行動誘発部、
104…識別対象物、
105…反射結果入力部、
106…反射結果提示部、
L100…識別対象映像、
L101…入力映像、
L102…指示信号、
L103…作用
100: Image input unit,
101: Image display unit,
102 ... Instruction input unit,
103 ... reflex action induction part,
104 ... identification object,
105 ... reflection result input section,
106 ... reflection result presentation unit,
L100: Identification target video,
L101: Input video,
L102 ... Instruction signal,
L103 ... action

Claims (12)

対象物に反射行動を誘発させるための物理的作用を与える反射行動誘発手段と、
前記反射行動誘発手段へ前記物理的作用を起こすように指示する情報獲得指示手段と、
前記反射行動誘発手段が前記物理的作用を起こした時の前記対象物の反射行動を撮影した静止画、動画、赤外線画像、または、前記反射行動により発生した音、振動、超音波のうち少なくとも一つを反射行動情報として入力する反射結果入力手段と、
前記反射結果入力手段に入力した反射行動情報を表示、記憶、または、前記識別対象物の認識のうち少なくとも一つを行う反射結果提示手段と、
を有する
ことを特徴とする反射行動情報の獲得装置。
Reflex behavior inducing means for giving a physical action to induce reflex behavior on an object;
Information acquisition instruction means for instructing the reflex behavior inducing means to cause the physical action;
At least one of a still image, a moving image, an infrared image, or a sound, vibration, or ultrasonic wave generated by the reflection behavior, which is obtained by photographing the reflection behavior of the object when the reflection behavior inducing means causes the physical action. Reflection result input means for inputting one as reflection behavior information;
Reflection result presentation means for displaying, storing, or recognizing the identification target object for reflecting behavior information input to the reflection result input means;
A device for acquiring reflex behavior information, comprising:
人間に対し反射行動を誘発させるための物理的作用を与える反射行動誘発手段と、
前記反射行動誘発手段へ前記物理的作用を起こすように指示する情報獲得指示手段と、
前記反射行動誘発手段が前記物理的作用を起こした時に、反射行動を行った前記人間の顔を撮影して、その顔画像を入力する反射結果入力手段と、
前記反射結果入力手段で入力した顔画像を表示、記憶、または、前記顔認識のうち少なくとも一つを行う反射結果提示手段と、
を有する
ことを特徴とする反射行動情報の獲得装置。
Reflex behavior inducing means for giving a physical action to induce reflex behavior to humans,
Information acquisition instruction means for instructing the reflex behavior inducing means to cause the physical action;
When the reflex action inducing means causes the physical action, the reflex result input means for photographing the human face that has performed the reflex action and inputting the face image;
A reflection result presenting means for displaying, storing, or performing at least one of the face recognition;
A device for acquiring reflex behavior information, comprising:
前記反射結果入力手段は、反射行動を起こしたときの人間の顔を撮影できる位置にカメラを配置している
ことを特徴とする請求項2記載の反射行動情報の獲得装置。
The reflection behavior information acquisition device according to claim 2, wherein the reflection result input means has a camera disposed at a position where a human face can be photographed when the reflection behavior is caused.
前記反射結果入力手段は、前記情報獲得指示手段が指示した時のみ、精細度を変更して前記人間の顔画像を撮影するか、または、前記人間の顔をズームインして撮影する
ことを特徴とする請求項1または2に記載の反射行動情報の獲得装置。
The reflection result input means changes the definition and shoots the human face image only when instructed by the information acquisition instruction means, or zooms in and shoots the human face. The apparatus for acquiring reflex behavior information according to claim 1 or 2.
前記情報獲得指示手段は、前記対象物または前記人間の有無を検出し、前記対象物または前記人間を検出した時に前記指示を行う
ことを特徴とする請求項1または2記載の反射行動情報の獲得装置。
3. The acquisition of reflex behavior information according to claim 1, wherein the information acquisition instruction unit detects the presence or absence of the object or the human and performs the instruction when the object or the human is detected. apparatus.
前記情報獲得指示手段は、周期的、または、ランダムに前記指示を行うか、または、人による操作で前記指示を行う
ことを特徴とする請求項1または2記載の反射行動情報の獲得装置。
The apparatus for acquiring reflex behavior information according to claim 1, wherein the information acquisition instruction unit performs the instruction periodically or randomly, or performs the instruction by a human operation.
前記反射行動誘発手段は、光、音のうち少なくとも一つの物理的作用を用いて前記対象物または前記人間に反射行動を誘発させる
ことを特徴とする請求項1または2記載の反射行動情報の獲得装置。
The acquisition of reflex behavior information according to claim 1, wherein the reflex behavior inducing means induces reflex behavior in the object or the human using at least one physical action of light or sound. apparatus.
前記情報獲得指示手段は、前記対象物または前記人間の画像を入力して、画像の輝度の変化、動きベクトル、背景差分量のうち少なくとも一つの手段で前記対象物または前記人間の有無を検出する
ことを特徴とする請求項5記載の反射行動情報の獲得装置。
The information acquisition instruction means inputs the object or the human image and detects the presence or absence of the object or the human by at least one means among a change in luminance of the image, a motion vector, and a background difference amount. The apparatus for acquiring reflex behavior information according to claim 5.
前記反射行動情報、または、前記顔画像を記憶する情報記憶手段を有する
ことを特徴とする請求項1または2記載の反射行動情報の獲得装置。
The apparatus according to claim 1, further comprising an information storage unit that stores the reflection behavior information or the face image.
前記情報情報記憶手段は、前記対象物または前記人間を検出した時のみ記憶する
ことを特徴とする請求項9記載の反射行動情報の獲得装置。
The apparatus for acquiring reflex behavior information according to claim 9, wherein the information information storage means stores only when the object or the person is detected.
情報獲得指示手段からの指示によって反射行動誘発手段が対象物に反射行動を誘発させるための物理的作用を起こした時の前記対象物の反射行動を撮影した静止画、動画、赤外線画像、または、前記反射行動により発生した音、振動、超音波のうち少なくとも一つを反射行動情報として入力する反射結果入力ステップと、
前記入力した反射行動情報を表示、記憶、または、前記識別対象物の認識のうち少なくとも一つを行う反射結果提示ステップと、
を有する
ことを特徴とする反射行動情報の獲得方法。
A still image, a moving image, an infrared image, or an image obtained by photographing the reflex behavior of the object when the reflex behavior inducer causes a physical action to induce the reflex behavior on the object by an instruction from the information acquisition instruction unit, or A reflection result input step for inputting at least one of sound, vibration, and ultrasonic wave generated by the reflection behavior as reflection behavior information;
A reflection result presentation step of displaying, storing, or recognizing the identification object, the input reflection behavior information;
A method for acquiring reflex behavior information, characterized by comprising:
情報獲得指示手段からの指示によって反射行動誘発手段が人間に反射行動を誘発させるための物理的作用を起こした時に、反射行動を行った前記人間の顔を撮影して、その顔画像を入力する反射結果入力ステップと、
前記入力した顔画像を表示、記憶、または、前記顔認識のうち少なくとも一つを行う反射結果提示ステップと、
を有する
ことを特徴とする反射行動情報の獲得方法。
When the reflex action inducing means causes a physical action for inducing a reflex action on a human by an instruction from the information acquisition instruction means, the face of the person who performed the reflex action is photographed and the face image is input. Reflection result input step;
A reflection result presentation step of displaying, storing, or performing at least one of the face recognition, the input face image;
A method for acquiring reflex behavior information, characterized by comprising:
JP2003329151A 2003-09-19 2003-09-19 Reflex action information acquisition apparatus and method Pending JP2005094710A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003329151A JP2005094710A (en) 2003-09-19 2003-09-19 Reflex action information acquisition apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003329151A JP2005094710A (en) 2003-09-19 2003-09-19 Reflex action information acquisition apparatus and method

Publications (1)

Publication Number Publication Date
JP2005094710A true JP2005094710A (en) 2005-04-07

Family

ID=34458474

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003329151A Pending JP2005094710A (en) 2003-09-19 2003-09-19 Reflex action information acquisition apparatus and method

Country Status (1)

Country Link
JP (1) JP2005094710A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007272420A (en) * 2006-03-30 2007-10-18 Toyota Central Res & Dev Lab Inc Device, method and program for generating data for object detection, and device, method and program for object detection
WO2008120380A1 (en) * 2007-03-29 2008-10-09 Fujitsu Limited Imaging controller, its program and metho, and imaging device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007272420A (en) * 2006-03-30 2007-10-18 Toyota Central Res & Dev Lab Inc Device, method and program for generating data for object detection, and device, method and program for object detection
JP4719605B2 (en) * 2006-03-30 2011-07-06 株式会社豊田中央研究所 Object detection data generation device, method and program, and object detection device, method and program
WO2008120380A1 (en) * 2007-03-29 2008-10-09 Fujitsu Limited Imaging controller, its program and metho, and imaging device
JPWO2008120380A1 (en) * 2007-03-29 2010-07-15 富士通株式会社 Imaging control apparatus, program and method thereof, and imaging apparatus
JP4708491B2 (en) * 2007-03-29 2011-06-22 富士通株式会社 Imaging control apparatus, program and method thereof, and imaging apparatus

Similar Documents

Publication Publication Date Title
US11062577B2 (en) Parcel theft deterrence for A/V recording and communication devices
US10475311B2 (en) Dynamic assessment using an audio/video recording and communication device
US8606316B2 (en) Portable blind aid device
US7136513B2 (en) Security identification system
AU2006200828B2 (en) Face authenticating apparatus and entrance and exit management apparatus
CN112470196A (en) Audio/video apparatus with viewer
ES2361249T3 (en) PORTABLE SECURITY SYSTEM.
US20070133844A1 (en) Security identification system
US11024138B2 (en) Adjustable alert tones and operational modes for audio/video recording and communication devices based upon user location
WO2007074842A1 (en) Image processing apparatus
KR100964025B1 (en) System for controlling entrance or exit of vehicle using image of vehicles bottom and device for controlling thereof
WO2018200343A1 (en) Sharing identification data with audio/video recording and communication devices and local processing of the shared data
US20190005790A1 (en) Selecting a Video Frame for Notification using Audio/Video Recording and Communication Devices
US10930126B1 (en) Motion sensing for electronic devices
WO2022003801A1 (en) Gate device, gate system, and gate control method
JP2003169320A (en) Monitoring method and system thereof
KR20160005204A (en) Security system and method using detecting face or shape of human in doorlock
JP2005094710A (en) Reflex action information acquisition apparatus and method
KR20220091981A (en) Vehicle and control method thereof
KR101151719B1 (en) biometrics entrance management system
JP3094537U (en) Vending machine with security function
WO2022003786A1 (en) Gate device, control method, and program
KR200300765Y1 (en) Automation equipment and booth with variable surveillance camera
WO2019186977A1 (en) Information management system
JP2023020925A (en) Crime prevention device, crime prevention method and program