JPH077665A - Picture extracting device - Google Patents

Picture extracting device

Info

Publication number
JPH077665A
JPH077665A JP5168708A JP16870893A JPH077665A JP H077665 A JPH077665 A JP H077665A JP 5168708 A JP5168708 A JP 5168708A JP 16870893 A JP16870893 A JP 16870893A JP H077665 A JPH077665 A JP H077665A
Authority
JP
Japan
Prior art keywords
visible light
infrared
image pickup
image
image information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP5168708A
Other languages
Japanese (ja)
Inventor
Hiroshi Mashita
博志 真下
Mitsuru Yamamoto
満 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP5168708A priority Critical patent/JPH077665A/en
Publication of JPH077665A publication Critical patent/JPH077665A/en
Pending legal-status Critical Current

Links

Landscapes

  • Studio Circuits (AREA)

Abstract

PURPOSE:To provide a picture extracting device capable of effectively extracting specific picture information from picture information. CONSTITUTION:The specific picture information is extracted from the picture information by utilizing a branching filter 2 for dividing a luminous flux provided with the picture information into visible light and infrared light, a visible light image pickup part 5 for obtaining the video signals of the picture information based on the visible light from the branching filter 2, an infrared light image pickup part 6 for obtaining the video signals of the picture information based on the infrared light from the branching filter 2, a timing generation circuit 4 for transmitting read signals to the visible light image pickup part 5 and the infrared image pickup part 6, a binarization processing circuit 7 for binarizing output signals front the infrared light image pickup part 6 and a video switch 8 for controlling the output signals from the visible light image pickup part 5 corresponding to the output signals from the binarization processing circuit 7.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は画像抽出装置に関し、特
に撮像された画像情報の中から特定の画像情報のみを効
果的に抽出し表示部に表示するようにしたものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image extracting apparatus, and more particularly to an apparatus for effectively extracting only specific image information from captured image information and displaying it on a display unit.

【0002】[0002]

【従来の技術】従来より撮像部に表示された画像情報の
中から目的とする画像情報のみを抽出する方法は種々と
提案されている。このうち画像情報の中から人物を抽出
する画像抽出方法としてクロマキー信号を利用した方法
がある。このクロマキー信号を利用した画像抽出方法に
ついて図7を用いて説明する。
2. Description of the Related Art Conventionally, various methods have been proposed for extracting only desired image information from image information displayed on an image pickup section. Among them, there is a method using a chroma key signal as an image extracting method for extracting a person from image information. An image extraction method using this chroma key signal will be described with reference to FIG.

【0003】図中、71が青色のスクリーン、72は抽
出したい人物画像である。クロマキーの青色を判定色と
して青色のスクリーン71の部分では他の画像(背景に
合成したい画像)を出力し、それ以外の部分では人物画
像72を出力することによって対象とする人物画像のみ
を抽出する。これによって必要な人物画像72と不要な
背景71とを区別して表示している。
In the figure, 71 is a blue screen, and 72 is a person image to be extracted. Only the target person image is extracted by outputting the other image (the image to be combined with the background) in the blue screen 71 portion using the blue of the chroma key as the determination color and outputting the person image 72 in the other portions. . As a result, the necessary person image 72 and the unnecessary background 71 are displayed separately.

【0004】[0004]

【発明が解決しようとする課題】従来のクロマキー信号
を利用した画像抽出方法は、予め不要な部分(ここでは
背景)を特定色(例えば青色)のスクリーンにしておか
なくてはならないという問題点がある。
The conventional image extraction method using a chroma key signal has a problem that an unnecessary portion (here, the background) must be a screen of a specific color (for example, blue) in advance. is there.

【0005】本発明は必要とする画像情報を抽出する際
に、予め不要な部分を特定色のスクリーンにしておかな
くても、対象とする画像情報を効果的に抽出することが
できる画像抽出装置の提供を目的とする。
According to the present invention, when the necessary image information is extracted, the target image information can be effectively extracted without preliminarily setting an unnecessary portion on the screen of a specific color. For the purpose of providing.

【0006】[0006]

【課題を解決するための手段】本発明の画像抽出装置
は、画像情報を有した光束を可視光と赤外光とに分波す
る分波器、該分波器からの可視光に基づく画像情報のビ
デオ信号を得る可視光撮像部、該分波器からの赤外光に
基づく画像情報のビデオ信号を得る赤外線撮像部、該可
視光撮像部と該赤外線撮像部へ読取信号を送付するタイ
ミング発生回路、該赤外線撮像部からの出力信号を2値
化する2値化処理回路、そして該2値化処理回路からの
出力信号に応じて該可視光撮像部からの出力信号を制御
するビデオスイッチとを利用して該画像情報の中から特
定の画像情報を抽出していることを特徴としている。
An image extracting apparatus of the present invention is a demultiplexer for demultiplexing a light flux having image information into visible light and infrared light, and an image based on visible light from the demultiplexer. Visible light imaging section for obtaining information video signal, infrared imaging section for obtaining video information video signal based on infrared light from the demultiplexer, timing for sending read signal to the visible light imaging section and infrared imaging section A generation circuit, a binarization processing circuit that binarizes an output signal from the infrared imaging unit, and a video switch that controls the output signal from the visible light imaging unit according to the output signal from the binarization processing circuit. Is used to extract specific image information from the image information.

【0007】[0007]

【実施例】図1は本発明の実施例1の要部ブロック図で
ある。
Embodiment 1 FIG. 1 is a block diagram of the essential parts of Embodiment 1 of the present invention.

【0008】図中、1は撮影レンズであり、被写体(不
図示)からの画像情報を有した光束を集光し、後述する
所定面上に物体像を形成している。2は分波器であり、
撮影レンズ1からの光束のうち可視光を透過し、赤外光
(波長3〜5μ)を反射させている。3はミラーであ
る。4はタイミング発生回路であり、読出信号を発生さ
せて可視光撮像部5と赤外光撮像部6に入力している。
In the figure, reference numeral 1 denotes a taking lens, which collects a light beam having image information from a subject (not shown) and forms an object image on a predetermined surface described later. 2 is a duplexer,
Visible light of the light flux from the taking lens 1 is transmitted and infrared light (wavelength 3 to 5 μm) is reflected. 3 is a mirror. Reference numeral 4 denotes a timing generation circuit, which generates a read signal and inputs it to the visible light imaging unit 5 and the infrared light imaging unit 6.

【0009】5は可視光撮像部であり、CCDエリアセ
ンサーよりなり、撮影レンズ1からの光束のうち分波器
2を通過した可視光を赤色(R)、緑色(G)、青色
(B)用のフィルターを介して、各々の色光に分解して
いる。そして分解した各色光の物体像を結像して、これ
らの各色光に基づく画像情報のビデオ信号を得ている。
Reference numeral 5 denotes a visible light image pickup unit, which is composed of a CCD area sensor, and the visible light which has passed through the demultiplexer 2 among the light flux from the photographing lens 1 is red (R), green (G), and blue (B). Each color light is separated through a filter for. Then, the decomposed object image of each color light is formed to obtain a video signal of image information based on each color light.

【0010】6は赤外線撮像部でありCCD素子よりな
り、撮影レンズ1からの光束のうち分波器2で反射した
赤外光に基づく物体像を結像して、これより赤外光に基
づく画像情報のビデオ信号を得ている。7は2値化処理
回路であり、赤外線撮像部6からのビデオ信号を2値化
している。8はビデオスイッチであり、2値化処理回路
7からの入力信号に応じて可視光撮像部5からの可視光
に基づくビデオ信号をON,OFFしている。
Reference numeral 6 denotes an infrared image pickup section which is composed of a CCD element and forms an object image based on the infrared light reflected by the demultiplexer 2 in the light flux from the photographing lens 1 and based on the infrared light. The video signal of the image information is obtained. Reference numeral 7 is a binarization processing circuit, which binarizes the video signal from the infrared imaging unit 6. A video switch 8 turns on and off a video signal based on visible light from the visible light image pickup unit 5 according to an input signal from the binarization processing circuit 7.

【0011】本実施例では撮影レンズ1によって物体か
らの画像情報を有した光束を分波器2によって可視光と
赤外光とに分波している。このうち可視光は可視光撮像
部5へ、赤外光は赤外線撮像部6へ入射する。可視光撮
像部では入力した光束がCCDエリアセンサーによって
光電変換され、タイミング発生部4からの読出信号に同
期して可視光ビデオ信号を出力する。
In this embodiment, a light flux having image information from an object is split by a taking lens 1 into a visible light and an infrared light by a demultiplexer 2. Of these, visible light enters the visible light imaging unit 5, and infrared light enters the infrared imaging unit 6. In the visible light image pickup unit, the inputted light flux is photoelectrically converted by the CCD area sensor, and a visible light video signal is output in synchronization with the read signal from the timing generation unit 4.

【0012】一方、赤外線撮像部6においては分波器2
で分波され、ミラー3で反射した波長3〜5μ程度の赤
外光を赤外用のCCD素子により光電変換し、物体の熱
放射エネルギーによる画像情報を得ている。尚、赤外用
CCD素子はそれ自身のふくしゃ熱の影響を防ぐため冷
却装置を備えている。そしてタイミング発生部4からの
読出信号に同期して熱放射エネルギーに対応したレベル
(ビデオ信号)を出力する。
On the other hand, in the infrared imaging section 6, the demultiplexer 2
Infrared light having a wavelength of about 3 to 5 μm, which has been demultiplexed by and is reflected by the mirror 3, is photoelectrically converted by an infrared CCD element to obtain image information by thermal radiation energy of the object. The infrared CCD element is equipped with a cooling device to prevent the influence of its own heat. Then, in synchronization with the read signal from the timing generator 4, a level (video signal) corresponding to the heat radiation energy is output.

【0013】赤外線撮像部6より出力した信号は2値化
処理部7に入力し、設定した閾値によって2値化を行な
う。閾値の設定方法は入力画像を人物とその背景とする
と、可視光での画像情報(可視光画像)は例えば図2の
ようになる。
The signal output from the infrared imaging unit 6 is input to the binarization processing unit 7 and binarized according to the set threshold value. When the input image is a person and its background, the threshold value setting method is as shown in FIG. 2, for example, for visible light image information (visible light image).

【0014】赤外光に基づく画像情報(赤外線画像)は
例えば図3のように、温度の高い人物画像では輝度の高
い画像情報SHiになり、それ以外の部分では温度が低
いため低い温度を示す輝度の低い画像情報SLoが得ら
れる。
Image information based on infrared light (infrared image) is, for example, as shown in FIG. 3, image information SHi with high brightness in a person image with high temperature, and shows low temperature in other portions because the temperature is low. Image information SLo with low brightness can be obtained.

【0015】ここで人物は体温に近い温度である36°
前後に対応する輝度を示し、背景は気温に近い温度(気
温が20℃の時は20℃前後)に対応する輝度を示す。
これより予め人物と背景が分離するような温度(例えば
25℃)に設定する。それにより2値化処理回路7によ
り2値化処理を行なうことで、例えば図4のような人物
領域では1、背景領域では0の赤外線2値化画像を出力
している。
Here, the person has a temperature of 36 °, which is close to the body temperature.
The brightness corresponding to the front and back is shown, and the background shows the brightness corresponding to the temperature close to the temperature (about 20 ° C. when the temperature is 20 ° C.).
From this, the temperature (for example, 25 ° C.) at which the person and the background are separated is set in advance. As a result, the binarization processing circuit 7 performs binarization processing to output an infrared binarized image of 1 in the human area and 0 in the background area as shown in FIG. 4, for example.

【0016】2値化処理回路7からの出力信号は領域識
別信号としてビデオスイッチ8に入力され、可視光撮像
部5からの可視光ビデオ信号出力のON,OFFの制御
を行なう。可視光撮像部5からの可視光ビデオ信号はビ
デオスイッチ8に入力され、背景画像領域では領域識別
信号が0を示すことによってビデオスイッチ8をOFF
にし、予め設定された一定値を出力することによって人
物の背景をマスクする。
The output signal from the binarization processing circuit 7 is input to the video switch 8 as an area identification signal, and ON / OFF control of the visible light video signal output from the visible light image pickup section 5 is performed. The visible light video signal from the visible light imaging unit 5 is input to the video switch 8, and the video signal is turned off when the area identification signal indicates 0 in the background image area.
Then, the background of the person is masked by outputting a preset constant value.

【0017】又、人物画像領域では領域識別信号が1を
示すことにより、ビデオスイッチ8はONとなり可視光
撮像部5からの信号を選択し出力する。本実施例では抽
出したい画像情報について可視光に基づく輪部と赤外光
に基づく輪部が対応するようになっている。
In the human image area, when the area identification signal indicates 1, the video switch 8 is turned on and the signal from the visible light image pickup section 5 is selected and output. In this embodiment, the limbs based on visible light and the limbs based on infrared light correspond to the image information to be extracted.

【0018】以上のように本実施例では、抽出したい対
象物の温度とマスクしたい背景の温度の差を利用するこ
とにより、対象とする画像情報の抽出を効果的に行なっ
ている。
As described above, in this embodiment, the target image information is effectively extracted by utilizing the difference between the temperature of the object to be extracted and the temperature of the background to be masked.

【0019】図5は本発明の実施例2の要部概略図であ
る。
FIG. 5 is a schematic view of the essential portions of Embodiment 2 of the present invention.

【0020】同図において、1は撮影レンズ、10は赤
外線ライトであり赤外光を放射している。11は対象物
(人物)である。
In the figure, 1 is a taking lens, and 10 is an infrared light, which emits infrared light. Reference numeral 11 is an object (person).

【0021】本実施例では赤外線ライト10からの赤外
光を対象物11に照射している。赤外線ライト10から
の赤外光を対象物11に照射すると対象物11から反射
される赤外光は多いが、その他の部分(画像)から反射
される赤外光は赤外線ライト10から離れている為に弱
い。
In this embodiment, the infrared light from the infrared light 10 is applied to the object 11. When the object 11 is irradiated with infrared light from the infrared light 10, much infrared light is reflected from the object 11, but infrared light reflected from other parts (images) is far from the infrared light 10. Because of that, it is weak.

【0022】図6はこのときの状態を示した説明図であ
る。対象物11からの反射赤外光SHiは多いが、その
他の部分からの反射赤外光SLoは弱い。
FIG. 6 is an explanatory view showing the state at this time. The reflected infrared light SHi from the object 11 is large, but the reflected infrared light SLo from other portions is weak.

【0023】本実施例において、撮影レンズ1以降は図
1と同様の処理回路を用いている。ただ本実施例の赤外
線撮像部6は波長1μ前後の近赤外光を光電変換する例
えばMOS固体撮像素子を用いており、その他の構成は
図1の各要素と同じである。
In this embodiment, the same processing circuit as that shown in FIG. 1 is used after the taking lens 1. However, the infrared imaging unit 6 of this embodiment uses, for example, a MOS solid-state imaging device that photoelectrically converts near-infrared light having a wavelength of about 1 μm, and other configurations are the same as those of each element in FIG.

【0024】本実施例では赤外線ライト10からの距離
により人物10から反射して撮影レンズ1に入力する赤
外光の強度と背景から反射して撮影レンズ1に入力する
赤外光の強度に違いができる。従って赤外光撮像部6か
らの出力レベルも同様に違いが生ずる。本実施例ではこ
のときの違いを利用して2値化処理し、人物のみを抽出
するようにしている。
In the present embodiment, the intensity of infrared light reflected from the person 10 and input to the taking lens 1 and the intensity of infrared light reflected from the background and input to the taking lens 1 differ according to the distance from the infrared light 10. You can Therefore, the output level from the infrared light image pickup unit 6 also differs. In this embodiment, the difference is used to perform binarization processing so that only the person is extracted.

【0025】以上のように本実施例では、抽出したい画
像とマスクしたい背景の距離の違い、即ち反射赤外光の
強度を利用して画像抽出を効果的に行なっている。
As described above, in this embodiment, the image is effectively extracted by utilizing the difference in the distance between the image to be extracted and the background to be masked, that is, the intensity of the reflected infrared light.

【0026】[0026]

【発明の効果】以上のように本発明によれば前述の如く
各要素を構成することにより、予め抽出したい対象とな
る画像情報の背景を青にする必要がなく、また不必要な
背景を表示せずに効果的に画像情報を抽出することがで
きる画像抽出装置を達成することができる。
As described above, according to the present invention, by constructing each element as described above, it is not necessary to make the background of the image information to be extracted which is the target to be blue in advance, and the unnecessary background is displayed. It is possible to achieve an image extraction device that can effectively extract image information without doing so.

【図面の簡単な説明】[Brief description of drawings]

【図1】 本発明の実施例1の要部ブロック図FIG. 1 is a block diagram of a main part of a first embodiment of the present invention.

【図2】 本発明に係る可視光画像情報の説明図FIG. 2 is an explanatory diagram of visible light image information according to the present invention.

【図3】 本発明に係る赤外光画像情報の説明図FIG. 3 is an explanatory diagram of infrared light image information according to the present invention.

【図4】 本発明に係る赤外線2値化画像情報の説明図FIG. 4 is an explanatory diagram of infrared binary image information according to the present invention.

【図5】 本発明の実施例2の要部概略図FIG. 5 is a schematic view of the essential portions of Embodiment 2 of the present invention.

【図6】 本発明の実施例2に係る画像情報の説明図FIG. 6 is an explanatory diagram of image information according to the second embodiment of the present invention.

【図7】 従来のクロマキー信号を利用した画像抽出方
法の説明図
FIG. 7 is an explanatory diagram of a conventional image extraction method using a chroma key signal.

【符号の説明】[Explanation of symbols]

1 撮影レンズ 2 分波器 3 ミラー 4 タイミング発生回路 5 可視光撮像部 6 赤外線撮像部 7 2値化処理回路 8 ビデオスイッチ 1 Shooting Lens 2 Demultiplexer 3 Mirror 4 Timing Generation Circuit 5 Visible Light Imaging Section 6 Infrared Imaging Section 7 Binarization Processing Circuit 8 Video Switch

Claims (1)

【特許請求の範囲】[Claims] 【請求項1】 画像情報を有した光束を可視光と赤外光
とに分波する分波器、該分波器からの可視光に基づく画
像情報のビデオ信号を得る可視光撮像部、該分波器から
の赤外光に基づく画像情報のビデオ信号を得る赤外線撮
像部、該可視光撮像部と該赤外線撮像部へ読取信号を送
付するタイミング発生回路、該赤外線撮像部からの出力
信号を2値化する2値化処理回路、そして該2値化処理
回路からの出力信号に応じて該可視光撮像部からの出力
信号を制御するビデオスイッチとを利用して該画像情報
の中から特定の画像情報を抽出していることを特徴とす
る画像抽出装置。
1. A demultiplexer for demultiplexing a light flux having image information into visible light and infrared light, a visible light imaging section for obtaining a video signal of image information based on visible light from the demultiplexer, An infrared image pickup unit for obtaining a video signal of image information based on infrared light from the demultiplexer, a timing generation circuit for sending a read signal to the visible light image pickup unit and the infrared image pickup unit, and an output signal from the infrared image pickup unit. Identification from the image information using a binarization processing circuit for binarization and a video switch for controlling the output signal from the visible light imaging unit according to the output signal from the binarization processing circuit An image extracting apparatus, which is characterized by extracting image information of.
JP5168708A 1993-06-14 1993-06-14 Picture extracting device Pending JPH077665A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP5168708A JPH077665A (en) 1993-06-14 1993-06-14 Picture extracting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP5168708A JPH077665A (en) 1993-06-14 1993-06-14 Picture extracting device

Publications (1)

Publication Number Publication Date
JPH077665A true JPH077665A (en) 1995-01-10

Family

ID=15872985

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5168708A Pending JPH077665A (en) 1993-06-14 1993-06-14 Picture extracting device

Country Status (1)

Country Link
JP (1) JPH077665A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0797351A1 (en) * 1996-03-18 1997-09-24 Nippon Television Network Corporation Picture replacement system and method
EP0809408A1 (en) * 1996-05-24 1997-11-26 THOMSON multimedia Special effects camera
WO1999051023A1 (en) * 1998-03-29 1999-10-07 3Dv Systems, Ltd. Teleconferencing system
US6132900A (en) * 1996-12-25 2000-10-17 Matsushita Electric Industrial Co., Ltd. Method of production of non-aqueous electrolyte battery and seal plate thereof
DE10223136C1 (en) * 2002-05-24 2003-12-24 Fraunhofer Ges Forschung Procedure for adjusting and setting the depth measurement range of a studio camera
JP2009213178A (en) * 2009-06-24 2009-09-17 Casio Comput Co Ltd Camera system and method of producing data stream
JP2020031332A (en) * 2018-08-22 2020-02-27 シャープ株式会社 Electronic equipment, control device for electronic equipment, control program, and control method

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0797351A1 (en) * 1996-03-18 1997-09-24 Nippon Television Network Corporation Picture replacement system and method
EP0809408A1 (en) * 1996-05-24 1997-11-26 THOMSON multimedia Special effects camera
FR2749116A1 (en) * 1996-05-24 1997-11-28 Thomson Multimedia Sa CAMERA WITH SPECIAL EFFECTS
US6124887A (en) * 1996-05-24 2000-09-26 Thomson Licensing S.A. Specal effects camera and system including such a camera
US6132900A (en) * 1996-12-25 2000-10-17 Matsushita Electric Industrial Co., Ltd. Method of production of non-aqueous electrolyte battery and seal plate thereof
WO1999051023A1 (en) * 1998-03-29 1999-10-07 3Dv Systems, Ltd. Teleconferencing system
DE10223136C1 (en) * 2002-05-24 2003-12-24 Fraunhofer Ges Forschung Procedure for adjusting and setting the depth measurement range of a studio camera
JP2009213178A (en) * 2009-06-24 2009-09-17 Casio Comput Co Ltd Camera system and method of producing data stream
JP2020031332A (en) * 2018-08-22 2020-02-27 シャープ株式会社 Electronic equipment, control device for electronic equipment, control program, and control method

Similar Documents

Publication Publication Date Title
JP5545016B2 (en) Imaging device
CN207530934U (en) A kind of dual camera module with infrared imaging function
US8035707B2 (en) Imaging apparatus with scene analysis
CN105917638B (en) The control method and camera system of camera device and camera device and the control method of camera system
US4695878A (en) Color television camera with selectively removable infrared rejection filter
WO2021073140A1 (en) Monocular camera, and image processing system and image processing method
JP2011010258A (en) Image processing apparatus, image display system, and image extraction device
Waxman et al. Progress on color night vision: visible/IR fusion, perception and search, and low-light CCD imaging
JP2011239259A (en) Image processing device, image processing method, and program
JP2000023038A (en) Image extractor
JPH10210486A (en) Image-pickup device and method thereof
JPH077665A (en) Picture extracting device
WO2016158376A1 (en) Image processing apparatus
JP2000059798A (en) Near-infrared light/visible light shared image-pickup device
JP2005197914A (en) Face image recognizing apparatus and digital camera equipped with the same
JPH1173491A (en) Foreground image generating device
JP2641654B2 (en) Endoscope device
JP2001083009A (en) Method and device for extracting multi-band image information
JP2999517B2 (en) Image synthesis method and apparatus
JPH047991A (en) Dark field color image pickup device
JPH11327004A (en) Camera picture background mask system
JPH1070675A (en) Valid area display method and display device for view finder of video camera having aspect ratio conversion function
JP2004350192A (en) Digital camera and its control method
JP3108388B2 (en) Image processing device using video camera
WO2024203226A1 (en) Display control device, display control method, program, and photographing system