KR950008700B1 - 손떨림보정장치 - Google Patents

손떨림보정장치 Download PDF

Info

Publication number
KR950008700B1
KR950008700B1 KR1019910006316A KR910006316A KR950008700B1 KR 950008700 B1 KR950008700 B1 KR 950008700B1 KR 1019910006316 A KR1019910006316 A KR 1019910006316A KR 910006316 A KR910006316 A KR 910006316A KR 950008700 B1 KR950008700 B1 KR 950008700B1
Authority
KR
South Korea
Prior art keywords
circuit
flicker
signal
motion vector
motion
Prior art date
Application number
KR1019910006316A
Other languages
English (en)
Inventor
타카시 사카구찌
Original Assignee
마쯔시다덴기산교 가부시기가이샤
다니이 아끼오
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마쯔시다덴기산교 가부시기가이샤, 다니이 아끼오 filed Critical 마쯔시다덴기산교 가부시기가이샤
Application granted granted Critical
Publication of KR950008700B1 publication Critical patent/KR950008700B1/ko

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/684Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6842Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by controlling the scanning position, e.g. windowing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/683Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/684Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S348/00Television
    • Y10S348/91Flicker reduction

Abstract

내용 없음.

Description

손떨림보정장치
제1도는 제1발명의 제1실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치의 블록도.
제2도(a)에서부터 (g)는 상기 제1실시예에 있어서의 움직임검출회로의 설명도로서,
제2도(a)는 상기 제1실시예에 있어서의 플리커가 발생하고 있는 촬영시의 신호개략도.
제2도(b)는 상기 제1실시예에 있어서의 플리커보정회로의 일구성예를 표시한 블록도.
제2도(c)는 상기 제1실시예에 있어서의 플리커보정회로의 일구성예의 동작을 표시한 블록도.
제2도(d)는 상기 제1실시예에 있어서의 움직임벡터검출회로의 일구성예를 표시한 파형도.
제2도(e)는 상기 제1실시예에 있어서의 움직임벡터검출회로의 대표점과 움직임벡터의 관계도.
제2도(f)는 상기 제1실시예에 있어서의 움직임벡터검출회로의 대표점배치도.
제2도(g)는 상기 제1실시예에 있어서의 움직임벡터검출회로의 동작도.
제3도는(a) 및 (b)는 제1발명의 제2실시예에 있어서의 손떨림보정장치의 블록도와 그 특성도.
제4도는 제1발명의 제3실시예에 있어서의 손떨림보정장치의 블록도.
제5도는 제1발명의 제4실시예에 있어서의 손떨림보정촬상장치의 블록도.
제6도는 제1발명의 제4실시예에 있어서의 촬상소자구동개략도.
제7도는 제1발명의 제5실시예에 있어서의 손떨림보정촬상장치의 블록도.
제8도는 제1발명의 제5실시예에 있어서의 촬상소자구동개략도
제9도는 제2발명의 제1실시예에 있어서의 손떨림보정촬상장치의 블록도.
제10도는 제2발명의 제1실시예에 있어서의 전자셔터구동개략도.
제11도는 제3발명의 제1실시예에 있어서의 손떨림보정촬상장치의 블록도.
제12도는 제3발명의 제2실시예에 있어서의 손떨림보정촬상장치의 블록도.
제13도는 제3발명의 제3실시예에 있어서의 손떨림보정촬상장치의 블록도.
*도면의 주요부분에 대한 부호의 설명
102,302,402 : 메모리회로 103,303,403 : 메모리제어회로
109,309,408,512,710,912,1112,1212,1312 : 움직임보정회로
110,310,411,506,706,917,1119,1219,1319, : 플리커보정회로
111,311,409,511,709,911,1111,1211,1311 : 움직임벡터검출회로
112 : 움직임검출회로
501,701,901,1101,1201,1301 : 촬상소자
502,702,902,1102,1202,1302 : 촬상소자구동회로
503,703,903,1103,1203,1303 : 촬상소자구동제어회로
914 : 센서 915 : 플리커검출회로
1115,1215,1315 : 유지회로
본 발명은, 비데오카메라 등의 촬영장치에 있어서 움직임검출을 행하는 움직임검출회로를 구비한, 손떨림 보정을 행하는 손떨림보정장치에 관한 것이다.
최근, 비데오카메라 등의 촬영장치에 있어서, 소형, 경량, 고배율줌화가 한층더 진행되고, 또 사용자층이 종래의 매니아에 가세하여 어린이로부터 노인에 이르기까지 확대되어 가고 있다. 그 때문에 손떨림에 의한 화면요동(흔들림)이 발생하여 화질열화가 문제화되고 있다. 또, 현재 AF(Auto Focus), AWC(Auto Whitebalance Control), ALC(Auto Luminance Control)의 자동보정기능은 이미 제품화되어 더욱 개량이 진행되는 가운데, 손떨림의 자동보정에 대한 요망도 강하다.
이 손떨림보정장치로서는, 종래는 [1] 촬영시에 방진대를 사용하여 요동을 기계적으로 방지하는 방법,[2] 촬영후에 화상신호로부터 화면의 요동을 검출하고, 이 요동정보에 의거해서 화면의 위치보정을 행하여 요동을 제거하는 방법, [3] 촬상장치의 요동을 각 속도센서로 검출하고, 광학계를 포함하는 촬상유닛의 위치를 제어하는 방법의 장치가, 그리고 최근은 [4] 촬영시에 화상신호로부터 화면의 요동을 검지하고, 이 요동정보에 의거해서 화면의 위치보정을 행하여 요동을 제거하는 방법의 장치가 개발되어 있다.
그 가운데 대표예로서, 먼저 첫 번째로 촬영후에 화상신호로부터 화면의 요동을 검출하고, 그 요동정보에 의거하여 화면의 위치보정을 행하여 요동을 제거하는 방법에 대해서 설명한다. (TV 학회 기술보고, VOL.11, No.3, May 1987).
화면요동을 가진 영상신호는, 최초에 A/D변환되어, 2개의 계통으로 분배된다. 그중 한쪽은, Y/C분리회로에 보내지고, Y신호만을 인출하여, 움직임벡터검출회로에 보내진다. 움직임벡터검출회로에서는, 검출영역의 제어를 받으면서, 최적인 보정벡터의 발생까지를 행한다.
한편, A/D변환회로에서 분배된 또 한쪽의 신호는 지연회로에 보내지고, 움직임벡터를 검출하여, 보정벡터를 발생하기까지의 시간이 지연된다. 그후, 메모리에 기록되고, 판독어드레스의 제어, 화상의 확대, 보간(補間) 등의 처리를 거쳐, A/D변환회로에 보내져서, 출력신호로 된다.
그러나 상기한 바와 같은 구성은, 촬영후에 화상신호로부터 요동을 검출하고, 요동을 제거하므로, 소형·경량화에 대한 고려가 없고, 회로규모에 대한 제약도 없는 구성이다. 그 때문에, 회로규모가 커서 LSI화가 곤란하며, 촬영시에서의 화면요동보정이 불가능하다. 그 때문에 소형·경량화가 진행되는 비데오카메라의 손떨림보정회로에는 적합하지 않다.
다음에, 촬상장치의 요동을 각속도센서로 검출하고, 광학계를 포함하는 촬상유닛의 위치를 제어하는 방법에 대해서 설명한다(TV학회 기술보고, VOL. 11, No.28, NOV.1987).
촬상유닛(촬상소자)을 포함하는 렌즈경통은, 피칭(좌우)방향과 요잉(상하) 방향으로 회동자재하게 지지되어 있다. 그리고, 경통을 각각의 회동방향으로 구동하기 위하여 코일과 자석으로 구성된 평면대향형 작동기가 각각의 회동축에 설치되어, 경통이 작동기에 의해 직접 구동된다. 경통에는 2개의 각 속도센서가 장착되어, 경통의 각각의 회동방향의 요동을 검출한다. 또, 경통과 카메라본체의 상대위치를 검출하기 위하여 홀소자가 각각, 작동기의 자석에 대향하고 있다. 이들 센서로 검출된 신호를 서보회로에 입력해서 작동기에의 전력공급을 제어함으로써 경통을 공간에 대해서 정지시켜, 요동이 적은 안정된 화상을 촬영할 수 있도록 하고 있다.
그러나 상기와 같은 구성에서는, 비데오카메라로서 제품화되고는 있으나, 요동검출을 위하여 2개의 각 속도센서 및 센서회로가 필요하며, 또 촬상유닛을 자재하게 작동하도록 지지하는 기구가 필요하기 때문에, 소형·경량화가 진행하는 비데오카메라의 손떨림보정회로에는 적합하지 않다.
마지막으로, 촬영시에 화상신호로부터 화면의 요동을 검출하고, 그 요동정보에 의거하여 화면의 위치보정을 행하여 요동을 제거하는 방법에 대해서 설명한다(IEEE Transactions on Consumer Electronics, VOL. 36, No.3, AUGUST 1990).
화면요동을 가진 영상신호는, 최초에 A/D변환되어, 2개의 계통으로 분배된다. 그중 한쪽은, 움직임벡터검출회로에 보내져서, 필터회로에서 필요한 신호성분만을 인출하여, 최적인 보정벡터의 발생을 행한다.
한편, A/D변환회로에서 분배된 또 한쪽의 신호는, 메모리에 기록되고, 보정벡터에 따른 판독어드레스의 제어, 화상의 확대, 보간 등의 처리를 거쳐, D/A변환회로에 보내져서, 출력신호로 된다. 이 회로 구성에 의해서 LSI화가 가능한 회로규모에서의 실현이 가능하게 되었다.
그러나 상기한 바와 같은 구성에서는, 텔레비젼카메라로 촬영하고 있을 때에, 피사체가 형광등과 같이 전원주파수로 점등하는 광원에 의해서 조명되고 있고, 또한 텔레비젼카메라의 수직동기주파수(이하 fv)와, 전원주파수(이하 fp)가 다른 경우, 예를들면, fv가 60Hz이고 fp가 50Hz인 경우, 촬영된 여상은 20Hz의 플리커가 발생하므로, 매칭법에 의한 2필드의 영상신호로부터 연산에 의해 검출하는 움직임벡터는 올바른 움직임벡터가 아니며, 정확한 움직임검출 및 정확한 손떨림보정을 할 수 없다고 하는 문제점을 가지고 있었다.
본 발명은, 영상신호로부터 플리커성분을 감쇠, 억압하고, 이 감쇠·억압된 영상신호로부터 움직임벡터를 검출함으로써, 정확한 움직임벡터를 검출하고, 이 움직임벡터를 사용하여 효과적인 움직임검출이 가능한 동시에, 움직임보정회로와 일체화함으로써 유효한 손떨림보정이 가능한 손떨림보정장치를 제공하는 것을 주된 목적으로 한다.
상기 목적을 달성하기 위하여, 제1발명은 영상신호의 플리커성분을 보정하는 플리커보정회로와, 상기 플리커보정회로의 출력신호를 상대비교하여 움직임벡터를 검출하는 움직임벡터검출회로와, 상기 움직임벡터검출회로가 얻은 움직임벡터에 따라서 움직임성분을 제거하는 움직임보정회로를 구비한 손떨림보정장치이다.
상기 제1 발명에 있어서는, 플리커보정회로가 영상신호의 플리커성분을 보정함으로써, 움직임벡터검출회로는 플리커성분이 없는 영상신호로부터 움직임벡터를 검출하도록 구성되어 있다.
다음에, 제2발명은 플리커검출용 센서와, 이 센서출력신호로부터 플리커성분을 검출하는 플리커검출센서회로와, 상기 플리커검출센서회로의 출력신호로 제어되어 플리커성분을 보정하는 플리커보정회로와, 상기 플리커보정회로의 출력신호를 상대비교하여 움직임벡터를 검출하는 움직임벡터검출회로와, 상기 움직임벡터검출회로가 얻은 움직임벡터에 따라서 움직임성분을 제거하는 움직임보정회로를 구비한 손떨림보정장치이다.
상기 제2발명에 있어서는, 플리커검출용 센서와, 이 센서의 출력신호로부터 플리커성분을 검출하는 플리커검출센서회로가, 플리커성분을 검출하고, 플리커보정회로가 플리커성분을 보정함으로써, 움직임벡터검출회로는 플리커성분이 없는 영상신호로부터 움직임벡터를 검출한다. 또, 이 경우는 플리커보정회로를 가변전자셔터기능을 가진 촬상소자를 사용한 촬상회로로 구성함으로써, 비데오카메라장치에 사용하는 경우 플리커보정회로의 회로규모를 삭감한 회로구성으로 된다.
다음에, 제3발명은 촬상소자의 출력신호로부터 플리커성분을 검출하는 플리커검출회로와, 상기 플리커검출회로의 신호를 유지하는 유지회로와, 가변전자셔터기능을 가진 촬상소자를 사용한 플리커성분을 보정하는 플리커보정회로와, 상기 플리커보정회로의 출력신호를 상대비교하여 움직임벡터를 검출하는 움직임벡터검출회로와, 상기 움직임벡터검출회로가 얻은 움직임벡터에 따라서 움직임성분을 제거하는 움직임보정회로를 구비한 손떨림보정장치이다.
상기 제3 발명에 있어서는, 플리커검출회로가 촬상소자의 출력신호로부터 플리커 성분을 검출하고, 유지회로가 상기 플리커검출회로의 신호를 유지한다. 또 플리커보정회로는, 가변전자셔터기능을 가진 촬상소자를 사용한 촬상회로로 구성되어 있으며, 상기 유지회로의 출력신호로 제어되어서 플리커성분을 보정한다. 그리고, 플리커보정회로가 플리커성분을 보정함으로써, 움직임벡터검출회로는 플리커성분이 없는 영상신호로부터 움직임벡터를 검출한다. 이 경우 센서 및 센서회로를 사용하지 않으므로 더욱 소형·경량을 만족하는 구성으로 된다.
또, 상기한 플리커성분을 감쇠·억압하고, 이 감쇠·억압된 영상신호로부터 검출한 움직임벡터는, 손떨림보정뿐만 아니고 EDTV 고화질 기술로서의 움직임적응형 순차주사변환, 움직임적응형 3차원 빗모양의 필터, 그리고 움직임적응형 잡음감소기 등에서도 효과적으로 활용할 수 있어, 그 응용범위는 넓다.
[1] <실시예 : 기본구성>
이하, 본 발명의 실시예에 대해서 도면을 참조하면서 설명한다.
제1도는 제1발명의 제1실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치의 블록도를 표시한 것이다. (101)은 아날로그디지탈변환회로(이하 A/D회로), (102)는 메모리회로, (103)은 메모리제어회로, (104)는 플리커보정회로, (105)는 신호처리회로, (106)은 보간회로, (107)은 보간제어회로, (108)은 디지틀아날로그변환회로(이하 D/A회로), (109)는 메모리회로, 메모리제어회로, 보간회로 및 보간제어회로로 구성된 움직임보정회로, (110)은 플리커보정회로, (111)은 움직임벡터검출회로, (112)는 플리커보정회로와 움직임벡터검출회로로 구성되는 움직임검출회로, (113)은 상기한 모든 회로를 종합적으로 제어하는 시스템제어회로이다.
이상과 같이 구성된 본 실시예의 움직임검출회로를 구비한 손떨림보정장치에 대해서, 이하 그 동작을 설명한다. 입력영상신호는 A/D회로(101)에 의해서 디지틀신호로 변환되어 메모리회로(102) 및 움직임벡터용 플리커보정회로(110)에 입력된다. 움직임벡터용 플리커보정회로(110)에서는 입력신호내의 플리커성분을 검출하고 감쇠시키고, 움직임벡터검출회로(111)에서는 플리커성분이 감쇠한 입력신호로부터 움직임벡터를 검출한다. 검출된 움직임벡터는 시스템제어회로(113)에 의해서 메모리제어회로(103), 신호처리회로(105), 보간제어회로(107)를 제어하는데 필요한 테이터로 된다.
또 메모리제어회로(103)에 의해서 기록·판독제어되는 메로리회로(102)에서는 움직임벡터신호에 따라서 메모리회로내의 영상신호의 반출테두리를 변화시켜 움직임성분을 제거한 신호를 출력한다. 이 출력신호는 영상신호플리커보정회로(104) 및 Y(휘도신호)·C(색신호)분리 등의 신호처리를 행하는 신호처리회로(105)에 의해서 V성분을 감쇠시키는 동시에 휘도신호와 색신호와의 분리 등의 신호처리가 행하여진다. 또 보간회로(106)에서는 보간제어회로(107)에 위해서 제어되어서 반출테두리신호인 입력신호를 보간·확대처리해서 정규의 영상신호로 하고, D/A회로(108)에서 아날로그신호로 변환된다.
다음에, 제2도에, 제1발명의 제1실시예에 있어서의 움직임검출회로, 즉 제1도에 표시한 움직임벡터용 플리커보정회로(110) 및 움직임벡터검출회로(111)를 설명한다.
제2도(a)는 플리커가 발생하고 있는 촬영시의 신호의 개략도이다. 동도면은, 예를들면, fv가 60Hz이고 fp가 50Hz인 경우에 촬영된 영상이며, 20Hz의 플리커가 발생하고 있다. 다음에 제2도(b)는 플리커보정회로, (202)는 평균회로(201)의 출력신호로부터 플리커성분을 제거하는 LPF(저역통과필터), (203)은 평균회로(201)의 출력신호를 지연시키는 지연회로, (204)는 LPF(202)의 출력신호와 지연회로(203)의 출력신호의 나눗셈을 행하는 제산회로, (205)는 회로의 이득을 제어하는 이득제어회로, (206)은 제1도의 시스템제어회로(113)로부터의 제어단자로 이득을 1배로 고정해서 보정을 행하지 않도록 하는 것이 가능하다.
이상과 같이 구성된 플리커보정회로에 대해서, 이하 그 동작을 제2도(c)의 각부의 신호도를 사용하여 설명한다. 동도면에 있어서, 횡축은 시간이며 필드번호를 표시하고, 종축은 신호레벨이다. 신호 S201은 플리커가 있는 영상신호이며, 영상입력단자(200)로부터 입력된다. 신호 S201은, K를 필드번호라 하면,
S201[K]=I[K]·S0[K]
로 표시한다. 여기서, I[K]는 플리커성분, S0[K]는 플리커가 없는 신호성분이다. 신호 S201은, 신호 S0의 레벨을 중심으로 하여 상하로 변동한 것이며, 신호 I의 평균치는 1이 된다.
평균회로(201)는 신호 S201을 1필드기간 평균하고, 수직귀선으로 동기해서 출력한다. S202는 평균회로(201)의 출력신호이다. (S201[K])를 신호 S201[K]를 평균한 신호라 하면,
S202[K]-(S201[K-1])=(I[K-1])·(S0[K-1])
의 관계가 성립한다. 여기서, (I[K]),(S0[K])는 신호 I[K],S0[K]를 각각 1필드기간 평균한 신호이나, I는 1필드의 사이에서 일정하므로,
S202[K]=I[K-1]·(S0[K-1])
로 된다.
LPF(202)는 신호 S202에서부터 플리커성분을 제거한 신호를 얻을 수 있는 것이다. LPF(202)의 출력을 S203[K]라 하면,
S203[K]={S202[K-1]+S202[K-2]+S202[K-3]}/3
={I[K-2](S0[K-2])+I[K-3])(S0[K-3]+I[K-4](S0[K-4])}/3
여기서, 인접한 필드의 변화는 적으므로
(S0[K-2])=(S0[K-3])
(S0[K-4])=(S0[K-3])
으로 할 수 있다. 또 플리커성분은 3필드마다 반복하고, 또한 신호 I의 평균치는 1이므로,
I[K-2]+I[K-3]+I[K-4]=3
으로 된다. 따라서,
S203[K]=(S0[K-3]·{I[K-2]+I[K-3]+I[K-4]}/3·(S0[K-3])
으로 된다. 제2도는 (c)의 S203에 신호를 표시한다.
지연회로(203)는 신호 S203과 신호 S204의 위상을 일치시키기 위한 지연회로이며, 신호 S202를 2필드 지연시킨다. 지연회(203)의 출력을 S204라 하면,
S204[K]=S202[K-2]
=I[K-3]·(S0[K-3])
으로 된다. 제2도(c)의 S204에 신호를 표시한다.
제산회로(204)는 이하의 계산을 행한다. 제산회로(204)의 출력을 S205[K]라 하면,
S205[K]=S203[K]/S204[K]
=(S0[K-3]/I[K-3]·(S0[K-3])
=1/I[K-3]
여기서, 플리커의 주기성에 의해서
I[K]=I[K-3]
따라서,
S205[K]=1/I[K]
로 된다.
이득제어회로(205)는 영상신호 S201과 제산회로(204)의 출력신호 S205와의 승산을 행한다. 이득제어회로(205)의 출력을 S206[K]라 하면,
S206[K]=S201[K]·S205[K]
=I[K]·S0[K]/I[K]
=S0[K]
로 되어, 플리커성분을 제거할 수 있다.
또한, 플로커보정회로는 선형인 신호처리계의 어디에 삽입해도 된다. 예를 들면 제1도에서는 영상신호 플리커보정회로(104)를 메모리회로와 보간회로와의 사이에 삽입했을 경우를 표시하였으나, 메모리회로의 앞 또는 보간회로의 뒤라도 되며, 또 D/A회로뒤의 아날로그신호처리계내에 삽입해도 된다.
다음에 움직임벡터검출회로에 대해서 설명한다. 제2도(d)는 움직임벡터의 검출방법인 대표점매칭법에 있어서의 대표점의 배치도의 일례이며 수평 6×수직 5=30개의 대표점이 4영역으로 배치되어 있는 경우를 표시하였다. 제2도(e)는, 움직임벡터검출회로의 블록도이다. 동도면에 있어서, (111)은 움직임벡터검출회로전체, (211)은 대표점위치에 있어서의 신호를 기억하는 대표점신호메모리회로, (212)는 현필드의 영상신호와 1필드앞의 대표점위치에 있어서의 영상신호인 대표점신호메모리회로출력신호와의 감산회로, (213)은 각 영역내의 모든 대표점에 대한 대표점과 그 주위의 신호와의 감산신호를 누적가산하는 연산신호누적메모리회로, (214)는 연산신호누적메모리회로로부터 필요한 움직임벡터를 얻을 수 있는 벡터검출회로이다.
이와 같이, 대표점을 배치하고, 2필드의 영상신호로부터 움직임벡터를 검출해서 손떨림보정을 행하고 있다.
다음에 제2도(f)에 대표점과 움직임벡터의 관계를 표시한다. 동도면에 있어서, 1에서부터 9는 각 화소의 위치이며, 5가 대표점에 대응하고 있다.이때 대표점에 대응하는 5의 화소의 신호가, 1필드뒤에 1의 화소의 위치로 이동하였을 경우 움직임벡터^1(벡터1)을 표현하고 있다. 마찬가지로 1필드위에 2의 화소의 위치로 이동하였을 경우 움직임벡터^2, 또 1필드 뒤도 5의 화소의 위치에 존재하는 경우 움직임벡터는^5이며, 이 경우 이동량은 0, 즉 정지하고 있게 된다.
다음에 제2도(g)에 플리커성분이 없는 경우와 있는 경우의 움직임벡터검출에 대해서 설명한다. 제2도(g)-(1)은 t=T1일때의 각 화소(4,5 및 6)의 신호레벨, 제2도(g)-(2)는 t=T1-1일때의 각 화소의 신호레벨, 제2도(g)-(3)은 그때의 각 화소와 대표점과의 연산결과, 그리고 제2도(g)-(4)는 얻을 수 있는 움직임벡터를 표시한다. 여기서, (가)는 플리커보정회로에 의해 플리커성분이 없고 화상은 정지하고 있는 경우이며, (나)는 플리커성분이 있고 화상은 정지하고 있는 경우를 표시하고 있다.
(가)의 경우 플리커성분도 없고 정지하고 있으므로 (g)-(1)의 각 화소의 신호레벨과, (g)-(2)의 각 화소의 신호레벨은 동등하고, (g)-(3)의 각 화소와 대표점과의 연산결과는, 대표점에 대응하는 5의 화소에있어서 최소치로 되며, (g)-(4)의 움직임벡터는 0(영)을 표시하고 있다.
그러나, (나)로 표시한 바와 같이 정지하고 있는데 플리커성분이 있는 경우는, (g)-(1)의 각 화소의 신호레벨과, (g)-(2)의 각 화소의 신호레벨은 플리커성분 때문에 다르며, (g)-(3)의 각 화소와 대표점과의 연산결과는, 대표점에 대응하는 5의 화소가 아니고 4의 화소에 있어서 최소치로 되며, (g)-(4)의 움직임벡터는^4를 표시하고 있다.
이와 같이 플리커성분이 존재하면, 2필드의 화상의 상관연산에서 구하는 움직임벡터검출은 부정확하게 되나. 플리커보정회로를 설치해서 플리커성분을 억압·감쇠함으로써, 움직임검출회로는 정확한 움직임벡터를 검출하는 것이 가능하다.
이 움직임검출은, EDTV 고화질 기술로서의 움직임적응형 순차주사변환, 움직임적응형 3차원 빗모양 필터, 움직임적응형 잡음감소기 등에서 사용되고 있어, 그 응용 범위는 넓다.
또한, 손떨림보정장치는 움직임검출회로를 포함하는 구성이 되므로, 금후의 실시예의 설명에 있어서는 손떨림보정장치의 설명을 행하며 움직임검출회로 단독으로서의 설명은 생략하는 것으로 한다.
또, 제1도에서는 신호처리회로(105)에서 휘도신호와 색신호와의 분리처리 등을 행하는 경우를 표시하였으나, 색분리처리는 A/D회로와 메모리회로와의 사이, 또는 A/D회로앞의 아날로그처리계 또는 D/A회로 뒤의 아날로그처리계에서 행하여도 된다.
이상과 같이 본 실시예에서는 움직임벡터용 플리커보정회로를 움직임벡터검출회로의 앞단부에 배치함으로써, 입력영상신호가 플리커성분을 가진 경우에도 올바른 움직임벡터를 검출하여, 정확한 손떨림보정을 행할 수 있다.
[2] <실시예 : 기본구성+필터회로>
제3도(a)는 제1발명의 제2실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치의 불록도를 표시한 것으로서, 제1발명의 제1실시예에 FLT(필터)회로가 가해진 구성으로 되어 있다. 동도면에 있어서 (301)에서부터 (312)는 제1실시예에 있어서의 제1도의 (101)에서부터 (112)와 마찬가지이며, 다른 점을 FLT회로(313)이다. 이하, 제1실시예와 다른 점을 중심으로 설명한다.
FLT회로(313)는 입력영상신호로부터 벡터검출에 유효한 성분을 추출하기 위한 회로이며, 그 주파수특성을 동도면(b)에 표시한다. 이FLT회로에서는 잡음의 영향을 억압하는 동시에 화상의 에지를 확대하고, 소수의 대표점에서도 화상의 특징을 포착해 움직임벡터검출을 가능하게 한다. 또 광학계 렌즈의 중앙부와 주변부의 광의 투과율의 차이에 의한 세이딩 및 플리커 등의 영향을 억압하는 효과도 있다. 이 때문에 움직임벡터용 플리커보정회로(310)는 영상신호용 플리커보정회로(304)에 비하여 그 플리커성분억압효과가 뒤떨어져도 FLT회로와 움직임벡터플리커보정회로(310)에서 필요한 플리커성분억압을 행할 수 있다.
예를 들면, 플리커보정회로가 아날로그회로구성시는, 아날로그승산기의 직선성·다이나믹레인지가 뒤떨어져 있어도 되고, 또 디지틀회로구성시는, 회로의 비트구성이 낮아도 되게 된다.
이상과 같이 본 실시예에 의하면, FLT회로를 설치하고, 이 FLT회로가 벡터검출에 유효한 성분을 추출하는 주파수특성을 가짐으로써, 플리커억압성능이 낮은 움직임벡터를 검출하여, 정확한 손떨림보정을 행할 수 있다.
[3]<실시예 ; 신호처리공용 플리커보정회로>
제4도는 제1발명의 제3실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치의 블록도를 표시한 것이며, 제1발명의 제1실시예와 비교하여 움직임벡터검출 및 신호처리의 양쪽에 필요한 플리커보정회로를 공용하는 구성으로 되어 있다.
동도면에 있어서, (401)에서부터 (410)은, 제1실시예에 있어서의 제1도에서 (104)와 (110)을 제거한 것과 마찬가지이며, 다른 점은 플리커보정회로(411)이다. 이하 제1실시예와 다른 점을 중심으로 설명한다.
동도면에 있어서, 플리커보정회로(411)는 A/D회로(401)에 의해서 디지틀신호화된 영상신호로부터 플리커성분을 감쇠·억압한다. 이하 움직임벡터검출회로(409)는, 이 플리커성분을 감쇠·억압한 영상신호로부터 움직임벡터를 검출하고, 또 움직임보정회로(408) 및 신호처리회로(404)도 이 플리커성분을 감쇠·억압된 영상신호로부터, 움직임보정된 영상신호를 작성해간다. 이와 같이 플리커보정회로(411)는 움직임벡터검출 및 신호처리에 필요한 플리커성분의 감쇠·억압을 행한다.
이상과 같이 본 실시예에 의하면, 플리커보정회로(411)를 설치함으로써, 움직임벡터검출 및 신호처리의 양쪽에 필요한 플리커성분의 감쇠·억압을 행할 수 있으므로, 적은 회로규모로 입력영상신호가 플리커성분을 가진 경우에도 올바른 움직임벡터를 검출하여, 정확한 손떨림보정을 행할 수 있다.
또한, 본 실시예에서는 플리커보정회로는 디지틀회로구성의 경우를 표시하였으나, A/D회로앞에 배치하여 아날로그회로구성으로 해도 된다.
[4]<실시예 : 촬상소자구동+확대기능구성>
제5도는 제1발명의 제4실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치(구체적으로는 손떨림보정촬상장치)의 블록도를 표시한 것이며, 제1발명의 제1실시예와 비교하여 움직임보정기능이 촬상소자구동회로와 촬상소자출력신호의 보간회로로 구성되어 있다.
동도면에 있어서 (501)은 촬상소자, (502)는 촬상소자를 구동하는 촬상소자구동회로, (503)은 촬상소자구동회로(502)를 제어하는 촬상소자구동제어회로, (504)는 촬상소자출력신호를 A/D변환하기까지에 필요한 아날로그신호처리회로, (505)는 A/D회로, (506)는 A/D변환된 영상신호의 플리커성분을 감쇠·억압하기 위한 플리커보정회로, (507)은 신호처리회로, (511)은 움직임벡터를 검출하는 움직임벡터검출회로, (508)은 촬상소자출력신호를 보간하기 위한 보간회로, (509)는 보간회로(508)를 제어하는 보간제어회로, (510)은 D/A회로, (512)는 촬상소자(501), 촬상소자구동회로(502), 촬상소자구동제어회로(503), 보간회로(508) 및 보간제어회로(509)로 이루어진 움직임보정회로, (513)은 상기 모든 회로를 종합적으로 제어하는 시스템제어회로이다.
이상과 같이 구성된 본 실시예의 손떨림보정촬상장치에 있어서, 이하 그 동작을 상기한 실시예와 다른 점을 중심으로 설명한다.
제6도는 본 실시예의 촬상소자구동에 의한 움직임보정의 개략도이다. 동도면에 있어서 촬상소자(501)의 전체영역은 통상 촬상영역과 동등하고 검출된 움직임벡터에 따라서 촬상소자판독영역을 변화시킨다. 그후 보간회로(508)를 사용하여 촬상소자판독영역을 보간·확대해서 정규의 TV신호를 얻을 수 있다. 이와 같이 촬상소자구동회로(502)에 의해 움직임보정을 행하는 손떨림보정장치에 있어서도, 플리커보정회로(506)는 입력영상신호의 플리커성분을 감쇠·억압한다. 그후 움직임벡터검출회로(511)는 올바른 움직임벡터를 검출하고, 신호처리회로(507) 및 보간회로(508)는 플리커성분을 감쇠·억압한 정규의 영상신호를 작성할 수 있다.
이상과 같이 본 실시예에 의하면, 이와 같이 촬상소자구동에 의해 움직임보정을 행하는 손떨림보정촬상장치에 있어서도, 플리커보정회로(506)는 입력영상신호의 플리커성분을 감쇠·억압하므로, 움직임벡터검출회로(511)는 올바른 움직임벡터를 검출할 수 있다. 또한, 플리커성분을 감쇠·억압한 영상신호를 얻을 수 있어 유효한 손떨림보정을 행할 수 있다.
[5]<실시예:광역촬상소자구동구성>
제7도는 제1발명의 제5실시예에 있어서의 움직임검출회로를 구비한 손떨림보정창치를 블록도를 표시한 것이며, 제1발명의 제4실시예와 비교하여 움직임보정기능이 통상 촬상소자보다 넓은 촬상소자를 구동하는 구성으로 되어 있다.
동도면에 있어서, (704)에서부터 (711)은 제4실시예의 제5도의 (504)에서부터 (507) 및 (510)에서부터 (513)과 마찬가지이며, 다른 것은 촬상소자(701)의 크기 및 움직임보정회로(710)를 구성하는 촬상소자(701), 촬상소자구동회로(702), 촬상소자구동제어회로(703)이다. 이하, 제4실시예와 다른 점을 중심으로 설명한다.
또 제8도는 실시예의 촬상소자구동에 의한 움직임보정의 개략도이다. 동도면에 있어서 촬상소자영역은 통상 촬영영역보다도 넓은 광역촬상소자이며, 검출된 움직임벡터에 따라서 촬상소자판독영역을 변화시킨다. 이 판독된 촬상소자판독영역은, 정규의 TV영상영역과 동등하게 되어 있다. 이와 같이 광역촬상소자구동에 의해 움직임보정을 해하는 손떨림보정촬상장치에 있어서도, 플리커보정회로(706)는 입력영상신호의 플리커성분을 감쇠·억압한다. 그후 움직임벡터검출회로(709)는 올바른 움직임벡터를 검출하고, 신호처리회로(707)는 플리커성분을 감쇠·억압한 정규의 영상신호를 작성할 수 있다.
이상과 같이 본 실시예에 의하면, 이와 같이 광역촬상소자구동에 의해 움직임보정을 해하는 손떨림보정촬상장치에 있어서도, 블리커보정회로(706)는 입력영상신호의 플리커성분을 감쇠·억압하므로, 움직임벡터검출회로(709)는 올바른 움직임벡터를 검출할 수 있다. 또한, 플리커성분을 감쇠·억압한 영상신호를 얻을 수 있어 유효한 손떨림보정을 행할 수 있다.
[6]<실시예:플리커검출센서구성>
제9도는 제2발명의 제1실시예에 해당하는 제6실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치의 블록도를 표시한 것이며, 제1발명의 실시예와 비교하여 플리커보정회로가 촬상소자구동회로와 전자셔터구동제어회로로 구성되어 있다.
동도면에 있어서, (901)에서부터 (905) 및 (907)에서부터 (913)은 제4실시예의 제5도의 (501)에서부터 (505) 및 (507)에서부터 (513)과 마찬가지이며, 다른 것은 전자셔터구동제어회로(906), 센서(914), 플리커검출센서회로(915), 제어회로(916), 그리고 촬상소자구동회로(902)와 전자셔터구동제어회로(906)로 구성되어 있는 플리커보정회로(917)이다. 이하, 제4실시예와 다른 점을 중심으로 설명한다.
또 제10도는, 본 실시예의 전자셔터구동제어회로(906)에 의한 촬상소자(901)의 구동개략도이다. 동도면에 있어서, 피사체가 형광등과 같이 전원주파수에 의해서 점등하는 광원에 의해서 조명되고 있고, 또한 텔레비젼카메라의 수직동기주파수(이하 fv)와, 전원주파수(이하 fp)가 다른 경우, 예를들면, fv가 60Hz이고 fp가 50Hz인 경우, 피사체광량은 제10도에 표시한 바와 같이, 20Hz의 플리커성분을 가지며, 그래서 전하축적시간을 1/100(초)로 함으로써 플리커보정을 행할 수 있다.
제9도에 있어서 플리커검출센서회로(915)가 플리커성분을 검출하면 제어회로(916)는 전자셔터구동제어회로(906)를 제어해서 영상신호의 플리커성분을 감쇠·억압한다. 그후 움직임벡터검출회로(911)는 올바른 움직임벡터를 검출하고, 신호처리회로(907) 및 보간회로(908)는 플리커성분을 감쇠·억업한 정규의 영상신호를 작성할 수 있다.
이상과 같이 본 실시예에 의하면, 이와 같이 촬상소자구동에 의해 움직임보정을 행하는 손떨림보정촬상장치에 있어서도, 플리커검출센서회로의 검출신호에 의해 전자셔터구동제어회로(906)는 입력영상신호의 플리커보정을 행하여, 움직임벡터검출회로(911)는 올바른 움직임벡터를 검출할 수 있다. 더구나, 플리커성분을 감쇠·억압한 영상신호를 얻을 수 있어 유효한 손떨림보정을 행할 수 있다.
또 본 실시예에서는, 촬상소자의 전자셔터구동에 의한 플리커보정과 촬상소자구동에 의한 움직임보정을 조합한 경우를 표시하였으나, 촬상소자의 전자셔터구동에 의한 플리커보정과 메모리제어방식에 의한 움직임보정을 조합시킬 수도 있다. 단, 본 실시예의 경우는 촬상소자구동에 의해 플리커보정과 움직임보정을 행하므로, 촬상소자구동제어회로와, 전자셔터구동제어회로를 고용함으로써 회로규모를 삭감할 수 있는 효과도 가진다.
또 본 실시예에서는, 플리커검출센서회로의 검출신호를 사용하는 경우를 표시하였으나, 색온도검출을 행하는 색온도검출센서회로의 검출신호를 사용하는 것도 가능하다. 그리고 이 경우, 색온도검출과 플리커검출을 공용할 수 있고, 플리커검출을 위한 것만으로 특별센서를 필요로 하지 않으므로 회로의 삭감이 가능하다고 하는 효과도 있다.
[7]<실시예:플리커검출회로+유지회로+리세트회로 1>
제11도는 제3발명의 제1실시예에 해당하는 제7실시예에 있어서의 움직임검출회로를 구비한 손떨림보정(촬상)장치의 블록도를 표시한 것이며, 제6실시예와 비교하여 외부에 플리커검출용의 센서를 필요로 하지 않는 구성으로 되어 있다.
동도면에 있어서, (1101)에서부터 (1113)은 제6실시예의 제9도의 (901)에서부터 (913)과 마찬가지이며, 다른 것은 영상신호의 플리커성분을 검출하는 플리커검출회로(1114), 플리커검출회로의 출력신호를 유지하는 유지회로(1115), SW(스위치)회로(1116), SW회로(1116)가 ON일 때에 유지회로(1115)의 내용을 리세트하는 신호를 출력하는 리세트회로(1117), 전자셔터구동제어회로를 제어하는 제어회로(1118)이다. 이하, 제6실시예와 다른 점을 중심으로 설명한다.
제6실시예에서 표시한 바와 같이 촬상소자의 전자셔터속도를 1/100초로 해서 플리커보정하는 방식에서는, 전자셔터속도를 1/100초로 한 상태에서 촬상신호로부터 플리커성분을 검출할 수는 없으므로, 외부에 플리커검출용의 센서를 가질 필요가 있었다. 이 과제에 대해서 이하 설명한다.
제11도에 있어서 플리커검출회로(1114)는 플리커성분을 검출하는 BPF를 포함하는 회로이다. 플리커검출회로(1114)가 영상신호의 플리커성분을 검출하면, 유지회로(1115)에 플리커검출신호를 출력한다. 유지회로(1115)는 플리커검출신호를 수취하면 그 검출신호를 유지하는 동시에, 제어회로(1118)에 플리커검출신호를 출력한다. 제어회로(1118)는 전자셔터구동제어회로(1119)를 제어해서 입력영상신호의 플리커성분을 감쇠·억압한다. 한편, 리세트회로(1117)는 SW회로(1116)(예를들면 전원SW)가 ON되었을 때에 리세트신호를 출력하고 유지회로(1115)의 내용을 리세트하므로, 전원의 ON후 플리커성분이 검출되면 그후 리세트되기까지 제어회로(1118)는 플리커보정을 행하게 된다. 이와 같이 하여 움직임벡터검출회로(1111)는 플리커성분을 감쇠·억압한 영상신호로부터, 올바른 움직임벡터를 검출하고, 신호처리회로(1107) 및 보간회로(1108)는 플리커성분을 감쇠·억업한 정규의 영상신호를 작성할 수 있다.
이상과 같이 본 실시예에 의하면, 촬상소자구동에 의해 움직임보정을 행하는 손떨림보정촬상장치에 있어서, 특별히 플리커검출센서회로를 형성하는 일없이 플리커검출회로(1114)의 검출신호를 유지회로(1115)가 다음의 리세트때까지 유지함으로써 전자셔터구동제어회로(1106)는 입력영상신호의 플리커보정을 행하고, 움직임벡터검출회로(1111)는 올바른 움직임벡터를 검출할 수 있다. 또한, 플리커성분을 감쇠·억압한 영상신호를 얻을 수 있어 유효한 손떨림보정을 행할 수 있다.
또한, SW회로는 텔레비젼카메라의 녹화 SW이어도 되고, 리세트회로는 이 SW에 동기해서 리세트신호를 출력해도 된다.
[8]<실시예:플리커검출회로+유지회로·리세트회로 2>
제12도는 제3발명의 제2실시예에 해당하는 제8실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치의 블록도를 표시한 것이며, 제7실시예와 비교하여 영상신호로부터 색온도를 검출하는 색온도검출회로를 포함하는 구성으로 되어 있다.
동도면에 있어서, (1201)에서부터 (1219)는 제7실시예의 제11도의 (1101)에서부터 (1119)와 마찬가지이며, 다른 것은 영상신호로부터 색온도를 검출하는 색온도검출회로(1220)이다. 이하, 제7실시예와 다른 점을 중심으로 설명한다.
제12도에 있어서 색온도검출회로(1220)는 영상신호내의 색차신호(R-Y·B-Y)의 비로부터 색온도정보를 얻는 회로이다. 색온도검출회로(1220)는 영상신호로부터 색온도정보를 얻어, 신호처리회로(1207)에 대해서 화이트밸런스처리의 제어를 행하는 동시에, 유지회로(1215)에 대해서 리세트회로(1217)와 마찬가지 색온도가 소정의 범위를 넘어서 변화하였을 경우에, 플리커검출신호를 리세트하는 신호를 발생한다. 일반적으로, 색온도가 크게 변화하는 경우는, 텔레비젼카메라를 옥내로부터 옥외로 이동하였을 경우와 같이 플리커의 유무로 변화하는 일이 있다. 따라서, 색온도의 변화를 받아서 다시 플리커검출·보정을 행함으로써 적절한 플리커보정을 할 수 있다. 이와 같이 하여 움직임벡터검출회로(1211)는 올바른 움직임벡터를 검출하고, 신호처리회로(1207) 및 보간회로(1208)는 플리커성분을 감쇠·억압한 정규의 영상신호를 작성할 수 있다.
이상과 같이 본 실시예에 의하면, 촬상소자구동에 의해 움직임보정을 행하는 손떨림보정촬상장치에 있어서, 색온도가 변화하였을 때에 다시 플리커검출을 행하므로, 촬영도중에, 플리커의 유무가 변화하였을 경우에 있어서도, 전자셔터구동제어회로(1206)는 입력영상신호의 플리커보정을 행하고, 움직임벡터검출회로(1211)는 올바른 움직임벡터를 검출할 수 있다. 더구나, 플리커성분을 감쇠·억압한 영상신호를 얻을 수 있어 유효한 손떨림보정을 행할 수 있다.
또한, 색온도검출은 영상신호로부터가 아니고, 색온도검출센서를 설치함으로써 실시해도 된다. 또 색온도검출회로는, 리세트회로를 제어하여 리세트신호를 발생시켜 유지회로를 리세트하는 구성이라도 된다.
[9]<실시예:플리커검출회로-유지회로-리세트회로 3>
제13도는 제3발명의 제3실시예에 해당하는 제9실시예에 있어서의 움직임검출회로를 구비한 손떨림보정장치의 블록도를 표시한 것이며, 제7실시예와 비교하여 조리개회로 및 조리개위치검출회로를 포함하는 구성으로 되어 있다.
동도면에 있어서, (1301)에서부터 (1319)는 제8실시예의 제12도의 (1201)에서부터 (1219)와 마찬가지이며, 다른 것은 조리개회로(1320), 조리개위치검출회로(1321), 렌즈(1322), 플리커보정회로(1323)이다. 이하, 제8실시예와 다른 점을 중심으로 설명한다.
제13도에 있어서, 조리개위치검출회로(1321)는 조리개회로(1320)로부터 조리개값, 즉 등가적으로 피사체의 밝기정보를 얻을 수 있다. 또 제어회로(1318)는, 움직임벡터검출회로(1311)와 유지회로(1315) 및 조리개위치검출회로(1321)로부터의 신호를 사용하여, 전자셔터구동제어회로(1306)와 플리커보정회로(1323)를 제어 한다.
즉, 제어회로(1318)는 유지회로(1315)로부터 플리커검출신호를 수취하면, 조리개위치검출회로(1321)로부터의 밝기정도를 사용하여 피사체가 밝을 때는 전자셔터구동제어회로(1306)를 제어해서 촬상소자구동을 1/100(초)로 해서 플리커보정을 행한다. 한편, 피사체가 어두울 때는 감도저하를 방지하기 위하여 플리커보정회로(1323)를 제어해서 플리커보정을 행한다.
또 조리개위치검출회로(1321)는, 그 밝기정보를 사용하여, 유지회로(1315)에 대해서, 리세트회로(1317)와 마찬가지로 밝기가 소정의 범위를 넘어서 변화하였을 경우, 플리커검출신호를 리세트하는 신호를 발생한다.
일반적으로 피사체가 어두운 경우, 플리커에 의한 휘도변화가 두드러지지 않으므로, 휘도정보를 사용하여 플리커보정을 ON/OFF함으로써 감도저하를 방지하는 적절한 플리커보정을 행할 수 있다.
또 제어회로(1318)는 움직임벡터검출회로(1311)로부터 움직임벡터를 수취하면, 조리개위치검출회로(1321)로부터의 밝기정보를 사용하여 피사체가 밝을 때는 전자셔터구동제어회로(1306)를 제어해서 촬상소자구동을 1/100(초)로 한다. 이에 의해 피사체의 빠른 움직임에 대해서 움직임보정을 행할 경우에, 잔상이 발생한다고 하는 문제점을 발생하는 동시에 플리커가 발생하여도 플리커보정도 행할 수 있다. 또한 일반적으로, 움직임벡터가 발생하는 것은 옥외가 많고, 이때는 피사체가 밝으므로 촬상소자구동을 1/100(초)로 해도 감도저하의 문제를 발생하는 일은 적다.
이와 같이 하여 움직임벡터검출회로(1311)는 올바른 움직임벡터를 검출하고, 신호처리회로(1307) 및 보간회로(1308)는 플리커성분을 감쇠·억압한 영상신호를 얻을 수 있어 유효한 손떨림보정을 행할 수 있다.
또한 본 실시예에 있어서는, 밝기정보를 사용하는 플리커보정을 제어하는 세가지 방법이 동시에 포함되는 구성을 설명하였으나, 이들은 단독으로 구성하는 것도 가능하다.
또한, 상기 실시예에서는 움직임보정으로서 메모리제어방식과 촬상소자구동방식을 표시하고, 플리커보정으로서 이득제어방식과 전자셔터방식을 표시하였으나, 이들 방식으로 한정되는 것도 아니고, 또 그 조합조차 한정되는 것도 아니다.
또, 상기 실시예에서는 움직임벡터검출로서, 매칭법에 의한 신호처리방식 단독의 경우를 표시하였으나, 신호처리방식과 센서방식을 병용하는 경우라도 된다.
또, 상기 제1발명의 제1, 제2, 제3실시예에서는, A/D회로 입력·움직임벡터검출·움직임보정·D/A회로로 출력이라는 구성의 경우를 설명하였으나, 이들은 촬영완료의 재생신호에 대한 움직임보정회로로서, 또는 비데오카메라화해서 움직임보정촬상장치로서도 마찬가지의 효과를 얻을 수 있다.
또 움직임벡터검출기능으로서는, 영상신호를 복수개의 블록으로 분할하여 각 블록에서 움직임벡터를 검출하고, 검출된 움직임벡터를 사용하여 각 블록에서 화상처리를 행하는 일 등도 생각할 수 있다.
또, 상기 실시예에서는 움직임벡터검출로서, 2필드의 영상신호를 사용하는 경우를 표시하였으나, 이에 한정되는 것은 아니고 3필드 이상의 영상신호를 사용하는 방법, 필드간 움직임벡터검출과 프레임간 움직임벡터검출을 동시에 행하는 방법도 있다.

Claims (8)

  1. 영상신호의 플리커성분을 검출하는 플리커검출회로와, 이 플리커검출회로의 출력에 따라서 상기 영상신호의 플리커성분을 억압하는 플리커보정회로와, 상기 플리커보정회로에 의해 플리커보정된 영상신호를 일정기간 기억하고, 이 기억된 신호와 상기 플리커보정회로에 의해 프릴커보정된 영상신호를 상대비교하여 움직임벡터를 검출하는 움직임정보회로(109 ; 309 ; 408 ; 512 ; 710)를 구비한 것을 특징으로 하는 손떨림보정장치.
  2. 제1항에 있어서, 상기 움직임보정회로(109 ; 309 ; 408)는, 영상신호를 적어도 1필드 이상 기억하는 메모리회로(102 ; 302 ; 402)와, 움직임벡터에 따라서 메모리회로를 제어하는 메모리제어회로(103 ; 303 ; 403)를 구비한 것을 특징으로 하는 손떨림보정장치.
  3. 제1항에 있어서, 상기 움직임보정회로(512 ; 710)는, 피사체상을 전기신호로 변환하는 촬상소자(501 ; 701)와, 촬상소자를 구동하는 촬상소자구동회로(502 ; 702)와, 움직임벡터에 따라서 촬상소자구동회로를 제어하는 촬상소자구동제어회로(503 ; 703)를 구비한 것을 특징으로 하는 손떨림보정장치.
  4. 플리커검출용 센서(914)와, 이 센서의 출력신호로부터 플리커성분을 검출하는 플리커검출센서회로(914)와, 상기 플리커검출센서회로의 출력신호로 제어되는 플리커성분을 보정하는 플리커보정회로(917)와, 상기 플리커보정회로에 의해 플리커보정된 영상신호를 일정주기 기억하고, 이 기억된 신호와 상기 플리커보정회로에 의해 플리커보정된 영상신호를 상대비교하여 움직임벡터를 검출하는 움직임벡터검출회로(911)와, 상기 움직임벡터검출회로가 얻은 움직임벡터에 따라서 움직임성분을 제거하는 움직임보정회로(912)를 구비한 것을 특징으로 하는 손떨림보정장치.
  5. 제4항에 있어서, 상기 움직임보정회로(912)는, 피사체상을 전기신호로 변환하는 촬상소자(901)와, 촬상소자를 구동하는 촬상소자구동회로(902)와, 움직임벡터에 따라서 촬상소자구동회로를 제어하는 촬상소자구동제어회로(903)를 구비한 것을 특징으로 하는 손떨림보정장치.
  6. 촬상소자의 출력신호로부터 플리커성분을 검출하는 플리커검출회로(1114 ; 1214 ; 1314)와, 상기 플리커검출회로의 신호를 유지하는 유지회로(1115 ; 1215 ; 1315)와, 상기 유지회로의 출력신호에 의해 제어되어 가변전자셔터기능을 가진 촬상소자를 사용한 플리커성분을 보정하는 플리커보정회로(1119 ; 1219 ; 1319)와, 상기 플리커보정회로에 의해 플리커보정된 영상신호를 일정주기 기억하고, 이 기억된 신호와 상기 플리커보정회로에 의해 플리커보정된 영상출력신호를 상대비교하여 움직임벡터를 검출하는 움직임벡터검출회로(1111 ; 1211 ; 1311)와, 상기 움직임벡터검출회로가 얻은 움직임벡터에 따라서 움직임성분을 제거하는 움직임보정회로(1112 ; 1212 ; 1312)를 구비한 것을 특징으로 하는 손떨림보정장치.
  7. 제6항에 있어서, 상기 움직임보정회로(1112 ; 1212 ; 1312)는, 피사체상을 전기신호로 변환하는 촬상소자(1101 ; 1201 ; 1301)와, 촬상소자를 구동하는 촬상소자구동회로(1102 ; 1202 ; 1302)와, 움직임벡터에 따라서 촬상소자구동회로를 제어하는 촬상소자구동제어회로)1103 ; 1203 ; 1303)를 구비한 것을 특징으로 하는 손떨림보정장치.
  8. 제6항에 있어서, 상기 유지회로는, 이 유지회로를 리세트하는 리세트회로(1117 ; 1217 ; 1317)에 의해 제어되고, 이 리세트회로는, 비데오카메라의 전원 혹은 녹화스위치에 동기해서 해당 유지회로를 리세트하거나, 또는 색온도를 검출하는 색온도검출회로의 출력 또는 피사체의 밝기를 검출하는 휘도검출회로의 출력이 소정의 범위를 초과하여 변화한 때에 해당 유지회로를 리세트하는 구성인 것을 특징으로 하는 손떨림보정장치.
KR1019910006316A 1990-04-19 1991-04-19 손떨림보정장치 KR950008700B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2103453A JP2687670B2 (ja) 1990-04-19 1990-04-19 動き検出回路および手ぶれ補正装置
JP2-103453 1990-04-19

Publications (1)

Publication Number Publication Date
KR950008700B1 true KR950008700B1 (ko) 1995-08-04

Family

ID=14354446

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019910006316A KR950008700B1 (ko) 1990-04-19 1991-04-19 손떨림보정장치

Country Status (3)

Country Link
US (2) US5204741A (ko)
JP (1) JP2687670B2 (ko)
KR (1) KR950008700B1 (ko)

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5313277A (en) * 1990-10-30 1994-05-17 Canon Kabushiki Kaisha Image pickup device having white balance control function
US5990942A (en) * 1991-05-01 1999-11-23 Canon Kabushiki Kaisha Photographing apparatus using image information for blurring correction
JP3227173B2 (ja) * 1991-06-24 2001-11-12 キヤノン株式会社 撮像装置及びその方法
JPH04373365A (ja) * 1991-06-24 1992-12-25 Hitachi Ltd テレビカメラ
US5453800A (en) * 1991-10-17 1995-09-26 Sony Corporation Apparatus for judging a hand movement of an image
US5581309A (en) * 1992-02-03 1996-12-03 Sanyo Electric Co., Ltd. Motion vector detecting circuit
JP2725937B2 (ja) * 1992-02-19 1998-03-11 三洋電機株式会社 オートフォーカス装置
JPH066667A (ja) * 1992-06-22 1994-01-14 Canon Inc ぶれ検出装置及びぶれ補正装置
US5648818A (en) * 1992-10-09 1997-07-15 Canon Kabushiki Kaisha Image pickup apparatus having color separation matrix
EP0611125B1 (en) * 1993-02-12 2000-11-22 Sony Corporation Electronic zoom control and image stabilization
JP2885010B2 (ja) * 1993-08-25 1999-04-19 松下電器産業株式会社 画像動き補正装置
US5471252A (en) * 1993-11-03 1995-11-28 Matsushita Electric Industrial Corporation Of America Method and apparatus for estimating motion vector fields by rejecting local outliers
US6038364A (en) * 1993-11-16 2000-03-14 Canon Kabushiki Kaisha Video system having mode changeover responsively to movement of object or movement in object image signal
US5825415A (en) * 1993-12-17 1998-10-20 Canon Kabushiki Kaisha Electronic image-movement correcting device with a variable correction step feature
JP3339191B2 (ja) * 1994-08-08 2002-10-28 ミノルタ株式会社 ブレ補正機能付カメラ
JP3494479B2 (ja) * 1994-09-01 2004-02-09 株式会社リコー フォーカス制御装置
KR0160711B1 (ko) * 1995-07-20 1999-05-01 김광호 캠코더의 정지화면 재생장치 및 그 방법
US5758091A (en) * 1995-08-10 1998-05-26 Intel Corporation Method and apparatus for adjusting video data to limit the effects of automatic gain control on motion estimation video coders
US6683652B1 (en) * 1995-08-29 2004-01-27 Canon Kabushiki Kaisha Interchangeable lens video camera system having improved focusing
US5886744A (en) * 1995-09-08 1999-03-23 Intel Corporation Method and apparatus for filtering jitter from motion estimation video data
US5710602A (en) * 1995-09-29 1998-01-20 Intel Corporation Gain correction for encoding video images
US5706054A (en) * 1995-12-01 1998-01-06 Intel Corporation Method and apparatus for adjusting video data to limit the effects of automatic focusing control on motion estimation video coders
JPH09284629A (ja) * 1996-04-15 1997-10-31 Sony Corp Ccdエリアセンサーの制御方法
JP3098448B2 (ja) * 1997-04-18 2000-10-16 日本電気ロボットエンジニアリング株式会社 画像入力装置
US5990955A (en) * 1997-10-03 1999-11-23 Innovacom Inc. Dual encoding/compression method and system for picture quality/data density enhancement
JPH11205658A (ja) * 1998-01-20 1999-07-30 Canon Inc 撮像装置
JP3583618B2 (ja) * 1998-06-15 2004-11-04 富士通株式会社 画像処理装置、画像処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP3892172B2 (ja) 1998-07-24 2007-03-14 松下電器産業株式会社 固体撮像装置
US6421097B1 (en) * 1998-07-31 2002-07-16 Intel Corporation Method and apparatus for reducing flicker in a video image sequence
US6519002B1 (en) * 1998-08-31 2003-02-11 Intel Corporation Method and apparatus to minimize flicker effects from a discharge light source during digital video capture
JP2001045502A (ja) * 1999-08-04 2001-02-16 Sanyo Electric Co Ltd カメラ
US6271884B1 (en) * 1999-09-28 2001-08-07 Conexant Systems, Inc. Image flicker reduction with fluorescent lighting
CA2322593C (en) 1999-10-08 2004-02-03 Matsushita Electric Industrial Co., Ltd. Method and apparatus for detection and correction of illumination flicker
US20020012063A1 (en) * 2000-03-10 2002-01-31 Olympus Optical Co., Ltd. Apparatus for automatically detecting focus and camera equipped with automatic focus detecting apparatus
EP1281276A1 (en) * 2000-03-30 2003-02-05 Koninklijke Philips Electronics N.V. Camera with light modulation removing means
JP4608766B2 (ja) * 2000-11-27 2011-01-12 ソニー株式会社 固体撮像素子の駆動方法、及びカメラ
US6710819B2 (en) * 2001-02-22 2004-03-23 Ati Technologies, Inc. Method and system for improved display filtering
JP3931606B2 (ja) * 2001-09-20 2007-06-20 ソニー株式会社 撮像装置およびノイズ除去方法
JP3826904B2 (ja) * 2003-07-08 2006-09-27 ソニー株式会社 撮像装置およびフリッカ低減方法
US7394939B2 (en) * 2003-12-17 2008-07-01 Microsoft Corporation Managing file stream generation
US7705884B2 (en) * 2004-07-21 2010-04-27 Zoran Corporation Processing of video data to compensate for unintended camera motion between acquired image frames
US8289399B2 (en) * 2004-08-09 2012-10-16 Hewlett-Packard Development Company, L.P. System and method for image capture device
JP2007036843A (ja) * 2005-07-28 2007-02-08 Fujifilm Holdings Corp 投影表示機能付き撮像装置及び携帯電子機器
JP4904749B2 (ja) * 2005-09-08 2012-03-28 ソニー株式会社 フリッカ低減方法、フリッカ低減回路及び撮像装置
US7881552B1 (en) * 2006-05-16 2011-02-01 Adobe Systems Incorporated Anti-flicker filter
US8300117B2 (en) * 2008-03-28 2012-10-30 Fuji Xerox Co., Ltd. System and method for exposing video-taking heuristics at point of capture
US8441551B2 (en) * 2008-11-14 2013-05-14 Ati Technologies Ulc Flicker detection circuit for imaging sensors that employ rolling shutters
US8330829B2 (en) * 2009-12-31 2012-12-11 Microsoft Corporation Photographic flicker detection and compensation
WO2012053978A1 (en) * 2010-10-20 2012-04-26 Agency For Science, Technology And Research A method, an apparatus and a computer program product for deinterlacing an image having a plurality of pixels
US9165345B2 (en) * 2013-03-14 2015-10-20 Drs Network & Imaging Systems, Llc Method and system for noise reduction in video systems
US9355435B2 (en) * 2013-03-14 2016-05-31 Drs Network & Imaging Systems, Llc Method and system for adaptive pixel replacement
KR20180014572A (ko) 2016-08-01 2018-02-09 삼성전자주식회사 이벤트 신호 처리 방법 및 그 방법을 수행하는 이벤트 기반 센서
JP6759089B2 (ja) * 2016-12-21 2020-09-23 キヤノン株式会社 画像処理装置、撮像装置、制御方法
CN110858895B (zh) * 2018-08-22 2023-01-24 虹软科技股份有限公司 一种图像处理方法和装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4301471A (en) * 1976-12-20 1981-11-17 Hughes Aircraft Company Moving target indicator system utilizing charge coupled device
JPS5392682A (en) * 1977-01-25 1978-08-14 Fujitsu Ltd Driving method for semiconductor sensitizing device
JPS60117881A (ja) * 1983-11-29 1985-06-25 Toshiba Corp 固体撮像装置
US4562475A (en) * 1984-03-15 1985-12-31 Rca Corporation DC Restoration of synchronously detected CCD imager output signals
US4879591A (en) * 1986-01-31 1989-11-07 Canon Kabushiki Kaisha Image pickup apparatus compensating an image signal for variations in color temperature
US4774570A (en) * 1986-09-20 1988-09-27 Sony Corporation System for processing video signal for detecting changes in video data and security monitoring system utilizing the same
JPH0810907B2 (ja) * 1987-11-02 1996-01-31 株式会社日立製作所 信号処理装置
US5012270A (en) * 1988-03-10 1991-04-30 Canon Kabushiki Kaisha Image shake detecting device
JP2638061B2 (ja) * 1988-04-21 1997-08-06 松下電器産業株式会社 動き量検出装置
US4933757A (en) * 1988-08-20 1990-06-12 Olympus Optical Co., Ltd. Electronic endoscope apparatus provided with a movement detecting means

Also Published As

Publication number Publication date
JPH042278A (ja) 1992-01-07
US5204741A (en) 1993-04-20
US5384595A (en) 1995-01-24
JP2687670B2 (ja) 1997-12-08

Similar Documents

Publication Publication Date Title
KR950008700B1 (ko) 손떨림보정장치
KR100188116B1 (ko) 손떨림 영상 안정화 회로
US7656436B2 (en) Flicker reduction method, image pickup device, and flicker reduction circuit
JP3103894B2 (ja) ビデオデータの手振れ補正装置およびその方法
EP0656725B1 (en) Image-shake correcting device
US8072511B2 (en) Noise reduction processing apparatus, noise reduction processing method, and image sensing apparatus
US6424372B1 (en) Electronic image-movement correcting device with a variable correction step feature
US7509039B2 (en) Image sensing apparatus with camera shake correction function
RU2591845C2 (ru) Устройство стабилизации изображения, способ управления для него, носитель информации, сохраняющий программу управления для него, а также устройство съемки изображения, оборудованное устройством стабилизации изображения
JPH06217187A (ja) 撮像装置,動きベクトル検出装置及び画像揺れ補正装置
JPH057336A (ja) 撮像方法及び撮像装置
JPH05199449A (ja) 防振カメラ
JP2007027845A (ja) 撮像装置
US9137427B2 (en) Imaging apparatus and image display method therefor
JPH1127573A (ja) 画像動き補正装置
JPH06133211A (ja) 画像揺れ補正機能付光学装置
JPH05316405A (ja) ビデオカメラにおける手振れ補正装置
JPH07107368A (ja) 画像処理装置
JP3357718B2 (ja) テレビカメラ装置
JP3395186B2 (ja) ビデオカメラおよびビデオカメラの画像の振動表示方法
JPH06237411A (ja) 映像処理装置
JP2618661B2 (ja) 撮像装置
JPH0641281U (ja) ビデオカメラ装置
JP2810814B2 (ja) 動きベクトル検出装置及びカメラ一体型手振れ補正装置
JPH07177531A (ja) 撮像装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
G160 Decision to publish patent application
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20050722

Year of fee payment: 11

LAPS Lapse due to unpaid annual fee