KR100312139B1 - 비디오카메라및비디오신호재생장치 - Google Patents
비디오카메라및비디오신호재생장치 Download PDFInfo
- Publication number
- KR100312139B1 KR100312139B1 KR1019940002430A KR19940002430A KR100312139B1 KR 100312139 B1 KR100312139 B1 KR 100312139B1 KR 1019940002430 A KR1019940002430 A KR 1019940002430A KR 19940002430 A KR19940002430 A KR 19940002430A KR 100312139 B1 KR100312139 B1 KR 100312139B1
- Authority
- KR
- South Korea
- Prior art keywords
- video camera
- circuit
- zoom
- correction
- shake
- Prior art date
Links
- 238000012937 correction Methods 0.000 claims abstract description 120
- 238000003384 imaging method Methods 0.000 claims abstract description 34
- 238000001514 detection method Methods 0.000 claims abstract description 27
- 238000006243 chemical reaction Methods 0.000 claims abstract description 20
- 230000003287 optical effect Effects 0.000 claims description 30
- 238000004091 panning Methods 0.000 claims description 21
- 238000012545 processing Methods 0.000 claims description 16
- 230000006641 stabilisation Effects 0.000 claims description 8
- 238000011105 stabilization Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims 3
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 7
- 238000000034 method Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 102200158768 rs121908410 Human genes 0.000 description 1
- 102220040233 rs79219465 Human genes 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000003381 stabilizer Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6815—Motion detection by distinguishing pan or tilt from motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/82—Camera processing pipelines; Components thereof for controlling camera response irrespective of the scene brightness, e.g. gamma correction
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Adjustment Of Camera Lenses (AREA)
- Studio Devices (AREA)
Abstract
비디오 카메라는, 촬영될 피사체로부터 광을 수집하는 렌즈, 렌즈에 의해 수집된 광을 전기 신호로 변환하는 촬상 장치, 촬상 장치로부터의 전기 신호를 디지탈 신호로 변환하기 위한 나랄로그/디지탈 변환 회로, 아날로그/디지탈 변환에 의해 얻어진 디지탈 신호를 저장하는 메모리 회로, 비디오 카메라의 흔들림을 검출하는 흔들림 검출 수단, 흔들림 검출 수단의 출력 신호로부터 보정량을 얻기 위한 계산 수단, 계산 수단의 출력 신호에 기초하여 비디오 카메라 본체의 미세한 흔들림으로 인한 화상의 흔들림을 보정하는 보정 수단, 촬영될 피사체를 확대하거나 축소하는 줌 수단, 및 줌 수단의 줌 변화에 따라 보정 수단을 변화시키는 제어 수단을 포함한다.
Description
제1도는 본 발명이 적용된 비디오 카메라의 전체 구성을 도시한 블럭도.
제2도는 본 발명의 실시예에 설명에 이용되는 개략도.
제3도는 본 발명의 실시예의 손 흔들림 보정의 설명에 이용되는 개략도.
제4a도 및 제4b도는 본 발명의 실시예의 손 흔들림 보정의 설명에 이용되는 개략도.
제5a도 및 제5b도는 본 발명의 실시예의 전자 줌의 설명에 이용되는 개략도.
제6도 본 발명의 실시예의 손 흔들림 보정 제어기의 기능 블럭도.
제7도는 본 발명의 실시예에서의 비선형 리미터의 테이블의 한 예를 도시한 그래프.
제8a도, 제8b도 및 제8c도는 본 발명의 실시예의 설명에 이용되는 파형도.
제9a도 및 제9b도는 본 발명의 실시예의 손 흔들림 보정의 설명에 이용되는 개략도.
제10도는 본 발명의 실시예의 저역 통과 필터(Low Pass Filter : LPF)의 설명에 이용되는 블럭도.
제11도는 본 발명의 실시예의 저역 통과 필터의 설명에 이용되는 블럭도.
제12도는 본 발명의 실시예의 저역 통과 필터의 설명에 이용되는 블럭도.
제13a도, 제13b도 및 제13c도는 종래의 리미터의 설명에 이용되는 파형도.
* 도면의 주요 부분에 대한 부호의 설명
3 : PAL용 CCD 촬상 장치 14 : 화상 메모리
20 : 손 흔들림 보정 제어기 21A, 21B : 각속도 센서
61A, 61B : 저역 통과 필터 68B : 비선형 리미터
106 : 감쇠기 107 : 테이블
본 발명은 손 흔들림 보정 기능을 가지는 비디오 카메라 및 비디오 신호 재생 장치에 관한 것이다.
최근, 비디오 카메라의 소형화, 경량화가 진행됨에 따라 손 흔들림의 문제가 자주 발생되고 있다. 이에 따라 손 흔들림 보정 기능을 가지는 비디오 카메라가 등장하게 되었다.
이러한 비디오 카메라의 손 흔들림 보정 방법으로서, 카메라의 흔들림이 각 속도 센서에 의해 검출되고, 화상 메모리의 절단 위치가 각속도 센서의 출력에 따라 시프트되도록 한 방법이 공지되어 있다.
이러한 비디오 카메라의 손 흔들림 보정 방법에 있어서는 각속도 센서의 출력이 저역 통과 필터로 적분되어 각속도에서 각도로 변환됨으로써, 보정량을 구한다. 이 보정량에 기초하여, 화면이 시프트된다. 이 보정량이 한계값을 초과하지 않도록 저역 통과 필터의 출력의 보정 한계값을 설정하는 리미터가 제공된다.
화상 메모리를 갖고 있는 비디오 카메라는 화상 메모리 내에 저장된 화면을 확대 보간할 수 있다. 이러한 기능은 전자 줌이라고 불리워진다. 한편, 줌 렌즈가 이동되는 줌은 광학 줌이라고 불리워진다.
카메라의 움직임이 각속도 센서로 검출되고 화상 메모리의 절단 위치에 따라 보정이 실행되는 것과 같은 손 흔들림 보정 방법의 경우(예를 들면, 유럽 특허 출원 공보 제0498730호)에 있어서, 화면의 흔들림은 광학 줌 영역에서 줌 배율이 커짐에 따라 증가된다. 그러므로, 줌 배율에 비례하여 보정량을 증가시킬 필요가 있다.
한편, 전자 줌 영역 내에서는 보정 이득을 일정하게 설정하는 것으로 충분하다. 이러한 이유는 전자 줌 영역 내에서, 예를 들어 2배 배율의 전자 줌인 경우에 n라인의 손 흔들림이 있으면, 화상 메모리의 판독 위치가 n 라인만큼 시프트되기 때문이다. 그 다음, 화상 메모리의 내용이 2배로 보간되어 판독된다. 화상 데이타가 n 라인만큼 시프트되고 2배로 보간되어 판독되면, 2n 라인의 보정이 실행된다.
이와 같은 손 흔들림 보정 장치는 각속도 센서에 의해 검출된 카메라의 흔들림에 기초하는 각속도를 각도로 변환하기 위한 저역 통과 필터를 갖고 있다. 전자 줌 영역에서는 보정 이득이 일정하면 충분하기 때문에, 저역 통과 필터의 이득은 전자 줌 영역에서 줌 렌즈의 텔레스코픽(telescopic)단에서의 제어시와 동일하게 설정된다.
그러나, 이와 같은 손 흔들림 보정 기능이 부가되면, 패닝(panning) 촬영시 촬상 화면이 부자연스럽게 된다는 문제가 종래에 발생되었다. 즉, 패닝 촬영시에 있어서, 카메라가 패닝 개시시에 급격하게 이동된다. 이로 인해, 각속도 센서의 적분값이 급격하게 증가하여, 값이 돌연히 보정 한계를 초과한다. 따라서, 촬상 화면이 부자연스러워진다.
즉, 패닝 촬영이 실행되면, 검출 신호는 제13a도에 도시된 바와 같이 각속도 센서로부터 출력된다. 검출 신호는 저역 통과 필터에 의해 적분된다. 이 적분값은 제13b도에 도시된 바와 같이 시점(t11)에서 보정 한계(LMT)에 도달한다. 지금까지는, 제13c도에 도시된 바와 같이, 적분값은 이 적분값이 보정 한계(LMT)에 도달하는 시점(t11)에서의 점(P11)로부터 돌연히 제한된다.
한편, 전자 줌 배율이 높아지는 경우, 화상 메모리로부터 판독되지 않은 부분이 넓어지므로, 손 흔들림 보정 능력이 당연히 증가한다. 그러나, 종래에서는 각속도 센서의 출력을 적분하는 저역 통과 필터는 전자줌 영역에서 줌 렌즈의 텔레스코픽 단에서의 제어와 유사한 방식으로 제어된다. 그러므로, 손 흔들림 보정 기능은 손 흔들림 보정 능력이 높은 고 전자 줌 배율의 위치에서도 효과적으로 이용될 수 없다.
그러므로, 본 발명의 목적은 패닝 촬영시에 부자연스러운 화면의 움직임을 방지할 수 있는 비디오 카메라 및 비디오 신호 재생 장치를 제공하기 위한 것이다.
본 발명의 또 다른 목적은 전자 줌 영역에서의 보정량이 효과적으로 이용될 수 있고, 보정 능력이 향상된 비디오 카메라 및 비디오 신호 재생 장치를 제공하기 위한 것이다.
본 발명의 한 양태에 따르면,
촬영될 피사체로부터 광을 수집하기 위한 렌즈;
렌즈에 의해 수집된 광을 전기 신호로 변환하기 위한 촬상 장치;
촬상 장치로부터의 전기 신호를 디지탈 신호로 변환하기 위한 아날로그/디지탈(Analog/Digital : A/D) 변환 회로;
아날로그/디지탈 변환에 의해 얻어진 디지탈 신호를 저장하기 위한 메모리 회로;
비디오 카메라의 흔들림을 검출하기 위한 흔들림 검출 수단;
흔들림 검출 수단의 출력 신호로부터 보정량을 얻기 위한 계산 수단;
계산 수단의 출력 신호에 기초하여, 비디오 카메라 본체의 미세한 흔들림으로 인한 화상의 흔들림을 보정하기 위한 보정 수단; 및
계산 수단의 출력 신호에 대한 보정 한계 내에서 보정량을 제한하기 위한 리미터 회로를 포함하는 비디오 카메라가 제공된다.
본 발명의 다른 양태에 따르면,
입력 비디오 신호를 디지탈 신호로 변환하기 위한 아날로그/디지탈 변환 회로;
아날로그/디지탈 변환에 의해 얻어진 디지탈 신호를 저장하기 위한 메모리회로;
비디오 신호에 의해 발생된 화면의 흔들림을 검출하기 위한 흔들림 검출 수단;
흔들림 검출 수단의 출력 신호로부터 보정량을 얻기 위한 계산 수단;
계산 수단의 출력 신호에 기초하여, 비디오 카메라 본체의 미세한 흔들림으로 인한 화상의 흔들림을 보정하기 위한 보정 수단; 및
계산 수단의 출력 신호에 대한 보정 한계 내에서 보정량을 제한하기 위한 리미터 회로를 포함하는 비디오 신호 재생 장치가 제공된다.
비디오 카메라 또는 비디오 신호 재생 장치의 흔들림이 검출되어 적분됨으로써, 제어량이 얻어진다. 제어시에 한계값을 설정하는 리미터는 비선형 리미터로 설정됨으로써, 패닝시에 값이 돌연히 보정 한계에 도달하는 것을 제한하고, 패닝시의 화면을 자연스럽게 한다.
본 발명의 또 다른 양태에 따르면,
촬영될 피사체로부터 광을 수집하기 위한 렌즈;
렌즈에 의해 수집된 광을 전기 신호로 변환하기 위한 촬상 장치;
촬상 장치로부터의 전기 신호를 디지탈 신호로 변환하기 위한 아날로그/디지탈 변환 회로;
아날로그/디지탈 변환에 의해 얻어진 디지탈 신호를 저장하기 위한 메모리 회로;
비디오 카메라의 흔들림을 검출하기 위한 흔들림 검출 수단;
흔들림 검출 수단의 출력 신호로부터 보정량을 얻기 위한 계산 수단;
계산 수단의 출력 신호에 기초하여, 비디오 카메라 본체의 미세한 흔들림으로 인한 화상의 흔들림을 보정하기 위한 보정 수단;
촬영될 피사체를 확대하거나 축소하기 위한 줌 수단; 및
줌 수단의 줌 변화에 따라 보정 수단을 변화시키는 제어 수단을 포함하는 비디오 카메라가 제공된다.
본 발명의 또 다른 양태에 따르면, 입력 비디오 신호를 디지탈 신호로 변한하기 위한 아날로그/디지탈 변환 회로;
아날로그/디지탈 변환에 의해 얻어진 디지탈 신호를 저장하기 위한 메모리회로;
비디오 신호에 의해 발생된 화면의 흔들림을 검출하기 위한 흔들림 검출 수단;
보정량을 흔들림 검출 수단의 출력 신호로부터 얻기 위한 계산 수단;
계산 수단의 출력 신호에 기초하여, 화면의 미세한 흔들림으로 인한 화상의 흔들림을 보정하기 위한 보정 수단;
촬영될 피사체를 확대하거나 축소하기 위한 줌 수단; 및
줌 수단의 줌 변화에 따라 보정 수단을 변화시키기 위한 제어 수단을 포함하는 비디오 신호 재생 장치가 제공된다.
비디오 카메라 또는 비디오 신호 재생 장치의 흔들림이 각속도 센서에 의해 검출된다. 화상의 보정량은 검출 결과 및 줌 배율로부터 계산된다. 이러한 경우에, 전자 확대 배율을 사용함으로써, 각속도에서 각도로 변환시키기 위한 저역 통과 필터의 계수가 변화된다. 그러므로, 전자 줌 영역에서의 보정량이 효과적으로 사용될 수 있고, 보정 능력이 향상된다.
본 발명에 따르면, 제어 한계값을 설정하는 리미터로서 비선형 리미터를 사용함으로써, 값이 패닝시에 보정 한계에 돌연히 도달하는 것이 방지되어 패닝시의 화면이 자연스럽게 될 수 있다.
본 발명에 따르면, 각속도를 각도로 변환시키는 저역 통과 필터의 계수는 전자 줌 배율에 대응하여 설정될 수 있다. 그러므로, 전자 줌 배율이 증가되면, 더 넓은 보정 범위가 얻어질 수 있으므로, 손 흔들림 보정 능력이 향상된다.
본 발명의 목적, 특징 및 장점은 첨부된 도면에 관련하여 설명될 후속하는 상세한 설명으로부터 명백해질 것이다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예에 대해 설명하겠다.
제1도는 본 발명이 적용되는 비디오 카메라의 전체 구성을 도시한 것이다. 제1도에 있어서, 렌즈 그룹(1)을 통해 얻어진 피사체상 광은 조리개(2)를 통해 CCD촬상 장치(3)의 감광면에 결상된다. 비디오 카메라는 NTSC 시스템으로 기록한다. 그러나, 손 흔들림을 보정하기 위해, CCD 촬상 장치(3)의 라인 수는 NTSC 시스템의 라인 수 대신에 PAL 시스템의 라인 수에 대응한다.
CCD 촬상 장치(3)은 타이밍 발생 회로(5)로부터의 타이밍 신호에 기초하여 드라이버(4)에 의해 구동된다. 동기 신호는 동기 신호 발생 회로(6)으로부터 타이밍 발생 회로(5)에 공급된다. 손 흔들림 보정 제어기(20)으로부터의 출력은 타이밍 발생 회로(5)에 공급된다. 고속 전송 클릭은 카메라의 수직 방향의 흔들림에 따라 수직 블랭킹 기간 내에 CCD 촬상 장치(3)에 공급된다.
CCD 촬상 장치(3)의 출력은 샘플링 및 홀딩 회로(7)와 AGC 회로(8)을 통해 A/D 변환기(9)에 공급된다. 촬상 신호는 A/D 변환기(9)에 의해 디지탈 신호로 변환된다. A/D 변환기(9)의 출력은 신호 처리 회로(10) 및 광학 검출기(11)에 공급된다.
신호 처리 회로(10)은 필요한 카메라 신호 처리를 실행하여, CCD 촬상 장치(3)의 촬상 신호로부터 NTSC 시스템에 대응하는 휘도 신호 및 크로마(chrominance) 신호를 형성한다. 신호 처리 회로(10)의 출력은 화상 메모리(14)에 공급된다.
광학 검출기(11)은 노광 제어, 초점 제어, 화이트 밸런스 제어 등과 같은 광학적인 제어에 필요한 정보를 얻기 위해 제공된다. 윈도우가 광학 검출기(11)에 의해 설정되고, 윈도우 내의 광량 레벨이 검출된다. 광량 레벨은 카메라 제어기(13)에 공급된다.
카메라 제어기(13)은 광량 레벨에 따라 AGC 회로(8)의 이득 및 조리개(2)의 개방도를 제어한다. 이로 인해, 자동 노광 제어가 실행된다. 윈도우가 광학 검출기(11)내에서 설정되고, 이 윈도우 내의 촬상 신호의 에지(edge) 성분 레벨이 검출된다. 에지 성분 레벨은 카메라 제어기(13)에 공급된다. 카메라 제어기(13)은 에지 성분이 최대로 되도록 렌즈 그룹(1) 내의 초점 렌즈 위치를 제어한다. 이로 인해, 자동 초점 조정이 실행된다.
광학 검출기(11)의 윈도우 위치는 윈도우 발생 회로(12)에 의해 수평 방향으로 이동할 수 있다. 윈도우 위치는 손 흔들림 보정량에 따라 변화된다.
화상 메모리(14)는 전자 줌을 실행하기 위해 제공되며, 흔들림이 커다란 손 흔들림 보정을 실행하는 데에도 사용된다. 화상 메모리(14)의 출력은 전자 확대 회로(15)에 공급된다. 전자 확대 회로(15)는 한 라인의 판독 위치를 시프트함으로써 카메라의 수평 방향으로 손 흔들림 보정을 실행한다. 또한, 한 라인 이하의 수직 방향의 손 흔들림은 전자 확대 회로(15)에 의해 보정된다.
전자 확대 회로(15)의 출력은 D/A 변환기(16)에 공급된다. D/A 변환기(16)은 아날로그 비디오 신호를 출력한다. 아날로그 비디오 신호는 출력 단자(17)로부터 출력된다.
카메라의 흔들림은 피치(pitch) 각속도 센서(21A) 및 요(yaw) 각속도 센서(21B)에 의해 검출된다. 즉, 수직 방향의 흔들림은 피치 각속도 센서(21A)에 의해 검출된다. 피치 각속도 센서(21A)의 출력은 증폭기(22A)를 통해 A/D 변환기(23A)에 공급된다. A/D 변환기(23A)의 출력은 손 흔들림 보정 제어기(20)에 공급된다. 요 각속도 센서(21B)의 출력은 증폭기(22B)를 통해 A/D 변환기(23B)에 공급된다. A/D 변환기(23B)의 출력은 손 흔들림 보정 제어기(20)에 공급된다.
손 흔들림 보정 제어기(20)은 CCD 촬상 장치(3)이 피치 각속도 센서(21A)에 의해 검출된 수직 방향의 흔들림에 기초하여 전하를 고속으로 전송할 수 있게 함으로써 수직 방향의 손 흔들림 보정을 실행한다. 시프팅 동작은 요 각속도 센서(21B)에 의해 검출된 수평 방향의 흔들림에 기초하여 수평 방향으로 실행한다. 이로 인해, 수평 방향의 손 흔들림 보정이 실행된다.
제2도에 도시된 바와 같이, 본 발명의 실시예에 따르면, PAL 시스템의 라인수, 예를 들면 582개의 유효 라인 수를 갖는 장치가 CCD 촬상 장치(3)으로서 사용된다. 한편, NTSC 시스템의 유효 라인 수는 494이다. 그러므로, CCD 촬상 장치(3)의 한 화면의 582개의 유효 라인 중 494개의 라인이 사용된다. 제2도에서 해치(hatch)된 영역으로 도시된 바와 같이, 그 이외의 라인의 출력은 사용되지 않는다. 화면은 개시 위치(ST)를 변화시킴으로써 수직 방향으로 이동될 수 있다. 그러므로, 화면의 수직 방향 흔들림을 제거하도록 개시 위치(ST)를 이동시킴으로써, 수직 방향의 손 흔들림 보정이 실행될 수 있다.
따라서, PAL 시스템의 라인수만큼의 라인을 갖는 CCD 촬상 장치(3) 내에서 NTSC 시스템의 라인 수만큼의 라인의 전하는 통상의 속도로 전송되고, 나머지 라인의 전하는 고속으로 전송되는 경우, 제3도에 도시된 바와 같이, 예를 들면 원형의 피사체(A1)은 수직으로 연장된 원형의 피사체(A2)로서 표시된다.
제4a도에 도시된 바와 같이, 1 라인의 신호(SL)은 라인 메모리 내로 페치(fetch)되어, 제4b도에 도시된 바와 같이, 신호가 시간축을 변경하는 동안 판독된다. 그러므로, 표시되는 영상의 종횡비가 보정되고, 또한 수평 방향의 화면이 확대된다. 이 라인 메모리의 판독 위치는 수평 방향의 비디오 카메라의 흔들림에 따라 시프트됨으로써, 수평 방향의 손 흔들림 보정이 실행될 수 있게 한다.
본 발명이 적용되는 비디오 카메라에 있어서, 줌 렌즈를 이동시킴으로써 광학 줌 촬영이 실행될 수 있고, 화상 메모리(14)를 이용함으로써 전자 줌 촬영도 실행될 수 있다. 즉, 제5a도에 도시된 바와 같은 촬상 화면이 하상 메모리(14) 내에 저장되어 있다로 하면, 영역(B1)로 도시된 부분을 절단하고 이 절단된 부분을 확대 보간함으로써, 제5b도에 도시된 바와 같이, 화면을 2배로 확대할 수 있다.
손 흔들림 보정 제어기(20)은 피치 각속도 센서(21A) 및 요 각속도 센서(21B)의 출력에 필터링 처리를 실행함으로써, 수직 및 수평 방향의 보정량을 계산한다.
제6도는 손 흔들림 보정 제어기(20)에서의 처리를 도시한 기능 블럭도이다. 먼저, 피치측 상의 처리에 대해 설명하겠다. 제6도에서, 피치 방향의 각속도 센서(21A)의 출력은 증폭기(22A) 및 A/D 변환기(23A)(제1도)를 통해 입력 단자(51A)에 공급된다. 입력 단자(51A)로부터의 신호는 전체 이득 조정용 승산 회로(52A)를 통해 고역 통과 필터(High Pass Filter : HPF)(53A)에 공급된다. 고역 통과 필터(53A)는 각속도 센서(21A)내에 포함된 DC 오프셋을 제거한다.
고역 통과 필터(53A)의 출력은 각속도 센서의 변이 조정용 승산 회로(54A)에 공급된다. 변이에 대응하는 이득은 입력 단자(55A)로부터 승산 회로(54A)에 공급된다. 승산 회로(54A)의 출력은 노이즈 제거용 코어링(coring) 회로(56A)에 공급된다. 코어링 회로(56A)의 출력은 승산 회로(57A)에 공급된다.
계수는 테이블(58A)로부터 승산 회로(57A)에 주어진다. 광학 줌의 위치는 단자(59A)로부터 테이블(58A)에 주어진다. 손 흔들림은 광학 줌 배율이 큰만큼 크게 보정될 필요가 있다. 따라서, 계수는 줌 렌즈가 텔레스코픽측 상에 배치되는 경우에 큰 보정이 실행되도록 테이블(58A)에 의해 설정된다.
승산 회로(57A)의 출력은 리미터(60A)를 통해 저역 통과 필터(61A)에 공급된다. 저역 통과 필터(61A)는 각속도에서 각도로의 변환을 실행한다. 저역 통과 필터(61A)는 상세하게 후술되는 바와 같이 IIR 필터로 구성된다. 저역 통과 필터(61A)에서의 계수는 단자(62A)로부터 전자 줌 배율에 따라 설정됨으로써, 전자 줌 영역에서도 효과적인 보정이 실행될 수 있게 한다.
저역 통과 필터(61A)의 출력은 코어링 회로(63A)에 공급된다. 코어링 회로(63A)의 출력은 리미터(64A)에 공급된다. 리미터(64A)의 출력은 오프셋 가산 회로(69A)를 통해 출력 단자(71)로부터 출력되고, 또한 감산 회로(65A)에 공급된다. 출력 단자(71)로부터의 출력에 따라, PAL용의 CCD 촬상 장치(3)의 판독 위치가 시프트되고, 수직 방향의 손 흔들림 보정이 실행된다.
오프셋을 초과하는 보정량은 감산 회로(65A)에 의해 얻어진다. 감산 회로(65A)의 출력은 가산 회로(66A)에 공급된다. 전자 줌 제어 데이타는 단자(67A)로 부터 가산 회로(66A)에 공급된다. 가산 회로(66A)의 출력은 리미터(68A)를 통해 단자(72)로부터 출력된다. 출력 단자(72)로부터의 출력에 따라, 화상 메모리(14)의 판독 위치가 시프트되고, 보정 범위를 초과하는 수직 방향의 손 흔들림 보정이 실행된다. 단자(72)이 출력은 전자 확대 회로(15)에 공급되고, 0.5 라인 이하의 수직 방향의 손 흔들림 보정이 실행된다.
다음에, 요 방향의 처리에 대해 설명하겠다. 요 방향의 처리는 피치 방향의 처리와 대체로 동일하다. 즉, 요 방향의 각속도 센서(21)의 출력은 증폭기(22B) 및 A/D 변환기(23B)를 통해 입력 단자(51B)에 공급된다. 입력 단자(51B)로부터의 신호는 전체 이득 조정용 승산 회로(52B)를 통해 DC 오프셋 제거용 고역 통과 필터(53B)에 공급된다.
고역 통과 필터(53B)의 출력은 각속도 센서의 변이 조정용 승산 회로(54B)에 공급된다. 변이에 대응하는 이득은 입력 단자(55B)로부터 승산 회로(54B)에 공급된다. 승산 회로(54B)의 출력은 노이즈 제거용 코어링 회로(56B)에 공급된다. 코어링 회로(56B)의 출력은 승산 회로(57B)에 공급된다. 계수는 테이블(58B)로부터 승산회로(57B)에 주어진다. 광학 줌의 위치는 단자(59B)로부터 테이블(58B)에 주어진다. 계수는 줌 렌즈가 텔레스코픽측 상에 배치되는 경우에 큰 보정이 실행되도록 승산회로(57B) 및 테이블(58B)에 의해 설정된다.
승산 회로(57B)의 출력은 리미터(60B)를 통해 저역 통과 필터(61B)에 공급된다. 저역 통과 필터(61B)는 각속도를 각도로 변환시킨다. 전자 줌 배율은 단자(62B)로부터 저역 통과 필터(61B)에 공급된다. 저역 통과 필터(61B)의 출력은 코어링 회로(63B)에 공급된다. 코어링 회로(63B)의 출력은 리미터(64B)에 공급된다. 리미터(64B)의 출력은 오프셋 가산 회로(69B)를 통해 출력 단자(73)으로부터 출력되고, 또한 가산 회로(66B)에 공급된다. 오프셋은 단자(70B)로부터 가산 회로(66B)에 공급된다. 전자 줌 제어 데이타는 단자(67B)로부터 가산 회로(69B)에 공급된다. 가산회로(66B)의 출력은 비선형 리미터(68B)를 통해 출력 단자(74)로부터 출력된다.
출력 단자(73)으로부터의 출력은 윈도우 발생 회로(12)에 공급되고, 광학 검출기(11)의 윈도우 위치는 출력 단자(73)으로부터의 출력에 따라 시프트된다. 출력 단자(74)의 출력은 전자 확대 회로(15)에 공급되고, 전자 확대 회로(15)의 판독 위치는 출력 단자(74)로부터의 출력에 따라 시프트되며, 수평 방향의 손 흔들림 보정이 실행된다.
상술된 바와 같이, 저역 통과 필터(61A 및 61B)는 각속도에서 각도로 변환시켜 보정량을 얻는다. 보정량의 한계를 설정하기 위해, 리미터(64A, 68A, 64B 및 68B)가 제공된다. 이들 리미터들 중에서, 리미터(68B)는 촬상 화면이 패닝 촬영시에 부자연스럽게 되는 것을 막기 위한 비선형 리미터이다.
즉, 패닝 촬영시에는 카메라가 패닝의 개시시에 급격하게 이동되기 때문이다. 각속도 센서의 적분값은 급격히 증가하여 한계값을 돌연히 초과한다. 그러므로, 통상의 리미터가 사용되는 경우, 적분값은 패닝의 움직임이 패닝의 개시시에 억압되도록 화면 상태로부터 돌연히 보정 한계에 도달한다. 패닝되어 있는 것과 같은 부자연스러운 촬상 화면이 얻어진다.
한편, 제7도에 도시된 바와 같이, 본 발명의 실시예에 따르면, 보정량이 서서히 한계에 접근하는 비선형 리미터가 사용된다. 제7도는 비선형 리미터(68B)의 테이블을 도시한 것이다. 제7도에서, 횡축은 비선형 리미터(68B)의 입력값을 나타내고, 종축은 출력값을 나타낸다. 입력은 저역 통과 필터(61B)의 출력에 대응한다.
상술된 바와 같이, 본 발명의 실시예에 따르면, 비선형 리미터(68B)가 사용되기 때문에, 카메라가 패닝 개시시에 급격하게 이동되는 경우에도, 값은 한계값에 급격하게 도달하지 않고, 패닝시의 촬상 화면은 부자연스럽지 않다.
즉, 패닝 촬영이 실행되는 경우, 제8a도에 도시된 검출 신호는 각속도 센서로부터 출력된다. 검출 신호는 저역 통과 필터로 적분된다. 적분값은 제8b도에 도시된 시점(t1)에서 보정 한계(LMT)에 도달한다. 비선형 리미터(68B)의 특성은 비선형이기 때문에, 제8c도에 점(P1)로 도시된 바와 같이, 값은 보정 한계(LMT)에 서서히 도달한다. 이로 인해, 패닝시의 촬상 화면은 부자연스럽지 않다.
비선형 리미터(68B)의 특성은 고정될 수 있지만, 비선형 특성은 패닝 속도 또는 줌 배율에 따라 변화될 수도 있다. 예를 들면, 패닝 속도가 빠를수록, 또는 줌 배율이 클수록, 곡선이 보다 완만하게 보정 한계에 도달하도록 리미터 특성이 설정된다.
상술된 실시예에 따르면, 비선형 리미터는 수평 방향의 손 흔들림 보정 시스템에만 제공된다. 그러나, 수직 방향의 손 흔들림 보정 시스템에도 비선형 리미터가 제공될 수 있다.
제9a도는 광학 줌 영역에서의 화면을 도시한 것이다. 이러한 광학 줌 영역에 있어서, C1로 도시된 영역의 화상이 이용된다. 수직 방향의 손 흔들림 보정은 C2A 및 C2B로 도시된 영역 내에서 실해오디고, C3A 및 C3B로 도시된 영역 내에서 수평 방향의 손 흔들림 보정이 실행된다. C2A 및 C2B로 도시된 범위에서의 손 흔들림 보정은 CCD 촬상 장치(3)의 판독 위치를 시프트함으로써 달성된다. C3A 및 C3B로 도시된 범위에서 수평 방향의 손 흔들림 보정은 전자 확대 회로(15)에 의해 수평 방향의 판독 위치를 시프트함으로써 달성된다.
제9b도는 전자 줌 영역에서의 화상 메모리(14)내에 저장되는 화면을 도시한 것이다. 이러한 전자 줌 영역에 있어서, C11로 도시된 영역의 화상이 이용된다. 수직 방향의 손 흔들림 보정은 C12A 및 C12B로 도시된 범위에서 CCD 촬상 장치(3)의 판독 위치를 시프트함으로써 실행된다. 수평 방향의 손 흔들림 보정은 C13A 및 C13B로 도시된 범위에서 실행된다. 또한, 미사용 영역(C14)가 화상 메모리 내에 생긴다. 미사용 영역(C14)는 손 흔들림 보정에 사용될 수 있다.
제10도 및 제11도는 저역 통과 필터(61A 및 61B)의 구성을 도시한 것이다. 제10도는 광학 줌 영역에서의 구성을 도시한 것이고, 제11도는 전자 줌 영역에서의 구성을 도시한 것이다. 제10도 및 제11도에 있어서, 출력 단자(101)로부터의 신호는 가산 회로(102)에 공급된다. 가산 회로(102)의 출력은 출력 단자(103)으로부터 출력 되고, 또한 지연 회로(104)에 공급된다.
광학 줌 영역에 있어서, 제10도에 도시된 바와 같이, 지연 회로(104)의 출력은 승산 회로(105) 및 테이블(107)에 공급된다. 계수는 테이블(107)에 의해 판독되고, 계수는 승산 회로(105)에 설정된다. 승산 회로(105)의 출력은 가산 회로(102)에 공급된다.
전자 줌 영역에 있어서, 제11도에 도시된 바와 같이, 지연 회로(104)의 출력은 승산 회로(105) 및 감쇠기(106)에 공급된다. 전자 줌 배율(k)는 입력 단자(108)로 부터 감쇠기(106)에 공급된다. 계수는 테이블(107)에 의해 판독되고, 계수는 승산회로(105)에 설정된다. 승산 회로(105)의 출력은 가산 회로(102)에 공급된다.
비디오 카메라의 흔들림에 대응하는 신호는 입력 단자(101)에 공급된다. 그리고, 신호는 가산 회로(102)에 의해 피드백 성분에 가산되어 출력되고, 또한 승산회로(105)에 의해 적절한 계수와 승산되어 피드백된다.
계수는 제10도에 도시된 바와 같이 광학 줌 영역에서 지연 회로(104)의 출력에 의해 테이블(107)을 참조함으로써 얻어진다. 전자 줌 영역에 있어서, 제11도에 도시된 바와 같이, 계수는 감쇠기(106)을 통해 테이블(107)에 지연 회로(104)의 출력을 공급하고 테이블(107)을 참조함으로써 얻어진다. 감쇠기(106)의 감쇠는 전자 줌 배율(k)에 반비례하도록 설정된다.
제12도는 전자 줌 영역에서의 적분값과 계수 사이의 관계를 도시한 것이다.
제12도에 있어서, 횡축은 적분값을 나타내고, 종축은 계수를 나타낸다. 감쇠기(106)의 감쇠가 전자 줌 배율(k)에 반비례하도록 설정되기 때문에, 전자 줌 배율이 높아지면 적분값과 계수 사이의 관계를 나타내는 라인은 M1, M2, M3, …과 같이 변화된다. 그러므로, 전자 줌 배율이 증가하면, 보정 범위는 넓게 설정될 수 있다.
본 발명은 비디오 카메라에 한정되지 않고, 또한 손 흔들림 보정 기능을 갖고 있는 비디오 재생 장치에도 유사하게 사용될 수 있다. 즉, 손 흔들림으로 인한 화면의 흔들림은 기록시에 비디오 카메라측상에서 보정될 수 있을 뿐만 아니라, 재생시에 재생 장치측상에서 보정될 수도 있다. 즉, 재생시에, 손 흔들림이 검출되고, 화면이 손 흔들림량에 따라 시프트된다. 그러므로, 재생시에 손 흔들림 보정을 실행하는 경우에, 손 흔들림은 재생 비디오 신호의 움직임 벡터를 검출함으로써 검출될 수 있다. 저역 통과 필터는 움직임 벡터로부터 실제 보정량을 얻기 위해 사용된다.
이러한 비디오 재생 장치에 있어서, 비선형 리미터는 상술된 실시예와 유사한 방식으로 사용될 수 있다.
본 발명은 비디오 카메라에 한정되지 않고, 손 흔들림 보정 기능을 갖고 있는 비디오 신호 재생 장치에도 적용될 수 있다. 즉, 손 흔들림에 의한 화면의 흔들림은 기록시에 비디오 카메라측 상의 보정을 실행할 뿐만 아니라 재생시에 재생 장치측 상의 보정을 실행함으로써 보정될 수 있다. 즉, 손 흔들림이 재생시에 검출되어, 화면이 손 흔들림량에 따라 시프트된다. 그러므로, 재생시에 손 흔들림 보정을 실행하는 경우에, 손 흔들림은 재생 비디오 신호의 움직임 벡터를 검출함으로써 검출된다. 저역 통과 필터는 움직임 벡터로부터 실제 보정량을 얻기 위해 사용된다. 화상 메모리는 보정을 실행하기 위해 사용된다. 전자 확대 화면은 화상 메모리를 이용함으로서 형성될 수 있다. 상술된 바와 같이 전자 확대 화면을 형성하는 경우에, 배율에 따라 저역 통과 필터의 계수를 변화시킴으로써, 넓은 보정 범위가 얻어질 수 있다.
Claims (53)
- 비디오 카메라에 있어서, 촬영될 피사체로부터 광을 수집하기 위한 렌즈 수단;상기 렌즈 수단에 의해 수집된 광을 전기 신호로 변환하기 위한 촬상 장치;상기 촬상 장치로부터의 상기 전기 신호를 디지탈 신호로 변환하기 위한 아날로그/디지탈 변환 회로;상기 아날로그/디지탈 변환 회로에 의해 얻어진 상기 디지탈 신호를 저장하기 위한 메모리 회로;상기 비디오 카메라의 흔들림을 검출하기 위한 흔들림 검출 수단;상기 흔들림 검출 수단의 출력 신호로부터 보정량을 얻어서, 광 제어 신호 및 전자 제어 신호를 생성하기 위한 계산 수단;상기 광 제어 신호에 응답하여 상기 비디오 카메라의 흔들림으로 인한 화상의 흔들림을 사전설정된 한도까지 보정하기 위한 광 보정 수단;상기 촬영될 피사체를 확대하거나 축소하기 위한 광학적 줌 수단(optical zoom means)- 상기 광학적 줌 수단은 상기 렌즈 수단 내에 포함됨-; 및상기 아날로그/디지탈 변환 회로로부터의 상기 디지탈 신호에 의해 표현되는, 상기 촬영될 피사체를 확대하거나 축소하며, 상기 전자 제어 신호에 응답하여 상기 사전설정된 한도를 초과하는 흔들림 부분을 보정하기 위한 전자 줌 수단을 포함하는 것을 특징으로 하는 비디오 카메라.
- 제1항에 있어서, 상기 광학적 줌 수단은 렌즈를 구비하며, 상기 전자 줌 수단은 상기 메모리 회로로부터 출력된 신호에 대해 전기적 처리를 행하는 것을 특징으로 하는 비디오 카메라.
- 제1항에 있어서, 상기 광학적 줌 수단 및 상기 전자 줌 수단은, 상기 광학적 줌 수단이 먼저 줌 동작을 수행하고 상기 광학적 줌 수단에 의한 줌 양이 최대 줌 양에 도달하면 상기 전자 줌 수단이 줌 동작을 수행하도록 제어되는 것을 특징으로 하는 비디오 카메라.
- 제1항에 있어서, 상기 촬상 장치 내에 사전설정된 초점 조정용 윈도우가 설정되고, 상기 윈도우는, 상기 광학적 줌 수단의 동작에 응답하여 이동되는 것을 특징으로 하는 비디오 카메라.
- 제1항에 있어서, 손 흔들림 보정을 수행하기 위한 상기 전자 줌 수단으로 상기 메모리 회로의 출력이 제공되는 것을 특징으로 하는 비디오 카메라.
- 제1항에 있어서, 상기 전자 줌 수단은, 상기 메모리 회로의 판독 위치를 한 라인 시프트함으로써 수평 방향의 손 흔들림 보정을 실행하는 것을 특징으로 하는 비디오 카메라.
- 제1항에 있어서, 상기 촬상 장치는 화상 표시 영역보다 큰 촬상 영역을 가지며, 상기 광학적 보정 수단은, 상기 촬상 영역의 판독 위치를 수평 및 수직 방향으로 변경시킴으로써 수평 및 수직 방향으로 손 흔들림 보정을 행하는 것을 특징으로 하는 비디오 카메라.
- 제1항에 있어서, 상기 흔들림 검출 수단은, 상기 비디오 카메라의 수직 및 수평 방향의 이동을 검출하는 각도 센서(angular sensors)를 포함하는 것을 특징으로 하는 비디오 카메라.
- 제8항에 있어서, 상기 계산 수단은, 상기 각도 센서로부터 얻어진 출력 신호에 대한 부(-)의 이득 조정을 실행하기 위한 이득 조정 회로를 포함하는 것을 특징으로 하는 비디오 카메라.
- 제9항에 있어서, 상기 이득 조정 회로는 상기 각도 센서의 출력의 변화량을 조정하기 위한 승산 회로를 포함하는 것을 특징으로 하는 비디오 카메라.
- 제10항에 있어서, 상기 이득 조정 회로는, 상기 승산 회로의 출력 신호 내의 잡음을 제거하기 위한 코어링 회로(coring circuit)를 더 포함하는 것을 특징으로 하는 비디오 카메라.
- 제11항에 있어서, 상기 이득 조정 회로는, 상기 코어링 회로의 출력 신호의 각속도 정보를 각도 정보로 변환하기 위한 저역 통과 필터 회로를 더 포함하는 것을 특징으로 하는 비디오 카메라.
- 제12항에 있어서, 상기 이득 조정 회로는 상기 저역 통과 필터의 출력 신호의 진폭을 제한하기 위한 리미터 회로(limiter circuit)를 더 포함하는 것을 특징으로 하는 비디오 카메라.
- 비디오 카메라에 있어서, 촬영될 피사체로부터 광을 수집하기 위한 렌즈;상기 렌즈에 의해 수집된 광을 전기 신호로 변환하기 위한 촬상 장치;상기 촬상 장치로부터의 상기 전기 신호를 디지탈 신호로 변환하기 위한 아날로그/디지탈 변환 회로;상기 아날로그/디지탈 변환에 의해 얻어진 상기 디지탈 신호를 저장하기 위한 메모리 회로;상기 비디오 카메라의 흔들림을 검출하기 위한 흔들림 검출 수단;상기 흔들림 검출 수단의 출력 신호로부터 보정량을 얻기 위한 계산 수단;상기 계산 수단의 출력신호에 기초하여, 상기 비디오 카메라 본체의 미세한 흔들림으로 인한 화상의 흔들림을 보정하기 위한 보정 수단; 및상기 계산 수단의 출력 신호에 대한 보정 한계 내에서 보정량을 제한하기 위한 리미터 회로를 포함하는 것을 특징으로 하는 비디오 카메라.
- 제14항에 있어서, 상기 리미터 회로는 출력 신호의 레벨에 따라 제한량이 변화되는 비선형 처리를 실행하는 것을 특징으로 하는 비디오 카메라.
- 제15항에 있어서, 상기 리미터 회로는 제한량이 상기 비디오 카메라의 패닝(panning) 속도에 따라 변화되도록 제어되는 것을 특징으로 하는 비디오 카메라.
- 제16항에 있어서, 상기 리미터 회로는 제한량이 상기 비디오 카메라의 줌 량에 따라 변화되도록 제어되는 것을 특징으로 하는 비디오 카메라.
- 제17항에 있어서, 촬영될 상기 피사체를 학대하거나 축소하기 위한 줌 수단; 및 상기 줌 수단의 줌 변화에 따라 상기 보정 수단을 변화시키기 위한 제어 수단을 포함하는 것을 특징으로 하는 비디오 카메라.
- 제18항에 있어서, 상기 줌 수단은 렌즈를 갖는 광학 줌, 및 화상 메모리를 이용하여 전기 처리를 실행하는 전자 줌을 포함하는 것을 특징으로 하는 비디오 카메라.
- 제19항에 있어서, 상기 줌 수단은 상기 광학 줌이 먼저 동작하고 상기 광학 줌에 의한 줌 양이 최대에 도달할 때 상기 전자 줌이 동작하도록 제어되는 것을 특징으로 하는 비디오 카메라.
- 제20항에 있어서, 선정된 초점 조정용 윈도우는 상기 촬상 장치 내에 설정되고, 상기 윈도우는 상기 줌 수단의 줌 변화에 따라 이동되는 것을 특징으로 하는 비디오 카메라.
- 제21항에 있어서, 상기 화상 메모리는 상기 전자 줌 및 손 흔들림 보정에 사용되는 것을 특징으로 하는 비디오 카메라.
- 제22항에 있어서, 상기 전자 줌은 상기 화상 메모리의 한 라인의 판독 위치를 시프트함으로써 상기 비디오 카메라의 수평 방향의 손 흔들림 보정을 실행하는 것을 특징으로 하는 비디오 카메라.
- 제23항에 있어서, 상기 촬상 장치는 실제로 표시되는 영역보다 큰 촬상 영역을 가지고, 수평 및 수직 방향의 손 흔들림 보정은 수평 및 수직 방향의 판독 위치를 촬상 영역 내에서 변화시킴으로써 실행되는 것을 특징으로 하는 비디오 카메라.
- 제24항에 있어서, 상기 흔들림 검출 수단은 상기 비디오 카메라의 수직 및 수평 방향의 흔들림을 검출하는 각도 센서를 사용하는 것을 특징으로 하는 비디오 카메라.
- 제25항에 있어서, 상기 계산 수단은 상기 각도 센서로부터 얻어진 출력 신호에 대한 부(-)의 이득 조정을 실행하기 위한 이득 조정 회로를 포함하는 것을 특징으로 하는 비디오 카메라.
- 제26항에 있어서, 상기 이득 조정 회로는 상기 각도 센서의 변화량을 조정하기 위한 승산 회로를 포함하는 것을 특징으로 하는 비디오 카메라.
- 제27항에 있어서, 상기 이득 조정 회로는 상기 승산 회로의 출력 신호내의 잡음을 제거하기 위한 코어링 회로를 더 포함하는 것을 특징으로 하는 비디오 카메라.
- 제28항에 있어서, 상기 이득 조정 회로는 상기 코어링 회로의 출력 신호의 각속도 정보를 각조 정보로 변환하기 위한 저역 통과 필터 회로를 더 포함하는 것을 특징으로 하는 비디오 카메라.
- 제29항에 있어서, 상기 이득 조정 회로는 상기 저역 통과 필터의 출력 신호의 진폭을 제한하기 위한 리미터 회로를 더 포함하는 것을 특징으로 하는 비디오 카메라.
- 비디오 신호 재생 장치에 있어서, 입력 비디오 신호를 디지탈 신호로 변환하기 위한 아날로그/디지탈 변환 회로;상기 아날로그/디지탈 변환에 의해 얻어진 상기 디지탈 신호를 저장하기 위한 메모리 회로;상기 비디오 신호에 의해 발생된 화면의 흔들림을 검출하기 위한 흔들림 검출 수단;상기 흔들림 검출 수단의 출력 신호로부터 보정량을 얻기 위한 계산 수단;상기 계산 수단의 출력 신호에 기초하여, 상기 화면의 미세한 흔들림으로 인한 화상의 흔들림을 보정하기 위한 보정 수단;상기 촬영될 피사체를 확대하거나 축소하기 위한 줌 수단; 및상기 줌 수단의 줌 변화에 따라 상기 보정 수단을 변화시키기 위한 제어 수단을 포함하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제31항에 있어서, 상기 줌 수단은 화상 메모리를 이용하여 전기 처리를 실행하는 전자 줌을 포함하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제32항에 있어서, 상기 화상 메모리는 상기 전자 줌 및 상기 화면 흔들림 보정에 사용되는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제33항에 있어서, 상기 전자 줌은 상기 화상 메모리의 한 라인의 판독 위치를 시프트함으로써 상기 화면의 수평 방향의 화면의 흔들림 보정을 실행하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제34항에 있어서, 상기 화상 메모리는 실제로 표시되는 영역보다 큰 화상 영역을 가지고, 수평 및 수직 방향의 흔들림 보정은 수평 및 수직 방향의 판독위치를 화상 영역 내에서 변화시킴으로써 실행되는 것을 특징으로 하는 비디오 재생 장치.
- 제35항에 있어서, 상기 흔들림 검출 수단은 상기 화면의 수직 및 수평 방향의 흔들림을 검출하는 움직임 벡터 센서를 사용하는 것을 특징으로 하는 비디오 재생 장치.
- 제36항에 있어서, 상기 계산 수단은 상기 움직임 벡터 센서로부터 얻어진 출력 신호에 대한 부(-)의 이득 조정을 실행하기 위한 이득 조정 회로를 포함하는 것을 특징으로 하는 비디오 재생 장치.
- 제37항에 있어서, 상기 이득 조정 회로는 상기 움직임 벡터 센서의 변화량을 조정하기 위한 승산 회로를 포함하는 것을 특징으로 하는 비디오 재생 장치.
- 제38항에 있어서, 상기 이득 조정회로는 상기 승산 회로의 출력 신호내의 잡음을 제거하기 위한 코어링 회로를 더 포함하는 것을 특징으로 하는 비디오 재생 장치.
- 제39항에 있어서, 상기 이득 조정 회로는 상기 코어링 회로의 출력 신호의 각속도 정보를 각도 정보로 변환시키기 위한 저역 통과 필터 회로를 더 포함하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제40항에 있어서, 상기 이득 조정 회로는 상기 저역 통과 필터의 출력 신호의 진폭을 제한하기 위한 리미터 회로를 더 포함하는 것을 특징으로 하는 비디오 재생 장치.
- 비디오 신호 재생 장치에 있어서, 입력 비디오 신호를 디지탈 신호로 변환하기 위한 아날로그/디지탈 변환 회로;상기 아날로그/디지탈 변환에 의해 얻어진 상기 디지탈 신호를 저장하기 위한 메모리 회로;상기 비디오 신호에 의해 발생된 화면의 흔들림을 검출하기 위한 흔들림 검출 수단;상기 흔들림 검출 수단의 출력 신호로부터 보정량을 얻기 위한 계산 수단;상기 계산 수단의 출력 신호에 기초하여, 상기 비디오 카메라 본체의 미세한 흔들림으로 인한 화상의 흔들림을 보정하기 위한 보정 수단; 및상기 계산 수단의 출력 신호에 대한 보정 한계 내에서 보정량을 제한하기 위한 리미터 회로를 포함하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제42항에 있어서, 상기 리미터 회로는 출력 신호의 레벨에 따라 제한량이 변화되는 비선형 처리를 실행하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제43항에 있어서, 상기 리미터 회로는 제한량이 상기 비디오 카메라의 패닝 속도에 따라 변화되도록 제어되는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제44항에 있어서, 상기 리미터 회로는 제한량이 화면의 줌 량에 따라 변화되도록 제어되는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제45항에 있어서, 화면을 확대하거나 축소하기 위한 줌 수단; 및 상기 줌 수단의 줌 변화에 따라 상기 보정 수단을 변화시키기 위한 제어 수단을 더 포함하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제46항에 있어서, 상기 줌 수단은 화상 메모리를 사용하여 전기 처리를 실행하는 전자 줌을 포함하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제47항에 있어서, 선정된 초점 조정용 윈도우가 상기 화상 메모리 내에 설정되고, 상기 윈도우는 상기 줌 수단의 줌 변화에 따라 이동되는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제48항에 있어서, 상기 화상 메모리는 상기 정자 줌 및 손 흔들림 보정에 사용되는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제49항에 있어서, 상기 전자 줌은 상기 화상 메모리의 한 라인의 판독위치를 시프트함으로써 상기 비디오 카메라의 수평 방향의 손 흔들림 보정을 실행하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제50항에 있어서, 상기 화상 메모리는 실제로 표시되는 영역보다 큰 메모리 영역을 가지고, 수평 및 수직 방향의 화면 흔들림 보정은 수평 및 수직 방향의 판독 위치를 메모리 영역 내에서 변화시킴으로써 실행되는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제51항에 있어서, 상기 흔들림 검출 수단은 상기 화상의 수직 및 수평 방향의 흔들림을 검출하는 움직임 벡터 센서를 사용하는 것을 특징으로 하는 비디오 신호 재생 장치.
- 제52항에 있어서, 상기 계산 수단은 상기 움직임 벡터 센서로부터 얻어진 출력 신호에 대한 부(-)의 이득 조정을 실행하기 위한 이득 조정 회로를 포함하는 것을 특징으로 하는 비디오 신호 재생 장치.
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP93-047434 | 1993-02-12 | ||
JP04743493A JP3380918B2 (ja) | 1993-02-12 | 1993-02-12 | ビデオカメラ及びビデオ再生装置 |
JP93-050029 | 1993-02-16 | ||
JP5002993A JP3298211B2 (ja) | 1993-02-16 | 1993-02-16 | ビデオカメラ及びビデオ再生装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR940020783A KR940020783A (ko) | 1994-09-16 |
KR100312139B1 true KR100312139B1 (ko) | 2001-12-28 |
Family
ID=26387595
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1019940002430A KR100312139B1 (ko) | 1993-02-12 | 1994-02-08 | 비디오카메라및비디오신호재생장치 |
Country Status (5)
Country | Link |
---|---|
US (1) | US5502484A (ko) |
EP (1) | EP0611125B1 (ko) |
KR (1) | KR100312139B1 (ko) |
CN (1) | CN1050953C (ko) |
DE (1) | DE69426314T2 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101004773B1 (ko) * | 2003-01-23 | 2011-01-04 | 소니 주식회사 | 촬상장치 |
KR101231494B1 (ko) | 2005-05-16 | 2013-02-07 | 소니 주식회사 | 화상 처리 장치 및 방법과 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체 |
Families Citing this family (64)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5990942A (en) * | 1991-05-01 | 1999-11-23 | Canon Kabushiki Kaisha | Photographing apparatus using image information for blurring correction |
US6236431B1 (en) * | 1993-05-27 | 2001-05-22 | Canon Kabushiki Kaisha | Video camera apparatus with distance measurement area adjusted based on electronic magnification |
EP0644687B1 (en) * | 1993-09-17 | 2003-12-03 | Canon Kabushiki Kaisha | Image pickup apparatus |
US5717767A (en) * | 1993-11-08 | 1998-02-10 | Sony Corporation | Angle detection apparatus and audio reproduction apparatus using it |
US6091448A (en) * | 1993-12-27 | 2000-07-18 | Canon Kabushiki Kaisha | Apparatus for preventing an image blur prevention device from changing states during an image recording operation |
JPH0865567A (ja) * | 1994-08-26 | 1996-03-08 | Canon Inc | 撮像装置 |
JPH0888788A (ja) * | 1994-09-20 | 1996-04-02 | Canon Inc | 撮像装置 |
DE69508345T2 (de) * | 1994-11-12 | 1999-10-07 | Sony Corp., Tokio/Tokyo | Ansteuerverfahren einer CCD Festkörper-Bildaufnahmevorrichtung und Videokamera nach dem Verfahren |
KR0172324B1 (ko) * | 1995-05-25 | 1999-03-20 | 김광호 | 캠코더의 손떨림 보정시의 화상보정방법 |
US5959666A (en) * | 1995-05-30 | 1999-09-28 | Sony Corporation | Hand deviation correction apparatus and video camera |
US5861915A (en) * | 1995-05-31 | 1999-01-19 | Sony Corporation | Temperature-dependant, frequency-compensated hand deviation correction device for video camera |
JP3758205B2 (ja) * | 1995-06-07 | 2006-03-22 | ソニー株式会社 | 固体撮像装置及びこれを用いたビデオカメラ、並びにx‐yアドレス型固体撮像装置の駆動方法 |
US6388705B1 (en) * | 1995-08-04 | 2002-05-14 | Canon Kabushiki Kaisha | Image sensing apparatus featured with vibration prevention function |
JP3286804B2 (ja) * | 1995-09-14 | 2002-05-27 | キヤノン株式会社 | 撮像装置 |
JPH09322057A (ja) * | 1996-05-28 | 1997-12-12 | Canon Inc | 撮像装置 |
JPH1042183A (ja) * | 1996-07-22 | 1998-02-13 | Canon Inc | 撮像装置 |
US6573930B2 (en) * | 1996-11-15 | 2003-06-03 | Canon Kabushiki Kaisha | Image pickup apparatus for storing, reading-out and processing a signal during predetermined time periods |
JP3449142B2 (ja) * | 1996-12-06 | 2003-09-22 | 松下電器産業株式会社 | 画像縮小装置およびその制御方法 |
US6982746B1 (en) * | 1998-02-24 | 2006-01-03 | Canon Kabushiki Kaisha | Apparatus and method for correcting shake by controlling sampling timing of shake signal |
US6963361B1 (en) * | 1998-02-24 | 2005-11-08 | Canon Kabushiki Kaisha | Image sensing method and apparatus capable of performing vibration correction when sensing a moving image |
US6630950B1 (en) * | 1998-03-19 | 2003-10-07 | Canon Kabushiki Kaisha | Apparatus for improving image vibration suppression |
JP2000010141A (ja) * | 1998-06-26 | 2000-01-14 | Ricoh Co Ltd | 手振れ補正機能付きデジタルカメラ |
DE19942900B4 (de) * | 1998-09-08 | 2004-01-22 | Ricoh Company, Ltd. | Vorrichtung zur Korrektur von Bildfehlern, die durch ein Kameraverwackeln hervorgerufen werden |
US6317114B1 (en) * | 1999-01-29 | 2001-11-13 | International Business Machines Corporation | Method and apparatus for image stabilization in display device |
JP2000224470A (ja) * | 1999-02-02 | 2000-08-11 | Minolta Co Ltd | カメラシステム |
JP4378804B2 (ja) * | 1999-09-10 | 2009-12-09 | ソニー株式会社 | 撮像装置 |
JP3991543B2 (ja) * | 2000-01-11 | 2007-10-17 | 株式会社日立製作所 | 撮像装置 |
US7554578B2 (en) * | 2000-07-11 | 2009-06-30 | Phase One A/S | Digital camera with integrated accelerometers |
JP4408001B2 (ja) * | 2000-12-21 | 2010-02-03 | キヤノン株式会社 | 撮像装置および撮像システム |
JP4000872B2 (ja) * | 2002-03-05 | 2007-10-31 | ソニー株式会社 | 画像撮影装置及び色収差補正方法 |
JP4121313B2 (ja) * | 2002-06-04 | 2008-07-23 | 本田技研工業株式会社 | 立体映像表示設備 |
CN101256075B (zh) * | 2002-08-28 | 2014-02-12 | 索尼株式会社 | 电子仪器装置、空间位移计算装置和空间位移计算方法 |
JP4272863B2 (ja) * | 2002-09-20 | 2009-06-03 | キヤノン株式会社 | カメラおよびカメラシステム |
JP3925415B2 (ja) * | 2003-01-22 | 2007-06-06 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
JP3804617B2 (ja) * | 2003-02-14 | 2006-08-02 | コニカミノルタフォトイメージング株式会社 | 画像処理装置及び方法 |
JP3867680B2 (ja) * | 2003-04-01 | 2007-01-10 | ソニー株式会社 | 撮像装置および手振れ補正方法 |
WO2004112380A1 (ja) * | 2003-06-17 | 2004-12-23 | Matsushita Electric Industrial Co., Ltd. | 情報生成装置、撮影装置および撮影方法 |
JP4155890B2 (ja) * | 2003-07-15 | 2008-09-24 | カシオ計算機株式会社 | プロジェクタ、プロジェクタの傾斜角度取得方法及び投影像補正方法 |
JP4235510B2 (ja) * | 2003-08-12 | 2009-03-11 | 富士フイルム株式会社 | デジタルカメラ及び固体撮像装置 |
GB2407226B (en) * | 2003-10-18 | 2008-01-23 | Hewlett Packard Development Co | Image processing scheme |
JP2005252626A (ja) * | 2004-03-03 | 2005-09-15 | Canon Inc | 撮像装置および画像処理方法 |
JP4717382B2 (ja) * | 2004-06-15 | 2011-07-06 | キヤノン株式会社 | 光学機器 |
KR20060007225A (ko) * | 2004-07-19 | 2006-01-24 | 삼성전자주식회사 | 촬상소자 구동제어와 메모리 읽기제어를 이용한 손떨림보정방법 및 이를 적용한 촬영장치 |
JP4187704B2 (ja) | 2004-08-31 | 2008-11-26 | 三洋電機株式会社 | 手ぶれ補正装置 |
US7791642B2 (en) * | 2004-12-13 | 2010-09-07 | Fujifilm Corporation | Image-taking apparatus |
JP4143933B2 (ja) * | 2005-03-29 | 2008-09-03 | ソニー株式会社 | ズームレンズ及び撮像装置 |
US7777782B2 (en) * | 2005-11-04 | 2010-08-17 | Nokia Corporation | Stabilization of an image produced by optics |
WO2007063630A1 (ja) * | 2005-12-01 | 2007-06-07 | Nittoh Kogaku K.K | 画像処理装置 |
JP3956991B2 (ja) * | 2006-01-20 | 2007-08-08 | ソニー株式会社 | 撮像装置 |
JPWO2007097287A1 (ja) * | 2006-02-20 | 2009-07-16 | パナソニック株式会社 | 撮像装置及びレンズ鏡筒 |
JP2008160175A (ja) | 2006-12-20 | 2008-07-10 | Olympus Imaging Corp | デジタルカメラ |
JP4976160B2 (ja) | 2007-02-22 | 2012-07-18 | パナソニック株式会社 | 撮像装置 |
JP4974704B2 (ja) * | 2007-02-22 | 2012-07-11 | パナソニック株式会社 | 撮像装置 |
JP5061188B2 (ja) * | 2007-07-09 | 2012-10-31 | パナソニック株式会社 | デジタル一眼レフカメラ |
US20090027544A1 (en) * | 2007-07-25 | 2009-01-29 | Micron Technology, Inc. | Solid state optical motion compensation |
US8699857B2 (en) * | 2007-12-06 | 2014-04-15 | Olympus Imaging Corp. | Reproducer, digital camera, slide show reproduction method, program, image display apparatus, image display method, image reproduction method, and image display program |
JP2009156946A (ja) * | 2007-12-25 | 2009-07-16 | Sanyo Electric Co Ltd | 撮像装置の防振制御回路 |
JP5366454B2 (ja) * | 2008-06-30 | 2013-12-11 | キヤノン株式会社 | 光学機器 |
KR101626003B1 (ko) * | 2009-08-24 | 2016-06-13 | 삼성전자주식회사 | 디지털 촬영장치 |
KR101630306B1 (ko) * | 2010-02-04 | 2016-06-14 | 삼성전자주식회사 | 자동 초점 조절 장치 및 방법과 상기 방법을 기록한 기록 매체 |
WO2012124262A1 (ja) | 2011-03-15 | 2012-09-20 | Necカシオモバイルコミュニケーションズ株式会社 | 撮影装置、情報処理装置及びプログラムが格納された非一時的なコンピュータ可読媒体 |
US9762848B2 (en) * | 2013-03-15 | 2017-09-12 | Google Inc. | Automatic adjustment of video orientation |
JP6302341B2 (ja) * | 2014-04-23 | 2018-03-28 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
JP6990985B2 (ja) * | 2017-04-25 | 2022-01-12 | キヤノン株式会社 | 像振れ補正装置及び方法、撮像装置及び撮像システム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB8418219D0 (en) * | 1984-07-17 | 1984-08-22 | British Aerospace | Image sensing apparatus |
JPH0746833B2 (ja) * | 1986-03-11 | 1995-05-17 | キヤノン株式会社 | 撮像装置 |
GB2209901B (en) * | 1987-09-11 | 1992-06-03 | Canon Kk | Image sensing device |
US5170255A (en) * | 1988-10-20 | 1992-12-08 | Canon Kabushiki Kaisha | Optical system compensating apparatus |
JP2621468B2 (ja) * | 1989-03-23 | 1997-06-18 | 松下電器産業株式会社 | ビデオカメラ装置 |
JPH0313074A (ja) * | 1989-06-09 | 1991-01-22 | Canon Inc | 画像処理システム |
JPH0375735A (ja) * | 1989-08-18 | 1991-03-29 | Mitsubishi Electric Corp | 自動合焦装置 |
JPH03117278A (ja) * | 1989-09-29 | 1991-05-20 | Matsushita Electric Ind Co Ltd | 撮影装置 |
US5060074A (en) * | 1989-10-18 | 1991-10-22 | Hitachi, Ltd. | Video imaging apparatus |
JP2687670B2 (ja) * | 1990-04-19 | 1997-12-08 | 松下電器産業株式会社 | 動き検出回路および手ぶれ補正装置 |
JP2507138B2 (ja) * | 1990-05-21 | 1996-06-12 | 松下電器産業株式会社 | 動きベクトル検出装置及び画像揺れ補正装置 |
JPH0486162A (ja) * | 1990-07-30 | 1992-03-18 | Sharp Corp | ビデオカメラの画像振れ補償回路 |
JP2558174B2 (ja) * | 1990-10-11 | 1996-11-27 | 富士写真光機株式会社 | カメラの手振れ検知装置 |
-
1994
- 1994-02-07 EP EP94300887A patent/EP0611125B1/en not_active Expired - Lifetime
- 1994-02-07 DE DE69426314T patent/DE69426314T2/de not_active Expired - Lifetime
- 1994-02-08 KR KR1019940002430A patent/KR100312139B1/ko not_active IP Right Cessation
- 1994-02-09 CN CN94101806A patent/CN1050953C/zh not_active Expired - Lifetime
-
1995
- 1995-07-14 US US08/502,584 patent/US5502484A/en not_active Expired - Lifetime
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101004773B1 (ko) * | 2003-01-23 | 2011-01-04 | 소니 주식회사 | 촬상장치 |
KR101231494B1 (ko) | 2005-05-16 | 2013-02-07 | 소니 주식회사 | 화상 처리 장치 및 방법과 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체 |
Also Published As
Publication number | Publication date |
---|---|
EP0611125A1 (en) | 1994-08-17 |
DE69426314D1 (de) | 2000-12-28 |
EP0611125B1 (en) | 2000-11-22 |
DE69426314T2 (de) | 2001-04-12 |
CN1096622A (zh) | 1994-12-21 |
KR940020783A (ko) | 1994-09-16 |
CN1050953C (zh) | 2000-03-29 |
US5502484A (en) | 1996-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100312139B1 (ko) | 비디오카메라및비디오신호재생장치 | |
US6424372B1 (en) | Electronic image-movement correcting device with a variable correction step feature | |
US20060132612A1 (en) | Motion picture taking apparatus and method | |
US5959666A (en) | Hand deviation correction apparatus and video camera | |
JP3250245B2 (ja) | 防振カメラ | |
JP2725933B2 (ja) | オートフォーカス装置 | |
JPH0946570A (ja) | 撮像装置 | |
JP3740398B2 (ja) | 振れ補正装置、振れ補正装置に適用される制御装置、振れ補正装置に適用される制御方法、振れ補正装置に適用される制御プログラム、撮像装置 | |
JP3298211B2 (ja) | ビデオカメラ及びビデオ再生装置 | |
JPH10164425A (ja) | 画像動き補正装置 | |
JP3380918B2 (ja) | ビデオカメラ及びビデオ再生装置 | |
JP3279342B2 (ja) | ビデオカメラにおける手振れ補正装置 | |
JPH11266389A (ja) | 撮像装置 | |
JPH06133211A (ja) | 画像揺れ補正機能付光学装置 | |
JP3642085B2 (ja) | 手振れ補正装置及びビデオカメラ | |
JP3357718B2 (ja) | テレビカメラ装置 | |
JPH11275431A (ja) | 撮像装置 | |
JPH11187299A (ja) | 撮像装置 | |
JPH0641281U (ja) | ビデオカメラ装置 | |
JP3382481B2 (ja) | 撮像装置 | |
JP3697050B2 (ja) | 撮像方法及び装置並びに記憶媒体 | |
JP4195950B2 (ja) | 画像動き補正装置 | |
JPH11298788A (ja) | 撮像方法及び装置並びに記憶媒体 | |
JPH08294041A (ja) | 撮像装置 | |
JPH0946571A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20121002 Year of fee payment: 12 |
|
FPAY | Annual fee payment |
Payment date: 20130927 Year of fee payment: 13 |
|
EXPY | Expiration of term |