KR101476650B1 - 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리장치 및 방법 - Google Patents

디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리장치 및 방법 Download PDF

Info

Publication number
KR101476650B1
KR101476650B1 KR1020080065633A KR20080065633A KR101476650B1 KR 101476650 B1 KR101476650 B1 KR 101476650B1 KR 1020080065633 A KR1020080065633 A KR 1020080065633A KR 20080065633 A KR20080065633 A KR 20080065633A KR 101476650 B1 KR101476650 B1 KR 101476650B1
Authority
KR
South Korea
Prior art keywords
data
still image
mpeg
ycc
compressed
Prior art date
Application number
KR1020080065633A
Other languages
English (en)
Other versions
KR20100005545A (ko
Inventor
곽진표
김동현
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080065633A priority Critical patent/KR101476650B1/ko
Priority to US12/493,313 priority patent/US8218023B2/en
Publication of KR20100005545A publication Critical patent/KR20100005545A/ko
Application granted granted Critical
Publication of KR101476650B1 publication Critical patent/KR101476650B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 디지털 영상 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 연속 촬영된 복수의 영상을 MPEG 포맷으로 인코딩 및 디코딩하는 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치 및 방법에 관한 것이다. 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치는 디지털 영상 처리기로서, 연속 촬영된 복수의 영상 데이터를 전 후 영상간의 유사성을 고려하여 동영상으로 압축하거나, 상기 압축된 동영상 데이터를 디스플레이 가능한 데이터로 변환하는 디지털 신호 처리수단을 포함한다.
Figure R1020080065633
연속촬영, MPEG 인코더, MPEG 디코더

Description

디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치 및 방법{Apparatus and method for processing continuously photographed image data in digital image processing device}
본 발명은 디지털 영상 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 연속 촬영된 복수의 영상을 MPEG 포맷으로 인코딩 및 디코딩하는 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치 및 방법에 관한 것이다.
일반적으로 디지털 영상 처리 장치에서 영상을 압축하는 경우, JPEG 이라는 압축 알고리즘이 사용된다. JPEG은 lossless 또는 lossy 압축 알고리즘으로 컬러 공간 변환, 다운 샘플링, 블록 스플리팅, 이산 코사인 변환, 양자화, 에트로피 코딩 등의 과정을 통해 촬영된 영상을 압축한다. 상세한 압축 알고리즘은 JPEG ISO/IEC 10908-1 ITU-T Recomandation T.81을 통해 확인이 가능하다. 압축된 영상의 크기는 사용자에 의해 결정되며, 일반적인 디지털 영상 처리 장치는 사용자의 선택에 따라 JPEG 압축률을 조정한다.
JPEG은 MPEG과 달리 인터프레임(interframe), 즉 정지 영상 한 장에 대한 압축 알고리즘이다. MPEG이 여러 장의 영상 스트림에서 앞 뒤 영상 프레임 간의 연 관성을 이용하여 압축 효율을 높이는데 반해, JPEG은 영상 한 장만의 압축 알고리즘이다. JPEG 알고리즘으로 압축하는 경우 도 9에 도시된 그림1) 내지 그림6)의 총 파일 크기는 66KB가 된다. 하지만 MPEG 처럼 앞 뒤 영상 간의 유사성을 고려하여 압축을 한다면 훨씬 작은 크기로 압축이 가능하다.
현재 일반적으로 사용되는 디지털 영상 처리 장치의 연사 성능은 3 frame/sec 정도 이지만, 현재에도 10 frame/sec 이상 가능한 디지털 영상 처리 장치가 있으며, 차후 CMOS 센서를 사용하는 경우 연사 성능이 매우 향상될 수 있다. 이렇듯 연사 성능이 향상되면 향상될수록 프레임 간의 연관성이 커져 인터프레임의 관계를 이용하여 압축하는 경우 뛰어난 압축 성능을 얻을 수 있다.
본 발명이 해결하고자 하는 기술적인 과제는 연속 촬영된 복수의 영상을 MPEG 포맷으로 인코딩 및 디코딩하여 압축 성능을 향상시킬 수 있는 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치 및 방법을 제공하는데 있다.
본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치는 디지털 영상 처리기로서, 연속 촬영된 복수의 영상 데이터를 전 후 영상간의 유사성을 고려하여 동영상으로 압축하거나, 상기 압축된 동영상 데이터를 디스플레이 가능한 데이터로 변환하는 디지털 신호 처리수단을 포함하는 것이 바람직하다.
본 발명에 있어서, 상기 디지털 신호 처리수단은 상기 연속 촬영된 영상 데이터들을 YCC 데이터로 변환하는 데이터 변환부; 상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 MPEG 인코더; 상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 MPEG 디코더; 및 상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 비디오 드라이버를 포함 할 수 있다.
본 발명에 있어서, 상기 연속 촬영된 영상은 정지영상처럼 각 프레임 별로 재생될 수 있다.
본 발명에 있어서, 영상 재생 시에 사용자가 선택한 임의의 영상을 삭제하는 경우, 선택된 상기 영상의 헤더에 삭제를 마킹만 하고 실제로 삭제하지 않는 의사 삭제를 수행 할 수 있다.
본 발명에 있어서, 상기 디지털 신호 처리수단은 상기 MPEG 포맷으로 압축된 데이터를 YCC 데이터로 변환하고 JPEG 포맷으로 압축하는 JPEG 인코더를 더 포함 할 수 있다.
본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 방법은 디지털 영상 처리기의 동작 방법으로서, (a) 연속 촬영된 복수의 영상 데이터를 전 후 영상간의 유사성을 고려하여 동영상으로 압축하는 단계; 및 (b) 상기 압축된 동영상 데이터를 디스플레이 가능한 데이터로 변환하는 단계를 포함하는 것이 바람직하다.
본 발명에 있어서, 상기 (a)단계는 (a-1) 상기 연속 촬영된 영상 데이터들을 YCC 데이터로 변환하는 단계; 및 (a-2) 상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 단계를 포함 할 수 있다.
본 발명에 있어서, 상기 (b)단계는 (b-1) 상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 단계; 및 (b-2) 상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 단계를 포함 할 수 있다.
본 발명에 있어서, 상기 연속 촬영된 영상은 정지영상처럼 각 프레임 별로 재생될 수 있다.
본 발명에 있어서, (b-3) 영상 재생 시에 사용자가 선택한 임의의 영상을 삭제하는 경우, 선택된 상기 영상의 헤더에 삭제를 마킹만 하고 실제로 삭제하지 않는 의사 삭제를 수행하는 단계를 더 포함 할 수 있다.
본 발명에 있어서, 상기 MPEG 포맷으로 압축된 데이터를 YCC 데이터로 변환하고 JPEG 포맷으로 압축하여 외부로 전송하는 단계를 더 포함 할 수 있다.
상술한 바와 같이 본 발명에 따르면, 연속 촬영된 복수의 영상들을 앞 뒤 프레임 간의 연관성을 이용하여 MPEG 포맷으로 인코딩 및 디코딩을 수행하여 압축 성능을 향상시킬 수 있다.
이하, 첨부된 도면을 참조하여 본 발명을 상세히 설명한다.
도 1은 디지털 영상 처리기의 앞쪽 및 위쪽 외형을 보여주는 사시도 이다.
셔터-릴리즈 버튼(11)은 정해진 시간 동안 CCD나 필름을 빛에 노출시키기 위해 열리고 닫히며, 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 CCD에 영상을 기록한다.
셔터-릴리즈 버튼(11)은 촬영자 입력에 의해 제1 및 제2 영상 촬영 신호를 생성한다. 반셔터 신호로써의 제1 셔터-릴리즈 버튼(11)이 입력되면, 디지털 영상 처리기는 초점을 잡고 빛의 양을 조절하며, 이때 초점이 맞은 경우 디스플레이부(23)에 녹색 불이 켜지게 된다. 제1 셔터-릴리즈 버튼(11)의 입력으로 초점이 잡히고 빛의 양이 조절되면, 비로소 완전셔터 신호로써의 제2 셔터-릴리즈 버튼(11)을 입력하여 영상을 촬영한다.
전원 버튼(13)은 디지털 영상 처리기에 전원을 공급하여 동작시키기 위해 입력된다.
플래시(15)는 어두운 곳에서 촬영할 경우 밝은 빛을 순간적으로 비추어 밝게 해주는 것으로 플래시 모드에는 자동플래시, 강제발광, 발광금지, 적목감소, 슬로우 싱크로 등이 있다.
보조광(17)은 광량이 부족하거나 야간 촬영 시에 디지털 영상 처리기가 자동으로 초점을 빠르고 정확하게 잡을 수 있도록 피사체에 광을 공급한다.
렌즈부(19)는 외부 광원으로부터 빛을 받아 영상을 처리한다.
도 2는 도 1에 도시된 디지털 영상 처리기의 뒤쪽 외형을 보여주는 배면도로서, 광각-줌 버튼(21w), 망원-줌 버튼(21t), 디스플레이부(23) 및 터치센서 또는 접점식 스위치가 구비된 입력 버튼들(B1~B14)(이하 버튼들(B1~B14)이라 표기함)을 구비한다.
광각-줌 버튼(21w) 또는 망원-줌 버튼(21t)은 입력에 따라 화각이 넓어지거나, 화각이 좁아지는데, 특히, 선택된 노출영역의 크기를 변경시키고자 할 때 입력한다. 광각-줌 버튼(21w)이 입력되면, 선택된 노출영역의 크기가 작아지고, 망원-줌 버튼(21t)이 입력되면, 선택된 노출영역의 크기가 커진다.
버튼들(B1~B14)은 디스플레이부(23)의 가로 열 및 세로 열에 구비된다. 디스플레이부(23)의 가로 열 및 세로 열에 구비된 버튼들(B1~B14)은 터치 센서(도시되지 않음) 또는 접점식 스위치(도시되지 않음)가 구비되어 있다.
즉, 버튼들(B1~B14)에는 터치 센서가 구비되어 가로 열의 버튼들(B1~B7) 또는 세로 열의 버튼들(B8~B14)을 터치한 상태에서 상/하/좌/우로 이동하여 주 메뉴 항목 중 임의의 값(예를 들어, 컬러 또는 밝기)을 선택하거나, 주 메뉴 아이콘에 포함된 하위메뉴 아이콘을 활성화 시킬 수 있다.
또한 버튼들(B1~B14)에는 접점식 스위치가 구비되어 있어, 주 메뉴 아이콘 및 하위메뉴 아이콘을 직접 선택하여 해당 기능을 실행시킬 수 있다. 터치 센서는 접점식 스위치 입력에 비해 상대적으로 약한 터치만을 요구하지만, 접점식 스위치 입력은 터치 센서 입력에 비해 상대적으로 강한 터치를 요구한다.
도 3은 본 발명에 따른 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치의 구성을 보이는 블록도로서, 디스플레이부(23), 사용자 입력부(31), 촬상부(33), 내부 메모리(35), 외부 메모리(37) 및 디지털 신호 처리부(39)를 포함한다.
사용자 입력부(31)는 정해진 시간 동안 CCD나 필름을 빛에 노출시키기 위해 열리고 닫히는 셔터-릴리즈 버튼(11), 전원을 공급하기 위해 입력하는 전원 버튼(13), 입력에 따라 화각을 넓어지게 하거나, 화각을 좁아지게 하는 광각-줌 버튼(21w) 및 망원-줌 버튼(21t)과, 문자 입력 또는 메뉴 선택 및 실행을 위해 디스플레이부(23) 주변의 가로 및 세로열에 구비된 터치센서 또는 접점식 스위치가 구비된 버튼들(B1~B14)이 있다.
촬상부(33)는 도면에 도시되지 않은 셔터, 렌즈부, 조리개, CCD(Charge Coupled Device) 또는 CMOS(complementary metal oxide semiconductor) 및 ADC를 포함한다. 셔터는 조리개와 함께 노광하는 빛의 양을 조절하는 기구이다. 렌즈부는 외부 광원으로부터 빛을 받아 영상을 처리한다. 이 때, 조리개는 개폐 정도에 따라 입사되는 빛의 양(광량)을 조절한다. 조리개의 개폐 정도는 디지털 신호 처 리부(39)에 의해 제어된다.
CCD 또는 COMS는 렌즈부를 통하여 입력되는 광량을 축적하고 그 축적된 광량에 따라 렌즈부에서 촬상된 영상을 수직 동기신호에 맞추어 출력한다. 디지털 영상 처리기의 영상 획득은 피사체로부터 반사되어 나오는 빛을 전기적인 신호로 변환시켜 주는 CCD에 의해 이루어진다. CCD 또는 COMS를 이용하여 컬러 영상을 얻기 위해서는 컬러 필터를 필요로 하며, 대부분 CFA(Color filter array) 라는 필터(미도시)를 채용하고 있다. CFA는 한 픽셀마다 한 가지 컬러를 나타내는 빛만을 통과시키며 규칙적으로 배열된 구조를 가지고 있으며, 배열 구조에 따라 여러 가지 형태를 가지고 있다. ADC는 CCD 또는 COMS로부터 출력되는 아날로그 영상신호를 디지털 신호로 변환한다.
디지털 신호 처리부(39)는 연속 촬영된 복수의 영상 데이터를 전 후 영상간의 유사성을 고려하여 MPEG 압축하거나, 압축된 MPEG 데이터를 디스플레이 가능한 데이터로 변환하고, MPEG 포맷으로 압축된 데이터를 YCC 데이터로 변환하고 JPEG 포맷으로 압축하여 외부로 전송한다.
이를 위해, 디지털 신호 처리부는 IPC(image processing chain)(39-1), MPEG 인코더(39-2), MPEG 디코더(39-3), 비디오 드라이버(39-4), JPEG 인코더(39-5) 및 제어부(39-6)를 포함한다.
디지털 영상 처리기에서 연속 촬영된 영상 데이터를 처리하기 위한 세 가지 방법이 있는데, 영상 촬영 시에 영상을 MPEG 포맷으로 압축하는 방법, 압축된 MPEG 영상을 디코딩하여 디스플레이 하는 방법, 압축된 MPEG 영상을 JPEG 포맷으로 압축 하여 전송하는 방법이 있다.
먼저, 영상 촬영 시에 영상을 MPEG 포맷으로 압축하는 내용을 설명한다.
IPC(39-1)는 촬상부(33)에서 디지털 변환되어 입력되는 Bayer Raw 포맷의 영상 데이터를 YCC 포맷의 영상 데이터로 변환하기 위한 일련의 프로세싱을 수행한다.
IPC(39-1)에서 변환된 YCC 포맷의 영상 데이터는 제어부(39-6)의 제어 하에 내부 메모리(35)에 저장된다. 연속 촬영의 경우 내부 메모리(35)에는 #1 YCC, #2 YCC …#n YCC와 같이 여러 장의 YCC 데이터가 저장된다.
MPEG 인코더(39-2)는 제어부(39-6)의 제어 하에 내부 메모리(35)에 저장된 YCC 데이터를 MPEG 포맷으로 인코딩한다. MPEG 인코더(39-2)는 도시되지 않은 모션 평가(motion estimation), 모션 보상(motion compensation), DCT(discrete cosine transform), VLC(variable length coding) 등의 여러 모듈로 구성되어 있다.
모션 평가(motion estimation) 모듈은 내부 메모리(35)에 저장된 이전 프레임에서 현재 프레임의 매크로 블록과 가장 유사한 매크로 블록을 탐색하고 이를 모션 벡터로 표현한다. 모션 보상(motion compensation) 모듈은 모션 평가 모듈로부터 탐색된 두 매크로 블록 간의 residual을 구한다. DCT(discrete cosine transform) 모듈은 영상을 일정한 크기의 정 방향 영역으로 나누고, 각 영역에 대해 변환처리를 수행함으로써, 영역 내의 평균값(DC 값)으로부터 최고주파수의 영상성분에 이르기까지 여러 가지 주파수의 영상성분으로 분해한다. VLC(variable length coding) 모듈은 발생확률이 높은 값에 길이가 짧은 부호를 할당하고, 발생확률이 낮은 값에 길이가 긴 부호를 할당하도록 인코더와 디코더 사이에 새로운 부호체계를 적용하여 평균 부호 길이를 줄이도록 한다. 이하, MPEG 인코딩에 관한 내용은 이미 공지되어 있으므로 상세한 설명은 생략하도록 한다.
기존에 사용되는 정지영상 압축에 사용되는 JPEG 방식과 본 발명에서 사용되는 MPEG 방식의 가장 큰 차이점은 인터프레임의 차이를 분석하는 모션 평가 모듈 및 모션 보상 모듈의 유/무이다. MPEG 방식은 앞 뒤 영상의 차이를 분석하여 인코딩하므로 연속 촬영 성능이 높은 디지털 영상 처리기일수록 JPEG 방식에 비해 높은 압축 성능을 낼 수 있다.
MPEG 인코더(39-2)에서 인코딩된 데이터는 제어부(39-6)의 제어 하에 일단 내부 메모리(35)로 저장되었다가 외부 메모리(37)로 저장된다. 외부 메모리(37)는 SD, CF 카드 등 인코딩된 영상을 저장하기 위한 모듈이다. 내부 메모리(35) 및 외부 메모리(37)로의 데이터 저장 시에, 일반적인 MPEG 포맷과 같은 형태로 저장되거나, 고유한 파일 포맷으로 저장될 수 있다.
다음에, 압축된 MPEG 영상을 디코딩하여 디스플레이 하는 내용을 설명한다.
사용자가 촬영된 영상을 재생하는 경우, 기존의 JPEG 재생과 동일한 방식으로 동작한다. 단, 기존의 JPEG 재생과 상이한 점은 기존의 JPEG 재생 방식에서는 각 각 하나의 JPEG영상을 재생해 주지만, 본원발명에서는 사용자의 선택에 따라 연속 촬영된 MPEG 영상의 각 개별 이미지 중, 사용자가 원하는 영상 데이터만을 보여준다.
사용자가 연사 촬영한 영상을 재생하는 경우, 제어부(39-6)는 외부 메모리(37)로부터 MPEG 데이터를 내부 메모리(35)로 읽어온다.
MPEG 디코더(39-3)는 내부 메모리(39)에 저장된 MPEG 데이터를 디코딩하여 #1 YCC, #2 YCC …#n YCC 데이터로 변환한다.
비디오 드라이버(39-4)는 사용자의 선택에 띠라 선택된 영상을 디스플레이 가능한 신호로 처리하여 디스플레이부(23)로 출력한다.
사용자의 선택에 빠른 응답을 하기 위해 일반적으로 JPEG에 사용되는 Screennail 같은 이미지를 MPEG 데이터에 포함 할 수 있다.
도 4는 도 3의 장치에서 연사 촬영된 영상 데이터의 재생을 보이는 도면으로, 기존의 연사 촬영된 영상은 재생 시에 시작부터 끝까지 동영상으로 재생되지만, 본원발명에서는 연사 촬영된 영상이지만, 촬영된 영상은 정지 영상이기 때문에 사용자의 선택에 의해 정지영상과 같이 재생된다. 즉, 연사 촬영된 영상의 각 프레임을 각 정지 영상처럼 재생한다.
도 5는 도 3의 장치에서 연사 촬영된 영상 데이터의 편집을 설명하기 위한 도면으로, 사용자가 연사 촬영된 영상을 중간에 삭제하는 경우를 설명한다. 도 5에 도시된 바와같이, 연사 촬영된 영상에서 사용자가 예를 들어 프레임 #4를 삭제하는 경우, 프레임 #4를 삭제하고 영상을 다시 압축하면 시간이 소요되는 문제점이 발생한다. 따라서 #4 프레임의 헤더에 삭제를 마킹만 하고, 실제로 #4 프레임 자체를 삭제하지 않는 의사 삭제를 수행한다. 삭제된 프레임을 포함하는 영상을 재생하는 경우, 삭제가 마킹된 프레임은 디코딩만 하고 디스플레이부(23)에는 표시하 지 않는다.
마지막으로 압축된 MPEG 영상을 JPEG 포맷으로 압축하여 PC 등으로 전송하는 내용을 설명한다.
사용자가 외부 메모리(37)에 저장된 영상 데이터를 PC(미도시) 등으로 전송하는 경우, 일반적으로 사용되는 JPEG 포맷으로 변환하여 전송해야 한다.
제어부(39-6)는 외부 메모리(37)로부터 MPEG 데이터를 내부 메모리(35)로 읽어온다.
MPEG 디코더(39-3)는 내부 메모리(35)에 저장된 MPEG 데이터를 디코딩하여 #1 YCC, #2 YCC …#n YCC 데이터로 변환한다.
JPEG 인코더(39-5)는 MPEG 디코더(39-3)에서 출력되는 YCC 데이터를 JPEG 포맷으로 압축하여 내부 메모리(35)를 통하여 외부 메모리(37) 또는 PC로 전송한다.
이하, 도 6 내지 도 8을 참조하여 본 발명에 따른 디지털 영상 처리기에서 연사 촬영된 영상 데이터의 처리 방법을 상세히 설명한다. 본 발명에 따른 디지털 영상 처리기에서 연사 촬영된 영상 데이터의 처리 방법은 도 3에 도시된 바와 같은 디지털 영상 처리기의 내부에서 수행될 수 있는데, 실시 예에 따라 동작 방법의 주 알고리즘은 장치 내의 주변 구성 요소들의 도움을 받아 디지털 신호 처리부(39) 내부에서 수행될 수 있다.
먼저, 도 6을 참조하여 영상 촬영 방법의 동작을 설명한다.
사용자에 의해 연사 쵤영이 수행되면(601단계), 디지털 신호 처리부(39)는 촬상부(33)의 이미지 센서에서 출력되는 Bayer Raw 포맷의 영상 데이터를 YCC 포맷 의 영상 데이터로 변환한다(603단계).
디지털 신호 처리부(39)는 변환된 YCC 포맷의 영상 데이터를 내부 메모리(35)에 저장한다(605단계). 연사촬영이므로 내부 메모리(35)에는 #1 YCC, #2 YCC …#n YCC와 같이 여러 장의 YCC 데이터가 저장된다.
디지털 신호 처리부(39)는 내부 메모리(35)에 저장된 YCC 포맷의 영상 데이터를 MPEG 포맷으로 인코딩한다(607단계). MPEG 인코딩을 위해 모션 평가, 모션 보상, DCT, VLC 등을 수행하며, 상세한 설명은 상기에 개시되어 있으므로 그 설명을 생략한다.
기존에 사용되는 정지영상 압축에 사용되는 JPEG 방식과 본 발명에서 사용되는 MPEG 방식의 가장 큰 차이점은 인터프레임의 차이를 분석하는 모션 평가 및 모션 보상의 유/무이다. MPEG 방식은 앞 뒤 영상의 차이를 분석하여 인코딩하므로 연사 촬영 성능이 높은 디지털 영상 처리기일수록 JPEG 방식에 비해 높은 압축 성능을 낼 수 있다.
디지털 신호 처리부(39)는 인코딩된 MPEG 데이터를 내부 메모리(35)를 통하여 외부 메모리(37)에 저장한다.(609단계). 디지털 신호 처리부(39)는 내부 메모리(35) 및 외부 메모리(37)로의 데이터 저장 시에, 일반적인 MPEG 포맷과 같은 형태로 저장하거나, 고유한 파일 포맷으로 저장할 수 있다.
이어서, 도 7을 참조하여 영상 재생 방법을 설명한다.
사용자가 촬영된 영상을 재생하는 경우, 기존의 MPEG 재생과 동일한 방식으로 동작한다. 단, 기존의 MPEG 재생과 상이한 점은 기존의 MPEG 재생 방식에서는 영상 데이터를 연속적으로 재생하지만, 본원발명에서는 사용자의 선택에 따라 사용자가 원하는 영상 데이터만을 보여준다.
사용자가 연사 촬영한 영상을 재생하는 경우, 디지털 신호 처리부(39)는 외부 메모리(37)로부터 MPEG 데이터를 내부 메모리(35)로 읽어온다(701단계).
디지털 신호처리부(39)는 내부 메모리(39)에 저장된 MPEG 데이터를 디코딩하여 #1 YCC, #2 YCC …#n YCC 데이터로 변환한다(703단계).
디지털 신호 처리부(39)는 사용자의 선택에 띠라 선택된 영상을 디스플레이 가능한 신호로 처리하여 디스플레이부(23)로 출력한다(705단계).
사용자의 선택에 빠른 응답을 하기 위해 일반적으로 JPEG에 사용되는 Screennail 같은 이미지를 MPEG 데이터에 포함 할 수 있다.
도 4는 연사 촬영된 영상 데이터의 재생을 보이는 도면으로, 기존의 연사 촬영된 영상은 재생 시에 시작부터 끝까지 동영상으로 재생되지만, 본원발명에서는 연사 촬영된 영상이지만, 촬영된 영상은 정지 영상이기 때문에 사용자의 선택에 의해 정지영상과 같이 재생된다. 즉, 연사 촬영된 영상의 각 프레임을 각 정지 영상처럼 재생한다.
도 5는 연사 촬영된 영상 데이터의 편집을 설명하기 위한 도면으로, 사용자가 연사 촬영된 영상을 중간에 삭제하는 경우를 설명한다. 도 5에 도시된 바와같이, 연사 촬영된 영상에서 사용자가 예를 들어 프레임 #4를 삭제하는 경우, 프레임 #4를 삭제하고 영상을 다시 압축하면 시간이 소요되는 문제점이 발생한다. 따라서 #4 프레임의 헤더에 삭제를 마킹만 하고, 실제로 #4 프레임 자체를 삭제하지 않는 의사 삭제를 수행한다. 삭제된 프레임을 포함하는 영상을 재생하는 경우, 삭제가 마킹된 프레임은 디코딩만 하고 디스플레이부(23)에는 표시하지 않는다.
마지막으로 도 8을 참조하여 영상 전송 방법을 설명한다.
사용자가 외부 메모리(37)에 저장된 영상 데이터를 PC(미도시) 등으로 전송하는 경우, 일반적으로 사용되는 JPEG 포맷으로 변환하여 전송해야 한다.
디지털 신호 처리부(39)는 외부 메모리(37)로부터 MPEG 데이터를 내부 메모리(35)로 읽어온다(801단계).
디지털 신호 처리부(39)는 내부 메모리(35)에 저장된 MPEG 데이터를 디코딩하여 #1 YCC, #2 YCC …#n YCC 포맷의 영상 데이터로 변환한다(803단계).
이어서, 디지털 신호 처리부(39)는 사용자의 선택에 따라 변환된 YCC 포맷의 영상 데이터를 JPEG 포맷으로 압축하여 내부 메모리(35)를 통하여 외부 메모리(37) 또는 PC로 전송한다(805단계).
도 1은 디지털 영상 처리기의 앞쪽 및 위쪽 외형을 보여주는 사시도 이다.
도 2는 도 1에 도시된 디지털 영상 처리기의 뒤쪽 외형을 보여주는 배면도 이다.
도 3은 본 발명에 따른 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리 장치의 구성을 보이는 블록도 이다.
도 4는 도 3의 장치에서 연속 촬영된 영상 데이터의 재생을 보이는 도면이다.
도 5는 도 3의 장치에서 연속 촬영된 영상 데이터의 편집을 설명하기 위한 도면이다.
도 6은 본 발명에 따른 디지털 영상 처리기에서 연속 촬영된 영상 데이터의 처리 방법 중 영상 촬영 방법의 동작을 보이는 흐름도 이다.
도 7은 본 발명에 따른 디지털 영상 처리기에서 연속 촬영된 영상 데이터의 처리 방법 중 영상 재생 방법의 동작을 보이는 흐름도 이다.
도 8은 본 발명에 따른 디지털 영상 처리기에서 연속 촬영된 영상 데이터의 처리 방법 중 영상 전송 방법의 동작을 보이는 흐름도 이다.
도 9는 종래 기술에 따른 영상 압축을 설명하는 도면이다.

Claims (11)

  1. 디지털 영상 처리기로서,
    연속 촬영된 정지 영상 데이터들을 YCC 데이터로 변환하는 데이터 변환부;
    상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 MPEG 인코더;
    상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 MPEG 디코더; 및
    상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 비디오 드라이버를 포함하고,
    사용자의 상기 정지 영상 데이터에 대한 선택에 빠르게 응답하기 위하여, 상기 MPEG 포맷으로 압축된 데이터에 상기 정지 영상 데이터들 각각에 대응되는 스크린네일 이미지들을 포함시킨 것을 특징으로 하는 연사 촬영된 정지 영상 데이터 처리 장치.
  2. 삭제
  3. 제 1항에 있어서, 상기 연속 촬영된 영상은
    정지영상처럼 각 프레임 별로 재생되는 것을 특징으로 하는 연속 촬영된 정지 영상 데이터 처리 장치.
  4. 디지털 영상 처리기로서,
    연속 촬영된 영상 데이터들을 YCC 데이터로 변환하는 데이터 변환부;
    상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 MPEG 인코더;
    상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 MPEG 디코더; 및
    상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 비디오 드라이버를 포함하고,
    영상 재생 시에 사용자가 선택한 임의의 정지 영상을 삭제하는 경우, 선택된 상기 정지 영상의 헤더에 삭제를 마킹만 하고 실제로 삭제하지 않는 의사 삭제를 수행하는 것을 특징으로 하는 연속 촬영된 정지 영상 데이터 처리 장치.
  5. 디지털 영상 처리기로서,
    연속 촬영된 정지 영상 데이터들을 YCC 데이터로 변환하는 데이터 변환부;
    상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 MPEG 인코더;
    상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 MPEG 디코더;
    상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 비디오 드라이버; 및
    상기 MPEG 포맷으로 압축된 데이터를 YCC 데이터로 변환하고 JPEG 포맷으로 압축하는 JPEG 인코더를 포함하는 것을 특징으로 하는 연속 촬영된 정지 영상 데이터 처리 장치.
  6. 디지털 영상 처리기의 동작 방법으로서,
    연속 촬영된 정지 영상 데이터들을 YCC 데이터로 변환하는 단계;
    상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 단계;
    상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 단계; 및
    상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 단계를 포함하고,
    사용자의 상기 정지 영상 데이터에 대한 선택에 빠르게 응답하기 위하여, 상기 MPEG 포맷으로 압축된 데이터에 상기 정지 영상 데이터들 각각에 대응되는 스크린네일 이미지들을 포함시킨 것을 특징으로 하는 연속 촬영된 정지 영상 데이터 처리 방법.
  7. 삭제
  8. 삭제
  9. 제 6항에 있어서, 상기 연속 촬영된 영상은
    정지영상처럼 각 프레임 별로 재생되는 것을 특징으로 하는 연속 촬영된 정지 영상 데이터 처리 방법.
  10. 디지털 정지 영상 처리기의 동작 방법으로서,
    연속 촬영된 정지 영상 데이터들을 YCC 데이터로 변환하는 단계;
    상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 단계;
    상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 단계;
    상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 단계; 및
    영상 재생 시에 사용자가 선택한 임의의 정지 영상을 삭제하는 경우, 선택된 상기 정지 영상의 헤더에 삭제를 마킹만 하고 실제로 삭제하지 않는 의사 삭제를 수행하는 단계를 더 포함하는 것을 특징으로 하는 연속 촬영된 정지 영상 데이터 처리 방법.
  11. 디지털 정지 영상 처리기의 동작 방법으로서,
    연속 촬영된 정지 영상 데이터들을 YCC 데이터로 변환하는 단계;
    상기 YCC 데이터를 앞 뒤 영상의 유사성을 고려하여 MPEG 포맷으로 압축하는 단계;
    상기 MPEG 포맷으로 압축된 데이터를 디코딩하는 단계;
    상기 디코딩된 데이터를 디스플레이 가능한 신호로 처리하는 단계; 및
    상기 MPEG 포맷으로 압축된 데이터를 YCC 데이터로 변환하고 JPEG 포맷으로 압축하여 외부로 전송하는 단계를 더 포함하는 것을 특징으로 하는 연속 촬영된 정지 영상 데이터 처리 방법.
KR1020080065633A 2008-07-07 2008-07-07 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리장치 및 방법 KR101476650B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080065633A KR101476650B1 (ko) 2008-07-07 2008-07-07 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리장치 및 방법
US12/493,313 US8218023B2 (en) 2008-07-07 2009-06-29 Method and apparatus for processing continuous image data captured by digital image processor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080065633A KR101476650B1 (ko) 2008-07-07 2008-07-07 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리장치 및 방법

Publications (2)

Publication Number Publication Date
KR20100005545A KR20100005545A (ko) 2010-01-15
KR101476650B1 true KR101476650B1 (ko) 2014-12-26

Family

ID=41464046

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080065633A KR101476650B1 (ko) 2008-07-07 2008-07-07 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리장치 및 방법

Country Status (2)

Country Link
US (1) US8218023B2 (ko)
KR (1) KR101476650B1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101325129B1 (ko) * 2012-01-17 2013-11-20 김시복 멀티미디어 동영상 처리장치와 방법 및 동영상 처리를 위한 컴퓨터 프로그램 저장수단
JP6335563B2 (ja) * 2014-03-18 2018-05-30 キヤノン株式会社 撮像装置及びその制御方法
JP6472253B2 (ja) 2014-03-25 2019-02-20 キヤノン株式会社 画像処理装置及びその制御方法
WO2016203330A1 (en) * 2015-06-16 2016-12-22 Dylog Italia S.P.A. A non-destructive x-ray inspection machine, devices provided for such machine and method for operating the same

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005295422A (ja) * 2004-04-05 2005-10-20 Matsushita Electric Ind Co Ltd デジタルカメラ装置
JP2008079238A (ja) * 2006-09-25 2008-04-03 Nikon Corp 画像圧縮方法、装置、電子カメラ、およびプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7280689B2 (en) * 2002-07-05 2007-10-09 Qdesign U.S.A., Inc. Anti-compression techniques for visual images
US7319480B2 (en) * 2003-06-26 2008-01-15 Eastman Kodak Company Method and apparatus for compressing motion image files to provide an improved image navigation display
US20070041448A1 (en) * 2005-08-17 2007-02-22 Miller Casey L Artifact and noise reduction in MPEG video
US20090115872A1 (en) * 2007-11-02 2009-05-07 Research In Motion Limited System and method for processing images captured using camera-equipped mobile devices

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005295422A (ja) * 2004-04-05 2005-10-20 Matsushita Electric Ind Co Ltd デジタルカメラ装置
JP2008079238A (ja) * 2006-09-25 2008-04-03 Nikon Corp 画像圧縮方法、装置、電子カメラ、およびプログラム

Also Published As

Publication number Publication date
US20100002092A1 (en) 2010-01-07
KR20100005545A (ko) 2010-01-15
US8218023B2 (en) 2012-07-10

Similar Documents

Publication Publication Date Title
US10244184B2 (en) Method and apparatus for shooting star trail video, and computer storage medium
US7697036B2 (en) Digital camera for capturing both still images and moving pictures
US8411158B2 (en) Image sensing apparatus and storage medium
US10129488B2 (en) Method for shooting light-painting video, mobile terminal and computer storage medium
US10171753B2 (en) Shooting method, shooting device and computer storage medium
CN102892008A (zh) 双图像捕获处理
KR20070050822A (ko) 촬상 장치, 화상 처리 방법, 및 프로그램
KR101323733B1 (ko) 고속 고화질 연사 기능을 가지는 영상 입력 장치 및 이를이용한 연사 방법
US20130236161A1 (en) Image processing device and image processing method
US20190020851A1 (en) Image encoding apparatus, and control method thereof
KR101476650B1 (ko) 디지털 영상 처리기에서 연속 촬영된 영상 데이터 처리장치 및 방법
JP4771986B2 (ja) 画像符号化装置およびそれを用いた撮像装置
JP4850111B2 (ja) 画像表示装置およびそれを搭載した撮像装置
JP6354877B2 (ja) 撮像制御装置、及びその制御方法とプログラム
JP5990903B2 (ja) 画像生成装置
JP2006345400A (ja) ビデオカメラ装置
JP7498756B2 (ja) 画像処理装置、撮影装置、画像処理方法及び画像処理プログラム
JP6103481B2 (ja) 撮像装置、及びその制御方法とプログラム
US8953055B2 (en) Image pickup apparatus
JP5211947B2 (ja) 撮像装置及びプログラム
US20100034291A1 (en) Apparatus for processing digital image, method of controlling the same, and recording medium having recorded thereon the method
KR20090113072A (ko) 이어찍기 촬영이 가능한 촬상장치 및 이어찍기 촬영방법
JP2013123090A (ja) 画像処理装置、撮像装置およびプログラム
JP2009033629A (ja) 撮像装置及びその制御方法、並びにプログラム及び媒体、画像処理装置
JPWO2011161883A1 (ja) 画像処理装置および画像処理プログラム

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171129

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20181129

Year of fee payment: 5