KR20110057453A - 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법 - Google Patents

프리뷰 영상의 화질을 개선하기 위한 장치 및 방법 Download PDF

Info

Publication number
KR20110057453A
KR20110057453A KR1020090113868A KR20090113868A KR20110057453A KR 20110057453 A KR20110057453 A KR 20110057453A KR 1020090113868 A KR1020090113868 A KR 1020090113868A KR 20090113868 A KR20090113868 A KR 20090113868A KR 20110057453 A KR20110057453 A KR 20110057453A
Authority
KR
South Korea
Prior art keywords
pixel data
frame
image
sub
preview image
Prior art date
Application number
KR1020090113868A
Other languages
English (en)
Other versions
KR101623591B1 (ko
Inventor
강화영
윤영권
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090113868A priority Critical patent/KR101623591B1/ko
Publication of KR20110057453A publication Critical patent/KR20110057453A/ko
Application granted granted Critical
Publication of KR101623591B1 publication Critical patent/KR101623591B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/01—Circuitry for demodulating colour component signals modulated spatially by colour striped filters by phase separation
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures

Abstract

본 발명은 프리뷰용 영상의 화질을 개선하기 위한 방법을 제안한다. 이를 위해 본 발명은 공간적으로 균일하게 픽셀 데이터를 선택함으로써 프리뷰 영상의 사선 부분에서의 엘리어싱 현상을 개선한다. 이러한 공간적으로 균일한 픽셀 데이터를 선택하는 방법으로 본 발명에서는 2가지 방법을 제안한다.
본 발명의 제1실시예에서는 서브 윈도우마다 하나씩의 픽셀 데이터를 선택하는 방법으로, 가로 방향에 대해서는 G, R 픽셀 데이터를 미리 정해진 규칙에 따라 교대로 선택하고, 세로 방향에 대해서는 B, G 픽셀 데이터를 같은 규칙에 따라 교대로 선택하여 프리뷰 영상을 생성하는 과정으로 이루어진다. 본 발명의 제2실시예에서는 하나의 프레임에서 서브 윈도우마다 베이어 패턴을 선택하고, 다음 프레임에서는 서브 윈도우의 1/2 만큼 쉬프트하여 각 서브 윈도우마다 베이어 패턴을 선택한 후, 두 프레임을 보간하여 하나의 프리뷰 영상을 생성하는 과정으로 이루어진다.
프리뷰, 서브샘플링, 픽셀

Description

프리뷰 영상의 화질을 개선하기 위한 장치 및 방법{APPARATUS AND METHOD FOR IMPROVING QUALITY OF PREVIEW IMAGE}
본 발명은 화질 개선 장치 및 방법에 관한 것으로, 특히 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법에 관한 것이다.
일반적으로 카메라, 캠코더, 웹캠 등과 같은 영상 기기에서는 이미지 센서가 장착되며, 그 이미지 센서는 시야에 전개되는 영상을 촬영하여 전기적 신호로 변환하고 그 변환된 영상 신호를 디지털 신호로 바꾸어 전송한다. 이러한 이미지 센서를 통해 출력되는 영상 신호는 레드(Red), 그린(Green), 블루(Blue)의 삼색 컬러 영상 데이터이며, 그 영상 데이터는 디스플레이부를 통해 디스플레이된다. 이러한 영상 기기에 적용되는 이미지 센서는 해상도를 낮추어 풀 프레임(full frame) 영상 신호를 출력하는 서브 샘플링 모드 동작을 수행할 수 있다. 이러한 서브 샘플링 모드는 영상을 촬영하기 이전에 미리 확인하는 프리뷰(preview) 단계 등 고해상도로 디스플레이할 필요없는 단계에서 빠른 신호 처리를 위하여 수행된다.
이러한 서브 샘플링 모드에서는 서브 샘플링을 위하여 일정 간격으로 떨어져있는 특정 행(row) 및 열(column)의 픽셀만을 선택함으로써 해상도를 낮춘다. 예를 들어, 도 1을 참조하면, 도 1에서는 복수개의 베이어 패턴(140)으로 구성된 프레임 영상을 예시하고 있으며, 종래의 프리뷰 영상을 생성하기 위한 서브샘플링 방법을 설명하면 다음과 같다.
이러한 도 1에 도시된 바와 같이, n×m 픽셀에서 가로 및 세로 방향에 대해 1/4 해상도로 샘플링하는 경우 그 영상은 4개의 서브윈도우(100,110,120,130)로 분할되어, 그 서브윈도우(100,110,120,130)마다 하나씩의 베이어 패턴(140,150,160,170)이 선택된다. 이러한 영상은 하나의 행에 R(Red), G(Green) 2가지 컬러의 패턴 및 다른 행에 G(Green), B(Blue) 2가지 컬러의 패턴이 반복적으로 배치되는 베이어(Bayer) 패턴을 가진다. 이와 같이 가로 방향 및 세로 방향에서 교차되는 하나의 베이어 패턴만을 선택하고 나머지는 제거하여 해상도를 축소시키며, 이에 따라 처리되는 데이터량을 줄일 수 있다. 이와 같은 서브 샘플링의 경우 모든 프레임에 대해 항상 같은 픽셀 데이터만 선택하여 사용한다. 이에 따라 이미지 센서에서 샘플링되는 공간 주파수는 항상 동일하다.
종래의 서브 샘플링 모드에서, 서브 샘플링을 위하여 특정 행 및 열의 픽셀만 이용되며, 처리되는 데이터량은 줄일 수 있으나 공간적인 균일성을 확보할 수 없다. 즉, 이용되지 않고 버려지는 픽셀이 다수 존재하므로 디스플레이되는 영상에서 선 등의 부분이 계단 형태로 나타나는 엘리어싱(aliasing) 문제가 크게 발생한다. 베이어 컬러 필터를 사용하는 이미지 센서에서 4개의 픽셀 그룹을 단위로 서브 샘플링을 하는 경우 도 1에 도시된 바와 같이, 일부분에 배치된 픽셀만 선택되므로 공간적인 균일성을 확보하기 어렵다. 또한 만일 서브 샘플링을 하지 않거나 통상 1/2 이하 등 샘플링 비율이 낮은 경우에는 문제가 되지 않지만, 샘플링 비율이 높아지는 경우 공간주파수가 낮아져 프리뷰 영상 내에서 엘리어싱 현상 및 해상도 저하 현상이 심각해진다. 따라서 서브 샘플링 모드에서 프리뷰 영상에서 발생할 수 있는 엘리어싱 문제를 개선할 수 있는 방법이 요구된다. 또한, 샘플링 비율을 높게 설정해야 하는 경우에서도 엘리어싱 문제를 개선할 수 있는 방법이 요구된다.
따라서 본 발명은 서브 샘플링 모드에서 프리뷰 영상의 질을 개선하기 위한 장치 및 방법을 제공한다.
또한 본 발명은 서브 샘플링 모드에서 공간적인 균일성을 확보할 수 있도록 하는 프리뷰 영상의 품질 개선 장치 및 방법을 제공한다.
상기한 바를 달성하기 위한 본 발명은,영상 기기에서 프리뷰 영상의 화질을 개선하기 위한 방법에 있어서, 입력 영상의 프레임을 복수개의 서브 윈도우로 분할하는 과정과, 상기 분할된 서브 윈도우마다 하나의 픽셀 데이터를 선택하는 서브 샘플링을 수행하는 과정과, 상기 서브 샘플링을 통해 프리뷰 영상을 생성하는 과정을 포함하고, 상기 하나의 픽셀 데이터의 선택은 최초 제1색 픽셀 데이터를 기준으로 가로 방향으로는 상기 제1색, 제2색의 픽셀 데이터가 교대로 선택되는 것이며, 세로 방향으로는 상기 제1색, 제3색의 픽셀 데이터가 교대로 선택되는 것임을 특징으로 한다.
또한 본 발명은, 영상 기기에서 프리뷰 영상의 화질을 개선하기 위한 방법에 있어서, 입력 영상의 n번째 프레임에 대해 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하는 과정과, 상기 입력 영상의 n+1번째 프레임에 대해 상기 서브 윈도우를 1/2만큼 쉬프트한 지점을 기준으로 상기 쉬프트한 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하는 과정과, 상기 서브 샘플링된 n번째 프레임과 상기 n+1번째 프레임을 하나의 프레임으로 만드는 보간을 수행하는 과정과, 상기 보간된 프레임을 이용하여 프리뷰 영상을 생성하는 과정을 포함함을 특징으로 한다.
또한 본 발명은, 프리뷰 영상의 화질을 개선하기 위한 영상 기기에 있어서, 입력 영상의 프레임을 복수개의 서브 윈도우로 분할하고, 상기 분할된 서브 윈도우마다 하나의 픽셀 데이터를 선택하는 서브 샘플링을 수행하는 서브 샘플링부와, 상기 서브 샘플링부로부터 전달된 픽셀 데이터를 이용하여 프리뷰 영상을 생성하는 디스플레이부를 포함하고, 상기 하나의 픽셀 데이터의 선택은 최초 제1색 픽셀 데 이터를 기준으로 가로 방향으로는 상기 제1색, 제2색의 픽셀 데이터가 교대로 선택되는 것이며, 세로 방향으로는 상기 제1색, 제3색의 픽셀 데이터가 교대로 선택되는 것임을 특징으로 한다.
또한 본 발명은, 프리뷰 영상의 화질을 개선하기 위한 영상 기기에 있어서, 입력 영상의 n번째 프레임에 대해 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하며, 상기 입력 영상의 n+1번째 프레임에 대해 상기 서브 윈도우를 1/2만큼 쉬프트한 지점을 기준으로 상기 쉬프트한 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하는 서브 샘플링부와, 상기 서브 샘플링한 프레임들을 임시로 저장하는 버퍼 메모리와, 상기 버퍼 메모리에 임시로 저장된 상기 서브 샘플링된 n번째 프레임과 상기 n+1번째 프레임을 하나의 프레임으로 만드는 보간을 수행하는 보간부를 포함함을 특징으로 한다.
본 발명에 따르면, 공간적으로 고르게 픽셀을 선택함으로써 공간적인 균일성을 확보할 수 있어 엘리어싱 문제가 개선되는 이점이 있다. 이에 따라 프리뷰용 영상의 화질을 개선시킬 수 있는 효과가 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명한다. 또한, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다.
본 발명은 프리뷰용 영상의 화질을 개선하기 위한 방법을 제안한다. 이를 위해 본 발명은 공간적으로 균일하게 픽셀 데이터를 선택함으로써 프리뷰 영상의 사선 부분에서의 엘리어싱 현상을 개선한다. 이러한 공간적으로 균일한 픽셀 데이터를 선택하는 방법으로 본 발명에서는 2가지 방법을 제안한다.
따라서 이하에서 설명되는 본 발명의 상세한 설명에 기술된 본 발명의 실시 예들을 다음과 같이 분리하여 기술한다. 본 발명의 실시예에서는 제1행(row)은 G, R 픽셀이 교대로 배열되는 패턴을 가지며, 제2행은 B, G 픽셀이 교대로 배열되는 패턴을 가지며, 이에 따라 홀수행은 제1행의 반복 패턴을 가지고, 짝수행은 제2행의 반복 패턴을 가지는 2차원 행렬 형태의 n×m 픽셀들이 배열된 프레임이 이용된다. 이러한 프레임에서 제1행의 최초 픽셀은 R, G, 픽셀 중 어느 하나일 수 있으며, R, G, B 픽셀은 4개 종류의 패턴을 가질 수 있다.
상기와 같은 기본 프레임을 기준으로, 본 발명의 제1실시예에서는 서브 윈도우마다 하나씩의 픽셀 데이터를 선택하는 방법으로, 가로 방향에 대해서는 G, R 픽셀 데이터를 미리 정해진 규칙에 따라 교대로 선택하고, 세로 방향에 대해서는 B, G 픽셀 데이터를 같은 규칙에 따라 교대로 선택하여 프리뷰 영상을 생성하는 과정으로 이루어진다. 본 발명의 제2실시예에서는 하나의 프레임에서 서브 윈도우마다 베이어 패턴을 선택하고, 다음 프레임에서는 이전 프레임의 서브 윈도우의 1/2 만큼 쉬프트하여 각 쉬프트한 서브 윈도우마다 베이어 패턴을 선택한 후, 두 프레임을 보간하여 하나의 프리뷰 영상을 생성하는 과정으로 이루어진다.
상기한 바와 같은 기능이 구현된 영상 기기에서 프리뷰 영상의 화질 개선을 위한 방법을 살펴보기 위해 도 2를 참조한다. 도 2는 본 발명의 실시예에 따른 프리뷰 화질 개선을 위한 영상 기기의 내부 블록 구성도이다. 여기서, 영상 기기에는 카메라, 캠코더, 웹캠 등을 예로 들 수 있다.
먼저, 영상 기기에서 영상이 입력되면, 프리뷰 영상의 디스플레이를 위해 입력된 영상은 서브 샘플링부(200)로 전달된다. 서브 샘플링부(200)는 프리뷰 영상을 위해 입력 영상에 대해 필요한 픽셀 데이터만 선택하고 나머지는 삭제하는 방법으로 서브 샘플링을 수행한다. 본 발명의 제1실시예에 따르면, 입력 영상에 복수개의 서브 윈도우로 분할한 후 각 서브 윈도우마다 하나의 픽셀 데이터만을 선택함으로써 서브 샘플링을 수행한다.
이렇게 서브 샘플링된 영상의 화소값에는 내부적인 요인 또는 외부적인 요인으로 인해 노이즈가 포함되어 있고, 이 노이즈를 포함한 화소값을 이용하여 프리뷰 영상을 생성할 경우 실제 촬영 영상과는 차이가 있을 수 있으므로 보정이 되어야 한다. 이에 따라 상관 이중 샘플링부(Correlated Double Sampling: CDS)(210)에서는 서브 샘플링된 영상 즉, 선택된 픽셀 데이터에 대해 노이즈를 제거한다. 이렇게 노이즈가 제거된 영상의 각 픽셀 데이터는 아날로그 디지털 변환기(Analog Digital Converter: ADC)(220)에 의해 디지털 데이터로 변환된다. 이러한 디지털 데이터가 디스플레이부(250)로 입력되면, 디스플레이부(250)를 통해 프리뷰 영상이 디스플레이된다.
본 발명의 제2실시예에 따르면, 서브 샘플링부(200)는 n번째 프레임에서는 각 서브 윈도우마다 하나씩의 베이어 패턴을 선택하고, n+1번째 프레임에서는 각 서브 윈도우의 1/2 지점만큼 시작 위치를 쉬프트한 지점에서 하나씩의 베이어 패턴을 선택한다. 이때, n+1번째 프레임에 대한 서브 샘플링을 하기 이전에 서브 샘플링된 n번째 프레임은 버퍼 메모리(240)에 임시 저장된다. n+1번째 프레임에 대한 서브 샘플링이 완료되면, 보간부(230)는 n+1번째 프레임과 버퍼 메모리(240)에 임시 저장된 n번째 프레임을 하나의 프레임으로 만든다.
구체적으로, 보간부(230)는 n번째 프레임에서 선택된 픽셀들과 n+1번째 프레임에서 선택된 픽셀들이 서로 겹치지 않도록 하나의 프레임으로 만든 후 보간한다. 이에 따라 서브 샘플링부(200)로 입력되는 프레임 개수와 보간부(230)로부터 출력된 프레임 개수는 동일하지만, 공간적으로 균일할 뿐만 아니라 기존에 비해 2배로 얻은 픽셀 데이터를 이용하므로 프리뷰 영상의 질이 향상되게 된다. 즉, 선택된 2배의 픽셀 데이터를 이용하여 보간을 수행하며, 이렇게 만들어진 프리뷰 영상의 공간 주파수는 기존에 비해 낮은 공간 주파수를 가지므로 엘리어싱 현상 및 잘못된 컬러(false color) 현상 및 선명도 저하 현상을 개선할 수 있다. 만일 보간 시에 사용되는 프레임 개수를 증가시킬 경우 공간주파수는 더 낮아져서 프리뷰 영상의 화질은 더욱 개선될 수 있다.
이러한 보간을 통해 서브 샘플링부(200)로 입력되는 프레임 개수와 동일한 개수의 프리뷰 보간된 영상이 디스플레이부(250)로 입력되며, 이에 따라 디스플레이부(250)를 통해 프리뷰 보간된 영상이 디스플레이된다.
상기와 같은 구성을 가지는 영상 기기에서의 동작을 도 3을 참조하여 설명하기로 한다. 도 3은 본 발명의 제1실시예에 따른 영상 기기의 동작 흐름도이다. 이 하에서는 본 발명의 제1실시예에 대한 이해를 돕기 위해 도 4를 예시하여 설명한다.
도 3을 참조하면, 영상 기기는 300단계에서 영상이 입력되면 305단계에서 입력 영상의 한 프레임을 복수개의 서브 윈도우로 분할한다. 그리고나서 310단계에서 각 서브 윈도우마다 하나의 픽셀 데이터를 선택한다. 315단계에서 픽셀 데이터 선택이 완료되면 320단계에서 선택된 픽셀 데이터를 이용하여 프리뷰 영상을 생성한 후 그 생성된 프리뷰 영상을 디스플레이한다.
도 4는 제1행은 G, R 픽셀이 교대로 배열되는 패턴을 가지며, 제2행은 B, G 픽셀이 교대로 배열되는 패턴을 가지며, 이에 따라 홀수행은 제1행의 반복 패턴을 가지고, 짝수행은 제2행의 반복 패턴을 가지는 2차원 행렬 형태의 n×m 픽셀들이 배열된 입력 영상의 한 프레임을 예시하고 있다. 구체적으로, 도 4에서는 이러한 입력 영상의 한 프레임에서 가로 1/4, 세로 1/4 서브 샘플링에 따라 서브 윈도우(430)가 16개 존재하며, 그 서브 윈도우마다 하나씩의 픽셀 데이터(400, 405, 410, 415, 420, 425, ...)이 선택되는 경우를 예시하고 있다. 즉, 1/4 해상도로 서브 샘플링하는 경우를 예시한 것이며, 서브 윈도우의 분할은 1/n 해상도에 따라 결정된다.
이러한 도 4를 참조하면, 기존에는 베이어 패턴 단위로 픽셀 데이터 선택이 이루어졌으나, 본 발명의 제1실시예에서는 하나의 픽셀 단위로 픽셀 데이터 선택이 이루어진다. 이러한 프레임에서 제1열의 최초 픽셀인 G 화소(405)를 기준으로 가로 방향에 대해서는 R(410), G(415) 픽셀이 교대로 선택되며, 세로 방향으로는 B(420), G(425) 픽셀이 교대로 선택된다. 이때, 가로 방향의 R(410) 픽셀은 최초 픽셀인 G 화소를 기준으로 5번째 픽셀이며, 세로 방향의 B(420) 픽셀도 최초 픽셀인 G 화소를 기준으로 5번째 픽셀이다. 또한 가로 방향의 G(415) 픽셀은 R(410) 픽셀을 기준으로 3번째 픽셀이며, 세로 방향의 G(425) 픽셀도 B(420) 픽셀을 기준으로 3번째 픽셀이다.
따라서 이러한 픽셀 데이터 선택의 규칙성을 보면, 1/n 해상도로 서브 샘플링하는 경우 최초 픽셀인 G 화소를 기준으로 다음 R(410) 픽셀은 n+1번째이며, 그 다음 G(415) 픽셀은 R(410) 픽셀을 기준으로 n-1번째임을 알 수 있다. 여기서, n은 정수이다. 마찬가지로 세로 방향의 B(420) 픽셀도 최초 픽셀인 G(405) 화소를 기준으로 n+1번째이며, 다음 G(425) 픽셀은 B(420) 픽셀 기준으로 n-1번째임을 알 수 있다. 이러한 규칙성에 따라 도 4에 도시된 바와 같이 입력 영상에 대한 하나의 프레임에서 공간적으로 균일하게 선택된 픽셀 데이터가 배치되어 있음을 알 수 있다. 이에 따라 입력 영상에 대해 서브 샘플링 모드에서 공간적으로 균일하게 픽셀 데이터를 샘플링할 수 있어, 프리뷰 영상에서 발생하는 엘리어싱 현상을 개선하는 효과가 있다.
한편, 도 5는 본 발명의 제2실시예에 따른 영상 기기의 동작 흐름도이다. 이하에서는 본 발명의 제2실시예에 대한 이해를 돕기 위해 도 6a 내지 도 6c를 예시하여 설명한다.
도 5를 참조하면, 영상 기기는 500단계에서 영상을 입력받는다. 305단계에서 입력된 영상에 대한 프레임이 n번째 프레임일 경우 그 n번째 프레임에서 베이어 패 턴을 선택한다. 여기서, 도 1에서와 마찬가지로 한 행에 R, G 2가지의 컬러의 패턴 및 다른 행에 G, B 2가지 컬러의 패턴이 반복적으로 배치된 4개의 픽셀로 이루어진 패턴이 기본 베이어 패턴이다. 이와 같이 n번째 프레임에서는 도 6a에 도시된 바와 같이 기본 베이어 패턴 단위로 픽셀 데이터 선택이 이루어진다. 그리고나서 이러한 n번째 프레임은 버퍼 메모리(240)에 임시로 저장된다.
이어, 510단계에서 n+1번째 프레임이 입력되면 각 서브 윈도우의 1/2지점을 기준으로 베이어 패턴 선택이 수행된다. 도 6b를 참조하면, 제1행의 첫번째 베이어 패턴을 기준으로 했을 때 서브 윈도우의 1/2만큼 쉬프트한 위치를 시작 지점으로 한 베이어 패턴 선택이 수행된다. 이러한 n+1번째 프레임도 버퍼 메모리(240)에 임시로 저장된다. 이와 같이 각각의 프레임에 대한 베이어 패턴 선택이 완료되면 연속하는 두 프레임을 하나의 프레임으로 만드는 보간 동작을 수행하게 된다.
이에 따라 515단계에서 도 6a에서와 같은 n번째 프레임과 도 6b에서와 같은 n+1번째 프레임을 보간한다. 다시 말하면, n번째 프레임에서 선택된 베이어 패턴과 n+1번째 프레임에서 선택된 베이어 패턴을 합하면 도 6c에서와 같은 프리뷰 보간된 영상을 얻을 수 있다. 그리고나서 520단계에서 입력 영상의 프레임 수와 보간된 프레임 수가 같을 경우 샘플링이 완료되었다고 인지하여 525단계에서 프리뷰 영상을 생성한 후 디스플레이한다. 여기서, 본 발명의 제2실시예에 따르면, n번째 프레임과 n+1번째 프레임을 합하여 하나의 프레임으로 만들기 때문에, 입력 프레 임수와 출력 프레임 수 즉, 입력 영상의 프레임 수와 보간된 프레임 수는 동일하나, 프리뷰 영상의 공간주파수는 반으로 줄어든 효과를 가지므로 화질은 더욱 좋아지게 되 는 효과를 얻을 수 있다.
도 7은 본 발명에서 제안된 방법을 적용한 결과를 비교하기 위한 프리뷰 영상을 예시하고 있다. 도 7의 첫번째 영상은 기존의 서브샘플링에 따른 프리뷰 영상을 예시하며, 두번째 영상은 원본 영상을 예시하며, 세번째 영상은 본 발명이 적용된 프리뷰 영상을 예시하고 있다. 이러한 각 영상을 비교해보면, 첫번째 영상의 경우 원본 영상의 도면부호 710에 의해 지시되는 선 부분과 비교해보았을 때, 도면부호 700에 의해 지시되는 바와 같이 선 부분이 끊어지는 엘리어싱 현상을 발생하게 된다. 이에 반해 본 발명이 적용된 프리뷰 영상의 경우 도면부호 720에 의해 지시되는 바와 같이 선 부분이 끊어지는 엘리어싱 현상이 매우 개선되었음을 알 수 있다.
도 1은 종래의 프리뷰 영상을 생성하기 위한 서브샘플링 방법을 예시한 도면,
도 2는 본 발명의 실시예에 따른 프리뷰 화질 개선을 위한 영상 기기의 내부 블록 구성도,
도 3은 본 발명의 제1실시예에 따른 영상 기기의 동작 흐름도,
도 4는 본 발명의 제1실시예에 따른 서브샘플링 방법을 설명하기 위한 예시도,
도 5는 본 발명의 제2실시예에 따른 영상 기기의 동작 흐름도,
도 6a 내지 도 6c는 본 발명의 제2실시예에 따른 서브샘플링 방법을 설명하기 위한 예시도,
도 7은 본 발명에서 제안된 방법을 적용한 결과를 비교하기 위한 프리뷰 영상 예시도.

Claims (16)

  1. 영상 기기에서 프리뷰 영상의 화질을 개선하기 위한 방법에 있어서,
    입력 영상의 프레임을 복수개의 서브 윈도우로 분할하는 과정과,
    상기 분할된 서브 윈도우마다 하나의 픽셀 데이터를 선택하는 서브 샘플링을 수행하는 과정과,
    상기 서브 샘플링을 통해 프리뷰 영상을 생성하는 과정을 포함하고,
    상기 하나의 픽셀 데이터의 선택은 최초 제1색 픽셀 데이터를 기준으로 가로 방향으로는 상기 제1색, 제2색의 픽셀 데이터가 교대로 선택되는 것이며, 세로 방향으로는 상기 제1색, 제3색의 픽셀 데이터가 교대로 선택되는 것임을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  2. 제1항에 있어서, 상기 입력 영상의 프레임은,
    제1행(row)은 그린(Green) 픽셀 데이터, 레드(Red) 픽셀 데이터가 교대로 배열되는 패턴을 가지며, 제2행은 블루(Blue) 픽셀 데이터, 그린(Green) 픽셀 데이터가 교대로 배열되는 패턴을 가지며, 홀수행은 상기 제1행의 반복 패턴을 가지고, 짝수행은 상기 제2행의 반복 패턴을 가지는 2차원 행렬 형태의 n×m 픽셀들이 배열된 프레임인 것을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  3. 제1항에 있어서,
    상기 제1색의 픽셀 데이터는 그린(Green) 픽셀 데이터이며, 상기 제2색의 픽셀 데이터는 레드(Red) 픽셀 데이터이며, 상기 제3색의 픽셀 데이터는 블루(Blue) 픽셀 데이터인 것을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  4. 제3항에 있어서,
    1/n 해상도로 서브 샘플링하는 경우 상기 서브 윈도우의 분할은 상기 1/n 해상도에 따라 결정되며, 상기 가로 방향으로 선택되는 레드 픽셀 데이터 및 상기 세로 방향으로 선택되는 블루 픽셀 데이터는 상기 그린 픽셀 데이터를 기준으로 n+1번째인 픽셀 데이터가 선택되는 것이며, 상기 가로 방향 및 세로 방향의 다음 그린 픽셀 데이터는 각각 상기 선택된 레드 픽셀 데이터 및 상기 선택된 블루 픽셀 데이터를 기준으로 n-1번째 픽셀 데이터인 것을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  5. 제1항에 있어서, 상기 서브 샘플링을 통해 프리뷰 영상을 생성하는 과정은,
    상기 서브 샘플링된 픽셀 데이터의 노이즈를 제거하는 과정과,
    상기 노이즈 제거된 픽셀 데이터를 디지털 변환하여 상기 프리뷰 영상을 생 성하는 과정임을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  6. 영상 기기에서 프리뷰 영상의 화질을 개선하기 위한 방법에 있어서,
    입력 영상의 n번째 프레임에 대해 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하는 과정과,
    상기 입력 영상의 n+1번째 프레임에 대해 상기 서브 윈도우를 1/2만큼 쉬프트한 지점을 기준으로 상기 쉬프트한 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하는 과정과,
    상기 서브 샘플링된 n번째 프레임과 상기 n+1번째 프레임을 하나의 프레임으로 만드는 보간을 수행하는 과정과,
    상기 보간된 프레임을 이용하여 프리뷰 영상을 생성하는 과정을 포함함을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  7. 제6항에 있어서, 상기 베이어 패턴은,
    하나의 행에 레드, 그린 컬러의 패턴 및 다른 행에 그린(Green), 블루 컬러의 패턴이 반복적으로 배치된 4개의 픽셀 데이터로 이루어진 패턴인 것을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  8. 제6항에 있어서,
    상기 서브 샘플링한 프레임들을 버퍼에 임시로 저장하는 과정을 더 포함함을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  9. 제8항에 있어서, 상기 보간을 수행하는 과정은,
    상기 버퍼에 임시로 저장된 연속된 2개의 프레임을 하나의 프레임으로 만드는 과정임을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 방법.
  10. 프리뷰 영상의 화질을 개선하기 위한 영상 기기에 있어서,
    입력 영상의 프레임을 복수개의 서브 윈도우로 분할하고, 상기 분할된 서브 윈도우마다 하나의 픽셀 데이터를 선택하는 서브 샘플링을 수행하는 서브 샘플링부와,
    상기 서브 샘플링부로부터 전달된 픽셀 데이터를 이용하여 프리뷰 영상을 생성하는 디스플레이부를 포함하고,
    상기 하나의 픽셀 데이터의 선택은 최초 제1색 픽셀 데이터를 기준으로 가로 방향으로는 상기 제1색, 제2색의 픽셀 데이터가 교대로 선택되는 것이며, 세로 방향으로는 상기 제1색, 제3색의 픽셀 데이터가 교대로 선택되는 것임을 특징으로 하 는 프리뷰 영상의 화질을 개선하기 위한 영상 기기.
  11. 제10항에 있어서,
    상기 제1색의 픽셀 데이터는 그린(Green) 픽셀 데이터이며, 상기 제2색의 픽셀 데이터는 레드(Red) 픽셀 데이터이며, 상기 제3색의 픽셀 데이터는 블루(Blue) 픽셀 데이터인 것을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 영상 기기.
  12. 제10항에 있어서,
    1/n 해상도로 서브 샘플링하는 경우 상기 서브 윈도우의 분할은 상기 1/n 해상도에 따라 결정되며, 상기 가로 방향으로 선택되는 레드 픽셀 데이터 및 상기 세로 방향으로 선택되는 블루 픽셀 데이터는 상기 그린 픽셀 데이터를 기준으로 n+1번째인 픽셀 데이터가 선택되는 것이며, 상기 가로 방향 및 세로 방향의 다음 그린 픽셀 데이터는 각각 상기 선택된 레드 픽셀 데이터 및 상기 선택된 블루 픽셀 데이터를 기준으로 n-1번째 픽셀 데이터인 것을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 영상 기기.
  13. 상기 서브 샘플링된 픽셀 데이터의 노이즈를 제거하는 상관 이중 샘플링부와,
    상기 노이즈 제거된 픽셀 데이터를 디지털 변환하는 아날로그 디지털 변환부를 더 포함함을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 영상 기기.
  14. 프리뷰 영상의 화질을 개선하기 위한 영상 기기에 있어서,
    입력 영상의 n번째 프레임에 대해 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하며, 상기 입력 영상의 n+1번째 프레임에 대해 상기 서브 윈도우를 1/2만큼 쉬프트한 지점을 기준으로 상기 쉬프트한 서브 윈도우마다 베이어 패턴을 선택하는 서브 샘플링을 수행하는 서브 샘플링부와,
    상기 서브 샘플링한 프레임들을 임시로 저장하는 버퍼 메모리와,
    상기 버퍼 메모리에 임시로 저장된 상기 서브 샘플링된 n번째 프레임과 상기 n+1번째 프레임을 하나의 프레임으로 만드는 보간을 수행하는 보간부를 포함함을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 영상 기기.
  15. 제14항에 있어서, 상기 베이어 패턴은,
    하나의 행에 레드, 그린 컬러의 패턴 및 다른 행에 그린(Green), 블루 컬러의 패턴이 반복적으로 배치된 4개의 픽셀 데이터로 이루어진 패턴인 것을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 영상 기기.
  16. 제14항에 있어서,
    상기 보간부를 통해 보간됨으로써 생성된 프리뷰 영상을 디스플레이하는 디스플레이부를 더 포함함을 특징으로 하는 프리뷰 영상의 화질을 개선하기 위한 영상 기기.
KR1020090113868A 2009-11-24 2009-11-24 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법 KR101623591B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090113868A KR101623591B1 (ko) 2009-11-24 2009-11-24 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090113868A KR101623591B1 (ko) 2009-11-24 2009-11-24 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20110057453A true KR20110057453A (ko) 2011-06-01
KR101623591B1 KR101623591B1 (ko) 2016-05-23

Family

ID=44393087

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090113868A KR101623591B1 (ko) 2009-11-24 2009-11-24 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101623591B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9986189B2 (en) 2016-01-04 2018-05-29 Samsung Electronics Co., Ltd. Pixel sensors and imaging devices for providing multiple sub sample images within a single frame

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1000505A2 (en) 1998-05-26 2000-05-17 Koninklijke Philips Electronics N.V. Solid-state imaging device
KR100871687B1 (ko) 2004-02-11 2008-12-05 삼성전자주식회사 서브 샘플링 모드에서 디스플레이 품질을 개선한 고체촬상 소자 및 그 구동 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9986189B2 (en) 2016-01-04 2018-05-29 Samsung Electronics Co., Ltd. Pixel sensors and imaging devices for providing multiple sub sample images within a single frame

Also Published As

Publication number Publication date
KR101623591B1 (ko) 2016-05-23

Similar Documents

Publication Publication Date Title
JP2551629B2 (ja) 撮像装置
US8836813B2 (en) Image processing device and image processing method
JP3164481B2 (ja) 撮像装置
US20110013033A1 (en) Still image and moving image capturing device
US20100053356A1 (en) Imaging Device And Video Signal Generating Method Employed In Imaging Device
CN104170376A (zh) 图像处理设备、成像装置、图像处理方法及程序
JP3942569B2 (ja) 撮像装置および画像データの変換方法
KR100873880B1 (ko) 화상 처리 장치 및 화상 처리 방법
JP4600315B2 (ja) カメラ装置の制御方法及びこれを用いたカメラ装置
US20020063787A1 (en) Color solid-state imaging apparatus
JP5084430B2 (ja) 撮像ユニット
KR101643773B1 (ko) 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법
US20030117525A1 (en) Method for outputting video images in video monitoring system
KR101623591B1 (ko) 프리뷰 영상의 화질을 개선하기 위한 장치 및 방법
JP4537825B2 (ja) 画素配列装置、固体撮像装置及びカメラ
JP2015061178A (ja) 撮像システム、撮像システムの駆動方法、撮像装置、撮像装置の駆動方法
JP5705027B2 (ja) 画像処理装置、画像処理装置の制御方法、およびプログラム、並びに記録媒体
US8130299B2 (en) Method of performing interlaced preview for a CMOS sensor
US6266101B1 (en) Y/C separator
JP2005191943A (ja) 固体撮像装置およびこれを備えたカメラ
JP2005006078A (ja) 撮像装置
JP3581457B2 (ja) 撮像装置
JP4334788B2 (ja) 撮像装置及びそれを用いたテレビカメラ
JP4253095B2 (ja) 画像データ・フィルタリング装置および方法
JP4059837B2 (ja) 静止画カラーカメラ装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee