KR100652408B1 - 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치 - Google Patents

베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치 Download PDF

Info

Publication number
KR100652408B1
KR100652408B1 KR1020050034913A KR20050034913A KR100652408B1 KR 100652408 B1 KR100652408 B1 KR 100652408B1 KR 1020050034913 A KR1020050034913 A KR 1020050034913A KR 20050034913 A KR20050034913 A KR 20050034913A KR 100652408 B1 KR100652408 B1 KR 100652408B1
Authority
KR
South Korea
Prior art keywords
pixel
current pixel
information signal
threshold
current
Prior art date
Application number
KR1020050034913A
Other languages
English (en)
Other versions
KR20060112449A (ko
Inventor
티모페이 우바로프
이형근
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020050034913A priority Critical patent/KR100652408B1/ko
Priority to US11/411,471 priority patent/US7671909B2/en
Priority to CN2006100898778A priority patent/CN1893618B/zh
Publication of KR20060112449A publication Critical patent/KR20060112449A/ko
Application granted granted Critical
Publication of KR100652408B1 publication Critical patent/KR100652408B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C1/00—Dental machines for boring or cutting ; General features of dental machines or apparatus, e.g. hand-piece design
    • A61C1/08—Machine parts specially adapted for dentistry
    • A61C1/088—Illuminating devices or attachments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration by the use of local operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C3/00—Dental tools or instruments
    • A61C3/02—Tooth drilling or cutting instruments; Instruments acting like a sandblast machine
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21—LIGHTING
    • F21V—FUNCTIONAL FEATURES OR DETAILS OF LIGHTING DEVICES OR SYSTEMS THEREOF; STRUCTURAL COMBINATIONS OF LIGHTING DEVICES WITH OTHER ARTICLES, NOT OTHERWISE PROVIDED FOR
    • F21V33/00—Structural combinations of lighting devices with other articles, not otherwise provided for
    • F21V33/0064—Health, life-saving or fire-fighting equipment
    • F21V33/0068—Medical equipment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/309—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using white LEDs
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21—LIGHTING
    • F21W—INDEXING SCHEME ASSOCIATED WITH SUBCLASSES F21K, F21L, F21S and F21V, RELATING TO USES OR APPLICATIONS OF LIGHTING DEVICES OR SYSTEMS
    • F21W2131/00—Use or application of lighting devices or systems not provided for in codes F21W2102/00-F21W2121/00
    • F21W2131/20—Lighting for medical use
    • F21W2131/202—Lighting for medical use for dentistry

Abstract

베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및 장치가 개시된다. 상기 영상 신호 처리 장치에서는, BP 검출기가 입력 영상 데이터로부터 이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이를 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호를 생성하고, 이에 따라 보간기는 상기 픽셀 정보 신호에 따라 나쁜 픽셀에 대하여는 이웃 픽셀 데이터를 이용하여 보간하여 보간된 데이터로 대체한다.

Description

베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및 장치{Method and apparatus for processing Bayer-pattern color digital image signal}
본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 간단한 설명이 제공된다.
도 1은 일반적인 고체 촬상 소자를 나타내는 블록도이다.
도 2는 베이어 패턴 픽셀 어레이를 나타내는 도면이다.
도 3은 일반적인 영상 신호 처리 시스템을 나타내는 블록도이다.
도 4는 본 발명의 일실시예에 따른 영상 신호 처리 장치를 나타내는 블록도이다.
도 5는 도 4의 BP(Bad Pixel) 검출기를 구체적으로 나타내는 블록도이다.
도 6은 도 5의 BP 검출기의 동작 설명을 위한 흐름도이다.
도 7a는 현재 픽셀 G에서의 이웃 픽셀과의 차이를 설명하기 위한 도면이다.
도 7b는 현재 픽셀 R에서의 이웃 픽셀과의 차이를 설명하기 위한 도면이다.
도 8은 현재 픽셀 값에 대한 평균과의 관계에서 사람이 인지할 수 있는 영역과 없는 영역을 나타내는 그래프이다.
도 9는 에지 근처에서 검출되지 않은 BP에 의한 결과를 예시하는 도면이다.
도 10은 도 5의 BP 검출기에 옵션으로 추가될 수 있는 에지/라인 체크 유니 트를 나타내는 블록도이다.
도 11a는 GN(Good Neighbor)이 현재 픽셀의 좌, 좌상, 및 상측에 있는 경우를 예시하는 도면이다.
도 11b는 GN이 현재 픽셀의 좌, 좌상, 및 좌하측에 있는 경우를 예시하는 도면이다.
도 11c는 GN이 현재 픽셀의 상, 좌상, 및 하측에 있는 경우를 예시하는 도면이다.
도 12는 도 4의 보간기를 구체적으로 나타내는 블록도이다.
본 발명은 디지털 영상 신호 처리 장치에 관한 것으로, 특히 고체 촬상 소자(solid state image sensing device)에서 생성되는 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및 장치에 관한 것이다.
도 1은 일반적인 고체 촬상 소자(100)를 나타내는 블록도이다. 도 1을 참조하면, 상기 고체 촬상 소자(100)는 APS(active pixel sensor) 어레이(110), 로우(row) 드라이버(120), 및 아날로그-디지털 변환부(analog-digital converter)(130)를 구비한다. 이외에 상기 고체 촬상 소자(100)는 로우 드라이버(120) 및 아날로그-디지털 변환부(130) 제어를 위한 타이밍제어 신호들과 APS 어레이(110) 각 픽셀의 선택 및 APS 어레이(110)에서 감지된 영상신호의 출력을 위한 어드레싱 (addressing) 신호들을 생성하는 콘트롤부(미도시)를 구비한다. 통상적으로 칼라 고체 촬상 소자에서는, 도 2와 같이, APS 어레이(110)를 이루는 각 픽셀 상부에 특정 컬러의 빛만 받아들이도록 컬러 필터(color filter)를 설치하는데, 색 신호를 구성하기 위하여 적어도 3 가지 종류의 컬러 필터를 배치한다. 가장 일반적인 컬러 필터 어레이는 한 행에 R(red), G(green) 2 가지 컬러의 패턴, 및 다른 행에 G(green), B(blue) 2 가지 컬러의 패턴이 반복적으로 배치되는 베이어(Bayer) 패턴을 가진다. 이때, 휘도 신호와 밀접한 관련이 있는 G(green)는 모든 행에 배치되고, R(red) 컬러, B(blue) 컬러는 각 행마다 엇갈리게 배치되어 휘도 해상도를 높인다. 휴대폰 카메라, 디지털 스틸 카메라 등에는 해상도를 높이기 위하여 APS 어레이(110)로서 100만 픽셀 이상의 많은 픽셀을 배열한 CIS/CCD(CMOS Image Sensor/Charge-Coupled Device)가 적용되어 있다.
이와 같은 베이어 패턴 픽셀 구조를 가지는 고체 촬상 소자(100)에서, 상기 APS 어레이(110)는 광소자(photodiode)를 이용하여 빛을 감지하여 전기적 신호로 변환하여 영상신호를 생성한다. 상기 APS 어레이(110)에서 출력되는 영상신호는 R(red), G(green), B(blue) 3색의 아날로그 신호이다. 상기 아날로그-디지털 변환부(130)는 상기 APS 어레이(110)에서 출력되는 아날로그 영상신호를 받아 디지털 신호로 변환한다.
도 3은 일반적인 영상 신호 처리 시스템(300)을 나타내는 블록도이다. 도 3을 참조하면, 상기 영상 신호 처리 시스템(300)은 고체 촬상 소자(310), 영상 신호 처리기(320) 및 표시 장치(330)를 구비한다. 상기 고체 촬상 소자(310)에서 출력되 는 디지털 영상 신호(R, G, B)는 상기 영상 신호 처리기(320)에서 처리된 후 LCD(liquid crystal display)와 같은 표시 장치(330)로 출력된다. 상기 고체 촬상 소자(310)에 의하여 생성된 각 픽셀 데이터 자체에 의하여 디스플레이 하는 경우에 영상에는 많은 왜곡이 나타나고 화질(visual quality)이 좋지 않을 수 있다. 상기 영상 신호 처리기(320)는, 상기 고체 촬상 소자에 의하여 생성된 각 픽셀 데이터를 소정 스킴(scheme)으로 보간(interpolation)하여 표시 장치(330)로 출력함으로써, 화질이 개선될 수 있도록 한다.
그러나, 휴대폰 카메라, 디지털 스틸 카메라와 같은 영상 신호 처리 시스템에 적용되는 베이어 APS 어레이 출력은 아직도 왜곡이 충분히 보상(correction)되지 않고 있는 문제점이 있다. 개선되어야 할 왜곡 현상으로는 에지(edge)에서의 엘리어싱(aliasing), 컬러 모아레(moire), 상세하게 표시하지 못하가나 번짐(lost of detail/blurring) 발생(occurrence), 잘못된(false/pseudo) 컬러 발생 등이 있다. 이러한 왜곡 현상은 이른바 나쁜 픽셀(BP:Bad Pixel)이 보간된 데이터로 대체(replacement)되는 과정에서, 라인(line) 또는 에지와 같은 고주파 영역이 적절하게 보간되지 않아 발생할 수 있으며, 특히, BP들은 백색(white) 또는 흑색(black)의 껌뻑거림(spot)을 일으킬 수도 있다.
따라서, 본 발명이 이루고자하는 기술적 과제는, 베이어 패턴의 디지털 컬러 영상 신호를 새로운 스킴으로 처리하여 표시장치에 고품질의 영상이 디스플레이 될 수 있도록 하는 영상 신호 처리 방법을 제공하는 데 있다.
본 발명이 이루고자하는 다른 기술적 과제는, 베이어 패턴의 디지털 컬러 영상 신호에서 BP를 검출하고 검출된 BP를 보간하는 영상 신호 처리 장치를 제공하는 데 있다.
상기의 기술적 과제를 달성하기 위한 본 발명에 따른 영상 신호 처리 방법은, 입력 영상 데이터를 수신하는 단계; 이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이들을 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호를 생성하는 단계; 및 상기 픽셀 정보 신호에 따라 나쁜 픽셀에 대하여는 이웃 픽셀 데이터를 이용하여 보간하는 단계를 구비하는 것을 특징으로 한다.
상기 픽셀 정보 신호 생성 단계는 상기 차이 절대치들 중 최소와 제1 임계치 및 제2 임계치를 비교하여 상기 픽셀 정보 신호를 결정하는 단계; 및 상기 최소가 상기 제1 임계치와 상기 제2 임계치 사이에 있는 경우에, 현재 픽셀 주위의 평균 변화를 반영한 제3 임계치를 기반으로 상기 픽셀 정보 신호를 결정하는 단계를 포함하는 것을 특징으로 한다. 상기 픽셀 정보 신호 생성 단계는 적어도 하나의 이웃 픽셀에서의 평균 변화와 상기 현재 픽셀 주위의 평균 변화를 비교하여 상기 픽셀 정보 신호를 결정하는 단계를 더 포함하는 것을 특징으로 한다.
상기의 다른 기술적 과제를 달성하기 위한 본 발명에 따른 영상 신호 처리 장치는, BP 검출기, 및 보간기를 구비하는 것을 특징으로 한다. 상기 BP 검출기는 입력 영상 데이터로부터 이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이들을 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호를 생성 한다. 상기 보간기는 상기 픽셀 정보 신호에 따라 나쁜 픽셀에 대하여는 이웃 픽셀 데이터를 이용하여 보간한다.
상기 BP 검출기는, 문턱 체크부, 평균 변화 체크부 및 일관성 체크부를 포함하는 것을 특징으로 한다. 상기 문턱 체크부는 상기 차이 절대치들 중 최소와 제1 임계치 및 제2 임계치를 비교하여 상기 픽셀 정보 신호를 결정한다. 상기 평균 변화 체크부는 상기 최소가 상기 제1 임계치와 상기 제2 임계치 사이에 있는 경우에, 현재 픽셀 주위의 평균 변화를 반영한 제3 임계치를 기반으로 상기 픽셀 정보 신호를 결정한다. 상기 일관성 체크부는 적어도 하나의 이웃 픽셀에서의 평균 변화와 상기 현재 픽셀 주위의 평균 변화를 비교하여 상기 픽셀 정보 신호를 결정한다.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 보다 상세하게 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 4는 본 발명의 일실시예에 따른 영상 신호 처리 장치(400)를 나타내는 블록도이다. 도 4를 참조하면, 상기 영상 신호 처리 장치(400)는 BP(Bad Pixel) 검출기(410) 및 보간기(interpolator)(420)를 구비한다.
상기 영상 신호 처리 장치(400)는 휴대폰 카메라, 디지털 스틸 카메라와 같은 영상 신호 처리 시스템에 적용될 수 있다. 상기 영상 신호 처리 장치(400)는 CIS/CCD(CMOS Image Sensor/Charge-Coupled Device)를 적용한 고체 촬상 소자에서 출력되는 디지털 영상 데이터(R, G, B)를 처리하여 신호 왜곡을 보상(compensation)함으로써, 고품질의 영상이 디스플레이 될 수 있도록 한다.
상기 BP 검출기(410)는 입력 영상 데이터로부터 이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이들을 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호(PIS)를 생성한다. 상기 입력 영상 데이터는 고체 촬상 소자에서 출력되는 베이어 패턴의 R(Red), G(Green), 및 B(Blue) 디지털 데이터일 수 있다. 상기 보간기(420)는 상기 픽셀 정보 신호(PIS)에 따라 나쁜 픽셀에 대하여는 이웃 픽셀 데이터를 이용하여 보간한다.
도 5는 도 4의 BP 검출기(410)를 구체적으로 나타내는 블록도이다. 도 5를 참조하면, 상기 BP 검출기(410)는 문턱(threshold) 체크부(460), 평균 변화(average variance) 체크부(470) 및 일관성(consistency) 체크부(480)를 포함한다. 상기 BP 검출기(410)의 동작 설명을 위하여 도 6의 흐름도가 참조된다.
도 5에서, 상기 문턱 체크부(460)는 최소 차이(minimal difference) 계산부(461) 및 제1 결정부(462)를 포함한다. 예를 들어, 상기 최소 차이 계산부(461)는 도 7a 또는 도 7b와 같은 베이어 패턴의 5×5 윈도우 데이터를 수신한다(도 6의 S10). 5×5 윈도우 데이터는 도 2와 같은 베이어 패턴의 디지털 데이터이고, 상기 최소 차이 계산부(461)는 현재 처리될 중심 픽셀(이하 현재 픽셀이라 함)을 적어도 한 픽셀씩 이동시키면서 각 현재 픽셀 데이터 R, G, 또는 B에 대하여 좋은 픽셀인지 나쁜 픽셀인지를 결정하기 위한 MINDIFF를 계산한다. 예를 들어, 도 7a는 현재 픽셀 G 주위의 5×5 윈도우 데이터를 나타내고, 도 7b는 현재 픽셀 R 주위의 5×5 윈도우 데이터를 나타낸다. 현재 픽셀 B 주위의 5×5 윈도우 데이터도 도 7b와 같은 방법으로 수신된다.
5×5 윈도우 데이터가 수신되면, 상기 최소 차이 계산부(461)는 상기 입력 영상 데이터로부터 이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이들을 계산하고, [수학식 1]과 같이 상기 차이들로부터 상기 차이 절대치들 중 최소 MINDIFF를 구한다(도 6의 S11). [수학식 1]에서, RAW[i]는 이웃 픽셀 데이터, CPV는 현재 픽셀 데이터, ABS()는 절대치를 나타낸다.
[수학식 1]
MINDIFF = min{ABS(RAW[i] - CPV)}
상기 이웃 픽셀 데이터는 현재 픽셀로부터 서로 다른 방향으로 가장 가까운 동색 픽셀들의 데이터이다. 예를 들어, 도 7a와 같이 현재 픽셀 G에 대하여는, 상기 이웃 픽셀 데이터는 P22와 동색 픽셀들인 P02, P11, P20, P31, P42, P33, P24, 및 P13이다. 도 7b와 같이 중심 픽셀 R에 대하여는, 상기 이웃 픽셀 데이터는 P22와 동색 픽셀들인 P02, P00, P20, P40, P42, P44, P24, 및 P04이다. 현재 픽셀 B에 대한 상기 이웃 픽셀 데이터는 현재 픽셀 R에서와 같은 방법으로 참조된다.
상기 제1 결정부(462)는 상기 최소 차이 계산부(461)에서 계산된 상기 최소 차이 절대치 MINDIFF와 제1 임계치(TDIFF) 및 제2 임계치(BDIFF)를 비교하여, 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호(PIS)를 생성한다. 예를 들어, 상기 최소 차이 절대치 MINDIFF가 상기 제1 임계치(TDIFF)보다 크다면(도 6의 S12), 현재 픽셀이 나쁜 픽셀인 것으로 간주되어, 상기 제1 결정부(462)는 이에 해당하는 픽셀 정보 신호(PIS)를 생성한다. 나쁜 픽셀의 데이터는 상기 보간기(420)에 의하여 보간된 픽셀 데이터로 대체된다(도 6의 S15). 상기 최소 차이 절대치 MINDIFF가 상기 제1 임계치(TDIFF)보다 크지 않다면(도 6의 S12), 상기 제1 결정부(462)는 상기 최소 차이 절대치 MINDIFF가 상기 제2 임계치(BDIFF)보다 작은지를 판단한다(도 6의 S13). 상기 최소 차이 절대치 MINDIFF가 상기 제2 임계치(BDIFF)보다 작다면, 현재 픽셀이 좋은 픽셀인 것으로 간주되어, 상기 제1 결정부(462)는 이에 해당하는 픽셀 정보 신호(PIS)를 생성한다. 좋은 픽셀의 데이터는 상기 보간기(420)에 의하여 보간될 필요없다(도 6의 S14).
상기 S12 및 S13 단계를 모두 만족시키지 못하는 경우에는, 상기 최소 차이 절대치 MINDIFF가 상기 제1 임계치(TDIFF)와 상기 제2 임계치(BDIFF) 사이에 있고, 현재 픽셀이 나쁜 픽셀로 의심(suspect)된다. 이때 상기 제1 결정부(462)가 이에 해당하는 픽셀 정보 신호(PIS)를 생성하면, 상기 평균 변화 체크부(470)가 동작한다.
도 5에서, 상기 평균 변화 체크부(470)는 평균 변화(average variance) 계산부(471) 및 제2 결정부(472)를 포함한다. 상기 평균 변화 체크부(470)는 상기 최소 차이 절대치 MINDIFF가 상기 제1 임계치(TDIFF)와 상기 제2 임계치(BDIFF) 사이에 있는 경우에, 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 다시 판단한다. 상기 평균 변화 계산부(471)는 상기 최소 차이 계산부(461)에서 계산된 상기 이웃 픽셀 데이터와 상기 현재 픽셀 데이터와의 차이들로부터 [수학식 2]와 같이 그 평균 MEAN을 계산하고, 계산된 평균 MEAN으로부터 [수학식 3]과 같이 현재 픽셀 주위의 평균 변화 AVGVAR를 계산한다(도 6의 S16). [수학식 2] 및 [수학식 3]에서 n-1은 상기 차이들의 개수로서, 도 7a 및 도 7b의 예에서, 8에 해당한다.
[수학식 2]
MEAN = {SUM(RAW[i] - CPV)}/(n-1)
[수학식 3]
AVGVAR = {SUM(ABS(RAW[i] - MEAN))}/(n-1)
또한, 상기 평균 변화 계산부(471)는 상기 현재 픽셀 주위의 평균 변화 AVGVAR를 반영한 제3 임계치(THR)를 계산한다(도 6의 S16). 상기 제3 임계치(THR)는 상기 제2 결정부(472)에서 이용된다. 상기 제3 임계치(THR)는 [수학식 4]와 같이 나타낼 수 있다. [수학식 4]에서 MUL은 임의의 승산자(multiplier)로서, 양의 실수 값을 가진다.
[수학식 4]
THR = MUL * AVGVAR
이에 따라 상기 제2 결정부(472)는 상기 제3 임계치(THR)를 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 판단한다(도 6의 S17). 예를 들어, 상기 현재 픽셀 데이터가 상기 평균 MEAN 보다 상기 제3 임계치(THR)이상 차이가 나지 않으면, 현재 픽셀은 좋은 픽셀인 것으로 간주되어, 상기 제2 결정부(472)는 이에 해당하는 픽셀 정보 신호(PIS)를 생성한다(도 6의 S17). 그러나, 상기 현재 픽셀 데이터가 상기 평균 MEAN 보다 상기 제3 임계치(THR)이상 차이가 난다면, 현재 픽셀은 나쁜 픽셀로 의심(suspect)되는 경우이고, 이때 상기 제2 결정부(472)가 이에 해당하는 픽셀 정보 신호(PIS)를 생성하면, 상기 일관성 체크부(480)가 동작한다.
한편, 나쁜 픽셀들이 적절히 보간되지 않고 여러 프레임(frame) 동안 디스플레이될 때, 화면상에 백색(white) 또는 흑색(black)의 껌뻑거림(spot)을 일으킬 수 있다. 그러나, 이와같은 껌벅거림 현상을 모두다 사람이 인지할 수 있는 것은 아니다. 예를 들어, 도 8을 참조하면, 현재 픽셀 값에 대한 평균과의 관계에서 사람이 인지할 수 있는 영역 1A 및 1B와 사람이 인지할 수 없는 영역 2A 및 2B를 보여준다. 1A 영역은 현재 픽셀 데이터의 계조(gray) 레벨이 그 주위의 평균보다 작은 영역으로서, 나쁜 픽셀들이 흑색(black)의 껌뻑거림(spot)을 일으킬 수 있는 영역이다. 1B 영역은 현재 픽셀 데이터의 계조(gray) 레벨이 그 주위의 평균보다 큰 영역으로서, 나쁜 픽셀들이 백색(white) 껌뻑거림(spot)을 일으킬 수 있는 영역이다. 2A 영역은 현재 픽셀 데이터 및 그 주위의 평균의 계조(gray) 레벨들이 모두 큰 영역으로서, 이 영역의 나쁜 픽셀들에 의하여 백색(white)이든 흑색(black)이든 껌뻑거림(spot)이 거의(hardly) 인지될 수 없는 영역이다. 2B 영역은 현재 픽셀 데이터 및 그 주위의 평균의 계조(gray) 레벨들이 모두 작은 영역으로서, 이 영역의 나쁜 픽셀들에 의하여도 백색(white)이든 흑색(black)이든 껌뻑거림(spot)이 거의(hardly) 인지될 수 없는 영역이다. 이와 같이 껌뻑거림(spot)이 인지될 수 있는 영역 1A 및 1B와 인지될 수 없는 영역 2A 및 2B의 범위는 상기 현재 픽셀이 R, G, 또는 B 픽셀 중 어느 것인가에 따라 서로 다를 수 있다.
이와 같은 고려를 바탕으로, 상기 제2 결정부(472)가 상기 제3 임계치(THR)를 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 판단할 때, 상기 제2 결 정부(472)는 [수학식 4]의 승산자 MUL를 조정할 수 있다. 일반적인 경우에 있어서는, 상기 승산자 MUL가 2에서 4 사이인 경우에 좋은 결과를 얻을 수 있다. 그러나, 껌뻑거림(spot)이 인지될 수 없는 영역 2A 및 2B에서는, 현재 픽셀 데이터와 평균 MEAN 사이의 차이가 크더라도 좋은 결과를 얻는 것이 기대된다. 이에 따라, 상기 제2 결정부(472)는 평균 MEAN과 상기 현재 픽셀 데이터의 계조 레벨이 유사한 2A 및 2B 영역에 대해서는 상기 승산자 MUL를 크게하여 상기 제3 임계치(THR)를 증가시키고, 그렇지 않은 1A 및 1B 영역에 대해서는 상기 승산자 MUL를 작게하여 상기 제3 임계치(THR)를 감소시킬 수 있다. 예를 들어, 1A 및 1B 영역에서는 상기 승산자 MUL을 2-2.5로하고, 2A 및 2B 영역에서는 상기 승산자 MUL을 3.5-4로 하는 것 등이다.
위에서 기술한 바와 같이, 상기 평균 변화 체크부(470)에서 현재 픽셀이 나쁜 픽셀로 의심(suspect)되는 경우에 상기 일관성 체크부(480)가 동작한다.
도 5에서, 상기 일관성 체크부(480)는 옵션(option)으로 동작한다. 상기 일관성 체크부(480)는 상기 평균 변화 계산부(471)에서 현재 픽셀이 나쁜 픽셀인 것으로 잘못 판단하는 경우를 줄이기 위하여 동작할지 모른다. 상기 일관성 체크부(480)는 현재 픽셀과 인접한(adjacent) 이웃 픽셀들을 체크한다. 상기 일관성 체크부(480)의 동작은, 서로 인접한 두 픽셀 이상이 모두 나쁜 픽셀일 가능성은 매우 낮다는 것에 바탕을 둔다. 또한, 하나의 픽셀 폭을 가지는 고 농도(high contrast) 에지(edge) 또는 라인(line)의 가능성을 배제할 수 없다.
이를 바탕으로, 상기 일관성 체크부(480)는 적어도 하나의 인접한 이웃 픽셀 에서의 평균 변화 LOCVAR와 상기 현재 픽셀 주위의 평균 변화 AVGVAR를 비교하여 픽셀 정보 신호(PIS)를 결정한다(도 6의 S18). 인접한 이웃 픽셀에서의 평균 변화 LOCVAR은 상기 평균 변화 계산부(471)에서 [수학식 3]과 같이 이미 계산되었을 것이다. 여기서, 인접한 이웃 픽셀들은 도 7a와 같이, P11, P12, P13, P21, P23, P31, P32, 및 P33이고, 이들 중 어느 하나 이상의 평균 변화가 비교될 수 있다. 여러개가 비교되는 경우에는 비교값들에 적절한 가중치를 이용하여 픽셀 정보 신호(PIS)의 결정에 반영할 수 있다. 예를 들어, 상기 현재 픽셀 주위의 평균 변화 AVGVAR가 인접한 이웃 픽셀에서의 평균 변화 LOCVAR보다 작다면, 현재 픽셀은 좋은 픽셀로 간주되고, 상기 일관성 체크부(480)는 이에 해당되는 픽셀 정보 신호(PIS)를 생성한다. 그렇지 않다면, 현재 픽셀은 나쁜 픽셀로 간주되고, 상기 일관성 체크부(480)는 이에 해당되는 픽셀 정보 신호(PIS)를 생성한다.
이미지 에지 또는 라인 근처에서는 좋은 픽셀과 나쁜 픽셀을 구분하기 위하여 좀더 정밀한 판단이 요구된다. 에지/라인 근처에서 나쁜 픽셀이 제대로 검출되지 않으면, 화면 상에는 도 9에 표시된 부분과 같이 원하지 않았던 껌뻐거림(spot)이 나타날 수 있다.
에지/라인 근처에서 좀더 정밀한 결정을 위하여 도 10의 에지/라인 체크 유니트(500)가 도 5의 BP 검출기(410)에 옵션으로 추가될 수 있다. 도 10을 참조하면, 상기 에지/라인 체크 유니트(500)는 GN(Good Neighbor) 카운터(counter)(510), 제1 비교기(520), 방향 체크부(530), 및 제2 비교기(540)를 포함한다.
상기 GN 카운터(510)는 상기 현재 픽셀 데이터와 상기 현재 픽셀 주위의 인 접 픽셀 데이터(8개) 간의 차이를 기반으로 좋은 이웃 픽셀 수를 카운트한다. 예를 들어, 현재 픽셀 데이터와 인접 픽셀 데이터 간의 차이 절대치가 소정 임계치보다 작으면 좋은 이웃 픽셀로 간주된다. 도 5의 상기 평균 변화 체크부(470)는 상기 카운트 값(CGNV)에 따라 상기 제3 임계치(THR)를 조정할 수 있다. 예를 들어, 상기 카운트 값(CGNV)이 클수록 상기 승산자 MUL을 크게하여 상기 제3 임계치(THR)를 증가시킨다.
상기 제1 비교기(520)는 도 5의 상기 문턱 체크부(460)에서 결정된 상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀이면, 상기 카운트 값(CGNV)에 따라 다시 상기 현재 픽셀이 좋은 픽셀인지, 라인에 해당하는지 또는 에지에 해당하는지를 나타내는 신호(PIS1)를 결정하여 상기 문턱 체크부(460)의 상기 픽셀 정보 신호로서 출력한다. 예를 들어, 상기 카운트 값(CGNV)이 4 이상이면, 상기 제1 비교기(520)는 현재 픽셀을 좋은 픽셀로 간주하고 이에 해당하는 신호(PIS1)를 생성한다. 상기 카운트 값(CGNV)이 2이면 상기 현재 픽셀은 라인에 해당한다. 다만, 이에 한정되지 않고, 상기 카운트 값(CGNV)이 2인 경우에, 현재 픽셀이 G 픽셀인 경우에는 에지에 해당하는 것으로 볼 수도 있다.
상기 카운트 값(CGNV)이 3이고 해당 좋은 이웃 픽셀들이 서로 인접하고 있다면, 상기 현재 픽셀은 에지에 해당한다. 상기 현재 픽셀이 이와 같은 에지에 해당하면 상기 방향 체크부(530)는 상기 카운트 값(CGNV)으로부터 에지 방향 값(DIR)을 생성한다. 상기 현재 픽셀이 에지에 해당하면 상기 제1 비교기(520)는 에지로 간주하여 생성하는 신호(PIS1)에 상기 에지 방향 값을 포함시킨다. 예를 들어, 도 11a 와 같이, (+)로 표시되는 좋은 이웃 픽셀들이 현재 픽셀의 좌(left), 좌상(left-top), 및 상측(top)에 있는 경우에, 3개의 좋은 이웃 픽셀들이 서로 인접하므로 현재 픽셀 C는 에지로 간주되고, 이때의 에지 방향은 현재 픽셀 C에서 가운데 좋은 이웃 픽셀 N00을 향하는 방향이고 이때의 방향 값이 일정값으로 정해진다. 마찬가지로, 도 11b와 같이, (+)로 표시되는 좋은 이웃 픽셀들이 현재 픽셀의 좌(left), 좌상(left-top), 및 좌하측(left-bottom)에 있는 경우에, 3개의 좋은 이웃 픽셀들이 서로 인접하므로 현재 픽셀 C는 에지로 간주되고, 이때의 에지 방향은 현재 픽셀 C에서 가운데 좋은 이웃 픽셀 N10을 향하는 방향이고 이때의 방향 값이 일정값으로 정해진다. 그러나, 도 11c와 같이, (+)로 표시되는 좋은 이웃 픽셀들이 현재 픽셀의 상(top), 좌상(left-top), 및 하측(bottom)에 있는 경우에, 3개의 좋은 이웃 픽셀들이 서로 인접하지 않으므로 현재 픽셀 C는 에지로 간주되지 않고 나쁜 픽셀로서 간주된다.
한편, 상기 제2 비교기(540)는 도 5의 상기 일관성 체크부(480)에서 결정된 상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀이면, 상기 에지 방향 값(DIR)에 따라 다시 상기 현재 픽셀이 좋은 픽셀인지 그렇지 않은지를 나타내는 신호(PIS3)를 결정하여 상기 일관성 체크부(480)의 상기 픽셀 정보 신호로서 출력한다. 예를 들어, 상기 현재 픽셀의 에지 방향 값이, 상기 현재 픽셀과 색이 다른 적어도 하나의 인접 이웃 픽셀의 에지 방향 값이 서로 같다면, 상기 제1 비교기(520)는 현재 픽셀을 좋은 픽셀로 간주하고 이에 해당하는 신호(PIS3)를 생성한다. 예를 들어, 도 11b에서, 인접 이웃 픽셀 N00의 에지 방향 값이 현재 픽셀 C의 에지 방향 값과 같다면, 현재 픽셀 C는 좋은 픽셀로 간주된다.
도 12는 도 4의 보간기(420)를 구체적으로 나타내는 블록도이다. 도 12를 참조하면, 상기 보간기(420)는 에지/라인 보간부(421), BP 대체부(422) 및 먹스(multiplexer)(423)을 포함한다.
상기 에지/라인 보간부(421)는 픽셀 정보 신호(PIS)에 따라 상기 현재 픽셀이 에지 또는 라인에 해당하는 경우에 해당 방향을 기반으로 한 보간을 수행한다. 여기서, 일반적인 베이어(Bayer) 보간 스킴(scheme)이 적용될 수도 있다.
상기 BP 대체부(422)는 분류자(classifier) 계산부(426), 평균 보간부(427) 및 방향성(directional) 보간부(428)를 포함한다. 상기 BP 대체부(422)는 상기 픽셀 정보 신호(PIS)에 따라 상기 현재 픽셀이 나쁜 픽셀에 해당하는 경우에, 이웃 픽셀 데이터를 이용하여 보간하고 나쁜 픽셀 데이터를 보간된 데이터로 대체한다. 이를 위하여, 상기 분류자 계산부(426)는 상기 현재 픽셀 주위의 수평 데이터 변화율(gradient)을 나타내는 수평 분류자 및 상기 현재 픽셀 주위의 수직 데이터 변화율을 나타내는 수직 분류자를 계산한다. 예를 들어, 도 7b에서, 현재 픽셀 P22에 대하여, 수평 분류자는 P20, P21, P22, P23, P24의 값들에 소정 가중치를 적용하여 계산되고, 수직 분류자는 P02, P12, P22, P32, P42의 값들에 소정 가중치를 적용하여 계산된다. 여기서, 분류자들의 계산에 현재 픽셀 P22가 포함되지 않을 수도 있다.
상기 평균 보간부(427)는 상기 분류자 계산부(426)에서 계산된 상기 분류자들 간의 차이 절대치가 소정 임계치보다 작으면 평균 또는 메디안(Median) 보간을 수행한다. 예를 들어, 위의 예에서, 수평 분류자의 계산에 이용된 P20, P21, P22, P23, P24의 평균 또는 메디안 값이 현재 픽셀 P22의 값으로 대체될 수 있다. 또는, 수직 분류자의 계산에 이용된 P02, P12, P22, P32, P42의 평균 또는 메디안 값이 현재 픽셀 P22의 값으로 대체될 수 있다. 잘 알려져 있는 바와 같이, 계산에 참조되는 원소들 중 최소와 최대를 뺀 나머지의 평균값이 메디안 값이 된다.
상기 방향성 보간부(428)는 상기 분류자들의 레벨에 따라 방향성 보간을 수행한다. 예를 들어, 위의 예에서, 수평 분류자가 수직 분류자보다 작으면, 현재 픽셀 값은 수평 분류자의 계산에 이용된 P20, P21, P22, P23, P24의 값들에 소정 가중치를 적용하여 합산한 값으로 대체된다. 또는, 수직 분류자가 수평 분류자보다 작으면, 현재 픽셀 값은 수직 분류자의 계산에 이용된 P02, P12, P22, P32, P42의 값들에 소정 가중치를 적용하여 합산한 값으로 대체된다.
이에 따라, 상기 먹스(423)는 픽셀 정보 신호(PIS)에 따라, 상기 에지/라인 보간부(421), 상기 평균 보간부(427) 또는 상기 방향성 보간부(428) 중 어느 하나에서 보간된 값을 선택하여, 선택된 값을 나쁜 픽셀의 대체 값으로 출력한다.
이상에서와 같이 본 발명의 일실시예에 따른 영상 신호 처리 장치(400)에서는, BP 검출기(410)가 입력 영상 데이터로부터 이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이를 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호(PIS)를 생성하고, 이에 따라 보간기(420)는 상기 픽셀 정보 신호(PIS)에 따라 나쁜 픽셀에 대하여는 이웃 픽셀 데이터를 이용하여 보간하여 보간된 데이터로 대체한다.
이상 도면과 명세서에서 최적 실시예가 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
상술한 바와 같이 본 발명에 따른 영상 신호 처리 장치에서는, 디지털 스틸 카메라, 또는 휴대폰 카메라와 같은 소형 시스템에 적용되어, 베이어 패턴의 디지털 컬러 영상 신호를 제1, 2 및 3 단계에 의한 BP 검출과 이를 기반으로 한 신호 보간을 통하여, 엘리어싱(aliasing), 컬러 모아레(moire), 번짐(blurring), 잘못된(false/pseudo) 컬러 효과, 백색(white) 또는 흑색(black)의 껌뻑거림(spot) 등을 최소화하여 화질을 개선할 수 있는 효과가 있다.

Claims (26)

  1. 입력 영상 데이터를 수신하는 단계;
    이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이들을 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호를 생성하는 단계; 및
    상기 픽셀 정보 신호에 따라 나쁜 픽셀에 대하여는 이웃 픽셀 데이터를 이용하여 보간하는 단계를 구비하는 것을 특징으로 하는 영상 신호 처리 방법.
  2. 제 1항에 있어서, 상기 픽셀 정보 신호 생성 단계는,
    상기 차이 절대치들 중 최소와 제1 임계치 및 제2 임계치를 비교하여 상기 픽셀 정보 신호를 결정하는 단계; 및
    상기 최소가 상기 제1 임계치와 상기 제2 임계치 사이에 있는 경우에, 현재 픽셀 주위의 평균 변화를 반영한 제3 임계치를 기반으로 상기 픽셀 정보 신호를 결정하는 단계를 포함하는 것을 특징으로 하는 영상 신호 처리 방법.
  3. 제 2항에 있어서, 상기 픽셀 정보 신호 생성 단계는,
    적어도 하나의 이웃 픽셀에서의 평균 변화와 상기 현재 픽셀 주위의 평균 변화를 비교하여 상기 픽셀 정보 신호를 결정하는 단계를 더 포함하는 것을 특징으로 하는 영상 신호 처리 방법.
  4. 제 2항에 있어서, 상기 차이들의 평균과 상기 현재 픽셀 데이터의 계조 레벨이 유사한 제1 영역에 대해서는 상기 제3 임계치를 증가시키고, 그렇지 않은 제2 영역에 대해서는 상기 제3 임계치를 감소시키는 것을 특징으로 하는 영상 신호 처리 방법.
  5. 제 4항에 있어서, 상기 제1 영역 및 상기 제2 영역은,
    상기 현재 픽셀이 R, G, 또는 B 픽셀 중 어느 것인가에 따라 서로 다른 것을 특징으로 하는 영상 신호 처리 방법.
  6. 제 1항에 있어서, 상기 이웃 픽셀 데이터는,
    베이어 패턴에서 상기 현재 픽셀로부터 서로 다른 방향으로 가장 가까운 동색 픽셀들의 데이터인 것을 특징으로 하는 영상 신호 처리 방법.
  7. 제 2항에 있어서, 상기 영상 신호 처리 방법은,
    상기 현재 픽셀 데이터와 상기 현재 픽셀 주위의 인접 픽셀 데이터 간의 차이를 기반으로 좋은 이웃 픽셀 수를 카운트하는 단계를 더 포함하는 것을 특징으로 하는 영상 신호 처리 방법.
  8. 제 7항에 있어서, 상기 카운트 값에 따라 상기 제3 임계치가 조정되는 것을 특징으로 하는 영상 신호 처리 방법.
  9. 제 7항에 있어서, 상기 영상 신호 처리 방법은,
    상기 카운트 값으로부터 에지 방향 값을 생성하는 단계; 및
    상기 차이 절대치들 중 최소와 상기 제1 임계치 및 상기 제2 임계치의 비교로부터 결정된 상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀이면, 상기 카운트 값에 따라 다시 상기 현재 픽셀이 좋은 픽셀인지, 라인에 해당하는지 또는 에지에 해당하는지를 나타내는 신호를 결정하여 상기 픽셀 정보 신호로서 생성하는 단계를 더 포함하고,
    상기 현재 픽셀이 에지에 해당하면 상기 픽셀 정보 신호에 상기 에지 방향 값이 포함되는 것을 특징으로 하는 영상 신호 처리 방법.
  10. 제 9항에 있어서, 상기 카운트 값이 4 이상이면 상기 현재 픽셀은 좋은 픽셀에 해당하고,
    상기 카운트 값이 3이고 해당 좋은 이웃 픽셀들이 서로 인접하고 있다면, 상기 현재 픽셀은 에지에 해당하고 상기 에지 방향 값은 상기 현재 픽셀로부터 해당 가운데 좋은 이웃 픽셀 방향을 가리키는 값이며,
    상기 카운트 값이 2이면 상기 현재 픽셀은 라인에 해당하는 것을 특징으로 하는 영상 신호 처리 방법.
  11. 제 9항에 있어서, 상기 영상 신호 처리 방법은,
    적어도 하나의 이웃 픽셀에서의 평균 변화와 상기 현재 픽셀 주위의 평균 변화의 비교로부터 결정되는 상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀이면, 상기 에지 방향 값에 따라 다시 상기 현재 픽셀이 좋은 픽셀인지 그렇지 않은지를 나타내는 신호를 결정하여 상기 픽셀 정보 신호로서 생성하는 단계를 더 포함하고,
    상기 현재 픽셀의 에지 방향 값이 상기 현재 픽셀과 색이 다른 적어도 하나의 인접 이웃 픽셀의 에지 방향 값이 서로 같다면, 상기 현재 픽셀은 좋은 픽셀에 해당하는 것을 특징으로 하는 영상 신호 처리 방법.
  12. 제 10항에 있어서, 상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 에지 또는 라인에 해당하는 경우에 해당 방향을 기반으로 한 상기 보간을 수행하는 것을 특징으로 하는 영상 신호 처리 방법.
  13. 제 1항에 있어서, 상기 보간에서,
    상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀에 해당하는 경우에, 상기 현재 픽셀 주위의 수평 데이터 변화율을 나타내는 수평 분류자 및 상기 현재 픽셀 주위의 수직 데이터 변화율을 나타내는 수직 분류자를 계산하는 단계;
    상기 분류자들의 차이 절대치가 임계치보다 작으면 평균 또는 메디안 보간을 수행하는 단계; 및
    상기 분류자들의 차이 절대치가 임계치보다 크면 상기 분류자들의 레벨에 따 라 방향성 보간을 수행하는 단계를 포함하는 것을 특징으로 하는 영상 신호 처리 방법.
  14. 입력 영상 데이터로부터 이웃 픽셀 데이터와 현재 픽셀 데이터와의 차이들을 기반으로 현재 픽셀이 좋은 픽셀인지 나쁜 픽셀인지를 나타내는 픽셀 정보 신호를 생성하는 BP(Bad Pixel) 검출기; 및
    상기 픽셀 정보 신호에 따라 나쁜 픽셀에 대하여는 이웃 픽셀 데이터를 이용하여 보간하는 보간기를 구비하는 것을 특징으로 하는 영상 신호 처리 장치.
  15. 제 14항에 있어서, 상기 BP 검출기는,
    상기 차이 절대치들 중 최소와 제1 임계치 및 제2 임계치를 비교하여 상기 픽셀 정보 신호를 결정하는 문턱 체크부; 및
    상기 최소가 상기 제1 임계치와 상기 제2 임계치 사이에 있는 경우에, 현재 픽셀 주위의 평균 변화를 반영한 제3 임계치를 기반으로 상기 픽셀 정보 신호를 결정하는 평균 변화 체크부를 포함하는 것을 특징으로 하는 영상 신호 처리 장치.
  16. 제 15항에 있어서, 상기 BP 검출기는,
    적어도 하나의 이웃 픽셀에서의 평균 변화와 상기 현재 픽셀 주위의 평균 변화를 비교하여 상기 픽셀 정보 신호를 결정하는 일관성 체크부를 더 포함하는 것을 특징으로 하는 영상 신호 처리 장치.
  17. 제 15항에 있어서, 상기 평균 변화 체크부는,
    상기 차이들의 평균과 상기 현재 픽셀 데이터의 계조 레벨이 유사한 제1 영역에 대해서는 상기 제3 임계치를 증가시키고, 그렇지 않은 제2 영역에 대해서는 상기 제3 임계치를 감소시키는 것을 특징으로 하는 영상 신호 처리 장치.
  18. 제 17항에 있어서, 상기 제1 영역 및 상기 제2 영역은,
    상기 현재 픽셀이 R, G, 또는 B 픽셀 중 어느 것인가에 따라 서로 다른 것을 특징으로 하는 영상 신호 처리 장치.
  19. 제 14항에 있어서, 상기 이웃 픽셀 데이터는,
    베이어 패턴에서 상기 현재 픽셀로부터 서로 다른 방향으로 가장 가까운 동색 픽셀들의 데이터인 것을 특징으로 하는 영상 신호 처리 장치.
  20. 제 15항에 있어서, 상기 영상 신호 처리 장치는,
    상기 현재 픽셀 데이터와 상기 현재 픽셀 주위의 인접 픽셀 데이터 간의 차이를 기반으로 좋은 이웃 픽셀 수를 카운트하는 카운터를 더 포함하는 것을 특징으로 하는 영상 신호 처리 장치.
  21. 제 20항에 있어서, 상기 평균 변화 체크부는,
    상기 카운트 값에 따라 상기 제3 임계치를 조정하는 것을 특징으로 하는 영상 신호 처리 장치.
  22. 제 20항에 있어서, 상기 영상 신호 처리 장치는,
    상기 카운트 값으로부터 에지 방향 값을 생성하는 방향 체크부; 및
    상기 문턱 체크부에서 결정된 상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀이면, 상기 카운트 값에 따라 다시 상기 현재 픽셀이 좋은 픽셀인지, 라인에 해당하는지 또는 에지에 해당하는지를 나타내는 신호를 결정하여 상기 픽셀 정보 신호로서 생성하는 제1 비교기를 더 포함하고,
    상기 현재 픽셀이 에지에 해당하면 상기 픽셀 정보 신호에 상기 에지 방향 값이 포함되는 것을 특징으로 하는 영상 신호 처리 장치.
  23. 제 22항에 있어서, 상기 카운트 값이 4 이상이면 상기 현재 픽셀은 좋은 픽셀에 해당하고,
    상기 카운트 값이 3이고 해당 좋은 이웃 픽셀들이 서로 인접하고 있다면, 상기 현재 픽셀은 에지에 해당하고 상기 에지 방향 값은 상기 현재 픽셀로부터 해당 가운데 좋은 이웃 픽셀 방향을 가리키는 값이며,
    상기 카운트 값이 2이면 상기 현재 픽셀은 라인에 해당하는 것을 특징으로 하는 영상 신호 처리 장치.
  24. 제 22항에 있어서, 상기 영상 신호 처리 장치는,
    적어도 하나의 이웃 픽셀에서의 평균 변화와 상기 현재 픽셀 주위의 평균 변화의 비교로부터 결정되는 상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀이면, 상기 에지 방향 값에 따라 다시 상기 현재 픽셀이 좋은 픽셀인지 그렇지 않은지를 나타내는 신호를 결정하여 상기 픽셀 정보 신호로서 생성하는 제2 비교기를 더 포함하고,
    상기 현재 픽셀의 에지 방향 값이 상기 현재 픽셀과 색이 다른 적어도 하나의 인접 이웃 픽셀의 에지 방향 값이 서로 같다면, 상기 현재 픽셀은 좋은 픽셀에 해당하는 것을 특징으로 하는 영상 신호 처리 장치.
  25. 제 23항에 있어서, 상기 보간기는,
    상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 에지 또는 라인에 해당하는 경우에 해당 방향을 기반으로 한 보간을 수행하는 것을 특징으로 하는 영상 신호 처리 장치.
  26. 제 14항에 있어서, 상기 보간기는,
    상기 픽셀 정보 신호에 따라 상기 현재 픽셀이 나쁜 픽셀에 해당하는 경우에, 상기 현재 픽셀 주위의 수평 데이터 변화율을 나타내는 수평 분류자 및 상기 현재 픽셀 주위의 수직 데이터 변화율을 나타내는 수직 분류자를 계산하고, 상기 분류자들의 차이 절대치가 임계치보다 작으면 평균 또는 메디안 보간을 수행하고, 그렇지 않으면 상기 분류자들의 레벨에 따라 방향성 보간을 수행하는 것을 특징으로 하는 영상 신호 처리 장치.
KR1020050034913A 2005-04-27 2005-04-27 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치 KR100652408B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020050034913A KR100652408B1 (ko) 2005-04-27 2005-04-27 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치
US11/411,471 US7671909B2 (en) 2005-04-27 2006-04-26 Method and apparatus for processing Bayer-pattern digital color video signal
CN2006100898778A CN1893618B (zh) 2005-04-27 2006-04-27 用于处理拜耳模式数字彩色视频信号的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050034913A KR100652408B1 (ko) 2005-04-27 2005-04-27 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치

Publications (2)

Publication Number Publication Date
KR20060112449A KR20060112449A (ko) 2006-11-01
KR100652408B1 true KR100652408B1 (ko) 2006-12-01

Family

ID=37572896

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050034913A KR100652408B1 (ko) 2005-04-27 2005-04-27 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치

Country Status (3)

Country Link
US (1) US7671909B2 (ko)
KR (1) KR100652408B1 (ko)
CN (1) CN1893618B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101442242B1 (ko) * 2007-12-12 2014-09-29 삼성전자주식회사 불량 화소 및 잡음 제거 방법

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5483796B2 (ja) * 2006-08-31 2014-05-07 キヤノン株式会社 画像表示装置および画像表示システム
CN101329281B (zh) * 2007-06-20 2011-08-10 佛山普立华科技有限公司 影像感测晶片污点检测系统及其检测方法
CN101588447B (zh) * 2008-05-23 2011-04-20 比亚迪股份有限公司 一种图像坏点的校正方法、系统及图像传感器
KR101595257B1 (ko) * 2009-04-28 2016-02-18 삼성전자주식회사 디지털 영상 처리 장치 및 방법과 이를 위한 기록매체
US20110032272A1 (en) * 2009-08-06 2011-02-10 Panasonic Corporation Video processing apparatus
WO2011065012A1 (ja) * 2009-11-27 2011-06-03 株式会社ニコン データ処理装置
JP5697353B2 (ja) * 2010-03-26 2015-04-08 キヤノン株式会社 画像処理装置、画像処理装置の制御方法及びプログラム
KR20120114021A (ko) * 2011-04-06 2012-10-16 삼성디스플레이 주식회사 불량 픽셀 보정 방법
KR101661850B1 (ko) * 2014-04-17 2016-09-30 가부시키가이샤 모르포 화상 처리 장치, 화상 처리 방법, 화상 처리 프로그램 및 기록 매체
CN104202583B (zh) * 2014-08-07 2017-01-11 华为技术有限公司 图像处理装置和方法
CN105430382A (zh) * 2015-12-02 2016-03-23 厦门雅迅网络股份有限公司 一种视频图像检测黑边的方法和装置
WO2019208390A1 (ja) * 2018-04-26 2019-10-31 ローム株式会社 半導体装置、ディスプレイ装置、車載ディスプレイシステム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6526181B1 (en) * 1998-01-27 2003-02-25 Eastman Kodak Company Apparatus and method for eliminating imaging sensor line noise
US6549233B1 (en) * 1998-08-07 2003-04-15 Intel Corporation Color interpolation system
JP2003153290A (ja) * 2001-08-31 2003-05-23 Stmicroelectronics Srl ベイヤーパターン画像データ用ノイズフィルタ
KR20040058775A (ko) * 2002-12-27 2004-07-05 주식회사 하이닉스반도체 이미지센서의 불량픽셀 보상장치

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4099361A (en) * 1972-03-20 1978-07-11 Crown Cork & Seal Company, Inc. Apparatus for and method of closing containers
US3852941A (en) * 1973-08-20 1974-12-10 Pennwalt Corp Vial capping apparatus
US4075820A (en) * 1976-07-28 1978-02-28 Abbott Laboratories Spin welding apparatus
US4299072A (en) * 1979-01-17 1981-11-10 John H. Holstein Turret drive system
EP0107429A3 (en) * 1982-10-18 1985-03-13 Metal Closures Limited Improvements in capping machines for containers
IT1242601B (it) * 1990-10-31 1994-05-16 Azionaria Costruzioni Acma Spa Apparecchiatura per l'applicazione di tappi a contenitori.
EP0496573B1 (en) * 1991-01-24 1995-12-20 Matsushita Electric Industrial Co., Ltd. Pixel defect removing circuit for solid-state image pickup device
US5419094A (en) * 1994-03-02 1995-05-30 Crown Cork & Seal Company, Inc. Constant speed spindles for rotary capping machine
US5528879A (en) * 1995-05-26 1996-06-25 Diversified Capping Equipment, Inc. Apparatus for applying closures to containers
IT1293251B1 (it) * 1997-07-17 1999-02-16 Ima Spa Apparato per le macchine a giostra adibite alla tappatura di flaconi o simili con tappi a vite.
JP4115574B2 (ja) 1998-02-02 2008-07-09 オリンパス株式会社 撮像装置
US6115992A (en) * 1998-03-25 2000-09-12 New England Machinery, Inc. Apparatus and method for pre-capping containers
JP2000285229A (ja) * 1999-03-15 2000-10-13 Texas Instr Inc <Ti> ディジタルイメージャのための不良画素フィルタリング
JP2000287135A (ja) 1999-03-31 2000-10-13 Sony Corp 撮像装置並びに固体撮像素子の画素欠陥検出装置及び方法
US7009644B1 (en) * 1999-12-15 2006-03-07 Logitech Europe S.A. Dynamic anomalous pixel detection and correction
ES2190189T3 (es) * 1999-11-23 2003-07-16 Arol Spa Dispositivo y procedimiento para verificar la estanqueidad de un tapon roscado en un envase.
US6965395B1 (en) * 2000-09-12 2005-11-15 Dialog Semiconductor Gmbh Methods and systems for detecting defective imaging pixels and pixel values
CN1138329C (zh) * 2000-11-08 2004-02-11 华中科技大学 电力线路保护与故障定位方法及用于该方法的行波传感器
JP2002237997A (ja) * 2001-02-07 2002-08-23 Matsushita Electric Ind Co Ltd 固体撮像素子の欠陥画素補正装置およびそれを備えた固体撮像装置
JP2002271806A (ja) * 2001-03-09 2002-09-20 Hitachi Kokusai Electric Inc Ｃｃｄ撮像素子の画素欠陥信号補正回路
US6985180B2 (en) 2001-06-19 2006-01-10 Ess Technology, Inc. Intelligent blemish control algorithm and apparatus
JP4054184B2 (ja) 2001-10-03 2008-02-27 オリンパス株式会社 欠陥画素補正装置
US6662526B2 (en) * 2001-11-27 2003-12-16 Alcoa Closure Systems International, Inc. Modular turret cage for a capping machine
JP2003209749A (ja) * 2002-01-11 2003-07-25 Olympus Optical Co Ltd 撮像装置
US7283164B2 (en) * 2002-09-18 2007-10-16 Micron Technology, Inc. Method for detecting and correcting defective pixels in a digital image sensor
FR2848545A1 (fr) * 2002-12-13 2004-06-18 Serac Group Dispositif de vissage de bouchons
JP3747909B2 (ja) * 2002-12-24 2006-02-22 ソニー株式会社 画素欠陥検出補正装置及び画素欠陥検出補正方法
US7388609B2 (en) * 2003-07-07 2008-06-17 Zoran Corporation Dynamic identification and correction of defective pixels
EP1594308A1 (en) * 2004-05-07 2005-11-09 Dialog Semiconductor GmbH Single line Bayer filter RGB bad pixel correction

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6526181B1 (en) * 1998-01-27 2003-02-25 Eastman Kodak Company Apparatus and method for eliminating imaging sensor line noise
US6549233B1 (en) * 1998-08-07 2003-04-15 Intel Corporation Color interpolation system
JP2003153290A (ja) * 2001-08-31 2003-05-23 Stmicroelectronics Srl ベイヤーパターン画像データ用ノイズフィルタ
KR20040058775A (ko) * 2002-12-27 2004-07-05 주식회사 하이닉스반도체 이미지센서의 불량픽셀 보상장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101442242B1 (ko) * 2007-12-12 2014-09-29 삼성전자주식회사 불량 화소 및 잡음 제거 방법

Also Published As

Publication number Publication date
US20060284862A1 (en) 2006-12-21
KR20060112449A (ko) 2006-11-01
CN1893618B (zh) 2010-08-18
US7671909B2 (en) 2010-03-02
CN1893618A (zh) 2007-01-10

Similar Documents

Publication Publication Date Title
KR100652408B1 (ko) 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치
KR100699834B1 (ko) 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치
US7995868B2 (en) Image processing method and image processing device
US8013914B2 (en) Imaging apparatus including noise suppression circuit
KR100809687B1 (ko) 영상신호에 포함된 잡음을 제거할 수 있는 영상신호처리장치 및 방법
US7760255B2 (en) Method and apparatus for interpolation of interlaced CMYG color format
WO2004110071A1 (ja) 画像処理装置、画像処理プログラム
AU2012374649A1 (en) Image processing device, image-capturing element, image processing method, and program
US20100053356A1 (en) Imaging Device And Video Signal Generating Method Employed In Imaging Device
US20140125847A1 (en) Image processing apparatus and control method therefor
US8798398B2 (en) Image processing apparatus
JP4104495B2 (ja) データ処理装置、画像処理装置およびカメラ
KR20050106919A (ko) 영상 신호의 에지 검출 방법
US7489822B2 (en) Image processing apparatus and method for detecting a direction of an edge in the vicinity of a pixel of interest and generating all color signals for each pixel by interpolation using color signals of a pixel of interest and its neighbor pixels, and a recording medium having a program recorded thereon for causing the apparatus to perform the method
JP4380399B2 (ja) 撮像装置、ノイズリダクション装置およびノイズリダクション方法並びにプログラム
KR101696672B1 (ko) 영상 신호 처리 방법 및 이를 이용하는 영상 촬영 방법
US8126284B2 (en) Method and apparatus for resolution improvement in digital capturing
JP5109911B2 (ja) 撮像装置および補間処理方法
JP2011114473A (ja) 画素欠陥補正装置
JP2004173060A (ja) ノイズ除去方法、撮像装置およびノイズ除去プログラム
JP4122082B2 (ja) 信号処理装置およびその処理方法
JPH11146409A (ja) ビデオカメラ
JP5034789B2 (ja) 撮像装置
CN117256158A (zh) 用于检测缺陷像素的方法和图像处理器单元
JP2010041251A (ja) 映像信号処理装置、撮像装置及び映像信号処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121031

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20131031

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141031

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20151030

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20181031

Year of fee payment: 13