KR20150142599A

KR20150142599A - Ｒｇｂｗ 디스플레이 상에서의 개선된 저전력 서브픽셀 렌더링

Info

Publication number: KR20150142599A
Application number: KR1020150075341A
Authority: KR
Inventors: 캔디스 헬렌 브라운 엘리엇; 앤쏘니 봇챠즈; 미첼 프란시스 히긴스
Original assignee: 삼성전자주식회사
Priority date: 2014-06-12
Filing date: 2015-05-28
Publication date: 2015-12-22
Also published as: US20150363922A1; KR20150142601A; US9418398B2; KR20150142600A; US20150363944A1; US20150363913A1; US20150363916A1; US20150363912A1

Abstract

저전력 서브픽셀 렌더링을 제공하기 위한 장치 및 방법이 제공된다. 상기 방법은, 촬영된영상의 제 1 픽셀에 대한 영상 데이터를 수신하는 단계와, 촬영된 영상의 제 2 픽셀에 대한 영상 데이터를 수신하는 단계와, 상기 제 1 픽셀의 제 1 채도값(saturation value) 및 상기 제 2 픽셀의 제 2 채도값을 결정하는 단계와, 상기 제 1 채도값 및 상기 제 2 채도값에 기초하여, 최대 채도값을 결정하는 단계와, 상기 결정된 최대 채도값에 기초하여, 1차원 필터(one dimensional filter) 또는 단일 필터(unity filter)를 사용하여 서브픽셀 값을 렌더링하는 단계를 포함한다.

Description

ＲＧＢＷ 디스플레이 상에서의 개선된 저전력 서브픽셀 렌더링{IMPROVED LOW POWER SUBPIXEL RENDERING ON RGBW DISPLAY}

본 발명은 서브픽셀들을 렌더링하기 위한 장치 및 방법에 관한 것이다. 보다 구체적으로, 본 발명은 허용가능한 영상을 유지하면서 더 적은 전력을 사용하여 서브픽셀들을 렌더링하기 위한 장치 및 방법에 관한 것이다.

이동 단말들은 사용자들 간의 무선 통신을 제공하기 위해 처음에 개발되었다. 기술이발전함에 따라, 이제 이동 단말은 단순한 전화 통화를넘어 많은 추가 기능들을 제공하고 있다. 예를 들면, 이동 단말들은 이제 알람, SMS(Short Messaging Service), MMS(Multimedia Messaging Service), 이-메일, 게임, 근거리 통신, 탑재된 디지털 카메라를 사용한영상 촬영 기능, 오디오와 컨텐츠를 제공하기 위한 멀티미디어 기능, 스케줄링 기능 등과 같은 고급 기능들을 제공할 수 있다. 이제는 다수의 기능들이 제공되고 있기 때문에, 사실상 이동 단말은 대부분의 사람들에 대한 일상 생활의 필수품이 되었다.

영상 촬영 기능의 일부로서, 이동 단말의 프로세서는 탑재되어 있는 디지털 카메라로부터 영상 데이터를 수신하고, 디스플레이 유닛 상에서 해당 영상을출력하도록 궁극적으로 제어한다. 디스플레이 유닛 상에 영상을제공하기 위해, 디지털 카메라로부터 수신된 데이터는 먼저 일련의조정들을 거쳐야만 한다.

도 1은 종래의 기술에 따른, 촬영된 영상 및 그 촬영된 영상에 대응하는 영상을 디스플레이하기 위한 디스플레이 유닛을도시한 것이다.

도 1을 참조하면, 영상(104)은 이동 단말의 디지털 카메라에 의해 촬영된다. 촬영된영상(104)에 대응하는 원시 데이터(raw data)가 조정됨으로써, 그것은디스플레이 유닛(110) 상에 디스플레이(즉, 실질적으로 재생)될 수 있다. 영상(104)은 복수의 픽셀들(106)에 의해서 표현되며, 여기서 각 픽셀(106)은 디스플레이(110)에 의해 실질적으로 재생되는 컬러와 연관된다. 디스플레이 유닛(110) 상에 영상(104)을 디스플레이하기 위해서, 각 픽셀(106)은 디스플레이 유닛(110)의 하나 이상의 서브픽셀들의 세트에맵핑되며, 그 후에 디스플레이 유닛(110)은 픽셀의 컬러를 디스플레이한다.

종래의 기술에서는, 디스플레이 유닛(110)의 각 서브픽셀이 "프라이머리(primary)" 컬러를 디스플레이한다. 즉, 각 서브픽셀은 특정 색조값(hue value) 및 특정 채도값(saturation value)과 연관된다. 몇몇 디스플레이 유닛들에서, 각각의반복되는 서브픽셀들의 세트는각각의 프라이머리 컬러에대한 서브픽셀을 포함한다. 서브픽셀들은 소형이면서 서로 근접하게 이격되어, 소망하는 해상도를 제공한다. 그러나, 이러한 구조는 비용 효과적이지 못하며, 그 이유는 인간의시각의 해상도와 일치되지 못하기때문이다. 인간은 색수차(chromatic differences)보다는휘도차(luminance differences)에 더 민감하다. 그러므로, 몇몇 디스플레이 유닛들은 각각의 프라이머리 컬러의서브픽셀들을 포함하지 않는 서브픽셀 반복 세트로 입력 픽셀(106)을 맵핑하게 된다. 이러한 디스플레이 유닛에서는, 색 해상도(chromatic resolution)가 감소하는 반면에, 휘도 해상도가 높은 상태를 유지하며, 그 재생 영상은 시청자에게 매우 만족스럽다. 디스플레이 유닛(110)은 이러한 구현의 일 예이다.

디스플레이 유닛(110)은 RGBW(Red, Green, Blue, White) 타입으로서, 레드 서브픽셀들(120R), 블루 서브픽셀들(120B), 그린 서브픽셀들(120G), 및 화이트 서브픽셀들(120W)을 구비하고, 여기서각 서브픽셀의 면적은 동일하다. RGBW 서브픽셀들의 각 세트는, 동일한행에서 인접하는 서브픽셀들인 두 세트(124)로 분할된다. 이들 세트(124)는 "쌍(pairs)"으로 호칭된다. 각각의 쌍(124)은 레드 서브픽셀(120R)이나 그린 서브픽셀(120G)(즉, RG 쌍) 또는 블루 서브픽셀(120B) 및 화이트 서브픽셀(120W)(즉, BW 쌍) 중의 하나로구성된다. 각각의 RG 쌍에서는, 레드 서브픽셀이 그린 서브픽셀의 왼편에존재하며, 각각의 BW 쌍에서는, 블루 서브픽셀이 왼편에 존재한다. RG 및 BW 쌍들은, 각각의 행과 각각의열이 교번되어 있다.

영상의 x 열 및 y 행에 있는 픽셀(106)(즉, 픽셀(106x,y))은, x 열 및 y 행에 있는 서브픽셀 쌍(124)에 맵핑된다. 특히, 디스플레이 유닛(110)에서, 연속 인덱스들 x 및 y는 연속 서브픽셀들이 아닌 연속 쌍들을나타낸다. 각각의 서브픽셀 쌍(124)은 두 개의 서브픽셀만을 가지며, 색차가 아닌 휘도에 있어서의 높은 범위 및 해상도를 제공한다. 그러므로, 입력 픽셀의 휘도 중의 일부는서브픽셀 렌더링(SPR) 동작시에 인접 쌍(124)으로 시프트되어야만 할 수도 있다.

도 2는 종래의 기술에 따른 SPR의 방법을 도시한 것이다.

도 2를 참조하면, 레드 서브픽셀들(120R) 및 그린 서브픽셀들(120G)만에 대한 SPR 동작이 도시되어 있다. 블루 서브픽셀들(120B) 및 화이트 서브픽셀들(120W)에 대한 SPR 동작은마찬가지의 방식으로 수행되며, 여기서는 간략화를 위해 기재되어 있지 않다. SPR 동작은 선형 방식으로 각각의레드 서브픽셀들(120R), 그린 서브픽셀들(120G), 블루 서브픽셀들(120G) 및 화이트 서브픽셀들(120W)에 대한 휘도를 규정하는(즉, 휘도들은 서브픽셀 값들에대한 선형 함수들임) 값들(Rw, Gw, Bw, Ww)을 산출한다. 그러나, 다른 프라이머리 컬러들에 대한 다른 함수들이 사용될수도 있다. 그 후에, Rw, Gw, Bw, Ww 값들은, 소망하는 휘도들을 얻기 위해 서브픽셀들에 제공되는 전기 신호들을 결정하는데 사용된다.

도 2에는, 영상(104)의 픽셀들(106)이 각각의 서브픽셀 쌍들(124)에 중첩되는 것으로 나타나 있다. 다시, 간략화 및 설명의 편의를위해, 디스플레이 유닛(110)의 RG 쌍들(124)만이 도시되어 있다. 디스플레이 영역은각각의 RG 쌍들(124)에 센터링정렬되는 샘플링 영역들(250)로 하위 분할된다. 샘플링 영역들(250)은 상이한 방식들로 규정될 수 있으며, 도 2에서는 다이아몬드-형상의영역들(250)이 선택되어 있다. 영역들(250)은 디스플레이의 가장자리들(edges)을 제외하고는 서로 합동(congruent)이다.

각 픽셀(106)의 컬러는 선형 RGBW 컬러 좌표계로 표현된다. 각각의RG 쌍(124x,y)에 있어서, 레드 서브픽셀의 Rw 값은 RG 쌍(124x,y)에서 센터링정렬되는 샘플링 영역(250)과 오버랩된 모든 픽셀들(106)의 R 좌표들의 가중합(weighted sum)으로서결정된다. 가중치(weights)는 1까지 가산되도록 선택되며, 샘플링영역(250)과의 각각의 픽셀들(106)의 오버랩(overlap)되는 영역들에 비례한다. 특히, 서브픽셀 쌍(124x,y)이 디스플레이의 가장자리에 있지 않다면, 레드 값(Rw)은 수학식 1에 의해 표현된다.

다시 말해, 레드 서브픽셀들(120R)은 수학식 2의 필터 커널(filter kernel)을 이용하여 각각의 픽셀들(106)의 R 좌표들에 3 x 3 다이아몬드 필터를적용함으로써 렌더링될 수 있다.

동일한 필터 커널이 그린, 블루 및 화이트 서브픽셀들에 대해(가장자리들은 제외) 사용될 수 있다. 추가적인 처리, 예를 들면 샤프닝필터(sharpening filter)들을 사용하여 임의의 휘도 시프트(luminance shifts) 및 색역 맵핑(gamut mapping)을 처리하는 것 등이 이용될 수도 있다.

전술한 SPR 방법은 디스플레이를 위한 우수한 결과 영상을 제공하고 있지만, 수학식2의 3 × 3 다이아몬드 필터 사용은, 각 서브픽셀을 렌더링하는데 필요한 정보를 저장하기 위해, 다수의 행 버퍼(row buffer)의 사용을 요구하게 된다. 각각의 행 버퍼는 그것의 작동을 위한 전력을필요로 하기 때문에, 행 버퍼들에 대한 필요성을 감소 내지는 제거하는 방법을 사용하여 SPR을 수행하는 것이 바람직하다.

따라서, 요구되는 행 버퍼의 수를 감소시키면서 원하는 영상을 생성하며, 충분한영상 품질을 제공하는, SPR을 수행하기 위한 개선된 장치 및 방법이 요구된다.

본 발명의 양태들은 적어도 전술한 문제점들 및/또는 단점들을 처리하여, 적어도 하술하는 이점들을 제공하기 위한 것이다. 따라서, 본 발명의 일 양태는 서브픽셀 렌더링(SPR)을 수행하기 위해 필요한 전력량을 감소시키기 위한 장치 및 방법을 제공하는 것이다.

본 발명의 다른 양태는 SPR을 수행하기 위해 필요한 논리 회로들의 수를 감소시키기 위한 장치 및 방법을 제공하는 것이다.

본 발명의 또 다른 양태는 SPR을 수행하기 위해 필요한 행 버퍼(row buffer)들의 수를 감소시키기 위한 장치 및 방법을 제공하는 것이다.

본 발명의 일 양태에 따르면, 서브픽셀을 렌더링하기 위한 방법이 제공된다. 상기 방법은, 촬영된 영상의 제 1 픽셀에 대한 영상 데이터를 수신하는 단계와, 촬영된 영상의 제 2 픽셀에 대한 영상 데이터를 수신하는 단계와, 상기 제 1 픽셀의 제 1 채도값(saturation value) 및 상기 제 2 픽셀의 제 2 채도값을 결정하는 단계와, 상기 제 1 채도값 및 상기 제 2 채도값에 기초하여, 최대 채도값을 결정하는 단계와, 상기 결정된 최대 채도값에 기초하여, 1차원 필터(one dimensional filter) 또는 단일 필터(unity filter)를 사용하여 서브픽셀 값을 렌더링하는 단계를 포함한다.

본 발명의 다른 양태에 따르면, 서브픽셀을 렌더링하기 위한 장치가 제공된다. 상기 장치는, 영상을 디스플레이하도록 구성된 디스플레이 유닛과, 촬영된 영상의 제 1 픽셀에 대한 영상 데이터를 수신하고, 상기 촬영된 영상의 제 2 픽셀에 대한 영상 데이터를 수신하고, 상기 제 1 픽셀의 제 1 채도값 및 상기 제 2 픽셀의 제 2 채도값을 결정하고, 상기 제 1 채도값 및 상기 제 2 채도값에 기초하여 최대 채도값을 결정하고, 상기 결정된 최대 채도값에 기초하여 1차원 필터 또는 단일 필터를 사용하여 서브픽셀 값을 렌더링하도록 구성된 영상 처리 유닛을 포함한다.

본 발명의 다른 양태들과, 이점들 및 핵심적인 특징들은 첨부 도면들과 함께 취해지고, 본 발명의 각종 실시예들을 개시하는, 하기의 구체적인 설명으로부터 당업자에게 자명할 것이다.

본 발명에 따르면, 요구되는 행 버퍼의 수를 감소시키면서 원하는 영상을 생성하며, 충분한 영상 품질을 제공할 수 있다.

본 발명의 각종 실시예들에 대한 상기 및 그 밖의 양태들, 특징들 및 이점들은 첨부 도면들과 함께 취해지는 하기의 설명으로부터 보다 명백하게 될 것이다.
도 1은 종래의 기술에 따른, 촬영된 영상 및 그 촬영된 영상에 대응하는 영상을 디스플레이하기 위한 디스플레이 유닛을 도시한 것이다.
도 2는 종래의 기술에 따른 서브픽셀 렌더링의 방법을 도시한 것이다.
도 3은 본 발명의 다양한 실시예들에 따른 디스플레이 유닛을 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 짝수 번째 픽셀처리의 도면이다.
도 5는 본 발명의 일 실시예에 따른 홀수 번째 픽셀처리의 도면이다.
도 6은 본 발명의 일 실시예에 따른 전자 장치를 도시한 블록도이다.
상기 도면들을 전반에 걸쳐, 유사한 참조 번호들은 동일하거나 유사한 요소들, 특징들 및 구조들을 도시하기 위해 사용된다는 것에 유의해야 한다.

첨부된 도면들을 참조하여, 본 발명의 다양한 양태들에 대한 상세한 설명을 이하 기술하도록 한다. 본 설명은예시로서만 기재된 것이지, 본 발명의 범위를 제한하는 것이 아니다.

첨부 도면을 참조하는 상세한 설명은, 청구 범위 및 그 등가물에 의해 규정되는 본 발명의 다양한 실시예들의 포괄적인 이해를 돕기 위해 제공된다. 이것은 그 이해를 돕기 위한 다양한 특정 세부사항을 포함하고 있지만, 이들은 단지 예시적인 것으로 간주되어야 한다. 따라서, 당업자는 본 발명의범위 및 사상으로부터 일탈하지 않는 범위 내에서는 여기에기재된 실시예들에 대한 다양한 변형 및 수정이이루어질 수 있음을 인식할것이다. 또한, 잘 알려진기능들 및 구조들에 대한 설명은 명료성 및 간결성을 위해 생략한다.

다음의 설명 및 청구 범위에서 사용된 용어들 및 단어들은 서지적 의미들에 국한되지 않으며, 단지 본 발명의명확하고 일관성있는 이해를가능하게 하기 위해 발명자에 의해 사용된다. 따라서, 본 발명의 다양한 실시예들에 대한 다음의 설명은 단지 예시의목적으로만 제공되는 것이며, 청구 범위 및 그 등가물에 의해 규정되는 본 발명을 제한 할 목적이 아니다.

또한, 본 명세서에서 명백하게 달리 지시하지 않는다면, "일" 및 "상기"와 같은 단수 표현들은 복수 표현들을 포함한다는 것이 이해될 수 있을 것이다. 따라서, 예를 들면, "일 컴포넌트 표면"은 하나 이상의 그러한컴포넌트 표면들을 포함한다.

용어 "실질적으로"에 의해, 그것은인용된 특성, 변수 또는 값이 정확하게 달성될 필요가 없다는것을 의미하지만, 예를 들면, 허용 오차, 측정 에러, 측정 정확성한계사항들 및 당업자에게 알려진그 밖의 인자를 포함하는 편차 또는 변형은, 그 특성이 제공하는 것으로 의도된 효과를 방해하지 않는 양으로 발생할 수도 있다.

달리 규정되지 않는다면, 기술적이거나 과학적인 용어를 포함하는 본 발명에서 사용되는 모든 용어들은 당업자에 의해 일반적으로 이해되는 의미들을 갖고 있다. 사전에서 정의되어 있을 수 있는 일반 용어들은 그 문맥과 일치하는 의미를 가지는 것으로 이해되어야 하며, 본 발명에서 명백하게 규정되지 않는다면, 이상적이거나 과도하게 형식적인 의미로 해석되어선 아니 된다.

본 발명의 다양한 실시예들에 따르면, 전자 장치는 통신 기능을포함할 수 있다. 예를 들면, 전자 장치는 스마트 폰, 태블릿 개인용 컴퓨터(PC), 모바일 폰, 비디오 폰, 전자책 리더(e-book reader), 데스크탑 PC, 랩탑 PC, 넷북 PC, PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), MP3 플레이어, 이동 의료 디바이스, 카메라, 웨어러블 디바이스(예컨대, 헤드-마운티드 디바이스(head-mounted device: HMD), 전자 의류, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 혹은 스마트 워치) 등이 될 수 있다.

본 발명의 다양한 실시예들에 따르면, 전자 장치는 통신 기능을가진 스마트 가정용 기기(smart home appliance)가 될 수도 있다. 스마트 가정용기기는 예를 들면, 텔레비젼, DVD(Digital Video Disk) 플레이어, 오디오, 냉장고, 에어컨, 진공 청소기, 오븐, 마이크로웨이브 오븐, 워셔, 드라이어, 공기 청정기, 셋-탑 박스, TV 박스(예컨대, Samsung HomeSyncTM, Apple TVTM, 혹은 Google TVTM), 게임 콘솔(gaming console), 전자 사전, 전자 키, 캠코더, 전자 사진 프레임 등이 될 수 있다.

본 발명의 다양한 실시예들에 따르면, 전자 장치는 의료 기기(예컨대, MRA(Magnetic Resonance Angiography) 디바이스, MRI(Magnetic Resonance Imaging) 디바이스, CT(Computed Tomography) 디바이스, 촬상 디바이스, 혹은 초음파 디바이스), 내비게이션 디바이스, GPS(Global Positioning System) 수신기, EDR(Event Eata Recorder), FDR(Flight Data Recorder), 자동차 인포테인먼트 디바이스, 항해 전자 장치(예컨대, 항해 내비게이션 디바이스, 자이로스코프, 혹은 나침반), 항공 전자 장치, 보안 디바이스, 산업용 혹은 소비자용 로봇 등이 될 수 있다.

본 발명의 다양한 실시예들에 따르면, 전자 장치는 통신 기능을포함하는, 가구, 빌딩/구조의일부, 전자 보드, 전자 서명 수신 디바이스, 프로젝터, 다양한측정 디바이스들(예컨대, 물, 전기, 가스 혹은 전자기파 측정 디바이스들) 등이 될 수 있다.

본 발명의 다양한 실시예들에 따르면, 전자 장치는 상기 설명한바와 같은 디바이스들의 임의의조합이 될 수도 있다. 또한, 본 발명의 다양한 실시예들에 따른 전자 장치는 상기 설명한 바와 같은 디바이스들에 한정되는 것이 아니라는 것이 당업자에게 자명할것이다.

관련 기술에서, 행 버퍼들에 대한 필요성이 감소될 수 있는 서브픽셀 렌더링(SPR)을 수행하는 방법은 필터 커널들을 1차원(1D) 어레이들로 한정한다. 1D 어레이의 예들로는 탭 텐트 필터, 2탭 박스 필터 등을 포함한다. 이러한SPR 방법에서는, 수신 영상에서의 픽셀의채도 레벨이 결정될 수 있으며, 채도 레벨이 임계값을 초과하는 경우에는, 디스플레이를 위한 서브픽셀들을 렌더링하는데 1D 필터가사용된다. 그러나, 채도 레벨이임계값 미만인 경우에는, 일반 영상의 대부분의 영역들에서와 같이, 상기 방법은 2차원(2D) 필터 커널, 예를 들면 도 2의 다이아몬드 커널을 사용함으로써, 데이터저장을 위한 행 버퍼들이 필요하게 된다.

본 발명의 다양한 실시예들은, 허용가능한 디스플레이용 영상을 생성하면서, 행 버퍼들에 대한 필요성을 제거하는 SPR을 위한 장치 및 방법을 포함한다. 본 발명의 일부로서, 크게 채도가 저하되어 있는 영상들을 위해 단일 필터를사용하여 SPR이 수행될 수 있음이 발견되었다. 즉, 매우 높은 공간주파수 영상들에 대해서도, 맵핑을위해 단일 필터를 사용하여 영상 선명도 및 정확한 컬러가유지된다는 것이 발견되었다. 그러나, 단일 필터 맵핑은, 특히 대각축에서 높은 공간주파수를 갖는 높은 채도의 영상들에 대해서는 부적당하다. 그 경우에는, 박스 필터와 같은 1D 필터 커널이 상당히 양호하게 작동한다는 것이 발견되었다. 따라서, 본 발명의 제 1 실시예에서는, 단일 필터 및 박스 필터가, 영상들의 컬러의 채도를 결정하는 방법과함께, 제공된다.

본 발명의 제 2 실시예에서는, 영상 샤프닝(image sharpening)을 위해 동위색교환 필터가 더 제공된다. 관련 기술에서 알려진 바와 같이, 2D 다이아몬드 필터 커널은 앤티-크로마틱 에일리어징(anti-chromatic aliasing)을 수행하기 위해 사용될 수 있으며, 계산된 루미넌스 플레인(luminance plane)에서 동작하는 동위색 교환 필터는영상을 다시 샤프닝하기 위해 사용될 수 있다. 이러한시스템은, 휘도 정보가 본래의RGB 컬러 채널들 중의 하나만에서 발생하는 경우에, 영상의 컬러를변경하지 않고서도, 서브픽셀 컬러들 모두를 사용하여, 본래의휘도 신호를 재구성할 수 있다는이점을 갖는다. 본 발명에서는, 텐트 필터, 박스 필터 등과 같은 1D 필터 세트에서 동위색샤프닝이 적용된다. 예를 들면, 박스 필터는 앤티-크로마틱 에일리어징을 제공하게 되며, 동위색 교환 필터와 같은 2개의 탭 "박스"가 영상을 선명하게 만든다.

아래에서 보다 상세히 설명되는 바와 같이, 박스 필터 및 샤프닝 필터는 화이트/컬러 "픽셀" 쌍들에서 또는 항상 한 방향으로 "리닝(leaning)"하여 행해질수 있다. 상기와 같이, 박스 필터는 채도가 높은 컬러들에 대하여, 샤프닝 없이도, 최상으로 작동한다. 따라서, 임계값 결정 또는 함수는, 퓨어 박스와 박스 플러스 메타-샤프닝 필터 간의 전환을 위해서 사용될 수 있다.

제 1 실시예

위에서 간략하게 설명한 바와 같이, 단일 필터는 영상의 채도가크게 낮은 경우에, 그 영상을RGBW(Red, Green, Blue, White) 타입 디스플레이 유닛의서브픽셀들에 맵핑하는데 사용될수 있는 것으로 밝혀졌다. 즉, 단일 필터는, 높은 공간주파수들(high spatial frequencies)에서도, 영상 선명도 및 정확한컬러를 유지하는 것을 포함하는 허용가능한 결과들을 생성한다. 그러나, 단일 필터 맵핑은, 채도가 높으면서 특히 대각축으로 높은 공간주파수들을 갖는 영상들에 대한 허용가능한 결과를생성하지 못한다. 그 경우에는, 박스 필터(box filter), 텐트 필터(tent filter) 등과 같은 1D 필터가 허용가능한 결과를 생성한다. 따라서, 제 1 실시예는 결정된 영상 컬러들의 채도에 기초하여, 단일 필터 및 1D 필터를 이용하는 SPR을 위한 장치 및 방법을 제공한다. 중요한 점은, 단일 필터 및 1D 필터만을 사용함으로써, 대응하는 행 버퍼들에 전력을 제공할필요성과 같은, 행 버퍼들에 대한 요구가 제거된다는 것이다.

도 3은 본 발명의 다양한실시예들에 따른, 영상의 짝수 번째픽셀들 상에서의 SPR을 개념적으로 도시한 것이다.

도 3을 참조하면, 종래 기술의 디스플레이 유닛(110)과 유사한 디스플레이 유닛(310)은, 레드 서브픽셀들(320R), 그린 서브픽셀들(320G), 블루 서브픽셀들(미도시) 및 화이트 서브픽셀들(미도시)을 갖는 RGBW(Red, Green, Blue, White) 타입이며, 여기서각 서브픽셀의 면적은 동일하다. 디스플레이 유닛(310)의 RGBW 레이아웃은 하나의클리어(clear) 서브픽셀로 구성된화이트, 무채색(achromatic) 픽셀들, 및 세 개의 픽셀들(즉, 레드, 그린, 및 블루)로 구성된풀 컬러(full color) 픽셀들로 이루어진 체커보드(checkerboard)로서 개념화될 수 있다. 따라서, 서브픽셀 렌더링을 수행할시에 하드웨어 및/또는 전력 제한사항들이 존재하지 않는다면, 디스플레이 유닛(310)의 서브픽셀들이 그룹화되어 RGB 출력 및 W 출력을 생성하게 될 것이다. 그러나, 보다 충분한 하드웨어의 사용 및 전력 소모 감축을 위해, RGBW 서브픽셀들의 각 세트는, 동일한행에서 인접하는 서브픽셀들의 두 세트(즉, 324i 및 324i+1)로 분할된다. 도 1을 참조하여 설명한 바와 같이, 각각의세트(324)는 쌍이라고 호칭되며, 여기서각각의 쌍(324)은 레드 서브픽셀(320R) 및 그린 서브픽셀(320G)(즉, RG 쌍) 또는 블루 서브픽셀 및 화이트 서브픽셀(즉, BW 쌍) 중의 하나로구성된다. RG 및 BW 쌍들은, 각각의행과 각각의 열이 교번되어 있다. 이하의 설명에서, RG 쌍들은짝수번째의 쌍들인 것으로 간주되고, BW 쌍들은 홀수번째의 쌍들인것으로 간주된다.

또한, 도 3에는 디스플레이 유닛(310) 위에 놓인 영상(304)이 도시되어 있다. 여기서, 영상(304)은 짝수 번째RG 쌍(324i) 및 홀수 번째BW 쌍(324i+1)의 공간 위에 각각 놓인 제 1 픽셀(306i) 및 제 2 픽셀(306i+1)을 포함한다. 따라서, 제 1 픽셀(306i)은 짝수 번째픽셀로 지정되고, 제 2 픽셀(306i+1)은 홀수 번째픽셀로 지정된다.

짝수 번째RG 쌍(324i)의 레드 서브픽셀들(320R), 그린 서브픽셀들(320G)의 값들을 결정하기 위한 짝수 번째픽셀(306i)의 처리에서는, 처리되고 있는 짝수 번째픽셀(306i) 및 이웃하는 홀수 번째픽셀(306i+1)에 대한 채도값들이 결정된다. 구현에 있어서, 채도값들은 다양한방법으로 얻어질 수 있다. 예를 들어, 채도값들은 미리 결정되어 있을 수도 있고, 다른 처리의 일부로서 저장되어 있을 수도 있다. 다른 예에서, 채도값들은 SPR을 위해 산출될 수도 있다. 일 예로서, 채도값들은 수학식3을 사용하여 산출될 수도 있다.

짝수 번째 픽셀(306i) 및 홀수 번째 픽셀(306i+1)에 대한 채도값들을 결정한이후에, 그 채도값들은 어떤 값이 더 큰지를 결정하기 위해서비교된다. 그에 따른 최대 채도값은, 단일 필터 또는 1D 필터가 서브픽셀 렌더링을 위해 사용되어야 하는지의 여부를 결정하는데 사용될 수 있다. 즉, 일반적으로 단일 필터는 낮은 채도를 갖는 영상에 바람직한 반면에, 일반적으로 1D 필터는높은 채도를 갖는 영상에 바람직하다. 따라서, 채도가 임계값을 초과하는 경우에는 1D 필터가 사용되고 채도가임계값 미만일 경우에는 단일 필터가 사용되도록, 임계값이 설정될 수 있다. 본 경우에서는, 결정된 채도의 레벨이임계값 미만이어서 단일 필터를 사용하게 되고, 짝수 번째 픽셀(306i)이 Ri의 레드 레벨 및 Gi의 그린 레벨을 갖는 경우, 단일 필터의 결과로서 레드 서브픽셀(320Ri) 및 그린 서브픽셀(320Gi)에 대해 렌더링된 각각의 값들은간단하게 Ri 및 Gi이 될 것이다.

한편, 채도가 임계값을 초과하는 경우에는, 박스 필터(즉, 박스 샘플링 영역(350))와 같은 1D 필터가 사용되게 된다. 본 경우에서는, 짝수 번째 픽셀(306i)이 Ri의 레드 레벨 및 Gi의 그린 레벨을 갖고, 이웃하는 홀수 번째 픽셀(306i+1)이 Ri+1의 레드 레벨 및 Gi+1의 그린 레벨을 갖는 경우, 박스 필터링의 결과로서 레드 서브픽셀(320Ri) 및 그린 서브픽셀(320Gi)에 대해 렌더링된 각각의 값들은 (Ri + Ri+1)/2 및 (Gi + Gi+1)/2 가 된다.

즉, 박스 필터는 짝수 번째 픽셀(306i) 및 그것의 이웃하는 홀수 번째 픽셀(306i+1)의 평균에 기초하여, 서브픽셀 값을 렌더링하게 된다. 다시 말해, 수학식 1에 기재된 다이아몬드 필터와 같이, 필터의 가중치는 1까지 가산되도록 선택되며, 박스 샘플링 영역(350) 내의 각각의 픽셀들(306i 및 306i+1)의 오버랩되는 영역들에 비례한다.

또한, 단일 필터 및 1D 박스 필터의 결과 알파 블렌딩(alpha blending)은 더욱 개선된 영상을 생성한다는 것이 밝혀졌다. 여기서, 용어 알파 블렌딩은, 단일 필터를 사용한 픽셀 렌더링의 결과들 및 1D 필터를 사용한 픽셀 렌더링의 결과들이, 채도 레벨에 따라 결정되는 비율로 블렌딩되는(blended) 처리를 지칭한다. 다시 말해, 결정된 채도는 알파의 값으로서 사용된다. 이것은 수학식 4를 사용하여 표현될 수 있다.

수학식 4에서, 320Ri는 레드 서브픽셀(320Ri)에 대해 렌더링된 값을 나타내고, sat는 짝수 번째픽셀(306i)과 이웃하는 홀수 번째픽셀(306i+1) 간의 최대 채도를 나타내고, Ri는 짝수 번째픽셀(306i)의 레드 값을 나타내며, 또한 Ri+1은 이웃하는 홀수 번째픽셀(306i+1)의 레드 값을 나타낸다. 알 수 있는 바와 같이, 첫번째 항은 단일 필터에1-sat를 곱한 결과를 나타내고, 두번째 항은 박스 필터에 sat를 곱한 결과를 나타낸다. 이와 같이, 서브픽셀(320Ri)는 단일 필터의 결과 또는 박스 필터의 결과 하나만을 기초로 하지 않으며, 대신에 양쪽 모두의 필터들의 결과의 알파(즉, sat) 블렌드에 기초하게 된다.

도 4는 본 발명의 일 실시예에 따른, 짝수 번째 픽셀처리의 도면이다.

도 4를 참조하면, 영상(304)의 짝수 번째픽셀(306i) 및 이에 이웃하는 영상(304)의 홀수 번째픽셀(306i+1)이 고려된다. 알 수 있는 바와 같이, 픽셀들(306i 및 306i+1) 각각은, 서브스크립트들(i 및 i+1)로 표시된 바와 같은 그것과 관련된 R, G, B, W 및 채도값들을 갖는다. 동작 410에서는, 해당 값들이 얻어진다. 동작 420에서는, 짝수 번째픽셀(306i)의 채도값과 홀수 번째픽셀(306i+1)의 채도값이 비교되고, 그 최대값이 선택되어 저장된다. 저장된 최대 채도값을 사용하여, 동작 430에서는 레드 서브픽셀(320Ri) 및 그린 서브픽셀(320Gi)에 대한 값들이 결정된다. 수학식 4를 참조하여 위에서 설명한 바와 같이, 저장된 최대 채도값은 단일 필터와 1D 박스 필터 간의 알파 블렌드를 산출하는데 사용된다. 특히, 동작 430에 예시된 연산이 수학식 4에 기재된 것과 상이한 것처럼 보이지만, 이것들은 수학적으로 동일한 것이다. 그러나, 동작 430에 예시된 연산은 수학식 4의 것에 비하여 승수(multiplier)의 수를 감축하고 있으며, 이에 따라 처리 부하를 감소시킨다. 동작 430에서는, 레드 서브픽셀(320Ri) 및 그린 서브픽셀(320Gi)에 대한 값들이 수학식 5를 사용하여 결정된다.

수학식 5를 검토해 보면, 채도값이 낮은 경우, 두번째 항(즉, 박스 필터 항)은 최종결과에 대한 더 적은 중요성을 가지게 되고, 이에 따라 렌더링된 서브픽셀 값은 단일 필터 결과쪽으로 스큐잉(skewing)된다. 한편, 채도값이 높은 경우에는, 두번째 항이 더 큰 중요성을 가지게 되고, 이에 따라 최종결과는 1D 필터 결과쪽으로 스큐잉될 것이다. 동작 440에서는, 짝수 번째 픽셀(306i)의 처리로부터 얻어진 렌더링된 서브픽셀 값들(즉, 320Ri 및 320Gi)이 출력된다.

도 5는 본 발명의 일 실시예에 따른 홀수 번째 픽셀 처리의 도면이다.

도 5를 참조하면, 먼저, 영상(304)의 홀수 번째 픽셀(306i) 및 이에 이웃하는 영상(304)의 짝수 번째 픽셀들(306i-1 및 306i+1)이 고려된다. 서브스크립트 i는 관심 대상인 픽셀을 나타내며, 서브스크립트들 i-1 및 i+1는 바로 앞에 선행하는 및 바로 뒤에 후행하는 픽셀을 나타낸다는 것이 이해될 것이다. 따라서, 서로 상이한 실제 픽셀들에 대하여 도 4 및 도 5에서는, 동일한 지정(306i)이 사용되어 있다. 픽셀들(306i-1, 306i및 306i+1) 각각은 서브스크립트들(i-1, i 및 i+1)로 표시된 바와 같은, 그것과 관련된 R, G, B, W 및 채도값들을 갖는다. 동작 510에서는, 해당 값들이 얻어진다.

동작 520에서는, 홀수 번째픽셀(306i)의 채도값과 짝수 번째픽셀(306i+1)의 최대값이 비교되고, 그 최대값이 선택되어 저장된다. 동작 525에서는, 홀수 번째픽셀(306i)의 블루 채도값과 선행의 짝수 번째픽셀(306i-1)의 블루 채도값이 비교되고, 그 블루 채도의 최대값이 선택되어 저장된다. 선행 픽셀(306i-1)을 사용하는 이유는, 전술한 화이트 픽셀들 및 RGB 픽셀들로 이루어지는 체커보드인 RGBW 디스플레이의 개념과 관련된다. 다시, 하드웨어 및/또는 전력 제한사항들이 존재하지 않는 경우에는, 서브픽셀들이 그룹화되어 RGB 출력 및 W 출력을 생성하게 된다. 그러나, 자원들을 보다 효율적으로 사용하기 위해, 픽셀들은 RG 쌍들 및 BW 쌍들로 그룹화된다. 이에 따라, 홀수 번째픽셀을 처리할 경우에는, 적절한 값을 렌더링하기 위하여, 현재의 픽셀(즉, 306i) 및 선행 픽셀(즉, 306i-1)에 기초하여 블루 채도값이 결정되어야만 한다.

동작 530에서는, 화이트 서브픽셀(320Wi) 및 블루 서브픽셀(320Bi)에 대한 값들이 결정된다. 화이트 서브픽셀(320Wi)의 값에 있어서는, 처리되고 있는 홀수 번째픽셀(306i) 및 후행의 짝수 번째픽셀(306i+1)로부터의 값들과 함께, 저장되어 있는 최대 채도값이 사용된다. 블루 서브픽셀(320Bi)의 값에 있어서는, 처리되고 있는 홀수 번째픽셀(306i) 및 선행의 짝수 번째픽셀(306i-1)로부터의 값들과 함께, 저장되어 있는 최대 블루 채도값이 사용된다. 다시, 저장되어 있는 채도값들은 단일 필터와 1D 박스 필터 간의 알파 블렌드를 산출하는데 사용된다. 동작 530에서는, 수학식 6이 320Wi 및 320Bi의 값들을 결정하는데 사용될 수 있다.

동작 540에서는, 홀수 번째픽셀(306i)의 처리로부터 얻어진 렌더링된 서브픽셀 값들(즉, 320Wi및 320Bi)이 출력된다.

도 4 및 도 5에 대한 전술에서는, 각 픽셀(306)에 대한 채도 및 블루 채도의 값들을 이용하여 실제 채도를 나타냈다. 그러나, 채도 및/또는 블루 채도의 값들은 상이한 SPR 결과를 산출하기 위하여 조정 또는 수정될 수도 있다. 예를 들면, 실제 채도값들이 사용되어 두 픽셀들 간의 최대 채도가 50%인 것으로 결정된 경우, 그것은 동일한 비율의 단일 및 박스 필터 결과들을 야기하게 된다. 그러나, 채도 인덱스(saturation index)에 2를 곱하여100%로 클립핑(clipping)하면, 동일한 50% 채도 인덱스들을 100%로 맵핑하게 되고, 이에 따라 박스 필터 결과만을 활용하게 된다. 물론, 이러한 채도값들 및 블루 채도값들에 대한 특정한 조정은 일 예일뿐이며, 채도값들 및 블루 채도값들은 입력 영상이나 소망하는 결과에 따른 다수의 상이한 방법들로 변경될 수도 있다. 실험에서는, 채도 인덱스에 대한 이러한 수정들은 몇 가지 테스트 패턴의 영상 품질을 향상시키는 것이 발견되었다.

제 1 실시예의 대안으로서는, 최대 채도 대신에, 최소 인버스 채도(minimum inverse saturation)(즉, 채도 저하(desaturation))가 사용될 수도 있다. 인버스 채도를 사용함으로써, 렌더링 결과는 차분 필터(샤프닝(sharpening)) 응답에 추가된 박스 필터 응답인 것으로 고려될 수 있다. 이러한 대안 형태에서는, 수학식 7을 사용하여 320Ri, 320Gi, 320Bi 및 320Wi의 값들이 얻어질 수 있다.

수학식 7에서, inverse sat는 백분율로서 고려되는 경우에는 100% - sat로, 그렇지 않은 경우에는 1-sat로 결정된다. 마찬가지로, inverse satb 백분율로서 고려되는 경우에는 100% - satb로, 그렇지 않은 경우에는 1-satb로 결정된다. 여기서, inverse sat의 사용은 처리 부하를 더욱 감소시킬 수 있다는 점에서 유용성을 더욱 달성할 수 있다.

제 2 실시예

본 발명의 제 2 실시예에서는, 수학식 6의 동일한 컬러 샤프닝 필터들이, 루미넌스 샤프닝 필터로 대체됨으로써 동위색 샤프닝(metamer sharpening)의 유용성을 달성한다. 이것이 수학식 8에 기재되어 있다.

여기서,

수학식 8에서, a, b, c 및 d의 값들은 레드, 그린, 블루, 및 화이트 서브픽셀들(320Ri, 320Gi, 320Bi 및 320Wi)에 관한 근사화된 휘도 비례 상수들이다. 예시적 구현에서, a, b, c 및 d의 값들은 하드웨어 구현의 편의를 위해2/16, 5/16, 1/16 및 8/16로 설정된다. 물론, 이들 값들이 한정적인 것은 아니며, 입력 데이터 및 소망하는 출력 결과들의 변화에 따라 변경될 수도 있다.

수학식 8에서, 루미넌스 필터들은, 그것들이 i번째 및 i+1번째 픽셀들을 고려하므로, '순방향' 리닝 필터들(leaning filters)인 것으로 고려된다. 그러나, 페어-와이즈(pair-wise) 처리에 있어서, 320Wi 서브픽셀에 대한 루미넌스 필터는, 그것이 i번째 및 i-1번째 픽셀들을 고려할 수도 있는 점에서 역방향으로 리닝(leaning)하도록 이루어질 수도 있다. 본 경우에, 320Wi의 값은 수학식 9를 사용하여 결정될 수 있다.

수학식 9의 역방향 리닝 루미넌스 필터의 사용은, 픽셀(306i)의 RGB 컴포넌트로부터 W 컴포넌트로의 및 그 반대로의 동일한 휘도 교환을 가능하게 한다. RGB 짝수 번째 픽셀처리에 있어서의 (Li+1-Li) 항은, 후행의 W 홀수 번째 픽셀처리 동안의 (Li-1-Li) 항의 음의 값과 동일하며, 이에 따라 휘도 에너지는 각각의 픽셀 쌍 내에서 보존된다. 이러한 동작 모드에서, 그 결과는 휘도 에너지의 샤퍼 분포(sharper distribution) 대 단독 박스 필터링된 결과를 나타내게 되며, 또한 픽셀-바이-픽셀(pixel-by-pixel) 기반이 아닌 픽셀-페어(pixel-pair) 기반으로 계속해서 컬러를 유지하게 된다. 샤퍼 픽셀 쌍(sharper pixel pair)은, 블러리어(blurrier) 단독으로 박스 필터링된 픽셀 쌍에 대한 동위색 매치(metameric match)인 것으로 고려된다.

도 6은 본 발명의 일 실시예에 따른 전자 장치를 도시한 블록도이다.

도 6을 참조하면, 전자 장치(600)는 제어 유닛(610), 저장 유닛(620), 영상 처리 유닛(630), 디스플레이 유닛(640), 입력 유닛(650), 및 통신 유닛(660)을 포함할 수 있다.

본 발명의 다양한 실시예들에 따르면, 전자 장치(600)는 적어도 하나의 제어 유닛(610)을 포함한다. 적어도 하나의 제어 유닛(610)은 전자 장치(600)를 동작적으로 제어하도록 구성될 수 있다. 예를 들면, 적어도 하나의 제어 유닛(610)은 전자 장치(600)에 포함된 다양한 컴포넌트들 또는 유닛들의 동작을 제어할 수 있다. 적어도 하나의 제어 유닛(610)은 전자 장치(600)에 포함된 다양한 컴포넌트들에 대한 신호를 송신할 수 있으며, 전자 장치(600)의 내부 블럭들 간에서의 신호 흐름을 제어할 수도 있다. 적어도 하나의 제어 유닛(610)은 적어도 하나의 프로세서이거나 그것을 포함할 수 있다. 예를 들면, 적어도 하나의 제어 유닛(610)은 응용 프로세서(AP) 등을 포함할 수도 있다.

저장 유닛(620)은 본 발명의 다양한 실시예들에 따른 기능들을 동작시키는 프로그램 및 유저 데이터 등을 저장하도록 구성될 수 있다. 저장 유닛(620)은 비일시적 컴퓨터-판독가능 저장매체를 포함할 수 있다. 일 예로서, 저장 유닛(620)은 전자 장치(600), 전자 장치(600)를 부팅하는 OS(Operating System), 및 카메라 기능, 음성 응답 기능, 영상이나 비디오 응답 기능, 신호 강도 측정 기능, 경로 생성 기능, 영상 처리 등과 같은 기타 선택 기능들을 수행하기 위한 애플리케이션 프로그램의 일반 동작을 제어하기 위한 프로그램을 저장할 수 있다. 또한, 저장 유닛(620)은 예를 들면, 텍스트 메시지, 게임 파일, 음악 파일, 영화 파일 등과 같은, 단말(620)의 사용에 따라 생성되는 유저 데이터를 저장할 수도 있다. 본 발명의 다양한 실시예들에 따르면, 저장 유닛(620)은 실질적으로 동일한 시점의 하나 이상의 영상들을 촬영하기 위하여 카메라 유닛(미도시)을 개별적으로 또는 조합하여 동작시키는 하나의 애플리케이션 또는 복수의 애플리케이션들을 저장할 수도 있다. 본 발명의 다양한 실시예들에 따르면, 저장 유닛(620)은 전술한 기능들, 동작들, 또는 스텝들 중의 어느 것을 수행하도록, 개별적으로 또는 조합하여 영상 처리 유닛(630) 또는 제어 유닛(610)을 동작시키는 하나의 애플리케이션 또는 복수의 애플리케이션들을 저장할 수도 있다. 예를 들면, 하나의 애플리케이션 또는 복수의 애플리케이션들은 영상 처리 유닛(630) 또는 제어 유닛(610)으로 하여금, 픽셀 채도값들, 인버스 채도값들, 서브픽셀 컬러 값들, 휘도 값들 등 중의 어느 것을 결정하게 할 수도 있다. 저장 유닛(620)은 상대편 전자 장치 등으로부터 하나 이상의 영상들을 수신하기 위하여 상대편 전자 장치와 통신하도록, 개별적으로 또는 조합하여 제어 유닛(610) 및 통신 유닛(660)을 동작시키는 하나의 애플리케이션 또는 복수의 애플리케이션들을 저장할 수도 있다. 저장 유닛(620)은 그래픽 유저 인터페이스, 영상, 비디오 등을 디스플레이하도록, 개별적으로 또는 조합하여 디스플레이 유닛(640)을 동작시키는 하나의 애플리케이션 또는 복수의 애플리케이션들을 저장할 수도 있다.

영상 처리 유닛(630)은 영상 데이터, 영상 등을 처리하도록 구성될 수 있으며, 또한 SPR 유닛(미도시) 등을 포함할 수도 있다. 대안적으로 또는 추가적으로, 영상 처리 유닛(630)은 SPR 등을 수행하도록 구성될 수도 있다.

디스플레이 유닛(640)은 사용자에 의해 입력되는 정보 또는 사용자에게 제공되는 정보 그리고 전자 장치(600)의 각종 메뉴들을 디스플레이한다. 예를 들면, 디스플레이 유닛(640)은 대기 화면, 메시지 작성 화면, 발신 화면, 경로 계획 화면 등과 같은 사용자에 따른 각종 화면을 제공할 수도 있다. 본 발명의 다양한 실시예들에 따르면, 디스플레이 유닛(640)은 전자 장치(600)의 신호 강도에 관한 기능 선택을 입력하기 위하여, 터치 스크린을 통해 입력값들을 조정하거나 입력할 수 있다. 디스플레이 유닛(640)은 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diode), AMOLED(Active Matrix Organic Light Emitting Diode) 등으로 형성될 수 있다. 그러나, 본 발명의 다양한 실시예들은 이러한 예들로 한정되지 않는다. 또한, 디스플레이 유닛(640)은, 그것이 터치 스크린으로 형성되는 경우에 입력 유닛(650)의 기능을 수행할 수 있다.

입력 유닛(650)은 사용자 입력을 수신하기 위한 입력 키들 및 기능 키들을 포함할 수 있다. 예를 들면, 입력 유닛(650)은 숫자나 다양한 세트의 문자 정보의 입력을 수신하고, 전자 장치(600)의 각종 기능들을 설정하고, 그 기능들을 제어하기 위한 입력 키들 및 기능 키들을 포함할 수도 있다. 예를 들면, 입력 유닛(650)은 음성 통화를 요청하기 위한 통화 키, 영상 통화를 요청하기 위한 영상 통화 요청 키, 음성 통화나 영상 통화의 종료를 요청하기 위한 종료 키, 오디오 신호의 출력 볼륨을 조정하기 위한 볼륨 키, 방향 키 등을 포함할 수 있다. 특히, 본 발명의 다양한 실시예들에 따르면, 입력 유닛(650)은 카메라 유닛(미도시)의 동작, 영상 선택, 시점 선택 등에 관한 신호들을 적어도 하나의 제어 유닛(610)에 송신할 수 있다. 이러한 입력 유닛(650)은 터치 패드, 터치스크린, 버튼-타입 키패드, 조이스틱, 휠 키 등과 같은 입력 수단 하나 또는 이들의 조합에 의해 형성될 수도 있다.

통신 유닛(660)은 다른 전자 장치들 및/또는 네트워크들과 통신하도록 구성될 수 있다. 본 발명의 다양한 실시예들에 따르면, 통신 유닛(660)은 각종 통신 프로토콜들 및 각종 통신 송수신기들을 사용하여 통신하도록 구성될 수 있다. 예를 들면, 통신 유닛(660)은 블루투스 기술, NFC 기술, WiFi 기술, 2G 기술, 3G 기술, LTE 기술, 또는 다른 무선 기술 등을 통해 통신하도록 구성될 수 있다.

본 명세서의 청구 범위 및 상세한 설명에 따른 본 발명의 다양한 실시예들은 하드웨어, 소프트웨어의 형태로 또는 하드웨어와 소프트웨어의 조합으로 구현될 수 있다는 것이 인식될 것이다.

임의의 이러한 소프트웨어는 비일시적 컴퓨터 판독가능 저장매체에 저장될 수도 있다. 비일시적 컴퓨터 판독가능 저장매체는 하나 이상의 프로그램들(소프트웨어 모듈들)을 저장하며, 이러한 하나 이상의 프로그램들은 전자 장치 내의 하나 이상의 프로세서들에 의해 실행될 경우, 전자 장치로 하여금 본 발명의 방법을 수행하게 하는 인스트럭션들을 포함한다.

임의의 이러한 소프트웨어는, 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM(Read Only Memory) 등의 저장소와 같은 휘발성 또는 비휘발성 저장소의 형태로, 또는 예를 들어, RAM(Random Access Memory), 메모리 칩, 장치 또는 집적 회로와 같은 메모리의 형태로, 또는 예를 들어 콤팩트 디스크(CD), DVD(Digital Versatile Disc), 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능한 매체 상에서 저장될 수 있다. 저장 장치들 및 저장 매체는 실행될 시에 본 발명의 다양한 실시예들을 구현하는 것을 포함하는 프로그램 또는 프로그램들을 저장하는데 적합한 비일시적 머신-판독가능 저장소에 대한 다양한 실시예들이라는 것이 인식될 것이다. 따라서, 다양한 실시예들은 본 명세서의 청구 범위들 중의 어느 것에서 청구된 바와 같은 장치나 방법을 구현하기 위한 코드를 포함하는 프로그램 및 그러한 프로그램을 저장하는 비일시적 머신-판독 가능한 저장소를 제공한다.

본 발명은 그것의 다양한 실시예들을 참조하여 도시 및 기술되었지만, 첨부된 청구 범위 및 그 등가물에 의해 규정되는 바와 같은 본 발명의 사상 및 범위를 벗어나지 않는 범위 내에서는 형태 및 세부사항에서 각종 변형들이 이루어질 수 있다는 것을 당업자는 이해할 것이다. 본 발명의 다양한 실시예들은 다만 예시로서 기술되었으며, 본 발명의 범위를 한정하기 위한 것으로 의도되지 않는다. 따라서, 본 발명의 범위는 본 발명의 기술적 사상으로부터 벗어나지 않는 범위 내에서 이루어질 수 있는 임의의 및 모든 수정사항들을 포함하는 것임을 이해해야 한다.

Claims

서브픽셀을 렌더링하기 위한 방법으로서,
촬영된 영상의 제 1 픽셀에대한 영상 데이터를 수신하는 단계
촬영된 영상의 제 2 픽셀에대한 영상 데이터를 수신하는 단계
상기 제 1 픽셀의 제 1 채도값(saturation value) 및 상기 제 2 픽셀의제 2 채도값을 결정하는 단계
상기 제 1 채도값 및 상기 제 2 채도값에 기초하여, 최대 채도값을 결정하는 단계 및
상기 결정된 최대 채도값에 기초하여, 1차원 필터(one dimensional filter) 또는 단일 필터(unity filter)를 사용하여 서브픽셀 값을 렌더링하는 단계
를 포함하는 서브픽셀을 렌더링하기 위한 방법.
제 1 항에 있어서,
상기 서브픽셀 값의 렌더링은, 상기 최대 채도값이 임계값을 초과하는 경우에는 상기 1차원 필터를 사용하고, 상기 최대 채도값이 상기 임계값 미만인 경우에는 상기 단일 필터를 사용하는 것을 포함하는, 서브픽셀을 렌더링하기 위한 방법.
제 1 항에 있어서,
상기 서브픽셀 값의 렌더링은, 상기 1차원 필터와 상기 단일 필터의혼합 출력(blended output)을 사용하는 것을 포함하는, 서브픽셀을 렌더링하기 위한 방법.
제 3 항에 있어서,
상기 1차원 필터와 상기 단일 필터의 혼합 출력은, 상기 최대 채도값에 기초하여 달라지는, 서브픽셀을 렌더링하기 위한 방법.
제 3 항에 있어서,
상기 서브픽셀 값의 렌더링은, 다음의식을 사용하는 것을 포함하고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai+1는 상기 제 2 픽셀의 컬러 값이며, sat는 상기 결정된 최대 채도인, 서브픽셀을 렌더링하기 위한 방법.
제 3 항에 있어서,
상기 서브픽셀 값의 렌더링은, 다음의식을 사용하는 것을 포함하고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai-1는 상기 제 2 픽셀의 컬러 값이며, sat는 상기 결정된 최대 채도인, 서브픽셀을 렌더링하기 위한 방법.
제 6 항에 있어서,
상기 결정된 최대 채도는, 상기 제 1 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트(blue component) 및 상기 제 2 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트에 기초한것인, 서브픽셀을 렌더링하기 위한 방법.
제 1 항에 있어서,
상기 제 1 채도값 및 상기 제 2 채도값의 결정은, 다음의 식을 사용하는 것을 포함하고,

여기서 r은 각각의 픽셀의레드 값이고, g는 각각의 픽셀의그린 값이며, b는 각각의 픽셀의블루 값인, 서브픽셀을 렌더링하기 위한 방법.
제 8 항에 있어서,
상기 최대 채도값의 결정은, 상기 채도값에 2를 곱하고, 그 결과값을 100%로 클립핑(clipping)하는 것을 포함하는, 서브픽셀을 렌더링하기 위한 방법.
제 1 항에 있어서,
상기 서브픽셀 값의 렌더링은, 다음의식을 사용하는 것을 포함하고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai+1는 상기 제 2 픽셀의 컬러 값이며, inverse sat는 {100% -상기 결정된 최대 채도}로서 결정되는, 서브픽셀을 렌더링하기 위한 방법.
제 1 항에 있어서,
상기 서브픽셀 값의 렌더링은, 다음의식을 사용하는 것을 포함하고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai-1는 상기 제 2 픽셀의 컬러 값이며, inverse sat는 {100% - 상기 결정된 최대 채도}로서 결정되는, 서브픽셀을 렌더링하기 위한 방법.
제 11 항에 있어서,
상기 결정된 최대 채도는, 상기 제 1 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트 및 상기 제 2 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트에 기초한 것인, 서브픽셀을 렌더링하기 위한 방법.
제 1 항에 있어서,
상기 서브픽셀 값의 렌더링은, 다음의식을 사용하는 것을 포함하고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai+1는 상기 제 2 픽셀의 컬러 값이고, Li는 상기 제 1 픽셀의 휘도 값이고, Li+1은 상기 제 2 픽셀의 휘도 값이며, inverse sat는 {100% - 상기 결정된 최대 채도}로서 결정되는, 서브픽셀을 렌더링하기 위한 방법.
제 13 항에 있어서,
상기 Li의 값은, 다음의식을 사용하여 결정되고,

여기서 Ri는 상기 제 1 픽셀에 대한 상기 영상 데이터의 레드 컴포넌트이고, Gi는 상기 제 1 픽셀에 대한 상기 영상 데이터의 그린 컴포넌트(green component)이고, Bi는 상기 제 1 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트이고, Wi는 상기 제 1 픽셀에 대한 상기 영상 데이터의 화이트 컴포넌트(white component)이며, a, b, c 및 d는 근사화된 휘도 비례 상수들인, 서브픽셀을 렌더링하기 위한 방법.
서브픽셀을 렌더링하기 위한 장치로서,
영상을 디스플레이하도록 구성된디스플레이 유닛 및
촬영된 영상의 제 1 픽셀에대한 영상 데이터를 수신하고, 상기 촬영된 영상의 제 2 픽셀에대한 영상 데이터를 수신하고, 상기 제 1 픽셀의 제 1 채도값 및 상기 제 2 픽셀의 제 2 채도값을 결정하고, 상기 제 1 채도값및 상기 제 2 채도값에 기초하여 최대 채도값을 결정하고, 상기 결정된 최대 채도값에 기초하여 1차원 필터 또는 단일 필터를 사용하여 서브픽셀 값을 렌더링하도록 구성된 영상 처리 유닛
을 포함하는 서브픽셀을 렌더링하기 위한 장치.
제 15 항에 있어서,
상기 영상 처리 유닛은, 상기 최대 채도값이 임계값을 초과하는 경우에는 상기 1차원 필터를 사용하고, 상기 최대 채도값이 상기 임계값 미만인 경우에는 상기 단일 필터를 사용하는 것에 의하여상기 서브픽셀 값들을 렌더링하도록 더 구성되는, 서브픽셀을 렌더링하기 위한 장치.
제 15 항에 있어서,
상기 영상 처리 유닛은, 상기 1차원 필터와 상기 단일 필터의혼합 출력을 사용하여 상기 서브픽셀 값들을 렌더링하도록 더 구성되는, 서브픽셀을 렌더링하기 위한 장치.
제 17 항에 있어서,
상기 1차원 필터와 상기 단일 필터의 혼합 출력은, 상기 최대 채도값에 기초하여 달라지는, 서브픽셀을 렌더링하기 위한 장치.
제 17 항에 있어서,
상기 영상 처리 유닛은, 다음의식을 사용하여 상기 서브픽셀 값들을 렌더링하도록 더 구성되고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai+1는 상기 제 2 픽셀의 컬러 값이며, sat는 상기 결정된 최대 채도인, 서브픽셀을 렌더링하기 위한 장치.
제 17 항에 있어서,
상기 영상 처리 유닛은, 다음의식을 사용하여 상기 서브픽셀 값들을 렌더링하도록 더 구성되고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai-1는 상기 제 2 픽셀의 컬러 값이며, sat는 상기 결정된 최대 채도인, 서브픽셀을 렌더링하기 위한 장치.
제 20 항에 있어서,
상기 결정된 최대 채도는, 상기 제 1 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트 및 상기 제 2 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트에 기초한것인, 서브픽셀을 렌더링하기 위한 장치.
제 15 항에 있어서,
상기 영상 처리 유닛은, 다음의식을 사용하여 상기 제 1 채도값및 상기 제 2 채도값을 결정하도록 더 구성되고,

여기서 r은 각각의 픽셀의레드 값이고, g는 각각의 픽셀의그린 값이며, b는 각각의 픽셀의블루 값인, 서브픽셀을 렌더링하기 위한 장치.
제 22 항에 있어서,
상기 영상 처리 유닛은, 상기 채도값에 2를 곱하고, 그 결과값을 100%로 클립핑하는 것에 의하여 상기 최대 채도값을 결정하도록 더 구성되는, 서브픽셀을 렌더링하기 위한 장치.
제 15 항에 있어서,
상기 영상 처리 유닛은, 다음의식을 사용하여 상기 서브픽셀 값들을 렌더링하도록 더 구성되고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai+1는 상기 제 2 픽셀의 컬러 값이며, inverse sat는 {100% - 상기 결정된 최대 채도}로서 결정되는, 서브픽셀을 렌더링하기 위한 장치.
제 15 항에 있어서,
상기 영상 처리 유닛은, 다음의식을 사용하여 상기 서브픽셀 값들을 렌더링하도록 더 구성되고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai-1는 상기 제 2 픽셀의 컬러 값이며, inverse sat는 {100% -상기 결정된 최대 채도}로서 결정되는, 서브픽셀을 렌더링하기 위한 장치.
제 25 항에 있어서,
상기 결정된 최대 채도는, 상기 제 1 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트 및 상기 제 2 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트에 기초한것인, 서브픽셀을 렌더링하기 위한 장치.
제 15 항에 있어서,
상기 영상 처리 유닛은, 다음의식을 사용하는 것에 의하여 상기 서브픽셀 값들을 렌더링하도록 더 구성되고,

여기서 A는 상기 서브픽셀의 렌더링된 값이고, Ai는 상기 제 1 픽셀의 컬러 값이고, Ai+1는 상기 제 2 픽셀의 컬러 값이고, Li는 상기 제 1 픽셀의 휘도 값이고, Li+1은 상기 제 2 픽셀의 휘도 값이며, inverse sat는 {100% -상기 결정된 최대 채도}로서 결정되는, 서브픽셀을 렌더링하기 위한 장치.
제 27 항에 있어서,
상기 Li의 값은, 다음의식을 사용하여 결정되고,

여기서 Ri는 상기 제 1 픽셀에 대한 상기 영상 데이터의 레드 컴포넌트이고, Gi는 상기 제 1 픽셀에 대한 상기 영상 데이터의 그린 컴포넌트이고, Bi는 상기 제 1 픽셀에 대한 상기 영상 데이터의 블루 컴포넌트이고, Wi는 상기 제 1 픽셀에 대한 상기 영상 데이터의 화이트 컴포넌트이며, a, b, c 및 d는 근사화된 휘도 비례 상수들인, 서브픽셀을 렌더링하기 위한 장치.