KR20080016872A - Lti/cti에 의한 비디오 선명도와 대비도의 강조 - Google Patents

Lti/cti에 의한 비디오 선명도와 대비도의 강조 Download PDF

Info

Publication number
KR20080016872A
KR20080016872A KR1020077029808A KR20077029808A KR20080016872A KR 20080016872 A KR20080016872 A KR 20080016872A KR 1020077029808 A KR1020077029808 A KR 1020077029808A KR 20077029808 A KR20077029808 A KR 20077029808A KR 20080016872 A KR20080016872 A KR 20080016872A
Authority
KR
South Korea
Prior art keywords
wavelet decomposition
module
decomposition
input image
wavelet
Prior art date
Application number
KR1020077029808A
Other languages
English (en)
Other versions
KR100951965B1 (ko
Inventor
왈리드 알리
Original Assignee
인텔 코오퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔 코오퍼레이션 filed Critical 인텔 코오퍼레이션
Publication of KR20080016872A publication Critical patent/KR20080016872A/ko
Application granted granted Critical
Publication of KR100951965B1 publication Critical patent/KR100951965B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/10Image enhancement or restoration by non-spatial domain filtering
    • G06T5/73
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/142Edging; Contouring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20064Wavelet transform [DWT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation

Abstract

비디오 선명도를 강조하기 위한 장치, 시스템, 방법, 및 물품이 개시된다. 장치는 입력 화상의 선명도를 향상시키기 위하여 미디어 처리 노드를 포함할 수 있다. 미디어 처리 노드는 에지 정보를 검출 및 변경하기 위하여 입력 화상의 웨이블릿 분해를 수행하기 위한 웨이블릿 분해 모듈을 포함할 수 있다. 다른 실시예들이 설명되고, 청구된다.
웨이블릿 변환(wavelet transform), 디바우치(Debauchies), 에지 정보(edge information), 윈도우잉(windowing), 퓨리어 변환(Fourier transform)

Description

LTI/CTI에 의한 비디오 선명도와 대비도의 강조{ENHANCING VIDEO SHARPNESS AND CONTRAST BY LUMINANCE AND CHROMINANCE TRANSIENT IMPROVEMENT}
선명도는 인간의 시각 시스템에 의해 결정되는 인지적 특징이다. 인간의 눈이 색도 신호(chrominance signal)의 선명도보다 휘도 신호(luminance signal)의 선명도에 더 민감한 반면, HDTV(High Definition Television) 화상과 같은 고 해상도의 화상은 휘도(흑백)와 색도의 선명도 양측을 함께(co-joint) 강조해야 한다. NTSC 및 PAL 등의 컬러 텔레비젼 방송 표준에 있어서, 예를 들어, 색도 신호와 휘도 신호의 제한된 대역폭은 비교적 느린 전송을 야기시켜, 수신되는 화상들에 있어서 흐릿한 에지를 일으킨다.
선명도 강조를 위한 다양한 방법들은, 픽쳐(picture) 품질을 더욱 향상시키기 위하여 에지 천이(edge transition)를 사용하였지만, 픽쳐 콘텐츠에 대한 적응성에 있어서 부족하였으며, 잡음 시퀀스로 인해 열화되었고, 및/또는 복잡한 하드웨어를 필요로 하였다. 에지 천이를 향상시키는 것은 전체적으로 향상된 선명도를 가져오지만, 픽쳐 콘텐츠에 대한 적응성의 부족은 신경을 거스르는 아티팩트들을 가져오며, 선명도 향상의 전체적인 효과를 감소시킨다.
도 1은 시스템의 일 실시예를 나타낸다.
도 2는 선명도 강조의 일 실시예를 나타낸다.
도 3은 웨이블릿 분해의 일 실시예를 나타낸다.
도 4는 웨이블릿 분해 출력의 일 실시예를 나타낸다.
도 5는 논리 흐름의 일 실시예를 나타낸다.
도 6은 처리된 화상의 일 실시예를 나타낸다.
도 1은 시스템의 일 실시예를 나타낸다. 도 1은 통신 시스템(100)의 블록도를 나타낸다. 다양한 실시예들에 있어서, 통신 시스템(100)은 다수의 노드들을 포함할 수 있다. 노드는 일반적으로 통신 시스템(100)에서 정보를 전달하기 위한 임의의 물리적 또는 논리적 개체를 포함할 수 있으며, 설계 파라미터 또는 성능 제한요소의 주어진 셋트에 대하여 소망하는 바에 따라 하드웨어, 소프트웨어, 또는 임의의 그 조합으로 구현될 수 있다. 도 1에서는 예를 들어 제한된 수의 노드들을 나타내고 있지만, 그보다 많은 또는 그보다 적은 노드들이 주어진 구현예에서 채용될 수 있음을 이해할 수 있을 것이다.
다양한 실시예들에 있어서, 노드는 컴퓨터 시스템, 컴퓨터 서브시스템, 컴퓨터, 어플라이언스, 워크스테이션, 터미널, 서버, 퍼스널 컴퓨터(PC), 랩탑, 울트라-랩탑, 핸드헬드 컴퓨터, PDA(Personal Digital Assistant), 셋톱 박스(STB), 전화기, 모바일 전화기, 셀룰러 전화기, 핸드셋트, 무선 액세스 포인트, 기지국(BS), 가입자국(SS), MSC(mobile subscriber center), 무선 네트워크 컨트롤러(RNC), 마이크로프로세서, ASIC, PLD 등의 집적 회로, 범용 프로세서, DSP, 및/또는 네트워 크 프로세서 등의 프로세서, 인터페이스, 입출력(I/O) 장치(예컨대, 키보드, 마우스, 디스플레이, 프린터), 라우터, 허브, 게이트웨이, 브릿지, 스위치, 회로, 논리 게이트, 저항, 반도체 장치, 칩, 트랜지스터, 또는 임의의 기타의 디바이스, 머신(machine), 툴, 장비, 컴포넌트, 또는 그 조합을 포함하거나, 이들로서 구현될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 노드는 소프트웨어, 소프트웨어 모듈, 어플리케이션, 프로그램, 서브루틴, 명령어 셋트, 컴퓨팅 코드, 단어들, 값들, 심볼들, 또는 그 조합을 포함하거나, 이들로서 구현될 수 있다. 노드는 프로세서에 특정 기능을 수행하도록 지시하기 위한 소정의 컴퓨터 언어, 방법, 또는 구문에 따라서 구현될 수 있다. 컴퓨터 언어의 예로서는, C, C++, Java, BASIC, Perl, Matlab, Pascal, Visual BASIC, 어셈블리어, 머신 코드(machine code), 네트워크 프로세서의 마이크로-코드, 등을 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 통신 시스템(100)은 하나 이상의 프로토콜에 따라서 정보를 통신, 관리, 또는 처리할 수 있다. 프로토콜은 노드들 간의 통신을 관리하기 위한 소정의 법칙 또는 명령어 셋트를 포함할 수 있다. 프로토콜은 ITU(International Telecommunication Union), ISO(International Organization for Standardization), IEC(International Electrotechnical Commission), IEEE(Institute of Electrical and Electronics Engineers), IETF(Internet Engineering Task Force), MPEG(Motion Picture Experts Group), 등의 표준 기구에 의해 공표된 바와 같은 하나 이상의 표준에 의해 정의될 수 있다. 예를 들어, 기재된 실시예들은 NTSC, PAL, MPEG-1, MPEG-2, MPEG-4, DVB-T(Digital Video Broadcasting Terrestrial) 방송 표준, ITU/IEC H.263 표준, 낮은 비트 레이트 통신을 위한 비디오 부호화(Video Coding for Low Bitrate Communication), 2000년 11월 발표된 ITU-T 추천 H.263v3, 및/또는 ITU/IEC H.264 표준, 매우 낮은 비트 레이트 통신을 위한 비디오 부호화(Video Coding for Very Low Bit rate Communication), 2003년 5월 발표된 ITU-R Recommendation H.264 등의 미디어 처리를 위한 표준에 따라서 동작하도록 배치될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 1에 도시된 바와 같이, 통신 시스템(100)은 미디어 처리 노드(102)를 포함할 수 있다. 다양한 실시예들에 있어서, 미디어 처리 노드(102)는 처리 시스템, 처리 서브시스템, 프로세서, 컴퓨터, 디바이스, 인코더, 디코더, 코더/디코더(CODEC), 필터링 디바이스(예컨대, 그래픽 스케일링 디바이스, 디블록킹 필터링 디바이스), 변환 디바이스, 엔터테인먼트 시스템, 디스플레이, 또는 기타의 다른 처리 아키텍쳐 중 하나 이상을 포함하거나, 이들로서 구현될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 미디어 처리 노드(102)는 미디어 정보 및 제어 정보 등의 하나 이상의 종류의 정보를 처리하도록 배치될 수 있다. 미디어 정보는 일반적으로 화상 정보, 비디오 정보, 그래픽 정보, 오디오 정보, 음성 정보, 텍스트 정보, 수치 정보, 수문자(alphanumeric) 심볼, 캐릭터 심볼, 등의 사용자를 위 한 콘텐츠를 나타내는 임의의 데이터를 일컬을 수 있다. 제어 정보는 일반적으로 자동화된 시스템을 위한 커맨드(command), 명령어(instruction), 또는 제어 워드(control word)를 나타내는 임의의 데이터를 일컬을 수 있다. 예를 들어, 제어 정보는 시스템을 통해 미디어 정보를 라우팅하거나, 노드에 특정 방법으로 미디어 정보를 처리하도록 지시하기 위하여 사용될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 미디어 처리 노드(102)는 미디어 소오스 노드(104)로부터 수신되는 미디어 정보를 처리하도록 배치될 수 있다. 미디어 소오스 노드(104)는 화상 정보, 비디오 정보, 및/또는 오디오/비디오(A/V) 정보 등의 미디어 정보를 전달할 수 있는 임의의 미디어 소오스를 포함할 수 있다. 미디어 소오스의 예로서는, 컴퓨터에서부터 디스플레이 등의 비디오 신호들을 위한 소오스를 포함할 수 있다. 미디어 소오스의 또 다른 예로서는, 텔레비젼 신호 등의 A/V 신호들의 소오스를 포함할 수 있다. 미디어 소오스는 표준 아날로그 텔레비젼 신호, 디지털 텔레비젼 신호, HDTV 신호, 등을 소오싱하거나 전달하도록 배치될 수 있다. 텔레비젼 신호들은, 텔레비젼 오디오 정보, 텔레비젼 비디오 정보, 및 텔레비젼 제어 정보 등의 다양한 종류의 정보를 포함할 수 있다. 텔레비젼 비디오 정보는 비디오 프로그램, 컴퓨터 생성 화상들(CGI), 등으로부터의 콘텐츠를 포함할 수 있다. 텔레비젼 오디오 정보는 음성, 음악, 소리, 효과, 등을 포함할 수 있다. 텔레비젼 제어 정보는 텔레비젼 비디오 및/또는 오디오 정보, 상업 광고, 리프레쉬 레이트(refresh rate), 동기 신호, 등을 표시하기 위한 임베디드된 제어 신호들일 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
일부 실시예에 있어서, 미디어 소오스 노드(104)는 DVD 디바이스, VHS 디바이스, 디지털 VHS 디바이스, 디지털 카메라, A/V 캠코더, 게임 콘솔, CD 플레이어, 등의 다양한 포맷으로 저장되는 프리(pre)-레코드된 미디어를 전달하도록 배치되는 디바이스를 포함할 수 있다. 또 다른 예에 있어서, 미디어 소오스 노드(104)는 미디어 처리 노드(102)에 브로드캐스트 또는 스트리밍 아날로그 또는 디지털 텔레비젼 또는 오디오 신호들을 제공하기 위하여 미디어 분산 시스템을 포함할 수 있다. 미디어 분산 시스템의 예로는, 예를 들어, OTA(Over The Air) 브로드캐스트 시스템, 지상파 케이블 시스템(CATV), 위성 브로드캐스트 시스템, 등을 포함할 수 있다. 이러한 문맥에 미디어 소오스 노드(104)의 종류와 위치가 제한되지는 않는다.
다양한 실시예들에 있어서, 미디어 처리 노드(102)는 입력 화상을 수신하도록 배치될 수 있다. 입력 화상은 하나 이상의 비디오 화상들로부터 유도되거나 이에 관련되는 임의의 데이터를 포함할 수 있다. 일 실시예에 있어서, 예를 들어, 입력 화상은 수평 및 수직의 양방향으로 샘플링되는 신호들(예컨대, Y, U, 및 V)을 포함하는 비디오 시퀀스의 픽쳐를 포함할 수 있다. 다양한 실시예들에 있어서, 입력 화상은 화상 데이터, 비디오 데이터, 비디오 시퀀스, 픽쳐의 그룹, 픽쳐, 화상, 영역, 객체, 프레임, 슬라이스, 마크로블록, 블록, 픽셀, 신호 등 중에서 하나 이상을 포함할 수 있다. 픽셀들에 지정되는 값들은 실수 및/또는 정수를 포함할 수 있다.
다양한 실시예들에 있어서, 미디어 처리 노드(102)는 수신된 입력 화상에 대 한 선명도 강조를 수행하도록 배치될 수 있다. 미디어 처리 노드(102)는, 예를 들어, LTI/CTI(luminance transient improvement and chrominance transient improvement)을 이용하여 적응성 선명도 강조를 수행할 수 있다. 다양한 구현예들에 있어서, 미디어 처리 노드(102)는 웨이블릿 필터 뱅크를 통해 에지 정보를 분해하고, 에지들에 대한 주파수-진폭 분포를 적응적으로 변화시킴으로써 인지되는 선명도를 강조하도록 LTI/CTI 처리를 수행할 수 있다. LTI/CTI 처리는 웨이블릿 변환을 사용하여 에지 천이를 향상시킴으로써(예컨대, 화상의 상이한 부분들에서의 가변적인 에지 강조) 픽쳐를 적응적으로 선명하게 하는, 실시간 비디오 선명도 강조를 포함할 수 있다. LTI/CTI 처리는 아티팩트들의 도입을 방지하면서 인지되는 선명도의 상당한 강조를 가져올 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 2는 선명도 강조의 일 실시예를 나타낸다. 도 2는 LTI/CTI 처리를 이용한 선명도 강조의 일 실시예를 나타낸다. 다양한 실시예들에 있어서, 시스템(예컨대, 통신 시스템(100))에 의해서 및/또는 노드(예컨대, 미디어 처리 노드(102))에 의해서 LTI/CTI 처리가 수행될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 2에 도시된 바와 같이, 원래의 에지(a)의 선명도는 LTI/CTI 변경된 에지(b)로 강조될 수 있다. 픽쳐가 완전히 평면인 경우, 모든 샘플 값들은 실질적으로 동일하다. 원래의 에지(a)는 에지(예컨대, 수평 에지)가 존재하는 경우, 수평 방향의 샘플 값들이 갑작스러운 변화를 겪는다는 것을 나타낸다. LTI/CTI 변경된 에지(b)에 도시된 바와 같이, LTI/CTI 처리는 에지들을 더 가파르도록 하거나 경사도를 증가시킴으로써 에지들을 더 선명하게 만들 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, LTI/CTI 처리는 천이를 검출하고, 천이의 길이를 계산하고(예컨대, 에지에 해당하는 천이를 얻는데 필요한 샘플 수), 천이의 분포를 변화시키는 것을 포함할 수 있다. 예를 들어, LTI/CTI 처리는 천이를 검출하기 위하여 특정 방향으로 픽셀 값들을 추적하고, 에지의 급격도(steepness) 또는 경사도를 계산하는 것을 포함할 수 있다. 다양한 구현예들에 있어서, 에지 급격도를 변화시키도록 픽셀 값들(예컨대, 주파수 성분들)을 변화시킴으로써 선명도가 향상될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 1을 다시 참조하면, 미디어 처리 노드(102)는 다수의 모듈들을 포함할 수 있다. 모듈들은 설계 또는 성능 제한요소들의 주어진 셋트에 대하여 소망하는 바에 따라, 하나 이상의 시스템, 서브시스템, 프로세서, 디바이스, 머신, 툴, 컴포넌트, 회로, 레지스터, 어플리케이션, 프로그램, 서브루틴, 또는 임의의 그 조합을 포함하거나, 이들로서 구현될 수 있다. 다양한 실시예들에 있어서, 모듈들은 하나 이상의 통신 매체에 의해 연결될 수 있다. 통신 매체는 일반적으로 정보 신호를 전할 수 있는 임의의 매체를 포함할 수 있다. 예를 들어, 통신 매체는 주어진 구현예에 대하여 소망하는 바에 따라 유선 통신 매체, 무선 통신 매체, 또는 그 조합을 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
모듈들은 휘발성 및 비휘발성 모두를 포함하여 데이터를 저장할 수 있는 임 의의 컴퓨터 판독가능 저장 매체에 의해 구현될 수 있는 메모리를 포함할 수 있다. 저장 매체의 예로서는, RAM, DRAM, DDRAM, SDRAM, 플래시 메모리, ROM, PROM, EPROM, EEPROM, CAM(Content Addressable Memory), 폴리머 메모리(예컨대, 강유전체 폴리머 메모리(ferroelectric polymer memory), 오보닉 메모리(ovonic memory), 상변화 또는 강유전체 메모리(phase change or ferroelectric memory)), SONOS(Silicon-Oxide-Nitride-Oxide-Silicon) 메모리, 디스크 메모리(예컨대, 플로피 디스크, 하드 드라이브, 광학 디스크, 자기 디스크), 또는 카드(예컨대, 자기 카드, 광학 카드), 또는 정보를 저장하기에 적합한 기타의 다른 종류의 매체를 포함할 수 있다. 저장 매체는 컴퓨터 프로그램 명령어들 및 데이터를 저장하기 위하여 머신 판독가능 저장 장치들의 다양한 조합 및/또는 다양한 컨트롤러들을 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
미디어 처리 노드(102)는 웨이블릿 분해 모듈(106)을 포함할 수 있다. 다양한 실시예들에 있어서, 분해 모듈(106)은 입력 화상을 수신하도록 배치될 수 있다. 입력 화상은, 예를 들어, 수평 및 수직 양 방향에서 샘플링되는 신호들(예컨대, Y, U, 및 V)을 포함하는 비디오 시퀀스의 픽쳐를 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 웨이블릿 분해 모듈(106)은 웨이블릿 분해를 수행하도록 배치될 수 있다. 웨이블릿 분해는, 예를 들어, 2차원 직교 웨이블릿 분해를 포함할 수 있다. 웨이블릿 분해는 신호 성분들(예컨대, YUV 또는 RGB)에서 임의의 일반적인(general) 방향의 에지 정보를 자동 검출할 수 있다. 다양한 웨이 블릿 분해들이 사용될 수 있음을 이해할 수 있을 것이다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 웨이블릿 분해는 구성되는 주파수 성분들을 변경시킴으로써 에지를 더욱 급격하게 만드는 것뿐만 아니라 에지들의 위치를 판정하는 것을 포함할 수 있다. 웨이블릿 분해는 과도적인 처리 및/또는 에지 검출에 대한 웨이블릿 분석을 수행하는 것을 포함할 수 있다. 에지 정보는, 예를 들어, 웨이블릿 필터 뱅크를 통해 분해될 수 있으며, 에지들의 주파수-진폭 분포는 적응적으로 변화될 수 있다. 웨이블릿은 임의의 물리적 현상에 대하여 시간과 공간 양측에서 분석을 가능하게 하는, 시간적인 양상과 스케일 또는 공간의 양상을 포함할 수 있다. 웨이블릿 분석은 가변 크기의 영역으로 윈도우잉(windowing)하는 기법을 포함할 수 있다. 웨이블릿 분석은 더욱 정교한 저주파수 정보가 요구되는 경우 긴 시간 간격의 사용을 허용할 수 있으며, 고주파수 정보가 요구되는 경우 더 짧은 영역의 사용을 허용할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
웨이블릿 분해는 웨이블릿 변환의 채용을 포함할 수 있다. 다양한 실시예들에 있어서, 웨이블릿 변환은, 예를 들어, 디바우치(Debauchies) 웨이블릿 변환과 같은 이산 웨이블릿 변환(DWT)을 포함할 수 있다. 다양한 구현예들에 있어서, 웨이블릿 변환은 웨이블릿 계수의 계산 량을 줄이기 위하여 2배의 비율의 등비수열(geometric sequence)을 따르는 2가(dyadic)의 스케일과 위치를 사용할 수 있다. 2가의 웨이블릿 변환은 효율성을 향상시키며, 일반적으로, 정확하다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 웨이블릿 분해는 다수 레벨 분해의 수행을 포함할 수 있다. 일 실시예에 있어서, 예를 들어, 웨이블릿 분해는 3개 레벨의 분해를 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 3은 웨이블릿 분해의 일 실시예를 나타낸다. 도 3은 다수 레벨 웨이블릿 분해의 일 실시예를 나타낸다. 다양한 구현예들에 있어서, DWT와 같은 웨이블릿 변환을 채용하는 것은 신호(S)가 수평, 수직, 및 대각 방향에서 낮은 상세 성분(low-detail component)(A1)과 높은 상세 성분(high-detail component)(D1)으로 분해되는 것을 허용한다. 근사화 및 상세한 분석이 다수 레벨에서 중복될 수 있다. 예를 들어, DWT는 수평, 수직, 및 대각 방향에서 낮은 상세 성분(A1)에 대하여 또 다른 낮은 상세 성분(A2) 및 또 다른 레벨의 높은 상세 성분(D2)으로 순환적으로(recursively) 적용될 수 있다. 순환적인 적용은 이하의 수식에 따라서 다수 레벨의 분해에 대하여 수행될 수 있다:
Figure 112007091655401-PCT00001
(1)
여기서, S는 원래의 화상, Ai 및 Di 는 i번째 레벨의 근사화 및 상세 분해이다. 이 수식은 이하와 같이 더 일반화될 수 있다:
Figure 112007091655401-PCT00002
(2)
도 4는 웨이블릿 분해 출력의 일 실시예를 나타낸다. 도 4는 휘도 신호의 3 레벨 2차원 웨이블릿 분해를 포함하는 웨이블릿 분해로부터의 출력의 일 실시예를 나타낸다. 다양한 실시예들에 있어서, 화상은 2차원 신호(x 및 y 방향)를 포함할 수 있다. 3 레벨 2차원의 DWT(2D-DWT)를 원래의 화상(a)에 적용함으로써 웨이블릿 분해를 수행하는 것은, 제1 레벨의 근사 및 상세(b), 제2 레벨의 근사 및 상세(c), 및 제3 레벨의 근사 및 상세(d)를 발생시킬 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 1을 다시 참조하면, 웨이블릿 분해 모듈(106)은 원래의 화상(108)에 대하여 웨이블릿 분해를 수행하도록 배치될 수 있다. 다양한 실시예들에 있어서, 웨이블릿 분해 모듈(106)은 제1 레벨 근사 및 상세(110-1), 2레벨 근사 및 상세(110-2), 및 3레벨 근사 및 상세(110-3)를 생성하도록 3레벨 2차원 웨이블릿 분해(예컨대, 2D-DWT)를 수행할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
미디어 처리 노드(102)는, 수평 에지 강조 모듈(112), 수직 에지 강조 모듈, 및 대각 에지 강조 모듈(116)과 같은 하나 이상의 에지 강조 모듈을 포함할 수 있다. 다양한 실시예들에 있어서, 수평 에지 강조 모듈(112), 수직 에지 강조 모듈, 및 대각 에지 강조 모듈(116)은 분해 출력(예컨대, 2D-DWT 출력)을 변화시키도록 배치될 수 있다. 다양한 구현예들에 있어서, 웨이블릿 분해의 상세 성분(고주파수)에만 수평, 수직, 및 대각 강조가 적용되는 한편, 웨이블릿 분해의 각 레벨의 근사 성분(저주파수)은, 선명도 강조 방법이 화상 내의 저주파수 성분에 반응하는 것이 아니라, 중간 및 고주파수 성분들에 반응하는 것을 확실하게 하기 위하여, 강조하지 않고 통과될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 수평 에지 강조 모듈(112), 수직 에지 강조 모듈, 및 대각 에지 강조 모듈(116)은 더 많은 성분들로 더 높은 주파수의 성분들을 패딩(pad)하여, 분해된 성분들을 이어 맞추도록 배치될 수 있다. 매 분해 레벨에서의 상대적인 에너지 량에 기초하여 상이한 분해 레벨들이 상이하게 취급될 수 있다(소프트 문턱치(soft threshold)). 다양한 구현예들에 있어서, 2D-DWT 분해는 제1 레벨에서 인자 t1으로, 제2 레벨에서 인자 t2로, 제3 레벨에서 인자 t3로(여기서, t1>t2>t3), 수평, 수직 및 대각 방향에서 고주파수 성분들을 부스팅(boost)함으로써 변경될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 수평 에지 강조 모듈(112)은 수평 방향의 제1 레벨 근사 및 상세(110-1)로부터 제1 강조 인자 th1 만큼 고주파수 성분들을 부스팅할 수 있다. 수평 에지 강조 모듈(112)은 수평 방향의 제2 레벨 근사 및 상세(110-2)로부터 제2 강조 인자 th2 만큼 고주파수 성분들을 부스팅할 수 있다. 수평 에지 강조 모듈(112)은 수평 방향의 제3 레벨 근사 및 상세(110-3)로부터 제3 강조 인자 th3 만큼 고주파수 성분들을 부스팅할 수 있다(th1>th2>th3). 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 수직 에지 강조 모듈(114)은 수직 방향의 제1 레벨 근사 및 상세(110-1)로부터 제1 강조 인자 tv1 만큼 고주파수 성분들을 부스팅할 수 있다. 수직 에지 강조 모듈(114)은 수직 방향의 제2 레벨 근사 및 상세(110-2)로부터 제2 강조 인자 tv2 만큼 고주파수 성분들을 부스팅할 수 있다. 수직 에지 강조 모듈(114)은 수직 방향의 제3 레벨 근사 및 상세(110-3)로부터 제3 강조 인자 tv3 만큼 고주파수 성분들을 부스팅할 수 있다(tv1>tv2>tv3). 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 대각 에지 강조 모듈(116)은 대각 방향의 제1 레벨 근사 및 상세(110-1)로부터 제1 강조 인자 td1 만큼 고주파수 성분들을 부스팅할 수 있다. 대각 에지 강조 모듈(116)은 대각 방향의 제2 레벨 근사 및 상세(110-2)로부터 제2 강조 인자 td2 만큼 고주파수 성분들을 부스팅할 수 있다. 대각 에지 강조 모듈(116)은 대각 방향의 제3 레벨 근사 및 상세(110-3)로부터 제3 강조 인자 td3 만큼 고주파수 성분들을 부스팅할 수 있다(td1>td2>td3). 이러한 문맥에 실시예들이 제한되지는 않는다.
미디어 처리 노드(102)는 복원 모듈(118)을 포함할 수 있다. 다양한 실시예들에 있어서, 복원 모듈(118)은 변경된 분해 레벨들을 이용하여 복원을 수행하도록 배치될 수 있다. 다양한 구현예들에 있어서, 복원 모듈(118)은 수평 에지 강조 모듈(112), 수직 에지 강조 모듈, 및 대각 에지 강조 모듈(116)로부터 웨이블릿 분해의 강조된 수평, 수직, 및 대각 상세 성분을 수신할 수 있다. 복원 모듈(118)은 웨이블릿 분해 모듈(106)로부터의 강조없이 웨이블릿 분해의 각 레벨의 근사 성분(저주파수)을 수신할 수 있다. 다양한 구현예들에 있어서, 복원 모듈(118)은 루마 및 크로마(luma and chroma)(YUV 신호들)의 변경된 주파수 성분들을 이용하며, 웨이블릿 변환을 역으로 한 각각의 화상을 취득하기 위하여 역변환을 수행할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
일부 경우에 있어서, 에지 정보가 약하다면, 약한 실제 신호들은 잡음과 혼동될 수 있다. 다양한 구현예들에 있어서, 이러한 상황을 구제하기 위하여 잡음 존재의 로컬 문턱치에 대하여 적응적으로 결정하도록 로컬 잡음 측정 기법이 사용될 수 있다. 로컬 잡음 측정 기법은 픽쳐 콘텐츠에 기초하여 코어링 값을 적응적으로 판정할 수 있다. 코어링 값은 픽쳐 특성에 따라서 입력 신호(YU 또는 V)의 매우 낮은 백분율로 설정될 수 있다. 다양한 구현예들에 있어서, 화상 내의 코어링 문턱치를 가정하기 위하여 (유효한 가우시안 가정법을 가정하여) 원래 값의 거의 96%가 배제되도록, 코어링 값이 2% 내지 4%로 설정될 수 있다. 코어링 값은 잡음의 레벨을 측정하고, 시간 영역(화상 자체)과 주파수 영역(각 분해 레벨) 양측에서의 국부화된(localized) 측정법을 제공하기 위하여, 각 분해 레벨에서 국부적으로 사용될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 미디어 처리 노드(102)는 미디어 목적지 노드(120)에 출력 화상을 제공하도록 배치될 수 있다. 미디어 목적지 노드(120)는 화상 정보, 비디오 정보, 및/또는 A/V 정보 등의 미디어 정보를 수신할 수 있는 임의의 미디어 목적지를 포함할 수 있다. 다양한 실시예들에 있어서, 미디어 처리 노드(102)는 시스템, 서브시스템, 프로세서, 컴퓨터, 디바이스, 엔터테인먼트 시스템, 디스플레이, 또는 임의의 다른 아키텍쳐 중 하나 이상을 포함하거나, 이들로서 구현될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
이하의 도면들과 첨부된 예들을 참조하여 다양한 실시예들의 동작에 관하여 더 설명한다. 도면들 중 일부는 논리 흐름을 포함할 수 있다. 논리 흐름은 어떻 게 기재된 기능이 구현될 수 있는지의 일례를 단지 제공한다는 것을 이해할 수 있을 것이다. 또한, 주어진 논리 흐름은 달리 나타내지 않는다면, 반드시 제공된 순서대로 실행되어야 할 필요는 없다. 또한, 논리 흐름은 하드웨어 요소, 프로세서에 의해 실행되는 소프트웨어 요소, 또는 임의의 그 조합으로써 구현될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 5는 논리 흐름(500)의 일 실시예를 나타낸다. 도 5는 선명도 강조를 수행하기 위한 논리 흐름(500)을 나타낸다. 다양한 실시예들에 있어서, 논리 흐름(500)은 시스템(예컨대, 통신 시스템(100)) 및/또는 노드(예컨대, 미디어 처리 노드(102))에 의해서 수행될 수 있다. 논리 흐름(500)은 다양한 다른 종류의 하드웨어, 소프트웨어, 및/또는 그 조합에 의해 구현될 수 있다는 것을 이해해야 한다. 이러한 문맥에 실시예들이 제한되지는 않는다.
논리 흐름(500)은 입력 화상을 수신하는 것(블록 502)을 포함할 수 있다. 다양한 실시예들에 있어서, 입력 화상은 수평 및 수직 방향의 양측에서 샘플링되는 신호들(예컨대, Y, U, 및 V)을 포함하는 비디오 시퀀스의 픽쳐를 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
논리 흐름(500)은 입력 화상에 대한 웨이블릿 분해의 수행을 포함할 수 있다(블록 504). 다양한 실시예들에 있어서, 웨이블릿 분해는 2차원 직교 웨이블릿 분해를 포함할 수 있다. 구현예들에 있어서, 웨이블릿 분해의 수행은 다수 레벨의 분해의 수행을 포함할 수 있다. 웨이블릿 분해는 신호 성분들(예컨대, YUV 또는 RGB)에서 임의의 일반적인 방향의 에지 정보를 자동 검출할 수 있다. 웨이블릿 분 해는 구성되는 주파수 성분들을 변경함으로써 에지들을 더욱 급격하게 만들 뿐만 아니라 에지들의 위치를 판정할 수 있다. 웨이블릿 분해는 웨이블릿 변환(예컨대, DWT)의 채용을 포함할 수 있다. 이러한 문맥에 실시예들이 제한되는 것은 아니다.
논리 흐름(500)은 웨이블릿 분해 출력의 강조를 포함할 수 있다(블록 506). 다양한 실시예들에 있어서, 수평, 수직, 및 대각 강조가 웨이블릿 분해의 상세 성분(고주파수)에 적용될 수 있다. 다양한 구현예들에 있어서, 고주파수 성분들은 더 많은 성분들로 패딩되어, 분해된 성분들을 이어 맞추도록 한다. 각 분해 레벨의 상대적인 에너지 량에 기초하여 상이한 분해 레벨들이 상이하게 취급될 수 있다(소프트 문턱치). 다양한 구현예들에 있어서, 웨이블릿 분해의 출력은 제1 분해 레벨에서 인자 t1으로, 제2 분해 레벨에서 인자 t2로, 제3 분해 레벨에서 인자 t3으로(여기서, t1>t2>t3) 수평, 수직, 및 대각 방향의 고주파수 성분들을 부스팅함으로써 강조될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
논리 흐름(500)은 화상의 복원을 포함할 수 있다(블록 508). 다양한 실시예들에 있어서, 변경된 분해 레벨을 이용하여 복원이 수행될 수 있다. 다양한 구현예들에 있어서, 강조된 웨이블릿 분해의 수평, 수직, 및 대각 상세 성분 및 강조하지 않은 웨이블릿 분해의 각 레벨의 근사 성분(저주파수)을 이용하여 복원이 수행될 수 있다. 복원은 웨이블릿 변환을 역으로 한 각각의 화상을 취득하기 위해 역변환을 수행하는 것을 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
도 6은 처리된 화상의 일 실시예를 나타낸다. 도시된 바와 같이, 원래의 화 상(a)의 선명도는 추가되는 아티팩트들의 도입없이 강조되었다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 기재된 실시예들은 잡음과 아티팩트 증폭을 방지하면서 웨이블릿 변환과 복원을 이용한 LTI/CTI에 의해 전반적인 선명도 효과를 향상시킬 수 있다. 에일리어싱(aliasing), 지터(jitter), 또는 클립핑(clipping) 등의 임의의 아티팩트를 거치지 않고, 인지되는 선명도를 부스팅함으로써 픽쳐 품질이 향상될 수 있다. 다양한 비디오 시퀀스(예컨대, 비월/순차, 블록/무블록, 잡음성/무잡음성) 및 콘텐츠(예컨대, 동작이 많은(high motion) 콘텐츠, 사람 및 피부가 많은 주제, 자연 및 합성 콘텐츠)에 대하여 선명도가 강조될 수 있다. 잡음이 있다 하더라도, 잡음을 그 원래 레벨을 넘어서 증폭하지 않고서 전반적인 인지되는 선명도가 향상될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 기재된 실시예들은 현재의 화상(강조를 고려중인 픽쳐)에만 2 차원 웨이블릿 분해를 활용할 수 있다. 에지의 시작과 끝이 하나의 프레임으로부터 정확하게 판정될 수 있다. 이에 의해, 상당히 더 작은 메모리가 필요할 수 있다. 기재된 실시예들은 고려중인 현재의 화상의 콘텐츠에 대하여 문턱치와 분해 결정을 적응(adapt)시킬 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 기재된 실시예들은 지원되는 윈도우(그 위에서 천이가 발생한 것으로 상정되는 픽셀 수) 뿐만 아니라 양측의 에지 방향(예컨대, 수직 또는 수평)에서 가설을 가정하지 않고서 모든 방향의 에지들을 고유적으 로(inherently) 검출할 수 있다. 기재된 실시예는 이러한 요구사항들에 투명할 수 있으며, 픽쳐 콘텐츠에 대하여 아무런 사전 가정을 하지 않을 수 있다. 에지 방향들의 사전 가정이 이루어지지 않기 때문에, 기재된 실시예들은 HDTV의 원래 소오스가 더 낮은 해상도의 화상(예컨대, SD)이더라도 HDTV 신호에 적용되는 경우 선명도 향상에 효과적이다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 기재된 실시예들은 웨이블릿 분석을 수행할 수 있다. 웨이블릿 분석은 신호를 상이한 주파수의 구성성분 정현파(sinusoid)들로 분석하는(break down) 퓨리어 분석(Fourier analysis)에 대하여 장점들을 제공할 수 있다. 예를 들어, 신호의 퓨리어 변환을 보는 경우, 언제 특정 이벤트가 발생하였는지를 말할 수 없다. 이는 거의 모든 자연 신호들은 시변하는(time varying) 통계적 특성을 갖는 비정상(non-stationary) 신호이기 때문에, 주요한 단점이다. STFT(Short-Time Fourier Transform)은 신호를 시간과 주파수의 2차원 함수에 맵핑시킴으로써 통상적인 퓨리어 변환의 단점을 극복한다. 그러나, 이러한 접근법은 시간 윈도우에 대하여 특정 크기가 일단 선택되면, 그 윈도우는 모든 주파수에 대하여 동일하므로, 낮은 정밀도를 가지게 된다.
다양한 구현예들에 있어서, 기재된 실시예들은 피킹(peaking)보다 양호한 결과를 성취할 수 있다. LTI/CTI는 천이에 주파수 성분을 추가함으로써 인지되는 선명도를 향상시키는 반면, 피킹은 고주파수 성분들의 진폭을 증폭함으로써 인지되는 화상 선명도를 강조시킨다. 즉, 신호의 대역폭과 주파수 성분은 LTI/CTI 후에 변화되는 반면, 피킹에 있어서는, 아무런 새로운 주파수 성분이 발생되지 않는다. 피킹은 기본적으로 화상을 라플라시안 커널(Laplacian kernel)로 컨볼루션(convolving)함으로써 얻어지는 제1차 또는 제2차 도함수를 추가함으로써 더 높은 공간 주파수 성분들을 부스팅하는 한편, 오버플로우(클립핑 방지) 및/또는 잡음에 대한 감응성(코어링 방지)을 방지한다. 피킹은 신호의 제1차 또는 제2차 도함수를 자신에 추가함으로써 휘도 신호의 오버슈트/언더슈트를 재강조한다.
실시예들의 완전한 이해를 제공하기 위해서 다수의 구체적인 세부사항들이 본 명세서에 명시되었다. 그러나, 당업자라면, 이러한 구체적인 세부사항 없이도 실시예들이 실시될 수 있음을 이해할 것이다. 다른 경우, 공지의 동작, 성분, 회로들은 본 실시예들을 불분명하게 하지 않도록 상세하게 설명하지 않았다. 본 명세서에 기재된 구체적인 구조적 기능적 세부사항들은 대표적인 것이며, 실시예의 범주를 반드시 제한하는 것은 아님을 이해할 수 있을 것이다.
다양한 구현예들에 있어서,기재된 실시예들은 유선 통신 시스템, 무선 통신 시스템, 또는 그 조합을 포함하거나, 그 일부를 형성할 수 있다. 특정 실시예들이 예를 들어 특정 통신 매체를 이용하여 예시될 수 있지만, 본 명세서에 기재된 원리와 기법들은 다양한 통신 매체 및 수반하는 기술을 이용하여 구현될 수 있음을 이해할 것이다.
다양한 구현예들에 있어서, 기재된 실시예들은 유선 또는 무선 통신 매체를 통해 정보를 통신하도록 배치될 수 있다. 유선 통신 매체의 예로서는, 와이어, 케이블, 인쇄 회로 기판(PCB), 백플레인(backplane), 스위치 패브릭(switch fabric), 반도체 재료, 연선(twisted-pair), 동축 케이블, 광섬유, 등을 포함할 수 있다. 무선 통신 매체의 일례로서는, RF 스펙트럼 등의 무선 스펙트럼의 일부를 포함할 수 있다. 이러한 구현예들에 있어서, 기재된 실시예들은, 하나 이상의 안테나, 송신기, 수신기, 송수신기, 증폭기, 필터, 제어 논리, 등의 지정된 무선 스펙트럼 상으로 정보 신호들을 통신하기에 적합한 컴포넌트들과 인터페이스들을 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 실시예들에 있어서, 통신 매체는 입출력(I/O) 어댑터를 사용하여 노드에 연결될 수 있다. I/O 어댑터는 소망하는 셋트의 통신 프로토콜, 서비스, 또는 동작 절차들을 이용하여 노드들간의 정보 신호들을 제어하기 위한 임의의 적합한 기법으로 동작하도록 배치될 수 있다. I/O 어댑터는 또한 I/O 어댑터를 상응하는 통신 매체와 연결하기 위하여 적절한 물리적 커넥터를 포함할 수도 있다. I/O 어댑터의 예로서는, 네트워크 인터페이스, 네트워크 인터페이스 카드(NIC), 라인 카드, 디스크 컨트롤러, 비디오 컨트롤러, 오디오 컨트롤러, 등을 포함할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
다양한 구현예들에 있어서, 기재된 실시예들은 WAN, LAN, MAN(Metropolitan Area Network), 인터넷, WWW(World Wide Web), 전화 네트워크, 무선(radio) 네트워크, 텔레비젼 네트워크, 케이블 네트워크, 위성 네트워크, WPAN(Wireless Personal Area Network), WWAN(wireless WAN), 무선 LAN(WLAM), 무선 MAN(WMAN), CDMA 셀룰러 무선전화 통신 네트워크, 광대역 CDMA(WCDMA)등의 3G 네트워크, 4G 네트워크, TDMA 네트워크, E-TDMA(Extended-TDMA) 셀룰러 무선전화 네트워크, GSM 셀룰러 무선전화 네트워크, NADC(North American Digital Cellular) 셀룰러 무선전화 네트워 크, UMTS(Universal Mobile Telephone System) 네트워크, 및/또는 데이터를 전하도록 구성되는 임의의 다른 유선 또는 무선 통신 네트워크 등의 네트워크를 포함하거나, 그 일부를 형성할 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
일부 실시예들은, 예를 들어, 머신에 의해 실행되는 경우, 머신에 본 실시예들에 따른 방법 및/또는 동작들을 수행시킬 수 있는 명령어 또는 명령어의 셋트를 저장할 수 있는 머신-판독가능 매체 또는 물품을 이용하여 구현될 수 있다. 이러한 머신은, 예를 들어, 임의의 적합한 처리 플랫폼, 컴퓨팅 플랫폼, 컴퓨팅 디바이스, 처리 디바이스, 컴퓨팅 시스템, 처리 시스템, 컴퓨터, 프로세서, 등을 포함할 수 있으며, 하드웨어 및/또는 소프트웨어의 임의의 적합한 조합을 이용하여 구현될 수 있다. 머신-판독가능 매체 또는 물품으로서는, 예를 들어, 임의의 적절한 종류의 메모리 유닛, 메모리 장치, 메모리 물품, 메모리 매체, 저장 디바이스, 저장 물품, 저장 매체 및/또는 저장 유닛, 예를 들어, 메모리, 착탈 가능한 또는 착탈 가능하지 않은 매체, 삭제가능한 또는 삭제 불가능한 매체, 기입 가능한 또는 재기입 가능한 매체, 디지털 또는 아날로그 매체, 하드 디스크, 플로피 디스크, CD-ROM, CD-R, CD-RW, 광학 디스크, 자기 매체, 자기-광학 매체, 이동식(removable) 메모리 카드 또는 디스크, 다양한 종류의 DVD, 테입, 카셋트 등을 포함할 수 있다. 명령어들로는, 소오스 코드, 컴파일된 코드(compiled code), 인터프리트된 코드(interpreted code), 실행가능한 코드(executable code), 정적인 코드(static code), 동적인 코드(dynamic code), 등의 임의의 적합한 종류의 코드를 포함할 수 있다. 명령어들은 임의의 적합한 고레벨, 저레벨, 객체지향, 비주얼, 컴파일된 및 /또는 인터프리트된 프로그래밍 언어를 이용하여 구현될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
일부 실시예들은, 소망하는 연산율, 전력 레벨, 내열성(heat tolerance), 처리 사이클 예산(budget), 입력 데이터율, 출력 데이터율, 메모리 리소스, 데이터 버스 속도, 및 기타의 성능 제한요소들 등의 임의의 수의 인자들에 따라서 변할 수 있는 아키텍쳐를 이용하여 구현될 수 있다. 예를 들어, 범용 또는 특수 목적 프로세서에 의해 실행되는 소프트웨어를 이용하여 실시예가 구현될 수 있다. 또 다른 예에 있어서, 회로, ASIC, PLD, DSP, 등의 전용 하드웨어로서 실시예가 구현될 수 있다. 또 다른 예에 있어서, 프로그래밍된 범용 컴퓨터 성분 및 커스텀 하드웨어 성분들의 임의의 조합에 의해 실시예가 구현될 수 있다. 이러한 문맥에 실시예들이 제한되지는 않는다.
달리 특별하게 언급하지 않는 한, "처리", "컴퓨팅", "계산", "판정", 등의 용어는 컴퓨팅 시스템의 레지스터 및/또는 메모리 내의 (예컨대, 전자적인) 물리량으로서 나타낸 데이터를, 컴퓨팅 시스템의 메모리, 레지스터, 또는 기타의 이러한 정보 저장, 송신, 또는 디스플레이 디바이스들 내의 물리량으로서 유사하게 나타낸 다른 데이터로 조작 및/또는 변환하는 컴퓨터 또는 컴퓨터 시스템, 또는 유사한 전자 컴퓨팅 디바이스의 행동(action) 및/또는 처리(process)를 일컫는다는 것을 이해할 수 있을 것이다. 이러한 문맥에 실시예들이 제한되지는 않는다.
또한, "일 실시예" 또는 "실시예"에 대한 임의의 참조는, 실시예와 연계하여 기재된 특정한 특징, 구조, 또는 특성이 적어도 하나의 실시예에 포함됨을 의미한 다는 것을 주목할 필요가 있다. 명세서의 다양한 곳들에서 "일 실시예에 있어서"라는 어구의 등장은, 반드시 모두 동일한 실시예를 언급하지는 않는다
본 명세서에 기재된 바와 같이, 실시예들의 특정한 특징을 설명하였지만, 당업자에게 많은 변경예, 대체예, 변화예, 및 균등물이 떠오를 수 있을 것이다. 따라서, 첨부된 청구범위는 실시예들의 진정한 사상 내에 해당하는 한, 모든 이러한 변경예와 변화들을 포괄하고자 의도된 것임을 이해할 수 있을 것이다.

Claims (25)

  1. 입력 화상의 선명도를 강조하기 위한 미디어 처리 노드를 포함하는 장치로서,
    상기 미디어 처리 노드는 에지 정보를 검출하고 변경하기 위하여 상기 입력 화상의 웨이블릿 분해(wavelet decomposition)를 수행하는 웨이블릿 분해 모듈을 포함하는 장치.
  2. 제1항에 있어서,
    상기 입력 화상은, 수평 방향과 수직 방향으로 샘플링되는 신호들을 포함하는 비디오 시퀀스의 픽쳐(picture)를 포함하는 장치.
  3. 제1항에 있어서,
    상기 웨이블릿 분해는 2차원 직교 웨이블릿 분해를 포함하는 장치.
  4. 제1항에 있어서,
    상기 웨이블릿 분해 모듈은 다수 레벨의 분해를 수행하는 장치.
  5. 제1항에 있어서,
    상기 웨이블릿 분해 모듈로부터의 웨이블릿 분해 출력을 강조하는 에지 강조 모듈을 더 포함하는 장치.
  6. 제5항에 있어서,
    상기 에지 강조 모듈은 상기 웨이블릿 분해 출력의 고주파수 성분들을 강조하는 장치.
  7. 제1항에 있어서,
    상기 웨이블릿 분해 모듈로부터의 웨이블릿 분해 출력을 이용하여 화상 복원을 수행하는 복원 모듈을 더 포함하는 장치.
  8. 소오스 노드; 및
    상기 소오스 노드에 결합되는 미디어 처리 노드를 포함하는 시스템으로서,
    상기 미디어 처리 노드는, 에지 정보를 검출 및 변경하기 위하여 상기 입력 화상의 웨이블릿 분해를 수행하는 웨이블릿 분해 모듈을 포함하는 시스템.
  9. 제8항에 있어서,
    상기 입력 화상은 수평 방향 및 수직 방향으로 샘플링된 신호들을 포함하는 비디오 시퀀스의 픽쳐를 포함하는 시스템.
  10. 제8항에 있어서,
    상기 웨이블릿 분해는 2차원 직교 웨이블릿 분해를 포함하는 시스템.
  11. 제8항에 있어서,
    상기 웨이블릿 분해 모듈은 다수 레벨의 분해를 수행하는 시스템.
  12. 제8항에 있어서,
    상기 웨이블릿 분해 모듈로부터의 웨이블릿 분해 출력을 강조하는 에지 강조 모듈을 더 포함하는 시스템.
  13. 제12항에 있어서,
    상기 에지 강조 모듈은 상기 웨이블릿 분해 출력의 고주파수 성분들을 강조하는 시스템.
  14. 제8항에 있어서,
    상기 웨이블릿 분해 모듈로부터의 웨이블릿 분해 출력을 이용하여 화상 복원을 수행하는 복원 모듈을 더 포함하는 시스템.
  15. 입력 화상을 수신하는 단계; 및
    에지 정보를 검출 및 변경하기 위하여 상기 입력 화상의 웨이블릿 분해를 수행하는 단계
    를 포함하는 방법.
  16. 제15항에 있어서,
    상기 입력 화상은 수평 방향과 수직 방향으로 샘플링되는 신호들을 포함하는 비디오 시퀀스의 픽쳐를 포함하는 방법.
  17. 제15항에 있어서,
    2차원 직교 웨이블릿 분해를 수행하는 단계를 더 포함하는 방법.
  18. 제15항에 있어서,
    다수 레벨의 분해를 수행하는 단계를 더 포함하는 방법.
  19. 제15항에 있어서,
    웨이블릿 분해 출력을 강조하는 단계를 더 포함하는 방법.
  20. 제19항에 있어서,
    상기 웨이블릿 분해 출력의 고주파수 성분들을 강조하는 단계를 더 포함하는 방법.
  21. 제15항에 있어서,
    웨이블릿 분해 출력을 이용하여 화상 복원을 수행하는 단계를 더 포함하는 방법.
  22. 실행되는 경우 시스템으로 하여금,
    입력 화상을 수신하고;
    에지 정보를 검출하고 변경하기 위하여 상기 입력 화상의 웨이블릿 분해를 수행할 수 있도록 하는 명령어들을 포함하는 머신-판독가능 저장 매체를 포함하는 물품.
  23. 제22항에 있어서,
    상기 입력 화상은 수평 방향과 수직 방향으로 샘플링된 신호들을 포함하는 비디오 시퀀스의 픽쳐를 포함하는 물품.
  24. 제22항에 있어서,
    실행되는 경우, 시스템이 2차원 직교 웨이블릿 분해를 수행할 수 있도록 하는 명령어들을 더 포함하는 물품.
  25. 제22항에 있어서,
    실행되는 경우, 시스템이 다수 레벨의 분해를 수행할 수 있도록 하는 명령어들을 더 포함하는 물품.
KR1020077029808A 2005-06-20 2006-06-20 Lti/cti에 의한 비디오 선명도와 대비도의 강조 KR100951965B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/157,335 2005-06-20
US11/157,335 US7676103B2 (en) 2005-06-20 2005-06-20 Enhancing video sharpness and contrast by luminance and chrominance transient improvement

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020097024316A Division KR101197977B1 (ko) 2005-06-20 2006-06-20 Lti/cti에 의한 비디오 선명도와 대비도의 강조

Publications (2)

Publication Number Publication Date
KR20080016872A true KR20080016872A (ko) 2008-02-22
KR100951965B1 KR100951965B1 (ko) 2010-04-08

Family

ID=37027055

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020097024316A KR101197977B1 (ko) 2005-06-20 2006-06-20 Lti/cti에 의한 비디오 선명도와 대비도의 강조
KR1020077029808A KR100951965B1 (ko) 2005-06-20 2006-06-20 Lti/cti에 의한 비디오 선명도와 대비도의 강조

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020097024316A KR101197977B1 (ko) 2005-06-20 2006-06-20 Lti/cti에 의한 비디오 선명도와 대비도의 강조

Country Status (5)

Country Link
US (2) US7676103B2 (ko)
EP (1) EP1894162A2 (ko)
KR (2) KR101197977B1 (ko)
CN (1) CN1901659B (ko)
WO (1) WO2007002309A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9025871B2 (en) 2008-10-17 2015-05-05 Samsung Electronics Co., Ltd. Image processing apparatus and method of providing high sensitive color images

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7847863B2 (en) * 2005-06-10 2010-12-07 Intel Corporation Enhancing sharpness in video images
US7668387B2 (en) * 2005-06-20 2010-02-23 Intel Corporation Selective local transient improvement and peaking for video sharpness enhancement
US7676103B2 (en) * 2005-06-20 2010-03-09 Intel Corporation Enhancing video sharpness and contrast by luminance and chrominance transient improvement
US8391635B2 (en) * 2007-08-31 2013-03-05 Olympus Corporation Noise removal device, noise removal method, and computer readable recording medium
WO2009155130A1 (en) * 2008-06-19 2009-12-23 Marvell World Trade Ltd. Split edge enhancement architecture
JP2010278929A (ja) * 2009-05-29 2010-12-09 Toshiba Corp 画像処理装置
US8655101B2 (en) 2009-06-04 2014-02-18 Sharp Kabushiki Kaisha Signal processing device, control method for signal processing device, control program, and computer-readable storage medium having the control program recorded therein
WO2011061957A1 (ja) 2009-11-17 2011-05-26 シャープ株式会社 符号化装置、復号化装置、符号化装置の制御方法、復号化装置の制御方法、伝送システム、および制御プログラムを記録したコンピュータ読み取り可能な記録媒体
US8824825B2 (en) 2009-11-17 2014-09-02 Sharp Kabushiki Kaisha Decoding device with nonlinear process section, control method for the decoding device, transmission system, and computer-readable recording medium having a control program recorded thereon
US8284314B2 (en) * 2009-12-16 2012-10-09 Vixs Systems, Inc. Adaptive edge enhancement using directional components from non-linear filtering
DE102010002310A1 (de) * 2010-02-24 2011-08-25 Audi Ag, 85057 Verfahren und Vorrichtung zur Freisichtprüfung einer Kamera für ein automobiles Umfeld
TW201133394A (en) * 2010-03-31 2011-10-01 Novatek Microelectronics Corp Image transient improvement apparatus
CN102236883A (zh) * 2010-04-27 2011-11-09 株式会社理光 图像增强方法和装置、物体检测方法和装置
US8659618B2 (en) * 2010-10-15 2014-02-25 Stmicroelectronics Asia Pacific Pte., Ltd. Noise-robust edge enhancement system and method for improved image sharpness
US8761537B2 (en) * 2011-05-27 2014-06-24 Vixs Systems, Inc. Adaptive edge enhancement
US20130207992A1 (en) * 2012-02-10 2013-08-15 Emil Alexander WASBERGER Method, apparatus and computer readable medium carrying instructions for mitigating visual artefacts
US8805114B2 (en) * 2012-11-27 2014-08-12 Texas Instruments Incorporated Content adaptive edge and detail enhancement for image and video processing
US9305332B2 (en) * 2013-03-15 2016-04-05 Samsung Electronics Company, Ltd. Creating details in an image with frequency lifting
KR20150133905A (ko) 2014-05-20 2015-12-01 삼성전기주식회사 전자 선반 라벨 시스템 및 전자 선반 라벨 시스템의 운영방법
CN106851399B (zh) * 2015-12-03 2021-01-22 阿里巴巴(中国)有限公司 视频分辨率提升方法及装置
WO2017219962A1 (en) * 2016-06-21 2017-12-28 Zhejiang Dahua Technology Co., Ltd. Systems and methods for image processing
CN110599406B (zh) * 2019-03-18 2022-05-03 上海立可芯半导体科技有限公司 一种图像增强方法及装置
KR20210067699A (ko) * 2019-11-29 2021-06-08 삼성전자주식회사 전자 장치 및 그 제어 방법
US11704891B1 (en) 2021-12-29 2023-07-18 Insight Direct Usa, Inc. Dynamically configured extraction, preprocessing, and publishing of a region of interest that is a subset of streaming video data
US11509836B1 (en) 2021-12-29 2022-11-22 Insight Direct Usa, Inc. Dynamically configured processing of a region of interest dependent upon published video data selected by a runtime configuration file
US11778167B1 (en) 2022-07-26 2023-10-03 Insight Direct Usa, Inc. Method and system for preprocessing optimization of streaming video data

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5717789A (en) * 1993-09-08 1998-02-10 California Institute Of Technology Image enhancement by non-linear extrapolation in frequency space
US6005983A (en) * 1993-09-08 1999-12-21 California Institutue Of Technology Image enhancement by non-linear extrapolation in frequency space
US6801339B1 (en) * 1998-03-26 2004-10-05 Fuji Photo Film Co., Ltd. Image processing method and apparatus
JP3635622B2 (ja) * 1998-07-06 2005-04-06 富士写真フイルム株式会社 画像処理方法および装置並びに記録媒体
US6151415A (en) * 1998-12-14 2000-11-21 Intel Corporation Auto-focusing algorithm using discrete wavelet transform
US6574374B1 (en) * 1999-04-14 2003-06-03 Intel Corporation Enhancing image compression performance by morphological processing
US6611627B1 (en) * 2000-04-24 2003-08-26 Eastman Kodak Company Digital image processing method for edge shaping
US7257273B2 (en) * 2001-04-09 2007-08-14 Mingjing Li Hierarchical scheme for blur detection in digital image using wavelet transform
US7206459B2 (en) * 2001-07-31 2007-04-17 Ricoh Co., Ltd. Enhancement of compressed images
JP2003134352A (ja) * 2001-10-26 2003-05-09 Konica Corp 画像処理方法及び装置並びにプログラム
KR100403601B1 (ko) * 2001-12-21 2003-10-30 삼성전자주식회사 영상의 윤곽선 보정 장치 및 방법
JP2004127064A (ja) * 2002-10-04 2004-04-22 Konica Minolta Holdings Inc 画像処理方法、画像処理装置、画像処理プログラム及び画像記録装置
KR100532304B1 (ko) * 2003-12-10 2005-11-29 삼성전자주식회사 블록별 에너지를 기초로 정지 영상을 고속으로 부호화할수 있는 고속 이산 웨이블렛 부호화 장치 및 방법
US7324687B2 (en) * 2004-06-28 2008-01-29 Microsoft Corporation Color segmentation-based stereo 3D reconstruction system and process
WO2006004847A2 (en) * 2004-06-30 2006-01-12 Comet Video Technology Method of data compression including compression of video data
US7676103B2 (en) * 2005-06-20 2010-03-09 Intel Corporation Enhancing video sharpness and contrast by luminance and chrominance transient improvement

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9025871B2 (en) 2008-10-17 2015-05-05 Samsung Electronics Co., Ltd. Image processing apparatus and method of providing high sensitive color images
KR101531709B1 (ko) * 2008-10-17 2015-07-06 삼성전자 주식회사 고감도 컬러 영상을 제공하기 위한 영상 처리 장치 및 방법

Also Published As

Publication number Publication date
WO2007002309A2 (en) 2007-01-04
EP1894162A2 (en) 2008-03-05
US7676103B2 (en) 2010-03-09
US20060285767A1 (en) 2006-12-21
KR20100017243A (ko) 2010-02-16
KR100951965B1 (ko) 2010-04-08
CN1901659A (zh) 2007-01-24
WO2007002309A3 (en) 2007-05-31
KR101197977B1 (ko) 2012-11-05
US8031956B2 (en) 2011-10-04
CN1901659B (zh) 2011-05-11
US20100177249A1 (en) 2010-07-15

Similar Documents

Publication Publication Date Title
KR100951965B1 (ko) Lti/cti에 의한 비디오 선명도와 대비도의 강조
CN109685726B (zh) 游戏场景处理方法、装置、电子设备以及存储介质
JP4681655B2 (ja) ビデオ鮮鋭度強調のための選択的な局所遷移改善及びピーキング
US7020332B2 (en) Method and apparatus for enhancing a digital image by applying an inverse histogram-based pixel mapping function to pixels of the digital image
US11803947B2 (en) Brightness and contrast enhancement for video
KR101035750B1 (ko) 파이프라이닝 장치, 파이프라이닝 시스템, 파이프라이닝 방법 및 머신 판독가능한 저장 매체
JP2005184819A (ja) Mpegアーチファクト低減のための方法及び装置
CN104244015A (zh) 移除视频数据中的编码伪影的自适应滤波机制
JP2007124650A (ja) デジタル・ビデオの雑音を低減する方法、ビデオ信号の雑音を低減する時空的フィルタ、およびデジタル・ビデオ・フレーム内の雑音を低減する方法
JP4597983B2 (ja) ビデオフレームを適応的に再生する方法
WO2021179826A1 (zh) 图像处理方法及相关产品
US20110044389A1 (en) System and method for processing videos and images to a determined quality level
CN109587558B (zh) 视频处理方法、装置、电子设备以及存储介质
CN111402165A (zh) 图像处理方法、装置、设备及存储介质
KR20110031162A (ko) 스플릿 에지 강화 구조
Song et al. Hardware-efficient debanding and visual enhancement filter for inverse tone mapped high dynamic range images and videos
US20100092101A1 (en) Methods and apparatus for enhancing image quality of motion compensated interpolation
WO2014008329A1 (en) System and method to enhance and process a digital image
US8194994B2 (en) Apparatus and method for reducing motion blur in a video signal
US20020057373A1 (en) Method and apparatus for reducing flicker in a video image sequence
US20020168011A1 (en) Method of detecting noise in a coded video data flow
JPH08172551A (ja) 雑音除去装置
KR100871998B1 (ko) 디지털 이미지들을 후처리하는 방법 및 장치
JP7300164B2 (ja) ノイズリダクション方法
JP2004531161A (ja) ディジタルビデオ信号を処理する方法及び復号器

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
A107 Divisional application of patent
AMND Amendment
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment
FPAY Annual fee payment

Payment date: 20180328

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee