KR101520069B1 - 관심 영역 기반 영상 처리 장치 및 방법 - Google Patents

관심 영역 기반 영상 처리 장치 및 방법 Download PDF

Info

Publication number
KR101520069B1
KR101520069B1 KR1020080134507A KR20080134507A KR101520069B1 KR 101520069 B1 KR101520069 B1 KR 101520069B1 KR 1020080134507 A KR1020080134507 A KR 1020080134507A KR 20080134507 A KR20080134507 A KR 20080134507A KR 101520069 B1 KR101520069 B1 KR 101520069B1
Authority
KR
South Korea
Prior art keywords
dynamic range
roi
image
region
interest
Prior art date
Application number
KR1020080134507A
Other languages
English (en)
Other versions
KR20100076455A (ko
Inventor
최원희
김창용
이성덕
권재현
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020080134507A priority Critical patent/KR101520069B1/ko
Priority to US12/623,386 priority patent/US8610738B2/en
Publication of KR20100076455A publication Critical patent/KR20100076455A/ko
Application granted granted Critical
Publication of KR101520069B1 publication Critical patent/KR101520069B1/ko

Links

Images

Classifications

    • G06T5/92—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

관심 영역에 대하여 풍부한 영상 정보를 제공하기 위한 영상 처리 장치 및 방법이 개시된다. 일 실시예에 따른 영상 처리 장치는 입력되는 높은 동적 범위 영상을 제한된 디스플레이 장치에 효과적으로 표시하기 위한 동작을 수행한다. 영상 처리 장치는 디스플레이 장치의 동적 범위에 따라 높은 동적 범위 영상을 처리할 때 관심 영역의 영상 부분이 다른 영상 부분에 대하여 상대적으로 넓은 동적 범위를 가지도록 처리한다. 따라서, 관심 영역에 해당하는 영상 부분은 다른 부분에 비하여 좀 더 풍부한 영상 정보를 가질 수 있다.
관심 영역, 영상 처리 장치, 계조, 동적 범위, 디스플레이 장치

Description

관심 영역 기반 영상 처리 장치 및 방법{Apparatus for processing image based on region of interest and method thereof}
본 발명의 하나 이상의 양상은 영상 처리에 관한 것으로, 더욱 상세하게는 관심 영역에 대하여 풍부한 영상 정보를 제공하기 위한 영상 처리 장치 및 방법에 관한 것이다.
디지털 영상의 동적 범위(Dynamic Range, DR)는 영상 내에서 가장 밝은 화소값과 가장 어두운 화소값의 비율로 정의된다. 실제 인간의 인지 시스템(HVS)은 일반적인 디지털 카메라 및 모니터보다 훨씬 높은 동작 대역을 다룰 수 있다. 따라서, 기존의 영상 장치가 다룰 수 있는 것보다 큰 동적 영역을 갖는 영상의 필요성이 있으며, 이에 따라 높은 동적 범위(High Dynamic Range, HDR) 영상을 촬영하기 위한 노력이 계속되고 있다. 그러나, 통상적으로 많이 이용되는 디스플레이 장치가 표시할 수 있는 동적 범위의 한계로 높은 동적 범위의 영상을 획득하더라도 높은 동작 대역의 영상을 표시하여 이용하는데 제한이 있다.
입력되는 높은 동적 범위 영상을 관심 영역별로 동적 범위(DR)을 적응적으로 처리하여 제공하기 위한 영상 처리 장치 및 방법이 제안된다.
일 양상에 따른 영상 처리 장치는 입력된 영상에 대한 적어도 하나의 관심 영역을 설정하는 관심 영역 설정부; 및 영상에 대하여 적어도 하나의 관심 영역별 동적 범위을 분석하고, 영상이 출력될 디스플레이 장치의 동적 범위 및 분석된 관심 영역별 동적 범위에 기초하여 영상의 동적 범위를 적응적으로 처리하는 동적 범위 처리부를 포함한다.
관심 영역 설정부는 사용자 입력 신호에 따라 적어도 하나 이상의 관심 영역을 설정할 수 있다. 관심 영역 설정부는 입력되는 영상을 적어도 하나의 영역으로 분할하고, 분할된 영상 영역 정보를 제공하고, 분할된 영상 영역 정보 중 적어도 하나를 선택하는 사용자 입력 신호가 수신되면, 사용자 입력 신호에 의해 선택된 분할된 영상 영역을 관심 영역으로 설정할 수 있다.
관심 영역 설정부는 에지 추출 맵을 생성하고 생성된 에지 추출 맵에 기초하여 관심 영역을 설정하거나 에지 복잡도가 임계 복잡도 이상되는 영역을 관심 영역으로 설정할 수 있다.
동적 범위 처리부는 디스플레이 장치의 동적 범위 중 관심 영역에 대하여 할당되는 동적 범위가 차지하는 비율이 입력되는 영상의 동적 범위 중 관심 영역의 동적 범위가 차지하는 비율 이상이 되도록 관심 영역의 동적 범위를 입력 영상이 출력될 디스플레이 장치의 동적 범위에 할당하고, 할당된 동적 범위에 기초하여 관 심 영역에 대하여 계조 매핑을 수행할 수 있다. 또한, 동적 범위 처리부는 관심 영역 이외의 영상 부분에 대한 동적 범위를 디스플레이 장치의 동적 범위 중 관심 영역의 동적 범위가 할당된 디스플레이 장치의 동적 범위 이외의 동적 범위 내에서 할당하고, 할당된 동적 범위 내에서 관심 영역 이외의 영상 부분에 대하여 선형적 계조 매핑을 수행할 수 있다. 동적 범위 처리부는 하나의 계조 분포를 가지는 입력 영상으로부터 관심 영역의 설정 개수에 대응하는 영상의 계조 분포가 서로 다른 출력 영상들을 생성할 수 있다.
또한, 동적 범위 처리부는 입력 영상의 색상 정보를 더 분석하고, 적응적으로 처리된 동적 범위에 기초하여 할당되는 디스플레이 장치의 색역에 따라서 색역 사상을 수행할 수 있다. 동적 범위 처리부는 적어도 하나의 관심 영역별 색상 정보를 분석하고, 분석된 색상 정보 중 미리 설정된 적어도 하나의 색에 대응하는 색상이 검출되는 경우, 검출된 색을 대응되는 선호색으로 변환할 수 있다.
다른 양상에 따른 영상 처리 방법은 입력된 영상에 대한 적어도 하나의 관심 영역을 설정하는 단계; 설정된 관심 영역에 기초하여 영상에 대하여 적어도 하나의 관심 영역별 동적 범위을 분석하는 단계; 및 영상이 출력될 디스플레이 장치의 동적 범위 및 분석된 관심 영역별 동적 범위에 기초하여 영상의 동적 범위를 적응적으로 처리하는 단계를 포함한다.
일 양상에 따르면, 입력 영상의 동적 범위에 비하여 제한된 동적 범위를 가지는 디스플레이 장치에서도 관심 영역에 대하여 풍부한 영상 정보를 제공할 수 있 다. 또한, 한 장의 높은 동적 범위 영상(High Dynamic Range image)으로부터 복수 개의 서로 다른 계조 분포(tonal distribution)를 가진 영상을 생성하여 제공할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 일 실시예를 상세하게 설명한다. 본 발명의 실시예들을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 또한, 후술되는 용어들은 본 발명의 각 실시예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 일 실시예에 따른 관심 영역 기반 영상 처리 장치의 구성을 나타내는 블록도이다.
일 실시예에 따른 영상 처리 장치(100)는 관심 영역 설정부(110) 및 동적 범위 처리부(120)를 포함한다. 일 실시예에 따른 영상 처리 장치(100)는 카메라 및 카메라 장치에 연결된 셋탑 박스 등의 장치로 구현될 수 있으며, 디스플레이 장치를 포함하여 다양한 장치로 구현될 수 있다.
관심 영역 설정부(110)는 입력된 영상에 대한 관심 영역을 설정한다. 입력 영상은 높은 동적 범위 영상 정보를 가지는 영상일 수 있다. 관심 영역 설정부(110)는 사용자 입력 신호에 기초하여 관심 영역을 설정할 수 있고, 또는 설정된 방식에 따라 관심 영역을 자동적으로 설정할 수 있다.
사용자 입력 신호에 기초하여 관심 영역을 설정하는 경우, 관심 영역 설정부(110)는 사용자 입력 신호에 따라 포인팅되는 영상 영역의 위치 정보에 따라 관심 영역이 설정될 수 있다. 또는, 관심 영역 설정부(110)는 입력되는 영상을 적어도 하나의 영역으로 분할하고, 분할된 영상 영역 정보를 제공한 다음, 분할된 영상 영역 정보 중 적어도 하나를 선택하는 사용자 입력 신호가 수신되면, 사용자 입력 신호에 의해 선택된 분할된 영상 영역을 관심 영역으로 설정할 수 있다.
미리 설정된 방식에 따라 관심 영역으로 설정하는 경우, 관심 영역 설정부(110)는 영상획득시 자동으로 초점이 맞추어지는 영역을 관심영역으로 설정할 수 있다. 또는, 에지(edge) 성분 추출에 의한 정보에 기초하여 관심영역을 설정할 수도 있다. 예를 들어, 얼굴 윤곽을 추출하거나 특정 사물의 경계선(edge)을 추출하는 등의 에지 성분 추출 방법에 따라 특정 물체가 위치하는 영역을 관심영역으로 설정할 수 있다. 또는, 관심 영역 설정부(110)는 에지 추출에 의한 복잡 에지 영역을 관심 영역으로 설정할 수 있다.
통상적으로 입력 영상을 입력의 영상의 동적 범위보가 제한된 동적 범위를 가지는 디스플레이 장치로 출력할 때, 입력 영상의 계조를 균등 압축(또는 선형적 압축)에 따라 압축하여 이용하므로, 영상의 디테일 정보가 손실되기 쉽다. 일 실시예에 따른 영상 처리 장치(100)는 관심 영역에 대한 영상 정보를 유지하기 위하여 입력 영상에 대한 계조 매핑(tonal mapping)을 관심 영역에 기초하여 동적으로 수행한다.
상세하게는, 동적 범위 처리부(120)는 영상이 출력될 디스플레이 장치의 동적 범위 및 설정된 관심 영역에 기초하여 영상에 대하여 적어도 하나의 관심 영역별 동적 범위을 분석한다. 동적 범위 처리부(120)는 분석된 관심 영역별 동적 범위에 기초하여 영상의 동적 범위를 적응적으로 처리하여, 관심 영역의 동적 범위에 따른 동적 계조 매핑을 수행한다.
동적 범위 처리부(120)는 관심 영역의 동적 범위를 입력 영상이 출력될 디스플레이 장치의 동적 범위에 할당할 때, 디스플레이 장치의 동적 범위 중 관심 영역에 대하여 할당되는 동적 범위가 차지하는 비율이 입력되는 영상의 동적 범위 중 관심 영역의 동적 범위가 차지하는 비율 이상이 되도록 할 수 있다. 예를 들어, 동적 범위 처리부(120)는 관심 영역의 동적 범위를 디스플레이 장치의 동적 범위에 할당할 때, 관심 영역의 동적 범위의 크기는 관심 영역의 동적 범위가 대응되어 할당될 디스플레이 장치 동적 범위에서 유지되거나 확장되도록 할 수 있다.
관심 영역 이외의 영상의 동적 범위에 대해서 동적 범위 처리부(120)는 관심 영역 이외의 영상 부분에 대한 동적 범위를 디스플레이 장치의 동적 범위 중 관심 영역의 동적 범위가 할당된 디스플레이 장치의 동적 범위 이외의 동적 범위 내에서 할당하고, 할당된 동적 범위 내에서 관심 영역 이외의 영상 부분에 대하여 선형적 계조 매핑을 수행할 수 있다.
이와 같은 방법으로 동적 범위 처리부(120)는 하나의 계조 분포를 갖는 입력 영상으로부터 관심 영역의 설정 개수에 대응하는 영상의 계조 분포가 서로 다른 출력 영상들을 생성할 수 있다. 따라서, 디스플레이 장치를 통하여 관심 영역에 대 하여 풍부한 영상 정보를 포함하며, 관심 영역의 설정 개수에 대응하는 영상의 계조 분포가 서로 다른 출력 영상들을 표시하여 제공할 수 있다.
부가하여, 휘도의 동적 대역 변화에 따라 표현할 수 있는 색역의 차이가 발생한다. 동적 범위 처리부(120)는 입력 영상을 디스플레이 장치가 표현할 수 있는 색으로 색 재현을 위한 색역 사상(gamut mapping)을 수행할 수 있다.
동적 범위 처리부(120)는 입력 영상의 색상 정보를 더 분석하고, 적응적으로 처리된 동적 범위에 기초하여 할당되는 디스플레이 장치의 색역에 따라서 색역 사상을 수행할 수 있다. 예를 들어, 동적 범위 처리부(120)는 관심 영역에 대해서는 관심 영역의 동적 대역을 일 실시예에 따라 매핑하는 과정과 동시에, 출력 영상을 디스플레이하는 디스플레이 장치에서 동적 대역에 따른 색역을 최대로 표현할 수 있도록 색역 사상을 수행할 수 있다.
또는 임의의 표준 색을 표현할 수 있는 색역 사상을 수행할 수 있다. 관심 영역 이외의 부분에 대해서는 동적 범위 처리부(120)는 디스플레이 장치가 표현할 수 있는 일반적인 색역 사상을 수행하여, 관심 영역에 표현하는 색역 이외의 색공간에 매핑할 수 있다.
일 실시예에 따르면, 동적 범위 처리부(120)는 입력 영상의 동적 대역 정보 및 색상 정보를 분석하고, 분석된 동적 대역 정보와 색상 정보를 디스플레이 장치에서 표현할 수 있는 동적 대역과 색역으로 매핑할 수 있는 색역 사상을 수행할 수 있다. 색역 사상 방법은 통상의 색역 압축(compression), 색역 절단(clipping) 방법 등 여러 가지 방법이 이용될 수 있다. 예를 들어, 입력 영상의 색 공간에 따른 색상 정보가 디스플레이 장치가 이용하는 sRGB(standard RGB) 공간으로 색역 사상이 수행될 수 있다.
또한, 동적 범위 처리부(120)는 관심 영역에 대해서는 선호색 표현 방법을 이용할 수 있다. 동적 범위 처리부(120)는 적어도 하나의 관심 영역별 색상 정보를 분석하고, 분석된 색상 정보 중 미리 설정된 적어도 하나의 색에 대응하는 색상이 검출되는 경우, 검출된 색을 대응되는 선호색으로 변환할 수 있다. 예를 들어, 관심 영역에 사람 눈에 민감한 피부(skin), 잔디(grass), 하늘(sky)과 같은 색이 검출되는 경우, 검출된 색을 사용자가 선호하는 색으로 변환시킬 수 있다.
또한, 일 실시예에 따르면, 동적 범위 처리부(120)는 입력 영상 중 관심 영역에 대해서는 선호색 표현 방법을 이용하여 처리하고, 관심 영역 이외의 영상에 대해서는 전술한 색역 사상을 수행할 수 있다.
일 양상에 따르면, 한 장의 높은 동적 범위 영상으로부터 복수 개의 서로 다른 밝기 분포의 영상을 획득할 수 있다. 이는 해당 복수 개 만큼의 노출을 달리하여 촬영한 영상과 동일한 효과가 있으므로, 일반 카메라 사용자로 하여금 한번의 촬영으로 여러 차례 노출을 가변하여 촬영하여 영상을 획득한 것과 동일한 효과를 얻을 수 있다. 또한, 광조도 대역의 영상을 조도대역 압축을 하여 영상을 생성하는 경우 협조도 대역의 카메라를 이용하여 여러차례 노출을 조정하여 촬영한 영상에 비하여 좀 더 디테일한 영상을 획득할 수 있다.
이와 같은 영상 처리 방법을 의료 기기에 이용하는 경우, 병변이 의심되는 영역을 관심 영역으로 하여 진단의 정확도를 높일 수 있다. 또한, 낮은 동적 범 위(Low Dynamic Range, LDR)의 디스플레이 장치를 이용하는 경우에도, 통상적인 경우에 비하여 관심 영역에 대하여 상세한 영상 정보를 제공할 수 있다. 또한, 관심 영역에 대하여 동적 범위 처리 뿐만 아니라, 색역 사상 또는 선호색 표현 기법을 적용하여, 관심 영역에 대하여 휘도 측면뿐 아니라 색상 측면에서도 사용자가 원하는 영상 정보를 제공할 수 있다.
도 2a 내지 도 2c는 일 실시예에 따른 동적 범위 처리 방법을 나타내는 도면이다.
도 2a에서 화살표(210)는 높은 동적 범위 영상의 전체 동적 범위를 나타내고, 화살표(220)는 디스플레이 장치의 전체 동적 범위를 나타낸다. 도 2a에 도시된 바와 같이 관심 영역에 대한 동적 범위(201)이 전체 동적 범위 중 높은 쪽에 위치하는 경우, 관심 영역에 대한 동적 범위를 디스플레이 장치의 동적 범위에서 도 2a에 도시된 바와 같이 확장하여 할당할 수 있으며, 다른 영역의 동적 범위는 선형적으로 압축하여 할당할 수 있다. 도 2a에는 관심 영역에 대한 동적 범위가 확장되어 할당될 것으로 도시되어 있으나, 관심 영역에 대한 동적 범위의 크기는 유지되고 다른 영역의 동적 범위가 선형적으로 압축되어 할당될 수 있다.
도 2b는 관심 영역에 대한 동적 범위(203)가 입력 영상의 전체 동적 범위 중 높은 쪽에 위치하는 경우, 디스플레이 장치에 입력 영상을 출력할 때 관심 영역에 대한 풍부한 영상 정보를 유지하기 위하여 관심 영역의 동적 범위를 디스플레이 장치의 동적 범위에 할당하여 계조 매핑을 수행하는 일예를 나타낸다.
도 2c는 관심 영역에 대한 동적 범위(205)가 입력 영상의 전체 동적 범위 중 중상위 부분에 위치하는 경우, 디스플레이 장치에 입력 영상을 출력할 때 관심 영역에 대한 풍부한 영상 정보를 유지하기 위하여 관심 영역의 동적 범위를 디스플레이 장치의 동적 범위에 할당하 계조 매핑을 수행하는 일예를 나타낸다.
도 3은 일 실시예에 따른 관심 영역 기반 영상 처리 방법을 나타내는 순서도이다.
높은 동적 범위 영상을 입력받는다(S 310).
입력된 영상에 대한 적어도 하나의 관심 영역을 설정한다(S 320). 사용자 입력 신호에 따라 또는 미리 설정된 다양한 방식에 따라 적어도 하나 이상의 관심 영역이 설정될 수 있다.
설정된 관심 영역에 기초하여 영상에 대하여 적어도 하나의 관심 영역별 동적 범위을 분석한다(S 330).
영상이 출력될 디스플레이 장치의 동적 범위 및 분석된 관심 영역별 동적 범위에 기초하여 영상의 동적 범위를 적응적으로 처리한다(S 340). 이를 위해, 디스플레이 장치의 동적 범위 중 관심 영역에 대하여 할당되는 동적 범위가 차지하는 비율이 입력되는 영상의 동적 범위 중 관심 영역의 동적 범위가 차지하는 비율 이상이 되도록 관심 영역의 동적 범위를 입력 영상이 출력될 디스플레이 장치의 동적 범위에 할당할 수 있다. 또한, 관심 영역 이외의 영상의 동적 범위를 디스플레이 장치의 동적 범위 중 관심 영역의 동적 범위가 할당된 디스플레이 장치의 동적 범위 이외의 동적 범위 내에서 할당하고, 할당된 동적 범위 내에서 관심 영역 이외의 영상 부분에 대하여 선형적 계조 매핑을 수행할 수 있다.
또한, 입력 영상에 대한 디스플레이 장치의 색역에 따른 색역 매핑이 추가적으로 수행될 수 있다. 일 실시예에 따르면, 입력 영상의 색상 정보를 더 분석하고, 적응적으로 처리된 동적 범위에 기초하여 할당되는 디스플레이 장치의 색역에 따라서 색역 사상을 수행하는 단계가 더 수행될 수 있다.
상세하게는, 입력 영상의 동적 대역 및 색상 정보를 분석하고, 분석된 색상 정보를 디스플레이 장치의 동적 대역 및 색역에 기초하여 색역 사상을 수행할 수 있다. 또한, 관심 영역에 대해서는 적어도 하나의 관심 영역별 색상 정보를 분석하고, 분석된 색상 정보 중 미리 설정된 적어도 하나의 색에 대응하는 색상이 검출되는 경우, 검출된 색을 대응되는 선호색으로 변환하는 선호색 재현 단계가 수행될 수 있다.
본 발명의 일 양상은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있다. 상기의 프로그램을 구현하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 디스크 등을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드로 저장되고 실행될 수 있다.
이상의 설명은 본 발명의 일 실시예에 불과할 뿐, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 본질적 특성에서 벗어나지 않는 범위에 서 변형된 형태로 구현할 수 있을 것이다. 따라서, 본 발명의 범위는 전술한 실시예에 한정되지 않고 특허 청구범위에 기재된 내용과 동등한 범위 내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다.
도 1은 일 실시예에 따른 관심 영역 기반 영상 처리 장치의 구성을 나타내는 블록도이고,
도 2a 내지 도 2c는 일 실시예에 따른 동적 범위 처리 방법을 나타내는 도면이고,
도 3은 일 실시예에 따른 관심 영역 기반 영상 처리 방법을 나타내는 순서도이다.

Claims (18)

  1. 입력된 영상에 대한 적어도 하나의 관심 영역을 설정하는 관심 영역 설정부; 및
    상기 영상에 대하여 적어도 하나의 관심 영역별 동적 범위를 분석하고, 상기 영상이 출력될 디스플레이 장치의 동적 범위 및 상기 분석된 관심 영역별 동적 범위에 기초하여 영상의 동적 범위를 적응적으로 처리하는 동적 범위 처리부를 포함하고,
    상기 동적 범위 처리부는, 선형적 계조 맵핑을 통하여 상기 적어도 하나의 관심 영역별 동적 범위는 선형적으로 확장하고, 관심 영역 이외의 영상 부분의 동적 범위는 선형적으로 압축하는 영상 처리 장치.
  2. 제1항에 있어서,
    상기 관심 영역 설정부는 사용자 입력 신호에 따라 적어도 하나 이상의 관심 영역을 설정하는 영상 처리 장치.
  3. 제2항에 있어서,
    상기 관심 영역 설정부는 상기 입력되는 영상을 적어도 하나의 영역으로 분할하고, 분할된 영상 영역 정보를 제공하고, 분할된 영상 영역 정보 중 적어도 하나를 선택하는 사용자 입력 신호가 수신되면, 상기 사용자 입력 신호에 의해 선택된 분할된 영상 영역을 관심 영역으로 설정하는 영상 처리 장치.
  4. 제1항에 있어서,
    상기 관심 영역 설정부는 에지 추출 맵을 생성하고 생성된 에지 추출 맵에 기초하여 관심 영역을 설정하거나 또는 에지 복잡도가 임계 복잡도 이상되는 영역을 관심 영역으로 설정하는 영상 처리 장치.
  5. 제1항에 있어서,
    상기 동적 범위 처리부는 상기 디스플레이 장치의 동적 범위 중 상기 관심 영역에 대하여 할당되는 동적 범위가 차지하는 비율이 상기 입력되는 영상의 동적 범위 중 상기 관심 영역의 동적 범위가 차지하는 비율 이상이 되도록 상기 관심 영역의 동적 범위를 상기 입력 영상이 출력될 디스플레이 장치의 동적 범위에 할당하고, 할당된 동적 범위에 기초하여 상기 관심 영역에 대하여 계조 매핑을 수행하는 영상 처리 장치.
  6. 제5항에 있어서,
    상기 동적 범위 처리부는 상기 관심 영역 이외의 영상 부분에 대한 동적 범위를 상기 디스플레이 장치의 동적 범위 중 상기 관심 영역의 동적 범위가 할당된 디스플레이 장치의 동적 범위 이외의 동적 범위 내에서 할당하고, 할당된 동적 범위 내에서 상기 관심 영역 이외의 영상 부분에 대하여 선형적 계조 매핑을 수행하는 영상 처리 장치.
  7. 제1항에 있어서,
    상기 동적 범위 처리부는 하나의 계조 분포를 가지는 입력 영상으로부터 관심 영역의 설정 개수에 대응하는 영상의 계조 분포가 서로 다른 출력 영상들을 생성하는 영상 처리 장치.
  8. 제1항에 있어서,
    상기 동적 범위 처리부는 상기 입력 영상의 색상 정보를 더 분석하고, 상기 적응적으로 처리된 동적 범위에 기초하여 할당되는 상기 디스플레이 장치의 색역에 따라서 색역 사상을 수행하는 영상 처리 장치.
  9. 제1항에 있어서,
    상기 동적 범위 처리부는 상기 적어도 하나의 관심 영역별 색상 정보를 분석하고, 상기 분석된 색상 정보 중 미리 설정된 적어도 하나의 색에 대응하는 색상이 검출되는 경우, 상기 검출된 색을 대응되는 선호색으로 변환하는 영상 처리 장치.
  10. 입력된 영상에 대한 적어도 하나의 관심 영역을 설정하는 단계;
    상기 설정된 관심 영역에 기초하여 상기 영상에 대하여 적어도 하나의 관심 영역별 동적 범위를 분석하는 단계; 및
    상기 영상이 출력될 디스플레이 장치의 동적 범위 및 분석된 관심 영역별 동적 범위에 기초하여 영상의 동적 범위를 적응적으로 처리하는 단계를 포함하고,
    상기 처리하는 단계는, 선형적 계조 맵핑을 통하여 상기 적어도 하나의 관심 영역별 동적 범위는 선형적으로 확장하고, 관심 영역 이외의 영상 부분의 동적 범위는 선형적으로 압축하는 영상 처리 방법.
  11. 제10항에 있어서,
    상기 관심 영역을 설정하는 단계는 사용자 입력 신호에 따라 적어도 하나 이상의 관심 영역을 설정하는 영상 처리 방법.
  12. 제10항에 있어서,
    상기 관심 영역을 설정하는 단계는,
    상기 입력되는 영상을 적어도 하나의 영역으로 분할하는 단계;
    분할된 영상 영역 정보를 제공하는 단계; 및
    분할된 영상 영역 정보 중 적어도 하나를 선택하는 사용자 입력 신호가 수신되면, 상기 사용자 입력 신호에 의해 선택된 분할된 영상 영역을 관심 영역으로 설정하는 단계를 포함하는 영상 처리 방법.
  13. 제10항에 있어서,
    상기 관심 영역을 설정하는 단계는 에지 추출 맵을 생성하고 생성된 에지 추출 맵에 기초하여 관심 영역을 설정하거나 또는 에지 복잡도가 임계 복잡도 이상되는 영역을 관심 영역으로 설정하는 영상 처리 방법.
  14. 제10항에 있어서,
    상기 처리하는 단계는,
    상기 디스플레이 장치의 동적 범위 중 상기 관심 영역에 대하여 할당되는 동적 범위가 차지하는 비율이 상기 입력 영상의 동적 범위 중 상기 관심 영역의 동적 범위가 차지하는 비율 이상이 되도록 상기 관심 영역의 동적 범위를 상기 입력 영상이 출력될 디스플레이 장치의 동적 범위에 할당하는 단계; 및
    할당된 동적 범위에 기초하여 상기 관심 영역에 대하여 계조 매핑을 수행하는 단계를 포함하는 영상 처리 방법.
  15. 제14항에 있어서,
    상기 처리하는 단계에서, 상기 관심 영역 이외의 영상 부분에 대한 동적 범위를 상기 디스플레이 장치의 동적 범위 중 상기 관심 영역의 동적 범위가 할당된 디스플레이 장치의 동적 범위 이외의 동적 범위 내에서 할당하고, 할당된 동적 범위 내에서 상기 관심 영역 이외의 영상 부분에 대하여 선형적 계조 매핑을 수행하는 영상 처리 방법.
  16. 제10항에 있어서,
    상기 처리하는 단계는 하나의 계조 분포를 가지는 입력 영상으로부터 관심 영역의 설정 개수에 대응하는 영상의 계조 분포가 서로 다른 출력 영상들을 생성하는 영상 처리 방법.
  17. 제10항에 있어서,
    상기 입력 영상의 색상 정보를 더 분석하고, 상기 적응적으로 처리된 동적 범위에 기초하여 할당되는 상기 디스플레이 장치의 색역에 따라서 색역 사상을 수행하는 단계를 더 포함하는 영상 처리 방법.
  18. 제10항에 있어서,
    상기 적어도 하나의 관심 영역별 색상 정보를 분석하는 단계;
    상기 분석된 색상 정보 중 미리 설정된 적어도 하나의 색에 대응하는 색상이 검출되는지 결정하는 단계; 및
    상기 검출되는 것으로 결정되는 경우, 상기 검출된 색을 대응되는 선호색으로 변환하는 단계를 더 포함하는 영상 처리 방법.
KR1020080134507A 2008-12-26 2008-12-26 관심 영역 기반 영상 처리 장치 및 방법 KR101520069B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080134507A KR101520069B1 (ko) 2008-12-26 2008-12-26 관심 영역 기반 영상 처리 장치 및 방법
US12/623,386 US8610738B2 (en) 2008-12-26 2009-11-21 Image processing apparatus and method with dynamic range processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080134507A KR101520069B1 (ko) 2008-12-26 2008-12-26 관심 영역 기반 영상 처리 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20100076455A KR20100076455A (ko) 2010-07-06
KR101520069B1 true KR101520069B1 (ko) 2015-05-21

Family

ID=42284368

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080134507A KR101520069B1 (ko) 2008-12-26 2008-12-26 관심 영역 기반 영상 처리 장치 및 방법

Country Status (2)

Country Link
US (1) US8610738B2 (ko)
KR (1) KR101520069B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017057926A1 (ko) * 2015-09-30 2017-04-06 삼성전자 주식회사 디스플레이 장치 및 이의 제어 방법
US10789687B2 (en) 2017-11-21 2020-09-29 Samsung Display Co., Ltd. Image processing method and image processor performing the same

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10043193B2 (en) * 2010-01-20 2018-08-07 Excalibur Ip, Llc Image content based advertisement system
KR101240469B1 (ko) * 2010-11-23 2013-03-11 현대모비스 주식회사 객체 인식 시스템, 차량용 장애물 인식 시스템 및 차량용 장애물 인식 방법
US9076224B1 (en) 2012-08-08 2015-07-07 Dolby Laboratories Licensing Corporation Image processing for HDR images
KR101948692B1 (ko) * 2012-10-09 2019-04-25 삼성전자주식회사 촬영 장치 및 이미지 합성 방법
EP2949120B1 (en) * 2013-01-25 2018-11-21 Dolby Laboratories Licensing Corporation Global display management based light modulation
KR102145201B1 (ko) 2013-08-12 2020-08-18 삼성전자주식회사 이미지의 동적 범위 향상을 위한 방법 및 장치
EP3860119A1 (en) * 2013-11-04 2021-08-04 Dolby Laboratories Licensing Corp. Single modulator projector systems with global dimming
KR102160247B1 (ko) * 2014-07-11 2020-09-25 삼성전자주식회사 전자 장치 및 이의 제어 방법
CN106233742B (zh) * 2014-08-26 2019-07-09 松下知识产权经营株式会社 显示控制装置、显示控制方法以及记录介质
KR101655867B1 (ko) * 2014-10-29 2016-09-08 고려대학교 산학협력단 주행 정보 처리 방법 및 장치
US9860504B2 (en) 2015-01-09 2018-01-02 Vixs Systems, Inc. Color gamut mapper for dynamic range conversion and methods for use therewith
US9589313B2 (en) * 2015-01-09 2017-03-07 Vixs Systems, Inc. Dynamic range converter with pipelined architecture and methods for use therewith
US9544560B2 (en) * 2015-01-09 2017-01-10 Vixs Systems, Inc. Dynamic range converter with generic architecture and methods for use therewith
US9560330B2 (en) * 2015-01-09 2017-01-31 Vixs Systems, Inc. Dynamic range converter with reconfigurable architecture and methods for use therewith
US9558538B2 (en) * 2015-01-09 2017-01-31 Vixs Systems, Inc. Dynamic range converter with frame by frame adaptation and methods for use therewith
JP6552243B2 (ja) * 2015-03-27 2019-07-31 キヤノン株式会社 表示装置及びその制御方法
KR102309676B1 (ko) 2015-07-24 2021-10-07 삼성전자주식회사 사용자 적응 이미지 보상기
WO2017138672A1 (ko) * 2016-02-12 2017-08-17 삼성전자 주식회사 디스플레이 장치 및 그 디스플레이 방법
EP3462743A1 (en) 2017-09-27 2019-04-03 Thomson Licensing Device and method for dynamic range expansion in a virtual reality scene
US10740881B2 (en) * 2018-03-26 2020-08-11 Adobe Inc. Deep patch feature prediction for image inpainting

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10150558A (ja) * 1996-10-28 1998-06-02 Eastman Kodak Co 領域選択的な露光調整方法および装置
US20050104900A1 (en) * 2003-11-14 2005-05-19 Microsoft Corporation High dynamic range image viewing on low dynamic range displays
WO2005081187A1 (ja) * 2004-02-25 2005-09-01 Matsushita Electric Industrial Co., Ltd. 画像処理装置、画像処理システム、画像処理方法、画像処理プログラムおよび集積回路装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5835618A (en) 1996-09-27 1998-11-10 Siemens Corporate Research, Inc. Uniform and non-uniform dynamic range remapping for optimum image display
WO2001015086A1 (fr) 1999-08-19 2001-03-01 Sony Corporation Processeur d'images, procede de traitement d'images et support enregistre
JP2003087650A (ja) 2001-09-14 2003-03-20 Yokogawa Electric Corp 適応型カメラ及び適応型カメラ・システム
US7369160B2 (en) 2001-06-15 2008-05-06 Yokogawa Electric Corporation Camera system for transferring both image data and an image processing program to transfer the image data to an external device
CN100389428C (zh) * 2001-10-24 2008-05-21 Nik软件公司 用于利用图像基准点处理数字图像的方法和设备
JP4055434B2 (ja) 2002-02-28 2008-03-05 ソニー株式会社 符号化処理装置、復号処理装置、および方法、並びにコンピュータ・プログラム
US7233694B2 (en) * 2002-06-21 2007-06-19 Canon Kabushiki Kaisha Image capturing apparatus and method, computer program, and computer-readable recording medium therefor
US9129381B2 (en) * 2003-06-26 2015-09-08 Fotonation Limited Modification of post-viewing parameters for digital images using image region or feature information
JP2006094297A (ja) * 2004-09-27 2006-04-06 Fuji Xerox Co Ltd 画像形成装置、画像処理装置、画像処理方法及びそのプログラム
KR100783122B1 (ko) 2006-09-27 2007-12-07 주식회사 아이닉스 광역 다이내믹 레인지 보정장치 및 보정방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10150558A (ja) * 1996-10-28 1998-06-02 Eastman Kodak Co 領域選択的な露光調整方法および装置
US20050104900A1 (en) * 2003-11-14 2005-05-19 Microsoft Corporation High dynamic range image viewing on low dynamic range displays
WO2005081187A1 (ja) * 2004-02-25 2005-09-01 Matsushita Electric Industrial Co., Ltd. 画像処理装置、画像処理システム、画像処理方法、画像処理プログラムおよび集積回路装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017057926A1 (ko) * 2015-09-30 2017-04-06 삼성전자 주식회사 디스플레이 장치 및 이의 제어 방법
US10542242B2 (en) 2015-09-30 2020-01-21 Samsung Electronics Co., Ltd. Display device and method for controlling same
US10789687B2 (en) 2017-11-21 2020-09-29 Samsung Display Co., Ltd. Image processing method and image processor performing the same

Also Published As

Publication number Publication date
US20100164976A1 (en) 2010-07-01
US8610738B2 (en) 2013-12-17
KR20100076455A (ko) 2010-07-06

Similar Documents

Publication Publication Date Title
KR101520069B1 (ko) 관심 영역 기반 영상 처리 장치 및 방법
KR101520068B1 (ko) 다중영상 합성장치 및 그 방법
US9412155B2 (en) Video system with dynamic contrast and detail enhancement
JP5611457B2 (ja) 階調および色再現域のマッピング方法および装置
KR101309498B1 (ko) 높은 동적 범위 이미지 매핑을 위한 히스토그램 조정
JP5806682B2 (ja) 高ダイナミック・レンジ画像の発生およびレンダリング
EP2899688A1 (en) Image processing device, image display device, image capture device, image printing device, gradation conversion method, and program
US7064864B2 (en) Method and apparatus for compressing reproducible color gamut
KR20070111391A (ko) 높은 동작 범위 이미지 매핑을 위한 히스토그램 조정
JP6921886B2 (ja) 情報処理装置および情報処理方法
KR20110123283A (ko) 입력 이미지 데이터를 출력 이미지 데이터로 변환하기 위한 방법, 입력 이미지 데이터를 출력 이미지 데이터로 변환하기 위한 이미지 변환 유닛, 이미지 프로세싱 장치, 디스플레이 디바이스
JP2006238412A (ja) 輝度レベル変換装置、輝度レベル変換方法、固体撮像装置、輝度レベル変換プログラム、および記録媒体
JP7117915B2 (ja) 画像処理装置、制御方法、及びプログラム
US8665348B2 (en) Image processing apparatus and method using forward and inverse local adaptation processing and dynamic range processing
JP4064979B2 (ja) カラー映像の彩度調節装置およびその方法
EP3425895A1 (en) Evaluation device, evaluation method, and camera system
JP5165076B2 (ja) 映像表示装置
Fairchild et al. Image appearance modeling
US7340104B2 (en) Correction parameter determining method, correction parameter determining apparatus, computer program, and recording medium
CN111416966A (zh) 信息处理设备、信息处理方法和计算机可读介质
JP2000099717A (ja) 画質調整装置及び画質調整方法、並びに画像調整用プログラムを記録した記録媒体
KR101642034B1 (ko) 입력 영상의 동적 범위를 변환하는 방법 및 장치
KR101923162B1 (ko) 액정 패널을 이용한 ｈｄｒｉ 영상 획득 장치 및 방법
US20110216967A1 (en) Specified color area demarcation circuit, detection circuit, and image processing apparatus using same
US7437016B2 (en) Image enhancement

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180423

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190422

Year of fee payment: 5