KR20140071867A - 화상 처리 장치, 화상 처리 방법 및 프로그램 - Google Patents

화상 처리 장치, 화상 처리 방법 및 프로그램 Download PDF

Info

Publication number
KR20140071867A
KR20140071867A KR1020130069951A KR20130069951A KR20140071867A KR 20140071867 A KR20140071867 A KR 20140071867A KR 1020130069951 A KR1020130069951 A KR 1020130069951A KR 20130069951 A KR20130069951 A KR 20130069951A KR 20140071867 A KR20140071867 A KR 20140071867A
Authority
KR
South Korea
Prior art keywords
image
pixel
white
raw data
saturated
Prior art date
Application number
KR1020130069951A
Other languages
English (en)
Other versions
KR101871946B1 (ko
Inventor
야스시 이하
Original Assignee
삼성테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성테크윈 주식회사 filed Critical 삼성테크윈 주식회사
Priority to US14/053,861 priority Critical patent/US9030572B2/en
Priority to CN201310585546.3A priority patent/CN103856768B/zh
Publication of KR20140071867A publication Critical patent/KR20140071867A/ko
Application granted granted Critical
Publication of KR101871946B1 publication Critical patent/KR101871946B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Image Processing (AREA)
  • Processing Of Color Television Signals (AREA)
  • Color Image Communication Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

화상 처리 장치에 있어서 판정부와 변환부를 포함한다. 판정부는, 촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 원(raw) 데이터에 기초하여 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정한다. 변환부는, 판정된 백색-포화 영역에 해당하는 영역에 상응하는 원(raw) 데이터에 대해 화상 공간 주파수의 분포 변환을 선택적으로 수행한다. 여기에서, 변환부는, 백색-포화 영역에 해당하는 영역에서, 설정되어 있는 기준 화소 이외의 화소의 휘도 변화를 줄인다.

Description

화상 처리 장치, 화상 처리 방법 및 프로그램{Apparatus, method and program of image processing}
본 발명은 화상 처리 장치, 화상 처리 방법 및 프로그램에 관한 것이다.
원(raw) 데이터의 게인(gain)을 조정함으로써 화이트 밸런스를 조정하는 화이트 밸런스 처리가 원 데이터에 대한 화상 처리 중 하나로서 이루어지고 있다. 원 데이터에 대해 화이트 밸런스 처리를 하는 기술로서는, 예를 들어 특허문헌 1에 기재된 기술을 들 수 있다.
일본 특허공개공보 제2011-155696호
최근 원(raw) 데이터(촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 데이터. 이하, 동일.)에 대한 화상 처리를, 촬영을 한 촬영 장치에 수행시키는 것이 아니라 원(raw) 데이터를 기록매체에 기록시키고 해당 기록매체에 기억되어 있는 원(raw) 데이터에 대한 화상 처리를 PC(Personal Computer)등의 컴퓨터에 수행시키는 사용자가 증가하고 있다.
여기에서 원(raw) 데이터는, 예를 들어 화이트 밸런스 처리나 콘트라스트 조정 처리, 노이즈 제거 처리 등 화상 처리전의 미가공 데이터이므로, 일반적으로 크기가 크다. 따라서 원(raw) 데이터를 보다 효율적으로 압축하여 원(raw) 데이터의 크기를 더욱 줄일 수 있다면, 예를 들어 기록매체에 기록 가능한 화상수(원 데이터가 나타내는 화상의 수)를 늘릴 수 있게 된다. 따라서, 예를 들어 원(raw) 데이터를 보다 효율적으로 압축함으로써 사용자의 편리성 향상을 도모할 수 있다.
또한, 촬영 장치에서 원(raw) 데이터에 대해 화상 처리를 수행할 경우에도, 촬영 소자로부터 얻어진 원(raw) 데이터를 SDRAM(Synchronous Dynamic Random Access Memory)등의 메모리에 전송하여 기록한 후에 해당 메모리에 기억된 원(raw) 데이터에 대해 화상 처리를 수행한다.
상기와 같이 촬영 장치에서 원(raw) 데이터에 대해 화상 처리를 할 경우에도, 원(raw) 데이터를 보다 효율적으로 압축하여 원(raw) 데이터의 크기를 더 줄임으로써 데이터 전송에 의해 발생하는 소비 전력을 억제할 수 있게 된다. 따라서, 예를 들어 촬영 장치가 배터리 등의 내부 전원에 의해 구동될 경우에는 원(raw) 데이터의 크기를 보다 작게 함으로써 촬영 장치의 구동 시간을 더 길게 할 수 있다.
따라서, 원(raw) 데이터를 보다 효율적으로 압축하는 것은, 사용자의 편리성 향상을 도모할 뿐 아니라 또 데이터 전송에 관한 소비 전력을 줄이므로 중요하다.
여기에서, 예를 들어 특허문헌 1에 기재된 기술에서는, 원(raw) 데이터에 대해 화이트 밸런스 처리를 한 후 화이트 밸런스 처리 후의 화상을 압축하였다. 그러나 예를 들어 특허문헌 1에 기재된 기술에서는, 원(raw) 데이터를 보다 효율적으로 압축하는 것에 대해서는 아무런 고려도 이루어지지 않았다. 따라서, 예를 들어 특허문헌 1에 기재된 기술을 이용해도 비효율적인 압축이 될 우려가 있다.
본 발명은 상기 문제를 감안하여 이루어진 것으로서, 본 발명의 목적으로 하는 바는, 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있는 신규 및 개량된 화상 처리 장치, 화상 처리 방법 및 프로그램을 제공하는 데 있다.
상기 목적을 달성하기 위해 본 발명의 제1 관점에 의하면, 촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 원 데이터에 기초하여 상기 원 화상에 포함되는 백색-포화 영역(blown out highlights)에 해당하는 영역을 판정하는 판정부와, 판정된 상기 백색-포화 영역에 해당하는 영역에 상응하는 상기 원(raw) 데이터에 대해 화상 공간 주파수의 분포 변환을 선택적으로 수행하는 변환부를 구비하고, 상기 변환부는 상기 백색-포화 영역에 해당하는 영역에서, 설정되어 있는 기준 화소가 아닌 화소의 휘도 변화를 줄이는 화상 처리 장치가 제공된다.
상기 구성에 의하면, 원(raw) 데이터에서의 불필요한 정보를 줄일 수 있게 되므로 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다.
바람직하게는, 상기 변환부는, 상기 백색-포화 영역에 해당하는 영역에서, 상기 기준 화소가 아닌 화소의 휘도 변화를 제로로 설정한다.
바람직하게는, 상기 판정부는, 상기 기준 화소의 화소값와 소정의 문턱값의 비교 결과 및 상기 기준 화소가 아닌 화소 각각의 화소값와 상응하는 화이트 밸런스 계수를 곱한 값과, 상기 소정의 문턱값과의 비교 결과에 기초하여 상기 백색-포화 영역에 해당하는 영역을 판정한다.
바람직하게는, 상기 화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터에 대해 화상 압축 처리를 하는 압축 처리부를 더 구비한다.
한편, 본 발명의 제2 관점에 의하면, 촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 원(raw) 데이터에 기초하여 상기 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정하는 단계와, 판정된 상기 백색-포화 영역에 해당하는 영역에 상응하는 상기 원(raw) 데이터에 대해 화상 공간 주파수의 분포 변환을 선택적으로 수행하는 단계를 가지고, 상기 화상 공간 주파수의 분포 변환을 수행하는 단계에서는, 상기 백색-포화 영역에 해당하는 영역에서 설정되어 있는 기준 화소가 아닌 화소의 휘도 변화를 줄이는 화상 처리 방법이 제공된다.
상기 화상 처리 방법에 의하면, 원(raw) 데이터에서의 불필요한 정보를 줄일 수 있게 되므로 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다.
또한, 본 발명의 제3 관점에 의하면, 촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 원(raw) 데이터에 기초하여 상기 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정하는 판정 수단, 판정된 상기 백색-포화 영역에 해당하는 영역에 상응하는 상기 원(raw) 데이터에 대해 화상 공간 주파수의 분포 변환을 선택적으로 수행하는 변환 수단,으로서 컴퓨터를 기능시키고, 상기 변환 수단은, 상기 백색-포화 영역에 해당하는 영역에서, 설정되어 있는 기준 화소가 아닌 화소의 휘도 변화를 줄이는 프로그램이 제공된다.
상기 프로그램에 의하면, 원(raw) 데이터에서의 불필요한 정보를 줄일 수 있게 되므로 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다.
본 발명에 의하면, 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다.
도 1은 원(raw) 데이터에 대한 기존의 화상 압축에서의 문제의 일 예를 설명하기 위한 설명도이다.
도 2는 본 발명의 일 실시예의 화상 처리 장치의 구성을 보여주는 블록도이다.
도 3은 도 2의 화상 처리 장치의 판정부의 구성을 보여주는 블록도이다.
도 4는 도 2의 화상 처리 장치의 변환부의 구성을 보여주는 블록도이다.
도 5는 도 4의 변환부에 구비된 변환 처리부들의 동작을 설명하기 위한 설명도이다.
도 6은 도 2의 화상 처리 장치에서의 처리 동작의 일 예를 보여주는 흐름도이다.
도 7은, 도 6의 처리 동작에 따라 화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터에 대하여, 화상 압축 처리가 수행된 결과의 예를 설명하기 위한 도면이다.
이하, 첨부 도면을 참조하여 본 발명의 바람직한 실시 형태에 대해 상세히 설명하기로 한다. 아울러 본 명세서 및 도면에서 실질적으로 동일한 기능 구성을 가진 구성요소에 대해서는 동일 부호를 붙임으로써 중복 설명을 생략하기로 한다.
또한 이하에서는, 원(raw) 데이터가 베이어 배열의 촬영 소자나 칼라 필터에 의해 얻어지는 R(Red)화소, G(Green)화소, B(Blue)화소를 포함한 화상 데이터인 경우를 예로 들어 설명하기로 한다. 아울러 본 발명의 실시 형태에 관한 화상 처리 방법을 적용할 수 있는 원(raw) 데이터는, 베이어 배열의 촬영 소자 등에 의해 얻어진 화상 데이터로 한정되지 않는다. 즉, 본 발명의 실시예에서의 화상 처리 방법은 다양한 화상 데이터에 적용될 수 있다.
［1］기존의 화상 압축시 문제
본 발명의 실시 형태에 관한 화상 처리 방법에 관한 처리를 수행할 수 있는, 본 발명의 실시 형태에 관한 화상 처리 장치 구성의 일례에 대해 설명하기 전에, 우선 원(raw) 데이터에 대한 기존 화상 압축시 문제의 일례에 대해 설명하기로 한다.
도 1은 원(raw) 데이터에 대한 기존의 화상 압축에서의 문제의 일 예를 설명하기 위한 설명도이다. 도 1에 도시한 A는, 화이트 밸런스 처리를 하기 전의 원(raw) 데이터 화소값의 일례를 도시하고 있으며, 도 1에 도시한 B는, 화이트 밸런스 처리를 한 후의 원(raw) 데이터 화소값의 일례를 도시한다. 여기에서, 도 1에서 횡축은 광원의 강도 레벨(1＜2＜3＜4＜5)을 나타내며, 세로축은 화소값을 나타낸다. 또한 도 1에서는, 원(raw) 데이터가 계조를 나타내는 화상인 예를 도시하였다. 여기에서, 참조 부호 1은 흑색에 가까운 휘도를, 그리고 5는 백색에 가까운 휘도를 가리킨다. 또한, 도 1에 도시된 포화값란, 원(raw) 데이터의 비트수 상한치(예를 들어, 8 비트라면 256)를 나타낸다.
예를 들어, 도 1의 A에 도시한 바와 같이 원(raw) 데이터가 계조(grayscale)를 나타내는 화상인 경우에는, 화소값은 "G＞R＞B"의 특성을 가진다. 상기 특성을 감안하여 R 화소/G 화소/B 화소가 각각 같은 값이 되도록 게인 계수를 곱하는 처리를 함으로써, 예를 들어 도 1의 B에 도시한 바와 같이 화이트 밸런스 처리가 실현된다.
촬영 소자는 표현 가능한 범위가 정해져 있으며, 화이트 밸런스 처리의 원(raw) 데이터는, 예를 들어 도 1의 A에 도시된 "3", "4", "5"의 경우처럼 피사체의 휘도가 어느 일정치보다 커지면 G 화소부터 포화된다.
화이트 밸런스 처리를 하면, 예를 들어 R 화소/G 화소/B 화소 각각에, 화이트 밸런스를 조정하기 위한 게인 계수(이하, 「화이트 밸런스 계수」로 나타내는 경우가 있음)가 곱해진다. 그 결과, 예를 들어 도 1의 B에 도시된 "3", "4", "5"의 경우처럼 R 화소/G 화소/B 화소가 각각 포화된다. 여기에서, 도 1의 B에 도시된 "3", "4", "5"의 경우처럼 화이트 밸런스 처리 후에 R 화소/G 화소/B 화소가 포화되는 영역은 「백색-포화 영역」이라고 불리어진다.
일반적으로 사용자가 감상하는 화상은, 화이트 밸런스 처리를 포함한 화상 처리 후의 화상 데이터가 나타내는 화상이므로, 원(raw) 데이터에서의 "백색-포화 영역에 해당하는 영역"(화이트 밸런스 처리 후에 백색-포화 영역에 해당하는 영역. 이하, 동일한 의미로 사용됨) 중에서 R 화소/B 화소의 휘도차(화상 공간 주파수 성분)는 불필요한 정보(데이터)라고 볼 수 있다.
그러나 기존의 기술에 관한 원(raw) 데이터에 대한 화상 압축 처리는, 상기 불필요한 정보를 포함하여 압축을 한다. 따라서 기존의 기술에 관한 원(raw) 데이터에 대한 화상 압축 처리는 비효율적인 압축이라고 볼 수 있다.
［2］본 발명의 실시 형태에 관한 화상 처리 장치
그래서 본 발명의 실시예의 화상 처리 장치는, 본 발명의 실시예의 화상 처리 방법에 따라, 원(raw) 데이터에 기초하여 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정한다(판정 처리). 이 판정 처리의 예에 대해서는 후술하기로 한다.
또한 본 발명의 실시예의 화상 처리 장치는, 상기 판정 처리에서 판정된 백색-포화 영역에 해당하는 영역에 상응하는 원(raw) 데이터에 대해, 화상 공간 주파수의 분포 변환을 선택적으로 수행한다(변환 처리). 보다 구체적으로는, 본 발명의 실시예의 화상 처리 장치는, 예를 들어 백색-포화 영역에 해당하는 영역에서, 설정되어 있는 기준 화소들 외의 화소들의 휘도 변화를 줄인다.
여기에서 기준 화소들로서, 피사체의 휘도가 어느 일정치보다 커지면 최초로 포화되는 색 화소를 들 수 있다. 예를 들어 도 1에 도시한 예에서는, 설정되는 본 발명의 실시 형태에 관한 기준 화소로서는 G 화소를 들 수 있다. 아울러 본 발명의 실시 형태에 관한 기준 화소는 G 화소로 한정되지 않는다. 예를 들어, 광원의 종류에 따라서는 R 화소나 B 화소가 기준 화소가 될 수 있다. 또한 기준 화소는, 미리 설정되어 있어도 좋고, 사용자 조작이나 광원의 검출 결과 등에 기초하여 설정(재설정)되어도 좋다.
상기와 같이 본 발명의 실시예의 화상 처리 장치는, 본 발명의 실시예의 화상 처리 방법에 따라 판정 처리 및 변환 처리를 한다. 여기에서 본 발명의 실시예의 화상 처리 장치는, 변환 처리에서 백색-포화 영역에 해당하는 영역에서의 기준 화소가 아닌 화소의 휘도 변화(정보)를 줄인다. 따라서 본 발명의 실시예의 화상 처리 장치에서 변환 처리가 이루어진 원(raw) 데이터에 대해 화상 압축 처리할 경우에는, 원(raw) 데이터에서의 상기 불필요한 정보가 줄어든 원(raw) 데이터에 대해 압축할 수 있다.
따라서 본 발명의 실시예의 화상 처리 장치는, 본 발명의 실시예의 화상 처리 방법에 따른 처리(판정 처리 및 변환 처리)를 함으로써 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다.
아울러 본 발명의 실시예의 원(raw) 데이터에 대한 화상 압축 처리는, 예를 들어 본 발명의 실시예의 화상 처리 장치에서 이루어져도 좋고, 화상 압축 처리가 가능한 외부 장치에서 이루어져도 좋다.
이하, 본 발명의 실시예의 화상 처리 장치의 구성 및 본 발명의 실시예의 화상 처리 방법에 의한 처리(판정 처리 및 변환 처리)에 대하여 보다 구체적으로 설명하기로 한다.
이하에서는, G 화소가 기준 화소이며, R 화소 및 B 화소가 기준 화소가 아닌 화소인 경우를 예로 들어 본 발명의 실시 형태에 관한 화상 처리 장치 구성의 일례에 대해 설명하기로 한다. 아울러 상술한 바와 같이 본 발명의 실시 형태에 관한 기준 화소는 G 화소로 한정되지 않는다.
도 2는 본 발명의 일 실시예의 화상 처리 장치(100)의 구성을 보여준다. 화상 처리 장치(100)는, 예를 들어 판정부(102)와 변환부(104)를 구비한다.
여기에서, 화상 처리 장치(100)가 처리하는 원(raw) 데이터, 즉, 본 발명의 실시예의 화상 처리 방법에 의한 처리를 하기 전의 원 데이터를 「입력 원(raw) 데이터」로 도시하였다. 또한 도 2에서는, 화상 처리 장치(100)가 처리한 원 데이터, 즉, 본 발명의 실시 형태에 관한 화상 처리 방법에 관한 처리를 한 후의 원 데이터를 「출력 원(raw) 데이터」로 도시하였다.
입력 원(raw) 데이터로서는, 예를 들어, 촬영부(후술)나 외부 촬영 장치로부터 촬영에 따라 전달되는 원(raw) 데이터를 들 수 있다. 아울러 본 발명의 실시 형태에 관한 입력 원(raw) 데이터는 상기에 한정되지는 않는다. 예를 들어 본 발명의 실시 형태에 관한 입력 원(raw) 데이터는, 기억부(후술)나, 네트워크를 통해(혹은 직접적으로) 접속된 외부 장치가 구비한 외부 기록매체 등의 기록매체로부터 독출된, 해당 기록매체에 기억되어 있는 원(raw) 데이터여도 좋다.
또한 화상 처리 장치(100)는, 예를 들어 제어부(미도시)나 ROM(Read Only Memory. 미도시), RAM(Random Access Memory. 미도시), 기억부(미도시), 사용자가 조작 가능한 조작부(미도시), 다양한 화면을 표시 화면에 표시하는 표시부(미도시), 외부 장치와 통신하기 위한 통신부(미도시), 촬영부(미도시) 등을 구비해도 좋다. 화상 처리 장치(100)는, 예를 들어 데이터의 전송로로서의 버스에 의해 상기 각 구성요소 사이를 접속한다.
여기에서 제어부(미도시)는, 예를 들어 CPU(Central Processing Unit)나 각종 처리 회로 등으로 구성되어 화상 처리 장치(100) 전체를 제어한다. 또한 제어부(미도시)는, 예를 들어 판정부(102) 및 변환부(104)(또는 어느 한쪽)의 역할을 해도 좋다. 아울러 판정부(102) 및 변환부(104)는 각 부의 처리를 실현할 수 있는 전용(또는 범용) 처리 회로로 구성되어 있어도 좋다는 것은 당연하다.
또한 제어부(미도시)는, 예를 들어 출력 원(raw) 데이터를 기억부(미도시)에 기록하는 처리나 후술하는 압축 처리부에 관한 처리 등 출력 원(raw) 데이터에 대한 처리를 하는 역할을 해도 좋다.
ROM(미도시)은, 제어부(미도시)가 사용하는 프로그램이나 연산 파라미터 등의 제어용 데이터를 기억한다. RAM(미도시)은, 제어부(미도시)에 의해 실행되는 프로그램 등을 일시적으로 기억한다.
기억부(미도시)는, 화상 처리 장치(100)가 구비한 기억 수단으로서, 예를 들어 화상 데이터나 어플리케이션 등 다양한 데이터를 기억한다. 여기에서 기억부(미도시)로서는, 예를 들어 하드 디스크(Hard Disk)등의 자기 기록매체나 플래쉬 메모리(flash memory)등의 불휘발성 메모리(nonvolatile memory)등을 들 수 있다. 또한 기억부(미도시)는 화상 처리 장치(100)로부터 착탈 가능해도 좋다.
조작부(미도시)로서는, 예를 들어 버튼이나 방향 키, 혹은 이들 조합 등을 들 수 있다. 또한 화상 처리 장치(100)는, 예를 들어 화상 처리 장치(100)의 외부 장치로서의 조작 입력 장치(예를 들어, 키보드나 마우스 등)와 접속할 수도 있다.
표시부(미도시)로서는, 예를 들어 액정 디스플레이(Liquid Crystal Display)나 유기 EL 디스플레이(Organic Electro-Luminescence display) 등을 들 수 있다. 아울러 표시부(미도시)는, 예를 들어 터치 스크린 등과 같이 표시와 사용자 조작이 가능한 장치여도 좋다. 또 화상 처리 장치(100)는 표시부(미도시) 유무와 상관 없이 화상 처리 장치(100)의 외부 장치로서의 표시 장치(예를 들어 외부 디스플레이 등)와 접속할 수도 있다.
통신부(미도시)는, 화상 처리 장치(100)가 구비한 통신 수단으로서, 네트워크를 통해(혹은 직접적으로) 외부 장치와 무선/유선으로 통신한다. 여기에서 통신부(미도시)로서는, 예를 들어 통신 안테나 및 RF(Radio Frequency)회로(라디오 커뮤니케이션)나 IEEE802.15.1 포트 및 송수신 회로(라디오 커뮤니케이션), IEEE802.11b 포트 및 송수신 회로(라디오 커뮤니케이션), 혹은 LAN(Local Area Network)단자 및 송수신 회로(유선 통신) 등을 들 수 있다. 또 본 발명의 실시 형태에 관한 네트워크로서는, 예를 들어 LAN이나 WAN(Wide Area Network)등의 유선 네트워크, 무선 LAN(WLAN；Wireless Local Area Network)이나 기지국을 통한 무선 WAN(WWAN；Wireless Wide Area Network)등의 무선 네트워크, 혹은 TCP/IP(Transmission Control Protocol/Internet Protocol)등의 통신 프로토콜을 이용한 인터넷 등을 들 수 있다.
촬영부(미도시)는, 예를 들어 정지 화상을 촬영하는 역할을 한다. 촬영부(미도시)를 구비한 경우에는 화상 처리 장치(100)는, 예를 들어 촬영부(미도시)에서의 촬영에 의해 생성된 원(raw) 데이터를 처리할 수 있다.
여기에서 본 발명의 실시 형태에 관한 촬영부(미도시)로서는, 예를 들어 렌즈/촬영 소자를 들 수 있다. 렌즈/촬영 소자는, 예를 들어 광학계 렌즈와 CMOS(Complementary Metal Oxide Semiconductor)등의 촬영 소자를 여러 개 이용한 이미지 센서로 구성된다.
판정부(102)는, 본 발명의 실시 형태에 관한 판정 처리를 하는 역할을 하고 입력 원(raw) 데이터에 기초하여 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정한다.
도 3은 도 2의 화상 처리 장치의 판정부(102)의 구성을 보여준다. 판정부(102)는, 예를 들어, 제1 화소 판정부(110A), 제2 화소 판정부(110B), 제3 화소 판정부(110C), 및 백색-포화 영역 판정부(112)를 포함한다.
제1 화소 판정부(110A)에는, 원(raw) 데이터에서의 R 화소에 상응하는 화소값(이하, 「Rpxl」 또는 「화소값 Rpxl」로 나타내는 경우가 있음)와, R 화소에 상응하는 화이트 밸런스 계수(이하, 「Rgain」 또는 「화이트 밸런스 계수 Rgain」으로 나타내는 경우가 있음)가 입력된다. 여기에서 화이트 밸런스 계수 Rgain은, 예를 들어 제어부(미도시)나 검파 회로에서 원(raw) 데이터를 검파한 결과에 기초하여 결정된다. 제1 화소 판정부(110A)는, 화소값 Rpxl(기준 화소가 아닌 화소의 화소값)및 화이트 밸런스 계수 Rgain(상응하는 화이트 밸런스 계수)을 곱한 값과 소정의 문턱값 Frange를 비교한다.
여기에서 소정의 문턱값 Frange은, 예를 들어 미리 설정된 고정치여도 좋고 사용자 조작 등에 의해 변경 가능한 가변값이어도 좋다. 구체적 예를 들어, 소정의 문턱값 Frange로서는, 표현 가능한 최대값(예를 들어 12 비트(bits)의 표현으로는 "4095", 10 비트(bits)의 표현으로는 "1023"을 들 수 있다.
또한 제1 화소 판정부(110A)는, 예를 들어 비교 결과를 나타내는 데이터를 백색-포화 영역 판정부(112)에 전달한다. 여기에서 본 발명의 실시예에서의 비교 결과를 나타내는 데이터로서는, 예를 들어 상기 곱한 값이 소정의 문턱값 Frange보다 큰지의 여부(또는 상기 곱한 값이 소정의 문턱값 Frange 이상인지 여부. 이하, 동일함)를 나타내는 플래그 Rpxl_Fflag를 들 수 있다. 아울러 본 발명의 실시 형태에 관한 비교 결과를 나타내는 데이터가 플래그에 한정되지 않는다는 것은 당연하다.
제2 화소 판정부(110B)에는, 원(raw) 데이터에서의 B 화소에 상응하는 화소값(이하, 「Bpxl」 또는 「화소값 Bpxl」로 나타내는 경우가 있다.)와, B 화소에 상응하는 화이트 밸런스 계수(이하, 「Bgain」 또는 「화이트 밸런스 계수 Bgain」로 나타내는 경우가 있다.)가 입력된다. 여기에서 화이트 밸런스 계수 Bgain는, 예를 들어 제어부(미도시)나 검파 회로에서 원(raw) 데이터를 검파한 결과에 기초하여 결정된다.
제2 화소 판정부(110B)는, 제1 화소 판정부(110A)와 마찬가지로 화소값 Bpxl(기준 화소가 아닌 화소의 화소값) 및 화이트 밸런스 계수 Bgain(상응하는 화이트 밸런스 계수)를 곱한 값과 소정의 문턱값 Frange를 비교한다.
또한 제2 화소 판정부(110B)는, 예를 들어 제1 화소 판정부(110A)와 마찬가지로 비교 결과를 나타내는 데이터를 백색-포화 영역 판정부(112)에 전달한다. 여기에서 본 발명의 실시 형태에 관한 비교 결과를 나타내는 데이터로서는, 예를 들어 상기 곱한 값이 소정의 문턱값 Frange보다 큰지 여부를 나타내는 플래그 Bpxl_Fflag를 들 수 있다. 아울러 본 발명의 실시 형태에 관한 비교 결과를 나타내는 데이터가 플래그에 한정되지 않는다는 것은 당연하다.
제3 화소 판정부(110C)에는, 원(raw) 데이터에서의 G 화소에 상응하는 화소값(이하 「Gpxl」 또는 「화소값 Gpxl」로 나타내는 경우가 있다.)가 입력된다.
제3 화소 판정부(110C)는, 화소값 Gpxl(기준 화소의 화소값)과 소정의 문턱값 Frange를 비교한다. 그리고 제3 화소 판정부(110C)는, 예를 들어 화소 판정부(110A)와 마찬가지로 비교 결과를 나타내는 데이터를 백색-포화 영역 판정부(112)에 전달한다. 여기에서 본 발명의 실시 형태에 관한 비교 결과를 나타내는 데이터로서는, 예를 들어 화소값 Gpxl가 소정의 문턱값 Frange보다 큰지 여부를 나타내는 플래그 Gpxl_Fflag를 들 수 있다. 아울러 본 발명의 실시 형태에 관한 비교 결과를 나타내는 데이터가 플래그에 한정되지 않는다는 것은 당연하다.
백색-포화 영역 판정부(112)는, 화소 판정부들(110A, 110B, 110C) 각각으로부터 전달되는 비교 결과를 나타내는 데이터에 기초하여 원(raw) 화상에서 백색-포화 영역에 해당하는 영역을 판정한다.
보다 구체적으로는 백색-포화 영역 판정부(112)는, 예를 들어 플래그 Rpxl_Flag, 플래그 Bpxl_Flag, 플래그 Gpxl_Flag가 모두 소정의 문턱값 Frange보다 크다는 것을 나타낼 경우에 이들 플래그에 상응하는 화소가 백색-포화 영역에 해당하는 영역에 포함되는 화소라고 판정한다.
아울러 백색-포화 영역 판정부(112)에서의 처리는 상기에 한정되지는 않는다. 예를 들어 백색-포화 영역 판정부(112)는, 하기 수학식 1의 조건식을 충족할 경우에 백색-포화 영역에 해당하는 영역에 포함되는 화소라고 판정하는 것도 가능하다.
Figure pat00001
상기 수학식 1에서, Gpxl은 G 화소에 상응하는 화소값을, Frange는 문턱값을, Rpxl은 R 화소에 상응하는 화소값을, Rgain은 R 화소에 상응하는 화이트 밸런스 계수를, Bpxl은 B 화소에 상응하는 화소값을, 그리고 Bgain은 B 화소에 상응하는 화이트 밸런스 계수를 각각 가리킨다.
판정을 하면, 백색-포화 영역 판정부(112)는 백색-포화 영역에 해당하는 영역의 판정 결과를 나타내는 데이터를 변환부(104)에 전달한다. 여기에서 본 발명의 실시 형태에 관한 판정 결과를 나타내는 데이터로서는, 예를 들어 백색-포화 영역에 해당하는 영역인지 아닌지를 나타내는 플래그 Fflag를 들 수 있다. 아울러 본 발명의 실시 형태에 관한 판정 결과를 나타내는 데이터가 플래그에 한정되지 않는다는 것은 당연하다.
판정부(102)는, 예를 들어 화소 판정부(110A),(110B),(110C)와 백색-포화 영역 판정부(112)를 구비함으로써 입력 원(raw) 데이터에 기초하여 백색-포화 영역에 해당하는 영역을 판정한다. 그리고 판정부(102)는, 플래그 Fflag(판정 결과를 나타내는 데이터의 일례. 이하 동일.)를 변환부(104)에 전달한다.
다시 도 2를 참조하여 화상 처리 장치(100) 구성의 일례에 대해 설명하기로 한다. 변환부(104)는 본 발명의 실시 형태에 관한 변환 처리를 하는 역할을 하며 전달되는 플래그 Fflag에 기초하여 백색-포화 영역에 해당하는 영역에 상응하는 원(raw) 데이터에 대해 화상 공간 주파수의 분포 변환을 선택적으로 수행한다. 보다 구체적으로는 변환부(104)는, 예를 들어 백색-포화 영역에 해당하는 영역에서 설정되어 있는 기준 화소가 아닌 화소의 휘도 변화를 줄인다.
도 4는 도 2의 화상 처리 장치의 변환부(104)의 구성을 보여준다.
도 4를 참조하면, 변환부(104)는 제1 변환 처리부(114A), 제2 변환 처리부(114B), 및 제3 변환 처리부(114C)를 포함한다.
제1 변환 처리부(114A)는, 전달되는 플래그 Fflag에 기초하여 선택적으로 화소값 Rpxl에 대해 화상 공간 주파수의 분포 변환을 수행한다. 그리고 제1 변환 처리부(114A)는, 선택적으로 화상 공간 주파수의 분포 변환을 한 화소값 Rout를 출력한다.
보다 구체적으로는, 제1 변환 처리부(114A)는, 플래그 Fflag가 백색-포화 영역에 해당하는 영역이라는 것을 나타내는 경우에 화상 공간 주파수의 분포 변환을 하고, 플래그 Fflag가 백색-포화 영역에 해당하는 영역이라는 것을 나타내지 않는 경우에는 화상 공간 주파수의 분포 변환을 하지 않는다. 도 4의 예에서는, 플래그 Fflag가 "1"을 나타내는 경우에 플래그 Fflag가 백색-포화 영역에 해당하는 영역이라는 것을 나타내는 예를 도시하였다.
여기에서, "백색-포화 영역"에서 "백색-포화 영역이 아닌 영역"으로 상태가 바뀌면 가장 휘도 변화가 적어진다. 따라서 제1 변환 처리부(114A)는, 예를 들어 아래의 수학식 2에 도시한 연산을 함으로써 화소값 Rpxl(기준 화소가 아닌 화소의 화소값)의 휘도 변화를 영(zero)으로 한다.
Figure pat00002
상기 수학식 2에서, Rout은 R 화소에 상응하는 출력 화소값을, Frange는 상기 문턱값을, 그리고 Rgain은 R 화소에 상응하는 화이트 밸런스 계수를 각각 가리킨다.
제2 변환 처리부(114B)의 동작은 화소값 Bpxl에 대하여 상기와 같은 동작을 수행한다.
제3 변환 처리부(114C)는 기준 화소(G)의 값 Gpxl을 그대로 출력한다.
도 5는 도 4의 변환부(104)에 구비된 변환 처리부들(114A 내지 114C)의 동작을 설명하기 위한 설명도이다. 도 5에서 참조 부호 A는 제1 변환 처리부(114A)가 처리하기 전의 화소값 Rpxl의 일 예를 가리킨다. 참조 부호 B는, 변환 처리부(114A)가 처리한 후의 화소값 Rout의 일 예를 가리킨다.
예를 들어, 도 5의 B에 도시한 바와 같이 변환 처리부(114A)는, 예를 들어 백색-포화 영역에 해당하는 영역으로 판정된 화소값을 동일한 값으로 변환한다. 즉, 변환 처리부(114A)는, 백색-포화 영역에 해당하는 영역에서의 불필요한 휘도 변화(정보)를 소거한다.
따라서 변환 처리부(114A)가, 예를 들어 상기 수학식 2에 도시한 연산을 함으로써 입력 원(raw) 데이터에서의 상기 불필요한 정보를 줄일 수 있다.
아울러 변환 처리부(114A)에서의 처리는, 상기 수학식 2에 도시한 연산을 하는 처리에 한정되지 않는다. 변환 처리부(114A)는, 화소값 Rpxl(기준 화소가 아닌 화소의 화소값)의 휘도 변화를 줄일 수 있는 임의의 연산을 할 수 있다.
다시 도 4를 참조하여 본 발명의 실시예의 변환부(104)에 대하여 설명하기로 한다. 변환 처리부(114B)는, 전달되는 플래그 Fflag에 기초하여 선택적으로 화소값 Bpxl에 대해 화상 공간 주파수의 분포 변환을 한다. 그리고 변환 처리부(114B)는, 선택적으로 화상 공간 주파수의 분포 변환이 이루어진 화소값 Bout를 출력한다.
보다 구체적으로는 변환 처리부(114B)는, 변환 처리부(114A)와 마찬가지로 플래그 Fflag가 백색-포화 영역에 해당하는 영역이라는 것을 나타내는 경우에 화상 공간 주파수의 분포 변환을 하고, 플래그 Fflag가 백색-포화 영역에 해당하는 영역이라는 것을 나타내지 않는 경우에는 화상 공간 주파수의 분포 변환을 하지 않는다.
여기에서 "백색-포화 영역"에서 "백색-포화 영역이 아닌 영역"으로 상태가 바뀌면 가장 휘도 변화가 적어진다. 따라서 변환 처리부(114B)는, 예를 들어 하기 수학식 3에 도시한 연산을 함으로써 화소값 Bpxl(기준 화소가 아닌 화소의 화소값)의 휘도 변화를 제로로 한다.
Figure pat00003
상기 수학식 3에서, Bout은 B 화소에 상응하는 출력 화소값을, Frange는 상기 문턱값을, 그리고 Bgain은 B 화소에 상응하는 화이트 밸런스 계수를 각각 가리킨다.
아울러 변환 처리부(114B)에서의 처리는, 상기 수학식 3에 도시한 연산을 하는 처리로 한정되지 않는다. 변환 처리부(114B)는, 화소값 Bpxl(기준 화소가 아닌 화소의 화소값)의 휘도 변화를 줄일 수 있는 임의의 연산을 할 수 있다.
변환 처리부(114C)는, 전달되는 플래그 Fflag에 의하지 않고 화소값 Gpxl(기준 화소의 화소값)를 화소값 Gout로서 출력한다.
변환부(104)는, 예를 들어 변환 처리부(114A),(114B),(114C)를 구비함으로써 전달되는 플래그 Fflag에 기초하여 백색-포화 영역에 해당하는 영역에 상응하는 원(raw) 데이터에 대해 화상 공간 주파수의 분포 변환을 선택적으로 수행한다.
여기에서 도 5를 참조하여 도시한 바와 같이 변환부(104)는, 예를 들어 기준 화소가 아닌 화소에서 백색-포화 영역에 해당하는 영역으로 판정된 화소값을 동일한 값으로 변환한다(휘도 변화를 제로로 할 경우). 즉, 변환부(104)는, 예를 들어 기준 화소가 아닌 화소에서 백색-포화 영역에 해당하는 영역에서의 불필요한 휘도 변화를 소거한다(휘도 변화를 제로로 할 경우). 아울러 변환부(104)에서의 처리는 상기에 한정되지 않으며 변환부(104)는, 예를 들어 기준 화소가 아닌 화소에서 백색-포화 영역에 해당하는 영역에서의 불필요한 휘도 변화를 줄여도 좋다.
따라서 변환부(104)가, 본 발명의 실시 형태에 관한 변환 처리를 함으로써 입력 원(raw) 데이터에서의 상기 불필요한 정보를 줄일 수 있다. 따라서 변환부(104)가 본 발명의 실시 형태에 관한 변환 처리를 함으로써 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있게 된다.
화상 처리 장치(100)는, 예를 들어 도 2에 도시한 바와 같이 판정부(102)와 변환부(104)를 구비함으로써 백색-포화 영역에 해당하는 영역을 판정하고, 판정된 백색-포화 영역에 해당하는 영역에 상응하는 원(raw) 데이터에 대해 선택적으로 화상 공간 주파수의 분포 변환을 수행한다.
여기에서 화상 처리 장치(100)에서의 처리 동작의 일 예를 설명하기로 한다.
도 6은 도 2의 화상 처리 장치(100)에서의 처리 동작의 일 예를 보여준다. 여기에서 예를 들어, 도 6에 도시한 단계 S102, S104의 처리가 판정부(102)에서의 처리에 해당하고, 또한 도 6에 도시한 단계 S106, S108의 처리가 변환부(104)에서의 처리에 해당한다. 또한 도 6은, G 화소가 기준 화소이며, R 화소 및 B 화소가 기준 화소가 아닌 화소인 경우에서의 처리의 일례를 도시한다.
화상 처리 장치(100)는, 입력 원(raw) 데이터가 입력되었는지 여부를 판정한다(S100). 단계 S100에서 입력 원(raw) 데이터가 입력되었다고 판정되지 않는 경우에는, 화상 처리 장치(100)는 처리를 진행시키지 않는다.
또한 단계 S100에서 입력 원(raw) 데이터가 입력되었다고 판정된 경우에는, 화상 처리 장치(100)는 화소값 Rpxl 및 화소값 Bpxl 각각에 대해 상응하는 화이트 밸런스 계수(Rgain, Bgain)를 곱한다(S102). 여기에서 단계 S102의 처리는, 백색-포화 영역에 해당하는 영역을 판정하기 위해 이용하는 화소값을 생성하는 처리에 해당한다.
화상 처리 장치(100)는, 화소값 Gpxl와, 단계 S102에서 생성한 화소값와, 소정의 문턱값 Frange를 이용하여 백색-포화 영역에 해당하는 영역을 판정한다(S104).
여기에서 화상 처리 장치(100)는, 단계 S104에서 예를 들어 상기 수학식 1의 조건식을 충족할 경우에 백색-포화 영역에 해당하는 영역으로 판정한다.
아울러 단계 S104에서의 처리는, 상기 조건식을 이용하는 처리로 한정되지는 않는다. 예를 들어 화상 처리 장치(100)는, 상술한 바와 같이 플래그 Rpxl_F, 플래그 Bpxl_F, 플래그 Gpxl_F를 이용하여 백색-포화 영역에 해당하는 영역인지 여부를 판정해도 좋다.
단계 S104에서 백색-포화 영역에 해당하는 영역으로 판정된 경우에는, 화상 처리 장치(100)는 화상 공간 주파수의 분포 변환을 수행한다(S106). 화상 처리 장치(100)는, 예를 들어 상기 수학식 2 및 상기 수학식 3에 도시한 연산을 함으로써 화상 공간 주파수의 분포 변환을 수행한다.
또 단계 S104에서 백색-포화 영역에 해당하는 영역으로 판정되지 않는 경우에는, 화상 처리 장치(100)는 화상 공간 주파수의 분포 변환을 수행하지 않는다(S108).
단계 S106의 처리 또는 단계 S108의 처리가 이루어지면, 화상 처리 장치(100)는 출력 원(raw) 데이터(화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터)를 출력한다(S110).
여기에서 화상 처리 장치(100)는, 예를 들어 원(raw) 데이터를 기억할 수 있는 기록매체에 대해 출력 원(raw) 데이터를 출력해도 좋고, 원(raw) 데이터에 대해 화상 압축 처리를 할 수 있는 압축 처리부(후술 참조)나 외부 장치에 대해 출력 원(raw) 데이터를 출력해도 좋다.
화상 처리 장치(100)는, 예를 들어 판정부(102)와 변환부(104)를 구비하고 도 6에 도시한 처리를 함으로써 백색-포화 영역에 해당하는 영역을 판정하고, 판정된 백색-포화 영역에 해당하는 영역에 상응하는 원(raw) 데이터에 대해 선택적으로 화상 공간 주파수의 분포 변환을 수행한다.
여기에서 상술한 바와 같이 화상 처리 장치(100)는, 예를 들어 기준 화소가 아닌 화소에서 백색-포화 영역에 해당하는 영역에서의 불필요한 휘도 변화(정보)를 소거 또는 줄인다.
따라서 화상 처리 장치(100)는, 입력 원(raw) 데이터에서의 상기 불필요한 정보를 줄일 수 있기 때문에 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다.
도 7은, 도 6의 처리 동작에 따라 화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터에 대하여, 화상 압축 처리가 수행된 결과의 예를 설명하기 위한 도면이다.
여기에서 도 7에 도시한 A는, 출력 원(raw) 데이터(화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터)에 대해 화상 압축 처리가 이루어진 결과 얻어지는, 압축 후 화상의 데이터 크기(size)를 가리킨다. 또한 도 7에 도시한 B는, 도 7의 A에 대한 비교예를 도시하고 있다. 구체적으로는 도 7에 도시한 B는, 화상 공간 주파수의 분포 변환이 이루어지지 않은 원(raw) 데이터(즉, 입력 원(raw) 데이터에 해당하는 원(raw) 데이터)에 대해 화상 압축 처리가 이루어진 결과 얻어지는, 기존의 기술에 관한 압축 후 화상의 데이터 크기(size)의 일 예를 가리킨다.
또한 도 7은, 백색-포화 영역에 해당하는 영역에서의 R 화소의 화소값, 또는 백색-포화 영역에 해당하는 영역에서의 B 화소의 화소값을 도시하고 있다.
또한 도 7은, 인접 화소와의 차이값을 산출하여 허프만(Huffman) 코딩에 의해 부호화함으로써 출력 원(raw) 데이터가 압축되는 경우, 압축 후 화상의 데이터 크기의 일 예를 보여준다.
종래 기술에서는, 백색-포화 영역인지 여부와 무관하게 차이값을 산출하여 부호화가 이루어진다. 따라서 도 7의 B에 도시한 바와 같이 종래 기술을 이용할 경우의 부호화 후의 데이터 크기는 46 비트(bits)이다.
이에 반하여 본 발명의 실시예에 의한 출력 원(raw) 데이터는, 변환부(104)에서 화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터이다. 여기에서 변환부(104)는, 상술한 바와 같이 판정된 백색-포화 영역에 해당하는 영역에서 기준 화소가 아닌 화소의 휘도 변화를 줄이므로, 변환부(104)에서 전달되는 출력 원(raw) 데이터에서는, 백색-포화 영역에 해당하는 영역에서의 차이값이 더욱 작아진다. 예를 들어 변환부(104)가, 판정된 백색-포화 영역에 해당하는 영역에서 기준 화소가 아닌 화소의 휘도 변화를 제로로 한 경우에는, 예를 들어 도 7의 A에 도시한 바와 같이 백색-포화 영역에 해당하는 영역에서의 차이값은 제로가 된다.
따라서 도 7의 A에 도시한 바와 같이 출력 원(raw) 데이터(화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터)에 대해 화상 압축 처리가 이루어진 결과 얻어지는 부호화 후의 데이터 크기는, 예를 들어 8비트(bits)가 된다.
도 7의 A에 도시한 부호화 후의 데이터 크기와, 도 7의 B에 도시한 부호화 후의 데이터 크기를 비교하면 알 수 있듯이, 출력 원(raw) 데이터(화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터)에 대해 화상 압축 처리를 함으로써 원(raw) 데이터의 압축 효율을 더욱 향상시킬 수 있다. 즉, 출력 원(raw) 데이터(화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터)에 대해 화상 압축 처리를 함으로써 압축 후의 화상 데이터의 크기를 더 작게 할 수 있다.
따라서, 예를 들어 도 7에 도시한 바와 같이 화상 처리 장치(100)가, 본 발명의 실시예의 화상 처리 방법에 의한 처리(판정 처리 및 변환 처리)를 함으로써 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다는 것을 알 수 있다.
또한 화상 처리 장치(100)가, 본 발명의 실시예의 화상 처리 방법에 관한 처리(판정 처리 및 변환 처리)를 함으로써 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있게 되므로, 예를 들어 기록매체와 기록 가능한 화상수(원(raw) 데이터가 나타내는 화상의 수)를 늘릴 수 있게 된다. 따라서 화상 처리 장치(100)가 본 발명의 실시 형태에 관한 화상 처리 방법에 관한 처리(판정 처리 및 변환 처리)를 함으로써 사용자의 편리성 향상을 도모할 수 있다.
또한 화상 처리 장치(100)가, 본 발명의 실시 형태에 관한 화상 처리 방법에 관한 처리(판정 처리 및 변환 처리)를 함으로써 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있게 되므로, 예를 들어 원(raw) 데이터의 데이터 전송에 의해 발생하는 소비 전력을 억제할 수 있고, 또 원(raw) 데이터의 데이터 전송에 필요한 대역을 줄일 수 있다.
아울러 본 발명의 실시 형태에 관한 화상 처리 장치의 구성은, 도 2에 도시한 구성에 한정되지 않는다.
예를 들어, 본 발명의 실시 형태에 관한 화상 처리 장치는, 변환부(104)에서 화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터(출력 원(raw) 데이터)에 대해 화상 압축 처리를 하는 압축 처리부(미도시)를 더 구비해도 좋다.
압축 처리부(미도시)는, 예를 들어 인접 화소와의 차이값을 산출하여 허프만(Huffman) 코딩에 의해 부호화함으로써 출력 원(raw) 데이터가 나타내는 화상을 압축한다. 여기에서 상기 부호화란, 출현 확률이 높은 정보를 짧은 부호 길이로 하여 출현 확률이 낮은 정보에 대해 긴 부호 길이로 변환하는 처리이다. 자연 화상의 경우에는 인접 화소의 차이값은 작아진다는 특징이 있으므로, 차이값 "0"을 최소의 부호 길이 2비트(bits)로 변환한다. 또한 차이값이 커지면(출현 확률이 작아지면) 변환되는 부호 길이는 길어진다.
아울러 압축 처리부(미도시)에서의 화상 압축 처리는, 허프만 코딩에 의해 부호화하는 처리에 한정되지 않는다. 압축 처리부(미도시)는, 예를 들어 화상을 압축할 수 있는 임의의 부호화 방식을 이용하여 출력 원(raw) 데이터가 나타내는 화상을 압축할 수 있다.
이상, 본 발명의 실시예로서의 화상 처리 장치에 대하여 설명하였으나, 본 발명의 실시예는 상기 형태로 한정되지 않는다. 본 발명의 실시 형태는, 예를 들어 디지털카메라 등의 촬영 장치, PC나 서버 등의 컴퓨터, 텔레비전 수상기 등의 표시 장치, 휴대전화나 스마트폰 등의 통신 장치, 영상/음악 재생장치(또는 영상/음악 기록 재생장치), 게임기 등 원(raw) 데이터를 처리할 수 있는 다양한 기기에 적용할 수 있다. 또한 본 발명의 실시 형태는, 예를 들어 상기와 같은 기기에 편입시킬 수 있는 화상 처리 IC(Integrated Circuit)에 적용할 수도 있다.
(본 발명의 실시 형태에 관한 프로그램)
컴퓨터를 본 발명의 실시 형태에 관한 화상 처리 장치로서 기능시키기 위한 프로그램(예를 들어, 컴퓨터를 판정부, 변환부로서 기능시킬 수 있는 프로그램)이 컴퓨터에서 실행됨으로써 원(raw) 데이터를 보다 효율적으로 압축시킬 수 있다.
또 컴퓨터를 또한 압축 처리부(미도시)로서 기능시킬 수 있는 프로그램이 컴퓨터에서 실행됨으로써 원(raw) 데이터를 보다 효율적으로 압축하여 압축 후의 화상 데이터 크기를 더욱 줄일 수 있다.
이상, 첨부 도면을 참조하여 본 발명의 바람직한 실시 형태에 대해 설명하였으나 본 발명은 상기 예로 한정되지 않는다는 것은 당연하다. 당업자라면, 특허청구범위에 기재된 범위 내에서 각종 변경 예 또는 수정 예를 생각해낼 수 있는 것은 분명하며, 그들에 대해서도 당연히 본 발명의 기술적 범위에 속하는 것으로 이해되어야 할 것이다.
예를 들어, 상기에서는 컴퓨터를 본 발명의 실시 형태에 관한 화상 처리 장치로서 기능시키기 위한 프로그램(컴퓨터 프로그램)이 제공되는 것을 나타냈으나, 본 발명의 실시 형태는 또한 상기 프로그램을 기억시킨 기록매체도 함께 제공할 수 있다.
화상의 원(raw) 데이터가 아닌 데이터에 대해서도 이용될 가능성이 있다.
100 :　화상 처리 장치, 102 : 판정부,
104 : 변환부, 110A,110B,110C : 화소 판정부,
112 : 백색-포화 영역 판정부, 114A,114B,114C : 변환 처리부.

Claims (6)

  1. 촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 원(raw) 데이터에 기초하여 상기 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정하는 판정부; 및
    판정된 상기 백색-포화 영역에 해당하는 영역에 상응하는 상기 원(raw) 데이터에 대하여, 화상 공간 주파수의 분포 변환을 선택적으로 수행하는 변환부;를 포함하고,
    상기 변환부는, 상기 백색-포화 영역에 해당하는 영역에서, 설정되어 있는 기준 화소 외의 화소의 휘도 변화를 줄이는, 화상 처리 장치.
  2. 제1항에 있어서, 상기 변환부는,
    상기 백색-포화 영역에 해당하는 영역에서 상기 기준 화소가 아닌 화소의 휘도 변화를 제로로 하는, 화상 처리 장치.
  3. 제1항 또는 제2항에 있어서, 상기 판정부는,
    상기 기준 화소의 화소값와 소정의 문턱값의 비교 결과, 및 상기 기준 화소가 아닌 화소 각각의 화소값와 상응하는 화이트 밸런스 계수를 곱한 값과, 상기 소정의 문턱값과의 비교 결과에 따라, 상기 백색-포화 영역에 해당하는 영역을 판정하는, 화상 처리 장치.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 화상 공간 주파수의 분포 변환이 선택적으로 이루어진 원(raw) 데이터에 대해 화상 압축 처리를 하는 압축 처리부를 더 구비한, 화상 처리 장치.
  5. 촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 원(raw) 데이터에 기초하여 상기 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정함; 및
    판정된 상기 백색-포화 영역에 해당하는 영역에 상응하는 상기 원(raw) 데이터에 대해 화상 공간 주파수의 분포 변환을 선택적으로 수행함;을 포함하고,
    상기 화상 공간 주파수의 분포 변환을 수행함에 있어서,
    상기 백색-포화 영역에 해당하는 영역에서, 설정되어 있는 기준 화소가 아닌 화소의 휘도 변화를 줄이는, 화상 처리 방법.
  6. 촬영에 의해 얻어진 미가공 화상인 원(raw) 화상을 나타내는 원(raw) 데이터에 기초하여 상기 원(raw) 화상에 포함되는 백색-포화 영역에 해당하는 영역을 판정하는 판정부; 및
    판정된 상기 백색-포화 영역에 해당하는 영역에 상응하는 상기 원(raw) 데이터에 대하여 화상 공간 주파수의 분포 변환을 선택적으로 수행하는 변환부;에 의하여 컴퓨터를 동작시키고,
    상기 변환부는, 상기 백색-포화 영역에 해당하는 영역에서, 설정되어 있는 기준 화소가 아닌 화소의 휘도 변화를 줄이는, 프로그램.
KR1020130069951A 2012-12-04 2013-06-18 화상 처리 장치, 화상 처리 방법 및 프로그램 KR101871946B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US14/053,861 US9030572B2 (en) 2012-12-04 2013-10-15 Apparatus, method, and program for processing image
CN201310585546.3A CN103856768B (zh) 2012-12-04 2013-11-19 用于处理图像的设备、方法和程序

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2012-265772 2012-12-04
JP2012265772A JP6180728B2 (ja) 2012-12-04 2012-12-04 画像処理装置、画像処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
KR20140071867A true KR20140071867A (ko) 2014-06-12
KR101871946B1 KR101871946B1 (ko) 2018-06-27

Family

ID=51030991

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130069951A KR101871946B1 (ko) 2012-12-04 2013-06-18 화상 처리 장치, 화상 처리 방법 및 프로그램

Country Status (2)

Country Link
JP (1) JP6180728B2 (ko)
KR (1) KR101871946B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7037346B2 (ja) * 2017-03-10 2022-03-16 キヤノン株式会社 画像処理装置及び画像処理方法、プログラム、記憶媒体
KR20220140369A (ko) 2021-04-09 2022-10-18 에스케이하이닉스 주식회사 이미지 센싱 장치 및 그 동작 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006109416A (ja) * 2004-09-13 2006-04-20 Canon Inc 色ノイズ低減回路及びそれを用いた撮像装置
JP2008177872A (ja) * 2007-01-18 2008-07-31 Fujifilm Corp 画像処理方法、装置及びプログラム並びに撮像装置
JP2011155696A (ja) 2011-04-27 2011-08-11 Mega Chips Corp 一眼レフデジタルカメラにおける連続撮像方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000354250A (ja) * 1999-06-11 2000-12-19 Ricoh Co Ltd 撮像装置
JP2004159170A (ja) * 2002-11-07 2004-06-03 Fuji Photo Film Co Ltd デジタルカメラ及び撮像画像データ記録方法並びに画像信号処理方法
JP2004328564A (ja) * 2003-04-28 2004-11-18 Olympus Corp カラー補正装置、カラー補正方法及びカラー補正プログラム、並びにカラー補正装置を用いたデジタルカメラ
JP3839429B2 (ja) * 2003-09-29 2006-11-01 三菱電機株式会社 撮像処理装置
JP5457687B2 (ja) * 2009-02-04 2014-04-02 株式会社日立国際電気 カラーカメラおよびノイズ除去方法
US8861851B2 (en) * 2011-05-13 2014-10-14 Dolby Laboratories Licensing Corporation Color highlight reconstruction

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006109416A (ja) * 2004-09-13 2006-04-20 Canon Inc 色ノイズ低減回路及びそれを用いた撮像装置
JP2008177872A (ja) * 2007-01-18 2008-07-31 Fujifilm Corp 画像処理方法、装置及びプログラム並びに撮像装置
JP2011155696A (ja) 2011-04-27 2011-08-11 Mega Chips Corp 一眼レフデジタルカメラにおける連続撮像方法

Also Published As

Publication number Publication date
JP2014110623A (ja) 2014-06-12
JP6180728B2 (ja) 2017-08-16
KR101871946B1 (ko) 2018-06-27

Similar Documents

Publication Publication Date Title
US8363123B2 (en) Image pickup apparatus, color noise reduction method, and color noise reduction program
JP5529685B2 (ja) 画像符号化方法、画像復号化方法、画像符号化装置及び画像復号化装置
US20110026591A1 (en) System and method of compressing video content
US10516860B2 (en) Image processing method, storage medium, and terminal
US9609328B2 (en) Electronic device and method
CN110463206B (zh) 图像滤波方法、装置及计算机可读介质
US10032252B2 (en) Image processing apparatus, image capturing apparatus, image processing method, and non-transitory computer readable storage medium
JP4359773B2 (ja) 画像圧縮処理装置、画像圧縮処理方法および画像圧縮処理プログラム
US11006119B1 (en) Compression encoding of images
KR101871946B1 (ko) 화상 처리 장치, 화상 처리 방법 및 프로그램
JP4561649B2 (ja) 画像圧縮装置、画像圧縮プログラム及び画像圧縮方法、ｈｄｒ画像生成装置、ｈｄｒ画像生成プログラム及びｈｄｒ画像生成方法、並びに画像処理システム、画像処理プログラム及び画像処理方法
US8934042B2 (en) Candidate image presenting method using thumbnail image and image signal processing device and imaging device performing the same
US9674554B2 (en) Image processing system with coding mode and method of operation thereof
US10497093B2 (en) Image processing apparatus for minimizing deterioration of image quality of a raw image
US10757426B2 (en) Method and apparatus for processing image data
JP2018019239A (ja) 撮像装置及びその制御方法及びプログラム
US10356410B2 (en) Image processing system with joint encoding and method of operation thereof
US8942472B2 (en) Color judging apparatus, color judging method, image processing circuit and program
WO2022151054A1 (zh) 图像处理方法及装置、存储介质
US9030572B2 (en) Apparatus, method, and program for processing image
US20200294211A1 (en) Image display apparatus, image supply apparatus, and control method thereof
JP2013093745A (ja) 画像圧縮装置、撮像装置、および画像圧縮方法
JP2004040300A (ja) 画像処理装置
KR100686358B1 (ko) 영상 개선 시스템 및 영상 개선 방법
KR102015585B1 (ko) 영상 처리 장치 및 영상 처리 방법

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant