KR20090125124A - 휴대용 기기에서의 화상 색 보정을 위한 장치 및 방법 - Google Patents

휴대용 기기에서의 화상 색 보정을 위한 장치 및 방법 Download PDF

Info

Publication number
KR20090125124A
KR20090125124A KR1020097019790A KR20097019790A KR20090125124A KR 20090125124 A KR20090125124 A KR 20090125124A KR 1020097019790 A KR1020097019790 A KR 1020097019790A KR 20097019790 A KR20097019790 A KR 20097019790A KR 20090125124 A KR20090125124 A KR 20090125124A
Authority
KR
South Korea
Prior art keywords
camera
image
white balance
user
capture
Prior art date
Application number
KR1020097019790A
Other languages
English (en)
Inventor
조지 씨. 존
Original Assignee
모토로라 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 모토로라 인코포레이티드 filed Critical 모토로라 인코포레이티드
Publication of KR20090125124A publication Critical patent/KR20090125124A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Processing Of Color Television Signals (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

휴대용 기기 내의 화상 색 보정을 위한 방법 및 장치에 관한 것이다. 기기(100)는 하우징(110), 하우징에 연결된 제1 카메라(120), 제1 화상(!25)을 캡처하도록 구성된 제1 카메라, 및 하우징에 연결된 제2 카메라 - 제2 카메라는 제2 화상(135)을 캡처하도록 구성됨 - 를 포함할 수 있다. 기기는 또한 제1 카메라 및 제2 카메라에 연결된 컨트롤러(140)를 포함하며, 컨트롤러는 기기의 동작을 제어하도록 구성된다. 기기는 컨트롤러에 연결된 화상 보정 모듈(150)을 더 포함하며, 화상 보정 모듈은 제2 카메라에 의해서 캡처된 제2 화상에 기초하여 제1 화상의 화이트 밸런스를 설정하도록 구성된다.
Figure P1020097019790
하우징, 컨트롤러, 카메라, 화상 보정 모듈

Description

휴대용 기기에서의 화상 색 보정을 위한 장치 및 방법{APPARATUS AND METHOD FOR IMAGE COLOR CORRECTION IN A PORTABLE DEVICE}
본 명세서는 휴대용 기기 내에서의 화상 색 보정을 위한 방법 및 장치에 관련된다. 좀더 구체적으로, 본 명세서는, 2개의 카메라를 갖는 휴대용 기기 내의 카메라에 의해서 촬영된 화상의 자동 색 보정에 관한 것이다.
현재, 촬영자가 장면을 촬영할 때, 장면은 광원(illuminant)에 의해서 조명된다. 상이한 광원들은, 적색 또는 청색과 같이, 색 스펙트럼의 상이한 단부로 편향될 수 있다. 상이한 광원들을 갖는 장면을 촬영하는 경우, AWB(auto white balance)는 디지털 및 아날로그 촬영에 있어서 상당히 어려운 문제이다. 캡처된 화상에 대해 광원 추정(illuminant estimation)을 행함으로써 장면 광원(scene illuminant)에 의해 야기된 색 편향(color bias)을 보정하는 것을 목적으로 한다. 광범위한 연구에도 불구하고, 현재의 해결책은 많이 부족하다. 일부 현재의 시스템들은 수학적 모델을 이용한 장면 분석에 기초하여 장면 광원을 추정하는 방법을 사용한다. 이들 시스템들의 성공은 모델이 주어진 화상에 어떻게 잘 매칭하는지에 의존할 수 있다. AWB를 위한 이전의 기술들은, 백색과 같은 기준 색을, 카메라 앞에 수동으로 배치하는 것에 관련될 수 있다. 이것은, RGB(red green blue) 게인이 오직 알려진 기준 색에 부합하도록 조정될 필요가 있기 때문에 화이트 밸런스 문제를 간단히 할 수 있다.
불행하게도, 대부분의 복잡한 AWB 알고리즘은, 휴대폰 카메라와 같은 휴대용 모바일 이미징 시스템의 제한된 컴퓨팅 리소스 내에서 실시간으로 실행될 수 없다. 작은 화소 크기로 인한 열악한 광학 품질, 광 부족, 및 높은 노이즈 레벨은 또한 광원 추정을 복잡하게 할 수 있다. 더욱이, 화상 콘텐츠가 미리 알려지지 않았고 기준 색의 사용은 상당히 성가신 것일 수 있기 때문에, 이전의 해결책들은 그다지 효과적이지 않다.
휴대용 기기에서의 화상 색 보정을 위한 방법 및 장치가 개시된다. 기기는 하우징, 하우징에 연결된 제1 카메라 - 제1 카메라는 제1 화상을 캡처하도록 구성됨 - , 및 하우징에 연결된 제2 카메라 - 제2 카메라는 제2 화상을 캡처하도록 구성됨 - 를 포함한다. 기기는 또한 제1 카메라 및 제2 카메라에 연결된 컨트롤러를 포함하며, 컨트롤러는 기기의 동작을 제어하도록 구성된다. 기기는 또한 컨트롤러에 연결된 화상 보정 모듈을 포함하며, 화상 보정 모듈은 제2 카메라에 의해서 캡처된 제2 화상에 기초하여 제1 카메라의 화상의 화이트 밸런스를 설정하도록 구성된다.
도 1은 일 실시예에 따른 기기의 예시적인 도면.
도 2는 일 실시예에 따른 무선 통신 기기의 예시적인 블록도.
도 3은 일 실시예에 따른 무선 통신 기기의 동작을 도시하는 예시적인 흐름도.
도 4는 다른 실시예에 따른 무선 통신 기기의 동작을 도시하는 예시적인 흐름도.
본 명세서의 실시예들은 이하의 도면을 참조하여 설명될 것이며, 유사한 참조부호들은 유사한 구성요소들을 지칭한다.
도 1은 일 실시예에 따른 기기(100)의 예시적인 도면이다. 기기(100)는 하우징(110) 및 하우징(110)에 연결된 제1 카메라(120)를 포함할 수 있으며, 제1 카메라(120)는 제1 화상(125)을 캡처하도록 구성된다. 기기(100)는 또한 하우징(110)에 연결된 제2 카메라(130)를 포함할 수 있으며, 제2 카메라(130)는 제2 화상(135)을 캡처하도록 구성된다. 기기(100)는 추가적으로 제1 카메라(120) 및 제2 카메라(130)에 연결된 컨트롤러(140)를 포함할 수 있으며, 컨트롤러(140)는 기기(100)의 동작을 제어하도록 구성된다. 기기(100)는 또한 컨트롤러(140)에 연결된 화상 보정 모듈(150)을 포함할 수 있으며, 화상 보정 모듈(150)은 제2 카메라(130)에 의해 캡처된 제2 화상(135)에 기초하여 제1 카메라(120)의 화이트 밸런스를 설정하도록 구성된다.
예를 들면, 기기(100)는 2개의 카메라를 포함하는 모바일 전화 또는 다른 전자 기기일 수 있다. 하나의 카메라는 셀프 촬영(self-portraits), 화상 회의 등을 위해 사용자를 향할 수 있다. 다른 카메라는 사진, 영화 등을 위해서 사용자로 부터 멀리 떨어진 곳을 향할 수 있다. 따라서, 기기(100)는 화상 캡처를 위해서 제1 카메라(130)와 같은 주요(primary) 카메라를 사용할 수 있다. 화상 캡처를 위해서 제1 카메라(120)를 사용하는 경우, 제2 카메라(130)는 기기(100)의 사용자를 향할 수 있다. 기기(100)는 제2 카메라로부터의 화상(135) 상에서 대상 인식을 사용하여 알려진 색의 대상을 식별하고 그 정보를 이용하여 제1 카메라(120)에 대한 화이트 밸런스를 설정한다. 관련된 실시예에 따르면, 사용자를 향하는 제2 카메라(130)는 대상 식별/인식 알고리즘을 사용하여 화상을 캡처하는 사용자의 얼굴을 식별하여 피부색 정보를 추출할 수 있다. 예를 들면, 피부색은 용이하게 추출되어 사용될 수 있는 제한된 영역(gamut) 내에 포함된다. 부가적인 관련 실시예에서, 사용자의 피부 톤은 기기(100) 내의 이미징 시스템 내에 미리 저장될 수 있다. 미리 저장된 피부 톤 정보, 또는 제한된 피부색 영역 정보는 이후 관찰된 피부색으로부터 광원을 추정하는데 사용될 수 있다. 광원은 캡처되는 화상(125)의 장면 내의 주요 광원 색(primary illuminant color)일 수 있다. 예를 들면, 광원이 붉은 빛을 띠는 경우, 사진은 붉은 색 편향(red bias)을 가질 것이며, 기기(100)는 그에 따라서 제1 카메라(120)에 의해 캡처된 화상을 보정할 수 있다.
따라서, 제2 카메라(130)로부터의 화상(135)은 대상 인식 알고리즘을 통해서 처리되어서 알려진 색의 대상을 식별할 수 있고, 식별되는 경우, 화상 내에서 대상의 관찰된 색은 대상 색에 관해서 저장된 정보와 비교되어 장면 광원(scene illuminant)을 추정하고 제1 카메라(120)에 대해서 자동 화이트 밸런스를 실행할 수 있다. 따라서 기기(100)는, 그 색이 알려진, 장면 내에 나타난 대상들을 인식 함으로써, 제2 카메라(130)를 사용하여 장면 광원을 계산한다. 흔히 제2 카메라(130)를 기기의 사용자를 향하게 하는 모바일 이미징 기기에는, 사용자의 얼굴이 제2 카메라(130)로부터 캡처된 화상 내에 존재할 가능성이 상당히 높다. 사용자는 정확한 광원 추정을 위한 그/그녀 자신의 피부 톤을 사전에 프로그래밍하거나(pre-program) 인간의 피부색 영역에 관한 정보를 사용하여 광원을 추정하여 화이트 밸런스를 조정할 수 있다.
예를 들면, AWB(Automatic White Balance)와 같이 화이트 밸런스를 조정하는 것은, 장면 내에서 우세한 광원을 추정하고 그에 대해서 보정하여, 백색 대상들이 백색으로 나타나게 하는 프로세스일 수 있다. 인간의 두뇌는 주변 광원에 기초하여 색을 렌더링하므로(render), 우리는 여전히 상이한 빛 조건에서 백색 대상을 백색에 매우 근접한 것으로 본다. 카메라는 이렇게 하지 않으므로, 우리는 광원으로 인한 색 편향에 대해서 화상들을 보정할 수 있다.
다른 예로서, 디지털 카메라에는, 적, 녹, 청(R, G, B) 화소들이 있고, 색은 R, G 및 B의 비율에 기초하여 계산된다. 화이트 밸런싱을 하는 한가지 방법은, 상이한 색 화소들 상에서의 게인을 변화시키는 것이다. 예를 들면, 붉은 빛을 띠는 백열광 하에서, 적색 화소는 청색 화소보다 낮은 게인으로 설정될 것이므로, 장면에 존재하는 임의의 청색이 확대되어서 적색 편향을 보상한다. 형광(fluorescent light)에 대해서, 녹색 편향을 상쇄하기 위해서, 적색 및 청색은 양쪽 모두 보다 높은 게인으로 설정된다. 이것은 화소 전압을 변화시킴으로써 행해질 수 있으며, 화상 캡처 전에 카메라에 행해질 수 있는 아날로그 화이트 밸런스라고 지칭된다.
AWB는 또한, 카메라 센서로부터 R1G1B1 값들을 취하여 R1G1B1에 비례하여 R2G2B2를 재연산하여, 색 편향에 대한 보정을 하도록 디지털로 행해질 수 있으며, 여기서,
Figure 112009058119096-PCT00001
Figure 112009058119096-PCT00002
Figure 112009058119096-PCT00003
이다.
행렬,
Figure 112009058119096-PCT00004
은 색 보정 행렬로 알려질 수 있다. 이 단계는 또한 색을 광원에 대해서 보정하는 것을 넘어서 보다 만족스럽고 문화적 선호도에 적합하도록 하는데 이용될 수 있다.
AWB는 아날로그 및 디지털 방법 양쪽 모두를 포함할 수 있다. 아날로그 방법은 캡처 전에 적용될 수 있고, 디지털 방법은 캡처하는 동안 또는 캡처 후에 적용될 수 있다. 일 예로서, 일부 카메라들은 양쪽 방법을 모두 사용할 수 있는 반면, 일부 다른 카메라들은 둘 중 한가지 만을 사용할 수 있다.
따라서, 다른 이점들 중에서, 본 명세서의 교시들은 제한된 광 모바일 이미 징 시스템 내에서 사용될 수 있으며, 여기서 계산 능력은 자동 화이트 밸런스를 위한 복잡한 알고리즘의 채용을 막을 수 있다. 또한, 모바일 이미징 시스템이 상이한 방향을 향하는 2개의 카메라들을 갖는 경우, 본 명세서의 교시는 보다 나은 자동 화이트 밸런스를 얻도록 도울 수 있다. 따라서, 2개의 카메라를 갖는 모바일 전화가 인기가 많아짐에 따라서, 본원의 교시들이 유용할 수 있다. 이것은 단일 기기가 동일한 사람에 의해서 대부분의 시간 동안 사용되는 경우에 유용할 수 있어서, 특정한 피부 톤이 미리 프로그래밍되어서 높은 정확도를 달성할 수 있다. 대안적으로, 알려진 영역의 피부 톤이 사용될 수 있다. 본원의 교시는 또한, 낮은 광도와 연산 리소스의 부족으로 인해서 모바일 기기 이미징 시스템들이 종래의 디지털 스틸 카메라들과 다르기 때문에 유용할 수 있다.
도 2는, 일 실시예에 따른, 기기(100)와 같은 무선 통신 기기(200)의 예시적인 블록도이다. 무선 통신 기기(200)는 하우징(210), 하우징(210)에 연결된 컨트롤러(220), 하우징(210)에 연결된 오디오 입력 및 출력 회로(230), 하우징(210)에 연결된 디스플레이(240), 하우징(210)에 연결된 트랜스시버(250), 하우징(210)에 연결된 사용자 인터페이스(260), 하우징(210)에 연결된 메모리(270), 및 하우징(210)과 트랜스시버(250)에 연결된 안테나(280)를 포함할 수 있다. 무선 통신 기기(200)는 또한 제1 카메라(282), 제2 카메라(284) 및 광학 뷰파인더(286)를 포함할 수 있다.
무선 통신 기기(200)는 부가적으로 화상 보정 모듈(290), 대상 인식 모듈(292), 및 색 정보 저장 모듈(294)을 포함할 수 있다. 화상 보정 모듈(290), 대 상 인식 모듈(292), 및 색 정보 저장 모듈(294)은 컨트롤러(220)에 연결될 수 있고, 컨트롤러(220) 내에 위치할 수도 있고, 메모리(270) 내에 위치할 수도 있고, 자동 모듈일 수도 있고, 소프트웨어일 수도 있고, 하드웨어일 수도 있고, 또는 무선 통신 기기(200) 상의 모듈에 유용한 임의의 다른 포맷일 수도 있다.
무선 통신 기기(200)는, 무선 전화, 셀룰러 전화, PDA, 호출기, PC, 또는 무선 네트워크를 포함하는 네트워크 상의 통신 신호들을 송수신할 수 있는 다른 임의의 기기와 같은 선택적인 호출 수신기일 수 있다. 예를 들면, 무선 네트워크는 무선 원격통신 네트워크, 셀룰러 전화 네트워크, TDMA(Time Division Multiple Access) 네트워크, CDMA(Code Division Multiple Access) 네트워크, 위성 통신 네트워크, 및 다른 유사한 통신 시스템과 같은 무선 광역 네트워크일 수 있다.
디스플레이(240)는 LCD(liquid crystal display), LED(light emitting diode) 디스플레이, 플라즈마 디스플레이, 또는 정보 표시를 위한 임의의 다른 수단일 수 있다. 트랜스시버(250)는 송신기 및/또는 수신기를 포함할 수 있다. 오디오 입력 및 출력 회로(230)는 마이크, 스피커, 변환기, 또는 임의의 다른 오디오 입력 및 출력 회로를 포함할 수 있다. 사용자 인터페이스(260)는 키패드, 버튼, 터치 패드, 조이스틱, 부가적인 디스플레이, 또는 사용자와 전자 기기 사이에 인터페이스를 제공하는데 유용한 임의의 다른 기기를 포함할 수 있다. 메모리(270)는 RAM, ROM, 광학 메모리, 가입자 식별 모듈 메모리, 또는 무선 통신 기기에 연결될 수 있는 임의의 다른 메모리를 포함할 수 있다.
동작시, 제1 카메라(282)는 제1 화상을 캡처할 수 있고 제2 카메라(284)는 제2 화상을 캡처할 수 있다. 화상 보정 모듈(290)은, 제2 카메라(284)에 의해 캡처된 제2 화상에 기초하여 제1 카메라(282)의 화이트 밸런스를 설정할 수 있다. 예를 들면, 제2 화상은 제2 카메라(284)에 의해 캡처된 기기 사용자의 화상일 수 있다. 대상 인식 모듈(292)은 제2 카메라(284)에 의해 캡처된 제2 화상에 기초하여 알려진 색의 대상을 식별할 수 있고, 화상 보정 모듈(290)은 알려진 색의 대상에 기초하여 제1 카메라(282)의 화이트 밸런스를 설정할 수 있다. 대상 인식 프로세스는 대상 내의 색에 독립적이고/독립적이거나 다른 모듈들에 의해 실행된 프로세스들과 독립적일 수 있다. 화상 보정 모듈(290)은 이후 알려진 색의 대상 내의 피부색 정보에 기초하여 제1 카메라(282)의 화이트 밸런스를 설정할 수 있다. 예를 들면, 알려진 색의 대상은 기기를 사용하는 사용자의 얼굴일 수 있다. 색 정보 저장 모듈(294)은 피부색 정보를 저장할 수 있고 화상 보정 모듈(290)은 피부색 정보에 기초하여 제1 카메라(282)의 화이트 밸런스를 설정할 수 있다. 예를 들면, 피부색 정보는 반드시 화상이 아니라 수치 데이터로서 저장될 수도 있다. 예를 들면, 평균 적, 녹, 청(RGB) 값 또는 밝기 및 피부색 정보를 나타내는 색(L, a, b) 값은 색 정보 저장 모듈(294)을 이용함으로써 색 정보 저장 모듈(294) 또는 메모리(270)에 저장될 수 있다.
제2 카메라(284)는 실질적으로 제1 카메라(282)의 반대 방향을 향할 수 있다. 뷰파인더는 실질적으로 제2 카메라(284)와 동일한 방향을 향할 수 있다. 예를 들면, 뷰파인더는 광학 뷰파인더(286) 또는 디스플레이(240)일 수 있다. 따라서, 무선 통신 기기(200)가 셀룰러 전화인 경우, 사용자는 디스플레이(240)를 뷰파 인더로서 이용하여 제1 카메라(282)를 이용하여 제1 화상을 캡처할 수 있다. 제1 화상을 캡처하는 중에, 제2 카메라(284)는 제2 화상을 캡처할 수 있다. 제2 화상은 제1 카메라 및/또는 제1 화상의 화이트 밸런스를 조정하도록 사용될 수 있다.
용어 "제1" 및 "제2" 및 다른 유사한 용어들은 단지 표시(label)로서 사용된 것이며 반드시 표시된 구성요소들 사이의 시간적인 관계를 암시하는 것은 아니다. 따라서, 제1 및 제2 화상을 캡처하는 타이밍은 스위칭되거나 동시일 수 있다. 예를 들면, 제1 화상은 제2 화상이 제2 카메라(284)에 의해서 캡처된 후 제1 카메라(282)에 의해서 캡처되거나, 혹은 반대의 경우일 수도 있다.
관련된 실시예에 따르면, 무선 통신 기기(200)는 선택적인 호출 수신기일 수 있다. 무선 통신 기기(200)는 하우징(210), 하우징에 연결된 트랜스시버(250), 하우징에 연결된 제1 카메라(282), 하우징에 연결된 제2 카메라(284), 트랜스시버(250), 제1 카메라(282), 및 제2 카메라(284)에 연결된 컨트롤러(220), 컨트롤러(220)에 연결된 대상 인식 모듈(292), 및 컨트롤러(220)에 연결된 화상 보정 모듈(290)을 포함할 수 있다.
동작시 트랜스시버(250)는 무선 광역 네트워크 통신 신호들을 송수신할 수 있다. 제1 카메라(282)는 제1 화상을 캡처할 수 있다. 제2 카메라(284)는 제2 화상을 캡처할 수 있다. 컨트롤러(220)는 무선 통신 기기(200)의 동작을 제어할 수 있다. 대상 인식 모듈(292)은 제2 카메라에 의해서 캡처된 제2 화상 내의 특정 대상을 식별할 수 있다. 화상 보정 모듈(290)은 이후 제2 카메라(284)에 의해서 캡처된 제2 화상 내의 특정 대상에 대응하는 색 정보에 기초하여 제1 카메라(282)에 의해 캡처된 제1 화상의 화이트 밸런스를 설정할 수 있다. 예를 들면, 화상 보정 모듈(290)은, 제2 카메라(284)에 의해 캡처된 제2 화상 내의 특정 대상에 대응하는 피부색 정보에 기초하여 제1 카메라(282)의 화이트 밸런스를 설정할 수 있다. 제2 화상 내의 특정 대상은 기기의 사용자일 수 있고 제2 카메라(284)는 기기의 사용자를 포함하는 제2 화상을 캡처할 수 있다. 특정 대상은 기기를 사용하는 사용자의 얼굴일 수 있다. 무선 통신 기기(200)는 사용자의 피부색 정보 또는 다른 피부색 정보를 저장하도록 구성된 색 정보 저장 모듈(294)을 포함할 수 있다. 화상 보정 모듈(290)은 이후 피부색 정보에 기초하여 제1 카메라(282)에 의해 캡처된 화상의 화이트 밸런스를 설정할 수 있다. 예를 들면, 화상 보정 모듈(290)은, 관련된 저장된 피부색 정보를 제2 카메라(284)에 의해 캡처된 화상 내의 사용자의 피부색에 관한 정보와 비교할 수 있다. 화상 보정 모듈(290)은 이후 이 비교에 기초하여 제1 카메라(282)에 의해서 캡처된 화상의 화이트 밸런스를 설정할 수 있다.
도 3은 일 실시예에 따른 무선 통신 기기(200)의 동작을 도시하는 예시적인 흐름도(300)이다. 단계 310에서, 흐름도가 시작한다. 단계 320에서, 무선 통신 기기(200)는 제1 카메라(282)를 이용하여 제1 화상을 캡처할 수 있다. 단계 330에서, 무선 통신 기기(200)는 제2 카메라(284)를 이용하여 제2 화상을 캡처할 수 있다. 단계 340에서, 무선 통신 기기(200)는 제2 카메라(284)에 의해서 캡처된 제2 화상에 기초하여 제1 카메라(282)에 의해 캡처된 제1 화상의 화이트 밸런스를 조정할 수 있다. 단계 350에서, 흐름도(300)는 종료할 수 있다.
화이트 밸런스 시퀀스는 다수의 방법으로 구현될 수 있다. 따라서, 제1 화 상이 캡처되고 이후 제2 화상이 캡처된 후, 대상 인식부가 캡처될 수 있다. 이후 디지털 화이트 밸런스는 상술한 색 보정 행렬을 이용하여 행해질 수 있다. 상이한 시퀀스의 일 예로서, 제2 화상이 캡처될 수 있고 필요한 색 보정이 추정될 수 있다. 이것은 상술한 바와 같이 카메라 화소들 상의 전압 게인을 변화시킴으로써 아날로그 화이트 밸런싱하는데 사용될 수 있다. 제1 화상은 이후 캡처될 수 있고, 또한 디지털 화이트 밸런스는 추정된 색 보정에 기초하여 실행될 수 있다. 또한, 아날로그 및 디지털 화이트 밸런싱의 혼합은 가능한 한 개선된 품질의 화상을 제공하는데 사용될 수 있다. 아날로그 화이트 밸런싱은 일반적으로, 제1 화상 캡처 전에 제2 화상 캡처가 일어나는 경우에 사용된다. 다른 상황에서, 단지 디지털 화이트 밸런스가 행해지며, 이는 화상 캡처 시퀀스와 독립적일 수 있다.
도 4는 다른 실시예에 따른 무선 통신 기기(200)의 동작을 도시하는 예시적인 흐름도(400)이다. 단계 410에서, 흐름도가 시작된다. 단계 420에서, 무선 통신 기기(200)는 피부색 정보를 저장할 수 있다. 단계 430에서, 무선 통신 기기(200)는 제1 카메라(282)를 이용하여 제1 화상을 캡처할 수 있다. 단계 440에서, 무선 통신 기기(200)는 제2 카메라(284)를 이용하여 제2 화상을 캡처할 수 있다. 제2 화상은 기기 사용자의 화상일 수 있고, 제2 화상을 캡처하는 것은 기기 사용자의 제2 화상을 캡처하는 것을 포함할 수 있다. 단계 450에서, 무선 통신 기기(200)는 제2 카메라(284)에 의해서 캡처된 제2 화상에 기초하여 알려진 색의 대상을 식별할 수 있다. 단계 460에서, 무선 통신 기기(200)는 제2 카메라(284)에 의해서 캡처된 제2 화상에 기초하여 제1 카메라(282)에 의해서 캡처된 제1 화상의 화이트 밸런스를 조정할 수 있다. 무선 통신 기기(200)는 알려진 색의 대상에 기초하여 제1 카메라(282)에 의해 캡처된 제1 화상의 화이트 밸런스를 조정할 수 있다. 무선 통신 기기(200)는 또한 알려진 색의 대상 내의 피부색 정보에 기초하여 제1 카메라(282)에 의해 캡처된 제1 화상의 화이트 밸런스를 조정할 수 있다. 알려진 색의 대상은 기기를 사용하는 사용자의 얼굴일 수 있다. 무선 통신 기기(200)는 사용자의 피부색 정보에 관한 정보에 기초하여 제1 카메라(282)에 의해 캡처된 제1 화상의 화이트 밸런스를 조정할 수 있다. 단계 450에서, 흐름도(400)는 종료할 수 있다.
본 명세서의 방법은 바람직하게는 프로그램된 프로세서 상에서 구현된다. 그러나, 컨트롤러들, 흐름도들, 및 모듈들은 또한 범용 또는 특수한 목적의 컴퓨터, 프로그램된 마이크로프로세서 또는 마이크로컨트롤러 및 주변의 집적회로 구성요소, 집적 회로, 이산 구성요소 회로(discrete element circuit), 프로그램 가능한 논리 기기 등과 같은 하드웨어 전자 또는 논리 회로에 구현될 수 있다. 일반적으로, 도면에 도시된 흐름도를 구현할 수 유한 상태 기계에 위치하는 임의의 기기는 본 명세서의 프로세서 기능들을 구현하는데 사용될 수 있다.
본 문서에서, "제1", "제2" 등과 같은 관계적인 용어는 임의의 실제의 그러한 관계 또는 그러한 엔티티나 액션들 사이의 순서를 요구하거나 암시하지 않고 다른 엔티티 또는 액션과 하나의 엔티티 또는 액션을 구별하는 데에만 사용될 수 있다. 용어 "포함하다", "포함하는" 또는 임의의 다른 변형은, 비배타적인 포함을 커버하도록 의도되므로, 구성요소들의 리스트를 포함하는 프로세스, 방법, 제품, 또는 장치가 그러한 구성요소들만을 포함하지 않지만, 명백하게 그러한 프로세스, 방법, 제품, 또는 장치에 명시적으로 열거되거나 고유하지는 않다. "하나의(a 또는 an)" 등으로 시작되는 일 구성요소는, 더 많은 제한요소 없이, 구성요소를 포함하는 프로세스, 방법, 제품, 또는 장치 내의 부가적인 동일한 구성요소들의 존재를 제외하지 않는다. 또한, 용어 "다른(another)"은 적어도 두 번째 이상으로 정의된다. 본 명세서에 사용된 바와 같이, 용어 "포함하는(including)", "갖는(having)" 등은 "포함하는(comprising)"으로 정의된다.
본 명세서는 그들의 특정 실시예들로 설명되었지만, 다수의 대체물, 수정, 및 변형이 당업자에게는 자명할 것임이 명백하다. 예를 들면, 실시예들의 다양한 컴포넌트는 다른 실시예에서 서로 교환되고, 부가되고, 또는 대체될 수 있다. 또한, 각 도면의 모든 구성요소들은 반드시 개시된 실시예들의 동작을 위한 것은 아니다. 예를 들면, 개시된 실시예들의 당업자는 독립청구항들의 구성요소들을 간단히 채용함으로써 본 명세서의 교시를 만들어 사용할 수 있을 것이다. 따라서, 본 명세서에 기술된 바와 같이 본 명세서의 바람직한 실시예들은 제한적인 것이 아니라, 설명적인 것으로 의도된다. 본 명세서의 취지 및 범위를 벗어나지 않고 다양한 변경이 가능하다.

Claims (20)

  1. 하우징과,
    상기 하우징에 연결된 제1 카메라 - 상기 제1 카메라는 제1 화상을 캡처하도록 구성됨 - 와,
    상기 하우징에 연결된 제2 카메라 - 상기 제2 카메라는 제2 화상을 캡처하도록 구성됨 - 와,
    상기 제1 카메라와 상기 제2 카메라에 연결된 컨트롤러 - 상기 컨트롤러는 기기의 동작을 제어하도록 구성됨 - 와,
    상기 컨트롤러에 연결된 화상 보정 모듈 - 상기 화상 보정 모듈은 상기 제2 카메라에 의해 캡처된 상기 제2 화상에 기초하여 상기 제1 화상의 화이트 밸런스를 설정하도록 구성됨 -
    을 포함하는 기기.
  2. 제1항에 있어서,
    상기 제2 화상은 상기 기기의 사용자의 화상을 포함하고,
    상기 제2 카메라는 상기 기기의 사용자의 제2 화상을 캡처하도록 구성되는 기기.
  3. 제1항에 있어서,
    상기 제2 카메라에 의해서 캡처된 상기 제2 화상에 기초하여 공지된 색의 대상을 식별하도록 구성된 대상 인식 모듈을 더 포함하며,
    상기 화상 보정 모듈은 공지된 색의 대상에 기초하여 상기 제1 화상의 화이트 밸런스를 설정하도록 구성되는 기기.
  4. 제3항에 있어서,
    상기 화상 보정 모듈은 공지된 색의 대상 내의 피부색 정보에 기초하여 상기 제1 화상의 화이트 밸런스를 설정하도록 구성되는 기기.
  5. 제3항에 있어서,
    공지된 색의 상기 대상은 상기 기기를 사용하는 사용자의 얼굴을 포함하는 기기.
  6. 제5항에 있어서,
    피부색 정보를 저장하도록 구성된 색 정보 저장 모듈을 더 포함하고,
    상기 화상 보정 모듈은 피부색 정보에 기초하여 상기 제1 화상의 화이트 밸런스를 설정하도록 구성되는 기기.
  7. 제1항에 있어서,
    상기 제2 카메라는 상기 제1 카메라의 실질적으로 반대편으로 향하는 기기.
  8. 제7항에 있어서,
    실질적으로 상기 제2 카메라와 동일한 방향으로 향하는 뷰파인더(viewfinder)를 더 포함하는 기기.
  9. 화상을 캡처하는 방법으로서,
    제1 카메라를 사용하여 제1 화상을 캡처하는 단계와,
    제2 카메라를 사용하여 제2 화상을 캡처하는 단계와,
    상기 제2 카메라에 의해서 캡처된 상기 제2 화상에 기초하여 상기 제1 카메라에 의해 캡처된 상기 제1 화상의 화이트 밸런스를 조정하는 단계
    를 포함하는 화상 캡처 방법.
  10. 제9항에 있어서,
    상기 제2 화상은 상기 기기의 사용자의 화상을 포함하며,
    제2 화상을 캡처하는 단계는 상기 기기의 사용자의 상기 제2 화상을 캡처하는 단계를 포함하는 화상 캡처 방법.
  11. 제9항에 있어서,
    상기 제2 카메라에 의해서 캡처된 상기 제2 화상에 기초하여 공지된 색의 대상을 식별하는 단계를 더 포함하고,
    조정하는 단계는 공지된 색의 대상에 기초하여 제1 카메라에 의해 캡처된 상기 제1 화상의 화이트 밸런스를 조정하는 단계를 포함하는 화상 캡처 방법.
  12. 제11항에 있어서,
    조정하는 단계는 공지된 색의 대상 내의 피부색 정보에 기초하여 상기 제1 카메라에 의해 캡처된 상기 제1 화상의 화이트 밸런스를 조정하는 단계를 포함하는 화상 캡처 방법.
  13. 제11항에 있어서,
    공지된 색의 상기 대상은 상기 기기를 이용하는 사용자의 얼굴을 포함하는 화상 캡처 방법.
  14. 제13항에 있어서,
    피부색에 관한 정보를 저장하는 단계를 더 포함하며,
    조정하는 단계는 피부색에 관한 상기 정보에 기초하여 상기 제1 카메라에 의해 캡처된 상기 제1 화상의 화이트 밸런스를 조정하는 단계를 포함하는 화상 캡처 방법.
  15. 제9항에 있어서,
    상기 제2 카메라는 상기 제1 카메라로부터 실질적으로 반대 방향을 향하는 화상 캡처 방법.
  16. 선택적인 호출 수신기(selective call receiver)로서,
    하우징과,
    상기 하우징과 연결된 트랜스시버 - 상기 트랜스시버는 무선 광역 네트워크 통신 신호들들 송수신하도록 구성됨 - 와,
    상기 하우징과 연결된 제1 카메라 - 상기 제1 카메라는 제1 화상을 캡처하도록 구성됨 - 와,
    상기 하우징과 연결된 제2 카메라 - 상기 제2 카메라는 제2 화상을 캡처하도록 구성됨 - 와,
    상기 트랜스시버, 상기 제1 카메라 및 상기 제2 카메라에 연결된 컨트롤러 - 상기 컨트롤러는 상기 선택적 호출 수신기의 동작을 제어하도록 구성됨 - 와,
    상기 컨트롤러에 연결된 대상 인식 모듈 - 상기 대상 인식 모듈은 상기 제2 카메라에 의해서 캡처된 상기 제2 화상 내의 특정 대상을 식별하도록 구성됨 - 과,
    상기 컨트롤러에 연결된 화상 보정 모듈 - 상기 화상 보정 모듈은 상기 제2 카메라에 의해 캡처된 제2 화상 내의 상기 특정 대상에 대응하는 색 정보에 기초하여 상기 제1 화상의 화이트 밸런스를 설정하도록 구성됨 -
    을 포함하는 선택적 호출 수신기.
  17. 제16항에 있어서,
    상기 화상 보정 모듈은 상기 제2 카메라에 의해 캡처된 제2 화상 내의 상기 특정 대상에 대응하는 피부색 정보에 기초하여 상기 제1 화상의 화이트 밸런스를 설정하도록 구성되는 선택적 호출 수신기.
  18. 제17항에 있어서,
    상기 제2 화상 내의 특정 대상은 상기 기기의 사용자를 포함하고,
    상기 제2 카메라는 상기 기기의 사용자를 포함하는 제2 화상을 캡처하도록 구성되는 선택적 호출 수신기.
  19. 제18항에 있어서,
    상기 특정 대상은 상기 기기를 사용하는 사용자의 얼굴을 포함하는 선택적 호출 수신기.
  20. 제19항에 있어서,
    상기 사용자의 피부색 정보에 관한 정보를 저장하도록 구성된 색 정보 저장 모듈을 더 포함하고,
    상기 화상 보정 모듈은 상기 사용자의 피부색 정보에 관한 정보에 기초하여 상기 제1 화상의 화이트 밸런스를 설정하도록 구성되는 선택적 호출 수신기.
KR1020097019790A 2007-03-23 2008-01-30 휴대용 기기에서의 화상 색 보정을 위한 장치 및 방법 KR20090125124A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/690,487 2007-03-23
US11/690,487 US20080231726A1 (en) 2007-03-23 2007-03-23 Apparatus and method for image color correction in a portable device

Publications (1)

Publication Number Publication Date
KR20090125124A true KR20090125124A (ko) 2009-12-03

Family

ID=39410011

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020097019790A KR20090125124A (ko) 2007-03-23 2008-01-30 휴대용 기기에서의 화상 색 보정을 위한 장치 및 방법

Country Status (5)

Country Link
US (1) US20080231726A1 (ko)
EP (1) EP2130383A1 (ko)
KR (1) KR20090125124A (ko)
CN (1) CN101711482A (ko)
WO (1) WO2008118528A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017213365A1 (en) * 2016-06-09 2017-12-14 Lg Electronics Inc. Moving picture capturing apparatus having dual camera

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8571346B2 (en) * 2005-10-26 2013-10-29 Nvidia Corporation Methods and devices for defective pixel detection
US8588542B1 (en) 2005-12-13 2013-11-19 Nvidia Corporation Configurable and compact pixel processing apparatus
US8737832B1 (en) 2006-02-10 2014-05-27 Nvidia Corporation Flicker band automated detection system and method
US20080303922A1 (en) * 2007-06-08 2008-12-11 Imran Chaudhri Image capture
US8724895B2 (en) 2007-07-23 2014-05-13 Nvidia Corporation Techniques for reducing color artifacts in digital images
US8698908B2 (en) 2008-02-11 2014-04-15 Nvidia Corporation Efficient method for reducing noise and blur in a composite still image from a rolling shutter camera
KR101488795B1 (ko) * 2008-03-25 2015-02-04 엘지전자 주식회사 휴대 단말기 및 그 제어방법
US9379156B2 (en) 2008-04-10 2016-06-28 Nvidia Corporation Per-channel image intensity correction
US8675091B2 (en) * 2008-12-15 2014-03-18 Nvidia Corporation Image data processing with multiple cameras
US20100245617A1 (en) * 2009-03-31 2010-09-30 Gary Stephen Shuster Automated white balancing in digital photography
US8749662B2 (en) 2009-04-16 2014-06-10 Nvidia Corporation System and method for lens shading image correction
KR101608761B1 (ko) * 2009-05-28 2016-04-04 엘지전자 주식회사 이동단말기 및 그 제어방법
US8698918B2 (en) 2009-10-27 2014-04-15 Nvidia Corporation Automatic white balancing for photography
US8400490B2 (en) * 2010-10-30 2013-03-19 Hewlett-Packard Development Company, L.P. Framing an object for video conference
US9798698B2 (en) 2012-08-13 2017-10-24 Nvidia Corporation System and method for multi-color dilu preconditioner
US9508318B2 (en) 2012-09-13 2016-11-29 Nvidia Corporation Dynamic color profile management for electronic devices
US9307213B2 (en) 2012-11-05 2016-04-05 Nvidia Corporation Robust selection and weighting for gray patch automatic white balancing
US9247223B2 (en) 2013-01-25 2016-01-26 Blackberry Limited Reduce operating environment effect using multiple cameras
KR102082365B1 (ko) * 2013-02-26 2020-02-27 삼성전자주식회사 이미지 처리 방법 및 그 전자 장치
US9756222B2 (en) 2013-06-26 2017-09-05 Nvidia Corporation Method and system for performing white balancing operations on captured images
US9826208B2 (en) 2013-06-26 2017-11-21 Nvidia Corporation Method and system for generating weights for use in white balancing an image
US10402661B2 (en) 2013-07-22 2019-09-03 Opengate Development, Llc Shape/object recognition using still/scan/moving image optical digital media processing
CN104378612B (zh) * 2013-08-12 2017-09-29 联想(北京)有限公司 一种调节色彩平衡的方法及电子设备
KR102063102B1 (ko) * 2013-08-19 2020-01-07 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
WO2015081556A1 (zh) * 2013-12-06 2015-06-11 华为终端有限公司 双镜头设备的拍照方法及双镜头设备
US20150172513A1 (en) * 2013-12-18 2015-06-18 Nokia Corporation Methods And Apparatus For Color Balance Correction
JP2015177308A (ja) * 2014-03-14 2015-10-05 富士通株式会社 携帯端末装置、画像補正方法、及び画像補正プログラム
CN104954661B (zh) * 2014-03-31 2018-10-12 诺基亚技术有限公司 用于控制图像捕获的方法和装置
CN104468578B (zh) * 2014-12-10 2017-12-26 怀效宁 一种无线通讯的优先通讯系统和通讯方法
CN106534814B (zh) * 2016-10-12 2019-01-18 成都西纬科技有限公司 一种双摄像头图像质量同步的方法和设备
TWI626620B (zh) * 2016-12-20 2018-06-11 廣東歐珀移動通訊有限公司 圖像處理方法與裝置、電子裝置及計算機可讀儲存介質
CN107277480B (zh) * 2017-07-10 2019-03-29 Oppo广东移动通信有限公司 白平衡同步方法、装置和终端设备
CN108012133B (zh) * 2017-12-12 2019-09-17 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN107948619B (zh) * 2017-12-13 2019-07-16 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和移动终端
CN108012134B (zh) * 2017-12-25 2019-08-02 Oppo广东移动通信有限公司 拍摄方法及装置、计算机可读存储介质和计算机设备
KR20230023498A (ko) 2021-08-10 2023-02-17 삼성전자주식회사 언더 디스플레이 카메라를 포함하는 전자 장치 및 그 동작 방법

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI109742B (fi) * 1999-10-26 2002-09-30 Nokia Corp Matkaviestin
JP2003032542A (ja) * 2001-07-19 2003-01-31 Mitsubishi Electric Corp 撮像装置
US6975759B2 (en) * 2002-06-25 2005-12-13 Koninklijke Philips Electronics N.V. Method and system for white balancing images using facial color as a reference signal
JP4053444B2 (ja) * 2003-03-07 2008-02-27 シャープ株式会社 携帯可能な多機能電子機器
JP4470434B2 (ja) * 2003-10-06 2010-06-02 富士ゼロックス株式会社 動作識別装置、及び対象物の姿勢識別装置
KR100677303B1 (ko) * 2003-12-26 2007-02-05 엘지전자 주식회사 휴대 단말기
JP3926837B2 (ja) * 2004-06-04 2007-06-06 松下電器産業株式会社 表示制御方法および装置、プログラム、並びに携帯機器
US8902320B2 (en) * 2005-01-31 2014-12-02 The Invention Science Fund I, Llc Shared image device synchronization or designation
US7724296B2 (en) * 2006-06-21 2010-05-25 Sony Ericsson Mobile Communications Ab Device and method for adjusting image orientation

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017213365A1 (en) * 2016-06-09 2017-12-14 Lg Electronics Inc. Moving picture capturing apparatus having dual camera
US10694126B2 (en) 2016-06-09 2020-06-23 Lg Electronics Inc. Moving picture photographing apparatus having dual cameras using correction information

Also Published As

Publication number Publication date
WO2008118528A1 (en) 2008-10-02
CN101711482A (zh) 2010-05-19
US20080231726A1 (en) 2008-09-25
EP2130383A1 (en) 2009-12-09

Similar Documents

Publication Publication Date Title
KR20090125124A (ko) 휴대용 기기에서의 화상 색 보정을 위한 장치 및 방법
US11470294B2 (en) Method, device, and storage medium for converting image from raw format to RGB format
CN101507286B (zh) 投影仪的调整
US20030112361A1 (en) Digital camera
CN106131441B (zh) 拍照方法及装置、电子设备
JP2013207721A (ja) 撮像装置、並びにそのホワイトバランス補正方法及びホワイトバランス補正プログラム
CN111095913B (zh) 图像处理装置和处理方法、摄像装置、摄像方法、存储介质
CN111953903A (zh) 拍摄方法、装置、电子设备及存储介质
KR20040100746A (ko) 카메라를 구비한 휴대 단말기에서 역광촬영을 보정하기위한 장치 및 방법
CN109005360B (zh) 拍摄环境的补光方法、装置及计算机可读存储介质
JP2023059952A (ja) 画像処理装置、撮像装置、画像処理方法、画像処理プログラム及び記録媒体
JP2004259177A (ja) 画像処理装置及びプログラム
CN117119314B (zh) 一种图像处理方法及相关电子设备
KR101175367B1 (ko) 이동 단말에서 영상 출력 장치 및 방법
EP4106321A1 (en) Image processing method and apparatus, model training method and apparatus, and storage medium
CN107450867B (zh) 照片打印方法及装置
CN113873211A (zh) 拍照方法及装置、电子设备及存储介质
CN116993575A (zh) 一种图像处理方法、装置、设备及介质
CN114339187A (zh) 图像处理方法、图像处理装置及存储介质
KR100621009B1 (ko) 휴대단말기의 영상 색조 조절장치 및 방법
CN115619879A (zh) 图像处理方法、装置、存储介质及电子设备
CN117528265A (zh) 视频拍摄方法及电子设备
CN117119314A (zh) 一种图像处理方法及相关电子设备
CN116504180A (zh) IR Drop补偿方法、装置、终端及存储介质
CN118072668A (zh) 一种像素补偿方法、装置及存储介质

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid