KR101946436B1 - 촬영 방법, 촬영 장치, 및 단말 - Google Patents

촬영 방법, 촬영 장치, 및 단말 Download PDF

Info

Publication number
KR101946436B1
KR101946436B1 KR1020177027468A KR20177027468A KR101946436B1 KR 101946436 B1 KR101946436 B1 KR 101946436B1 KR 1020177027468 A KR1020177027468 A KR 1020177027468A KR 20177027468 A KR20177027468 A KR 20177027468A KR 101946436 B1 KR101946436 B1 KR 101946436B1
Authority
KR
South Korea
Prior art keywords
camera
image
preview
mode
preview image
Prior art date
Application number
KR1020177027468A
Other languages
English (en)
Other versions
KR20170123661A (ko
Inventor
린 리
웨이 뤄
레이 송
린타오 쟈오
Original Assignee
후아웨이 테크놀러지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후아웨이 테크놀러지 컴퍼니 리미티드 filed Critical 후아웨이 테크놀러지 컴퍼니 리미티드
Publication of KR20170123661A publication Critical patent/KR20170123661A/ko
Application granted granted Critical
Publication of KR101946436B1 publication Critical patent/KR101946436B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H04N5/23293—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
    • H04N5/217—
    • H04N5/235—

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Exposure Control For Cameras (AREA)

Abstract

본 발명의 실시예는 촬영 방법, 촬영 장치, 및 단말을 개시한다. 이 방법은, 카메라 턴온 명령을 수신하는 단계; 상기 수신된 카메라 턴온 명령에 기초하여, 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주는 단계 ― 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드임 ―; 및 상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 검출하는 경우 상기 미리보기 이미지를 촬영하는 단계를 포함하고, 상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다. 이와 같이, 촬영된 이미지의 휘도가 증가될 수 있고, 이미지가 저조도에서 촬영될 수 없는 문제가 해결될 수 있다.

Description

촬영 방법, 촬영 장치, 및 단말
본 발명의 실시예는 촬영 기술 분야에 관한 것으로, 구체적으로는 저조도(low light) 환경을 위한 촬영 방법, 촬영 장치, 및 단말에 관한 것이다.
이동 단말을 사용하여 촬영하기 위한 요구가 꾸준히 증가하고 있다. 그러나, 촬영 환경이 낮은 조명 시나리오인 경우, 예를 들어, 극장, 술집, 또는 KTV에서, 예를 들어 환경의 휘도가 30 룩스(lux)보다 적은 경우, 다른 보조 장치가 없으면 그 환경에서의 빛이 매우 낮아서 카메라로 입력되는 빛의 양이 적기 때문에, 촬영된 이미지는 어둡고, 선명하고 구별할 수 있는 이미지가 촬영될 수 없다.
이러한 문제를 해결하기 위해, 일부 제조자들은 저조도 환경에서 촬영 효과를 개선하기 위해 이동 전화기의 후면 장착(rear-facing) 카메라에 카메라 플래시를 추가한다. 그러나, 촬영 중에, 카메라 플래시는 일반적으로 사람의 눈을 부시게 하고, 사용자의 눈이 일시적으로 객체를 선명하게 볼 수 없는 경우가 발생한다. 또한, 연광(soft light) 기능이 일부 이동 전화기의 전면 장착 카메라에 추가되어, 촬영이 수행되는 경우, 전면 장착 연광이 환경에서 휘도를 증가시키도록 턴온된다. 그러나, 그 빛은 턴온된 후에 비교적 눈부시고, 사용자 경험이 이상적이지 않는 경우가 또한 발생한다. 또한, 제조자는 촬영이 수행되는 경우 스크린의 휘도를 즉시 증가시키기 위해 LED 필인 라이트(fill-in light) 해결수단을 사용한다. 이러한 방식의 문제는 미리 보기시 효과가 없다는 점이고, 사용자와 이동 전화기 사이의 거리가 변함에 따라, 안면 비대칭(face asymmetry), 효과없는 미백(brightening), 또는 노출 과다와 같은 문제가 촬영이 수행될 때 발생된다.
본 발명의 실시예들은 촬영된 이미지의 휘도가 증가될 수 있고, 이미지가 저조도에서 촬영될 수 없는 문제가 해결될 수 있도록, 촬영 방법, 촬영 장치, 및 단말을 제공한다.
제1 측면에 따르면, 촬영 방법이 제공되며, 여기서, 이 방법은, 카메라 턴온(turn-on) 명령을 수신하는 단계; 상기 수신된 카메라 턴온 명령에 기초하여, 상기 카메라에 의해 수집되는 미리보기(preview) 이미지를 미리 보여주는 단계 ― 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드(average pixel combination mode)임 ―; 및 상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 검출하는 경우 상기 미리보기 이미지를 촬영하는 단계를 포함하고, 상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드(sum pixel combination mode)이다. 이미지 잡음은 카메라에 의해 캡쳐되는 미리보기 이미지를 미리보여주기 위해 상기 평균 픽셀 결합 모드를 사용하여 감소될 수 있다.
제1 측면을 참조한, 제1 측면의 제1 가능한 구현예에서, 상기 미리보기 이미지를 촬영하는 단계는 구체적으로 사진 또는 비디오 중 적어도 하나를 획득하기 위해 상기 미리보기 이미지를 촬영하는 단계이다. 촬영된 이미지는 하이브리드 비디오(hybrid video), 즉 사진과 비디오 둘 다를 포함하는 이미지일 수 있다.
제1 측면의 제1 가능한 구현예를 참조한, 제1 측면의 제2 가능한 구현예에서, 상기 미리보기 이미지를 촬영하는 단계 후에, 본 방법은 촬영된 이미지에 대해 백색화(whitening), 잡음제거(denoising), 눈 미백(eye brightening), 또는 얼굴 축소화(face slimming) 중 적어도 하나를 수행하는 단계를 더 포함한다. 사용자 기대를 충족시키는 이미지는 촬영된 이미지에 대한 잡음제거 처리와 뷰티 처리를 수행하여 획득될 수 있다.
제1 측면, 또는 제1 측면의 제1 내지 제2 가능한 구현예 중 어느 하나를 참조한, 제1 측면의 제3 가능한 구현예에서, 상기 미리보기 이미지를 촬영하는 단계 후에, 본 방법은 상기 카메라의 이미지 센서의 조작 모드를 상기 평균 화소 결합 모드로 전환시키는 단계를 더 포함한다. 다음에 사용자가 촬영을 수행할 때, 평균 화소 결합 모드에서 이미지 센서를 사용함으로써 잡음이 적은 미리보기 이미지가 편리하게 얻어진다.
제2 측면에 따르면, 촬영 장치가 제공되며, 여기서, 이 촬영 장치는 카메라 턴온 명령을 수신하도록 구성된 수신 유닛; 상기 수신 유닛에 의해 수신되는 상기 카메라 턴온 명령에 기초하여, 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성된 미리보기 유닛 ― 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드임 ―; 및 상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 검출하는 경우 상기 미리보기 이미지를 촬영하도록 구성된 촬영 유닛을 포함하고, 상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다. 이미지 잡음은 카메라에 의해 캡쳐되는 미리보기 이미지를 미리보여주기 위해 상기 평균 픽셀 결합 모드를 사용하여 감소될 수 있다.
제2 측면을 참조한, 제2 측면의 제1 가능한 구현예에서, 상기 촬영 유닛은 구체적으로 사진 또는 비디오 중 적어도 하나를 획득하기 위해 상기 미리보기 이미지를 촬영하도록 구성된다.
제2 측면의 제1 가능한 구현예를 참조한, 제2 측면의 제2 가능한 구현예에서, 상기 장치는 처리 유닛을 더 포함하며, 상기 처리 유닛은 촬영된 이미지에 대해 백색화, 잡음제거, 눈 미백, 또는 얼굴 축소화 중 적어도 하나를 수행하도록 구성된다. 사용자 기대를 충족시키는 이미지는 촬영된 이미지에 대한 잡음제거 처리와 뷰티 처리를 수행하여 획득될 수 있다.
제2 측면, 또는 제2 측면의 제1 내지 제2 가능한 구현예 들 중 어느 하나를 참조한, 제2 측면의 제3 가능한 구현예에서, 상기 장치는 스위칭 유닛을 더 포함하며, 상기 스위칭 유닛은 상기 카메라의 이미지 센서의 조작 모드를 상기 평균 화소 결합 모드로 전환시키도록 구성된다. 다음에 사용자가 촬영을 수행할 때, 평균 화소 결합 모드에서 이미지 센서를 사용함으로써 잡음이 적은 미리보기 이미지가 편리하게 얻어진다.
제3 측면에 따르면, 단말이 제공되며, 여기서 그 단말은 프로세서, 디스플레이, 및 카메라를 포함하고, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드 및 합계 화소 결합 모드를 포함한다. 수신된 카메라 턴온 명령에 기초하여, 상기 디스플레이는 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성되고, 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 상기 평균 화소 결합 모드이다. 상기 프로세서는 상기 미리보기 상태에서 상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도를 분석하도록 구성된다. 상기 카메라는, 상기 프로세서가 상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 결정하는 경우, 상기 미리보기 이미지를 촬영하도록 구성되며, 상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 상기 합계 화소 결합 모드이다. 이미지 잡음은 카메라에 의해 캡쳐되는 미리보기 이미지를 미리보여주기 위해 상기 평균 픽셀 결합 모드를 사용하여 감소될 수 있다.
제3 측면을 참조한, 제3 측면의 제1 가능한 구현예에서, 상기 카메라가 상기 미리보기 이미지를 촬영하도록 구성되는 것은 구체적으로 사진 또는 비디오 중 적어도 하나를 획득하기 위해 상기 미리보기 이미지를 촬영하도록 구성되는 것이다. 촬영된 이미지는 하이브리드 비디오(hybrid video), 즉 사진과 비디오 둘 다를 포함하는 이미지일 수 있다.
제3 측면의 제1 가능한 구현예를 참조한, 제3 측면의 제2 가능한 구현예에서, 상기 프로세서는 촬영된 이미지에 대해 백색화, 잡음제거, 눈 미백, 또는 얼굴 축소화 중 적어도 하나를 수행하도록 추가로 구성된다. 사용자 기대를 충족시키는 이미지는 촬영된 이미지에 대한 잡음제거 처리와 뷰티 처리를 수행하여 획득될 수 있다.
제4 측면에 따르면, 촬영 방법이 제공되며, 여기서 이 방법은, 카메라 턴온 명령을 수신하는 단계; 상기 수신된 카메라 턴온 명령에 기초하여, 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주는 단계 ― 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드임 ―; 및 상기 이미지 센서의 빛 감도 ISO가 미리 설정된 값보다 더 큰 것으로 검출하는 경우 상기 미리보기 이미지를 촬영하는 단계를 포함하고, 상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다.
제5 측면에 따르면, 단말이 제공되며, 여기서 이 단말은 프로세서, 디스플레이, 및 카메라를 포함하고, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드 및 합계 화소 결합 모드를 포함한다. 수신된 카메라 턴온 명령에 기초하여, 상기 디스플레이는 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성되고, 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 상기 평균 화소 결합 모드이다. 상기 프로세서는 상기 미리보기 상태에서 상기 이미지 센서의 빛 감도 ISO를 검출하도록 구성된다. 상기 카메라는, 상기 프로세서가 상기 이미지 센서의 빛 감도 ISO가 미리 설정된 값보다 더 큰 것으로 결정하는 경우, 상기 미리보기 이미지를 촬영하도록 구성되며, 상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 상기 합계 화소 결합 모드이다.
제6 측면에 따르면, 하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체가 제겅되며, 여기서 상기 하나 이상의 프로그램은 명령을 포함하고, 디스플레이 및 복수의 애플리케이션을 포함하는 휴대용 전자 장치에 의해 실행되는 경우, 상기 명령은 상기 휴대용 전자 장치가 제1 측면, 제1 측면의 제1 내지 제3 가능한 구현예, 또는 제4 측면 중 어느 하나에 따른 방법을 실행할 수 있도록 한다.
가능한 구현예에서, 미리보기 이미지 내의 적어도 하나의 화소의 휘도 분석에 의해, 촬영 환경이 저휘도 시나리오인 것으로 검출하는 것은 구체적으로 이하의 방식, 즉 미리보기 이미지 내의 적어도 하나의 화소의 평균 휘도가 미리 설정된 임계값보다 작은 경우, 촬영 환경이 저휘도 시나리오로서 간주되는 방식으로 구현된다.
또 다른 가능한 구현예에서, 단말의 UI 인터페이스는 화소 결합 모드가 전환되는 것을 사용자에게 상기시킨다.
또 다른 가능한 구현예에서, 단말의 UI 인터페이스는 저휘도 촬영 모드를 턴온하도록 사용자를 상기시킨다.
본 발명의 실시예의 기술적 해결수단을 더욱 명확히 기술하기 위해, 이하에서 본 발명의 실시예를 설명할 때 필요한 첨부 도면을 간략하게 소개한다. 분명한 것은, 이어질 설명에서 첨부된 도면은 단지 본 발명의 몇 가지 실시예를 나타내며, 통상의 기술자라면 첨부된 도면으로부터 창작 능력 없이도 다른 도면을 도출해 낼 수 있다는 것이다.
도 1은 일반적인 카메라 구조의 개략 구성도이다.
도 2는 베이어 포맷(Bayer format)으로 이미지 화소의 배열 모드의 개략 구성도이다.
도 3은 비닝 규칙(binning rule)의 개략 구성도이다.
도 4는 수평 방향에서의 1/2 비닝 조작의 개략 구성도이다.
도 5는 수직 방향에서의 1/2 비닝 조작의 개략 구성도이다.
도 6은 본 발명의 실시예에 따른 단말의 개략 구조도이다.
본 발명의 실시예의 목적, 기술적 해결수단, 및 이점을 보다 명확히 하기 위해, 이하 본 발명 실시예의 첨부 도면을 참조하여 본 발명의 실시예의 기술적 해결수단을 더욱 명확하고 완전하게 기술한다. 분명한 것은, 설명되는 실시예는 본 발명의 실시예의 전부가 아니라 단지 일부일 뿐이다. 창작 능력 없이 본 발명의 실시예에 기초하여 통상의 기술자에 의해 획득되는 모든 다른 실시예는 본 발명의 보호 범위 내에 속할 것이다.
"제1" 및 "제2"와 같은 일반적인 숫자가, 본 발명의 실시예에서 언급되는 경우, 그 일반적인 숫자가 문맥에 따라서 순서를 확실히 표현하지 않는 한 구분을 위해서만 사용된다.
본 발명의 실시예에서 언급되는 단말은 카메라를 장착한 전자 장치, 예를 들어, 이동 전화기, 태블릿 컴퓨터, 노트북, 웨어러블 장치, 또는 차재 장치를 포함한다.
도 1은 카메라의 일반적인 구조의 개략 구성도이다. 카메라는 일반적으로 렌즈체(lens cone)(101), 렌즈(102), 컬러 필터(103), 이미지 센서(104), 및 회로 카드(105)를 포함한다. 이미지 센서는 카메라의 핵심 장치이고, 이미지 센서는 또한 빛에 민감한 소재로서 언급되며, 또한 이미지 센서는 렌즈를 통과하는 빛을 수신하고 이들 광학 신호를 전기 신호로 변환하도록 구성된 장치이다. 카메라의 통상적인 이미지 센서의 두 가지 주요한 유형은 CCD(Charge-Coupled Device) 센서와 CMOS(Complementary Metal Oxide Semiconductor) 센서이다.
현재, "컬러 분해 필터(color separation filter)"로서 언급되기도 하는 컬러 필터는 주로 두 가지 방식, 즉 RGB 주요 컬러에 대한 컬러 분해 방법 및 CMYK 보색 컬러에 대한 컬러 분해 방법으로 컬러를 분해한다. 컬러 필터(103)는 적외선 필터일 수 있다. 회로 카드(105)는 인쇄 회로 기판(Printed Circuit Board, PCB)일 수 있고, 이 PCB는 일반적으로 경직성(rigid) 보드, 유연성(flexible) 보드, 또는 연경직성(rigid-flexible) 보드로서 분류될 수 있다. 서로 다른 이미지 센서는 서로 다른 유형의 PCB를 사용한다. 예를 들어, CMOS 센서는 세 가지 유형의 PCB을 중 어느 하나를 사용할 수 있고, CCD 센서는 통상적으로 연경직성 보드를 사용한다.
카메라의 일반적인 조작 원리는 다음과 같다. 한 장면이 렌즈를 사용하여 촬영되고, 생성된 광학 이미지는 이미지 센서 상으로 투사되며, 그 후 광학 이미지는 전기 신호로 변환되고, 전기 신호는 그 후에 아날로그-디지털 변환이 수행된 후에 디지털 신호로 변환되며, 디지털 신호 처리기(digital signal processor, DSP)에 의해 처리된 후, 디지털 신호는 처리를 위해 이동 전화 프로세서로 전달되며 마지막으로 이동 전화 화면 상의 가시 영상으로 변환된다. DSP는 또한 디지털 신호 처리 칩으로서 언급될 수 있고, DSP의 기능은 수학적 알고리즘에 기초한 일련의복잡한 조작에 의해 디지털 이미지 신호에 대한 광학 처리를 수행하는 것이고, 마지막으로 디스플레이로 처리된 신호를 전송하는 것이다. 일반적으로, CMOS 센서를 장착한 카메라에서, CMOS 센서의 DSP 칩은 CMOS 센서 내에 통합되어 있고, DSP 칩과 CMOS 센서는 하나의 엔티티로 보여진다. 그러나, CCD 센서를 사용하는 카메라는 두 개의 독립적인 부분, 즉 CCD와 DSP으로 분리된다.
현재, 다수의 CCD 이미지 센서와 CMOS 이미지 센서(또는 빛에 민감한 엘리먼트로서 언급됨)는 베이어로서 언급되는 필터 배열 포맷을 사용하여 이미지의 세 가지 주요 컬러(빨강, 초록, 파랑, RGB)에 대한 정보를 기록한다. 이러한 패턴은 빨강-초록 필터의 간격 행(interval row)과 파랑-초록 필터의 간격 행이 주기적으로 그리고 교대로 나타나는 배열 방식에서 획득된다. 따라서, 베이어 포맷은 CCD 이미지 센서와 CMOS 이미지 센서의 가장 일반적인 데이터 출력 포맷이다.
일반적으로 베이어 포맷으로 이미지 화소를 배열하기 위한 네 가지 모드가 있다. 도 2에 도시된 바와 같이, 도 2에서의 좌상 도면이 예로서 사용된다. 홀수 스캐닝 행은 RGRG...를 출력하고, 짝수 스캐닝 행은 GBGB...를 출력한다. 사람 눈에 의해 컬러에 반응하는 대역폭이 높지 않은 것을 나타내는 넓은 영역의 컬러링 특성에 따르면, 각 화소는 동시에 세 가지 컬러를 출력할 필요는 없다. 따라서, 데이터 샘플링 동안, 이하의 방식이 사용될 있다. 홀수 스캐닝 행에서 첫 번째, 두 번째, 세 번째, 네 번째, ... 화소들이 각각 샘플링되어 R, G, R, G, ... 데이터를 출력하고, 짝수 스캐닝 행에서 첫 번째, 두 번째, 세 번째, 네 번째, ... 화소가 각각 샘플링되어 G, B, G, B, ... 데이터를 출력한다. 실제 처리 중에, 각 화소의 RGB 신호는 화소에 의한 컬러 출력의 신호와 이웃하는 화소에 의한 다른 컬러 출력의 신호를 포함한다.
풀 컬러 포맷에서 보다 베이어 포맷에서 보다 많은 이미지 전송 대역폭과 저장 공간이 절약될 수 있지만, 일부 경우, 베이어 포맷에서의 이미지는 여전히 이미지 크기를 더 줄이도록 처리될 필요가 있다. 현재 비닝(binning)(화소 결합) 처리는 베이어 포맷에서 이미지에 직접 특정되는 화소 결합에 대한 처리 방법이다.
비닝은 이미지 읽기 방법이다. 이 방법에서, 이웃하는 화소가 추가되거나, 또는 이웃하는 화소가 추가된 후 평균이 계산되고, 합계 또는 평균은 출력을 위한 새로운 화소로서 사용된다. 이웃하는 화소가 추가되고 합계가 출력을 위한 새로운 화소로서 사용되는 방식은 합계 비닝(sum binning), 또는 추가 비닝(add binning), 또는 합계 화소 결합으로 언급되고; 이웃하는 화소가 추가되고 그 평균이 출력을 위한 새로운 화소로서 사용된 후에 평균이 계산되는 방식은 평균 비닝(average binning) 또는 평균 화소 결합으로서 언급된다. 비닝은 수평 방향으로 수행될 수 있거나, 또는 수직 방향으로 수행될 수 있거나, 또는 동시에 두 방향으로 수행될 수 있다. 이와 같이, 이미지 크기가 감소될 수 있고, 이미지 데이터의 양이 감소될 수 있다. 또한, 복수의 화소의 평균이 새로운 화소의 값을 나타내는 데 사용되기 때문에, 이미지 잡음을 억제하는 효과가 획득된다. 복수의 화소의 합계가 새로운 화소의 값을 나타내는 데 사용되는 경우, 이미지 크기가 감소될 수 있을 뿐만 아니라, 이미지의 휘도도 증가될 수 있다.
통상적인 비닝 방법이 도 3에 도시되어 있다. 비닝 규칙은 예로서 1/2 비닝을 사용하여 예시된다. R, G, 및 B는 각각 베이어 포맷의 이미지에서의 빨강 화소, 초록 화소, 및 파랑 화소를 나타낸다. 도면 참조의 편의를 위해, 도면에서 상단 숫자와 좌측 숫자는 각각 수평 좌표와 수직 좌표를 나타낸다. 도 3의 좌측 부분은 이미지 센서에서 출력되는 원래의 베이어 이미지이고, 도 3의 우측 부분은 1/2 비닝이 수평 방향과 수직 방향으로 수행된 베이어 이미지이다. 비닝 후에 획득된 좌표가 (0, 0)인 빨강 화소의 값은 원래의 이미지에서 좌표가 (0, 0), (0, 2), (2, 0), 및 (2, 2)인 네 개의 화소의 평균과 같다. 즉, [R(0, 0)+R(0, 2)+R(2, 0)+R(2, 2)]/4이다. 이 화소들 사이의 대응관계가 원과 화살표로 표시된다. 마찬가지로, 초록 화소로 표시된 정사각형, 초록 화소로 표시된 삼각형, 또는 좌측에서 그래프 표시가 없는 파랑 화소들에 대해서도 화소들의 평균은 비닝 후에 획득되고 우측에서의 이미지에서 동일한 표시를 갖는 화소의 값이다. 이와 같이, 2×2 영역은 원래의 이미지에서의 4×4 영역에 대한 비닝 조작이 수행된 후에 획득된다.
마찬가지로, 비닝 후에 획득되는 좌표가 (0, 0)인 빨강 화소의 값은 원래의 이미지에서 좌표가 (0, 0), (0, 2), (2, 0), 및 (2, 2)인 네 개의 화소의 합계와 같다. 즉, [R(0, 0)+R(0, 2)+R(2, 0)+R(2, 2)]이다. 비닝 후에 획득되는 초록 화소와 파랑 화소도 유사한 방식으로 처리될 수 있다.
이하에서는 수평 방향과 수직 방향에서의 비닝 규칙을 설명하기 위한 에로서 합계 화소 결합 모드(sum pixel combination mode)를 사용한다. 평균 화소 결합 모드의 규칙은 합계 화소 결합 모드의 규칙과 유사하다.
도 4는 수평 방향만으로의 1/2 비닝 조작의 개략 구성도이다. 우측 상의 각 화소의 값은 좌측의 원래의 이미지에서 수평으로 이웃하는 두 개의 화소의 합계이다. 즉, 비닝 후에 획득되는 첫 번째 빨강 화소의 값은 [R(0, 0)+R(2, 0)]이다. 비닝 후에 힉득되는 이미지의 수평 크기는 원래의 이미지의 1/2이고, 수직 크기는 변하지 않는다.
도 5는 수직 방향만으로의 1/2 비닝 조작의 개략 구성도를 도시한다. 우측의 각 화소의 값은 좌측의 원래의 이미지에서 수직으로 이웃하는 두 개의 화소들의 합계이다. 즉, 비닝 후에 획득되는 첫 번째 빨강 화소의 값은 [R(0, 0)+R(0, 2)]이다. 비닝 후에 힉득되는 이미지의 수직 크기는 원래의 이미지의 1/2이고, 수평 크기는 변하지 않는다.
또 다른 비율의 비닝 규칙은 1/2 비닝에서와 동일하고, 차이는 단지 보다 많은 화소들의 합계 또는 평균이 계산된다는 것이다. 구체적으로, 한 방향에서의 1/n 비닝의 경우, n개의 화소의 합계 또는 평균이 계산되고, 비닝 후에 획득되는 이미지이면서 그 방향에 있는 크기는 원래 크기의 1/n이다.
분명히, 카메라는 사진 또는 비디오를 촬영하기 위해 화소 결합 모드를 사용하지 않을 수도 있고, 비닝이 수행되지 않는 촬영 모드가 정상적인 촬영 모드로 언급될 수 있다.
실시예 1
본 발명의 본 실시예는 촬영 방법을 제공하며, 이하에서는 촬영 방법을 설명하기 위한 예로서 카메라를 장착한 스마트폰을 사용한다. 본 방법은 다음의 단계를 포함한다.
단계 S201. 카메라 턴온 명령을 수신한다. 카메라는 스마트폰의 전면 장착 카메라 또는 후면 장착 카메라일 수 있고, 이것은 본 발명에서 제한되지 않는다. 카메라 턴온 방식에 대해, 카메라는 터치스크린 상의 카메라 아이콘을 두드림으로써 사용자에 의해 턴온될 수 있거나, 또는 이동 전화기의 홈 버튼을 두 번 두드림으로써 턴온될 수 있거나, 또는 이동 전화기의 볼륨 버튼을 두 번 두드림으로써 턴온될 수 있다.
단계 S202. 수신된 카메라 턴온 명령에 기초하여, 카메라에 의해 수집되는 미리보기(preview) 이미지를 미리 보여주며, 여기서 미리보기 상태에서, 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드이다.
카메라의 이미지 센서는 평균 화소 결합 모드와 합계 화소 결합 모드와 같은 적어도 두 가지 조작 모드를 지원한다. 본 발명은 이미지 센서의 비닝(화소 결합) 방식에 제한을 두지 않으며, 비닝 방식은 1/n 비닝일 수 있고, n은 2보다 큰 양의 정수이거나 같다. 화소 결합이 수행되는 경우 각 화소의 웨이트(weight)에 대해서도 본 발명에서 한정되지 않는다.
카메라에 의해 캡쳐되는 미리보기 이미지가 평균 화소 결합 이미지로 미리보기되는 경우, 미리보기 이미지의 이미지 데이터의 양이 감소된다. 이와 같이, 이미지를 미리보기하는 속도가 향상될 뿐만 아니라, 이미지 잡음 또한 감소될 수 있다.
단계 S302. 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로고 검출되는 경우 미리보기 이미지를 촬영하며, 여기서 미리보기 이미지가 촬영되고 있는 경우, 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다.
미리보기 이미지 내의 각 화소는 대응되는 휘도를 갖고, 그 휘도는 색상(hue)에 관련되지 않는다. 동일한 휘도에 대해 색상은 빨강일 수 있거나, 또는 초록일 수 있다. 화소의 휘도값은 0 내지 255이고, 휘도 값이 255에 가까운 화소의 휘도는 비교적 높으며, 값이 0에 가까운 휘도는 비교적 낮다.
미리보기 이미지 내의 적어도 하나의 화소의 휘도의 분석에 의해, 촬영 환경이 저휘도 시나리오인 것으로 검출되고, 카메라의 이미지 센서는 합계 화소 결합 모드로 미리보기 이미지를 촬영한다. 촬영 환경의 휘도가 30 룩스보다 작은 시나리오가 저휘도 시나리오로서 고려될 수 있다. 예를 들어, 극장, 술집, 또는 KTV와 같은 촬영 시나리오가 저휘도 시나리오로서 고려될 수 있다. 다른 보조 장치가 없으면, 이러한 시나리오에서 촬영이 수행되는 경우, 빛이 매우 낮고 카메라 내로 허용되는 빛의 양이 적기 때문에, 선명한 인물 사진이 촬영될 수 없다. 그러나, 합계 화소 결합 모드에서 촬영이 수행되는 경우, 복수의 화소의 합계가 새로운 화소의 값을 나타내는 데 사용되기 때문에, 촬영된 이미지의 휘도가 증가하고, 적은 휘도 시나리오에서의 촬영 효과가 개선될 수 있다. 1/2 비닝 모드가 예로서 사용된다. 새로운 화소의 값은 네 개의 원래의 화소의 합계이고, 신호 값은 거의 네 배로 증가된다. 따라서, 이미지 저조도에서 촬영될 수 없는 문제가 해결될 수 있다.
선택적으로, 미리보기 이미지 내의 적어도 하나의 화소의 휘도의 분석에 의해, 촬영 환경이 저휘도 시나리오인 것으로 검출하는 것은 다음의 방식으로 구현될 수 있다. 미리보기 이미지 내의 화소들의 평균휘도가 주어진 임계값보다 작은 경우, 촬영 환경이 저휘도 시나리오로서 고려된다. 미리 설정된 조건이 임계값일 수 있거나, 또는 범위일 수 있다.
선택적으로, 미리보기 이미지를 촬영하는 것은 구체적으로 사진이나 비디오 중 적어도 하나를 획득하기 위해 미리보기 이미지를 촬영하는 것이다. 카메라는 정적 이미지를 촬영할 수 있거나, 또는 동적 이미지를 촬영할 수 있거나, 또는 정적 이미지와 동적 이미지를 혼합하여 촬영할 수 있다.
선택적으로, 촬영된 이미지가 사용자 경험을 만족할 수 있도록, 단말은 촬영된 이미지에 대한 백색화(whitening), 잡음제거(denoising), 눈 미백(eye brightening), 또는 얼굴 축소화(face slimming) 들 중 적어도 하나를 수행한다.
예를 들어, 사용자는 자화상(self-portrait)을 촬영하기 위해 전면 장착 카메라를 사용하고, 빛이 비교적 낮은 경우, 비교적 밝은 얼굴 이미지가 합계 화소 결합 모드에서 촬영함으로써 획득될 수 있다. 뷰티(beauty) 처리가 이미지에 대해 수행된다. 즉, 사용자에 의해 기대되는 자화상이 획득될 수 있도록, 백색화, 눈 미백, 및 얼굴 축소화와 같은 조작이 수행된다.
선택적으로, 저조도에서, 합계 화소 결합 모드에서의 촬영은 또한 야경(night scene) 모드로서 언급될 수도 있다. 이미지 센서의 조작 모드가 평균 화소 결합 모드에서 합계 화소 결합 모드로 전환되는 경우, 사용자는 촬영 모드가 전환된 것으로 상기될 수 있다. 이와 다르게, 촬영 환경이 저조도 환경인 것으로 검출되는 경우, 사용자는 평균 화소 결합 모드에서 합계 화소 결함 모드로 촬영 모드를 수동으로 전환시키도록 상기될 수 있다.
본 발명의 본 실시예에서 제공되는 촬영 방법에서, 촬영 환경이 저조도 환경인 것으로 검출되는 경우, 촬영 이미지의 휘도가 합계 화소 결합 모드에서 촬영함으로써 증가될 수 있고, 이미지가 저조도에서 촬영될 수 없다는 문제가 해결될 수 있다.
본 발명의 본 실시예는 다른 촬영 방법을 제공한다. 촬영 환경이 저휘도 환경인 곳에서 촬영하는 시나리오인지를 결정하는 것은 이미지 센서의 ISO를 검출함으로써 구현되고, 다른 촬영 단계는 상기 실시예에서 설명된 전술한 촬영 방법에서의 것과 유사하다. 카메라에 의해 캡쳐된 미리보기 이미지는 이미지 센서의 빛 감도 ISO가 미리 설정된 값보다 큰 것으로 검출되는 경우에 촬영되고, 미리보기 이미지가 촬영 중인 경우, 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다.
빛 감도 ISO에 대해, 노출값이 동일한 경우, 조리개의 값이 변하지 않으면, 보다 높은 빛 감도 ISO가 선택되는 경우, 동일한 노출은 보다 높은 셔터 속도에서 획득될 수 있다. 반대로, 셔터 속도가 변하지 않으면, 정확한 노출은 보다 작은 조리개를 사용하여 일정하게 획득될 수 있다. 따라서, 촬영이 저조도에서 수행되는 경우, 비교적 높은 빛 감도 ISO가 통상적으로 선택될 수 있다. 일반적으로, 이동 전화기의 ISO 값은 200 내지 1600이다. ISO의 미리 설정된 값은 800으로 설정될 수 있거나, 또는 1000으로 설정될 수 있다.
실시예 2
도 6은 본 발명의 실시예에 따른 단말(301)의 개략적인 구조도이다. 단말(301)은 프로세서(304), 디스플레이(303), 및 카메라(302)를 포함한다. 단말(301)은 실시예 1에서의 방법을 실행할 수 있다. 이하에서는 본 발명의 본 실시예를 설명하기 위해 단말(301)은 스마트폰인 것을 예로서 사용한다.
카메라(302)의 이미지 센서는 평균 화소 결합 모드와 합계 화소 결합 모드와 같은 적어도 두 가지 조작 모드를 지원한다. 본 발명은 이미지 센서의 비닝(화소 결합) 방식에 제한을 두지 않으며, 비닝 방식은 1/n 비닝일 수 있고, n은 2보다 큰 양의 정수이거나 같다. 화소 결합이 수행되는 경우 각 화소의 웨이트(weight)에 대해서도 본 발명에서 한정되지 않는다.
사용자는 터치스크린 상의 카메라 아이콘을 두드림으로써 카메라를 턴온시킬 수 있거나, 또는 이동 전화기의 홈 버튼을 두 번 두드리거나 또는 이동 전화기의 볼륨 버튼을 두 번 두드림으로써 카메라를 턴온시킬 수 있다.
카메라가 턴온된 후, 디스플레이는 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성되며, 여기서 미리보기 상태에서, 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드이다.
이동 전화기의 디스플레이는 또한 스크린으로서 언급될 수도 있다. 스크린 유형은 주로 온셀(On-Cell) 유형, 인셀(In-Cell) 유형, 및 OGS(One Glass Solution) 유형/TOL(Touch on Lens) 유형이다. 인셀은 액정 디스플레이(liquid crystal screen)의 액정 화소 내에 터치 기능을 내장한 것이다. 온셀은 컬러 필터 기판과 스크린의 편광기(polarizer) 사이의 위치에 터치스크린을 내장하는 방법이다. 즉, 터치 센서는 액정 패널 상에 구성된다. OGS 기술/TOL 기술은 덮개 유리에 터치스크린을 통합하고, 덮개 유리의 내측면에 ITO(Indium Tin Oxide) 필름의 전도층을 도금하며, 필름 코팅을 직접 수행하고 덮개 유리 위를 포토에칭하는 것이다.
프로세서는 미리보기 상태에서 미리보기 이미지 내의 적어도 하나의 화소의 휘도를 분석하도록 구성된다. 프로세서는 단일 코어 프로세서일 수 있거나, 또는 다중 코어 프로세서일 수 있다.
카메라는, 프로세서가 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 결정하는 경우 미리보기 이미지를 촬영하도록 구성되며, 여기서 미리보기 이미지가 촬영되고 있는 경우, 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다.
미리보기 상태에서 미리보기 이미지 내의 적어도 하나의 화소의 휘도를 분석하는 방법과 미리 설정된 조건을 결정하는 방법은 실시예 1에서의 것과 유사하다.
선택적으로, 카메라가 미리보기 이미지를 촬영하도록 구성되는 것은 구체적으로 카메라가 사진이나 비디오 중 적어도 하나를 획득하기 위해 미리보기 이미지를 촬영하도록 구성되는 것이다. 카메라는 정적 이미지를 촬영하도록 구성될 수 있거나, 또는 동적 이미지를 촬영하도록 구성될 수 있거나, 또는 정적 이미지와 동적 이미지를 혼합하여 촬영하도록 구성될 수 있다.
선택적으로, 프로세서는 촬영된 이미지에 대한 백색화, 잡음제거, 눈 미백, 또는 얼굴 축소화 들 중 적어도 하나를 수행하도록 추가로 구성된다. 단말은, 촬영된 이미지가 사용자 경험을 만족할 수 있도록, 촬영된 이미지에 대한 백색화, 잡음제거, 눈 미백, 또는 얼굴 축소화 들 중 적어도 하나를 수행한다. 백색화, 잡음제거, 눈 미백, 또는 얼굴 축소화는 종래 기술에서 통상적으로 사용되는 뷰티 알고리즘일 수 있으며, 여기에서는 상세히 설명되지 않는다.
선택적으로, 저조도에서, 합계 화소 결합 모드에서의 촬영은 또한 야경 모드로서 언급될 수도 있다. 이미지 센서의 조작 모드가 평균 화소 결합 모드에서 합계 화소 결합 모드로 전환되는 경우, 사용자는 촬영 모드가 전환된 것으로 상기될 수 있다. 사용자를 상기시키는 방식은 사용자를 상기시키기 위해 디스플레이 상의 사용자 인터페이스(UI)를 사용하는 방식일 수 있다. 다르게는, 촬영 환경이 저조도 환경인 것으로 검출되는 경우, 사용자는 평균 화소 결합 모드에서 합계 화소 결함 모드로 촬영 모드를 수동으로 전환시키도록 상기될 수 있다. 가끔, 사용자 인터페이스는 또한 UI 또는 UI 인터페이스로도 직접 언급될 수 있다.
본 발명의 본 실시예에서 제공되는 단말에 따르면, 프로세서가 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 결정하는 경우, 이미지 센서의 조작 모드가 합계 화소 결합 모드로 전환된다. 이러한 모드에서 촬영된 이미지의 경우, 촬영된 이미지의 휘도가 증가될 수 있고, 이미지가 저조도에서 촬영될 수 없다는 문제가 해결될 수 있다.
본 발명의 본 실시예에서 제공되는 다른 단말에서, 그 단말의 프로세서는 미리보기 상태에서 이미지 센서의 빛 감도 ISO를 검출하도록 구성된다. 단말의 카메라는, 프로세서가 이미지 센서의 빛 감도 ISO가 미리 설정된 값보다 더 큰 것으로 검출하는 경우, 미리보기 이미지를 촬영하도록 구성되며, 여기서 미리보기 이미지가 촬영 중인 경우, 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다. 단말은 실시예 1에서의 촬영 방법을 실행하며, 이 촬영 방법은 촬영 환경을 결정하기 위해 빛 감도 ISO를 사용하여 수행된다.
빛 감도 ISO의 미리 설정된 값의 선택은 실시예 1에서의 설명과 유사하다.
실시예 3
본 발명의 본 실시예는 촬영 장치를 제공하며, 이 촬영 장치는 실시예 1에서 설명된 촬영 방법을 실행할 수 있다.
이 장치는, 카메라 턴온 명령을 수신하도록 구성된 수신 유닛; 수신 유닛에 의해 수신된 카메라 턴온 명령에 기초하여, 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성된 미리보기 유닛 ― 미리보기 상태에서, 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드임 ―; 및 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로고 검출되는 경우 미리보기 이미지를 촬영하도록 구성된 촬영 유닛을 포함하며, 여기서 미리보기 이미지가 촬영되고 있는 경우, 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드이다.
본 발명의 본 실시예는 하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체를 더 제공하며, 여기서 하나 이상의 프로그램은 명령을 포함하고, 디스플레이 및 복수의 애플리케이션을 포함하는 휴대용 전자 장치에 의해 실행되는 경우, 그 명령은 휴대용 전자 장치가 실시예 1에서 설명된 촬영 방법을 실행할 수 있도록 한다.
마지막으로, 전술한 실시예는 본 발명의 기술적 해결수단의 예를 설명하기 위한 것이지 본 발명을 한정하기 위한 것이 아니라는 것이다. 본 발명 및 본 발명의 이점이 전술한 실시예를 참조하여 본 발명을 상세하게 설명되었지만, 당업자는 여전히, 본 발명의 청구범위를 벗어남이 없이, 전술한 실시예에서 설명된 기술적 해결수단에 수정을 가하거나 그 기술적 특징의 일부를 동등물로 대체할 수 있음을 알아야 한다.

Claims (14)

  1. 촬영 방법으로서,
    카메라 턴온(turn-on) 명령을 수신하는 단계;
    상기 수신된 카메라 턴온 명령에 기초하여, 상기 카메라에 의해 수집되는 미리보기(preview) 이미지를 미리 보여주는 단계 ― 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드(average pixel combination mode)임 ―; 및
    상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 검출하는 경우 상기 미리보기 이미지를 촬영하는 단계
    를 포함하고,
    상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드(sum pixel combination mode)인,
    촬영 방법.
  2. 제1항에 있어서,
    상기 미리보기 이미지를 촬영하는 단계는 구체적으로 사진 또는 비디오 중 적어도 하나를 획득하기 위해 상기 미리보기 이미지를 촬영하는 단계인,
    촬영 방법.
  3. 제2항에 있어서,
    상기 미리보기 이미지를 촬영하는 단계 후에, 촬영된 이미지에 대해 백색화(whitening), 잡음제거(denoising), 눈 미백(eye brightening), 또는 얼굴 축소화(face slimming) 중 적어도 하나를 수행하는 단계
    를 더 포함하는 촬영 방법.
  4. 제1항에 있어서,
    상기 미리보기 이미지를 촬영하는 단계 후에, 상기 카메라의 이미지 센서의 조작 모드를 상기 평균 화소 결합 모드로 전환시키는 단계
    를 더 포함하는 촬영 방법.
  5. 단말로서,
    프로세서, 디스플레이, 및 카메라를 포함하고, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드 및 합계 화소 결합 모드를 포함하며,
    수신된 카메라 턴온 명령에 기초하여, 상기 디스플레이는 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성되고, 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 상기 평균 화소 결합 모드이며,
    상기 프로세서는 상기 미리보기 상태에서 상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도를 분석하도록 구성되고,
    상기 카메라는, 상기 프로세서가 상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 결정하는 경우, 상기 미리보기 이미지를 촬영하도록 구성되며,
    상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 상기 합계 화소 결합 모드인,
    단말.
  6. 제5항에 있어서,
    상기 카메라가 상기 미리보기 이미지를 촬영하도록 구성되는 것은 구체적으로 사진 또는 비디오 중 적어도 하나를 획득하기 위해 상기 미리보기 이미지를 촬영하도록 구성되는 것인,
    단말.
  7. 제6항에 있어서,
    상기 프로세서는 촬영된 이미지에 대해 백색화, 잡음제거, 눈 미백, 또는 얼굴 축소화 중 적어도 하나를 수행하도록 추가로 구성되는,
    단말.
  8. 촬영 장치로서,
    카메라 턴온 명령을 수신하도록 구성된 수신 유닛;
    상기 수신 유닛에 의해 수신되는 상기 카메라 턴온 명령에 기초하여, 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성된 미리보기 유닛 ― 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드임 ―; 및
    상기 미리보기 이미지 내의 적어도 하나의 화소의 휘도가 미리 설정된 조건보다 작은 것으로 검출하는 경우 상기 미리보기 이미지를 촬영하도록 구성된 촬영 유닛
    을 포함하고,
    상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드인,
    촬영 장치.
  9. 제8항에 있어서,
    상기 촬영 유닛은 구체적으로 사진 또는 비디오 중 적어도 하나를 획득하기 위해 상기 미리보기 이미지를 촬영하도록 구성되는,
    촬영 장치.
  10. 제9항에 있어서,
    처리 유닛을 더 포함하며,
    상기 처리 유닛은 촬영된 이미지에 대해 백색화, 잡음제거, 눈 미백, 또는 얼굴 축소화 중 적어도 하나를 수행하도록 구성되는,
    촬영 장치.
  11. 제8항 내지 제10항 중 어느 한 항에 있어서,
    스위칭 유닛을 더 포함하며,
    상기 스위칭 유닛은 상기 카메라의 이미지 센서의 조작 모드를 상기 평균 화소 결합 모드로 전환시키도록 구성되는,
    촬영 장치.
  12. 촬영 방법으로서,
    카메라 턴온 명령을 수신하는 단계;
    상기 수신된 카메라 턴온 명령에 기초하여, 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주는 단계 ― 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드임 ―; 및
    상기 이미지 센서의 빛 감도 ISO가 미리 설정된 값보다 더 큰 것으로 검출하는 경우 상기 미리보기 이미지를 촬영하는 단계
    를 포함하고,
    상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 합계 화소 결합 모드인,
    촬영 방법.
  13. 단말로서,
    프로세서, 디스플레이, 및 카메라를 포함하고, 상기 카메라의 이미지 센서의 조작 모드는 평균 화소 결합 모드 및 합계 화소 결합 모드를 포함하며,
    수신된 카메라 턴온 명령에 기초하여, 상기 디스플레이는 상기 카메라에 의해 수집되는 미리보기 이미지를 미리 보여주도록 구성되고, 미리보기 상태에서, 상기 카메라의 이미지 센서의 조작 모드는 상기 평균 화소 결합 모드이며,
    상기 프로세서는 상기 미리보기 상태에서 상기 이미지 센서의 빛 감도 ISO를 검출하도록 구성되고,
    상기 카메라는, 상기 프로세서가 상기 이미지 센서의 빛 감도 ISO가 미리 설정된 값보다 더 큰 것으로 결정하는 경우, 상기 미리보기 이미지를 촬영하도록 구성되며,
    상기 미리보기 이미지가 촬영되고 있는 경우, 상기 카메라의 이미지 센서의 조작 모드는 상기 합계 화소 결합 모드인,
    단말.
  14. 하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
    상기 하나 이상의 프로그램은 명령을 포함하고, 디스플레이 및 복수의 애플리케이션을 포함하는 휴대용 전자 장치에 의해 실행되는 경우, 상기 명령은 상기 휴대용 전자 장치가 청구항 1 내지 청구항 4 또는 청구항 12 중 어느 한 항에 따른 방법을 실행할 수 있도록 하는,
    컴퓨터 판독가능 저장 매체.
KR1020177027468A 2015-11-25 2015-11-25 촬영 방법, 촬영 장치, 및 단말 KR101946436B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2015/095557 WO2017088127A1 (zh) 2015-11-25 2015-11-25 一种拍照方法、拍照装置和终端

Publications (2)

Publication Number Publication Date
KR20170123661A KR20170123661A (ko) 2017-11-08
KR101946436B1 true KR101946436B1 (ko) 2019-02-11

Family

ID=58762857

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020177027468A KR101946436B1 (ko) 2015-11-25 2015-11-25 촬영 방법, 촬영 장치, 및 단말

Country Status (6)

Country Link
US (1) US10742889B2 (ko)
EP (1) EP3358819B1 (ko)
JP (1) JP6461372B2 (ko)
KR (1) KR101946436B1 (ko)
CN (1) CN107079083B (ko)
WO (1) WO2017088127A1 (ko)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016172619A1 (en) 2015-04-23 2016-10-27 Apple Inc. Digital viewfinder user interface for multiple cameras
US9912860B2 (en) 2016-06-12 2018-03-06 Apple Inc. User interface for camera effects
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US10594958B2 (en) * 2017-10-20 2020-03-17 GM Global Technology Operations LLC Camera imager binning technique
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
CN109048862A (zh) * 2018-09-03 2018-12-21 天津永兴泰科技股份有限公司 一种基于机器视觉的零部件分拣机器人
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
CN111246128B (zh) * 2018-11-29 2022-09-13 北京图森智途科技有限公司 一种像素合并方法、成像设备、图像传感器及汽车
KR102669938B1 (ko) * 2019-01-09 2024-05-27 삼성전자주식회사 이미지 처리 프로세서, 이미지 처리 시스템 및 이미지 처리 프로세서의 동작 방법
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
CN110661972B (zh) * 2019-09-27 2021-02-23 维沃移动通信有限公司 图像处理方法、装置、电子设备和介质
KR20210090476A (ko) * 2020-01-10 2021-07-20 삼성전자주식회사 단일 카메라로 줌 시나리오에서 화질 향상 방법과 이를 포함하는 전자장치
US11054973B1 (en) 2020-06-01 2021-07-06 Apple Inc. User interfaces for managing media
KR20220014150A (ko) * 2020-07-28 2022-02-04 삼성전자주식회사 이미지 센서와 이미지 시그널 프로세서를 포함하는 전자 장치 및 그의 방법
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
CN112198703B (zh) * 2020-10-16 2022-06-10 武汉华星光电技术有限公司 显示面板以及目标物色彩判断方法
CN112437237B (zh) * 2020-12-16 2023-02-03 维沃移动通信有限公司 拍摄方法及装置
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
CN113556519A (zh) * 2021-07-01 2021-10-26 Oppo广东移动通信有限公司 图像处理方法、电子设备和非易失性计算机可读存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130329075A1 (en) * 2012-06-08 2013-12-12 Apple Inc. Dynamic camera mode switching

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007508788A (ja) 2003-10-14 2007-04-05 トムソン ライセンシング ビットの正確な快適ノイズの付加方法及び装置
JP2006041862A (ja) 2004-07-27 2006-02-09 Kyocera Corp 撮像装置およびその画像読出方法
KR101110009B1 (ko) 2004-02-27 2012-02-06 교세라 가부시키가이샤 촬상 장치 및 화상 생성 방법
US7697049B1 (en) 2005-05-04 2010-04-13 Samsung Electrics Co., Ltd. Better SNR ratio for downsized images using interlaced mode
CN101146234B (zh) 2006-09-12 2010-12-01 中兴通讯股份有限公司 流媒体图像处理的方法
JP4402710B2 (ja) * 2007-09-18 2010-01-20 オリンパス株式会社 撮像装置
US7989745B2 (en) * 2007-10-01 2011-08-02 Nikon Corporation Solid-state imaging device with focus detection and electronic camera with focus adjustment
JP5256725B2 (ja) * 2007-12-25 2013-08-07 株式会社ニコン 撮像装置
JP2011015205A (ja) 2009-07-02 2011-01-20 Fujifilm Corp デジタルカメラ及び固体撮像素子の駆動方法
JP5321348B2 (ja) 2009-08-21 2013-10-23 日本電気株式会社 撮影装置、撮影方法及び撮影プログラム
US8558915B2 (en) * 2009-12-22 2013-10-15 Samsung Electronics Co., Ltd. Photographing apparatus and method
CN101778220A (zh) * 2010-03-01 2010-07-14 华为终端有限公司 一种自动切换夜景模式的方法和摄像设备
US20110267495A1 (en) * 2010-04-29 2011-11-03 Lee Warren Atkinson Automatic Pixel Binning
KR101822655B1 (ko) 2011-06-21 2018-01-29 삼성전자주식회사 카메라를 이용한 물체 인식 방법 및 이를 위한 카메라 시스템
KR101900097B1 (ko) * 2012-07-30 2018-09-20 삼성전자주식회사 이미지 캡처 방법 및 이미지 캡처 장치
JP5877277B2 (ja) * 2013-04-26 2016-03-02 富士フイルム株式会社 撮像装置及び画像表示方法
CN104427254B (zh) * 2013-09-10 2019-01-15 联想(北京)有限公司 感光控制方法及感光控制装置
JP6201938B2 (ja) * 2014-09-09 2017-09-27 カシオ計算機株式会社 画像補正装置、画像補正方法及びプログラム
CN104793742B (zh) 2015-04-09 2017-11-24 广东欧珀移动通信有限公司 拍摄预览方法及装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130329075A1 (en) * 2012-06-08 2013-12-12 Apple Inc. Dynamic camera mode switching

Also Published As

Publication number Publication date
US20180152611A1 (en) 2018-05-31
WO2017088127A1 (zh) 2017-06-01
CN107079083B (zh) 2020-11-06
KR20170123661A (ko) 2017-11-08
JP6461372B2 (ja) 2019-01-30
EP3358819B1 (en) 2021-09-15
US10742889B2 (en) 2020-08-11
EP3358819A1 (en) 2018-08-08
JP2018523323A (ja) 2018-08-16
EP3358819A4 (en) 2018-10-10
CN107079083A (zh) 2017-08-18

Similar Documents

Publication Publication Date Title
KR101946436B1 (ko) 촬영 방법, 촬영 장치, 및 단말
KR102240659B1 (ko) 시야의 가리움에 기초한 카메라 선택
JP6445219B2 (ja) デジタルカメラ及びデジタルカメラの表示方法
US10855910B2 (en) Electronic device, method, and program
CN108028895B (zh) 有缺陷的图像传感器元件的校准
JP5802858B2 (ja) 撮像装置、画像処理装置、画像処理方法及びプログラム
US9667877B2 (en) Imaging device and imaging method
EP2720455B1 (en) Image pickup device imaging three-dimensional moving image and two-dimensional moving image, and image pickup apparatus mounting image pickup device
US20170163871A1 (en) Imaging control device, imaging device, imaging control method, and program
CN107704798B (zh) 图像虚化方法、装置、计算机可读存储介质和计算机设备
US20190335110A1 (en) Imaging element and imaging apparatus
TWI446085B (zh) 攝像裝置、自動聚焦方法及記錄媒體
US11347978B2 (en) Image processing apparatus, image processing method, and image processing system
CN103167183B (zh) 一种半透明取景框处理方法、系统及移动终端
KR20120004092A (ko) 카메라 모듈 및 그의 노출 제어 방법
KR100595525B1 (ko) 모바일 카메라의 미리보기 영상 개선 장치 및 방법
JP5448799B2 (ja) 表示制御装置及び表示制御方法
KR101385963B1 (ko) 칼라 보정 기능을 갖는 이미지 처리 장치 및 칼라 보정방법
JP2014135589A (ja) 画像処理装置、その制御方法、および制御プログラム
JP2010016673A (ja) 撮像装置
JP2013080138A (ja) 測光装置および撮像装置
JP2015228617A (ja) 合焦枠表示制御装置、合焦枠表示制御方法及び撮影装置
KR20130096345A (ko) 이미지를 광량상태에 따라 보정하는 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant