KR100955577B1 - 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법 - Google Patents

이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법 Download PDF

Info

Publication number
KR100955577B1
KR100955577B1 KR1020080008778A KR20080008778A KR100955577B1 KR 100955577 B1 KR100955577 B1 KR 100955577B1 KR 1020080008778 A KR1020080008778 A KR 1020080008778A KR 20080008778 A KR20080008778 A KR 20080008778A KR 100955577 B1 KR100955577 B1 KR 100955577B1
Authority
KR
South Korea
Prior art keywords
image data
image
information
evaluation
chip
Prior art date
Application number
KR1020080008778A
Other languages
English (en)
Other versions
KR20090082811A (ko
Inventor
노요환
Original Assignee
엠텍비젼 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠텍비젼 주식회사 filed Critical 엠텍비젼 주식회사
Priority to KR1020080008778A priority Critical patent/KR100955577B1/ko
Priority to US12/352,780 priority patent/US20090189985A1/en
Publication of KR20090082811A publication Critical patent/KR20090082811A/ko
Application granted granted Critical
Publication of KR100955577B1 publication Critical patent/KR100955577B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration

Abstract

이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법을 개시한다. 이미지 처리 장치는 이미지 센서로부터 입력된 외부 영상 신호를 인코딩하여 인코딩된 이미지 데이터를 생성하는 인코딩부와, 상기 외부 영상 신호의 분석 정보에 의하여 이미지 데이터의 평가를 수행하여 평가 정보를 생성하는 평가부 및 상기 이미지 데이터의 평가 정보를 외부로 전송하기 위한 인터페이스부를 포함한다.
Figure R1020080008778
ISP (Image Signal Processor), 평가, 인코딩

Description

이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법{Image processing device for providing image quality information and method thereof}
본 발명은 이미지 처리에 관한 것으로서, 특히 이미지 평가 결과에 기초하여 사용자에게 고품질의 이미지 데이터를 제공할 수 있는 이미지 처리 장치 및 방법에 관한 것이다.
일반적으로, 이미지 처리 장치는 이미지 센서(Image sensor) 및 상기 이미지 센서로부터 외부 영상에 대응하는 전기 신호(raw data)를 입력 받아 상기 전기 신호에 대응하는 YUV 데이터 또는 인코딩된 이미지 데이터를 생성하여 출력하는 이미지 시그널 프로세서(ISP: Image Signal Processor)를 포함하여 이루어진다.
이미지 처리 장치는 휴대용 단말기에 장착됨으로써, 휴대용 단말기가 촬상 장치로서 기능할 수 있도록 한다. 즉, 이미지 처리 장치는 휴대 전화기, PDA, MP3 플레이어 등의 휴대용 단말기에 구비되어 다양한 장치에서 외부 영상을 전자적인 데이터로 변환하여 저장할 수 있도록 구현된다.
이미지 센서는 일반적으로, CCD(Charge Coupled Device)형 이미지 센서 또 는 시모스(CMOS) 제조 기술로 생산되는 시모스(CMOS) 이미지 센서 등이 사용된다.
도 1은 이미지 처리 장치를 구비하는 휴대용 단말기의 개략적인 구조를 나타낸다.
도 1을 참조하면, 이미지 처리 장치를 구비하는 휴대용 단말기는 이미지 센서(101), ISP(103), 백엔드 칩(Back-end chip)(105) 및 디스플레이부를 포함하여 이루어진다. 또한, 휴대용 단말기는 휴대용 단말기 본래의 동작을 제어하기 위한 메인 칩을 더 포함하여 구성될 수 있으나, 본 발명과 관련 없는 구성의 설명은 생략하기로 한다.
이미지 센서(101)는 광학 정보를 전기 신호로 변화하는 장치로서, 베이어 패턴(Bayer Pattern)을 가지는 센서일 수 있으며, 렌즈를 통하여 입력된 빛에 양에 대응하는 전기 신호(raw data)를 출력한다.
ISP(103)는 이미지 센서(101)로부터 입력된 전기신호를 YUV 값으로 변환하여 백엔드 칩(105)으로 제공한다. 또한, ISP(103)는 YUV 값으로 변환된 데이터를 인코딩하여 벡엔드 칩(105)으로 제공 할 수 있다.
백엔드 칩(105)은 ISP(103)로 제어 신호 등을 전송하고, ISP(103)로부터 입력되는 이미지 데이터를 메모리에 저장하거나 이를 디코딩하여 디스플레이부(107)에 디스플레이하는 기능을 수행한다.
상기한 바와 같이, 종래의 이미지 처리 장치는 이미지 센서(101)에 의하여 촬상된 영상 신호를 실시간으로 처리하여 백엔드 칩(105)으로 출력한다.
백엔드 칩(105)은 ISP(103)로부터 입력되는 이미지 데이터에 대한 평가 또는 이미지 처리에 대한 오류 체크를 수행하여야만 한다. 또한, 백엔드 칩(105)은 화질 판단을 위한 부가 정보(노이즈 정도, 포커싱 정도, 밝기, 색 표현 정보)를 생성하여야 하기 때문에, 상당한 부하가 발생하게 된다.
또한, 종래의 ISP(103)는 백엔드 칩(105)으로부터 캡쳐 명령을 수신하면, 3 내지 4 장의 프레임을 백엔드 칩(105)으로 제공하고, 이 중 타이밍 적으로 안정된 프레임을 선택하여 저장하도록 한다.
그러나, 이러한 방법은 가장 좋은 화질의 이미지 데이터가 저장되는 것이 아니라, 가장 안정적인 타이밍에 획득된 이미지 데이터가 저장되는 것이다.
여기서, 가장 안정적인 타이밍이란, 예를 들어, ISP(103)가 캡쳐 명령을 수신한 후, 임의의 시간 경과 후에 촬상된 이미지 데이터를 안정적인 타이밍에 촬상된 것으로 결정하는 것일 수 있다.
결국, 종래의 이미지 처리 장치는 가장 안정적인 타이밍에 획득되었으나, 해당 타이밍에 화상이 흔들리거나 촬상 대상이 움직인 경우에도 이때의 이미지 데이터를 저장하게 되는 문제가 있다.
따라서, 본 발명은 백엔드 칩에 과중한 부하 발생을 일으키지 않으면서도 사용자가 보다 고 품질의 이미지를 선택하여 저장할 수 있도록 하기 위한 이미지 평가 결과를 제공하는 이미지 처리 장치 및 방법을 제공하고자 한다.
또한, 본 발명은 미리 설정된 모드에 따라서 이미지 데이터의 다양한 평가 결과 값을 사용자에게 제공함으로써, 사용자의 기호에 따라서 촬상된 이미지를 선택할 수 있도록 하기 위한 이미지 처리 장치 및 방법을 제공하고자 한다.
또한, 본 발명은 기존 백엔드 칩의 소프트웨어 변경 만으로도 사용자에게 다양한 이미지 평가 정보를 제공할 수 있도록 하기 위한 이미지 평가 결과를 제공하는 이미지 처리 장치 및 방법을 제공하고자 한다.
상기한 기술적 과제를 해결하기 위한 본 발명의 실시예는, 이미지 센서로부터 입력된 외부 영상 신호를 인코딩하여 인코딩된 이미지 데이터를 생성하는 인코딩부; 상기 외부 영상 신호의 분석 정보에 의하여 이미지 데이터의 평가를 수행하여 평가 정보를 생성하는 평가부; 상기 이미지 데이터의 평가 정보를 상기 백엔드 칩으로 전송하기 위한 인터페이스부; 및 상기 인코딩된 이미지 데이터를 저장하기 위한 저장부를 포함하고, 상기 인터페이스부는 상기 저장부에 저장된 이미지 데이터들 중 상기 백엔드 칩에 의하여 요청되는 이미지 데이터를 상기 백엔드 칩으로 전송하는 이미지 신호 처리 장치를 제공한다.
또한, 본 발명의 다른 실시예는, 이미지 센서로부터 입력된 외부 영상 신호의 분석 정보를 수집하는 단계와, 상기 수집된 분석 정보에 기초하여 이미지 데이 터를 평가하는 단계 및 이미지 데이터의 평가 정보를 백엔드 칩으로 전송하는 단계를 포함하는 이미지 데이터 처리 방법을 제공한다.
또한, 본 발명의 또 다른 실시예는, 이미지 시그널 프로세서로 캡쳐 명령을 전송하는 단계와, 상기 이미지 시그널 프로세서로부터 복수의 이미지 데이터 각각에 대한 평가 정보를 수신하는 단계 및 상기 수신된 평가 정보에 기초하여 어느 하나의 이미지 데이터를 저장하는 단계를 포함하는 이미지 데이터 처리 방법을 제공한다.
상기한 기술적 과제를 해결하기 위한 본 발명의 또 다른 실시예에 따르면, 상기 이미지 데이터를 평가하는 단계는, 상기 수집된 분석 정보의 각 항목에 가중치를 부여하고, 상기 가중치가 부여된 분석 정보의 결과 값을 산출하고, 상기 산출된 결과 값에 따라서 평가 등급을 결정하는 것을 포함한다.
본 발명에 따르면, 종래 이미지 처리 장치의 구조적인 제한을 극복하고, 보다 정확하고 고 품질의 이미지를 사용자가 캡쳐하여 저장할 수 있다.
또한, 본 발명을 휴대용 단말기에 적용하면, 백엔드 칩에 과중한 부하 발생을 일으키지 않으면서도 사용자가 보다 고 품질의 이미지를 선택하여 저장할 수 있다.
또한, 본 발명에 따르면, 기존 백엔드 칩의 소프트웨어 변경 만으로도 사용자에게 다양한 이미지 평가 정보를 제공할 수 있다.
이하 첨부된 도면을 참조하여 본 발명의 실시예를 설명한다. 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 발명의 기본 적인 원리는 이미지 데이터의 캡쳐 명령이 입력되면, 이미지 센서로부터 입력된 복수의 이미지 프레임 각각에 대한 평가를 수행하고, 수행된 평가결과를 백엔드 칩으로 제공함으로써, 평가 결과 값에 기초하여 사용자가 저장될 이미지 데이터를 선택하거나 가장 좋은 평가 결과 값을 갖는 이미지 데이터를 저장하도록 하는 것이다.
이하, 본 발명의 기본 적인 원리에 따른 구체적인 실시예를 첨부된 도면을 참조하여 상세히 설명하기로 한다.
도 2는 본 발명의 실시예에 따른 이미지 평가 결과를 제공하는 이미지 처리 장치의 구성을 나타낸다.
도 2에 도시된 바와 같이, 이미지 처리 장치는 이미지 센서(201) 및 ISP(203)을 포함한다. 상기 이미지 처리 장치는 휴대용 단말기에 구비되는 백엔드 칩(215)과 연결되며, 백엔드 칩(215) 또는 휴대용 단말기의 메인 칩(미 도시 함)은 디스플레이부(217)를 통하여 이미지 처리 장치에서 제공되는 이미지를 디스플레이 할 수 있다.
이미지 센서(201)는 전하 결합 소자(CCD: Charge Coupled Device)와 시모스(CMOS: Complementary Metal-Oxide Semiconductor)를 포함한다.
도 2를 참조하면, 본 발명의 실시예에 따른 ISP(203)는 이미지 시그널 처리부(205), 이미지 데이터 저장부(207), 분석 및 평가부(211), 제어부(209) 및 인터페이스부(213)를 포함하여 이루어진다.
이미지 시그널 처리부(205)는 이미지 센서로부터 전기 신호 형태의 원시 데이터(raw data)를 각 라인별로 입력 받아 전처리 과정을 수행하는 전처리 수단 및 전처리 된 데이터를 인코딩 하기 위한 인코딩 수단을 포함하여 구성될 수 있다.
이때, 전처리란 컬러 모델 변환(Color Space transform), 필터링, 다운 샘플링(Color SubSampling) 등을 포함할 수 있다.
전처리 과정을 거친 이미지 데이터는 프리뷰 모드(사용자에 의하여 촬영 명령이 입력되기 이전의 상태)에서 디스플레이부(217)를 통해 디스플레이 된다.
이때, 인코딩은 일반적으로, 사용자에 의하여 캡쳐 명령이 입력된 이후에 수행되며 JPEG 포맷으로의 인코딩을 의미하지만, 이에 제한되지 않는다.
이미지 시그널 처리부(205)를 통하여 인코딩 되는 이미지 데이터는 이미지 데이터 저장부(207)에 저장된다. 이미지 데이터 저장부(207)에 저장되는 이미지 데이터는 압축된 형태로 저장되기 때문에, 메모리 사용 효율을 극대화 할 수 있다.
이미지 시그널 처리부(205)는 상기한 전처리 과정 및 인코딩 과정에 의하여 이미지 데이터에 대한 히스토그램(histogram), 선명도(sharpness), 노이즈(noise), 노출(exposure), 밝기, 색 균형(color balance)등의 이미지 분석 정보를 추출할 수 있다.
상기 분석 정보는 이미지 시그널 처리부(205)의 전처리 과정에서 획득 되는 것으로서, 상기한 히스토그램, 선명도, 노이즈, 노출, 밝기, 색균형 등에 제한되지 않으며, 이미지 데이터 평가에 활용될 수 있는 정보는 모두 분석 정보에 해당 될 수 있다.
분석 및 평가부(211)는 전처리 과정을 거친 이미지 데이터에 대한 이미지 분석 정보를 평가 요소로 하여 이미지 데이터의 평가를 수행한다.
이때, 상기 분석 및 평가부(211)는 미리 설정된 가중치를 상기 분석 정보에 부여하여 이미지 데이터를 평가할 수 있다.
제어부(209)는 ISP(203) 및 이미지 센서(201)의 전반적인 동작을 제어하고, 백엔드 칩으로부터 프리뷰 명령, 캡쳐 명령 등을 수신하여 ISP(203)가 해당 동작을 수행하도록 제어한다.
제어부(209)는 ISP(203)를 구성하는 각 구성요소의 동작 시간을 제어하기 위한 소정 클럭을 발생할 수 있다.
인터페이스부(213)는 본 발명의 실시예에 따른 이미지 처리 장치의 내부 또 는 외부 장치와 통신하기 위한 구성요소이다.
인터페이스(160)는 주변 장치용 직렬 인터페이스(Serial Peripheral Interface, 이하 SPI) 또는 I2C(Inter-IC), 또는 SPI와 I2C 양자 모두를 포함할 수 있다.
참고적으로, SPI는 두 개의 주변장치간에 직렬 통신으로 데이터를 교환할 수 있게 해주는 인터페이스로서, 그 중 하나가 주(master)가 되고 다른 하나가 종(slave)이 되어 동작한다. SPI는 전이중 방식으로 동작하는데, 이는 데이터가 양방향으로 동시에 전달될 수 있음을 의미한다. SPI는 대부분 CPU와 주변장치들간에 통신을 하는 시스템에 주로 채용되지만, 두 개의 마이크로프로세서들 사이를 SPI의 형태로 연결하는 것도 가능하다.
Inter-IC라고도 불리는 I2C는 집적회로들 간의 통신 링크를 제공하는 두 가닥 선의 양방향 직렬 버스이다. I2C 버스에는 표준, 고속 및 초고속 등 속도에 따라 세 가지 데이터 전송 모드가 있는데, 표준 모드는 100 Kbps, 고속은 400 Kbps, 그리고 초고속 모드에서는 최고 3.4 Mbps의 속도를 지원한다. 이 세 가지 모두 하위 호환성을 갖는다. I2C 버스는 7 비트와 10 비트 주소 공간을 갖는 장비들과, 서로 다른 전압에서 동작하는 장비들을 지원한다.
도 3은 본 발명의 실시예에 따른 이미지 처리장치에서의 이미지 처리 방법을 나타내는 흐름도이다.
본 발명의 실시예에 따른 이미지 처리 방법은, 프리뷰 모드에서 백엔드 칩(215)으로부터 캡쳐 명령을 수신(S301)하면, 이미지 센서로부터 입력된 외부 영상 신호의 분석 정보를 수집하고(S303), 수집된 분석 정보에 기초하여 이미지 데이터(캡쳐 명령에 대응하는 3~4개의 프레임)를 평가하고(S305), 이미지 데이터의 평가 정보를 백엔드 칩(215)으로 전송하는 과정을 포함하여 이루어진다.
도 3을 참조하면, 제어부(209)는 백엔드 칩(215)로부터 캡쳐 명령이 수신되면, 이미지 시그널 처리부(205)와 분석 및 평가부(211)가 동작하도록 제어한다(S301).
이미지 시그널 처리부(205)는 제어부(209)의 제어 신호에 따라서, 예를 들어 3~4 프레임의 입력 데이터에 대한 인코딩을 수행한다.
분석 및 평가부(211)는 이미지 시그널 처리부(205)로부터 제공되는 이미지 데이터의 분석 정보(평가 요소)를 수집한다(S303).
이때, 이미지 데이터의 분석 정보는 하나의 프레임에 대한 인코딩이 완료된 후에 수집되어 저장될 수 있다.
분석 및 평가부(211)는 수집된 분석 정보를 기초로 하여 이미지 데이터에 대한 평가를 수행하여 이미지 데이터에 대한 평가 정보를 생성한다(S305).
만일, 복수의 프레임에 대하여 평가가 수행된 경우에는, 분석 및 평가부(211)는 각 프레임의 평가 정보에 대한 등급 또는 평가 값이 높은 순서로 우선순위 정보를 생성할 수 있다.
인터페이스부(213)는 상기 평가 정보를 백엔드 칩(215)으로 전송한다(S307). 인터페이스부(213)는 상기 평가 정보를 이미지 데이터를 전송하는 데이 터 전송 포트를 통하여 백엔드 칩(215)으로 전송할 수 있으며, 평가 정보의 우선 순위정보는 통신 포트를 통하여 백엔드 칩(215)으로 전송되도록 함으로써 신속한 데이터 전송이 수행될 수 있다.
도 4는 본 발명의 실시예에 따른 이미지 평가 방법을 나타낸다.
도 4를 참조하면, 본 발명의 실시예에 따른 이미지 평가 방법은, 상기 수집된 분석 정보의 각 항목에 가중치를 부여하여 상기 가중치가 부여된 분석 정보의 결과 값을 산출하고(S403), 상기 산출된 결과 값에 따라서 평가 등급을 결정하는 과정(S405)을 포함한다.
분석 및 평가부(211)는 사용자에 의한 캡쳐 명령 후에, 이미지 시그널 처리부(205)로부터 이미지 데이터에 대한 분석 정보를 입력받는다(S401).
상기 입력된 분석 정보는 히스토그램(histogram), 선명도(sharpness), 노이즈(noise), 노출(exposure), 밝기 및 색 균형(color balance) 정보 중 적어도 하나이상을 포함한다.
상기한 바와 같이, 상기 입력된 분석 정보는 전처리 과정에서 획득 되는 것으로서, 상기한 히스토그램, 선명도, 노이즈, 노출, 밝기, 색균형 등에 제한되지 않으며, 이미지 데이터 평가에 활용될 수 있는 정보는 모두 분석 정보에 해당 될 수 있다.
분석 및 평가부(211)는 상기 입력된 분석 정보 각 항목에 대하여 미리 설정된 가중치를 부여한다(S403). 여기서, 각 항목에 부여되는 가중치 값은 전체 합이 1이 되도록 설정될 수 있으며, 사용자의 선택 또는 설정 모드에 따라서 다양하게 결정될 수 있다.
예를 들어, 노출 및 색 균형이 강조되도록 설정된 모드인 경우에는 노출 및 색 균형 항목에 큰 값의 가중치 값이 부여되고, 다른 항목에는 상대적으로 작은 값의 가중치가 부여될 수 있다.
또한, 사용자의 선택 또는 설정 모드는 2 개 이상의 기준이 설정된 경우일 수 있다. 이 경우, 2개 이상의 기준에 따라서 2개 이상의 이미지 데이터가 평가 결과가 높은 데이터로 선택될 수 있다.
분석 및 평가부(211)는 가중치가 부여된 각 분석 정보의 평가 값을 계산하여 소정 임계치를 기준으로 이미지 데이터의 등급을 결정할 수 있다(S405). 즉, 평가 값이 소정 임계치(제1 임계치) 이상인 경우에는 고 품질의 등급을 부여하고, 그렇지 않은 경우에는 낮은 등급을 부여 할 수 있다.
또한, 분석 및 평가부(211)는 소정 임계치 이상의 평가 값을 갖는 이미지 데이터에 대하여 평가 값의 우선 순위 정보를 생성할 수 있으며, 이를 이용하여 사용자가 가장 좋은 화질의 이미지 데이터를 선택할 수 있도록 한다.
본 발명의 다른 실시예에 따르면, 분석 및 평가부(211)는 평가 값이 소정 임계치(제2 임계치) 이상인 이미지 데이터에 대하여 노출 과다, 노이즈 과다 등의 판단을 통하여 촬상 상태가 불량한 프레임이 선택되지 않도록 할 수 있다.
도 5는 본 발명의 실시예에 따른 이미지 처리 장치 및 백엔드 칩에서의 이 미지 처리 방법을 나타낸다.
본 발명의 실시예에 따른 이미지 처리 장치 및 백엔드 칩에서의 이미지 처리 방법은, 이미지 시그널 프로세서로 캡쳐 명령을 전송하고, 이미지 시그널 프로세서로부터 복수의 이미지 데이터 각각에 대한 평가 정보를 수신하고, 상기 수신된 평가 정보에 기초하여 어느 하나의 이미지 데이터를 저장하는 과정을 포함한다.
도 5를 참조하면, 백엔드 칩은 이미지 시그널 프로세서로 캡쳐 명령을 전송한 이후에, 이미지 시그널 프로세서로부터 복수의 이미지 데이터 각각에 대한 평가 정보를 수신한다(S501).
백엔드 칩은 이미지 시그널 프로세서로부터 수신된 평가 정보를 디스플레이 하여 사용자의 선택을 돕도록 한다(S503). 여기서, 평가 정보의 디스플레이 방법은 다양한 형태로 수행될 수 있다. 예를 들어, 이미지와 함께 평가 정보를 제공하거나 평가 정보만을 높은 값으로부터 낮은 값 순으로 디스플레이 할 수 있다.
또한, 평가 정보와 함께 디스플레이 되는 이미지는 사용자 스스로 확인 또는 선택이 가능하도록 여러 개의 이미지를 동시에 디스플레이 할 수 있다. 이때, 이미지는 프리뷰 모드에서 제공되는 이미지 또는 섬네일 이미지가 제공될 수 있다.
백엔드 칩은 사용자가 평가 정보에 대응하는 이미지를 선택하면 이미지 시그널 프로세서로 선택된 이미지의 전송을 요청한다(S505, S507).
본 발명의 다른 실시예에 따르면, 백엔드 칩은 이미지 데이터에 대한 평가 정보와 인코딩된 이미지 데이터를 이미지 시그널 프로세서로부터 수신하여 저장하고 있을 수 있으며, 이 경우에는 사용자가 선택한 이미지 데이터를 바로 저장할 수 있다.
한편, 이미지 시그널 프로세서가 인코딩된 이미지 데이터를 가지고 있는 경우에는 상기 전송 요청에 대응하여 선택된 이미지 데이터(인코딩된 이미지 데이터)를 백엔드 칩으로 전송한다(S509).
상기한 본 발명의 실시예에 따르면, ISP는 한 프레임에 대한 이미지 처리가 수행된 후 즉시 이미지 데이터에 대한 평가가 수행되고, 평가 결과 값이 백엔드 칩으로 전송된다.
또한, 본 발명의 실시예에 따르면, 백엔드 칩은 캡쳐 명령에 의하여 복수의 고용량 이미지 데이터(인코딩 된 이미지 데이터)를 수신하지 않고, 평가 값에 기초하여 사용자가 선택한 어느 하나의 이미지 데이터를 ISP로부터 수신할 수 있다.
따라서, 본 발명의 실시예에 따르면, 백엔드 칩은 종래와는 달리 이미지 처리에 요구되는 부하를 상당부분 감소할 수 있게 된다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
도 1은 이미지 처리 장치를 구비하는 휴대용 단말기의 개략적인 구조를 나타낸다.
도 2는 본 발명의 실시예에 따른 이미지 평가 결과를 제공하는 이미지 처리 장치의 구성을 나타낸다.
도 3은 본 발명의 실시예에 따른 이미지 처리장치에서의 이미지 처리 방법을 나타내는 흐름도이다.
도 4는 본 발명의 실시예에 따른 이미지 평가 방법을 나타낸다.
도 5는 본 발명의 실시예에 따른 이미지 처리 장치 및 백엔드 칩에서의 이미지 처리 방법을 나타낸다.

Claims (11)

  1. 대용 단말기에 구비된 백엔드 칩의 제어에 따라 이미지 신호를 처리하는 이미지 처리 장치에 에 있어서,
    이미지 센서로부터 입력된 외부 영상 신호를 인코딩하여 인코딩된 이미지 데이터를 생성하는 인코딩부;
    상기 외부 영상 신호의 분석 정보에 의하여 이미지 데이터의 평가를 수행하여 평가 정보를 생성하는 평가부;
    상기 이미지 데이터의 평가 정보를 상기 백엔드 칩으로 전송하기 위한 인터페이스부; 및
    상기 인코딩된 이미지 데이터를 저장하기 위한 저장부를 포함하고,
    상기 인터페이스부는 상기 저장부에 저장된 이미지 데이터들 중 상기 백엔드 칩에 의하여 요청되는 이미지 데이터를 상기 백엔드 칩으로 전송하는 것을 특징으로 하는,
    이미지 신호 처리 장치.
  2. 휴대용 단말기에 구비된 백엔드 칩의 제어에 따라 이미지 신호를 처리하는 이미지 처리 장치에 에 있어서,
    이미지 센서로부터 입력된 외부 영상 신호를 인코딩하여 인코딩된 이미지 데이터를 생성하는 인코딩부;
    상기 외부 영상 신호의 분석 정보에 의하여 이미지 데이터의 평가를 수행하여 평가 정보를 생성하는 평가부;
    상기 이미지 데이터의 평가 정보를 상기 백엔드 칩으로 전송하기 위한 인터페이스부; 및
    상기 인코딩된 이미지 데이터를 저장하기 위한 저장부를 포함하고,
    상기 인터페이스부는 상기 저장부에 저장된 이미지 데이터가 복수인 경우에는, 상기 평가 정보에 기초하여 선택된 어느 하나의 이미지 데이터를 상기 백엔드 칩으로 전송하는 것을 특징으로 하는 이미지 신호 처리 장치.
  3. 제1항 또는 제2항에 있어서, 상기 인터페이스부는,
    상기 이미지 데이터 및 상기 이미지 데이터의 평가 정보는 데이터 전송 포트를 통해 상기 백엔드 칩으로 전송하고, 상기 이미지 데이터의 평가 정보에 대한 우선순위 정보는 통신 포트를 통해 상기 백엔드 칩으로 전송하는 것을 특징으로 하는,
    이미지 신호 처리 장치.
  4. 제1항 또는 제2항에 있어서,
    상기 외부 영상 신호의 분석 정보는 히스토그램, 선명도, 노이즈, 노출, 밝기, 색 균형 중 적어도 어느 하나의 분석 정보에 기초하여 이미지 데이터를 평가하는 것을 특징으로 하는 이미지 신호 처리 장치.
  5. 제 3 항에 있어서,
    상기 평가부는,
    상기 각각의 분석 정보에 미리 설정된 가중치를 부여하여 이미지 데이터의 평가를 수행하는 것을 특징으로 하는 이미지 데이터 처리 장치.
  6. 휴대용 단말기에 구비된 백엔드 칩의 제어에 따라 이미지 데이터를 처리하는 이미지 데이터 처리 방법에 있어서,
    이미지 센서로부터 입력된 외부 영상 신호를 인코딩하여 인코딩된 이미지 데이터를 생성하고, 생성된 이미지 데이터를 저장부에 저장하는 단계;
    상기 이미지 센서로부터 입력된 외부 영상 신호의 분석 정보를 수집하는 단계;
    상기 수집된 분석 정보에 기초하여 이미지 데이터를 평가하는 단계;
    이미지 데이터의 평가 정보를 상기 백엔드 칩으로 전송하는 단계; 및
    상기 저장부에 저장된 이미지 데이터들 중 상기 백엔드 칩에 의하여 요청되는 이미지 데이터를 상기 백엔드 칩으로 전송하는 단계를 포함하는 이미지 데이터 처리 방법.
  7. 제 6 항에 있어서,
    상기 이미지 데이터를 평가하는 단계는,
    상기 수집된 분석 정보의 각 항목에 가중치를 부여하고,
    상기 가중치가 부여된 분석 정보의 결과 값을 산출하고,
    상기 산출된 결과 값에 따라서 평가 등급을 결정하는 것을 포함하는 이미지 데이터 처리 방법.
  8. 제 7 항에 있어서, 상기 가중치는,
    미리 설정된 모드 정보에 기초하여 결정되는 것을 특징으로 하는 이미지 데이터 처리 방법.
  9. 삭제
  10. 삭제
  11. 삭제
KR1020080008778A 2008-01-28 2008-01-28 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법 KR100955577B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080008778A KR100955577B1 (ko) 2008-01-28 2008-01-28 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법
US12/352,780 US20090189985A1 (en) 2008-01-28 2009-01-13 Image processing device for providing image quality information and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080008778A KR100955577B1 (ko) 2008-01-28 2008-01-28 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20090082811A KR20090082811A (ko) 2009-07-31
KR100955577B1 true KR100955577B1 (ko) 2010-04-30

Family

ID=40898807

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080008778A KR100955577B1 (ko) 2008-01-28 2008-01-28 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법

Country Status (2)

Country Link
US (1) US20090189985A1 (ko)
KR (1) KR100955577B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100928660B1 (ko) * 2008-01-29 2009-11-27 엠텍비젼 주식회사 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법
KR102385188B1 (ko) * 2017-09-29 2022-04-12 삼성전자주식회사 외부 전자 장치에서 생성된 정보를 이용하여 이미지 데이터를 처리하는 방법 및 전자 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060008135A (ko) * 2004-07-23 2006-01-26 삼성전자주식회사 디지털 영상 기기

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7088865B2 (en) * 1998-11-20 2006-08-08 Nikon Corporation Image processing apparatus having image selection function, and recording medium having image selection function program
US6930712B1 (en) * 1999-09-01 2005-08-16 Olympus Corporation Electronic camera
JP4511066B2 (ja) * 2001-03-12 2010-07-28 オリンパス株式会社 撮像装置
JP2008141740A (ja) * 2006-11-07 2008-06-19 Fujifilm Corp 撮影装置および方法並びにプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060008135A (ko) * 2004-07-23 2006-01-26 삼성전자주식회사 디지털 영상 기기

Also Published As

Publication number Publication date
US20090189985A1 (en) 2009-07-30
KR20090082811A (ko) 2009-07-31

Similar Documents

Publication Publication Date Title
US9736348B2 (en) RAW camera peripheral with handheld mobile unit processing RAW image data
CN109756671B (zh) 使用多个相机记录图像的电子装置及其操作方法
CN109005366A (zh) 摄像模组夜景摄像处理方法、装置、电子设备及存储介质
CN110225259B (zh) 电子设备、显示方法及图像处理方法
KR100928660B1 (ko) 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법
US9001217B2 (en) Information processing apparatus, method for displaying live view image, and storage medium storing program therefor
CN103874970B (zh) 电子设备及程序
KR20110118540A (ko) 셔터 지연을 방지하는 영상 획득 모듈 및 영상 획득 방법
CN101815175B (zh) 信息处理设备及控制方法、摄像设备和图像校正方法
US20190260914A1 (en) Electronic device for taking moving picture by adjusting threshold associated with movement of object in region of interest according to movement of electronic device and method for operating same
US20200053273A1 (en) Apparatus and method for generating moving image data including multiple section images in electronic device
JP2010016826A (ja) 画像処理オペレーションを効率的に実行するためのシステム及び方法
KR100955577B1 (ko) 이미지 평가 정보를 제공하는 이미지 처리 장치 및 방법
US20100033582A1 (en) Method and apparatus for controlling thumbnail display and digital photographing apparatus
US20210272249A1 (en) Electronic device and method for correcting image on basis of image transmission state
CN112788230B (zh) 摄像设备及系统、信息处理设备、其控制方法和存储介质
US11115605B2 (en) Electronic device for selectively compressing image data according to read out speed of image sensor, and method for operating same
US11509810B2 (en) Image capture apparatus, operation apparatus and control methods
CN114945019A (zh) 数据传输方法、装置及存储介质
KR101789674B1 (ko) 외부의 영상 처리 장치에 의해 비실시간으로 영상을 처리하는 영상 처리 방법 및 이를 적용한 영상 촬영 장치, 그리고 영상 처리 시스템
KR20090101675A (ko) 이미지 처리 장치 및 방법
JP7410088B2 (ja) 撮像素子、撮像装置、画像データ出力方法、及びプログラム
JP5620851B2 (ja) 電子機器、電子機器システム及び画像処理方法
JP5546297B2 (ja) 撮像装置、撮像方法及びプログラム
JP2021022862A (ja) 情報処理装置、撮像装置、制御方法およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment
FPAY Annual fee payment

Payment date: 20170329

Year of fee payment: 8