KR20150099317A - 이미지 처리 방법 및 장치 - Google Patents

이미지 처리 방법 및 장치

Info

Publication number
KR20150099317A
KR20150099317A KR1020140020927A KR20140020927A KR20150099317A KR 20150099317 A KR20150099317 A KR 20150099317A KR 1020140020927 A KR1020140020927 A KR 1020140020927A KR 20140020927 A KR20140020927 A KR 20140020927A KR 20150099317 A KR20150099317 A KR 20150099317A
Authority
KR
South Korea
Prior art keywords
image
image processing
processing mode
original
original images
Prior art date
Application number
KR1020140020927A
Other languages
English (en)
Other versions
KR102327779B1 (ko
Inventor
이우용
박광규
이규봉
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140020927A priority Critical patent/KR102327779B1/ko
Priority to US14/591,408 priority patent/US10181203B2/en
Priority to CN201510087408.1A priority patent/CN104869305B/zh
Publication of KR20150099317A publication Critical patent/KR20150099317A/ko
Application granted granted Critical
Publication of KR102327779B1 publication Critical patent/KR102327779B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)

Abstract

본 발명의 다양한 실시 예들 중 하나의 실시 예에 따르면, 이미지 처리 방법은 전자장치에서 촬영되는 이미지를 처리하는 방법에 있어서, 상기 촬영되는 이미지로부터 복수의 원본 이미지를 획득하는 과정과, 상기 복수의 원본 이미지를 분석하는 과정과, 상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 과정을 포함한다.

Description

이미지 처리 방법 및 장치{METHOD FOR PROCESSING IMAGE DATA AND APPARATUS FOR THE SAME}
본 발명은 획득된 이미지의 합성을 위한 전처리 방법 및 장치에 관한 것이다.
최근 전자장치(예, 모바일 디바이스-휴대폰, 스마트 폰 또는 태블릿 PC)와 같은 사용자 단말은 적어도 하나 이상의 카메라를 구비하고, 적어도 하나 이상의 카메라를 이용하여 정지 영상(still picture) 또는 동영상(moving picture) 등의 영상을 촬영하는 기능을 제공한다.
또한, 이러한 전자장치는 데이터 처리 연산 능력이 고도화될 뿐 아니라, 미디어적 구성(예, 카메라 등)이 고도화되고 있으며, 이와 함께 다양한 미디어 처리 기능을 제공하고 있다.
본 발명은 전술한 점을 고려하여 안출된 것으로써, 전자장치에서 촬영되는 이미지를 사용하여 다양한 미디어를 제공할 수 있는 방법 빛 장치를 제공하는데 그 목적이 있다.
또한, 본 발명은 전자장치에서 촬영되는 이미지를 사용하여 다양한 미디어를 제공하되, 사용자에게 최적의 미디어를 추천 또는 제공할 수 있는 방법 빛 장치를 제공하는데 다른 목적이 있다.
또한, 발명은 전자장치에서 촬영되는 이미지를 사용하여 다양한 미디어를 제공하되, 보다 빠르고 효율적으로 최적의 미디어를 제공할 수 있는 방법 빛 장치를 제공하는데 또 다른 목적이 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 방법은, 전자장치에서 촬영되는 이미지를 처리하는 방법에 있어서, 상기 촬영되는 이미지로부터 복수의 원본 이미지를 획득하는 과정과, 상기 복수의 원본 이미지를 분석하는 과정과, 상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 과정을 포함한다.
본 발명의 다양한 실시예에 따른 이미지 처리 장치는 원본 이미지를 생성 및 제공하는 이미지 센서부와, 상기 복수의 원본 이미지를 분석하고, 상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 제어부와, 상기 복수의 원본 이미지 및 상기 복수의 원본 이미지를 인코딩한 인코딩 데이터 중 적어도 하나를 저장하는 메모리부를 포함한다.
도 1은 본 발명의 일 실시예에 따른 이미지 처리 방법을 도시하는 흐름도이다.
도 2는 본 발명의 일 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 이미지 처리 방법에 사용되는 이미지 처리 모드 추천 정보의 일 예시도이다.
도 4는 본 발명의 다른 실시예에 따른 이미지 처리 방법에 포함되는 과정을 도시하는 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 6은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법에 포함되는 과정을 도시하는 흐름도이다.
도 7은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 8은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 9는 본 발명의 또 다른 실시예에 따른 이미지 처리 방법을 도시하는 흐름도이다.
도 10은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 11은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법을 도시하는 흐름도이다.
도 12는 본 발명의 또 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 13a 내지 도 13c는 본 발명의 다양한 실시예에 따른 이미지 처리 방법에서 제공되는 사용자 인터페이스를 예시하는 도면이다.
도 14는 본 발명의 일 실시예에 따른 이미지 처리 장치를 예시하는 블록도이다.
도 15는 본 발명의 다른 실시예에 따른 이미지 처리 장치를 예시하는 블록도이다.
도 16은 본 발명의 다양한 실시 예에 따른 이미지 처리 방법 및 장치가 적용되는 전자장치에 대한 블록도이다.
도 17은 본 발명의 다양한 실시 예에 따른 이미지 처리 방법 및 장치가 적용되는 하드웨어의 블록도이다.
도 18은 본 발명의 다양한 실시 예에 따른 이미지 처리 방법 및 장치가 적용되는 프로그래밍 모듈의 블록도이다.
이하, 첨부된 도면을 참조하여 본 개시(present disclosure)를 설명한다. 본 개시는 특정 실시예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있으나, 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있다. 따라서, 본 개시는 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 개시의 사상 및 기술 범위에 포함되는 모든 변경 또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조부호가 사용되었다.
본 개시 가운데 사용될 수 있는"포함한다,""포함할 수 있다" 등의 표현은 개시된 해당 기능, 동작, 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작, 구성요소 등을 제한하지 않는다. 또한, 본 개시에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
또한 본 개시에서 "및/또는" 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, A 및/또는 B는, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.
또한 본 개시 가운데 "제 1,""제2,""첫째,""둘째"등의 표현들이 본 개시의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분 짓기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 개시의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다. 본 개시에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 개시를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 센서에 대해서 살펴본다. 본 발명의 실시 예에 따른 전자 센서 예컨대, 이미지 센서를 포함하는 카메라 모듈이 전자 장치에 장착될 수 있다. 이러한 전자 장치에는 카메라(camera), 캠코드, 웹카메라, 감시카메라, 의료용 카메라, 고속 카메라, 3D 카메라와 같은 멀티 카메라 등이 있을 수 있다.
또한, 본 발명의 다양한 실시예에 따른 전자 장치는, 통신 기능이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 시계(electronic clock), 손목 시계(wrist watch), 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 또는 스마트 와치(smart watch)), 가전 제품(home appliance)(예: 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기 등), 인공 지능 로봇, TV, DVD(digital video disk) 플레이어, 오디오, 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 전자 사전, 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(electronic equipment for ship, 예를 들면, 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 전자 의복, 전자 키, 캠코더(camcorder), 게임 콘솔(game consoles), 평판표시장치(flat panel display device), 전자 액자, 전자 앨범, 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device) 또는 프로젝터(projector) 등의 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 본 발명의 다양한 실시예에서 "원본 이미지"는 인코딩 데이터와 구분하기 위한 목적으로 사용되는 용어로써, 압축이나, 부호화(인코딩) 되지 않은 상태의 이미지 데이터를 지시한다. 또한, 본 발명의 다양한 실시예에서 "원본 이미지"는 RAW 포맷의 이미지, YUV 포맷의 이미지, RGB 포맷의 이미지 등을 포함할 수 있다. 그리고, 본 발명의 다양한 실시예에서 "원본 이미지"는 감마 커렉션(Gamma correction), 색필터 배열 보간, 색 매트릭스, 색보정, 색 향상 등의 처리가 이루어진 이미지를 포함할 수 있다.
도 1은 본 발명의 일 실시예에 따른 이미지 처리 방법을 도시하는 흐름도이고, 도 2는 본 발명의 일 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다. 도 1 및 도 2를 참조하면, 본 발명의 일 실시예에 따른 이미지 처리방법은, 복수의 원본 이미지를 획득하는 과정(S11)과, 상기 원본 이미지를 분석하는 과정(S13)과, 상기 분석된 결과를 사용하여, 적어도 하나의 상기 원본 이미지를 사용하는 이미지 처리 모드를 추천하는 정보를 제공하는 과정(S14)을 포함할 수 있다.
상기 복수의 원본 이미지를 획득하는 과정(S11)은 이미지 센서를 통해 제공되는 원본 이미지(201)를 입력받는 동작을 포함할 수 있다. 상기 이미지 센서는, 사용자의 입력을 기초하여 상기 원본 이미지(201)를 제공할 수 있다. 예컨대, 촬영을 위한 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역 터치 입력 등)이 발생됨에 따라, 다양한 이미지 처리 모드의 이미지를 구성하는데 사용되는 원본 이미지(201)를 입력받는다. 상기 원본 이미지(201)는 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역 터치 입력 등)이 발생된 시점을 중심으로 미리 정해진 시간(예, 1초)동안, 미리 정해진 시간(예, 1/30 초)단위마다 입력되는 복수(예, 30장)의 원본 이미지를 포함할 수 있다.
상기 원본 이미지를 분석하는 과정(S13)은 원본 이미지를 확인하여, 이미지 처리 모드를 추천하는 데 요구되는 정보를 분석한다. 예컨대, S13 과정에서 확인되는 정보는, 얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 이동 객체의 움직임, 복수의 원본 이미지에 포함된 객체의 중첩 여부, 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값(이하, '분석 파라미터 값' 이라 함)을 포함할 수 있다.
이미지 처리 모드를 추천하는 정보를 제공하는 과정(S14)은 S13 과정에서 확인된 정보를 사용하여, 전자장치에서 제공하는 복수의 이미지 처리 모드 중, 적어도 하나의 이미지 처리 모드를 추천하는 동작을 처리한다. 예컨대, S14 과정은, 복수의 상기 원본 이미지 각각에 대해서 검출된 상기 전술한 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드에 각각에 적용한다. 그리고, 상기 이미지 처리 모드에 대한 완성도를 확인한다. 그리고, 상기 완성도를 기준으로 추천 이미지 처리 모드를 결정하게 된다. 예컨대, 상기 완성도가 미리 정해진 임계값을 초과하는 이미지 처리 모드를 추천 이미지 처리 모드로 결정하거나, 상기 완성도가 상대적으로 높은 미리 정해진 수(예, 3개)의 이미지 처리 모드를 추천 이미지 처리 모드로 결정할 수 있다. 예컨대, 상기 이미지 처리 모드는 베스트 이미지 모드, 베스트 페이스 모드, 드라마 이미지 처리 모드, 모션 이미지 처리 모드 등을 포함할 수 있다.
S14 과정은 획득된 정보, 예컨대, 이미지 처리 모드 추천 정보(203)를 제공할 수 있다. 이러한 이미지 처리 모드 추천 정보는 S13 및 S14 과정에서 확인된 추천 이미지 처리 모드와, 상기 추천 이미지 처리 모드에 사용되는 원본 이미지에 대한 정보와, 상기 추천 이미지 처리 모드에 대응되는 프리뷰 이미지와, 상기 추천 이미지 처리 모드를 선택하기 위해 사용된 파라미터 값 등 중, 적어도 하나를 포함할 수 있다(도 3참조).
S14 과정에서 제공되는 이미지 처리 모드 추천 정보는 저장되는 이미지(예, 인코딩 데이터)와 연동되어 저장될 수 있으며, 전자장치에서 실행되는 다양한 어플리케이션에 다양하게 활용될 수 있다.
한편, 이와 같이, S13 과정은 입력되는 원본 이미지에 각각에 대해서 전술한 분석 파라미터 값을 검출해야 하며, S14 과정은 상기 전술한 분석 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드에 각각 적용하여, 추천 이미지 처리 모드를 결정할 수 있다. 이와 같은 S13 및 S14 과정은 이미지 처리를 위해 많은 자원과, 시간이 소요될 수 있으며, 결과적으로는, 전자장치의 처리 속도를 저하시키거나, 배터리의 소모가 많게 되거나, 추천 이미지 처리 모드 정보를 제공하는데 많은 시간이 소모될 우려가 있다.
이와 같이, S13 및 S14 과정을 좀 더 원활하게 처리하기 위하여, 상기 원본 이미지(201)의 크기를 다운사이징하고, 다운 사이징된 이미지(202)를 사용하여 S13 및 S14 과정을 처리할 수 있다. 본 발명의 일 실시예에 따른 이미지 처리 방법은, S13 및 S14 과정을 처리하기에 앞서 진행되는, 상기 원본 이미지(201)를 다운사이징 하는 과정(S12)을 더 포함할 수 있다. 상기 원본 이미지(201)를 다운사이징 하는 과정(S12)은 프리뷰 이미지를 디스플레이하기 위해 처리되는 동작이 사용될 수 있다. 상기 원본 이미지(201)를 다운 사이징하는 크기는 프리뷰 이미지를 출력하는데 요구되는 크기를 포함할 수 있다.
이에 따라, 상기 S13 과정은, S12 과정을 통해 다운 사이징된 이미지(202)를 대상으로 이미지 분석을 처리한다. 그리고, S14 과정은 S13 과정에서 다운 사이징된 이미지(202)를 대상으로 하여 확인된 정보를 사용하여, 이미지 처리 모드 추천 정보를 확인 및 출력한다.
이와 같이, 전자장치에서, 프리뷰 이미지를 디스플레이하기 위해 처리되는 동작을 사용하여 원본 이미지(201)를 다운사이징하고, 다운 사이징된 이미지(202)를 사용하여, 이미지를 분석하고, 추천 이미지 처리 모드 정보를 제공하도록 함으로써, 이미지 처리에 사용되는 자원을 효율적으로 사용할 수 있으며, 보다 빠르게 추천 이미지 처리 모드 정보를 제공할 수 있다.
도 4는 본 발명의 다른 실시예에 따른 이미지 처리 방법에 포함되는 과정을 도시하는 흐름도이고, 도 5는 본 발명의 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
본 발명의 다른 실시예에 따른 이미지 처리 방법은 도 1에 예시한 본 발명의 일 실시예에 따른 이미지 처리 방법과 유사하게 구성될 수 있다. 다만, 본 발명의 다른 실시예에 따른 이미지 처리 방법은 본 발명의 일 실시예에 따른 이미지 처리 방법과 원본 이미지를 분석하는 구체적인 동작이 다소 다르게 구비될 수 있다. 예컨대, 본 발명의 다른 실시예에 따른 이미지 처리 방법은 도 1에 예시한 본 발명의 일 실시예에 따른 이미지 처리 방법에 구비된 S11, S12, 및 S14 과정을 포함한다. 그리고, 본 발명의 다른 실시예에 따른 이미지 처리 방법은 도 1에 예시한 본 발명의 일 실시예에 따른 이미지 처리 방법에 구비된 S13 과정에 대한 대안으로써, 도 3에 예시된 인코딩 데이터를 생성하는 과정(S41)과, 원본 이미지와 인코딩 데이터를 매칭하는 과정(S42)과, 이미지 처리 모드 추천에 사용되는 파라미터 값을 확인하는 과정(S43)을 포함할 수 있다.
이하, 도 1, 도 4, 및 도 5를 참조하여, 본 발명의 다른 실시예에 따른 이미지 처리 방법에 대해 상세히 설명한다.
S11 과정은, 이미지 센서를 통해 제공되는 원본 이미지(501)를 입력받는 동작을 포함할 수 있다. S12 과정은 상기 원본 이미지(501)의 크기를 다운 사이징하고, 다운 사이징된 이미지(502)를 제공할 수 있다.
다음으로, S41 과정은, 상기 원본 이미지(501)에 대한 인코딩 처리를 수행하고, 이러한 처리를 통해 인코딩 데이터(503)를 출력할 수 있다. 상기 인코딩 처리는 본 발명의 기술분야에서 통상적으로 사용되는, 다양한 인코딩 방식(예, JPEG, BMP)이 사용될 수 있다.
인코딩 데이터(503)는 전자장치에서 실행되는 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에서 사용될 수 있다. 또한, 이후의 과정을 진행하면서 생성되는 데이터, 예컨대, 이미지 처리 모드를 추천하는 데 요구되는 정보 등도 전자장치에서 실행되는 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에서 사용될 수 있다. S42 과정에서는, 상기 다운 사이징된 이미지(502)와, 인코딩 데이터(503)를 서로 매칭하는 동작을 처리한다. 상기 다운 사이징된 이미지(502)와, 인코딩 데이터(503)를 서로 매칭하는 동작은, 서로 대응되는 다운 사이징된 이미지(502)와, 인코딩 데이터(503)에 동일한 식별번호를 부여하는 넘버링(Nunbering) 방식이나, 동기화 수행(Synchronous execution) 방식이 사용될 수 있다.
다음으로, S43 과정에서는, 상기 다운 사이징된 이미지(502)를 사용하여, 이미지 처리 모드를 추천하는 데 요구되는 정보(파라미터 값 등)(504)를 확인한다. 예컨대, S43 과정에서 확인되는 정보는, 베스트 이미지 모드, 베스트 페이스 모드, 드라마 이미지 처리 모드, 모션 이미지 처리 모드 등과 같은 다양한 이미지 처리 모드 중에서, 적어도 하나의 이미지 처리 모드를 선택(또는 추천)하는데 요구되는 정보를 포함할 수 있으며, 특히, 얼굴 영역, 얼굴 표정, 눈 감음 여부, 이동 객체의 크기, 상기 이동 객체의 위치, 이동 객체의 움직임, 복수의 원본 이미지에 포함된 객체의 중첩 여부, 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값(504)을 포함할 수 있다. 비록 본 발명의 실시예에서, 이미지 처리 모드를 선택(또는 추천)하는데 요구되는 정보로써, 파라미터 값(504)을 예시하고 있으나, 본 발명이 이를 한정하는 것은 아니다. 예컨대, 이미지 처리 모드를 선택(또는 추천)하는데 요구되는 정보를 포함할 수 있으면 충분하며, 예컨대, 이미지 처리 모드를 선택(또는 추천)하는데 사용될 수 있는 움직임 센서, 조명 센서 등으로부터 제공되는 다양한 정보를 포함할 수 있다.
S43 과정이 진행된 후에는, 도 1에 예시하는 이미지 처리 모드를 추천하는 정보를 제공하는 과정(S14)이 진행될 수 있다.
S14 과정은 S43 과정에서 확인된 정보를 사용하여, 전자장치에서 제공하는 복수의 이미지 처리 모드 중, 적어도 하나의 이미지 처리 모드를 추천하는 동작을 처리한다. 예컨대, S14 과정은, 복수의 상기 원본 이미지 각각에 대해서 검출된 상기 전술한 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드(예, 베스트 이미지 모드, 베스트 페이스 모드, 드라마 이미지 처리 모드, 모션 이미지 처리 모드 등)에 각각 적용한다. 그리고, 상기 이미지 처리 모드에 대한 완성도를 확인한다. 그리고, 상기 완성도를 기준으로 추천 이미지 처리 모드를 결정하게 된다. 예컨대, 상기 완성도가 미리 정해진 임계값을 초과하는 이미지 처리 모드를 추천 이미지 처리 모드로 결정하거나, 상기 완성도가 상대적으로 높은 미리 정해진 수(예, 3개)의 이미지 처리 모드를 추천 이미지 처리 모드로 결정할 수 있다.
S14 과정은 동작을 처리하는 과정에서 획득된 정보, 예컨대, 이미지 처리 모드 추천 정보(505)를 제공할 수 있다. 이러한 이미지 처리 모드 추천 정보는 상기 추천 이미지 처리 모드와, 상기 추천 이미지 처리 모드에 사용되는 원본 이미지 정보(예, 원본 이미지가 저장된 영역, 또는 원본 이미지)와, 상기 추천 이미지 처리 모드에 대응되는 프리뷰 이미지와, 상기 원본 이미지에 대응되는 인코딩 데이터(예, 인코딩 이미지, 상기 인코딩 이미지가 저장된 영역을 지시하는 정보), 상기 추천 이미지 처리 모드를 선택하기 위해 사용된 파라미터 값 등 중, 적어도 하나를 포함할 수 있다(도 3참조).
한편, 이와 같은, 본 발명의 다른 실시예에 따른 이미지 처리 방법은, 상기 원본 이미지(501)에 대한 인코딩 처리를 수행하고, 인코딩 데이터(503)를 상기 다운 사이징된 이미지(502)에 매칭시키는 동작을 포함한다. 이를 통해, 상기 다운 사이징된 이미지(502)를 분석하면서 확인되는 이미지 처리 모드 추천 정보(505)가 상기 인코딩 데이터(503)와 연동되어 제공될 수 있으므로, 전자장치에 실행되는 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에서 이미지 처리 모드 추천 정보(505)가 다양하게 사용될 수 있다. 또한, 이후의 과정을 진행하면서 생성되는 데이터, 예컨대, 이미지 처리 모드를 추천하는 데 요구되는 정보 등도 전자장치에 실행되는 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에서 사용될 수 있으므로, 본 발명의 이미지 처리 방법에서 생성되는 데이터를 효과적으로 이용할 수 있는 유리한 효과를 창출할 수 있다.
비록, 본 발명의 다른 실시예에 따른 이미지 처리 방법에서, S41 및 S42 과정이 S43 과정이나, S14 과정이 진행되기 이전에 처리되는 것을 예시하였으나, 본 발명이 S41, S42, S43, S14 과정의 동작 순서를 한정하는 것은 아니며, 본 발명의 기술 분야에서 통상의 지식을 가진자에 의해 다양하게 변경되어 사용될 수 있다. 예컨대, S41 및 S42 과정은 원본 이미지(501)를 인코딩 처리하고, 인코딩 데이터(503)와 다운 사이징된 이미지(502)를 서로 매칭시킬 수 있으면 충분하며, S43 과정이나, S14 과정과 병렬적으로 진행되거나, S43 과정이나, S14 과정이 완료된 후에 진행될 수도 있다. 나아가, S41 및 S42 과정이 S14 과정이 완료된 후에 진행되는 경우, S14 과정에서 생성되는 상기 이미지 처리 모드 추천 정보(505)에는 인코딩 데이터 정보가 포함되지 않을 수 있다.
또한, S14 과정은, 추천 이미지 처리 모드에 사용되는 원본 이미지(예, 다운 사이징된 이미지(202))를 제외하고, 추천 이미지 처리 모드에 사용되지 않는 원본 이미지(예, 다운 사이징된 이미지(202))는 삭제하는 동작을 처리할 수 있다. S41 및 S42 과정이 S14 과정이 완료된 후에 진행되는 경우, 추천 이미지 처리 모드에 사용되지 않는 원본 이미지(예, 다운 사이징된 이미지(202))에 대해서는 인코딩 처리를 진행하지 않는 것도 가능하다.
도 6은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법에 포함되는 과정을 도시하는 흐름도이고, 도 7 및 도 8은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
본 발명의 또 다른 실시예에 따른 이미지 처리 방법은 전술한 다양한 실시예에 따른 이미지 처리 방법과 유사하게 구성될 수 있다. 다만, 본 발명의 또 다른 실시예에 따른 이미지 처리 방법은 전술한 다양한 실시예에 따른 이미지 처리 방법과, 이미지 처리 모드 추천 정보를 제공하는 구체적인 동작이 다소 다르게 구비될 수 있다. 예컨대, 본 발명의 또 다른 실시예에 따른 이미지 처리 방법은 전술한 본 발명의 일 실시예에 따른 이미지 처리 방법에 구비된 S11, S12, 및 S13 과정을 포함하고, S14 과정에 대한 대안으로써, 도 6에 도시되는 S61 내지 S64 과정을 포함할 수 있다. 또는, 본 발명의 또 다른 실시예에 따른 이미지 처리 방법은 전술한 본 발명의 일 실시예에 따른 이미지 처리 방법에 구비된 S11, S12, S41, S42, 및 S43 과정을 포함하고, S14 과정에 대한 대안으로써, 도 6에 도시되는 S61 내지 S64 과정을 포함할 수 있다.
S61 과정은, 이미지 처리 모드를 추천하는 데 요구되는 정보, 예컨대, 얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 이동 객체의 움직임, 복수의 원본 이미지에 포함된 객체의 중첩 여부, 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값을 사용하여, 추천 이미지 처리 모드를 확인할 수 있다. 예컨대, 이미지 처리 모드를 추천하는 데 요구되는 정보(예, 파라미터 값)를 각각의 이미지 처리 모드에 적용하여, 상기 이미지 처리 모드에 대한 완성도를 확인한다. 그리고, 상기 완성도를 기준으로 추천 이미지 처리 모드를 결정하게 된다. 예컨대, 상기 완성도가 미리 정해진 임계값을 초과하는 이미지 처리 모드를 추천 이미지 처리 모드로 결정하거나, 상기 완성도가 상대적으로 높은 미리 정해진 수(예, 3개)의 이미지 처리 모드를 추천 이미지 처리 모드로 결정할 수 있다.
이러한, S61 과정을 통해, 추천 대상이 되는 이미지 처리 모드와, 추천 대상에 포함되지 않은 이미지 처리 모드를 구분할 수 있다. 이를 바탕으로, S62 과정은 다운 사이징된 이미지(700)로부터, 추천 대상이 되는 이미지 처리 모드에 사용되는 다운 사이징된 이미지(711)를 검출하고, 다운 사이징된 이미지(711)를 조합하여, 상기 추천 이미지 처리 모드의 프리뷰 이미지(712)를 생성 및 출력한다.
한편, S63 과정에서는, 상기 추천 이미지 처리 모드에 사용되지 않는 원본 이미지(701)를 확인하고, 상기 추천 이미지 처리 모드에 사용되지 않는 원본 이미지(701)를 삭제하는 동작을 처리할 수 있다. 이러한, S63 과정에 의해, 이전의 과정들에서 획득되었지만, 상기 추천 이미지 처리 모드에 사용되지 않아 활용성이 낮은 이미지들, 예컨대, 원본 이미지, 다운 사이징된 이미지, 또는 인코딩 데이터들이 제거될 수 있다. 한 가지 측면에서, 불필요한 데이터를 생성하기 위해 자원이 사용되거나, 불필요한 데이터를 저장하기 위해 저장 공간이 낭비되는 문제를 해소할 수 있는 유리한 효과를 생성할 수 있다.
비록, 본 발명의 S63 과정이, S41 및 S42 과정이 완료된 후에 진행되는 것을 예시하고 있으나, 본 발명이 이를 한정하는 것은 아니다. 예컨대, S63 과정은 S41 및 S42 과정이 처리되기 이전에 수행될 수 있다. 이 경우, S63 과정은 추천 이미지 처리 모드에 사용되지 않아, 삭제된 원본 이미지(예, 다운 사이징된 이미지(701))를 지시하는 정보를 제공할 수 있으며, S41 과정에서는, 이를 활용하여, 추천 이미지 처리 모드에 사용되지 않는 원본 이미지에 대해서는 인코딩 처리를 진행하지 않는 것도 가능하다.
S64 과정에서는, 전술한 동작에서 발생되는 데이터를 포함하는 멀티 이미지 컨테이너를 생성할 수 있다. 예컨대, S63 과정에서 확인된 추천 이미지 처리 모드에 사용되는 원본 이미지(예, 다운 사이징된 이미지)(802)와, 그(802)에 대응되는 인코딩 데이터(801) 및 분석 파라미터(803)를 확인하여, 멀티 이미지 컨테이너를 생성할 수 있다. 멀티 이미지 컨테이너는, 전자장치에 실행되는 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에 제공될 수 있으며, 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에서 효과적으로 이용될 수 있다.
이상, 본 발명의 다양한 실시예에 따른 이미지 처리 방법을 예시하였다. 특히, 프리뷰 이미지를 디스플레이 하기 위해 처리되는 다운 사이징된 이미지를 사용하여 분석하고, 분석된 결과, 즉, 분석 파라미터 값을 사용하여 추천 이미지 처리 모드를 확인하고, 이미지 처리 모드 추천 정보 등을 제공하는 것을 예시하였으나, 본 발명이 이를 한정하는 것은 아니며, 후술되는 다양한 실시예 역시 적용될 수 있음은 물론이다.
도 9는 본 발명의 또 다른 실시예에 따른 이미지 처리 방법을 도시하는 흐름도이고, 도 10은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 9 및 도 10을 참조하면, 복수의 원본 이미지(1001)를 획득하는 과정(S91)은 이미지 센서를 통해 제공되는 원본 이미지(1001)를 입력받는 동작을 포함할 수 있다. 상기 이미지 센서는, 사용자의 입력을 기초하여 상기 원본 이미지(1001)를 제공할 수 있다. 예컨대, 촬영을 위한 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역 터치 입력 등)이 발생됨에 따라, 다양한 이미지 처리 모드의 이미지를 구성하는데 사용되는 원본 이미지(1001)를 입력받는다. 상기 원본 이미지(1001)는 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역 터치 입력 등)이 발생된 시점을 중심으로 미리 정해진 시간(예, 1초)동안, 미리 정해진 시간(예, 1/30 초)단위마다 입력되는 복수(예, 30장)의 원본 이미지를 포함할 수 있다.
이후에 진행되는 추천 이미지 처리 모드를 결정하는 동작은, 입력되는 원본 이미지에 각각에 대해서 분석 파라미터 값을 검출해야하며, 상기 전술한 분석 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드에 각각 적용하여, 추천 이미지 처리 모드를 결정하도록 구비될 수 있다. 추천 이미지 처리 모드를 결정하는 동작은 이미지 처리를 위해 많은 자원과, 시간이 소요될 수 있으며, 결과적으로는, 전자장치의 처리 속도를 저하시키거나, 배터리의 소모가 많게 되거나, 추천 이미지 처리 모드 정보를 제공하는데 많은 시간이 소모될 우려가 있다.
본 발명의 다양한 실시예로, 복수의 원본 이미지(1001) 모두를 분석하여 추천 이미지 처리 모드를 결정하지 않고, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 원본 이미지를 검출하여 해당 원본 이미지만을 분석할 수 있다. 이를 위해, S92 과정에서는, 복수의 원본 이미지(1001) 중, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 적어도 하나의 원본 이미지를 추출하는 동작을 처리할 수 있다.
S93 과정에서는, 추출된 상기 원본 이미지(1002)를 다운 사이징하여, 다운 사이징된 이미지(1003)를 제공할 수 있다. 상기 원본 이미지(1002)를 다운사이징 하는 과정(S93)은 프리뷰 이미지를 디스플레이하기 위해 처리되는 동작이 사용될 수 있다. 따라서, 상기 다운 사이징된 이미지(1003)의 크기는 프리뷰 이미지의 크기일 수 있다.
S94 과정에서는, 상기 다운 사이징된 이미지(1003)로부터, 이미지 처리 모드를 추천하는 데 요구되는 정보를 분석한다. 예컨대, S94 과정에서 확인되는 정보는, 얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 이동 객체의 움직임, 복수의 원본 이미지에 포함된 객체의 중첩 여부, 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값(이하, '분석 파라미터 값' 이라 함)을 포함할 수 있다.
S95 과정에서는, S94 과정에서 확인된 정보(예, 분석 파라미터 값)를 사용하여, 전자장치에서 제공하는 복수의 이미지 처리 모드 중, 적어도 하나의 이미지 처리 모드를 추천하는 동작을 처리한다. 예컨대, S95 과정은, 복수의 상기 원본 이미지 각각에 대해서 검출된 상기 전술한 분석 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드에 각각에 적용한다. 그리고, 상기 이미지 처리 모드에 대한 완성도를 확인한다. 그리고, 상기 완성도를 기준으로 추천 이미지 처리 모드를 결정하게 된다. 예컨대, 상기 완성도가 미리 정해진 임계값을 초과하는 이미지 처리 모드를 추천 이미지 처리 모드로 결정하거나, 상기 완성도가 상대적으로 높은 미리 정해진 수(예, 3개)의 이미지 처리 모드를 추천 이미지 처리 모드로 결정할 수 있다. 예컨대, 상기 이미지 처리 모드는 베스트 이미지 모드, 베스트 페이스 모드, 드라마 이미지 처리 모드, 모션 이미지 처리 모드 등을 포함할 수 있다.
S95 과정은 획득된 정보, 예컨대, 이미지 처리 모드 추천 정보(1004)를 제공할 수 있다. 이러한 이미지 처리 모드 추천 정보는 S93 및 S94 과정에서 확인된 추천 이미지 처리 모드와, 상기 추천 이미지 처리 모드에 사용되는 원본 이미지에 대한 정보와, 상기 추천 이미지 처리 모드에 대응되는 프리뷰 이미지와, 상기 추천 이미지 처리 모드를 선택하기 위해 사용된 파라미터 값 등 중, 적어도 하나를 포함할 수 있다(도 3참조).
S95 과정에서 제공되는 이미지 처리 모드 추천 정보는 저장되는 이미지(예, 인코딩 데이터)와 연동되어 저장될 수 있으며, 전자장치에서 실행되는 다양한 어플리케이션에 다양하게 활용될 수 있다.
이와 같이, 본 발명의 또 다른 실시예에 따르면, 전자장치에서, 프리뷰 이미지를 디스플레이하기 위해 처리되는 동작을 사용하여 원본 이미지를 다운 사이징하되, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 원본 이미지를 검출하여 해당 원본 이미지만을 분석하도록 구비될 수 있다. 따라서, 본 발명의 또 다른 실시예에 따른 이미지 처리 방법에 의해, 이미지 처리에 사용되는 자원을 효율적으로 사용할 수 있으며, 보다 빠르게 추천 이미지 처리 모드 정보를 제공할 수 있다.
전술한 다양한 실시예에서는, 추천 이미지 처리 모드를 결정하는 동작을 빠르고, 효율적으로 처리하기 위하여, 원본 이미지를 다운 사이징한 후, 추천 이미지 처리 모드를 결정하는 동작을 진행하는 것을 예시하였다. 그러나, 본 발명이 반드시 이를 한정하는 것은 아니며, 필요에 따라, 보다 정확하게 원본 이미지를 분석할 필요가 있거나, 전자장치가 원본 이미지를 분석할 수 있을 정도의 충분한 자원(예, 배터리, 프로세서 처리 속도, 저장 용량 등)을 구비하고 있을 경우, 원본 이미지를 다운 사이징하는 동작 없이 추천 이미지 처리 모드를 결정하기 위한 동작을 처리할 수도 있다. 이하, 전술한 점을 고려한 본 발명의 또 다른 실시예에 따른 이미지 처리 방법을 예시한다.
도 11은 본 발명의 또 다른 실시예에 따른 이미지 처리 방법을 도시하는 흐름도이고, 도 12는 본 발명의 또 다른 실시예에 따른 이미지 처리 방법의 동작을 도시하는 블록도이다.
도 11 및 도 12를 참조하면, 복수의 원본 이미지(1201)를 획득하는 과정(S111)은 이미지 센서를 통해 제공되는 원본 이미지(1201)를 입력받는 동작을 포함할 수 있다. 상기 이미지 센서는, 사용자의 입력을 기초하여 상기 원본 이미지(1201)를 제공할 수 있다. 예컨대, 촬영을 위한 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역 터치 입력 등)이 발생됨에 따라, 다양한 이미지 처리 모드의 이미지를 구성하는데 사용되는 원본 이미지(1201)를 입력받는다. 상기 원본 이미지(1201)는 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역 터치 입력 등)이 발생된 시점을 중심으로 미리 정해진 시간(예, 1초)동안, 미리 정해진 시간(예, 1/30 초)단위마다 입력되는 복수(예, 30장)의 원본 이미지를 포함할 수 있다.
본 발명의 다양한 실시예로, 복수의 원본 이미지(1201) 모두를 분석하여 추천 이미지 처리 모드를 결정하지 않고, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 원본 이미지를 검출하여 해당 원본 이미지만을 분석할 수 있다. 이를 위해, S112 과정에서는, 복수의 원본 이미지(1201) 중, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 적어도 하나의 원본 이미지(1202)를 추출하는 동작을 처리할 수 있다.
그리고, S113 과정에서는, 추출된 상기 원본 이미지(1202)로부터, 이미지 처리 모드를 추천하는 데 요구되는 정보를 분석한다. 예컨대, S113 과정에서 확인되는 정보는, 얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 이동 객체의 움직임, 복수의 원본 이미지에 포함된 객체의 중첩 여부, 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값(이하, '분석 파라미터 값' 이라 함)을 포함할 수 있다.
S114 과정에서는, S113 과정에서 확인된 정보(예, 분석 파라미터 값)를 사용하여, 전자장치에서 제공하는 복수의 이미지 처리 모드 중, 적어도 하나의 이미지 처리 모드를 추천하는 동작을 처리한다. 예컨대, S114 과정은, 복수의 상기 원본 이미지 각각에 대해서 검출된 상기 전술한 분석 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드에 각각에 적용한다. 그리고, 상기 이미지 처리 모드에 대한 완성도를 확인한다. 그리고, 상기 완성도를 기준으로 추천 이미지 처리 모드를 결정하게 된다. 예컨대, 상기 완성도가 미리 정해진 임계값을 초과하는 이미지 처리 모드를 추천 이미지 처리 모드로 결정하거나, 상기 완성도가 상대적으로 높은 미리 정해진 수(예, 3개)의 이미지 처리 모드를 추천 이미지 처리 모드로 결정할 수 있다. 예컨대, 상기 이미지 처리 모드는 베스트 이미지 모드, 베스트 페이스 모드, 드라마 이미지 처리 모드, 모션 이미지 처리 모드 등을 포함할 수 있다.
S114 과정은 획득된 정보, 예컨대, 이미지 처리 모드 추천 정보(1203)를 제공할 수 있다. 이러한 이미지 처리 모드 추천 정보는 S113 및 S114 과정에서 확인된 추천 이미지 처리 모드와, 상기 추천 이미지 처리 모드에 사용되는 원본 이미지에 대한 정보와, 상기 추천 이미지 처리 모드에 대응되는 프리뷰 이미지와, 상기 추천 이미지 처리 모드를 선택하기 위해 사용된 파라미터 값 등 중, 적어도 하나를 포함할 수 있다(도 3참조).
S114 과정에서 제공되는 이미지 처리 모드 추천 정보는 저장되는 이미지(예, 인코딩 데이터)와 연동되어 저장될 수 있으며, 전자장치에서 실행되는 다양한 어플리케이션에 다양하게 활용될 수 있다.
도 13a 내지 도 13c는 본 발명의 다양한 실시예에 따른 이미지 처리 방법에서 제공되는 사용자 인터페이스를 예시하는 도면이다.
도 13a는 본 발명의 다양한 실시예에 따른 이미지 처리 방법에서 제공되는 카메라 UI(1310)를 예시한다. 카메라 UI(1310)는 본 발명의 다양한 실시예에 따른 이미지 처리 방법의 동작이 개시됨에 따라 전자장치에 표시될 수 있다. 예컨대, 전자장치가 카메라 어플리케이션의 동작을 개시함에 따라, 본 발명의 다양한 실시예에 따른 이미지 처리 방법의 동작이 개시될 수 있으며, 프리뷰 이미지와 함께 카메라 UI(1310)가 표시될 수 있다. 카메라 UI(1310)는 프리뷰 이미지 상에 오버랩되어 표시될 수 있으며, 카메라 어플리케이션을 실행하면서 기본적으로 제공하는 메뉴 또는 촬영 버튼 등을 포함할 수 있다. 예컨대, 카메라 UI(1310)는 이미지 처리 모드(예, 동영상 이미지 처리 모드, 이미지 처리 모드, 파노라마 이미지 처리 모드)를 선택하는 모드 선택 메뉴(1311)를 포함할 수 있다. 모드 선택 메뉴(1311)는 사용자의 터치 입력 또는 드레그 제스처 입력에 의해 복수의 이미지 처리 모드들(예, 동영상 이미지 처리 모드, 이미지 처리 모드, 파노라마 이미지 처리 모드) 중 하나가 해당 영역의 중심 부분으로 이동시킴으로써, 이미지 처리 모드를 선택할 수 있다. 또한, 모드 선택 메뉴(1311)는 촬영 개시 입력을 발생시키는 촬영 버튼으로서의 기능을 수행할 수도 있다. 예컨대, 상기 선택된 이미지 처리 모드를 표시하는 표시자 또는 아이콘의 영역에 사용자 터치 입력이 발생됨에 따라, 이미지 촬영이 개시될 수 있다.
카메라 UI(1310)는 전자장치에 구비되는 복수의 카메라 중에서, 촬영에 사용할 카메라를 선택하는 카메라 선택 메뉴(1312)를 포함할 수 있다. 또한, 카메라 UI(1310)는 카메라 설정 값을 입력받는 카메라 설정 메뉴(1313)를 포함할 수 있다. 또한, 카메라 UI(1310)는 이미지의 초점을 표시하는 초점 표시자(1305)를 더 포함할 수 있다. 상기 초점 표시자(1305)는 이미지 촬영 동작을 진행하는 과정에서 검출되는 초점 영역 상에 구비되며, 검출된 초점 영역을 시각화하여 표시할 수 있다.
도 13b는 본 발명의 다양한 실시예에 따른 이미지 처리 방법에서 제공되는 영상 촬영 UI(1320)를 예시한다. 영상 촬영 UI(1320)는 복수의 원본 이미지를 획득하는 과정에서 제공될 수 있다. 예컨대, 촬영을 위한 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역 터치 입력 등)이 발생됨에 따라, 복수의 원본 이미지를 획득하는 과정이 진행될 수 있다. 예컨대, 촬영 버튼으로서의 기능하는 모드 선택 메뉴(1311)를 사용하여, 즉 모드 선택 메뉴(1311)에서, 상기 선택된 이미지 처리 모드를 표시하는 표시자 또는 아이콘의 영역에 사용자 터치 입력이 발생됨에 따라, 복수의 원본 이미지를 획득하는 과정이 진행될 수 있으며, 이 과정에서, 영상 촬영 UI(1320)가 디스플레이 될 수 있다. 영상 촬영 UI(1320)는 복수의 원본 이미지가 획득되는 과정을 시각화 하여 표시하는 이미지 촬영 진행 표시자(1321)를 포함할 수 있다. 촬영되고 있는 이미지(또는 프리뷰 이미지) 상에 오버랩 되어 표시될 수 있다.
도 13c는 본 발명의 다양한 실시예에 따른 이미지 처리 방법에서 제공되는 추천 이미지 처리 모드 제공UI(1330)를 예시한다. 추천 이미지 처리 모드 제공UI(1330)는 전술한 다양한 실시예에서 예시한 이미지 처리 모드를 추천하는 정보를 제공하는 과정을 진행하면서 표시될 수 있다. 추천 이미지 처리 모드 제공UI(1330)는 프리뷰 이미지(또는 촬영된 이미지) 상에 오버랩되어 표시될 수 있으며, 전술한 다양한 실시예에서 예시한 촬영모드 추천정보를 시각화하여 표시할 수 있다. 예컨대, 추천 이미지 처리 모드 제공UI(1330)는 전술한 다양한 실시예에서 확인 또는 결정되는 추천 이미지 처리 모드를 시각화하여 표시하는 추천 이미지 처리 모드 표시자(1331)를 포함할 수 있다. 추천 이미지 처리 모드 표시자(1331)는 전자장치에서 제공하는 복수의 이미지 처리 모드, 예를 들어, 베스트 이미지 모드(1331a), 베스트 페이스 모드(1331b), 지우개 모드(1331c) 드라마 이미지 처리 모드(1331d), 모션 이미지 처리 모드(1331e) 등을 포함하여 표시하면서, 추천 이미지 처리 모드로 결정된 이미지 처리 모드가 두드러지게 식별될 수 있도록 표시할 수 있다. 예컨대, 추천 이미지 처리 모드로 결정된 이미지 처리 모드는 추천 이미지 처리 모드로 결정되지 않은 이미지 처리 모드에 비하여 상대적으로 진하게 표시할 수 있다. 또한 다른 예로써, 추천 이미지 처리 모드로 결정된 이미지 처리 모드는 미리 정해진 다양한 색상으로 표시하고, 추천 이미지 처리 모드로 결정되지 않은 이미지 처리 모드는 흑백의 색상으로 표시할 수도 있다.
또한, 추천 이미지 처리 모드 제공UI(1330)는 추천 이미지 처리 모드 표시자(1331)에 발생되는 사용자 입력을 사용하여, 상기 추천 이미지 처리 모드를 선택 받을 수 있다. 예컨대, 추천 이미지 처리 모드 표시자(1331)에 포함된 복수의 이미지 처리 모드, 예를 들어, 베스트 이미지 모드(1331a), 베스트 페이스 모드(1331b), 지우개 모드(1331c) 드라마 이미지 처리 모드(1331d), 모션 이미지 처리 모드(1331e)가 표시되는 상태에서 대응되는 영역에 사용자 입력이 발생되는 경우, 해당 이미지 처리 모드의 선택을 지시하는 정보를 제공할 수 있다. 해당 이미지 처리 모드의 선택을 지시하는 정보는 전자장치의 제어부 등에 제공되어, 해당 이미지 처리 모드에 대한 이미지 처리 등의 동작이 진행되도록 할 수 있다.
한편, 추천 이미지 처리 모드 제공UI(1330)는 추천 이미지 처리 모드 표시자(1331)가 표시되는 상태에서, 추천 이미지 처리 모드 표시자(1331)가 표시되지 않은 영역에 사용자 입력이 발생됨에 따라, 추천 이미지 처리 모드 제공UI(1330)의 제공을 종료할 수 있다. 그리고, 추천 이미지 처리 모드 제공 UI(1330)의 종료에 대응하여, 다시 카메라 UI(1310)가 표시될 수 있다.
또한, 추천 이미지 처리 모드 제공UI(1330)는 카메라 UI(1310)와 함께 표시될 수 있다. 따라서, 추천 이미지 처리 모드 제공UI(1330)는 추천 이미지 처리 모드 표시자(1331)가 표시되는 상태에서, 추천 이미지 처리 모드 표시자(1331)가 표시되지 않은 영역에 사용자 입력이 발생되는 경우, 추천 이미지 처리 모드 제공UI(1330)의 제공을 종료하고, 카메라 UI(1310) 만이 표시될 수 있다. 그리고, 추천 이미지 처리 모드 제공UI(1330)는 추천 이미지 처리 모드 표시자(1331)가 표시되는 상태에서, 카메라 UI(1310)의 모드 선택 메뉴(1311)의 이미지 처리 모드를 표시하는 표시자 또는 아이콘의 영역에 사용자 터치 입력이 발생됨에 따라, 이미지 촬영이 개시될 수 있다.
도 14는 본 발명의 일 실시예에 따른 이미지 처리 장치를 예시하는 블록도이다. 도 14를 참조하면, 본 발명의 일 실시예에 따른 이미지 처리 장치는 이미지 센서부(1401), 제어부(1410), 및 저장부(1420)를 포함할 수 있다.
이미지 센서부(1401)는 제어부(1410)에 의해 동작이 제어되며, 이미지 센서에 의해 획득되는 원본 이미지를 제어부(1410)에 제공한다.
이미지 센서부(1401)는 사용자의 입력에 기초하여 상기 원본 이미지를 제공할 수 있다. 예컨대, 촬영을 위한 사용자 입력(예, 촬영 버튼 입력, 촬영 버튼 영역의 터치 입력 등)이 발생됨에 따라, 제어부(1410)는 이미지 센서부(1401)로 원본 이미지 획득을 요청한다. 그리고, 이미지 센서부(1401)는 원본 이미지 획득이 요청된 시점을 중심으로 미리 정해진 시간(예, 1초)동안, 미리 정해진 시간(예, 1/30 초)단위마다 입력되는 복수(예, 30장)의 원본 이미지를 포함할 수 있다.
제어부(1410)는, 원본 이미지를 확인하여, 이미지 처리 모드를 추천하는 데 요구되는 정보를 분석한다. 그리고, 확인된 정보를 사용하여, 전자장치에서 제공하는 복수의 이미지 처리 모드 중, 적어도 하나의 이미지 처리 모드를 추천하는 동작을 처리한다. 이러한 동작은 제어부(1410)에 구비되는 전처리부(1414)에 의해 처리될 수 있다. 예컨대, 전처리부(1414)는 복수의 상기 원본 이미지 각각에 대해서 검출된 상기 전술한 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드에 각각에 적용한다. 그리고, 상기 이미지 처리 모드에 대한 완성도를 확인한다. 그리고, 상기 완성도를 기준으로 추천 이미지 처리 모드를 결정하게 된다. 예컨대, 상기 완성도가 미리 정해진 임계값을 초과하는 이미지 처리 모드를 추천 이미지 처리 모드로 결정하거나, 상기 완성도가 상대적으로 높은 미리 정해진 수(예, 3개)의 이미지 처리 모드를 추천 이미지 처리 모드로 결정할 수 있다. 예컨대, 상기 이미지 처리 모드는 베스트 이미지 모드, 베스트 페이스 모드, 드라마 이미지 처리 모드, 모션 이미지 처리 모드 등을 포함할 수 있다.
전처리부(1414)는 입력되는 원본 이미지에 각각에 대해서 전술한 분석 파라미터 값을 검출 해야하며, 상기 전술한 분석 파라미터 값을 전자장치에서 지원하는 이미지 처리 모드에 각각 적용하여, 추천 이미지 처리 모드를 결정할 수 있다. 이러한 동작을 처리하는 데는 많은 자원과, 시간이 소요될 수 있으며, 결과적으로는, 전자장치의 처리 속도를 저하시키거나, 배터리의 소모가 많게 되거나, 추천 이미지 처리 모드 정보를 제공하는데 많은 시간이 소모될 우려가 있다.
한편, 본 발명의 다양한 실시예에 따른 이미지 처리 장치는 입력되는 이미지에 대한 프리뷰 이미지를 디스플레이에 제공할 수 있다. 프리뷰 이미지는 사진으로서 촬영되는 이미지에 비하여 상대적으로 적은 크기와 해상도로 이루어질 수 있다. 이와같은 프리뷰 이미지의 제공을 위해, 제어부(1410)는 이미지 센서부(1401)에서 제공되는 원본 이미지를 프리뷰 이미지의 크기로 다운 스케일링 하는 스케일러(1412)를 포함할 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 장치는 전처리부(1414)의 동작을 좀 더 원활하게 처리하기 위하여, 상기 원본 이미지의 크기를 다운 사이징하고, 다운 사이징된 이미지를 사용하여 전처리부(1414)의 동작을 처리 할 수 있다. 이러한 점을 고려하여, 제어부(1410)는 스케일러(1412)를 통해 상기 원본 이미지의 크기가, 프리뷰 이미지의 크기로 다운 사이징된 이미지를 전처리부(1414)에 입력되도록 구비될 수 있다.
또한, 전처리부(1414)에서, 추천 이미지 처리 모드를 결정하는 동작은, 이미지 처리를 위해 많은 자원과, 시간이 소요될 수 있으며, 결과적으로는, 전자장치의 처리 속도를 저하시키거나, 배터리의 소모가 많게 되거나, 추천 이미지 처리 모드 정보를 제공하는데 많은 시간이 소모될 우려가 있다. 본 발명의 다양한 실시예로, 제어부(1410)는 전처리부(1414)가 복수의 원본 이미지 모두를 분석하여 추천 이미지 처리 모드를 결정하지 않고, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 원본 이미지를 검출하여 해당 원본 이미지를 분석할 수 있다. 이를 위해, 제어부(1410)는 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 적어도 하나의 원본 이미지를 추출하는 이미지 추출부(1411)를 더 포함할 수 있다. 상기 이미지 추출부(1411)는 이미지 센서부(1401)와 스케일러(1412) 사이에 구비될 수 있다. 다른 예로써, 상기 이미지 추출부(1411)는 스케일러(1412)와 전처리부(1414) 사이에 구비되는 것도 가능하다.
제어부(1410)는 인코딩부(1413)를 더 포함할 수 있다. 인코딩부(1413)는 원본 이미지에 대한 인코딩 처리를 수행하고, 이러한 처리를 통해 인코딩 데이터를 출력할 수 있다. 인코딩부(1413)는 본 발명의 기술분야에서 통상적으로 사용되는, 다양한 인코딩 방식(예, JPEG, BMP)을 사용하여 인코딩 처리를 수행할 수 있다. 이와 같이 생성된 인코딩 데이터(1421)는 전자장치에 실행되는 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에서 사용될 수 있다.
인코딩부(1413)는 상기 인코딩 데이터를 저장부(1420)에 제공하고, 저장부(1420)는 상기 인코딩 데이터(1421)를 저장할 수 있다. 또한, 인코딩부(1413)는 상기 인코딩 데이터에 대한 정보(이하, '인코딩 데이터 정보'라 함)를 전처리부(1414)에 제공할 수 있다. 이에 대응하여 전처리부(1414)는 상기 인코딩 데이터 정보와 원본 이미지(예,다운 사이징된 이미지)를 서로 매칭하는 동작을 처리할 수 있다. 상기 다운 사이징된 이미지와, 인코딩 데이터 정보를 서로 매칭하는 동작은, 서로 대응되는 다운 사이징된 이미지와, 인코딩 데이터 정보에 동일한 식별번호를 부여하는 넘버링(Nunbering) 방식이나, 동기화 수행(Synchronous execution) 방식이 사용될 수 있다.
비록 본 발명의 실시예에서, 상기 인코딩 데이터 정보가 전처리부(1414)에 제공되고, 전처리부(1414)가 상기 다운 사이징된 이미지와, 인코딩 데이터 정보를 서로 매칭하는 것을 예시하고 있으나, 본 발명이 이를 한정하는 것은 아니다. 다른 예로써, 인코딩부(1413)는 상기 인코딩 데이터 정보를 멀티 이미지 데이터 처리부(1415)에 제공할 수도 있다. 이에 대응하여 멀티 이미지 데이터 처리부(1415)는 상기 인코딩 데이터 정보와 원본 이미지(예,다운 사이징된 이미지)를 서로 매칭하는 동작을 처리할 수 있다.
전처리부(1414) 또는 멀티 이미지 데이터 처리부(1415)에 제공되는 인코딩 데이터 정보는 인코딩 데이터 스트림을 포함하거나, 또는 상기 인코딩 데이터가 저장되는 영역(예, URI 등)을 지시하는 정보를 포함할 수 있다.
한편, 멀티 이미지 데이터 처리부(1415)는 전처리부(1414)(또는 인코딩부(1413))로부터 제공되는 데이터를 포함하는 멀티 이미지 컨테이너를 생성할 수 있다. 예컨대, 추천 이미지 처리 모드에 사용되는 원본 이미지(예, 다운 사이징된 이미지)와, 그에 대응되는 인코딩 데이터 정보를 포함하는 멀티 이미지 컨테이너를 생성할 수 있다. 또한, 전처리부(1414)는 상기 추천 이미지 처리 모드를 결정하면서 발생되는 데이터(예, 이미지 처리 모드 추천 정보(도 3참조))를 멀티 이미지 데이터 처리부(1415)로 제공할 수 있으며, 상기 멀티 이미지 데이터 처리부(1415)는 원본 이미지(예, 다운 사이징된 이미지)와, 그에 대응되는 인코딩 데이터 정보와 함께, 상기 이미지 처리 모드 추천 정보를 포함하는 멀티 이미지 컨테이너를 생성할 수 있다.
나아가, 상기 멀티 이미지 데이터 처리부(1415)는 멀티 이미지 컨테이너를, 갤러리/이미지 편집 처리부(1416)등에 제공할 수 있으며, 갤러리 어플리케이션, 이미지 편집 어플리케이션 등에서 효과적으로 이용될 수 있다.
이하, 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비되는 전처리부(1414)의 구체적인 동작을 예시한다.
우선, 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비되는 전처리부(1414)는, 이미지 처리 모드를 추천하는 데 요구되는 정보, 예컨대, 얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 이동 객체의 움직임, 복수의 원본 이미지에 포함된 객체의 중첩 여부, 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값을 사용하여, 추천 이미지 처리 모드를 확인할 수 있다. 예컨대, 이미지 처리 모드를 추천하는 데 요구되는 정보(예, 파라미터 값)를 각각의 이미지 처리 모드에 적용하여, 상기 이미지 처리 모드에 대한 완성도를 확인한다. 그리고, 상기 완성도를 기준으로 추천 이미지 처리 모드를 결정하게 된다. 예컨대, 상기 완성도가 미리 정해진 임계값을 초과하는 이미지 처리 모드를 추천 이미지 처리 모드로 결정하거나, 상기 완성도가 상대적으로 높은 미리 정해진 수(예, 3개)의 이미지 처리 모드를 추천 이미지 처리 모드로 결정할 수 있다.
이러한 동작을 통해, 전처리부(1414)는, 추천 대상이 되는 이미지 처리 모드와, 추천 대상에 포함되지 않은 이미지 처리 모드를 구분할 수 있다. 이를 바탕으로, 전처리부(1414)는 복수의 다운 사이징된 이미지로부터, 추천 대상이 되는 이미지 처리 모드에 사용되는 다운 사이징된 이미지를 검출할 수 있다. 그리고, 다운 사이징된 이미지를 조합하여, 상기 추천 이미지 처리 모드에 대한 프리뷰 이미지를 생성하고, 디스플레이를 통해 출력할 수 있다.
또한, 전처리부(1414)는 상기 추천 이미지 처리 모드에 사용되지 않는 원본 이미지를 확인하고, 상기 추천 이미지 처리 모드에 사용되지 않는 원본 이미지는 삭제 처리할 수 있다. 이와 같이, 전처리부(1414)는 이전의 동작을 진행하면서 획득되었지만, 상기 추천 이미지 처리 모드에 사용되지 않아 활용성이 낮은 이미지들, 예컨대, 원본 이미지, 다운 사이징된 이미지, 또는 인코딩 데이터들이 제거될 수 있다. 따라서, 불필요한 데이터를 생성하기 위해 자원이 사용되거나, 불필요한 데이터를 저장하기 위해 저장 공간이 낭비되는 문제를 해소할 수 있는 유리한 효과를 생성할 수 있다.
또한, 전처리부(1414)는, 상기 추천 이미지 처리 모드에 사용되지 않는 원본 이미지에 대한 정보를 인코딩부(1413)로 제공할 수도 있다. 따라서, 인코딩부(1413)는 추천 이미지 처리 모드에 사용되지 않는 원본 이미지에 대해서는 인코딩 처리를 진행하지 않는 것도 가능하다.
도 15는 본 발명의 다른 실시예에 따른 이미지 처리 장치를 예시하는 블록도이다. 도 15를 참조하면, 본 발명의 다른 실시예에 따른 이미지 처리 장치는 이미지 센서부(1401), 제어부(1430), 및 저장부(1420)를 포함할 수 있다.
도 15에 도시된 이미지 처리 장치에 구비되는 이미지 센서부(1401) 및 저장부(1420)는 본 발명의 일 실시예에 따른 이미지 처리 장치, 즉 도 13에 예시되는 이미지 처리 장치에 구비되는 이미지 센서부(1401) 및 저장부(1420)와 동일하게 구성될 수 있다.
다만, 본 발명의 다른 실시예에 따른 이미지 처리 장치에 구비되는 제어부(1430)는 도 14에 예시되는 이미지 처리 장치에 구비되는 제어부(1410)과 다소 다르게 구비될 수 있다.
구체적으로, 전술한 본 발명의 일 실시예에 따른 이미지 처리 장치에서는, 추천 이미지 처리 모드를 결정하는 동작을 빠르고, 효율적으로 처리하기 위하여, 원본 이미지를 다운 사이징한 후, 추천 이미지 처리 모드를 결정하는 동작을 진행하는 것을 예시하였다. 그러나, 본 발명이 반드시 이를 한정하는 것은 아니며, 필요에 따라, 보다 정확하게 원본 이미지를 분석할 필요가 있거나, 전자장치가 원본 이미지를 분석할 수 있을 정도의 충분한 자원(예, 배터리, 프로세서 처리 속도, 저장 용량 등)을 구비하고 있을 경우, 원본 이미지를 다운 사이징하는 동작 없이 추천 이미지 처리 모드를 결정하기 위한 동작을 처리할 수도 있다.
본 발명의 다른 실시예에 따른 이미지 처리 장치는 이미지 센서부(1401)을 통해 제공되는 복수의 원본 이미지 모두를 분석하여 추천 이미지 처리 모드를 결정하지 않고, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 원본 이미지를 검출하여 해당 원본 이미지를 분석할 수 있다. 이를 위해, 이미지 추출부(1435)는 이미지 센서부(1401)을 통해 제공되는 복수의 원본 이미지 중, 추천 이미지 처리 모드를 결정하는데 주요한 정보를 포함하고 있는 적어도 하나의 원본 이미지를 추출하고, 추출된 원본 이미지를 전처리부(1414)에 제공할 수 있다.
이에 따라, 전처리부(1414)는 추출된 원본 이미지로부터, 이미지 처리 모드를 추천하는 데 요구되는 정보를 분석하는 동작을 처리한다.
전처리부(1414)는 추출된 원본 이미지로부터, 이미지 처리 모드를 추천하는 데 요구되는 정보를 분석하는 동작, 인코딩부(1413)가 원본 이미지를 인코딩하는 동작, 멀티 이미지 처리부(1415)라 멀티 이미지 컨테이터를 생성 및 제공하는 동작은 전술한 본 발명의 일 실시예에 따른 이미지 처리 장치와 동일하게 진행될 수 있다.
도 16은 본 발명의 다양한 실시 예에 따른 이미지 처리 방법 및 장치가 적용되는 전자장치에 대한 블록도이다. 도 16을 참조하면, 상기 전자 장치(100)는 버스(110), 프로세서(120), 메모리(130), 사용자 입력 모듈(140), 디스플레이 모듈(150), 또는 통신 모듈(160)을 포함할 수 있다.
상기 버스(110)는 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다.
상기 프로세서(120)는, 예를 들면, 상기 버스(110)를 통해 전술한 다른 구성요소들(예: 상기 메모리(130), 상기 사용자 입력 모듈(140), 상기 디스플레이 모듈(150), 상기 통신 모듈(160) 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
상기 메모리(130)는, 상기 프로세서(120) 또는 다른 구성요소들(예: 상기 사용자 입력 모듈(140), 상기 디스플레이 모듈(150), 상기 통신 모듈(160)등)로부터 수신되거나 상기 프로세서(120) 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리(130)는, 예를 들면, 커널(131), 미들웨어(132), 어플리케이션 프로그래밍 인터페이스(API: application programming interface)(133) 또는 어플리케이션(134) 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널(131)은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어(132), 상기 API(133) 또는 상기 어플리케이션(134)에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스(110), 상기 프로세서(120) 또는 상기 메모리(130) 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널(131)은 상기 미들웨어(132), 상기 API(133) 또는 상기 어플리케이션(134)에서 상기 전자 장치(100)의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어(132)는 상기 API(133) 또는 상기 어플리케이션(134)이 상기 커널(131)과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어(132)는 상기 (다수의) 어플리케이션들(134)로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 (다수의) 어플리케이션들(134)들 중 적어도 하나의 어플리케이션에 상기 전자 장치(100)의 시스템 리소스(예: 상기 버스(110), 상기 프로세서(120) 또는 상기 메모리(130) 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 로드 밸런싱을 수행할 수 있다.
상기 API(133)는 상기 어플리케이션(134)이 상기 커널(131) 또는 상기 미들웨어(132)에서 제공하는 기능을 제어할 수 있는 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수를 포함할 수 있다.
상기 사용자 입력 모듈(140)은, 예를 들면, 사용자로부터 명령 또는 데이터를 입력 받아 상기 버스(110)를 통해 상기 프로세서(120) 또는 상기 메모리(130)에 전달할 수 있다. 상기 디스플레이 모듈(150)은 사용자에게 화상, 영상 또는 데이터 등을 표시할 수 있다.
상기 통신 모듈(160)은 다른 전자 장치 102와 상기 전자 장치(100) 간의 통신을 연결할 수 있다. 상기 통신 모듈(160)은 소정의 근거리 통신 프로토콜(예: Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication) 또는소정의 네트워크 통신(예: Internet, LAN(local area network), WAN(wire area network), telecommunication network, cellular network, satellite network 또는 POTS(plain old telephone service) 등) 162을 지원할 수 있다. 상기 전자 장치 102, 104 각각은 상기 전자 장치(100)와 동일한 (예: 같은 타입의) 장치이거나 또는 다른 (예: 다른 타입의) 장치일 수 있다.
도 17은 본 발명의 다양한 실시 예에 따른 이미지 처리 방법 및 장치가 적용되는 하드웨어의 블록도이다. 상기 하드웨어(200)는, 예를 들면, 도 16에 도시된 전자 장치(100)일 수 있다. 도 17을 참조하면, 상기 하드웨어(200)는 하나 이상의 프로세서(210), SIM(subscriber identification module) 카드(214), 메모리(220), 통신 모듈(230), 센서 모듈(240), 사용자 입력 모듈(250), 디스플레이 모듈(260), 인터페이스((270)), 오디오 코덱(280), 카메라 모듈(291), 전력관리 모듈(295), 배터리(296), 인디케이터(297) 또는 모터(298)를 포함할 수 있다.
상기 프로세서(210)(예: 상기 프로세서(120))는 하나 이상의 어플리케이션 프로세서(AP: application processor)(211) 또는 하나 이상의 커뮤니케이션 프로세서(CP: communication processor)(213)를 포함할 수 있다. 상기 프로세서(210)는, 예를 들면, 도 16에 도시된 프로세서(120)일 수 있다. 도 17에서는 상기AP(211) 및 상기 CP(213)가 프로세서(210) 내에 포함된 것으로 도시되었으나, 상기 AP(211) 와 상기 CP(213)는 서로 다른 IC 패키지들 내에 각각 포함될 수 있다. 한 실시예에서는 상기 AP(211) 및 상기 CP(213)는 하나의 IC 패키지 내에 포함될 수 있다.
상기 AP(211)는 운영체제 또는 응용 프로그램을 구동하여 상기 AP(211)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어하고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP(211)는, 예를 들면, SoC(system on chip)로 구현될 수 있다. 한 실시예에 따르면, 상기 프로세서(210)는 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
상기 CP(213)는 상기 하드웨어(200)를 포함하는 전자 장치(예: 상기 전자 장치(100))와 네트워크로 연결된 다른 전자 장치들 간의 통신에서 데이터 링크를 관리하고 통신 프로토콜을 변환하는 기능을 수행할 수 있다. 상기 CP(213)는, 예를 들면, SoC로 구현될 수 있다. 한 실시예에 따르면, 상기 CP(213)는 멀티미디어 제어 기능의 적어도 일부를 수행할 수 있다. 상기 CP(213)는, 예를 들면, 가입자 식별 모듈(예: SIM 카드(214))을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 또한, 상기 CP(213)는 사용자에게 음성 통화, 영상 통화, 문자 메시지 또는 패킷 데이터(packet data) 등의 서비스들을 제공할 수 있다.
또한, 상기 CP(213)는 상기 통신 모듈(230)의 데이터 송수신을 제어할 수 있다. 도 17에서는, 상기 CP(213), 상기 전력관리 모듈(295) 또는 상기 메모리(220) 등의 구성요소들이 상기 AP(211)와 별개의 구성요소로 도시되어 있으나, 한 실시예에 따르면, 상기 AP(211)가 전술한 구성요소들의 적어도 일부(예: 상기 CP(213))를 포함하도록 구현될 수 있다.
한 실시예에 따르면, 상기 AP(211) 또는 상기 CP(213)는 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP(211) 또는 상기 CP(213)는 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 SIM 카드(214)는 가입자 식별 모듈을 구현한 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드(214)는 고유한 식별 정보(예: ICCID(integrated circuit card identifier))또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리(220)는 내장 메모리(222) 또는 외장 메모리(224)를 포함할 수 있다. 상기 메모리(220)는, 예를 들면, 도 15에 도시된 메모리(130)일 수 있다. 상기 내장 메모리(222)는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 상기 내장 메모리(222)는 Solid State Drive (SSD)의 형태를 취할 수도 있다. 상기 외장 메모리(224)는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다.
상기 통신 모듈(230)은 무선 통신 모듈(231) 또는 RF 모듈(234)을 포함할 수 있다. 상기 통신 모듈(230)은, 예를 들면, 도 16에 도시된 통신 모듈(160)일 수 있다. 상기 무선 통신 모듈(231)은, 예를 들면, WiFi(233), BT(bluetooth)(235), GPS(237) 또는 NFC(near field communication)(239)를 포함할 수 있다. 예를 들면, 상기 무선 통신 모듈(231)은 무선 주파수를 이용하여 무선 통신 기능을 제공할 수 있다. 추가적으로 또는 대체적으로, 상기 무선 통신 모듈(231)은 상기 하드웨어(200)를 네트워크(예: Internet, LAN(local area network), WAN(wire area network), telecommunication network, cellular network, satellite network 또는 POTS(plain old telephone service) 등)와 연결시키기 위한 네트워크 인터페이스(예: LAN card) 또는 모뎀 등을 포함할 수 있다.
상기 RF 모듈(234)은 데이터의 송수신, 예를 들면, RF 신호 또는 호출된 전자 신호의 송수신을 담당할 수 있다. 상기 RF 모듈(234)은, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈(234)은 무선통신에서 자유공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다.
상기 센서 모듈(240)은, 예를 들면, 제스처 센서(240A), 자이로 센서(240B), 기압 센서(240C), 마그네틱 센서(240D), 가속도 센서(240E), 그립 센서(240F), 근접 센서(240G), RGB(red, green, blue) 센서(240H), 생체 센서(240I), 온/습도 센서(240J), 조도 센서(240K) 또는 UV(ultra violet) 센서(240M) 중의 적어도 하나를 포함할 수 있다. 상기 센서 모듈(240)은 물리량을 계측하거나 전자 장치의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 추가적으로/대체적으로, 상기 센서 모듈(240)은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시) 또는 지문 센서 등을 포함할 수 있다. 상기 센서 모듈(240)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어회로를 더 포함할 수 있다.
상기 사용자 입력 모듈(250)은 터치 패널(touch panel)(252), (디지털) 펜 센서(pen sensor)(254), 키(key)(256) 또는 초음파 입력 장치(258)를 포함할 수 있다. 상기 사용자 입력 모듈(250)은, 예를 들면, 도 15에 도시된 사용자 입력 모듈(140)일수 있다. 상기 터치 패널(252)은, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널(252)은 컨트롤러(미도시)를 더 포함할 수도 있다. 정전식의 경우, 직접 터치뿐만 아니라 근접 인식도 가능하다. 상기 터치 패널(252)은 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널(252)은 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서(254)는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키(256)로서, 예를 들면, 키패드 또는 터치 키가 이용될 수 있다. 상기 초음파 입력 장치(258)는 초음파 신호를 발생하는 펜을 통해, 전자 장치에서 마이크(예: 마이크(288))로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시예에 따르면, 상기 하드웨어(200)는 상기 통신 모듈(230)를 이용하여 이와 연결된 외부 장치(예: 네트워크, 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 모듈(260)은 패널(262) 또는 홀로그램(264)을 포함할 수 있다. 상기 디스플레이 모듈(260)은, 예를 들면, 도 15에 도시된 디스플레이 모듈(150)일 수 있다. 상기 패널(262)은, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널(262)은, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널(262)은 상기 터치 패널(252)과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램(264)은 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 한 실시예에 따르면, 상기 디스플레이 모듈(260)은 상기 패널(262) 또는 상기 홀로그램(264)을 제어하기 위한 제어회로를 더 포함할 수 있다.
상기 인터페이스((270))는, 예를 들면, HDMI(high-definition multimedia interface)(272), USB(universal serial bus)(274), 프로젝터(276) 또는 D-sub(D-subminiature)(278)를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스(270)는, 예를 들면, SD(secure Digital)/MMC(multi-media card)(미도시) 또는 IrDA(infrared data association, 미도시)를 포함할 수 있다.
상기 오디오 코덱(280)은 음성과 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 코덱(280)은, 예를 들면, 스피커(282), 리시버(284), 이어폰(286) 또는 마이크(288) 등을 통해 입력 또는 출력되는 음성 정보를 변환시킬 수 있다.
상기 카메라 모듈(291)은 화상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 렌즈 또는 후면 렌즈), ISP(image signal processor, 미도시) 또는 플래쉬 LED(flash LED, 미도시)를 포함할 수 있다.
상기 전력관리 모듈(295)은 상기 하드웨어(200)의 전력을 관리할 수 있다. 도시하지는 않았으나, 상기 전력관리 모듈(295)은, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 게이지(battery fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리(296)의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리(296)는 전기를 생성하여 전원을 공급할 수 있고, 예를 들면, 충전식 전지(rechargeable battery)일 수 있다.
상기 인디케이터(297)는 상기 하드웨어(200) 혹은 그 일부(예: 상기 AP(211))의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터(298)는 전기적 신호를 기계적 진동으로 변환할 수 있다. 상기 MCU(299)은, 상기 센서 모듈(240)을 제어할 수 있다.
도시되지는 않았으나, 상기 하드웨어(200)는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 개시에 따른 하드웨어의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 개시에 따른 하드웨어는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 개시에 따른 하드웨어의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
본 개시에 사용된 용어"모듈"은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈"은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈"은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈”은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈"은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 개시에 따른 "모듈"은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
도 18은 본 발명의 다양한 실시 예에 따른 이미지 처리 방법 및 장치가 적용되는 프로그래밍 모듈의 블록도이다. 상기 프로그래밍 모듈(300)은 도 16에 도시된 전자 장치100(예: 상기 메모리(130))에 포함(예: 저장)될 수 있다. 상기 프로그래밍 모듈(300)의 적어도 일부는 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다. 상기 프로그래밍 모듈(300)은 하드웨어(예: 상기 하드웨어(200))에 구현되어 전자 장치(예: 상기 전자 장치(100))에 관련된 자원을 제어하는 운영체제(OS: operation system) 또는 운영체제 상에서 구동되는 다양한 어플리케이션(예: 상기 어플리케이션(370))을 포함할 수 있다. 예를 들면, 상기 운영체제는 안드로이드(Android), iOS, 윈도우즈(Windows), 심비안(Symbian), 타이젠(Tizen) 또는 바다(Bada) 등이 될 수 있다. 도 18을 참조하면, 상기 프로그래밍 모듈(300)은 커널(310), 미들웨어(330), API(application programming interface)(360) 또는 어플리케이션(370)을 포함할 수 있다.
상기 커널(310)(예: 상기 커널(131))은 시스템 리소스 매니저(311) 또는 디바이스 드라이버(312)를 포함할 수 있다. 상기 시스템 리소스 매니저(311)는, 예를 들면, 프로세스관리부(313), 메모리관리부(315) 또는 파일시스템관리부(317) 등을 포함할 수 있다. 상기 시스템 리소스 매니저(311)는 시스템 리소스의 제어, 할당 또는 회수 등을 수행할 수 있다. 상기 디바이스 드라이버(312)는, 예를 들면, 디스플레이 드라이버(314), 카메라 드라이버(316), 블루투스 드라이버(318), 공유 메모리 드라이버(320), USB 드라이버(322), 키패드 드라이버(324), WiFi 드라이버(326) 또는 오디오 드라이버 328를 포함할 수 있다. 또한, 한 실시예에 따르면, 상기 디바이스 드라이버(312)는 IPC (inter-process communication, 미도시) 드라이버를 포함할 수 있다.
상기 미들웨어(330)는 상기 어플리케이션(370)이 공통적으로 필요로 하는 기능을 제공하기 위해 미리 구현해 놓은 복수의 모듈들을 포함할 수 있다. 또한, 상기 미들웨어(330)는 상기 어플리케이션(370)이 전자 장치 내부의 제한된 시스템 자원을 효율적으로 사용할 수 있도록 상기 API(360)를 통해 기능을 제공할 수 있다. 예를 들면, 도 18에 도시된 바와 같이, 상기 미들웨어(330)(예: 상기 미들웨어(132))는 런타임 라이브러리(335), 어플리케이션 매니저(application manager)(341), 윈도우 매니저(window manager)(342), 멀티미디어 매니저(multimedia manager)(343), 리소스 매니저(resource manager)(344), 파워 매니저(power manager)(345), 데이터베이스 매니저(database manager)(346), 패키지 매니저(347), 연결 매니저(connectivity manager)(348), 통지 매니저(notification manager)(349), 위치 매니저(location manager)(350), 그래픽 매니저(graphic manager)(351) 또는 보안 매니저(security manager)(352) 중 적어도 하나를 포함할 수 있다.
상기 런타임 라이브러리(335)는, 예를 들면, 상기 어플리케이션(370)이 실행되는 동안에 프로그래밍 언어를 통해 새로운 기능을 추가하기 위해 컴파일러가 사용하는 라이브러리 모듈을 포함할 수 있다. 한 실시예에 따르면, 상기 런타임 라이브러리(335)는 입출력, 메모리 관리 또는 산술 함수에 대한 기능 등을 수행할 수 있다.
상기 어플리케이션 매니저(341)는, 예를 들면, 상기 어플리케이션(370)중 적어도 하나의 어플리케이션의 생명주기(life cycle)를 관리할 수 있다. 상기 윈도우 매니저(342)는 화면에서 사용하는 GUI 자원을 관리할 수 있다. 상기 멀티미디어 매니저(343)는 다양한 미디어 파일들의 재생에 필요한 포맷을 파악하고, 해당 포맷에 맞는 코덱(codec)을 이용하여 미디어 파일의 인코딩(encoding) 또는 디코딩(decoding)을 수행할 수 있다. 상기 리소스 매니저(344)는 상기 어플리케이션(370)중 적어도 어느 하나의 어플리케이션의 소스 코드, 메모리 또는 저장 공간 등의 자원을 관리할 수 있다.
상기 파워 매니저(345)는 바이오스(BIOS: basic input/output system) 등과 함께 동작하여 배터리(battery) 또는 전원을 관리하고, 동작에 필요한 전력 정보 등을 제공할 수 있다. 상기 데이터베이스 매니저(346)는 상기 어플리케이션(370) 중 적어도 하나의 어플리케이션에서 사용할 데이터베이스를 생성, 검색 또는 변경할 수 있도록 관리할 수 있다. 상기 패키지 매니저(347)는 패키지 파일의 형태로 배포되는 어플리케이션의 설치 또는 업데이트를 관리할 수 있다.
상기 연결 매니저(348)는, 예를 들면, WiFi 또는 블루투스 등의 무선 연결을 관리할 수 있다. 상기 통지 매니저(349)는 도착 메시지, 약속, 근접성 알림 등의 사건(event)을 사용자에게 방해되지 않는 방식으로 표시 또는 통지할 수 있다. 상기 위치 매니저(350)는 전자 장치의 위치 정보를 관리할 수 있다. 상기 그래픽 매니저(351)는 사용자에게 제공될 그래픽 효과 또는 이와 관련된 사용자 인터페이스를 관리할 수 있다. 상기 보안 매니저(352)는 시스템 보안 또는 사용자 인증 등에 필요한 제반 보안 기능을 제공할 수 있다. 한 실시예에 따르면, 전자 장치(예: 상기 전자 장치(100))가 전화 기능을 구비한 경우에는, 상기 미들웨어(330)는 상기 전자 장치의 음성 또는 영상 통화 기능을 관리하기 위한 통화 매니저(telephony manager, 미도시)를 더 포함할 수 있다.
상기 미들웨어(330)는 전술한 내부 구성요소 모듈들의 다양한 기능 조합을 통해 새로운 미들웨어 모듈을 생성하여 사용할 수 있다. 상기 미들웨어(330)는 차별화된 기능을 제공하기 위해 운영체제의 종류 별로 특화된 모듈을 제공할 수 있다. 또한, 상기 미들웨어(330)는 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다. 따라서, 본 개시의 실시예에 기재된 구성요소를 일부 생략하거나 다른 구성요소를 더 구비하거나 또는 유사한 기능을 수행하는 다른 명칭을 갖는 구성요소로 대체할 수 있다.
상기 API(360)(예: 상기 API(133))는 API 프로그래밍 함수들의 집합으로, 운영체제에 따라 다른 구성으로 제공될 수 있다. 예를 들면, 안드로이드 또는 iOS의 경우, 예를 들면, 플랫폼 별로 하나의 API 셋을 제공할 수 있으며, 타이젠(Tizen)의 경우, 예를 들면, 두 개 이상의 API 셋을 제공할 수 있다.
상기 어플리케이션(370)(예: 상기 어플리케이션(134))은, 예를 들면, 프리로드 어플리케이션(preloaded Application) 또는 제 삼자 어플리케이션(third party application)을 포함할 수 있다.
상기 프로그래밍 모듈(300)의 적어도 일부는 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서(210))에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리 260가 될 수 있다. 상기 프로그래밍 모듈(300)의 적어도 일부는, 예를 들면, 상기 프로세서(210)에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈(300)의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 및/또는 프로세스 등을 포함할 수 있다.
본 개시에 따른 프로그래밍 모듈(예: 상기 프로그래밍 모듈(300))의 구성요소들의 명칭은 운영체제의 종류에 따라서 달라질 수 있다. 본 개시에 따른 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 개시에 따른 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 처리될 수 있으며, 또한 일부 동작이 생략되거나, 다른 동작이 추가될 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 방법은 전자장치에서 촬영되는 이미지를 처리하는 방법에 있어서, 상기 촬영되는 이미지로부터 복수의 원본 이미지를 획득하는 과정과, 상기 복수의 원본 이미지를 분석하는 과정과, 상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 과정을 포함할 수 있다.
상기 복수의 원본 이미지를 분석하는 과정은, 상기 복수의 원본 이미지 중 적어도 하나의 이미지를 다운 사이징하여 다운사이징 된 이미지를 획득하는 과정을 포함할 수 있다.
상기 복수의 원본 이미지를 분석하는 과정은, 상기 다운 사이징된 이미지에 대한 분석을 수행하는 과정을 포함할 수 있다.
상기 복수의 원본 이미지를 분석하는 과정은, 상기 분석 결과에 기반하여, 상기 다운 사이징된 이미지 중 적어도 하나의 이미지를 삭제하는 과정을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 방법은, 상기 복수의 원본 이미지를 인코딩한 인코딩 데이터를 생성하는 과정과, 상기 다운 사이징된 이미지와 인코딩 데이터를 매칭하는 과정과, 상기 다운 사이징된 이미지에 대한 정보와 상기 인코딩 데이터에 대한 정보 중 적어도 하나를 포함하는 멀티 이미지 컨테이너를 생성하는 과정을 더포함할 수 있다.
상기 복수의 원본 이미지를 분석하는 과정은, 상기 복수의 원본 이미지에 포함된 각각의 원본 이미지 중, 적어도 하나를 추출하는 과정과, 추출된 상기 적어도 하나의 원본 이미지에 대한 분석을 수행하는 과정을 포함할 수 있다.
상기 복수의 원본 이미지를 분석하는 과정은, 얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 상기 이동 객체의 움직임, 상기 복수의 원본 이미지에 포함된 객체의 중첩 여부, 상기 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값을 확인하는 과정을 포함할 수 있다.
상기 이미지 처리 모드를 추천하는 정보를 제공하는 과정은, 확인된 상기 적어도 하나의 파라미터 값을 사용하여, 추천 대상이 되는 상기 이미지 처리 모드를 결정하는 과정을 포함할 수 있다.
상기 이미지 처리 모드를 추천하는 정보를 제공하는 과정은, 상기 결정에 기반하여, 상기 원본 이미지 중, 적어도 하나를 삭제하는 과정을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 방법은, 상기 복수의 원본 이미지를 조합하여, 상기 추천 대상이 되는 상기 이미지 처리 모드에 대응되는 각각의 이미지를 생성하는 과정과, 상기 생성된 각각의 이미지를 제공하는 과정을 더 포함할 수 있다.
상기 복수의 원본 이미지를 인코딩한 인코딩 데이터를 생성하는 과정과, 상기 인코딩 데이터에 대한 정보와 상기 적어도 하나의 파라미터 값 중 적어도 하나를 포함하는 멀티 이미지 컨테이너를 생성하는 과정을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 장치는 원본 이미지를 생성 및 제공하는 이미지 센서부와, 상기 복수의 원본 이미지를 분석하고, 상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 제어부와, 상기 복수의 원본 이미지 및 상기 복수의 원본 이미지를 인코딩한 인코딩 데이터 중 적어도 하나를 저장하는 메모리부를 포함할 수 있다.
상기 제어부는, 상기 복수의 원본 이미지 중 적어도 하나의 원본 이미지를 다운 사이징하고, 적어도 하나의 다운 사이징된 이미지를 제공하는 스케일러와, 상기 적어도 하나의 다운 사이징된 이미지를 분석하고, 상기 분석된 결과를 사용하여, 이미지 처리 모드를 추천하는 정보를 제공하는 전 처리부를 포함할 수 있다.
상기 제어부는, 상기 복수의 원본 이미지 중, 적어도 하나를 추출하는 원본 이미지 추출부와, 추출된 상기 적어도 하나의 원본 이미지를 분석하고, 상기 분석된 결과를 사용하여, 상기 이미지 처리 모드를 추천하는 정보를 제공하는 전 처리부를 포함할 수 있다.
상기 제어부는, 상기 원본 이미지를 인코딩하여 인코딩 데이터를 생성 및 저장하는 인코딩부를 포함할 수 있다.
상기 제어부는, 상기 원본 이미지에 대한 정보와 상기 인코딩 데이터에 대한 정보를 포함하는 멀티 이미지 데이터를 생성 및 저장하는 멀티 이미지 데이터 처리부를 더포함할 수 있다.
상기 전 처리부는, 얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 상기 이동 객체의 움직임, 상기 복수의 원본 이미지에 포함된 객체의 중첩 여부, 상기 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값을 확인하는 동작을 처리할 수 있다.
상기 전 처리부는, 확인된 상기 적어도 하나의 파라미터 값을 사용하여, 추천 대상이 되는 상기 이미지 처리 모드를 결정하는 동작을 처리할 수 있다.
상기 전 처리부는, 상기 결정에 기반하여,상기 원본 이미지 중, 적어도 하나를 삭제하는 동작을 처리할 수 있다.
상기 전 처리부는, 상기 복수의 원본 이미지를 조합하여, 상기 추천 대상이 되는 상기 이미지 처리 모드에 대응되는 각각의 이미지를 생성하고, 상기 생성된 각각의 이미지를 제공하는 동작을 처리할 수 있다.
상기 원본 이미지를 인코딩하여 인코딩 데이터를 생성 및 저장하는 인코딩부와, 상기 원본 이미지에 대한 정보, 상기 인코딩 데이터에 대한 정보, 및 적어도 하나의 파라미터 값을 포함하는 멀티 이미지 데이터를 생성 및 저장하는 멀티 이미지 데이터 처리부를 포함할 수 있다.
본 발명의 다양한 실시예에 따른 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 촬영되는 이미지로부터 획득된 복수의 원본 이미지를 분석하는 동작과, 상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 동작을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 방법은, 전자장치에서 촬영되는 이미지를 처리하는 방법에 있어서, 상기 촬영되는 이미지로부터 복수의 원본 이미지를 획득하는 과정과, 상기 복수의 원본 이미지를 인코딩한 인코딩 데이터를 생성하는 과정과, 상기 복수의 원본 이미지 중, 적어도 하나의 이미지를 다운 사이징하는 과정과, 상기 다운 사이징된 이미지를 분석하는 과정과, 상기 분석된 결과를 사용하여, 이미지 처리 모드를 추천하는 정보를 제공하는 과정과, 상기 다운 사이징된 이미지에 매칭된 인코딩 데이터를 포함하는 멀티 이미지 컨테이너를 생성하는 과정을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 장치는 원본 이미지를 생성 및 제공하는 이미지 센서부와, 상기 복수의 원본 이미지 중, 적어도 하나의 이미지를 다운 사이징하는 스케일러와, 상기 원본 이미지를 인코딩하여 인코딩 데이터를 생성 및 저장하는 인코딩부와, 상기 다운 사이징된 이미지 및 상기 인코딩 데이터 중 적어도 하나를 저장하는 메모리부와, 상기 다운 사이징된 이미지를 분석하고, 상기 분석된 결과를 사용하여, 이미지 처리 모드를 추천하는 정보를 제공하는 전 처리부와, 상기 원본 이미지에 대한 정보와 상기 인코딩 데이터에 대한 정보를 포함하는 멀티 이미지 데이터를 생성 및 저장하는 멀티 이미지 데이터 처리부를 포함할 수 있다.
본 발명의 다양한 실시예에 따른 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 이미지 센서를 통해 획득된 복수의 원본 이미지를 인코딩한 인코딩 데이터를 생성하는 동작과, 상기 복수의 원본 이미지 중, 적어도 하나의 이미지를 다운 사이징하는 동작과, 상기 다운 사이징된 이미지를 분석하는 동작과, 상기 분석된 결과를 사용하여, 이미지 처리 모드를 추천하는 정보를 제공하는 동작과, 상기 다운 사이징된 이미지에 매칭된 인코딩 데이터를 포함하는 멀티 이미지 컨테이너를 생성하는 동작을 포함할 수 있다.

Claims (23)

  1. 전자장치에서 촬영되는 이미지를 처리하는 방법에 있어서,
    상기 촬영되는 이미지로부터 복수의 원본 이미지를 획득하는 동작과,
    상기 복수의 원본 이미지를 분석하는 동작과,
    상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 동작을 포함하는 이미지 처리 방법.
  2. 제1항에 있어서, 상기 복수의 원본 이미지를 분석하는 과정은,
    상기 복수의 원본 이미지 중 적어도 하나의 이미지를 다운 사이징하여 다운 사이징된 이미지를 획득하는 동작을 포함하는 이미지 처리 방법.
  3. 제2항에 있어서, 상기 복수의 원본 이미지를 분석하는 동작은,
    상기 다운 사이징된 이미지에 대한 분석을 수행하는 과정을 포함하는 이미지 처리 방법.
  4. 제2항에 있어서, 상기 복수의 원본 이미지를 분석하는 과정은,
    상기 분석 결과에 기반하여, 상기 다운 사이징된 이미지 중 적어도 하나의 이미지를 삭제하는 동작을 포함하는 이미지 처리 방법.
  5. 제2항에 있어서,
    상기 복수의 원본 이미지를 인코딩한 인코딩 데이터를 생성하는 과정과,
    상기 다운 사이징된 이미지와 상기 인코딩 데이터를 매칭하는 과정과,
    상기 다운 사이징된 이미지에 대한 정보와 상기 인코딩 데이터에 대한 정보 중 적어도 하나를 포함하는 멀티 이미지 컨테이너를 생성하는 과정을 더 포함하는 이미지 처리 방법.
  6. 제1항에 있어서, 상기 복수의 원본 이미지를 분석하는 과정은,
    상기 복수의 원본 이미지에 포함된 각각의 원본 이미지 중, 적어도 하나를 추출하는 과정과,
    추출된 상기 적어도 하나의 원본 이미지에 대한 분석을 수행하는 과정을 포함하는 이미지 처리 방법.
  7. 제1항에 있어서, 상기 복수의 원본 이미지를 분석하는 과정은,
    얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 상기 이동 객체의 움직임, 상기 복수의 원본 이미지에 포함된 객체의 중첩 여부, 상기 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값을 확인하는 과정을 포함하는 이미지 처리 방법.
  8. 제7항에 있어서, 상기 이미지 처리 모드를 추천하는 정보를 제공하는 과정은,
    확인된 상기 적어도 하나의 파라미터 값을 사용하여, 추천 대상이 되는 상기 이미지 처리 모드를 결정하는 과정을 포함하는 이미지 처리 방법.
  9. 제8항에 있어서, 상기 이미지 처리 모드를 추천하는 정보를 제공하는 과정은,
    상기 결정에 기반하여, 상기 원본 이미지 중, 적어도 하나를 삭제하는 과정을 포함하는 이미지 처리 방법.
  10. 제8항에 있어서,
    상기 복수의 원본 이미지를 조합하여, 상기 추천 대상이 되는 상기 이미지 처리 모드에 대응되는 각각의 이미지를 생성하는 과정과,
    상기 생성된 각각의 이미지를 제공하는 과정을 더 포함하는 이미지 처리 방법.
  11. 제7항에 있어서,
    상기 복수의 원본 이미지를 인코딩한 인코딩 데이터를 생성하는 과정과,
    상기 인코딩 데이터에 대한 정보와 상기 적어도 하나의 파라미터 값 중 적어도 하나를 포함하는 멀티 이미지 컨테이너를 생성하는 과정을 포함하는 이미지 처리 방법.
  12. 원본 이미지를 제공하는 이미지 센서부와,
    상기 복수의 원본 이미지를 분석하고, 상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 제어부와,
    상기 복수의 원본 이미지 또는 상기 복수의 원본 이미지를 인코딩한 인코딩 데이터 중 적어도 하나를 저장하는 메모리부를 포함하는 이미지 처리 장치.
  13. 제12항에 있어서, 상기 제어부는,
    상기 복수의 원본 이미지 중 적어도 하나의 원본 이미지를 다운 사이징하고, 적어도 하나의 다운 사이징된 이미지를 제공하는 스케일러와,
    상기 적어도 하나의 다운 사이징된 이미지를 분석하고, 상기 분석된 결과를 사용하여, 이미지 처리 모드를 추천하는 정보를 제공하는 전 처리부를 포함하는 이미지 처리 장치.
  14. 제12항에 있어서, 상기 제어부는,
    상기 복수의 원본 이미지 중, 적어도 하나를 추출하는 원본 이미지 추출부와,
    추출된 상기 적어도 하나의 원본 이미지를 분석하고, 상기 분석된 결과를 사용하여, 상기 이미지 처리 모드를 추천하는 정보를 제공하는 전 처리부를 포함하는 이미지 처리 장치.
  15. 제13항에 있어서, 상기 제어부는,
    상기 원본 이미지를 인코딩하여 인코딩 데이터를 생성 및 저장하는 인코딩부를 포함하는 이미지 처리 장치.
  16. 제15항에 있어서, 상기 제어부는,
    상기 원본 이미지에 대한 정보와 상기 인코딩 데이터에 대한 정보를 포함하는 멀티 이미지 데이터를 생성 및 저장하는 멀티 이미지 데이터 처리부를 더 포함하는 이미지 처리 장치.
  17. 제13항에 있어서, 상기 전 처리부는,
    얼굴 영역, 얼굴 표정, 이동 객체의 크기, 상기 이동 객체의 위치, 상기 이동 객체의 움직임, 상기 복수의 원본 이미지에 포함된 객체의 중첩 여부, 상기 복수의 원본 이미지의 상관도 중, 적어도 하나의 파라미터 값을 확인하는 동작을 처리하는 이미지 처리 장치.
  18. 제17항에 있어서, 상기 전 처리부는,
    확인된 상기 적어도 하나의 파라미터 값을 사용하여, 추천 대상이 되는 상기 이미지 처리 모드를 결정하는 동작을 처리하는 이미지 처리 장치.
  19. 제18항에 있어서, 상기 전 처리부는,
    상기 결정에 기반하여,상기 원본 이미지 중, 적어도 하나를 삭제하는 동작을 처리하는 이미지 처리 장치.
  20. 제18항에 있어서, 상기 전 처리부는,
    상기 복수의 원본 이미지를 조합하여, 상기 추천 대상이 되는 상기 이미지 처리 모드에 대응되는 각각의 이미지를 생성하고, 상기 생성된 각각의 이미지를 제공하는 동작을 처리하는 이미지 처리 장치.
  21. 제18항에 있어서,
    상기 원본 이미지를 인코딩하여 인코딩 데이터를 생성 및 저장하는 인코딩부와,
    상기 원본 이미지에 대한 정보, 상기 인코딩 데이터에 대한 정보, 및 적어도 하나의 파라미터 값을 포함하는 멀티 이미지 데이터를 생성 및 저장하는 멀티 이미지 데이터 처리부를 포함하는 이미지 처리 장치.
  22. 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은,
    촬영되는 이미지로부터 획득된 복수의 원본 이미지를 분석하는 동작과,
    상기 분석된 결과에 적어도 일부 기반하여, 이미지 처리 모드를 추천하는 정보를 제공하는 동작을 포함하는 저장 매체.
  23. 원본 이미지를 생성 및 제공하는 이미지 센서부와,
    상기 복수의 원본 이미지 중, 적어도 하나의 이미지를 다운 사이징하는 스케일러와,
    상기 원본 이미지를 인코딩하여 인코딩 데이터를 생성 및 저장하는 인코딩부와,
    상기 다운 사이징된 이미지 및 상기 인코딩 데이터 중 적어도 하나를 저장하는 메모리부와,
    상기 다운 사이징된 이미지를 분석하고, 상기 분석된 결과를 사용하여, 이미지 처리 모드를 추천하는 정보를 제공하는 전 처리부와,
    상기 원본 이미지에 대한 정보와 상기 인코딩 데이터에 대한 정보를 포함하는 멀티 이미지 데이터를 생성 및 저장하는 멀티 이미지 데이터 처리부를 포함하는 이미지 처리 장치.
KR1020140020927A 2014-02-20 2014-02-21 이미지 처리 방법 및 장치 KR102327779B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140020927A KR102327779B1 (ko) 2014-02-21 2014-02-21 이미지 처리 방법 및 장치
US14/591,408 US10181203B2 (en) 2014-02-21 2015-01-07 Method for processing image data and apparatus for the same
CN201510087408.1A CN104869305B (zh) 2014-02-20 2015-02-25 处理图像数据的方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140020927A KR102327779B1 (ko) 2014-02-21 2014-02-21 이미지 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150099317A true KR20150099317A (ko) 2015-08-31
KR102327779B1 KR102327779B1 (ko) 2021-11-18

Family

ID=53798544

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140020927A KR102327779B1 (ko) 2014-02-20 2014-02-21 이미지 처리 방법 및 장치

Country Status (3)

Country Link
US (1) US10181203B2 (ko)
KR (1) KR102327779B1 (ko)
CN (1) CN104869305B (ko)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140136303A (ko) * 2013-05-20 2014-11-28 삼성전자주식회사 하이브리드 신체 인식을 위한 장치 및 방법
JP2015195439A (ja) * 2014-03-31 2015-11-05 ソニー株式会社 画像処理装置、画像処理方法及びプログラム
CN105469463A (zh) * 2015-11-19 2016-04-06 莆田市云驰新能源汽车研究院有限公司 一种基于行车记录仪的路景分享方法及装置
KR102345579B1 (ko) * 2015-12-15 2021-12-31 삼성전자주식회사 이미지 관련 서비스를 제공하기 위한 방법, 저장 매체 및 전자 장치
CN105516675B (zh) * 2015-12-28 2018-11-16 同方威视技术股份有限公司 图像显示方法及用于图像显示的系统
TWI570635B (zh) * 2016-03-08 2017-02-11 和碩聯合科技股份有限公司 圖像辨識方法及執行該方法之電子裝置、電腦可讀取記錄媒體
CN105915793A (zh) * 2016-05-10 2016-08-31 北京奇虎科技有限公司 一种智能手表的拍照处理方法和装置
WO2018098931A1 (zh) * 2016-11-30 2018-06-07 华为技术有限公司 一种数据处理方法及装置
CN107193571A (zh) 2017-05-31 2017-09-22 广东欧珀移动通信有限公司 界面推送的方法、移动终端及存储介质
JP7159615B2 (ja) * 2018-05-22 2022-10-25 セイコーエプソン株式会社 画像処理装置、及び、ロボットシステム
US10713487B2 (en) * 2018-06-29 2020-07-14 Pixart Imaging Inc. Object determining system and electronic apparatus applying the object determining system
CN110163050B (zh) * 2018-07-23 2022-09-27 腾讯科技（深圳）有限公司 一种视频处理方法及装置、终端设备、服务器及存储介质
CN112653819B (zh) * 2020-12-15 2023-09-26 上海豫兴电子科技有限公司 车载摄像机的图像显示方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010047336A1 (ja) * 2008-10-20 2010-04-29 株式会社キャメロット 画像撮影システム及び画像撮影方法
US20100245610A1 (en) * 2009-03-31 2010-09-30 Electronics And Telecommunications Research Institute Method and apparatus for processing digital image
KR20120056265A (ko) * 2009-08-07 2012-06-01 퀄컴 인코포레이티드 이미지들을 프로세싱하는 장치 및 방법

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1107097A4 (en) * 1998-08-24 2007-10-17 Hitachi Ltd SYSTEM, DEVICE AND METHOD FOR DISPLAYING MULTIMEDIA INFORMATION PROCESSING
US6608633B1 (en) * 1998-10-30 2003-08-19 Sony Corporation Visual display of categorical information through visual factors such as scale and location
US6851090B1 (en) * 2000-10-30 2005-02-01 Koninklijke Philips Electronics N.V. Method and apparatus for displaying program recommendations with indication of strength of contribution of significant attributes
US7082211B2 (en) 2002-05-31 2006-07-25 Eastman Kodak Company Method and system for enhancing portrait images
JP3922298B2 (ja) * 2003-02-05 2007-05-30 セイコーエプソン株式会社 画像処理装置
JP4112394B2 (ja) * 2003-02-12 2008-07-02 株式会社リコー 画像処理装置
JP4783283B2 (ja) * 2004-04-28 2011-09-28 パナソニック株式会社 番組選択システム
US7590290B2 (en) * 2004-07-21 2009-09-15 Canon Kabushiki Kaisha Fail safe image processing apparatus
EP1694045B1 (en) * 2005-02-21 2015-08-19 Samsung Electronics Co., Ltd. Device and method for processing data resource changing events in a mobile terminal
JP2006238076A (ja) * 2005-02-25 2006-09-07 Fuji Photo Film Co Ltd 撮影装置
JP4840848B2 (ja) * 2005-09-21 2011-12-21 ソニー株式会社 撮影装置、情報処理方法、並びにプログラム
US8392594B2 (en) * 2007-01-30 2013-03-05 Sony Corporation System and method for effectively providing content to client devices in an electronic network
JP5191115B2 (ja) * 2006-10-04 2013-04-24 イーストマン コダック カンパニー ユーザインタフェース装置およびデジタルカメラ
JP5148989B2 (ja) * 2007-12-27 2013-02-20 イーストマン コダック カンパニー 撮像装置
WO2010047337A1 (ja) * 2008-10-20 2010-04-29 株式会社キャメロット 情報処理装置の動作制御システム及び動作制御方法
KR101599886B1 (ko) * 2009-09-29 2016-03-04 삼성전자주식회사 장면 모드 표시에 따른 영상 처리 장치 및 방법
CN102244716B (zh) * 2010-05-13 2015-01-21 奥林巴斯映像株式会社 摄像装置
US8593544B2 (en) * 2010-11-11 2013-11-26 Olympus Imaging Corp. Imaging apparatus, imaging method, and computer-readable recording medium
JP5619595B2 (ja) * 2010-12-24 2014-11-05 京セラ株式会社 携帯端末装置
JP5136669B2 (ja) * 2011-03-18 2013-02-06 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
EP2549738B1 (en) 2011-07-19 2013-08-28 Axis AB Method and camera for determining an image adjustment parameter
EP2592828A1 (en) * 2011-11-09 2013-05-15 OpenTV, Inc. Apparatus and method for navigating an electronic program guide
US9023016B2 (en) 2011-12-19 2015-05-05 Alcon Lensx, Inc. Image processor for intra-surgical optical coherence tomographic imaging of laser cataract procedures
KR101350882B1 (ko) 2012-05-21 2014-01-16 전자부품연구원 영상 분석 서버
CN103514593B (zh) 2012-06-18 2018-10-12 联想(北京)有限公司 图像处理方法及装置
KR20140021821A (ko) * 2012-08-09 2014-02-21 삼성전자주식회사 이미지 캡처 장치 및 이미지 캡처 방법
KR101709482B1 (ko) * 2013-01-16 2017-02-23 삼성전자주식회사 서버 장치 및 서버의 제어 방법
CN103413270A (zh) 2013-08-15 2013-11-27 北京小米科技有限责任公司 一种图像的处理方法、装置和终端设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010047336A1 (ja) * 2008-10-20 2010-04-29 株式会社キャメロット 画像撮影システム及び画像撮影方法
US20100245610A1 (en) * 2009-03-31 2010-09-30 Electronics And Telecommunications Research Institute Method and apparatus for processing digital image
KR20120056265A (ko) * 2009-08-07 2012-06-01 퀄컴 인코포레이티드 이미지들을 프로세싱하는 장치 및 방법

Also Published As

Publication number Publication date
CN104869305A (zh) 2015-08-26
US20150235366A1 (en) 2015-08-20
US10181203B2 (en) 2019-01-15
KR102327779B1 (ko) 2021-11-18
CN104869305B (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
KR102327779B1 (ko) 이미지 처리 방법 및 장치
US10944908B2 (en) Method for controlling camera and electronic device therefor
US10244177B2 (en) Method for processing image to generate relevant data based on user inputs and electronic device supporting the same
CN106060378B (zh) 用于设置拍摄模块的装置和方法
US9602286B2 (en) Electronic device and method for extracting encrypted message
CN107087101B (zh) 用于提供动态全景功能的装置和方法
EP3399742B1 (en) Method for processing image and electronic device for supporting same
KR102220443B1 (ko) 깊이 정보를 활용하는 전자 장치 및 방법
KR102031874B1 (ko) 구도 정보를 이용하는 전자 장치 및 이를 이용하는 촬영 방법
US10848669B2 (en) Electronic device and method for displaying 360-degree image in the electronic device
US10999501B2 (en) Electronic device and method for controlling display of panorama image
KR20150082940A (ko) 화면의 회전을 컨트롤할 수 있는 전자 장치 및 방법
KR20150054413A (ko) 시선 데이터에 따라 컨텐츠의 위치를 결정하는 전자 장치 및 방법
KR102206060B1 (ko) 전자 장치의 효과 디스플레이 방법 및 그 전자 장치
KR102482067B1 (ko) 전자 장치 및 그의 동작 방법
US9380463B2 (en) Method for displaying lock screen and electronic device thereof
EP3166099A2 (en) Electronic device and method for controlling display thereof
KR102109883B1 (ko) 컨텐츠 전송 방법 및 전자 장치
US20160286132A1 (en) Electronic device and method for photographing
KR20150027934A (ko) 다각도에서 촬영된 영상을 수신하여 파일을 생성하는 전자 장치 및 방법
KR20150043894A (ko) 복수의 영상의 프리뷰 영역을 조정하는 전자 장치 및 방법
KR20150054430A (ko) 복수의 센서 기능을 수행하는 전자 장치 및 방법
US20170118401A1 (en) Electronic device and method for processing image
KR20150117968A (ko) 입력방향에 따라 기능을 전환하는 전자 장치 및 방법
KR20150045560A (ko) 업 데이트 된 포스트 정보를 이용하여 컨텐츠를 분류하는 전자 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right