KR102013331B1 - 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법 - Google Patents

듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법 Download PDF

Info

Publication number
KR102013331B1
KR102013331B1 KR1020130019525A KR20130019525A KR102013331B1 KR 102013331 B1 KR102013331 B1 KR 102013331B1 KR 1020130019525 A KR1020130019525 A KR 1020130019525A KR 20130019525 A KR20130019525 A KR 20130019525A KR 102013331 B1 KR102013331 B1 KR 102013331B1
Authority
KR
South Korea
Prior art keywords
image
composite
user
camera
shooting reference
Prior art date
Application number
KR1020130019525A
Other languages
English (en)
Other versions
KR20140105688A (ko
Inventor
김대성
김소라
김현경
박항규
임승경
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020130019525A priority Critical patent/KR102013331B1/ko
Priority to EP14156320.5A priority patent/EP2770729B1/en
Priority to CN201410062750.1A priority patent/CN104010138A/zh
Priority to US14/188,232 priority patent/US9407834B2/en
Publication of KR20140105688A publication Critical patent/KR20140105688A/ko
Application granted granted Critical
Publication of KR102013331B1 publication Critical patent/KR102013331B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Telephone Function (AREA)
  • Image Processing (AREA)

Abstract

본 발명의 실시예에 따른 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법은, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 처리방법에 있어서, 이미지 합성 모드의 실행에 진입하는 과정과, 전면 카메라와 후면 카메라의 동시 또는 순차적 촬영을 수행하는 과정과, 상기 전, 후면 카메라를 통해 제1 이미지 및 제2 이미지를 획득하는 과정과, 상기 제1 이미지 또는 제2 이미지로부터 객체 이미지를 검출하는 과정 및 상기 객체 이미지를 미검출한 상기 제1 또는 제2 이미지에 상기 객체 이미지를 합성하여 합성 이미지를 생성하는 과정을 포함하는 것을 특징으로 한다.

Description

듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법{TERMINAL DEVICE AND METHOD FOR SYNTHESIZING A DUAL IMAGE IN DEVICE HAVING A DUAL CAMERA}
본 발명은 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법에 관한 것으로, 특히 전후면 카메라를 통해 획득한 카메라 전면과 후면의 이미지를 합성하고, 이에 관련한 이벤트를 자동적으로 합성 이미지에 표시할 수 있는 장치 및 방법에 관한 것이다.
현재 카메라휴대 단말기 및 카메라를 구비하는 휴대단말기는 전면 카메라 및 후면 카메라로 구성되는 듀얼 카메라를 구비하며, 이들 카메라들은 각각 휴대 단말기의 전면 및 후면에 장착하고 있다. 일반적으로 듀얼 카메라를 구비하는 휴대 단말기는 전면 및 후면 카메라를 각각 독립적으로 선택하여 전면 피사체를 찍거나 후면피사체를 촬영하고 있다.
즉, 종래의 듀얼 카메라휴대 단말기는 각각 서로 다른 이미지를 따로 촬영하고, 촬영된 이미지들을 따로 저장 관리하는 방식이다. 따라서 종래의 듀얼 카메라휴대 단말기는 사용자가 원하는 전후면 두 이미지를 촬영 시 함께 촬영하고 저장 및 합성이 불가능하고, 이를 위해서는 각각 두 카메라를 순차 구동하여 이미지들을 촬영한 후, 후보정을 통해 합성하거나 이미지를 합치는 방법을 사용하여야 했다. 그리고 이미지를 한 화면에 표현할 경우 이미지가 겹쳐지게 되어 이를 수동으로 배치하는 등의 사용자 조작과정이 추가로 필요하였다.
또한, 이미지를 합성하는데 있어, 합성되는 이미지의 변화를 원한다면, 사용자가 이미지를 수동적으로 수정, 변경 또는 편집해야 하는 불편함이 있었다.
상기와 같은 문제를 해결하기 위한 본 발명의 목적은 전후면 카메라를 통해 획득한 카메라 전면 이미지와 후면 이미지를 합성하고, 이에 관련한 이벤트를 합성 이미지에 적용할 수 있는 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법을 제공하는데 있다.
본 발명의 실시예에 따른 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법은, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 처리방법에 있어서, 이미지 합성 모드의 실행에 진입하는 과정과, 전면 카메라와 후면 카메라의 동시 또는 순차적 촬영을 수행하는 과정과, 상기 전, 후면 카메라를 통해 제1 이미지 및 제2 이미지를 획득하는 과정과, 상기 제1 이미지 또는 제2 이미지로부터 객체 이미지를 검출하는 과정 및 상기 객체 이미지를 미검출한 상기 제1 또는 제2 이미지에 상기 객체 이미지를 합성하여 합성 이미지를 생성하는 과정을 포함하는 것을 특징으로 한다.
또한 본 발명의 실시예에 따른 듀얼 카메라를 구비하는 이미지 합성 장치는, 휴대 단말기의 후면에 실장되어 제1 이미지를 획득하는 제1 카메라와, 상기 휴대 단말기의 전면에 실장되어 제2 이미지를 획득하는 제2 카메라와, 상기 제1 이미지 또는 제2 이미지로부터 객체 이미지를 검출하고, 상기 객체 이미지를 미검출한 상기 제1 또는 제2 이미지에 상기 객체 이미지를 합성하여 합성 이미지를 생성하는 제어부 및 상기 합성 이미지를 표시하는 표시부를 포함하는 것을 특징으로 한다.
본 발명은 듀얼 카메라를 구비하는 휴대 단말기에서 듀얼 카메라를 동시 또는 순차적으로 구동하여 듀얼 카메라에서 촬영되는 이미지를 사용자 이미지와 배경 이미지를 함께 획득할 수 있다. 그리고, 획득된 사용자 이미지와 배경 이미지 중 적어도 하나를 미리 저장된 이미지와 동일 여부를 비교판단하고, 이에 따라 동일한 해당 이미지에 미리 매핑된 제1 이벤트를 합성 이미지에 적용함으로써, 이미지에 관한 정보를 자동적으로 출력할 수 있다.
또한, 촬영 기준 위치와 촬영 기준 촬영 기준 시간 정보를 검출하고, 촬영 기준 위치가 사용자 활동 반경 이내에 해당하는지 또는 촬영 기준 시간에 해당하는 미리 저장된 스케줄이 있는지 여부를 판단하고, 이에 따라 사용자의 현재 활동 상태 또는 스케줄에 관한 정보를 합성 이미지에 자동적으로 출력할 수 있다.
또한, 사진 촬영과 공유시, 전후면 카메라 동시촬영을 통해 촬영자 본인에 대한 모습, 배경 정황 등을 함께 보여줄 수 있도록 하여 시그니쳐를 생성할 수 있고, 더불어 전후면 사진에 각기 다른 이펙트를 줄 수 있는 이점이 있다.
도 1은 본 발명의 실시예에 따른 듀얼 카메라를 구비하는 휴대 단말기의 구성을 도시하는 도면.
도 2는 본 발명의 실시예에 따라 듀얼 카메라를 구비하는 휴대 단말기에서 이미지를 합성하는 절차를 도시하는 흐름도.
도 3 내지 도 5는 본 발명의 실시예에 따른 듀얼 카메라를 구비하는 휴대 단말장치의 이미지 합성의 예를 설명하기 위한 도면.
도 6 및 도 7은 본 발명의 실시예에 따라 생성된 합성 이미지의 활용 예를 설명하기 위한 도면.
이하, 첨부된 도면을 참조하여 본 개시의 실시예들을 보다 상세하게 설명하고자 한다. 이 때 첨부된 도면에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 그리고 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다.
본 개시의 실시예에서 휴대 단말기는, 태블릿 PC, 이동 통신 단말기, 이동 전화기, 개인 정보 단말기(PDA, Personal Digital Assistant), 스마트 폰(smart phone), IMT-2000(International Mobile Telecommunication 2000) 단말기, CDMA(Code Division Multiple Access) 단말기, WCDMA(Wideband Code Division Multiple Access) 단말기, GSM(Global System for Mobile communication) 단말기, GPRS(General Packet Radio Service) 단말기, EDGE(Enhanced Data GSM Envisonment) 단말기, UMTS(Universal Mobile Telecommunication Service) 단말기 및 디지털 방송(Digital Broadcasting) 단말기 및 ATM(Automated Teller Machine) 등과 같은 모든 정보통신기기 및 멀티미디어 기기와 그에 대한 응용에도 적용될 수 있다.
본 발명의 듀얼 카메라를 구비하는 휴대 단말기는 전면 카메라와 후면 카메라를 동시에 구동하여 복수의 이미지를 획득하고, 획득된 이미지를 배경 이미지 및 사용자 이미지로 표시한다. 예컨대 전면 카메라를 통해 사용자 이미지를 획득하고, 후면 카메라를 통해 배경 이미지를 획득할 수 있으며, 이는 사용자의 카메라 선택에 의해 변경될 수 있다.
또한, 듀얼 카메라 휴대 단말기는 듀얼 모드에서 촬영 요구시 전면 카메라와 후면 카메라를 동시에 구동하여 촬영하거나 또는 설정된 순서에 따라 전면 카메라와 후면 카메라를 순차적으로 구동하여 촬영할 수 있으며, 촬영된 사용자 이미지 및 배경 이미지를 합성하여 하나의 정지 이미지로 생성할 수 있다. 여기서 상기 듀얼 모드는 사용자 이미지와 배경 이미지를 합성하기 위한 이미지 합성 모드라 지칭할 수 있다.
또한, 듀얼 카메라를 구비하는 휴대 단말기는 전면 카메라를 통해 획득한 사용자 이미지와 후면 카메라를 통해 획득한 배경 이미지를 편집하거나 변경할 수 있다. 예컨대, 사용자 이미지의 사이즈, 합성 시 배경 이미지에의 위치 변경 및/또는 표시되는 사용자 이미지의 형태, 즉 스타일 변경 등이 될 수 있다. 이때 상기 사용자 이미지의 편집은 듀얼 카메라를 구동하는 시점에서 편집할 수 있으며, 또는 듀얼 샷으로 촬영된 이미지를 편집할 수도 있다.
도 1은 본 발명의 실시예에 따른 듀얼 카메라를 구비하는 휴대 단말기의 구성을 도시하는 도면이다.
도 1을 참조하면, 본 발명의 실시예에 따른 듀얼 카메라를 구비하는 휴대 단말기는 제1 카메라부(140), 제2 카메라부(150), 영상 처리부(160), 제어부(100), 표시부(120), 입력부(130), 위치 측정부(190), 무선 통신부(170), 데이터 처리부(180), 오디오 처리부(111), 키 입력부(113) 및 저장부(115)를 포함하여 구성될 수 있다.
제1 카메라부(140)와 제2 카메라부(150)는 휴대 단말기에 구비된 전면 카메라와 후면 카메라를 일컬을 수 있다. 제1 카메라부(140)와 제2 카메라부(150)는 제어부(100)의 제어 하에 각각 독립적으로 또는 동시에 구동될 수 있다. 또한, 제1 카메라부(140)와 제2 카메라부(150)는 제어부(100)에 의해 정지 영상 또는 동영상을 촬영한다.
제1 카메라부(140)는 휴대 단말기의 전면에 있는 배경, 사물, 인물 등을 촬영하여 전면 이미지를 획득할 수 있고, 제2 카메라부(150)는 휴대 단말기의 배면에 있는 배경, 사물, 인물 등을 촬영하여 배면 이미지를 획득할 수 있다.
본 발명의 실시예에서는 주로 제1 카메라부(140)를 통해 촬영자 이미지, 즉 사용자 이미지를 획득하고, 제2 카메라부(150)를 통해 배경 이미지을 획득하는 예를 가정하기로 하고, 이는 설계자 또는 사용자의 임의에 따라 반대의 경우도 구현될 수 있음은 자명하다.
영상 처리부(160)는 제1 카메라부(140)와 제2 카메라부(150)에서 출력되는 영상신호를 표시하기 위한 화면 데이터를 발생하는 기능을 수행한다. 영상 처리부(160)는 제1 및 제2 카메라부(140, 150)에서 출력되는 영상신호를 프레임 단위로 처리하며, 상기 프레임 영상 데이터를 표시부(120)에 출력한다. 또한, 영상 처리부(160)는 영상코덱을 구비하며, 표시부(120)에 표시되는 프레임 영상 데이터를 설정된 방식으로 압축하거나, 압축된 프레임 영상 데이터를 원래의 프레임 영상 데이터로 복원하는 기능을 수행한다. 여기서 상기 영상코덱은 JPEG 코덱, MPEG4코덱, Wavelet 코덱 등이 될 수 있다. 영상 처리부(160)는 OSD(On Screen Display) 기능을 구비하며, 제어부(100)에 의하여 제어되어 표시되는 화면 크기에 따라 온-스크린(on-screen) 표시 데이터를 출력할 수 있다.
입력부(130)는 사용자로부터 이미지 합성 모드를 입력받을 수 있고, 사용자 이미지 또는 배경 이미지를 변경 및 변환시키기 위한 명령을 입력받을 수 있으며, 상기 사용자 이미지 또는 배경 이미지에 관련된 이벤트를 실행시키기 위한 명령을 입력받을 수 있다.
표시부(120)는 터치패널 및 표시패널을 포함하여 구성될 수 있다. 터치패널은 표시패널에 안착될 수 있다. 터치패널은 터치패널에 대한 사용자의 제스처에 응답하여 아날로그 신호(예, 터치 이벤트)를 발생하고, 아날로그 신호를 A/D 변환하여 제어부(100)로 전달한다.
제어부(100)는 전달된 터치 이벤트로부터 사용자의 제스처를 검출한다. 제어부(100)는 검출된 사용자 제스처에 응답하여 본 발명과 관련된 기능들을 제어한다. 사용자 제스처는 터치(touch)와 터치 제스처(touch gesture)로 구분된다.
다시 터치 제스처는 탭(Tap), 드래그(Drag) 및 플릭(Flick) 등을 포함할 수 있다. 즉 터치는 터치스크린에 접촉(contact)하고 있는 상태를 의미하고, 터치 제스처는 터치가 터치스크린에 접촉(touch-on)해서 터치 해제(touch-off)까지의 터치의 변화를 의미한다.
터치패널은 손 제스처를 감지하는 손 터치패널과 펜 제스처를 감지하는 펜 터치패널을 포함하여 구성된 복합 터치패널일 수 있다. 여기서 손 터치패널은 정전용량 방식으로 구성될 수 있다. 물론 손 터치패널은 저항막 방식(resistive type), 적외선 방식 또는 초음파 방식으로 구성될 수도 있다.
또한 손 터치패널은 사용자의 손 제스처에 의해서만 이벤트를 발생하는 것이 아니며, 다른 물체(예, 정전용량 변화를 가할 수 있는 전도성 재질의 물체)에 의해서도 터치 이벤트를 생성할 수 있다. 펜 터치패널은 전자유도방식(electromagnetic induction type)으로 구성될 수 있다. 이에 따라 펜 터치패널은 자기장을 형성할 수 있도록 특수 제작된 터치용 스타일러스 펜에 의해 터치 이벤트를 생성한다.
표시패널은 제어부(100)의 제어 하에, 제어부(100)로부터 입력받은 영상 데이터를 아날로그 신호로 변환하여 표시한다. 즉, 표시패널(134)은 다양한 화면들(picture) 예를 들면, 잠금 화면, 홈 화면, 환경 설정 화면, 애플리캐이션(줄여서 앱(App)) 실행 화면, 키패드 등을 표시한다.
특히, 본 발명의 표시 패널은 제1 카메라부(140)를 통해 획득한 사용자 이미지를 표시하거나, 제2 카메라부(150)를 통해 획득한 배경 이미지를 표시할 수 있으며, 상기 사용자 이미지와 배경 이미지가 합성되고, 이에 특정 이벤트가 적용된 이미지를 표시할 수 있다. 상기 사용자 이미지와 배경 이미지 및 합성 이미지를 동시에 또는 서로 다른 화면에 표시할 수 있다.
무선 통신부(170)는 기지국 또는 다른 장치와 무선 통신 기능을 수행한다. 통신부(170)는 송신신호의 주파수를 상승변환(frequency up converter) 및 전력 증폭하는 송신부와, 수신신호를 저잡음 증폭 및 주파수를 하강변환(frequency down converter)하는 수신부 등으로 구성된 RF통신부가 될 수 있다. 또한 상기 통신부는 변조부 및 복조부를 구비할 수 있다. 여기서 변조부는 송신신호를 변조하여 송신부에 전달하며, 복조부는 수신부를 통해 수신되는 신호를 복조한다. 이런 경우, 상기 변복조부는 LTE, WCDMA, GSM 등이 될 수 있으며, 또한 WIFI, WIBRO 등이 될 수 있다. 무선 통신부(170)는 공중 무선통신망 및/또는 인터넷 망에 접속되어 단말장치와 해당 망간의 무선 통신 기능을 수행할 수 있다. 또한, 무선 통신부(170)는 LTE 기지국과 통신할 수 있는 LTE 통신부 및 WIFI 통신부를 구비할 수 있다.
특히 본 발명의 실시예에 따른 무선 통신부(170)는 제어부(100)에 의해 사용자 이미지와 배경 이미지가 합성되되, 관련된 특정 이벤트가 적용된 합성 이미지를 외부로 송출하거나 수신하는데 이용될 수 있다.
오디오 처리부(111)는 스피커(SPK) 및 마이크(MIC)와 결합하여 음성 인식, 음성 녹음, 디지털 레코딩(recording) 및 통화기능을 위한 오디오 신호의 입력 및 출력 기능을 수행한다.
오디오 처리부(111)는 제어부(200)로부터 오디오 신호를 수신하고, 수신한 오디오 신호를 아날로그로 D/A 변환하고 증폭한 후 스피커(SPK)로 출력한다. 오디오 처리부(111)는 마이크(MIC)로부터 수신한 오디오 신호를 디지털로 A/D 변환한 후 제어부(100)로 제공한다.
키입력부(113)는 숫자 또는 문자 정보를 입력받고 각종 기능들을 설정하기 위한 다수의 키(버튼)들을 포함할 수 있다. 이러한 키들은 메뉴 불러오기 키, 화면 온/오프 키, 전원 온/오프 키 및 볼륨 조절키 등을 포함할 수 있다.
키입력부(113)는 사용자 설정 및 휴대단말장치의 기능 제어와 관련한 키 이벤트를 생성하여 제어부(100)로 전달한다.
키 이벤트는 전원 온/오프 이벤트, 볼륨 조절 이벤트, 화면 온/오프 이벤트 등을 포함할 수 있다. 제어부(100)는 이러한 키 이벤트에 응답하여 상기한 구성들을 제어한다. 한편 키입력부(113)의 키(버튼)는 하드 키(hard key)라 하고 터치스크린(130)에 표시되는 키(버튼)는 소프트 키(soft key)로 지칭될 수 있다.
저장부(115)는 제어부(100)의 보조기억장치로써, 디스크, 램(RAM), 롬(ROM) 및 플래시 메모리를 포함할 수 있다. 저장부(115)는 제어부(100)의 제어 하에 휴대단말장치에서 생성되거나 무선 통신부(105) 또는 외부 장치 인터페이스부(미도시)를 통해 외부장치(예컨대, 서버, 데스크탑 PC, 태블릿 PC 등)로부터 수신한 데이터를 저장할 수 있다.
저장부(115)는 부팅 프로그램 및 휴대단말장치의 운용을 위한 운영체제(OS, Operating System)을 저장한다.
저장부(115)는 내재화 애플리케이션(embedded application) 및 서드파티 애플리케이션(3rd party application)을 포함한다. 내재화 애플리케이션은 휴대단말장치에 기본적으로 탑재되어 있는 애플리케이션을 의미한다. 예컨대 내재화 애플리케이션은 브라우저(browser), 이메일(email),인스턴트 메신저(instant messenger) 등이 될 수 있다. 서드파티 애플리케이션은 주지되어 있는 바와 같이 온라인 마켓으로부터 휴대단말장치에 다운로드되어 설치될 수 있는 애플리케이션을 의미하며, 매우 다종다양하다. 이러한 서드파티 애플리케이션은 설치 및 제어가 자유롭다. 휴대단말장치가 켜지면 먼저 부팅 프로그램이 제어부(100)의 주기억장치(예, RAM)로 로딩(loading)된다. 이러한 부팅 프로그램은 휴대단말장치가 동작할 수 있게 운영체제를 주기억장치로 로딩한다. 또한 운영체제는 애플리케이션들을 주기억 장치로 로딩하여 실행한다. 이러한 부팅 및 로딩은 컴퓨터 시스템에서 널리 공지되어 있는 기술이므로 구체적인 설명은 생략한다.
특히, 본 발명의 실시예에 따른 저장부(115)는 제1 카메라(140)를 통해 획득한 사용자 이미지와 제2 카메라(150)를 통해 획득한 배경 이미지와, 제어부(100)에 의해 상기 사용자 이미지와 배경 이미지가 합성된 이미지 및 상기 사용자 이미지와 배경 이미지에 관련된 미리 저장된 이벤트가 적용된 합성 이미지 중 적어도 하나를 저장할 수 있다.
또한, 저장부(115)는 사용자 이미지와 배경 이미지에 관련하여 미리 매핑된 제1 이벤트, 촬영 기준 위치 정보와 촬영 기준 시간 정보 중 적어도 하나에 미리 매핑된 제2 이벤트 중 적어도 하나를 저장할 수 있다.
상기 제1 이벤트 및 제2 이벤트는 이모티콘, 문자, 숫자, 기호, 그림, 음성, 음향 데이터 등 중 적어도 하나를 추가하는 실행이거나, 합성되는 이미지의 모양, 형태, 색감 중 적어도 하나를 변환 또는 편집하는 실행 중 하나일 수 있다.
위치 측정부(190)는 촬영 기준 위치 설정을 위해 구비될 수 있고, 초음파 위치측정 시스템 또는 위성위치확인시스템(GPS: Global Positioning System)으로 구성될 수 있다.
위치 측정부(190)에 의해 측정된 촬영 기준 촬영 기준 위치 정보는 제어부(100)에 의해 미리 저장된 사용자의 활동 반경과 비교되어, 상기 촬영 기준 위치가 상기 사용자의 활동 반경 이내인지 여부가 판단될 수 있다.
더불어 제어부(100)는 촬영 기준 시간을 측정하여, 상기 촬영 기준 시간이 사용자의 미리 저장된 스케줄에 해당하는지 여부를 판단할 수 있다.
제어부(100)는 휴대단말장치의 전반적인 동작 및 휴대단말장치의 내부 구성들 간의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행하고, 배터리에서 상기 구성들로의 전원공급을 제어한다. 제어부(100)는 응용프로그램 및 운영체제를 저장하는 주기억장치와, 저장부(115)에 기록(write)할 데이터를 임시저장하고 저장부(115)로부터 읽어 온 데이터를 임시 저장하는 캐시메모리와, CPU(Central processing unit)와, GPU(graphic processing unit)등을 포함할 수 있다. 여기서 운영체제는 하드웨어와 프로그램간의 인터페이스 역할을 하면서, CPU, GPU, 주기억장치, 보조기억장치 등의 컴퓨터 자원을 관리한다.
즉, 운영체제는 휴대단말장치를 동작시키고 작업(task)의 순서를 정하며 CPU 연산 및 GPU 연산을 제어한다. 또한 운영체제는 응용 프로그램의 실행을 제어하는 기능과, 데이터와 파일의 저장을 관리하는 기능 등을 수행한다.
한편 주지된 바와 같이 CPU 는 자료의 연산 및 비교와, 명령어의 해석 및 실행 등을 수행하는 컴퓨터 시스템의 핵심적인 제어 유닛이다. GPU는 CPU를 대신하여, 그래픽과 관련한 자료의 연산 및 비교와, 명령어의 해석 및 실행 등을 수행하는 그래픽 제어 유닛이다. CPU와 GPU는 각각 두 개 이상의 독립 코어(예, 쿼드 코어(quad-core))가 단일 직접 회로로 이루어진 하나의 패키지(package)로 통합될 수 있다. 또한 CPU와 GPU는 하나의 칩으로 통합(SoC: System on chip)된 것일 수 있다. 또한 CPU와 GPU는 멀티 레이어(Multi layer)로 패키징(packaging)된 것일 수 있다. 한편 CPU 및 GPU를 포함하는 구성은 AP(Application Processor)라고 지칭될 수 있다.
특히, 본 발명에 따른 제어부(100)는 제1 및 제2 카메라(140, 150)를 통해 획득한 제1 및 제2 이미지에 포함된 사물, 인물, 배경을 인지한다. 그리고 제1 또는 제2 이미지에서 검출된 특정 사물 또는 인물 이미지를 잘라내어 타 이미지에서 인지된 배경에 상기 잘라낸 사물 또는 인물 이미지를 합성한다. 잘라내는 이미지는 사용자의 전신, 반신 또는 얼굴 영역 등으로 설정될 수 있다.
예컨대, 제어부(100)는 제1 이미지에 포함된 촬영자 이미지를 잘라내어 제2 이미지의 배경 영역에 이를 붙여넣기 함으로써, 서로 다른 카메라에 의해 획득한 이미지를 합성할 수 있다.
상기 잘라낸 이미지는 배경 이미지 중 일부에 오버레이 표시되거나, 사용자가 잘라낸 이미지를 터치(탭)한 상태에서 드래그 동작을 수행하거나, 드래그 앤 드롭 인터렉션을 수행하면, 제어부(100)는 잘라낸 이미지를 사용자의 터치에 따라 이동시켜 배경 이미지에 합성되는 위치를 변경한다.
여기서 제어부(100)는 제1 또는 제2 이미지 중 유사 색상이 넓게 분포된 영역, 패턴이 소정구간 반복되는 영역, 인물을 제외한 영역 중 적어도 하나의 영역을 배경 이미지로 검출할 수 있다. 또는 검출된 피사체가 미리 저장된 랜드 마크와 동일한 경우 이를 배경 이미지로 검출할 수 있다.
그리고, 제어부(100)는 적외선 센서나 인체의 열에 해당하는 장적외선을 감지하는 인체열 감지 수단 등을 이용하여 피사체 중 인물을 검출하고, 이에 대한 이미지를 사용자 이미지로 설정할 수 있다. 예컨대, 제어부(100)는 사용자 이미지에 터치되는 수에 따라 사용자 이미지의 수를 결정할 수 있고, 상기 터치되는 횟수가 설정된 수(즉, 설정된 사용자 이미지의 수)를 초과하면, 사용자 이미지를 그룹 이미지로 변경하여 설정할 수 있다.
또한, 제어부(100)는 획득된 상기 제1 이미지 및 제2 이미지중 적어도 하나가 미리 저장된 이미지와 일치하는지 판단하고, 상기 판단 결과 일치하는 경우, 해당 이미지와 매핑된 제1 이펙트를 추출하여, 상기 제1 이펙트를 상기 합성 이미지에 적용한다.
상기 미리 저장된 이미지는 랜드 마크(land mark), 사용자가 미리 설정하여 저장한 특정 오브젝트, 사용자가 미리 설정하여 저장한 특정 인물 중 적어도 하나일 수 있다.
상기 제1 이펙트는 제1 또는 제2 이미지에 관한 정보를 나타내는 문자, 숫자, 기호, 그림, 음성, 음향 데이터, 이모티콘 등 중 적어도 하나를 상기 합성 이미지에 추가하는 실행이거나, 상기 합성되는 제1 또는 제2 이미지의 모양, 형태, 색감 중 적어도 하나를 변환 또는 편집하는 실행 중 적어도 하나일 수 있다.
그리고 제어부(100)는 촬영 기준 위치 정보와 촬영 기준 시간 정보 중 적어도 하나를 검출하고, 상기 검출된 위치 및 시간 중 적어도 하나의 정보에 미리 매핑된 제2 이펙트를 추출하여, 상기 제2 이펙트를 상기 합성 이미지에 적용할 수 있다.
즉, 제어부(100)는 수집된 위치가 사용자의 기저장된 활동 반경 이내인지 여부와 수집된 시간이 사용자의 기저장된 스케줄에 해당하는지 여부를 판단할 수 있고, 이에 따라 상기 제2 이펙트를 추출할 수 있다.
예컨대, 제어부(100)는 상기 검출된 촬영 기준 위치 정보 및 촬영 기준 시간 정보 중 적어도 하나에 매핑된 여행, 출장, 주거, 회사, 학교, 학원, 출퇴근, 등하교, 근무, 공부, 운동, 휴식, 연애, 모임 중 적어도 하나에 관한 정보를 상기 제2 이펙트로서 상기 합성된 이미지에 자동으로 출력할 수 있다.
상기 제2 이펙트는 검출된 촬영 기준 위치 정보와 촬영 기준 시간 정보 중 적어도 하나에 관련된 정보를 나타내는 데이터로서, 이모티콘, 문자, 기호, 숫자, 그림, 음성, 음향 데이터 등 중 적어도 하나의 형태로 출력될 수 있다.
그리고 제어부(100)는, 상기 검출된 인물 이미지 및 배경 이미지에 따라 상기 합성 이미지에 매핑될 이벤트를 사용자에게 추천하여 표시할 수 있다.
상기 추천되는 이벤트는, 상기 인물 이미지 및 배경 이미지에 따라 합성 이미지의 모양, 형태, 색감을 변환 또는 편집하는 실행과, 상기 인물 이미지 및 배경 이미지에 관한 정보를 나타내는 문자, 숫자, 기호, 그림, 이모티콘, 음성, 음향 데이터 중 적어도 하나를 상기 합성 이미지에 추가하는 실행 중 적어도 하나일 수 있다.
도 2는 본 발명의 실시예에 따라 듀얼 카메라를 구비하는 휴대 단말기에서 이미지를 합성하는 절차를 도시하는 흐름도이다.
도 2를 참조하면, 제어부(100)는 사용자로부터 이미지 합성 모드의 실행을 위한 명령을 입력받음으로써, 이미지 합성 모드의 실행에 진입할 수 있다.(210 단계) 이때, 이미지 합성 모드가 실행되지 않으면, 해당 기능으로서 예컨대 일반적인 카메라 동작인 전면 카메라 또는 후면 카메라 중 하나의 카메라만 실행될 수 있다.(215 단계)
210 단계에서 이미지 합성 모드의 실행에 진입하면, 제어부(100)는 휴대 단말기의 전면 카메라와 후면 카메라를 동시 또는 순차적으로 실행시킨다.(217 단계)
217 단계 이후, 제어부(100)는 전면 카메라를 통해 제1 이미지를 획득하고, 후면 카메라를 통해 제2 이미지를 획득한다.(219 단계)
예컨대, 전면 카메라를 통해 획득하는 제1 이미지는 촬영자 본인을 촬영하기 위한 목적으로 획득된 사용자 이미지일 수 있고, 후면 카메라를 통해 획득하는 제2 이미지는 배경, 정황 등을 촬영하기 위한 목적으로 획득된 배경 이미지일 수 있다.
219 단계 이후, 제어부(100)는 상기 제1 이미지 및 제2 이미지를 파싱함으로써 이에 포함된 사물, 인물, 배경을 검출할 수 있다.(220 단계) 여기서 제어부(100)는 제1 또는 제2 이미지 중 유사 색상이 넓게 분포된 영역, 패턴이 소정구간 반복되는 영역, 인물을 제외한 영역 중 적어도 하나의 영역을 배경 이미지로 검출할 수 있다. 또는 검출된 피사체가 미리 저장된 랜드 마크와 동일한 경우 이를 배경 이미지로 검출할 수 있다. 그리고, 제어부(100)는 적외선 센서나 인체의 열에 해당하는 장적외선을 감지하는 인체열 감지 수단 등을 이용하여 피사체 중 인물 또는 동물을 검출할 수 있다.
220 단계 이후, 제어부(100)는 제1 또는 제2 이미지에서 검출된 사물, 동물, 인물 이미지 중 적어도 하나를 잘라내어 타 이미지에서 인지된 배경에 상기 잘라낸 이미지를 합성할 수 있다.(230 단계) 예컨대, 제어부(100)는 제1 이미지에 포함된 촬영자 이미지를 잘라내어 제2 이미지의 배경 영역에 이를 붙여넣기 함으로써, 서로 다른 카메라에 의해 획득한 이미지를 합성할 수 있다.
230 단계 이후, 제어부(100)는 상기 합성 이미지의 촬영자 이미지나 배경 이미지가 미리 저장된 이미지와 일치하는지 여부를 비교 판단할 수 있다.(240 단계)
상기 미리 저장된 이미지는 사용자가 이전에 휴대 단말기의 제1 또는 제2 카메라(140, 150)를 이용하여 촬영하고 저장한 이미지일 수 있고, 상기 이미지는 사용자에 의해 특정 이벤트가 설정되어 저장되어 있을 수 있다. 또한, 상기 미리 저장된 이미지는 휴대 단말기의 설계자가 디폴트로 주요 랜드마크를 특정 이벤트와 함께 저장해 놓은 이미지일 수 있다.
240 단계에서 상기 합성 이미지의 촬영자 이미지나 배경 이미지가 미리 저장된 이미지와 일치하는 경우, 제어부(100)는 해당 이미지에 미리 매핑된 제1 이벤트를 상기 합성 이미지에 적용할 수 있다.(250 단계)
상기 제1 이펙트는 사용자 이미지 또는 배경 이미지에 관한 정보를 나타내는 문자, 숫자, 기호, 그림, 음성, 음향 데이터, 이모티콘 등 중 적어도 하나를 상기 합성 이미지에 추가하는 실행이거나, 상기 합성되는 제1 또는 제2 이미지의 모양, 형태, 색감 중 적어도 하나를 변환 또는 편집하는 실행 중 적어도 하나일 수 있다.
250 단계이후, 제어부(100)는 촬영 기준 위치 정보와 촬영 기준 시간 정보 중 적어도 하나를 검출하고(260 단계), 검출된 위치가 사용자의 기저장된 활동 반경 이내인지 여부와 수집된 시간이 사용자의 기저장된 스케줄에 해당하는지 여부를 판단할 수 있다.(270 단계)
여기서 촬영 기준 위치 정보는 휴대 단말기 내에 구성된 위성위치확인시스템(GPS) 등을 이용하여 검출할 수 있다.
270 단계에서, 검출된 촬영 기준 위치 정보가 기저장된 활동 반경 이내이거나 검출된 촬영 기준 시간 정보가 기저장된 스케줄에 해당하는 경우, 제어부(100)는 해당 촬영 기준 위치 정보 또는 촬영 기준 시간 정보에 매핑된 제2 이펙트를 추출하여, 상기 합성 이미지에 적용할 수 있다.(280 단계)
예컨대, 제어부(100)는 상기 검출된 촬영 기준 위치 정보 및 촬영 기준 시간 정보 중 적어도 하나에 매핑된 여행, 출장, 주거, 회사, 학교, 학원, 출퇴근, 등하교, 근무, 공부, 운동, 휴식, 연애, 모임 중 적어도 하나에 관한 정보를 상기 제2 이펙트로서 상기 합성된 이미지에 자동으로 출력할 수 있다.
상기 제2 이펙트는 검출된 촬영 기준 위치 정보와 촬영 기준 시간 정보 중 적어도 하나에 관련된 정보를 나타내는 데이터로서, 이모티콘, 문자, 기호, 숫자, 그림, 음성, 음향 데이터 등 중 적어도 하나의 형태로 출력될 수 있다.
280 단계 이후, 제어부(100)는 예컨대 팝업창 등을 통하여 사용자에게 합성 이미지의 저장 여부를 확인할 수 있으며, 사용자로부터 저장 요청이 발생되면 합성 이미지를 저장부에 저장하고, 이미지 합성 모드 실행을 종료시킨다.
이와 다르게 제어부(100)는 합성 이미지 저장 요청을 받지 못하면, 재촬영 여부를 문의하고(295 단계) 상기 재촬영 문의에 대한 사용자의 응답에 따라 전, 후면 카메라를 통한 동시 또는 순차적 촬영을 진행하거나, 이미지 합성 모드 실행을 종료시킨다. 이미지 합성 모드 실행 종료와 함께 제1 및 제2 카메라(140, 150)의 구동도 종료된다.
도 3 내지 도 5는 본 발명의 실시예에 따른 듀얼 카메라를 구비하는 휴대 단말장치의 이미지 합성의 예를 설명하기 위한 도면이다.
도 3을 참조하면, 휴대 단말기의 카메라 구동시, 제어부(100)는 도 3과 같이 프리뷰 화면의 가장자리에 카메라 버튼(410)과 듀얼버튼(415)를 표시한다. 여기서 카메라 버튼(410)은 주화면으로 표시되는 이미지를 촬영하는 카메라를 선택하는 버튼이며, 듀얼버튼(415)은 이미지 합성 모드 실행의 온 또는 오프를 선택하기 위한 버튼이다.
또한, 상기 프리뷰 화면에서 제어부(100)는 정지 이미지를 촬영하는 정지영상버튼(420), 카메라의 촬영모드를 설정할 수 있는 모드버튼(423) 및 동영상을 촬영하는 동영상 버튼(425)를 표시한다. 카메라 구동시 제어부(100)는 디폴트로 후면 카메라를 구동하고, 듀얼 오프 모드, 즉 이미지 합성 모드 오프 모드를 수행한다고 가정한다.
그리고 카메라 버튼(410)과 듀얼버튼(415)은 토글(toggle)식으로 동작하는 버튼이라 가정한다. 이하의 설명에서 전면 카메라는 촬영자 이미지, 즉 사용자 이미지를 촬영하며, 후면 카메라는 배경 이미지를 촬영한다고 가정한다.
도 3과 같이 표시되는 상태에서 사용자가 듀얼버튼(415)을 터치하면, 제어부(100)는 이미지 합성 모드 실행이 요청됨을 감지하고, 듀얼버튼(415)을 듀얼 온으로 표시하고 후면 카메라를 구동한다.
또는, 카메라 구동과 동시에 사용자가 듀얼버튼(415)을 이용하여 듀얼 온을 선택하면 제어부(100)는 전면 카메라와 후면 카메라를 동시에 구동시킨다.
이후, 제어부(100)는 도 3과 같이 전면 카메라를 통해 사용자 이미지를 획득하고, 도 4와 같이 후면 카메라를 통해 배경 이미지(300)를 획득한다. 그리고 제어부(100)는 예컨대, 사용자 이미지 중 배경을 제외한 사용자 이미지만을 잘라내기 하고, 잘라낸 객체 이미지(200)를 배면 이미지(300)에 도 5a에 표시된 바와 같이 합성시킴으로써, 합성 이미지(500)를 생성한다. 이때, 잘라낸 객체 이미지(200)를 리사이즈하여 배경 이미지(300)의 설정된 위치 또는 사용자가 선택한 위치에 오버레이 표시할 수 있다.
특히, 제어부(100)는 잘라낸 객체 이미지(200)가 미리 저장된 이미지와 일치하는지 여부를 판단하고, 판단 결과, 미리 저장된 이미지와 일치하는 경우, 해당 이미지에 미리 매핑된 제1 이펙트를 상기 합성 이미지(500)에 적용시킬 수 있다.
예컨대, 전면 카메라에 의해 획득된 사용자 이미지가 미리 휴대 단말기에 저장되어 있던 사용자 이미지와 일치하는 경우, 상기 사용자 이미지에 미리 매핑된 제1 이벤트로서, 상기 사용자 이미지를 우표 모양 처리하는 실행이 설정되어 있을 수 있다.
상기 제1 이벤트는 미리 매핑되어 저장된 상기 사용자 이미지에 따라 상기 사용자 이미지를 처리하는 방법이 서로 상이할 수 있다.
구체적으로, 도 5a와 같이 제어부(100)는 검출된 객체 이미지(200)에 따라 객체 이미지(200)를 우표 모양으로 변환하여 배경 이미지(300)에 합성할 수 있다. 또한, 제어부(100)는 도 5a에서 검출된 객체 이미지와 서로 다른 객체 이미지(220, 240)를 도 5b에 도시된 바와 같이 카툰(cartoon)화 처리하여 변환하거나, 도 5c에 도시된 바와 같이 비트맵(bitmap)화 처리하여 변환함으로써, 사진의 목적이나 내용에 따라 합성 이미지를 가공할 수 있다.
마찬가지로, 제어부(100)는 배경 이미지(300)가 미리 저장된 이미지와 일치하는지 여부를 판단하고, 판단 결과, 미리 저장된 배경 이미지와 일치하는 경우, 해당 이미지에 미리 매핑된 제1 이펙트를 상기 합성 이미지에 적용시킬 수 있다.
예컨대, 후면 카메라에 의해 획득된 배경 이미지(300)가 미리 휴대 단말기에 저장되어 있던 랜드마크나, 사용자가 미리 저장했던 배경 이미지와 일치하는 경우, 저장된 해당 배경 이미지에 미리 매핑된 제1 이벤트로서, 상기 배경 이미지의 장소에 관한 정보 데이터가 합성 이미지(500)에 출력될 수 있다.
휴대 단말기에 랜드마크로서 런던의 타워 브릿지(Tower Bridge)가 저장되어 있었다면, 후면 카메라에 의해 획득된 배경 이미지(300)가 타워 브릿지로 판단되는 경우, 도 5에 도시된 바와 같이 합성 이미지(500)의 일부에 예컨대, 'Tower Bridge'과 같은 문자 데이터가 출력될 수 있다.
또한, 제어부(100)는 촬영 기준 촬영 기준 위치 정보를 검출하고, 검출된 촬영 기준 위치가 사용자의 기저장된 활동 반경 이내인지 판단할 수 있다. 예컨대, 검출된 촬영 기준 위치가 사용자의 기저장된 활동반경을 벗어난 경우, 여행이나 원거리 출장 등으로 간주하고, 촬영되고 있는 프리뷰 영상이 야외로 감지되는 경우 이를 여행으로 판단하여, 합성 이미지(500)에 여행을 나타내는 데이터를 출력할 수 있다.
또는, 검출된 촬영 기준 위치가 사용자의 기저장된 활동반경을 벗어난 경우, 촬영되고 있는 프리뷰 영상이 실내로 감지되고, 피사체가 탁자, 스크린, 프로젝터 등이 검출되는 경우, 출장 상태로 간주하고, 합성 이미지(500)에 출장을 나타내는 데이터를 출력할 수 있다.
도 5는 이와 같은 제어부(100)의 실행에 의해 'Trip'이라는 문자 데이터를 추출하고, 상기 랜드마크를 이용한 배경 이미지(300) 비교에 의한 결과물인 런던의 타워 브릿지에 관한 정보를 조합하여 'Trip In London'이라는 타이틀에 관한 데이터를 합성 이미지(500)에 출력할 수 있다.
도시되지는 않았으나 제어부(100)는 촬영 기준 촬영 기준 시간 정보를 검출하고, 검출된 촬영 기준 시간이 사용자의 기저장된 스케줄에 해당하는지 판단할 수 있다. 그리고, 제어부(100)는 검출된 촬영 기준 시간이 사용자의 기저장된 스케줄에 해당하는 경우, 촬영 기준 시간에 해당하는 스케줄을 나타내는 정보 데이터를 합성 이미지(500)에 출력할 수 있다. 예컨대, 촬영 기준 시간이 오후 6시로 검출되고, 오후 6시부터 7시 사이는 퇴근 일정으로 미리 저장되어 있다면, 합성 이미지에 퇴근을 나타내는 데이터가 출력될 수 있다.
도 6 및 도 7은 본 발명의 실시예에 따라 생성된 합성 이미지의 활용 예를 설명하기 위한 도면이다.
도 6을 참조하면, 앞서 언급한 바와 같은 방법에 의해 생성된 합성 이미지를 저장하여, 모바일 인스턴트 메신저를 통한 대화창에서 이모티콘(600)으로 적용 가능하다.
도시되지 않았으나, 이모티콘(600)은 모바일 인스턴트 메신저 외에 메일, 전자 문서 등에도 첨부 및 복사하여 붙여넣기로도 활용이 가능하다.
도 7을 참조하면, 앞서 언급한 바와 같은 방법에 의해 생성된 합성 이미지를 SNS(Social Network Service)에 업로드시 활용하는 예를 개시한다. 도 7을 참조하면, 본 발명의 실시예에 따른 듀얼 카메라를 구비하는 이미지 합성 장치는 사용자 이미지와 배경 이미지 중 적어도 하나에 매핑된 정보 데이터를 자동으로 타이틀(title)로 생성하여, 합성 이미지를 SNS 업로드시 상기 합성 이미지에 관한 제목을 별도로 입력하지 않아도 자동으로 표시될 수 있다.
예컨대, 사용자가 도 5에 도시된 바와 같이 저장된 합성 이미지(500)를 SNS에 업로드 할 경우, 제어부(100)는 검출된 배경 이미지(300)에 관련하여 미리 매핑된 타워 브릿지에 관한 정보를 추출하여, 합성 이미지(500)와 함께 이의 타이틀을 자동으로 'From Tower Bridge'로 업데이트 할 수 있다.
이와 같은 실시예에 따른 본 발명은 듀얼 카메라를 구비하는 휴대 단말기에서 듀얼 카메라를 동시 또는 순차적으로 구동하여 듀얼 카메라에서 촬영되는 이미지를 사용자 이미지와 배경 이미지를 함께 획득할 수 있다. 그리고, 획득된 사용자 이미지와 배경 이미지 중 적어도 하나를 미리 저장된 이미지와 동일 여부를 비교판단하고, 이에 따라 동일한 해당 이미지에 미리 매핑된 제1 이벤트를 합성 이미지에 적용함으로써, 이미지에 관한 정보를 자동적으로 출력할 수 있다.
또한, 촬영 기준 위치와 촬영 기준 촬영 기준 시간 정보를 검출하고, 촬영 기준 위치가 사용자 활동 반경 이내에 해당하는지 또는 촬영 기준 시간에 해당하는 미리 저장된 스케줄이 있는지 여부를 판단하고, 이에 따라 사용자의 현재 활동 상태 또는 스케줄에 관한 정보를 합성 이미지에 자동적으로 출력할 수 있다.
또한, 사진 촬영과 공유시, 전후면 카메라 동시촬영을 통해 촬영자 본인에 대한 모습, 배경 정황 등을 함께 보여줄 수 있도록 하여 시그니쳐(signature)를 생성할 수 있고, 더불어 전후면 사진에 각기 다른 이펙트를 줄 수 있는 이점이 있다.
본 명세서와 도면에 개시 된 본 발명의 실시예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
100: 제어부 140: 제1 카메라부
150: 제2 카메라부 160: 영상 처리부
120: 표시부 130: 입력부
111: 오디오 처리부 113: 키 입력부
115: 저장부 170: 무선 통신부
190: 위치 측정부

Claims (29)

  1. 듀얼 카메라를 구비하는 휴대 단말기의 이미지 처리방법에 있어서,
    이미지 합성 모드의 실행에 진입하는 과정;
    전면 카메라와 후면 카메라의 동시 또는 순차적 촬영을 수행하는 과정;
    상기 전, 후면 카메라를 통해 제1 이미지 및 제2 이미지를 획득하는 과정;
    상기 제1 이미지 또는 제2 이미지로부터 객체 이미지를 검출하는 과정;
    상기 객체 이미지를 미검출한 상기 제1 또는 제2 이미지에 상기 객체 이미지를 합성하여 합성 이미지를 생성하는 과정;
    상기 생성된 합성 이미지를 표시하는 과정; 및
    상기 제1 이미지 및 상기 제2 이미지에 따라 상기 합성 이미지에 매핑될 이벤트를 추천하는 과정을 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  2. 제1항에 있어서, 상기 객체 이미지는,
    사물과 인물 중 적어도 하나의 이미지를 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  3. 제1항에 있어서, 상기 객체 이미지를 합성하여 합성 이미지를 생성하는 과정은,
    상기 객체 이미지를 미검출한 상기 제1 이미지 또는 상기 제2 이미지에 상기 검출된 객체 이미지를 오버레이 표시하는 과정을 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  4. 제1항에 있어서,
    상기 객체 이미지를 미검출한 상기 제1 이미지 또는 상기 제2 이미지의 배경 이미지를 검출하는 과정을 더 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  5. 제4항에 있어서, 상기 배경 이미지를 검출하는 과정은,
    유사 색상이 넓게 분포된 영역, 패턴이 소정구간 반복되는 영역, 인물을 제외한 영역 중 적어도 하나의 영역을 상기 배경 이미지로 검출하는 과정을 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  6. 제1항에 있어서,
    상기 획득된 제1 이미지 및 제2 이미지 중 적어도 하나가 미리 저장된 이미지와 일치하는지 판단하는 과정;
    상기 판단 결과 일치하는 경우, 해당 이미지와 매핑된 제1 이펙트를 추출하는 과정; 및
    상기 추출된 제1 이펙트를 상기 합성 이미지에 적용하는 과정을 더 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  7. 제6항에 있어서, 상기 미리 저장된 이미지는,
    랜드 마크(land mark), 사용자가 미리 설정하여 저장한 특정 오브젝트, 사용자가 미리 설정하여 저장한 특정 인물 중 적어도 하나를 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  8. 제6항에 있어서, 상기 제1 이펙트는,
    상기 해당 이미지와 미리 매핑되어 저장된 이모티콘, 문자, 숫자, 기호, 그림 데이터 중 적어도 하나를 상기 합성 이미지에 추가하는 실행, 상기 합성되는 제1 이미지 또는 제2 이미지의 모양, 형태, 색감 중 적어도 하나를 변환 또는 편집하는 실행 중 적어도 하나인 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  9. 제8항에 있어서, 상기 제1 이펙트는,
    상기 제1 이미지 및 상기 제2 이미지 중 적어도 하나를 카툰화 또는 비트맵화 처리하여 상기 합성 이미지에 적용하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  10. 제1항에 있어서,
    촬영 기준 위치 정보와 촬영 기준 시간 정보 중 적어도 하나를 검출하는 과정;
    상기 검출된 촬영 기준 위치 정보 및 촬영 기준 시간 정보 중 적어도 하나에 미리 매핑된 제2 이펙트를 추출하는 과정; 및
    상기 추출된 제2 이펙트를 상기 합성 이미지에 적용하여 표시하는 과정을 더 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  11. 제10항에 있어서, 상기 촬영 기준 위치 정보 및 상기 촬영 기준 시간 정보 중 적어도 하나를 검출하는 과정은,
    촬영 기준 위치가 사용자의 기저장된 활동 반경 이내인지 여부와 촬영 기준 시간이 사용자의 기저장된 스케줄에 해당하는지 여부를 판단하는 과정을 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  12. 제10항에 있어서, 상기 추출된 제2 이펙트를 상기 합성 이미지에 적용하여 표시하는 과정은,
    상기 검출된 촬영 기준 위치 정보 및 상기 촬영 기준 시간 정보 중 적어도 하나에 매핑된 스케줄이나 장소 중 적어도 하나에 관한 정보를 상기 합성 이미지에 자동으로 출력하는 과정을 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  13. 삭제
  14. 제4항에 있어서, 상기 추천되는 이벤트는,
    상기 객체 이미지 및 상기 배경 이미지에 따라 상기 합성 이미지의 모양, 형태, 색감을 변환 또는 편집하는 실행과, 상기 객체 이미지 및 상기 배경 이미지에 관한 정보를 나타내는 문자, 숫자, 기호, 그림, 이모티콘, 음성, 음향 데이터 중 적어도 하나를 상기 합성 이미지에 추가하는 실행 중 적어도 하나인 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  15. 제4항에 있어서,
    상기 합성 이미지를 애플리케이션 기능 실행 중 업로드 시, 상기 검출된 객체 이미지 및 상기 배경 이미지 중 적어도 하나에 매핑된 정보를 추출하여 자동으로 상기 합성 이미지에 대한 타이틀(title)을 업데이트 하는 과정을 더 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성방법.
  16. 휴대 단말기의 후면에 실장되어 제1 이미지를 획득하는 제1 카메라;
    상기 휴대 단말기의 전면에 실장되어 제2 이미지를 획득하는 제2 카메라;
    표시부; 및
    상기 제1 이미지 또는 상기 제2 이미지로부터 객체 이미지를 검출하고, 상기 객체 이미지를 미검출한 상기 제1 이미지 또는 상기 제2 이미지에 상기 객체 이미지를 합성하여 합성 이미지를 생성하고, 상기 합성 이미지를 상기 표시부에 표시하고, 상기 제1 이미지 및 상기 제2 이미지에 따라 상기 합성 이미지에 매핑될 이벤트를 추천하는 제어부를 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  17. 제16항에 있어서, 상기 제어부는,
    상기 객체 이미지를 미검출한 상기 제1 이미지 또는 상기 제2 이미지에 상기 검출된 객체 이미지를 오버레이 표시하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  18. 제17항에 있어서, 상기 제어부는,
    상기 객체 이미지가 미검출된 상기 제1 이미지 또는 상기 제2 이미지의 배경 이미지를 검출하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  19. 제18항에 있어서, 상기 제어부는,
    유사 색상이 넓게 분포된 영역, 패턴이 소정구간 반복되는 영역, 인물을 제외한 영역 중 적어도 하나의 영역을 상기 배경 이미지로 검출하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  20. 제16항에 있어서, 상기 제어부는,
    상기 획득된 제1 이미지 및 제2 이미지 중 적어도 하나가 미리 저장된 이미지와 일치하는지 판단하고, 상기 판단 결과 일치하는 경우, 해당 이미지와 매핑된 제1 이펙트를 추출하고, 상기 추출된 제1 이펙트를 상기 합성 이미지에 적용하여 표시하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  21. 제20항에 있어서, 상기 미리 저장된 이미지는,
    랜드 마크(land mark), 사용자가 미리 설정하여 저장한 특정 오브젝트, 사용자가 미리 설정하여 저장한 특정 인물 중 적어도 하나를 포함하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  22. 제20항에 있어서, 상기 제1 이펙트는,
    상기 해당 이미지와 미리 매핑되어 저장된 이모티콘, 문자, 숫자, 기호, 그림 데이터 중 적어도 하나를 상기 합성 이미지에 추가하는 실행, 상기 합성되는 제1 이미지 또는 제2 이미지의 모양, 형태, 색감 중 적어도 하나를 변환 또는 편집하는 실행 중 적어도 하나인 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  23. 제22항에 있어서, 상기 제1 이펙트는,
    상기 제1 이미지 및 상기 제2 이미지 중 적어도 하나를 카툰화 또는 비트맵화 처리하여 상기 합성 이미지에 적용하여 표시하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  24. 제16항에 있어서, 상기 제어부는,
    촬영 기준 위치 정보와 촬영 기준 시간 정보 중 적어도 하나를 검출하고, 상기 검출된 촬영 기준 위치 정보 및 촬영 기준 시간 정보 중 적어도 하나에 미리 매핑된 제2 이펙트를 추출하고, 상기 추출된 제2 이펙트를 상기 합성 이미지에 적용하여 표시하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  25. 제23항에 있어서, 상기 제어부는,
    촬영 기준 위치가 사용자의 기저장된 활동 반경 이내인지 여부와 촬영 기준 시간이 사용자의 기저장된 스케줄에 해당하는지 여부를 판단하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  26. 제23항에 있어서, 상기 제어부는,
    상기 검출된 촬영 기준 위치 정보 및 촬영 기준 시간 정보 중 적어도 하나에 매핑된 스케줄이나 장소 중 적어도 하나에 관한 정보를 상기 합성 이미지에 자동으로 출력하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  27. 삭제
  28. 제18항에 있어서, 상기 추천되는 이벤트는,
    상기 제1 이미지 및 상기 제2 이미지에 따라 상기 합성 이미지의 모양, 형태, 색감을 변환 또는 편집하는 실행과, 상기 객체 이미지 및 상기 배경 이미지에 관한 정보를 나타내는 문자, 숫자, 기호, 그림, 이모티콘, 음성, 음향 데이터 중 적어도 하나를 상기 합성 이미지에 추가하는 실행 중 적어도 하나인 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
  29. 제18항에 있어서, 상기 제어부는,
    상기 합성 이미지를 애플리케이션 기능 실행 중 업로드 시, 상기 검출된 객체 이미지 및 배경 이미지 중 적어도 하나에 매핑된 정보를 추출하여 자동으로 상기 합성 이미지에 대한 타이틀(title)을 업데이트 하는 것을 특징으로 하는, 듀얼 카메라를 구비하는 이미지 합성 장치.
KR1020130019525A 2013-02-23 2013-02-23 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법 KR102013331B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020130019525A KR102013331B1 (ko) 2013-02-23 2013-02-23 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법
EP14156320.5A EP2770729B1 (en) 2013-02-23 2014-02-24 Apparatus and method for synthesizing an image in a portable terminal equipped with a dual camera
CN201410062750.1A CN104010138A (zh) 2013-02-23 2014-02-24 在配备有双相机的便携式终端中合成图像的设备和方法
US14/188,232 US9407834B2 (en) 2013-02-23 2014-02-24 Apparatus and method for synthesizing an image in a portable terminal equipped with a dual camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130019525A KR102013331B1 (ko) 2013-02-23 2013-02-23 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20140105688A KR20140105688A (ko) 2014-09-02
KR102013331B1 true KR102013331B1 (ko) 2019-10-21

Family

ID=50179483

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130019525A KR102013331B1 (ko) 2013-02-23 2013-02-23 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법

Country Status (4)

Country Link
US (1) US9407834B2 (ko)
EP (1) EP2770729B1 (ko)
KR (1) KR102013331B1 (ko)
CN (1) CN104010138A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11412197B2 (en) 2020-08-05 2022-08-09 Samsung Electronics Co., Ltd. Electronic device including image sensor

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170039867A1 (en) * 2013-03-15 2017-02-09 Study Social, Inc. Mobile video presentation, digital compositing, and streaming techniques implemented via a computer network
CN104580910B (zh) * 2015-01-09 2018-07-24 宇龙计算机通信科技(深圳)有限公司 基于前、后摄像头的图像合成方法及系统
CN105578028A (zh) * 2015-07-28 2016-05-11 宇龙计算机通信科技(深圳)有限公司 一种拍照方法及终端
CN105979163A (zh) * 2015-11-06 2016-09-28 乐视移动智能信息技术（北京）有限公司 一种拍摄方法及装置
KR102446442B1 (ko) * 2015-11-24 2022-09-23 삼성전자주식회사 디지털 촬영 장치 및 그 동작 방법
CN105376496A (zh) * 2015-12-14 2016-03-02 广东欧珀移动通信有限公司 拍照方法及装置
CN105635572B (zh) * 2015-12-28 2019-07-26 联想(北京)有限公司 图像处理方法、图像处理装置和电子设备
CN105657254B (zh) * 2015-12-28 2019-10-29 努比亚技术有限公司 一种图像合成方法及装置
CN106067946B (zh) * 2016-05-31 2019-07-19 努比亚技术有限公司 一种拍摄装置及方法
US9912860B2 (en) 2016-06-12 2018-03-06 Apple Inc. User interface for camera effects
WO2018000227A1 (zh) * 2016-06-29 2018-01-04 北京小米移动软件有限公司 视频直播方法及装置
CN106303293B (zh) * 2016-08-15 2019-07-30 Oppo广东移动通信有限公司 视频处理方法、装置及移动终端
CN107197094A (zh) * 2017-05-23 2017-09-22 努比亚技术有限公司 一种摄像显示方法、终端及计算机可读存储介质
CN107809565B (zh) * 2017-10-11 2021-11-12 侯翠侠 一种数字录像机
CN107734255A (zh) * 2017-10-16 2018-02-23 广东欧珀移动通信有限公司 拍摄自拍照的方法、装置、移动终端及可读存储介质
JP7106859B2 (ja) * 2017-12-27 2022-07-27 トヨタ自動車株式会社 画像表示装置
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
KR102616850B1 (ko) * 2018-03-05 2023-12-26 삼성전자주식회사 전자 장치, 전자 장치와 결합 가능한 외부 디바이스 및 이의 디스플레이 방법
US10817996B2 (en) 2018-07-16 2020-10-27 Samsung Electronics Co., Ltd. Devices for and methods of combining content from multiple frames
CN109862286B (zh) * 2019-03-28 2021-08-17 深圳创维－Rgb电子有限公司 图像显示方法、装置、设备和计算机存储介质
WO2021083146A1 (zh) 2019-10-30 2021-05-06 北京字节跳动网络技术有限公司 视频处理方法、装置、终端及存储介质
US11438466B2 (en) * 2019-12-19 2022-09-06 HCL Technologies Italy S.p.A. Generating an automatic virtual photo album
CN111601033A (zh) 2020-04-27 2020-08-28 北京小米松果电子有限公司 视频处理方法、装置及存储介质
US11212449B1 (en) * 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
CN113170225A (zh) * 2021-02-09 2021-07-23 百果园技术(新加坡)有限公司 画面窗口的显示方法、装置、终端及存储介质
CN117411982A (zh) * 2022-07-05 2024-01-16 摩托罗拉移动有限责任公司 扩增实况内容
CN117425057A (zh) 2022-07-07 2024-01-19 抖音视界(北京)有限公司 用于影像拍摄的方法、装置、设备和存储介质
CN115334246A (zh) * 2022-09-06 2022-11-11 抖音视界有限公司 用于影像拍摄的方法、装置、设备和存储介质
CN116309918B (zh) * 2023-03-31 2023-12-22 深圳市欧度利方科技有限公司 一种基于平板电脑的场景合成方法和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005204015A (ja) * 2004-01-15 2005-07-28 Nec Corp 携帯機器および画像処理方法
US20100225787A1 (en) 2009-03-06 2010-09-09 Casio Computer Co., Ltd. Image capturing apparatus capable of extracting subject region from captured image
US20120092529A1 (en) * 2010-10-19 2012-04-19 Samsung Electronics Co., Ltd. Method for processing an image and an image photographing apparatus applying the same

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030007700A1 (en) * 2001-07-03 2003-01-09 Koninklijke Philips Electronics N.V. Method and apparatus for interleaving a user image in an original image sequence
WO2003047239A1 (fr) * 2001-11-27 2003-06-05 Matsushita Electric Industrial Co., Ltd. Procede et systeme de prise de vues avec apport d'informations, dispositif de prise de vues et dispositif de transfert d'informations
JP2005094741A (ja) * 2003-08-14 2005-04-07 Fuji Photo Film Co Ltd 撮像装置及び画像合成方法
KR100749337B1 (ko) 2006-06-13 2007-08-14 삼성전자주식회사 복수의 카메라렌즈를 구비한 이동통신단말기를 이용한 촬영방법 및 장치
KR100836616B1 (ko) * 2006-11-14 2008-06-10 (주)케이티에프테크놀로지스 영상 합성 기능을 가지는 휴대용 단말기 및 휴대용단말기의 영상 합성 방법
US7855737B2 (en) * 2008-03-26 2010-12-21 Fotonation Ireland Limited Method of making a digital camera image of a scene including the camera user
JP5310238B2 (ja) * 2008-07-10 2013-10-09 株式会社村田製作所 積層セラミック電子部品
KR101269900B1 (ko) * 2008-12-22 2013-05-31 한국전자통신연구원 다중 영상 기반의 모션 제어 카메라 효과 구현 방법 및 장치
KR101593573B1 (ko) * 2009-06-19 2016-02-12 삼성전자주식회사 단말기의 카메라를 이용한 컨텐츠 제작 방법 및 장치
JP5604285B2 (ja) * 2009-12-28 2014-10-08 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 撮像装置
US8451312B2 (en) * 2010-01-06 2013-05-28 Apple Inc. Automatic video stream selection
US8913847B2 (en) * 2010-06-01 2014-12-16 Hewlett-Packard Development Company, L.P. Replacement of a person or object in an image
US8332429B2 (en) * 2010-06-22 2012-12-11 Xerox Corporation Photography assistant and method for assisting a user in photographing landmarks and scenes
KR101636723B1 (ko) * 2010-06-28 2016-07-06 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
US8520080B2 (en) * 2011-01-31 2013-08-27 Hand Held Products, Inc. Apparatus, system, and method of use of imaging assembly on mobile terminal
US8866943B2 (en) * 2012-03-09 2014-10-21 Apple Inc. Video camera providing a composite video sequence

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005204015A (ja) * 2004-01-15 2005-07-28 Nec Corp 携帯機器および画像処理方法
US20100225787A1 (en) 2009-03-06 2010-09-09 Casio Computer Co., Ltd. Image capturing apparatus capable of extracting subject region from captured image
US20120092529A1 (en) * 2010-10-19 2012-04-19 Samsung Electronics Co., Ltd. Method for processing an image and an image photographing apparatus applying the same

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11412197B2 (en) 2020-08-05 2022-08-09 Samsung Electronics Co., Ltd. Electronic device including image sensor

Also Published As

Publication number Publication date
EP2770729A2 (en) 2014-08-27
EP2770729A3 (en) 2017-11-15
US20140240551A1 (en) 2014-08-28
EP2770729B1 (en) 2022-04-27
US9407834B2 (en) 2016-08-02
CN104010138A (zh) 2014-08-27
KR20140105688A (ko) 2014-09-02

Similar Documents

Publication Publication Date Title
KR102013331B1 (ko) 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법
CN108496150B (zh) 一种屏幕截图和读取的方法及终端
US20230316683A1 (en) Video clip object tracking
US10097792B2 (en) Mobile device and method for messenger-based video call service
US9324305B2 (en) Method of synthesizing images photographed by portable terminal, machine-readable storage medium, and portable terminal
AU2014201995B2 (en) Objects in screen images
JP2024041816A (ja) コメント追加方法及び電子デバイス
KR101593573B1 (ko) 단말기의 카메라를 이용한 컨텐츠 제작 방법 및 장치
KR101834987B1 (ko) 휴대용 단말기에서 화면 캡쳐를 위한 장치 및 방법
US20140226052A1 (en) Method and mobile terminal apparatus for displaying specialized visual guides for photography
US9801693B1 (en) Method and system for correlating anatomy using an electronic mobile device transparent display screen
US20190258371A1 (en) Picture Processing Method and Apparatus, Electronic Device, and Graphical User Interface
EP2677501A2 (en) Apparatus and method for changing images in electronic device
KR20180133743A (ko) 이동 단말기 및 그 제어 방법
CN110795007A (zh) 一种获取截图信息的方法及装置
US20130342729A1 (en) Method and apparatus for processing image data in terminal
KR20140136349A (ko) 대화 기록 장치 및 그 방법
US10848558B2 (en) Method and apparatus for file management
CN112672061A (zh) 视频拍摄方法、装置、电子设备及介质
CN109542307B (zh) 一种图像处理方法、设备和计算机可读存储介质
CN106896995B (zh) 移动终端的壁纸配置方法和装置
WO2023155858A1 (zh) 文档编辑方法及其装置
WO2023284640A1 (zh) 图片处理方法和电子设备
US20140380194A1 (en) Contents sharing service
KR20140146884A (ko) 휴대 장치에 의해 촬영된 이미지들을 편집하는 방법 및 이를 위한 휴대 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right