KR20150126192A - 전자 장치 및 전자 장치에서 촬영 방법 - Google Patents

전자 장치 및 전자 장치에서 촬영 방법 Download PDF

Info

Publication number
KR20150126192A
KR20150126192A KR1020140053492A KR20140053492A KR20150126192A KR 20150126192 A KR20150126192 A KR 20150126192A KR 1020140053492 A KR1020140053492 A KR 1020140053492A KR 20140053492 A KR20140053492 A KR 20140053492A KR 20150126192 A KR20150126192 A KR 20150126192A
Authority
KR
South Korea
Prior art keywords
image
electronic device
video signal
depth information
area
Prior art date
Application number
KR1020140053492A
Other languages
English (en)
Other versions
KR102206866B1 (ko
Inventor
박희찬
윤한길
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140053492A priority Critical patent/KR102206866B1/ko
Priority to US14/657,920 priority patent/US10070041B2/en
Priority to EP15166006.5A priority patent/EP2940984B1/en
Publication of KR20150126192A publication Critical patent/KR20150126192A/ko
Application granted granted Critical
Publication of KR102206866B1 publication Critical patent/KR102206866B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/593—Depth or shape recovery from multiple images from stereo images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

전자 장치 및 전자 장치에서 촬영 방법과 관련된 다양한 실시예들이 기술된 바, 한 실시예에 따르면, 화면을 표시하는 디스플레이; 제1 영상 신호와 뎁스 정보를 출력하는 뎁스 센서; 제2 영상 신호를 출력하는 이미지 센서; 및 상기 제1 영상 신호를 이용하여 상기 디스플레이에 프리뷰 화면을 표시하고, 촬영 요청 시 제2 영상 신호를 이용하여 촬영 순간의 이미지를 획득함과 동시에 촬영 순간의 뎁스 정보를 획득하고, 상기 이미지와 상기 뎁스 정보를 저장하도록 제어하는 제어부를 를 포함할 수 있으며, 이외에도다양한 다른 실시예들이 가능하다.

Description

전자 장치 및 전자 장치에서 촬영 방법{ELECTRIC APPARATUS AND METHOD FOR TAKING A PHOTOGRAGH IN ELECTRIC APPARATUS}
본 발명의 다양한 실시예들은 전자 장치 및 전자 장치의 카메라 기술에 관한 것이다.
디지털 카메라의 대중적 보급에 힘입어 이제 디지털 카메라는 일반인들이 일상적으로 사용하고 있는 전자 장치로 인식되고 있다. 비단 디지털 카메라뿐만 아니라 핸드폰 또는 스마트 폰 등을 필두로 한 많은 전자 장치들이 카메라를 내장하고 있을 정도로 현대 일반적인 사람들의 카메라 사용의 빈도는 나날이 증가하고 있다.
이에 따라 최근의 전자 장치는 음성 통신의 기능 외에 고속으로 화상 및 데이터 통신 기능을 수행할 수 있는 기능이 필수적으로 구현되고 있으며, 특히 이미징 모듈을 채용하여 디지털 카메라의 기능을 가지도록 구현되고 있다.
상기와 같이 전자 장치에 채용되는 디지털 카메라 기능은 초기에 기본적인 촬영, 저장 및 전송에 요구되는 기능만이 채용되었으나, 사용자의 다양한 욕구를 충족시키기 위해 성능, 품질 및 기능 향상을 위한 기술개발이 이루어져 오고 있다. 특히, 최근에는 촬영된 영상에 각종 영상 효과를 적용할 수 있는 기술에 대한 연구가 많이 이루어지고 있다.
그런데 촬영된 영상에 각종 효과를 적용하려면, 고해상도 영상뿐만 아니라 영상과 관련된 각종 정보의 획득이 필요하다.
이를 위해 카메라 기능을 가진 전자 장치에서는 하나의 이미지 센서를 이용하여 프리뷰 영상을 표시하면서 영상과 관련된 메타 정보를 최대한 획득하고, 사용자에 의한 촬영 명령에 따라 영상을 촬영함으로써, 영상과 관련된 메타 정보와 영상을 함께 얻을 수 있도록 하고 있다.
그러나 상기한 바와 같이 하나의 이미징 센서를 이용하여 영상과 관련된 메타 정보(예컨대 뎁스 정보)와 영상을 함께 얻을 경우 영상과 관련된 메타 정보를 먼저 얻고 나서 영상을 얻거나, 영상을 얻고 나서 영상과 관련된 메타 정보를 얻기 때문에 영상과 관련된 메타 정보 획득 시간과 실제 영상 획득 시간 간에 차이가 존재할 수 있다.
특히, 영상과 관련된 뎁스 정보('거리 정보'라고도 함)와 영상을 함께 얻을 경우, 하나의 이미징 모듈로 고해상도 거리 정보와 고해상도 영상을 시간 차이 없이 동시에 획득하는 것은 불가능하다. 이미진 모듈은 고해상도 영상 획득을 위해서 높은 MTF(Modulation Transfer Fuction) 특성의 광학을 사용하여야 하는데, MTF가 높을수록 광학의 DOF(Depth Of Field)가 낮아지고, 낮아진 DOF를 높이기 위해 렌즈를 움직여야 되므로 시간이 걸리기 때문이다.
이와 같이 영상과 관련된 메타 정보와 영상이 동시에 획득될 수 없는 문제점으로 인해 전자 장치는 획득된 영상을 이용한 영상효과를 실시간으로 제공할 수 없는 문제점이 있다.
따라서 본 발명의 다양한 실시예들에 따르면 하나의 이미징 센서 대신 뎁스 센서와 이미지 센서를 이용하여 영상과 관련된 메타 정보와 영상을 동시에 얻을 수 있는 전자 장치 및 전자 장치에서 촬영 방법을 제공할 수 있도록 한다.
또한 본 발명의 다양한 실시예들에 따르면 영상과 관련된 메타 정보와 영상을 동시에 획득함으로써 영상과 관련된 메타 정보와 영상을 이용한 영상 효과를 실시간으로 제공할 수 있는 전자 장치 및 전자 장치에서 촬영 방법을 제공할 수 있도록 한다.
본 발명의 다양한 실시예들에 따르면 전자 장치에 있어서, 화면을 표시하는 디스플레이; 제1 영상 신호와 뎁스 정보를 출력하는 뎁스 센서; 제2 영상 신호를 출력하는 이미지 센서; 및 상기 제1 영상 신호를 이용하여 상기 디스플레이에 프리뷰 화면을 표시하고, 촬영 요청 시 제2 영상 신호를 이용하여 촬영 순간의 이미지를 획득함과 동시에 촬영 순간의 뎁스 정보를 획득하고, 상기 이미지와 상기 뎁스 정보를 저장하도록 제어하는 제어부를 포함할 수 있다.
본 발명의 다양한 실시예들에 따르면 전자 장치에서 촬영 방법에 있어서, 전자 장치에서 촬영 방법에 있어서, 뎁스 센서로부터 제1 영상 신호와 뎁스 정보를 수신하고, 이미지 센서로부터 제2 영상 신호를 수신하는 과정; 상기 제1 영상 신호를 이용하여 상기 디스플레이에 프리뷰 화면을 표시하는 과정; 촬영 요청에 따라 상기 제2 영상 신호를 이용하여 촬영 순간의 이미지를 획득함과 동시에 촬영 순간의 뎁스 정보를 획득하는 과정; 및 상기 이미지와 상기 뎁스 정보를 저장하는 과정을 포함할 수 있다.
본 발명의 다양한 실시예들에 따르면 하나의 이미징 센서 대신 뎁스 센서와 이미지 센서를 이용하여 영상과 관련된 뎁스 정보와 영상을 동시에 얻을 수 있다.
또한 본 발명의 다양한 실시예들에 따르면 영상과 관련된 거리 정보와 영상을 동시에 획득함으로써 영상과 관련된 메타 정보와 영상을 이용한 영상 효과를 실시간으로 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 전자 장치를 설명하기 위한 개략적인 개념도
도 2은 본 발명의 일 실시예에 따른 전자 장치의 동작을 설명하기 위한 개략적인 개념도
도 3은 본 발명의 일 실시예에 따른 전자 장치에서 촬영 방법에 대한 흐름도
도 4는 본 발명의 일 실시예에 따른 전자 장치에서 저장된 이미지에 포커싱 효과 적용 방법에 대한 흐름도
도 5는 본 발명의 다양한 실시예에 따른 촬영 방법이 적용되는 전자 장치의 구성을 나타낸 도면
도 6 및 도 7은 본 발명의 다양한 실시 예에 따른 전자 장치에서 촬영 시 사용자 인터페이스 화면 일예도
본 발명의 다양한 실시예들에서 사용되는 용어에 대해 간략히 설명하고, 본 발명의 다양한 실시예들에 대해 구체적으로 설명하기로 한다.
본 발명의 다양한 실시예들에서 사용되는 용어는 본 발명의 다양한 실시예들에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 다양한 실시예들의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명의 다양한 실시예들에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 다양한 실시예들의 전반에 걸친 내용을 토대로 정의되어야 한다.
발명의 다양한 실시예들에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 발명의 다양한 실시예들에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
이하, 첨부된 도면들에 기재된 내용들을 참조하여 본 발명에 따른 다양한 실시예들을 상세하게 설명한다. 다만, 본 발명이 다양한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조부호는 실질적으로 동일한 기능을 수행하는 부재를 나타낼 수 있다.
본 발명의 다양한 실시 예들에 따르면 전자 장치는, 카메라 기능을 가진 전자 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 또는 스마트 와치(smartwatch))중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(game consoles), 전자 사전, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 네비게이션(navigation) 장치, 자동차 인포테인먼트(infotainment) 장치 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device) 또는 프로젝터(projector 중 적어도 하나를 포함할 수 있다. 본 발명에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 발명에 따른 전자 장치는 전술한 기기들에 한정되지 않으며 카메라 기능을 가진 기기라면 어떤 기기든 가능할 수 있다는 것은 당업자에게 자명하다.
도 1은 본 발명의 일 실시 예에 따른 전자 장치의 개념을 설명하기 위한 개념도이다. 도 1을 참조하면, 전자 장치(10)는 뎁스 센서(depth sensor)(12), 이미지 센서(image sensor)(14), 입력 신호 처리 프로세서(input signal processor)(22), 제1 메모리(24), 메인 오퍼레이팅 시스템(main operating system)(26), 버스(bus)(28), 제2 메모리(30), 출력 신호 처리 프로세서(output signal processor)(32), 디스플레이(34)를 포함할 수 있다.
뎁스 센서(12)는 렌즈를 통해 입사되는 빛을 결상하여 이미지 센서(14)보다 상대적으로 저해상도이지만 높은 DOF(Depth of Field)(높은 F-numer)를 가지는 제1 영상 신호를 출력할 수 있다. DOF는 촬영을 할 때 피사체에 렌즈의 초점을 맞추게 되면 초점이 맞는 피사체의 전면과 후면이 존재하는데, 이때 초점이 맞는 면적일 수 있다. 만일 피사체 주위(앞뒤 포함)에 많은 공간이 있고 이들의 초점이 맞는다면 DOF가 깊은(높은) 것일 수 있고, 만일 피사체 주위(앞뒤 포함)에 초점이 맞는 공간이 많지 않으면 DOF가 상대적으로 깊지 않은(높지 않은) 것일 수 있다. 뎁스 센서(12)는 제1 영상 신호를 분석하여 메타 정보를 출력할 수 있다. 메타 정보는 뎁스 정보(이하 '깊이 정보'라고도 함)를 포함할 수 있다. 깊이 정보는 제1 영상의 각 픽셀이 렌즈와 가까운지 또는 먼지를 나타내는 거리 정보와 연관될 수 있다. 제1 영상의 각 픽셀이 렌즈와 근거리일수록 뎁스 수치가 높고, 제1 영상의 각 픽셀이 원거리일수록 뎁스 수치가 낮을 수 있다. 뎁스 정보는 제1 영상의 거리 정보 추출에 필요한 정보를 포함할 수 있다.
이미지 센서(14)는 렌즈를 통해 입사되는 빛을 결상하여 뎁스 센서(12)보다 상대적으로 고해상도의 제2 영상 신호를 획득할 수 있다. 이때 이미지 센서(14)는 뎁스 센서(12)와 같은 장면의 재2 영상 신호를 획득할 수 있도록 뎁스 센서(12)와 최대한 가깝게 배치될 수 있다.
입력 신호 처리 프로세서(22)는 뎁스 센서(12) 및 이미지 센서(14) 각각과 시리얼 인터페이스(serial interface)로 연결될 수 있다. 입력 신호 처리 프로세서(22)는 뎁스 센서(12)로부터 상대적으로 저해상도지만 높은 DOF를 가지는 제1 영상 신호와 메타 정보 예컨대 뎁스 정보를 수신할 수 있고, 이미지 센서(14)로부터 상대적으로 고해상도 제2 영상 신호를 수신할 수 있다. 입력 신호 처리 프로세서(22)는 뎁스 센서(12)로부터 수신되는 제1 영상 신호와 이미지 센서(14)로부터 수신되는 제2 영상 신호를 처리할 수 있다. 입력 신호 처리 프로세서(22)는 뎁스 센서(12)로부터 수신되는 뎁스 정보를 이용하여 거리 정보를 추출할 수 있다. 입력 신호 처리 프로세서(22)는 거리 정보와 제2 영상 신호를 매칭할 수 있다.
제1 메모리(32)는 입력 신호 처리 프로세서(22)의 전용 메모리일 수 있다. 제1 메모리(32)는 입력 신호 처리 프로세서(22)로 입력된 제1 영상 신호 또는 제2 영상 신호 또는 뎁스 정보를 일시적으로 저장할 수 있으며, 입력 신호 처리 프로세서(22)의 신호 처리시 데이터를 저장할 수 있다. 제1 메모리(32)는 메인 오퍼레이팅 시스템(26)과 독립적으로 운영될 수 있으며, 버스 또는 시리얼 통신을 통해 입력 신호 처리 프로세서(22)와 연결될 수 있다.
메인 오퍼레이팅 시스템(26)은 입력 신호 처리 프로세서(22)와 시리얼 인터페이스(serial interface)를 통해 신호를 송수신할 수 있다. 메인 오퍼레이팅 시스템(26)은 전자 장치(10)의 메인 OS(Operating System)으로서 전자 장치(10)의 커널 및 각종 서브 시스템 드라이버를 운영할 수 있으며, 전자 장치(10)의 전반 적인 동작을 제어할 수 있는 제어기에 포함될 수 있다.
버스(28)는 메인 오퍼레이팅 시스템(26)이 전자 장치(10)의 각종 서브 시스템들과 고속 통신할 수 있는 장치일 수 있다. 예를 들면 버스(28)는 메인 오퍼레이팅 시스템(26)이 입력 신호 처리 프로세서(22), 제2 메모리(30), 출력 신호 처리 프로세서(32) 등과 고속 통신할 수 있는 장치일 수 있다.
제2 메모리(30)는 메인 메모리로서, 전자 장치(10)가 동작하는데 필요한 각종 데이터를 저장할 수 있으며, 메인 오퍼레이팅 시스템(26)에 의해 데이터가 저장될 수 있고, 저장된 데이터가 읽혀질 수 있다.
출력 신호 처리 프로세서(32)는 입력 신호 처리 프로세서(22)에 의해 처리된 제1 영상 신호 또는 제2 영상 신호를 디스플레이 가능한 영상 데이터로 처리하여 디스플레이(34)에 표시할 수 있다.
디스플레이(34)는 전자 장치(10)의 메인 영상 디스플레이 장치로서, 출력 신호 처리 프로세서(32)에 의해 제공되는 영상 데이터를 표시할 수 있다.
도 2은 본 발명의 일 실시예에 따른 전자 장치의 동작을 설명하기 위한 개략적인 개념도이다. 도 2에 따르면 한 실시 예에 따라 전자 장치(10)는 카메라 어플리케이션(210)을 실행할 수 있다.
도 2를 참조하면, 전자 장치(10)는 사용자에 의해 카메라 어플리케이션(210)이 실행되면 프리뷰 모드(preview mode)를 시작(212)할 수 있다.
프리뷰 모드가 시작되면 전자 장치(10)는 뎁스 센서(12)와 이미지 센서를 초기화하여 입력 신호 처리 프로세서(22)가 뎁스 센서(12)로부터 상대적으로 저해상도지만 높은 DOF를 가지는 제1 영상 신호와 뎁스 정보를 수신할 수 있고, 이미지 센서(14)로부터 상대적으로 고해상도 제2 영상 신호를 수신할 수 있도록 할 수 있다.
입력 신호 처리 프로세서(22)는 프리뷰 모드에서 저해상도 제1 영상 신호를 처리하여 프리뷰 영상 신호로 제공할 수 있고, 프리뷰 영상 신호는 출력 신호 처리 프로세서(32)를 통해 처리되어 디스플레이(34)에 프리뷰 화면으로 표시될 수 있다. 또한 입력 신호 처리 프로세서(22)는 프리뷰 모드에서 뎁스 센서(12)로부터 출력되는 뎁스 정보를 이용하여 거리 정보를 추출할 수 있다.
전자 장치(10)는 포커스(focus) 적용(214)이 요구되면 거리 정보를 이용하여 프리뷰 화면에 포커싱 효과를 적용할 수 있다. 한 실시 예에 따르면 포커스가 적용되는 영역은 화면의 일부 영역일 수 있으며, 미리 정해진 영역이거나, 사용자에 의해 선택된 영역일 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 중앙 영역인 경우 거리 정보를 이용하여 중앙 영역을 제외한 나머지 영역에 아웃 포커스된(out focused) 효과를 적용하고, 아웃 포커스된 효과가 적용된 프리뷰 화면을 표시할 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 선택된 영역인 경우 거리 정보를 이용하여 선택된 영역을 제외한 나머지 영역에 아웃 포커스된 효과를 적용하고, 아웃 포커스된 효과가 적용된 프리뷰 화면을 표시할 수 있다.
전자 장치(10)는 촬영(216)이 요구되면 입력 신호 처리 프로세서(22)를 통해 촬영 순간의 제2 영상으로부터 고해상도 이미지를 획득하고, 촬영 순간의 뎁스 정보를 획득할 수 있고, 촬영 순간의 고해상도 이미지와 뎁스 정보를 매칭할 수 있다. 매칭된 촬영 순간의 고해상도 이미지와 뎁스 정보는 메인 오퍼레이팅 시스템(24)으로 전달될 수 있다. 메인 오퍼레이팅 시스템(24)은 제2 메모리(28)에 고해상도 이미지와 뎁스 정보를 저장할 수 있다.
전자 장치(10)는 저장된 고해상도 이미지와 뎁스 정보를 이용하여, 고해상도 이미지에 포커싱 효과를 적용할 수 있다. 한 실시 예에 따르면 포커스가 적용되는 영역은 고해상도 이미지의 일부 영역일 수 있으며, 미리 정해진 영역이거나, 사용자에 의해 선택된 영역일 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 중앙 영역인 경우 거리 정보를 이용하여 중앙 영역을 제외한 나머지 영역에 아웃 포커스된 효과를 적용하고, 아웃 포커스된 효과가 적용된 고해상도 이미지를 표시할 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 선택된 영역인 경우 거리 정보를 이용하여 선택된 영역을 제외한 나머지 영역에 아웃 포커스된 효과를 적용하고, 아웃 포커스된 효과가 적용된 고해상도 이미지를 표시할 수 있다.
도 3은 본 발명의 일 실시예에 따른 전자 장치에서 촬영 방법에 대한 흐름도이다. 도 3을 참조하면, 전자 장치(10)는 302 동작에서 카메라 어플리케이션이 실행되는지 판단할 수 있다. 만약 카메라 어플리케이션이 실행되면, 전자 장치(10)는 304 동작에서 뎁스 센서(12)로부터 제1 영상 신호와 뎁스 정보를 수신하고, 이미지 센서(14)로부터 제2 영상 신호를 수신할 수 있다. 한 실시 예에 따르면 제1 영상 신호는 저해상도 영상 신호일 수 있고, 제2 영상 신호는 고해상도 영상 신호일 수 있다.
전자 장치(10)는 306 동작에서 제1 영상 신호에 대응된 제1 영상을 프리뷰 화면에 표시할 수 있다. 한 실시 예에 따르면 전자 장치(10)는 입력 신호 처리 프로세서(22)를 통해 프리뷰 모드에서 제1 영상 신호를 처리하여 프리뷰 영상 신호로 제공할 수 있고, 프리뷰 영상 신호는 출력 신호 처리 프로세서(32)를 통해 처리되어 디스플레이(34)에 프리뷰 화면으로 표시될 수 있다.
전자 장치(10)는 308 동작에서 포커싱이 적용되는지 판단할 수 있다. 한 실시 예에 따르면 미리 정해진 포커싱 적용 여부에 따라 포커싱이 적용될 수도 있고, 사용자 요청에 따라 포커싱이 적용될 수도 있다. 포커싱이 적용되는 것으로 판단되면 전자 장치(10)는 310 동작에서 뎁스 정보를 이용하여 거리 정보를 추출하고, 거리 정보를 이용하여 프리뷰 화면에 포커싱 효과를 적용할 수 있다. 한 실시 예에 따르면 포커스가 적용되는 영역은 화면의 일부 영역일 수 있으며, 미리 정해진 영역이거나, 사용자에 의해 선택된 영역일 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 중앙 영역인 경우 거리 정보를 이용하여 중앙 영역을 제외한 나머지 영역에 아웃 포커스된(out focused) 효과를 적용하고, 아웃 포커스된 효과가 적용된 프리뷰 화면을 표시할 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 선택된 영역인 경우 거리 정보를 이용하여 선택된 영역을 제외한 나머지 영역에 아웃 포커스된 효과를 적용하고, 아웃 포커스된 효과가 적용된 프리뷰 화면을 표시할 수 있다.
전자 장치(10)는 312 동작에서 촬영 요청이 있는지 판단할 수 있다. 전자 장치(10)는 촬영 요청이 있으면 314 동작에서 제2 영상 신호로부터 촬영 순간의 이미지를 획득함과 동시에, 촬영 순간의 뎁스 정보를 획득할 수 있다. 한 실시 예에 따르면 전자 장치(10)는 촬영 순간의 촬영 순간의 고해상도 이미지를 획득함과 동시에 뎁스 정보를 획득할 수 있다.
전자 장치(10)는 316 동작에서 획득된 이미지와 뎁스 정보를 매칭하여 저장할 수 있다. 전자 장치(10)는 저장된 이미지와 뎁스 정보를 이용하여, 저장된 이미지에 포커싱 효과를 적용할 수 있다.
도 4는 본 발명의 일 실시예에 따른 전자 장치에서 저장된 이미지에 포커싱 효과 적용 방법에 대한 흐름도이다. 도 4를 참조하면, 전자 장치(10)는 402 동작에서 저장된 이미지가 선택되는지 판단할 수 있다. 한 실시 예에 따르면 전자 장치(10)는 제2 메모리(30)에 저장된 이미지들 중 사용자로부터 포커싱 효과를 적용할 이미지가 선택되는지 판단할 수 있다.
전자 장치(10)는 저장된 이미지가 선택되면 404 동작에서 선택된 이미지에 포커싱이 적용될지 판단할 수 있다. 전자 장치(10)는 포커싱이 적용되는 것으로 판단되면 406 동작에서 선택된 이미지와 대응하여 저장된 뎁스 정보를 이용하여 선택된 이미지에 포커싱 효과를 적용할 수 있다. 한 실시 예에 따르면 포커스가 적용되는 영역은 화면의 일부 영역일 수 있으며, 미리 정해진 영역이거나, 사용자에 의해 선택된 영역일 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 중앙 영역인 경우 거리 정보를 이용하여 중앙 영역을 제외한 나머지 영역에 아웃 포커스된(out focused) 효과를 적용하고, 아웃 포커스된 효과가 적용된 프리뷰 화면을 표시할 수 있다. 한 실시 예에 따르면 전자 장치(10)는 포커스가 적용되는 영역이 선택된 영역인 경우 거리 정보를 이용하여 선택된 영역을 제외한 나머지 영역에 아웃 포커스된 효과를 적용할 수 있다. 전자 장치(10)는 408 동작에서 포커싱 효과가 적용된 이미지를 표시할 수 있다.
도 5는 본 발명의 다양한 실시예에 따른 촬영 방법이 적용되는 전자 장치(100)의 구성을 나타낸 도면이다.
도 5를 참조하면, 전자 장치(100)는 제어부(110), 통신부(120), 저장부(130), 표시부(140), 입출력부(150), 카메라부(160)를 포함할 수 있다.
제어부(110)는 CPU(Central Processor Unit)(111)를 포함할 수 있다. 제어부(110)는 복수의 DSP(Digital Signal Processor) 를 더 포함할 수 있다. 복수의 DSP는 입력 신호 처리 프로세서(115), 출력 신호 처리 프로세서(119)를 포함할 수 있다.
CPU(111)는 싱글 코어, 듀얼 코어, 트리플 코어, 또는 쿼드 코어를 포함할 수 있다. CPU(111)는 롬(112), 램(113), 입력 신호처리 프로세서(115), 메모리(117), 출력 신호 처리 프로세서(119)와 내부버스(bus)를 통해 상호 연결될 수 있다. 이러한 제어부(110)는 통신부(120), 저장부(130), 표시부(140), 입출력부(150), 카메라부(160)를 제어할 수 있다. 예컨대, 제어부(110)는 전자 장치(100)에 대한 전반적인 제어 기능을 수행하며, 상기 각 구성부들 간 신호 흐름을 제어할 수 있다.
입력 신호 처리 프로세서(115)는 뎁스 센서(164) 및 이미지 센서(166) 각각과 연결될 수 있다. 입력 신호 처리 프로세서(115)는 뎁스 센서(164)로부터 상대적으로 저해상도지만 높은 DOF를 가지는 제1 영상 신호와 뎁스 정보를 수신할 수 있고, 이미지 센서(166)로부터 상대적으로 고해상도 제2 영상 신호를 수신할 수 있다. 입력 신호 처리 프로세서(115)는 뎁스 센서(164)로부터 수신되는 제1 영상 신호와 이미지 센서(166)로부터 수신되는 제2 영상 신호를 처리할 수 있다. 입력 신호 처리 프로세서(115)는 뎁스 센서(164)로부터 수신되는 뎁스 정보를 이용하여 거리 정보를 추출할 수 있다. 입력 신호 처리 프로세서(115)는 거리 정보와 제2 영상 신호를 매칭할 수 있다.
메모리(117)는 입력 신호 처리 프로세서(115)의 전용 메모리일 수 있다. 메모리(117)는 입력 신호 처리 프로세서(115)로 입력된 제1 영상 신호 또는 제2 영상 신호 또는 뎁스 정보를 일시적으로 저장할 수 있으며, 입력 신호 처리 프로세서(115)의 신호 처리시 데이터를 저장할 수 있다. 메모리(117)는 CPU(111)와 독립적으로 운영될 수 있으며, 버스 또는 시리얼 통신을 통해 입력 신호 처리 프로세서(115)와 연결될 수 있다.
출력 신호 처리 프로세서(119)는 입력 신호 처리 프로세서(115)에 의해 처리된 제1 영상 신호 또는 제2 영상 신호를 디스플레이 가능한 영상 데이터로 처리하여 디스플레이부(140)에 표시할 수 있다.
통신부(120)는 전자 장치(100)가 외부장치와 연결되도록 할 수 있다. 외부장치는 휴대폰(미도시), 스마트폰(미도시), 태블릿PC 등의 타 전자 장치(미도시)를 포함할 수 있다. 예컨대 통신부(120)는 이동통신 모듈, NFC(Near Field Communication) 모듈, WIFI 모듈, BT(BlueTooth) 모듈 중 적어도 하나를 포함할 수 있다. 통신부(120)는 제어부(110)의 제어에 따라 전자 장치(100)가 전자 장치(100)에 입력되는 전화번호를 가지는 휴대폰(미도시), 스마트폰(미도시), 태블릿PC 등의 타 전자 장치(미도시)와 음성 통화, 화상 통화, 문자메시지(SMS) 또는 멀티미디어 메시지(MMS)를 위한 무선 신호를 송수신할 수 있다. 또한 통신부(120)는 NFC 모듈을 통해 타 전자 장치와 NFC 신호를 송수신하거나 BT 모듈을 통해 블루투스 통신 네트워크에 접속하거나 WIFI 모듈을 통해 WIFI 통신 네트워크에 접속할 수 있다.
저장부(130)는 제어부(110)의 제어에 따라 제어부(110), 통신부(120), 표시부(140), 입출력부(150), 카메라부(160)의 동작에 대응되게 입/출력되는 신호 또는 데이터를 저장할 수 있다. 저장부(130)는 전자 장치(100) 또는 제어부(110)의 제어를 위한 복수의 프로그램 및 복수의 애플리케이션들과 각종 기능들 예컨대 카메라 어플리케이션을 실행하기 위한 프로그램 및 데이터를 저장할 수 있다. 이러한, 저장부라는 용어는 제어부(110)내 롬(ROM)(112), 램(RAM)(113), 메모리(117) 또는 단말(100)에 장착되는 메모리 카드(미도시)(예, SD 카드, 메모리 스틱)를 포함할 수 있다. 저장부(130)는 비휘발성 메모리, 휘발성 메모리, 하드 디스크 드라이브(HDD)또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다. 저장부(130)는 기계(예를 들어, 컴퓨터)로 읽을 수 있는 매체일 수 있으며, 기계로 읽을 수 있는 매체라는 용어는 기계가 특정 기능을 수행할 수 있도록 상기 기계로 데이터를 제공하는 매체로 정의될 수 있다. 기계로 읽을 수 있는 매체는 저장 매체일 수 있다. 상기 저장부(130)는 비휘발성 매체(non-volatile media) 및 휘발성 매체를 포함할 수 있다. 이러한 모든 매체는 상기 매체에 의해 전달되는 명령들이 상기 명령들을 상기 기계로 읽어 들이는 물리적 기구에 의해 검출될 수 있도록 유형의 것이어야 한다. 상기 기계로 읽을 수 있는 매체는, 이에 한정되지 않지만, 플로피 디스크(floppy disk), 플렉서블 디스크(flexible disk), 하드 디스크, 자기 테이프, 시디롬(compact disc read-only memory: CD-ROM), 광학 디스크, 펀치 카드(punch card), 페이퍼 테이프(paper tape), 램(RAM), 피롬(Programmable Read-Only Memory: PROM), 이피롬(Erasable PROM: EPROM) 및 플래시-이피롬(FLASH-EPROM) 중의 적어도 하나를 포함할 수 있다.
디스플레이부(140)는 '터치스크린(touch screen)'일 수 있으며, 사용자에게 카메라 어플리케이션 수행 시 그래픽 유저 인터페이스를 제공할 수 있다. 예를 들면 디스플레이부(140)는 사용자의 신체(예, 엄지를 포함하는 손가락) 또는 터치 가능한 입력 유닛(158) 예컨대 펜을 통해 적어도 하나의 근접 또는 터치 등의 각종 제스쳐 입력을 수신할 수 있다. 이러한, 디스플레이부(140)는 예를 들어, 저항막(resistive) 방식, 정전용량(capacitive) 방식, 적외선(infrared) 방식 또는 초음파(acoustic wave) 방식 등 다양한 방식으로 구현될 수 있다. 상기한 바와 같은 디스플레이부(140)는 본 발명의 실시 예에 따라 제어부(110)의 제어 하에 카메라 어플리케이션을 이용한 프리뷰 화면, 포커스 적용된 프리뷰 화면, 저장된 이미지, 등의 화면을 표시할 수 있다.
입출력부(150)는 버튼(152), 마이크(154), 스피커(156), 입력 유닛(158)을 포함할 수 있다. 그리고, 이러한 입출력부(150)는 이에 국한되지 않으며, 마우스, 트랙볼, 조이스틱 또는 커서 방향 키들과 같은 커서 컨트롤(cursor control)이 제어부(110)와의 통신 및 디스플레이부(140) 상의 커서 움직임 제어를 위해 제공될 수 있다. 버튼(152)은 적어도 하나 이상 상기 전자 장치(100)에 구비될 수 있으며, 사용자의 누름에 따른 각종 입력 신호를 상기 제어부(110)로 제공할 수 있다. 마이크(154)는 제어부(110)의 제어에 따라 각종 음원에 의한 음성(voice) 또는 각종 소리(sound)를 입력 받아 전기적인 신호를 생성할 수 있다. 스피커(156)는 제어부(110)의 제어에 따라 무선 네트워크 접속을 통해 수시되는 다양한 신호(예, 무선신호, 방송신호, 디지털 오디오 파일, 디지털 동영상 파일 등)에 대응되는 소리를 전자 장치(100) 외부로 출력할 수 있다. 입력 유닛(158)은 전자 장치(100) 내부에 삽입되어 보관되거나 별도로 구성된 디바이스 또는 물체일 수 있으며, 내부에 삽입되어 보관되는 경우 상기 전자 장치(100)로부터 인출 또는 탈착될 수 있다. 입력 유닛(148)은 스타일러스 펜(이하 '펜'이라 함)등과 같이 표시부(130)에 근접 또는 터치 등의 입력이 가능한 입력 수단이거나, 사용자 손가락 등이 될 수 있다.
카메라부(160)는 렌즈(162), 뎁스 센서(164), 이미지 센서(166)를 포함할 수 있다. 뎁스 센서(12)는 렌즈(162)를 통해 입사되는 빛을 결상하여 이미지 센서(166)보다 상대적으로 저해상도이지만 높은 DOF(Depth of Field)(높은 F-numer)를 가지는 제1 영상 신호를 출력할 수 있다. DOF는 촬영을 할 때 피사체에 렌즈의 초점을 맞추게 되면 초점이 맞는 피사체의 전면과 후면이 존재하는데, 이때 초점이 맞는 면적일 수 있다. 만일 피사체 주위(앞뒤 포함)에 많은 공간이 있고 이들의 초점이 맞는다면 DOF가 깊은(높은) 것일 수 있고, 만일 피사체 주위(앞뒤 포함)에 초점이 맞는 공간이 많지 않으면 DOF가 상대적으로 깊지 않은(높지 않은) 것일 수 있다. 뎁스 센서(12)는 제1 영상 신호를 분석하여 뎁스 정보를 출력할 수 있다. 뎁스 정보는 제1 영상의 각 픽셀이 렌즈와 가까운지 또는 먼지를 나타내는 거리 정보와 연관될 수 있다. 제1 영상의 각 픽셀이 렌즈와 근거리일수록 뎁스 수치가 높고, 제1 영상의 각 픽셀이 원거리일수록 뎁스 수치가 낮을 수 있다. 뎁스 정보는 제1 영상의 거리 정보 추출에 필요한 정보를 포함할 수 있다.
이미지 센서(166)는 렌즈(162)를 통해 입사되는 빛을 결상하여 뎁스 센서(164)보다 상대적으로 고해상도의 제2 영상 신호를 획득할 수 있다. 이때 이미지 센서(166)는 뎁스 센서(12)와 같은 장면의 재2 영상 신호를 획득할 수 있도록 뎁스 센서(164)와 최대한 가깝게 배치될 수 있다.
도 6 및 도 7은 본 발명의 다양한 실시 예에 따른 전자 장치에서 촬영 시 사용자 인터페이스 화면 일예도이다.
먼저 도 6을 참조하면, 전자 장치(100)는 디스플레이부 화면에서 사용자에 의해 카메라 어플리케이션(Camera App)에 해당하는 앱 아이콘(App Icon)이 터치 (Touch)되면 미리 정해진 시간(예컨대 1초)이내 카메라 앱 런치(Camera App Launch)(602)를 수행할 수 있다.
전자 장치(100)는 카메라 앱이 런치되면 뎁스 센서(164)로부터 저해상도 제1 영상 신호와 뎁스 정보를 수신하고, 이미지 센서(166)로부터 고해상도 제2 영상 신호를 수신할 수 있다.
전자 장치(100)는 저해상도 제1 영상 신호를 이용하여 제1 프리뷰 화면(604)를 표시할 수 있다. 제1 프리뷰 화면(604)은 포커스가 적용되지 않은 상태이거나, 전체 화면에 포커스가 적용된 즉, 토탈 포커스(Total Focus)된 상태일 수 있다.
전자 장치(100)는 제1 프리뷰 화면(604)이 표시된 상태에서 제1 프리뷰 화면(604)상에 사용자에 의한 셔터 프레스(Shutter Press)(606)가 수행되는지 판단할 수 있다.
사용자에 의한 셔터 프레스(Shutter Press)(606)가 수행되면 전자 장치(100)는 미리 정해진 시간(0.1초)이내에 제1 프리뷰 화면(604)에 포커싱을 적용하고, 포커싱 효과가 적용된 제2 프리뷰 화면(608)을 표시할 수 있다. 이때 전자 장치(100)는 뎁스 정보를 이용하여 거리 정보를 추출하고, 거리 정보를 이용하여 프리뷰 화면에 포커싱 효과를 적용할 수 있다.
한 실시 예에 따르면 전자 장치(100)는 제1 프리뷰 화면(604)에 오토 아웃 포커스(Auto OutFocus)를 적용하고 오토 아웃 포커스가 제2 프리뷰 화면(608)을 표시할 수 있다. 한 실시 예에 따르면 오토 아웃 포커스는 니어 오브젝트(near object) 영역(608-1)을 제외한 나머지 영역에 아웃 포커스된(out focused) 효과를 적용하거나 센터 오브젝트(center object) 영역(608-2)을 제외한 나머지 영역에 아웃 포커스된 효과를 적용하는 것일 수 있다.
한편, 도 7을 참조하면, 전자 장치(100)는 카메라 앱이 런치됨에 따라 제1 프리뷰 화면(702)이 표시된 상태에서 사용자에 의한 좌측 및 우측 드래그(Left/Right Drag) 중 어느 하나의 드래그 입력이 수행되는지 판단(704)할 수 있다.
사용자에 의한 좌측 및 우측 드래그(Left/Right Drag) 중 어느 하나의 드래그 입력이 수행되면 전자 장치(100)는 미리 정해진 시간(예컨대 0.1초)이내에 제1 프리뷰 화면(702)에 DOF를 원거리(far) 또는 근거리(near)로 변경하여 포커싱을 적용하고, 포커싱 효과가 적용된 제2 프리뷰 화면(706)을 표시할 수 있다. 예를 들면 사용자에 의한 좌측 드래그 입력이 수행되면 전자 장치(100)는 제1 프리뷰 화면(702)에 DOF를 원거리(far)로 변경하여 포커싱을 적용하고, 포커싱 효과가 적용된 제2 프리뷰 화면(706)을 표시할 수 있다. 또는 사용자에 의한 우측 드래그 입력이 수행되면 전자 장치(100)는 제1 프리뷰 화면(702)에 DOF를 근거리(near)로 변경하여 포커싱을 적용하고, 포커싱 효과가 적용된 제2 프리뷰 화면(706)을 표시할 수 있다.
전자 장치(100)는 제1 프리뷰 화면(702) 또는 제2 프리뷰 화면(706)과 같은 프리뷰 화면이 표시된 상태에서 사용자에 의한 하측 드래그(down Drag) 입력이 수행되는지 판단(708)할 수 있다. 만약 사용자에 의한 하측 드래그(down Drag) 입력이 수행되면 전자 장치(100)는 미리 정해진 시간(예컨대 0.1초)이내에 이미지를 캡쳐(촬영)하고, 촬영된 이미지(710)를 저장할 수 있다.
한 실시 예에 따르면 전자 장치(100)는 사용자에 의한 하측 드래그(down Drag) 입력이 수행되면 제2 영상 신호로부터 촬영 순간의 이미지를 획득함과 동시에, 촬영 순간의 뎁스 정보를 획득하고, 이미지와 뎁스 정보를 매칭하여 저장할 수 있다. 전자 장치(100)는 저장된 이미지와 뎁스 정보를 이용하여, 저장된 이미지에 포커싱 효과를 적용할 수 있다.
본 발명의 다양한 실시예에 따른 동작들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야에서 통상의 지식을 가진 자에게 공지되어 사용 가능한 것일 수도 있다.
본 발명의 실시예에 따른 촬영 방법은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 임의의 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 본 발명의 실시예에 따른 촬영 방법은 제어부 및 메모리를 포함하는 컴퓨터 또는 전자 장치에 의해 구현될 수 있고, 상기 메모리는 본 발명의 실시예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 따라서, 본 발명의 실시예들은 본 명세서의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계(컴퓨터 등)로 읽을 수 있는 저장 매체를 포함 할 수 있다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함 할 수 있다.
또한, 본 발명의 실시예들에 따른 전자 장치는 유선 또는 무선으로 연결되는 프로그램 제공 장치로부터 상기 프로그램을 수신하여 저장할 수 있다. 상기 프로그램 제공 장치는 상기 본 발명의 다양한 실시예들에 따른 무선 네트워크 접속 정보 공유 방법을 수행하도록 하는 지시들을 포함하는 프로그램을 저장하기 위한 메모리와, 상기 전자 장치와 유선 또는 무선 통신을 수행하기 위한 통신부와, 상기 전자 장치의 요청 또는 자동으로 해당 프로그램을 상기 통신부를 통하여 전송되도록 제어하는 제어부를 포함할 수 있다.

Claims (12)

  1. 전자 장치에 있어서,
    화면을 표시하는 디스플레이;
    제1 영상 신호와 뎁스 정보를 출력하는 뎁스 센서;
    제2 영상 신호를 출력하는 이미지 센서; 및
    상기 제1 영상 신호를 이용하여 상기 디스플레이에 프리뷰 화면을 표시하고, 촬영 요청 시 제2 영상 신호를 이용하여 촬영 순간의 이미지를 획득함과 동시에 촬영 순간의 뎁스 정보를 획득하고, 상기 이미지와 상기 뎁스 정보를 저장하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 전자 장치.
  2. 제1항에 있어서,
    상기 제1 영상 신호는 저해상도 영상 신호이고, 상기 제2 영상 신호는 고해상도 영상 신호인 것을 특징으로 하는 전자 장치.
  3. 제1항에 있어서,
    상기 제어부는 상기 저장된 상기 이미지와 상기 뎁스 정보를 이용하여 상기 이미지에 포커싱 효과를 적용하는 것을 특징으로 하는 전자 장치.
  4. 제3항에 있어서,
    상기 포커싱 효과는 상기 이미지의 일부 영역을 제외한 나머지 영역에 아웃 포커스를 적용하는 효과인 것을 특징으로 하는 전자 장치.
  5. 제4항에 있어서,
    상기 이미지의 일부 영역은 미리 정해진 영역인 것을 특징으로 하는 전자 장치.
  6. 제4항에 있어서,
    상기 이미지의 일부 영역은 사용자에 의해 선택된 영역인 것을 특징으로 하는 전자 장치.
  7. 전자 장치에서 촬영 방법에 있어서,
    뎁스 센서로부터 제1 영상 신호와 뎁스 정보를 수신하고, 이미지 센서로부터 제2 영상 신호를 수신하는 과정;
    상기 제1 영상 신호를 이용하여 상기 디스플레이에 프리뷰 화면을 표시하는 과정;
    촬영 요청에 따라 상기 제2 영상 신호를 이용하여 촬영 순간의 이미지를 획득함과 동시에 촬영 순간의 뎁스 정보를 획득하는 과정; 및
    상기 이미지와 상기 뎁스 정보를 저장하는 과정을 포함하는 것을 특징으로 하는 전자 장치에서 촬영 방법.
  8. 제7항에 있어서,
    상기 제1 영상 신호는 저해상도 영상 신호이고, 상기 제2 영상 신호는 고해상도 영상 신호인 것을 특징으로 하는 전자 장치에서 촬영 방법.
  9. 제7항에 있어서,
    상기 저장된 상기 이미지와 상기 뎁스 정보를 이용하여 상기 이미지에 포커싱 효과를 적용하는 과정을 더 포함하는 것을 특징으로 하는 전자 장치에서 촬영 방법.
  10. 제9항에 있어서,
    상기 포커싱 효과는 상기 이미지의 일부 영역을 제외한 나머지 영역에 아웃 포커스를 적용하는 효과인 것을 특징으로 하는 전자 장치에서 촬영 방법.
  11. 제10항에 있어서,
    상기 이미지의 일부 영역은 미리 정해진 영역인 것을 특징으로 하는 전자 장치에서 촬영 방법.
  12. 제10항에 있어서,
    상기 이미지의 일부 영역은 사용자에 의해 선택된 영역인 것을 특징으로 하는 전자 장치에서 촬영 방법.
KR1020140053492A 2014-05-02 2014-05-02 전자 장치 및 전자 장치에서 촬영 방법 KR102206866B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140053492A KR102206866B1 (ko) 2014-05-02 2014-05-02 전자 장치 및 전자 장치에서 촬영 방법
US14/657,920 US10070041B2 (en) 2014-05-02 2015-03-13 Electronic apparatus and method for taking a photograph in electronic apparatus
EP15166006.5A EP2940984B1 (en) 2014-05-02 2015-04-30 Electronic apparatus and method for taking a photograph in electronic apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140053492A KR102206866B1 (ko) 2014-05-02 2014-05-02 전자 장치 및 전자 장치에서 촬영 방법

Publications (2)

Publication Number Publication Date
KR20150126192A true KR20150126192A (ko) 2015-11-11
KR102206866B1 KR102206866B1 (ko) 2021-01-25

Family

ID=53476633

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140053492A KR102206866B1 (ko) 2014-05-02 2014-05-02 전자 장치 및 전자 장치에서 촬영 방법

Country Status (3)

Country Link
US (1) US10070041B2 (ko)
EP (1) EP2940984B1 (ko)
KR (1) KR102206866B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016010721A1 (de) 2015-09-07 2017-03-09 Mando Corporation Lenkungssteuerungsvorrichtung und Lenkungssteuerungsverfahren
US11073973B2 (en) 2017-04-26 2021-07-27 Samsung Electronics Co., Ltd. Electronic device and method for electronic device displaying image

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10068147B2 (en) * 2015-04-30 2018-09-04 Samsung Electronics Co., Ltd. System and method for insertion of photograph taker into a photograph
KR102486425B1 (ko) * 2018-02-23 2023-01-09 엘지이노텍 주식회사 카메라 모듈 및 그의 초해상도 영상 처리 방법
CN110378946B (zh) * 2019-07-11 2021-10-01 Oppo广东移动通信有限公司 深度图处理方法、装置以及电子设备
CN113747028B (zh) * 2021-06-15 2024-03-15 荣耀终端有限公司 一种拍摄方法及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1830564A1 (en) * 2004-11-25 2007-09-05 Sharp Kabushiki Kaisha Focusing area adjusting camera-carrying portable terminal
JP2010520661A (ja) * 2007-03-01 2010-06-10 イーストマン コダック カンパニー 改善された時間サンプリングを提供するデジタルカメラ
KR20110082736A (ko) * 2010-01-12 2011-07-20 삼성전자주식회사 뎁스 정보를 이용한 아웃 포커스 수행 방법 및 이를 적용한 카메라
KR20140031690A (ko) * 2012-09-05 2014-03-13 삼성전자주식회사 촬영 장치 및 이의 촬영 방법

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6020931A (en) * 1996-04-25 2000-02-01 George S. Sheng Video composition and position system and media signal communication system
US20070121094A1 (en) * 2005-11-30 2007-05-31 Eastman Kodak Company Detecting objects of interest in digital images
US8405680B1 (en) 2010-04-19 2013-03-26 YDreams S.A., A Public Limited Liability Company Various methods and apparatuses for achieving augmented reality
US9100640B2 (en) * 2010-08-27 2015-08-04 Broadcom Corporation Method and system for utilizing image sensor pipeline (ISP) for enhancing color of the 3D image utilizing z-depth information
US8717467B2 (en) 2011-01-25 2014-05-06 Aptina Imaging Corporation Imaging systems with array cameras for depth sensing
US20130057515A1 (en) 2011-09-07 2013-03-07 Microsoft Corporation Depth camera as a touch sensor
KR101792641B1 (ko) 2011-10-07 2017-11-02 엘지전자 주식회사 이동 단말기 및 그의 아웃 포커싱 이미지 생성방법
KR20130051134A (ko) 2011-11-09 2013-05-20 삼성전자주식회사 3차원 위치 센싱 시스템 및 방법
EP2817958A1 (en) * 2012-02-22 2014-12-31 Sony Ericsson Mobile Communications AB Method and device relating to image content
KR101975971B1 (ko) 2012-03-19 2019-05-08 삼성전자주식회사 깊이 카메라, 다중 깊이 카메라 시스템, 그리고 그것의 동기 방법
KR101953614B1 (ko) 2012-10-12 2019-05-22 삼성전자주식회사 카메라장치의 이미지처리장치 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1830564A1 (en) * 2004-11-25 2007-09-05 Sharp Kabushiki Kaisha Focusing area adjusting camera-carrying portable terminal
JP2010520661A (ja) * 2007-03-01 2010-06-10 イーストマン コダック カンパニー 改善された時間サンプリングを提供するデジタルカメラ
KR20110082736A (ko) * 2010-01-12 2011-07-20 삼성전자주식회사 뎁스 정보를 이용한 아웃 포커스 수행 방법 및 이를 적용한 카메라
KR20140031690A (ko) * 2012-09-05 2014-03-13 삼성전자주식회사 촬영 장치 및 이의 촬영 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016010721A1 (de) 2015-09-07 2017-03-09 Mando Corporation Lenkungssteuerungsvorrichtung und Lenkungssteuerungsverfahren
US11073973B2 (en) 2017-04-26 2021-07-27 Samsung Electronics Co., Ltd. Electronic device and method for electronic device displaying image
US11604574B2 (en) 2017-04-26 2023-03-14 Samsung Electronics Co., Ltd. Electronic device and method for electronic device displaying image

Also Published As

Publication number Publication date
KR102206866B1 (ko) 2021-01-25
US20150319417A1 (en) 2015-11-05
EP2940984B1 (en) 2020-07-01
US10070041B2 (en) 2018-09-04
EP2940984A1 (en) 2015-11-04

Similar Documents

Publication Publication Date Title
KR102622754B1 (ko) 이미지 합성 방법 및 이를 지원하는 전자 장치
US10944908B2 (en) Method for controlling camera and electronic device therefor
US10353574B2 (en) Photographic apparatus, control method thereof, and non-transitory computer-readable recording medium
CN105554369B (zh) 用于处理图像的电子设备和方法
CN105282430B (zh) 使用照片的构图信息的电子装置及使用该装置的拍摄方法
US10003785B2 (en) Method and apparatus for generating images
KR102165818B1 (ko) 입력 영상을 이용한 사용자 인터페이스 제어 방법, 장치 및 기록매체
KR102206866B1 (ko) 전자 장치 및 전자 장치에서 촬영 방법
US20150222880A1 (en) Apparatus and method for capturing image in electronic device
US20150296317A1 (en) Electronic device and recording method thereof
CN104488258A (zh) 用于双相机快门的方法和设备
KR20160058519A (ko) 복수의 영상들에 대한 영상 처리
KR102376700B1 (ko) 비디오 컨텐츠 생성 방법 및 그 장치
KR102170896B1 (ko) 영상 표시 방법 및 전자 장치
CN104636106A (zh) 图片显示方法和装置、终端设备
CN107637063B (zh) 用于基于用户的手势控制功能的方法和拍摄装置
EP3001300B1 (en) Method and apparatus for generating preview data
KR20150083636A (ko) 전자 장치에서 이미지 운영 방법 및 장치
US9888206B2 (en) Image capturing control apparatus that enables easy recognition of changes in the length of shooting time and the length of playback time for respective settings, control method of the same, and storage medium
KR102340251B1 (ko) 데이터 관리 방법 및 그 방법을 처리하는 전자 장치
KR20150110032A (ko) 영상데이터 처리 전자장치 및 방법
KR102246645B1 (ko) 영상 획득을 위한 장치 및 방법
KR102289497B1 (ko) 입력 영상을 이용한 사용자 인터페이스 제어 방법, 장치 및 기록매체
KR102124806B1 (ko) 전자 장치 및 전자 장치의 영상 정보와 오디오 정보의 연결 방법
JP2015192362A (ja) 画像再生装置，画像再生方法およびその制御プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant