KR102265326B1 - 이미지 촬영장치 및 방법 - Google Patents

이미지 촬영장치 및 방법 Download PDF

Info

Publication number
KR102265326B1
KR102265326B1 KR1020140012017A KR20140012017A KR102265326B1 KR 102265326 B1 KR102265326 B1 KR 102265326B1 KR 1020140012017 A KR1020140012017 A KR 1020140012017A KR 20140012017 A KR20140012017 A KR 20140012017A KR 102265326 B1 KR102265326 B1 KR 102265326B1
Authority
KR
South Korea
Prior art keywords
image
subject
display
flexible display
electronic device
Prior art date
Application number
KR1020140012017A
Other languages
English (en)
Other versions
KR20150091595A (ko
Inventor
최종철
김희성
박형진
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020140012017A priority Critical patent/KR102265326B1/ko
Priority to US14/613,245 priority patent/US9967444B2/en
Publication of KR20150091595A publication Critical patent/KR20150091595A/ko
Application granted granted Critical
Publication of KR102265326B1 publication Critical patent/KR102265326B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G03B15/02—Illuminating scene
    • G03B15/06—Special arrangements of screening, diffusing, or reflecting devices, e.g. in studio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/08—Stereoscopic photography by simultaneous recording
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/001—Constructional or mechanical details

Abstract

전자장치의 이미지 촬영 방법은, 피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이에 장착된 카메라모듈을 통해 상기 피사체에 포커싱된 이미지를 촬영하는 동작과, 상기 촬영된 이미지들을 합성하여 설정된 타입으로 처리하는 동작을 포함할 수 있다.

Description

이미지 촬영장치 및 방법{APPARATUS AND METHOD FOR SHOOTING AN IMAGE IN ELETRONIC DEVICE HAVINAG A CAMERA}
본 발명의 다양한 실시 예는 전자장치가 플랙서블 디스플레이 및 복수의 이미지센서를 구비하며, 장치의 휘어진 방향에 따라 복수 이미지들을 다양한 형태로 처리할 수 있는 장치 및 방법에 관한 것이다.
전자장치에서 파노라마 이미지를 촬영할 때 전자장치를 이동시키면서 여러 번 셔터 스위치를 조작하여 이미지를 획득한 후 후처리하여 파노라마 이미지를 생성할 수 있었다. 또한 파노라마 기능을 가지는 전자장치인 경우, 파노라마 모드를 설정하고 셔터 스위치를 누른 상태에서 카메라를 이동하여 연속 촬영하는 방법을 사용하였다. 또한 3D 이미지를 촬영하는 방법은 하나의 카메라를 이용하여 피사체를 다른 방향에서 여러번 촬영하고 이를 합성하여 3D 이미지를 생성하였다.
종래의 전자장치는 파노라마 촬영이나 3D 이미지를 촬영할 때, 셔터 스위치를 여러 번 조작하여 이미지를 촬영하거나 또는 셔터 스위치를 누른 상태에서 전자장치를 이동시키면서 촬영을 하여야 했다. 따라서 종래의 이미지 촬영 방법은 촬영시간이 길어졌으며, 촬영 횟수가 많아 번거로운 문제점이 있다.
본 발명의 다양한 실시 예들은 전자장치에 Flexible Display에 Array-Camera를 일렬로 배치하여 실장하고, 전자장치를 피사체 방향으로 휘게하여 한번의 촬영에 의해 복수의 이미지들을 획득하여 처리할 수 있는 장치 및 방법을 제공한다. 이때 전자장치를 내부를 향해 휘게 하여 내부 Object를 촬영하여 3D 이미지 및 비디오 등의 컨텐츠를 생성할 수 있으며, 또한 전자장치가 외부를 향해 휘도록 하여 주변의 이미지 및 비디오 등의 컨텐츠를 생성할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자장치의 이미지 촬영 방법은 피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이에 장착된 카메라모듈을 통해 상기 피사체에 포커싱된 이미지를 촬영하는 동작과, 상기 촬영된 이미지들을 합성하여 설정된 타입으로 처리하는 동작을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 전자장치의 이미지 촬영 방법은, 피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이에 장착된 카메라모듈을 통해 상기 피사체의 주변 휘도를 측정하는 동작과, 상기 감지된 휘도에 따라 상기 디스플레이의 화면 밝기를 제어하여 피사체의 휘도를 조절하는 동작과, 상기 카메라모듈을 구동하여 피사체에 포커싱된 적어도 2개의 이미지들을 촬영하는 동작과, 상기 촬영된 이미지들을 합성하여 3D 이미지로 처리하는 동작을 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자 장치는 홀을 가지며 피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이와, 상기 디스플레이의 홀의 하단에 광학부가 위치되며, 상기 피사체의 이미지들을 획득하는 이미지센서를 포함하는 카메라모듈과, 상기 카메라모듈에서 출력되는 상기 이미지들을 합성하여 설정된 타입으로 처리하는 이미지처리부를 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 이미지 처리 방법 및 전자 장치는 어레이 카메라 모듈 및 플랙서블 디스플레이를 구비하며, 복수의 이미지들을 동시에 획득하여 이미지 또는 3D 동영상 등의 컨텐트를 생성할 수 있다. 또한 전자장치는 휘어진 방향을 분석하여 내측으로 장치가 휘어진 경우에는 획득되는 이미지들을 하나의 이미지로 처리한 후 3D 이미지로 변환할 수 있으며, 외측으로 장치가 휘어진 경우에는 획득된 이미지들을 하나의 2D 이미지로 처리할 수 있다.
도 1은 다양한 실시예에 따른, 전자 장치를 포함하는 네트워크 환경을 도시한다.
도 2는 본 발명에 따른 다양한 실시예의 전자장치에서 어레이 카메라 모듈을 장착하는 예를 도시하는 도면이다
도 3a - 도 3c는 어레이 카메라 및 플랙서블 디스플레이를 구비하는 전자장치에서 이미지를 촬영하는 예를 설명하기 위한 도면이다
도 4는 본 발명의 다양한 실시예에 따른 이미지처리 제어모듈의 동작을 설명하기 위한 도면이다.
도 5는 본 발명의 다양한 실시예에 따른 이미지처리 제어모듈의 구성을 도시하는 도면이다.
도 6은 다양한 실시예들에 따른 전자 장치 601의 블록도를 도시한다.
도 7은 어레이 카메라 및 플랙서블 디스플레이를 구비하는 전자장치에서 이미지를 촬영하는 방법을 도시하는 흐름도이다
도 8은 어레이 카메라를 가지는 카메라모듈을 이용하여 이미지를 촬영하는 방법을 설명하기 위한 도면이다.
도 9는 전자장치에서 주변 휘도를 분석하여 피사체 주변의 휘도를 조절하는 방법을 도시하는 흐름도이다.
도 10 a - 도 10 b는 플랙서블 디스플레이를 조명장치로 사용할 때 피사체 주변의 밝기를 설명하기 위한 도면이다.
도 11a - 도 11b는 플랙서블 디스플레이를 이용하여 피사체 주변의 휘도를 조절하는 예를 도시하는 도면이다.
도 12는 전자장치에서 디스플레이를 이용하여 피사체의 조명을 제어하는 방법을 도시하는 흐름도이다.
도 13a - 도 13c는 디스플레이를 이용하여 조명을 제어하는 예를 도시하는 도면이다.
도 14a - 도 14e는 디스플레이를 이용하여 조명을 제어할 때 카메라와 디스플레이의 구동 예를 도시하는 도면이다.
도 15는 전자장치의 휘어짐에 의해 카메라가 중첩될 때의 이미지 촬영 방법을 도시하는 흐름도이다.
도 16a - 도 16c는 전자장치의 휘어짐에 의해 중첩된 카메라의 구동 방법의 예를 설명하기 위한 도면이다.
도 17은 플랙서블 디스플레이 및 어레이 카메라를 구비하는 전자장치에서 이미지 촬영 및 촬영된 이미지를 표시하는 방법을 도시하는 흐름도이다.
도 18a 및 도 18b는 3D 이미지의 표시 방법을 설명하기 위한 도면이다.
도 19는 플랙서블 디스플레이 및 어레이 카메라를 구비하는 전자장치에서 이미지를 촬영하는 방법을 도시하는 흐름도이다.
도 20a 및 도 20는 전자장치가 휘어지는 방향에 따라 이미지를 촬영하는 예를 설명하기 위한 도면이다.
도 21은 전자장치에서 플랙서블 디스플레이에 실장되는 카메라 어레이 다른 구조를 도시하는 도면이다.
이하, 첨부된 도면을 참조하여 본 발명(present disclosure)를 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
본 발명 가운데 사용될 수 있는"포함한다" 또는 "포함할 수 있다" 등의 표현은 발명된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 발명에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명에서 "또는" 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, "A 또는 B"는, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.
본 발명 가운데 "제 1," "제 2," "첫째," 또는 "둘째," 등의 표현들이 본 발명의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분 짓기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다.
본 발명에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명에 따른 전자 장치는, 통신 기능이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smartwatch))중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능 을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller’s machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 발명에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 개세에 따른 전자 장치는 플렉서블 장치일 수 있다. 또한, 본 발명에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시예에 따른, 전자 장치 101을 포함하는 네트워크 환경 100를 도시한다. 도 1을 참조하면, 상기 전자 장치 101는 버스 110, 프로세서 120, 메모리 130, 입출력 인터페이스 140, 디스플레이 150, 통신 인터페이스 160 및 어플리케이션 제어 모듈 170을 포함할 수 있다.
상기 버스 110은 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다.
상기 프로세서 120은, 예를 들면, 상기 버스 110을 통해 전술한 다른 구성요소들(예: 상기 메모리 130, 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 어플리케이션 제어 모듈 170 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
상기 메모리 130은, 상기 프로세서 120 또는 다른 구성요소들(예: 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 어플리케이션 제어 모듈 170 등)로부터 수신되거나 상기 프로세서 120 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리 130은, 예를 들면, 커널 131, 미들웨어 132, 어플리케이션 프로그래밍 인터페이스(API: application programming interface) 133 또는 어플리케이션 134 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널 131은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널 131은 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에서 상기 전자 장치 101의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어 132는 상기 API 133 또는 상기 어플리케이션 134가 상기 커널 131과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어 132는 상기 어플리케이션 134로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션 134 중 적어도 하나의 어플리케이션에 상기 전자 장치 101의 시스템 리소스(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.
상기 API 133은 상기 어플리케이션 134가 상기 커널 131 또는 상기 미들웨어 132에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134는 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션 134는 상기 전자 장치 101과 외부 전자 장치(예: 전자 장치 104) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치 101 의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 104)로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 104)로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치 101과 통신하는 외부 전자 장치(예: 전자 장치 104)의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134은 상기 외부 전자 장치(예: 전자 장치 104)의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션 134는 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 134는 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 상기 어플리케이션 134는 전자 장치 101에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버 106 또는 전자 장치 104)로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
상기 입출력 인터페이스 140은, 입출력 장치(예: 센서, 키보드 또는 터치 스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스 110을 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 어플리케이션 제어 모듈 170에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 터치 스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서 120으로 제공할 수 있다. 또한, 상기 입출력 인터페이스 140은, 예를 들면, 상기 버스 110을 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 어플리케이션 제어 모듈 170으로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 상기 프로세서 120을 통하여 처리된 음성 데이터를 스피커를 통하여 사용자에게 출력할 수 있다. 상기 센서는 이미지센서를 포함할 수 있다. 본 발명에 따른 다양한 실시예들에서 상기 이미지센서는 어레이 카메라 모듈에 장착될 수 있다. 상기 어레이 카메라모듈의 각 카메라들은 전자장치에 일정 간격으로 배치될 수 있으며, 각 카메라들은 광학부 및 이미지센서를 포함할 수 있다. 그리고 상기 어레이카메라 모듈은 촬영시 각각 대응되는 이미지센서들에서 복수의 이미지들을 촬영할 수 있다.
상기 디스플레이 150은 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다. 본 발명에 따른 다양한 실시예들에서 상기 디스플레이150은 벤딩 및/또는 롤링(bending and/or rolling)이 가능한 플랙서블 디스플레이(flexible display)가 될 수 있다. 이하의 설명에서 상기 벤딩 및 롤링은 휨이라는 용어와 같은 의미로 사용될 것이다. 상기 디스플레이150은 장치의 휨 방향에 따라 내측 방향 또는 외측 방향으로 휘어질 수 있다. 또한 상기 디스플레이150에서 화면으로 표시되지 않는 일부 영역(예를들면 베젤 영역)에 상기 어레이 카메라 모듈이 배치될 수 있다.
상기 통신 인터페이스 160은 상기 전자 장치 101과 외부 장치(예: 전자 장치 104 또는 서버 106) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스 160은 무선 통신 또는 유선 통신을 통해서 네트워크 162에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 네트워크 162는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크 는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 상기 전자 장치 101과 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션 134, 어플리케이션 프로그래밍 인터페이스 133, 상기 미들웨어 132, 커널 131 또는 통신 인터페이스 160 중 적어도 하나에서 지원될 수 있다.
어플리케이션 제어 모듈 170은, 다른 구성요소들(예: 상기 프로세서 120, 상기 메모리 130, 상기 입출력 인터페이스 140, 또는 상기 통신 인터페이스 160 등)로부터 획득된 정보 중 적어도 일부를 처리하고, 이를 다양한 방법으로 사용자에게 제공할 수 있다. 예를 들면, 상기 어플리케이션 제어 모듈 170은, 상기 전자 장치 101에 구비된 접속 부품의 정보를 인식하고, 접속 부품의 정보를 상기 메모리 130에 저장하고, 접속 부품의 정보에 기반하여, 어플리케이션 134를 실행시킬 수 있다. 본 발명의 다양한 실시예에 따른 전자장치에서 상기 어플리케이션 제어모듈170은 이미지처리 제어모듈이 될 수 있다. 이하의 설명에서는 상기 어플리케이션 제어모듈을 이미지처리 제어모듈170로 설명할 것이다.
상기 이미지처리 제어모듈170은 이미지 촬영시 어레이 카메라 모듈을 구동하여 복수의 이미지들을 촬영하며, 플랙서블 디스플레이의 휨(bending or rolling) 방향에 촬영된 이미지들을 하나의 이미지로 합성한 후 2D 이미지(two dimension image) 또는 3D 이미지(three dimension image)로 처리할 수 있다. 예를들면 상기 이미지처리 제어모듈170은 장치의 휨 방향이 내측으로 향하면 촬영된 복수의 이미지들을 하나의 이미지로 처리한 후 3D 이미지로 생성하며, 외측으로 향하면 촬영된 복수의 이미지들을 하나의 이미지로 처리한 2D 이미지를 생성할 수 있다.
본 발명에 따른 다양한 실시예들의 전자장치는 플랙서블 디바이스가 될 수 있다. 예를들면 전자장치의 디스플레이는 휨(bending and/or rolling) 특성을 가지는 디스플레이를 구비하며, 따라서 전자장치도 휨 특성을 가질 수 있다. 상기 전자장치는 동일면을 향하는 둘 이상의 카메라가 실장되어 있는 플렉서블 디바이스로써, 상기 전자장치를 촬영하고자 하는 객체를 향하도록 위치(bending and/or rolling)시킨다. 그리고 상기 전자장치는 둘 이상의 카메라들을 제어하여 각각 객체를 촬영한 후 하나의 이미지로 합성하며, 합성된 하나의 이미지를 2D 또는3D 이미지로 처리할 수 있다.
상기 동일면을 향하는 둘 이상의 카메라는 일렬로 정렬되거나 또는 일정한 패턴 형태로 정렬될 수 있으며, 상기 카메라는 단일 카메라 또는 Array-Camera모듈, 짧은 초점거리에 위치한 객체 촬영이 가능할 수 있게 광각 카메라일 수 있다
그리고 플렉서블 디바이스는 객체 주변부에 폐곡선 형태로 위치시켜 이미지를 동시에 촬영한 후, 촬영된 이미지들을 하나의 이미지로 합성하여 3D 이미지로 생성할 수 있다. 예를들면, 상기 플랙서블 디바이스를 객체 주변부에 폐곡선 또는 개곡선(예를들면 원형) 형태로 위치시켜 파노라마 촬영을 할 수 있으며, 파노라마 촬영된 이미지를 3D 이미지로 생성할 수 있다.
상기 전자장치는 객체 주변부에 위치시킬 때 플랙서블 디바이스에 의해 조명이 가려질 수 있다. 본 발명에 따른 다양한 실시예에 따른 전자장치는 이미지를 촬영할 때, 카메라를 통해 내부의 객체 주변의 휘도를 측정하고, 측정된 휘도를 분석하여 촬영에 충분한 휘도인지 판단하며, 판단결과 불충분한 휘도이면 조명센서 또는 디스플레이를 동작시켜 이미지 촬영에 필요한 휘도를 제공할 수 있다.
상기 객체 주변의 내부 휘도를 조절할 때, 상기 전자장치는 디스플레이의 전체 영역을 활성화 시킬 수 있으며, 일부 영역을 활성화 시킬 수 있다. 예를들면, 상기 전자장치는 객체 주변의 휘도를 조절하기 위하여 디스플레이를 구동할 때, 디스플레이의 영역을 다수의 영역으로 나눈 후, 카메라 촬영 순서대로 디스플레이의 대응되는 영역을 순차적으로 활성화 시킬 수 있다.
본 발명의 다양한 실시예에 따른 전자장치는 객체를 촬영하기 위하여 플렉서블 디바이스를 원형으로 위치시킬 때, 디바이스들이 서로 겹쳐진 영역에 위치되는 카메라를 비활성시킬 수 있다
후술하는 도 2 내지 도 21을 통하여, 상기 이미지처리 제어모듈 170에 대한 추가적인 정보가 제공된다.
도 2는 본 발명에 따른 다양한 실시예의 전자장치에서 어레이 카메라 모듈을 장착하는 예를 도시하는 도면이다.
상기 도 2를 참조하면, 전자장치는 디스플레이210은 플랙서블 디스플레이가 될 수 있으며, 베젤220에 240과 같은 어레이 카메라들이 장착될 수 있도록 어레이 카메라 홀(array camera hole)230을 형성하고, 상기 어레이 카메라 홀230의 하단에 어레이 카메라 240을 장착한다. 그리고 상기 어레이 카메라240은 서로 연결되는 구조를 가질 수 있으며, 각각 카메라들은 초점 조절(focusing) 기능을 수행하는 광학부(optical lens) 및 피사체 이미지(object image)를 감지하는 이미지센서들을 구비할 수 있다.
상기 도 2에서와 같이 전자장치는 휨(bending and/or rolling) 특성을 가지는 디스플레이210 및 어레이 카메라240을 포함한다. 상기 전자장치는 플랙서블 디바이스(flexible device)가 될 수 있으며, 상기 전자장치의 휘어지는 방향으로 디스플레이210도 휘어질 수 있다. 그리고 상기 어레이 카메라240은 적어도 2개 이상의 카메라들이 일렬로 배치되어 서로 연결되는 구조를 가질 수 있다. 그리고 상기 Array Camera240은 디스플레이210의 일측면에 실장할 수 있다. 이하의 설명에서 상기 디스플레이210은 투명 디스플레이인 경우에 대해 서술하지만 불투명 디스플레이에도 동일하게 적용할 수도 있다.
본 발명에 따른 다양한 실시예의 전자장치는 일반 카메라 촬영뿐 아니라 Flexible Display 특징을 이용하여 이미지를 촬영 및 처리할 수 있다. 상기 전자장치는 내측 방향 또는 외측 방향으로 휘어지면 디스플레이도 동일한 방향으로 휘어질 수 있으며, 어레이 카메라도 장치의 휘어진 방향으로 배열된다. 예를들면, 장치가 내측 방향으로 휘어지면 피사체 방향으로 어레이 카메라가 배열되어 내부의 피사체를 촬영하여 3D 이미지 및 비디오 등의 컨텐츠를 생성할 수 있으며, 장치가 외측방향으로 휘어지면 주변 360도 이미지 및 비디오 등의 컨텐츠를 생성할 수 있다.
도 3a - 도 3c는 어레이 카메라 및 플랙서블 디스플레이를 구비하는 전자장치에서 이미지를 촬영하는 예를 설명하기 위한 도면이다.
도 3a를 참조하면, 어레이 카메라가 장착된 플랙서블 디스플레이310을 이용하여 촬영할 3D 형상의 피사체(object)를 위치시키고, 디스플레이310을 피사체300 방향으로 위치시킬 수 있다. 예를들면 상기 피사체300을 중심에 두고 주변부에 디스플레이310을 원형 형상으로 말아서 배치한다. 그리고 상기 디스플레이310에 장착된 어레이 카메라를 구동하여 피사체300 각기 다른 면의 이미지를 획득할 수 있다. 예를들면 도 3a와 같이 피사체300을 360도로 감싼 상태에서 대응되는 방향의 카메라들로부터 대응되는 방향의 이미지들을 획득하고, 획득된 복수의 이미지들을 합성한 후, 합성된 이미지를 3D 이미지로 처리할 수 있다.
도 3b및 도 3c를 참조하면, 피사체300을 촬영할 때 피사체300의 크기 및/또는 디스플레이310의 크기에 따라 초점 거리를 조절 할 수 있다. 도 3b및 도 3c는 피사체300이 크거나 디스플레이310이 작은 경우에 피사체를 촬영하는 예를 도시하고 있다. 예를들면, 도 3b와 같이 피사체300을 180도 둘러쌀 수 있는 크기를 가지는 디스플레이310인 경우, 피사체300을 디스플레이310의 중심에 위치시키고, 피사체300의 주변부에 디스플레이310을 호 형상으로 말아서 위치시킨다. 이후 도 3a와 같이 피사체300 및 디스플레이310을 위치시킨 상태에서 촬영한다. 이후 도 3c와 같이 디스플레이310을 180°회전시킨 후 촬영한다. 이후 전자장치는 2회에 걸쳐 촬영된 이미지를 합성한 후, 합성된 이미지를 2D 또는 3D이미지로 처리할 수 있다. 또 다른 방법으로는 피사체300을 회전시키면서 촬영할 수도 있다. 예를들면 도 3b와 같이 피사체 300 및 디스플레이310을 위치시켜 촬영한 후, 피사체300을 1180도 회전시켜 촬영하여도 동일한 효과를 얻을 수 있다. 여기서 상기 디스플레이310은 플랙서블 디스플레이가 될 수 있으며, 따라서 디스플레이310의 휘어짐은 전자장치의 휘어짐을 의미할 수 있다. 따라서 상기 디스플레이310의 휘어짐은 전자장치의 휘어짐과 동일한 의미를 가질 수 있다.
도 4는 본 발명의 다양한 실시예에 따른 이미지처리 제어모듈의 동작을 설명하기 위한 도면이다. 본 발명의 다양한 실시예들에 따른 이미지처리장치는 카메라모듈410, 디스플레이420, 이미지처리부430 및 제어부440을 포함하거나 또는 이들의 유기적인 동작에 의해 구현될 수 있다.
상기 도 4를 참조하면, 카메라모듈410 및 디스플레이420은 도 2와 같은 구성을 가질 수 있다. 상기 카메라모듈410은 복수의 카메라들이 설정된 간격으로 위치되어 연결되는 어레이 카메라의 구성을 가질 수 있으며, 각 카메라들은 각각 광학부 및 이미지센서들을 포함할 수 있다. 상기 디스플레이420은 플랙서블 디스플레이가 될 수 있으며, 전자장치의 휨에 따라 디스플레이420도 동일한 방향으로 휘어질 수 있다. 상기 디스플레이420은 베젤 영역을 포함할 수 있으며, 베젤 영역에는 상기 카메라모듈410의 카메라들이 노출될 수 있는 홀(hole)들이 형성될 수 있으며, 상기 카메라모듈410의 각 카메라들은 상기 홀들의 하단에 장착될 수 있다.
제어부440은 촬영 요구신호에 의해 카메라모듈410을 구동하며, 디스플레이420의 휨 방향을 감지할 수 있다. 이미지처리부430은 제어부440에서 출력되는 디스플레이420의 휨 방향신호를 입력할 수 있으며, 카메라모듈410에서 출력되는 이미지들을 입력할 수 있다. 상기 이미지처리부430은 상기 입력되는 이미지들을 처리하며, 처리된 이미지들을 하나의 이미지의 합성한 후, 2D 이미지 또는 3D 이미지로 생성할 수 있다. 이때 상기 이미지처리부430은 상기 휨 방향신호가 내측 방향의 휨신호이면 합성된 이미지를 3D 이미지로 생성하고, 상기 휨방향신호가 외측 방향의 휨신호이면 합성된 이미지를 2D 이미지로 처리할 수 있다. 이때 상기 2D 이미지는 파노라마 이미지가 될 수 있다.
여기서 상기 이미지처리부430 및 제어부440은 상기 도 1의 이미지처리제어모듈170에 포함될 수 있으며, 또는 상기 이미지처리부430은 도 1의 이미지처리제어모듈170이고 상기 제어부440은 도 1의 프로세서120이 될 수 있다.
도 5는 본 발명의 다양한 실시예에 따른 이미지처리 제어모듈의 구성을 도시하는 도면이다.
상기 도 5를 참조하면, 상기 카메라모듈410에서 획득되는 이미지들은 적어도 2개의 이미지들이 될 수 있다. 버퍼510은 상기 카메라모듈410에서 출력되는 이미지들을 버퍼링하며, 이미지처리부520은 상기 버퍼510에 버퍼링된 이미지들을 이미지처리한다. 상기 이미지처리 방법은 전처리(pre-processing) 및 후처리(post-processing)으로 구분되어 처리될 수 있다. 상기 이미지 전처리는 3A(AWB(Auto White Balance), AE(Auto Exposure), AF(Auto Focusing)) 추출 및 처리, 렌즈 셰이딩 보상(lens shading correction), 데드픽셀 보정(dead pixel correction) 보정 등을 포함할 수 있다. 그리고 이미지 후처리는 색보간(color interpolation), IPC(image processing chain), 색변환(color image conversion)등을 포함할 수 있다. 또한 상기 이미지처리부520은 스케일러를 포함할 수 있다. 스케일러는 이미지를 설정된 이미지 사이즈로 리사이징(resizing) 및/또는 데시메이션(decimation)할 수 있다. 본 발명에 따른 이미지처리부520은 파노라마 이미지를 처리할 때 상기 스케일링 동작은 수행하지 않을 수도 있다.
이미지정렬부530은 상기 이미지처리부520에서 처리되는 이미지를 하나의 이미지로 합성할 수 있다. 상기 카메라모듈410에서 출력되는 이미지는 복수의 이미지들이 될 수 있으며, 상기 복수의 이미지들은 카메라모듈410의 화각에 의해 서로 중첩되는 이미지들을 포함할 수 있다. 따라서 이런 이미지들을 합성할 때 중첩되는 영역의 이미지들을 제거하면서 하나의 이미지로 합성할 수 있다. 상기 복수 이미지들을 하나의 이미지로 생성하는 방법은 파노라마 이미지 생성방법을 이용하여 수행할 수 있다.
3D 이미지처리부540은 상기 이미지정렬부530에서 합성된 2D 이미지들을 3D 이미지로 처리할 수 있다. 상기 2D 이미지를 3D 이미지로 변환하는 방법은 깊이 맵(depth map)을 이용하여 수행할 수 있다. 상기 2D 이미지로부터 깊이 정보를 추출하는 방법은 영역분할 정보(동영상 이미지 인경우에는 영역분할 및 움직임 정보를 포함할 수 있음)를 이용하여 깊이 정보를 추출할 수 있으며, 또는 에지방향성 히스토그램( edge directional histogram)을 이용하여 추출할 수 있다. 본 발명에 따른 다양한 실시예들에서 상기 2D 이미지를 3D 이미지로 변환(2 dimension to 3 dimension conversion)하는 방법은 다양한 방법으로 구현할 수 있다.
또한 상기 3D 이미지처리부540은 상기 디스플레이420이 내측 방향으로 휘어진 상태에서 구동될 수 있다. 즉, 상기 제어부440은 센서(미도시)에 의해 상기 디스플레이420의 휘어진 방향을 감지할 수 있으며, 상기 디스플레이420이 내측 방향으로 휘어진 경우에는 상기 3D 이미지처리부540을 구동하여 2D 이미지를 3D 이미지로 생성하고, 상기 디스플레이420이 외측 방향으로 휘어진 경우에는 상기 3D 이미지처리부540을 구동하지 않을 수 있다. 상기 3D이미지처리부540이 구동되지 않은 경우, 이미지정렬부530에서 생성되는 2D 이미지를 출력할 수 있으며, 상기 2D 이미지는 카메라모듈410에서 전자장치의 외측 방향에 배치된 피사체들을 파노라마 촬영한 이미지가 될 수 있다.
도 6은 다양한 실시예들에 따른 전자 장치 601의 블록도를 도시한다. 상기 전자 장치 601은, 예를 들면, 도 1에 도시된 전자 장치 101의 전체 또는 일부를 구성할 수 있다.
도 6을 참조하면, 상기 전자 장치 601은 하나 이상의 어플리케이션 프로세서(AP: application processor) 610, 통신 모듈 620, SIM(subscriber identification module) 카드 624, 메모리 630, 센서 모듈 640, 입력 장치 650, 디스플레이 660, 인터페이스 670, 오디오 모듈 680, 카메라 모듈 691, 전력관리 모듈 695, 배터리 696, 인디케이터 697 및 모터 698 를 포함할 수 있다.
상기 AP 610은 운영체제 또는 응용 프로그램을 구동하여 상기 AP 610에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 610은, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시예에 따르면, 상기 AP 610은 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다. 본 발명에 따른 다양한 실시예에서 상기 AP610은 촬영되는 복수의 이미지들을 버퍼링하면서 이미지를 전처리 및 후처리하며, 이미지 처리된 복수의 이미지들을 하나의 이미지로 합성하고, 합성된 이미지를 2D이미지 또는 3D 이미지로 생성하는 이미지처리제어모듈을 포함할 수 있다.
상기 통신 모듈 620(예: 상기 통신 인터페이스 160)은 상기 전자 장치 601(예: 상기 전자 장치 101)과 네트워크를 통해 연결된 다른 전자 장치들(예: 전자 장치 104 또는 서버 106) 간의 통신에서 데이터 송수신을 수행할 수 있다. 한 실시예에 따르면, 상기 통신 모듈 620은 셀룰러 모듈 621, Wifi 모듈 623, BT 모듈 625, GPS 모듈 627, NFC 모듈 628 및 RF(radio frequency) 모듈 629를 포함할 수 있다.
상기 셀룰러 모듈 621은 통신망(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등)을 통해서 음성 통화, 영상 통화, 문자 서비스 또는 인터넷 서비스 등을 제공할 수 있다. 또한, 상기 셀룰러 모듈 621은, 예를 들면, 가입자 식별 모듈(예: SIM 카드 624)을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 상기 셀룰러 모듈 621은 상기 AP 610가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 예를 들면, 상기 셀룰러 모듈 621은 멀티 미디어 제어 기능의 적어도 일부를 수행할 수 있다.
한 실시예에 따르면, 상기 셀룰러 모듈 621은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다. 또한, 상기 셀룰러 모듈 621은, 예를 들면, SoC로 구현될 수 있다. 도 8에서는 상기 셀룰러 모듈 621(예: 커뮤니케이션 프로세서), 상기 메모리 630 또는 상기 전력관리 모듈 695 등의 구성요소들이 상기 AP 610과 별개의 구성요소로 도시되어 있으나, 한 실시예에 따르면, 상기 AP 610이 전술한 구성요소들의 적어도 일부(예: 셀룰러 모듈 621)를 포함하도록 구현될 수 있다.
한 실시예에 따르면, 상기 AP 610 또는 상기 셀룰러 모듈 621(예: 커뮤니케이션 프로세서)은 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP 610 또는 상기 셀룰러 모듈 621은 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 Wifi 모듈 623, 상기 BT 모듈 625, 상기 GPS 모듈 627 또는 상기 NFC 모듈 628 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 도 6에서는 셀룰러 모듈 621, Wifi 모듈 623, BT 모듈 625, GPS 모듈 627 또는 NFC 모듈 628이 각각 별개의 블록으로 도시되었으나, 한 실시예에 따르면, 셀룰러 모듈 621, Wifi 모듈 623, BT 모듈 625, GPS 모듈 627 또는 NFC 모듈 628 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. 예를 들면, 셀룰러 모듈 621, Wifi 모듈 623, BT 모듈 625, GPS 모듈 627 또는 NFC 모듈 628 각각에 대응하는 프로세서들 중 적어도 일부(예: 셀룰러 모듈 621에 대응하는 커뮤니케이션 프로세서 및 Wifi 모듈 623에 대응하는 Wifi 프로세서)는 하나의 SoC로 구현될 수 있다.
상기 RF 모듈 629는 데이터의 송수신, 예를 들면, RF 신호의 송수신을 할 수 있다. 상기 RF 모듈 629는, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈 629는 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다. 도 6에서는 셀룰러 모듈 621, Wifi 모듈 623, BT 모듈 625, GPS 모듈 627 및 NFC 모듈 628이 하나의 RF 모듈 629를 서로 공유하는 것으로 도시되어 있으나, 한 실시예에 따르면, 셀룰러 모듈 621, Wifi 모듈 623, BT 모듈 625, GPS 모듈 627 또는 NFC 모듈 628 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호의 송수신을 수행할 수 있다.
상기 SIM 카드 624_1~N은 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯 625_1~N에 삽입될 수 있다. 상기 SIM 카드 624_1~N은 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리 630(예: 상기 메모리 130)은 내장 메모리 632 또는 외장 메모리 634를 포함할 수 있다. 상기 내장 메모리 632는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 내장 메모리 632는 Solid State Drive (SSD)일 수 있다. 상기 외장 메모리 634는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리 634는 다양한 인터페이스를 통하여 상기 전자 장치 601과 기능적으로 연결될 수 있다. 한 실시예에 따르면, 상기 전자 장치 601은 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
상기 센서 모듈 640은 물리량을 계측하거나 전자 장치 601의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 640은, 예를 들면, 제스처 센서 640A, 자이로 센서 640B, 기압 센서 640C, 마그네틱 센서 640D, 가속도 센서 640E, 그립 센서 640F, 근접 센서 640G, color 센서 640H(예: RGB(red, green, blue) 센서), 생체 센서 640I, 온/습도 센서 640J, 조도 센서 640K 또는 UV(ultra violet) 센서 640M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 640은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈 640은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 본 발명에 따른 다양한 실시예에서 상기 센서모듈640은 전자장치(예를들면 디스플레이)의 휨 방향을 감지하는 휨감지 센서를 더 포함할 수 있다. 상기 휨감지센서는 전자장치의 내측방향으로 휨 또는 외측 방향의 휨을 감지하는 기능을 수행할 수 있다.
상기 입력 장치 650은 터치 패널(touch panel) 652, (디지털) 펜 센서(pen sensor) 654, 키(key) 656 또는 초음파(ultrasonic) 입력 장치 658를 포함할 수 있다. 상기 터치 패널 652은, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널 652는 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 인식이 가능하다. 상기 터치 패널 652는 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널 652는 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 654는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키 656은, 예를 들면, 물리적인 버튼, 광학식 키 또는 키패드를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치 658은 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치 601에서 마이크(예: 마이크 688)로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시예에 따르면, 상기 전자 장치 601은 상기 통신 모듈 620을 이용하여 이와 연결된 외부 장치(예: 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 660(예: 상기 디스플레이 150)은 패널 662, 홀로그램 장치 664 또는 프로젝터 666을 포함할 수 있다. 상기 패널 662는 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널 662는, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 662는 상기 터치 패널 652와 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치 664는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 666은 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치 601의 내부 또는 외부에 위치할 수 있다. 한 실시예에 따르면, 상기 디스플레이 660은 상기 패널 662, 상기 홀로그램 장치 664, 또는 프로젝터 666을 제어하기 위한 제어 회로를 더 포함할 수 있다. 본 발명에 따른 다양한 실시예에서 상기 디스플레이660은 플랙서블 디스플레이가 될 수 있다. 예를들면 상기 디스플레이660은 상기 도 2와 같은 구조를 가질 수 있으며, 베젤 영역에 어레이 카메라의 각 카메라들이 배치될 수 있는 홀들을 포함할 수 있다.
상기 인터페이스 670은, 예를 들면, HDMI(high-definition multimedia interface) 672, USB(universal serial bus) 674, 광 인터페이스(optical interface) 676 또는 D-sub(D-subminiature) 678을 포함할 수 있다. 상기 인터페이스 670은, 예를 들면, 도 1에 도시된 통신 인터페이스 160에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스 670은, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure Digital) 카드/MMC(multi-media card) 인터페이스 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈 680은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 680의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스 140에 포함될 수 있다. 상기 오디오 모듈 680은, 예를 들면, 스피커 682, 리시버 684, 이어폰 686 또는 마이크 688 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈 691은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래쉬 (flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다. 또한 본 발명에 따른 다양한 실시예에서 상기 카메라모듈691은 도 2의 240과 같이 복수의 카메라들이 일정 간격으로 배열된 어레이 카메라 구조를 가질 수 있다. 그리고 상기 카메라모듈691은 피사체를 촬영할 때, 상기 디스플레이660의 휨 방향에 따라 휨 방향이 내측으로 이루어지면 하나의 피사체에 초점을 맞추고, 휨 방향이 외측이로 이루어지면 주변의 피사체들에 초점을 맞춰 촬영하여 복수의 이미지들을 출력할 수 있다.
상기 전력 관리 모듈 695는 상기 전자 장치 601의 전력을 관리할 수 있다. 도시하지는 않았으나, 상기 전력 관리 모듈 695는, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리 696의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리 696은 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치 601에 전원을 공급할 수 있다. 상기 배터리 696은, 예를 들면, 충전식 전지(rechargeable battery) 또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터 697은 상기 전자 장치 601 혹은 그 일부(예: 상기 AP 610)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터 698은 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치 601은 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어 플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 발명에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 발명에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 발명에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
본 발명에 사용된 용어 "모듈" 은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈" 은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈" 은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈" 은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈" 은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 발명에 따른 "모듈" 은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
본 발명의 다양한 실시예에 따른 전자장치는 홀을 가지며 피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이와, 상기 디스플레이의 홀의 하단에 광학부가 위치되며, 상기 피사체의 이미지들을 획득하는 이미지센서를 포함하는 카메라모듈과, 상기 카메라모듈에서 출력되는 상기 이미지들을 합성하여 설정된 타입으로 처리하는 이미지처리부를 포함할 수 있다.
상기 상기 카메라모듈은 적어도 두개의 카메라들이 연결되는 어레이 카메라이며, 상기 디스플레이는 베젤 영역에 상기 카메라들의 광학부가 위치될 수 있는 홀들을 구비할 수 있다.
그리고 상기 디스플레이가 피사체 방향으로 휘어지면 상기 카메라모듈의 카메라들은 상기 디스플레이의 중심에 위치되는 피사체를 포커싱하여 복수의 이미지들을 촬영하고, 상기 이미지처리부는 상기 촬영된 복수의 이미지들을 하나의 이미지로 합성하고, 상기 합성된 이미지를 3D 이미지로 처리할 수 있다.
또한 상기 전자장치는 상기 디스플레이의 휨 방향을 분석하여 이미지처리를 제어하는 제어부를 더 포함할 수 있으며, 상기 이미지처리부는 상기 제어부의 제어하에 디스플레이의 휨 방향이 내측으로 향하면 획득되는 이미지를 하나의 이미지로 합성하여 3D 이미지로 처리하고, 상기 휨방향이 외측으로 항하면 획득되는 이미지를 하나의 이미지로 합성하여 2D 이미지로 처리할 수 있다.
상기 카메라모듈의 적어도 두개의 카메라는 동일면을 향하며 일렬로 정렬되거나 또는 일정한 패턴의 형태로 정렬될 수 있다.
또한 상기 전자장치는 상기 피사체 주변의 휘도를 측정하여 상기 디스플레이의 화면 밝기를 제어하는 제어부를 더 포함할 수 있다. 상기 제어부는 상기 디스플레이가 피사체를 폐곡선으로 감싸면 상기 카메라 모듈의 카메라들을 분할하여 구동하며, 구동되지 않은 카메라에 위치된 디스플레이 영역을 블랙화면으로 처리할 수 있다. 또는 상기 제어부는 상기 디스플레이가 피사체를 폐곡선으로 감싸면 상기 디스플레이의 표시영역을 분할하여 일부 표시영역들을 구동하며 상기 카메라모듈의 카메라들을 일괄 구동하여 이미지를 획득하도록 제어할 수 있다. 또는 상기 제어부는 상기 디스플레이가 피사체를 폐곡선으로 감싸면 상기 카메라모듈의 카메라들을 순차적으로 구동하며, 상기 구동되는 상기 카메라의 위치에 대응되는 상기 디스플레이의 표시영역들을 순차적으로 구동할 수 있다.
상기 디스플레이는 휘도 조절 바를 구비하는 투명 디스플레이이며, 상기 휘도조절 바에 의해 상기 디스플레이의 화면 밝기를 조절할 수 있다.도 7은 어레이 카메라 및 플랙서블 디스플레이를 구비하는 전자장치에서 이미지를 촬영하는 방법을 도시하는 흐름도이다. 이하의 설명에서는 도 4를 참조하여 이미지 촬영 방법을 설명하기로 한다.
상기 도 7을 참조하면, 촬영 요구시 제어부440은 카메라모듈410을 구동하여 피사체의 이미지를 획득할 수 있다. 이때 상기 카메라모듈410의 각 카메라들은 디스플레이420의 휨 방향에 따라 피사체에 초점을 맞춰 각각 이미지를 촬영할 수 있다. 그리고 촬영된 이미지들은 이미지처리부430에 인가된다. 711동작에서 상기 카메라모듈410의 구동에 의해 이미지들이 촬영되면, 상기 이미지처리부430은 713동작에서 상기 촬영된 이미지들을 버퍼링하고, 버퍼링된 각 이미지들을 전처리 및 후처리한다. 이후 상기 이미지처리부430은 715동작에서 처리된 이미지들을 하나의 이미지로 합성하고, 717동작에서 합성된 이미지를 2D 이미지 또는 3D 이미지로 생성한다.
상기 제어부440은 상기 디스플레이420의 휨 방향에 따라 생성되는 이미지 타입을 설정할 수 있다. 예를들면, 상기 디스플레이420의 내측 방향으로 휘어지면 카메라모듈410은 중앙에 위치된 피사체에 초점을 맞추게되며, 따라서 카메라모듈은 하나의 피사체에 대한 이미지들을 획득할 수 있다. 또한 상기 상기 디스플레이420의 외측 방향으로 휘어지면 카메라모듈410은 장치의 주변부에 위치된 피사체들에 초점을 맞추게되며, 따라서 카메라모듈은 장치의 주변 피사체들에 대한 이미지들을 획득할 수 있다. 따라서 상기 제어부440은 디스플레이420이 내측 방향으로 휘어짐을 감지하면 이미지처리부430을 제어하여 3D 이미지를 생성할 수 있으며, 디스플레이420이 외측 방향으로 휘어짐을 감지하면 이미지처리부430을 제어하여 파노라마 형태의2D 이미지를 생성할 수 있다.
도 8은 어레이 카메라를 가지는 카메라모듈을 이용하여 이미지를 촬영하는 방법을 설명하기 위한 도면이다.
상기 도 8을 참조하면, 디스플레이420의 휨 방향에 따라 카메라모듈의 각 카메라들은 811동작에서 피사체를 포커싱한다. 예를들면 디스플레이420이 내측 방향으로 휘어진 경우 상기 카메라모듈410의 각 카메라들은 중앙에 위치된 피사체들에 초점을 맞추게 되며, 각 카메라들은 피사체의 형태에 따라 각각 다른 초점으로 맞출 수 있다. 또한 디스플레이420이 외측 방향으로 휘어진 경우 상기 카메라모듈410의 각 카메라들은 주변부의 피사체와 거리에 따라 초점을 맞출 수 있다. 이후 제어부410은 피사체의 주변의 밝기를 분석하여 카메라모듈410이 이미지를 촬영할 수 있는 휘도를 조절할 수 있다. 그리고 상기 밝기를 조절한 후, 상기 제어부410은 카메라모듈815를 구동하여 피사체를 촬영할 수 있다. 이때 상기 제어부440은 상기 카메라모듈410의 각 카메라들을 동시에 구동할 수 있으며, 또는 순차적으로 구동하여 피사체를 촬영할 수 있다.
이때 상기 디스플레이420을 내측 방향으로 휘어지게 하여 이미지를 촬영하는 경우, 피사체 를 중앙에 위치시킨 상태에서 전자장치가 위치하게 되므로, 전자장치에 의해 피사체 주변의 조명이 차단될 수 있다. 이때 전자장치에 의해 피사체의 조명이 바뀌게 되면, 전자장치는 원하는 이미지를 얻기 어려울 수 있으며, 따라서 피사체를 촬영하기 위한 별도의 조명장치를 필요로 할 수 있다.
도 9는 전자장치에서 주변 휘도를 분석하여 피사체 주변의 휘도를 조절하는 방법을 도시하는 흐름도이다. 도 10 a -도 10 b는 플랙서블 디스플레이를 조명장치로 사용할 때 피사체 주변의 밝기를 설명하기 위한 도면이다. 도 11a - 도 11b는 플랙서블 디스플레이를 이용하여 피사체 주변의 휘도를 조절하는 예를 도시하는 도면이다.
도 9를 참조하면, 전자장치는 플랙서블 디스플레이420을 조명장치로 사용할 수 있다. 예를들면, 상기 디스플레이420의 휨 방향이 내측 방향으로 휘어져 피사체를 감싸면, 제어부440은 상기 디스플레이420의 밝기를 조절하여 피사체의 조명장치로 사용할 수 있다. 상기 카메라모듈410이 구동되면, 상기 제어부440은 911동작에서 카메라모듈410에 출력되는 이미지(예를들면 preview image)를 통해 내부 피사체를 확인하고, 이미지처리부430을 통해 처리되는 이미지를 토대로 주변의 휘도를 분석할 수 있다. 이때 피사체 촬영에 적절한 휘도가 아니면, 상기 제어부440은 913동작에서 이를 감지하고, 상기 디스플레이420을 3d 이미지 촬영모드로 변경하고, 상기 디스플레이420은 917동작에서 상기 제어부440에 의해 변경된 3D 이미지의 적절한 밝기 및 색상을 표시할 수 있다. 그리고 상기 제어부440은 919동작에서 카메라모듈410을 통해 피사체 주변의 휘도를 측정하며, 921동작에서 피사체 촬영에 적절한 휘도인가를 검사할 수 있다. 이때 피사체 촬영에 적절한 휘도가 아니면, 상기 제어부100은 921동작에서 이를 감지하고 823동작에서 표시부420의 밝기 및 색상을 조정할 수 있다. 그러면 상기 디스플레이420은 변경된 색상 및 밝기를 표시하며, 상기 제어부100은 919동작에서 카메라모듈410을 통해 피사체 주변의 휘도를 측정할 수 있다. 이와 같은 동작을 반복 수행하여 피사체 촬영에 적절한 휘도가 되면, 상기 제어부440은 921동작에서 이를 감지하고 휘도 조절 절차를 종료할 수 있다.
따라서 3D 이미지를 촬영할 때, 전자장치는 디스플레이420을 이용하여 촬영에 적절한 휘도를 제공할 수 있다. 이때 휘도가 어두운 경우에 디스플레이420을 밝은색 화면으로 구동하여 피사체의 조명을 제공할 수 있다. 그리고 상기 디스플레이420이 투명 플렉서블 디스플레이와 같이 외부 조명이 피사체로 투과되는 디스플레이인 경우에는 피사체 주변의 휘도가 적절 휘도보다 높을 수 있다. 이와 같이 피사체 주변의 휘도가 적절 휘도보다 높으면 제어부440은 디스플레이420에 어두운색 화면을 표시하여 적절한 휘도로 조절할 수 있다. 이때 적절한 휘도를 제공하기 위해서, 제어부410은 미리 설정된 광원 테이블을 기준으로 이미지처리부430에서 파악한 정보값에 해당하는 출력값을 제공할 수 있다.
도 10 a 및 도 10b와 피사체를 감싸는 디스플레이에 의해 피사체의 주변 밝기에 영향을 미칠 수 있다. 예를 들면, 도 10a와 같이 디스플레이420이 피사체를 완전하게 감쌀 수 있으며, 도 10b와 같이 피사체의 일부분을 감쌀 수 있다. 이때 상기 디스플레이420은 투명 디스플레이일 수 있으며, 또는 불투명 디스플레이일 수 있다. 상기 디스플레이420이 불투명 디스플레이이면 상기 전자장치는 디스플레이420의 화면 밝기를 밝게하여 피사체 주변을 적절 휘도로 조절할 수 있으며, 투명 디스플레이면 상기 전자장치는 디스플레이420의 화면 밝기를 어둡게하여 피사체 주변을 적절 휘도로 조절할 수 있다.
이때 상기 피사체 주변의 밝기가 적절하지 않을 경우, 전자장치는 미리 셋팅된 테이블값에 맞춰 휘도를 자동 조정하는 방법을 사용할 수 있으며, 사용자에 의해 수동으로 조정할 수도 있다. 이때 투명 디스플레이인 경우, 도 11a 및 도 11b에 도시된 바와 같이 디스플레이420에 디스플레이의 화면 밝기를 제어하기 위한 별도의 Control bar1110을 표시할 수 있다. 그리고 이미지 촬영시 상기 제어바1110의 조절에 의해 피사체 주변의 밝기를 조절하여 휘도를 조정 할 수도 있다.
상기와 같이 디스플레이를 이용하여 조명을 이용하여 촬영할 때, 전자장치가 도 10a와 같이 원형으로 배치되면 디스플레이와 마주보는 카메라모듈의 카메라들은 반대편 혹은 주변 조명(예를들면 역광, 과다노출 등) 으로 인해 사용자가 의도하지 않은 이미지를 촬영할 수도 있다. 그러므로 전자장치가 피사체를 원형으로 감싼 상태에서 디스플레이를 이용하여 조명을 하는 경우, 전자장치는 디스플레이의 표시 영역을 나눠 화면 밝기를 조절하면 원하는 조명효과를 낼 수 있다.
도 12는 전자장치에서 디스플레이를 이용하여 피사체의 조명을 제어하는 방법을 도시하는 흐름도이다. 도 13a -도 13c는 디스플레이를 이용하여 조명을 제어하는 예를 도시하는 도면이다. 그리고 도 14a - 도 14e는 디스플레이를 이용하여 조명을 제어할 때 카메라와 디스플레이의 구동 예를 도시하는 도면이다. 여기서 전자장치는 도 4와 같은 구성을 가지는 것으로 예로들어 설명하기로 한다.
제어부440은 디스플레이420의 휘어짐에 따라 카메라모듈410의 카메라들을 동시에 구동하거나 또는 순차적으로 구동할 수 있다. 예를들면 도 13a와 같이 피사체1300을 감싸고 있으면 디스플레이420에서 발생되는 빛은 피사체1300의 모든 방향에 조사된다. 이런 경우, 카메라1310(또는 1315)에서 피사체1300을 촬영하는 경우 디스플레이420의 반대편에서 빛(예를들면 역광)에 의해 과다 노출이 발생될 수 있다. 그러므로 도 13a와 같이 디스플레이420이 피사체1300을 감싸고 있으면, 상기 제어부440은 도 13b와 같이 카메라1310이 구동할 때 디스플레이420의 반대편 화면1345는 오프시키고, 카메라1315를 구동할 때 디스플레이420의 반대편 화면 1340은 오프시키면, 디스플레이420을 조명장치로 사용할 때 역광을 방지할 수 있다. 예를들면 도 13c와 같이 디스플레이420이 피사체1300을 감싸고 있는 상태에서 카메라1310을 이용하여 피사체를 촬영하는 경우, 제어부440은 디스플레이420의 화면 표시영역을 분할하고, 카메라1310이 위치된 화면 영역을 온시키고 카메라1310의 반대편 화면영역을 오프시켜 촬영할 수 있다.
상기 제어부440은 디스플레이420의 휘어짐에 따라 피사체를 감싸는 크기를 검사하여 카메라모듈410의 카메라들을 동시촬영 또는 순차촬영할 수 있다. 예를들면 도 10a와 같이 디스플레이420이 피사체를 완전하게 감싸면 상기 제어부400은 순차촬영을 할 수 있으며, 도 10 b와 같이 피사체의 일부 영역을 감싸면서 카메라모듈의 촬영에 역광을 발생하지 않으면 동시촬영을 할 수 있다. 상기 디스플레이420을 피사체의 조명장치로 사용할 때, 상기 제어부100은 디스플레이420의 휘어짐이 카메라모듈410의 카메라에 영향을 미치지 않으면(예를들면 도 10b과 같이 피사체를 1/2 이하로 감싸지게 디스플레이가 휘어진 경우), 상기 제어부440은 1211동작에서 동시촬영을 결정하고, 1213동작에서 휘도를 설정할 수 있다. 이때 상기 휘도 설정방법은 상기 도 9와 같은 방법으로 수행할 수 있다. 상기 휘도를 설정한 후, 상기 제어부100은 카메라모듈410의 카메라들을 동시에 구동하며, 1217동작에서 상기 카메라모듈410에서 출력되는 이미지들을 처리하도록 상기 이미지처리부430을 제어할 수 있다.
그러나 상기 디스플레이420의 휘어짐이 카메라모듈410의 카메라에 영향을 미치는 경우(예를들면 디스플레이의 화면이 카메라에 역광으로 동작하는 경우)이면, 상기 제어부100은 1211동작에서 이를 감지하고 순차촬영 모드를 수행할 수 있다. 상기 제어부440은 1231동작에서 카메라모듈410에서 구동할 카메라(예를들면 이미지센서)를 선택하고, 1233동작에서 선택된 카메라가 위치된 영역의 디스플레이420의 표시영역을 구동하여 휘도를 설정한다. 이때 선택된 카메라가 위치된 영역의 반대편에 위치되는 디스플레이420의 표시영역은 구동을 오프시킬 수 있다. 이후 상기 제어부440은 1235동작에서 선택된 이미지센서들을 구동하고, 1237동작에서 이미지처리부430을 제어하여 이미지센서들에서 출력되는 이미지들을 처리한다. 그리고 카메라모듈410의 모든 카메라들이 구동되지 않은 경우, 상기 제어부440은 1239동작에서 이를 감지하고 1231동작으로 되돌아가 촬영 동작을 반복 수행한다. 예를들면 도 13a와 같이 디스플레이420이 피사체1300을 감싼 경우, 상기 제어부100은 먼저 카메라1310을 선택하고, 도 13c에 도시된 바와 같이 디스플레이420에서 카메라1310이 위치된 화면영역1340을 온시키고 반대편 화면영역1345를 오프시킨 후, 상기 카메라1310을 구동하여 촬영할 수 있다. 이후 상기 제어부440은 먼저 카메라1315를 선택하고, 도 13c에 도시된 바와 같이 디스플레이420에서 카메라1315가 위치된 화면영역1345를 온시키고 반대편 화면영역1340을 오프시킨 후, 상기 카메라1315를 구동하여 촬영할 수 있다.그리고 촬영이 종료되면, 상기 제어부440은 1239동작에서 이를 감지하고, 촬영 절차를 종료한다.
상기 순차촬영시 제어부440은 도 13b에 도시된 바와 같이 디스플레이420의 영역 중에서 일부 영역1340(예를들면 카메라가 구동되는 위치의 화면영역)을 화이트로 디스플레이 시키고 나머지 영역 1345(구동되는 카메라의 반대편 위치된 화면영역)를 블랙으로 표시할 수 있다. 상기 디스플레이 영역은 상기와 같이 2분할 할 수도 있고 사용자가 필요에 따라 그이상 분할 하거나, 임의영역을 분할할 수 있다. 그리고 분할된 부분의 색상과 밝기등도 사용자가 임의로 지정 및 변경이 가능할 수 있다.
또한 도 13a와 같이 디스플레이420을 이용하여 피사체의 조명을 수행할 때, 상기 도 13b와 같이 디스플레이4220을 이용하여 피사체의 조명을 수행하면, 도 13c에 도시된 바와 같이 조명은 피사체130의 전면을 밝게하고 후면은 어둡게할 수 있다. 이때 상기 제어부440은 카메라모듈410의 모든 카메라들을 동시에 구동하여 촬영할 수 있다. 그러면 획득되는 피사체의 이미지는 절반은 밝고, 절반은 음영이 진 이미지들을 획득할 수 있다. 상기와 같이 밝은 이미지들 및 음영이 진 이미지들을 획득한 후, 이를 이미지처리하여 하나의 이미지로 합성하고, 합성된 이미지를 3D이미지로 변환할 수 있다. 상기와 같이 생성된 3D 이미지는 조명에 따라 밝은 면 및 어두운 면을 가지는 3D가 될 수 있다. 그러므로 도 13c와 같이 디스플레이420의 화면을 구동한 상태에서 카메라모듈410의 카메라들을 동시에 구동하고, 카메라모듈410으로부터 획득되는 이미지들을 3D 이미지로 변환하면 음영을 가지는 3D 이미지를 생성할 수 있다.
또 다른 방법으로 이미지를 촬영하는 방법으로는 Array-Camera가 순차적으로 이미지 촬영을 하고, 촬영하는 카메라에 따라 그에 해당하는 조명영역을 설정함으로써 좀 더 다양한 컨텐츠를 획득할 수 있다. 도 14a - 도 14e와 같이 디스플레이420의 표시영역을 카메라모듈410의 카메라와 매핑되도록 설정하고, 카메라 구동시 대응되는 디스플레이의 화면 영역을 함께 구동하는 방법을 사용할 수 있다. 그러면 디스플레이420은 구동되는 카메라의 하단에 설정된 화면 영역을 밝게 표시하고 나머지 영역은 어둡게 표시할 수 있다. 의 디스플레이 영역을 밝게 설정하고, 순차적으로 촬영되는 카메라에 맞춰 하단 영역을 밝게 설정하면 역광 또는 과다노출이 없이 전면이 밝은 3D 컨텐츠를 획득할 수 있다.
도 15는 전자장치의 휘어짐에 의해 카메라가 중첩될 때의 이미지 촬영 방법을 도시하는 흐름도이다. 그리고 도 16a- 도 16c는 전자장치의 휘어짐에 의해 중첩된 카메라의 구동 방법의 예를 설명하기 위한 도면이다. 여기서 전자장치는 도 4를 참조하여 설명하기로 한다.
플랙서블 디스플레이420 및 어레이 카메라를 구비하는 카메라모듈410을 가지는 전자장치에서 피사체를 촬영할 때, 피사체가 작거나 전자장치가 크면 도 16a와 장치의 일부 영역이 중첩될 수 있다. 예를들면 도 16b와 같이 피사체1600을 전자장치의 중심에 위치시키고 플랙서블 디바이스420을 원형 형상으로 말아서 배치하면, 디스플레이420이 1650과 같이 중첩되는 영역이 발생될 수 있다. 이때 상기 중첩영역1650에 카메라모듈410의 일부 카메라들이 배치되는 경우, 중첩영역의 후면에 배치된 카메라는 피사체160을 촬영할 수 없게 된다. 그러므로 전자장치를 원형으로 하여 촬영할 때, 중첩된 영역에서 전면에 배치된 카메라(예를들면 피사체를 포커싱할 수 있는 카메라) 및 후면에 배치된 카메라(예를들면 피사체를 포커싱할 수 없는 카메라)를 차별적으로 구동할 수 있다.
이미지를 촬영할 때, 상기 제어부100은1511동작에서 디스플레이402을 구동하여 피사체를 촬영하기 위한 휘도를 설정한다. 그리고 상기 제어부100은 장치의 중첩된 영역이 있는가 검사하며, 도 16c와 같이 디스플레이420의 중첩된 영역이 없으면 1513동작에서 이를 감지하고 1515동작에서 해당하는 카메라들을 구동하고 구동되는 카메라들과 대응되는 디스플레이420의 화면 영역을 온시킨다. 그리고 제어부440은 1517동작에서 이미지처리부430을 제어하여 카메라410에서 출력되는 이미지를 버퍼링한다. 도 16d와 같이 디스플레이420의 중첩에 의해 디스플레이420의 후면에 배치되는 카메라가 있으면, 상기 제어부440은 1513동작에서 이를 감지하고, 1519동작에서 중첩된 영역에 위치된 카메라 및 디스플레이420의 화면 영역을 오프시키고 나머지 카메라들을 구동한다. 상기와 같이 구동되는 디스플레이420 및 카메라모듈410에 의해 획득되는 이미지들을 이미지처리부430에 버퍼링되며, 카메라 구동이 종료되면 상기한 바와 같이 이미지들을 합성한 후, 합성된 이미지를 3D 이미지로 생성할 수 있다.
상기한 바와 같이 제어부440은 플랙서블 디스플레이가 중첩되면 중첩부를 인식할 수 있으며, 중첩 영역에서 디스플레이420의 후면에 위치되는 카메라를 동작시키지 않을 수 있다. 그러므로 전자장치에 실장된 Camera들 중 필요한 개수의 카메라만을 동작시켜 원하는 3D 컨텐츠를 획득 할 수 있다. 이때 상기 제어부440 카메라모듈410의 이미지센서 출력에 의해 중첩된 영역을 감지할 수 있으며, 중첩된 영역 안에 위치한 카메라들을 object 촬영시 동작되지 않도록 할 수 있다. 상기 중첩된 영역을 감지하는 방법은 카메라 렌즈로 감지하는 방법 외에, 별도의 센서를 이용한 방법 등 다양한 방법으로 감지할 수 있다.
도 17은 플랙서블 디스플레이 및 어레이 카메라를 구비하는 전자장치에서 이미지 촬영 및 촬영된 이미지를 표시하는 방법을 도시하는 흐름도이다. 그리고 도 18a 및 도 18b는 3D 이미지의 표시 방법을 설명하기 위한 도면이다.
이미지 촬영시, 상기 제어부440은 디스플레이420 및 카메라모듈410을 제어하여 이미지를 촬영한다. 상기 이미지촬영시 상기 제어부440은 디스플레이420을 구동하여 피사체의 조명장치로 이용할 수 있다. 그리고 상기 카메라모듈410의 구동에 따라 디스플레이420의 화면 영역을 온/오프시키면서 역광에 의한 과다노출을 방지할 수도 있다. 또한 디스플레이를 조명장치로 사용할 때 피사체를 향하는 일부 화면 영역은 온시키고 다른 표시영역은 오프시켜 음영을 가지도록 촬영할 수도 있다. 또한 디스플레이420이 중첩된 영역을 가지면, 디스플레이420의 후면에 배치되는 카메라들의 구동을 오프시킬 수도 있다.
상기 카메라모듈410은 어레이 카메라일 수 있으며, 따라서 카메라모듈410에서 출력되는 이미지는 복수의 이미지들이 될 수 있다. 그러면 이미지처리부430은 상기 제어부440의 제어하에 1715동작에서 이미지들을 전처리 및 후처리하고, 1717동작에서 처리된 이미지들을 하나의 이미지로 합성하며, 1719동작에서 합성된 이미지를 3D 이미지로 생성할 수 있다.
상기와 같이 생성된 3D를 표시가 요구되면, 상기 제어부440은 1731동작에서 이를 감지하고, 디스플레이420에 3D 이미지를 표시한다. 디스플레이420에 표시되는 3D 이미지는 설정된 제스쳐 입력에 따라 회전되거나 또는 이동될 수 있다. 예를들면, 회전 제스쳐는 디스플레이420에서 3D 이미지가 표시되지 않는 영역을 드래그 앤 드롭하여 수행할 수 있으며, 이동 제스쳐는 디스플레이420에 표시되는 3D이미지를 터치한 후 드래그 앤 드롭하여 수행할 수 있다. 상기 회전제스쳐가 감지되면, 상기 제어부400은 1735동작 및 1737동작에서 회전제스쳐가 발생되는 방향으로 3D 이미지를 회전시켜 표시할 수 있다. 도 18a를 참조하면, 화면 1810과 같이 3D 이미지가 표시되는 상태에서 화면 1820과 같이 상측 방향으로 화면 제스쳐가 감지되면 제어부440은 3D 이미지1800을 상측 방향으로 회전시킬 수 있으며, 화면 1830과 같이 하측 방향으로 화면 제스쳐가 감지되면 제어부440은 3D 이미지1800을 하측 방향으로 회전시킬 수 있다.
그리고 상기 이동 제스쳐가 감지되면, 상기 제어부400은 1739동작 및 1737동작에서 이동제스쳐가 발생되는 방향으로 3D 이미지를 이동시켜 표시할 수 있다. 도 18b를 참조하면, 화면 1850과 같이 3D 이미지가 표시되는 상태에서 3D이미지를 터치한 후, 화면 1860과 같이 우측 방향으로 이동 제스쳐가 감지되면 제어부440은 3D 이미지1800을 우측 방향으로 회전시킬 수 있으며, 화면 1870과 같이 좌측 방향으로 이동 제스쳐가 감지되면 제어부440은 3D 이미지1800을 좌측 방향으로 이동시킬 수 있다.
도 19는 플랙서블 디스플레이 및 어레이 카메라를 구비하는 전자장치에서 이미지를 촬영하는 방법을 도시하는 흐름도이다. 도 20a 및 도 20는 전자장치가 휘어지는 방향에 따라 이미지를 촬영하는 예를 설명하기 위한 도면이다. 여기서는 이미지를 촬영하는 전자장치는 도 4를 참조하여 설명하기로 한다.
상기 플랙서블 디스플레이420은 카메라모듈410을 내측 방향으로 휘어지게 할 수 있으며, 또한 도 20a 및 도 20b와 같이 외측 방향으로 휘어지게 할 수 있다. 전자장치는 상기 플랙서블 디스플레이420의 휘어지는 방향 및 카메라모듈410이 향하는 방향에 따라 촬영된 이미지를 2D 이미지 또는 3D 이미지로 처리할 수 있다. 예를들면 카메라모듈410의 방향이 내측 방향으로 향하도록 플랙서블 디스플레이420이 휘어지면, 전자장치의 중앙에 위치되는 하나의 피사체에 초점이 맞춰질 수 있다. 그리고 카메라모듈410의 방향이 외측 방향으로 향하도록 플랙서블 디스플레이420이 휘어지면, 전자장치의 주변에 위치되는 피사체들에 초점이 맞춰질 수 있다.
상기 제어부440은 카메라모듈410의 구동이 요청되면, 디스플레이420의 휨 방향에 따라 카메라모듈410의 렌즈들이 위치되는 방향을 검사한다. 이때 상기 디스플레임420의 휨 방향은 휨 방지센서를 통해 감지할 수 있으며, 또는 카메라모듈420의 렌즈 방향을 분석하여 감지할 수도 있다. 상기 카메라모듈410의 렌즈 방향이 내측 방향을 향하면, 상기 제어부440은 1917동작에서 중심에 위치되는 피사체를 촬영한 후, 이를 합성하여 3D이미지로 처리할 수 있다. 그리고 상기 카메라모듈410의 렌즈 방향이 외측 방향을 향하면, 상기 제어부440은 1917동작에서 전자장치의 주변에 위치되는 피사체들을 촬영한 후, 이를 합성하여 2D이미지로 처리할 수 있다. 예를들면 도 20a와 같이 전자장치가 휘어진 경우에는 360도 파노라마 이미지를 생성할 수 이으며, 도 20b와 같이 휘어진 경우에는 180도 파노라마 이미지를 생성할 수 있다. 또한 장치가 휘어지지 않은 경우에는 상기 제어부1930은 일반 이미지로 처리할 수 있으며, 여기서 일반이미지는 2D 이미지가 될 수 있다.
따라서 전자장치는 디스플레이의 휨 방향 및 카메라모듈420이 향하는 방향에 따라 전자장치 내부 이미지를 촬영하여 3D 이미지를 획득할 수 있고, 또는 카메라를 외곽 방향으로 향하게 하여 2D 이미지와 같이 다양한 효과의 이미지를 획득 할 수도 있다.
도 21은 전자장치에서 플랙서블 디스플레이에 실장되는 카메라 어레이 다른 구조를 도시하는 도면이다. 예를들면, 디스플레이210에 실장된 Array-Camera는 도 2의 240과 같이 일렬로 실장될 수 있을 뿐 아니라 도 21과 같이 'ㅁ'형태 또는 기능상 필요에 따라 다양한 형태로 배치할 수 있다. 그리고 도 21과 같이 배치된 Array-Camera들의 카메라는 2100과 같이 각각 Array-Camera가 될 수도 있다.
본 발명의 다양한 실시예에 따른 전자장치의 이미지 촬영 방법은, 피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이에 장착된 카메라모듈을 통해 상기 피사체에 포커싱된 이미지를 촬영하는 동작과, 상기 촬영된 이미지들을 합성하여 설정된 타입으로 처리하는 동작을 포함할 수 있다.
상기 전자장치의 이미지 처리 방법에서 카메라모듈은 적어도 두개의 카메라들이 연결되는 어레이 카메라이며, 상기 이미지를 촬영하는 동작은 상기 디스플레이가 피사체 방향으로 휘어져 상기 카메라모듈의 카메라들이 상기 스플레이의 중심에 위치되는 피사체를 포커싱하여 복수의 이미지들을 촬영할 수 있다.
상기 이미지를 처리하는 동작은, 상기 촬영된 복수의 이미지들을 전처리 및 후처리하는 동작과, 상기 처리된 이미지들을 하나의 이미지로 합성하는 동작과, 상기 합성된 이미지를 3D 이미지로 처리하는 동작을 포함할 수 있다.
또한 상기 전자장치의 이미지 처리방법은 디스플레이의 휨 방향을 분석하는 동작을 더 포함할 수 있으며, 상기 이미지처리동작은 상기 디스플레이의 휨 방향이 내측으로 향하면 상기 촬영된 이미지들을 하나의 이미지로 합성하여 3D 이미지로 처리하는 동작과, 상기 디스플레이의 휨방향이 외측으로 항하면 상기 촬영된 이미지들을 하나의 이미지로 합성하여 2D 이미지로 처리하는 동작을 포함할 수 있다.
또한 상기 상기 이미지 촬영 동작은 피사체 주변의 휘도를 측정하여 상기 디스플레이의 화면 밝기를 제어하는 동작을 더 포함할 수 있다.
그리고 상기 화면의 밝기를 제어하는 동작은 상기 카메라모듈을 이용하여 피사체 주변의 휘도를 감지하는 동작과, 상기 감지된 휘도에 따라 상기 디스플레이의 화면 밝기를 제어하여 피사체의 휘도를 조절하는 동작을 포함할 수 있다.
상기 피사체의 휘도를 조절하는 동작은 상기 디스플레이가 피사체를 감싸면 상기 카메라 모듈의 카메라들을 분할하여 구동하며, 구동되지 않은 카메라에 위치된 디스플레이 영역을 블랙화면으로 처리할 수 있다.
또한 상기 피사체의 휘도를 조절하는 동작은 상기 디스플레이가 피사체를 감싸면 상기 디스플레이의 표시영역을 분할하여 일부 표시영역들을 구동하며 상기 카메라모듈의 카메라들을 일괄 구동하여 이미지를 획득하도록 제어할 수 있다,
또한 상기 피사체의 휘도를 조절하는 동작은 상기 디스플레이가 피사체를 감싸면 상기 카메라모듈의 카메라들을 순차적으로 구동하며, 상기 구동되는 상기 카메라의 위치에 대응되는 상기 디스플레이의 표시영역들을 순차적으로 구동할 수 있다.
그리고 본 발명의 다양한 실시예에 따른 전자장치의 이미지 촬영 방법은, 피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이에 장착된 카메라모듈을 통해 상기 피사체의 주변 휘도를 측정하는 동작과, 상기 감지된 휘도에 따라 상기 디스플레이의 화면 밝기를 제어하여 피사체의 휘도를 조절하는 동작과, 상기 카메라모듈을 구동하여 피사체에 포커싱된 적어도 2개의 이미지들을 촬영하는 동작과, 상기 촬영된 이미지들을 합성하여 3D 이미지로 처리하는 동작을 포함할 수 있다.
다양한 실시예들에 따르면, 본 발명에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서 210)에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리 220가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서210에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 발명에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 발명에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
그리고 본 명세서와 도면에 발명된 실시 예들은 본 발명의 내용을 쉽게 설명하고, 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 발명된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100, 102, 104 : 전자 장치 110 : 버스
120 : 프로세서 130 : 메모리
131, 310 :커널 132, 330 : 미들웨어
133, 360 : 어플리케이션 프로그래밍 인터페이스(API)
134, 370 : 어플리케이션
140 : 사용자 입력 모듈
150 : 디스플레이 모듈 160 : 통신 모듈
162 : 네트워크 164 : 서버
600 : 하드웨어 610 : 프로세서
611 : 어플리케이션 프로세서(AP)
613 : 커뮤니케이션 프로세서(CP)
614_1~N : SIM 카드 615_1~N: 슬롯
620 : 메모리
622 : 내장메모리 624 : 외장메모리
630 : 통신 모듈 631 : 무선 통신 모듈
633 : Wi-Fi 634 : RF 모듈
635 : BT 637 : GPS
639 : NFC 640 : 센서 모듈
640A :제스쳐 센서 640B : 자이로 센서
640C : 기압 센서 640D : 마그네틱 센서
640E : 가속도 센서 640F : 그립 센서
640G : 근접 센서 640H : RGB 센서
640I : 생체 센서 640J : 온/습도 센서
640K : 조도 센서 640M : UV 센서
650 : 사용자 모듈 652 : 터치 패널
654 : 펜 센서 656 : 키
658 : 울트라소닉 660 : 디스플레이 모듈
662 : 패널 664 : 홀로그램
670 : 인터페이스 672 : HDMI
674 : USB 676 : 프로젝터
678 : D-SUB 680 : 오디오 코덱
682 : 스피커 684 : 리시버
686 : 이어폰 688 : 마이크
691 : 카메라 모듈 695 : 전력 관리 모듈
696 : 배터리 697 : 인디케이터
698 : 모터

Claims (20)

  1. 전자 장치에 있어서,
    홀들을 가지며, 휘어짐이 가능한 플랙서블 디스플레이;
    상기 홀의 하단에 광학부가 위치되며, 피사체의 이미지들을 획득하는 복수의 이미지 센서들을 포함하는 카메라모듈;
    상기 카메라모듈에서 출력되는 상기 이미지들을 합성하여 처리하는 이미지처리부; 및
    제어부를 포함하고,
    상기 제어부는, 상기 플랙서블 디스플레이의 휨 방향을 감지하고, 상기 플랙서블 디스플레이가 피사체 방향으로 휘어진 휨 방향에 응답하여 복수의 이미지 센서들을 순차적으로 구동하도록 제어하고, 각 이미지 센서가 순차적으로 구동 할 때, 순차적으로 구동되는 이미지 센서의 위치에 대응하는 상기 플랙서블 디스플레이의 일부 영역을 순차적으로 구동하여 상기 피사체의 주변 휘도를 조절하고, 상기 순차적으로 구동되는 이미지 센서들을 기반으로 상기 피사체에 포커싱된 이미지들을 촬영하고 상기 이미지 처리부를 기반으로 상기 촬영된 이미지들을 합성하여 처리하도록 제어하는 것을 특징으로 하는 전자 장치.
  2. 제1항에 있어서,
    상기 카메라모듈은 적어도 두 개의 카메라들이 연결되는 어레이 카메라이며,
    상기 플랙서블 디스플레이는 베젤 영역에 상기 카메라들의 광학부가 위치될 수 있는 홀들을 구비하는 것을 특징으로 하는 전자 장치.
  3. 제2항에 있어서,
    상기 플랙서블 디스플레이가 피사체 방향으로 휘어지는 휨 방향일 시 상기 카메라모듈의 이미지센서들은 상기 플랙서블 디스플레이의 중심에 위치되는 상기 피사체를 포커싱하여 하여 상기 이미지들을 촬영하고,
    상기 이미지처리부는 상기 촬영된 복수의 이미지들을 하나의 이미지로 합성하고, 상기 합성된 이미지를 3D 이미지로 처리하는 것을 특징으로 하는 전자 장치.
  4. 제2항에 있어서,
    상기 이미지처리부는 상기 제어부의 제어하에 상기 플랙서블 디스플레이의 휨 방향이 내측으로 향하면 획득되는 이미지들을 하나의 이미지로 합성하여 3D 이미지로 처리하고, 상기 휨 방향이 외측으로 향하면 획득되는 이미지들을 하나의 이미지로 합성하여 2D 이미지로 처리하는 것을 특징으로 하는 전자 장치.
  5. 제2항에 있어서,
    상기 카메라모듈의 적어도 두개의 카메라는 동일면을 향하며 일렬로 정렬되거나 또는 일정한 패턴의 형태로 정렬되는 것을 특징으로 하는 전자 장치.
  6. 제3항에 있어서,
    상기 제어부는,
    상기 피사체 주변의 휘도를 측정하여 상기 플랙서블 디스플레이의 화면 밝기를 제어하는 것을 특징으로 하는 전자 장치.
  7. 제6항에 있어서,
    상기 제어부는,
    상기 플랙서블 디스플레이가 상기 피사체를 폐곡선으로 감싸도록 휜 경우 상기 카메라 모듈의 이미지센서들을 분할하여 구동하고, 구동되지 않은 카메라에 위치된 플랙서블 디스플레이 영역을 블랙화면으로 처리하는 것을 특징으로 하는 전자 장치.
  8. 제6항에 있어서,
    상기 제어부는,
    상기 플랙서블 디스플레이가 상기 피사체를 폐곡선으로 감싸도록 휜 경우 상기 플랙서블 디스플레이의 표시 영역을 분할하여 일부 표시 영역들을 구동하고 상기 카메라 모듈의 이미지 센서들을 일괄 구동하여 상기 이미지들을 획득하도록 제어하는 것을 특징으로 하는 전자 장치.
  9. 삭제
  10. 제6항에 있어서,
    상기 플랙서블 디스플레이는 휘도 조절 바를 구비하는 투명 디스플레이이며, 상기 휘도조절 바에 의해 상기 플랙서블 디스플레이의 화면 밝기가 조절되는 것을 특징으로 하는 전자 장치.
  11. 전자장치의 이미지 촬영 방법에 있어서,
    휘어짐이 가능한 플랙서블 디스플레이의 휨 방향을 감지하는 동작;
    상기 플랙서블 디스플레이가 피사체 방향으로 휘어진 휨 방향에 응답하여, 피사체의 이미지를 캡쳐하기 위해 복수의 이미지 센서들을 순차적으로 구동하는 동작;
    각 이미지 센서가 순차적으로 구동 할 때, 순차적으로 구동되는 이미지 센서의 위치에 대응하는 상기 플랙서블 디스플레이의 일부 영역을 순차적으로 구동하여 상기 피사체의 주변 휘도를 조절하는 동작;
    상기 순차적으로 구동되는 이미지 센서들을 기반으로 상기 피사체에 포커싱된 이미지들을 촬영하는 동작; 및
    상기 촬영된 이미지들을 합성하여 처리하는 동작을 포함하는 방법.
  12. 제11항에 있어서,
    상기 복수의 이미지 센서들은 적어도 두개의 카메라들이 연결되는 어레이 카메라이며,
    상기 이미지를 촬영하는 동작은 상기 플랙서블 디스플레이가 피사체 방향으로 휘어져 상기 이미지센서들이 상기 플랙서블 디스플레이의 중심에 위치되는 상기 피사체를 포커싱하여 상기 이미지들을 촬영하는 것을 특징으로 하는 방법.
  13. 제12항에 있어서,
    상기 이미지들을 합성하여 처리하는 동작은,
    상기 촬영된 복수의 이미지들을 전처리 및 후처리하는 동작과,
    상기 처리된 이미지들을 하나의 이미지로 합성하는 동작과,
    상기 합성된 이미지를 3D 이미지로 처리하는 동작을 포함하는 것을 특징으로 하는 방법.
  14. 제12항에 있어서,
    상기 플랙서블 디스플레이의 휨 방향을 분석하는 동작을 더 포함하며,
    상기 이미지들을 합성하여 처리하는 동작은,
    상기 플랙서블 디스플레이의 휨 방향이 내측으로 향하면 상기 촬영된 이미지들을 하나의 이미지로 합성하여 3D 이미지로 처리하는 동작과,
    상기 플랙서블 디스플레이의 휨 방향이 외측으로 향하면 상기 촬영된 이미지들을 하나의 이미지로 합성하여 2D 이미지로 처리하는 동작을 포함하는 것을 특징으로 하는 방법.
  15. 제13항에 있어서,
    상기 이미지들을 합성하여 처리하는 동작은,
    피사체 주변의 휘도를 측정하여 상기 플랙서블 디스플레이의 화면 밝기를 제어하는 동작을 더 포함하는 것을 특징으로 하는 방법.
  16. 제15항에 있어서,
    상기 화면의 밝기를 제어하는 동작은,
    상기 복수의 이미지 센서들을 이용하여 피사체 주변의 휘도를 감지하는 동작과,
    상기 감지된 휘도에 따라 상기 플랙서블 디스플레이의 화면 밝기를 제어하여 상기 피사체의 휘도를 조절하는 동작을 포함하는 것을 특징으로 하는 방법.
  17. 제16항에 있어서,
    상기 피사체의 휘도를 조절하는 동작은,
    상기 플랙서블 디스플레이가 상기 피사체를 폐곡선으로 감싸면 이미지센서들을 분할하여 구동하고, 구동되지 않은 이미지 센서에 위치된 플랙서블 디스플레이 영역을 블랙화면으로 처리하는 것을 특징으로 하는 방법.
  18. 제16항에 있어서,
    상기 피사체의 휘도를 조절하는 동작은,
    상기 플랙서블 디스플레이가 피사체를 폐곡선으로 감싸면 상기 플랙서블 디스플레이의 표시영역을 분할하여 일부 표시영역들을 구동하고 상기 이미지센서들을 일괄 구동하여 상기 이미지들을 획득하도록 제어하는 것을 특징으로 하는 방법.
  19. 삭제
  20. 전자장치의 이미지 촬영 방법에 있어서,
    피사체 방향으로 휘어짐이 가능한 플랙서블 디스플레이에 장착된 카메라모듈을 통해 상기 피사체의 주변 휘도를 측정하는 동작과,
    상기 측정된 주변 휘도에 따라 상기 플랙서블 디스플레이의 화면 밝기를 제어하여 상기 피사체의 휘도를 조절하는 동작과,
    상기 카메라모듈을 구동하여 피사체에 포커싱된 적어도 2개의 이미지들을 촬영하는 동작과, 상기 촬영된 이미지들을 합성하여 3D 이미지로 처리하는 동작을 포함하고,
    상기 피사체의 휘도를 조절하는 동작은,
    상기 플랙서블 디스플레이가 피사체를 폐곡선으로 감싸면 상기 카메라모듈의 이미지 센서들을 순차적으로 구동하여 이미지를 촬영하고, 상기 이미지를 촬영 할 때 상기 구동되는 이미지 센서의 위치에 대응되는 상기 플랙서블 디스플레이의 표시 영역들을 순차적으로 구동하는 것을 특징으로 하는 방법.

KR1020140012017A 2014-02-03 2014-02-03 이미지 촬영장치 및 방법 KR102265326B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140012017A KR102265326B1 (ko) 2014-02-03 2014-02-03 이미지 촬영장치 및 방법
US14/613,245 US9967444B2 (en) 2014-02-03 2015-02-03 Apparatus and method for capturing image in electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140012017A KR102265326B1 (ko) 2014-02-03 2014-02-03 이미지 촬영장치 및 방법

Publications (2)

Publication Number Publication Date
KR20150091595A KR20150091595A (ko) 2015-08-12
KR102265326B1 true KR102265326B1 (ko) 2021-06-15

Family

ID=53755894

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140012017A KR102265326B1 (ko) 2014-02-03 2014-02-03 이미지 촬영장치 및 방법

Country Status (2)

Country Link
US (1) US9967444B2 (ko)
KR (1) KR102265326B1 (ko)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101632008B1 (ko) * 2014-04-30 2016-07-01 엘지전자 주식회사 이동단말기 및 그 제어방법
KR102198473B1 (ko) * 2014-12-30 2021-01-05 엘지전자 주식회사 이동단말기 및 그 제어방법
CN104699391B (zh) * 2015-04-07 2018-10-12 联想(北京)有限公司 电子设备及其相机的控制方法
US11095869B2 (en) 2015-09-22 2021-08-17 Fyusion, Inc. System and method for generating combined embedded multi-view interactive digital media representations
US10242474B2 (en) 2015-07-15 2019-03-26 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US11006095B2 (en) 2015-07-15 2021-05-11 Fyusion, Inc. Drone based capture of a multi-view interactive digital media
US10222932B2 (en) 2015-07-15 2019-03-05 Fyusion, Inc. Virtual reality environment based manipulation of multilayered multi-view interactive digital media representations
US10147211B2 (en) * 2015-07-15 2018-12-04 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US11783864B2 (en) 2015-09-22 2023-10-10 Fyusion, Inc. Integration of audio into a multi-view interactive digital media representation
WO2017086914A1 (en) * 2015-11-16 2017-05-26 Intel Corporation Extended visual capture in a reconfigurable device
WO2017145755A1 (ja) * 2016-02-22 2017-08-31 ソニー株式会社 情報処理装置および情報処理方法
US11202017B2 (en) 2016-10-06 2021-12-14 Fyusion, Inc. Live style transfer on a mobile device
US10825421B2 (en) * 2016-11-29 2020-11-03 Huawei Technologies Co., Ltd. Electronic device photographing method, and apparatus
CN106792180B (zh) * 2016-12-31 2018-08-24 惠科股份有限公司 可调整曲面显示器曲率的控制方法
US10412377B2 (en) * 2017-01-11 2019-09-10 Koninklijke Philips N.V. Augmented display device for use in a medical imaging laboratory
US10313651B2 (en) * 2017-05-22 2019-06-04 Fyusion, Inc. Snapshots at predefined intervals or angles
US11069147B2 (en) 2017-06-26 2021-07-20 Fyusion, Inc. Modification of multi-view interactive digital media representation
US11284062B2 (en) * 2017-09-05 2022-03-22 Texas Instruments Incorporated Automotive display validation
US10592747B2 (en) 2018-04-26 2020-03-17 Fyusion, Inc. Method and apparatus for 3-D auto tagging
KR20200121151A (ko) * 2019-04-15 2020-10-23 삼성전자주식회사 슬라이딩 모듈을 포함하는 폴더블 전자 장치 및 제어 방법
KR20210041271A (ko) * 2019-10-07 2021-04-15 삼성전자주식회사 전자 장치에서 카메라의 조명을 제공하는 방법 및 장치
WO2022209130A1 (ja) * 2021-03-31 2022-10-06 ソニーグループ株式会社 情報処理装置、情報処理方法、およびシステム
WO2023047637A1 (ja) * 2021-09-22 2023-03-30 ソニーグループ株式会社 情報処理装置およびプログラム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7463238B2 (en) * 2003-08-11 2008-12-09 Virtualblue, Llc Retractable flexible digital display apparatus
US20150121287A1 (en) * 2006-07-03 2015-04-30 Yoram Ben-Meir System for generating and controlling a variably displayable mobile device keypad/virtual keyboard
JP2010078415A (ja) * 2008-09-25 2010-04-08 Fujifilm Corp 放射線検出装置及び放射線画像撮影システム
KR20100041006A (ko) * 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
CN101995756A (zh) 2009-08-26 2011-03-30 鸿富锦精密工业（深圳）有限公司 阵列摄影机系统
CN101833403B (zh) * 2010-04-26 2012-09-19 鸿富锦精密工业（深圳）有限公司 基于图像识别的触摸系统
CN102466960A (zh) * 2010-11-18 2012-05-23 英业达股份有限公司 立体影像拍摄装置以及立体影像拍摄方法
KR101878251B1 (ko) * 2011-04-08 2018-07-13 삼성전자주식회사 굽힘 감지 센서 및 그를 제조하는 방법
TWI454999B (zh) * 2011-11-21 2014-10-01 Wistron Corp 光學觸控螢幕、校正裝置及其校正方法
KR101864620B1 (ko) * 2012-05-09 2018-06-07 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR101889008B1 (ko) * 2012-06-11 2018-08-20 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 제어 방법
KR102052370B1 (ko) * 2012-06-14 2020-01-08 엘지전자 주식회사 플렉서블 포터블 디바이스
KR20140000749A (ko) * 2012-06-25 2014-01-06 엘지전자 주식회사 단말기의 제어방법
KR102104588B1 (ko) * 2012-07-11 2020-04-24 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 동작 방법
EP2698686B1 (en) * 2012-07-27 2018-10-10 LG Electronics Inc. Wrist-wearable terminal and control method thereof
US20140157206A1 (en) * 2012-11-30 2014-06-05 Samsung Electronics Co., Ltd. Mobile device providing 3d interface and gesture controlling method thereof
KR102070776B1 (ko) * 2013-03-21 2020-01-29 엘지전자 주식회사 디스플레이 장치 및 그 제어 방법
US10085626B2 (en) * 2013-11-26 2018-10-02 Sharp Kabushiki Kaisha In-vivo monitoring camera system, and support tube for in-vivo monitoring camera system
DE202014103215U1 (de) * 2014-07-11 2014-09-30 Christian Stroetmann Elektronisches, visuelles Gerät, das eine flexible beziehungsweise biegbare Vorrichtung zur optischen Signalisierung von veränderlichen Informationen, ein flexibles beziehungsweise biegbares Gehäuse mit mindestens einem Gelenk/Scharnier und ein Regel-/Steuerungssystem besitzt
US9898078B2 (en) * 2015-01-12 2018-02-20 Dell Products, L.P. Immersive environment correction display and method

Also Published As

Publication number Publication date
KR20150091595A (ko) 2015-08-12
US20150222880A1 (en) 2015-08-06
US9967444B2 (en) 2018-05-08

Similar Documents

Publication Publication Date Title
KR102265326B1 (ko) 이미지 촬영장치 및 방법
US11350033B2 (en) Method for controlling camera and electronic device therefor
US11073973B2 (en) Electronic device and method for electronic device displaying image
KR102622754B1 (ko) 이미지 합성 방법 및 이를 지원하는 전자 장치
KR102251483B1 (ko) 영상을 처리하는 전자 장치 및 방법
US10306163B2 (en) Electronic device having camera module, and image processing method for electronic device
KR102195311B1 (ko) 이미지의 잡음 특성 개선 방법 및 그 전자 장치
KR102603426B1 (ko) 이미지 처리장치 및 방법
US20160037067A1 (en) Method for generating image and electronic device thereof
US10003785B2 (en) Method and apparatus for generating images
CN105282430B (zh) 使用照片的构图信息的电子装置及使用该装置的拍摄方法
US20200244885A1 (en) Photographing method and electronic apparatus
KR102149448B1 (ko) 이미지를 처리하기 위한 전자 장치 및 방법
KR102424986B1 (ko) 전자 장치 및 전자 장치에서 얼굴 정보를 분석하는 방법
KR20150077646A (ko) 이미지 처리 장치 및 방법
KR102399764B1 (ko) 전자 장치 및 촬영 방법
KR102469426B1 (ko) 이미지 처리 장치 및 이의 동작 방법
KR20150106719A (ko) 전자 장치의 촬영 위치 안내 방법 및 이를 이용한 전자 장치
KR102489279B1 (ko) 이미지 처리장치 및 방법
KR102423364B1 (ko) 영상을 제공하는 방법 및 이를 지원하는 전자 장치
KR20160149842A (ko) 영상 처리 방법 및 그 장치
KR20150141426A (ko) 전자 장치 및 전자 장치에서의 이미지 처리 방법
KR20150110032A (ko) 영상데이터 처리 전자장치 및 방법
KR102317624B1 (ko) 전자 장치 및 그의 이미지 처리 방법
EP3429198B1 (en) Photographing apparatus and control method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant