KR102076771B1

KR102076771B1 - 다수의 이미지 동시 포착

Info

Publication number: KR102076771B1
Application number: KR1020130018632A
Authority: KR
Inventors: 김문수; 정흥식
Original assignee: 삼성전자주식회사
Priority date: 2013-02-21
Filing date: 2013-02-21
Publication date: 2020-02-12
Also published as: US20140232921A1; KR20140104748A; US9325903B2

Abstract

전자 장치를 이용하여 이미지 처리를 하는 방법 및 장치에 관한 다양한 실시예들이 기술되었다. 한 실시 예에 따르면, 전자 장치를 이용한 이미지 처리 방법은, 제1 이미지 센서로부터 얻은 제1 영상을 상기 전자 장치에 기능적으로 연결된 디스플레이에 표시하는 동작과, 여기에서 일정 영역에 대한 표식을 상기 제 1 영상과 적어도 일부 중첩되게 표시하고, 제 2 이미지센서로부터 얻은 제2 영상을 상기 일정 영역에 표시하는 동작을 포함하고, 여기에서, 상기 제 2 영상의 적어도 일부분은 상기 일정 영역 내에 표시하고, 여기에서 상기 제1 영상의 적어도 일부분과 상기 제2 영상의 적어도 일부분을 상기 디스플레이에 동시에 프리뷰 이미지로 표시한다. 다양한 다른 실시 예들이 가능하다.

Description

다수의 이미지 동시 포착{IMAGE CAPTURING USING MULTIPLE SCREEN SECTIONS}

본 발명의 다양한 실시예들은 이미지 촬영 방법 및 전자장치에 관한 것으로, 특히 전자장치 (예컨대 스마트 폰 또는 테블릿 컴퓨터 등)와 기능적으로 연결된 적어도 하나 이상의 이미지 센서를 통하여 포착된 복수개의 이미지들을 촬영하는 방법 및 장치에 관한 것이다.

어떤 전자 장치(예: 휴대용 단말기(portable terminal), 이동 단말기(mobile terminal), 이동 패드(mobile pad), 미디어 플레이어(media player), 태블릿 컴퓨터(tablet computer), 핸드헬드 컴퓨터(handheld computer) 또는 PDA(Personal Digital Assistant) 등등)는 디지털 카메라 기능을 제공하여 메가 픽셀 이상의 영상을 촬영할 수도 있으며, 고해상도의 화면을 통해 촬영한 영상을 표시할 수도 있고, 상기 디지털 카메라 기능을 위한 다수개의 이미지센서들을 구비하여 하나 또는 그 이상의 이미지들을 포착한다.

다양한 실시 예에 따른 전자 장치 (예컨데, 휴대용 단말기)는 그 제 1 면 (예: 전면부, 좌측부, 또는 하단부) 또는 제 2 면 (예: 후면부, 우측부, 또는 상단부) 각각에 대응하는 (예: 해당 면의 방향에 있는 이미지를 포착하는) 복수개의 이미지 센서들을 포함할 수 있다. 예를 들자면, 전면부에 대응하는 이미지센서를 이용하여 사용자의 신체 부위 (예컨데, 사용자의 얼굴)를 촬영하고 후면부에 대응하는 이미지 센서를 이용하여 배경을 촬영할 수 있다. 더하여, 상기 전자 장치는 이미지 센서 스위칭 메뉴를 통해서 저장하고자 하는 영상 데이터를 선택할 수 있다. 즉, 휴대용 단말기는 상기 전면부 또는 후면부에 대응하는 이미지센서들 가운데 선택된 하나의 이미지 센서를 통해 획득되는 영상 데이터(예: 정적 또는 정적 이미지)를 저장할 수 있다.

다양한 실시 예에 따르면, 상기 전자 장치의 제 1 면 (예: 후면부)에 대응하는 (예: 배치된) 이미지 센서를 통해 획득되는 배경 영상과 전면부에 대응하는 (예: 배치된) 이미지 센서를 통해 획득되는 사용자의 신체 부위 (예: 얼굴, 몸, 다리, 팔 등) 영상을 동시에 동영상 또는 정영상(still image)으로 리코딩 할 수 있다. 어떤 실시 예들에 따르면, 상기 전자 장치는 하나의 이미지 센서 (예: 회전 가능한 이미지 센서)를 통해 두 개 이상의 다른 앵글에 대한 복수개의 이미지들을 포착하거나, 또는 세 개 이상의 이미지 센서들을 통해 서로 다른 앵글에 대한 복수 개(예: 세 개 이상)의 이미지들을 포착하도록 설정될 수도 있다. 또한, 어떤 실시 예들에서는, 상기 이미지 센서들 중의 적어도 하나는 상기 전자 장치의 해당면 (예: 전면부, 후면부, 상단부, 하단부, 좌측부 또는 우측부)에 설치되거나 또는 근거리 통신, 예컨데, 블루투스 (Bluetooth)을 이용하여 상기 전자 장치에 무선으로 연결될 수도 있다.

도 1의 (a) 내지 (b)는 다양한 실시예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 도시하고 있다.

도 1의 (a)을 참조하면, 휴대용 단말기는 전면부 및 후면부에 카메라를 배치하고 있으며, 전면부에 배치된 카메라(120)를 이용하여 사용자 영상을 리코딩할 수 있고(130) 후면부에 배치된 카메라(110)를 이용하여 배경 영상을 리코딩할 수 있다(140).

도 1의 (b)을 참조하면, 후면부에 배치된 카메라(110)로 획득되는 배경 영상(140)과 전면부에 배치된 카메라(120)로 획득되는 사용자 영상(130)을 PIP(Picture In Picture) 기능을 이용하여 배경 영상(150)과 사용자 영상(160)을 한 화면에 디스플레이할 수 있다. PIP 기능은 본 화면과 별도로 작은 화면을 동시에 표시할 수 있는 기능으로써, 배경 영상(150)은 모화면이 되고, 사용자 영상(160)은 PIP가 된다. 이때, 사용자 영상(160)은 배영 영상 내에 다양하게 배치될 수 있다. 또한, 다양한 실시예들에 따르면서, 사용자 영상(160)이 모화면이 되고 배경 영상(150)이 PIP가 될 수도 있다.

경우에 따라, 복수의 카메라를 이용하여 영상을 리코딩할 시, 복수의 카메라를 동시에 켜 놓고 각각 리코딩을 하거나, 어느 하나의 카메라가 리코딩 정지가 될 때, 리코딩이 정지된 카메라는 대기상태가 된다.

이때, 복수의 카메라 리코딩 중 대기 중인 어느 하나의 카메라를 계속 켜 놓을 경우 과도한 전류 소모의 문제가 발생할 수 있고, 대기 중인 카메라를 꺼 놓을 경우 동시에 촬영을 위한 사용자 명령이 입력될 때 대기 중인 카메라를 다시 켜 구동하기 위한 시간(이하 카메라 구동시간이라 칭함)이 필요하므로, 카메라 구동시간으로 인한 지연이 발생할 수 있다.

따라서, 듀얼 카메라를 포함하는 전자장치에서 듀얼 영상 리코딩시 전력소모 및 카메라 구동시간으로 인한 지연을 최소화하기 위한 방법 및 장치가 필요하다.

본 발명의 다양한 실시 예들은 적어도 하나 이상의 이미지 센서를 포함하는 전자장치에서 복수의 영상촬영을 위한 방법 및 장치를 제안한다.

본 발명의 다양한 실시 예들은 적어도 하나 이상의 이미지 센서를 포함하는 전자장치에서 복수의 영상을 촬영할 경우 전류 소모 또는 지연문제를 최소화하기 위한 방법 및 장치를 제안한다.

본 발명의 다양한 실시 예들은 근접 터치가 검출될 시 대기중인 이미지센서를 동작시키고, 터치가 검출될 시 촬영을 시작하여, 복수의 영상 촬영을 수행하는 방법 및 장치를 제안한다.

상기한 다양한 실시 예들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 전자 장치를 이용한 이미지 처리 방법에 있어서, 제1 이미지 센서로부터 얻은 제1 영상을 상기 전자 장치에 기능적으로 연결된 디스플레이에 표시하는 동작과, 여기에서 일정 영역에 대한 표식을 상기 제 1 영상과 적어도 일부 중첩되게 표시하고, 제 2 이미지센서로부터 얻은 제2 영상을 상기 일정 영역에 표시하는 동작을 포함하고, 여기에서, 상기 제 2 영상의 적어도 일부분은 상기 일정 영역 내에 표시하고, 여기에서 상기 제1 영상의 적어도 일부분과 상기 제2 영상의 적어도 일부분을 상기 디스플레이에 동시에 프리뷰 이미지로 표시한다.

상기한 다양한 실시 예들을 달성하기 위한 본 발명의 제 2 견지에 따르면, 이미지 정보를 저장하기 위한 적어도 하나의 메모리; 이미지 처리 모듈을 실행시키기 위한 적어도 하나의 프로세서를 포함하되, 상기 이미지 처리 모듈은, 제1 이미지 센서로부터 얻은 제1 영상을 상기 전자 장치에 기능적으로 연결된 디스플레이에 표시하고, 여기에서 일정 영역에 대한 표식을 상기 제 1 영상과 적어도 일부 중첩되게 표시하고, 제 2 이미지센서로부터 얻은 제2 영상을 상기 일정 영역에 표시하는 명령어를 포함하고, 여기에서, 상기 제 2 영상의 적어도 일부분은 상기 일정 영역 내에 표시하고, 여기에서 상기 제1 영상의 적어도 일부분과 상기 제2 영상의 적어도 일부분을 상기 디스플레이에 동시에 프리뷰 이미지로 표시한다.

상기한 다양한 실시 예들을 달성하기 위한 본 발명의 제 3 견지에 따르면, 전자장치는 제1 이미지 센서로부터 얻은 제1 영상을 상기 전자 장치에 기능적으로 연결된 디스플레이에 표시하고, 여기에서 일정 영역에 대한 표식을 상기 제 1 영상과 적어도 일부 중첩되게 표시하고, 제 2 이미지센서로부터 얻은 제2 영상을 상기 일정 영역에 표시하도록 제어하는 프로세서를 포함하고, 여기에서, 상기 제 2 영상의 적어도 일부분은 상기 일정 영역 내에 표시하고, 여기에서 상기 제1 영상의 적어도 일부분과 상기 제2 영상의 적어도 일부분을 상기 디스플레이에 동시에 프리뷰 이미지로 표시한다.

상기한 다양한 실시 예들을 달성하기 위한 본 발명의 제 4 견지에 따르면, 전자장치의 동작방법은, 제1 카메라가 동작상태에 있고 제2 카메라가 대기상태에 있을 때, 상기 제1 카메라로부터의 제1 영상을 획득하여 프리뷰하는 과정과, 제1 촬영 명령에 따라, 상기 제1 카메라로부터의 제1 영상을 리코딩하는 과정과, 입력 객체와 터치스크린 사이 호버링이 발생할 시, 상기 제2 카메라를 대기상태에서 동작상태로 천이시켜 상기 제2 카메라로부터의 제2 영상을 획득하는 과정과, PIP(Picture In Picture) 기능을 이용하여, 상기 제1 영상과 상기 제2 영상을 동시에 프리뷰하는 과정과, 듀얼 영상 리코딩 명령에 대응하는 터치가 검출될 시, 상기 제1 영상과 상기 제2 영상을 합성하여 리코딩하는 과정을 포함한다.

바람직하게, 상기 프로그램은, 상기 제1 카메라로부터의 제1 영상이 프리뷰 표시되는 동안에, 상기 제1 영상 내에 상기 제2 영상이 프리뷰되는 프레임 영역을 표시하는 과정을 더 포함한다.

상술한 바와 같이, 듀얼 영상 리코딩시 제1 입력과 제2 입력을 이용하여 카메라 전원을 제어함으로써, 카메라 구동시간 지연을 최소화할 수 있다.

도 1의 (a) 내지 (b)는 한 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 수행하는 예;
도 2의 (a) 내지 (b)는 한 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 수행하는 예;
도 3은 본 발명의 제1 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면;
도 4는 본 발명의 제2 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면;
도 5는 본 발명의 제3 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면;
도 6은 본 발명의 제4 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면;
도 7은 본 발명의 제1 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도;
도 8은 본 발명의 제2 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도;
도 9는 본 발명의 제3 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도;
도 10은 본 발명의 제4 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도;
도 11은 본 발명의 실시 예에 따른 전자장치의 구성도; 및
도 12 (a) 내지 (b)는 본 발명의 제1 실시 예에 따른 근접 터치와 직접 터치를 설명하기 위한 도면;
도 13 (a) 내지 (b)는 본 발명의 제2 실시 예에 따른 근접 터치와 직접 터치를 설명하기 위한 도면.

이하 본 발명의 바람직한 실시 예를 첨부된 도면의 참조와 함께 상세히 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 또한, 본 명세서에 기술된 각 구성 요소는 별도의 특정이 없는 한 단수 또는 복수의 개체를 의미할 수 있다.

이하 본 발명의 다양한 실시 예들에서 카메라는 이미지센서와 동일한 의미로 사용될 수 있다.

도 2의 (a) 내지 (b)는 본 발명의 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 수행하는 예를 도시하고 있다.

도 2의 (a)은 제1 카메라만 촬영을 진행하고 제2 카메라는 촬영을 진행하지 않을 때의 예를 도시하는 도면이다. 바람직하게, 제1 카메라는 전자장치의 후면에 위치한 카메라이고, 제2 카메라는 셀프 촬영을 위한 전자장치의 전면에 위치한 카메라이다. 또한, 제2 카메라로부터의 영상을 표시하기 위한 영역(230)이 표시될 수 있다.

먼저, 초기 사용자가 카메라 애플리케이션을 실행하면 제1 카메라는 구동되어 지정된 화소로 프리뷰(200)를 시작하고, 제2 카메라는 대기상태에서 오프될 수 있다.

이때, 사용자에 의해 제1 셔터(210)가 터치될 시, 제1 카메라로부터의 영상을 리코딩하여 저장한다. 더하여, 예컨대 사용자에 의해 제2 셔터(220)가 터치될 시, 도 2의 (b)와 같이 제2 카메라를 구동하여 지정된 화소로 표시하고(230), 제2 카메라로부터의 영상을 리코딩하여 저장한다. 이때, 제1 카메라로부터 영상과 제2 카메라로부터의 영상이 합성되어 제3의 영상이 리코딩 되어 저장될 수도 있고, 제1 카메라로부터 영상과 제2 카메라로부터의 영상이 별도로 리코딩 되어 각각 저장될 수 있다.

제1 셔터(210)는 제1 카메라로부터의 영상으로부터 이미지를 캡처하거나 제1 카메라로부터의 영상을 리코딩을 시작하기 위한 명령 버튼이다. 제2 셔터(220)는 제2 카메라로부터의 영상으로부터 이미지를 캡처하거나 제1 카메라로부터의 영상을 리코딩을 시작하기 위한 명령 버튼이다.

다양한 실시예들에 따르면, 제1 셔터(210) 및 제2 셔터(220) 대신 하나의 특정 셔터(도시하지 않음)로 구현되어, 상기 특정 셔터가 터치될 시, 제2 카메라를 구동한 후에 동시에 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 하나의 이미지로 캡처하거나 동시에 제1 카메라 및 제2 카메라로부터의 영상들을 리코딩을 시작할 수 있다. 이때, 제1 카메라로부터 영상과 제2 카메라로부터의 영상이 합성되어 제3의 영상이 리코딩 되어 저장되거나, 제1 카메라로부터 영상과 제2 카메라로부터의 영상이 각각 별로도 리코딩 되어 저장될 수 있다.

또 다른 다양한 실시예들에 따르면, 초기 사용자가 카메라 애플리케이션을 실행할 시, 도 2의 (b)와 같이, 제1 셔터(210) 및 제2 셔터(220)의 각각의 터치를 검출하거나 또는 특정 셔터(도시하지 않음)가 터치될 시, 동시에 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 하나의 이미지를 캡처하거나 동시에 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 제3 영상을 리코딩할 수 있다.

도 3은 본 발명의 제1 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면을 도시하고 있다.

도 3을 참조하면, 초기 제1 카메라 및 제2 카메라는 모두 오프상태(350, 360)에 있고(310), 이후 사진 애플리케이션이 실행될 때 제1 카메라는 켜지고 제2 카메라는 오프 상태를 유지한다(320). 이때, 제1 카메라로부터의 영상을 화면에 표시되고, 더하여, 제2 카메라로부터의 영상이 위치할 영역(321)이 표시할 수 있다. 350은 제1 카메라 동작상태를 나타내는 표시이고 360은 제2 카메라 동작 상태를 나타내는 표시이다.

이후, 듀얼 영상 리코딩 시작 명령에 해당하는 셔터(예: 도 2의 제1 셔터, 제2 셔터,또는 특정 셔터) 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜) 등이 근접할 시(이하 근접 터치라 칭함), 제2 카메라가 구동된 후, 제2 카메라로부터의 영상이 해당 영역(321)에 표시된다(330). 즉, 근접 터치는 도 12의 (a)와 도 13의 (a)처럼 스크린과 사용자 손가락이 접촉되지 않고 근접해 있는 상태를 의미한다. 다양한 실시예들에 따르면, 제2 카메라가 구동만 되고, 제2 카메라로부터의 영상이 해당 영역(321)에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다.

이후, 듀얼 영상 리코딩 시작 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜) 등이 터치될 시(이하 직접 터치라 칭함)(341), 제1 카메라로부터의 제1 영상과 제2 카메라로부터의 제2 영상을 합성하여 리코딩을 시작한다(340).

이후, 듀얼 영상 리코딩 중지 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜) 등이 근접할 시(도시하지 않음), 듀얼 영상 리코딩을 중지하고 리코딩된 영상이 저장된다.

또 다른 구현에 있어서, 듀얼 영상 리코딩 중지 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜)이 터치될 시(도시하지 않음), 듀얼 영상 리코딩을 중지하고 리코딩된 영상이 저장된다.

도 4는 본 발명의 제2 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면을 도시하고 있다.

도 4를 참조하면, 초기 제1 카메라 및 제2 카메라는 모두 오프상태(450, 460)에 있고(410), 이후 사진 애플리케이션이 실행될 때 제1 카메라는 켜지고 제2 카메라는 오프 상태를 유지한다(420). 이때, 제1 카메라로부터의 영상을 화면에 표시되고, 더하여, 제2 카메라로부터의 영상이 위치할 영역(421)이 표시할 수 있다. 450은 제1 카메라 동작상태를 나타내는 표시이고 460은 제2 카메라 동작 상태를 나타내는 표시이다.

이후, 듀얼 영상 리코딩 시작하기 위한 음성명령이 검출될 시, 제2 카메라가 구동된 후, 제2 카메라로부터의 영상이 해당 영역(421)에 표시된다(430). 다양한 실시예들에 따르면, 제2 카메라가 구동만 되고, 제2 카메라로부터의 영상이 해당 영역(421)에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다.

이후, 듀얼 영상 리코딩 시작 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜) 등이 터치될 시(이하 직접 터치라 칭함)(441), 제1 카메라로부터의 제1 영상과 제2 카메라로부터의 제2 영상을 합성하여 리코딩을 시작한다(440).

이후, 듀얼 영상 리코딩 중지하기 위한 음성명령이 검출될 시(도시하지 않음), 듀얼 영상 리코딩을 중지하고 리코딩된 영상이 저장된다.

도 5는 본 발명의 제3 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면을 도시하고 있다.

도 5를 참조하면, 초기 제1 카메라 및 제2 카메라는 모두 오프상태(550, 560)에 있고(510), 이후 사진 애플리케이션이 실행될 때 제1 카메라는 켜지고 제2 카메라는 오프 상태를 유지한다(520). 이때, 제1 카메라로부터의 영상을 화면에 표시되고, 더하여, 제2 카메라로부터의 영상이 위치할 영역(521)이 표시할 수 있다. 550은 제1 카메라 동작상태를 나타내는 표시이고 560은 제2 카메라 동작 상태를 나타내는 표시이다.

이후, 동작인식 센서를 통해 듀얼 영상 리코딩 시작 명령에 대응하는 특정 모션(예: 사용자가 전자장치를 한 손에 잡고 위아래로 흔드는 동작)이 검출될 시, 제2 카메라가 구동된 후, 제2 카메라로부터의 영상이 해당 영역(421)에 표시된다(530). 다양한 실시예들에 따르면, 제2 카메라가 구동만 되고, 제2 카메라로부터의 영상이 해당 영역(521)에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다. 여기서, 특정 모션은 전자장치 내의 동작인식 센서를 통해 검출될 수 있다.

다양한 실시예들에 따르면, 특정 동작은 다른 카메라를 통해 촬영된 사용자 동작을 인식하여 결정될 수도 있다.

이후, 듀얼 영상 리코딩 시작 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜) 등이 터치될 시(이하 직접 터치라 칭함)(541), 제1 카메라로부터의 제1 영상과 제2 카메라로부터의 제2 영상을 합성하여 리코딩을 시작한다(540).

이후, 듀얼 영상 리코딩 중지에 해당하는 특정 모션이 검출될 시(도시하지 않음), 듀얼 영상 리코딩을 중지하고 리코딩된 영상이 저장된다.

또 다른 구현에 있어서, 듀얼 영상 리코딩 중지 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜)이 터치될 시(도시하지 않음), 듀얼 영상 리코딩이 중지되고 리코딩된 영상이 저장된다.

도 6은 본 발명의 제4 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 도면을 도시하고 있다.

도 6을 참조하면, 초기 제1 카메라 및 제2 카메라는 모두 오프상태(650, 660)에 있고(610), 이후 사진 애플리케이션이 실행될 때 제1 카메라는 켜지고 제2 카메라는 오프 상태를 유지한다(620). 이때, 제1 카메라로부터의 영상을 화면에 표시되고, 더하여, 제2 카메라로부터의 영상이 위치할 영역(621)이 표시할 수 있다. 650은 제1 카메라 동작상태를 나타내는 표시이고 660은 제2 카메라 동작 상태를 나타내는 표시이다.

이후, 듀얼 영상 리코딩 시작 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜) 등이 제1 터치될 시(이하 제1 직접 터치라 칭함)(631), 제2 카메라가 구동된 후, 제2 카메라로부터의 영상이 해당 영역(621)에 표시된다(630). 다양한 실시예들에 따르면, 제2 카메라가 구동만 되고, 제2 카메라로부터의 영상이 해당 영역(621)에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다. 여기서, 특정 모션은 전자장치 내의 동작인식 센서를 통해 검출될 수 있다.

이후, 듀얼 영상 리코딩 시작 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜) 등이 제2 터치될 시(이하 제2 직접 터치라 칭함)(641), 제1 카메라로부터의 제1 영상과 제2 카메라로부터의 제2 영상을 합성하여 리코딩을 시작한다(640).

이후, 듀얼 영상 리코딩 중지 명령에 해당하는 셔터 객체에 사용자 손가락 또는 스타일러펜(또는 전자펜)이 터치될 시(도시하지 않음), 듀얼 영상 리코딩이 중지되고 리코딩된 영상이 저장된다.

도 7은 본 발명의 제1 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도를 도시하고 있다.

상기 도 7을 참조하면, 700동작에서 전자장치는 제1 카메라를 동작시키고 제2 카메라를 대기상태로 설정한다. 여기서, 대기상태의 제2 카메라는 전원이 공급되어야 구동할 수 있다.

이후, 전자장치는 702동작에서 제1 카메라로부터의 영상을 표시하고, 704동작에서 제1 카메라 셔터 터치가 감지될 시 706동작으로 진행하여 제1 카메라로부터의 영상을 리코딩을 시작한다.

이후, 708동작에서, 전자장치는 듀얼 영상 리코딩을 시작하기 위한 근접 터치(도 12의 (a) 또는 도 13의 (a) 참조)를 검출하고, 710동작에서 근접 터치가 검출될 시 제2 카메라를 활성화하고, 712동작에서 제2 카메라로부터의 영상이 해당 영역에 표시한다. 다양한 실시예들에 따르면, 제2 카메라가 구동하되, 제2 카메라로부터의 영상이 해당 영역에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다.

이후, 714동작에서, 제2 카메라 셔터의 직접 터치가 검출될 시, 716동작으로 진행하여 제2 카메라로부터의 영상에 대해 리코딩을 시작한다.

이후, 718동작에서 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 저장한다.

도 7에서 제1 카메라로부터의 영상을 리코딩 시작 이후에, 듀얼 영상 리코딩이 시작될 수도 있지만, 다양한 실시예들에 따르면, 제1 카메라로부터의 영상을 리코딩을 시작하지 않고 듀얼 영상 리코딩을 시작할 수 있다. 예를 들어, 제1 카메라로부터의 영상을 표시하는 동안에, 근접 터치시 제1 카메라를 구동하여 제2 카메라로부터의 영상을 표시한 후, 제1 및 제2 카메라로부터의 영상들이 PIP 기능으로 표시될 때 직접 터치를 통해 듀얼 영상 리코딩을 시작할 수 있다.

도 8은 본 발명의 제2 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도를 도시하고 있다.

상기 도 8을 참조하면, 800동작에서 전자장치는 제1 카메라를 동작시키고 제2 카메라를 대기상태로 설정한다. 여기서, 대기상태의 제2 카메라는 전원이 공급되어야 구동할 수 있다.

이후, 전자장치는 802동작에서 제1 카메라로부터의 영상을 표시하고, 804동작에서 제1 카메라 셔터 터치가 감지될 시 806동작으로 진행하여 제1 카메라로부터의 영상을 리코딩을 시작한다.

이후, 808동작에서, 전자장치는 듀얼 영상 리코딩을 시작하기 위한 음성명령을 검출하고, 810동작에서 듀얼 영상 리코딩 시작 명령에 대응하는 음성명령이 검출될 시 제2 카메라를 활성화하고, 812동작에서 제2 카메라로부터의 영상이 해당 영역에 표시한다. 다양한 실시예들에 따르면, 제2 카메라가 구동하되, 제2 카메라로부터의 영상이 해당 영역에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다.

이후, 814동작에서, 제2 카메라 셔터의 직접 터치가 검출될 시, 816동작으로 진행하여 제2 카메라로부터의 영상에 대해 리코딩을 시작한다.

이후, 818동작에서 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 저장한다.

도 8에서 제1 카메라로부터의 영상을 리코딩 시작 이후에, 듀얼 영상 리코딩이 시작될 수도 있지만, 또 따른 다양한 실시예들에 따르면, 제1 카메라로부터의 영상을 리코딩을 시작하지 않고 듀얼 영상 리코딩을 시작할 수 있다. 예를 들어, 제1 카메라로부터의 영상을 표시하는 동안에, 음성 명령이 검출될 시, 제1 카메라를 구동하여 제2 카메라로부터의 영상을 표시한 후, 제1 및 제2 카메라로부터의 영상들이 PIP 기능으로 표시될 때 직접 터치를 통해 듀얼 영상 리코딩을 시작할 수 있다.

도 9는 본 발명의 제3 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도를 도시하고 있다.

상기 도 9을 참조하면, 900동작에서 전자장치는 제1 카메라를 동작시키고 제2 카메라를 대기상태로 설정한다. 여기서, 대기상태의 제2 카메라는 전원이 공급되어야 구동할 수 있다.

이후, 전자장치는 902동작에서 제1 카메라로부터의 영상을 표시하고, 904동작에서 제1 카메라 셔터 터치가 감지될 시 906동작으로 진행하여 제1 카메라로부터의 영상을 리코딩을 시작한다.

이후, 908동작에서, 전자장치는 동작인식 센서를 통해 듀얼 영상 리코딩을 시작하기 위한 특정 동작을 검출하고, 810동작에서 듀얼 영상 리코딩 시작 명령에 대응하는 특정 동작이 검출될 시 제2 카메라를 활성화하고, 912동작에서 제2 카메라로부터의 영상이 해당 영역에 표시한다. 다양한 실시예들에 따르면, 제2 카메라가 구동하되, 제2 카메라로부터의 영상이 해당 영역에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다.

이후, 914동작에서, 제2 카메라 셔터의 직접 터치가 검출될 시, 916동작으로 진행하여 제2 카메라로부터의 영상에 대해 리코딩을 시작한다.

이후, 918동작에서 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 저장한다.

도 9에서 제1 카메라로부터의 영상을 리코딩 시작 이후에, 듀얼 영상 리코딩이 시작될 수도 있지만, 또 따른 다양한 실시예들에 따르면, 제1 카메라로부터의 영상을 리코딩을 시작하지 않고 듀얼 영상 리코딩을 시작할 수 있다. 예를 들어, 제1 카메라로부터의 영상을 표시하는 동안에, 동작인식 센서를 통해 특정 동작이 검출될 시, 제1 카메라를 구동하여 제2 카메라로부터의 영상을 표시한 후, 제1 및 제2 카메라로부터의 영상들이 PIP 기능으로 표시될 때 직접 터치를 통해 듀얼 영상 리코딩을 시작할 수 있다.

도 10은 본 발명의 제4 실시 예에 따른 듀얼 카메라를 포함한 휴대용 단말기에서 듀얼 리코딩을 제어하는 흐름도를 도시하고 있다.

상기 도 10을 참조하면, 1000동작에서 전자장치는 제1 카메라를 동작시키고 제2 카메라를 대기상태로 설정한다. 여기서, 대기상태의 제2 카메라는 전원이 공급되어야 구동할 수 있다.

이후, 전자장치는 1002동작에서 제1 카메라로부터의 영상을 표시하고, 1004동작에서 제1 카메라 셔터 터치가 감지될 시 906동작으로 진행하여 제1 카메라로부터의 영상을 리코딩을 시작한다.

이후, 1008동작에서, 전자장치는 듀얼 영상 리코딩을 시작하기 위한 제1 직접터치를 검출하고, 1010동작에서 듀얼 영상 리코딩 시작 명령에 대응하는 제1 직접 터치가 검출될 시 제2 카메라를 활성화하고, 1012동작에서 제2 카메라로부터의 영상이 해당 영역에 표시한다. 다양한 실시예들에 따르면, 제2 카메라가 구동하되, 제2 카메라로부터의 영상이 해당 영역에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있다.

이후, 1014동작에서, 제2 카메라 셔터의 제2 직접 터치가 검출될 시, 1016동작으로 진행하여 제2 카메라로부터의 영상에 대해 리코딩을 시작한다.

이후, 1018동작에서 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 저장한다.

도 10에서 제1 카메라로부터의 영상을 리코딩 시작 이후에, 듀얼 영상 리코딩이 시작될 수도 있지만, 또 따른 다양한 실시예들에 따르면, 제1 카메라로부터의 영상을 리코딩을 시작하지 않고 듀얼 영상 리코딩을 시작할 수 있다. 예를 들어, 제1 카메라로부터의 영상을 표시하는 동안에, 제1 직접 터치가 검출될 시, 제1 카메라를 구동하여 제2 카메라로부터의 영상을 표시한 후, 제1 및 제2 카메라로부터의 영상들이 PIP 기능으로 표시될 때 제2 직접 터치를 통해 듀얼 영상 리코딩을 시작할 수 있다.

상기와 같이 다수의 화면 영역을 이용한 다수의 이미지 처리 방법 및 장치의 구성 및 동작에 관한 다양한 실시예들이 본 명세서에 기재되었으나, 이외에도 추가의 다양한 실시예들이나, 여러 가지 변형 및 변경이 있을 수 있다. 예컨데, 본 명세서에서 기재된 각각의 동작들은 그 전체 또는 일부가 병렬적으로 동시에 수행되거나, 일부가 생략되거나, 다른 추가적인 동작들을 포함할 수 있다.

도 11은 본 발명의 실시 예에 따른 전자장치의 구성도를 도시하고 있다.

전자장치는, 휴대용 전자 장치(portable electronic device)일 수 있으며, 휴대용 단말기(portable terminal), 이동 단말기(mobile terminal), 이동 패드(mobile pad), 미디어 플레이어(media player), 태블릿 컴퓨터(tablet computer), 핸드헬드 컴퓨터(handheld computer) 또는 PDA(Personal Digital Assistant)와 같은 장치일 수 있다. 또한, 이러한 장치들 중 두 가지 이상의 기능을 결합한 장치를 포함하는 임의의 휴대용 전자 장치일 수도 있다.

상기 도 11을 참조하면, 전자장치는 제어기(1100), 스피커/마이크로폰(1110), 제1 이미지센서(1120), 제2 이미지센서(1125), GPS 수신기(1130), RF 처리기(1140), 센서모듈(1150), 터치스크린(1160), 터치스크린 제어기(1165), 확장 메모리(1170)를 포함하여 구성된다.

제어기(1100)는, 인터페이스(1101), 하나 이상의 프로세서(1102, 1103) 그리고 내부 메모리(604)를 포함할 수 있다. 경우에 따라서는, 제어기(600) 전체를 프로세서로 칭하기도 한다. 인터페이스(1101), 애플리케이션 프로세서(1102), 통신 프로세서(1103), 영상처리부(1105), 내부 메모리(1104)는 별개의 구성요소일 수 있거나 하나 이상의 집적화된 회로에 집적화될 수 있다.

영상처리부(1105)는 이미지 처리 프로세서(Image Signal Processor : ISP)로써, 제1 카메라(1120) 그리고 제2 카메라(1125)로부터의 출력데이터(예: 미가공 데이터(raw data))를 미리 정해진 규약의 포맷을 가지는 화상 프레임(RGB/YUV) 데이터로 변환하여 애플리케이션 프로세서(1102)로 제공한다.

애플리케이션 프로세서(1102)는 여러 가지의 소프트웨어 프로그램을 실행하여 전자장치를 위한 여러 기능을 수행하고 통신 프로세서(1103)는 음성 통신 및 데이터 통신을 위한 처리 및 제어를 수행한다. 또한, 이러한 통상적인 기능에 더하여, 프로세서(1102, 1103)는 확장 메모리(1170) 혹은 내부 메모리(1104)에 저장되어 있는 특정한 소프트웨어 모듈(명령어 세트)을 실행하여 그 모듈에 대응하는 특정한 여러 가지의 기능을 수행하는 역할도 한다. 즉, 프로세서(1102, 1103, 1105)는 확장 메모리(1170) 혹은 내부 메모리(1104)에 저장된 소프트웨어 모듈들과 연동하여 영상처리부(1105)로부터의 영상데이터를 듀얼 영상 리코딩을 제어한다.

예를 들어, 애플리케이션 프로세서(1102)가, 제1 카메라(1120)는 동작상태에 있고, 제2 카메라(1125)는 대기상태에 있을 때, 제1 카메라(1120)로부터의 영상을 표시하고, 제1 카메라 셔터 터치가 감지될 시 제1 카메라로부터의 영상을 리코딩을 시작하고, 듀얼 영상 리코딩을 시작하기 위한 제1 입력(예: 근접 터치, 음성명령, 직접 터치, 특정 모션)을 검출하고, 듀얼 영상 리코딩 시작 명령에 대응하는 제1 입력이 검출될 시, 제2 카메라를 활성화하고, 제2 카메라로부터의 영상이 해당 영역에 표시하고, 다양한 실시예들에 따르면, 제2 카메라가 구동하되, 제2 카메라로부터의 영상이 해당 영역에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있고, 제2 카메라 셔터의 제2 직접 터치가 검출될 시, 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 저장한다.

또는, 애플리케이션 프로세서(1102)는, 제1 카메라(1120)로부터의 영상을 리코딩 시작 이후에, 듀얼 영상 리코딩을 시작할 수도 있지만, 또 따른 다양한 실시예들에 따르면, 제1 카메라(1120)로부터의 영상을 리코딩을 시작하지 않고 듀얼 영상 리코딩을 시작할 수 있다. 예를 들어, 제1 이미지센서(1120)로부터의 영상을 표시하는 동안에, 제1 입력이 검출될 시, 제2 이미지센서(1125)를 구동하여 제2 카메라(1125)로부터의 영상을 표시한 후, 제1 및 제2 이미지센서(1120, 1125)로부터의 영상들이 PIP 기능으로 표시될 때 제2 입력을 통해 듀얼 영상 리코딩을 시작할 수 있다.

한편, 다른 프로세서(도시하지 않음)는 하나 이상의 데이터 프로세서, 이미지 프로세서, 또는 코덱을 포함할 수 있다. 데이터 프로세서, 이미지 프로세서 또는 코덱은 별도로 구성할 수도 있다. 또한, 서로 다른 기능을 수행하는 여러 개의 프로세서로 구성될 수도 있다. 인터페이스(601)는 전자장치의 터치 스크린 제어기(1165) 및 확장 메모리(1170)에 연결시킨다.

센서모듈(1150)은 인터페이스(601)에 결합되어 여러 가지 기능을 가능하게 할 수 있다. 예를 들어, 움직임 센서 및 광센서가 인터페이스(1101)에 결합되어 각각 전자 장치의 움직임 감지 및 외부로부터의 빛 감지를 가능하게 할 수 있다. 이외에도, 위치측정 시스템, 온도센서 또는 생체 센서 등과 같은 기타 센서들이 인터페이스(11010)에 연결되어 관련 기능들을 수행할 수 있다.

제1, 제2 이미지센서(1120, 1125)는 인터페이스(1101)를 통해 센서모듈(1150)과 결합하여, 사진 및 비디오 클립 레코딩과 같은 카메라 기능을 수행할 수 있다. 또한, 다른 실시 예에서, 제1, 제2 이미지센서(620, 625)는 전자장치와 별도로 분리되어 NFC(Near Field Communication]) 또는 WiFi Direct 등 무선연결을 이용하여 전자장치와 연결될 수도 있다.

더 자세하게는, 제1 이미지센서(1120)는 전자장치의 후면에 위치하고 제2 이미지센서(1125)는 전자장치의 전면에 위치한다. 더하여, 도시하지 않았지만, 전자장치는 광학부, 신호처리부등을 더 포함하여 구성될 수 있다. 상기 광학부는 메커 셔터(mecha-shutter), 모터 및 액추에이터에 의해 구동될 수도 있으며, 상기 액추에이터에 의해 주밍(zooming) 및 포커싱(focusing) 등의 동작을 수행할 수도 있다. 상기 광학부는 주변의 이미지를 촬영하며, 이미지센서는 상기 광학부에 의해 촬영되는 이미지를 감지하여 전기적인 신호로 변환한다. 여기서 상기 이미지 센서는 CMOS(Complemen-tary Metal Oxide Semiconductor) 또는 CCD(Charged Coupled Device) 센서가 될 수 있으며, 고해상도의 이미지 센서가 될 수 있다. 카메라의 이미지 센서는 글로벌 셔터(global shutter)를 내장할 수도 있다. 상기 글로벌 셔터는 센서에 내장된 메카셔터와 유사한 기능을 수행한다.

본 발명의 다양한 실시 예에서 상기 이미지 센서는 UHD(Ultra High Definition)급 이상의 이미지를 감지할 수 있는 센서가 될 수 있다. 그리고 상기 이미지 센서에서 감지되는 이미지는 신호처리부에서 통해 디지털 이미지로 변환되어 출력된다. 상기 복수의 카메라에서 출력데이터는 미가공 데이터(raw data)가 될 수 있다.

RF 처리기(1140)는 통신 기능이 수행된다. 예를 들어, 통신 프로세서(1103)의 제어하에 RF 신호를 기저대역 신호로 변환하여 통신 프로세서(1103)로 제공하거나 통신 프로세서(1103)로부터의 기저대역 신호를 RF 신호로 변환하여 송신한다. 여기서, 통신 프로세서(603)는 다양한 통신방식에 기저대역신호를 처리한다. 예를 들어, 통신방식은, 이들에 한정하지는 않지만, GSM(Global System for Mobile Communication) 통신방식, EDGE(Enhanced Data GSM Environment) 통신방식, CDMA(Code Division Multiple Access) 통신방식, W-CDMA(W-Code Division Multiple Access) 통신방식, LTE(Long Term Evolution) 통신방식, OFDMA(Orthogonal Frequency Division Multiple Access) 통신방식, Wi-Fi(Wireless Fidelity) 통신방식, WiMax 통신방식 또는/및 Bluetooth 통신방식을 포함할 수 있다.

스피커/마이크로폰(610)은 음성 인식, 음성 복제, 디지털 레코딩(recording) 및 전화 기능과 같은 오디오 스트림의 입력과 출력을 담당할 수 있다. 즉, 스피커/마이크로폰(610)은 음성신호를 전기신호로 변환하거나 전기신호를 음성신호로 변환한다. 도시하지 않았지만, 탈부착 가능한(attachable and detachable) 이어폰(ear phone), 헤드폰(head phone) 또는 헤드셋(head set)이 외부포트를 통해 전자장치에 연결될 수 있다.

터치스크린 제어기(1165)는 터치스크린(1160)에 결합될 수 있다. 터치스크린(1160) 및 터치 스크린 제어기(1165)는, 이하에 한정되지는 않지만, 터치스크린(1160)과의 하나 이상의 접촉점을 결정하기 위한 용량성, 저항성, 적외선 및 표면 음향파 기술들뿐만 아니라 기타 근접 센서 배열 또는 기타 요소들을 포함하는 임의의 멀티 터치 감지 기술을 이용하여 접촉 및 움직임 또는 이들의 중단을 검출할 수 있다.

터치스크린(1160)은 전자장치와 사용자 사이에 입력/출력 인터페이스를 제공한다. 즉, 터치스크린(1160)은 사용자의 터치입력을 전자 장치에 전달한다. 또한 전자 장치로부터의 출력을 사용자에게 보여주는 매개체이다. 즉, 터치스크린은 사용자에게 시각적인 출력을 보여준다. 이러한 시각적 출력(visual output)은 텍스트(text), 그래픽(graphic), 비디오(video)와 이들의 조합의 형태로 나타난다. 본 발명의 실시 예에서, 터치스크린(1160)은 제1, 제2 이미지센서(1120, 1125)에서 촬영되는 이미지들 및 촬영 중의 정보들을 표시한다.

터치스크린(11600)은 여러 가지 디스플레이가 사용될 수 있다. 예를 들면, 이에 한정하지는 않지만, LCD(liquid crystal display), LED(Light Emitting Diode), LPD(light emitting polymer display), OLED(Organic Light Emitting Diode), AMOLED(Active Matrix Organic Light Emitting Diode) 또는 FLED(Flexible LED)를 사용할 수 있다.

터치스크린은 사용자의 손가락을 이용하여 데이터를 입력하나, 최근에는 데이터 보조 입력 수단으로써 펜 형상의 입력 장치(일반적으로 '터치펜' 또는 "전자펜"이라 함)를 구비하고, 이러한 펜에 의해 데이터를 선택적으로 입력하는 펜 터치 패널(미도시함)이 더 추가될 수 있다. 펜 터치 패널은 도시되지 않았으나, 복수개의 X축 코일 어레이와 Y축 코일 어레이가 직교하도록 배치되어 있는 센서 PCB와 센서 PCB의 하부에 외부 전자파를 차단하도록 설치되는 쉴드 플레이트를 포함할 수 있다.

GPS 수신기(1130)는 인공위성으로부터 받은 신호를 위치, 속도, 시간 등의 정보로 변환한다. 예를 들어, 위성과 GPS 수신기간 거리는 빛의 속도와 신호도달 시간을 곱하면 계산되며, 3개 위성의 정확한 위치와 거리를 구하여 공지된 삼각측량의 원리로 전자장치의 위치가 측정된다.

확장 메모리(1170) 혹은 내부 메모리(1104)는 하나 이상의 자기 디스크 저장 장치와 같은 고속 랜덤 액세스 메모리 및/또는 비휘발성 메모리, 하나 이상의 광 저장 장치 및/또는 플래시 메모리(예컨대, NAND(Negative AND), NOR(Negative OR))를 포함할 수 있다.

확장 메모리(1170) 혹은 내부 메모리(1104)는 소프트웨어를 저장한다. 소프트웨어 구성요소는 운영 체제(operating system) 소프트웨어 모듈, 통신 소프트웨어 모듈, 그래픽 소프트웨어 모듈, 사용자 인터페이스 소프트웨어 모듈 및 MPEG 모듈, 카메라 소프트웨어 모듈, 하나 이상의 애플리케이션 소프트웨어 모듈 등을 포함한다. 또한, 소프트웨어 구성요소인 모듈은 명령어들의 집합으로 표현할 수 있으므로, 모듈을 명령어 세트(instruction set)라고 표현하기도 한다. 모듈은 또한 프로그램으로 표현하기도 한다.

본 발명에 더하여, 확장 메모리(1170)는 제1 카메라(1120) 및 제2 카메라(1225)로부터 촬영되는 이미지 또는 촬영되는 동영상을 저장할 수 있다.

운영 체제 소프트웨어는 일반적인 시스템 동작(system operation)을 제어하는 여러 가지의 소프트웨어 구성요소를 포함한다. 이러한 일반적인 시스템 작동의 제어는, 예를 들면, 메모리 관리 및 제어, 저장 하드웨어(장치) 제어 및 관리, 전력 제어 및 관리 등을 의미한다. 이러한 운영 체제 소프트웨어는 여러 가지의 하드웨어(장치)와 소프트웨어 구성요소(모듈) 사이의 통신을 원활하게 하는 기능도 수행한다.

통신 소프트웨어 모듈은, RF 처리기(1140)를 통해 컴퓨터, 서버 및/또는 휴대용 단말기 등 다른 전자 장치와 통신을 가능하게 할 수 있다. 그리고, 통신 소프트웨어 모듈은, 해당 통신방식에 해당하는 프로토콜 구조로 구성된다.

그래픽 소프트웨어 모듈은 터치스크린(1160) 상에 그래픽을 제공하고 표시하기 위한 여러 가지 소프트웨어 구성요소를 포함한다. 그래픽(graphics)이란 용어는 텍스트(text), 웹 페이지(web page), 아이콘(icon), 디지털 이미지(digital image), 비디오(video), 애니메이션(animation) 등을 포함하는 의미로 사용된다.

사용자 인터페이스 소프트웨어 모듈은 사용자 인터페이스에 관련한 여러 가지 소프트웨어 구성요소를 포함한다. 사용자 인터페이스의 상태가 어떻게 변경되는지 또는 사용자 인터페이스 상태의 변경이 어떤 조건에서 이루어지는지 등에 대한 내용을 포함한다.

카메라 소프트웨어 모듈은 카메라 관련 프로세스 및 기능들을 가능하게 하는 카메라 관련 소프트웨어 구성요소를 포함한다. 애플리케이션 모듈은 렌더링 엔진을 포함하는 웹브라우저(browser), 이메일(email), 즉석 메시지(instant message), 워드 프로세싱(word processing), 키보드 에뮬레이션(keyboard emulation), 어드레스 북(address book), 접촉 리스트(touch list), 위젯(widget), 디지털 저작권 관리(DRM, Digital Right Management), 음성 인식(voice recognition), 음성 복제, 위치 결정 기능(position determining function), 위치기반 서비스(location based service) 등을 포함한다. 메모리(670, 604)는 위에서 기술한 모듈 이외에 추가적인 모듈(명령어들)을 포함할 수 있다. 또는, 필요에 따라, 일부의 모듈(명령어들)을 사용하지 않을 수 있다.

본 발명에 관련하여, 애플리케이션 모듈은 듀얼 영상 리코딩을 제어하기 위한 명령어들(상기 도 7 내지 도 10 참조)을 포함한다.

예를 들어, 애플리케이션 모듈은, 제1 카메라(1120)는 동작상태에 있고, 제2 카메라(1125)는 대기상태에 있을 때, 제1 카메라(1120)로부터의 영상을 표시하고, 제1 카메라 셔터 터치가 감지될 시 제1 카메라로부터의 영상을 리코딩을 시작하고, 듀얼 영상 리코딩을 시작하기 위한 제1 입력(예: 근접 터치, 음성명령, 직접 터치, 특정 모션)을 검출하고, 듀얼 영상 리코딩 시작 명령에 대응하는 제1 입력이 검출될 시, 제2 카메라를 활성화하고, 제2 카메라로부터의 영상이 해당 영역에 표시하고, 다양한 실시예들에 따르면, 제2 카메라가 구동하되, 제2 카메라로부터의 영상이 해당 영역에 표시되지 않고 제2 카메라로부터의 영상이 위치를 확인할 수 있는 프레임만 표시될 수 있고, 제2 카메라 셔터의 제2 직접 터치가 검출될 시, 제1 카메라 및 제2 카메라로부터의 영상들을 합성하여 저장하는 명령어를 포함한다.

또는, 애플리케이션 모듈은, 제1 카메라(1120)로부터의 영상을 리코딩 시작 이후에, 듀얼 영상 리코딩을 시작할 수도 있지만, 또 따른 다양한 실시예들에 따르면, 제1 카메라(1120)로부터의 영상을 리코딩을 시작하지 않고 듀얼 영상 리코딩을 시작하는 명령어를 포함한다. 예를 들어, 제1 카메라(1120)로부터의 영상을 표시하는 동안에, 제1 입력이 검출될 시, 제2 카메라(1125)를 구동하여 제2 카메라(1125)로부터의 영상을 표시한 후, 제1 및 제2 이미지센서(1120, 1125)로부터의 영상들이 PIP 기능으로 표시될 때 제2 입력을 통해 듀얼 영상 리코딩을 시작할 수 있다.

또한, 위에서 언급한, 그리고 이하에서 언급할, 본 발명에 따른 전자장치의 다양한 기능들은 하나 이상의 프로세싱(processing) 및/또는 애플리케이션 특정 집적 회로(ASIC, Application Specific Integrated circuit)를 포함하는 하드웨어 및/또는 소프트웨어 및/또는 이들의 결합으로 실행될 수 있다.

도 12 (a) 내지 (b)는 본 발명의 제1 실시 예에 따른 근접 터치와 직접 터치를 설명하기 위한 도면을 도시하고 있다.

도 12 (a)은 근접 터치를 도시하고 있다. 근접 터치는 사용자가, 손가락(1200)으로 터치스크린(1210)의 듀얼 영상 시작 리코딩 실행 버튼(1220)을 터치하지 전에, 터치스크린(1210)과 손가락(1200) 사이의 일정거리(1230) 범위 내에서 터치를 의미한다. 또 다른 용어로써, 호버링이라고도 한다.

도 12 (b)은 직접 터치를 도시하고 있다. 직접 터치는 터치스크린(1210)의 특정영역(예: 듀얼 영상 시작 리코딩 실행 버튼(1220))에 손가락(1200)이 접촉(1250)되어 있는 상태를 의미한다.

도 13 (a) 내지 (b)는 본 발명의 제2 실시 예에 따른 근접 터치와 직접 터치를 설명하기 위한 도면을 도시하고 있다.

도 13 (a)는 근접 터치를 도시하고 있다. 근접 터치는 터치펜(1300)으로 펜 터치 패널(1310)에 표시되는 미듀얼 영상 시작 리코딩 실행 버튼(1320)을 터치하지 전에, 펜 터치패널(1310)과 터치펜(1300) 사이의 일정거리(1330) 범위 내에서 터치를 의미한다. 또 다른 용어로써, 호버링이라고도 한다.

도 13 (b)는 직접 터치를 도시하고 있다. 직접 터치는 펜 터치 패널(1310)의 특정영역(예: 듀얼 영상 시작 리코딩 실행 버튼(1320))에 터치펜(1300)이 접촉(1350)되어 있는 상태를 의미한다.

한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.

200: 제1 영상 210: 제1 카메라의 셔터,
220: 제1 카메라의 셔터, 230: 제2 영상이 디스플레이되는 영역,
1100: 제어기 1101: 인터페이스,
1102: 애플리케이션 프로세서 1103: 통신 프로세서,
1140: RF 처리기, 1170: 확장 메모리.

Claims

전자 장치를 이용한 이미지 처리 방법에 있어서,
상기 전자 장치의 제1 이미지 센서와 제2 이미지 센서가 오프된 상태에서, 제1 입력이 검출되면, 상기 제1 이미지 센서를 턴 온하고;
상기 전자 장치의 디스플레이에, 상기 제1 이미지 센서로부터 획득되는 제1 이미지를 표시하고;
상기 제1 이미지 상에, 상기 제2 이미지 센서로부터 획득 가능한 제2 이미지의 삽입을 위한 프레임을 표시하되, 상기 프레임에는 상기 제2 이미지를 표시하지 않고;
제2 입력이 검출되면, 상기 제2 이미지 센서를 턴 온하고;
상기 제1 이미지 상의 상기 프레임에 상기 제2 이미지 센서로부터 획득된 제2 이미지를 표시하는 이미지 처리 방법.
제1항에 있어서,
제3 입력이 검출되면, 상기 디스플레이에 프리뷰 이미지로 표시되는 상기 제1 이미지 및 상기 제2 이미지를 리코딩하고,
상기 제3 입력은 상기 제1 이미지 및 상기 제2 이미지의 리코딩을 시작하기 위한 입력을 포함하는 이미지 처리 방법.
제1항에 있어서,
상기 제2 이미지 센서는 상기 제2 입력이 검출되면, 대기 상태에서 동작 상태로 전환하도록 구성되는 이미지 처리 방법.
제3항에 있어서,
상기 제2 입력은 호버링 입력, 음성명령 입력, 특정 모션 입력 또는 직접 터치 입력 중 하나인 것을 포함하는 이미지 처리 방법.
제4항에 있어서,
상기 특정 모션은 동작인식 센서 또는 다른 제3 이미지센서로부터 입력되는 것을 포함하는 이미지 처리 방법.
제1항에 있어서
상기 디스플레이의 화면을 적어도 제1 화면과 제2 화면으로 분할하고, 각각 상기 제1 이미지의 적어도 일부를 상기 제1 화면에 표시하고, 상기 제2 이미지의 적어도 일부를 상기 제2 화면에 중첩되지 않게 표시하는 동작을 더 포함하는 이미지 처리 방법.
제1항에 있어서,
상기 제1 이미지센서는 상기 전자장치의 한쪽 면에 위치하고,
상기 제2 이미지센서는 상기 전자장치의 다른 면에 위치하는 것을 포함하는 이미지 처리 방법.
제1 이미지를 획득하도록 구성된 제1 이미지 센서;
제2 이미지를 획득하도록 구성된 제2 이미지 센서;
상기 제1 이미지 및 상기 제2 이미지 중 적어도 하나를 표시하도록 구성된 디스플레이;
이미지 정보를 저장하도록 구성된 적어도 하나의 메모리; 및
적어도 하나의 프로세서를 포함하되, 상기 적어도 하나의 프로세서는,
상기 제1 이미지 센서와 상기 제2 이미지 센서가 오프된 상태에서, 제1 입력을 검출하고;
상기 제2 이미지 센서가 오프 상태인 동안,
상기 제1 입력이 검출되면, 상기 제1 이미지 센서를 턴 온 하고;
상기 디스플레이가 상기 제1 이미지 센서로부터 획득되는 제1 이미지를 표시하도록 상기 디스플레이를 제어하고;
상기 디스플레이가 상기 제1 이미지 상에, 상기 제2 이미지 센서로부터 획득 가능한 제2 이미지의 삽입을 위한 프레임을 표시하되, 상기 프레임에는 상기 제2 이미지를 표시하지 않도록 상기 디스플레이를 제어하고;
제2 입력이 검출되면, 상기 제2 이미지 센서를 턴 온하고;
상기 디스플레이가 상기 제1 이미지 상의 상기 프레임에 상기 제2 이미지 센서로부터 획득된 제2 이미지를 표시하도록 상기 디스플레이를 제어하는 전자 장치.
제8항에 있어서,
상기 제2 이미지 센서는 상기 제2 입력이 검출되면, 대기 상태에서 동작 상태로 전환하도록 구성되는 전자 장치.
제9항에 있어서,
상기 제2 입력은 호버링 입력, 음성명령 입력, 특정 모션 입력 또는 직접 터치 입력 중 하나인 것을 포함하는 전자 장치.
삭제
제10항에 있어서,
상기 프로세서는,
제3 입력이 검출되면, 상기 디스플레이에 프리뷰 이미지로 표시되는 상기 제1 이미지 및 상기 제2 이미지를 리코딩하고,
상기 제3 입력은 상기 제1 이미지 및 상기 제2 이미지의 리코딩을 시작하기 위한 입력을 포함하는 전자 장치.
삭제
삭제
제10항에 있어서,
상기 특정 모션은 동작인식 센서 또는 다른 제3 이미지센서로부터 입력되는 것을 포함하는 전자 장치.
제8항에 있어서,
상기 프로세서는,
상기 디스플레이의 화면을 적어도 제 1 화면과 제 2 화면으로 분할하고, 상기 제1 이미지의 적어도 일부를 상기 제 1 화면에 표시하고, 상기 제2 이미지의 적어도 일부를 상기 제 2 화면에 중첩되지 않게 표시하도록 제어하는 전자 장치.
제8항에 있어서,
상기 제1 이미지 센서는 상기 전자장치의 한쪽 면에 위치하고,
상기 제2 이미지 센서는 상기 전자장치의 다른 면에 위치하는 것을 포함하는 전자 장치.
삭제
삭제