KR20150009744A - 투명 플렉서블 디스플레이를 이용하는 이동 단말기의 사용자 인터페이스 제공 방법 - Google Patents

Abstract

투명 플렉서블 디스플레이를 이용하는 이동 단말기의 사용자 인터페이스 제공 방법이 개시된다. 제어부는 제1 이미지를 획득한다. 제어부는 상기 제1 이미지에서 다른 오브젝트들과 분리될 분리 오브젝트를 결정한다. 제어부는 상기 제1 이미지를 상기 분리 오브젝트를 포함하는 제1 레이어와 상기 분리 오브젝트가 제외된 제2 레이어로 분리한다. 제어부는 상기 제1 레이어를 제1 디스플레이 영역에 표시하고 상기 제2 레이어를 제2 디스플레이 영역에 표시한다, 상기 제1 디스플레이 영역은 상기 투명 플렉서블 디스플레이의 휨을 통해 구분되는 2개의 디스플레이 영역 중에서 상기 분리 오브젝트 선택을 위한 터치 입력이 수신되는 디스플레이 영역이다. 상기 제2 디스플레이 영역은 상기 2개의 디스플레이 영역 중에서 또 다른 하나에 해당하는 영역이다.

Description

투명 플렉서블 디스플레이를 이용하는 이동 단말기의 사용자 인터페이스 제공 방법{METHOD FOR PROVIDING USER INTERFACE OF MOBILE TERMINAL USING TRANSPARENT FLEXIBLE DISPLAY}

본 발명은 사용자 인터페이스 제공 방법에 관한 것으로, 특히 투명 플렉서블 디스플레이를 이용하는 이동 단말기의 사용자 인터페이스 제공 방법에 관한 것이다.

최근 이동 단말기들이 다기능화, 집적화됨에 따라 사용자들이 새로 익혀야 하는 사용자 인터페이스들도 많아지고 있다. 이에 따라 이동 단말기의 품질과 사용 편의성과 관련하여 가장 중요한 요소로 평가되는 것은 입력 장치의 특성과 이동 단말기의 기능에 따라 얼마나 더 직관적인 사용자 인터페이스를 사용자들에게 제공하냐는 것이다. 즉, 사용자들이 그 동안의 경험이나 지식을 토대로 이동 단말기에 대한 추가적인 설명을 듣지 않고도 직관적으로 이동 단말기를 사용할 수 있는가가 중요하다. 따라서 직관적이며 편리한 사용자 인터페이스를 제공하기 위해 이동 단말기 제조사들은 많은 노력을 기울이고 있다.

플렉서블 디스플레이(flexible display)는 최근에 이동 단말기에 사용 되는 기존의 디스플레이들을 대체할 것으로 주목 받고 있다. 플렉서블 디스플레이란, 휘어질 수 있는 디스플레이 장치를 뜻한다. 플렉서블 디스플레이는 기존 LCD 및 유기 발광 다이오드(OLED)에서 액정을 싸고 있는 유리기판을 플라스틱 필름으로 대체, 접고 펼 수 있는 유연성을 부여한 것 이다. 플렉서블 디스플레이는 얇고 가벼울 뿐만 아니라 충격에도 강하다. 또한 플렉서블 디스플레이는 휘거나 굽힐 수 있고 다양한 형태로 제작이 가능하다는 장점을 갖고 있다.

또한 후방의 객체가 보이는 한편 디스플레이가 가능한 투명 디스플레이 장치도 활발하게 연구되고 있다. 이러한 투명 디스플레이 장치는 자동차의 전면 유리나 가정용 유리 등에 적용되어 사용자에게 원하는 정보를 제공해 줄 수 있는 장점이 있다.

플렉서블 디스플레이와 투명 디스플레이의 특성을 모두 가지는 투명 플렉서블 디스플레이가 이동 단말기에 사용된다면, 이동 단말기는 투명 플렉서블 디스플레이의 특성을 이용한 직관적인 사용자 인터페이스를 사용자에게 제공할 필요가 있다. 따라서 이동 단말기는 종래의 사용자 인터페이스와는 다른 사용자 인터페이스를 제공할 필요가 있다.

본 발명의 한 실시예는 투명 플렉서블 디스플레이를 이용하는 이동 단말기에서 투명 플렉서블 디스플레이의 특성을 이용한 직관적인 사용자 인터페이스를 제공하는 것이다.

본 발명의 일 실시예에 따르는 투명 플렉서블 디스플레이를 이용하는 이동 단말기의 사용자 인터페이스 제공 방법은 제1 이미지를 획득하는 단계; 상기 제1 이미지에서 다른 오브젝트들과 분리될 분리 오브젝트를 결정하는 단계; 상기 제1 이미지를 상기 분리 오브젝트를 포함하는 제1 레이어와 상기 분리 오브젝트가 제외된 제2 레이어로 분리하는 단계; 및 상기 제1 레이어를 제1 디스플레이 영역에 표시하고 상기 제2 레이어를 제2 디스플레이 영역에 표시하는 단계를 포함하고, 상기 제1 디스플레이 영역은 상기 투명 플렉서블 디스플레이의 휨을 통해 구분되는 2개의 디스플레이 영역 중에서 상기 분리 오브젝트 선택을 위한 터치 입력이 수신되는 디스플레이 영역이고, 상기 제2 디스플레이 영역은 상기 2개의 디스플레이 영역 중에서 또 다른 하나에 해당하는 영역이다.

본 발명의 한 실시예에 따른 사용자 인터페이스는 투명 플렉서블 디스플레이의 특성과 이동 단말기 기능의 특징을 연결하는 직관적이면서도 편리한 사용자 인터페이스를 제공한다.

도 1은 본 발명의 한 실시예에 따른 이동 단말기를 보여주는 블록도이다.
도 2는 본 발명의 한 실시예에 따른 투명 플렉서블 디스플레이를 이용하는 이동 단말기를 보여준다.
도 3은 본 발명의 한 실시예에 따른 사용자 인터페이스 제공 방법을 설명하는 흐름도이다.
도 4는 본 발명의 한 실시예에 따라 제어부가 제1 이미지에서 분리 오브젝트를 포함하는 제2 레이어를 분리하는 것을 보여준다.
도 5는 본 발명의 한 실시예에 따라 플렉서블 디스플레이의 휘어진 정도에 따라 제어부가 촬영의 아웃 포커스의 심도를 변경하는 것을 보여준다.
도 6은 본 발명의 한 실시예에 따라 제어부가 사용자 입력에 기초하여 제1 디스플레이 영역에 디스플레이 되는 오브젝트를 확대하는 것을 보여준다.
도 7은 본 발명의 한 실시예에 따라 제어부가 제1 디스플레이 영역에 디스플레이되는 제1 레이어를 새로운 이미지로 교체하는 것을 보여준다.
도 8은 본 발명의 한 실시예에 따라 제어부가 제1 디스플레이 영역에 새로운 레이어를 추가하는 것을 보여준다.
도 9는 본 발명의 한 실시예에 따라 제어부가 레이어별로 촬영 속도를 달리하여 동영상 촬영하는 것을 보여준다.
도 10은 본 발명의 한 실시예에 따라 제어부가 후면 카메라를 통해 촬영한 이미지는 제1 디스플레이 영역에 표시하고 전면 카메라를 통해 촬영한 이미지는 제2 디스플레이 영역에 표시하는 것을 보여준다.
도 11은 본 발명의 한 실시예에 따라 제어부가 제1 디스플레이 영역에 메뉴 화면을 표시하는 것을 보여준다.
도 12는 사용자의 눈이 투명 플렉서블 디스플레이를 통하여 풍경을 인식하는 것을 보여준다.
도 13은 본 발명의 또 다른 실시예에 따라 파노라마 촬영의 동작을 설명하는 흐름도이다.
도 14는 본 발명의 또 다른 실시예에 딸라 파노라마 촬영시 촬영 범위를 선택하는 것을 보여준다.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.

또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.

도 1은 본 발명의 한 실시예에 따른 이동 단말기를 보여주는 블록도이다.

이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기가 구현될 수도 있다.

이하, 이동 단말기(100) 구성요소들에 대해 차례로 살펴본다.

무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 사이 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.

방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다.

상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.

상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.

상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.

상기 방송 수신 모듈(111)은, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.

방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.

이동통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 신호, 화상 통화 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.

무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.

근거리 통신 모듈(114)은 근거리 통신을 위한 모듈이다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.

위치정보 모듈(115)은 이동 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다.

도 1을 참조하면, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.

카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.

마이크(122)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.

사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.

센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기(100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등을 센싱할 수도 있다. 한편, 센싱부(140)는 근접 센서(141)를 포함할 수 있다. 또한 센싱부(140)는 휘어짐 센서(143)도 포함할 수 있다. 휘어짐 센서(143)는 휘어짐을 검출하고 휘어진 방향, 휘어진 위치, 휘어짐 지속 시간 및 휘어진 정도 등을 검출할 수 있다. 휘어짐 센서(143)는 움직임 센서, 압력 센서, 온도 센서, 장력 센서, 전류 센서, 촉각 센서, 기울기 센서, RF 센서, 및 적외선 센서를 포함할 수 있다.

출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(151), 음향 출력 모듈(152), 알람부(153), 및 햅틱 모듈(154) 등이 포함될 수 있다.

디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.

디스플레이부(151)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 본 발명에서 디스플레이부(151)는 플렉서블 디스플레이(flexible display)를 포함한다.

이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 TOLED(Transparant OLED) 등이 있다. 디스플레이부(151)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(151)가 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.

이동 단말기(100)의 구현 형태에 따라 디스플레이부(151)이 2개 이상 존재할 수 있다. 예를 들어, 이동 단말기(100)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.

디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.

터치 센서는 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.

터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.

도 1을 참조하면, 상기 터치스크린에 의해 감싸지는 이동 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 근접 센서(141)가 배치될 수 있다. 상기 근접 센서(141)는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서이다. 근접 센서(141)는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.

상기 근접 센서(141)의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.

이하에서는 설명의 편의를 위해, 상기 터치스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 칭하고, 상기 터치스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 칭한다. 상기 터치스크린 상에서 포인터로 근접 터치가 되는 위치라 함은, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치스크린에 대해 수직으로 대응되는 위치를 의미한다.

상기 근접센서는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 터치 스크린상에 출력될 수 있다.

음향 출력 모듈(152)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(152)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.

알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(153)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(151)나 음성 출력 모듈(152)을 통해서도 출력될 수 있어서, 그들(151,152)은 알람부(153)의 일부로 분류될 수도 있다.

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.

햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.

햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 휴대 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다.

메모리(160)는 제어부(180)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 상기 메모리(160)는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.

메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.

인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 이동 단말기(100) 내부의 각 구성 요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(170)에 포함될 수 있다.

식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identity Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다.

상기 인터페이스부는 이동단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동단말기로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동단말기가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.

제어부(controller, 180)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.

상기 제어부(180)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.

전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.

여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다.

소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.

도 2는 본 발명의 한 실시예에 따른 투명 플렉서블 디스플레이를 이용하는 이동 단말기를 보여준다.

투명 플렉서블 디스플레이를 이용하는 이동 단말기(100)의 디스플레이부(151)는 도 2의 (a)와 도 2의 (b)에서와 같이 휘어질 수 있다. 이때 이동 단말기(100)의 디스플레이 영역은 디스플레이부(151)가 휘어짐에 따라 2개의 영역으로 구분된다. 이때 분리 오브젝트의 선택 등 이동 단말기(100)의 조작을 위한 사용자의 터치 입력이 수신되는 디스플레이 영역을 제2 디스플레이 영역(400)이라 하고 이외의 디스플레이 영역을 제1 디스플레이 영역(300)이라한다. 분리 오브젝트에 대해서는 하기에서 자세히 설명하도록 한다. 도 2의 (a)와 (b)의 도면은 사용자가 정면에서 바라본 이동 단말기(100)를 도시한 것이고 도 2의 (a)와 (b)의 실시예에서 사용자는 자신과 근거리에 있는 디스플레이 영역을 터치한 것이다. 따라서 사용자와 근거리에 있는 디스플레이 영역이 제2 디스플레이 영역(400)이다.

본 발명의 플렉서블 디스플레이는 투명한 재질이 사용된 투명 플렉서블 디스플레이이므로 도 2와 같이 휘어진 상태에서 제1 디스플레이 영역(300)과 제2 디스플레이 영역(400)은 겹쳐 보인다. 따라서 플렉서블 디스플레이가 휘어질때 하나의 이미지를 두 개의 레이어로 분리하여 분리된 레이어를 제1 디스플레이 영역과 제2 디스플레이 영역에 각각 디스플레이하는 경우, 이동 단말기(100)는 하나의 디스플레이 영역에 두 개의 그래픽 레이어가 오버레이(overlay)되어서 표시되는 것 같은 시각적 효과를 발생시킨다. 또한 실제 제1 디스플레이 영역(300)과 제2 디스플레이 영역(400)은 다른 공간에 위치하므로 이동 단말기(100)는 하나의 디스플레이에 두 개의 레이어가 오버레이될 때에는 발생하지 않는 입체감 있는 시각적 효과를 발생시킨다. 본 발명의 이동 단말기(100)는 이러한 투명 플렉서블 디스플레이의 특성을 이용하는 카메라 사용자 인터페이스를 제공한다.

도 3은 본 발명의 한 실시예에 따른 사용자 인터페이스 제공 방법을 설명하는 흐름도이다.

휘어짐 센서(143)는 플렉서블 디스플레이의 휘어짐을 검출한다(S101). 본 발명은 플렉서블 디스플레이가 휘어져서 제1 디스플레이 영역(300)과 제2 디스플레이 영역(400)이 겹쳐 보이는 경우에 적용 가능하므로 휘어짐 센서(143)는 플렉서블 디스플레이의 휘어짐을 검출한다.

제어부(180)는 제1 이미지를 획득한다(S102). 이때 한 실시예에서 제어부(180)는 제1 이미지를 카메라의 촬영을 통하여 실시간으로 획득할 수 있다. 특히 제1 이미지는 후면 카메라를 통하여 촬영한 이미지와 전면 카메라를 통하여 촬영한 이미지를 모두 포함할 수 있다. 또 다른 실시예에서 제어부(180)는 이동 단말기의 메모리(150)에 저장된 이미지를 읽어 들여 제1 이미지를 획득할 수 있다. 제1 이미지는 정지영상 또는 동영상일 수 있다. 또한 제1 이미지는 사진 촬영 또는 동영상 촬영시 사용자의 편의를 위해 이동 단말기(100)가 제공하는 프리뷰 화면일 수 있다. 따라서 본 발명의 실시예는 촬영 효과를 결정하고 결정된 촬영 효과에 따라 촬영하여 새로운 이미지를 생성하는 실시예와 저장된 이미지를 읽어 들인 후 결정된 촬영 효과에 따라 편집하여 새로운 이미지를 생성하는 실시예를 포함한다.

제어부(180)는 제1 이미지에서 다른 오브젝트들과 분리될 분리 오브젝트를 결정한다(S103). 오브젝트는 이미지의 일부로서 사물 또는 인물일 수 있고 사물 또는 인물의 일부일 수도 있다. 분리 오브젝트는 제어부(180)가 제1 이미지를 복수의 레이어로 분리하면서 제1 이미지의 다른 오브젝트들과 분리되는 오브젝트이다. 구체적인 실시예에서 제어부(180)는 사용자로부터 입력을 획득하고 사용자의 입력에 기초하여 분리 오브젝트를 결정할 수 있다. 이때 사용자의 입력은 터치 입력일 수 있다. 구체적으로 사용자는 터치 입력으로 이미지의 영역을 선택하여 분리 오브젝트를 지정할 수 있다. 또 다른 구체적인 실시예에서 제어부(180)는 인물 인식 알고리즘을 사용하여 제1 이미지에서 인물들을 인식할 수 있고 제어부(180)는 인식된 인물들을 분리 오브젝트로 결정할 수 있다. 또 다른 구체적인 실시예에서 이동 단말기(100)가 제1 카메라와 제2 카메라를 포함하고 제1 카메라와 제2 카메라를 통해 촬영한 이미지를 합성하는 경우, 제어부(180)는 제1 카메라 또는 제2 카메라를 통해 촬영된 이미지 전체를 분리 오브젝트로 결정할 수 있다.

제어부(180)는 제1 이미지에서 결정된 분리 오브젝트에 기초하여 제1 이미지를 제1 레이어와 제2 레이어로 분리한다(S105). 제어부(180)는 제1 이미지에서 분리 오브젝트를 제외한 나머지 이미지를 제1 레이어로 생성할 수 있다. 제어부(180)는 제1 이미지에서 분리 오브젝트를 포함하는 제2 레이어를 생성할 수 있다. 구체적인 실시예에 따라서 제어부(180)는 제1 이미지에서 사용자가 터치 입력한 영역에 대응하는 오브젝트를 포함하는 제2 레이어를 생성할 수 있다. 또 다른 구체적인 실시예에서 제어부(180)는 인물인식 알고리즘에 의하여 인식된 인물들을 포함하는 제2 레이어를 생성할 수 있다. 또 다른 구체적인 실시예에서 이동 단말기(100)는 제1 카메라와 제2 카메라를 포함하고 제1 카메라와 제2 카메라는 서로 다른 방향을 촬영할 수 있다. 이때 제어부(180)는 제2 카메라를 통하여 촬영된 이미지를 포함하는 제2 레이어를 생성할 수 있다. 따라서 제1 레이어는 제1 카메라를 통해 촬영한 이미지이고 제2 레이어는 제2 카메라를 통해 촬영한 이미지일 수 있다.

제어부(180)는 제1 레이어를 제1 디스플레이 영역(300)에 표시하고 제2 레이어를 제2 디스플레이 영역(400)에 표시한다(S106). 제어부(180)는 제2 이미지를 제1 디스플레이 영역과 제2 디스플레이 영역으로 나누어 디스플레이한다. 따라서 이동 단말기(100)는 사용자에게 입체감 있는 디스플레이를 제공할 수 있다. 또한 사용자가 특정 오브젝트에 대해서만 촬영 효과를 적용 하려는 경우, 사용자는 촬영 효과가 적용되는 오브젝트를 명확히 구별할 수 있다.

휘어짐 센서(143)는 플렉서블 디스플레이의 휘어진 정도를 검출한다(S107). 휘어진 정도는 제1 디스플레이 영역(300)과 제2 디스플레이 영역(400)간의 거리를 기초로 판단할 수 있다.

센싱부(140)는 플렉서블 디스플레이의 휘어짐 이외의 사용자 입력을 검출한다(S109). 구체적인 실시예에서 센싱부(140)는 사용자의 터치 입력을 검출할 수 있다. 또 다른 실시예에서 센싱부(140)는 버튼 입력을 검출할 수 있다.

제어부(180)는 플렉서블 디스플레이의 휘어진 정도 및 플렉서블 디스플레이의 휘어짐 이외의 사용자 입력 중 적어도 어느 하나에 기초하여 촬영 효과를 결정한다(S111). 제어부(180)는 촬영효과의 종류로 아웃 포커스(out focus), 엠보스(emboss) 필터, 고스트(ghost) 필터, 그레이스케일(grayscale) 필터, 세피아(sepia) 필터, 모션블러(motion blur) 필터, 스케치(sketch) 필터, 배경 이미지 합성, 레이어별 동영상 촬영 속도를 달리하여 촬영하는 것 및 확대 축소를 포함할 수 있다. 배경 이미지의 합성은 기존의 레이어를 새로운 배경 이미지로 교체하거나 새로운 배경 이미지를 기존의 레이어로 합성하는 것 중 적어도 어느 하나를 포함할 수 있다. 레이어별로 동영상 촬영 속도를 달리하는 것은 기준 시간당 촬영되는 프레임(frame)의 수를 레이어 별로 달리하여 특정 레이어에 포함된 오브젝트가 다른 레이어에 포함된 오브젝트 보다 매우 빠르게 움직이는 듯한 효과를 발생시키는 것이다.

구체적인 실시예에서 제어부(180)는 플렉서블 디스플레이의 휘어진 정도에 기초하여 촬영 효과를 결정할 수 있다. 제어부(180)는 플렉서블 디스플레이가 휘어진 정도를 촬영효과 테이블에 매칭하여 촬영 효과를 결정할 수 있다. 촬영 효과 테이블은 기울어진 정도에 각각 대응하는 복수의 촬영 효과를 포함할 수 있다.

또 다른 구체적인 실시예에서 제어부(180)는 터치 입력에 기초하여 촬영 효과를 결정할 수 있다. 구체적으로 제어부(180)는 적용 가능한 촬영 효과를 디스플레이할 수 있다. 특히 디스플레이부(151)의 측면을 터치할 경우 적용 가능한 촬영 효과를 디스플레이할 수 있다. 이에 대해서는 도 11을 통하여 자세히 설명하도록 한다. 이때 센싱부(140)는 디스플레이된 촬영 효과에 대응하는 디스플레이부(151)의 영역에 대한 터치 입력을 검출하고 제어부(180)는 터치 입력에 기초하여 촬영 효과를 결정할 수 있다. 또 다른 구체적인 실시예에서 제어부(180)는 버튼 입력에 기초하여 촬영 효과를 결정할 수 있다.

제어부(180)는 플렉서블 디스플레이의 휘어진 정도 및 플렉서블 디스플레이의 휘어짐 이외의 사용자 입력 중 적어도 어느 하나에 기초하여 촬영 효과의 파라미터를 결정한다(S113). 촬영 효과가 엠보스(emboss) 필터, 고스트(ghost) 필터, 그레이스케일(grayscale) 필터, 세피아(sepia) 필터, 모션블러(motion blur) 필터, 스케치(sketch) 필터인 경우, 파라미터는 밝기(brightness), 콘트라스트(contrast), 색상(color) 중 적어도 어느 하나가 될 수 있다. 아웃 포커스는 심도를 파라미터로 할 수 있다. 배경 이미지 합성은 합성 되는 이미지를 파라미터로 할 수 있다. 레이어별로 동영상 촬영 속도를 달리하는 것은 레이어별 촬영 속도의 차를 파라미터로 할 수 있다. 확대 축소의 경우 확대 축소의 배율을 파라미터로 할 수 있다.

제어부(180)는 플렉서블 디스플레이의 휘어진 정도에 기초하여 파라미터를 결정할 수 있다. 플렉서블 디스플레이의 휘어진 정도가 커지면 제1 디스플레이 영역(300)과 제2 디스플레이 영역(400)의 실제거리도 멀어진다. 따라서 제어부(180)가 플렉서블 디스플레이의 휘어진 정도에 기초하여 확대 축소, 아웃 포커스 등의 촬영 효과의 파라미터를 변경하면, 사용자는 촬영 효과에 대하여 직관적으로 유추할 수 있다. 구체적인 실시예에서 제어부(180)는 플렉서블 디스플레이가 휘어진 정도를 파라미터 테이블에 매칭하여 촬영 효과의 파라미터를 결정할 수 있다. 파라미터 테이블은 기울어진 정도에 각각 대응하는 복수의 파라미터 집합을 포함할 수 있다. 구체적으로 결정된 촬영효과가 아웃 포커스인 경우, 제어부(180)는 휘어진 정도가 클 수록 배경의 심도를 얕아지게 할 수 있다. 이에 대해서는 도 5에서 구체적으로 설명하도록 한다. 또 다른 구체적인 실시예에서 결정된 촬영 효과가 배경 이미지 합성인 경우, 제어부(180)는 합성되는 배경 이미지를 변경할 수 있다. 또 다른 구체적인 실시예에서 결정된 촬영 효과가 엠보스(emboss) 필터, 고스트(ghost) 필터, 그레이스케일(grayscale) 필터, 세피아(sepia) 필터, 모션블러(motion blur) 필터, 스케치(sketch) 필터 중 어느 하나인 경우, 제어부(180)는 휘어진 정도가 커짐에 따라 콘트라스트 크기를 증가시킬 수 있다. 또는 제어부(180)는 휘어진 정도가 커짐에 따라 밝기의 크기를 증가시킬 수 있다. 또는 제어부(180)는 휘어진 정도가 커짐에 따라 색상을 변경할 수 있다. 또 다른 구체적인 실시예에서 결정된 효과가 레이어 별로 동영상 촬영 속도를 달리하는 것인 경우, 제어부(180)는 레이어간의 촬영 속도의 차이를 휘어진 정도에 기초하여 변경할 수 있다. 구체적으로 휘어진 정도가 커짐에 따라 레이어간의 촬영 속도의 차이를 크게 할 수 있다. 또 따른 구체적인 실시예에서 결정된 촬영 효과가 확대 축소인 경우, 제어부(180)는 휘어진 정도가 커짐에 따라 확대 축소의 배율을 증가시킬 수 있다.

제어부(180)는 플렉서블 디스플레이의 휘어짐 이외의 사용자 입력중 적어도 어느 하나에 기초하여 촬영 효과의 파라미터를 결정할 수 있다. 구체적인 실시예에서 제어부(180)는 사용자의 터치 입력에 기초하여 촬영 효과의 파라미터를 결정할 수 있다. 구체적으로 결정된 촬영 효과가 배경 이미지 합성인 경우, 제어부(180)는 사용자의 플리킹(flicking)에 기초하여 배경 이미지를 변경할 수 있다. 구체적으로 오른쪽 방향을 향하는 플리킹이 있는 경우 제어부(180)는 정렬상 순 방향의 이미지로 배경 이미지를 변경할 수 있고, 왼쪽 방향을 향하는 플리킹이 있는 경우 제어부(180)는 역 방향의 이미지로 배경 이미지를 변경할 수 있다. 구체인 실시예에서 결정된 촬영 효과가 아웃 포커스인 경우, 제어부(180)는 사용자의 드래깅(dragging)에 기초하여 아웃 포커스의 심도를 변경할 수 있다. 왼쪽을 향하는 드래깅(dragging)이 있는 경우 제어부(180)는 심도를 깊게 할 수 있고, 오른쪽을 향하는 드래깅이 있는 경우 제어부(180)는 심도를 얕게 할 수 있다. 구체적인 실시예에서 결정된 촬영 효과가 엠보스(emboss) 필터, 고스트(ghost) 필터, 그레이스케일(grayscale) 필터, 세피아(sepia) 필터, 모션블러(motion blur) 필터, 스케치(sketch) 필터 등의 필터인 경우 제어부(180)는 사용자의 드래깅에 기초하여 밝기, 콘트라스트 및 색상 중 적어도 어느 하나를 변경할 수 있다. 구체적으로 오른쪽을 향하는 드래깅이 있는 경우 콘트라스트를 증가하거나 또는 밝기를 밝게 할 수 있고, 왼쪽을 향하는 드래깅이 있는 경우 콘트라스트를 감소하거나 또는 밝기를 어둡게 할 수 있다. 구체적인 실시예에서 결정된 촬영 효과가 레이별로 촬영 속도를 달리하는 것인 경우, 구체적으로 제어부(180)는 드래깅에 기초하여 레이어간 촬영 속도 차이를 변경할 수 있다. 구체적으로 오른쪽을 향하는 드래깅이 있는 경우 제어부(180)는 레이어간 촬영 속도 차이를 증가시키고, 왼쪽을 향하는 드래깅이 있는 경우 제어부(180)는 레이어간 촬영 속도 차이를 감소시킬 수 있다. 구체적인 실시예에서 촬영 효과가 확대 축소인 경우, 제어부(180)는 핀치(pinch)에 기초하여 확대 축소의 배율을 변경할 수 있다. 구체적으로 터치된 두 손가락의 간격이 좁혀지는 경우 제어부(180)는 확대 축소의 배율을 감소 시킬 수 있고, 터치된 두 손가락의 간격이 벌어지는 경우 제어부(180)는 확대 축소의 배율을 증가 시킬 수 있다.

제어부(180)는 결정된 파라미터에 따라 결정된 촬영 효과를 제1 레이어 및 제2 레이어 중 적어도 어느 하나에 적용하여 제1 레이어 및 제2 레이어를 포함하는 제2 이미지를 생성한다(S115). 따라서 제어부(180)는 제1 레이어에만 결정된 파라미터에 따라 결정된 촬영 효과를 적용하거나 제2 레이어에만 결정된 파라미터에 따라 결정된 촬영 효과를 적용할 수 있다. 또는 제어부(180)는 제1 레이어와 제2 레이어에 동시에 결정된 파라미터에 따라 결정된 촬영 효과를 적용할 수 있다. 이를 통해 제어부(180)는 제1 레이어 및 제2 레이어를 포함하는 제2 이미지를 생성한다. 본 발명의 실시예는 결정된 촬영 효과에 따라 촬영하여 제2 이미지를 생성하는 실시예와 저장된 제1 이미지를 읽어 들인 후 결정된 촬영 효과에 따라 편집하여 제2 이미지를 생성하는 실시예를 모두 포함한다.

구체적으로 제어부(180)는 제1 이미지에서 아웃 포커스(out focus), 엠보스(emboss) 필터, 고스트(ghost) 필터, 그레이스케일(grayscale) 필터, 세피아(sepia) 필터, 모션블러(motion blur) 필터, 스케치(sketch) 필터, 배경 이미지 합성, 레이어별 동영상 촬영 속도를 달리하여 촬영하는 것 및 확대 축소를 적용하여 제2 이미지를 생성할 수 있다.

도 4는 본 발명의 한 실시예에 따라 제어부가 제1 이미지에서 분리 오브젝트를 포함하는 제2 레이어를 분리하는 것을 보여준다.

제어부(180)는 제2 디스플레이 영역에 제1 이미지를 표시할 수 있다. 이때 제어부(180)는 사용자 입력에 기초하여 분리 오브젝트를 결정할 수 있다. 구체적으로 제어부(180)는 사용자의 터치 입력에 대응하는 디스플레이 영역에 디스플레이된 오브젝트를 분리 오브젝트로 결정할 수 있다. 도 4의 실시예에서 센싱부(140)는 사용자의 인물에 대한 터치 입력을 검출할 수 있다. 이때 제어부(180)는 터치 입력에 기초하여 인물을 분리 오브젝트로 결정할 수 있다. 제어부(180)는 분리 오브젝트를 포함하는 제2 레이어를 제2 디스플레이 영역(400)에 디스플레이할 수 있고 제1 이미지에서 분리 오브젝트를 제외한 나머지인 제1 레이어를 제1 디스플레이 영역(300)에 디스플레이할 수 있다. 또한 이때 롱 프레스 터치 입력이 있는 경우, 제어부(180)는 터치 지점의 이동에 따라 분리 오브젝트를 이동시킬 수 있다. 또 다른 실시예에서 롱 프레스 터치 입력이 있는 경우, 는 움직이는 피사체에 포커스를 맞추는 트래킹 포커스(Tracking Focus)'기능을 제공할 수 있다. 도 4의 (a)는 제어부(180)가 터치 입력에 기초하여 분리 오브젝트를 결정하는 것을 보여준다. 도 4의 (b)는 제어부(180)가 결정된 분리 오브젝트에 기초하여 제1 이미지를 제1 레이어와 제2 레이어로 분리하여 제1 디스플레이 영역(300)과 제2 디스플레이 영역(400)에 각각 디스플레이하는 것을 보여준다.

도 5는 본 발명의 한 실시예에 따라 플렉서블 디스플레이의 휘어진 정도에 따라 제어부가 아웃 포커스의 배경의 심도를 변경하는 것을 보여준다.

앞서 기재한 바와 같이 제어부(180)는 플렉서블 디스플레이의 휘어진 정도에 기초하여 아웃 포커스시 배경의 심도를 변경할 수 있다. 도 5의 실시예에서 제어부(180)는 플렉서블 디스플레이의 휘어진 정도가 클 수록 배경의 심도가 얕아지게 한다. 도 5의 실시예에서 포커스 되는 것은 제1 레이어의 인물이고 제2 레이어의 배경은 아웃 포커스된다. 도 5의 (a)와 같이 이동 단말기(100)의 플렉서블 디스플레이가 휘어진 경우 도 5의 (b)와 같은 제2 이미지가 생성된다. 도 5의 (c)와 같이 이동 단말기(100)의 플렉서블 디스플레이가 더 휘어진 경우, 도 5의 (d)와 같이 배경의 심도가 도 5의 (b)보다 더 얕은 제2 이미지가 생성된다.

도 6은 본 발명의 한 실시예에 따라 제어부가 사용자 입력에 기초하여 제1 디스플레이 영역에 디스플레이 되는 오브젝트를 확대하는 것을 보여준다.

앞서 기재한 바와 같이 제어부(180)는 플렉서블 디스플레이의 휘어짐 이외의 입력에 기초하여 확대 축소의 배율을 변경할 수 있다. 특히 제어부(180)는 사용자의 터치 입력에 기초하여 확대 축소의 배율을 변경할 수 있다. 구체적으로 사용자의 터치 지점의 간격을 넓히는 핀치 입력이 있는 경우, 제어부(180)는 확대 축소의 배율을 증가할 수 있다. 도 6의 (a)는 제2 디스플레이 영역(400)에 대한 터치 지점의 간격을 넓히는 핀치 입력이 되는 것을 보여준다. 이에 따라 제어부(180)는 제2 레이어에 디스플레이된 오브젝트를 확대한다. 도 6의 (b)는 확대된 제2 레이어가 제2 디스플레이 영역(400)에 디스플레이 되는 것을 보여준다.

도 7 내지 도 8은 촬영 효과 중 배경 이미지 합성을 보여준다.

도 7은 본 발명의 한 실시예에 따라 제어부가 제1 디스플레이 영역에 디스플레이되는 제1 레이어를 새로운 이미지로 교체하는 것을 보여준다.

앞서 기재한 바와 같이 제어부(180)는 제1 디스플레이 영역에 디스플레이되는 제1 레이어를 변경할 수 있다. 도 7의 (a)는 제어부(180)가 제1 이미지를 제1 레이어와 제2 레이어로 분리하여 제어부(180)가 제1 레이어를 제1 디스플레이 영역(300)에 디스플레이하고 제2 레이어를 제2 디스플레이 영역(400)에 디스플레이 하는 것을 보여준다. 도 7의 (b)와 (c)는 제어부(180)가 제1 레이어를 새로운 이미지로 교체하는 것을 보여준다. 도 7의 (a)에서 제1 레이어는 산의 이미지였으나 도 7의 (b)에서는 태양과 구름이 떠 있는 하늘의 이미지로 교체되었다. 또한 도 7의 (C)에서 제1 레이어는 숲의 이미지로 교체되었다. 앞서 기재한 바와 같이 제어부(180)는 플렉서블 디스플레이의 휘어진 정도 또는 플렉서블 디스플레이의 휘어짐 이외의 사용자 입력에 기초하여 배경 이미지를 선택할 수 있다. 이때 제어부(180)는 교체할 수 있는 새로운 이미지들을 썸네일(thumbnail) 형태로 제1 디스플레이 영역(300) 또는 제2 디스플레이 영역(400)에 디스플레이할 수 있다.

도 8은 본 발명의 한 실시예에 따라 제어부가 제1 디스플레이 영역에 디스플레이 되는 제1 레이어와 새로운 레이어를 합성하는 것을 보여준다.

앞서 기재한바와 같이 제어부(180)는 기존의 레이어에 새로운 레이어를 합성할 수있다. 도 8의 실시예에서 제어부(180)는 제1 레이어에 새로운 레이어를 합성한다. 8의 (a)에서 제1 디스플레이 영역(300)에 디스플레이되는 제1 레이어는 산의 이미지다. 제어부(180)는 제1 레이어(300)에 새로운 오브젝트를 포함하는 레이어를 합성할 수 있다. 도 8의 (b)는 제어부가 나무 오브젝트를 포함하는 레이어를 추가한 것을 보여준다.

도 9는 본 발명의 한 실시예에 따라 제어부가 레이어별로 촬영 속도를 달리하여 동영상 촬영하는 것을 보여준다.

앞서 기재한 바와 같이 제어부(180)는 레이어별로 촬영 속도를 달리하여 동영상을 촬영할 수 있다. 도 9의 실시예서 제어부(180)는 제1 레이어에 포함되는 오브젝트들은 정상 촬영 속도 보다 촬영 속도를 줄이고, 제2 레이어에 포함되는 오브젝트 정상 촬영 속도로 촬영을 할 수 있다. 이렇게 촬영된 영상은 제1 레이어에 포함된 오브젝트들은 빠르게 움직이고 제2 레이어에 포함된 오브젝트들은 천천히 움직이는 듯한 영상효과를 발생시킨다.

도 10은 본 발명의 한 실시예에 따라 제어부가 후면 카메라를 통해 촬영한 이미지는 제1 디스플레이 영역에 표시하고 전면 카메라를 통해 촬영한 이미지는 제2 디스플레이 영역에 표시하는 것을 보여준다.

앞서 기재한 바와 같이 이동 단말기(100)는 서로 다른 방향을 향하는 제1 카메라와 제2 카메라를 포함할 수 있다. 제1 이미지는 제1 카메라와 제2 카메라를 동시 촬영하여 획득한 이미지일 수 있다. 도 10의 실시예에서 제1 카메라는 이동 단말기(100)의 후면을 촬영하는 후면 카메라이고, 제2 카메라는 이동 단말기의 전면을 촬영하는 전면 카메라이다. 도 10의 실시예에서 제어부(180)는 후면 카메라를 통하여 촬영된 이미지를 제1 레이어로서 제1 디스플레이 영역(300)에 표시하고 전면 카메라를 통하여 촬영된 이미지를 제2 레이어로서 제2 디스플레이 영역(400)에 표시할 수 있다. 따라서 도 10의 실시예에서 제1 레이어에는 건물의 이미지가 표시되고 제2 레이어에는 건물을 촬영하는 남녀의 이미지가 표시된다.

또한 제어부(180)는 제1 레이어와 제2 레이어를 합성하여 제2 이미지를 생성할 수 있다. 도 10의 실시예에서 제어부(180)는 플렉서블 디스플레이가 펴진 상태에서 터치 입력에 기초하여 제1 레이어와 제2 레이어를 합성할 수 있다. 구체적으로 터치 된 두 손가락의 간격이 좁아지는 핀치 입력이 있는 경우, 제어부(180)는 제1 레이어와 제2 레이어를 합성하여 제2 이미지를 생성할 수 있다. 또한 터치 된 두 손가락의 간격이 멀어지는 핀치 입력이 있는 경우, 제어부(180)는 제1 레이어와 제2 레이어를 다시 분리할 수 있다.

도 11은 본 발명의 한 실시예에 따라 제어부가 제1 디스플레이 영역에 메뉴 화면을 표시하는 것을 보여준다.

도 11의 실시예에서 이동 단말기(100)는 이동 단말기(100)의 측면에 버튼을 포함할 수 있다. 또는 센싱부(140)는 이동 단말기(100)의 측면에 대한 터치 입력을 검출할 수 있다. 이동 단말기(100)의 측면의 버튼에 대한 버튼 입력이 있거나 이동 단말기(100)의 측면에 대한 터치 입력이 있는 경우, 제어부(180)는 도 11의 (b)에서와 같이 제2 디스플레이 영역(400)에 메뉴 화면을 표시할 수 있다.

도 12는 사용자의 눈(500)이 투명 플렉서블 디스플레이를 통하여 풍경을 인식하는 것을 보여준다.

종래의 파노라마 촬영의 경우 사용자가 눈으로 인식하는 시야와 실제 촬영된 시야가 차이가 있다. 또한 사용자는 파노라마 촬영을 위해 이동 단말기(100)의 위치를 이동해야 했다. 따라서 사용자들은 파노라마 촬영이 직관적이지 못하고 번거로운 문제점이 있었다.

본 발명의 이동 단말기(100)는 투명 플렉서블 디스플레이를 포함한다. 따라서 사용자는 이동 단말기(100) 촬영시 투명 플렉서블 디스플레이를 통하여 촬영하고자 하는 피사체를 볼 수 있다. 또한 투명 플렉서블 디스플레이를 휘어진 경우, 투명 플렉서블 디스플레이를 통하여 보여지는 풍경의 범위는 투명 플렉서블 디스플레이를 휘어지게 하기 전보다 넓다. 본 발명의 또 다른 실시예는 이러한 특성을 이용하여 투명 플렉서블 디스플레이를 통해서 보여지는 시야와 동일한 범위의 파노라마 촬영이 가능하도록 한다. 이를 위해 제어부(180)는 사용자와 이동 단말기(100)의 거리를 측정할 수 있다. 특히 사용자의 눈동자와의 거리를 측정할 수 있다. 또한 이동 단말기(100)는 카메라 이동 없이 파노라마 촬영을 하기 위해 동일한 방향을 촬영할 수 있는 복수의 카메라를 포함할 수 있다.

도 13은 본 발명의 또 다른 실시예에 따라 파노라마 촬영의 동작을 설명하는 흐름도이다.

휘어짐 센서(143)는 플렉서블 디스플레이의 휘어짐을 검출한다(S301). 제어부(180) 파노라마 촬영시 플렉서블 디스플레이이의 휘어짐을 검출한 경우, 본 발명의 또 다른 실시예에 따른 파노라마 촬영을 시작할 수 있다.

센싱부(140)는 플렉서블 디스플레이의 휘어짐 이외의 사용자 입력을 검출한다(S303). 구체적인 실시예에서 센싱부(140)는 사용자의 터치 입력을 검출할 수 있다. 또 다른 실시예에서 센싱부(140)는 버튼 입력을 검출할 수 있다.

제어부(180)는 파노라마 촬영의 촬영 범위를 결정한다(S305). 촬영 범위는 이동 단말기(100)가 촬영시 촬영되는 피사체의 범위이다. 제어부(180)는 파노라마 촬영의 촬영 범위를 투명 플렉서블 디스플레이를 통해 사용자에게 보이는 시야와 동일한 범위로 결정할 수 있다. 이를 위해 제어부(180)는 사용자와 이동 단말기(100)의 거리를 측정할 수 있다. 특히 사용자의 눈동자와의 거리를 측정할 수 있다. 또한 이를 위해 이동 단말기(100)는 동일한 방향을 촬영할 수 있는 복수의 카메라를 포함할 수 있다. 또 다른 실시예에서 제어부(100)는 투명 플렉서블 디스플레이를 통해 사용자에게 보이는 시야와 휘어짐 이외의 사용자 입력에 기초하여 파노라마 촬영 범위를 수정할 수 있다. 구체적으로 센싱부(140)는 이동 단말기(100)의 측면에 대한 터치 입력을 수신할 수 있다. 이때 제어부(180)는 터치 입력된 이동 단말기(100)의 측면의 위치를 경계로 투명 플렉서블 디스플레이를 통해 사용자에게 보이는 시야를 파노라마 촬영의 범위로 결정할 수 있다. 이에 대해서는 도 14에서 자세히 설명하도록 한다.

제어부(180)는 결정된 파노라마 촬영 범위에 따라 파노라마 촬영을 한다(S307).

도 14는 본 발명의 또 다른 실시예에 따라 파노라마 촬영시 촬영 범위를 선택하는 것을 보여준다.

센싱부(140)는 파노라마 촬영시 사용자의 터치 입력을 수신할 수 있다. 특히 센싱부(140)는 터치 입력을 수신할 수 있다. 구체적으로 터치 입력은 드래그 입력 일 수 있다. 구체적으로 이동 단말기(100)의 측면에 대한 터치 입력일 수 있다. 도 14의 실시예에서 센싱부(140)는 이동 단말기(100) 측면에 대한 사용자의 드래깅입력을 수신한다. 도 14의 실시예에서 제어부(180)는 투명 플렉서블 디스플레이를 통해 보이는 피사체의 범위 중 사용자의 드래깅 입력이 있는 면적 아래의 플렉서블 디스플레이를 통해 보이는 시야를 파노라마 촬영 범위로 결정한다.

본 발명의 일실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽ㄴ을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.

상기와 같이 설명된 이동 단말기는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (7)

1. 투명 플렉서블 디스플레이를 이용하는 이동 단말기의 사용자 인터페이스 제공 방법에 있어서,
   제1 이미지를 획득하는 단계;
   상기 제1 이미지에서 다른 오브젝트들과 분리될 분리 오브젝트를 결정하는 단계;
   상기 제1 이미지를 상기 분리 오브젝트를 포함하는 제1 레이어와 상기 분리 오브젝트가 제외된 제2 레이어로 분리하는 단계; 및
   상기 제1 레이어를 제1 디스플레이 영역에 표시하고 상기 제2 레이어를 제2 디스플레이 영역에 표시하는 단계를 포함하고,
   상기 제1 디스플레이 영역은 상기 투명 플렉서블 디스플레이의 휨을 통해 구분되는 두 개의 디스플레이 영역 중에서 상기 분리 오브젝트 선택을 위한 터치 입력이 수신되는 디스플레이 영역이고,
   상기 제2 디스플레이 영역은 상기 2개의 디스플레이 영역 중에서 또 다른 하나에 해당하는 영역인
   사용자 인터페이스 제공 방법.
2. 제1항에 있어서,
   상기 제1 레이어 및 상기 제2 레이어 중 적어도 어느 하나에 촬영 효과를 적용하여 상기 제1 레이어 및 상기 제2 레이어를 포함하는 제2 이미지를 생성하는 단계를 더 포함하는
   사용자 인터페이스 제공 방법.
3. 제2항에 있어서,
   상기 투명 플렉서블 디스플레이의 휘어진 정도를 검출하는 단계; 및
   상기 투명 플렉서블 디스플레이의 휘어진 정도에 기초하여 상기 촬영 효과의 파라미터를 결정하는 단계를 더 포함하는
   사용자 인터페이스 제공 방법.
4. 제3항에 있어서,
   상기 투명 플렉서블 디스플레이의 휘어진 정도에 기초하여 상기 촬영 효과를 결정하는 단계를 더 포함하는
   사용자 인터페이스 제공 방법.
5. 제4항에 있어서
   상기 제1 이미지에서 상기 분리 오브젝트를 결정하는 단계는
   사용자로부터 입력을 획득하고 상기 입력에 기초하여 분리 오브젝트를 결정하는 단계를 포함하는
   사용자 인터페이스 제공 방법.
6. 제2항에 있어서,
   상기 촬영 효과는
   아웃 포커스, 엠보스 필터, 고스트 필터, 그레이스케일 필터, 세피아 필터, 모션블러 필터, 스케치 필터, 배경 이미지 합성, 레이어별 동영상 촬영 속도를 달리하여 촬영하는 것 및 확대 축소 중 적어도 어느 하나인
   사용자 인터페이스 제공 방법.
7. 제1항에 있어서,
   상기 이동 단말기는 제1 카메라와 제2 카메라를 포함하고,
   상기 제1 카메라와 상기 제2 카메라는 서로 다른 방향을 향하는 카메라이고,
   상기 제1 레이어는 상기 제1 카메라를 통해 촬영한 이미지이고 상기 제2 레이어는 상기 제2 카메라를 통해 촬영한 이미지인
   사용자 인터페이스 제공 방법.
   

Images