KR20200101258A - 전자 장치 및 전자 장치의 디스플레이 제어 방법 - Google Patents

전자 장치 및 전자 장치의 디스플레이 제어 방법 Download PDF

Info

Publication number
KR20200101258A
KR20200101258A KR1020190142828A KR20190142828A KR20200101258A KR 20200101258 A KR20200101258 A KR 20200101258A KR 1020190142828 A KR1020190142828 A KR 1020190142828A KR 20190142828 A KR20190142828 A KR 20190142828A KR 20200101258 A KR20200101258 A KR 20200101258A
Authority
KR
South Korea
Prior art keywords
display
electronic device
application
touch
processor
Prior art date
Application number
KR1020190142828A
Other languages
English (en)
Inventor
권용진
김효연
박우영
이석재
정병석
최성훈
백종우
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP20158016.4A priority Critical patent/EP3699738B1/en
Priority to EP22186586.8A priority patent/EP4102344A1/en
Priority to US16/793,614 priority patent/US11409488B2/en
Priority to KR1020200020427A priority patent/KR20200101306A/ko
Priority to PCT/KR2020/002401 priority patent/WO2020171591A1/en
Priority to CN202010101721.7A priority patent/CN111580601B/zh
Publication of KR20200101258A publication Critical patent/KR20200101258A/ko
Priority to US17/882,964 priority patent/US11868671B2/en
Priority to KR1020230024506A priority patent/KR20230031272A/ko
Priority to US18/545,350 priority patent/US20240118853A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1681—Details related solely to hinges
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

다양한 실시예에 따른 전자 장치는, 하우징, 상기 하우징의 적어도 일부를 통해 보여지고, 터치 센서를 포함하는 적어도 하나의 디스플레이, 상기 하우징 내에 배치되고, 상기 디스플레이와 작동적으로(operatively) 연결되는 프로세서, 및 상기 하우징 내에 배치되고, 상기 프로세서와 작동적으로 연결되는 메모리를 포함하고, 상기 메모리는, 실행 시에, 상기 프로세서가, 상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 적어도 하나의 디스플레이에 표시하고, 상기 전자 장치에 대한 폴딩(folding) 제스처를 감지하고, 상기 감지된 폴딩 제스처에 대응하여, 상기 어플리케이션의 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정하고, 상기 결정된 일부 영역에 터치 락 화면을 표시하고, 및 상기 터치 락 화면을 표시한 이후에, 상기 적어도 하나의 디스플레이의 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하도록 하는 인스트럭션들을 저장할 수 있다.

Description

전자 장치 및 전자 장치의 디스플레이 제어 방법 {ELECTRONIC DEVICE AND DISPLAY CONTRL METHOD THEROF}
본 문서는 전자 장치에 관한 것이며, 예를 들어, 하나 이상의 디스플레이를 포함하는 전자 장치에 관한 것이다.
이동통신 및 하드웨어/소프트웨어 기술의 발달에 따라, 스마트폰으로 대표되는 휴대용 전자 장치(이하 전자 장치)는 진화를 거듭하여 다양한 기능들을 탑재할 수 있게 되었다. 전자 장치는 사용자가 다양한 기능들에 쉽게 액세스 할 수 있도록 터치 스크린 기반의 디스플레이를 포함하고, 디스플레이를 통해 다양한 어플리케이션의 화면을 제공할 수 있다.
최근에는 휴대성을 높이기 위해 구부러지는(flexible) 형태에서 나아가 완전히 접힐 수 있는(foldable) 디스플레이가 개발되고 있다. 이러한 폴더블 디스플레이를 구비하는 전자 장치는 펼쳐진 상태에서 넓은 면적의 디스플레이를 사용할 수 있고, 접힘 상태에서는 전자 장치의 전체 부피가 줄어들기 때문에 사용성 및 휴대성을 모두 높일 수 있다. 또는 전자 장치는 서로 분리된 복수의 디스플레이를 구비할 수 있다.
폴더블 디스플레이를 구비하는 전자 장치 또는 복수의 디스플레이를 구비하는 전자 장치에서 전자 장치가 펼쳐진 상태에서 접힌 상태로 전환 또는 그 반대의 경우, 사용자가 직접 전자 장치의 하우징을 잡고 접는 동작을 해야 한다. 이 경우, 사용자가 디스플레이의 일 영역을 터치한 상태로 접거나 펴는 동작을 할 수 있다. 상기와 같은 폴딩(folding) 또는 언폴딩(unfolding) 동작 중에도 디스플레이 및 디스플레이의 터치 센서는 활성화 상태이기 때문에, 사용자가 의도하지 않은 터치 입력이 터치 센서를 통해 감지되어 어플리케이션의 동작에 사용될 수 있다.
본 문서의 다양한 실시예들은 폴딩 또는 언폴딩 동작 시 발생하는 터치 입력에 의한 터치 이벤트를 사용자의 의도에 맞게 처리하도록 하는 전자 장치 및 전자 장치의 제어 방법을 제공함에 그 목적이 있다. 또한, 본 문서의 다양한 실시예들은 폴딩 또는 언폴딩 동작 시 어플리케이션의 상태 정보에 따라 적절하게 어플리케이션 화면을 구성할 수 있는 전자 장치 및 전자 장치의 제어 방법을 제공함에 그 목적이 있다.
다양한 실시예에 따른 전자 장치는, 하우징, 상기 하우징의 적어도 일부를 통해 보여지고, 터치 센서를 포함하는 적어도 하나의 디스플레이, 상기 하우징 내에 배치되고, 상기 디스플레이와 작동적으로(operatively) 연결되는 프로세서, 및 상기 하우징 내에 배치되고, 상기 프로세서와 작동적으로 연결되는 메모리를 포함하고, 상기 메모리는, 실행 시에, 상기 프로세서가, 상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 적어도 하나의 디스플레이에 표시하고, 상기 전자 장치에 대한 폴딩(folding) 제스처를 감지하고, 상기 감지된 폴딩 제스처에 대응하여, 상기 어플리케이션의 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정하고, 상기 결정된 일부 영역에 터치 락 화면을 표시하고, 및 상기 터치 락 화면을 표시한 이후에, 상기 적어도 하나의 디스플레이의 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하도록 하는 인스트럭션들을 저장할 수 있다.
다양한 실시예에 따른 전자 장치의 제어 방법은, 하우징의 적어도 일부를 통해 보여지고, 터치 센서를 포함하는 적어도 하나의 디스플레이를 포함하고, 상기 방법은, 상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 적어도 하나의 디스플레이에 표시하는 동작, 상기 전자 장치에 대한 폴딩(folding) 제스처를 감지하는 동작, 상기 감지된 폴딩 제스처에 대응하여, 상기 어플리케이션의 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정하는 동작, 상기 결정된 일부 영역에 터치 락 화면을 표시하는 동작, 및 상기 터치 락 화면을 표시한 이후에, 상기 적어도 하나의 디스플레이의 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하는 동작을 포함할 수 있다.
본 문서의 다양한 실시예에 따른 전자 장치 및 전자 장치의 제어 방법은 폴딩 또는 언폴딩 동작 시 발생하는 터치 입력에 의한 터치 이벤트를 사용자의 의도에 맞게 처리할 수 있다.
도 1a은 다양한 실시예에 따른 전자 장치의 블록도이다.
도 1b는 다양한 실시예에 따른 전자 장치의 블록도이다.
도 2a 및 2b는 다양한 실시예에 따른 전자 장치의 펼침 상태 및 접힘 상태를 도시한 것이다.
도 3은 다양한 실시예에 따른 전자 장치의 분리 사시도이다.
도 4a 내지 4f는 다양한 실시예에 따른 전자 장치에서 폴딩(folding) 또는 언폴딩(unfolding) 동작 시의 사용 상태를 도시한 도면들이다.
도 5는 다양한 실시예에 따른 전자 장치의 블록도이다.
도 6은 다양한 실시예에 따른 전자 장치의 디스플레이 관련 구성의 블록도이다.
도 7은 다양한 실시예에 따른 전자 장치의 소프트웨어 계층의 블록도이다.
도 8은 다양한 실시예에 따른 전자 장치의 드로잉 엔진(drawing engine)의 블록도이다.
도 9는 다양한 실시예에 따라 전자 장치가 폴딩 동작 시 감지되는 터치 이벤트를 처리하는 방법을 도시한 도면이다.
도 10a 내지 10f는 다양한 실시예에 따라 전자 장치에 표시되는 터치 락 화면을 도시한 도면들이다.
도 11a 내지 11e는 다양한 실시예에 따라 폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 12a 내지 12d는 다양한 실시예에 따라 폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 13a 내지 13d는 다양한 실시예에 따라 폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 14는 다양한 실시예에 따라 언폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면이다.
도 15는 다양한 실시예에 따라 언폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면이다.
도 16은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도 17은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도 18은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도 19a 내지 19c는 다양한 실시예에 따른 수직 폴딩 방식의 전자 장치에서 폴딩 또는 언폴딩 동작 시의 사용 상태를 도시한 도면들이다.
도 20a 내지 20c는 다양한 실시예에 따라 폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 21a 내지 21c는 다양한 실시예에 따른 아웃 폴딩 방식의 전자 장치에서 폴딩 또는 언폴딩 동작 시의 사용 상태를 도시한 도면들이다.
도 22는 다양한 실시예에 따른 전자 장치의 블록도이다.
도 23은 다양한 실시예에 따른 전자 장치의 드로잉 엔진(drawing engine)의 블록도이다.
도 24a 및 24b는 다양한 실시예에 따른 전자 장치의 드로잉 엔진(drawing engine)의 블록도이다.
도 25a, 25b, 25c 및 25d는 다양한 실시예에 따라 아웃 폴딩 동작 시 전자 장치의 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 26은 다양한 실시예에 따라 전자 장치가 폴딩 동작 시 감지되는 터치 이벤트를 처리하는 방법을 도시한 도면이다.
도 27은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도 28은 다양한 실시예에 따른 일부 하우징이 360도 회전 되는 전자 장치를 도시한 것이다.
도 29a 및 29b는 다양한 실시예에 따른 하우징의 일면에 복수의 디스플레이를 갖는 전자 장치를 도시한 것이다.
도 30은 다양한 실시예에 따른 전자 장치의 블록도이다.
도 31a 및 31b는 다양한 실시예에 따른 G 형태로 폴딩 되는 전자 장치를 도시한 것이다.
도 32a, 32b 및 32c는 다양한 실시예에 따른 S 형태로 폴딩 되는 전자 장치를 도시한 것이다.
도 33a 및 33b는 다양한 실시예에 따른 롤러블 디스플레이를 갖는 전자 장치를 도시한 것이다.
도 34는 다양한 실시예에 따른 전자 장치의 제어 방법을 도시한 것이다.
도 1a는, 다양한 실시예들에 따른, 네트워크 환경(100) 내의 전자 장치(101)의 블럭도이다. 도 1a를 참조하면, 네트워크 환경(100)에서 전자 장치(101)는 제 1 네트워크(198)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(102)와 통신하거나, 또는 제 2 네트워크(199)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(104) 또는 서버(108)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 서버(108)를 통하여 전자 장치(104)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 프로세서(120), 메모리(130), 입력 장치(150), 음향 출력 장치(155), 표시 장치(160), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 또는 안테나 모듈(197)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)에는, 이 구성요소들 중 적어도 하나(예: 표시 장치(160) 또는 카메라 모듈(180))가 생략되거나, 하나 이상의 다른 구성 요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들은 하나의 통합된 회로로 구현될 수 있다. 예를 들면, 센서 모듈(176)(예: 지문 센서, 홍채 센서, 또는 조도 센서)은 표시 장치(160)(예: 디스플레이)에 임베디드된 채 구현될 수 있다
프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 실행하여 프로세서(120)에 연결된 전자 장치(101)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)을 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(120)는 다른 구성요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 로드하고, 휘발성 메모리(132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다. 일실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(123)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 추가적으로 또는 대체적으로, 보조 프로세서(123)은 메인 프로세서(121)보다 저전력을 사용하거나, 또는 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(123)는 메인 프로세서(121)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(101)의 구성요소들 중 적어도 하나의 구성요소(예: 표시 장치(160), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성 요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부로서 구현될 수 있다.
메모리(130)는, 전자 장치(101)의 적어도 하나의 구성요소(예: 프로세서(120) 또는 센서모듈(176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.
프로그램(140)은 메모리(130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(142), 미들 웨어(144) 또는 어플리케이션(146)을 포함할 수 있다.
입력 장치(150)는, 전자 장치(101)의 구성요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(101)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 장치(150)은, 예를 들면, 마이크, 마우스, 키보드, 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다.
음향 출력 장치(155)는 음향 신호를 전자 장치(101)의 외부로 출력할 수 있다. 음향 출력 장치(155)는, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있고, 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
표시 장치(160)는 전자 장치(101)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 표시 장치(160)은, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일실시예에 따르면, 표시 장치(160)는 터치를 감지하도록 설정된 터치 회로(touch circuitry), 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 센서 회로(예: 압력 센서)를 포함할 수 있다.
오디오 모듈(170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일실시예에 따르면, 오디오 모듈(170)은, 입력 장치(150)를 통해 소리를 획득하거나, 음향 출력 장치(155), 또는 전자 장치(101)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(102)) (예: 스피커 또는 헤드폰))를 통해 소리를 출력할 수 있다.
센서 모듈(176)은 전자 장치(101)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일실시예에 따르면, 센서 모듈(176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(177)는 전자 장치(101)이 외부 전자 장치(예: 전자 장치(102))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일실시예에 따르면, 인터페이스(177)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(178)는, 그를 통해서 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일실시예에 따르면, 연결 단자(178)은, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일실시예에 따르면, 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(188)은 전자 장치(101)에 공급되는 전력을 관리할 수 있다. 일실시예에 따르면, 전력 관리 모듈(388)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(189)는 전자 장치(101)의 적어도 하나의 구성 요소에 전력을 공급할 수 있다. 일실시예에 따르면, 배터리(189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(190)은 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102), 전자 장치(104), 또는 서버(108))간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제 1 네트워크(198)(예: 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제 2 네트워크(199)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성 요소(예: 단일 칩)으로 통합되거나, 또는 서로 별도의 복수의 구성 요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크 내에서 전자 장치(101)를 확인 및 인증할 수 있다.
안테나 모듈(197)은 신호 또는 전력을 외부(예: 외부 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일실시예에 따르면, 안테나 모듈은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 하나의 안테나를 포함할 수 있다. 일실시예에 따르면, 안테나 모듈(197)은 복수의 안테나들을 포함할 수 있다. 이런 경우, 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(190)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(190)과 외부 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC)이 추가로 안테나 모듈(197)의 일부로 형성될 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))를 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(199)에 연결된 서버(108)를 통해서 전자 장치(101)와 외부의 전자 장치(104)간에 송신 또는 수신될 수 있다. 전자 장치(102, 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 일실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 외부 전자 장치들(102, 104, or 108) 중 하나 이상의 외부 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치 (예: 스마트폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 웨어러블 장치, 또는 가전 장치를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나",“A 또는 B 중 적어도 하나,”"A, B 또는 C," "A, B 및 C 중 적어도 하나,”및 “A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, “기능적으로” 또는 “통신적으로”라는 용어와 함께 또는 이런 용어 없이, “커플드” 또는 “커넥티드”라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 전자 장치(101)) 의해 읽을 수 있는 저장 매체(storage medium)(예: 내장 메모리(136) 또는 외장 메모리(138))에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예: 프로그램(140))로서 구현될 수 있다. 예를 들면, 기기(예: 전자 장치(101))의 프로세서(예: 프로세서(120))는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체 는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, ‘비일시적’은 저장매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.
도 1b는 다양한 실시예에 따른 전자 장치(101)의 블록도이다.
도 1b를 참조 하면, 다양한 실시예에 따른 전자 장치(101)는 적어도 하나의 디스플레이(160), 프로세서(120) 및 메모리(130)를 포함할 수 있으며, 도시된 구성 중 일부가 생략 또는 치환될 수 있다.
다양한 실시예에 따르면, 하우징 내에 각 구성이 배치되고, 적어도 하나의 디스플레이(160)는 하우징에서 외부로 보여질 수 있다.
다양한 실시예에 따르면, 전자 장치(101)의 하우징은 힌지 구조를 통해 그 일부가 접힐 수 있다. 하우징의 접히는 영역을 기준으로 분리된 영역에 각각의 디스플레이(160) 또는 디스플레이(160)의 일 영역이 배치될 수 있다.
다양한 실시예에 따르면, 전자 장치(101)는 적어도 하나의 디스플레이(160)를 포함할 수 있으며, 디스플레이(160) 중 적어도 하나는 터치 센서를 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치(101)는 다양한 방식의 폼 팩터(form factor)로 구성될 수 있다. 예를 들어, 전자 장치(101)는 인-폴딩 폴더블 디스플레이(in-folding foldable display) 구조, 아웃-폴딩 폴더블 디스플레이(out-folding foldable display) 구조, 듀얼 디스플레이(dual display) 구조, G 타입(G-type folding) 폴딩 구조, S 타입 폴딩(S-type folding) 구조, 또는 롤러블 디스플레이(rollable display) 구조로 구성될 수 있다.
인-폴딩 폴더블 디스플레이 구조는 전자 장치가 접힐 수 있는 디스플레이를 포함하고, 전자 장치가 폴딩 시 폴딩 축을 기준으로 분리되는 디스플레이의 제1영역 및 제2영역이 서로 마주보게 되어, 폴딩 완료 시 디스플레이의 대부분(또는 전체)이 사용자에 의해 노출되지 않는 구조일 수 있다. 인-폴딩 폴더블 디스플레이 구조에서는 하우징의 제1면에 접힐 수 있는 디스플레이가 배치되고, 제2면에 접히지 않는 디스플레이가 배치될 수 있다. 이에 따라, 폴딩 상태에서는 접힐 수 있는 디스플레이는 외부로 보여지지 않고, 제2면의 접히지 않는 디스플레이가 외부로 보여질 수 있다. 일부 실시예에 따르면, 인-폴딩 폴더블 디스플레이 구조의 전자 장치는 제1면에 접힐 수 있는 디스플레이만 포함하고, 제2면에는 별도의 디스플레이를 포함하지 않을 수도 있다.
인-폴딩 폴더블 디스플레이 구조에 대해서는 도 2a 내지 도 4f를 통해 보다 상세히 설명하기로 한다.
아웃-폴딩 폴더블 디스플레이 구조는 전자 장치가 접힐 수 있는 디스플레이를 포함하고, 전자 장치가 폴딩 시 폴딩 축을 기준으로 분리되는 디스플레이의 제1영역 및 제2영역이 각각 반대면에 배치되게 되어 외부로 보여지는 구조일 수 있다. 사용자는 폴딩 상태에서 제1영역 또는 제2영역을 통해 화면을 볼 수 있다. 아웃-폴딩 폴더블 디스플레이 구조에서도 하우징의 제1면에 접힐 수 있는 디스플레이를 포함하되, 제2면에는 별도의 디스플레이가 포함될 수도, 되지 않을 수도 있다.
아웃-폴딩 폴더블 디스플레이 구조에 대해서는 도 21a 내지 21c를 통해 보다 상세히 설명하기로 한다.
듀얼 디스플레이(dual display) 구조는 전자 장치의 하우징의 일면에 서로 물리적으로 분리된 2개의 디스플레이를 포함하는 구조일 수 있다. 예를 들어, 전자 장치의 하우징은 서로 접힐 수 있는 제1하우징 구조 및 제2하우징 구조를 포함하고, 제1하우징 구조에 제1디스플레이가, 제2하우징 구조에 제2디스플레이가 배치될 수 있다. 여기서, 제1하우징 구조 및 제2하우징 구조는 인-폴딩 또는 아웃-폴딩 방식으로 접힐 수 있고, 인-폴딩의 경우 폴딩 시 제1디스플레이 및 제2디스플레이가 서로 마주보게 되고, 아웃-폴딩 시 제1디스플레이 및 제2디스플레이는 서로 반대면을 통해 보여질 수 있다. 또한, 듀얼 디스플레이 구조의 전자 장치는 제1하우징 구조 및/또는 제2하우징 구조에서 제1디스플레이 또는 제2디스플레이가 배치된 면의 반대 면에 별도의 디스플레이를 포함할 수 있다.
듀얼 디스플레이 구조에 대해서는 도 29a 내지 29b를 통해 보다 상세히 설명하기로 한다.
G 타입(G-type folding) 폴딩 구조는 2 개의 폴딩 축을 기준으로 접힐 수 있는 구조일 수 있다. G 타입 폴딩 구조의 전자 장치는 2개의 폴딩 축을 기준으로 3겹으로 접힐 수 있는 디스플레이를 하우징의 일 면에 배치할 수 있다. 디스플레이는 2개의 폴딩 축을 기준으로 제1영역, 제2영역 및 제3영역으로 구분될 수 있으며, 전자 장치가 폴딩 되게 되면 제1영역은 제2영역과 마주보게 되고, 제3영역은 하우징의 제1영역의 반대 면과 마주보게 될 수 있다. 이에 따라, 디스플레이는 폴딩 상태에서 외부로 보여지지 않을 수 있다.
G 타입(G-type folding) 폴딩 구조에 대해서는 도 31a 내지 도 31b를 통해 보다 상세히 설명하기로 한다.
S 타입 폴딩(S-type folding) 구조는 G 타입 폴딩 구조와 같이 2개의 폴딩 축을 기준으로 접힐 수 있으나, 폴딩 상태에서 디스플레이의 일부가 외부로 보여질 수 있다.
S 타입 폴딩 구조의 전자 장치는 2개의 폴딩 축을 기준으로 구분되는 제1하우징 구조, 제2하우징 구조 및 제3하우징 구조를 포함하고, 접힐 수 있는 제1디스플레이가 제1하우징 구조 및 제2하우징 구조의 일 면에 배치되고, 접히지 않는 제2디스플레이가 제3하우징 구조의 일 면에 배치될 수 있다. 여기서, 제2디스플레이가 배치되는 면은 전자 장치의 언폴딩 상태에서 제1디스플레이가 배치되는 면과 반대 면일 수 있다. 전자 장치가 폴딩 되게 되면, 제1디스플레이는 폴딩 축을 기준으로 구분되는 제1영역 및 제2영역이 서로 마주보게 되고, 제2디스플레이는 외부로 보여질 수 있다.
S 타입 폴딩(S-type folding) 구조에 대해서는 도 32a 내지 도 32c를 통해 보다 상세히 설명하기로 한다.
롤러블 디스플레이(rollable display) 구조는 전자 장치가 둥글게 감길 수 있는 구조일 수 있다.
롤러블 디스플레이(rollable display) 구조에 대해서는 도 33a 내지 33b를 통해 보다 상세히 설명하기로 한다.
다양한 실시예에 따른 전자 장치는 좌우 방향(또는 수평 방향)의 폴딩 구조 또는 상하 방향(또는 수직 방향)의 폴딩 구조를 포함할 수 있다. 여기서, 좌우 방향의 폴딩 구조는 폴더블 디스플레이가 상하 방향의 폴딩 축을 기준으로 좌우로 접히는 구조를 의미하고, 상하 방향의 폴딩 구조는 폴더블 디스플레이가 좌우 방향의 폴딩 축을 기준으로 상하로 접히는 구조를 의미할 수 있다.
본 문서에서는 좌우 방향의 폴딩 구조를 중심으로 설명하기로 하나, 인-폴딩 폴더블 디스플레이(in-folding foldable display) 구조, 아웃-폴딩 폴더블 디스플레이(out-folding foldable display) 구조, 듀얼 디스플레이(dual display) 구조 등 다양한 실시예들은 상하 방향의 폴딩 구조로 구현될 수도 있다. 수직 폴딩 구조에 대해서는 도 19a 내지 도 19c를 통해 보다 상세히 설명하기로 한다.
다양한 실시예에 따르면, 메모리(130)는 공지의 휘발성 메모리(volatile memory) 및 비휘발성 메모리(non-volatile memory)를 포함할 수 있으며, 구체적인 구현 예에 있어서는 한정되지 않는다. 메모리(130)는 도 1a의 메모리(130)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 또한, 메모리(130)는 도 1a의 프로그램(140) 중 적어도 일부를 저장할 수 있다.
메모리(130)는 프로세서(120)에서 수행될 수 있는 다양한 인스트럭션(instruction)들을 저장할 수 있다. 이와 같은 인스트럭션들은 프로세서(120)에 의해 인식될 수 있는 산술 및 논리 연산, 데이터 이동, 입출력을 포함하는 다양한 제어 명령을 포함할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 전자 장치(101)의 각 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 수행할 수 있는 구성으로써, 도 1a의 프로세서(120)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 프로세서(120)는 적어도 하나의 디스플레이(160), 메모리(130)를 포함하는 전자 장치(101)의 내부 구성요소와 기능적으로(functionally), 작동적으로(operatively) 및/또는 전기적으로(electrically) 연결될 수 있다.
프로세서(120)가 전자 장치(101) 내에서 구현할 수 있는 연산 및 데이터 처리 기능에는 한정됨이 없을 것이나, 본 문서에서는 폴딩 제스처 및/또는 언폴딩 제스처 발생 시 터치 이벤트를 처리하는 동작 및 어플리케이션의 화면을 끊김 없이(seamless) 표시하는 동작을 처리하기 위한 다양한 실시예들에 대해 설명하기로 한다. 후술할 프로세서(120)의 동작들은 메모리(130)에 저장된 인스트럭션들을 로딩 함으로써 수행될 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 전자 장치(101)가 언폴딩 상태에서 어플리케이션의 화면을 적어도 하나의 디스플레이(160)에 표시할 수 있다. 예를 들어, 전자 장치(101)가 폴더블 디스플레이(예: 인-폴딩 폴더블 디스플레이, 아웃-폴딩 폴더블 디스플레이)를 포함하는 경우 언폴딩 상태의 폴더블 디스플레이 상에 어플리케이션의 화면을 표시할 수 있다. 전자 장치(101)가 듀얼 디스플레이를 포함하는 경우, 프로세서(120)는 어플리케이션 화면을 듀얼 디스플레이 중 어느 하나에 표시하거나, 화면을 분할하여 분할된 일부를 각각 제1디스플레이 및 제2디스플레이를 통해 표시할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 전자 장치(101)가 펼쳐진 상태에서 폴딩 제스처를 감지할 수 있다. 폴딩 제스처는 전자 장치(101)가 펼쳐진 상태에서 사용자가 전자 장치(101)에 힘을 가하여 폴딩 축을 기준으로 전자 장치(101)의 일부를 접는 동작을 의미할 수 있다. 예를 들어, 전자 장치(101)가 인 폴딩 폴더블 디스플레이 구조인 경우, 사용자는 왼손으로 전면의 제1디스플레이의 제2영역 및 제2하우징 구조의 후면(또는 제2디스플레이)을 잡고 오른손으로는 전면의 제1디스플레이의 제1영역 및 제1하우징 구조의 후면을 잡고 안 쪽 방향으로 전자 장치를 접을 수 있다. 전자 장치(101)는 전자 장치(101)의 폴딩을 감지하는 센서(미도시)를 포함할 수 있으며, 상기 센서는 폴딩 축을 기준으로 전자 장치(101)의 하우징의 일부가 회전되는 각도를 통해 폴딩 제스처를 감지할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 폴딩 제스처가 개시되는 경우 각각의 디스플레이(160)에 터치 이벤트의 전송을 중지하도록 할 수 있다. 폴딩 시 디스플레이(160)에 대한 터치는 사용자가 터치 입력을 의도한 것이 아니기 때문이다. 다른 실시예에 따르면, 프로세서(120)는 폴딩 제스처가 개시되는 경우 터치 센서에 터치 이벤트의 전송 중지를 요청하지 않고, 수신되는 터치 이벤트를 무시할 수 있다. 즉, 터치 이벤트가 수신되더라도 어플리케이션에 제공하지 않을 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 폴딩이 개시되기 이전에 어플리케이션에 제공한 터치 이벤트(예: press, release 이벤트)를 취소할 수 있다. 예를 들어, 프로세서(120)는 터치 이벤트에 대응하여 실행할 어플리케이션의 동작을 실행 취소 하거나, 터치 이벤트에 대응하여 이미 실행된 어플리케이션의 동작을 실행 취소 할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 폴딩이 개시되면 이전에 제공한 터치 이벤트에 대응하는 캔슬 이벤트를 어플리케이션에 제공할 수 있다. 예를 들어, 폴딩 중에 실제 발생하고 있는 프레스 이벤트이지만, 이는 사용자가 폴딩을 의도한 것으로써 터치 입력을 의도한 것이 아니기 때문에, 프로세서(120)는 터치 센서로부터 프레스 이벤트가 수신되는 과정에서도 캔슬 이벤트를 어플리케이션에 제공하여, 어플리케이션이 폴딩을 위한 터치를 터치 이벤트로 인식하여 동작 하는 것을 방지할 수 있다. 이에 따라, 어플리케이션은 전자 장치(101)가 폴딩 되기 이전에 터치 센서에 의해 발생한 터치 이벤트에 따른 동작은 실행하지 않을 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 전자 장치(101)의 폴딩에 따라 어플리케이션을 표시할 디스플레이(160)의 영역을 변경할 수 있다. 예를 들어, 전자 장치(101)가 인-폴딩 폴더블 디스플레이 구조인 경우, 접힐 수 있는 제1디스플레이와 하우징의 반대 면에 배치되는 접히지 않는 제2디스플레이를 이용해 어플리케이션 화면을 표시할 수 있다. 또는, 전자 장치가 아웃-폴딩 폴더블 디스플레이 구조인 경우, 폴더블 디스플레이의 폴딩 축을 기준으로 구분되는 제1영역 또는 제2영역 중 어느 하나에 어플리케이션 화면을 표시할 수 있다. 다양한 폼 팩터 중 폴딩 시 디스플레이의 대부분이 사용자에게 보여지지 않는 형태(예: 인-폴딩 폴더블 디스플레이 구조 또는 듀얼 디스플레이 구조에서 배면의 서브 디스플레이가 없는 경우)에서는 전자 장치의 폴딩에 따라 어플리케이션의 표시는 종료 되고, 어플리케이션은 백그라운드에서 동작할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 어플리케이션이 표시될 영역이 변경됨에 따라, 변경된 영역의 속성(예: 크기, 비율, 해상도 등)에 기초하여 어플리케이션 화면을 생성할 수 있다. 프로세서(120)는 실행 중인 어플리케이션에 폴딩 이벤트 및 폴딩 후 어플리케이션이 표시될 영역의 속성 정보를 어플리케이션에 제공할 수 있다.
예를 들어, 전자 장치(101)가 인-폴딩 폴더블 디스플레이 구조인 경우, 폴딩 시 제2디스플레이의 속성(예: 크기, 비율, 해상도)에 기초하여 어플리케이션 화면을 생성할 수 있다. 전자 장치가 아웃-폴딩 폴더블 디스플레이 구조인 경우, 폴딩 시 제1영역 또는 제2영역 중 화면을 표시할 영역(예: 사용자의 주시 방향과 마주보는 영역)의 속성에 기초하여 어플리케이션 화면을 생성할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 어플리케이션의 실행 화면의 리사이징 가능한 지 여부(resizable)를 확인할 수 있다.
프로세서(120)는 언폴딩 상태에서 디스플레이(160)에 표시된 어플리케이션이 리사이징 가능한 어플리케이션(예: 인터넷 브라우저)인 경우, 폴딩 제스처가 감지되면, 변경된 표시 영역의 속성에 기초하여 해당 어플리케이션 화면을 리사이징 하여 표시되도록 할 수 있다.
프로세서(120)는 언폴딩 상태에서 디스플레이(160)에 표시된 어플리케이션이 실행 중 리사이징 불가능한 것으로 설정된 어플리케이션(예: 게임 어플리케이션)인 경우, 폴딩 제스처가 감지 되면, 어플리케이션의 재실행 또는 계속 실행 여부를 선택하기 위한 메뉴를 표시할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 폴딩 제스처에 대응하여 터치 락 화면을 생성하여 폴딩 후 어플리케이션 화면을 표시할 영역에 표시할 수 있다. 터치 락 화면은 실행 중인 어플리케이션의 상태 정보(예: 보안 레벨 및/또는 어플리케이션의 리사이징 여부(resizable))에 따라 결정될 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 터치 락 화면을 상술한 폴딩 시 변경된 영역에 표시할 화면의 상위 레이어에 표시할 수 있다. 프로세서(120)는 터치 락 화면을 포 그라운드에 표시해서 실행 중인 z-order 상 최상위 어플리케이션의 화면 위를 덮도록 생성함으로써, 어플리케이션으로 의도되지 않은 터치 이벤트가 전달되는 것을 방지할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 터치 락 화면을 표시한 이후 어플리케이션 실행 화면이 표시된 디스플레이(160)의 터치 센서로부터 수신되는 터치 이벤트를 처리할 수 있다. 프로세서(120)는 터치 락 화면을 표시한 이후에 디스플레이(160)로부터 수신되는 터치 이벤트에 따라 터치 락 화면을 해제하고, 터치 이벤트를 실행 중인 어플리케이션에 제공할 수 있다.
다양한 실시예에 따르면, 프로세서(120)는 어플리케이션에 대해 지정된 보안 레벨에 따라 non-secure 모드, weak secure 모드 또는 strong secure 모드로 동작할 수 있다. 프로세서(120)는 폴딩 시에 실행 중인 어플리케이션의 보안 레벨에 대응하는 터치 락 화면을 생성하여 표시할 수 있다. 또는, 프로세서(120)는 폴딩 제스처의 속성에 기초하여 보안 레벨 또는 실행 모드를 결정할 수 있다.
도 2a는 다양한 실시예에 따른 전자 장치의 펼침 상태를 도시한 것이다.
다양한 실시예에 따르면, 전자 장치는 서로 분리된 제1디스플레이 및 제2디스플레이를 포함할 수 있다. 제1디스플레이는 접힐 수 있고(foldable), 제2디스플레이는 접히지 않을 수 있다.
도 2a를 참고하면, 전자 장치(200)는, 서로에 대하여 접히도록 힌지 구조(예: 도 3의 힌지 구조(264))를 통해 회동 가능하게 결합되는 한 쌍의 하우징 구조(210, 220), 한 쌍의 하우징 구조(210, 220)의 접힘 가능한 부분을 커버하는 힌지 커버(265), 및 한 쌍의 하우징 구조(210, 220)에 의해 형성된 공간에 배치되는 디스플레이(또는 제1디스플레이)(230)(예: 플렉서블(flexible) 디스플레이 또는 폴더블(foldable) 디스플레이)를 포함할 수 있다. 본 문서에서는 디스플레이(230)가 배치된 면은 전자 장치(200)의 전면(또는 제1면)으로 정의될 수 있으며, 전면의 반대 면은 전자 장치(200)의 후면(또는 제2면)으로 정의될 수 있다. 또한 전면과 후면 사이의 공간을 둘러싸는 면은 전자 장치(200)의 측면으로 정의될 수 있다.
일 실시 예에서, 한 쌍의 하우징 구조(210, 220)는 센서 영역(231d)를 포함하는 제1하우징 구조(210), 제2하우징 구조(220), 제1후면 커버(240) 및 제2후면 커버(250)를 포함할 수 있다. 전자 장치(200)의 한 쌍의 하우징 구조(210, 220)는 도 2a 및 도 2b에 도시된 형태 및 결합으로 제한되지 않으며, 다른 형상이나 부품의 조합 및/또는 결합에 의해 구현될 수 있다. 예를 들어, 다른 실시 예에서는, 제1하우징 구조(210)와 제1후면 커버(240)가 일체로 형성될 수 있고, 제2하우징 구조(220)와 제2후면 커버(250)가 일체로 형성될 수 있다.
일 실시 예에 따르면, 제1하우징 구조(210)와 제2하우징 구조(220)는 폴딩 축(A 축)을 중심으로 양측에 배치되고, 폴딩 축(A 축)에 대하여 전체적으로 대칭인 형상을 가질 수 있다. 일 실시 예에 따르면, 제1하우징 구조(210) 및 제2하우징 구조(220)는 전자 장치(200)의 상태가 펼침 상태(flat stage 또는 closing state)인지, 접힘 상태(folding state)인지, 또는 중간 상태인지 여부에 따라 서로 이루는 각도나 거리가 달라질 수 있다. 일 실시 예에 따르면, 제1하우징 구조(210)는 제2하우징 구조(220)와 달리 다양한 센서들이 배치되는 센서 영역(231d)을 추가로 포함하지만, 이외의 영역에서는 상호 대칭적인 형상을 가질 수 있다. 다른 실시예로, 센서 배치 영역(231d)은 제2하우징 구조(220)의 적어도 일부 영역에 추가로 배치되거나 대체될 수도 있다.
일 실시 예에서, 제1하우징 구조(210)는 전자 장치(200)의 펼침 상태에서, 힌지 구조(예: 도 3의 힌지 구조(264))에 연결되며, 전자 장치(200)의 전면을 향하도록 배치된 제1면(211), 제1면(211)의 반대 방향을 향하는 제2면(212), 및 제1면(211)과 제2면(212) 사이의 공간의 적어도 일부를 둘러싸는 제1측면 부재(213)를 포함할 수 있다. 일 실시 예에서, 제1측면 부재(213)는 폴딩 축(A 축)과 평행하게 배치되는 제1측면(213a), 제1측면(213a)의 일단으로부터 폴딩 축과 수직한 방향으로 연장되는 제2측면(213b) 및 제1측면(213a)의 타단으로부터 폴딩 축(A 축)과 수직한 방향으로 연장되는 제3측면(213c)을 포함할수 있다.
일 실시 예에서, 제2하우징 구조(220)는 전자 장치(200)의 펼침 상태에서, 힌지 구조(예: 도 3의 힌지 구조(264))와 연결되며, 전자 장치(200)의 전면을 향하도록 배치된 제3면(221), 제3면(221)의 반대 방향을 향하는 제4면(222), 및 제3면(221) 및 제4면(222) 사이의 공간의 적어도 일부를 둘러싸는 제2측면 부재(220)를 포함할 수 있다. 일 실시 예에서, 제2측면 부재(220)는 폴딩 축(A 축)과 평행하게 배치되는 제4측면(223a), 제4측면(223a)의 일단으로부터 폴딩 축(A 축)과 수직한 방향으로 연장되는 제5측면(223b) 및 제4측면(223a)의 타단으로부터 폴딩 축(A 축)과 수직한 방향으로 연장되는 제6측면(223c)을 포함할수 있다. 일 실시 예에서, 제3면(221)은 접힘 상태에서 제1면(211)과 마주보도록 대면될 수 있다.
일 실시 예에서, 전자 장치(200)는 제1하우징 구조(210)와, 제2하우징 구조(220)의 구조적 형상 결합을 통하여 디스플레이(230)를 수용하도록 형성되는 리세스(201)를 포함할 수 있다. 리세스(201)는 디스플레이(230)와 실질적으로 동일한 크기를 가질 수 있다. 일 실시 예에서, 센서 영역(231d)으로 인해, 리세스(201)는 폴딩 축(A 축)에 대해 수직한 방향으로 서로 다른 2개 이상의 폭을 가질 수 있다. 예를 들어, 리세스(201)는 제2하우징 구조(220) 중 폴딩 축(A 축)에 평행한 제1부분(220a)과 제1하우징 구조(210) 중 센서 영역(231d)의 가장자리에 형성되는 제1부분(210a) 사이의 제1폭(W1), 및 제2하우징 구조(210)의 제2부분(220b)과 제1하우징 구조(210) 중 센서 영역(213d)에 해당하지 않으면서 폴딩 축(A 축)에 평행한 제2부분(210b)에 의해 형성되는 제2폭(W2)을 가질 수 있다. 이러한 경우, 제2폭(W2)은 제1폭(W1)보다 길게 형성될 수 있다. 예컨대, 리세스(201)는 상호 비대칭 형상을 갖는 제1하우징 구조(210)의 제1부분(210a)으로부터 제2하우징 구조(220)의 제1부분(220a)까지 형성되는 제1폭(W1)과, 상호 대칭 형상을 갖는 제1하우징 구조(210)의 제2부분(210b)으로부터 제2하우징 구조(220)의 제2부분(220b)까지 형성되는 제2폭(W2)을 갖도록 형성될 수 있다. 일 실시 예에서, 제1하우징 구조(210)의 제1부분(210a) 및 제2부분(210b)은 폴딩 축(A 축)로부터 서로 다른 거리를 갖도록 형성될 수 있다. 리세스(201)의 폭은 도시된 예시로 한정되지 아니한다. 다양한 실시 예에서, 센서 영역(213d)의 형태 또는 제1하우징 구조(210) 및 제2하우징 구조(220)의 비대칭 형상을 갖는 부분에 의해 리세스(201)는 2개 이상의 서로 다른 폭을 가질 수도 있다.
일 실시 예에서, 제1하우징 구조(210) 및 제2하우징 구조(220)의 적어도 일부는 디스플레이(230)를 지지하기 위해 선택된 크기의 강성을 갖는 금속 재질 또는 비금속 재질로 형성될 수 있다.
일 실시 예에서, 센서 영역(231d)은 제1하우징 구조(210)의 일측 코너에 인접하여 소정 영역을 가지도록 형성될 수 있다. 다만 센서 영역(231d)의 배치, 형상, 또는 크기는 도시된 예시에 한정되지 아니한다. 예를 들어, 다른 실시 예에서 센서 영역(231d)은 제1하우징 구조(210)의 다른 코너 혹은 상단 코너와 하단 코너 사이의 임의의 영역에 제공될 수 있다. 다른 실시예로, 센서 영역(231d)은 제2하우징 구조의 적어도 일부 영역에 배치될 수도 있다. 다른 실시예로, 센서 영역(231d)는 제1하우징 구조(210) 및 제2하우징 구조(220)에 연장되도록 배치될 수도 있다. 일 실시 예에서, 전자 장치(200)는 센서 영역(213d)을 통하거나, 또는 센서 영역(231d)에 마련된 하나 이상의 개구(opening)를 통해 전자 장치(200)의 전면에 노출되도록 배치되는 다양한 기능을 수행하기 위한 부품들(components)이 될 수 있다. 다양한 실시 예에서, 부품들은, 예를 들어, 전면 카메라 장치, 리시버, 근접 센서, 조도 센서, 홍채 인식 센서, 초음파 센서 또는 인디케이터 중 적어도 하나를 포함할 수 있다.
일 실시 예에서, 제1후면 커버(240)는 제1하우징 구조(210)의 제2면(212)에 배치될 수 있고, 실질적으로 직사각형인 가장자리(periphery)를 가질 수 있다. 일 실시 예에서, 가장자리의 적어도 일부는 제1하우징 구조(210)에 의해 감싸질 수 있다. 유사하게, 제2후면 커버(250)는 제2하우징 구조(220)의 제4면(222)에 배치될 수 있고, 제2하우징 구조(220)에 의해 그 가장자리의 적어도 일부가 감싸질 수 있다.
도시된 실시 예에서, 제1후면 커버(240) 및 제2후면 커버(250)는 폴딩 축(A 축)을 기준으로 실질적으로 대칭적인 형상을 가질 수 있다. 다른 실시예로, 제1후면 커버(240) 및 제2후면 커버(250)는 서로 다른 다양한 형상을 포함할 수도 있다. 다른 실시예로, 제1후면 커버(240)는 제1하우징 구조(210)와 일체로 형성될 수 있고, 제2후면 커버(250)는 제2하우징 구조(220)와 일체로 형성될 수 있다.
일 실시 예에서, 제1후면 커버(240), 제2후면 커버(250), 제1하우징 구조(210), 및 제2하우징 구조(220)는 서로 결합된 구조를 통해 전자 장치(200)의 다양한 부품들(예: 인쇄 회로 기판, 안테나 모듈, 센서 모듈 또는 배터리)이 배치될 수 있는 공간을 제공할 수 있다. 일 실시 예에서, 전자 장치(200)의 후면에는 하나 이상의 부품(components)이 배치되거나 시각적으로 노출될 수 있다. 예를 들어, 제1후면 커버(240)의 제1후면 영역(241)을 통해 하나 이상의 부품 또는 센서가 시각적으로 노출될 수 있다. 다양한 실시 예에서 상기 센서는 근접 센서, 후면 카메라 장치 및/또는 플래시를 포함할 수 있다. 다른 실시 예에서, 제2후면 커버(250)의 제2후면 영역(251)을 통해 서브 디스플레이(또는 제2디스플레이)(252)의 적어도 일부가 시각적으로 노출될 수 있다.
디스플레이(200)는, 폴더블 하우징(210, 220)에 의해 형성된 공간 상에 배치될 수 있다. 예를 들어, 디스플레이(200)는 한 쌍의 하우징 구조(210, 220)에 의해 형성되는 리세스(recess)(예: 도 2a의 리세스(201))에 안착될 수 있으며, 전자 장치(200)의 전면의 실질적으로 대부분을 차지하도록 배치될 수 있다. 따라서, 전자 장치(200)의 전면은 디스플레이(230) 및 디스플레이(230)에 인접한 제1하우징 구조(210)의 일부 영역(예: 가장자리 영역) 및 제2하우징 구조(220)의 일부 영역(예: 가장자리 영역)을 포함할 수 있다. 일 실시 예에서, 전자 장치(200)의 후면은 제1후면 커버(240), 제1후면 커버(240)에 인접한 제1하우징 구조(210)의 일부 영역(예: 가장자리 영역), 제2후면 커버(250) 및 제2후면 커버(250)에 인접한 제2하우징 구조(220)의 일부 영역(예: 가장자리 영역)을 포함할 수 있다.
일 실시 예에서, 디스플레이(230)는, 적어도 일부 영역이 평면 또는 곡면으로 변형될 수 있는 디스플레이를 의미할 수 있다. 일 실시 예에서, 디스플레이(230)는 폴딩 영역(231c), 폴딩 영역(231c)을 기준으로 일측(예: 폴딩 영역(231c)의 우측 영역)에 배치되는 제1영역(231a) 및 타측(예: 폴딩 영역(231c)의 좌측 영역)에 배치되는 제2영역(231b)을 포함할 수 있다. 예를 들면, 제1영역(231a)은 제1하우징 구조(210)의 제1면(211)에 배치되고, 제2영역(231b)은 제2하우징 구조(220)의 제3면(221)에 배치될 수 있다. 일 실시 예에서, 디스플레이(230)의 영역 구분은 예시적인 것이며, 디스플레이(230)는 구조 또는 기능에 따라 복수(예를 들어, 4개 이상 혹은 2개)의 영역으로 구분될 수도 있다. 일례로, 도 2a에 도시된 실시 예에서는 y축에 평행하게 연장되는 폴딩 영역(231c) 또는 폴딩 축(A축)에 의해 디스플레이(230)의 영역이 구분될 수 있으나, 다른 실시 예에서 디스플레이(230)는 다른 폴딩 영역(예: x 축에 평행한 폴딩 영역) 또는 다른 폴딩 축(예: x 축에 평행한 폴딩 축)을 기준으로 영역이 구분될 수도 있다. 전술한 디스플레이의 영역 구분은 한 쌍의 하우징 구조(210, 220) 및 힌지 구조(예: 도 3의 힌지 구조(264))에 의한 물리적 구분일 뿐, 실질적으로 한 쌍의 하우징 구조(210, 220) 및 힌지 구조(예: 도 3의 힌지 구조(264))를 통해 디스플레이(230)는 하나의 전체 화면이 표시될 수 있다. 일 실시 예에서, 제1영역(231a)과 제2영역(231b)은 폴딩 영역(231c)을 중심으로 전체적으로 대칭인 형상을 가질 수 있다. 다만, 제1영역(231a)은, 제2영역(231b)과 달리, 센서 영역(231d)의 존재에 따라 컷(cut)된 노치(notch) 영역(예: 도 3의 노치 영역(233))을 포함할 수 있으나, 이외의 영역에서는 제2영역(231b)과 대칭적인 형상을 가질 수 있다. 예컨대, 제1영역(231a)과 제2영역(231b)은 서로 대칭적인 형상을 갖는 부분과, 서로 비대칭적인 형상을 갖는 부분을 포함할 수 있다.
도 2b는 다양한 실시예에 따른 전자 장치의 펼침 상태 및 접힘 상태를 도시한 것이다.
도 2b를 참고하면, 힌지 커버(265)는, 제1하우징 구조(210)와 제2하우징 구조(220) 사이에 배치되어, 내부 부품(예: 도 3의 힌지 구조(264))을 가릴 수 있도록 구성될 수 있다. 일 실시 예에서, 힌지 커버(265)는, 전자 장치(200)의 작동 상태(펼침 상태(flat state) 또는 접힘 상태(folded state))에 따라, 제1하우징 구조(210) 및 제2하우징 구조(220)의 일부에 의해 가려지거나, 외부로 노출될 수 있다.
일례로, 도 2a에 도시된 바와 같이 전자 장치(200)가 펼침 상태인 경우, 힌지 커버(265)는 제1하우징 구조(210) 및 제2하우징 구조(220)에 의해 가려져 노출되지 않을 수 있다. 일례로, 도 2b에 도시된 바와 같이 전자 장치(200)가 접힘 상태(예: 완전 접힘 상태(completely folded state))인 경우, 힌지 커버(265)는 제1하우징 구조(210) 및 제2하우징 구조(220) 사이에서 외부로 노출될 수 있다. 일례로, 제1하우징 구조(210) 및 제2하우징 구조(220)가 소정의 각도를 이루는(folded with a certain angle) 중간 상태(intermediate state)인 경우, 힌지 커버(265)는 제1하우징 구조(210) 및 제2하우징 구조(220)의 사이에서 전자 장치(200)의 외부로 일부 노출될 수 있다. 이 경우 노출되는 영역은 완전히 접힌 상태보다 적을 수 있다. 일 실시 예에서, 힌지 커버(265)는 곡면을 포함할 수 있다.
이하, 전자 장치(200)의 작동 상태(예: 펼침 상태(flat state) 및 접힘 상태(folded state))에 따른 제1하우징 구조(210) 및 제2하우징 구조(220)의 동작과 디스플레이(230)의 각 영역을 설명한다.
일 실시 예에서, 전자 장치(200)가 펼침 상태(flat state)(예: 도 2a의 상태)인 경우, 제1하우징 구조(210) 및 제2하우징 구조(220)는 180도의 각도를 이루며, 디스플레이의 제1영역(231a) 및 제2영역(231b)은 동일 방향을 향하도록 배치될 수 있다. 또한, 폴딩 영역(231c)은 제1영역(231a) 및 제2영역(231b)과 동일 평면을 형성할 수 있다.
일 실시 예에서, 전자 장치(200)가 접힘 상태(folded state)(예: 도 2b의 상태)인 경우, 제1하우징 구조(210) 및 제2하우징 구조(220)는 서로 마주보게 배치될 수 있다. 디스플레이(230)의 제1영역(231a)과 제2영역(231b)은 서로 좁은 각도(예: 약 0도에서 10도 사이)를 형성하며, 서로 마주볼 수도 있다. 폴딩 영역(231c)은 적어도 일부가 소정의 곡률을 가지는 곡면으로 형성될 수 있다.
일 실시 예에서, 전자 장치(200)가 중간 상태(intermediate state)인 경우, 제1하우징 구조(210) 및 제2하우징 구조(220)는 서로 소정의 각도(a certain angle)로 배치될 수 있다. 디스플레이(230)의 제1영역(231a)과 제2영역(231b)은 접힘 상태보다 크고, 펼침 상태보다 작은 각도를 형성할 수 있다. 폴딩 영역(231c)은 적어도 일부가 소정의 곡률을 가지는 곡면으로 이루어질 수 있으며, 이 때의 곡률은 접힘 상태(folded state)인 경우보다 작을 수 있다.
도 3은 다양한 실시예에 따른 전자 장치의 분리 사시도이다.
도 3을 참조하면, 일 실시 예에서, 전자 장치(200)는 디스플레이(230), 브라켓 어셈블리(260), 적어도 하나의 인쇄 회로 기판(270), 제1하우징 구조(210), 제2하우징 구조(220), 제1후면 커버(240) 및 제2후면 커버(250)를 포함할 수 있다. 본 문서에서, 디스플레이(display unit)(230)는 디스플레이 모듈(module) 또는 디스플레이 어셈블리(assembly)로 불릴 수 있다.
상기 디스플레이(또는 제1디스플레이)(230)는 디스플레이 패널(231)(예: 플렉서블 디스플레이 패널)와, 디스플레이 패널(231)가 안착되는 하나 이상의 플레이트(232) 또는 층을 포함할 수 있다. 일 실시 예에서, 플레이트(232)는 디스플레이 패널(231)와 브라켓 어셈블리(260) 사이에 배치될 수 있다. 플레이트(232)의 일면(예: 도 3의 Z 방향의 면)의 적어도 일부에는 디스플레이 패널(231)이 배치될 수 있다. 플레이트(232)는 디스플레이 패널(231)와 대응되는 형상으로 형성될 수 있다. 예를 들어, 플레이트(232)의 일부 영역은 디스플레이 패널(231)의 노치 영역(233)에 대응되는 형상으로 형성될 수 있다.
브라켓 어셈블리(260)는 제1브라켓(261), 제2브라켓(262), 제1브라켓(261)과 제2브라켓(262) 사이에 배치되는 힌지 구조(264), 힌지 구조(264)를 외부에서 볼 때, 이를 커버하는 힌지 커버(265), 및 제1브라켓(261)과 제2브라켓(262)을 가로지르는 배선 부재(263)(예: 연성 회로 기판(FPCB; flexible printed circuit board))를 포함할 수 있다.
일 실시 예에서, 브라켓 어셈블리(260)는 플레이트(232)와 적어도 하나의 인쇄 회로 기판(270) 사이에 배치될 수 있다. 일례로, 제1브라켓(261)은 디스플레이(230)의 제1영역(231a)과 제1인쇄 회로 기판(271) 사이에 배치될 수 있다. 제2브라켓(262)은 디스플레이(230)의 제2영역(231b)과 제2인쇄 회로 기판(272) 사이에 배치될 수 있다.
일 실시 예에서, 브라켓 어셈블리(260)의 내부에는 배선 부재(263)와 힌지 구조(264)의 적어도 일부가 배치될 수 있다. 배선 부재(263)는 제1브라켓(261)과 제2브라켓(262)을 가로지르는 방향(예: x축 방향)으로 배치될 수 있다. 배선 부재(263)는 폴딩 영역(231c)의 폴딩 축(예: y축 또는 도 2a의 폴딩 축(A))에 수직한 방향(예: x축 방향)으로 배치될 수 있다.
적어도 하나의 인쇄 회로 기판(270)은 위에서 언급된 바와 같이, 제1브라켓(261) 측에 배치되는 제1인쇄 회로 기판(271)과 제2브라켓(262) 측에 배치되는 제2인쇄 회로 기판(272)을 포함할 수 있다. 상기 제1인쇄 회로 기판(271)과 제2인쇄 회로 기판(272)은 브라켓 어셈블리(260), 제1하우징 구조(210), 제2하우징 구조물(220), 제1후면 커버(240) 및 제2후면 커버(250)에 의해 형성되는 공간의 내부에 배치될 수 있다. 제1인쇄 회로 기판(271)과 제2인쇄 회로 기판(272)에는 전자 장치(200)의 다양한 기능을 구현하기 위한 부품들이 실장될 수 있다.
일 실시 예에서, 제1하우징 구조(210) 및 제2하우징 구조(220)는 브라켓 어셈블리(260)에 디스플레이(230)가 결합된 상태에서, 브라켓 어셈블리(260)의 양측으로 결합되도록 서로 조립될 수 있다. 후술하는 바와 같이, 제1하우징 구조(210)와 제2하우징 구조(220)는 브라켓 어셈블리(260)의 양 측에서 슬라이딩 되어 브라켓 어셈블리(260)와 결합될 수 있다.
일 실시 예에서, 제1하우징 구조(210)는 제1회전 지지면(214)을 포함할 수 있고, 제2하우징 구조(520)는 제1회전 지지면(214)에 대응되는 제2회전 지지면(224)을 포함할 수 있다. 제1회전 지지면(214)과 제2회전 지지면(224)은 힌지 커버(265)에 포함된 곡면과 대응되는 곡면을 포함할 수 있다.
일 실시 예에서, 제1회전 지지면(214)과 제2회전 지지면(224)은 전자 장치(200)가 펼침 상태(예: 도 2a의 상태)인 경우, 힌지 커버(265)를 덮어 힌지 커버(265)가 전자 장치(200)의 후면으로 노출되지 않거나 최소한으로 노출될 수 있다. 일 실시 예에서, 제1회전 지지면(214)과 제2회전 지지면(224)은 전자 장치(200)가 접힘 상태(예: 도 2b의 상태)인 경우, 힌지 커버(265)에 포함된 곡면을 따라 회전하여 힌지 커버(265)가 전자 장치(200)의 후면으로 최대한 노출될 수 있다.
일 실시예에서, 서브 디스플레이(또는 제2디스플레이)(252)는 제 2 후면 커버(250) 상에 실장되어 전자 장치(200)의 후면을 통해 외부로 노출될 수 있다.
도 4a 내지 4f는 다양한 실시예에 따른 전자 장치에서 폴딩(folding) 또는 언폴딩(unfolding) 동작 시의 사용 상태를 도시한 도면들이다.
다양한 실시예에 따른 전자 장치(예: 도 1a의 전자 장치(101))(200)는 폴더블 하우징(410), 제1디스플레이(430)(예: 도 2a의 제1디스플레이(230)) 및 제2디스플레이(예: 도 2a의 서브 디스플레이(252))를 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치(200)는 접힘 가능한 폴더블 하우징(410)을 포함할 수 있다. 폴더블 하우징(410)은 힌지 구조(예: 도 3의 힌지 구조(264))에 의해 연결되는 제1하우징 구조(210) 및 제2하우징 구조(220)를 포함할 수 있다.
다양한 실시예에 따르면, 제2하우징 구조(220)는 제1하우징 구조(210)로부터 폴딩 가능하도록 연결될 수 있다. 제1하우징 구조(210)와 제2하우징 구조(220)는 제1방향으로 연장하는 폴딩 축(예: 도 2a의 폴딩축(A축))(420)을 중심으로 서로 폴딩 가능할 수 있다. 제1하우징 구조(210)와 제2하우징 구조(220)는 서로 폴딩된 상태에서 서로 마주보도록 배치될 수 있다.
도 4a를 참조하면, 제1하우징 구조(210) 및 제2하우징 구조(220) 사이의 이루는 각도는 약 180도일 수 있는데, 이와 같이 제1하우징 구조(210) 및 제2하우징 구조(220) 사이의 이루는 각도가 정해진 각도(예: 약 170도) 이상인 경우 전자 장치(또는 제1디스플레이(430))는 펼쳐진 상태라고 정의될 수 있다. 전자 장치(200)가 펼쳐진 상태인 경우, 제1하우징 구조(210)와 제2하우징 구조(220)는 실질적으로 평면 구조를 형성할 수 있다.
도 4b를 참조하면, 다양한 실시예에 따른 전자 장치(200)는 제2디스플레이(예: 도 2a의 서브 디스플레이(252))(440) 를 더 포함할 수 있다.
도 4c는 본 발명의 다양한 실시예에 따른 전자 장치(200)가 폴딩 축(420)을 중심으로 반시계 방향으로 일부 접혀진 것을 도시한 도면이고, 도 4d는 본 발명의 다양한 실시예에 따른 전자 장치(200)가 폴딩 축(420)을 중심으로 최대로 접혀진 것을 도시한 도면이다.
도 4c 및 도 4d를 참조하면, 전자 장치(200)의 사용자는 전자 장치(200)에 힘을 인가하여 펼쳐진 상태인 전자 장치(200)를 폴딩 축(420)을 중심으로 접거나, 접혀진 상태인 전자 장치(200)를 폴딩 축(420)을 중심으로 펼 수 있다.
다양한 실시예에 따른 전자 장치(200)는 전자 장치(200)가 접혀지거나, 펼쳐지는 동안 제1디스플레이(430) 또는 제2디스플레이(440) 상에 사용자의 터치가 발생할 수 있고, 이러한 터치 입력은 제1디스플레이(430)의 터치 센서 또는 제2디스플레이(440)의 터치 센서에 의해 감지될 수 있다. 이와 같이, 전자 장치(200)의 폴딩 상태를 변화시키는 동안, 사용자의 손가락 일부가 제1디스플레이(430) 또는 제2디스플레이(440) 상에 접촉함으로써 발생하는 터치 입력은 실제 사용자가 표시된 화면 상에서 입력하고자 하는 터치가 아닌 사용자의 의도되지 않은 터치일 수 있다.
도 4e를 참조하면, 전자 장치(200)는 전자 장치(200)가 접혀지거나, 펼쳐지는 동안, 제1디스플레이(430) 상에 사용자 입력을 수신할 수 있다. 예를 들면, 전자 장치(200)는 제1디스플레이(430)의 일부 영역(451, 453) 상에 사용자 입력을 수신할 수 있다. 전자 장치(200)가 접혀지거나, 펼쳐지는 동안 제1디스플레이(430) 상에 인가된 사용자 입력은 의도되지 않은 터치일 수 있다.
도 4f를 참조하면, 전자 장치(200)는 전자 장치(200)가 접혀지거나, 펼쳐지는 동안, 제2디스플레이(440) 상에 사용자 입력을 수신할 수 있다. 예를 들면, 전자 장치(200)는 제2디스플레이(440)의 일부 영역(461) 상에 사용자 입력을 수신할 수 있다. 전자 장치(200)가 접혀지거나, 펼쳐지는 동안 제2디스플레이(440) 상에 인가된 사용자 입력은 의도되지 않은 터치일 수 있다.
도 5는 다양한 실시예에 따른 전자 장치(500)의 블록도이다.
도 5를 참조 하면, 전자 장치(500)는 제1디스플레이(510), 제2디스플레이(520), 프로세서(530) 및 메모리(540)를 포함할 수 있으며, 도시된 구성 중 일부가 생략 또는 치환될 수 있다. 전자 장치(500)는 도 1a의 전자 장치(101)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 전자 장치(500)는 도 2a, 도 2b 및 도 3의 구조를 포함할 수 있으며, 도 4a 내지 도 4f에서 설명한 바와 같이 접힐 수 있는 구조를 포함할 수 있다.
다양한 실시예에 따르면, 제1디스플레이(510)는 전자 장치(500)의 하우징의 제1방향의 제1면(또는 전면)에 배치될 수 있다. 제1디스플레이(510)는 제1디스플레이(510) 상에서 발생하는 터치 입력을 감지하는 제1터치 센서(515)를 포함할 수 있으며, 제1터치 센서(515)는 인셀(in-cell) 방식, 온셀(on-cell) 방식을 포함하는 다양한 방식 중 어느 하나로 구현될 수 있다.
다양한 실시예에 따르면, 제1디스플레이(510)는 접힐 수 있다. 제1디스플레이(510)가 접히는 영역(예: 도 2a의 폴딩 영역(231c))을 기준으로 제1영역(예: 도 2a의 제1영역(231a)) 및 제2영역(예: 도 2a의 제2영역(231b))으로 구분될 수 있고, 제1디스플레이(510)는 제1영역 및 제2영역이 서로 마주보는 방향으로 접힐 수 있다. 이에 따라, 전자 장치(500)가 폴딩 된 상태에서 제1디스플레이(510)는 사용자에 의해 보이지 않을 수 있다. 다양한 실시예에 따르면, 제2디스플레이(520)는 전자 장치(500)의 하우징의 제2방향의 제2면(또는 후면)에 배치될 수 있다. 제2디스플레이(520)는 하우징의 후면 커버 중 하나(예: 도 2a의 제2후면 커버(250)) 상에 배치될 수 있다. 이에 따라 제2디스플레이(520)의 면적(또는 가로 방향의 길이)은 제1디스플레이(510)의 면적(또는 가로 방향의 길이)의 절반 또는 그 이하일 수 있다.
제2디스플레이(520)는 제2디스플레이(520) 상에서 발생하는 터치 입력을 감지하는 제2터치 센서(525)를 포함할 수 있으며, 제2터치 센서(525)의 구현 방식은 제1터치 센서(515)와 동일할 수 있다.
제1터치 센서(515) 및/또는 제2터치 센서(525)는 터치 입력에 대응하는 터치 이벤트를 프로세서(530)에 제공할 수 있다. 터치 이벤트는 프레스(press), 릴리즈(release), 캔슬(cancel) 이벤트를 포함할 수 있다. 예를 들어, 제1터치 센서(515)는 사용자가 제1디스플레이(510)의 특정 영역을 누르면 프레스 이벤트를 특정 영역의 좌표와 함께 프로세서(530)에 제공하고, 사용자가 터치를 떼면 릴리즈 이벤트를 프로세서(530)에 제공할 수 있다. 이와 달리, 사용자가 터치를 떼지 않고 손가락을 이동 시켜 터치 영역을 이탈하는 것과 같은 릴리즈가 아닌 상태로 터치가 제거되는 경우에는 캔슬 이벤트를 프로세서(530)에 제공할 수 있다.
프로세서(530)는 수신한 터치 이벤트를 해당 터치 영역에 대응하는 어플리케이션(또는 포 그라운드에 표시된 어플리케이션)에 터치 이벤트를 제공할 수 있다. 프로세서(530)는 어플리케이션이 프레스 이벤트 또는 릴리즈 이벤트를 수신하는 경우 그에 대응하는 동작을 수행하고, 프레스 이벤트 이후 캔슬 이벤트를 수신하는 경우 프레스 이벤트에 따라 수행한 동작을 취소하는 동작을 수행할 수 있다.
다양한 실시예에 따르면, 전자 장치(500)가 펼쳐진 상태에서 제2디스플레이(520) 및 제2터치 센서(525)는 비활성화 상태일 수 있다. 이에 따라, 제2터치 센서(525)에 사용자의 터치가 발생하더라도 터치 이벤트는 생성되지 않을 수 있다. 다른 실시예에 따르면, 전자 장치(500)가 펼쳐진 상태에서도 제2디스플레이(520) 및 제2터치 센서(525)는 활성화 상태로 구동하여, 제2터치 센서(525)가 사용자의 터치 입력에 대응하는 터치 이벤트를 생성할 수 있다.
다양한 실시예에 따르면, 메모리(540)는 공지의 휘발성 메모리(volatile memory) 및 비휘발성 메모리(non-volatile memory)를 포함할 수 있으며, 구체적인 구현 예에 있어서는 한정되지 않는다. 메모리(540)는 도 1a의 메모리(130)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 또한, 메모리(540)는 도 1a의 프로그램(140) 중 적어도 일부를 저장할 수 있다.
메모리(540)는 기능적으로(functionally), 작동적으로(operatively) 및/또는 전기적으로(electrically) 프로세서(530)와 연결되고, 프로세서(530)에서 수행될 수 있는 다양한 인스트럭션(instruction)들을 저장할 수 있다. 이와 같은 인스트럭션들은 프로세서(530)에 의해 인식될 수 있는 산술 및 논리 연산, 데이터 이동, 입출력을 포함하는 다양한 제어 명령을 포함할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 전자 장치(500)의 각 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 수행할 수 있는 구성으로써, 도 1a의 프로세서(120)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 프로세서(530)는 제1디스플레이(510), 제2디스플레이(520), 메모리(540) 를 포함하는 전자 장치(500)의 내부 구성요소와 기능적으로, 작동적으로 및/또는 전기적으로 연결될 수 있다.
프로세서(530)가 전자 장치(500) 내에서 구현할 수 있는 연산 및 데이터 처리 기능에는 한정됨이 없을 것이나, 본 문서에서는 폴딩 제스처 및/또는 언폴딩 제스처 발생 시 터치 이벤트를 처리하는 동작 및 어플리케이션의 화면을 제1디스플레이(510)와 제2디스플레이(520) 간에 끊김 없이(seamless) 표시하는 동작을 처리하기 위한 다양한 실시예들에 대해 설명하기로 한다. 후술할 프로세서(530)의 동작들은 메모리(540)에 저장된 인스트럭션들을 로딩 함으로써 수행될 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 메모리(540)에 저장된 어플리케이션을 실행할 수 있다. 전자 장치(500)(또는 제1디스플레이(510))가 펼쳐진 상태에서 프로세서(530)는 어플리케이션의 실행 화면을 제1디스플레이(510)에 표시할 수 있다. 전자 장치(500)가 펼쳐진 상태에서 제2디스플레이(520)는 절전 모드로 동작하여 꺼지거나(또는 off 상태), AOD(always on display) 모드로 동작하여 시간과 같은 간략한 정보만을 표시할 수 있다.
또한, 전자 장치(500)가 펼쳐진 상태에서 제1디스플레이(510)의 제1터치 센서(515)는 제1디스플레이(510) 상의 터치 입력에 대응하는 터치 이벤트를 프로세서(530)에 제공할 수 있다. 이 때, 제2디스플레이(520) 및 제2터치 센서(525)는 비활성화 상태일 수 있으며, 그에 따라 제2터치 센서(525)는 터치 입력을 감지하지 않을 수 있다.
다양한 실시예에 따르면, 전자 장치(500)는 제1디스플레이(510)가 하우징의 제1면의 실질적인 전체를 커버하도록 베젤(bezel) 영역이 없거나, 아주 좁은 베젤 영역만을 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치(500)(또는 제1디스플레이(510))가 접혀진 상태에서 프로세서(530)는 어플리케이션의 실행 화면을 제2디스플레이(520)에 표시할 수 있다. 전자 장치(500)가 접혀진 상태에서는 제1디스플레이(510)의 제1영역 및 제2영역이 서로 마주보게 되어 사용자에게 인지되지 않으므로 제1디스플레이(510)는 절전 모드로 동작하여 화면을 표시하지 않고, 제1터치 센서(515)도 터치 입력을 감지하지 않을 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 펼쳐진 상태에서 전자 장치(500)(또는 제1디스플레이(510))에 대한 폴딩 제스처를 감지할 수 있다. 도 4a 내지 4f를 통해 설명한 바와 같이, 사용자는 전자 장치(500)의 하우징에 대해 힘을 가해 제1디스플레이(510)의 제1영역 및 제2영역이 마주보도록 접을 수 있다. 이 때, 프로세서(530)는 전자 장치(500)가 접혀짐에 따라 폴딩 영역(예: 도 2a의 폴딩 영역(231c))을 기준으로 제1디스플레이(510)의 제1영역을 커버하는 제1하우징 구조(예: 도 2a의 제1하우징 구조(210)) 및 제2영역을 커버하는 제2하우징 구조(예: 도 2b의 제2하우징 구조(220))가 이루는 각도 변화를 통해 폴딩 제스처를 감지할 수 있다. 예를 들어, 제1하우징 구조와 제2하우징 구조의 각도가 약 180도인 경우 펼쳐진 상태로 인식하고, 펼쳐진 상태에서 각도 변화가 발생하면 폴딩 제스처가 개시된 것으로 판단하고, 기준 값(예: 10도) 이하로 각도가 감소하면 폴딩 제스처가 완료된 것으로 판단할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 폴딩 제스처가 개시되는 경우 제1디스플레이(510)의 제1터치 센서(515)에 터치 이벤트의 전송을 중지하도록 요청할 수 있다. 이는 앞서 도 4a 내지 4f를 통해 설명한 바와 같이, 폴딩 시 제1디스플레이(510)에 대한 터치는 사용자가 터치 입력을 의도한 것이 아니기 때문이다. 다른 실시예에 따르면, 프로세서(530)는 폴딩 제스처가 개시되는 경우 제1터치 센서(515)에 터치 이벤트의 전송 중지를 요청하지 않고, 수신되는 터치 이벤트를 무시할 수 있다. 즉, 터치 이벤트가 수신되더라도 어플리케이션에 제공하지 않을 수 있다. 이 때, 제2디스플레이(520) 및 제2터치 센서(525)는 아직 비활성화 상태이므로, 제2터치 센서(525)는 터치 이벤트를 생성 및 전달하지 않을 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 폴딩 제스처에 대응하여 제1디스플레이(510)를 비활성 상태로 전환 할 수 있다. 제1디스플레이(510)의 화면 오프 및 제1터치 센서(515)의 터치 감지 중단 시점에는 정함이 없다. 예를 들어, 프로세서(530)는 제1디스플레이(510)의 접힘 각도가 소정 이하(예: 약 10도)가 되어 폴딩 제스처의 완료로 판단됨에 대응하여, 또는 후술할 터치 락 화면이 제2디스플레이(520)에 표시됨에 대응하여, 제1디스플레이(510)의 화면 오프 및 제1터치 센서(515)의 터치 감지 중단을 위한 제어 동작을 수행할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 폴딩 제스처에 대응하여 제2디스플레이(520)를 활성화 상태로 전환할 수 있다. 다만, 이 경우에도 프로세서(530)는 터치 락 화면이 표시되기 이전까지 제2터치 센서(525)는 비활성화 상태로 유지하거나, 제2터치 센서(525)가 제2디스플레이(520)와 같이 활성화 된 경우에도 제2터치 센서(525)에서 발생한 터치 이벤트는 처리하지 않을 수 있다. 다른 실시예들에 따르면, 제2디스플레이(520) 및 제2터치 센서(525)는 전자 장치(500)의 폴딩 상태 또는 언폴딩 상태에서 모두 활성화 될 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 폴딩이 개시되기 이전에 어플리케이션에 제공한 터치 이벤트(예: press, release 이벤트)를 취소할 수 있다. 예를 들어, 프로세서(530)는 터치 이벤트에 대응하여 실행할 어플리케이션의 동작을 실행 취소 하거나, 터치 이벤트에 대응하여 이미 실행된 어플리케이션의 동작을 실행 취소 할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 폴딩이 개시되면 이전에 제공한 터치 이벤트에 대응하는 캔슬 이벤트를 어플리케이션에 제공할 수 있다. 예를 들어, 폴딩 중에 실제 발생하고 있는 프레스 이벤트이지만, 이는 사용자가 폴딩을 의도한 것으로써 터치 입력을 의도한 것이기 아니기 때문에, 프로세서(530)는 터치 센서로부터 프레스 이벤트가 수신되는 과정에서도 캔슬 이벤트를 어플리케이션에 제공하여, 어플리케이션이 폴딩을 위한 터치를 터치 이벤트로 인식하여 동작 하는 것을 방지할 수 있다. 이에 따라, 어플리케이션은 제1디스플레이(510)가 폴딩 되기 이전에 제1터치 센서(515)에 의해 발생한 터치 이벤트에 따른 동작은 실행하지 않을 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 폴딩 제스처에 대응하여 터치 락 화면을 제2디스플레이(520)에 표시할 수 있다. 터치 락 화면은 실행 중인 어플리케이션의 상태 정보(예: 보안 레벨 및/또는 어플리케이션의 리사이징 여부(resizable))에 따라 결정될 수 있으며, 터치 락 화면의 예에 대해서는 도 10a 및 도 10b를 통해 상세히 후술하기로 한다.
다양한 실시예에 따르면, 프로세서(530)는 터치 락 화면을 포 그라운드에 표시해서 실행 중인 z-order 상 최상위 어플리케이션의 화면 위를 덮도록 생성함으로써, 어플리케이션으로 의도되지 않은 터치 이벤트가 전달되는 것을 방지할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 터치 락 화면을 표시한 이후 제2디스플레이(520)의 제2터치 센서(525)로부터 수신되는 터치 이벤트를 처리할 수 있다. 프로세서(520)는 터치 락 화면의 표시에 대응하여, 제2터치 센서(525)를 활성화 하거나, 이미 활성화 된 제2터치 센서(525)로부터 수신되는 터치 이벤트를 처리할 수 있다.
프로세서(530)는 터치 락 화면을 표시한 이후에 제2디스플레이(520)로부터 수신되는 터치 이벤트에 따라 터치 락 화면을 해제하고, 터치 이벤트를 실행 중인 어플리케이션에 제공할 수 있다. 이 때, 제1디스플레이(510) 및 제1터치 센서(515)는 이미 비활성화 된 상태일 수 있다.
폴딩 제스처의 감지 이후 프로세서(530)가 제1터치 센서(515) 및/또는 제2터치 센서(525)의 터치 이벤트를 처리하는 방법에 대해서는 도 8을 통해 보다 상세히 설명하기로 한다.
다양한 실시예에 따르면, 프로세서(530)는 어플리케이션의 상태 정보에 기초하여 터치 락 화면을 생성할 수 있다. 여기서, 어플리케이션의 상태 정보는 어플리케이션에 대해 지정된 보안 레벨 및/또는 어플리케이션의 실행 화면의 리사이징 여부(resizable)에 대한 정보를 포함할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 어플리케이션에 대해 지정된 보안 레벨에 따라 non-secure 모드, weak secure 모드 또는 strong secure 모드로 동작할 수 있다. 예를 들어, non-secure 모드는 음성 통화 어플리케이션이 실행 중인 경우로써, 프로세서(530)는 음성 통화 중 폴딩 제스처가 감지되더라도 터치 락 이미지를 표시하지 않고, 음성 통화 어플리케이션의 실행 화면을 바로 제2디스플레이(520)에 표시하고, 제2터치 센서(525)로부터 수신되는 터치 이벤트를 음성 통화 어플리케이션에 제공할 수 있다.
Weak secure 모드(또는 제1보안 레벨)인 경우, 프로세서(530)는 반투명한 터치 락 화면을 어플리케이션 실행 화면의 상위 레이어에 표시할 수 있다. 이 후, 제2디스플레이(520)에 표시된 터치 락 화면에 대한 소정의 터치 입력(예: swipe)이 감지되면, 터치 락 화면을 제거하고 실행 중인 어플리케이션의 화면을 제2디스플레이(520)에 표시할 수 있다. 이 때, 어플리케이션의 화면은 제2디스플레이(520)의 해상도에 대응하여 리사이징된 것일 수 있다.
Strong secure 모드(또는 제2보안 레벨)인 경우, 프로세서(530)는 불투명한 터치 락 화면을 제2디스플레이(520)에 표시할 수 있다. 이 때, 프로세서(530)는 터치 락 화면을 표시한 상태에서 정해진 사용자의 인증(예: 패턴 입력, 패스 워드 입력, 홍채 인식, 지문 인식 등)이 완료되면 어플리케이션의 실행 화면을 제2디스플레이(520)에 표시할 수 있다. 일 실시예에 따르면, 프로세서(530)는 실행 중인 어플리케이션이 아닌 다른 어플리케이션(예: 홈 화면 또는 백그라운드 실행 어플리케이션)을 제2디스플레이(520)에 표시할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 언폴딩 상태에서 실행 중인 어플리케이션의 속성에 기초하여 상기 보안 레벨 또는 실행 모드를 결정할 수 있다.
예를 들어, 프로세서(530)는 실행 중인 어플리케이션이 끊김 없이 연속적인 사용이 필요한 어플리케이션(예: 통화 어플리케이션)인 경우 non-secure 모드로 동작하고, 일반적인 어플리케이션에 대해서는 weak secure 모드로 동작하고, 사용자의 프라이버시와 같이 보안이 필요한 어플리케이션인 경우 strong secure 모드로 동작할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 폴딩 제스처의 속성에 기초하여 상기 보안 레벨 또는 실행 모드를 결정할 수 있다.
일 실시예에 따르면, 프로세서(530)는 폴딩 제스처의 시작 시점 및 완료 시점 사이의 시간 차이를 확인할 수 있다. 확인된 시간 차이가 일정 임계값 이하인 경우, 프로세서(530)는 strong secure 모드로 동작할 수 있다. 이는, 사용자가 빠른 속도로 전자 장치(500)를 접은 경우, 프라이버시와 같은 이유로 디스플레이에 표시된 정보를 유출하지 않기를 원한 것으로 해석할 수 있기 때문이다.
다른 일 실시예에 따르면, 프로세서(530)는 폴딩 제스처의 방향을 통해 폴딩 후의 제2디스플레이(520)가 사용자의 가시 방향인 지 여부를 확인할 수 있다. 예를 들어, 제2디스플레이(520)를 위쪽(중력 반대 방향)으로 위치 시킨 경우 제2디스플레이(520)가 가시 방향인 것으로 판단하고, 제2디스플레이(520)를 아래쪽(중력 방향)으로 위치 시킨 경우 제2디스플레이(520)가 비가시 방향인 것으로 판단할 수 있다. 프로세서(530)는 제2디스플레이(520)가 가시 방향인 것으로 판단되는 경우 weak secure 모드의 터치 락 화면을 표시하고, 비가시 방향인 것으로 판단되는 경우 strong secure 모드로 동작하거나 제2디스플레이(520)를 절전 모드로 설정할 수 있다.
다른 일 실시예에 따르면, 프로세서(530)는 폴딩 제스처의 패턴에 기반하여 실행 모드를 결정할 수 있다. 프로세서(530)는 폴딩 시 제2디스플레이(520)가 배치된 하우징(예: 도 2a의 제2하우징 구조(220))의 가속도와 제2디스플레이(520)가 배치되지 않은 하우징(예: 도 2a의 제1하우징 구조(210))의 가속도를 비교하고, 제2디스플레이(520)가 배치된 하우징의 가속도가 더 큰 경우 제2디스플레이(520)가 사용자의 가시 방향인 것으로 결정하고, weak secure 모드의 터치 락 화면을 표시할 수 있다. 이와 달리, 제2디스플레이(520)가 배치되지 않은 하우징의 가속도가 더 큰 경우 제2디스플레이(520)가 사용자의 비가시 방향인 것으로 결정하고, strong secure 모드로 동작하거나 제2디스플레이(520)를 절전 모드로 설정할 수 있다.
다양한 실시예에 따르면, 전자 장치(500)는 제1하우징 구조 및/또는 제2하우징 구조에 센서(예: 가속도 센서, 자이로 센서)를 배치하여, 상기 센서로부터 폴딩 제스처의 패턴을 확인할 수 있다.
다양한 실시예에 따르면, 프로세서(530)는 어플리케이션의 실행 화면의 리사이징 가능한 지 여부(resizable)를 확인할 수 있다. 프로세서(530)는 어플리케이션의 속성 정보로부터 리사이징 가능한 지 여부를 확인할 수 있다.
프로세서(530)는 제1디스플레이(510)에 표시된 어플리케이션이 리사이징 가능한 어플리케이션(예: 인터넷 브라우저)인 경우, 폴딩 제스처가 감지되면, 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면을 생성하고, 생성된 터치 락 화면을 제2디스플레이(520)에 표시된 어플리케이션의 리사이징 된 실행 화면의 상위 레이어에 표시할 수 있다.
이 후, 제2디스플레이(520)에 표시된 터치 락 화면에 대한 소정의 터치 입력(예: swipe)이 감지되면, 터치 락 화면을 제거하고 실행 중인 어플리케이션의 화면을 제2디스플레이(520)에 표시할 수 있다. 다른 실시예들에 따르면, 터치 락 화면에 대해 정해진 인증 방식(예: 패턴 입력, 패스워드 입력, 홍채 인식, 지문 인식 등)에 따른 인증이 완료된 후 터치 락 화면을 제거하고 어플리케이션의 화면을 제2디스플레이(520)에 표시할 수 있다. 이 때, 인증 방식은 보안 레벨(예: weak secure mode, strong secure mode 등) 및/또는 사용자의 설정에 따라 결정될 수 있다. 이 후, 전자 장치(500)가 다시 언폴딩 되면 상기 어플리케이션을 제1디스플레이(510)에 원래 크기로 표시할 수 있다. 본 실시예에 대해서는 도 14를 통해 보다 상세히 설명하기로 한다.
프로세서(530)는 제1디스플레이(510)에 표시된 어플리케이션이 실행 중 리사이징 불가능한 것으로 설정된 어플리케이션(예: 게임 어플리케이션)인 경우, 폴딩 제스처가 감지 되면, 어플리케이션의 재실행 또는 계속 실행 여부를 선택하기 위한 메뉴를 포함하는 터치 락 화면을 제2디스플레이(520)에 표시할 수 있다. 프로세서(530)는 터치 락 화면의 메뉴 상에서 계속 실행 메뉴가 선택됨에 대응하여, 어플리케이션을 백 그라운드에서 실행하고, 다른 어플리케이션(예: 홈 화면 또는 백그라운드 실행 어플리케이션)을 제2디스플레이(520)에 표시할 수 있다. 이 후, 전자 장치(500)가 다시 언폴딩 되면 상기 어플리케이션을 제1디스플레이(510)에 포 그라운드 상에 표시할 수 있다. 본 실시예에 대해서는 도 15를 통해 보다 상세히 설명하기로 한다.
다양한 실시예에 따르면, 터치 락 화면은 폴딩 제스처가 개시된 후 완전히 폴딩이 완료되기 이전에도 표시될 수 있다. 예를 들어, 프로세서(530)는 제1하우징 구조 및 제2하우징 구조가 이루는 각도가 180도에서 0도로 변화하는 과정에 있어, 지정된 각도(예: 150도, 120도, 90도, 60도, 30도)에 도달하는 경우, 터치 락 화면을 제2디스플레이에 표시할 수 있다. 또는, 터치 락 화면에 대응되는 시각적 효과를 제공하고, 폴딩이 완료되는 경우에 터치 락 화면을 표시할 수 있다.
도 6은 다양한 실시예에 따른 전자 장치의 디스플레이 관련 구성의 블록도이다.
도 6을 참조하면, 전자 장치(600)는, 제1디스플레이(610), 제2디스플레이(620), 제1디스플레이 구동IC (display driver IC)(611), 제2디스플레이 구동IC(621) 및 프로세서(630)를 포함할 수 있다.
일 실시 예에 따르면, 제1디스플레이 구동IC(611)는 인터페이스 모듈(미도시), 메모리(예: 버퍼 메모리)(미도시), 이미지 처리 모듈(미도시), 또는 맵핑 모듈(미도시)을 포함할 수 있다. 제1디스플레이 구동IC(611)는, 예를 들면, 영상 데이터, 또는 상기 영상 데이터를 제어하기 위한 명령에 대응하는 영상 제어 신호를 포함하는 영상 정보를 인터페이스 모듈을 통해 전자 장치(600)의 다른 구성요소로부터 수신할 수 있다. 예를 들면, 제1디스플레이 구동IC(611)는 상기 영상 정보를 프로세서(630)로부터 수신하거나, 또는 프로세서(630)의 기능과 독립적으로 운영되는 보조 프로세서(630)(예: 그래픽 처리 장치)로부터 수신할 수 있다. 일 실시예에 따르면, 제1디스플레이 구동IC(611)는 터치 회로 또는 센서 모듈과 상기 인터페이스 모듈을 통하여 통신할 수 있다. 일 실시예에 따르면, 제1디스플레이 구동IC(611)는 상기 수신된 영상 정보 중 적어도 일부를 메모리에, 예를 들면, 프레임 단위로 저장할 수 있다. 일 실시예에 따르면, 이미지 처리 모듈은, 예를 들면, 상기 영상 데이터의 적어도 일부를 상기 영상 데이터의 특성 또는 제1디스플레이(610)의 특성에 적어도 기반하여 전처리 또는 후처리(예: 해상도, 밝기, 또는 크기 조정)를 수행할 수 있다. 일 실시 예에 따르면, 맵핑 모듈은 이미지 처리 모듈을 통해 전처리 또는 후처리된 상기 영상 데이터에 대응하는 전압 값 또는 전류 값을 생성할 수 있다. 일 실시 예에 따르면, 전압 값 또는 전류 값의 생성은 예를 들면, 제1디스플레이(610)의 픽셀들의 속성(예: 픽셀들의 배열(RGB stripe 또는 pentile 구조), 또는 서브 픽셀들 각각의 크기)에 적어도 일부 기반하여 수행될 수 있다. 제1디스플레이(610)의 적어도 일부 픽셀들은, 예를 들면, 상기 전압 값 또는 전류 값에 적어도 일부 기반하여 구동됨으로써 상기 영상 데이터에 대응하는 시각적 정보(예: 텍스트, 이미지, 또는 아이콘)가 제1디스플레이(610)를 통해 표시될 수 있다.
일 실시 예에 따르면, 제2디스플레이 구동IC(621)는 프로세서(630)로부터 수신된 영상 정보에 기반한 영상을 표시하도록 제2디스플레이(620)를 구동할 수 있다. 일 실시 예에 따르면, 제2디스플레이 구동IC(621)는 제2디스플레이(620)를 구동하는 것에서 차이점이 있을 뿐, 제1디스플레이 구동IC(611)와 동일 또는 유사한 구성요소를 포함할 수 있다. 예를 들면, 제2디스플레이 구동IC(621)는, 제1디스플레이 구동IC(611)와 유사한 기능을 수행하는, 인터페이스 모듈(미도시), 메모리(예: 버퍼 메모리)(미도시), 이미지 처리 모듈(미도시), 또는 맵핑 모듈(미도시)을 포함할 수 있다.
일 실시 예에 따르면, 프로세서(630)는 제1디스플레이 구동IC(611)와 작동적으로 연결되는 제1디스플레이 포트(612), 및 제2디스플레이 구동IC(621)와 작동적으로 연결되는 제2디스플레이 포트(622)를 포함할 수 있다. 예를 들면, 프로세서(630)는 제1디스플레이 포트(612)를 통해 제1디스플레이 구동IC(611)에게 제1영상 정보를 전송하고, 제2디스플레이 포트(622)를 통해 제2디스플레이 구동IC(621)에게 제2영상 정보를 전송할 수 있다.
일 실시 예에 따르면, 상기 제1영상 정보 및 상기 제2영상 정보는 동일할 수 있다. 예를 들면, 프로세서(630)는 제1디스플레이 구동IC(611) 및 제2디스플레이 구동IC(621)에게 동일한 영상 데이터를 포함하는 영상 정보를 전송할 수 있다.
다른 실시 예에 따르면, 상기 제2영상 정보에 포함된 영상 데이터는 제1영상 정보에 포함된 영상 데이터의 적어도 일부분을 포함할 수 있다. 예를 들면, 프로세서(630)는 사용자로부터 제1영상 데이터(예: 제1디스플레이(610)에서 표시되는 전체 영상)의 일부분을 선택하는 입력을 수신하고, 상기 입력에 기반하여 상기 제1영상 데이터의 일부분인 제2영상 데이터(예: 제1디스플레이(610)에서 표시되는 전체 영상의 일부분)를 제2디스플레이 구동IC(621)에게 전송할 수 있다.
다른 실시 예에 따르면, 프로세서(630)는 제1디스플레이 구동IC(611) 및 제2디스플레이 구동IC(621)에게 동일한 영상 데이터를 전송하고, 제2디스플레이 구동IC(621)에게 상기 사용자 입력에 기반한 좌표 정보를 추가로 전송할 수 있다. 예를 들면, 상기 좌표 정보는 상기 사용자가 선택한 제1영상 데이터의 일부분을 정의하는 좌표 정보(예: 상기 제2영상 데이터의 좌표)일 수 있고, 제2디스플레이 구동IC(621)는 상기 좌표 정보에 기반하여 상기 제1영상 데이터의 일부분(예: 상기 제2영상 데이터)을 표시하도록 제2디스플레이(620)를 구동할 수 있다.
도 7은 다양한 실시예에 따른 전자 장치의 소프트웨어 계층의 블록도이다.
도시된 소프트웨어 구조(700)는 일부 실시예이고, 전자 장치(예: 도 5의 전자 장치(500))가 포함하는 플랫폼에 따라 도시된 구성 중 적어도 일부는 변경될 수 있다. 도 7은 소프트웨어 구조(700) 상에서 터치 이벤트의 처리와 관련된 일부 구성을 도시하고 있다.
도 7을 참조 하면, 어플리케이션 계층은 메모리 상에 저장 및 프로세서에 의해 실행 가능한 적어도 하나의 어플리케이션(711) 및 시스템 UI(715)를 포함할 수 있다. 어플리케이션(711)은 인터넷 브라우저, 비디오 어플리케이션, 게임 등 그 종류가 제한되지 않을 수 있다. 시스템 UI(715)는 notification bar, quick view와 같이 전자 장치의 시스템 상에서 구현하는 여러 GUI 화면을 구성하는 어플리케이션을 의미할 수 있다.
프레임워크(framework)는 전자 장치의 하나 이상의 리소스들로부터 제공되는 기능 또는 정보가 어플리케이션(711)에 의해 사용될 수 있도록 다양한 기능들을 어플리케이션(711)으로 제공할 수 있다.
프레임워크는 어플리케이션(711)의 생명 주기(life cycle)를 관리하는 액티비티 매니저(721), 어플리케이션(711)의 사용자 인터페이스 생성에 사용되는 확장 가능한 뷰(view)들의 집합인 뷰 시스템(723), 디스플레이되는 하나 이상의 GUI 자원들을 관리하기 위한 윈도우 매니저(722), 전자 장치의 배터리(예: 도 1a의 배터리(189))를 관리하는 전력 매니저(724), 전자 장치에서 제공하는 입력 수단의 정보를 제공하는 입력 매니저(725), 센서(예: 도 1a의 센서(예: 도 1a의 센서 모듈(176))를 제어하는 센서 매니저(727) 및 전자 장치의 디스플레이(예: 도 5의 제1디스플레이(510) 및 제2디스플레이(520))와 관련된 정보를 제공하는 디스플레이 매니저(726)를 포함할 수 있다.
하드웨어 추상화 계층(hardware abstraction layer, HAL)는 하드웨어 계층에 포함된 복수의 하드웨어 모듈과 전자 장치의 소프트웨어 사이의 추상화된 계층을 의미할 수 있다. 하드웨어 추상화 계층은 입력 디스패처(731) 또는 센서에서 발생하는 이벤트를 표준화하는 인터페이스를 제공하는 이벤트 허브(732)를 포함할 수 있다. 입력 디스패처(731)는 발생한 이벤트를 어떠한 어플리케이션(711)으로 제공할 지 결정하는 기능을 수행할 수 있다. 서피스 플린저(733)는 여러 어플리케이션(711)에서 생성된 실행 화면 중 디스플레이에 표시할 실행 화면을 제공하는 기능을 수행하고, 디스플레이 구성 변경 시 변경된 디스플레이 구성에 따라 해상도 및 밀집도의 변경을 처리하도록 어플리케이션(811, 812)에 요청할 수 있다.
커널 드라이버 계층은 전자 장치에 포함된 다양한 하드웨어 모듈을 제어하기 위한 다양한 드라이버를 포함할 수 있다. 커널 드라이버 계층은 터치 컨트롤러(751)를 제어하는 인터페이스 모듈을 포함하는 터치 드라이버(741) 및 센서와 연결된 센서 컨트롤러(752)를 제어하는 인터페이스 모듈을 포함하는 센서 드라이버(742)를 포함할 수 있다.
하드웨어 계층은 터치 컨트롤러(751) 및 센서 컨트롤러(752)를 포함할 수 있다. 터치 컨트롤러(751)는 제1디스플레이의 제1터치 센서(예: 도 5의 제1터치 센서(515)) 및/또는 제2디스플레이의 제2터치 센서(예: 도 5의 제2터치 센서(525))에서 발생한 터치 입력을 수신하고, 터치 입력에 대응하는 터치 이벤트를 제공할 수 있다. 전자 장치는 폴딩을 감지하기 위한 센서를 하우징의 일부(예: 제1하우징 구조(210) 및 제2하우징 구조(220))에 배치할 수 있고, 센서 컨트롤러(752)는 상기 센서에서 획득한 정보를 제공할 수 있다.
다양한 실시예에 따르면, 제1디스플레이의 제1터치 센서 및/또는 제2디스플레이의 제2터치 센서에서 터치 입력이 감지되는 경우, 터치 컨트롤러(751)는 터치 입력에 대응하는 터치 이벤트를 출력하고, 상기 터치 이벤트는 터치 드라이버(741)에서 제공하는 인터페이스를 통하여 이벤트 허브(732)로 입력될 수 있다. 이벤트 허브(732)로 입력된 터치 이벤트는 입력 디스패처(731)에서 결정한 어플리케이션(711)(예: 포 그라운드 어플리케이션)으로 제공될 수 있다.
다양한 실시예에 따르면, 전자 장치는 폴딩 제스처가 개시되면, 제1디스플레이의 제1터치 센서 및/또는 제2디스플레이의 제2터치 센서에 터치 이벤트의 전송을 중지하도록 요청할 수 있다. 전송 중지 요청에 따라, 이벤트 허브(732)에서 수집된 터치 이벤트는 어플리케이션(711)으로 전송되지 않을 수 있다.
다양한 실시예에 따르면, 전자 장치는 폴딩이 개시되기 이전에 어플리케이션(711)에 제공한 터치 이벤트(예: press, release 이벤트)를 취소할 수 있다. 예를 들어, 전자 장치는 폴딩이 개시되면 이전에 제공한 터치 이벤트에 대응하는 캔슬 이벤트를 어플리케이션(711)에 제공할 수 있다. 이 경우, 이벤트 허브에는 프레스 이벤트가 계속 올라오고 있으나 사용자가 폴딩을 의도한 것으로써 터치 입력을 의도한 것이 아니기 때문에, 캔슬 이벤트를 강제로 어플리케이션(711)에 제공할 수 있다.
도 8은 다양한 실시예에 따른 전자 장치의 드로잉 엔진(drawing engine)(800)의 블록도이다.
도 8을 참조 하면, 전자 장치(예: 도 5의 전자 장치(500))는 메모리(예: 도 5의 메모리(540))의 일부 영역을 어플리케이션(811, 812)의 실행 상태를 기록하기 위한 서피스(surface)(821, 822, 823)로 지정할 수 있다.
서피스 플린저(surface flinger)(830)는 서피스(821, 822, 823)에 기록된 어플리케이션의 실행 화면을 화면에 표시할 지 여부를 결정할 수 있으며, 디스플레이 구성 변경 시 해상도 및 밀집도의 변경을 어플리케이션(811, 812)에 처리 요청할 수 있다.
제1프레임 버퍼(841)에는 각 어플리케이션(811, 812)에 의해 생성된 제1디스플레이(예: 도 5의 제1디스플레이(510))의 해상도 및 밀집도에 대응하는 실행 화면이 저장되고, 제2프레임 버퍼(842)에는 각 어플리케이션에 의해 생성된 제2디스플레이(예: 도 5의 제2디스플레이(520))의 해상도 및 밀집도에 대응하는 실행 화면이 저장될 수 있다.
전자 장치가 펼쳐진 상태에서 서피스 플린저(830)는 각 어플리케이션(811, 812)에서 생성하여 서피스(821, 822, 823)에 기록된 제1디스플레이의 해상도 및 밀집도에 대응하는 실행 화면을 제1프레임 버퍼(841)에 저장할 수 있다.
전자 장치가 접히는 경우, 서피스 플린저(830)는 각 어플리케이션(811, 812)에 제2디스플레이(811, 812)의 해상도 및 밀집도에 대응하는 실행 화면의 처리를 요청하고, 서피스(821, 822, 823)에 기록된 제2디스플레이의 해상도 및 밀집도에 대응하는 실행 화면을 제2프레임 버퍼(842)에 저장할 수 있다.
전자 장치는 화면 전환 이벤트에 따라 서피스 플린저(830)에서 제1프레임 버퍼(841) 또는 제2프레임 버퍼(842)로 전송되는 경로를 open 또는 close 시킬 수 있다.
이에 따라, 폴딩 또는 언폴딩 시 제1디스플레이의 화면이 제2디스플레이로 전환됨에 있어, 끊김 없는 화면 제공이 가능하다.
도 9는 다양한 실시예에 따라 전자 장치가 폴딩 동작 시 감지되는 터치 이벤트를 처리하는 방법을 도시한 도면이다.
프로세서는 전자 장치(예: 도 5의 전자 장치(500) 또는 제1디스플레이(예: 도 5의 제1디스플레이(510)))가 펼쳐진 상태에서 어플리케이션의 실행 화면을 제1디스플레이에 표시할 수 있다. 이 때, 제1디스플레이의 일 영역에 대한 프레스 이벤트(A press)가 감지될 수 있다. 다양한 실시예에 따르면, 전자 장치가 펼쳐진 상태에서 제2디스플레이(예: 도 5의 제2디스플레이(520)) 및 제2터치 센서(예: 도 5의 제2터치 센서(525))는 활성화 상태이거나, 비활성화 상태일 수 있는데, 이하에서는 비활성화 상태에서 폴딩 제스처에 따라 활성화 상태로 전환하는 경우의 실시예에 대해 설명하기로 한다.
프로세서(예: 도 5의 프로세서(530))는 폴딩 제스처의 개시를 감지할 수 있다. 전자 장치는 제1디스플레이의 제1영역을 커버하는 제1하우징 구조(예: 도 2a의 제1하우징 구조(210)) 및 제2영역을 커버하는 제2하우징 구조(예: 도 2b의 제2하우징 구조(220))가 이루는 각도 변화를 통해 폴딩 제스처를 감지할 수 있다.
폴딩 제스처가 감지되면 프로세서는 제1터치 센서(예: 도 5의 제1터치 센서(515))에 터치 이벤트의 전송을 중지하도록 요청할 수 있다. 이에 따라 프로세서가 다시 제1터치 센서 및/또는 제2터치 센서에 터치 이벤트의 전송을 요청할 때까지 제1터치 센서 및/또는 제2터치 센서의 터치 이벤트는 프로세서로 전달되지 않을 수 있다. 예를 들어, 하드웨어 계층의 터치 컨트롤러(예: 도 7의 터치 컨트롤러(751)) 및 커널 드라이버 계층의 터치 드라이버(예: 도 7의 터치 드라이버(741))에서 이벤트 허브(732)로 올라오는 터치 이벤트는 어플리케이션(예: 도 7의 어플리케이션(711))에 전달되지 않을 수 있다.
이는 디스플레이 전환 간 터치 오 입력을 방지하기 위한 것이다.
프로세서는 이미 발생한 터치 이벤트 중 어플리케이션에 전달하지 않은 터치 이벤트는 폐기할 수 있다. 프로세서는 폴딩이 개시되기 이전에 어플리케이션에 제공한 터치 이벤트(A press)에 대한 캔슬 이벤트(A cancel)를 어플리케이션에 제공할 수 있다. 이에 따라, 어플리케이션은 이전에 수신된 터치 이벤트(A press)에 대응하는 동작을 수행하지 않거나 이미 수행된 동작을 취소할 수 있다.
폴딩 제스처가 수행되는 동안 발생하는 터치 이벤트(B press, C press)는 프로세서에 전달되지 않을 수 있다.
폴딩 제스처가 완료되면, 프로세서는 제1디스플레이를 비활성 상태로 전환하고, 제2디스플레이를 활성화 상태로 전환할 수 있다. 제1디스플레이 및 제2디스플레이의 상태 전환 시점은 이에 한정되지 않으며, 일부 구간에서 제1디스플레이 및 제2디스플레이가 동시에 켜져 있을 수도 있다.
프로세서는 폴딩 제스처에 대응하여 터치 락 화면을 생성하여 제2디스플레이에 표시할 수 있다. 프로세서는 z-order 상 터치 락 화면을 어플리케이션 윈도우의 상위 레이어로 생성함으로써 어플리케이션으로 의도하지 않은 터치 입력이 전달되는 것을 방지할 수 있다.
프로세서는 터치 락 화면을 표시함에 대응하여 제2터치 센서를 활성화 하고, 제1터치 센서 및/또는 제2터치 센서에 터치 이벤트의 전달 재개를 요청할 수 있다. 프로세서는 터치 이벤트의 전달 멈춤 및 전달 재개를 활성화 된 터치 센서를 구분하지 않고, 제1터치 센서 및 제2터치 센서 모두에 전송할 수 있다.
이에 따라, 터치 락 화면을 표시하기 이전에 발생한 터치 이벤트(A release)는 어플리케이션에 제공되지 않을 수 있다. 이는 제2디스플레이가 활성 상태가 된 직후 사용자가 폴딩을 위한 그립 상태를 유지할 수 있으므로, 이에 의한 터치 오 입력을 방지하기 위함이다.
제2디스플레이의 제2터치 센서는 터치 락 화면의 생성 이후에 발생하는 터치 이벤트를 프로세서에 제공할 수 있다. 여기서, B release 및 C release는 사용자 또는 터치 센서의 입장에서는 B press 및 C press와 연결되는 동작인데, B press 및 C press가 폴딩 중에 이루어진 것이기 때문에 프로세서에는 B press 및 C press의 터치 이벤트가 전달되지 않을 수 있다. 이에, 프로세서는 이 후 B release 및 C release 터치 이벤트가 제2터치 센서로부터 전달되더라도 B release 및 C release 터치 이벤트는 무시하고, B release 및 C release에 대응하는 동작은 수행하지 않을 수 있다. 또는 프로세서는 B release 및 C release 이벤트를 어플리케이션에 제공하지 않을 수 있다.
다른 실시예에 따르면, 프로세서는 터치 락 화면의 생성 이후에 제2터치 센서로부터 전달되는 터치 이벤트를 모두 어플리케이션으로 전달하고, 어플리케이션은 이 중 B release 및 C release와 같이 press 이벤트 없이 수신되는 터치 이벤트는 에러 처리해서 어플리케이션의 상태에 반영하지 않을 수 있다.
이 후, 새로운 프레스 이벤트 D press가 제2터치 센서로부터 제공되면, 프로세서는 D press에 대응되는 동작을 수행할 수 있다. 예를 들어, 프로세서는 터치 락 화면이 표시된 상태에서 제2디스플레이 상에 발생하는 터치 이벤트(D press 및 D release)에 따라 터치 락 화면의 표시를 제거하고, 어플리케이션의 실행 화면을 제2디스플레이에 표시할 수 있다. 이 후, 프로세서는 어플리케이션의 실행 화면이 표시된 상태에서 발생하는 터치 이벤트를 어플리케이션에 제공할 수 있다.
도 9에 도시한 바와 달리, 정해진 시간 내(예: 약 5초)에 터치 이벤트(D press)가 입력되지 않는 경우, 프로세서는 터치 락 화면의 표시를 종료하고 제2디스플레이를 오프 시킬 수 있다.
도 10a 내지 10f는 다양한 실시예에 따라 전자 장치(1000)에 표시되는 터치 락 화면을 도시한 도면들이다.
다양한 실시예에 따르면, 프로세서(예: 도 5의 프로세서(530))는 폴딩 제스처에 대응하여, 터치 락 화면(1070)을 제2디스플레이(1020)에 표시할 수 있다. 이 때, 프로세서는 어플리케이션에 대해 지정된 보안 레벨에 기초하여 터치 락 화면(1070)을 생성할 수 있으며, 보안 레벨에 따라 non-secure 모드, weak secure 모드 또는 strong secure 모드로 동작할 수 있다. 이하에서는, 특징 보안 모드에 따라 정해진 터치 락 화면이 표시되는 것으로 설명 하였으나, 이에 한정되지 않는다. 예를 들어, 도 10a의 터치 락 화면(1070)이 반드시 weak secure mode에서만 표시되는 것으로 한정될 필요는 없다.
도 10a는 weak secure 모드로 동작 시 표시되는 터치 락 화면(1070)의 일 예를 도시하고 있다.
예를 들어, 프로세서는 제1디스플레이(예: 도 5의 제1디스플레이(510))가 펼쳐진 상태에서 인터넷 어플리케이션을 포 그라운드에서 실행하고, 인터넷 어플리케이션의 실행 화면을 제1디스플레이에 표시할 수 있다. 이 때, 제2디스플레이(1020)는 절전 모드로 꺼져 있거나, AOD(always on display)가 표시된 상태일 수 있다.
폴딩 제스처가 감지되면, 프로세서는 인터넷 어플리케이션에 대해 지정된 보안 레벨을 확인하고, 보안 레벨이 weak secure 모드에 대응하는 제1레벨로 확인할 수 있다. 어플리케이션에 대해 지정된 보안 레벨은 어플리케이션의 속성 정보에 포함될 수 있으며, 사용자의 설정에 따라 변경될 수 있다.
다양한 실시예에 따르면, 프로세서는 보안 레벨이 제1레벨로 설정된 경우, 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면(1070)을 생성할 수 있다. 터치 락 화면(1070)은 터치 락 화면(1070)의 하위 레이어에 실행 중인 어플리케이션의 실행 화면(1060)을 지시하는 아이콘(1071)을 포함할 수 있다. 프로세서는 폴딩 제스처에 대응하여 인터넷 어플리케이션의 실행 화면(1060)을 제2디스플레이(1020)의 해상도에 기초하여 리사이징 할 수 있다.
제1디스플레이는 하우징의 제1면의 대부분 영역을 커버하고, 제2디스플레이(1020)는 제2면의 일부(예: 절반)를 커버하기 때문에 제1디스플레이와 제2디스플레이(1020)의 해상도(또는 화면 비율)는 차이가 있을 수 있다.
프로세서는 생성된 터치 락 화면(1070)을 인터넷 어플리케이션의 실행 화면(1060)의 상위 레이어에 표시할 수 있다. 도 10a를 참조 하면, 터치 락 화면(1070)이 반투명한 영역을 포함하기 때문에 하위 레이어의 인터넷 어플리케이션의 실행 화면(1060)도 사용자에게 인지될 수 있다.
도 10b는 strong secure 모드로 동작 시 표시되는 터치 락 화면의 일 예를 도시하고 있다.
예를 들어, 프로세서는 제1디스플레이가 펼쳐진 상태에서 보안 레벨이 제2레벨로 설정된 메모 어플리케이션을 포 그라운드에서 실행하고, 메모 어플리케이션의 실행 화면을 제1디스플레이에 표시할 수 있다.
프로세서는 폴딩 제스처의 감지 시 실행된 메모 어플리케이션에 대해 지정된 제2레벨을 확인하고, 보안 상태를 해제하기 위한 가이드 정보를 포함하는 터치 락 화면(1080)을 생성할 수 있다. 가이드 정보는 잠금 모드 시에 잠금 해제를 위해 설정된 방법(예: 패턴 입력, 패스 워드 입력, 홍채 인식, 지문 인식 등)을 가이드 하는 정보로써, 도 10b를 참조 하면 잠금 해제 패턴을 입력하기 위한 이미지(1081)를 포함할 수 있다.
프로세서는 strong secure 모드에서는 실행 중인 어플리케이션의 정보를 노출하지 않기 위해 불투명한 터치 락 화면(1080)을 제2디스플레이(1020)에 표시할 수 있다.
이 때, 프로세서는 터치 락 화면(1080)을 표시한 상태에서 정해진 사용자의 인증(예: 패턴 입력, 패스 워드 입력, 홍채 인식, 지문 인식 등)이 완료되면 어플리케이션의 실행 화면을 제2디스플레이(1020)에 표시할 수 있다. 일 실시예에 따르면, 프로세서는 실행 중인 어플리케이션이 아닌 다른 어플리케이션(예: 홈 화면 또는 백그라운드 실행 어플리케이션)을 제2디스플레이(1020)에 표시할 수 있다.
다양한 실시예에 따르면, 프로세서는 폴딩 제스처의 속성에 기초하여 상기 보안 레벨 또는 실행 모드를 결정할 수 있다. 예를 들어, 프로세서는 폴딩 제스처의 시작 시점 및 완료 시점의 시간 차이, 폴딩 제스처의 방향을 통해 폴딩 후의 제2디스플레이(1020)가 사용자의 가시 방향인 지 여부, 폴딩 시 이동되는 하우징(예: 도 2a의 제1하우징 구조(210) 및 제2하우징 구조(220))의 가속도에 기초하여 보안 레벨 또는 실행 모드를 결정할 수 있다.
상기 보안 레벨 또는 실행 모드를 결정하기 위한 어플리케이션의 속성 및 폴딩 제스처의 속성은 사용자의 설정에 의해 변경될 수 있다.
도 10c는 터치 락 화면의 다른 예에 대해 도시한 것이다. 도 10c의 터치 락 화면은 weak secure mode에서 표시될 수 있으나, 이에 한정되지 않는다.
도 10c를 참조 하면, 프로세서는 전자 장치(1000)가 폴딩 시 투명한 레이어로 구성되는 터치 락 화면을 어플리케이션 실행 화면(1060)에 중첩하여 제2디스플레이(1020) 상에 표시할 수 있다. 이 때, 터치 락 화면은 터치 락 상태임을 알리기 위한 특정 문구(예: touch lock) 등의 오브젝트(1075)를 표시할 수 있다. 이 때, 터치 락 화면은 투명하기 때문에, 어플리케이션 실행 화면(1060)이 그대로 사용자에게 보여질 수 있다.
이 후, 터치 락 화면의 오브젝트(1075)에 대한 입력 또는 swipe 등 정해진 타입의 터치 입력에 따라 터치 락 화면을 제거할 수 있다. 예를 들어, 정해진 타입의 터치 입력은 swipe 외에도, 정해진 입력 세기, 입력 방향, 입력 횟수, 입력의 지속 시간 또는 거리 등을 만족하는 터치 입력을 포함할 수 있다.
터치 락 화면이 표시된 상태에서 어플리케이션 실행 화면(1060)의 영역에서 발생하는 터치는 거절될 수 있고, 그에 대응하는 시각 또는 촉각 피드백이 제공될 수 있다.
도 10d는 터치 락 화면의 다른 예에 대해 도시한 것이3다.
도 10d를 참조 하면, 프로세서는 전자 장치(1000)가 폴딩 시 투명한 레이어로 구성되는 터치 락 화면을 표시하고, 어플리케이션 실행 화면(1060)의 외부 영역(1077)에 터치 락 상태임을 알리기 위한 특정 문구(예: touch lock) 등의 오브젝트(1076)를 표시할 수 있다. 이 후, 터치 락 화면의 오브젝트(1076)에 대한 입력 또는 swipe 등 정해진 입력에 따라 터치 락 화면을 제거할 수 있다. 터치 락 화면이 표시된 상태에서 어플리케이션 실행 화면(1060)의 영역에서 발생하는 터치는 거절될 수 있고, 그에 대응하는 시각 또는 촉각 피드백이 제공될 수 있다.
도 10e를 참조 하면, 프로세서는 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면(1090)을 생성하여 제2디스플레이(1020)에 표시할 수 있다. 여기서, 터치 락 화면(1090)은 터치 락 화면(1090)의 제거를 위한 정해진 오브젝트(1091)를 표시할 수 있다. 터치 락 화면(1090)의 오브젝트(1091)에 대한 터치 입력에 따라, 터치 락 화면(1090)이 제거되고, 어플리케이션 실행 화면(1060)이 표시될 수 있다.
다양한 실시예에 따르면, 프로세서는 터치 락 화면을 표시하지 않고, 제2디스플레이를 오프 시킬 수 있다. 예를 들어, 프로세서는 전자 장치(1000)의 폴딩이 완료되면, 제2디스플레이(1020)를 오프 시키고, 제2디스플레이(1020)를 온 시키기 위한 오브젝트(1095)를 표시할 수 있다. 전자 장치는 오브젝트(1095)에 대한 터치 입력에 기초하여, 제2디스플레이(1020)를 온 시키고, 어플리케이션 실행 화면을 표시할 수 있다.
도 11a 내지 11c는 다양한 실시예에 따라 폴딩 동작 시 전자 장치(1100)의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
다양한 실시예에 따르면, 프로세서(예: 도 5의 프로세서(530))는 어플리케이션의 실행 화면의 리사이징 여부에 기초하여 제2디스플레이(1120)에 어플리케이션을 표시하는 방법을 결정할 수 있다.
도 11a 내지 11c는 리사이징 가능한 인터넷 어플리케이션을 표시하는 예를 도시하고 있다.
도 11a를 참조 하면, 프로세서는 제1디스플레이(1110)가 펼쳐진 상태에서 제1디스플레이(1110)의 해상도 및 밀집도에 대응하는 인터넷 어플리케이션의 실행 화면(1150)을 생성하여 제1디스플레이(1110)에 표시할 수 있다.
프로세서는 폴딩 제스처를 감지 하면, 터치 락 화면(1170)을 생성할 수 있다. 이와 적어도 일부 동시에 프로세서는 화면 전환 이벤트를 인터넷 어플리케이션에 전달하고, 인터넷 어플리케이션은 제2디스플레이(1120)의 해상도 및 밀집도에 따라 어플리케이션 실행 화면을 redrawing 할 수 있다.
터치 락 화면(1170)은 터치 락 화면(1170)의 하위 레이어에 실행 중인 어플리케이션의 실행 화면(1160)을 지시하는 아이콘(1171)을 포함할 수 있다.
도 11b는 폴딩 제스처에 대응하여 제2디스플레이(1120)에 표시된 화면을 도시하고 있다. 다양한 실시예에 따르면, 프로세서는 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면(1170)을 생성하여, 인터넷 어플리케이션의 리사이징 된 실행 화면(1160)의 상위 레이어에 표시할 수 있다.
앞서 도 10a 및 10b를 통해 설명한 바와 같이, 프로세서는 어플리케이션의 보안 레벨 및/또는 폴딩 제스처의 속성에 기초하여 터치 락 화면(1170)을 생성할 수 있다. 프로세서는 터치 락 화면(1170)이 표시된 이후에 제2디스플레이(1120)의 제2터치 센서의 터치 이벤트에 따른 동작을 수행할 수 있다.
다양한 실시예에 따르면, 프로세서는 터치 락 화면(1170)이 표시된 상태에서 특정 입력(예: long press)이 입력되는 경우, 터치 락 화면(1170)의 하위 레이어에 표시된 어플리케이션 실행 화면(1160)에 대한 입력으로 처리하여 대응되는 동작을 수행할 수 있다.
다양한 실시예에 따르면, 터치 락 화면(1170)은 그 일부가 제거된 영역을 포함할 수 있다. 예를 들어, 터치 락 화면(1170)이 반투명한 화면으로 구성되는 경우, 적어도 일부 영역은 완전 투명한 형태일 수 있다. 프로세서는 터치 락 화면(1170)이 표시되고 있는 상태에서도 상기 완전 투명한 일부 영역에 대한 터치 입력에 기초하여 터치 이벤트를 어플리케이션에 제공하고, 어플리케이션 실행 화면을 업데이트 할 수 있다. 예를 들어, 인터넷 어플리케이션이 실행 중인 경우, 웹 페이지 새로 고침 버튼, 즐겨찾기 버튼, URL 입력창 등은 터치 락 화면의 표시 상태에서도 사용자의 입력을 수신하기 위해, 터치 락 화면의 일부가 제거될 수 있다. 사용자가 웹 페이지 새로 고침 버튼을 터치하는 경우, 터치 락 화면(1170)의 표시는 그대로 유지하면서, 웹 페이지 새로 고침을 수행하여 어플리케이션 실행 화면을 업데이트 할 수 있다.
도 11c를 참조 하면, 프로세서는 터치 락 화면(1170)에서 정해진 터치 입력(예: swipe)이 발생하는 경우, 상위 레이어에 표시된 터치 락 화면(1170)을 제거하고, 어플리케이션 실행 화면(1160)을 표시할 수 있다. 여기서, 어플리케이션 실행 화면(1160)은 제1디스플레이(1110)에 표시되어 있던 어플리케이션 실행 화면(1150)과 다를 수 있다. 예를 들어, 폴딩 이전과 폴딩 이후에 시간이 흘렀기 때문에, 어플리케이션의 실행 상태가 변경되고, 그에 따라 어플리케이션 실행 화면도 업데이트 될 수 있다.
도 11d를 참조 하면, 프로세서는 전자 장치(1100)가 폴딩 시 제2디스플레이(1120)에 적어도 하나의 어플리케이션 아이콘(1180)을 표시할 수 있다. 여기서, 표시되는 아이콘은 사용자가 설정한 어플리케이션, 자주 사용하는 어플리케이션, 최근에 사용한 어플리케이션 등의 아이콘일 수 있다. 프로세서는 상기 어플리케이션 아이콘(1180)에 대한 입력에 따라 바로 해당 어플리케이션을 실행하여 제2디스플레이(1120)에 표시할 수 있다.
도 11e를 참조 하면, 프로세서는 전자 장치(1100)가 폴딩 시, 언폴딩 상태에서 멀티 화면으로 표시된 다수의 어플리케이션(1150)에 대응하는 아이콘(1190)을 표시할 수 있다. 도 11e를 참조 하면, 전자 장치가 언폴딩 상태에서 멀티 화면으로 인터넷 어플리케이션(1151), 캘린더 어플리케이션(1152), 갤러리 어플리케이션(1153)이 표시될 수 있다. 이 후, 전자 장치가 폴딩되는 경우, 프로세서는 제2디스플레이(1120)에 해당 어플리케이션에 대응하는 아이콘(1190)들을 표시할 수 있다. 여기서, 프로세서는 상기 어플리케이션 아이콘(1190)에 대한 입력에 따라 바로 해당 어플리케이션을 실행하여 제2디스플레이(1120)에 표시할 수 있다. 또는, 프로세서는 터치 락 화면에 대한 정해진 입력(예: swipe, 패스워드 입력 등)이 입력되면, 제2디스플레이(1120) 상에 이전에 표시되었던 어플리케이션들을 멀티 화면으로 표시할 수 있다.
다른 실시예에 따르면, 프로세서는 언폴딩 상태에서 제1디스플레이에 표시된 적어도 하나의 어플리케이션 및 백그라운드에서 실행 중인 어플리케이션에 대응하는 아이콘을 폴딩 시에 제2디스플레이에 표시할 수 있다.
도 12a 내지 12d는 다양한 실시예에 따라 폴딩 동작 시 전자 장치(1200)의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 12a 내지 12c는 어플리케이션이 해상도(또는 화면 비율) 변경을 지원하지는 않으나, 프로세서에 의해 리사이징 가능한 비디오 어플리케이션을 표시하는 예를 도시한 것이다.
도 12a를 참조 하면, 프로세서(예: 도 5의 프로세서(530))는 제1디스플레이(1210)가 펼쳐진 상태에서 제1디스플레이(1210)의 해상도 및 밀집도에 대응하는 비디오 어플리케이션의 실행 화면(1250)을 생성하여 제1디스플레이(1210)에 표시할 수 있다.
도 12b를 참조 하면, 프로세서는 폴딩 제스처에 대응하여 터치 락 화면(1270)을 생성하여 제2디스플레이(1220)에 표시할 수 있다. 이 때, 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면(1270)을 생성하여, 비디오 어플리케이션의 리사이징 된 실행 화면(1260)의 상위 레이어에 표시할 수 있다.
비디오 어플리케이션은 해상도 변경을 지원하지 않기 때문에, 프로세서는 제2디스플레이(1220)의 해상도(또는 화면 비율)에 따라 비디오 어플리케이션의 실행 화면의 해상도를 강제로 변경할 수 있다. 이에 따라, 이 때 제2디스플레이(1220)에 표시되는 비디오 어플리케이션의 실행 화면(1260)은 제1디스플레이(1210)에 표시되는 비디오 어플리케이션의 실행 화면(1250)의 해상도와 다르게 가로 방향으로 더 확장된 비율을 가질 수 있다.
도 12c를 참조 하면, 프로세서는 터치 락 화면(1270)에서 정해진 터치 입력(예: swipe)이 발생하는 경우, 상위 레이어에 표시된 터치 락 화면(1270)을 제거하고, 어플리케이션 실행 화면(1261)을 표시할 수 있다. 이 때, 비디오 어플리케이션의 실행 화면(1261)은 제2디스플레이(1220)의 해상도에 따라 가로 방향이 더 확장된 형태일 수 있다.
이 때, 프로세서는 비디오 어플리케이션의 실행 화면(1261)의 해상도를 원래 해상도로 변환하도록 하는 버튼(1265)을 비디오 어플리케이션의 일 영역에 출력할 수 있다.
도 12d를 참조 하면, 상기 버튼(1265)의 선택 시, 프로세서는 비디오 어플리케이션의 실행 화면(1261)을 정해진 해상도, 즉 제1디스플레이(1210)에 표시되는 비디오 어플리케이션의 해상도(화면 비율)에 대응되게 리사이징 하여, 리사이징 된 화면(1262)을 제2디스플레이(1220)에 표시할 수 있다.
도 13a 내지 13d는 다양한 실시예에 따라 폴딩 동작 시 전자 장치(1300)의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 13a 내지 13d는 실행 화면의 리사이징이 불가능한 게임 어플리케이션을 표시하는 예를 도시한 것이다. 예를 들어, 이하에서 설명하는 게임 어플리케이션은 런타임 중 해상도 및/또는 밀집도의 변경을 지원하지 않고, 해상도 변경 시도 시 강제 종료되도록 설정된 어플리케이션일 수 있다.
도 13a를 참조 하면, 프로세서(예: 도 5의 프로세서(530))는 제1디스플레이(1310)가 펼쳐진 상태에서 제1디스플레이(1310)의 해상도 및 밀집도에 대응하는 게임 어플리케이션의 실행 화면(1350)을 생성하여 제1디스플레이(1310)에 표시할 수 있다.
도 13b를 참조 하면, 프로세서는 폴딩 제스처에 대응하여 터치 락 화면(1380)을 생성하여 제2디스플레이(1320)에 표시할 수 있다. 다양한 실시예에 따르면, 프로세서는 어플리케이션의 종료, 재실행 또는 호환성 모드를 선택할 수 있는 버튼(1381)을 터치 락 화면(1380)에 포함할 수 있다. 앞서 설명한 대로, 게임 어플리케이션은 런타임 중 해상도 변경을 지원하지 않을 수 있고, 이 경우 제1디스플레이(1310)에서 실행 중 해상도가 다른 제2디스플레이(1320)에서 실행하기 위해서는 종료 후 재실행해야 할 수 있다.
프로세서는 게임 어플리케이션의 실행 화면 중 제2디스플레이(1320)의 크기에 대응되는 영역(예: 도 13a의 영역 1351)을 포함하는 썸네일 이미지(1360)를 생성하고, 썸네일 이미지(1360)의 상위 레이어에 터치 락 화면(1380)을 표시할 수 있다.
도 13c를 참조 하면, 사용자가 어플리케이션의 재실행을 선택한 경우, 실행 중인 게임 어플리케이션을 종료 후 재실행할 수 있다. 이 때, 프로세서는 제2디스플레이(1320)의 해상도 및 밀집도에 따라 재실행 된 게임 어플리케이션의 실행 화면(1385)을 생성할 수 있다.
도 13d를 참조 하면, 사용자가 호환성 모드를 선택한 경우, 프로세서는 게임 어플리케이션에 화면 전환 이벤트를 보내지 않고, 백그라운드에서 실행되는 상태를 유지할 수 있다. 이 때, 프로세서는 게임 어플리케이션을 pause 할 수 있다.
프로세서는 게임 어플리케이션의 백그라운드 실행과 적어도 일부 동시에 홈 화면(1380)을 제2디스플레이(1320)에 표시할 수 있다. 다른 실시예에 따르면, 프로세서는 게임 어플리케이션 외에 z-order 상 최상위의 order를 가진 어플리케이션의 화면을 제2디스플레이(1320)에 표시할 수 있다.
프로세서는 이 후 제1디스플레이(1310)가 언폴딩 되면, 백그라운드에서 실행 중이던 게임 어플리케이션을 다시 z-order 상 최상위로 자동 설정하고, pause 상태를 resume 하여 제1디스플레이(1310)에서 연속적으로 게임 어플리케이션을 사용하도록 할 수 있다.
도 14는 다양한 실시예에 따라 언폴딩 동작 시 전자 장치(1400)의 각 디스플레이에 표시되는 화면을 도시한 도면이다.
도 14는 리사이징 가능하고, 낮은 보안 레벨(weak secure mode)로 동작하는 인터넷 어플리케이션이 실행 중인 경우를 도시하고 있다.
프로세서(예: 도 5의 프로세서(530))는 폴딩 제스처를 감지 하면, 터치 락 화면(1470)을 생성하여 제2디스플레이(1420)에 표시할 수 있다. 프로세서는 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면(1470)을 생성하여, 인터넷 어플리케이션의 실행 화면(1460)의 상위 레이어에 표시할 수 있다.
이 후, 프로세서는 터치 락 화면에 대한 정해진 터치 입력에 대응하여, 터치 락 화면(1470)을 제거하고 인터넷 어플리케이션의 실행 화면(1460)을 표시할 수 있다.
프로세서는 터치 락 화면(1470)이 표시된 상태 또는 터치 락 화면(1470)이 제거되어 인터넷 어플리케이션의 실행 화면(1460)이 표시된 상태에서 제1디스플레이(1410)에 대한 언폴딩 제스처를 감지할 수 있다. 프로세서는 언폴딩 제스처에 대응하여, 화면 전환 이벤트를 인터넷 어플리케이션으로 보내고, 인터넷 어플리케이션은 제1디스플레이(1410)의 해상도에 대응하는 실행 화면(1450)으로 리사이징 하여 출력할 수 있다.
언폴딩 제스처가 완료되면, 제2디스플레이(1420) 상에서 인터넷 어플리케이션의 표시는 제거되고, 절전 모드 또는 AOD 화면을 출력할 수 있다.
도 15는 다양한 실시예에 따라 언폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면이다.
도 15는 실행 화면의 리사이징이 불가능한 게임 어플리케이션이 실행 중인 경우를 도시하고 있다.
전자 장치(1500)가 접혀진 상태에서 제2디스플레이(1520)에 게임 어플리케이션의 실행 화면(1561)이 표시될 수 있다.
이 후, 언폴딩 제스처를 감지 하면, 프로세서(예: 도 5의 프로세서(530))는 게임 어플리케이션의 속성 정보에 기반하여 게임 어플리케이션이 런타임 중 해상도 및/또는 밀집도의 변경을 지원하지 않고, 해상도 변경 시도 시 강제 종료되도록 설정된 것을 확인할 수 있다.
프로세서는 언폴딩 제스처에 대응하여, 제2디스플레이(1520)의 해상도 및 밀집도에 대응하는 어플리케이션의 실행 화면(1562)을 제1디스플레이(1510)에 표시할 수 있다. 예를 들어, 프로세서는 폴딩 상태에서 제2디스플레이(1520)에 표시되었던 실행 화면(1561)과 동일한 해상도 및 밀집도의 실행 화면(1562)을 언폴딩 후 제1디스플레이(1510)에 표시할 수 있다. 이 때, 제1디스플레이(1510)에서 실행 화면이 표시된 이외의 영역(1564)은 블랙으로 처리될 수 있다. 이에 따라, 게임 어플리케이션이 리사이징을 지원하지 않음에도 제2디스플레이(1520)에서 제1디스플레이(1510)로 끊김 없이 화면이 전환될 수 있다.
프로세서는 이 후, 사용자가 재실행을 선택하면, 어플리케이션의 실행을 종료한 후 재실행 하여 재실행 된 실행 화면(1551)을 제1디스플레이(1510)에 표시할 수 있다. 이 때, 게임 어플리케이션은 제1디스플레이(1510)의 해상도 및 밀집도에 기초하여 실행 화면(1551)을 생성할 수 있다.
다양한 실시예에 따른 전자 장치(500)는, 하우징, 상기 하우징의 제1방향의 제1면에 배치되고, 제1터치 센서(515)를 포함하는 제1디스플레이(510), 상기 하우징의 제2방향의 제2면에 배치되고, 제2터치 센서(525)를 포함하는 제2디스플레이(520), 상기 제1디스플레이(510)는 접힐 수 있고(foldable), 상기 제1디스플레이(510)가 접힌 경우, 상기 접힌 영역을 기준으로 구분되는 상기 제1디스플레이(510)의 상기 제1영역 및 상기 제2영역이 서로 마주볼 수 있으며, 상기 하우징 내에 배치되고, 상기 제1디스플레이(510) 및 상기 제2디스플레이(520)와 작동적으로(operatively) 연결되는 프로세서(530), 및 상기 하우징 내에 배치되고, 상기 프로세서(530)와 작동적으로 연결되는 메모리(540) 를 포함하고, 상기 메모리(540)는, 실행 시에, 상기 프로세서(530)가, 상기 제1디스플레이(510)가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 제1디스플레이(510)에 표시하고, 상기 제1디스플레이(510)에 대한 폴딩(folding) 제스처를 감지하고, 상기 감지된 폴딩 제스처에 대응하여, 터치 락 화면(1070 또는 1080)을 상기 제2디스플레이(520)에 표시하고, 상기 터치 락 화면(1070 또는 1080)을 표시한 이후 상기 제2디스플레이(520)의 상기 제2터치 센서(525)로부터 수신되는 터치 이벤트를 처리하도록 하는 인스트럭션들을 저장할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 폴딩 제스처의 감지 시점으로부터 상기 터치 락 화면(1070 또는 1080)이 표시되는 시점 사이에 상기 제1디스플레이(510)의 상기 제1터치 센서(515) 및 상기 제2디스플레이(520)의 상기 제2터치 센서(525) 중 적어도 하나에 의해 수신되는 터치 이벤트를 상기 어플리케이션에 제공하지 않도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 폴딩 제스처의 감지 시, 상기 폴딩 제스처 이전에 상기 제1디스플레이(510)의 상기 제1터치 센서(515) 및 상기 제2디스플레이(520)의 상기 제2터치 센서(525) 중 적어도 하나에 의해 수신하여 상기 어플리케이션에 제공한 터치 이벤트 중 적어도 일부에 대응하는 취소 이벤트를 상기 어플리케이션에 제공하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 어플리케이션의 상태 정보에 적어도 일부 기초하여, 상기 터치 락 화면(1070 또는 1080)을 생성하도록 할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션의 상태 정보는, 상기 어플리케이션에 대해 지정된 보안 레벨을 포함할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 보안 레벨이 제1레벨로 설정된 경우, 적어도 일부가 반투명한 영역을 포함하는 상기 터치 락 화면(1070)을 생성하고, 상기 생성된 터치 락 화면(1070)을 상기 어플리케이션 실행 화면의 상위 레이어(layer)에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 보안 레벨이 제2레벨로 설정된 경우, 보안 상태를 해제하기 위한 가이드 정보를 포함하는 상기 터치 락 화면(1080)을 상기 제2디스플레이(520)에 표시하고, 상기 보안 상태의 해제를 위한 사용자 입력에 적어도 일부 기초하여 상기 어플리케이션 실행 화면을 상기 제2디스플레이(520)에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 폴딩 제스처의 특성에 적어도 일부 기초하여 상기 보안 레벨을 결정하도록 할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션의 상태 정보는, 상기 어플리케이션의 실행 화면의 리사이징 여부(resizable)에 대한 정보를 포함할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 어플리케이션의 상태 정보에 적어도 일부 기초하여 상기 어플리케이션의 실행 화면이 리사이징 가능한 것으로 결정되는 경우, 적어도 일부가 반투명한 영역을 포함하는 상기 터치 락 화면(1070 또는 1080)을 생성하고, 상기 생성된 터치 락 화면(1070 또는 1080)을 상기 어플리케이션의 리사이징 된(resized) 실행 화면의 상위 레이어에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 어플리케이션의 상태 정보에 적어도 일부 기초하여 상기 어플리케이션의 실행 화면이 리사이징 불가능한 것으로 결정되는 경우, 상기 어플리케이션의 재실행 또는 계속 실행 여부를 선택하기 위한 메뉴를 포함하는 터치 락 화면(1070 또는 1080)을 상기 제2디스플레이(520)에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 터치 락 화면(1070 또는 1080)의 메뉴 상에서 상기 계속 실행이 선택됨에 대응하여, 상기 어플리케이션을 백그라운드에서 실행하고, 다른 어플리케이션의 실행 화면을 상기 제2디스플레이(520)에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 제1디스플레이(510)의 언폴딩(unfolding) 제스처를 감지하고, 상기 감지된 언폴딩 제스처에 대응하여, 상기 제2디스플레이(520)의 상기 다른 어플리케이션 실행 화면의 표시를 종료하고, 상기 제1디스플레이(510)에 상기 어플리케이션의 실행 화면을 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 터치 락 화면(1070 또는 1080)의 메뉴 상에서 상기 재실행이 선택됨에 대응하여, 상기 어플리케이션을 종료하고, 상기 어플리케이션을 재실행하여 상기 제2디스플레이(520)의 해상도에 대응하는 상기 어플리케이션의 실행 화면을 생성하여 상기 제2디스플레이(520)에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 하우징은, 힌지(hinge) 구조(264), 상기 힌지 구조에 연결되어, 상기 힌지 구조를 중심으로 접힐 수 있는 제1하우징 구조(210) 및 제2하우징 구조(220)를 포함하고, 상기 제1디스플레이(510)는 상기 제1하우징 구조(210) 및 상기 제2하우징 구조(220)의 상기 제1면의 적어도 일부에 배치되고, 상기 제2디스플레이(520)는 상기 제1하우징 구조(210)의 상기 제2면의 적어도 일부에 배치될 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서(530)가, 상기 제1하우징 구조(210) 및 상기 제2하우징 구조(220) 사이의 각도가 기준 값에 도달하는 경우, 상기 폴딩 제스처로 판단하도록 할 수 있다.
도 16은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도시된 방법(1600)은 앞서 도 1a 내지 도 15를 통해 설명한 전자 장치(예: 도 5의 전자 장치(500))에 의해 실행될 수 있으며, 앞서 설명한 바 있는 기술적 특징은 이하에서 생략하기로 한다.
동작 1610에서, 전자 장치는 제1디스플레이(예: 도 5의 제1디스플레이(510))에 어플리케이션의 실행 화면을 표시할 수 있다. 이 때, 제2디스플레이(예: 도 5의 제2디스플레이(520)) 및 제2터치 센서(예: 도 5의 제2터치 센서(525))는 비활성화 상태일 수 있다.
동작 1620에서, 전자 장치는 폴딩 제스처의 개시를 감지할 수 있다. 예를 들어, 전자 장치는 전자 장치를 구성하는 제1하우징 구조와 제2하우징 구조가 이루는 각도의 변화를 통해 폴딩 제스처의 개시를 감지할 수 있다.
동작 1630에서, 전자 장치는 폴딩 제스처가 개시되면, 제1디스플레이의 제1터치 센서 및/또는 제2디스플레이의 제2터치 센서에 터치 이벤트의 전송을 중지하도록 요청할 수 있다. 전송 중지 요청에 따라, 이벤트 허브(예: 도 7의 이벤트 허브(732))에서 수집된 터치 이벤트는 어플리케이션(예: 도 7의 어플리케이션(711))으로 전송되지 않을 수 있다. 폴딩 제스처가 감지된 상태에서 제2터치 센서는 아직 비활성화 상태이기 때문에 터치 이벤트를 생성하지 않으나, 전자 장치는 터치 센서 별로 구분하지 않고, 터치 이벤트에 대한 전송 중지 및 전송 재개 요청을 처리할 수 있다.
동작 1640에서, 전자 장치는 실행 중인 어플리케이션의 상태 정보를 확인할 수 있다. 다양한 실시예에 따르면, 어플리케이션의 상태 정보는 보안 레벨 및/또는 어플리케이션의 리사이징 여부(resizable)와 관련된 정보를 포함할 수 있다.
동작 1650에서, 전자 장치는 제2디스플레이에 터치 락 화면(예: 도 10a의 터치 락 화면(1070), 도 10b의 터치 락 화면(1080))을 표시할 수 있다. 전자 장치는 어플리케이션의 상태 정보에 기초하여 터치 락 화면을 생성할 수 있다. 예를 들어, 전자 장치는 반투명한 터치 락 화면을 어플리케이션 실행 화면의 상위 레이어에 표시할 수 있다. 전자 장치는 터치 락 화면의 표시에 대응하여 제2디스플레이의 제2터치 센서를 활성화 할 수 있다.
동작 1660에서, 전자 장치는 터치 락 화면이 표시된 이후, 제2디스플레이의 제2터치 센서에서 수신되는 터치 이벤트를 처리할 수 있다. 터치 락 화면 상에서 정해진 터치 입력(예: swipe)이 발생하는 경우, 전자 장치는 터치 락 화면을 제거하고 어플리케이션의 실행 화면을 제2디스플레이에 표시할 수 있다.
도 17은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도 17은 폴딩 제스처의 감지 후, 전자 장치가 어플리케이션의 보안 레벨에 따라 동작 모드를 결정하고, 결정된 동작 모드에 따라 수행하는 제어 방법(1700)을 도시하고 있다.
동작 1710에서, 전자 장치는 폴딩 제스처를 감지할 수 있다.
동작 1720에서, 전자 장치는 어플리케이션의 상태 정보를 확인할 수 있다. 어플리케이션의 상태 정보는 어플리케이션에 대해 지정된 보안 레벨을 포함할 수 있고, 보안 레벨은 어플리케이션의 속성 정보 또는 사용자의 설정에 따라 결정될 수 있다. 다른 실시예에 따르면, 전자 장치는 폴딩 제스처의 속성에 기초하여 실행 모드를 결정할 수 있다. 예를 들어, 프로세서는 폴딩 제스처의 시작 시점 및 완료 시점의 시간 차이, 폴딩 제스처의 방향을 통해 폴딩 후의 제2디스플레이가 사용자의 가시 방향인 지 여부, 폴딩 시 이동되는 하우징(예: 도 2a의 제1하우징 구조(210) 및 제2하우징 구조(220))의 가속도에 기초하여 보안 레벨 또는 실행 모드를 결정할 수 있다.
동작 1731에서, 전자 장치는 non-secure 모드로 동작을 결정할 수 있다. Non-secure 모드는 언폴딩 상태에서 실행 중인 어플리케이션이 통화 어플리케이션 과 같이 보안의 필요성은 없고 동작의 연속성이 필요한 어플리케이션에 대해 사용될 수 있다.
동작 1732에서, 전자 장치는 실행 중인 어플리케이션(예: 통화 어플리케이션)을 리사이징 하여 제2디스플레이에 표시할 수 있다.
동작 1741에서, 전자 장치는 weak secure 모드로 동작을 결정할 수 있다.
동작 1742에서, 전자 장치는 터치 락 화면을 생성해서 제2디스플레이 상에 표시할 수 있다. 전자 장치는 반투명한 터치 락 화면을 어플리케이션 실행 화면의 상위 레이어에 표시할 수 있다. 이 때, 어플리케이션 실행 화면은 제2디스플레이의 해상도 및 밀집도에 따라 리사이징 된 것일 수 있다. 전자 장치는 터치 락 화면의 표시에 대응하여 제2디스플레이의 제2터치 센서로부터 수신되는 터치 이벤트를 처리할 수 있다. Weak secure 모드에서 표시되는 터치 락 화면은 앞서 도 10a를 통해 설명한 바 있다.
동작 1743에서, 전자 장치는 터치 락 화면 상에서 정해진 터치 입력(예: swipe)을 감지할 수 있다.
동작 1744에서, 전자 장치는 터치 락 화면의 표시를 제거하고, 어플리케이션 실행 화면을 제2디스플레이 상에 표시할 수 있다.
동작 1751에서, 전자 장치는 strong secure 모드로 동작을 결정할 수 있다.
동작 1752에서, 전자 장치는 strong secure 모드의 터치 락 화면을 생성해서 제2디스플레이 상에 표시할 수 있다. 이 때, 터치 락 화면은 불투명하고, 어플리케이션 실행 화면은 불투명한 터치 락 화면에 의해 가려질 수 있다. 터치 락 화면은 사용자의 인증(예: 패턴 입력, 패스 워드 입력, 홍채 인식, 지문 인식 등)을 가이드 하는 정보를 포함할 수 있다.
동작 1753에서, 전자 장치는 터치 락 화면 상의 보안 패턴에 대한 사용자의 입력을 수신하고, 패턴이 정확한 경우, 동작 1754에서, 어플리케이션을 백 그라운드에서 실행하고, 이와 적어도 일부 동시에 다른 어플리케이션(예: 홈 화면)을 제2디스플레이에 표시할 수 있다.
Strong secure 모드에서 표시되는 터치 락 화면은 앞서 도 10b를 통해 설명한 바 있다.
동작 1743 또는 동작 1753에서, 터치 락 화면을 표시한 후 터치 입력이 수신되지 않는 경우, 동작 1761에서, 정해진 시간(예: 5초)이 경과하는 지 확인하고, 시간이 경과한 경우 동작 1762에서, 제2디스플레이를 절전 모드로 전환할 수 있다.
도 18은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도 18은 폴딩 제스처의 감지 후, 어플리케이션이 리사이징 가능한 지 여부에 따른 전자 장치의 동작 방법(1800)을 도시하고 있다.
동작 1810에서, 전자 장치는 폴딩 제스처를 감지할 수 있다.
동작 1820에서, 전자 장치는 어플리케이션의 상태 정보를 확인하고, 동작 1830에서, 상태 정보에 기초하여 어플리케이션의 실행 화면이 리사이징 가능한 지 여부(resizable)를 확인할 수 있다.
동작 1841에서, 전자 장치는 어플리케이션이 리사이징 가능한 경우(예: 인터넷 어플리케이션), 터치 락 화면을 생성하고, 제2디스플레이에서 리사이징 된 어플리케이션의 상위 레이어에 터치 락 화면을 표시할 수 있다.
동작 1842에서, 전자 장치는 터치 락 화면에 대한 정해진 터치 입력에 기초하여, 터치 락 화면을 제거하고, 제2디스플레이에 리사이징 된 어플리케이션을 표시할 수 있다.
동작 1830에서, 어플리케이션의 실행 화면이 리사이징 불가능한 것으로 설정되는 경우, 동작 1850에서, 리사이징 시 어플리케이션이 계속 구동 가능한 지 확인할 수 있다. 예를 들어, 비디오 어플리케이션은 어플리케이션이 해상도(또는 화면 비율) 변경을 지원하지는 않으나, 프로세서에 의해 리사이징 가능한 어플리케이션일 수 있다. 게임 어플리케이션은 런타임 중 해상도 및/또는 밀집도의 변경을 지원하지 않고, 해상도 변경 시도 시 강제 종료되도록 설정된 어플리케이션일 수 있다.
동작 1861에서, 전자 장치는 터치 락 화면을 리사이징 된 어플리케이션(예: 비디오 어플리케이션)의 상위 레이어에 표시할 수 있다. 이 때, 어플리케이션은 해상도 변경을 지원하지 않기 때문에, 전자 장치는 제2디스플레이의 해상도(또는 화면 비율)에 따라 어플리케이션의 실행 화면의 해상도를 강제로 변경할 수 있다.
동작 1862에서, 전자 장치는 터치 락 화면에 대한 정해진 터치 입력에 기초하여, 터치 락 화면을 제거하고, 제2디스플레이에 리사이징 된 어플리케이션을 표시할 수 있다. 이 때 제2디스플레이에 표시되는 비디오 어플리케이션의 실행 화면은 제1디스플레이에 표시되는 비디오 어플리케이션의 해상도와 다르게 가로 방향으로 더 확장된 비율을 가질 수 있다. 어플리케이션의 실행 화면의 해상도를 원래 해상도로 변환하도록 하는 버튼을 어플리케이션의 일 영역에 출력할 수 있다.
동작 1863에서, 상기 버튼에 대한 입력이 재실행인 것에 기초하여, 동작 1864에서, 전자 장치는 어플리케이션을 재실행하여 어플리케이션의 실행 화면을 정해진 해상도, 즉 제1디스플레이에 표시되는 비디오 어플리케이션의 해상도(화면 비율)에 대응되게 리사이징 하여 제2디스플레이에 표시할 수 있다.
동작 1850에서, 리사이징 시 어플리케이션이 구동 불가능한 것으로 설정되는 경우, 동작 1870에서, 전자 장치는 런타임 중 해상도 및/또는 밀집도의 변경을 지원하지 않는 어플리케이션(예: 게임 어플리케이션)에 대응하는 터치 락 화면을 생성해서 제2디스플레이에 표시할 수 있다. 이 때, 터치 락 화면은 어플리케이션의 종료, 재실행 또는 호환성 모드를 선택할 수 있는 버튼을 포함할 수 있다.
동작 1881에서, 재실행이 선택되는 경우, 동작 1882에서, 전자 장치는 실행 중인 어플리케이션을 종료한 후 재실행할 수 있다. 전자 장치는 어플리케이션의 재실행 시 제2디스플레이의 해상도 및 밀집도에 따라 실행 화면을 생성할 수 있다.
동작 1883에서, 전자 장치는 어플리케이션의 실행 화면을 제2디스플레이에 표시할 수 있다.
동작 1891에서, 계속 실행(또는 호환성 모드)이 선택되는 경우, 동작 1892에서, 전자 장치는 어플리케이션을 백그라운드에서 실행할 수 있다. 이 때, 전자 장치는 어플리케이션을 pause 시킬 수 있다.
동작 1893에서, 전자 장치는 상기 어플리케이션이 백그라운드에서 표시된 상태로 제2디스플레이에 다른 어플리케이션(예: 홈 화면)을 표시할 수 있다.
이 후, 전자 장치가 언폴딩 되면, 백그라운드에서 실행 중이던 게임 어플리케이션을 다시 z-order 상 최상위로 자동 설정하고, pause 상태를 resume 하여 제1디스플레이에서 연속적으로 게임 어플리케이션을 사용하도록 할 수 있다.
다양한 실시예에 따른 전자 장치(500)의 제어 방법은, 상기 전자 장치(500)는 접힐 수 있고(foldable) 제1터치센서를 포함하는 제1디스플레이(510) 및 상기 제1디스플레이(510)와 분리되어 배치되고 제2터치센서를 포함하는 제2디스플레이(520)를 포함하고, 상기 제1디스플레이(510)가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 제1디스플레이(510)에 표시하는 동작(1610), 상기 제1디스플레이(510)에 대한 폴딩(folding) 제스처를 감지하는 동작(1620), 상기 감지된 폴딩 제스처에 대응하여, 터치 락 화면(1070 또는 1080)을 상기 제2디스플레이(520)에 표시하는 동작(1650), 및 상기 터치 락 화면(1070 또는 1080)을 표시한 이후 상기 제2디스플레이(520)의 상기 제2터치 센서(525)로부터 수신되는 터치 이벤트를 처리하는 동작(1660)을 포함할 수 있다.
다양한 실시예에 따르면, 상기 폴딩 제스처의 감지 시, 상기 폴딩 제스처 이전에 상기 제1디스플레이(510)의 상기 제1터치 센서(515) 및 상기 제2디스플레이(520)의 상기 제2터치 센서(525) 중 적어도 하나에 의해 수신하여 상기 어플리케이션에 제공한 터치 이벤트 중 적어도 일부에 대응하는 취소 이벤트를 상기 어플리케이션에 제공하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 상기 터치 락 화면(1070 또는 1080)을 표시하는 동작은, 상기 어플리케이션의 보안 레벨을 포함하는 상태 정보에 적어도 일부 기초하여, 상기 터치 락 화면(1070 또는 1080)을 생성하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션의 실행 화면의 리사이징 여부(resizable)에 대한 정보를 포함하는 상태 정보에 적어도 일부 기초하여, 상기 터치 락 화면(1070 또는 1080)을 생성하는 동작을 포함할 수 있다.
이하에서는 도 19a 내지 도 20c를 이용해 상하 방향으로 접히는 수직 폴딩 형태의 폼 팩터의 전자 장치에 대해 설명하기로 한다. 앞서 도 3 내지 도 18을 통해 설명한 특징은 이하에서도 적용될 수 있다. 이하에서는 인-폴딩 폴더블 디스플레이 구조에 대해서 설명하기로 하나, 후술할 아웃-폴딩 폴더블 디스플레이(out-folding foldable display) 구조, 듀얼 디스플레이(dual display) 구조, G 타입(G-type folding) 폴딩 구조, S 타입 폴딩(S-type folding) 구조, 또는 롤러블 디스플레이(rollable display) 구조 등 다양한 폼 팩터에서도 수직 폴딩 방식으로 구현될 수 있다.
도 19a 내지 19c는 다양한 실시예에 따른 수직 폴딩 방식의 전자 장치에서 폴딩 또는 언폴딩 동작 시의 사용 상태를 도시한 도면들이다.
도 19a는 전자 장치(1900)가 언폴딩 상태에서의 제1면, 도 19b는 전자 장치(1900)가 언폴딩 상태에서의 제2면을 도시하고 있다.
도 19a 및 도 19b를 참조 하면, 전자 장치(1900)는 폴더블 하우징, 제1디스플레이(1930) 및 제2디스플레이(1940)를 포함할 수 있다.
폴더블 하우징은 힌지 구조에 의해 연결되는 제1하우징 구조(1910) 및 제2하우징 구조(1920)를 포함하고, 제1하우징 구조(1910) 및 제2하우징 구조(1920)는 폴딩 축을 중심으로 서로 폴딩 가능할 수 있다. 제1하우징 구조(1910)와 제2하우징 구조(1920)는 서로 폴딩 된 상태에서 서로 마주보도록 배치될 수 있다.
제1디스플레이(1930)는 접힐 수 있고, 제1하우징 구조(1910) 및 제2하우징 구조(1920)의 제1면(또는 전면)에 배치될 수 있다. 본 실시예에서 제1하우징 구조(1910) 및 제2하우징 구조(1920)는 서로 상하로 배치될 수 있고, 폴딩 축은 좌우 방향(수평 방향)일 수 있다. 전자 장치(1900)가 언폴딩 상태에서 어플리케이션은 상하 방향으로 표시될 수 있다.
전자 장치(1900)의 제2하우징 구조(1920)의 하단에는 카메라, 조도 센서 등 하나 이상의 센서(1990)가 배치될 수 있다. 상기 센서(1990)들은 폴딩 상태에서도 외부로 보여질 수 있다. 제1하우징 구조(1910)의 상하 방향의 길이는 제2하우징 구조(1920)의 상하 방향의 길이보다 짧을 수 있으며, 이에 따라 전자 장치(1900)의 폴딩 시 제2하우징 구조(1920)의 제1면의 하단에 배치된 센서(1990)가 외부로 보여질 수 있다. 또는, 전자 장치(1900)는 상기 센서(1990)들을 포함하지 않을 수도 있고, 제1하우징 구조(1910)와 제2하우징 구조(1920)의 길이는 실질적으로 동일할 수도 있다.
제2디스플레이(1940)는 제1하우징 구조(1910)의 제2면(또는 후면)에 배치될 수 있다.
사용자는 언폴딩 상태의 전자 장치(1900)에 힘을 인가하여 좌우 방향의 폴딩 축을 중심으로 전자 장치(1900)를 접을 수 있다.
도 19c를 참조 하면, 전자 장치(1900)가 완전히 폴딩 되면, 제1디스플레이(1930)는 외부로 보여지지 않고, 제2디스플레이(1940)를 통해 어플리케이션 화면을 표시할 수 있다.
도 20a 내지 20c는 다양한 실시예에 따라 폴딩 동작 시 전자 장치의 각 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 20a를 참조 하면, 프로세서(예: 도 1b의 프로세서(120))는 제1디스플레이(2010)가 펼쳐진 상태에서 제1디스플레이(2010)의 속성(예: 크기, 비율, 해상도, 밀집도 등)에 대응하는 어플리케이션의 실행 화면(2050)을 생성하여 제1디스플레이(2010)에 표시할 수 있다. 수직 폴딩 방식의 전자 장치의 경우 언폴딩 상태에서 상하 방향으로 제1디스플레이(2010)가 길기 때문에, 어플리케이션 화면(2050)은 상하로 긴 형태일 수 있다.
다양한 실시예에 따르면, 프로세서는 폴딩 제스처를 감지 하면, 터치 락 화면(2070)을 생성할 수 있다. 프로세서는 어플리케이션의 보안 레벨에 따라 터치 락 화면(2070)을 생성할 수 있다. 도 20b를 참조 하면, weak secure 레벨인 인터넷 어플리케이션이 실행 중이기 때문에 반투명한 터치 락 화면(2070)을 생성할 수 있다. 이와 적어도 일부 동시에 프로세서는 화면 전환 이벤트를 인터넷 어플리케이션에 전달하고, 인터넷 어플리케이션은 제2디스플레이(2020)의 속성에 따라 어플리케이션 실행 화면을 redrawing 할 수 있다. 수직 폴딩 시 상하 방향으로 길이가 줄어들기 때문에 그에 따라 어플리케이션 실행 화면이 redrawing 될 수 있다.
도 20b를 참조 하면, 프로세서는 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면(2070)을 생성하여, 인터넷 어플리케이션의 리사이징 된 실행 화면(2060)의 상위 레이어에 표시할 수 있다.
도 20c를 참조 하면, 프로세서는 터치 락 화면(2070)에서 정해진 터치 입력(예: swipe)이 발생하는 경우, 상위 레이어에 표시된 터치 락 화면(2070)을 제거하고, 어플리케이션 실행 화면(2060)을 표시할 수 있다.
도 20a 내지 20c에서는 인터넷 어플리케이션이 실행된 실시예에 대해서 설명 하였으나, 도 12 내지 15의 다른 실시예도 도 19a 내지 19c의 수직 폴딩 방식에 적용될 수 있다.
이하에서는 도 21a 내지 도 27을 통해 전자 장치가 아웃 폴딩 폴더블 디스플레이 구조로 구현된 경우의 다양한 실시예들에 대해 설명하기로 한다.
도 21a 내지 21c는 다양한 실시예에 따른 아웃 폴딩 방식의 전자 장치에서 폴딩 또는 언폴딩 동작 시의 사용 상태를 도시한 도면들이다.
도 21a를 참고 하면, 전자 장치(2100)는 서로에 대하여 접히도록 힌지 구조를 통해 회동 가능하게 결합되는 제1하우징 구조(2110) 및 제2하우징 구조(2120)를 포함할 수 있다. 일 실시예에 따르면, 제1하우징 구조(2110)와 제2하우징 구조(2120)의 크기는 동일할 수 있고, 이 경우 폴딩 시 제1하우징 구조(2110) 및 제2하우징 구조(2120)의 후면 커버는 외부로 보여지지 않을 수 있다. 다른 일 실시예에 따르면, 제1하우징 구조(2110)가 제2하우징 구조(2120)보다 좌우 방향(예: 폴딩 축의 수직 방향)으로 더 클 수 있다. 이 경우 폴딩 시 제1하우징 구조(2110)의 일부가 외부로 보여질 수 있고, 전자 장치(2100)는 상기 보여지는 부분에 카메라 등 다양한 센서를 배치할 수 있다.
다양한 실시예에 따르면, 제1하우징 구조(2110)의 전면 및 제2하우징 구조(2120)의 전면에 디스플레이(2130)가 배치될 수 있다. 디스플레이(2130)는 폴딩 축을 기준으로 제1영역(2131) 및 제2영역(2132)으로 구분될 수 있으며, 제1영역(2131)과 제2영역(2132)의 크기는 동일하거나, 제1영역(2131)이 제2영역(2132)보다 클 수 있다. 디스플레이(2130)는 디스플레이(2130) 상의 터치 입력을 감지하는 터치 센서를 포함할 수 있다.
제1하우징 구조(2110) 및/또는 제2하우징 구조(2120)의 후면에는 카메라, 조도 센서 등의 센서가 배치될 수 있다. 또한, 제1하우징 구조(2110) 및/또는 제2하우징 구조(2120)의 후면에는 추가적인 디스플레이(미도시)가 배치될 수 있고, 추가적인 디스플레이(2130)는 전면에 배치되는 디스플레이(2130)와 달리 접히지 않을 수 있다.
도 21b를 참조 하면, 제1하우징 구조(2110) 및 제2하우징 구조(2120)는 폴딩 축을 기준으로 접힐 수 있다. 이 때, 제2하우징 구조(2120)는 폴딩 축을 기준으로 반시계 방향, 즉 폴딩 상태에서 제1하우징 구조(2110)의 후면과 제2하우징 구조(2120)의 후면이 서로 마주보고, 디스플레이(2130)의 제1영역(2131) 및 제2영역(2132)이 외부로 보여지는 방향으로 접힐 수 있다. 전자 장치(2100)는 사용자가 제1하우징 구조(2110) 및/또는 제2하우징 구조(2120)에 힘을 가하여 제1하우징 구조(2110)와 제2하우징 구조(2120) 사이의 이루는 각도가 정해진 각도(예: 약 10도) 에 도달하는 경우, 언폴딩 상태에서 폴딩 상태로 전환한 것으로 판단할 수 있다.
도 21c를 참조 하면, 폴딩 상태에서 전자 장치(2100)는 전면에는 디스플레이(2130)의 제1영역(2131)이 배치되고, 후면에는 디스플레이(2130)의 제2영역(2132)이 배치될 수 있다. 일 실시예에 따르면, 제1하우징 구조(2110) 및 디스플레이(2130)의 제1영역(2131)이 제2하우징 구조(2120) 및 디스플레이(2130)의 제2영역(2132)보다 크기 때문에, 폴딩 상태의 후면은 디스플레이의 제2영역(2132)으로 일부가 커버되고, 나머지 일부 영역에 제1하우징 구조(2110)의 후면 커버가 보여질 수 있다. 상기 보여지는 부분에는 카메라, 조도 센서 등 다양한 센서가 배치되어 외부로 보여질 수 있다.
도 21c에서는 제1하우징 구조(2110) 및 디스플레이(2130)의 제1영역(2131)이 제2하우징 구조(2120) 및 디스플레이(2130)의 제2영역(2132)보다 큰 경우를 도시하고 있으나, 제1하우징 구조(2110) 및 디스플레이(2130)의 제1영역(2131)은 제2하우징 구조(2120) 및 디스플레이(2130)의 제2영역(2132)과 그 크기가 동일할 수 있다. 이 경우, 제2하우징 구조(2120)의 후면 커버에는 센서가 배치되지 않으며, 폴딩 시 제2하우징 구조(2120)의 후면 커버는 외부로 보여지지 않을 수 있다.
도 21a 내지 도 21c에서는 전자 장치(2100)가 상하 방향의 폴딩 축을 기준으로 아웃 폴딩 되는 형태에 대해서 설명하였으나 이에 한정되지 않는다. 예를 들어, 앞서 도 19a 내지 19c에서 설명한 바와 같이, 전자 장치(2100)는 상하 방향으로 긴 구조(예: 도 19a 내지 도 19c의 전자 장치(1900))를 갖고 좌우 방향의 폴딩 축을 기준으로 아웃 폴딩 되는 구조일 수도 있다.
도 22는 다양한 실시예에 따른 전자 장치의 블록도이다.
도 22를 참조 하면, 전자 장치(2200)는 디스플레이(2210), 프로세서(2230) 및 메모리(2240)를 포함할 수 있으며, 도시된 구성 중 일부가 생략 또는 치환될 수 있다. 전자 장치(2200)는 도 1a의 전자 장치(101) 및/또는 도 1b의 전자 장치(101)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 전자 장치(2200)는 도 21a 내지 도 21c의 아웃 폴딩 구조를 포함할 수 있다.
다양한 실시예에 따르면, 디스플레이(2210)는 하우징(예: 도 21a의 제1하우징 구조(2110) 및 제2하우징 구조(2120))의 전면에 배치될 수 있고, 전자 장치(2200)의 폴딩 시 폴딩 축을 기준으로 구분되는 제1영역(예: 도 21c의 제1영역(2131)) 및 제2영역(예: 도 21c의 제2영역(2132))이 각각 폴딩 된 전자 장치(2200)의 전면 및 후면에 배치될 수 있다. 일 실시예에 따르면, 전자 장치(2200)는 하우징의 후면에 추가적인 디스플레이(미도시)를 포함할 수도 있고, 추가적인 디스플레이는 접히지 않을 수 있다.
다양한 실시예에 따르면, 디스플레이(2210)는 디스플레이(2210) 상에서 발생하는 터치 입력을 감지하는 터치 센서(미도시)를 포함할 수 있다. 터치 센서는 터치 입력에 대응하는 터치 이벤트를 프로세서(2230)에 제공할 수 있다. 터치 이벤트는 프레스(press), 릴리즈(release), 캔슬(cancel) 이벤트를 포함할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 전자 장치(2200)의 각 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 수행할 수 있는 구성으로써, 도 1a의 프로세서(120) 및/또는 도 1b의 프로세서(120)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 프로세서(2230)는 디스플레이(2210), 메모리(2240)를 포함하는 전자 장치(2200)의 내부 구성요소와 기능적으로, 작동적으로 및/또는 전기적으로 연결될 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 전자 장치(2200)가 펼쳐진 상태에서 어플리케이션의 실행 화면을 디스플레이(2210)의 전체 영역에 표시할 수 있다. 터치 센서는 전자 장치(2200)가 펼쳐진 상태에서 디스플레이(2210)의 전체 영역 상에서 발생하는 터치 입력에 대응하는 터치 이벤트를 프로세서(2230)에 제공할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 전자 장치(2200)에 대한 폴딩 제스처를 감지할 수 있다. 도 21a 내지 도 21c를 통해 설명한 바와 같이, 사용자는 전자 장치(2200)의 일 영역에 힘을 가하여 제1하우징 구조의 후면 및 제2하우징 구조의 후면이 서로 마주보고, 디스플레이(2210)의 제1영역 및 디스플레이(2210)의 제2영역이 외부로 보여지는 방향으로 접을 수 있다. 폴딩 시 전자 장치(2200)의 형태는 도 21c를 통해 설명한 바 있다.
다양한 실시예에 따르면, 프로세서(2230)는 폴딩 제스처가 개시되는 경우, 터치 센서에 터치 이벤트의 전송을 중지하도록 할 수 있다. 이는 폴딩 시 디스플레이(2210)에 대한 터치는 사용자가 터치 입력을 의도한 것이 아니기 때문이다. 다른 실시예에 따르면, 프로세서(2230)는 폴딩 제스처가 개시되는 경우 터치 센서에 터치 이벤트의 전송 중지를 요청하지 않고, 수신되는 터치 이벤트를 무시할 수 있다. 즉, 터치 이벤트가 수신되더라도 어플리케이션에 제공하지 않을 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 폴딩이 개시되기 이전에 어플리케이션에 제공한 터치 이벤트(예: press, release 이벤트)를 취소할 수 있다. 예를 들어, 프로세서(2230)는 터치 이벤트에 대응하여 실행할 어플리케이션의 동작을 실행 취소 하거나, 터치 이벤트에 대응하여 이미 실행된 어플리케이션의 동작을 실행 취소 할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 폴딩이 개시되면 이전에 제공한 터치 이벤트에 대응하는 캔슬 이벤트를 어플리케이션에 제공할 수 있다. 예를 들어, 폴딩 중에 실제 발생하고 있는 프레스 이벤트이지만, 이는 사용자가 폴딩을 의도한 것으로써 터치 입력을 의도한 것이기 아니기 때문에, 프로세서(2230)는 터치 센서로부터 프레스 이벤트가 수신되는 과정에서도 캔슬 이벤트를 어플리케이션에 제공하여, 어플리케이션이 폴딩을 위한 터치를 터치 이벤트로 인식하여 동작 하는 것을 방지할 수 있다. 이에 따라, 어플리케이션은 전자 장치(2200)가 폴딩 되기 이전에 터치 센서에 의해 발생한 터치 이벤트에 따른 동작은 실행하지 않을 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 전자 장치(2200)의 폴딩에 따라 어플리케이션을 표시할 디스플레이(2210)의 영역을 변경할 수 있다. 프로세서(2230)는 디스플레이(2210)의 제1영역 및 제2영역 중 폴딩 상태에서 어플리케이션을 표시할 영역을 결정할 수 있다. 예를 들어, 프로세서(2230)는 폴딩 후 사용자가 주시하는 영역을 확인하기 위해, 사용자의 터치 입력의 패턴(예: 엄지 손가락으로 터치)을 확인하거나, 센서(예: 중력 센서)를 이용하여 상단으로 보여지는 영역을 확인하거나, 폴딩 시 폴딩되는 방향을 확인하거나(예: 엣지에서 이동 속도가 큰 하우징 영역을 확인), 미리 정해진 설정 또는 폴딩 후 특정 아이콘에 대한 선택을 확인할 수 있다. 프로세서(2230)는 상기 예시된 방법 중 적어도 하나를 이용하여 제1영역 및 제2영역 중 어느 하나에 어플리케이션 화면을 표시할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 제1영역 또는 제2영역 중 화면을 표시할 영역의 속성(예: 크기, 비율, 해상도, 밀집도)에 기초하여 어플리케이션 화면을 생성할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 어플리케이션의 실행 화면의 리사이징 가능한 지 여부(resizable)를 확인할 수 있다.
프로세서(2230)는 언폴딩 상태에서 디스플레이(2210)에 표시된 어플리케이션이 리사이징 가능한 어플리케이션(예: 인터넷 브라우저)인 경우, 폴딩 제스처가 감지되면, 제1영역 또는 제2영역의 속성에 기초하여 해당 어플리케이션 화면을 리사이징 하여 표시되도록 할 수 있다.
프로세서(2230)는 언폴딩 상태에서 디스플레이(2210)에 표시된 어플리케이션이 실행 중 리사이징 불가능한 것으로 설정된 어플리케이션(예: 게임 어플리케이션)인 경우, 폴딩 제스처가 감지 되면, 어플리케이션의 재실행 또는 계속 실행 여부를 선택하기 위한 메뉴를 표시할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 폴딩 제스처에 대응하여 터치 락 화면을 생성하여 폴딩 후 어플리케이션 화면을 표시할 영역에 표시할 수 있다. 터치 락 화면은 실행 중인 어플리케이션의 상태 정보(예: 보안 레벨 및/또는 어플리케이션의 리사이징 여부(resizable))에 따라 결정될 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 터치 락 화면을 제1영역 또는 제2영역의 상위 레이어에 표시할 수 있다. 프로세서(2230)는 터치 락 화면을 포 그라운드에 표시해서 실행 중인 z-order 상 최상위 어플리케이션의 화면 위를 덮도록 생성함으로써, 어플리케이션으로 의도되지 않은 터치 이벤트가 전달되는 것을 방지할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 터치 락 화면을 표시한 이후 어플리케이션 실행 화면이 표시된 디스플레이(2210)의 터치 센서로부터 수신되는 터치 이벤트를 처리할 수 있다. 프로세서(2230)는 터치 락 화면을 표시한 이후에 디스플레이(2210)로부터 수신되는 터치 이벤트에 따라 터치 락 화면을 해제하고, 터치 이벤트를 실행 중인 어플리케이션에 제공할 수 있다.
다양한 실시예에 따르면, 프로세서(2230)는 어플리케이션에 대해 지정된 보안 레벨에 따라 non-secure 모드, weak secure 모드 또는 strong secure 모드로 동작할 수 있다. 프로세서(2230)는 폴딩 시에 실행 중인 어플리케이션의 보안 레벨에 대응하는 터치 락 화면을 생성하여 표시할 수 있다. 또는, 프로세서(2230)는 폴딩 제스처의 속성에 기초하여 보안 레벨 또는 실행 모드를 결정할 수 있다.
본 실시예의 터치 락 화면은 앞서 도 10a 내지 10f를 통해 설명한 터치 락 화면을 포함할 수 있다.
도 23은 다양한 실시예에 따른 전자 장치의 드로잉 엔진(drawing engine)의 블록도이다.
도 23을 참조 하면, 전자 장치(2300)는 메모리(예: 도 22의 메모리(2240))의 일부 영역을 어플리케이션(2311, 2312)의 실행 상태를 기록하기 위한 서피스(surface)(2321, 2322, 2323)로 지정할 수 있다.
서피스 플린저(2330)(surface flinger)는 서피스(2321, 2322, 2323)에 기록된 어플리케이션의 실행 화면을 화면에 표시할 지 여부를 결정할 수 있으며, 디스플레이 구성 변경 시 해상도 및 밀집도의 변경을 어플리케이션(2311, 2312)에 처리 요청할 수 있다.
프레임 버퍼(2340)에는 각 어플리케이션(2311, 2312)에 의해 생성된 디스플레이의 속성(예: 크기, 비율, 해상도, 밀집도)에 대응하는 실행 화면이 저장될 수 있다.
전자 장치(2300)가 펼쳐진 상태에서 서피스 플린저(2330)는 각 어플리케이션(2311, 2312)에서 생성하여 서피스에 기록된 디스플레이의 속성에 대응하는 실행 화면을 프레임 버퍼(2340)에 저장할 수 있다.
전자 장치(2300)가 접히는 경우, 논리 디스플레이 구성부(2350)(logical display configuration)는 폴딩 후 화면을 표시할 제1영역 또는 제2영역의 속성(크기, 비율, 해상도, 밀집도)에 기초하여 디스플레이 구성을 갱신할 수 있다.
디스플레이 매니저(2360)는 디스플레이 구성 변경 시 제1영역 또는 제2영역의 속성을 어플리케이션에 전송하고, 어플리케이션이 변경된 속성에 따라 실행 화면을 생성하도록 요청할 수 있다.
서피스 플린저(2330)는 화면을 표시할 제1영역 또는 제2영역의 정보를 참조 하여, 서피스를 드로잉 할 프레임 버퍼(2340) 영역을 계산하여 출력할 수 있다.
각 어플리케이션(2311, 2312)은 디스플레이 매니저(2360)로부터 수신된 제1영역 또는 제2영역의 속성에 기초하여 어플리케이션의 실행 화면을 생성하여 서피스(2321, 2322, 2323)에 기록할 수 있다.
이에 따라, 폴딩 또는 언폴딩 시 디스플레이 전체에 표시되는 화면이 제1영역 또는 제2영역의 표시로 전환됨에 있어, 끊김 없는 화면 제공이 가능하다.
도 24a 및 24b는 다양한 실시예에 따른 전자 장치의 드로잉 엔진(drawing engine)의 블록도이다.
다양한 실시예에 따르면, 프로세서(예: 도 22의 프로세서(2230))는 어플리케이션의 실행 화면을 표시하기 위해, 메모리(예: 도 22의 메모리(2240))의 일정 영역을 프레임 버퍼(2400)로 할당할 수 있다. 프로세서는 디스플레이의 속성과 실행 중인 어플리케이션의 영역 정보에 기반하여 메모리에 할당할 영역의 크기를 결정할 수 있다.
예를 들어, 전자 장치가 언폴딩 상태에서는 디스플레이 전체에 어플리케이션의 실행 화면이 표시될 수 있다. 도 24a를 참조 하면, 논리 디스플레이 구성부(2450)는 정해진 프레임 버퍼(2400)의 전체 영역(2440)을 이용하여 어플리케이션의 실행 상태를 기록하기 위한 서피스를 지정할 수 있다. 전자 장치가 폴딩 상태에서는 디스플레이의 제1영역 또는 제2영역에 실행 화면이 표시되고, 다른 하나에는 화면이 표시되지 않을 수 있다. 도 24b를 참조 하면, 논리 디스플레이 구성부(2450)는 프레임 버퍼(2400)의 전체 영역 중 제1영역 또는 제2영역의 크기(또는 디스플레이에 대한 비율)에 대응하는 일부 영역(2445)을 이용하여 어플리케이션의 실행 상태를 기록하기 위한 서피스를 지정할 수 있다.
프로세서는 어플리케이션의 드로잉 정보 및 어플리케이션 배치 위치(예: 디스플레이 전체, 제1영역, 제2영역)에 기반하여 디스플레이와 연계된 메모리 영역에 디스플레이 정보를 기록할 수 있다.
도 25a, 25b, 25c 및 25d는 다양한 실시예에 따라 아웃 폴딩 동작 시 전자 장치의 디스플레이에 표시되는 화면을 도시한 도면들이다.
도 25a 내지 25d는 리사이징 가능한 인터넷 어플리케이션을 디스플레이에 표시하는 예를 도시하고 있다.
도 25a를 참조 하면, 프로세서는 디스플레이(2510)가 펼쳐진 상태에서 디스플레이(2510)의 속성(예: 크기, 비율, 해상도, 밀집도)에 대응하는 인터넷 어플리케이션의 실행 화면(2550)을 생성하여 디스플레이(2510)의 전체 영역에 표시할 수 있다.
프로세서(예: 도 22의 프로세서(2230))는 언폴딩 상태에서 디스플레이(2510)의 폴딩을 감지할 수 있다. 프로세서는 폴딩의 감지에 대응하여, 폴딩 축을 기준으로 구분되는 디스플레이(2510)의 제1영역(2511) 및 제2영역(2512) 중 어플리케이션의 실행 화면을 표시할 영역을 결정할 수 있다. 예를 들어, 프로세서는 폴딩 후 사용자가 주시하는 영역을 확인하기 위해, 사용자의 터치 입력의 패턴(예: 엄지 손가락으로 터치)을 확인하거나, 센서(예: 중력 센서)를 이용하여 상단으로 보여지는 영역을 확인하거나, 폴딩 시 폴딩되는 방향을 확인하거나(예: 엣지에서 이동 속도가 큰 하우징 영역을 확인), 미리 정해진 설정 또는 폴딩 후 특정 아이콘에 대한 선택을 확인할 수 있다. 프로세서는 상기 예시된 방법 중 적어도 하나를 이용하여 제1영역(2511) 및 제2영역(2512) 중 어느 하나에 어플리케이션 화면을 표시할 수 있다. 폴딩 상태에서 사용자의 조작(예: 전자 장치(2500)의 회전, 표시 영역 변경을 위한 아이콘에 대한 터치)에 따라 어플리케이션 화면이 표시되는 영역이 다시 변경될 수도 있다.
프로세서는 폴딩 제스처를 감지 하면 화면 전환 이벤트를 인터넷 어플리케이션에 전달하고, 인터넷 어플리케이션은 어플리케이션 화면을 표시하는 것으로 결정된 제1영역(2511)의 속성에 따라 어플리케이션 실행 화면을 redrawing 할 수 있다.
프로세서는 이와 적어도 일부 동시에 터치 락 화면(2570)을 생성할 수 있다.
다양한 실시예에 따르면, 프로세서는 폴딩이 개시되면 폴딩이 완료될 때까지 현재 폴딩 중임을 알리기 위한 시각적 효과(2555)를 제공할 수 있다. 여기서, 시각적 효과(2555)는 터치 락 화면(2570)과 동일할 수 있으나, 이에 한정되지 않으며 언폴딩 상태의 화면과 구분될 수 있는 특정 그래픽 오브젝트의 표시, 음영 효과 등 다양한 시각적 효과(2555)가 포함될 수 있다.
일 실시예에 따르면, 도 25b에 도시된 바와 같이, 프로세서는 폴딩이 개시되면 디스플레이 전체에 상기 시각적 효과(2555)를 제공할 수 있다. 다른 일 실시예에 따르면, 도 25c에 도시된 바와 같이, 프로세서는 폴딩 완료 시 어플리케이션 화면을 표시하는 것으로 결정된 제1영역에만 시각적 효과(2555)를 제공할 수 있다.
다양한 실시예에 따르면, 프로세서는 폴딩이 개시된 이후 도 25b 또는 도 25c와 같이 폴딩이 진행 중인 상황에서는 사용자의 터치 입력에 따른 터치 이벤트를 처리하지 않을 수 있다.
다른 실시예에 따르면, 프로세서는 폴딩이 개시되면 폴딩 각도에 따라 시각적 효과의 표시 범위를 동적으로 변경할 수 있다. 전자 장치(2500)가 언폴딩 상태에서 폴딩이 개시되면, 제1영역(2511) 및 제2영역(2512) 전체에 시각적 효과를 제공하고(예: 도 25b) 이 후 폴딩이 진행됨에 따라, 즉 폴딩 축을 기준으로 제1영역(2511)을 커버하는 제1하우징 구조와 제2영역(2512)을 커버하는 제2하우징 구조 사이의 각도가 좁아짐에 따라, 제2영역(2512)에서 시각적 효과가 표시되는 범위를 줄여갈 수 있다. 예를 들어, 최초 폴딩이 개시되면, 제1영역(2511) 및 제2영역(2512) 전체에 시각적 효과가 제공되고, 제1하우징 구조와 제2하우징 구조 사이의 각도가 90도로 좁아지는 경우, 제1영역(2511) 전체와 제2영역(2512) 중 제1영역(2511)과 가까운 절반만 시각적 효과가 표시될 수 있다.
이 후, 폴딩이 완료되면 제2영역(2512)에는 표시되는 이미지는 모두 제거되고, 제1영역(2511)에 터치 락 화면(2570)이 표시될 수 있다.도 25d를 참조 하면, 프로세서는 폴딩이 완료되면 적어도 일부가 반투명한 영역을 포함하는 터치 락 화면(2570)을 디스플레이의 제1영역(2511)에 표시할 수 있다. 프로세서는 터치 락 화면(2570)을 인터넷 어플리케이션의 리사이징 된 실행 화면(2560)의 상위 레이어에 표시할 수 있다. 프로세서는 터치 락 화면(2570) 상에 실행 중인 어플리케이션을 지시하는 아이콘(2571)을 표시할 수 있다. 프로세서는 폴딩이 완료되면, 제2영역은 오프 시키거나, 온 상태에서도 아무런 정보를 표시하지 않을 수 있다.
프로세서는 터치 락 화면(2570)이 표시된 이후에 제1영역(2511)에 대한 터치 이벤트에 따른 동작을 수행할 수 있다. 이 때, 프로세서는 제2영역에서 발생되는 터치 입력에 따른 터치 이벤트는 처리하지 않을 수 있다.
프로세서는 제1영역(2511)에 표시된 터치 락 화면(2570)에서 정해진 터치 입력이 발생하는 경우, 상위 레이어에 표시된 터치 락 화면을 제거하고, 어플리케이션 실행 화면(2560)을 표시할 수 있다.
도 25a 내지 도 25d에서는 weak secure 레벨인 인터넷 어플리케이션을 표시하는 경우에 대해서 설명 하였으나, 도 21a 내지 도 27을 통해 설명하는 아웃 폴딩 폴더블 디스플레이 구조의 전자 장치도 도 2a 내지 도 18을 통해 설명한 인 폴딩 폴더블 디스플레이 구조의 전자 장치와 같이 non-secure 모드, weak secure 모드, strong secure 모드에서 서로 다른 터치 락 화면을 제공할 수 있다.
도 26은 다양한 실시예에 따라 전자 장치가 폴딩 동작 시 감지되는 터치 이벤트를 처리하는 방법을 도시한 도면이다.
프로세서(예: 도 22의 프로세서(2230))는 전자 장치가 펼쳐진 상태에서 어플리케이션의 실행 화면을 디스플레이의 전체 영역에 표시할 수 있다. 이 때, 디스플레이의 일 영역에 대한 프레스 이벤트(A press)가 감지될 수 있다.
프로세서는 폴딩 제스처의 개시를 감지할 수 있다. 전자 장치는 디스플레이의 제1영역을 커버하는 제1하우징 구조 및 제2영역을 커버하는 제2하우징 구조가 이루는 각도 변화를 통해 폴딩 제스처를 감지할 수 있다.
폴딩 제스처가 감지되면 프로세서는 디스플레이의 터치 센서에 터치 이벤트의 전송을 중지하도록 요청할 수 있다. 이에 따라, 프로세서가 다시 터치 센서에 터치 이벤트의 전송을 요청할 때까지 터치 센서의 터치 이벤트는 프로세서로 전달되지 않을 수 있다. 예를 들어, 하드웨어 계층의 터치 컨트롤러 및 커널 드라이버 계층의 터치 드라이버에서 이벤트 허브로 올라오는 터치 이벤트는 어플리케이션에 전달되지 않을 수 있다.
프로세서는 이미 발생한 터치 이벤트 중 어플리케이션에 전달하지 않은 터치 이벤트는 폐기할 수 있다. 예를 들어, 프로세서는 폴딩이 개시되기 이전에 어플리케이션에 제공한 터치 이벤트(A press)에 대한 캔슬 이벤트(A cancel)를 어플리케이션에 제공할 수 있다. 이에 따라, 어플리케이션은 이전에 수신된 터치 이벤트(A press)에 대응하는 동작을 수행하지 않거나 이미 수행된 동작을 취소할 수 있다.
폴딩 제스처가 수행되는 동안 발생하는 터치 이벤트(B press, C press)는 프로세서에 전달되지 않을 수 있다.
프로세서는 터치 이벤트를 처리하지 않는 폴딩 기간 중에 디스플레이의 전체 영역 또는 폴딩 이후 화면을 표시할 디스플레이의 제1영역 또는 제2영역에 현재 폴딩 중임을 알리기 위한 시각적 효과(예: 도 25b 내지 도 25c의 시각적 효과(2555))를 제공할 수 있다.
폴딩 제스처가 완료되면, 폴딩 시 화면이 표시되지 않는 것으로 결정된 제2영역의 화면 표시는 종료하고, 제2영역 상에서 발생하는 터치 이벤트는 처리하지 않을 수 있다.
프로세서는 폴딩 완료에 대응하여, 폴딩 시 화면이 표시되는 것으로 결정된 디스플레이의 제1영역에 터치 락 화면을 표시할 수 있다. 프로세서는 터치 락 화면을 표시함에 대응하여 터치 센서를 활성화 하고, 터치 센서에 터치 이벤트의 전달 재개를 요청할 수 있다.
이에 따라, 터치 락 화면을 표시하기 이전에 발생한 터치 이벤트(A release)는 어플리케이션에 제공되지 않을 수 있다.
디스플레이의 터치 센서는 터치 락 화면의 생성 이후에 발생하는 터치 이벤트를 프로세서에 제공할 수 있다. 여기서, B release 및 C release는 사용자 또는 터치 센서의 입장에서는 B press 및 C release와 연결되는 동작인데, B press 및 C press가 폴딩 중에 이루어진 것이기 때문에 프로세서에는 B press 및 C press의 터치 이벤트가 전달되지 않을 수 있다. 이에, 프로세서는 이 후 B release 및 C release 터치 이벤트가 터치 센서로부터 전달되더라도 B release 및 C release 터치 이벤트는 무시하고, B release 및 C release 에 대응하는 동작은 수행하지 않을 수 있다. 또는 프로세서는 B release 이벤트 및 C release 이벤트를 어플리케이션에 제공하지 않을 수 있다.
다른 실시예에 따르면, 프로세서는 터치 락 화면의 생성 이후에 터치 센서로부터 전달되는 터치 이벤트를 모두 어플리케이션으로 전달하고, 어플리케이션은 이 중 B release 및 C release와 같이 press 이벤트 없이 수신되는 터치 이벤트는 에러 처리해서 어플리케이션의 상태에 반영하지 않을 수 있다.
이 후, 새로운 프레스 이벤트 D press 및 D release가 터치 센서로부터 제공되면, 프로세서는 D press 및 D release에 대응되는 동작을 수행할 수 있다. 예를 들어, 프로세서는 터치 락 화면이 표시된 상태에서 디스플레이의 제1영역 상에 발생하는 터치 이벤트(D press 및 D release)에 따라 터치 락 화면의 표시를 제거하고, 어플리케이션의 실행 화면을 디스플레이의 제1영역에 표시할 수 있다. 이 후, 프로세서는 어플리케이션의 실행 화면이 표시된 상태에서 발생하는 터치 이벤트를 어플리케이션에 제공할 수 있다.
도 26에 도시한 바와 달리, 정해진 시간 내(예: 약 5초)에 터치 이벤트(D press)가 입력되지 않는 경우, 프로세서는 터치 락 화면의 표시를 종료하고 제2디스플레이를 오프 시킬 수 있다.
도 27은 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도시된 방법은 앞서 도 21a 내지 도 26을 통해 설명한 전자 장치에 의해 실행될 수 있으며, 앞서 설명한 바 있는 기술적 특징은 이하에서 그 설명을 생략하기로 한다.
동작 2710에서, 전자 장치는 언폴딩 상태에서 디스플레이의 전체 영역에 어플리케이션의 실행 화면을 표시할 수 있다.
동작 2720에서, 전자 장치는 폴딩 제스처의 개시를 감지할 수 있다. 예를 들어, 전자 장치는 전자 장치를 구성하는 제1하우징 구조와 제2하우징 구조가 이루는 각도의 변화를 통해 폴딩 제스처의 개시를 감지할 수 있다.
동작 2730에서, 전자 장치는 폴딩 제스처가 개시되면, 디스플레이의 터치 이벤트의 전송을 중지하도록 요청할 수 있다. 전송 중지 요청에 따라, 이벤트 허브에서 수집된 터치 이벤트는 어플리케이션으로 전송되지 않을 수 있다.
동작 2740에서, 전자 장치는 실행 중인 어플리케이션의 상태 정보를 확인할 수 있다. 다양한 실시예에 따르면, 어플리케이션의 상태 정보는 보안 레벨 및/또는 어플리케이션의 리사이징 여부(resizable)와 관련된 정보를 포함할 수 있다.
동작 2750에서, 전자 장치는 디스플레이의 제1영역에 어플리케이션 실행 화면을 표시할 수 있다. 전자 장치는 폴딩 상태에서 어플리케이션의 실행 화면을 표시할 영역을 제1영역으로 결정하고, 제1영역의 속성(예: 크기, 비율, 해상도 등)에 기초하여 어플리케이션 실행 화면을 redrawing 할 수 있다.
전자 장치는 어플리케이션의 상태 정보에 기초하여 터치 락 화면을 생성할 수 있다. 예를 들어, 전자 장치는 반투명한 터치 락 화면을 어플리케이션 실행 화면의 상위 레이어에 표시할 수 있다. 또한, 전자 장치는 디스플레이의 제2영역의 화면 표시는 종료하고, 제2영역에서 발생하는 터치 이벤트는 처리하지 않을 수 있다.
동작 2760에서, 전자 장치는 터치 락 화면이 표시된 이후, 디스플레이의 터치 센서에서 수신되는 제1영역에 대한 터치 이벤트를 처리할 수 있다. 터치 락 화면 상에서 정해진 터치 입력(예: swipe)이 발생하는 경우, 전자 장치는 터치 락 화면을 제거하고 어플리케이션의 실행 화면을 디스플레이의 제1영역에 표시할 수 있다.
도 28은 다양한 실시예에 따른 일부 하우징이 360도 회전 되는 전자 장치를 도시한 것이다.
다양한 실시예에 따른 전자 장치(2800)는 제1하우징 구조(2810) 및 제2하우징 구조(2820)를 포함하고, 디스플레이(2830)는 제1하우징 구조(2810)의 전면 및 제2하우징 구조(2820)의 전면에 배치될 수 있다.
제1하우징 구조(2810) 및 제2하우징 구조(2820)는 360도로 회전 가능할 수 있다. 예를 들어, 제2하우징 구조(2820)가 시계 방향으로 회전하는 경우 인 폴딩 폴더블 디스플레이 구조와 같이 디스플레이(2830)의 제1영역 및 제2영역이 서로 마주보는 방향으로 폴딩 될 수 있고, 제2하우징 구조(2820)가 반시계 방향으로 회전하는 경우 아웃 폴딩 폴더블 디스플레이 구조와 같이 디스플레이(2830)의 제1영역 및 제2영역이 각각 외부로 보여지는 방향으로 폴딩 될 수도 있다.
인 폴딩 폴더블 디스플레이 구조와 같이 제2하우징 구조(2820)가 시계 방향으로 회전하는 경우에 전자 장치(2800)는 도 2a 내지 도 18에서 설명한 바와 같이 인 폴딩 폴더블 디스플레이 구조를 갖는 전자 장치(2800)와 같이 동작할 수 있다. 예를 들어, 프로세서는 전자 장치(2800)의 폴딩에 대응하여, 어플리케이션의 실행 화면을 제1하우징 구조(2810)의 후면에 배치된 제2디스플레이 상에 표시할 수 있다.
또한, 아웃 폴딩 폴더블 디스플레이(2830) 구조와 같이 제2하우징 구조(2820)가 반시계 방향으로 회전하는 경우에 전자 장치(2800)는 도 21a 내지 도 27에서 설명한 바와 같이 아웃 폴딩 폴더블 디스플레이 구조를 갖는 전자 장치(2800)와 같이 동작할 수 있다. 예를 들어, 프로세서는 전자 장치(2800)의 폴딩에 대응하여, 어플리케이션의 실행 화면을 디스플레이(2830)의 제1영역 또는 제2영역 상에 표시할 수 있다.
이하에서는 도 29a 내지 도 30을 통해 서로 물리적으로 분리된 2개의 디스플레이를 하우징의 전면에 배치하는 듀얼 디스플레이 구조를 갖는 전자 장치에 대해 설명하기로 한다. 이하에서는 듀얼 디스플레이 구조의 전자 장치가 인 폴딩 방식으로 접히는 형태에 대해서 설명하기로 하나, 아웃 폴딩 방식으로 접히는 구조의 전자 장치도 가능하다.
도 29a 및 29b는 다양한 실시예에 따른 하우징의 일면에 복수의 디스플레이를 갖는 전자 장치를 도시한 것이다.
전자 장치(2900)는 서로에 대하여 접히도록 힌지 구조를 통해 회동 가능하게 결합되는 제1하우징 구조(2910) 및 제2하우징 구조(2920)를 포함할 수 있다.
도 29a를 참조 하면, 제1하우징 구조(2910)의 전면에 제1디스플레이(2930)가 배치되고, 제2하우징 구조(2920)의 전면에 제2디스플레이(2940)가 배치될 수 있다. 여기서, 제1디스플레이(2930) 및 제2디스플레이(2940)는 물리적으로 서로 분리된 디스플레이로써, 독립적인 포트 및 인터페이스를 통해 프로세서와 연결될 수 있다. 제1디스플레이(2930)는 제1디스플레이(2930) 상의 터치 입력을 감지하는 제1터치 센서(미도시)를 포함하고, 제2디스플레이(2940)는 제2디스플레이(2940) 상의 터치 입력을 감지하는 제2터치 센서(미도시)를 포함할 수 있다.
도 29b를 참조 하면, 제1하우징 구조(2910)의 후면에 제3디스플레이(2950)가 배치될 수 있다. 제3디스플레이(2950)는 제3디스플레이(2950) 상의 터치 입력을 감지하는 제3터치 센서(미도시)를 포함할 수 있다.
전자 장치(2900)는 폴딩 축을 기준으로 접힐 수 있다. 예를 들어, 제2하우징 구조(2920)가 시계 방향으로 회전하여 제1디스플레이(2930)와 제2디스플레이(2940)가 서로 마주보는 방향으로 접힐 수 있다.
도 30은 다양한 실시예에 따른 전자 장치의 블록도이다.
도 30을 참조 하면, 전자 장치(3000)는 제1디스플레이(3010), 제2디스플레이(3020), 제3디스플레이(3030), 프로세서(3040) 및 메모리(3050)를 포함할 수 있으며, 도시된 구성 중 일부가 생략 또는 치환될 수 있다. 전자 장치(3000)는 도 1a의 전자 장치(101) 및/또는 도 1b의 전자 장치(101)의 구성 및/또는 기능 중 적어도 일부를 포함할 수 있다. 전자 장치(3000)는 도 29a 내지 도 29b의 듀얼 디스플레이 구조를 포함할 수 있다.
다양한 실시예에 따르면, 제1디스플레이(3010)는 제1하우징 구조(예: 도 29의 제1하우징 구조(2910))의 전면에 배치되고, 제2디스플레이(3020)는 제2하우징 구조(예: 도 29의 제2하우징 구조(2920))의 전면에 배치될 수 있다. 이에 따라, 전자 장치(3000)가 언폴딩 상태에서는 제1디스플레이(3010) 및 제2디스플레이(3020)가 같은 방향을 향할 수 있다. 제3디스플레이(3030)는 제1하우징 구조의 후면에 배치될 수 있다. 일 실시예에 따르면, 전자 장치(3000)는 후면의 제3디스플레이(3030)는 포함하지 않을 수 있다. 일 실시예에 따르면, 제2디스플레이(3020)는 제2하우징 구조로부터 분리될 수 있다. 이를 위해, 제2하우징 구조는 제2디스플레이(3020)가 탈착 되도록 하는 구조 및 부착 시 전기적으로 연결되기 위한 하나 이상의 핀을 포함할 수 있다.
다양한 실시예에 따르면, 프로세서(3040)는 전자 장치(3000)가 펼쳐진 상태에서 어플리케이션의 실행 화면을 제1디스플레이(3010) 및/또는 제2디스플레이(3020)에 표시할 수 있다. 여기서, 프로세서(3040)는 복수의 어플리케이션이 실행 중인 경우 제1어플리케이션의 화면을 제1디스플레이(3010)에 표시하고, 제2어플리케이션의 화면을 제2디스플레이(3020)에 표시할 수 있다. 프로세서(3040)는 하나의 어플리케이션이 실행 중인 경우, 어플리케이션의 실행 화면을 분할하여 분할된 각각을 제1디스플레이(3010) 및 제2디스플레이(3020)를 통해 표시하거나, 어플리케이션의 실행 화면을 제1디스플레이(3010) 또는 제2디스플레이(3020) 중 하나에 표시할 수 있다.
전자 장치(3000)가 언폴딩 상태에서는 제3디스플레이(3030)는 오프 될 수 있다.
다양한 실시예에 따르면, 프로세서(3040)는 폴딩 제스처가 개시되는 경우, 터치 센서에 터치 이벤트의 전송을 중지하도록 할 수 있다. 다양한 실시예에 따르면, 프로세서(3040)는 폴딩이 개시되기 이전에 어플리케이션에 제공한 터치 이벤트(예: press, release 이벤트)를 취소할 수 있다. 다양한 실시예에 따르면, 프로세서(3040)는 폴딩이 개시되면 이전에 제공한 터치 이벤트에 대응하는 캔슬 이벤트를 어플리케이션에 제공할 수 있다.
다양한 실시예에 따르면, 프로세서(3040)는 전자 장치(3000)의 폴딩 시, 제1디스플레이(3010) 및 제2디스플레이(3020)를 오프 시키고, 제3디스플레이(3030)에 어플리케이션 실행 화면을 표시할 수 있다. 프로세서(3040)는 제3디스플레이(3030)의 속성(예: 크기, 비율, 해상도, 밀집도)에 기초하여 어플리케이션 redrawing할 수 있다.
다양한 실시예에 따르면, 프로세서(3040)는 폴딩 제스처에 대응하여 터치 락 화면을 제3디스플레이(3030)에 표시할 수 있다. 프로세서(3040)는 터치 락 화면을 표시한 이후 제3디스플레이(3030)의 제3터치 센서로부터 수신되는 터치 이벤트를 처리할 수 있다. 프로세서(3040)는 터치 락 화면을 표시한 이후에 제3디스플레이(3030)로부터 수신되는 터치 이벤트에 따라 터치 락 화면을 해제하고, 터치 이벤트를 실행 중인 어플리케이션에 제공할 수 있다.
다양한 실시예에 따르면, 프로세서(3040)는 어플리케이션의 상태 정보에 기초하여 터치 락 화면을 생성할 수 있다. 여기서, 어플리케이션의 상태 정보는 어플리케이션에 대해 지정된 보안 레벨 및/또는 어플리케이션의 실행 화면의 리사이징 여부(resizable)에 대한 정보를 포함할 수 있다.
이상 설명한 이외에, 전자 장치(3000)는 도 2a 내지 도 18을 통해 설명한 인 폴딩 폴더블 디스플레이 구조의 전자 장치(3000)의 특징을 더 포함할 수 있다. 이 경우, 인 폴딩 폴더블 디스플레이 구조의 제1디스플레이의 제1영역(예: 도 4e의 제1영역(451)) 및 제2영역(예: 도 4e의 제2영역(452))이, 듀얼 디스플레이 구조의 제1디스플레이(3010) 및 제2디스플레이(3020)에 각각 대응할 수 있다.
도 31a 및 31b는 다양한 실시예에 따른 G 형태로 폴딩 되는 전자 장치를 도시한 것이다.
다양한 실시예에 따르면, 전자 장치(3100)는 2개의 폴딩 축(A, B)을 기준으로 구분되는 제1하우징 구조(3111), 제2하우징 구조(3112) 및 제3하우징 구조(3113)를 포함할 수 있다. 도 31a를 참조 하면, 제1하우징 구조(3111), 제2하우징 구조(3112) 및 제3하우징 구조(3113)의 전면에는 디스플레이(3110)가 배치될 수 있다. 디스플레이(3110)는 2개의 폴딩 축을 기준으로 접힐 수 있는 폴더블 디스플레이(3110) 구조로써 제1하우징 구조(3111) 상에 배치되는 제1영역, 제2하우징 구조(3112) 상에 배치되는 제2영역 및 제3하우징 구조(3113) 상에 배치되는 제3영역으로 구분될 수 있다.
도 31b를 참조 하면, 전자 장치(3100)는 제2하우징 구조(3112)를 중심으로 제1하우징 구조(3111)가 안으로 폴딩 된 후, 제3하우징 구조(3113)가 안으로 폴딩 될 수 있다. 이에 따라, 폴딩 상태에서 디스플레이(3110)의 제1영역은 제2영역과 마주보게 되고, 제3영역은 제1하우징 구조(3111)의 후면과 마주보게 될 수 있다.
다양한 실시예에 따르면, 전자 장치(3100)는 폴딩이 개시되면 디스플레이(3110) 상에서 발생하는 터치 이벤트를 처리하지 않을 수 있다. 전자 장치(3100)는 폴딩이 완료되면 디스플레이(3110)를 오프 시킬 수 있다.
도 32a, 32b 및 32c는 다양한 실시예에 따른 S 형태로 폴딩 되는 전자 장치를 도시한 것이다.
다양한 실시예에 따르면, 전자 장치(3200)는 2개의 폴딩 축을 기준으로 구분되는 제1하우징 구조, 제2하우징 구조 및 제3하우징 구조를 포함할 수 있다. 도 32a를 참조 하면, 제1하우징 구조 및 제2하우징 구조의 전면에는 제1디스플레이(3210)가 배치될 수 있다. 도 32b를 참조 하면, 제3하우징 구조의 후면에는 제2디스플레이(3220)가 배치될 수 있다. 제1디스플레이(3210)는 폴더블 디스플레이일 수 있고, 제2디스플레이(3220)는 접히지 않을 수 있다.
제1디스플레이(3210)는 2개의 하우징 구조를 커버하기 때문에 제1디스플레이(3210)의 크기는 제2디스플레이(3220)보다 클 수 있다.
도 32c를 참조 하면, 전자 장치(3200)의 폴딩 시 제1디스플레이(3210)는 폴딩 축을 기준으로 구분되는 제1영역 및 제2영역이 서로 마주보게 되고, 제2디스플레이(3220)는 외부로 보여질 수 있다.
다양한 실시예에 따르면, 전자 장치(3200)는 언폴딩 상태에서 제1디스플레이(3210)에 어플리케이션 화면을 표시할 수 있다. 이 때, 제2디스플레이(3220)는 오프 시킬 수 있다. 전자 장치(3200)는 폴딩 상태에서 제2디스플레이(3220)에 어플리케이션 화면을 표시하고, 제1디스플레이(3210)는 오프 시킬 수 있다.
프로세서는 폴딩이 개시되면, 제1디스플레이(3210) 상에서 발생하는 터치 이벤트를 처리하지 않을 수 있다. 프로세서는 전자 장치(3200)의 폴딩에 대응하여 제2디스플레이(3220)의 속성(예: 크기, 비율, 해상도, 밀집도)에 기초하여 어플리케이션 화면을 리사이징 하여 제2디스플레이(3220)에 표시할 수 있다. 프로세서는 폴딩 제스처에 대응하여 터치 락 화면을 생성하여 폴딩 후 어플리케이션 화면을 표시할 영역에 표시할 수 있다. 터치 락 화면은 실행 중인 어플리케이션의 상태 정보(예: 보안 레벨 및/또는 어플리케이션의 리사이징 여부(resizable))에 따라 결정될 수 있다.
도 33a 및 33b는 다양한 실시예에 따른 롤러블 디스플레이를 갖는 전자 장치를 도시한 것이다.
도 33a를 참조 하면, 전자 장치(3300)는 폴딩 축이 없이 전체적으로 감기는 형태일 수 있다. 전자 장치(3300)의 전면에는 디스플레이(3310)가 배치될 수 있고, 디스플레이(3310)는 롤러블 디스플레이(3310) 일 수 있다. 전자 장치(3300)가 완전히 펼쳐진 상태에서는 전자 장치(3300)의 전체에 어플리케이션의 실행 화면이 표시될 수 있다.
도 33b를 참조 하면, 전자 장치(3300)는 감길 수 있다. 전자 장치(3300)가 소정 각도 이상으로 감긴 경우, 전자 장치(3300)는 롤링에 대응하여 어플리케이션을 표시할 영역을 결정할 수 있다. 예를 들어, 전자 장치(3300)는 디스플레이(3310)의 가운데 소정 영역에 어플리케이션의 실행 화면(3350)을 표시할 수 있다. 전자 장치(3300)는 롤링 상태에서 어플리케이션을 표시할 영역의 속성(예: 크기, 비율, 해상도, 밀집도)에 기초하여 어플리케이션 화면을 리사이징할 수 있다.
다양한 실시예에 따르면, 전자 장치(3300)는 롤링이 개시되는 경우 터치 이벤트는 처리하지 않을 수 있다. 롤링이 완료되면 터치 락 화면을 표시할 수 있고, 터치 락 화면의 표시 이후에 해당 영역에서 발생하는 터치 이벤트를 처리할 수 있다. 이 때, 표시 영역 이외에는 화면이 표시되지 않고, 해당 영역에서 발생하는 터치 이벤트는 처리하지 않을 수 있다.
다양한 실시예에 따른 전자 장치는, 하우징, 상기 하우징의 적어도 일부를 통해 보여지고, 터치 센서를 포함하는 적어도 하나의 디스플레이, 상기 하우징 내에 배치되고, 상기 디스플레이와 작동적으로(operatively) 연결되는 프로세서, 및 상기 하우징 내에 배치되고, 상기 프로세서와 작동적으로 연결되는 메모리를 포함하고, 상기 메모리는, 실행 시에, 상기 프로세서가, 상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 적어도 하나의 디스플레이에 표시하고, 상기 전자 장치에 대한 폴딩(folding) 제스처를 감지하고, 상기 감지된 폴딩 제스처에 대응하여, 상기 어플리케이션의 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정하고, 상기 결정된 일부 영역에 터치 락 화면을 표시하고, 및 상기 터치 락 화면을 표시한 이후에, 상기 적어도 하나의 디스플레이의 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하도록 하는 인스트럭션들을 저장할 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 디스플레이는, 상기 하우징의 제1방향의 제1면에 배치되고, 제1터치 센서를 포함하는 제1디스플레이, 및 상기 하우징의 제2방향의 제2면에 배치되고, 제2터치 센서를 포함하는 제2디스플레이를 포함하고, 상기 제1디스플레이는 접힐 수 있고(foldable), 상기 제1디스플레이가 접힌 경우, 상기 접힌 영역을 기준으로 구분되는 상기 제1디스플레이의 상기 제1영역 및 상기 제2영역이 서로 마주보도록 구성될 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 제1디스플레이가 펼쳐진(unfolded) 상태에서 상기 어플리케이션의 실행 화면을 상기 제1디스플레이에 표시하고, 상기 감지된 폴딩 제스처에 대응하여, 상기 제2디스플레이의 속성에 기초하여 상기 어플리케이션의 상기 실행 화면을 생성하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 폴딩 제스처의 감지 시점으로부터 상기 터치 락 화면이 표시되는 시점 사이에 상기 제1디스플레이의 상기 제1터치 센서 및 상기 제2디스플레이의 상기 제2터치 센서 중 적어도 하나에 의해 수신되는 터치 이벤트를 상기 어플리케이션에 제공하지 않도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 폴딩 제스처의 감지 시, 상기 폴딩 제스처 이전에 상기 제1디스플레이의 상기 제1터치 센서 및 상기 제2디스플레이의 상기 제2터치 센서 중 적어도 하나에 의해 수신하여 상기 어플리케이션에 제공한 터치 이벤트 중 적어도 일부에 대응하는 취소 이벤트를 상기 어플리케이션에 제공하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 어플리케이션의 상태 정보에 적어도 일부 기초하여, 상기 터치 락 화면을 생성하도록 할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션의 상태 정보는, 상기 어플리케이션에 대해 지정된 보안 레벨을 포함할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 보안 레벨이 제1레벨로 설정된 경우, 적어도 일부가 반투명한 영역을 포함하는 상기 터치 락 화면을 생성하고, 상기 생성된 터치 락 화면을 상기 어플리케이션 실행 화면의 상위 레이어(layer)에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 보안 레벨이 제2레벨로 설정된 경우, 보안 상태를 해제하기 위한 가이드 정보를 포함하는 상기 터치 락 화면을 상기 제2디스플레이에 표시하고, 상기 보안 상태의 해제를 위한 사용자 입력에 적어도 일부 기초하여 상기 어플리케이션 실행 화면을 상기 제2디스플레이에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션의 상태 정보는, 상기 어플리케이션의 실행 화면의 리사이징 여부(resizable)에 대한 정보를 포함할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 어플리케이션의 상태 정보에 적어도 일부 기초하여 상기 어플리케이션의 실행 화면이 리사이징 가능한 것으로 결정되는 경우, 적어도 일부가 반투명한 영역을 포함하는 상기 터치 락 화면을 생성하고, 상기 생성된 터치 락 화면을 상기 어플리케이션의 리사이징 된(resized) 실행 화면의 상위 레이어에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 어플리케이션의 상태 정보에 적어도 일부 기초하여 상기 어플리케이션의 실행 화면이 리사이징 불가능한 것으로 결정되는 경우, 상기 어플리케이션의 재실행 또는 계속 실행 여부를 선택하기 위한 메뉴를 포함하는 터치 락 화면을 상기 제2디스플레이에 표시하도록 할 수 있다.
다양한 실시예에 따르면, 상기 하우징은, 힌지(hinge) 구조, 상기 힌지 구조에 연결되어, 상기 힌지 구조를 중심으로 접힐 수 있는 제1하우징 구조 및 제2하우징 구조를 포함하고, 상기 적어도 하나의 디스플레이는, 상기 제1하우징 구조의 제1면에 배치되고, 제1터치 센서를 포함하는 제1디스플레이, 상기 제2하우징 구조의 제1면에 배치되고, 제2터치 센서를 포함하는 제2디스플레이, 및 상기 제1하우징 구조의 제2면에 배치되고, 제3터치 센서를 포함하는 제3디스플레이를 포함할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 제1디스플레이 및 제2디스플레이 중 적어도 일부에 표시하고, 상기 감지된 폴딩 제스처에 대응하여, 상기 제3디스플레이의 속성에 기초하여 상기 어플리케이션의 상기 실행 화면을 생성하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 감지된 폴딩 제스처에 대응하여, 터치 락 화면을 상기 제3디스플레이에 표시하고, 상기 터치 락 화면을 표시한 이후 상기 제3디스플레이의 상기 제3터치 센서로부터 수신되는 터치 이벤트를 처리하도록 할 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 디스플레이는, 상기 하우징의 제1방향의 제1면에 배치되고, 터치 센서를 포함하는 하나의 디스플레이를 포함하고, 상기 디스플레이는 접힐 수 있고(foldable), 상기 디스플레이가 접힌 경우, 상기 하우징의 제2면이 서로 마주보고, 상기 접힌 영역을 기준으로 구분되는 상기 디스플레이의 제1영역 및 제2영역은 외부로 보여질 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 감지된 폴딩 제스처에 대응하여, 상기 제1영역 또는 상기 제2영역의 속성에 기초하여 상기 어플리케이션의 실행 화면을 생성하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 감지된 폴딩 제스처에 대응하여, 터치 락 화면을 상기 제1영역 또는 상기 제2영역에 표시하고, 상기 터치 락 화면을 표시한 이후 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하도록 할 수 있다.
다양한 실시예에 따르면, 상기 인스트럭션들은, 상기 프로세서가, 상기 폴딩 제스처가 개시되는 경우, 상기 터치 락 화면이 표시되기 전까지 폴딩 진행 중임을 알리기 위한 시각적 효과를 상기 제1영역 및 상기 제2영역 중 적어도 하나에 표시하도록 할 수 있다.
도 34는 다양한 실시예에 따른 전자 장치의 제어 방법의 흐름도이다.
도시된 방법(3400)은 앞서 도 1a 내지 도 33b를 통해 설명한 전자 장치(예: 도 1b의 전자 장치(101))에 의해 실행될 수 있으며, 앞서 설명한 바 있는 기술적 특징은 이하에서 그 설명을 생략하기로 한다.
동작 3410에서, 전자 장치는 언폴딩 상태에서, 어플리케이션 실행 화면을 적어도 하나의 디스플레이에 표시할 수 있다. 다양한 실시예에 따른 전자 장치는 다양한 폼 펙터(예: 인-폴딩 폴더블 디스플레이(in-folding foldable display) 구조, 아웃-폴딩 폴더블 디스플레이(out-folding foldable display) 구조, 듀얼 디스플레이(dual display) 구조, G 타입(G-type folding) 폴딩 구조, S 타입 폴딩(S-type folding) 구조, 또는 롤러블 디스플레이(rollable display) 구조)로 구성될 수 있으며, 각 폼 펙터 구조에서 언폴딩 상태에서 어플리케이션 실행 화면이 표시되는 디스플레이 영역에 대해서는 앞서 설명한 바 있다.
동작 3420에서, 전자 장치는 폴딩 제스처를 감지할 수 있다. 폴딩 제스처는 전자 장치가 펼쳐진 상태에서 사용자가 전자 장치에 힘을 가하여 폴딩 축을 기준으로 전자 장치의 일부를 접는 동작을 의미할 수 있다. 전자 장치는 폴딩 제스처가 개시되는 경우, 각 디스플레이에 터치 이벤트의 전송을 중지하도록 요청하거나, 수신되는 터치 이벤트를 무시할 수 있다. 전자 장치는 폴딩이 개시되기 이전에 어플리케이션에 제공한 터치 이벤트를 취소할 수 있다.
동작 3430에서, 전자 장치는 폴딩 제스처에 대응하여, 어플리케이션 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정할 수 있다. 예를 들어, 전자 장치가 인-폴딩 폴더블 디스플레이 구조인 경우, 접힐 수 있는 제1디스플레이와 하우징의 반대 면에 배치되는 접히지 않는 제2디스플레이를 이용해 어플리케이션 화면을 표시할 수 있다. 또는, 전자 장치가 아웃-폴딩 폴더블 디스플레이 구조인 경우, 폴더블 디스플레이의 폴딩 축을 기준으로 구분되는 제1영역 또는 제2영역 중 어느 하나에 어플리케이션 화면을 표시할 수 있다. 다양한 폼 팩터 중 폴딩 시 디스플레이의 대부분이 사용자에게 보여지지 않는 형태(예: 인-폴딩 폴더블 디스플레이 구조 또는 듀얼 디스플레이 구조에서 배면의 서브 디스플레이가 없는 경우)에서는 전자 장치의 폴딩에 따라 어플리케이션의 표시는 종료 되고, 어플리케이션은 백그라운드에서 동작할 수 있다.
동작 3440에서, 전자 장치는 상기 결정된 영역에 터치 락 화면을 생성하여 표시할 수 있다. 다양한 실시예에 따른 터치 락 화면은 앞서 도 10a 내지 10f를 통해 설명한 바 있다.
동작 3450에서, 전자 장치는 터치 락 화면이 표시된 이후 어플리케이션 실행 화면이 표시된 디스플레이의 터치 센서로부터 수신되는 터치 이벤트를 처리할 수 있다. 전자 장치는 터치 락 화면을 표시한 이후에 상기 디스플레이로부터 수신되는 터치 이벤트에 따라 터치 락 화면을 해제하고, 터치 이벤트를 실행 중인 어플리케이션에 제공할 수 있다.
다양한 실시예에 따른 전자 장치의 제어 방법은, 하우징의 적어도 일부를 통해 보여지고, 터치 센서를 포함하는 적어도 하나의 디스플레이를 포함하고, 상기 방법은, 상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 적어도 하나의 디스플레이에 표시하는 동작, 상기 전자 장치에 대한 폴딩(folding) 제스처를 감지하는 동작, 상기 감지된 폴딩 제스처에 대응하여, 상기 어플리케이션의 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정하는 동작, 상기 결정된 일부 영역에 터치 락 화면을 표시하는 동작, 및 상기 터치 락 화면을 표시한 이후에, 상기 적어도 하나의 디스플레이의 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하는 동작을 포함할 수 있다.

Claims (20)

  1. 전자 장치에 있어서,
    하우징;
    상기 하우징의 적어도 일부를 통해 보여지고, 터치 센서를 포함하는 적어도 하나의 디스플레이;
    상기 하우징 내에 배치되고, 상기 디스플레이와 작동적으로(operatively) 연결되는 프로세서; 및
    상기 하우징 내에 배치되고, 상기 프로세서와 작동적으로 연결되는 메모리를 포함하고,
    상기 메모리는, 실행 시에, 상기 프로세서가,
    상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 적어도 하나의 디스플레이에 표시하고,
    상기 전자 장치에 대한 폴딩(folding) 제스처를 감지하고,
    상기 감지된 폴딩 제스처에 대응하여, 상기 어플리케이션의 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정하고,
    상기 결정된 일부 영역에 터치 락 화면을 표시하고, 및
    상기 터치 락 화면을 표시한 이후에, 상기 적어도 하나의 디스플레이의 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하도록 하는 인스트럭션들을 저장하는 전자 장치.
  2. 제 1항에 있어서,
    상기 적어도 하나의 디스플레이는,
    상기 하우징의 제1방향의 제1면에 배치되고, 제1터치 센서를 포함하는 제1디스플레이; 및
    상기 하우징의 제2방향의 제2면에 배치되고, 제2터치 센서를 포함하는 제2디스플레이를 포함하고,
    상기 제1디스플레이는 접힐 수 있고(foldable), 상기 제1디스플레이가 접힌 경우, 상기 접힌 영역을 기준으로 구분되는 상기 제1디스플레이의 상기 제1영역 및 상기 제2영역이 서로 마주보도록 구성된 전자 장치.
  3. 제 2항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 제1디스플레이가 펼쳐진(unfolded) 상태에서 상기 어플리케이션의 실행 화면을 상기 제1디스플레이에 표시하고,
    상기 감지된 폴딩 제스처에 대응하여, 상기 제2디스플레이의 속성에 기초하여 상기 어플리케이션의 상기 실행 화면을 생성하도록 하는 전자 장치.
  4. 제 3항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 폴딩 제스처의 감지 시점으로부터 상기 터치 락 화면이 표시되는 시점 사이에 상기 제1디스플레이의 상기 제1터치 센서 및 상기 제2디스플레이의 상기 제2터치 센서 중 적어도 하나에 의해 수신되는 터치 이벤트를 상기 어플리케이션에 제공하지 않도록 하는 전자 장치.
  5. 제 3항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 폴딩 제스처의 감지 시, 상기 폴딩 제스처 이전에 상기 제1디스플레이의 상기 제1터치 센서 및 상기 제2디스플레이의 상기 제2터치 센서 중 적어도 하나에 의해 수신하여 상기 어플리케이션에 제공한 터치 이벤트 중 적어도 일부에 대응하는 취소 이벤트를 상기 어플리케이션에 제공하도록 하는 전자 장치.
  6. 제 3항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 어플리케이션의 상태 정보에 적어도 일부 기초하여, 상기 터치 락 화면을 생성하도록 하는 전자 장치.
  7. 제 6항에 있어서,
    상기 어플리케이션의 상태 정보는, 상기 어플리케이션에 대해 지정된 보안 레벨을 포함하는 전자 장치.
  8. 제 7항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 보안 레벨이 제1레벨로 설정된 경우, 적어도 일부가 반투명한 영역을 포함하는 상기 터치 락 화면을 생성하고, 상기 생성된 터치 락 화면을 상기 어플리케이션 실행 화면의 상위 레이어(layer)에 표시하도록 하는 전자 장치.
  9. 제 7항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 보안 레벨이 제2레벨로 설정된 경우, 보안 상태를 해제하기 위한 가이드 정보를 포함하는 상기 터치 락 화면을 상기 제2디스플레이에 표시하고, 상기 보안 상태의 해제를 위한 사용자 입력에 적어도 일부 기초하여 상기 어플리케이션 실행 화면을 상기 제2디스플레이에 표시하도록 하는 전자 장치.
  10. 제 7항에 있어서,
    상기 어플리케이션의 상태 정보는, 상기 어플리케이션의 실행 화면의 리사이징 여부(resizable)에 대한 정보를 포함하는 전자 장치.
  11. 제 10항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 어플리케이션의 상태 정보에 적어도 일부 기초하여 상기 어플리케이션의 실행 화면이 리사이징 가능한 것으로 결정되는 경우, 적어도 일부가 반투명한 영역을 포함하는 상기 터치 락 화면을 생성하고, 상기 생성된 터치 락 화면을 상기 어플리케이션의 리사이징 된(resized) 실행 화면의 상위 레이어에 표시하도록 하는 전자 장치.
  12. 제 10항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 어플리케이션의 상태 정보에 적어도 일부 기초하여 상기 어플리케이션의 실행 화면이 리사이징 불가능한 것으로 결정되는 경우, 상기 어플리케이션의 재실행 또는 계속 실행 여부를 선택하기 위한 메뉴를 포함하는 터치 락 화면을 상기 제2디스플레이에 표시하도록 하는 전자 장치.
  13. 제 1항에 있어서,
    상기 하우징은,
    힌지(hinge) 구조;
    상기 힌지 구조에 연결되어, 상기 힌지 구조를 중심으로 접힐 수 있는 제1하우징 구조 및 제2하우징 구조를 포함하고,
    상기 적어도 하나의 디스플레이는,
    상기 제1하우징 구조의 제1면에 배치되고, 제1터치 센서를 포함하는 제1디스플레이;
    상기 제2하우징 구조의 제1면에 배치되고, 제2터치 센서를 포함하는 제2디스플레이; 및
    상기 제1하우징 구조의 제2면에 배치되고, 제3터치 센서를 포함하는 제3디스플레이를 포함하는 전자 장치.
  14. 제 13항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 제1디스플레이 및 제2디스플레이 중 적어도 일부에 표시하고,
    상기 감지된 폴딩 제스처에 대응하여, 상기 제3디스플레이의 속성에 기초하여 상기 어플리케이션의 상기 실행 화면을 생성하도록 하는 전자 장치.
  15. 제 14항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 감지된 폴딩 제스처에 대응하여, 터치 락 화면을 상기 제3디스플레이에 표시하고,
    상기 터치 락 화면을 표시한 이후 상기 제3디스플레이의 상기 제3터치 센서로부터 수신되는 터치 이벤트를 처리하도록 하는 전자 장치.
  16. 제 1항에 있어서,
    상기 적어도 하나의 디스플레이는;
    상기 하우징의 제1방향의 제1면에 배치되고, 터치 센서를 포함하는 하나의 디스플레이를 포함하고,
    상기 디스플레이는 접힐 수 있고(foldable), 상기 디스플레이가 접힌 경우, 상기 하우징의 제2면이 서로 마주보고, 상기 접힌 영역을 기준으로 구분되는 상기 디스플레이의 제1영역 및 제2영역은 외부로 보여지는 전자 장치.
  17. 제 16항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 감지된 폴딩 제스처에 대응하여, 상기 제1영역 또는 상기 제2영역의 속성에 기초하여 상기 어플리케이션의 실행 화면을 생성하도록 하는 전자 장치.
  18. 제 17항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 감지된 폴딩 제스처에 대응하여, 터치 락 화면을 상기 제1영역 또는 상기 제2영역에 표시하고,
    상기 터치 락 화면을 표시한 이후 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하도록 하는 전자 장치.
  19. 제 18항에 있어서,
    상기 인스트럭션들은, 상기 프로세서가,
    상기 폴딩 제스처가 개시되는 경우, 상기 터치 락 화면이 표시되기 전까지 폴딩 진행 중임을 알리기 위한 시각적 효과를 상기 제1영역 및 상기 제2영역 중 적어도 하나에 표시하도록 하는 전자 장치.
  20. 전자 장치의 제어 방법에 있어서,
    하우징의 적어도 일부를 통해 보여지고, 터치 센서를 포함하는 적어도 하나의 디스플레이를 포함하고,
    상기 방법은,
    상기 전자 장치가 펼쳐진(unfolded) 상태에서 어플리케이션의 실행 화면을 상기 적어도 하나의 디스플레이에 표시하는 동작;
    상기 전자 장치에 대한 폴딩(folding) 제스처를 감지하는 동작;
    상기 감지된 폴딩 제스처에 대응하여, 상기 어플리케이션의 실행 화면을 표시할 적어도 하나의 디스플레이 중 일부 영역을 결정하는 동작;
    상기 결정된 일부 영역에 터치 락 화면을 표시하는 동작; 및
    상기 터치 락 화면을 표시한 이후에, 상기 적어도 하나의 디스플레이의 상기 터치 센서로부터 수신되는 터치 이벤트를 처리하는 동작을 포함하는 방법.
KR1020190142828A 2019-02-19 2019-11-08 전자 장치 및 전자 장치의 디스플레이 제어 방법 KR20200101258A (ko)

Priority Applications (9)

Application Number Priority Date Filing Date Title
EP20158016.4A EP3699738B1 (en) 2019-02-19 2020-02-18 Electronic device and display control method thereof
EP22186586.8A EP4102344A1 (en) 2019-02-19 2020-02-18 Electronic device and display control method thereof
US16/793,614 US11409488B2 (en) 2019-02-19 2020-02-18 Electronic device and display control method thereof
KR1020200020427A KR20200101306A (ko) 2019-02-19 2020-02-19 전자 장치 및 전자 장치의 디스플레이 제어 방법
PCT/KR2020/002401 WO2020171591A1 (en) 2019-02-19 2020-02-19 Electronic device and display control method thereof
CN202010101721.7A CN111580601B (zh) 2019-02-19 2020-02-19 电子装置及其显示控制方法
US17/882,964 US11868671B2 (en) 2019-02-19 2022-08-08 Electronic device and display control method thereof
KR1020230024506A KR20230031272A (ko) 2019-02-19 2023-02-23 전자 장치 및 전자 장치의 디스플레이 제어 방법
US18/545,350 US20240118853A1 (en) 2019-02-19 2023-12-19 Electronic device and display control method thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190019500 2019-02-19
KR20190019500 2019-02-19

Publications (1)

Publication Number Publication Date
KR20200101258A true KR20200101258A (ko) 2020-08-27

Family

ID=72237395

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020190142828A KR20200101258A (ko) 2019-02-19 2019-11-08 전자 장치 및 전자 장치의 디스플레이 제어 방법
KR1020200020427A KR20200101306A (ko) 2019-02-19 2020-02-19 전자 장치 및 전자 장치의 디스플레이 제어 방법

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020200020427A KR20200101306A (ko) 2019-02-19 2020-02-19 전자 장치 및 전자 장치의 디스플레이 제어 방법

Country Status (1)

Country Link
KR (2) KR20200101258A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024029716A1 (ko) * 2022-07-31 2024-02-08 삼성전자주식회사 플렉서블 디스플레이를 통해 화면을 표시하기 위한 전자 장치 및 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024029716A1 (ko) * 2022-07-31 2024-02-08 삼성전자주식회사 플렉서블 디스플레이를 통해 화면을 표시하기 위한 전자 장치 및 방법

Also Published As

Publication number Publication date
KR20200101306A (ko) 2020-08-27

Similar Documents

Publication Publication Date Title
EP3699738B1 (en) Electronic device and display control method thereof
US11481174B2 (en) Electronic device and method for controlling and operating foldable display
US20210150953A1 (en) Method and device for providing user interface in electronic device having foldable display
KR102650857B1 (ko) 폴더블 전자 장치 및 폴더블 전자 장치에서 터치 입력을 감지하는 방법
CN114514508B (zh) 提供应用的运行画面的电子装置及其操作方法
US11735143B2 (en) Electronic device and method of controlling the same
JP2022530621A (ja) 携帯用通信装置及びその動作方法
KR20200132008A (ko) 전자 장치 및 그의 알림 제공 방법
KR102675268B1 (ko) 폴더블 전자 장치 및 이를 이용한 멀티 윈도우 운용 방법
US20210056878A1 (en) Electronic device having foldable display and method of generating content thereof
KR20200045241A (ko) 폴더블 전자 장치 및 그 콘텐츠의 다단 표시 방법
KR102542398B1 (ko) 폴더블 전자 장치 및 상기 폴더블 전자 장치에서 정보를 표시하는 방법
KR20190098474A (ko) 터치 입력 처리 방법 및 이를 지원하는 전자 장치
KR20210075438A (ko) 폴더블 전자 장치 및 상기 폴더블 전자 장치에서 사용자 인터페이스를 표시하는 방법
US11157110B2 (en) Electronic device and control method for electronic device
KR20200101306A (ko) 전자 장치 및 전자 장치의 디스플레이 제어 방법
KR20210140949A (ko) 폴더블 전자 장치 및 그의 알림 표시 제어 방법
KR20210082910A (ko) 플렉서블 디스플레이를 포함하는 전자 장치와 이의 동작 방법
KR20210041768A (ko) 전자 장치 및 전자 장치의 제어 방법
US11755171B2 (en) Electronic device and screenshot operation method for electronic device
CN114144749B (zh) 基于触摸输入的操作方法及其电子装置
KR102719976B1 (ko) 터치 입력에 기반한 동작 방법 및 그 전자 장치