KR102107469B1 - 사용자 단말 장치 및 이의 디스플레이 방법 - Google Patents

사용자 단말 장치 및 이의 디스플레이 방법 Download PDF

Info

Publication number
KR102107469B1
KR102107469B1 KR1020140088919A KR20140088919A KR102107469B1 KR 102107469 B1 KR102107469 B1 KR 102107469B1 KR 1020140088919 A KR1020140088919 A KR 1020140088919A KR 20140088919 A KR20140088919 A KR 20140088919A KR 102107469 B1 KR102107469 B1 KR 102107469B1
Authority
KR
South Korea
Prior art keywords
display
screen
interaction
user terminal
terminal device
Prior art date
Application number
KR1020140088919A
Other languages
English (en)
Other versions
KR20150095536A (ko
Inventor
김윤경
이용연
박해윤
곽지연
김현진
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US14/622,041 priority Critical patent/US10712918B2/en
Publication of KR20150095536A publication Critical patent/KR20150095536A/ko
Application granted granted Critical
Publication of KR102107469B1 publication Critical patent/KR102107469B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

사용자 단말 장치 및 이의 디스플레이 방법이 제공된다. 사용자 단말 장치의 디스플레이 방법은 디스플레이부에 제1 화면을 디스플레이하고, 상기 제1 화면이 디스플레이된 상태에서 사용자 인터렉션을 감지하고, 상기 사용자 인터렉션에 기초하여 제2 화면의 디스플레이 방향을 결정하고, 상기 결정된 디스플레이 방향으로 상기 제2 화면을 디스플레이 한다.

Description

사용자 단말 장치 및 이의 디스플레이 방법{USER TERMINAL DEVICE AND METHOD FOR DISPLAYING THEREOF}
본 발명은 사용자 단말 장치 및 이의 디스플레이 방법에 관한 것으로, 더욱 상세하게는 정사각형 형태의 디스플레이 패널을 포함하는 사용자 단말 장치 및 이의 디스플레이 방법에 관한 것이다.
전자 기술의 발달에 힘입어 다양한 유형의 사용자 단말 장치들이 개발 및 보급되고 있다. 최근에는 사용자 단말 장치의 크기도 최소화되면서 그 기능은 더욱 다양해져, 그 수요가 점점 더 늘어나고 있다.
사용자 단말 장치는 사용자의 요청에 따라 멀티미디어 컨텐츠나, 어플리케이션 화면 등과 같이 다양한 컨텐츠를 제공할 수 있다. 사용자는 사용자 단말 장치에 구비된 버튼이나 터치 스크린 등을 이용하여, 자신이 사용하고자 하는 기능을 선택할 수 있다. 사용자 단말 장치는 사용자와의 인터렉션에 따라 선택적으로 프로그램을 실행시켜, 그 실행 결과를 디스플레이할 수 있다.
한편, 사용자 단말 장치에서 제공할 수 있는 기능이 점차 다양해짐에 따라, 컨텐츠를 디스플레이하는 방식이나 사용자 인터렉션 방식에 대해서도 다양한 니즈(needs)가 발생하고 있다. 즉, 컨텐츠를 디스플레이하는 방식이 변하고, 컨텐츠의 종류 및 기능이 크게 증대함에 따라, 단순히 버튼을 선택하거나, 터치 스크린을 터치하는 종래의 인터렉션 방식으로는 사용자 단말 장치의 다양한 기능을 수행하기에 부족한 경우가 발생할 수 있다.
이에 따라, 사용자가 더욱 편리한 방식으로 사용자 단말 장치를 이용할 수 있도록 하는 사용자 인터렉션 기술에 대한 필요성이 대두되고 있다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 사용자 단말 장치에서 대각선 방향의 사용자 인터렉션을 통해 사용자 단말 장치의 다양한 기능을 수행할 수 있는 사용자 단말 장치 및 그의 디스플레이 방법을 제공함에 있다.
본 발명의 또 다른 목적은, 정사각형 형태의 디스플레이 패널을 가지는 사용자 단말 장치에서 복수의 정사각형 셀을 포함하는 그리드 화면에 복수의 오브젝트를 디스플레이하고, 사용자 인터렉션에 따라 복수의 오브젝트에 대한 다양한 기능을 제공할 수 있는 사용자 단말 장치 및 그의 디스플레이 방법을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따르면, 사용자 단말 장치의 디스플레이 방법은, 디스플레이부의 적어도 두 개의 영역에 적어도 두 개의 화면을 각각 디스플레이하는 단계; 상기 사용자 단말 장치에서 제1 사용자 인터렉션을 감지하는 단계; 상기 제1 사용자 인터렉션에 기초하여 상기 적어도 두 개의 화면을 각각 회전시켜 상기 적어도 두 개의 화면의 디스플레이 방향을 변경하는 단계;를 포함할 수 있다.
또한 상기 적어도 두 개의 영역 중 하나의 영역에서 제2 사용자 인터렉션을 감지하는 단계 및 상기 제2 사용자 인터렉션에 기초하여 상기 하나의 영역에 디스플레이되는 화면의 디스플레이 방향을 변경하는 단계를 더 포함할 수 있다.
상기 제1 사용자 인터렉션은 진동 인터렉션을 포함하며, 상기 디스플레이 방향을 변경하는 단계는, 상기 진동 인터렉션이 발생하는 위치를 결정하는 단계; 및 상기 진동 인터렉션이 발생하는 위치에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정하는 단계를 포함할 수 있다.
상기 제1 사용자 인터렉션은 터치 인터렉션을 포함하며, 상기 디스플레이 방향을 변경하는 단계는, 상기 터치 인터렉션의 방향을 결정하는 단계 및 상기 터치 인터렉션의 방향에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정하는 단계를 포함할 수 있다.
상기 디스플레이 방향을 변경하는 단계는, 상기 적어도 두 개의 화면의 디스플레이 방향이 변경되어도 상기 적어도 두 개의 화면의 배치 형태는 고정될 수 있다. 또한 상기 디스플레이부 및 상기 적어도 두 개의 화면 각각은 정사각형 형태일 수 있다.
본 발명의 다른 실시 예에 따른 사용자 단말 장치의 디스플레이 방법은, 상기 사용자 단말 장치의 화면 오프 상태에서, 사용자 인터렉션을 감지하는 단계; 및 상기 사용자 인터렉션에 기초하여 상기 화면의 디스플레이 방향을 결정하고, 상기 결정된 디스플레이 방향으로 상기 화면을 온 상태로 전환하는 단계;를 포함할 수 있다.
상기 감지하는 단계는, 상기 사용자 단말 장치의 회전 상태를 감지하며, 상기 전환하는 단계는, 상기 사용자 단말의 회전 상태에 기초하여 상기 디스플레이 방향을 결정하고, 상기 결정된 디스플레이 방향으로 상기 화면을 온 시킬 수 있다.
본 발명의 또 다른 실시 예 에 따른 사용자 단말 장치의 디스플레이 방법은 디스플레이 화면을 디스플레이 하는 단계; 상기 디스플레이 화면상에서 제1 사용자 인터렉션 및 제2 사용자 인터렉션을 감지하는 단계; 상기 제1 사용자 인터렉션 방향 및 제2 사용자 인터렉션 방향을 결정하는 단계; 상기 제1 사용자 인터렉션 및 제2 사용자 인터렉션에 기초하여 상기 디스플레이 화면을 제1 영역 및 제2 영역으로 분할하는 단계; 및 상기 제1 사용자 인터렉션 방향을 바탕으로 상기 제1 영역에 디스플레이되는 제1 화면의 디스플레이 방향을 결정하여 상기 제1 영역에 상기 제1 화면을 디스플레이하고, 상기 제2 사용자 인터렉션 방향을 바탕으로 상기 제2 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 상기 제2 영역에 제2 화면을 디스플레이하는 단계;를 포함할 수 있다.
상기 디스플레이 화면은 정사각형 형태이며, 상기 분할하는 단계는, 상기 제1 사용자 인터렉션 및 상기 제2 사용자 인터렉션중 적어도 어느 하나의 사용자 인터렉션이 상기 디스플레이 화면의 코너 방향을 향하는 경우, 상기 디스플레이 화면을 삼각형 형태로 분할할 수 있다.
상기 분할하는 단계는, 상기 제1 사용자 인터렉션 및 상기 제2 사용자 인터렉션중 적어도 어느 하나의 사용자 인터렉션이 상기 디스플레이 화면의 변(side)을 향하는 경우, 상기 디스플레이 화면을 사각형 형태로 분할할 수 있다.
본 발명의 또 다른 실시 예에 따른 사용자 단말 장치의 디스플레이 방법은 제1 화면을 디스플레이하는 단계; 상기 사용자 단말 장치의 전면부 및 후면부에서 동시에 제1 사용자 인터렉션 및 제2 사용자 인터렉션을 감지하는 단계; 상기 제1 사용자 인터렉션 방향 및 상기 제2 사용자 인터렉션 방향을 결정하는 단계; 상기 제1 사용자 인터렉션 및 상기 제2 사용자 인터렉션에 기초하여 상기 제1 화면을 제1 영역 및 제2 영역으로 분할하는 단계; 및 상기 제1 사용자 인터렉션의 방향을 바탕으로 상기 제1 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 상기 제1 영역에 상기 제2 화면을 디스플레이하고, 상기 제2 사용자 인터렉션의 방향을 바탕으로 상기 제2 영역에 디스플레이되는 제3 화면의 디스플레이 방향을 결정하여 상기 제2 영역에 상기 제3 화면을 디스플레이하는 단계;를 포함할 수 있다.
본 발명의 또 다른 실시 예에 따른 사용자 단말 장치의 디스플레이 방법은 제1 화면을 디스플레이하는 단계; 상기 제1 화면이 디스플레이된 상태에서 사용자 인터렉션을 감지하는 단계; 및 상기 사용자 인터렉션에 기초하여 제2 화면의 디스플레이 방향을 결정하고, 상기 결정된 디스플레이 방향으로 상기 제2 화면을 디스플레이하는 단계;를 포함할 수 있다. 상기 제1 화면은 잠금 화면 또는 알림 화면일 수 있다. 또한 상기 제1 화면의 디스플레이 방향은 상기 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
본 발명의 또 다른 실시 예에 따른 사용자 단말 장치는, 적어도 두 개의 영역에 적어도 두개의 화면을 각각 디스플레이 하는 디스플레이부; 제1 사용자 인터렉션을 감지하는 감지부; 및 상기 감지부에서 감지된 상기 제1 사용자 인터렉션에 기초하여 상기 적어도 두 개의 화면을 각각 회전시켜 상기 적어도 두 개의 화면의 디스플레이 방향이 변경되도록 상기 디스플레이부를 제어하는 제어부;를 포함할 수 있다.
상기 제어부는, 상기 적어도 두 개의 영역 중 하나의 영역에서 제2 사용자 인터렉션을 감지하고, 상기 제2 사용자 인터렉션에 기초하여 상기 하나의 영여겡 디스플레이 되는 화면의 디스플레이 방향이 변경되도록 상기 디스플레이부를 제어할 수 있다.
상기 제1 사용자 인터렉션은 진동 인터렉션을 포함하며, 상기 제어부는 상기 진동 인터렉션이 발생하는 위치를 결정하고, 상기 진동 인터렉션이 발생하는 위치에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정할 수 있다.,
상기 제1 사용자 인터렉션은 터치 인터렉션을 포함하며, 상기 제어부는 상기 터치 인터렉션의 방향을 결정하고, 상기 터치 인터렉션의 방향에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정할 수 있다.
상기 제어부는, 상기 적어도 두 개의 화면의 디스플레이 방향이 변경되어도 상기 적어도 두 개의 화면의 배치형태가 고정되도록 상기 디스플레이부를 제어할 수 있다.
여기서 상기 디스플레이부 및 상기 적어도 두 개의 화면 각각은 정사각형 형태일 수 있다.
본 발명의 또 다른 실시 예에 따른 사용자 단말 장치는, 화면을 디스플레이하는 디스플레이부; 사용자 인터렉션을 감지하는 감지부; 및 상기 사용자 단말 장치의 화면 오프 상태에서 상기 감지부를 통해 상기 디스플레이부에서 사용자 인터렉션을 감지하고, 상기 사용자 인터렉션에 기초하여 상기 화면의 디스플레이 방향을 결정하고, 상기 결정된 디스플레이 방향으로 상기 화면을 온 상태로 전환하는 제어부;를 포함할 수 있다.,
상기 감지부는 상기 사용자 단말의 회전 상태를 감지하고, 상기 제어부는 상기 사용자 단말의 회전 상태에 기초하여 상기 디스플레이 방향을 결정하고, 상기 결정된 디스플레이 방향으로 상기 화면이 온 되도록 상기 디스플레이부를 제어할 수 있다.
본 발명의 또 다른 실시 예에 따른 사용자 단말 장치는 제1 화면, 제2 화면 및 제3 화면을 디스플레이하는 디스플레이부; 제1 사용자 인터렉션 및 제2 사용자 인터렉션을 감지하는 감지부; 및 상기 디스플레이부에 제1 화면이 디스플레이된 상태에서 상기 감지부를 통해 감지된 상기 제1 사용자 인터렉션 및 상기 제2 사용자 인터렉션에 기초하여 상기 제1 화면을 제1 영역 및 제2 영역으로 분할하고, 상기 제1 사용자 인터렉션 방향을 바탕으로 상기 제1 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 상기 제1 영역에 상기 제2 화면이 디스플레이되도록 제어하고, 상기 제2 사용자 인터렉션 방향을 바탕으로 상기 제2 영역에 디스플레이되는 제3 화면의 디스플레이 방향을 결정하여 상기 제2 영역에 제3 화면이 디스플레이되도록 상기 디스플레이부를 제어하는 제어부를 포함할 수 있다.
상기 제1 화면은 정사각형 형태이며, 상기 제어부는. 상기 제1 사용자 인터렉션 및 상기 제2 사용자 인터렉션중 적어도 어느 하나의 사용자 인터렉션이 상기 제1 화면의 코너 방향을 향하는 경우, 상기 제1 화면이 삼각형 형태로 분할되도록 제어할 수 있다. 또한 상기 제어부는, 상기 제1 사용자 인터렉션 및 상기 제2 사용자 인터렉션중 적어도 어느 하나의 사용자 인터렉션이 상기 제1 화면의 변(side)을 향하는 경우, 상기 제1 화면이 사각형 형태로 분할되도록 상기 디스플레이부를 제어할 수 있다.
본 발명의 또 다른 실시 예에 따른 사용자 단말 장치는 제1 화면을 디스플레이하는 디스플레이부; 상기 사용자 단말 장치의 전면부 및 후면부에서 동시에 제1 사용자 인터렉션 및 제2 사용자 인터렉션을 감지하는 감지부; 상기 감지부를 통해 상기 전면부 및 상기 후면부에서 동시에 감지된 상기 제1 사용자 인터렉션 및 상기 제2 사용자 인터렉션에 기초하여 상기 제1 화면을 제1 영역 및 제2 영역으로 분할하고, 상기 제1 사용자 인터렉션의 방향을 바탕으로 상기 제1 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 상기 제1 영역에 상기 제2 화면이 디스플레이되도록 제어하고, 상기 제2 사용자 인터렉션의 방향을 바탕으로 상기 제2 영역에 디스플레이되는 제3 화면의 디스플레이 방향을 결정하여 상기 제2 영역에 상기 제3 화면이 디스플레이되도록 상기 디스플레이부를 제어하는 제어부;를 포함할 수 있다.
본 발명의 또다른 실시 예에 따른 사용자 단말 장치는, 화면을 디스플레이하는 디스플레이부; 사용자 인터렉션을 감지하는 감지부; 및
제1 화면이 디스플레이된 상태에서 사용자 인터렉션을 감지하고, 상기 사용자 인터렉션에 기초하여 제2 화면의 디스플레이 방향을 결정하고, 상기 결정된 디스플레이 방향으로 상기 제2 화면이 디스플레이되도록 상기 디스플레이부를 제어하는 제어부를 포함할 수 있다. 상기 제1 화면은 잠금 화면 또는 알림 화면일 수 있다.
상기 제1 화면의 디스플레이 방향은 상기 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
상술한 바와 같은 본 발명의 다양한 실시예에 따르면, 사용자는 정사각형 형태의 디스플레이 패널을 가지는 사용자 단말 장치를 통해 다양한 기능을 수행할 수 있게 된다. 이에 따라, 사용자 편의성 및 만족도가 향상될 수 있다.
도 1은 본 발명의 일 실시예에 따른, 사용자 단말 장치의 구성을 간략히 도시한 블럭도,
도 2는 본 발명의 일 실시예에 따른, 사용자 단말 장치의 구성을 상세히 도시한 블럭도,
도 3a 및 도 3b는 본 발명의 일 실시예에 따른, 정사각형 형태의 디스플레이 패널을 가지는 사용자 단말 장치를 도시한 도면,
도 4는 본 발명의 일 실시예에 따른, 저장부에 저장된 소프트웨어의 구성을 설명하기 위한 도면,
도 5a 내지 18c는 본 발명의 일 실시예에 따른, 대각선 방향의 사용자 인터렉션에 따라 사용자 단말 장치의 다양한 기능을 수행하는 실시예를 설명하기 위한 도면들,
도 19a 내지 도 32c는 본 발명의 일 실시예에 따른, 복수의 정사각형 셀로 구성된 그리드 화면에서 사용자 단말 장치의 다양한 기능을 수행하는 실시예를 설명하기 위한 도면,
도 33 내지 도 38은 본 발명의 일 실시예에 따른, 복수의 사용자 단말 장치를 이용하여 다양한 기능을 수행하는 실시예를 설명하기 위한 도면들,
도 39 내지 도 46b는 본 발명의 일 실시예에 따른, 폴딩 인터렉션에 따라 사용자 단말 장치의 다양한 기능을 수행하는 실시예를 설명하기 위한 도면들,
도 47 내지 도 48은 본 발명의 일 실시예에 따른, 사용자 단말 장치의 디스플레이 방법을 설명하기 위한 흐름도들
도 49a 내지 도 50b는 본 발명의 일 실시 예에 따른 사용자 인터렉션에 따라 화면의 디스플레이 방향이 변경되는 것을 도시한 도면
도 51a 내지 도 52d는 디스플레이 화면이 오프된 상태에서 사용자 인터렉션을 감지하고 사용자 인터렉션에 따라 디스플레이 화면이 디스플레이 되는 것을 도시한 도면
도 53은 디스플레이 화면에서 사용자 손가락의 접근 방향을 감지하는 도면
도 54a 및 도 54b는 사용자 인터렉션에 따라 디스플레이 화면이 2개의 영역으로 분할되는 것을 도시한 도면
도 55a 내지 도 55e는 사용자 단말의 전면부 및 후면부에서 동시에 사용자 인터렉션을 감지하고, 사용자 인터렉션에 대응하여 디스플레이 화면을 분할 하는 것을 도시한 도면
도 56a 내지 도 56c는 사용자 단말의 상하좌우 변 및 코너 영역에서 감지된 사용자 인터렉션에 대응하여 디스플레이 화면이 분할되는 것을 도시한 도면
도 57a 내지 도 57c는 디스플레이 화면이 분할된 상태에서 추가로 분할되는 경우에 대한 규칙을 도시한 도면
도 58은 본 발명의 일 실시 예에 따른 사용자 인터렉션에 따라 디스플레이 방향을 변경하는 사용자 단말 장치의 디스플레이 방법을 설명하기 위한 흐름도
도 59는 사용자 단말의 디스플레이 화면 오프 상태에서 사용자 인터렉션을 감지하고 사용자 인터렉션에 따라 디스플레이 방향을 결정하고 디스플렝 화면을 온 상태로 전환하는 사용자 단말 장치의 디스플레이 방법을 설명하기 위한 흐름도
도 60은 사용자 인터렉션에 따라 디스플레이 화면이 2개의 영역으로 분할되는 과정을 도시한 흐름도
도 61은 사용자 단말의 전면부 및 후면부에서 동시에 감지된 사용자 인터렉션에 대응하여 디스플레이 화면을 분할하는 과정을 나타내는 흐름도
도 62a 내지 도 63b는 디스플레이부에 제1 화면이 디스플레이된 상태에서 사용자 인터렉션에 기초하여 제2 화면의 디스플레이 방향을 결정하고 디스플레이하는 것을 도시한 도면
도 64는 사용자 단말 장치에서 제1 화면이 디스플레이된 상태에서 사용자 인터렉션에 기초하여 제2 화면을 디스플레이하는 방법에 대한 흐름도이다.
본 실시예들은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 특정한 실시 형태에 대해 범위를 한정하려는 것이 아니며, 개시된 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 실시예들을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 권리범위를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
실시예에 있어서 ‘모듈’ 혹은 ‘부’는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의‘모듈’ 혹은 복수의‘부’는 특정한 하드웨어로 구현될 필요가 있는 ‘모듈’ 혹은 ‘부’를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서(미도시)로 구현될 수 있다.
이하, 실시예를 첨부도면을 참조하여 상세히 설명하기로 한다. 도 1은 본 발명의 일 실시예에 따른, 사용자 단말 장치(100)의 구성을 간략히 도시한 블록도이다. 도 1에 도시된 바와 같이, 사용자 단말 장치(100)는 디스플레이부(110), 감지부(120) 및 제어부(130)를 포함한다. 이때, 사용자 단말 장치(100)는 TV, PC, 랩탑 PC, 휴대폰, 태블릿 PC, PDA, MP3 플레이어, 키오스크, 전자 액자, 테이블 디스플레이 장치 등과 같이 다양한 유형의 장치로 구현될 수 있다. 휴대폰이나 태블릿 PC, PDA, MP3 플레이어, 랩탑 PC 등과 같이 휴대 가능한 유형의 장치로 구현되는 경우에는 모바일 디바이스로 명명할 수도 있으나, 본 명세서에서는 사용자 단말 장치로 통칭하여 설명한다.
디스플레이부(110)는 다양한 영상 데이터 및 UI를 디스플레이한다. 특히, 디스플레이부(110)는 정사각형 형태의 디스플레이 패널을 포함하며, 정사각형 형태의 디스플레이 패널에 정사각형 형태를 가지는 적어도 하나의 오브젝트를 디스플레이할 수 있다. 또한, 디스플레이부(110)는 감지부(120)를 통해 감지된 사용자 인터렉션에 따라 다양한 UI 및 화면을 제공할 수 있다.
한편, 디스플레이부(110)는 감지부(120)에 포함된 터치 감지부와 결합하여 터치 스크린으로 구현될 수 있다.
감지부(120)는 사용자 인터렉션을 감지한다. 특히, 감지부(120)는 사용자 터치 인터렉션을 감지하는 터치 감지부를 포함할 수 있다. 또한, 감지부(120)는 터치 감지부를 통해 디스플레이부(110)에 포함된 복수의 꼭지점들 중 하나로부터 대각선 방향으로 드래그하는 드래그 인터렉션을 감지할 수 있다.
제어부(130)는 사용자 단말 장치(100)의 전반적인 동작을 제어한다. 특히, 제어부(130)는 감지부(120)를 통해 감지된 다양한 사용자 인터렉션에 따라 정사각형 형태의 디스플레이 패널을 가지는 사용자 단말 장치(100)를 제어할 수 있다.
본 발명의 일 실시예로, 디스플레이부(110)가 제1 화면을 디스플레이하는 동안 제1 화면의 꼭지점들 중 하나로부터 대각선 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(130)는 사용자 인터렉션이 감지된 꼭지점 영역에 제2 화면을 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
구체적으로, 정사각형 형태의 디스플레이 패널을 포함하는 디스플레이부(110)는 정사각형 형태의 제1 화면을 디스플레이할 수 있다. 이때, 감지부(120)를 통해 제1 화면의 4 개의 꼭지점 중 하나로부터 대각선 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(130)는 제1 화면 내에서 사용자 인터렉션이 감지된 꼭지점 영역이 사용자 인터렉션에 의해 접히면서 상기 접힌 영역에 제2 화면을 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
이때. 꼭지점 영역에 디스플레이되는 제2 화면은 제1 화면의 네 개의 꼭지점들 중 사용자 인터렉션이 감지된 꼭지점 영역의 위치에 따라 상이한 정보를 포함할 수 있다. 예를 들어, 제어부(130)는 제1 꼭지점의 위치에 따라 제2 화면에 현재 실행중인 어플리케이션에 대한 정보, 홈 화면으로 이동가능함을 안내하는 정보, 현재 사용자 단말 장치의 상태 정보 및 사용자가 지정한 어플리케이션에 대한 퀵 액세스 정보 중 하나를 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
또한, 꼭지점 영역에 디스플레이되는 제2 화면의 크기는 사용자 인터렉션의 드래그 량에 따라 상이할 수 있다. 구체적으로, 제어부(130)는 사용자 인터렉션의 드래그 길이에 비례하여 제2 화면의 크기를 증가시킬 수 있다.
또한, 제2 화면에 포함된 정보의 양은 제2 화면의 크기에 따라 상이하게 변경될 수 있다. 즉, 제어부(130)는 제2 화면의 크기가 커질수록 제2 화면에 포함된 정보의 양을 늘릴 수 있다.
대각선 방향으로 드래그하는 사용자 인터렉션이 감지되는 동안, 사용자 인터렉션이 반대 측 방향의 꼭지점까지 이어지면, 제어부(130)는 디스플레이부(110)에 디스플레이되는 제1 화면을 제2 화면으로 대체하도록 디스플레이부(110)를 제어할 수 있다. 즉, 제어부(130)는 제1 화면을 제거하고, 전체 화면으로 제2 화면을 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
한편, 제2 화면은 제1 화면에 디스플레이되는 영상 컨텐츠나 어플리케이션의 종류에 따라 상이한 정보를 포함할 수 있다. 예를 들어, 제1 화면이 방송 컨텐츠를 디스플레이하는 경우, 제2 화면은 제1 화면에 디스플레이된 방송 컨텐츠에 대한 관련 정보(예를 들어, 프로그램명, 채널번호, 채널 명 등)를 디스플레이하도록 디스플레이부(110)를 제어할 수 있다. 또한, 제1 화면이 사진 컨텐츠를 디스플레이하는 경우, 제2 화면은 제1 화면에 디스플레이된 사진 컨텐츠에 대한 다양한 태스크를 수행할 수 있는 적어도 하나의 아이콘을 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
또한, 외부로부터 메시지가 수신된 경우, 제어부(130)는 제2 화면에 외부로부터 메시지가 수신됨을 안내하는 아이콘 및 외부로부터 수신된 메시지에 대한 정보 중 적어도 하나를 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
본 발명의 다른 실시예로, 디스플레이부(110)가 복수의 정사각형 셀을 포함하는 그리드 화면에서 복수의 오브젝트를 디스플레이하는 동안 감지부(120)를 통해 복수의 오브젝트 중 제1 오브젝트를 터치하여 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(130)는 사용자 인터렉션의 드래그 거리 및 방향에 따라 제1 오브젝트가 디스플레이되는 셀의 개수를 조절하여 제1 오브젝트의 크기를 조절할 수 있다.
구체적으로, 디스플레이부(110)는 정사각형 형태를 가지는 디스플레이 패널에 복수의 정사각형 셀을 포함하는 그리드 화면을 디스플레이할 수 있다. 이때, 복수의 정사각형 셀에는 적어도 하나의 오브젝트를 디스플레이할 수 있다. 이때, 오브젝트는 적어도 하나의 정사각형 셀을 차지하여 직사각형 또는 정사각형 형태를 이룰 수 있다.
디스플레이부(110)가 그리드 화면을 디스플레이하는 동안 감지부(120)를 통해 그리드 화면에 대해 기설정된 사용자 인터렉션이 감지된 경우, 제어부(130)는 사용자 단말 장치(100)의 모드를 그리드 편집 모드로 전환할 수 있다.
그리고, 그리드 편집 모드 동안 복수의 오브젝트 중 제1 오브젝트를 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(130)는 사용자 인터렉션의 드래그 거리 및 방향에 따라 제1 오브젝트가 디스플레이되는 정사각형 셀을 판단하며, 판단된 정사각형 셀에 상기 제1 오브젝트의 크기를 조절하여 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
구체적으로, 제1 오브젝트를 터치한 후, 제1 오브젝트의 외부 방향으로 드래그하는 제1 사용자 인터렉션이 감지된 경우, 제어부(130)는 제1 오브젝트가 디스플레이되는 정사각형 셀 영역의 개수를 증가시켜 제1 오브젝트의 크기를 증가시킬 수 있다. 이때, 제어부(130)는 제1 오브젝트를 제외한 복수의 오브젝트 중 일부를 다른 정사각형 셀 영역으로 이동시키며, 다른 일부를 화면에서 제거하도록 디스플레이부(110)를 제어할 수 있다.
그러나, 제1 오브젝트를 터치한 후, 제1 오브젝트의 내부 방향으로 드래그하는 제2 사용자 인터렉션이 감지된 경우, 제어부(130)는 제1 오브젝트가 디스플레이되는 정사각형 셀 영역의 개수를 감소시켜 제1 오브젝트의 크기를 감소시킬 수 있다. 이때, 제어부(130)는 제1 오브젝트를 제외한 복수의 오브젝트 중 일부를 다른 정사각형 셀 영역으로 이동시키며, 새로운 오브젝트를 화면에 추가하도록 디스플레이부(110)를 제어할 수 있다.
한편, 제어부(130)는 제1 오브젝트가 차지하는 정사각형 셀의 개수에 따라 제1 오브젝트에 포함된 내용이 상이해질 수 있다. 구체적으로, 제1 오브젝트가 제1 개수(예를 들어, 1개)의 정사각형 셀에 디스플레이되는 경우, 제어부(130)는 제1 오브젝트에 제1 오브젝트에 대응되는 어플리케이션의 아이콘을 디스플레이하도록 디스플레이부(110)를 제어할 수 있다. 또한, 제1 오브젝트가 제2 개수(예를 들어, 4개)의 정사각형 셀에 디스플레이되는 경우, 제어부(130)는 제1 오브젝트에 제1 오브젝트에 대응되는 어플리케이션의 간략 정보를 디스플레이하도록 디스플레이부(110)를 제어할 수 있다. 또한, 제1 오브젝트가 제3 개수(예를 들어, 9개)의 정사각형 셀에 디스플레이되는 경우, 제어부(130)는 제1 오브젝트에 제1 오브젝트에 대응되는 어플리케이션의 상세 정보를 디스플레이하도록 디스플레이부(110)를 제어할 수 있다. 또한, 제1 오브젝트가 제4 개수(예를 들어, 16개)의 정사각형 셀에 디스플레이되는 경우, 제어부(130)는 제1 오브젝트에 제1 오브젝트에 대응되는 어플리케이션의 실행 화면을 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
한편, 상술한 실시예에서는 오브젝트의 크기에 따라 4개의 상이한 형태의 내용을 제공하는 것으로 설명하였으나, 이는 일 실시예에 불과할 뿐, 오브젝트의 크기에 따라 4개를 제외한 복수의 상이한 형태의 내용을 제공할 수 있다.
제1 오브젝트가 정사각형 형태를 유지하다가 사용자 인터렉션에 따라 제1 오브젝트가 직사각형 형태로 변경된 경우, 제어부(130)는 제1 오브젝트가 디스플레이되는 정사각형 셀 들 중 일부를 제1 오브젝트와 관련된 메뉴를 디스플레이하도록 디스플레이부(11)를 제어할 수 있다. 이때, 제어부(130)는 사용자 인터렉션의 방향에 따라 상이한 유형의 제1 오브젝트와 관련된 메뉴를 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
또한, 감지부(120)를 통해 복수의 오브젝트 중 제1 오브젝트에 포함된 꼭지점들 중 하나로부터 대각선 방향으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(130)는 제1 오브젝트가 디스플레이되는 영역에 제1 오브젝트에 대응되는 어플리케이션에 대한 화면을 디스플레이하도록 디스플레이부(110)를 제어할 수 있다.
상술한 바와 같은 본 발명의 다양한 실시예에 의해, 사용자는 정사각형 형태의 디스플레이 패널을 가지는 사용자 단말 장치를 통해 다양한 기능을 수행할 수 있게 된다.
이하에서는 도 2 내지 도 46b를 참조하여 본 발명에 대해 더욱 상세히 설명하기로 한다. 도 2는 본 발명의 일 실시예에 따른, 사용자 단말 장치(200)의 구성을 상세히 도시한 블럭도이다. 도 2에 도시된 바와 같이, 사용자 단말 장치(200)는 영상 수신부(210), 영상 처리부(220), 디스플레이부(230), 통신부(240), 저장부(250), 오디오 처리부(260), 스피커부(270), 감지부(280) 및 제어부(290)를 포함한다.
한편, 도 2는 사용자 단말 장치(200)가 컨텐츠 제공 기능, 디스플레이 기능 등과 같이 다양한 기능을 구비한 장치인 경우를 예로 들어, 각종 구성 요소들을 종합적으로 도시한 것이다. 따라서, 실시 예에 따라서는, 도 2에 도시된 구성 요소 중 일부는 생략 또는 변경될 수도 있고, 다른 구성요소가 더 추가될 수도 있다.
영상 수신부(210)는 다양한 소스를 통해 영상 데이터를 수신한다. 예를 들어, 영상 수신부(210)는 외부의 방송국으로부터 방송 데이터를 수신할 수 있으며, 외부 서버로부터 실시간으로 VOD 데이터를 수신할 수 있으며, 외부 기기로부터 영상 데이터를 수신할 수 있다.
영상 처리부(220)는 영상 수신부(210)에서 수신한 영상 데이터에 대한 처리를 수행하는 구성요소이다. 영상 처리부(220)에서는 영상 데이터에 대한 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 해상도 변환 등과 같은 다양한 이미지 처리를 수행할 수 있다.
디스플레이부(230)는 영상 수신부(210)로부터 수신한 영상 데이터를 영상 처리부(220)에서 처리한 비디오 프레임 및 그래픽 처리부(293)에서 생성된 다양한 화면 중 적어도 하나를 디스플레이한다.
특히, 디스플레이부(230)는 영상 데이터를 출력하는 디스플레이 패널과 디스플레이 패널을 구동하는 구동부를 포함할 수 있다. 이때, 디스플레이 패널은 도 3a에 도시된 바와 같이, 정사각형 형태를 가질 수 있다. 그리고, 디스플레이 패널은 도 3b에 도시된 바와 같이, 정사각형 형태의 디스플레이 패널 가운데에 힌지부(310)를 포함하며, 사용자 단말 장치(200)는 힌지부(310)를 기준으로 접힐 수 있다.
통신부(240)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 기기와 통신을 수행하는 구성이다. 통신부(240)는 와이파이칩(241), 블루투스 칩(242), 무선 통신 칩(243), NFC 칩(244)을 포함한다. 제어부(290)는 통신부(240)를 이용하여 각종 외부 기기와 통신을 수행한다.
특히, 와이파이 칩(241), 블루투스 칩(242)은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 와이파이 칩(241)이나 블루투스 칩(242)을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신 칩(243)은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다. NFC 칩(244)은135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는NFC(Near Field Communication) 방식으로 동작하는 칩을 의미한다.
저장부(250)는 사용자 단말 장치(200)의 동작에 필요한 각종 프로그램 및 데이터를 저장할 수 있다. 구체적으로는, 저장부(0)에는 메인 영역 및
서브 영역에 표시될 각종 화면을 구성하기 위한 프로그램 및 데이터 등이 저장될 수 있다. 이하에서는 도 4를 참조하여 사용자 단말 장치(100)에 저장된 소프트웨어의 구조를 설명하기 위한 도면이다. 도 4에 따르면, 저장부(250)에는 OS(410), 커널(420), 미들웨어(430), 어플리케이션(440) 등을 포함하는 소프트웨어가 저장될 수 있다.
운영체제(Operating System: OS, 410)는 하드웨어의 전반적인 동작을 제어하고 관리하는 기능을 수행한다. 즉, OS(410)는 하드웨어 관리와 메모리, 보안 등의 기본적인 기능을 담당하는 계층이다.
커널(420)은 디스플레이부(230)에서 감지되는 터치 신호 등을 비롯한 각종 신호들을 미들웨어(430)로 전달하는 통로 역할을 한다.
미들웨어(430)는 사용자 단말 장치(200)의 동작을 제어하는 각종 소프트웨어 모듈을 포함한다. 도 4에 따르면, 미들웨어(430)는 X11 모듈(430-1), APP 매니저(430-2), 연결 매니저(430-3), 보안 모듈(430-4), 시스템 매니저(430-5), 멀티미디어 프레임워크(430-6), UI 프레임워크(430-7), 윈도우 매니저(430-8), 필기 인식 모듈(430-9)을 포함한다.
X11 모듈(430-1)은 사용자 단말 장치(200)에 구비된 각종 하드웨어들로부터 각종 이벤트 신호를 수신하는 모듈이다. 여기서 이벤트란, 사용자 제스쳐가 감지되는 이벤트, 시스템 알람(alarm)이 발생하는 이벤트, 특정 프로그램이 실행 또는 종료되는 이벤트 등과 같이 다양하게 설정될 수 있다.
APP 매니저(430-2)는 저장부(250)에 설치(install)된 각종 어플리케이션(440)의 실행 상태를 관리하는 모듈이다. APP 매니저(430-2)는 X11 모듈(430-1)로부터 어플리케이션 실행 이벤트가 감지되면, 해당 이벤트에 대응되는 어플리케이션을 호출하여 실행시킨다.
연결 매니저(430-3)는 유선 또는 무선 네트워크 연결을 지원하기 위한 모듈이다. 연결 매니저(430-3)는 DNET 모듈, UPnP 모듈 등과 같은 다양한 세부 모듈들을 포함할 수 있다.
보안 모듈(430-4)은 하드웨어에 대한 인증(Certification), 요청허용(Permission), 보안 저장(Secure Storage) 등을 지원하는 모듈이다.
시스템 매니저(430-5)는 사용자 단말 장치(200) 내의 각 구성요소들의 상태를 모니터링하고, 그 모니터링 결과를 타 모듈들에게 제공한다. 가령, 배터리 잔량이 부족하거나, 에러가 발생하는 경우, 통신 연결 상태가 끊어지는 경우 등이 발생하면 시스템 매니저(430-5)는 그 모니터링 결과를 메인 UI 프레임워크(430-7)나 서브UI 프레임워크(430-9)로 제공하여 알림 메시지나 알림 음을 출력할 수 있다.
멀티미디어 프레임워크(430-6)는 사용자 단말 장치(200)에 저장되어 있거나, 외부 소스로부터 제공되는 멀티미디어 컨텐츠를 재생하기 위한 모듈이다. 멀티미디어 프레임워크(430-6)는 플레이어 모듈, 캠코더 모듈, 사운드 처리모듈 등을 포함할 수 있다. 이에 따라, 각종 멀티미디어 컨텐츠를 재생하여 화면 및 음향을 생성하여 재생하는 동작을 수행할 수 있다.
메인 UI 프레임워크(430-7)는 벤디드 터치 스크린(100)의 메인 영역에 표시할 각종 UI를 제공하기 위한 모듈이고, 서브 UI 프레임워크(430-9)는 서브 영역에 표시할 각종 UI를 제공하기 위한 모듈이다. 메인 UI 프레임워크(430-7) 및 서브 UI 프레임워크(430-9)는 각종 오브젝트를 구성하는 이미지 합성기(Image Compositor module), 오브젝트가 표시될 좌표를 산출하는 좌표 합성기, 구성된 오브젝트를 산출된 좌표에 렌더링하는 렌더링 모듈, 2D 또는 3D 형태의 UI를 구성하기 위한 툴(tool)을 제공하는 2D/3D UI 툴킷 등을 포함할 수 있다.
윈도우 매니저(430-8)는 사용자의 신체나 펜을 이용한 터치 이벤트나 기타 입력 이벤트를 감지할 수 있다. 윈도우 매니저(430-8)는 이러한 이벤트가 감지되면 메인 UI 프레임워크(430-7) 또는 서브 UI 프레임워크(430-9)로 이벤트 신호를 전달하여, 이벤트에 대응되는 동작을 수행하도록 한다.
그 밖에도, 사용자가 화면을 터치 및 드래그하는 경우, 드래그 궤적에 따라 라인을 드로잉하기 위한 필기 모듈이나, 움직임 감지부(282)에서 감지된 센서 값에 기초하여 피치각, 롤각, 요우각 등을 산출하기 위한 각도 산출 모듈 등과 같은 다양한 프로그램 모듈이 저장될 수도 있다.
어플리케이션 모듈(440)은 다양한 기능을 지원하기 위한 어플리케이션들(440-1 ~ 440-n)을 포함한다. 예를 들어, 네비게이션 프로그램 모듈, 게임 모듈, 전자 책 모듈, 달력 모듈, 알람 관리 모듈 등과 같은 다양한 서비스를 제공하기 위한 프로그램 모듈을 포함할 수 있다. 이러한 어플리케이션들은 디폴트로 설치되어 있을 수도 있고, 사용자가 사용 과정에서 임의로 설치하여 사용할 수도 있다. 메인 CPU(294)는 오브젝트가 선택되면, 어플리케이션 모듈(440)을 이용하여 선택된 오브젝트에 대응되는 어플리케이션을 실행시킬 수 있다.
도 4에 표시된 소프트웨어 구조는 일 예에 불과하므로, 반드시 이에 한정되어야 하는 것은 아니다. 따라서, 필요에 따라 일부가 생략 또는 변형되거나, 추가될 수도 있음은 물론이다. 가령, 저장부(250)에는 각종 센서들에서 센싱된 신호들을 분석하기 위한 센싱 모듈이나, 메신저 프로그램, SMS(Short Message Service) & MMS(Multimedia Message Service) 프로그램, 이메일 프로그램 등과 같은 메시징 모듈, 전화 정보 수집기(Call Info Aggregator) 프로그램 모듈, VoIP 모듈, 웹 브라우저 모듈 등과 같이 다양한 프로그램들이 추가로 마련될 수도 있다.
다시, 도 2에 대해 설명하면, 오디오 처리부(260)는 영상 컨텐츠의 오디오 데이터에 대한 처리를 수행하는 구성요소이다. 오디오 처리부(260)에서는 오디오 데이터에 대한 디코딩이나 증폭, 노이즈 필터링 등과 같은 다양한 처리가 수행될 수 있다. 오디오 처리부(260)에서 처리된 오디오 데이터는 오디오 출력부(270)로 출력될 수 있다.
오디오 출력부(270)는 오디오 처리부(260)에 의해 디코딩이나 증폭, 노이즈 필터링과 같은 다양한 처리 작업이 수행된 각종 오디오 데이터뿐만 아니라 각종 알림 음이나 음성 메시지를 출력하는 구성이다. 특히, 오디오 출력부(270)는 스피커로 구현될 수 있으나, 이는 일 실시예에 불과할 뿐, 오디오 데이터를 출력할 수 있는 출력 단자로 구현될 수 있다.
감지부(280)는 다양한 사용자 인터렉션을 감지한다. 특히, 감지부(280)는 도 2에 도시된 바와 같이, 터치 감지부(281), 움직임 감지부(282) 및 벤딩 감지부(283)를 포함할 수 있다.
구체적으로, 터치 감지부(281)는 디스플레이 패널의 뒷면에 부착된 터치 패널을 이용하여 사용자의 터치 인터렉션을 감지할 수 있다. 움직임 감지부(282)는 가속도 센서, 지자기 센서, 자이로 센서 중 적어도 하나를 이용하여 사용자 단말 장치(100)의 움직임(예를 들어, 회전 움직임 등)을 감지할 수 있다. 벤딩 감지부(283)는 벤딩 센서(예를 들어, 조도 센서 등)를 이용하여 힌지부(310)를 기준으로 사용자 단말 장치이 접혔는지 여부를 감지할 수 있다.
제어부(290)는 저장부(250)에 저장된 각종 프로그램을 이용하여 사용자 단말 장치(200)의 전반적인 동작을 제어한다.
제어부(290)는 도 2에 도시된 바와 같이, RAM(291), ROM(292), 그래픽 처리부(293), 메인 CPU(294), 제1 내지 n 인터페이스(295-1 ~ 295-n), 버스(296)를 포함한다. 이때, RAM(291), ROM(292), 그래픽 처리부(293), 메인 CPU(294), 제1 내지 n 인터페이스(295-1 ~ 295-n) 등은 버스(296)를 통해 서로 연결될 수 있다.
ROM(292)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴 온 명령이 입력되어 전원이 공급되면, 메인 CPU(294)는 ROM(292)에 저장된 명령어에 따라 저장부(250)에 저장된 O/S를 RAM(291)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(294)는 저장부(250)에 저장된 각종 어플리케이션 프로그램을 RAM(291)에 복사하고, RAM(291)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
그래픽 처리부(293)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이템, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부는 감지부(280)로부터 수신된 제어 명령을 이용하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부는 연산부에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부에서 생성된 화면은 디스플레이부(230)의 디스플레이 영역 내에 표시된다.
메인 CPU(294)는 저장부(250)에 액세스하여, 저장부(250)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 메인 CPU(294)는 저장부(250)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.
제1 내지 n 인터페이스(295-1 내지 295-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
특히, 제어부(290)는 정사각형 형태의 디스플레이 패널을 가지는 사용자 단말 장치(200)에 대한 다양한 기능을 제공할 수 있다.
<대각선 인터렉션 >
본 발명의 일 실시예에 따르면, 디스플레이부(230)가 제1 화면을 디스플레이하는 동안 감지부(280)를 통해 제1 화면의 꼭지점들 중 하나로부터 대각선 방향으로 드래그하는 사용자 인터렉션(이하에서는 "대각선 인터렉션"라고 함)이 감지되면, 제어부(290)는 대각선 인터렉션이 감지된 꼭지점 영역에 제2 화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이하에서는 도 5a 내지 18c를 참조하여 대각선 인터렉션에 따라 사용자 단말 장치(200)에서 제공되는 다양한 기능에 대해 설명하기로 한다.
도 5a 및 도 5b는 가로 방향의 사용자 인터렉션 및 대각선 인터렉션이 감지된 경우, 사용자 단말 장치(200)가 제공하는 기능을 설명하기 위한 도면이다.
도 5a에 도시된 바와 같이, E-book 컨텐츠의 제1 페이지(510)가 화면에 디스플레이되는 동안 화면에 포함된 복수의 모서리 중 하나로부터 가로방향(특히, 왼쪽 방향)으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 E-book 컨텐츠의 페이지를 다음 페이지로 전환하여 E-book 컨텐츠의 제2 페이지(520)로 전환하도록 디스플레이부(230)를 제어할 수 있다.
도 5b에 도시된 바와 같이, E-book 컨텐츠의 제3 페이지(530)가 화면에 디스플레이되는 동안 화면에 포함된 복수의 꼭지점 중 하나에 대각선 인터렉션이 감지된 경우, 제어부(290)는 현재 페이지 화면을 유지하고, 대각선 인터렉션이 감지된 꼭지점 영역이 접히는 이미지 효과를 제공하며, 접힌 영역에 북마크 아이콘(545)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
즉, 제어부(290)는 가로 방향의 사용자 인터렉션 및 대각선 인터렉션을 통해 서로 상이한 기능을 제공할 수 있다.
또한, 제어부(290)는 제1 화면의 네 개의 꼭지점들 중 대각선 인터렉션이 감지된 꼭지점 영역의 위치에 따라 제2 화면에 사용자 단말 장치(200)가 제공할 수 있는 기능에 대한 정보를 포함할 수 있다.
구체적으로, 도 6a에 도시된 바와 같이, 제어부(290)는 영상 컨텐츠(600)를 디스플레이하도록 디스플레이부(230)를 디스플레이할 수 있다.
영상 컨텐츠(600)가 디스플레이되는 동안 우상단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 6b에 도시된 바와 같이, 대각선 인터렉션이 감지된 우상단의 꼭지점에 가장 최근에 실행한 어플리케이션에 대한 정보(예를 들어, 아이콘, 최근 실행 화면 등)(615)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 가장 최근에 실행한 어플리케이션에 대한 정보(615)가 영상 컨텐츠(600)와 함께 디스플레이되는 동안 우상단의 꼭지점에 연속적으로 대각선 인터렉션이 감지된 경우, 제어부(290)는 대각선 인터렉션이 감지된 우상단의 꼭지점에 두 번째로 최근에 실행한 어플리케이션에 대한 정보를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
영상 컨텐츠(600)가 디스플레이되는 동안 좌상단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 6c에 도시된 바와 같이, 대각선 인터렉션이 감지된 좌상단의 꼭지점에 홈 화면으로 이동 가능함을 안내하는 정보(예를 들어, 아이콘)(620)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 대각선 인터렉션이 우하단의 꼭지점까지 이어지는 경우, 제어부(290)는 홈 화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
영상 컨텐츠(600)가 디스플레이되는 동안 좌하단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 6d에 도시된 바와 같이, 대각선 인터렉션이 감지된 좌하단의 꼭지점에 현재 사용자 단말 장치(100)의 상태 정보(예를 들어, 네트워크 정보, 배터리 정보 등)(630)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
영상 컨텐츠(600)가 디스플레이되는 동안 우하단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 6e에 도시된 바와 같이, 대각선 인터렉션이 감지된 우하단의 꼭지점에 사용자가 지정한 어플리케이션에 대한 퀵 액세스 정보(예를 들어, 카메라 어플리케이션에 대응되는 아이콘)(640)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 잠금 화면에 대각선 인터렉션이 감지된 경우, 제어부(290)는 잠금 화면에서 대각선 인터렉션이 감지된 오브젝트에 대한 정보를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
구체적으로, 도 7a에 도시된 바와 같이, 잠금 화면에 4개의 오브젝트가 디스플레이되는 동안 부재중 통화를 안내하는 제1 오브젝트(710)에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 7b에 도시된 바와 같이, 제1 오브젝트(710)가 디스플레이되는 영역에 부재중 통화에 대한 정보(예를 들어, 부재중 통화의 발신자 정보 등)(720)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그러나, 도 7a 및 도 7b에서 설명한 바와 같이, 제어부(290)가 잠금 화면에서 부재중 통화에 대한 정보를 제공하는 것은 일 실시예에 불과할 뿐, 잠금 화면에서 대각선 인터렉션을 통해 다양한 정보 및 기능을 제공할 수 있다. 예를 들어, 제어부(290)는 잠금 화면에서 대각선 인터렉션을 통해 수신 메시지 정보를 제공할 수 있으며, 카메라 어플리케이션에 대한 퀵 액세스 기능을 제공할 수 있다.
또한, 제어부(290)는 제1 화면의 네 개의 꼭지점들 중 대각선 인터렉션이 감지된 꼭지점 영역의 위치에 따라 제2 화면에 사용자 단말 장치(200)가 제공할 수 있는 기능 및 어플리케이션 기능에 대한 정보를 포함할 수 있다.
구체적으로, 도 8a에 도시된 바와 같이, 제어부(290)는 사진 컨텐츠(800)를 디스플레이하도록 디스플레이부(230)를 디스플레이할 수 있다.
사진 컨텐츠(800)가 디스플레이되는 동안 우상단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 8b에 도시된 바와 같이, 대각선 인터렉션이 감지된 우상단의 꼭지점이 대각선 인터렉션에 따라 접히며, 접힌 영역에 사진 컨텐츠에 대한 관련 정보(예를 들어, 촬영 날짜, 촬영 장소 등)(810)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 대각선 인터렉션이 좌하단의 꼭지점까지 이어지는 경우, 제어부(290)는 도 8c에 도시된 바와 같이, 화면에 사진 컨텐츠에 대한 관련 정보(예를 들어, 촬영 날짜, 촬영 장소, 촬영 장소의 지도 정보, 연관 사진 정보 등)(820)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
도 9a에 도시된 바와 같이, 사진 컨텐츠(800)가 디스플레이되는 동안 좌상단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 9b에 도시된 바와 같이, 대각선 인터렉션이 감지된 좌상단의 꼭지점 영역에 사진 컨텐츠에 대한 각종 태스크를 수행할 수 있는 메뉴(예를 들어, 삭제, 편집, 공유 등)(910)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
도 10a에 도시된 바와 같이, 사진 컨텐츠(800)가 디스플레이되는 동안 우하단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 10b에 도시된 바와 같이, 사진 컨텐츠(1000)를 축소하여 화면의 우측 영역에 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 제어부(290)는 화면의 좌측 영역에 사용자 단말 장치(100)의 다양한 기능을 수행할 수 있는 복수의 아이콘(1011 내지 1018)을 포함하는 메뉴창(1010)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 메뉴창(1010)에 포함된 복수의 아이콘(1011 내지 1018) 중 제5 아이콘(1015)이 선택된 경우, 제어부(290)는 제5 아이콘(1015)에 대응되는 인터넷 브라우징 화면(1020)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
상술한 바와 같이, 사용자는 사진 컨텐츠가 디스플레이되는 동안 대각선 인터렉션이 감지되는 꼭지점의 위치에 따라 다양한 기능을 제공받을 수 있게 된다.
또한, 제어부(290)는 대각선 인터렉션의 드래그 량에 따라 제2 화면의 크기 를 변경할 수 있으며, 제2 화면의 크기에 따라 제2 화면에 포함된 정보의 양을 변경할 수 있다.
구체적으로, 영상 컨텐츠(1100)를 수신하는 동안 외부로부터 메시지가 수신된 경우, 우상단 꼭지점에 대각선 인터렉션이 감지되면, 제어부(290)는 수신된 메시지에 대한 정보를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
특히, 대각선 인터렉션의 드래그 량이 제1 값 미만인 경우, 제어부(290)는 도 11a에 도시된 바와 같이, 메시지가 수신됨을 안내하는 아이콘을 포함하는 제2 화면(1110)에 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 대각선 인터렉션의 드래그 량이 제1 값 이상이고, 제2 값 미만인 경우, 제어부(290)는 도 11b에 도시된 바와 같이, 메시지의 발신자에 대한 정보(예를 들어, 발신자 이름, 발신자 사진 등)을 포함하는 제2 화면(1120)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 대각선 인터렉션의 드래그 량이 제2 값 이상이고, 제3 값 미만인 경우, 제어부(290)는 도 11c에 도시된 바와 같이, 메시지의 발신자에 대한 정보 및 메시지에 포함된 컨텐츠의 적어도 일부에 대한 정보를 포함하는 제2 화면(1130)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 드래그 인터렉션의 드래그 량이 제3값 이상인 경우, 제어부(290)는 도 11d에 도시된 바와 같이, 수신된 메시지를 응답하기 위한 채팅 화면(1140)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 동일한 꼭지점에 복수 회의 대각선 인터렉션이 감지된 경우, 제어부(290)는 대각선 인터렉션에 따라 동일한 꼭지점에 대응되는 정보를 연속적으로 제공할 수 있다.
구체적으로, 영상 컨텐츠가 디스플레이되는 동안 우하단의 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 12a에 도시된 바와 같이, 대각선 인터렉션이 감지된 우하단의 꼭지점이 한 번 접히도록 디스플레이부(230)를 제어하며, 우하단의 꼭지점 영역에 사용자가 지정한 어플리케이션에 대한 퀵 액세스 정보(예를 들어, 카메라 어플리케이션에 대응되는 아이콘)(1210)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 영상 컨텐츠와 퀵 액세스 정보(1210)가 함께 디스플레이되는 동안 우하단의 꼭지점에 재차 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 12b에 도시된 바와 같이, 대각선 인터렉션이 감지된 우하단의 꼭지점이 두 번 접히도록 디스플레이부(230)를 제어하며, 우하단의 꼭지점 영역에 사용자가 지정한 다른 어플리케이션에 대한 퀵 액세스 정보(예를 들어, 인터넷 어플리케이션에 대응되는 아이콘)(1220)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 제어부(290)는 대각선 인터렉션을 통해 체크 기능을 수행할 수 있다. 구체적으로, 기존에는 복수의 아이템 중 일부를 선택할 경우, 복수의 아이템 중 일부를 터치하면, 제어부(290)는 도 13a에 도시된 바와 같이, 터치된 아이템의 일측(예를 들어, 우상단)에 체크 마크를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
본 발명의 일 실시예에 따르면, 복수의 아이템 중 일부를 선택할 경우, 복수의 아이템 중 일부에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 13b에 도시된 바와 같이, 대각선 인터렉션이 감지된 일부의 아이템이 접혀지는 이미지 효과를 제공하도록 디스플레이부(230)를 제어할 수 있다.
또한, 하나의 화면에 포함된 복수의 디스플레이 아이템 중 적어도 하나에 대각선 인터렉션이 감지된 경우, 제어부(290)는 대각선 인터렉션이 감지된 적어도 하나의 디스플레이 아이템을 적어도 하나의 디스플레이 아이템과 관련된 다른 화면으로 전환하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
구체적으로, 제어부(290)는 도 14a에 도시된 바와 같이, 사진 어플리케이션에 대한 아이콘(1410) 및 SNS 어플리케이션에 대한 아이콘(1420)을 포함하는 홈 화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
이때, 사진 어플리케이션에 대한 아이콘(1410) 및 SNS 어플리케이션에 대한 아이콘(1420)에 대각선 인터렉션이 감지된 경우, 제어부(290)는 사진 어플리케이션에 대한 아이콘(1410)을 사진 어플리케이션에 대한 정보(예를 들어, 새로운 사진 컨텐츠 정보 등)를 포함하는 썸네일 이미지(1415)로 전환하며, SNS 어플리케이션에 대한 아이콘(1420)을 SNS 어플리케이션에 대한 정보(예를 들어, 새로운 멘션 정보 등)를 포함하는 썸네일 이미지(1425)로 전환하도록 디스플레이부(230)를 제어할 수 있다.
이때, 전환된 썸네일 이미지(1415,1425)는 디스플레이 아이템의 크기에 따라 상이한 정보량을 포함할 수 있다. 예를 들어, 제1 기설정된 크기의 사진 어플리케이션에 대한 아이콘이 썸네일 이미지로 전환하는 경우, 제어부(290)는 도 15a의 왼쪽에 도시된 바와 같이, 최신에 촬영된 사진 하나만을 디스플레이하는 제1 모드의 썸네일 이미지(1510)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 또한, 제1 기설정된 크기의 SNS 어플리케이션에 대한 아이콘이 썸네일 이미지로 전환하는 경우, 제어부(290)는 도 15a의 오른쪽에 도시된 바와 같이, 최신에 업데이트된 2 개의 멘션 정보를 포함하는 제1 모드의 썸네일 이미지(1520)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그러나, 제2 기설정된 크기의 사진 어플리케이션에 대한 아이콘이 썸네일 이미지로 전환하는 경우, 제어부(290)는 도 15b의 왼쪽에 도시된 바와 같이, 최신에 촬영된 네 개의 사진을 디스플레이하는 제2 모드의 썸네일 이미지(1530)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 또한, 제2 기설정된 크기의 SNS 어플리케이션에 대한 아이콘이 썸네일 이미지로 전환하는 경우, 제어부(290)는 도 15b의 오른쪽에 도시된 바와 같이, 최신에 업데이트된 하나의 멘션 정보 및 세 개의 업데이트 정보를 포함하는 제2 모드의 썸네일 이미지(1540)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
한편, 제1 모드의 썸네일 이미지(1510,1520)에 포함된 복수의 꼭지점 중 하나를 터치한 후 썸네일 이미지(1510,1520)의 외부 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 모드의 썸네일 이미지(1510,1520)를 제2 모드의 썸네일 이미지(1530,1540)로 전환할 수 있다. 또한, 제2 모드의 썸네일 이미지(1530,1540)에 포함된 복수의 꼭지점 중 하나를 터치한 후 썸네일 이미지(1530,1540)의 외부 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제2 모드의 썸네일 이미지(1530,1540)를 제1 모드의 썸네일 이미지(1510,1520)로 전환할 수 있다.
또한, 디스플레이 아이템에 대각선 인터렉션이 감지된 경우, 제어부(290)는 대각선 인터렉션이 감지된 디스플레이 아이템이 접히는 폴딩 이미지 효과를 제공할 수 있으며, 폴딩 이미지 효과를 제공할 때, 사실적인 그래픽 표현을 위해 그림자 이미지 효과 역시 제공할 수 있다.
구체적으로, 제어부(290)는 정사각형 형태를 가지는 네 개의 디스플레이 아이템(1610 내지 1640)을 포함하는 화면(1600)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 네 개의 디스플레이 아이템(1610 내지 1640) 중 적어도 하나에 대각선 인터렉션이 감지된 경우, 제어부(290)는 대각선 인터렉션이 감지된 디스플레이 아이템이 접히는 폴딩 이미지 효과를 제공할 수 있으며, 특정 광원에 대한 그림자 이미지 효과 역시 제공할 수 있다. 본 발명의 일 실시예에서는 특정 광원이 이미지의 상단에 위치하는 것으로 가정한다.
구체적으로, 네 개의 디스플레이 아이템(1610 내지 1640) 중 제2 디스플레이 아이템(1620)에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 16a에 도시된 바와 같이, 제2 디스플레이 아이템(1620)을 접는 폴딩 이미지 효과를 제공하며, 접힌 제2 디스플레이 아이템(1620)의 밑변에 그림자 효과를 제공할 수 있다. 또한, 네 개의 디스플레이 아이템(1610 내지 1640) 중 제1 및 제2 디스플레이 아이템(1610, 1620)에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 16b에 도시된 바와 같이, 제1 및 제2 디스플레이 아이템(1610, 1620)을 접는 폴딩 이미지 효과를 제공하며, 접힌 제1 및 2 디스플레이 아이템(1610, 1620)의 밑변들에 그림자 효과를 제공할 수 있다. 또한, 네 개의 디스플레이 아이템(1610 내지 1640) 중 제1 및 제4 디스플레이 아이템(1610,1640)에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 16c에 도시된 바와 같이, 제1 및 제4 디스플레이 아이템(1610, 1640)을 접는 폴딩 이미지 효과를 제공하며, 접힌 제1 디스플레이 아이템(1610)의 밑변과 제4 디스플레이 아이템(1640)의 대각선에 그림자 효과를 제공할 수 있다.
또한, 하나의 디스플레이 아이템에 복수 회의 대각선 인터렉션이 감지된 경우, 제어부(290)는 대각선 인터렉션이 감지된 디스플레이 아이템을 복수 회 접은 이미지 효과를 제공하도록 디스플레이부(230)를 제어할 수 있다. 구체적으로, 하나의 디스플레이 아이템(1710)에 n 회의 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 17에 도시된 바와 같이, 디스플레이 아이템(1710)이 n 번 접힌 이미지 효과를 제공하도록 디스플레이부(230)를 제어할 수 있다.
또한, 제1 화면의 꼭지점들 중 하나로부터 대각선 인터렉션이 감지된 경우, 제어부(290)는 대각선 인터렉션이 감지된 꼭지점 영역에 복수의 아이템을 메뉴를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 드래그 인터렉션의 방향이 변경되어 복수의 아이템 중 하나로 향하는 드래그 인터렉션이 감지된 경우, 제어부(290)는 드래그 인터렉션이 감지된 아이템에 대응되는 기능을 실행할 수 있다.
구체적으로, 도 18a에 도시된 바와 같이, 좌상단 꼭지점에 대각선 인터렉션이 감지된 경우, 제어부(290)는 도 18b에 도시된 바와 같이, 좌상단 꼭지점 영역에 연락처 아이템(1811), 녹음 아이템(1813), 전화 아이템(1815)을 포함하는 메뉴(1810)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 메뉴에 포함된 아이템들은 대각선 인터렉션의 드래그 길이에 따라 개수가 상이해 질 수 있다.
메뉴(1810)가 디스플레이되는 동안 사용자가 전화 아이템(1815) 방향인 우측 상단으로 드래그 방향을 변경하는 경우, 제어부(290)는 전화 아이템(1815)에 대응되는 전화 어플리케이션을 실행할 수 있다.
상술한 바와 같이, 대각선 인터렉션 및 방향이 전환된 드래그 인터렉션을 통해 메뉴의 디스플레이 및 기능 실행을 동시에 수행할 수 있게 된다.
<그리드 화면>
본 발명의 다른 실시예에 따르면, 디스플레이부(230)는 복수의 정사각형 셀을 포함하는 그리드 화면을 디스플레이할 수 있다. 그리고, 디스플레이부(230)는 복수의 정사각형 셀에 복수의 오브젝트를 디스플레이할 수 있다. 이때, 복수의 오브젝트 각각은 복수의 정사각형 셀 중 적어도 하나에 디스플레이될 수 있다. 그리고, 복수의 오브젝트 중 제1 오브젝트를 터치하여 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 사용자 인터렉션의 드래그 거리 및 방향에 따라 제1 오브젝트가 디스플레이되는 셀의 개수를 조절하여 제1 오브젝트의 크기를 조절할 수 있다.
구체적으로, 도 19a에 도시된 바와 같이, 디스플레이부(230)는 그리드 화면에 포함된 복수의 정사각형 셀 각각에 16개의 오브젝트를 디스플레이할 수 있다. 그리고, 제1 오브젝트에 기설정된 사용자 인터렉션(예를 들어, 제1 오브젝트를 기설정된 시간 누르는 인터렉션)이 감지된 경우, 제어부(290)는 사용자 단말 장치(200) 장치의 모드를 그리드 편집 모드로 전환할 수 있다. 그리드 편집 모드로 전환된 경우, 정사각형 셀에 디스플레이된 16개의 오브젝트의 크기가 도 19b에 도시된 바와 같이, 축소될 수 있다.
그리고, 제1 오브젝트, 제2 오브젝트, 제5 오브젝트 및 제6 오브젝트 사이의 교차점을 터치한 후, 도 19b에 도시된 바와 같이, 4시 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 사용자 인터렉션에 따라 도 19c에 도시된 바와 같이, 제1 오브젝트가 디스플레이되는 정사각형 셀이 제1 내지 제8 정사각형 셀임을 판단하고, 판단된 제1 내지 제8 셀에 제1 오브젝트가 디스플레이되도록 제1 오브젝트의 크기를 확대하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제 10 내지 제16 오브젝트는 화면에서 제거되면, 제2 내지 제9 오브젝트는 도 19c에 도시된 바와 같이, 디스플레이되는 정사각형 셀의 위치를 변경할 수 있다.
특히, 제1 오브젝트를 터치한 후, 제1 오브젝트의 외부 방향으로 드래그하는 제1 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트가 디스플레이되는 정사각형 셀 영역의 개수를 증가시켜 제1 오브젝트의 크기를 증가시키며, 제1 오브젝트를 제외한 복수의 오브젝트 중 일부를 다른 정사각형 셀 영역으로 이동시키며, 다른 일부를 화면에서 제거할 수 있다. 또한, 제1 오브젝트를 터치한 후, 제1 오브젝트의 내부 방향으로 드래그하는 제2 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트가 디스플레이되는 정사각형 셀 영역의 개수를 감소시켜 제1 오브젝트의 크기를 감소시키고, 제1 오브젝트를 제외한 복수의 오브젝트 중 일부를 다른 정사각형 셀 영역으로 이동시키며, 새로운 오브젝트를 화면에 추가할 수 있다.
구체적으로, 도 20a에 도시된 바와 같이, 그리드 화면(2000)에 포함된 16 개의 정사각형 셀 각각에 16개의 오브젝트가 디스플레이되는 동안 제6 오브젝트가 터치된 후 제6 오브젝트의 외부 방향인 오른쪽 상단 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트, 제2 오브젝트 및 제5 오브젝트를 화면에서 제거하고, 제6 오브젝트를 4개의 정사각형 셀에 위치하도록 제6 오브젝트의 크기를 증가시킬 수 있다.
즉, 크기가 증가되는 오브젝트와 선분 또는 꼭지점이 닿은 오브젝트의 경우, 사용자 인터렉션에 따라 맞닿은 선분 또는 꼭지점 반대 방향으로 이동될 수 있다. 그리고, 이동된 위치에 정사각형 셀이 존재하지 않는 오브젝트는 화면에서 제거될 수 있다. 그리고, 추후 오브젝트가 생성될 경우, 화면에서 제거된 오브젝트는 사용자 인터렉션에 따라 다시 제자리에 위치할 수 있다. 예를 들어, 도 20a의 네번째 화면과 같이, 제6 오브젝트가 4개의 정사각형 셀에 위치하는 동안 내부 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도20a의 첫 번째 화면과 같이, 화면에서 제거된 제1 오브젝트, 제2 오브젝트 및 제5 오브젝트를 다시 제자리로 복귀시킬 수 있다.
또한, 20b의 첫 번째 화면에 도시된 바와 같이, 제6 오브젝트의 제1 지점(2010) 터치된 후 외부 방향인 우하단 방향으로 제2 지점(2020)까지 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제6 오브젝트의 선분 또는 꼭지점이 맞닿은 제3 오브젝트, 제7 오브젝트, 제9 오브젝트, 제10 오브젝트 및 제11 오브젝트를 도 20b의 세 번째 화면에 도시된 바와 같이, 드래그 방향에 대응되도록 다른 위치로 이동시키며, 기존에 디스플레이되었던 제4 오브젝트, 제8 오브젝트, 제13 오브젝트, 제14 오브젝트, 제16 오브젝트를 화면에 제거하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 디스플레이부(230)에 디스플레이된 오브젝트가 어플리케이션의 위젯인 경우, 확대된 오브젝트의 한 변의 길이가 디스플레이부(230)의 한 변의 길이와 동일하면, 제어부(290)는 어플리케이션의 위젯을 어플리케이션의 실행화면으로 변환할 수 있다.
구체적으로, 도 20c의 첫번째 화면에 도시된 바와 같이, 위젯 형태의 제1 오브젝트를 터치한 후 제8 오브젝트가 디스플레이된 영역까지 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트의 크기를 증가시키며, 위젯 형태의 제1 오브젝트를 어플리케이션 화면으로 변환할 수 있다.
그리고, 제2 내지 제9 오브젝트가 디스플레이된 영역을 스크롤하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트를 고정하고, 제2 오브젝트 내지 제9 오브젝트 중 제2 오브젝트 내지 제5 오브젝트를 화면에서 제거하고, 제6 내지 제9 오브젝트의 위치를 위로 이동시키며, 제10 오브젝트 내지 제13 오브젝트를 새롭게 추가하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 도 20c의 세 번째 도면에 도시된 바와 같이, 제1 오브젝트의 제3 지점(2030)을 터치한 후 제4 지점(2040)으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 20c의 네 번째 도면에 도시된 바와 같이, 제1 오브젝트의 크기를 축소시키면서 제9 오브젝트 및 제13 오브젝트의 위치를 위쪽 방향으로 이동시키고, 새로운 오브젝트인 제14 오브젝트 및 제15 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 도 20c의 네 번째 도면에 도시된 바와 같이, 제1 오브젝트의 제5 지점(2050)을 터치한 후 제6 지점(2060)으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 20c의 다섯 번째 도면에 도시된 바와 같이, 제1 오브젝트의 크기를 축소시키면서 제9 오브젝트를 화면에서 제거하고, 제6 오브젝트, 제7 오브젝트, 제8 오브젝트, 제10 오브젝트 내지 제15 오브젝트를 다른 위쪽 방향으로 이동시키고, 새로운 오브젝트인 제16 오브젝트 내지 제19 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 제어부(290)는 그리드 화면에서 제1 오브젝트가 차지하는 정사각형 셀의 개수에 따라 제1 오브젝트에 포함된 내용을 상이하게 변경할 수 있다.
구체적으로, 사진 어플리케이션에 대한 오브젝트가 1개의 정사각형 셀에 위치하는 경우, 제어부(290)는 도 21a에 도시된 바와 같이, 사진 어플리케이션에 대응되는 아이콘을 오브젝트(2110)로 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 사진 어플리케이션에 대한 오브젝트가 4개의 정사각형 셀에 위치하는 경우, 제어부(290)는 도 21b에 도시된 바와 같이, 사진 어플리케이션의 간략 정보(예를 들어, 저장된 사진 정보) 를 포함하는 오브젝트(2120)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 사진 어플리케이션에 대한 오브젝트가 9개의 정사각형 셀에 위치하는 경우, 제어부(290)는 도 21c에 도시된 바와 같이, 사진 어플리케이션의 상세 정보(예를 들어, 최근에 찍은 사진에 대한 썸네일 이미지 정보 등)를 포함하는 오브젝트(2130)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 사진 어플리케이션에 대한 오브젝트가 16개의 정사각형 셀에 위치하는 경우, 제어부(290)는 도 21d에 도시된 바와 같이, 사진 어플리케이션의 실행 화면(예를 들어, 사진 리스트 등)을 포함하는 오브젝트(2140)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
한편, 상술한 바와 같이, 오브젝트가 차지하는 정사각형의 셀의 개수 또는 오브젝트의 크기에 따라 4 단계의 상이한 형태가 존재하는 것은 일 실시예에 불과할 뿐, 다른 복수 회의 단계를 포함할 수 있다. 예를 들어, 제어부(290)는 오브젝트가 차지하는 정사각형의 셀의 개수 또는 오브젝트의 크기에 따라 세 단계로 오브젝트를 다르게 표시할 수 있다.
구체적으로, 도 22a에 도시된 바와 같이, 오브젝트가 시계 어플리케이션에 대응되는 오브젝트인 경우, 오브젝트의 크기가 제1 개수의 정사각형 셀을 차지하면, 제어부(290)는 시계 어플리케이션에 대응되는 아이콘 형태로 오브젝트(2211)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제2 개수의 정사각형 셀을 차지하면, 제어부(290)는 간략한 시계 형태로 오브젝트(2213)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제3 개수의 정사각형 셀을 차지하면, 제어부(290)는 상세한 시계 형태(즉, 초침 및 분 간격이 포함된 시계 형태) 로 오브젝트(2215)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 도 22b에 도시된 바와 같이, 오브젝트가 날씨 어플리케이션에 대응되는 오브젝트인 경우, 오브젝트의 크기가 제1 개수의 정사각형 셀을 차지하면, 제어부(290)는 날씨 어플리케이션에 대응되는 아이콘 형태로 오브젝트(2221)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제2 개수의 정사각형 셀을 차지하면, 제어부(290)는 간략한 날씨 정보(예를 들어, 사용자가 위치하는 지역의 현재 날씨)를 포함하는 오브젝트(2223)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제3 개수의 정사각형 셀을 차지하면, 제어부(290)는 상세한 날씨 정보(예를 들어, 현재 날씨 및 미래의 날씨 정보)를 포함하는 오브젝트(2225)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 도 22c에 도시된 바와 같이, 오브젝트가 전화 어플리케이션에 대응되는 오브젝트인 경우, 오브젝트의 크기가 제1 개수의 정사각형 셀을 차지하면, 제어부(290)는 전화 어플리케이션에 대응되는 아이콘 형태로 오브젝트(2231)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제2 개수의 정사각형 셀을 차지하면, 제어부(290)는 2개의 연락처 정보를 포함하는 오브젝트(2233)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제3 개수의 정사각형 셀을 차지하면, 제어부(290)는 5개의 연락처 정보를 포함하는 전화 화면을 포함하는 오브젝트(2235)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 도 22d에 도시된 바와 같이, 오브젝트가 동영상 공유 어플리케이션에 대응되는 오브젝트인 경우, 오브젝트의 크기가 제1 개수의 정사각형 셀을 차지하면, 제어부(290)는 동영상 공유 어플리케이션에 대응되는 아이콘 형태로 오브젝트(2241)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제2 개수의 정사각형 셀을 차지하면, 제어부(290)는 특정 동영상의 썸네일 이미지를 포함하는 오브젝트(2243)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제3 개수의 정사각형 셀을 차지하면, 제어부(290)는 동영상 실행 화면을 포함하는 오브젝트(2245)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 도 22e에 도시된 바와 같이, 오브젝트가 이메일 어플리케이션에 대응되는 오브젝트인 경우, 오브젝트의 크기가 제1 개수의 정사각형 셀을 차지하면, 제어부(290)는 이메일 어플리케이션에 대응되는 아이콘 형태로 오브젝트(2251)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제2 개수-의 정사각형 셀을 차지하면, 제어부(290)는 수신된 이메일의 간략 정보(예를 들어, 발신자 이름, 제목 등)를 포함하는 오브젝트(2253)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제3 개수의 정사각형 셀을 차지하면, 제어부(290)는 수신된 이메일의 상세 정보(예를 들어, 발신자 이름, 제목, 수신날짜, 이메일 내용 등)를 포함하는 오브젝트(2255)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 도 22f에 도시된 바와 같이, 오브젝트가 SNS 어플리케이션에 대응되는 오브젝트인 경우, 오브젝트의 크기가 제1 개수의 정사각형 셀을 차지하면, 제어부(290)는 SNS 어플리케이션에 대응되는 아이콘 형태로 오브젝트(2261)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제2 개수의 정사각형 셀을 차지하면, 제어부(290)는 최근에 업데이트된 글의 간략 정보(예를 들어, 작성자, 글의 일부 내용)를 포함하는 오브젝트(2263)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 오브젝트의 크기가 제3 개수의 정사각형 셀을 차지하면, 제어부(290)는 최근에 업데이트된 글의 상세 정보(예를 들어, 프로필 이미지, 추천 아이콘, 댓글 등)를 포함하는 오브젝트(2265)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
이하에서는 도 23a 내지 도 23d를 참조하여 상술한 바와 같이, 그리드 화면에서 사용자 인터렉션에 따라 오브젝트가 차지하는 정사각형 셀의 개수를 조절하며, 셀의 개수가 조절된 오브젝트에 디스플레이되는 내용의 형태가 변경되는 실제적인 예를 설명하기로 한다.
도 23a에 도시된 바와 같이, 디스플레이부(230)는 그리드 화면에 16 개의 오브젝트(2310-1 내지 2310-16)를 디스플레이한다. 이때, 16 개의 오브젝트(2310-1 내지 2310-16)는 각각 대응되는 어플리케이션의 아이콘을 포함할 수 있다.
그리고, 16 개의 오브젝트(2310-1 내지 2310-16) 중 SNS 어플리케이션과 대응되는 제6 오브젝트(2310)를 터치한 후 오른쪽 상단 방향으로 향하는 사용자 인터렉션이 감지되면, 제어부(290)는 제6 오브젝트(2310-6)가 4개의 셀을 차지하도록 제6 오브젝트(2310-6)의 크기를 증가시키며, 아이콘을 포함하는 제6 오브젝트(2310-6)를 최신 업데이트된 글에 대한 간략 정보를 포함하는 오브젝트(2320)로 변경하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제어부(290)는 제1 오브젝트(2310-1), 제2 오브젝트(2310-2) 및 제5 오브젝트(2310-5)는 화면에서 제거하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 최신 업데이트된 글에 대한 간략 정보를 포함하는 오브젝트(2320)를 도 23c에 도시된 바와 같이, 우하단 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 최신 업데이트된 글에 대한 간략 정보를 포함하는 오브젝트(2320)가 9개의 셀을 차지하도록 제6 오브젝트(2320)의 크기를 증가시키며, 최신 업데이트된 글에 대한 간략 정보를 포함하는 오브젝트(2320)를 최신 업데이트된 글에 대한 상세 정보를 포함하는 오브젝트(2330)로 변경하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제어부(290)는 제3 오브젝트(2310-3), 제7 오브젝트(2310-7), 제9 오브젝트(2310-9), 제10 오브젝트(2310-10), 제11 오브젝트(2310-11)를 화면에서 제거하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 최신 업데이트된 글에 대한 상세 정보를 포함하는 오브젝트(2330)를 도 23d에 도시된 바와 같이, 우하단 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 최신 업데이트된 글에 대한 상세 정보를 포함하는 오브젝트(2330)가 16개의 셀을 모두 차지하도록 제6 오브젝트(2330)의 크기를 증가시키며, 최신 업데이트된 글에 대한 상세 정보를 포함하는 오브젝트(2330)를 SNS 어플리케이션 실행 화면을 포함하는 오브젝트(2340)로 변경하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제어부(290)는 제4 오브젝트(2310-4), 제8 오브젝트(2310-8), 제12 오브젝트(2310-12) 내지 제16 오브젝트(2310-16)를 화면에서 제거하도록 디스플레이부(230)를 제어할 수 있다.
또한, 사용자 인터렉션에 따라 오브젝트가 차지하는 정사각형 셀의 개수가 증가하는 경우, 제어부(290)는 복수의 정사각형 셀에 디스플레이되는 오브젝트의 모양에 따라 상이한 방법으로 오브젝트의 크기 및 내용을 변경할 수 있다.
구체적으로, 도 24a에 도시된 바와 같이, 4개의 정사각형 셀에 채팅 화면을 디스플레이하는 오브젝트(2410)를 터치한 후 우하단 방향으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 채팅 화면 내용에 변화가 생기지 않고, 화면 비율을 증가시켜 9개의 정사각형 셀에 채팅 화면을 디스플레이하도록 오브젝트(2415)의 크기를 증가시킬 수 있다.
또한, 도 24b에 도시된 바와 같이, 4개의 정사각형 셀에 채팅 화면을 디스플레이하는 오브젝트(2420)를 터치한 후 우측 방향으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 4개의 정사각형 셀에 채팅 화면을 디스플레이하고, 두 개의 셀에 채팅 어플리케이션과 관련된 메뉴를 디스플레이하도록 오브젝트(2425)의 크기를 증가시킬 수 있다.
또한, 도 24c에 도시된 바와 같이, 9개의 정사각형 셀에 채팅 화면을 디스플레이하는 오브젝트(2430)를 터치한 후 좌측 방향으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 9개의 정사각형 셀에 채팅 화면을 디스플레이하고, 3 개의 셀에 채팅 대상자를 디스플레이하도록 오브젝트(2435)의 크기를 증가시킬 수 있다.
또한, 도 24d에 도시된 바와 같이, 4개의 정사각형 셀에 채팅 화면을 디스플레이하는 오브젝트(2440)를 터치한 후 아래쪽 방향으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 기존보다 많은 채팅 내용의 채팅 화면을 디스플레이하도록 오브젝트(2435)의 크기를 증가시킬 수 있다.
또한, 복수의 정사각형 셀에 영상 컨텐츠를 디스플레이하는 동안 사용자 인터렉션이 입력된 경우, 제어부(290)는 사용자 인터렉션이 입력되는 정사각형 셀의 위치 및 사용자 인터렉션의 방향에 따라 영상 컨텐츠를 확대 또는 축소할 수 있다.
구체적으로, 도 25a에 도시된 바와 같이, 두 개의 정사각형 셀에 사진 컨텐츠(2510)가 디스플레이되는 동안 사진 컨텐츠의 제1 지점(2511)을 터치한 후 제2 지점(2513)까지 우측 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 25a의 오른쪽에 도시된 바와 같이, 두 개의 정사각형 셀 중 상단에 위치한 셀을 확대한 이미지(2520)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 도 25b에 도시된 바와 같이, 두 개의 정사각형 셀에 사진 컨텐츠(2510)가 디스플레이되는 동안 사진 컨텐츠의 제3 지점(2515)을 터치한 후 제4 지점(2517)까지 우측 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 25b의 오른쪽에 도시된 바와 같이, 두 개의 정사각형 셀 중 하단에 위치한 셀을 확대한 이미지(2530)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 도 25c에 도시된 바와 같이, 두 개의 정사각형 셀에 사진 컨텐츠(2510)가 디스플레이되는 동안 사진 컨텐츠의 제3 지점(2515)을 터치한 후 제5 지점(2519)까지 대각선 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 25b의 오른쪽에 도시된 바와 같이, 8개의 정사각형 셀에 디스플레이되도록 사진 컨텐츠(2510)를 전체적으로 확대한 이미지(2540)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 그리드 화면에 하나의 오브젝트가 디스플레이되는 동안 두 개의 손가락을 동시에 터치한 후 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 사용자 인터렉션에 따라 오브젝트를 이동하고, 사용자 단말 장치(100)를 제어하기 위한 메뉴를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
구체적으로, 도 26a에 도시된 바와 같이, 특정 어플리케이션 화면(2610)이 디스플레이되는 동안 특정 어플리케이션 화면(2610)에 두 손가락을 동시에 터치한 후 좌하단 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 특정 어플리케이션 화면(2610)을 좌하단 방향으로 이동하고, 화면의 상단 및 우측에 사용자 단말 장치이 제공하는 다양한 기능에 대응되는 메뉴(2620)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 특정 어플리케이션 화면(2610)이 디스플레이되는 동안 특정 어플리케이션 화면(2610)에 두 손가락을 동시에 터치한 후 우측 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 특정 어플리케이션 화면(2610)을 우측 방향으로 이동하고, 화면의 좌측에 사용자 단말 장치이 제공하는 다양한 기능에 대응되는 메뉴(2630)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
이때, 특정 어플리케이션 화면(2610)이 이동함에 따라 생성되는 메뉴는 디스플레이 위치에 따라 상이한 메뉴를 포함할 수 있다. 예를 들어, 상단 영역에 디스플레이되는 메뉴는 수신된 메시지 안내, 수신된 전화 안내, 수신된 이메일 안내 등과 같은 notification 메뉴이며, 좌측 또는 우측에 디스플레이되는 메뉴는 자주 사용하는 어플리케이션을 실행할 수 있는 메뉴이며, 꼭지점 영역에 디스플레이되는 메뉴는 홈 화면으로 이동하는 메뉴일 수 있다.
또한, 두 개의 손가락을 터치한 후 드래그하는 사용자 인터렉션이 복수 회 입력된 경우, 제어부(290)는 사용자 인터렉션에 따라 어플리케이션 화면을 이동하고 새로운 어플리케이션 화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
구체적으로, 도 27a에 도시된 바와 같이, 제1 어플리케이션 화면(2710)이 디스플레이되는 동안 제1 어플리케이션 화면(2710)에 두 손가락을 동시에 터치한 후 좌하단 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 27b에 도시된 바와 같이, 제1 어플리케이션 화면(2710')을 좌하단 방향으로 이동하고, 화면의 상단 및 우측 영역에 제2 어플리케이션 화면(2720)의 일부를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제2 어플리케이션은 제1 어플리케이션 이전에 실행된 어플리케이션일 수 있다.
또한, 도 27c에 도시된 바와 같이, 제1 어플리케이션 화면(2710')과 제2 엎플리케이션 화면(2720)이 동시에 디스플레이되는 동안 제2 어플리케이션 화면(2720)에 두 손가락을 동시에 터치한 후 좌하단 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 27d에 도시된 바와 같이, 제1 어플리케이션 화면(2710'') 및 제2 어플리케이션 화면(2720')을 좌하단 방향으로 이동하고, 화면의 상단 및 우측 영역에 제3 어플리케이션 화면(2730)의 일부를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제3 어플리케이션은 제2 어플리케이션 이전에 실행된 어플리케이션일 수 있다.
한편, 제1 어플리케이션 화면(2710')과 제2 엎플리케이션 화면(2720)이 동시에 디스플레이되는 동안 제1 어플리케이션 화면(2710')에 두 손가락을 동시에 터치한 후 좌하단 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 어플리케이션 화면(2710')을 계속해서 좌하단 방향으로 이동하고, 제2 어플리케이션 화면(2720)이 디스플레이되는 영역을 확장시킬 수 있다.
복수의 오브젝트가 디스플레이되는 영역의 교차점을 터치한 후 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 사용자 인터렉션에 따라 복수의 오브젝트에 대한 화면 분할 비율 및 디스플레이되는 오브젝트의 개수를 조절할 수 있다.
구체적으로, 도 28a에 도시된 바와 같이, 4개의 오브젝트가 디스플레이되는 동안 교차점을 터치한 후 하나의 정사각형 셀 크기만큼 오른쪽 방향으로 이동하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 28b에 도시된 바와 같이, 제1 오브젝트 및 제3 오브젝트의 크기를 증가시키고, 제2 오브젝트 및 제4 오브젝트의 크기를 감소시킬 수 있다.
또한, 도 28b에 도시된 바와 같이, 4개의 오브젝트가 디스플레이되는 동안 교차점을 터치한 후 하나의 정사각형 셀 크기만큼 아래쪽 방향으로 이동하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 28b에 도시된 바와 같이, 제1 오브젝트 및 제2 오브젝트의 크기를 증가시키고, 제3 오브젝트 및 제4 오브젝트의 크기를 감소시킬 수 있다.
또한, 도 28c에 도시된 바와 같이, 4개의 오브젝트가 디스플레이되는 동안 교차점을 터치한 후 하나의 정사각형 셀 크기만큼 오른쪽 방향으로 이동하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 28d에 도시된 바와 같이, 제1 오브젝트 및 제3 오브젝트의 크기를 증가시키고, 제2 오브젝트 및 제4 오브젝트를 화면에서 제거할 수 있다.
또한, 도 28d에 도시된 바와 같이, 2개의 오브젝트가 디스플레이되는 동안 교차점을 터치한 후 하나의 정사각형 셀 크기만큼 아래쪽 방향으로 이동하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 도 28e에 도시된 바와 같이, 제1 오브젝트의 크기를 증가시키고, 제3 오브젝트를 화면에서 제거할 수 있다.
상술한 바와 같이 교차점을 터치한 후 드래그 함으로써, 복수의 태스크를 수행할 수 있는 오브젝트의 화면 비율 및 오브젝트의 개수를 동시에 제어할 수 있게 된다.
복수의 오브젝트가 디스플레이되는 영역의 교차점을 기설정된 이상 터치하는 사용자 인터렉션(즉, 롱 프레스 인터렉션)이 감지된 경우, 제어부(290)는 교차점을 공유하는 복수의 오브젝트를 통합하여 하나의 새로운 오브젝트를 생성하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
구체적으로, 도 29a에 도시된 바와 같이, 제1 오브젝트 내지 제9 오브젝트(2910-1 내지 2910-9)가 디스플레이되는 동안 제1 오브젝트(2910-1), 제2 오브젝트(2910-2), 제4 오브젝트(2910-4), 제5 오브젝트(2910-5)의 교차점을 기설정된 시간 터치하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트(2910-1), 제2 오브젝트(2910-2), 제4 오브젝트(2910-4), 제5 오브젝트(2910-5)를 통합하여 제10 오브젝트(2920)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 제10 오브젝트(2920), 제6 오브젝트(2910-6), 제8 오브젝트(2910-8) 및 제9 오브젝트(2910-9)의 교차점을 기설정된 시간 터치하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제10 오브젝트(2920), 제6 오브젝트(2910-6), 제8 오브젝트(2910-8) 및 제9 오브젝트(2910-9)를 통합하여 새로운 제11 오브젝트(2930)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또는, 제10 오브젝트(2920), 제3 오브젝트(2910-3) 및 제6 오브젝트(2910-6) 의 교차점을 기설정된 시간 터치하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제10 오브젝트(2920), 제3 오브젝트(2910-3) 및 제6 오브젝트(2910-6)를 통합하여 새로운 제12 오브젝트(2940)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
특히, 복수의 오브젝트가 복수의 어플리케이션 실행 아이콘인 경우, 복수의 오브젝트의 교차점에 롱프레스 인터렉션이 감지되면, 제어부(290)는 롱프레스 인터렉션이 감지된 교차점을 공유하는 오브젝트들의 상위 폴더를 생성할 수 있다.
구체적으로, 도 29b에 도시된 바와 같이, 제 1 실행 아이콘 내지 제9 실행 아이콘(2950-1 내지 2950-9)을 디스플레이하는 동안 제1 실행 아이콘(2950-1), 제2 실행 아이콘(2950-2), 제4 실행 아이콘(2950-4) 및 제5 실행 아이콘(2950-5)의 교차점을 롱프레스하는 인터렉션이 감지되면, 제어부(290)는 제1 실행 아이콘(2950-1), 제2 실행 아이콘(2950-2), 제4 실행 아이콘(2950-4) 및 제5 실행 아이콘(2950-5)을 화면에서 제거하고, 제1 실행 아이콘(2950-1), 제2 실행 아이콘(2950-2), 제4 실행 아이콘(2950-4) 및 제5 실행 아이콘(2950-5)의 상위 폴더인 SNS 폴더(2960)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 폴더 이름은 사용자에 의해 지정될 수 있다.
특히, 복수의 오브젝트가 복수의 컨텐츠 아이콘인 경우, 복수의 오브젝트의 교차점에 롱프레스 인터렉션이 감지되면, 제어부(290)는 롱프레스 인터렉션이 감지된 교차점을 공유하는 컨텐츠들을 포함하는 플레이 리스트를 생성할 수 있다.
구체적으로, 도 29c에 도시된 바와 같이, 제1 컨텐츠 아이콘 내지 제9 컨텐츠 아이콘(2960-1 내지 2960-9)을 디스플레이하는 동안 제1 컨텐츠 아이콘(2960-1), 제2 컨텐츠 아이콘(2960-2), 제4 컨텐츠 아이콘(2960-4) 및 제5 컨텐츠 아이콘(2960-5)의 교차점을 롱프레스하는 인터렉션이 감지되면, 제어부(290)는 제1 컨텐츠 아이콘(2960-1), 제2 컨텐츠 아이콘(2960-2), 제4 컨텐츠 아이콘(2950-4) 및 제5 컨텐츠 아이콘(2960-5)을 화면에서 제거하고, 제1 컨텐츠 아이콘(2960-1), 제2 컨텐츠 아이콘(2960-2), 제4 컨텐츠 아이콘(2960-4) 및 제5 컨텐츠 아이콘(2960-5)을 포함하는 플레이 리스트인 POP 리스(2970)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 플레이 리스트의 이름은 사용자에 의해 지정될 수 있다.
화면의 한 변에 위치한 복수의 오브젝트의 교차점 중 하나를 터치한 후 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 화면에 디스플레이되는 오브젝트의 개수를 조절할 수 있다.
구체적으로, 도 30a에 도시된 바와 같이, 제1 오브젝트 내지 제3 오브젝트(3010 내지 3030)을 디스플레이하는 동안 제1 오브젝트(3010) 및 제3 오브젝트(3030)의 교차점을 터치한 후 오른쪽 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트(3010)의 크기를 증가시키고, 제2 오브젝트(3020) 및 제3 오브젝트(3030)의 크기를 감소시면서, 제3 오브젝트(3030)의 하단에 제4 오브젝트(3040)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
그리고, 제1 오브젝트 내지 제4 오브젝트(3010 내지 3040)을 디스플레이하는 동안 제1 오브젝트(3010) 및 제4 오브젝트(3040)의 교차점을 터치한 후 오른쪽 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트(3010)의 크기를 증가시키고, 제2 오브젝트 내지 제4 오브젝트(3040 내지 3030)의 크기를 감소시면서, 제4 오브젝트(3040)의 하단에 제5 오브젝트(3050)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
특히, 도 30b에 도시된 바와 같이, 뉴스 컨텐츠(3060) 및 제1 사진 컨텐츠(3070), 제2 사진 컨텐츠(3080)가 디스플레이하는 동안 뉴스 컨텐츠(3060) 및 제2 사진 컨텐츠(3080)의 교차점을 터치한 후 오른쪽 방향으로 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 뉴스 컨텐츠(3060)의 크기를 증가시키고, 제1 사진 컨텐츠(3070) 및 제2 사진 컨텐츠(3080)의 크기를 축소시키며, 새로운 제3 사진 컨텐츠(3090)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 계속해서 오른쪽 방향으로 드래그를 하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 새로운 제4 사진 컨텐츠(3095)를 생성하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제1 내지 제4 사진 컨텐츠(3070,3080,3090,3095)는 뉴스 컨텐츠(3060)와 관련된 사진일 수 있다.
또한, 제어부(290)는 메인 오브젝트가 디스플레이부(230)에 포함된 복수의 선분 중 맞닿은 선분의 개수에 따라 메인 오브젝트에 대한 상이한 기능을 제공할 수 있다. 구체적으로, 제어부(290)는 도 31a에 도시된 바와 같이, 메인 오브젝트(3110)가 디스플레이부(230)와 네 선분에 맞닿은 경우, 도 31b에 도시된 바와 같이, 메인 오브젝트(3120)가 디스플레이부(230)와 두 선분에 맞닿은 경우, 도 31c에 도시된 바와 같이, 메인 오브젝트(3130)가 디스플레이부(230)와 한 선분에 맞닿은 경우, 도 31d에 도시된 바와 같이, 메인 오브젝트(3140)가 디스플레이부(230)와 한 선분도 맞닿지 않은 경우, 각각 상이한 기능을 제공할 수 있다.
구체적으로, 메인 오브젝트가 전화 어플리케이션에 대응되는 오브젝트인 경우, 도 31a에 도시된 바와 같이, 메인 오브젝트(3150)가 디스플레이부(230)의 네 선분과 맞닿으면, 제어부(290)는 사용자 단말 장치(200)가 전화 기능을 수행하도록 제어할 수 있다. 또한, 도 31b에 도시된 바와 같이, 메인 오브젝트(3160)가 디스플레이부(230)의 두 선분과 맞닿으면, 제어부(290)는 사용자 단말 장치(200)의 전화 기능이 잠시 퍼즈(pause)되도록 제어할 수 있다. 또한, 도 31c에 도시된 바와 같이, 메인 오브젝트(3170)가 디스플레이부(230)의 한 선분과 맞닿으면, 제어부(290)는 사용자 단말 장치(200)가 전화 기능뿐만 아니라 다른 기능을 동시에 수행할 수 있는 멀티 태스킹 모드로 진입할 수 있다. 또한, 도 31d에 도시된 바와 같이, 메인 오브젝트(3180)가 디스플레이부(230)의 한 선분과 맞닿지 않은 경우, 다른 오브젝트(3190)를 메인 오브젝트(3180)가 디스플레이된 영역으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 전화 통화의 상대방과 다른 오브젝트(3190)에 대응되는 컨텐츠를 공유할 수 있도록 통신부(240)를 제어할 수 있다.
사용자 단말 장치(200)의 모드가 그리드 편집 모드가 아닌 일반 모드인 경우, 복수의 오브젝트 중 하나를 선택한 후 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 드래그 방향에 대응되는 영역에 선택된 오브젝트에 대한 항목들이 디스플레이되도록 디스플레이부(230)를 제어할 수 있다.
구체적으로, 도 32a에 도시된 바와 같이, 제1 오브젝트 내지 제16 오브젝트가 디스플레이되는 동안 제6 오브젝트를 드래그하는 사용자 인터렉션이 감지된 경우, 제어부(290)는 제7 오브젝트 및 제8 오브젝트를 화면에서 제거하고, 제7 오브젝트 및 제8 오브젝트가 디스플레이된 영역에 제6 오브젝트에 대한 항목들(6',6'')을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
구체적인 실시예를 살펴보면, 도 32b에 도시된 바와 같이, 복수의 어플리케이션에 대응되는 복수의 오브젝트(3210-1 내지 3210-16)을 디스플레이하는 동안 SNS 어플리케이션에 대응되는 제6 어플리케이션(3210-6)을 오른쪽 방향으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 제7 오브젝트(3210-7) 및 제8 오브젝트(3210-8)가 디스플레이된 영역에 SNS 어플리케이션의 실행 항목인 최근 업데이트된 글들(3220,3225)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 최근 업데이트된 글들(3220,3225)은 하나의 정사각형 셀보다 큰 크기일 수 있으나, 이는 일 실시예에 불과할 뿐, 최근 업데이트된 글들(3220,3225)은 정사각형 셀 하나에 각각 디스플레이될 수 있다.
또한, 도 32c에 도시된 바와 같이, 복수의 어플리케이션에 대응되는 복수의 오브젝트(3210-1 내지 3210-16)을 디스플레이하는 동안 연락처 어플리케이션에 대응되는 제2 어플리케이션(3210-2)을 아래쪽 방향으로 드래그하는 사용자 인터렉션이 감지되면, 제어부(290)는 제6 오브젝트(3210-7), 제10 오브젝트(3210-10) 및 제14 오브젝트(3210-14)가 디스플레이된 영역에 연락처 어플리케이션의 실행 항목인 최근 연락한 연락처에 대한 정보(3230,3235)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 최근 연락한 연락처에 대한 정보(3230,3235)은 하나의 정사각형 셀보다 큰 크기일 수 있으나, 이는 일 실시예에 불과할 뿐, 최근 연락한 연락처에 대한 정보(3230,3235)는 정사각형 셀 하나에 각각 디스플레이될 수 있다.
<복수의 사용자 단말 장치 간의 컨텐츠 공유>
본 발명의 다른 실시예에 다르면, 도 33에 도시된 바와 같이, 정사각형 형태의 디스플레이 패널을 가지는 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)는 기설정된 조건이 만족하면 컨텐츠를 공유할 수 있다. 구체적으로, 가로 세로의 길이가 같은 정사각형 형태의 디스플레이 패널을 가지고 있으므로, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)가 방향 상관없이 한 선분이 서로 맞닿은 경우, 선분이 맞닿은 사용자 단말 장치 간에 컨텐츠를 공유할 수 있다.
이때, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)는 다양한 방법을 통해 근접 방향을 판단할 수 있다. 본 발명의 일 실시예로, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)는 NFC 통신 기술을 이용하여 근접 방향을 판단할 수 있다. 구체적으로, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4) 각각은 네 변에 4개의 NFC 칩(244)를 포함하며, 맞닿는 선분에 포함된 NFC 칩(244)이 서로 태깅된 경우, 사용자 단말 장치 간의 근접 방향을 판단할 수 있다. 본 발명의 다른 실시예로, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)는 적외선 센서를 이용하여 사용자 단말 장치 간의 근접 방향을 판단할 수 있다. 구체적으로, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4) 각각은 네 변에 4개의 적외선 센서를 구비하며, 적외선 센서를 통해 사용자 단말 장치 간의 근접 방향을 판단할 수 있다. 그리고, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)는 터치 센서를 이용하여 사용자 단말 장치 간에 선분이 맞닿았는지 여부를 판단할 수 있다. 그러나, 상술한 바와 같이, NFC 통신 기술, 적외선 센서, 터치 센서를 이용하여 사용자 단말 장치 간의 근접 방향 및 선분이 맞닿았는지 여부를 판단하는 것은 일 실시예에 불과할 뿐, 다른 방법을 이용하여 사용자 단말 장치 간의 근접 방향 및 선분이 맞닿았는지 여부를 판단할 수 있다.
이때, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)는 서로 맞닿은 변을 판단하여 연결 상태를 판단하고, 연결 상태를 바탕으로 컨텐츠를 공유할 수 있는 공유 영역을 디스플레이할 수 있다. 그리고, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4) 중 하나에 디스플레이된 컨텐츠 아이콘을 공유 영역으로 드래그하는 사용자 인터렉션이 감지된 경우, 사용자 인터렉션이 감지된 컨텐츠 아이콘에 대응되는 컨텐츠를 다른 사용자 단말 장치와 공유할 수 있다.
구체적으로, 제1 사용자 단말 장치(200-1)의 오른쪽 선분과 제2 사용자 단말 장치(200-2)의 왼쪽 선분이 맞닿은 경우, 제1 사용자 단말 장치(200-1) 및 제2 사용자 단말 장치(200-2)는 적어도 하나의 센서를 통해 연결 상태를 판단하고, 도 34a에 도시된 바와 같이, 판단된 연결 상태를 바탕으로 사용자 단말 장치가 맞닿은 선분의 하단 영역에 공유 영역(3401)을 디스플레이할 수 있다.
또한, 제1 사용자 단말 장치(200-1)의 오른쪽 선분과 제2 사용자 단말 장치(200-2)의 왼쪽 선분이 맞닿고, 제1 사용자 단말 장치(200-1)의 아래 선분과 제3 사용자 단말 장치(200-3)의 윗 선분이 맞닿은 경우, 제1내지 제3 사용자 단말 장치(200-1 내지 200-3)는 적어도 하나의 센서를 통해 연결 상태를 판단하고, 도 34b에 도시된 바와 같이, 판단된 연결 상태를 바탕으로 세 개의 사용자 단말 장치가 맞닿은 영역에 공유 영역(3411)을 디스플레이할 수 있다.
또한, 제1 사용자 단말 장치(200-1)의 오른쪽 선분과 제2 사용자 단말 장치(200-2)의 왼쪽 선분이 맞닿고, 제1 사용자 단말 장치(200-1)의 아래 선분과 제3 사용자 단말 장치(200-3)의 윗 선분이 맞닿고, 제2 사용자 단말 장치(200-2)의 아래 선분과 제4 사용자 단말 장치(200-4)의 윗 선분이 맞닿고, 제3 사용자 단말 장치(200-3)의 오른쪽 선분과 제4 사용자 단말 장치(200-4)의 왼쪽 선분이 맞닿은 경우, 제1 내지 제4 사용자 단말 장치(200-1 내지 200-4)는 적어도 하나의 센서를 통해 연결 상태를 판단하고, 도 34c에 도시된 바와 같이, 판단된 연결 상태를 바탕으로 네 개의 사용자 단말 장치가 맞닿은 영역에 공유 영역(3421)을 디스플레이할 수 있다.
또한, 제1 사용자 단말 장치(200-1)의 오른쪽 선분과 제2 사용자 단말 장치(200-2)의 왼쪽 선분이 맞닿고, 제2 사용자 단말 장치(200-2)의 오른쪽 선분과 제3 사용자 단말 장치(200-3)의 왼쪽 선분이 맞닿은 경우, 제1 내지 제3 사용자 단말 장치(200-1 내지 200-3)는 적어도 하나의 센서를 통해 연결 상태를 판단하고, 도 34d에 도시된 바와 같이, 판단된 연결 상태를 바탕으로 제1 사용자 단말 장치(200-1)와 제2 사용자 장치(200-2)가 맞닿은 선분의 하단 영역에 공유 영역(3431)을 디스플레이할 수 있으며, 제2 사용자 단말 장치(200-2)와 제3 사용자 단말 장치(200-3)가 맞닿은 선분의 하단 영역에 공유 영역(3432)을 디스플레이할 수 있다.
또한, 제1 사용자 단말 장치(200-1)의 오른쪽 선분과 제2 사용자 단말 장치(200-2)의 왼쪽 선분이 맞닿고, 제2 사용자 단말 장치(200-2)의 오른쪽 선분과 제3 사용자 단말 장치(200-3)의 왼쪽 선분이 맞닿고, 제3 사용자 단말 장치(200-3)의 위쪽 선분과 제4 사용자 단말 장치(200-4)의 아래쪽 선분이 맞닿은 경우, 제1 내지 제4 사용자 단말 장치(200-1 내지 200-4)는 적어도 하나의 센서를 통해 연결 상태를 판단하고, 도 34e에 도시된 바와 같이, 판단된 연결 상태를 바탕으로 제1 사용자 단말 장치(200-1)와 제2 사용자 단말 장치(200-2)가 맞닿은 선분의 하단 영역에 공유 영역(3441)을 디스플레이할 수 있으며, 제2 사용자 단말 장치 내지 제4 사용자 단말 장치(200-2 내지 200-4)가 맞닿은 영역에 공유 영역(3442)을 디스플레이할 수 있다.
한편, 공유 영역은 다양한 형태로 구현될 수 있다. 구체적으로, 도 35에 도시된 바와 같이, 하나의 사용자 단말 장치가 부채꼴 형태로 공유 영역(3510)을 디스플레이하고 있으며, 하나의 사용자 단말 장치가 삼각형 형태로 공유 영역(3520)을 디스플레이하고 있으며, 하나의 사용자 단말 장치가 반원에서 부채꼴을 제외한 형태로 공유 영역(3530)을 디스플레이할 수 있다.
또한, 복수의 사용자 단말 장치(200-1,200-2,200-3,200-4)는 서로 연결된 후 공유 영역을 디스플레이하고, 공유 영역이 서로 이어진 경우, 컨텐츠를 공유할 수 있다
구체적으로, 도 36a에 도시된 바와 같이, 제1 사용자 단말 장치(200-1)의 우하단에 제1 공유 영역(3610-1)이 디스플레이되고, 제2 사용자 단말 장치(200-2)의 우상단에 제2 공유 영역(3610-2)이 디스플레이되고, 제3 사용자 단말 장치(200-3)의 좌하단에 제3 공유 영역(3610-3)이 디스플레이되고, 제4 사용자 단말 장치(200-4)의 우하단에 제4 공유 영역(3610-4)이 존재하는 상태에서, 도 36b에 도시된 바와 같이, 네 개의 사용자 단말 장치(200-1 내지 200-4)가 서로 연결될 수 있다. 그리고, 제2 사용자 단말 장치(200-2)를 시계 방향으로 180도 회전시킨 경우, 제1 공유 영역(3610-1)과 제2 공유 영역(3610-2)이 서로 이어질 수 있다. 제1 공유 영역(3610-1)과 제2 공유 영역(3610-2)이 이어진 경우, 제1 사용자 단말 장치(200-1) 및 제2 사용자 단말 장치(200-2) 중 하나가 다른 하나로 컨텐츠를 전송할 수 있다.
구체적인 실시예를 살펴보면, 제1 사용자 단말 장치 내지 제4 사용자 단말 장치(200-1 내지 200-4)는 서로 근접하여 도 37b에 도시된 바와 같이, 하나의 영상 컨텐츠(3710)를 디스플레이할 수 있다. 이때, 영상 컨텐츠(3710)는 제2 사용자 단말 장치(200-2)에 저장될 수 있다. 그리고, 공유 모드로 동작하는 경우, 네 개의 사용자 단말 장치(200-1 내지 200-4)는 도 37b에 도시된 바와 같이, 각각 공유 영역(3721,3723,3725,3727)을 디스플레이할 수 있다. 그리고, 제2 사용자 단말 장치(200-2)를 시계방향으로 180도 회전하여 제1 공유 영역(3721,3723)은 도 37c에 도시된 바와 같이, 서로 이어지는 경우, 제2 사용자 단말 장치(200-2)는 영상 컨텐츠(3710)의 데이터를 제1 사용자 단말 장치(200-1)로 전송할 수 있다. 전송을 전송하는 동안 영상 컨텐츠의 파일 형식을 나타내는 아이콘(3731)이 디스플레이될 수 있다. 파일 전송이 완료된 후, 제1 사용자 단말 장치 내지 제4 사용자 단말 장치(200-1 내지 200-4)는 다시 도 37d에 도시된 바와 같이, 하나의 영상 컨텐츠(3710)를 디스플레이할 수 있다.
또한, 복수의 사용자 단말 장치(200-1 내지 200-4)가 서로 연결된 경우, 복수의 사용자 단말 장치(200-1 내지 200-4)는 다양한 형태의 그룹 재생 기능을 제공할 수 있다.
구체적으로, 도 38에 도시된 바와 같이, 제1 내지 제3 사용자 단말 장치(200-1 내지 200-3)가 특정 영역에 대한 지도 화면을 동시에 디스플레이하는 동안 제4 사용자 단말 장치(200-4)가 연결된 경우, 제4 사용자 단말 장치(200-4)는 특정 영역의 서쪽 영역을 추가로 디스플레이할 수 있다. 그러나, 제1 내지 제3 사용자 단말 장치(200-1 내지 200-3)가 특정 영역에 대한 지도 화면을 동시에 디스플레이하는 동안 제3 사용자 단말 장치(200-3)를 왼쪽으로 밀어내는 경우, 제3 사용자 단말 장치(200-3)는 제2 사용자 단말 장치(200-2)와 떨어진 거리를 판단하고, 떨어진 거리를 바탕으로 특정 영역의 서쪽 영역을 추가로 디스플레이할 수 있다.
상술한 바와 같이, 정사각형 형태의 디스플레이 패널을 가지는 복수의 사용자 단말 장치를 이용하여 다양한 형태의 컨텐츠 공유 및 그룹 재생 기능이 가능해 진다.
< 폴딩 인터렉션 >
본 발명의 일 실시예에 따르면, 힌지부(310)를 기준으로 기설정된 각도 이상 접히는 폴딩 인터렉션이 감지된 경우, 제어부(290)는 복수의 정사각형 셀에 디스플레이되는 오브젝트를 다른 오브젝트로 변경하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 제어부(290)는 벤딩 센서를 포함하는 벤딩 감지부(283)를 이용하여 기설정된 각 이상 접힌 경우, 폴딩 인터렉션이 발생하였음을 감지할 수 있다.
구체적으로, 도 39에 도시된 바와 같이, 제1 오브젝트 내지 제9 오브젝트(3910-1 내지 3910-9)가 정사각형 셀에 디스플레이되는 동안 폴딩 인터렉션이 감지된 경우, 제어부(290)는 제1 오브젝트 내지 제9 오브젝트(3910-1 내지 3910-9)을 디스프레이 화면에서 제거하고, 새로운 제10 오브젝트 내지 제18 오브젝트(3920-1 내지 3920-2)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
특히, 복수의 정사각형 셀 중 하나를 터치한 후, 폴딩 인터렉션이 감지된 경우, 제어부(290)는 터치된 정사각형 셀을 포함하는 행에 존재하는 오브젝트를 다른 오브젝트로 변경하고, 나머지 행에 존재하는 오브젝트를 변경하지 않고 유지할 수 있다.
구체적으로, 도 40a의 좌측에 도시된 바와 같이, 제1 오브젝트 내지 제9 오브젝트(3910-1 내지 3910-9)가 디스플레이되는 동안 제4 오브젝트(3910-4)를 터치한 후, 폴딩 인터렉션이 감지되면, 제어부(290)는 도 40a의 우측에 도시된 바와 같이, 제4 오브젝트(3910-4)를 포함하는 2행의 오브젝트를 새로운 제10 오브젝트 내지 제12 오브젝트(3930-1 내지 3930-3)로 변경하고, 나머지 1행 및 3행에 디스플레이되는 오브젝트를 그대로 유지하도록 디스플레이부(230)를 제어할 수 있다.
또한, 도 40b의 좌측에 도시된 바와 같이, 제1 오브젝트 내지 제9 오브젝트(3910-1 내지 3910-9)가 디스플레이되는 동안 제7 오브젝트(3910-7)를 터치한 후, 폴딩 인터렉션이 감지되면, 제어부(290)는 도 40b의 우측에 도시된 바와 같이, 제7 오브젝트(3910-7)를 포함하는 3행의 오브젝트를 새로운 제10 오브젝트 내지 제12 오브젝트(3930-1 내지 3930-3)로 변경하고, 나머지 1행 및 2행에 디스플레이되는 오브젝트를 그대로 유지하도록 디스플레이부(230)를 제어할 수 있다.
구체적인 실시예를 살펴보면, 도 41a의 두 번째에 도시된 화면과 같이, 제1 정사각형 셀 내지 제9 정사각형 셀에 일반 지도 화면(4110)을 디스플레이하는 동안 왼쪽 디스플레이 패널을 오른쪽 디스플레이 패널 방향으로 접는 폴딩 인터렉션이 감지된 경우, 제어부(290)는 도 41a의 첫번째에 도시된 화면과 같이, 복수의 정사각형 셀에 디스플레이된 일반 지도 화면(4110)을 교통 상황 화면(4111)으로 변경할 수 있다. 도 41a의 두 번째에 도시된 화면과 같이, 제1 정사각형 셀 내지 제9 정사각형 셀에 일반 지도 화면(4110)을 디스플레이하는 동안 오른쪽 디스플레이 패널을 왼쪽 디스플레이 패널 방향으로 접는 폴딩 인터렉션이 감지된 경우, 제어부(290)는 도 41a의 세번째에 도시된 화면과 같이, 일반 지도 화면(4110)을 위성 지도 화면(4113)으로 변경할 수 있다. 그리고, 도 41a의 세 번째에 도시된 화면과 같이, 제1 정사각형 셀 내지 제9 정사각형 셀에 위성 지도 화면(4113)을 디스플레이하는 동안 오른쪽 디스플레이 패널을 왼쪽 디스플레이 패널 방향으로 접는 폴딩 인터렉션이 감지된 경우, 제어부(290)는 도 41a의 네 번째에 도시된 화면과 같이, 위성 지도 화면(4113)을 AR 화면(4115)으로 변경할 수 있다. 즉, 폴딩 인터렉션이 감지된 경우, 제어부(290)는 폴딩 인터렉션이 감지된 방향을 바탕으로 지도 표시 모드를 변경할 수 있다.
그러나, 도 41b의 두 번째에 도시된 화면과 같이, 제1 정사각형 셀 내지 제9 정사각형 셀에 일반 지도 화면(4120)을 디스플레이하는 동안 두 번째 행에 포함된 정사각형 셀을 터치한 후, 왼쪽 디스플레이 패널을 오른쪽 디스플레이 패널 방향으로 접는 폴딩 인터렉션이 감지된 경우, 제어부(290)는 도 41b의 첫 번째에 도시된 화면과 같이, 1행 및 3행이 일반 지도 모드로 유지되며, 2행이 교통 상황 모드로 변경된 화면(4121)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그러나, 도 41b의 두 번째에 도시된 화면과 같이, 제1 정사각형 셀 내지 제9 정사각형 셀에 일반 지도 화면(4120)을 디스플레이하는 동안 두 번째 행에 포함된 정사각형 셀을 터치한 후, 오른쪽 디스플레이 패널을 왼쪽 디스플레이 패널 방향으로 접는 폴딩 인터렉션이 감지된 경우, 제어부(290)는 도 41b의 세 번째에 도시된 화면과 같이, 1행 및 3행이 일반 지도 모드로 유지되며, 2행이 위성 지도 모드로 변경된 화면(4123)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 도 41b의 세 번째에 도시된 화면과 같이, 제1 정사각형 셀 내지 제9 정사각형 셀에 일반 지도 모드 및 위성 지도 모드를 동시에 디스플레이하는 화면(4123)을 디스플레이하는 동안 두 번째 행에 포함된 정사각형 셀을 터치한 후, 오른쪽 디스플레이 패널을 왼쪽 디스플레이 패널 방향으로 접는 폴딩 인터렉션이 감지된 경우, 제어부(290)는 도 41b의 네 번째에 도시된 화면과 같이, 1행 및 3행이 일반 지도 모드로 유지되며, 2행이 AR 모드로 변경된 화면(4125)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 특정 정사각형 셀을 터치한 후, 폴딩 인터렉션이 감지된 경우, 제어부(290)는 터치된 정사각형 셀이 포함된 행만을 변경하도록 디스플레이부(230)를 제어할 수 있다.
또한, 복수의 정사각형 셀에 메인 컨텐츠를 디스플레이하는 동안 특정 정사각형 셀을 터치한 후, 폴딩 인터렉션이 감지된 경우, 제어부(290)는 터치된 특정 정사각형 셀의 위치에 따라 특정 정사각형 셀이 포함된 열에 상이한 컨텐츠나 메뉴를 제공할 수 있다.
구체적으로, 도 42a에 도시된 바와 같이, 9 개의 정사각형 셀에 영상 컨텐츠를 디스플레이하는 동안 제9 정사각형 셀을 터치한 후, 폴딩 인터렉션이 감지되면, 제어부(290)는 제3 열에 영상 컨텐츠와 관련된 컨텐츠(4210)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 구체적인 실시예로, 도 42b에 도시된 바와 같이, 9 개의 정사각형 셀에 뉴스 컨텐츠를 디스플레이하는 동안 제9 정사각형 셀을 터치한 후, 폴딩 인터렉션이 감지되면, 제어부(290)는 제3 열에 뉴스 컨텐츠에 대한 3 개의 연관 뉴스(4220)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 도 43a에 도시된 바와 같이, 9 개의 정사각형 셀에 영상 컨텐츠를 디스플레이하는 동안 제7 정사각형 셀을 터치한 후, 폴딩 인터렉션이 감지되면, 제어부(290)는 제1 열에 사용자 단말 장치(200)의 기능을 제어하기 위한 메뉴(4310)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 구체적인 실시예로, 도 43b에 도시된 바와 같이, 9 개의 정사각형 셀에 뉴스 컨텐츠를 디스플레이하는 동안 제7 정사각형 셀을 터치한 후, 폴딩 인터렉션이 감지되면, 제어부(290)는 제1ㅂ 열에 사용자 단말 장치에 대한 메뉴(4230)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 제어부(290)는 폴딩 인터렉션 및 회전 인터렉션을 이용하여 화면을 분할하거나 통합할 수 있다.
구체적으로, 도 44의 첫 번째 화면에 도시된 바와 같이, 하나의 영상 컨텐츠(4410)를 디스플레이하는 동안 힌지부(310)를 기준으로 폴딩 인터렉션이 감지되면, 제어부(290)는 도 44의 두 번째 화면에 도시된 바와 같이, 화면을 두 개로 분할하여 두 개의 영상 컨텐츠(4420,4425)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 도 44의 두 번째 화면과 같이 두 개의 영상 컨텐츠(4420,4425)가 디스플레이되는 동안 사용자 단말 장치(200)의 회전 감지를 위한 센서(예를 들어, 틸팅 센서, 자이로 센서, 가속도 센서 등)를 통해 회전 시계방향으로 45도 회전하는 회전 인터렉션이 감지된 경우, 제어부(290)는 도 44의 세 번째 화면과 같이 두 개의 화면의 분할선을 유지하도록 두 개의 영상 컨텐츠(4420',4425')를 회전하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 도 44의 세 번째 화면에 도시된 바와 같이, 두 개의 영상 컨텐츠(4420',4425')가 분할된 상태에서 폴딩 인터렉션이 감지된 경우, 제어부(290)는 도 44의 네 번째 화면에 도시된 바와 같이, 화면을 네 개로 분할하여 네 개의 영상 컨텐츠(4431,4433,4435,4437)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 도 45의 첫 번째 화면에 도시된 바와 같이, 여섯 개의 영상 컨텐츠(4511 내지 4416)이 디스플레이되는 동안 힌지부(310)를 기준으로 폴딩 인터렉션이 감지된 경우, 제어부(290)는 힌지부(310)를 기준으로 디스플레이되는 분할선을 제거하여, 도 45의 두 번째 화면에 도시된 바와 같이, 네 개의 영상 컨텐츠(4521,4523,4525,4527)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 도 45의 두 번째 화면에 도시된 바와 같이, 네 개의 영상 컨텐츠(4521,4523,4525,4527)가 디스플레이되는 동안 시계방향으로 45도 회전하는 회전 인터렉션이 감지된 경우, 제어부(290)는 도 44의 세 번째 화면에 도시된 바와 같이, 네 개의 화면의 분할선을 유지하도록 네 개의 영상 컨텐츠(4521',4523',4525',4527')를 회전하여 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 그리고, 도 44의 세 번째 화면에 도시된 바와 같이, 네 개의 영상 컨텐츠(4521',4523',4525',4527')가 디스플레이되는 동안 힌지부(310)를 기준으로 폴딩 인터렉션이 감지된 경우, 제어부(290)는 힌지부(310)를 기준으로 디스플레이되는 분할선을 제거하여 도 45의 네 번째 화면에 도시된 바와 같이, 두 개의 영상 컨텐츠(4531,4533)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
또한, 제어부(290)를 힌지부(310)의 방향에 따라 3차원 큐브가 회전하는 것과 같이, 화면을 전환할 수 있다. 구체적으로, 도 46a에 도시된 바와 같이, 힌지부(310)가 수직인 상태로 폴딩 인터렉션이 감지된 경우, 제어부(290)는 큐브를 수평방향으로 회전하는 것과 같이, "A 화면 -> B 화면 -> C 화면-> D 화면 -> A 화면 -> ....." 의 순서로 화면을 전환할 수 있다. 또한, 도 46b에 도시된 바와 같이, 힌지부(310)가 수평인 상태로 폴딩 인터렉션이 감지된 경우, 제어부(290)는 큐브를 수직방향으로 회전하는 것과 같이, "A 화면 -> B 화면 -> C 화면-> D 화면 -> A 화면 -> ....." 의 순서로 화면을 전환할 수 있다.
이하에서는 도 47 및 도 48을 참조하여 본 발명의 일 실시예에 따른, 사용자 단말 장치(200)의 디스플레이 방법을 설명하기로 한다. 도 47은 본 발명의 일 실시예에 따른, 대각선 인터렉션에 따른 사용자 단말 장치(100)의 디스플레이 방법을 설명하기 위한 흐름도이다.
우선, 사용자 단말 장치(100)는 제1 화면을 디스플레이한다(S4710). 이때, 제1 화면은 정사각형 형태일 수 있다.
그리고, 사용자 단말 장치(100)는 제1 화면의 꼭지점들 중 하나로부터 대각선 방향으로 드래그하는 사용자 인터렉션이 감지되었는지 여부를 판단한다(S4720).
대각선 방향으로 드래그하는 사용자 인터렉션이 감지된 경우(S4720-Y), 사용자 단말 장치(100)는 사용자 인터렉션이 감지된 꼭지점 영역에 제2 화면을 디스플레이한다(S4730). 이때, 사용자 단말 장치(100)는 사용자 인터렉션의 드래그 량에 따라 제2 화면의 크기를 변경할 수 있으며, 제2 화면의 크기에 따라 제2 화면에 디스플레이되는 정보의 량을 변경할 수 있다. 또한, 사용자 단말 장치(100)는 사용자 인터렉션이 감지된 꼭지점의 위치에 따라 상이한 유형의 컨텐츠를 제2 화면에 디스플레이할 수 있다.
도 48은 본 발명의 일 실시예에 따른, 그리드 화면을 디스플레이하는 사용자 단말 장치(100)의 디스플레이 방법을 설명하기 위한 흐름도이다.
우선, 사용자 단말 장치(100)는 복수의 정사각형 셀을 포함하는 그리드 화면에서 복수의 오브젝트를 디스플레이한다(S4810). 이때, 사용자 단말 장치(100)는 정사각형 형태의 디스플레이 패널을 구비할 수 있다.
그리고, 사용자 단말 장치(100)는 복수의 오브젝트 중 제1 오브젝트에 사용자 인터렉션이 감지되었는지 여부를 판단한다(S4820). 이때, 사용자 인터렉션은 드래그 인터렉션일 수 있다.
사용자 인터렉션이 감지된 경우(S4820-Y), 사용자 단말 장치(100)는 사용자 인터렉션의 드래그 거리 및 방향에 따라 제1 오브젝트가 디스플레이되는 정사각형 셀의 개수를 조절하여 제1 오브젝트의 크기를 조절한다(S4830). 구체적으로, 제1 오브젝트를 터치한 후, 제1 오브젝트의 외부 방향으로 드래그하는 제1 사용자 인터렉션이 감지된 경우, 사용자 단말 장치(100)는 제1 오브젝트가 디스플레이되는 정사각형 셀 영역의 개수를 증가시켜 상기 제1 오브젝트의 크기를 증가시킬 수 있다. 그러나, 제1 오브젝트를 터치한 후, 제1 오브젝트의 내부 방향으로 드래그하는 제2 사용자 인터렉션이 감지된 경우, 사용자 단말 장치(100)는 제1 오브젝트가 디스플레이되는 정사각형 셀 영역의 개수를 감소시켜 제1 오브젝트의 크기를 감소시킬 수 있다.
<사용자 인터렉션에 따른 디스플레이 방향 변경>
본 발명의 일 실시예에 따르면, 사용자 단말 장치(200)는 적어도 두 개의 영역에 적어도 두 개의 화면을 각각 디스플레이 하는 디스플레이부(230), 제1 사용자 인터렉션을 감지하는 감지부(280) 및 감지부(280)에서 감지된 제1 사용자 인터렉션에 기초하여 적어도 두 개의 화면을 각각 회전시켜 적어도 두 개의 화면의 디스플레이 방향이 변경되도록 디스플레이부(230)를 제어하는 제어부(290)를 포함할 수 있다.
또한 제어부(290)는, 적어도 두 개의 영역 중 하나의 영역에서 제2 사용자 인터렉션을 감지하고, 제2 사용자 인터렉션에 기초하여 하나의 영역에 디스플레이 되는 화면의 디스플레이 방향을 변경할 수 있다.
제1 사용자 인터렉션은 진동 인터렉션을 포함하며, 사용자 단말 장치(200)는 진동 인터렉션이 발생하는 위치에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정 할 수 있다.
또한 제1 사용자 인터렉션은 터치 인터렉션을 포함하며, 제어부(290)는 터치 인터렉션의 방향을 결정하고, 터치 인터렉션의 방향에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정 할 수 있다.
또한 제어부(290)는 적어도 두 개의 화면의 디스플레이 방향이 변경되어도 적어도 두 개의 화면의 배치 형태가 고정되도록 제어할 수 있다.
도49a 내지 도50d는 본 발명의 일 실시 예에 따른, 사용자 인터렉션에 따라 화면의 디스플레이 방향이 변경되는 것을 도시한 도면이며, 도58은 본 발명의 일 실시예에 따른, 사용자 인터렉션에 따라 디스플레이 방향을 변경하는 사용자 단말 장치(200)의 디스플레이 방법을 설명하기 위한 흐름도이다.
사용자 단말장치(200)는 디스플레이부(230)의 적어도 두 개의 영역에 적어도 두 개의 화면을 각각 디스플레이 할 수 있다(단계 S5801). 구체적으로 도 49a에 도시된 바와 같이, 디스플레이부(230)가 4개의 영역으로 분할될 수 있다. 4개의 영역은 정사각형 셀일 수 있다. 4개로 분할된 영역 각각에는 화면(4901, 4902, 4903, 4904)이 디스플레이될 수 있다. 즉, 4개로 분할된 각각의 영역에는 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4904)가 디스플레이될 수 있다.
디스플레이 방향은 디스플레이부 하단(4905)이며, 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4904)은 디스플레이 방향을 기준으로 디스플레이되어 있다. 디스플레이 방향(Orientation)은 제1 화면, 제2 화면, 제3 화면 및 제4 화면이 디스플레이될 때 상하좌우의 기준이 될 수 있다.
디스플레이 방향이 디스플레이부(230)의 하단(4905)일 경우에는 사용자가 디스플레이부(230)의 하단(4905)에서 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4904)을 바라보는 것을 기준으로 디스플레이될 수 있다. 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4904)의 상단은 디스플레이부(230)의 상단 방향이 될 수 있고, 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4904)의 하단은 디스플레이부(230)의 하단 방향이 될 수 있다.
디스플레이 방향이 디스플레이부(230)의 상단일 경우에는 사용자가 디스플레이부(230)의 상단에서 제1 화면, 제2 화면, 제3 화면 및 제4 화면을 바라보는 것을 기준으로 디스플레이될 수 있다. 제1 화면, 제2 화면, 제3 화면 및 제4 화면의 상단은 디스플레이부(230)의 하단 방향이 될 수 있고, 제1 화면, 제2 화면, 제3 화면 및 제4 화면의 하단은 디스플레이부(230)의 상단 방향이 될 수 있다.
디스플레이 방향이 디스플레이부(230)의 좌측(4916)일 경우에는 사용자가 디스플레이부(230)의 좌측(4916)에서 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4911, 4912, 4913, 4914)을 바라보는 것을 기준으로 디스플레이될 수 있으며 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4911, 4912, 4913, 4914)의 상단은 디스플레이부(230)의 우측 방향, 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4911, 4912, 4913, 4914)의 하단은 디스플레이부(230)의 좌측 방향이 될 수 있다.
디스플레이 방향이 디스플레이부(230)의 우측일 경우에는 사용자가 디스플레이부(230)의 우측에서 제1 화면, 제2 화면, 제3 화면 및 제4 화면을 바라보는 것을 기준으로 디스플레이될 수 있으며 제1 화면, 제2 화면, 제3 화면 및 제4 화면의 상단은 디스플레이부(230)의 좌측 방향, 제1 화면, 제2 화면, 제3 화면 및 제4 화면의 하단은 디스플레이부(230)의 좌측 방향이 될 수 있다.
사용자 단말 장치(200)는 제1 사용자 인터렉션을 감지할 수 있다(단계 S5803). 제1 사용자 인터렉션은 진동 인터렉션일 수 있다. 또한 제1 사용자 인터렉션은 터치 인터렉션일 수 있다.
4개의 영역에 제1 화면, 제2 화면, 제3 화면, 제4 화면(4921, 4922, 4923, 4925)가 디스플레이 방향을 디스플레이부 하단(4905)을 기준으로 디스플레이되어 있는 상태에서, 사용자가 디스플레이 방향을 화면 좌측(4916)으로 변경시키는 제1 사용자 인터렉션이 감지되면, 사용자 단말 장치(200)는 제1 사용자 인터렉션을 감지하고, 제1 사용자 인터렉션에 기초하여 적어도 두 개의 화면을 각각 회전시켜 적어도 두 개의 화면의 디스플레이 방향을 변경할 수 있다. 즉, 4개의 영역에 디스플레이된 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4903)은 시계 방향으로 90도 회전되어 디스플레이 방향이 변경되어 디스플레이될 수 있다.
두번째 도면에서 디스플레이부의 분할된 4개의 영역에는 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4911, 4912, 4913, 4914)이 첫번째 도면 대비 시계 방향으로 90도 회전되어 디스플레이되어 있다. 각각의 영역은 정사각형 셀일 수 있다. 제어부(290)는 디스플레이 방향을 기준으로 첫번째 도면의 각각의 영역에 디스플레이되어 있는 제1화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4904)을 셀 단위로 회전시킬 수 있다. 즉, 제어부(290)는 디스플레이부(230)에 디스플레이된 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4901, 4902, 4903, 4904)을 각각 별도의 디스플레이부처럼 간주하고 셀 단위로 화면을 회전 시킬 수 있다.
디스플레이부(230)에 디스플레이되어 있는 제1화면(4901)은 시계 방향으로 90도 회전되어 디스플레이되고, 제2 화면(4902)은 시계 방향으로 90도 회전되어 디스플레이되고, 제3 화면(4903)은 시계 방향으로 90도 회전되어 디스플레이되고, 제4 화면(4904)은 시계 방향으로 90도 회전되어 디스플레이된다.
도 49b는 디스플레이부(230)가 4개의 영역으로 분할된 것을 도시한 것이다. 4개의 영역은 정사각형 셀일 수 있다. 각각의 정사각형 셀에는 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4921, 4922, 4923, 4924)이 디스플레이될 수 있다.
디스플레이 방향은 디스플레이부(230)의 하단(4925)이며, 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4921, 4922, 4923, 4924)은 디스플레이 방향을 기준으로 디스플레이될 수 있다. 각각의 정사각형 셀에 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4921, 4922, 4923, 4924)이 디스플레이되어 있는 상태에서, 사용자가 디스플레이 방향을 디스플레이부(230) 좌측(4935)으로 변경시키면, 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4931, 4932, 4933, 4934)은 시계 방향으로 90도 회전되어 디스플레이될 수 있다
제어부(290)는 디스플레이 방향을 기준으로 각각의 정사각형 셀에 디스플레이되어 있는 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4921, 4922, 4923, 4924)을 셀 단위로 회전시키도록 디스플레이부(230)를 제어할 수 있다. 즉, 제어부(290)는 디스플레이부에 디스플레이된 제1 화면, 제2 화면, 제3 화면 및 제4 화면(4921, 4922, 4923, 4924)을 각각 별도의 디스플레이부처럼 간주하고 셀 단위로 화면을 회전시키도록 디스플레이부(230)를 제어할 수 있다.
디스플레이부(230)에 디스플레이되어 있는 제1 화면(4921)은 시계 방향으로 90도 회전되어 디스플레이되고, 제2 화면(4922)은 시계 방향으로 90도 회전되어 디스플레이되고, 제3 화면(4923)는 시계 방향으로 90도 회전되어 디스플레이되고, 제4 화면(4924)은 시계 방향으로 90도 회전되어 디스플레이된다.
도 49c에는 디스플레이부(230)에 크기가 다른 1개의 정사각형 셀과 크기가 동일한 5개의 정사각형 셀이 분할되어 디스플레이되어 있다. 각각의 정사각형 셀에는 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)이 디스플레이되어 있다. 디스플레이 방향은 디스플레이부(230)의 하단(4947)이며, 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)은 디스플레이 방향을 기준으로 디스플레이되어 있다.
첫번째 도면의 디스플레이부(230)에서 각각의 정사각형 셀에 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)이 디스플레이되어 있는 상태에서, 사용자가 디스플레이 방향을 디스플레이부(230)의 좌측(4957)으로 변경시키면, 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)은 시계 방향으로 90도 회전되어 디스플레이될 수 있다.
두번째 도면의 디스플레이부(230)에서 각각의 정사각형 셀에는 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4951, 4952, 4953, 4954, 4955, 4956)이 시계 방향으로 90도 회전되어 디스플레이되어 있다.
제어부(290)는 디스플레이 방향을 기준으로 각각의 정사각형 셀에 디스플레이되어 있는 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)을 셀 단위로 회전시키도록 디스플레이부(230)를 제어할 수 있다. 즉, 제어부(290)는 디스플레이부(230)에 디스플레이된 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)을 각각 별도의 디스플레이부(230)처럼 간주하고 셀 단위로 화면을 회전시키도록 디스플레이부(230)를 제어할 수 있다.
제1 화면(4941)은 시계 방향으로 90도 회전되어 디스플레이되고, 제2 화면(4942)은 시계 방향으로 90도 회전되어 디스플레이되고, 제3 화면(4943)은 시계 방향으로 90도 회전되어 디스플레이되고, 제4 화면(4944)은 시계 방향으로 90도 회전되어 디스플레이되고, 제5 화면(4945)은 시계 방향으로 90도 회전되어 디스플레이되고, 제6 화면(4946)은 시계 방향으로 90도 회전되어 디스플레이된다.
또한 적어도 두 개의 화면의 디스플레이 방향이 변경되어도 적어도 두 개의 화면의 배치 형태는 고정될 수 있다. 즉, 제어부(290)는 디스플레이부(230)에 디스플레이된 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)을 각각 별도의 디스플레이부처럼 간주하고 셀 단위로 화면을 회전시키므로, 디스플레이부(230)에 디스플레이된 제1 화면, 제2 화면, 제3 화면, 제4 화면, 제5 화면 및 제6 화면(4941, 4942, 4943, 4944, 4945, 4946)의 배치 형태는 변경되지 않도록 제어할 수 있다.
예를 들면 도 49c의 첫번째 도면에서 디스플레이부(230)에 디스플레이된 디스플레이 화면 전체의 배치 형태(Layout)는 제1 화면(4941)을 기준으로 시계 방향으로 제2 화면(4942), 제3 화면(4943), 제4 화면(4944), 제5 화면(4945) 및 제6 화면(4946)이 배치되어 있다. 사용자의 제1 인터렉션으로 인해 디스플레이 방향이 디스플레이부(230)의 하단(4947)에서 디스플레이부(230)의 좌측(4957)으로 변경되어도 디스플레이 화면 전체의 배치 형태는 변경되지 않고 유지될 수 있다. 즉, 디스플레이 방향 변경전과 마찬가지로 디스플레이 화면 전체의 배치 형태는 제1화면(4951)을 기준으로 시계방향으로 제2 화면(4952), 제3 화면(4953), 제4 화면(4954), 제5 화면(4955) 및 제6 화면(4956)이 배치될 수 있다.
사용자 단말 장치(200)는 디스플레이부(230)의 적어도 두 개의 영역에 적어도 두 개의 화면이 디스플레이된 상태에서, 적어도 두 개의 영역 중 하나의 영역에서 제2 사용자 인터렉션을 감지하고(단계 S5807), 제2 사용자 인터렉션에 기초하여 하나의 영역에 디스플레이 되는 화면의 디스플레이 방향을 변경할 수 있다(단계S5809).
도 50a는 디스플레이부(230)가 4개의 영역으로 분할된 것을 도시한 것이다. 각각의 영역은 정사각형 셀일 수 있다. 디스플레이부(230)가 4개의 정사각형 셀로 분할되고, 각각의 정사각형 셀에 화면이 디스플레이된 상태에서 하나의 셀에서 제2 사용자 인터렉션이 감지된 경우, 제2 사용자 인터렉션에 기초하여 제2 사용자 인터렉션이 감지된 셀만 디스플레이 방향이 변경될 수 있다. 디스플레이 방향은 제2 사용자 인터렉션에 따라 변경될 수 있다.
예를 들면 첫번째 도면에서 디스플레이부(230)가 4개의 영역으로 분할되고 , 각각의 분할된 영역에는 제1 화면, 제2 화면, 제3 화면 및 제4 화면(5001, 5002, 5003, 5004)이 표시되어 있다. 디스플레이 방향은 디스플레이부(230)의 하단(5005)이다. 각각의 분할된 영역은 정사각형 셀일 수 있다. 이 상태에서 복수의 분할된 영역 중 제2 영역에서 제2 사용자 인터렉션이 감지되면 제2 사용자 인터렉션이 감지된 제2 화면(5002)은 회전되어 디스플레이될 수 있다.
제2 화면의 회전 방향은 제2 사용자 인터렉션 방향에 기초하여 변경될 수 있다. 제2 사용자 인터렉션 방향에 기초하여 제2 화면의 회전 방향 또는 제2 화면의 디스플레이 방향이 변경되는 것에 대해서는 도 51a 내지 도52d를 참조하여 상세히 설명될 것이다.
두번째 도면은 첫번째 도면에서 제2 화면(5002)만 디스플레이 방향이 변경된 것을 도시한 것이다. 디스플레이부(230)는 4개의 영역으로 분할되어 있다. 각각의 영역은 정사각형 셀일 수 있다. 각각의 분할된 영역에는 제1화면, 제2 화면, 제3 화면 및 제4 화면(5011, 5012, 5013, 5014)이 디스플레이되어 있다. 제1 화면, 제3 화면 및 제4 화면(5011, 5013, 5014)은 디스플레이 방향이 디스플레이부(230)의 하단(5015)을 기준으로 디스플레이되고, 제2 화면(5012)은 디스플레이 방향이 디스플레이부 상단(5016)을 기준으로 디스플레이된다.
도 50b는 디스플레이부(230)가 4개의 영역으로 분할된 것을 도시한 것이다. 각각의 영역은 정사각형 셀일 수 있다. 디스플레이부(230)가 4개의 정사각형 셀로 분할되고, 각각의 정사각형 셀에 화면이 디스플레이된 상태에서 하나의 셀에서 제2 사용자 인터렉션이 감지된 경우, 제2 사용자 인터렉션에 기초하여 제2 사용자 인터렉션이 감지된 셀만 디스플레이 방향이 변경될 수 있다. 디스플레이 방향은 제2 사용자 인터렉션에 따라 변경될 수 있다.
예를 들면 첫번째 도면에서 디스플레이 화면이 4개의 영역으로 분할되고, 각각의 분할된 영역에는 제1 화면, 제2 화면, 제3화면 및 제4 화면(5021, 5022, 5023, 5024)이 디스플레이되어 있다. 디스플레이 방향은 디스플레이부(230)의 하단(5025)이다.
각각의 분할된 영역은 정사각형 셀일 수 있다. 이 상태에서 복수의 분할된 영역 중 제2 영역에서 제2 사용자 인터렉션이 감지되면 제2 사용자 인터렉션이 감지된 제2 화면(5022)은 회전되어 디스플레이될 수 있다.
제2 화면(5022)의 회전 방향은 제2 사용자 인터렉션에 방향에 기초하여 변경될 수 있다. 제2 사용자 인터렉션 방향에 기초하여 화면의 회전 방향 또는 제2 화면의 디스플레이 방향이 변경되는 것에 대해서는 도51a 내지 도 52d를 참조하여 상세히 설명될 것이다.
두번째 도면은 첫번째 도면에서 제2 화면(5022)만 디스플레이 방향이 변경된 것을 도시한 것이다. 디스플레이부(230)는 4개의 영역으로 분할되어 있다. 각각의 영역은 정사각형 셀일 수 있다. 각각의 분할된 영역에는 제1 화면, 제2 화면, 제3 화면 및 제4 화면(5031, 5032, 5033, 5034)이 디스플레이되어 있다. 제1 화면, 제3 화면, 제4 화면(5031, 5033, 5034)은 디스플레이 방향이 디스플레이부(230)dml 하단(5035)을 기준으로 디스플레이되고, 제2 화면(5032)은 디스플레이 방향이 디스플레이부)230의 상단(5036)을 기준으로 디스플레이된다.
<화면 오프 상태에서 사용자 인터렉션에 따른 디스플레이 방향 변경>
도51a 내지 도52d는 디스플레이 화면이 오프(Off)된 상태에서 사용자 인터렉션을 감지하고 사용자 인터렉션에 따라 디스플레이 화면이 디스플레이되는 것을 도시한 도면이다. 구체적으로 사용자 인터렉션의 방향에 따라 디스플레이 화면의 디스플레이 방향이 변경되어 디스플레이되는 실시예를 도시한 도면이며, 도59는 사용자 단말의 디스플레이 화면 오프 상태에서 사용자 인터렉션을 감지하고, 사용자 인터렉션에 따라 디스플레이 방향을 결정하고 디스플레이 화면을 온 상태로 전환하는 사용자 단말 장치(200)의 디스플레이 방법을 설명하기 위한 흐름도이다.
사용자 단말 장치(200)는 화면 오프 상태에서 사용자 인터렉션을 감지할 수 있다(단계 S5901). 즉, 사용자 단말 장치(200)의 디스플레이부(230)에 화면이 오프된 상태에서 사용자 단말 장치(200)는 사용자 인터렉션을 감지할 수 있다. 사용자 단말 장치(200)는 디스플레이 화면이 오프되어도 감지부(280)의 전원은 온 상태를 유지할 수 있다. 감지부(280)에서 사용자 인터렉션이 감지되면, 사용자 단말 장치(200)는 사용자 인터렉션에 기초하여 디스플레이 화면의 디스플레이 방향을 결정하고, 결정된 디스플레이 방향으로 화면을 온 상태로 전환할 수 있다(단계 S5903).
도 51a에서 디스플레이 화면이 오프된 상태에서 사용자가 손가락을 화면에 접촉하고, 접촉을 유지하면서 손가락을 디스플레이 화면 하단에서 상단으로 이동시키면, 감지부(280)는 디스플레이 화면상에서 하단에서 상단으로 향하는 사용자 인터렉션을 감지할 수 있다. 즉, 감지부(280)는 디스플레이 화면상에서 상단 방향으로 향하는 드래그 인터렉션을 감지할 수 있다.
사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시키고, 사용자 인터렉션이 감지됨에 따라 감지부(280)에서 출력된 신호에 기초하여 사용자 인터렉션의 방향을 결정할 수 있다. 이때, 사용자 인터렉션은 드래그 제스처일 수 있다. 또한, 사용자 인터렉션은 플릭 제스처일 수 있다. 제어부(290)는 사용자 인터렉션의 방향을 결정하고, 사용자 인터렉션의 방향에 기초하여 디스플레이 화면에 오브젝트(5111, 5112)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
예를 들면, 디스플레이 화면이 오프된 상태에서 디스플레이 화면상에서 드래그 인터렉션(5102)이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시키고, 오브젝트(5111, 5112)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 용자 인터렉션 방향이 상단 방향이면, 제어부(290)는 사용자가 디스플레이 화면 상단에서 하단 방향으로 화면을 보는 것을 기준으로 하여 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 오브젝트(5111,5112)의 디스플레이 방향은 디스플레이부(230)의 상단 방향으로 디스플레이될 수 있다.
도 51b에서 디스플레이 화면이 오프(Off)된 상태에서 사용자가 손가락을 디스플레이 화면에 접촉하고, 접촉을 유지하면서 손가락을 상단에서 하단으로 이동시키면, 감지부(280)는 디스플레이 화면상에서 하단으로 향하는 사용자 인터렉션을 감지할 수 있다.
사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시킬 수 있다. 또한, 제어부(290)는 사용자 인터렉션이 감지됨에 따라 감지부(280)에서 출력된 신호에 기초하여 사용자 인터렉션의 방향을 결정할 수 있다. 이때, 사용자 인터렉션은 드래그 제스처일 수 있다. 또한 사용자 인터렉션은 플릭 제스처일 수 있다. 제어부(290)는 사용자 인터렉션의 방향을 결정하고, 사용자 인터렉션의 방향에 기초하여 디스플레이 화면에 오브젝트(5131, 5132)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
예를 들면, 디스플레이 화면이 오프된 상태에서 디스플레이 화면상에 상단에서 하단으로 향하는 드래그 인터렉션(5122)이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시키고, 디스플레이 화면에 오브젝트(5131, 5132)를 디스플레이하도록 디스플레이부(23)를 제어할 수 있다. 이때, 사용자 인터렉션의 방향이 상단에서 하단으로 향하면, 제어부(290)는 사용자가 디스플레이 화면을 하단에서 상단 ?향으로 보는 것을 기준으로 하여 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.즉, 오브젝트(5131, 5132)의 디스플레이 방향은 디스플레이부(230)의 하단 방향을 기준으로 디스플레이될 수 있다.
도 51c에서는 사용자 단말 장치(200)가 사용자 단말 장치(200)의 가로축 또는 세로축을 기준으로 45도 회전하여 화면을 다이아몬드 형상으로 디스플레이하고 있다.
디스플레이 화면이 오프된 상태에서 사용자가 손가락을 화면에 접촉하고, 접촉을 유지하면서 손가락을 좌측에서 우측으로 이동시키면, 감지부(280)는 디스플레이 화면상에서 좌에서 우로 향하는 사용자 인터렉션을 감지할 수 있다.
디스플레이 화면상에서 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시킬 수 있다. 또한, 제어부(290)는 사용자 인터렉션이 감지됨에 따라 감지부(280)에서 출력된 신호에 기초하여 사용자 인터렉션의 방향을 결정할 수 있다. 또한, 제어부(290)는 감지부(280)를 통해 사용자 단말 장치의 회전 상태를 판단할 수 있다.
사용자 인터렉션은 드래그 제스처일 수 있다. 또한 사용자 인터렉션은 플릭 제스처일 수 있다. 제어부(290)는 사용자 인터렉션의 방향을 결정하고, 사용자 인터렉션의 방향 및 사용자 단말 장치(200)의 회전상태에 기초하여 디스플레이 화면에 오브젝트(5151, 5152)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 사용자 단말 장치(200)가 가로 또는 세로를 기준으로 45도 회전되어 있는 상태에서 사용자 인터렉션을 감지하면, 제어부(290)는 사용자 인터렉션 및 사용자 단말의 회전 각도에 기초하여 디스플레이 화면에 디스플레이되는 오브젝트(5151, 5152)의 디스플레이 방향을 결정할 수 있다.
예를 들면, 디스플레이 화면이 오프된 상태에서 디스플레이 화면상에 좌에서 우로 드래그하는 사용자 인터렉션(5142)이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시키고, 오브젝트(5151, 5152)를 디스플레이할 수 있다. 이때, 사용자 인터렉션의 방향이 좌에서 우로 향하면, 제어부(290)는 사용자가 디스플레이 화면을 우측에서 좌측 방향을 보는 것을 기준으로 하여 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이 때 오브젝트(5151, 5152)의 디스플레이 방향은 우측 방향을 기준으로 디스플레이될 수 있다.
도 51d에서는 사용자 단말 장치(200)가 사용자 단말 장치(200)의 가로축 또는 세로축을 기준으로 45도 회전하여 디스플레이 화면이 다이아몬드 형상으로 디스플레이하고 있다.
디스플레이 화면이 오프된 상태에서 사용자가 손가락을 화면에 접촉하고, 접촉을 유지하면서 손가락을 상단에서 하단으로 이동시키면, 감지부(280)는 디스플레이 화면상에서 상단에서 하단으로 향하는 사용자 인터렉션을 감지할 수 있다.
디스플레이 화면상에서 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시킬 수 있다. 또한, 제어부(290)는 사용자 인터렉션이 감지됨에 따라 감지부(280)에서 출력된 신호에 기초하여 사용자 인터렉션의 방향을 결정할 수 있다. 이때, 사용자 인터렉션은 드래그 제스처일 수 있다. 또한 사용자 인터렉션은 플릭 제스처일 수 있다. 제어부(290)는 사용자 인터렉션의 방향을 결정하고, 사용자 인터렉션의 방향 및 사용자 단말의 회전상태에 기초하여 디스플레이 화면에 오브젝트(5171, 5172)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 사용자 단말 장치(200)가 가로축 또는 세로축을 기준으로 45도 회전되어 있는 상태에서 사용자 인터렉션을 감지하면, 제어부(290)는 사용자 인터렉션 및 사용자 단말의 회전 각도에 기초하여 디스플레이 화면에 디스플레이되는 오브젝트의 디스플레이 방향을 결정할 수 있다.
예를 들면, 디스플레이 화면이 오프된 상태에서 디스플레이 화면상에 상단에서 하단으로 드래그하는 사용자 인터렉션(5162)이 감지되면, 제어부(290)는 디스플레이 화면을 온(On) 시키고, 오브젝트(5171, 5172)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 사용자 인터렉션의 방향이 상단에서 하단으로 향하면, 제어부(290)는 사용자가 디스플레이 화면을 상단에서 하단 방향을 보는 것을 기준으로 하여 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 오브젝트(5171, 5172)의 디스플레이 방향은 디스플레이 화면 하단을 기준으로 디스플레이될 수 있다. 또한
도 52a를 참조하면 디스플레이 화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 상단 또는 상단에 근접한 부분(5201)을 두드림에 따라 사용자 단말 장치(200)가 진동 인터렉션을 감지하고, 진동 인터렉션이 감지된 위치에 기초하여 화면을 온 시키고, 디스플레이 방향을 결정하여 디스플레이 화면에 오브젝트(5211, 5212)를 디스플레이하는 것이 도시되어 있다.
사용자가 사용자 단말 장치(200)를 두드리거나 또는 사용자 단말 장치(200)에 근접한 지점을 두드리면, 감지부(280)는 진동 인터렉션을 감지하고 이에 대응하는 신호를 출력할 수 있다. 제어부(290)는 신호를 수신하여 진동 인터렉션이 감지된 위치 및 방향을 결정할 수 있다. 진동 인터렉션은 사용자 단말 장치(200)에서 진동을 감지하고 이를 처리하는 것일 수있다.
진동 인터렉션이 감지되는 위치는 사용자 단말 장치(200)의 상단, 하단, 좌측, 우측, 상단우측 코너, 상단좌측 코너, 하단우측 코너 및 하단좌측 코너 중 적어도 어느 한 곳이 될 수 있다
제어부(290)는 진동 인터렉션이 감지되는 위치에 기초하여 디스플레이 화면의 디스플레이 방향을 결정할 수 있다. 제어부(290)는 진동 인터렉션이 감지됨에 따라 디스플레이 화면을 온 시키고 디스플레이 화면에 오브젝트(5211, 5212)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 제어부(290)는 진동 인터렉션이 감지된 위치에 기초하여 오브젝트(5211, 5212)의 디스플레이 방향을 결정할 수 있다.
예를 들면 사용자가 디스플레이 화면이 오프된 상태에서 사용자 단말 장치(200)의 상단 또는 상단에 근접한 지점을 두드리면, 제어부(290)는 감지부(280)를 통해 디스플레이 화면의 상단에서 감지된 진동 인터렉션을 감지하고, 디스플레이 화면을 온(On) 시키고, 오브젝트(5211, 5212)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)의 상단에서 진동 인터렉션이 감지되면, 제어부(290)는 사용자가 디스플레이 화면을 상단에서 하단 방향을 보는 것을 기준으로 하여 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 오브젝트(5211, 5212)의 디스플레이 방향은 상단 방향을 기준으로 디스플레이될 수 있다.
도 52b를 참조하면 디스플레이 화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 하단 또는 하단에 근접한 부분(5231)을 두드림에 따라 사용자 단말 장치(200)가 진동 인터렉션을 감지하고, 진동 인터렉션이 감지된 위치에 기초하여 화면을 온 시키고, 디스플레이 방향을 결정하여 디스플레이 화면에 오브젝트(5241, 5242)를 디스플레이하는 것이 도시되어 있다.
사용자가 사용자 단말 장치(200)를 두드리거나 또는 사용자 단말 장치(200)에 근접한 지점을 두드리면, 감지부(280)는 진동 인터렉션을 감지하고 이에 대응하는 신호를 출력할 수 있다. 제어부(290)는 상기 신호를 수신하여 진동 인터렉션이 감지된 위치 및 방향을 결정할 수 있다. 진동 인터렉션은 사용자 단말 장치(200)에서 진동을 감지하고 이를 처리하는 것일 수있다.
진동 인터렉션이 감지되는 위치는 사용자 단말 장치(200)의 상단, 하단, 좌측, 우측, 상단우측 코너, 상단좌측 코너, 하단우측 코너 및 하단좌측 코너 중 적어도 어느 한 곳이 될 수 있다
제어부(290)는 진동 인터렉션이 감지되는 위치에 기초하여 디스플레이 화면의 디스플레이 방향을 결정할 수 있다. 그리고, 제어부(290)는 진동 인터렉션이 감지됨에 따라 디스플레이 화면을 온 시키고 디스플레이 화면에 오브젝트(5241, 5242)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 제어부(290)는 진동 인터렉션이 감지된 위치에 기초하여 오브젝트(5241, 5242)의 디스플레이 방향을 결정할 수 있다.
예를 들면, 사용자가 디스플레이 화면이 오프된 상태에서 사용자 단말 장치(200)의 하단 또는 하단에 근접한 지점을 두드리면, 제어부(290)는 감지부(280)를 통해 진동 인터렉션을 감지하고, 디스플레이 화면을 온(On) 시키고, 오브젝트(5241, 5242)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 사용자 단말 장치(200)의 하단에서 진동 인터렉션이 감지되면, 제어부(290)는 사용자가 디스플레이 화면을 하단에서 상단 방향을 보는 것을 기준으로 하여 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 오브젝트(5241, 5242)의 디스플레이 방향은 하단 방향을 기준으로 디스플레이될 수 있다.
도 52c를 참조하면 사용자 단말 장치(200)가 사용자 단말 장치(200)의 가로축 또는 세로축을 기준으로 45도 회전하여 디스플레이 화면이 다이아몬드 형상으로 디스플레이되어 있다. 디스플레이 화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 하단 또는 하단에 근접한 부분(5251)을 두드림에 따라 사용자 단말 장치(200)에서 진동 인터렉션을 감지하고, 진동 인터렉션이 감지된 위치에 기초하여 화면을 온 시키고, 디스플레이 방향을 결정하여 디스플레이 화면에 오브젝트(5261, 5262)를 디스플레이하는 것이 도시되어 있다.
사용자가 사용자 단말 장치(200)를 두드리거나 또는 사용자 단말 장치(200)에 근접한 지점을 두드리면, 감지부(280)는 진동 인터렉션을 감지하고 이에 대응하는 신호를 출력할 수 있다. 제어부(290)는 신호를 수신하여 진동 인터렉션이 감지된 위치 및 방향을 결정할 수 있다. 진동 인터렉션은 사용자 단말 장치(200)에서 진동을 감지하고 이를 처리하는 것일 수있다.
진동 인터렉션이 감지되는 위치는 사용자 단말 장치(200)의 상단, 하단, 좌측, 우측, 상단우측 코너, 상단좌측 코너, 하단우측 코너 및 하단좌측 코너 중 적어도 어느 한 곳이 될 수 있다
제어부(290)는 진동 인터렉션이 감지되는 위치에 기초하여 디스플레이 화면의 디스플레이 방향을 결정할 수 있다.
제어부(290)는 진동 인터렉션이 감지됨에 따라 디스플레이 화면을 온 시키고 디스플레이 화면에 오브젝트(5261, 5262)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 제어부(290)는 진동 인터렉션이 감지된 위치에 기초하여 오브젝트(5261, 5262)의 디스플레이 방향을 결정할 수 있다.
예를 들면, 사용자가 디스플레이 화면이 오프된 상태에서 사용자 단말 장치(200)의 하단 또는 하단에 근접한 지점을 두드리면, 제어부(290)는 감지부(280)를 통해 진동 인터렉션을 감지하고, 디스플레이 화면을 온(On) 시키고, 오브젝트(5261, 5262)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이때, 사용자 단말 장치(200)의 하단에서 진동 인터렉션이 감지되면, 제어부(290)는 사용자가 디스플레이 화면을 하단에서 상단 방향을 보는 것을 기준으로 하여 오브젝트를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 오브젝트(5261, 5262)의 디스플레이 방향은 하단 방향을 기준으로 디스플레이될 수 있다.
52d를 참조하면 사용자 단말 장치(200)가 사용자 단말 장치(200)의 가로축 또는 세로축을 기준으로 45도 회전하여 디스플레이 화면이 다이아몬드 형상으로 디스플레이되어 있다. 디스플레이 화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 좌측 또는 좌측에 근접한 부분(5271)을 두드림에 따라 사용자 단말 장치(200)에서 진동 인터렉션을 감지하고, 진동 인터렉션이 감지된 위치에 기초하여 화면을 온 시키고, 디스플레이 방향을 결정하여 디스플레이 화면에 오브젝트(5281, 5282)를 디스플레이하는 것이 도시되어 있다.
사용자가 사용자 단말 장치(200)를 두드리거나 또는 사용자 단말 장치(200)에 근접한 지점을 두드리면, 감지부(280)는 진동 인터렉션을 감지하고 이에 대응하는 신호를 출력할 수 있다. 제어부(290)는 신호를 수신하여 진동 인터렉션이 감지된 위치 및 방향을 결정할 수 있다. 진동 인터렉션은 사용자 단말 장치(200)에서 진동을 감지하고 이를 처리하는 것일 수 있다.
진동 인터렉션이 감지되는 위치는 사용자 단말 장치(200)의 상단, 하단, 좌측, 우측, 상단우측 코너, 상단좌측 코너, 하단우측 코너 및 하단좌측 코너 중 적어도 어느 한 곳이 될 수 있다
제어부(290)는 진동 인터렉션이 감지되는 위치에 기초하여 디스플레이 화면의 디스플레이 방향을 결정할 수 있다.
제어부(290)는 진동 인터렉션이 감지됨에 따라 디스플레이 화면을 온 시키고 디스플레이 화면에 오브젝트(5281, 5282)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 제어부(290)는 진동 인터렉션이 감지된 위치에 기초하여 오브젝트(5281, 5282)의 디스플레이 방향을 결정할 수 있다.
예를 들면, 사용자가 디스플레이 화면이 오프된 상태에서 사용자 단말 장치(200)의 좌측 또는 좌측에 근접한 지점을 두드리면, 제어부(290)는 감지부(280)를 통해 진동 인터렉션을 감지하고, 디스플레이 화면을 온(On) 시키고, 오브젝트(5281, 5282)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.이때, 사용자 단말 장치(200)의 하단에서 진동 인터렉션이 감지되면, 제어부(290)는 사용자가 디스플레이 화면을 하단에서 상단 방향을 보는 것을 기준으로 하여 오브젝트(5281,5282)를 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 즉, 오브젝트(5281, 5282)의 디스플레이 방향은 하단 방향을 기준으로 디스플레이될 수 있다
사용자 단말 장치(200)는 디스플레이 화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 가장자리 부분을 터치하는 것을 감지하고, 터치가 감지된 위치에 기초하여 화면을 온 시키고, 디스플레이 방향을 결정하여 디스플레이 화면을 디스플레이할 수 있다. 사용자 단말 장치(200)의 가장자리 부분은 베젤 영역일 수 있다. 사용자가 사용자 단말 장치(200)의 화면 오프 상태에서 베젤 영역을 터치하면, 사용자 단말 장치(200)는 터치 인터렉션을 감지하고 터치 인터렉션에 기초하여 디스플레이 방향을 결정하고, 디스플레이 화면을 디스플레이 할 수 있다.
예를 들면. 화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 상단 베젤 영역을 터치하면, 사용자 단말 장치(200)는 화면을 온 상태로 전환하고 디스플레이 방향을 상단으로 하여 디스플레이 화면을 디스플레이 할 수 있다.
화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 하단 베젤 영역을 터치하면, 사용자 단말 장치(200)는 화면을 온 상태로 전환하고 디스플레이 방향을 하단으로 하여 디스플레이 화면을 디스플레이 할 수 있다.
화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 좌측 베젤 영역을 터치하면, 사용자 단말 장치(200)는 화면을 온 상태로 전환하고 디스플레이 방향을 좌측으로 하여 디스플레이 화면을 디스플레이 할 수 있다.
화면이 오프된 상태에서 사용자가 사용자 단말 장치(200)의 우측 베젤 영역을 터치하면, 사용자 단말 장치(200)는 화면을 온 상태로 전환하고 디스플레이 방향을 우측으로 하여 디스플레이 화면을 디스플레이 할 수 있다.
<사용자 인터렉션 방향 감지>
도 53은 디스플레이 화면에서 사용자 손가락의 접근 방향을 감지하는 도면이다.
도 53을 참조하면 디스플레이 화면에 사용자의 손가락(5301)이 근접되어 디스플레이되어 있다. 사용자의 손가락(5301)이 디스플레이 화면에 근접함에 따라 디스플레이 화면에는 사용자 손가락(5301)에 대응하는 그림자 영역(5302)이 생성될 수 있다. 감지부(280)는 디스플레이 화면에 생성된 그림자 영역(5302)을 감지할 수 있다.
그림자 영역(5302)이 생성되면, 제어부(290)는 감지부(280)에서 출력된 신호에 기초하여 그림자 영역의 위치를 결정할 수 있다. 또한, 제어부(290)는 그림자 영역의 형상으로부터 사용자의 손가락(5301)의 접근 방향을 결정하고, 이에 기초하여 디스플레이 방향을 결정할 수 있다.
예를 들면, 사용자가 디스플레이 화면의 우측으로부터 손가락을 디스플레이 화면에 접근 시키면 디스플레이 화면의 우측에 그림자 영역(5302)이 생성될 수 있다. 제어부(290)는 생성된 그림자 영역에 기초하여 사용자의 손가락이 디스플레이 화면의 우측에서 접근한 것으로 결정하고, 디스플레이 방향을 디스플레이 화면 우측을 기준으로 결정할 수 있다
<사용자 인터렉션에 따른 디스플레이 화면 분할 및 디스플레이 방향 변경>
도 54a 및 도 54b는 사용자 인터렉션에 따라 디스플레이 화면이 2개의 영역으로 분할되는 것을 도시한 것이다. 도 54a를 참조하면 단일 영역으로 구성된 디스플레이 화면(5401)이 사용자의 인터렉션에 따라 2개의 영역으로 분할되는 것을 도시한 도면이며, 도60은 사용자 인터렉션에 따라 디스플레이 화면이 2개의 영역으로 분할되는 과정을 도시한 흐름도이다.
도 60을 참조하면 사용자 단말 장치(200)는 디스플레이 화면을 디스플레이 한다(단계 S6001). 디스플레이 화면(5401)에 서로 다른 방향으로 사용자 인터렉션이 동시에 발생되면, 사용자 단말 장치(200)는 디스플레이상에서 제1 사용자 인터렉션 및 제2 사용자 인터렉션을 감지한다(단계 S6003). 사용자 단말 장치(200)는 감지된 신호에 기초하여 제1 사용자 인터렉션 방향 및 제2 사용자 인터렉션 방향을 결정할 수 있다(단계 S6005).
그리고, 사용자 단말 장치(200)는 제1 사용자 인터렉션 및 제2 사용자 인터렉션에 기초하여 디스플레이 화면을 제1 영역 및 제2 영역으로 분할할 수 있다(단계 S6007). 사용자 단말 장치(200)는 제1 사용자 인터렉션 방향을 바탕으로 제1 영역에 디스플레이되는 제1 화면의 디스플레이 방향을 결정하여 제1 영역에 제1 화면을 디스플레이하고, 제2 사용자 인터렉션 방향을 바탕으로 제2 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 제2 영역에 제2 화면을 디스플레이한다(단계 S6009). 디스플레이 화면은 정사각형 형태이며, 제1 사용자 인터렉션 및 제2 사용자 인터렉션중 적어도 어느 하나의 사용자 인터렉션이 디스플레이 화면의 코너 방향을 향하는 경우, 사용자 단말 장치(200)는 디스플레이 화면을 삼각형 형태로 분할 할 수 있다. 또한 제1 사용자 인터렉션 및 제2 사용자 인터렉션중 적어도 어느 하나의 사용자 인터렉션이 디스플레이 화면의 변을 향하는 경우, 사용자 단말 장치 (200)는 디스플레이 화면을 사각형 형태로 분할 할 수 있다.
사용자 인터렉션은 멀티터치 인터렉션일 수 있다.
예를 들면, 디스플레이 화면이 디스플레이되어 있는 상태에서 2명의 사용자가 2 개 이상의 손가락(5402, 5405)으로 디스플레이 화면을 좌우 방향으로 드래그하면, 제어부(290)는 제1 사용자 인터렉션(5403) 및 제2 사용자 인터렉션(5406)을 동시에 감지하고, 제1 사용자 인터렉션(5403) 및 제2 사용자 인터렉션(5406)에 기초하여 디스플레이 화면(5410)을 두 개의 영역(5411, 5412)으로 분할하도록 디스플레이부(230)를 제어할 수 있다. 제1 사용자 인터렉션 또는 제2 사용자 인터렉션이 디스플레이 화면의 변을 향하는 경우, 디스플레이 화면은 사각형 형태로 분할 될 수 있다.
분할된 영역에는 제1화면 및 제2 화면(5411, 5412)이 각각 디스플레이될 수 있다. 제어부(290)는 제1 사용자 인터렉션(5403)의 방향에 기초하여 제1 화면의 디스플레이 방향을 좌측(5413)으로 결정 할 수 있다. 제어부(290)는 제2 사용자 인터렉션(5406)의 방향에 기초하여 제2 화면의 디스플레이 방향을 우측(5414)으로 결정할 수 있다.
도 54b는 단일 영역으로 구성된 디스플레이 화면이 사용자의 인터렉션에 따라 3개의 영역으로 분할되는 것을 도시한 것이다. 디스플레이 화면에 서로 다른 방향(5422, 5424, 5426)으로 사용자 인터렉션이 동시에 발생되면, 감지부(280)는 사용자 인터렉션을 감지하고 제어부(290)는 감지된 신호에 기초하여 디스플레이 화면을 3 개의 영역(5431, 5432, 5433)으로 분할하도록 디스플레이부(230)를 제어할 수 있다.
제어부(290)는 사용자 인터렉션의 방향에 기초하여 디스플레이 방향을 결정할 수 있다. 사용자 인터렉션은 멀티터치 인터렉션이 될 수 있다. 분할된 영역(5431, 5432, 5433)은 삼각형 또는 사각형 형태가 될 수 있다.
예를 들면 디스플레이 화면이 디스플레이되어 있는 상태에서 3명의 사용자가 2 개의 손가락(5423, 5428, 5421)으로 디스플레이 화면을 좌측하단 모서리 방향(5426), 우측 방향(5425) 및 상단 방향(5424)으로 드래그하면, 디스플레이 화면은 3 개의 영역으로 분할될 수 있다.
분할된 영역에는 제1화면, 제2 화면 및 제3 화면(5431, 5432, 5433)이 디스플레이될 수 있다. 제어부(290)는 분할된 영역에 디스플레이된 컨텐츠의 디스플레이 방향을 사용자 인터렉션 방향에 기초하여 상단 방향(5435), 우측 방향(5437), 좌측하단 방향(5439)으로 결정할 수 있다.
도 55a 내지 도 55e는 사용자 단말 장치(200)의 전면부 및 후면부에서 동시에 사용자 인터렉션을 감지하고, 사용자 인터렉션에 대응하여 디스플레이 화면을 분할 하는 것을 도시한 것이다. 사용자 인터렉션은 드래그 인터렉션이 될 수 있다. 그리고, 도 61은 사용자 단말의 전면부 및 후면부에서 동시에 감지된 사용자 인터렉션에 대응하여 디스플레이 화면을 분할하는 과정을 나타내는 흐름도이다.
도 61을 참조하면 사용자 단말 장치(200)가 디스플레이 화면을 디스플레이 한다(단계 S6101). 사용자가 손가락(5503, 5504)을 사용자 단말 장치의 전면부(5501) 및 후면부(5502)를 동시에 터치한 상태에서 드래그(5505)하면 사용자 단말 장치(200)는 사용자 단말 장치(200)의 전면부 및 후면부에서 동시에 제1 사용자 인터렉션 및 제2 사용자 인터렉션을 감지할 수 있다(단계 S6103). 즉 사용자 단말 장치(200)의 감지부(280)는 사용자 단말 장치(200)의 양면에서 동시에 사용자 인터렉션을 감지하고, 제어부(290)는 이에 대응하여 미리 결정된 동작 또는 기능이 수행되도록 제어할 수 있다. 여기서 ?옙?의 의미는 처음과 끝이 완전히 일치 또는 시간적으로 중복되는 구간이 존재하는 부분적인 일치 모두를 포함하는 의미로 해석되어져야 한다.
사용자 단말 장치(200)는 감지된 신호에 기초하여 제1 사용자 인터렉션 방향 및 제2 사용자 인터렉션 방향을 결정할 수 있다(단계 S6105). 사용자 단말 장치(200)는 제1 사용자 인터렉션 및 제2 사용자 인터렉션에 기초하여 디스플레이 화면을 제1 영역 및 제2 영역으로 분할 할 수 있다(단계 S6107).
디스플레이 화면은 정사각형 형태이며, 제1 사용자 인터렉션 및 제2 사용자 인터렉션 중 적어도 어느 하나의 사용자 인터렉션이 디스플레이 화면의 코너 방향을 향하는 경우, 사용자 단말 장치(200)는 디스플레이 화면을 삼각형 형태로 분할 할 수 있다. 또한 제1 사용자 인터렉션 및 제2 사용자 인터렉션중 적어도 어느 하나의 사용자 인터렉션이 디스플레이 화면의 변을 향하는 경우 디스플레이 화면을 사각형 형태로 분할 할 수 있다.
사용자 단말 장치(200)는 제1 사용자 인터렉션 방향을 바탕으로 제1 영역에 디스플레이되는 제1 화면의 디스플레이 방향을 결정하여 제1 영역에 제1 화면을 디스플레이하고 제2 사용자 인터렉션의 방향을 바탕으로 제2 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 제2 영역에 제2 화면을 디스플레이 한다(단계 S6109).
도 55a는 전면부와 후면부에서 사용자 인터렉션을 감지할 수 있는 사용자 단말 장치(200)를 측면에서 본 것이다. 사용자 단말 장치(200)의 전면부(5501)에는 디스플레이 화면이 디스플레이되고 제1 사용자 인터렉션이 감지될 수 있다. 후면부(5502)에서는 제2 사용자 인터렉션이 감지될 수 있다. 제1 사용자 인터렉션 및 제2 사용자 인터렉션은 드래그 인터렉션이 될 수 있다.
도 55b는 전면부와 후면부를 포함하는 사용자 단말 장치(200)의 디스플레이 화면에서 사용자 인터렉션(5513)을 감지하는 것을 도시한 것이다. 사용자 인터렉션은 후면부(미도시)에서도 동시에 감지될 수 있다.
도 55c에는 전면부 및 후면부에서 동시에 감지된 제1 사용자 인터렉션 및 제2 사용자 인터렉션에 대응하여 디스플레이 화면이 2개의 영역으로 분할되는 과정을 도시한 것이다. 사용자 단말 장치(200)의 전면부 및 후면부에서 제1 사용자 인터렉션(5526, 5527) 및 제2 사용자 인터렉션(5522, 5523)이 서로 다른 방향으로 동시에 발생되면, 감지부(280)는 제1 사용자 인터렉션 및 제2 사용자 인터렉션을 감지하고, 제어부(290)는 감지된 신호에 기초하여 디스플레이 화면을 2개의 영역으로 분할 할 수 있다. 2개의 영역에는 제1 화면(5532) 및 제2 화면(5531)이 디스플레이되고, 제어부(290)는 사용자 인터렉션의 방향에 기초하여 디스플레이 방향을 결정할 수 있다.
예를 들면, 사용자 단말 장치(200)의 전면부 및 후면부에서 좌측으로 향하는 드래그 인터렉션(5526, 5527)이 감지되고, 동시에 사용자 단말 장치(200)의 전면부 및 후면부에서 우측으로 향하는 드래그 인터렉션(5522, 5523)이 감지되면, 제어부(290)는 디스플레이 화면을 2개의 영역으로 분할할 수 있다. 이때, 각각의 분할된 영역에는 제1 화면(5532) 및 제2 화면(5531)이 디스플레이될 수 있다. 제어부(290)는 사용자 인터렉션의 방향에 기초하여 제1 화면 및 제2 화면의 디스플레이 방향을 결정할 수 있다. 즉, 제1 화면(5532)의 디스플레이 방향은 좌측(5534)이 될 수 있으며, 제2 화면(5531)의 디스플레이 방향은 우측(5533)이 될 수 있다.
도 55d에는 전면부 및 후면부에서 동시에 감지된 제1 사용자 인터렉션, 제2 사용자 인터렉션 및 제3 사용자 인터렉션에 대응하여 디스플레이 화면이 3개의 영역으로 분할되는 과정이 도시되어 있다. 사용자 단말 장치(200)의 전면부 및 후면부에서 사용자 인터렉션(5547, 5548, 5542, 5543, 5544, 5545)이 서로 다른 방향으로 동시에 발생되면, 감지부(280)는 사용자 인터렉션을 감지하고 제어부(290)는 감지된 신호에 기초하여 디스플레이 화면을 3개의 영역으로 분할 할 수 있다. 제어부(290)는 사용자 인터렉션의 방향에 기초하여 디스플레이 방향을 결정할 수 있다. 적어도 하나의 사용자 인터렉션이 디스플레이 화면의 코너 방향을 향하는 경우, 제어부(290)는 디스플레이 화면을 삼각형 형태로 분할하도록 디스플레이부(230)를 제어할 수 있다. 즉, 사용자 인터렉션(5544, 5545)이 디스플레이 화면의 코너 방향(5546)을 향함에 따라 제1화면, 제2 화면 및 제3 화면(5551, 5552, 5553)은 삼각형 형태가 될 수 있다.
예를 들면, 사용자 단말 장치(200)의 전면부 및 후면부에서 상단으로 향하는 제1 사용자 인터렉션(5547, 5548)이 감지되고, 동시에 사용자 단말 장치(200)의 전면부 및 후면부에서 좌측으로 향하는 제2 사용자 인터렉션(5541, 5542)이 감지되고, 동시에 사용자 단말 장치(200)의 전면부 및 후면부에서 좌측하단으로 향하는 제2 사용자 인터렉션(5544, 5545)이 감지되면, 제어부(290)는 디스플레이 화면을 3개의 영역으로 분할 할 수 있다.
각각의 분할된 영역에는 제1 화면, 제2 화면 및 제3 화면(5551, 5552, 5553)이 디스플레이될 수 있으며, 디스플레이 방향은 사용자 인터렉션의 방향에 기초하여 결정될 수 있다. 제1 화면(5551)의 디스플레이 방향은 상단(5556)이 될 수 있다. 제2 화면(5552)의 디스플레이 방향은 우측(5557)이 될 수 있다. 제3 화면(5553)의 디스플레이 방향은 좌측하단(5558)이 될 수 있다.
도 55e에는 전면부 및 후면부에서 동시에 감지된 동일한 사용자 인터렉션에 대응하여 디스플레이 화면이 3개의 영역으로 분할되는 과정이 도시되어 있다. 사용자 단말 장치(200)의 전면부 및 후면부에서 사용자 인터렉션(5567, 5568, 5561, 5562, 5564, 5565)이 서로 다른 방향으로 동시에 발생되면, 감지부(280)는 사용자 인터렉션을 감지하고 제어부(290)는 감지된 신호에 기초하여 디스플레이 화면을 3개의 영역으로 분할 할 수 있다. 각각의 분할된 영역에는 제1화면(5571), 제2 화면(5572) 및 제3 화면(5573)이 디스플레이될 수 있다. 제어부(290)는 사용자 인터렉션의 방향에 기초하여 디스플레이 방향을 결정할 수 있다. 분할된 영역(5571, 5572, 5573)은 사각형 형태가 될 수 있다.
예를 들면 사용자 단말 장치(200)의 전면부 및 후면부에서 상단으로 향하는 드래그 인터렉션(5567, 5568)이 감지되고, 동시에 사용자 단말 장치(200)의 전면부 및 후면부에서 우측으로 향하는 드래그 인터렉션(5561, 5562)이 감지되고, 동시에 사용자 단말 장치(200)의 전면부 및 후면부에서 좌측하단으로 향하는 드래그 인터렉션(5564, 5565)이 감지되면, 제어부(290)는 디스플레이 화면을 3개의 영역으로 분할 할 수 있다.
각각의 분할된 영역에는 제1 화면(5571), 제2 화면(5572) 및 제3 화면(5573)이 디스플레이될 수 있으며, 디스플레이 방향은 사용자 인터렉션의 방향에 기초하여 결정될 수 있다. 분할된 영역(5571)의 디스플레이 방향은 상단(5576)이 될 수 있다. 분할된 영역(5572)의 디스플레이 방향은 우측(5574)이 될 수 있다. 분할된 영역(5573)의 디스플레이 방향은 좌측하단(5575)이 될 수 있다.
도 56a 내지 도 56c는 사용자 단말의 상하좌우 변 및 코너 영역에서 감지된 사용자 인터렉션에 대응하여 디스플레이 화면이 분할되는 것을 도시한 도면이다. 사용자 인터렉션은 터치 인터렉션 또는 사용자 단말을 두드리는 진동 제스처일 수 있다.
도 56a에는 사용자 단말 장치(200)의 상하좌우 변(5601, 5605, 5608, 5603) 및 4개의 코너 영역(5602, 5604, 5607, 5609)에서 감지되는 터치 인터렉션이 디스플레이되어 있다. 상하좌우 변(5601, 5605, 5608, 5603)은 사용자 단말 장치(200)의 베젤 일 수 있다. 사용자(5610)에 의해 터치가 발생되면, 감지부(280)는 상하좌우 변(5601, 5605, 5608, 5603) 및 4개의 코너 영역(5602, 5604, 5607, 5609)중 적어도 어느 하나의 영역에서 사용자 인터렉션(5610)을 감지할 수 있다. 제어부(290)는 사용자 인터렉션 감지에 대응하여 디스플레이 화면을 복수 개의 영역으로 분할하도록 디스플레이부(230)를 제어할 수 있다.
도 56b에는 사용자가 사용자 단말 장치(200)의 4개의 변을 순차적으로 터치(5621)함에 따라 디스플레이 화면이 분할되는 과정을 도시한 것이다.
첫번째 도면에서 제어부(290)는 사용자 단말의 좌측 변(5621)에서 감지된 제1 사용자 인터렉션에 대응하여 디스플레이 방향을 좌측(5622)으로하여 디스플레이 화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
두번째 도면에서 디스플레이 화면의 좌측 변(5634)에서 제1 사용자 인터렉션이 감지(5634)된 상태에서 우측 변(5633)에서 제2 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 2개의 영역(5632, 5631)으로 분할하도록 디스플레이부(230)를 제어할 수 있다. 분할 영역(5632)의 디스플레이 방향은 제1 사용자 인터렉션이 감지된 위치에 기초하여 좌측(5637)으로 설정될 수 있다. 분할 영역(5631)의 디스플레이 방향(5635)은 제2 사용자 인터렉션이 감지된 위치에 기초하여 우측(5635)으로 설정될 수 있다.
세번째 도면에서 디스플레이 화면의 좌측 변(5648)에서 제1 사용자 인터렉션이 감지되고 우측 변(5646)에서 제2 사용자 인터렉션이 감지된 상태에서 상단 변(5645)에서 제3 사용자 인터렉션 및 하단 변(5647)에서 제4 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 4개의 영역(5644, 5642, 5647, 5641)으로 분할하도록 디스플레이부(23)를 제어할 수 있다. 제어부(290)는 1차 분할 영역(5632, 5631)을 참조하여 2차 분할 영역(5644, 5642, 5641, 5643)을 결정할 수 있다. 제어부(290)는 디스플레이 화면(5640)을 균등하게 분할하되, 2차 분할 영역중 적어도 일부분(5644, 5642)이 1차 분할 영역에 포함되도록 분할하도록 디스플레이부(230)를 제어할 수 있다. 즉, 2차 분할 영역(5644, 5642)은 1차 분할 영역(5632, 5631)에 포함될 수 있다.
분할 영역(5644)의 디스플레이 방향은 제1 사용자 인터렉션이 감지된 위치(5648)에 기초하여 설정되며 좌측(5651)이 될 수 있다. 분할 영역(5642)의 디스플레이 방향은 제2 사용자 인터렉션이 감지된 위치(5646)에 기초하여 우측(5649)에 설정될 수 있다. 분할 영역(5643)의 디스플레이 방향은 제3 사용자 인터렉션이 감지된 위치에 기초하여 하단(5650)에 설정될 수 있다. 분할 영역(5641)의 디스플레이 방향은 제4 사용자 인터렉션이 감지된 위치(5645)에 기초하여 상단(5652)에 설정될 수 있다.
도 56c에는 사용자 단말 장치(200)가 가로축 또는 세로축을 기준으로 45도 회전된 상태에서 코너에서 감지된 터치 인터렉션에 대응하여 디스플레이 화면이 분할되는 과정을 도시한 것이다.
첫번째 도면에서 사용자가 사용자 단말의 좌측 코너(5662)를 터치함에 따라 제어부(290)는 좌측(5663)을 디스플레이 방향으로 설정하고 디스플레이 화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
두번째 도면에서 디스플레이 화면의 좌측 코너(5674)에서 제1 사용자 인터렉션이 감지된 상태에서 우측 코너(5673)에서 제2 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 2개의 영역(5672, 5671)으로 분할하도록 디스플레이부(230)를 제어할 수 있다. 분할된 영역(5672)의 디스플레이 방향(5676)은 제1 사용자 인터렉션이 감지된 위치에 기초하여 좌측(5676)으로 설정될 수 있다. 분할된 영역(5671)의 디스플레이 방향은 제2 사용자 인터렉션이 감지된 위치에 기초하여 우측(5675)으로 설정될 수 있다.
세번재 도면에서 디스플레이 화면의 좌측 코너(5689)에서 제1 사용자 인터렉션이 감지되고 우측 코너(5687)에서 제2 사용자 인터렉션이 감지된 상태에서 상단 코너(5686)에서 제3 사용자 인터렉션 및 하단 코너(5688)에서 제4 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 4개의 영역(5684, 5682, 5681, 5683)으로 분할하도록 디스플레이부(230)를 제어할 수 있다.
제어부(290)는 1차 분할 영역(5672, 5671)을 참조하여 2차 분할 영역(5684, 5682, 5681, 5683)을 결정할 수 있다. 제어부(290)는 디스플레이 화면을 균등하게 분할하되, 2차 분할 영역중 적어도 일부분(5684, 5682)이 1차 분할 영역(5672, 5671)에 포함되도록 분할하도록 디스플레이부(2300)를 제어할 수 있다. 즉, 2차 분할 영역(5684, 5682)은 1차 분할 영역(5672, 5671)에 포함될 수 있다.
분할 영역(5684)의 디스플레이 방향은 제1 사용자 인터렉션이 감지된 위치(5689)에 기초하여 좌측(5692)으로 설정될 수 있다. 분할 영역(5682)의 디스플레이 방향은 제2 사용자 인터렉션이 감지된 위치(5687)에 기초하여 우측(5690)으로 설정될 수 있다. 분할 영역(5681)의 디스플레이 방향은 제3 사용자 인터렉션이 감지된 위치(5686)에 기초하여 상단(5693)으로 설정될 수 있다. 분할 영역(5683)의 디스플레이 방향은 제4 사용자 인터렉션이 감지된 위치(5688)에 기초하여 하단(5691)으로 설정될 수 있다.
<디스플레이 화면 분할 규칙>
도 57a 내지 도 57c는 디스플레이 화면이 분할된 상태에서 추가로 분할되는 경우에 대한 규칙을 도시한 도면이다.
도 57a를 참조하면 디스플레이 화면이 2 개의 영역(5701, 5702)으로 분할되어 있다. 분할된 영역에는 제1 화면(5701) 및 제2 화면(5702)이 디스플레이될 수 있다. 제1 화면의 디스플레이 방향은 좌측(5703) 이다. 제2 화면의 디스플레이 방향은 하단(5704) 이다.
디스플레이 화면이 2 개의 영역으로 분할된 상태에서 디스플레이 화면 우측에서 제3 사용자 인터렉션이 감지되면, 제어부(290)는 제3 사용자 인터렉션이 감지된 영역에 새로운 분할영역(5712)을 생성할 수 있다.
새로운 분할영역(5712)은 기존에 생성된 분할영역(5711, 5713)을 참조해서 생성될 수 있다. 새로운 분할영역(5712)은 기존에 생성된 분할영역(5711, 5713)의 변경을 최소화하여 생성될 수 있다. 새로운 분할영역은 분할영역이 생성된 순서를 참조하여 위치 및 면적이 결정될 수 있다.
예를 들면, 디스플레이 화면이 디스플레이 방향(5703)을 기준으로 단일 디스플레이 화면으로 디스플레이된 상태에서 디스플레이 화면의 하단(5704)에서 제2 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 2개의 영역(5701, 5702)으로 분할할 수 있도록 디스플레이부(230)를 제어할 수 있다.
분할영역(5701)의 디스플레이 방향은 기존의 디스플레이 방향(5703)과 동일하게 유지될 수 있다. 분할영역(5702)의 디스플레이 방향은 제2 사용자 인터렉션이 감지된 하단(5704)일 수 있다. 분할영역(5701, 5702)은 동일한 크기로 분할될 수 있다.
디스플레이 화면이 2개의 영역(5701, 5702)으로 균등 분할된 상태에서 제3 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 3개의 영역으로 분할 하도록 디스플레이부(230)를 제어할 수 있다. 제어부(290)는 디스플레이 화면을 3개의 영역으로 분할 하기 위해 사용자 인터렉션이 감지된 순서를 참조하여 분할 영역의 크기를 결정할 수 있다. 또한 제어부(290)는 기존에 분할된 영역을 최대한 유지하면서 추가로 분할하도록 디스플레이부(230)를 제어할 수 있다.
예를 들면, 디스플레이 화면이 2개의 영역(5701, 5702)으로 균등 분할된 상태에서 영역(5702)안에서 제3 사용자 인터렉션이 감지되면, 제어부(290)는 영역(5701)은 그대로 유지하고, 영역(5702)을 2개의 영역(5713, 5712)으로 분할하도록 디스플레이부(230)를 제어할 수 있다. 이에 따라 디스플레이 화면은 3개의 영역(5711, 5712, 5713)으로 분할되고, 영역(5711)의 디스플레이 방향은 디스플레이 화면 좌측(5716)이 되고, 영역(5712)의 디스플레이 방향은 디스플레이 화면의 우측(5714)이 되고, 영역(5713)의 디스플레이 방향은 디스플레이 화면의 하단(5715)이 될 수 있다.
도 57b를 참조하면 디스플레이 화면이 2 개의 영역(5721, 5722)으로 분할되어 있다. 분할 영역(5721)의 디스플레이 방향은 좌측(5723) 이다. 분할영역(5722)의 디스플레이 방향은 하단(5724) 이다. 디스플레이 화면이 2 개의 영역(5721, 5722)으로 분할된 상태에서 디스플레이 화면(5730)의 상단에서 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면에서 사용자 인터렉션이 감지된 영역에 새로운 분할영역(5733)을 생성하도록 디스플레이부(230)를 제어할 수 있다.
새로운 분할영역(5733)은 기존에 생성된 분할영역(5721, 5722)을 참조해서 생성될 수 있다. 새로운 분할영역은 분할영역이 생성된 순서를 참조하여 위치 및 크기가 결정될 수 있다. 새로운 분할영역(5733)은 기존에 생성된 분할영역(5721, 5722)의 변경을 최소화하여 생성될 수 있다.
예를 들면 디스플레이 화면이 디스플레이 방향(5723)을 기준으로 단일 디스플레이 화면으로 디스플레이된 상태에서 디스플레이 화면의 하단(5724)에서 제2 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 2개의 영역(5721, 5722)으로 분할하도록 디스플레이부(230)를 제어할 수 있다.
분할영역(5721)의 디스플레이 방향은 기존의 디스플레이 방향과 동일하게 유지될 수 있다. 분할영역(5722)의 디스플레이 방향은 제2 사용자 인터렉션이 감지된 하단일 수 있다. 분할영역(5721, 5722)은 동일한 크기로 분할될 수 있다.
디스플레이 화면이 2개의 영역(5721, 5722)으로 균등 분할된 상태에서 제3 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 3개의 영역으로 분할하도록 디스플레이부(230)를 제어할 수 있다. 제어부(290)는 디스플레이 화면을 3개의 영역으로 분할 하기 위해 사용자 인터렉션이 감지된 순서를 참조하여 분할 영역의 크기를 결정할 수 있다. 또한 제어부(290)는 기존에 분할된 영역을 최대한 유지하면서 추가로 분할하도록 디스플레이부(23)를 제어할 수 있다.
예를 들면 디스플레이 화면이 2개의 영역(5721, 5722)으로 균등 분할된 상태에서 영역(5721)안에서 제3 사용자 인터렉션이 감지되면, 제어부(290)는 처음으로 생성된 영역(5731)이 가장 큰 크기가 되도록 분할하고, 영역(5733) 및 영역(5732)는 영역(5731)보다 작게 분할 한다. 이에 따라 디스플레이 화면은 3개의 영역(5731, 5732, 5733)으로 분할되고, 영역(5731)의 디스플레이 방향은 디스플레이 화면의 좌측(5734)이 되고, 영역(5732)의 디스플레이 방향은 디스플레이 화면의 하단(5735)이 되고, 영역(5733)의 디스플레이 방향은 디스플레이 화면의 상단(5736)이 된다.
도 57c를 참조하면 디스플레이 화면이 2개의 영역(5741, 5742)으로 분할되어 있다. 분할 영역(5741)의 디스플레이 방향은 좌측(5743) 이다. 분할영역(5742)의 디스플레이 방향은 우측(5744) 이다. 디스플레이 화면이 2 개의 영역(5741, 5742)으로 분할된 상태에서 디스플레이 화면의 하단(5756)에서 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면에서 사용자 인터렉션이 감지된 영역에 새로운 분할영역(5753)을 생성하도록 디스플레이부(230)를 제어할 수 있다. 새로운 분할영역(5753)은 기존에 생성된 분할영역(5741, 5742)을 참조해서 생성될 수 있다. 새로운 분할영역(5753)은 기존에 생성된 분할영역(5741, 5742)의 변경을 최소로하여 생성될 수 있다. 새로운 분할영역은 분할영역이 생성된 순서를 참조하여 위치 및 크기가 결정될 수 있다.
예를 들면 디스플레이 화면이 디스플레이 방향(5743)을 기준으로 단일 디스플레이 화면으로 디스플레이된 상태에서 디스플레이 화면의 우측(5743)에서 제2 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 2개의 영역(5741, 5742)으로 분할하도록 디스플레이부(230)를 제어할 수 있다.
분할영역(5741)의 디스플레이 방향은 기존의 디스플레이 방향과 동일하게 유지될 수 있다. 분할영역(5742)의 디스플레이 방향은 제2 사용자 인터렉션이 감지된 우측(5744)일 수 있다. 분할영역(5741, 5742)은 동일한 크기로 분할될 수 있다.
디스플레이 화면이 2개의 영역(5741, 5742)으로 균등 분할된 상태에서 제3 사용자 인터렉션이 감지되면, 제어부(290)는 디스플레이 화면을 3개의 영역(5751, 5752, 5753)으로 분할하도록 디스플레이부(23)를 제어할 수 있다. 제어부(290)는 디스플레이 화면을 3개의 영역으로 분할 하기 위해 사용자 인터렉션이 감지된 순서를 참조하여 분할 영역의 크기를 결정할 수 있다. 또한 제어부(290)는 기존에 분할된 영역을 최대한 유지하면서 추가로 분할하도록 디스플레이부(230)를 제어할 수 있다.
예를 들면 디스플레이 화면이 2개의 영역(5741, 5742)으로 균등 분할된 상태에서 영역(5742)안에서 제3 사용자 인터렉션이 감지되면, 제어부(290)는 영역(5741)은 그대로 유지하고, 영역(5742)을 2개의 영역(5752, 5753)으로 분할하도록 디스플레이부(230)를 제어할 수 있다.
이에 따라 디스플레이 화면은 3개의 영역(5751, 5752, 5753)으로 분할되고, 영역(5751)의 디스플레이 방향은 디스플레이 화면(5750)의 좌측(5754)이 되고, 영역(5752)의 디스플레이 방향은 디스플레이 화면(5750)의 우측(5755)이 되고, 영역(5753)의 디스플레이 방향은 디스플레이 화면(5750)의 하단(5715)이 된다.
< 잠금화면 , 알림화면 상태에서 디스플레이 방향 변경>
도 62 및 도 63은 디스플레이부(230)에 제1 화면이 디스플레이된 상태에서 사용자 인터렉션에 기초하여 제2 화면의 디스플레이 방향을 결정하고 디스플레이하는 것을 도시한 도면이고, 도 64는 사용자 단말 장치(200)에서 제1 화면이 디스플레이된 상태에서 사용자 인터렉션에 기초하여 제2 화면을 디스플레이하는 방법에 대한 흐름도이다.
도 64를 참조하면, 사용자 단말 장치(200)는 화면 오프 상태에서 이벤트가 발생되면 제1 화면을 디스플레이할 수 있다(단계 S6401). 제1 화면은 잠금화면 또는 알림 화면일 수 있다. 제1 화면의 디스플레이 방향은 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
디스플레이부(230)에 제1 화면이 디스플레이된 상태에서 사용자 단말 장치(200)는 사용자 인터렉션을 감지할 수 있다(단계 S6403). 사용자 단말 장치(200)는 사용자 인터렉션에 기초하여 제2 화면의 디스플레이 방향을 결정하고 결정된 디스플레이 방향으로 제2 화면을 디스플레이할 수 있다(단계 S6405).
도62a를 참조하면 첫번째 도면에서 사용자 단말 장치(200)의 디스플레이부(230)가 도시되어 있다. 디스플레이부(230)는 화면 오프 상태(6201)일 수 있다. 화면 오프 상태(6201)는 블랙 스크린 상태일 수 있다. 사용자 단말 장치(200)는 화면 오프 상태에서 디스플레이부(230)에서 사용자 인터렉션을 감지할 수 있다.
화면 오프 상태에서 사용자 단말 장치(200)에 이벤트가 발생하면 제1 화면이 디스플레이부(230)에 디스플레이될 수 있다. 이벤트는 사용자가 사용자 단말 장치(200)의 하드웨어 버튼(미도시)을 누르거나 또는 센서가 동작할 때 발생될 수 있다.
제1 화면은 잠금화면일 수 있다. 두번째 도면에는 디스플레이부(230)에 잠금화면(6203)이 디스플레이되어 있다. 잠금화면은 사용자 단말 장치(200)의 잠금을 해제하기 위한 패턴(6205)을 입력 받을수 있다. 제1 화면의 디스플레이 방향은 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
예를 들면 사용자 단말 장치(200)가 디스플레이 방향이 하단 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 하단 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 우측 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 우측 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 상단 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 상단 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 좌측 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 좌측 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자가 사용자 단말 장치(200)의 하단에 위치해 있고, 사용자의 위치를 기준으로 잠금을 해제하기 위해 "Z" 자 모양으로 드래그하면, 제어부(290)는 사용자 단말 장치(200)의 잠금을 해제할 수 있다.
사용자 인터렉션의 방향은 우측이며, 디스플레이부(230)에 제1 화면이 디스플레이된 상태에서, 감지부(280)는 사용자 인터렉션을 감지할 수 있다. 제어부(290)는 사용자 인터렉션의 방향이 우측(6205)인 것을 감지하고, 디스플레이 방향을 우측으로 결정하고, 디스플레이부(230)에 제2 화면(6207)을 디스플레이할 수 있다.
도62b를 참조하면 첫번째 도면에서 사용자 단말 장치(200)의 디스플레이부(230)가 도시되어 있다. 디스플레이부(230)는 화면 오프 상태(6211)일 수 있다. 화면 오프 상태(6211)는 블랙 스크린 상태일 수 있다. 감지부(280)는 화면 오프 상태에서 디스플레이부(230)에서의 사용자 인터렉션을 감지할 수 있다.
화면 오프 상태에서 사용자 단말 장치에 이벤트가 발생하면, 제어부(290)는 제1 화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다. 이벤트는 사용자가 사용자 단말 장치의 하드웨어 버튼(미도시)을 누르거나 또는 센서가 동작할 때 발생될 수 있다.
제1 화면은 잠금화면일 수 있다. 두번째 도면에는 디스플레이부(230)에 잠금화면(6203)이 디스플레이되어 있다. 잠금화면은 사용자 단말 장치(200)의 잠금을 해제하기 위한 패턴(6215)을 입력 받을수 있다. 제1 화면의 디스플레이 방향은 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
예를 들면 사용자 단말 장치(200)가 디스플레이 방향이 하단 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 하단 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 우측 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290) 는 디스플레이 방향을 우측 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 상단 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290) 는 디스플레이 방향을 상단 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 좌측 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 좌측 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자가 사용자 단말 장치(200)의 우측에 위치해 있고, 사용자의 위치를 기준으로 잠금을 해제하기 위해 "Z" 자 모양으로 드래그하면 사용자 단말 장치(200)의 잠금이 해제될 수 있다.
사용자 인터렉션의 방향은 상단이며, 디스플레이부에 제1 화면이 디스플레이된 상태에서, 감지부(280)는 사용자 인터렉션을 감지할 수 있다. 제어부(290)는 감지부(280)를 통해 사용자 인터렉션의 방향이 상단인 것을 감지하고, 디스플레이 방향을 상단으로 결정하고, 디스플레이부(230)에 제2 화면(6217)을 디스플레이할 수 있다.
사용자 단말 장치(200)의 잠금을 해제하기 위한 패턴은 사용자가 사용자 단말 장치(200)의 어느 쪽에서 패턴을 입력해도 동일하게 인식할 수 있다. 예를 들면, 잠금해제를 위한 패턴 모양이 "Z" 모양인 경우, 사용자가 잠금화면에 "Z" 자를 입력하는 경우, 사용자 단말 장치(200)의 잠금이 해제될 수 있다. 또한 사용자가 잠금화면에 "Z" 자를 반시계 방향으로 90도 회전시킨 모양인 "Z" 자를 입력하는 경우에도, 사용자 단말장치의 잠금이 해제될 수 있다.
즉, 사용자 단말 장치(200)는 잠금을 해제하기 위한 패턴을 인식할 때 절대적인 좌표에 의해서 패턴을 인식하지 않고 상대적인 좌표에 의해서 인식할 수 있다.
도 62c를 참조하면 첫번째 도면에서 사용자 단말 장치(200)의 디스플레이부(230)가 도시되어 있다. 디스플레이부(230)는 화면 오프 상태(6221)일 수 있다. 화면 오프 상태(6221)는 블랙 스크린 상태일 수 있다. 감지부(280)는 화면 오프 상태에서 디스플레이부(230)에서 사용자 인터렉션을 감지할 수 있다.
화면 오프 상태에서 사용자 단말 장치(200)에 이벤트가 발생하면, 제1 화면이 디스플레이부(230)에 디스플레이될 수 있다. 이벤트는 사용자가 사용자 단말 장치(200)의 하드웨어 버튼(미도시)을 누르거나 또는 센서가 동작할 때 발생될 수 있다.
제1 화면은 잠금화면일 수 있다. 두번째 도면에는 디스플레이부(230)에 잠금화면(6203)이 디스플레이되어 있다. 잠금화면은 사용자 단말 장치(200)의 잠금을 해제하기 위한 패턴(6225)을 입력 받을수 있다. 제1 화면의 디스플레이 방향은 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
예를 들면 사용자 단말 장치(200)가 디스플레이 방향이 하단 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 하단 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 우측 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 우측 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 상단 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 상단 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 좌측 방향인 상태에서 화면 오프 상태로 전환되었다가, 이벤트가 발생하여 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 좌측 방향으로 하여 잠금화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자가 사용자 단말 장치(200)의 우측에 위치해 있고, 사용자의 위치를 기준으로 잠금을 해제하기 위해 미리 결정된 패턴을 입력하면 사용자 단말 장치(200)의 잠금이 해제될 수 있다.
사용자 인터렉션의 방향은 상단이며, 디스플레이부에 제1 화면이 디스플레이된 상태에서, 감지부(280)는 사용자 인터렉션을 감지할 수 있다. 제어부(290)는 감지부(280)를 통해 사용자 인터렉션의 방향이 상단인 것을 감지하고, 디스플레이 방향을 상단으로 결정하고, 디스플레이부(230)에 제2 화면(6227)을 디스플레이할 수 있다.
도63a를 참조하면 첫번째 도면에서 사용자 단말 장치(200)의 디스플레이부(230)가 도시되어 있다. 디스플레이부(230)는 화면 오프 상태(6301)일 수 있다. 화면 오프 상태(6301)는 블랙 스크린 상태일 수 있다. 감지부(280)는 화면 오프 상태에서 디스플레이부에서 사용자 인터렉션을 감지할 수 있다.
화면 오프 상태에서 사용자 단말 장치(200)에 이벤트가 발생하면, 제1 화면이 디스플레이부에 디스플레이될 수 있다. 이벤트는 외부로부터 전화 요청 및 메시지를 수신하는 경우 발생될 수 있다.
제1 화면은 메시지 도착을 알리는 알림화면일 수 있다. 두번째 도면에는 디스플레이부(230)에 알림화면(6303)이 디스플레이되어 있다. 제1 화면의 디스플레이 방향은 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
예를 들면 사용자 단말 장치(200)가 디스플레이 방향이 하단 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 하단 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 우측 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 우측 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 상단 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 사제어부(290)는 디스플레이 방향을 상단 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 좌측 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 좌측 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
감지부(280)는 디스플레이부(230)에 제1 화면이 디스플레이된 상태에서, 사용자 인터렉션을 감지할 수 있다. 예를 들면 디스플레이부(230)에 알림화면(6303)이 디스플레이된 상태에서 사용자가 디스플레이부 (230)의 하단 방향(6305)으로 드래그하면, 제어부(290)는 감지부(280)를 통해 사용자 인터렉션의 방향이 하단 방향인 것을 감지하고, 디스플레이 방향을 하단 방향으로 결정하고, 제2 화면(6307)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
도63b를 참조하면 첫번째 도면에서 사용자 단말 장치(200)의 디스플레이부(230)가 도시되어 있다. 디스플레이부(230)는 화면 오프 상태(6311)일 수 있다. 화면 오프 상태(6301)는 블랙 스크린 상태일 수 있다. 사용자 단말 장치(200)는 화면 오프 상태에서 디스플레이부(230)에서 사용자 인터렉션을 감지할 수 있다.
화면 오프 상태에서 사용자 단말 장치(200)에 이벤트가 발생하면 제1 화면이 디스플레이부(230)에 디스플레이될 수 있다. 이벤트는 외부로부터 전화 요청 및 메시지를 수신하는 경우 발생될 수 있다.
제1 화면은 메시지 도착을 알리는 알림화면일 수 있다. 두번째 도면에는 디스플레이부(230)에 알림화면(6313)이 디스플레이되어 있다. 제1 화면의 디스플레이 방향은 상기 제1 화면이 디스플레이되기 이전의 디스플레이 방향에 기초하여 결정될 수 있다.
예를 들면 사용자 단말 장치(200)가 디스플레이 방향이 하단 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 하단 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 우측 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 우측 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 상단 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 상단 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
사용자 단말 장치(200)가 디스플레이 방향이 좌측 방향인 상태에서 화면 오프 상태로 전환되었다가, 메시지가 수신되어 다시 화면 온 상태로 전환되면, 제어부(290)는 디스플레이 방향을 좌측 방향으로 하여 알림화면을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
디스플레이부(230)에 제1 화면이 디스플레이된 상태에서, 감지부(280)는 사용자 인터렉션을 감지할 수 있다. 예를 들면 디스플레이부(230)에 알림화면(6313)이 디스플레이된 상태에서 사용자가 디스플레이부(230)의 우측 방향(6315)으로 드래그하면, 제어부(290)는 감지부(280)를 통해 사용자 인터렉션의 방향이 우측 방향인 것을 감지하고, 디스플레이 방향을 우측 방향으로 결정하고, 제2 화면(6317)을 디스플레이하도록 디스플레이부(230)를 제어할 수 있다.
상술한 바와 같은 본 발명의 다양한 실시예에 따르면, 사용자는 정사각형 형태의 디스플레이 패널을 가지는 사용자 단말 장치를 통해 다양한 기능을 수행할 수 있게 된다. 이에 따라, 사용자 편의성 및 만족도가 향상될 수 있다.
또한, 상술한 다양한 실시 예에 따른 사용자 단말 장치의 디스플레이 방법은 프로그램으로 구현되어 사용자 단말 장치에 제공될 수 있다. 구체적으로, 사용자 단말 장치의 제어 방법을 포함하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
110, 230: 디스플레이부　　　　　　　　　　　　　　　　　　　　　　　　　120, 280: 감지부
130, 290: 제어부　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　210: 영상 수신부
220: 영상 처리부　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　240: 통신부
250: 저장부　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　260: 오디오 처리부
270: 오디오 출력부

Claims (30)

  1. 사용자 단말 장치의 디스플레이 방법에 있어서,
    디스플레이부의 적어도 두 개의 영역에 적어도 두 개의 화면을 각각 디스플레이하는 단계;
    상기 사용자 단말 장치에서 제1 터치 인터렉션을 감지하는 단계;
    상기 제1 터치 인터렉션의 방향에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정하는 단계;
    상기 적어도 두 개의 화면 사이의 배치 형태를 유지하면서, 상기 결정된 적어도 두 개의 화면의 디스플레이 방향에 기초하여 상기 적어도 두 개의 화면을 각각 회전시켜 상기 적어도 두 개의 화면에 포함되는 컨텐츠의 디스플레이 방향을 변경하는 단계;
    상기 적어도 두 개의 화면이 회전된 후, 상기 적어도 두 개의 영역 중 하나의 영역에서 제2 터치 인터렉션을 감지하는 단계;
    상기 제2 터치 인터렉션의 방향에 기초하여 상기 적어도 두 개의 화면 중 상기 제2 터치 인터렉션이 감지된 영역에 디스플레이된 하나의 화면의 디스플레이 방향을 결정하는 단계;
    상기 적어도 두 개의 화면 사이의 배치 형태를 유지하면서, 상기 제2 터치 인터렉션에 기초하여 상기 적어도 두 개의 화면 중 상기 제2 터치 인터렉션이 감지된 영역에 디스플레이된 하나의 화면을 회전시켜 상기 하나의 화면에 포함되는 컨텐츠의 디스플레이 방향을 변경하는 단계;
    상기 사용자 단말 장치의 전면부 및 후면부에서 동시에 제1 드래그 인터렉션 및 제2 드래그 인터렉션을 감지하는 단계;
    상기 제1 드래그 인터렉션 방향 및 상기 제2 드래그 인터렉션 방향을 결정하는 단계;
    상기 제1 드래그 인터렉션 및 상기 제2 드래그 인터렉션에 기초하여 상기 디스플레이부를 제1 영역 및 제2 영역으로 분할하는 단계; 및
    상기 제1 드래그 인터렉션의 방향을 바탕으로 상기 제1 영역에 디스플레이되는 제1 화면의 디스플레이 방향을 결정하여 상기 제1 영역에 상기 제1 화면을 디스플레이하고, 상기 제2 드래그 인터렉션의 방향을 바탕으로 상기 제2 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 상기 제2 영역에 상기 제2 화면을 디스플레이하는 단계;를 포함하는 디스플레이 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 제1 터치 인터렉션은 진동 인터렉션을 포함하며,
    상기 디스플레이 방향을 변경하는 단계는,
    상기 진동 인터렉션이 발생하는 위치를 결정하는 단계; 및
    상기 진동 인터렉션이 발생하는 위치에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정하는 단계:를 포함하는 디스플레이 방법.
  4. 삭제
  5. 삭제
  6. 제1항에 있어서,
    상기 디스플레이부 및 상기 적어도 두 개의 화면 각각은 정사각형 형태인 것을 특징으로 하는 디스플레이 방법.
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 사용자 단말 장치에 있어서,
    디스플레이부;
    감지부; 및
    상기 디스플레이부의 적어도 두 개의 영역에 적어도 두개의 화면을 각각 디스플레이 하도록 상기 디스플레이부를 제어하고,
    상기 감지부를 통해 제1 터치 인터렉션을 감지하고,
    상기 제1 터치 인터렉션의 방향에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정하며,
    상기 적어도 두 개의 화면 사이의 배치 형태를 유지하면서, 상기 결정된 적어도 두 개의 화면의 디스플레이 방향에 기초하여 상기 적어도 두 개의 화면을 각각 회전시켜 상기 적어도 두 개의 화면에 포함되는 컨텐츠의 디스플레이 방향이 변경되도록 상기 디스플레이부를 제어하고,
    상기 적어도 두 개의 화면이 회전된 후, 상기 적어도 두 개의 영역 중 하나의 영역에서 제2 터치 인터렉션을 감지하며,
    상기 제2 터치 인터렉션의 방향에 기초하여 상기 적어도 두 개의 화면 중 상기 제2 터치 인터렉션이 감지된 영역에 디스플레이된 하나의 화면의 디스플레이 방향을 결정하고,
    상기 적어도 두 개의 화면 사이의 배치 형태를 유지하면서, 상기 제2 터치 인터렉션에 기초하여 상기 적어도 두 개의 화면 중 상기 제2 터치 인터렉션이 감지된 영역에 디스플레이된 하나의 화면을 회전시켜 상기 하나의 화면에 포함되는 컨텐츠의 디스플레이 방향을 변경하고,
    상기 사용자 단말 장치의 전면부 및 후면부에서 동시에 제1 드래그 인터렉션 및 제2 드래그 인터렉션을 상기 감지부를 통해 감지하고,
    상기 제1 드래그 인터렉션 방향 및 상기 제2 드래그 인터렉션 방향을 결정하고,
    상기 제1 드래그 인터렉션 및 상기 제2 드래그 인터렉션에 기초하여 상기 디스플레이부를 제1 영역 및 제2 영역으로 분할하고,
    상기 제1 드래그 인터렉션의 방향을 바탕으로 상기 제1 영역에 디스플레이되는 제1 화면의 디스플레이 방향을 결정하여 상기 제1 영역에 상기 제1 화면을 디스플레이하도록 상기 디스플레이부를 제어하고, 상기 제2 드래그 인터렉션의 방향을 바탕으로 상기 제2 영역에 디스플레이되는 제2 화면의 디스플레이 방향을 결정하여 상기 제2 영역에 상기 제2 화면을 디스플레이하도록 상기 디스플레이부를 제어하는 제어부;를 포함하는 사용자 단말 장치.
  17. 삭제
  18. 제16 항에 있어서,
    상기 제1 터치 인터렉션은 진동 인터렉션을 포함하며,
    상기 제어부는 상기 진동 인터렉션이 발생하는 위치를 결정하고, 상기 진동 인터렉션이 발생하는 위치에 기초하여 상기 적어도 두 개의 화면의 디스플레이 방향을 결정하는 것을 특징으로 하는 사용자 단말 장치.
  19. 삭제
  20. 삭제
  21. 제16항에 있어서,
    상기 디스플레이부 및 상기 적어도 두 개의 화면 각각은 정사각형 형태인 것을 특징으로 하는 사용자 단말 장치.
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
KR1020140088919A 2014-02-13 2014-07-15 사용자 단말 장치 및 이의 디스플레이 방법 KR102107469B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/622,041 US10712918B2 (en) 2014-02-13 2015-02-13 User terminal device and displaying method thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201461939380P 2014-02-13 2014-02-13
US61/939,380 2014-02-13

Publications (2)

Publication Number Publication Date
KR20150095536A KR20150095536A (ko) 2015-08-21
KR102107469B1 true KR102107469B1 (ko) 2020-05-07

Family

ID=54058538

Family Applications (5)

Application Number Title Priority Date Filing Date
KR1020140089060A KR102037465B1 (ko) 2014-02-13 2014-07-15 사용자 단말 장치 및 이의 디스플레이 방법
KR1020140088919A KR102107469B1 (ko) 2014-02-13 2014-07-15 사용자 단말 장치 및 이의 디스플레이 방법
KR1020140088924A KR102132390B1 (ko) 2014-02-13 2014-07-15 사용자 단말 장치 및 이의 디스플레이 방법
KR1020140092534A KR102304178B1 (ko) 2014-02-13 2014-07-22 사용자 단말 장치 및 이의 디스플레이 방법
KR1020140095989A KR20150095541A (ko) 2014-02-13 2014-07-28 사용자 단말 장치 및 이의 디스플레이 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020140089060A KR102037465B1 (ko) 2014-02-13 2014-07-15 사용자 단말 장치 및 이의 디스플레이 방법

Family Applications After (3)

Application Number Title Priority Date Filing Date
KR1020140088924A KR102132390B1 (ko) 2014-02-13 2014-07-15 사용자 단말 장치 및 이의 디스플레이 방법
KR1020140092534A KR102304178B1 (ko) 2014-02-13 2014-07-22 사용자 단말 장치 및 이의 디스플레이 방법
KR1020140095989A KR20150095541A (ko) 2014-02-13 2014-07-28 사용자 단말 장치 및 이의 디스플레이 방법

Country Status (1)

Country Link
KR (5) KR102037465B1 (ko)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101667735B1 (ko) * 2015-09-11 2016-10-28 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR102560664B1 (ko) * 2015-09-30 2023-07-27 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR102503937B1 (ko) * 2015-12-16 2023-02-27 삼성전자 주식회사 전자 장치의 사용자 인터페이스 제공 방법 및 장치
KR102204682B1 (ko) * 2016-01-14 2021-01-19 후아웨이 테크놀러지 컴퍼니 리미티드 전자 디바이스 및 그러한 전자 디바이스의 동작 방법
KR102592053B1 (ko) * 2016-07-04 2023-10-23 삼성전자주식회사 유저 인터페이스 제공 방법 및 이를 지원하는 전자 장치
KR20180016131A (ko) * 2016-08-05 2018-02-14 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20190054397A (ko) * 2017-11-13 2019-05-22 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR102464527B1 (ko) * 2018-01-15 2022-11-09 삼성전자주식회사 디스플레이 장치 및 그 터치 인터페이스 방법
CN108255405B (zh) 2018-01-19 2019-09-10 Oppo广东移动通信有限公司 用户界面显示方法、装置及终端
KR102516346B1 (ko) * 2018-08-28 2023-03-31 엘지디스플레이 주식회사 터치 표시장치
EP3982240A4 (en) 2019-08-05 2022-07-20 Samsung Electronics Co., Ltd. CONTROL METHOD BASED ON A TOUCH INPUT AND ASSOCIATED ELECTRONIC DEVICE
KR20210016875A (ko) * 2019-08-05 2021-02-17 삼성전자주식회사 터치 입력에 기반한 동작 방법 및 그 전자 장치
EP4083765A4 (en) 2019-12-26 2023-09-27 LG Electronics Inc. DISPLAY DEVICE

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100081475A1 (en) * 2008-09-26 2010-04-01 Ching-Liang Chiang Mobile device interface with dual windows

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100898625B1 (ko) * 2007-03-22 2009-05-21 (주)쓰리디아이에스 멀티미디어 테이블
KR101608770B1 (ko) * 2009-08-03 2016-04-04 엘지전자 주식회사 이동단말기 및 그 제어방법
US9367205B2 (en) * 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US9477311B2 (en) 2011-01-06 2016-10-25 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US20120180001A1 (en) 2011-01-06 2012-07-12 Research In Motion Limited Electronic device and method of controlling same
KR101802760B1 (ko) * 2011-06-27 2017-12-28 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101905038B1 (ko) * 2011-11-16 2018-10-08 삼성전자주식회사 다중 어플리케이션 환경 하에서 터치스크린을 가지는 장치 및 그 제어 방법
KR20130055743A (ko) * 2011-11-21 2013-05-29 엘지전자 주식회사 전자 기기
KR102024587B1 (ko) * 2012-02-02 2019-09-24 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20130099647A (ko) * 2012-02-29 2013-09-06 한국과학기술원 사이드 인터페이스를 이용한 사용자 단말 컨텐츠 제어방법 및 제어장치
US9817568B2 (en) * 2012-02-29 2017-11-14 Blackberry Limited System and method for controlling an electronic device
KR101370719B1 (ko) * 2012-04-17 2014-03-10 한국과학기술원 터치스크린이 구비된 전자 장치 및 베젤 공간을 활용한 제스처를 통해 전자 장치를 제어하는 방법
KR102073601B1 (ko) * 2012-07-25 2020-02-06 삼성전자주식회사 사용자 단말 장치 및 그의 제어 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100081475A1 (en) * 2008-09-26 2010-04-01 Ching-Liang Chiang Mobile device interface with dual windows

Also Published As

Publication number Publication date
KR102037465B1 (ko) 2019-10-28
KR20150095537A (ko) 2015-08-21
KR102132390B1 (ko) 2020-07-09
KR102304178B1 (ko) 2021-09-23
KR20150095538A (ko) 2015-08-21
KR20150095536A (ko) 2015-08-21
KR20150095540A (ko) 2015-08-21
KR20150095541A (ko) 2015-08-21

Similar Documents

Publication Publication Date Title
KR102107469B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법
US10712918B2 (en) User terminal device and displaying method thereof
KR102156603B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법
KR102119843B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법
US10747416B2 (en) User terminal device and method for displaying thereof
US10521110B2 (en) Display device including button configured according to displayed windows and control method therefor
KR102331956B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법
KR102377785B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법
CN110320976B (zh) 用户终端装置及其显示方法
US10088991B2 (en) Display device for executing multiple applications and method for controlling the same
US20150227166A1 (en) User terminal device and displaying method thereof
US11604580B2 (en) Configuration of application execution spaces and sub-spaces for sharing data on a mobile touch screen device
KR20140133353A (ko) 디스플레이 장치 및 그 ui 화면 제공 방법
EP2743814A2 (en) Display apparatus and method of providing user interface thereof
US10866714B2 (en) User terminal device and method for displaying thereof
KR102368044B1 (ko) 사용자 단말 장치 및 이의 제어 방법
KR20170059242A (ko) 영상 표시 장치 및 그 동작방법
KR20150084524A (ko) 디스플레이 장치 및 이의 제어 방법
KR102426088B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant