KR20150031172A

KR20150031172A - 디스플레이 장치의 기능 수행 방법 및 디스플레이 장치

Info

Publication number: KR20150031172A
Application number: KR20140104496A
Authority: KR
Inventors: 조주연; 문민정; 김선화; 김도형; 정연희; 최선
Original assignee: 삼성전자주식회사
Priority date: 2013-09-13
Filing date: 2014-08-12
Publication date: 2015-03-23
Also published as: KR20150031155A

Abstract

디스플레이 장치의 기능 수행 방법을 개시한다. 본 발명의 일 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 모서리 영역 상에 사용자 입력이 수신되면, 상기 화면에 메뉴를 디스플레이 하는 단계와, 상기 메뉴에서 아이템이 선택되면, 상기 선택된 아이템에 대응되는 기능을 수행하는 단계를 포함하고, 상기 화면의 모서리 영역은 적어도 두 개의 상이한 모서리 영역을 포함하고, 상기 사용자 입력이 수신되는 위치에 따라, 상기 화면에 디스플레이 되는 메뉴가 달라진다.

Description

디스플레이 장치의 기능 수행 방법 및 디스플레이 장치{METHOD FOR PERFORMING FUNCTION OF DISPLAY APPARATUS AND DISPLAY APPARATUS}

본 발명은 디스플레이 장치의 인터페이스에 대한 것으로, 좀 더 구체적으로는 복잡한 기능을 갖는 디스플레이 장치에서 쉽고 직관적인 인터페이스를 통해 기능을 수행하기 위한 디스플레이 장치 및 디스플레이 장치의 기능 수행 방법에 대한 것이다.

최근 들어 개별 전자 장치의 기능들이 하나의 전자 장치로 통합되어 가는 경향은 더욱 심화되고 있다. 예를 들어, 스마트 폰은 디지털 카메라를 대체할 수 있을 정도의 카메라 모듈을 제공하고, 데스크톱 컴퓨터와 유사한 웹 브라우저를 제공한다. 또한, 디지털 액자, 전자사전, MP3 플레이어, 스케줄러, 이메일 송수신 기능을 수행하는 다양한 애플리케이션을 제공한다.

이처럼 전자 장치의 기능은 다양해지는 반면, 사용자 인터페이스는 더 쉽고 직관적인 방향으로 설계되고 있다. 이는 사용자가 전자 장치의 다양하고 복잡한 기능에 좀 더 쉽게 접근할 수 있도록 하기 위한 것이다.

대표적인 예로 윈도우 타입의 인터페이스를 들 수 있다. 윈도우 타입 인터페이스는 터치 스크린 상의 메뉴 아이콘을 통해 사용자 인터렉션을 수행하는 방식으로 근래에 출시되는 대부분의 전자 장치가 채택하고 있는 방식이다.

윈도우 타입 인터페이스에서는 터치 스크린 상에 디스플레이 된 메뉴 아이콘 상에 사용자가 터치 입력을 하면 메뉴 아이콘에 대응되는 애플리케이션이 실행된다. 그런데, 현실적으로 화면의 크기가 제약이 있고, 메뉴 아이콘의 식별을 위해 한 화면에 표시될 수 있는 메뉴 아이콘의 수가 제약이 따르는 경우가 많다. 전자 장치가 제공하는 기능이 많아지면서, 표시해야 할 메뉴 아이콘의 수가 많아지게 되므로 메뉴 아이콘은 여러 화면에 나누어 표시될 수 있다. 이 경우 사용자는 원하는 메뉴 아이콘을 찾기 위해 여러 화면을 옮겨 다녀야 한다. 이로 인해 사용자는 전자 장치에서 자신이 원하는 기능을 실행시키는데 어려움을 느낄 수 있다.

한편, 이러한 인터페이스는 물리적인 스트로크 키를 기반으로 한 것이 아니어서 시각 장애인이나 저 시력을 가진 사람들을 위한 점자(點字) 시스템이 배제되어 있는 문제점이 있다. 따라서, 디스플레이 장치에서 시각 장애인이나 저 시력을 가진 사람을 위한 별도의 인터페이스 설계를 고려할 필요가 있다.

요컨대, 복잡한 기능을 가진 디스플레이 장치에서 쉽고 직관적이면서, 시각 장애인이나 저 시력을 가진 사용자를 고려한 인터페이스를 통해 디스플레이 장치의 기능을 실행할 수 있는 방안이 필요하다.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, 본 발명의 목적은, 복잡한 기능을 가진 디스플레이 장치에서 쉽고 직관적이면서, 시각 장애인이나 저 시력을 가진 사용자를 고려한 인터페이스를 통해 디스플레이 장치의 기능을 실행할 수 있는 디스플레이 장치의 기능 수행 방법 및 디스플레이 장치를 제공하기 위함이다.

상기와 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 엣지 영역 상에 사용자 입력이 수신되면, 상기 화면에 메뉴를 디스플레이 하는 단계를 포함한다. 그리고, 상기 메뉴에서 아이템이 선택되면, 상기 선택된 아이템에 대응되는 기능을 수행하는 단계를 포함한다. 이때, 상기 화면의 엣지 영역은 적어도 두 개의 상이한 엣지 영역을 포함하고, 상기 사용자 입력이 수신되는 위치에 따라, 상기 화면에 디스플레이 되는 메뉴가 달라진다.

이때, 상기 디스플레이 장치의 기능 수행 방법은, 토크 백 기능(Talk back)이 설정된 경우, 원 탭(one tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 보이스 메시지를 출력하는 단계를 더 포함할 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 토크 백 기능(Talk back)이 설정된 경우, 멀티 탭(one tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 기능을 수행하는 단계를 더 포함할 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상이한 엣지 영역 상에 사용자 입력이 수신되면, 상이한 햅틱 진동을 생성하는 단계를 더 포함할 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상기 화면에 디스플레이 된 오브젝트에 대해 상기 원 탭(one tap) 터치에 의한 사용자 입력이 수신되면, 상기 오브젝트를 하이라이트 표시하는 단계를 더 포함할 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상기 메뉴를 구성하는 복수의 아이템들 중 상기 화면 상의 기 설정된 위치에 있는 아이템에 대한 사용자 입력이 수신되면, 햅틱 진동을 출력하는 단계를 더 포함할 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상기 화면의 엣지 영역은 상기 화면의 모서리 영역일 수 있다.

이때, 상기 화면의 엣지 영역은 상기 화면의 어느 하나의 사이드(side)의 중심이고, 상기 엣지 영역에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 토크 백 기능(Talk back)을 설정할 수 있다.

또한, 상기 엣지 영역은 상기 디스플레이 장치의 홈 버튼 및 스피커 중 적어도 하나에 대응되는 상기 화면의 사이드 위치일 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상기 화면의 엣지 영역에 상기 메뉴의 종류를 표시하는 가이드 오브젝트를 표시하는 단계와, 상기 화면에 기 설정된 터치 제스처에 의한 사용자 입력이 수신되면, 상기 표시된 가이드 오브젝트를 상기 화면에서 제거하는 단계를 더 포함할 수 있다.

또한, 상기 화면의 엣지 영역은 상기 화면의 어느 하나의 사이드(side)의 중심이고, 상기 엣지 영역에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 기능을 수행하고, 상기 멀티 탭(multi tap) 터치의 탭 수(number of taps)에 따라 상기 기능이 달라질 수 있다.

또한, 본 발명의 다른 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 제1 모서리 영역에서 시작하는 제1 드래그 입력을 수신하는 단계, 상기 화면의 제2 모서리 영역에서 시작하는 제2 드래그 입력을 수신하는 단계, 상기 제1 드래그 입력 및 상기 제2 드래그 입력을 조합한 패턴을 인식하는 단계, 상기 인식한 패턴을 암호로 설정된 패턴과 매칭하는 단계, 상기 인식한 패턴과 암호로 설정된 패턴이 일치하면, 상기 디스플레이 장치의 화면 잠금을 해제하는 단계를 포함한다.

이때, 상기 제1 드래그 입력 및 상기 제2 드래그 입력은, 상기 화면의 상하 방향 또는 좌우 방향의 드래그 입력일 수 있다.

또한, 본 발명의 또 다른 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 모서리 영역에서 시작하는 드래그 입력을 수신하는 단계, 상기 수신된 드래그 입력에 대응하여 기 설정된 애플리케이션을 실행하는 단계를 포함하고, 상기 화면의 모서리 영역에 따라 상기 기 설정된 애플리케이션이 달라진다.

이때, 상기 화면의 모서리 영역은 제1 모서리 영역과 제2 모서리 영역을 포함하고, 상기 기 설정된 애플리케이션을 실행하는 단계는, 상기 제1 모서리 영역에서 시작하는 드래그 입력이 수신되면, 연락처 애플리케이션을 실행하고, 상기 제2 모서리 영역에서 시작하는 드래그 입력이 수신되면, 스케줄 애플리케이션을 실행할 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상기 디스플레이 장치의 화면 잠금이 설정된 상태에서 상기 화면의 모서리 영역에서 기 설정된 시간 이상 지속되는 터치 입력이 수신되면, 상기 디스플레이 장치가 수신한 정보와 관련된 아이템을 디스플레이 하는 단계를 더 포함할 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상기 터치 입력이 종료되면, 상기 아이템 디스플레이를 종료하고 화면 잠금 이미지를 다시 설정하는 단계를 더 포함할 수 있다.

상기 디스플레이 장치가 수신한 정보와 관련된 아이템은, 메시지 알림 정보, 전화 알림 정보 및 이메일 알림 정보 중 적어도 하나일 수 있다.

또한, 상기 디스플레이 장치가 수신한 정보와 관련된 아이템은, 기 설정된 시간 내에 상기 디스플레이 장치가 외부 장치로부터 수신한 데이터와 관련된 것일 수 있다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 상기 디스플레이 된 아이템에 터치 또는 근접 입력이 있는 경우, 상기 아이템에 대한 보이스 메시지 또는 햅틱 진동을 출력하는 단계를 더 포함할 수 있다.

이상과 같은 본 발명의 다양한 실시 예에 따르면 본 발명은, 복잡한 기능을 가진 디스플레이 장치에서 쉽고 직관적이면서, 시각 장애인이나 저 시력을 가진 사용자를 고려한 인터페이스를 통해 디스플레이 장치의 기능을 실행할 수 있게 된다.

도 1a 및 1b는 본 발명의 일 실시 예에 따른 디스플레이 장치의 인터페이스를 도시한 참고도,
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 디스플레이 장치의 구성을 도시한 블록도,
도 3a 내지 3d는 본 발명의 일 실시 예에 따른 디스플레이 장치의 메뉴 아이템을 도시한 도면,
도 4a 내지 4d는 본 발명의 일 실시 예에 따른 메뉴의 아이템을 선택하는 GUI를 도시한 도면,
도 5a 내지 5d는 본 발명의 다른 실시 예에 따른 메뉴의 아이템을 선택하는 GUI를 도시한 도면,
도 6a 내지 6d는 본 발명의 또 다른 실시 예에 따른 메뉴의 아이템을 선택하는 GUI를 도시한 도면,
도 7a 내지 7d는 본 발명의 일 실시 예에 따른 보이스 메시지를 출력하는 디스플레이 장치의 동작을 도시한 도면,
도 8a 내지 8d는 본 발명의 다른 실시 예에 따른 보이스 메시지를 출력하는 디스플레이 장치의 동작을 도시한 도면,
도 9a 내지 9d는 본 발명의 일 실시 예에 따른 다양한 진동을 출력하는 디스플레이 장치의 동작을 도시한 도면,
도 10a 내지 10d는 본 발명의 일 실시 예에 따른 포커스 설정의 예를 도시한 도면,
도 11a 및 11b은 본 발명의 일 실시 예에 따른 햅틱 스티커를 도시한 도면,
도 12a 내지 13b은 본 발명의 다른 실시 예에 따른 햅틱 스티커를 도시한 도면,
도 14a 내지 14c는 본 발명의 다른 실시 예에 따른 디스플레이 장치의 인터페이스를 도시한 참고도,
도 15a 및 15b는 본 발명의 일 실시 예에 따른 가이드 오브젝트 제거 화면을 나타낸 도면,
도 16a는 본 발명의 일 실시 예에 따른 디스플레이 장치가 보이스 메시지를 함께 출력하는 상황을 도시한 도면,
도 16b 는 멀티 탭 터치에 의해 토크 백 기능을 설정하는 실시 예를 도시한 도면,
도 16c는 토크 백 기능이 설정된 상태에서 멀티 탭 터치에 의해 메뉴 아이템의 기능을 실행시키는 실시 예를 도시한 도면,
도 16d는 메뉴 아이템의 기능이 실행되는 화면을 도시한 도면,
도 17은 본 발명의 일 실시 예에 따른 오브젝트의 기준 위치를 진동으로 알려주는 실시 예를 도시한 도면,
도 18a 내지 18c는 디스플레이 장치의 화면 상단 사이드의 중심을 활용한 메뉴 구성을 도시한 도면,
도 19a는 접근성 설정 메뉴를 표시한 화면을 도시한 도면,
도19b는 토크 백 속도 설정을 위한 가이드 오브젝트를 표시한 화면을 나타낸 도면,
도 20a 및 20b는 최근 통화 기록 메뉴를 표시하는 화면을 나타낸 도면,
도 21a 내지 21e는 폴더를 생성하는 메뉴를 표시하는 화면을 나타낸 도면,
도 22a 내지 22b는 종래의 디스플레이 장치의 잠금 설정 화면을 도시한 도면,
도 23a 내지 23c는 본 발명의 일 실시 예에 따른 잠금 설정 및 해제 기능을 도시한 도면,
도 24a 내지 24d는 본 발명의 다른 실시 예에 따른 간편하게 애플리케이션을 실행시키는 실시 예를 도시한 도면,
도 25는 본 발명의 또 다른 실시 예에 따른 디스플레이 장치의 인터페이스를 도시한 도면,
도 26a 내지 26d는 복수의 투명 타일을 설정하는 사용자 인터페이스를 도시한 도면,
도 27은 본 발명의 또 다른 실시 예에 따른 타일의 글자 배경이 변경된 사용자 인터페이스를 도시한 도면,
도 28a 내지 28d는 특정 타일의 색을 설정하는 사용자 인터페이스를 도시한 도면,그리고,
도 29 내지 36은 본 발명의 다양한 실시 예에 따른 디스플레이 장치의 기능 수행 방법의 흐름도이다.

이하에서는 첨부된 도면을 참조하여 본 발명을 좀 더 상세하게 설명한다.

도 1a 및 1b는 본 발명의 일 실시 예에 따른 디스플레이 장치의 인터페이스를 도시한 참고도이다.

도 1a에 도시된 것처럼 본 발명에 따른 디스플레이 장치(100)는 화면의 각 모서리 영역(10, 20, 30, 40)에서 터치 입력을 수신할 수 있다. 디스플레이 장치(100)의 모서리 영역은 사용자가 촉각으로 감지할 수 있는 가장 정확한 디스플레이 장치(100)의 위치 중에 하나이다. 이는 시각 장애인이나 저 시력을 가진 사람에게도 마찬가지이다. 따라서, 모서리 영역(10, 20, 30, 40)은 사용자 명령을 수신할 수 있는 기준 위치가 될 수 있다.

각 모서리 영역(10, 20, 30, 40)은 상호 구별되어 각 모서리 영역을 통한 사용자 입력은 상이한 사용자 입력으로 간주될 수 있다. 즉, 제1 모서리 영역(10), 제2 모서리 영역(20), 제3 모서리 영역(30), 제4 모서리 영역(40)은 각각 구별되는 상이한 사용자 입력을 수신할 수 있다. 이때, 각 모서리 영역 상에 사용자 입력이 수신되면, 디스플레이 장치(100)는 도 1a에 도시된 것처럼 상이한 햅틱 진동을 생성할 수 있다. 사용자는 상이한 햅틱 진동을 통해 자신이 터치하는 위치가 디스플레이 장치(100)의 어느 모서리인지를 알 수 있다.

도 1b에 도시된 것처럼 모서리 영역(40) 상에 사용자 객체(200)에 의한 사용자 터치 입력이 감지되면 화면에 메뉴(45)가 디스플레이 된다. 오차와 사용자 터치 입력을 구별하기 위해 터치가 기 설정된 시간 이상 지속되는 경우만 사용자 입력으로 간주할 수 있다. 사용자 객체(200)는 도 2에서 사람의 신체로 도시되었으나, 스타일러스 펜이나 기타 터치 입력을 수행할 수 있는 일체의 물체가 될 수 있다. 메뉴(45)는 복수의 메뉴 아이템(47)을 포함할 수 있다. 선택되는 메뉴 아이템은 도 1b에 도시된 것처럼 화면의 중앙에 표시될 수도 있다(49). 다만, 화면의 중앙에 표시될 것인지는 선택적으로 결정될 사항이다. 이러한 실시 예에 대해서는 뒤에서 좀 더 상세하게 설명될 것이다.

본 발명의 다양한 실시 예를 설명하기에 앞서 본 발명에 따른 디스플레이 장치(100)의 구성을 먼저 설명한다.

도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치(100)의 구성을 도시한 블록도이다.

도 2를 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치(100)는 입력부(110), 디스플레이부(130), 제어부(120)를 포함한다.

입력부(110)는 사용자 입력을 수행하는 구성이다. 입력부(110)는 터치 스크린 모듈(미도시), 근접 센서 모듈(미도시)을 포함한다. 터치 스크린 모듈은 터치 스크린 상에 사용자 터치 입력이 있는 경우 전기장의 변화를 감지하여 사용자 입력 좌표를 판단한다. 그리고 사용자 입력 좌표에 대응되는 화면의 위치의 오브젝트 디스플레이를 변화시킨다. 최종적인 디스플레이는 화면 전체에 걸쳐 변화된 형태로 나타날 수 있다. 마찬가지로 근접 센서 모듈은 사용자 객체의 근접이 있는 경우 전기장 변화를 감지하여 입력 좌표를 판단한다. 그리고 사용자 입력 좌표에 대응되는 화면의 위치의 오브젝트 디스플레이를 변화시킨다. 최종적인 디스플레이는 화면 전체에 걸쳐 변화된 형태로 나타날 수 있다.

입력부(110)는 디스플레이 장치(100)의 상이한 모서리 영역을 구별한다. 즉, 디스플레이 장치(100)의 좌상에 위치한 제1 모서리 영역, 좌하에 위치한 제2 모서리 영역, 우상에 위치한 제3 모서리 영역, 우하에 위치한 제4 모서리 영역을 각각 구별한다. 그리고 각각에 대한 사용자 터치 입력을 구별한다.

입력부(110)를 통한 사용자 입력 타입은 다양하게 정의될 수 있다.

아래 표는 몇 가지 사용자 입력 타입을 정의한다. 다만, 아래 표는 예시에 불과하다. 즉, 아래 표와 다르게 정의하거나 추가적인 정의가 가능할 것이다.

사용자 터치 입력 타입	정의
탭(tab)	a <=터치 시간 < b
롱 프레스(long press)	b <= 터치 시간
더블 탭(double tab)	a<= 제1터치 시간 < b, a<= 제2터치 시간 < b 제1터치 시간과 제2 터치 시간 사이의 간격 < c
스와이프(swipe)	2이상의 인접 픽셀 동시에 터치 인접한 픽셀에 대한 터치 영역 이동
근접(approach)	근접 센서에 의한 감지 터치 센서 감지x

제어부(120)는 디스플레이 장치(100)의 동작 전반을 제어한다.

제어부(120)는 입력부(110)가 모서리 영역을 통해 사용자 입력을 수신하여 처리하도록 제어한다. 그리고, 디스플레이부(130)를 제어하여 화면에 메뉴를 디스플레이 한다. 특히, 사용자 입력이 수신되는 위치에 따라 화면에 디스플레이 되는 메뉴가 달라지도록 제어한다. 즉, 사용자 입력이 제1 모서리 영역에서 수신되었으면 제1 메뉴를 디스플레이 하도록 제어하고, 제2 모서리 영역에서 수신되었으면 제2 메뉴를 디스플레이 하도록 제어하고, 제3 모서리 영역에서 수신되었으면 제3 메뉴를 디스플레이 하도록 제어하고, 제4 모서리 영역에서 수신되었으면 제4 메뉴를 디스플레이 하도록 제어한다. 이러한 실시 예에 대해서는 뒤에서 도면과 함께 구체적으로 설명한다.

또한, 제어부(120)는 사용자 입력이 수신되면 햅틱 출력을 수행하도록 진동 모듈(미도시)을 제어한다. 진동 모듈은 탄성부재를 포함하는 액츄에이터로 구성되며, 코인형 진동 모터 (Coin Type Vibration Motor), 편심 모터, 보이스 코일 등이 사용될 수 있다.

제어부(130)는 MPU(Micro Processing Unit) 또는 CPU(Central Processing Unit), 캐쉬 메모리(Cache Memory), 데이터 버스(Data Bus) 등의 하드웨어 구성과, 운영체제, 특정 목적을 수행하는 어플리케이션의 소프트웨어 구성을 포함한다. 시스템 클럭에 따라 디스플레이 장치(100)의 동작을 위한 각 구성요소에 대한 제어 명령이 메모리에서 읽혀지며, 읽혀진 제어 명령에 따라 전기 신호를 발생시켜 하드웨어의 각 구성요소들을 동작시킨다.

제어부(120)는 메뉴에서 아이템이 선택되면, 상기 선택된 아이템에 대응되는 기능을 수행한다. 제어부는 선택된 아이템에 대응되는 기능의 애플리케이션을 실행시키고, 프로세스를 생성하여 메모리에 적재하고 작업 스케줄링을 수행한다.

디스플레이부(130)는 화면의 모서리 영역 상에 사용자 입력이 수신되면, 상기 화면에 메뉴를 디스플레이 하는 구성이다. 디스플레이부(130)는 복수의 아이템을 포함하는 메뉴를 디스플레이 할 뿐 아니라, 특정 아이템이 선택되는 경우 선택된 아이템에 대응되는 기능을 수행하기 위한 인터페이스 화면을 출력한다.

디스플레이부(130)는 이 밖에도 다양한 오브젝트를 포함하는 화면을 표시할 수 있다. 여기서 오브젝트란, 화면 상에 표시되는 특정한 기능 또는 콘텐츠에 대응되는 이미지를 의미한다. 디스플레이부(130)는 하나의 전체 이미지를 디스플레이하고 하나의 전체 이미지는 적어도 하나의 오브젝트를 포함할 수 있다.

오브젝트의 종류는 제한이 없다. 즉, 오브젝트는, 어플리케이션 아이콘, 콘텐츠 아이콘, 썸네일 이미지(thumbnail image), 폴더 아이콘, 위젯, 리스트 아이템, 메뉴 및 콘텐츠 이미지 중 적어도 하나일 수 있다. 어플리케이션 아이콘은 대응되는 이미지를 선택하는 경우 디스플레이 장치(100)에 포함되는 어플리케이션을 실행시키는 아이콘이다. 콘텐츠 아이콘은 대응되는 이미지를 선택하는 경우 콘텐츠를 재생시키는 아이콘이다. 썸네일 이미지는 이미지를 작은 사이즈로 축소하여 한 눈에 볼 수 있도록 표시한 이미지이고, 폴더 아이콘은 대응되는 이미지를 선택하는 경우 폴더 내의 파일을 디스플레이 하는 아이콘이다. 위젯은 어플리케이션 아이콘을 여러 단계의 메뉴 선택 없이 곧바로 실행시킬 수 있도록 사용자 인터페이스를 제공하는 아이콘이고, 리스트 아이템은, 파일을 리스트 형태로 표시하는 구성이고, 메뉴 이미지는 선택할 수 있는 메뉴를 표시하는 구성이다.

디스플레이부(130)는 다양한 디스플레이 패널로 설계될 수 있다. 즉, 디스플레이부(130)는 유기발광 다이오드 OLED(Organic Light Emitting Diodes), 액정 디스플레이 패널(Liquid Crystal Display Panel: LCD Panel), 플라즈마 디스플레이 패널(Plasma Display Panel: PDP), VFD(Vacuum Fluorescent Display), FED(Field EmissionDisplay), ELD(Electro Luminescence Display)등 다양한 디스플레이 기술로 구현될 수 있다. 디스플레이 패널은 주로 발광형으로 이루어질 것이지만, 반사형 디스플레이(E-ink, P-ink, Photonic Crystal)를 배제하는 것은 아니다. 또한, 플렉서블 디스플레이(flexible display), 투명 디스플레이(transparent display) 등으로 구현 가능할 것이다. 또한, 디스플레이 장치(100)는 두 개 이상의 디스플레이 패널을 구비하는 멀티 디스플레이 장치(100)로 구현 가능할 것이다.

이 밖에, 상기 디스플레이 장치(100)는 일반적인 전자 계산 장치가 갖는 필수적인 구성을 포함한다. 즉, 충분한 제어 및 연산 능력을 갖는 CPU 외에도, 하드 디스크나 블루레이 디스크와 같은 대용량 보조 기억 장치, 스피커와 같은 출력 장치, 근거리 통신 모듈, HDMI, USB를 포함하는 다양한 유무선 통신 모듈, 모션 센서, 영상 센서, GPS 모듈, 섀시 등의 하드웨어 구성을 더 포함한다.

본 발명에 따른 디스플레이 장치(100)는 다양한 전자 장치로 구현될 수 있다. 특히, 다양한 모바일 장치로 구현될 수 있는데, 예를 들어, 스마트 폰, 태블릿 PC, 스마트 워치(smart watch), PMP, MP3 플레이어, PDA, 셀 폰, 기타 이동성 있는 단말 장치 중 하나로 구현 가능하다.

이하에서는 본 발명의 일 실시 예에 따른 디스플레이 장치(100)의 메뉴 아이템을 설명한다.

도 3a 내지 3d는 본 발명의 일 실시 예에 따른 디스플레이 장치(100)의 메뉴 아이템을 도시한 도면이다.

도 3a에서 제1 모서리 영역(10)에 사용자 객체(200)에 의한 사용자 터치 입력이 있는 경우 메뉴(11)가 표시된 상황이 도시된다. 메뉴(11)는 폰(PHONE) 정보에 대한 것이다. 메뉴(11)는 디스플레이 장치(100)의 남은 배터리 양을 나타내는 폰 상태(PHONE STATUS) 아이템(15), 새로 도착한 알림 메시지 유무를 나타내는 알림(NOTIFICATION) 아이템(17), 설정한 알람 시간이 되었음을 나타내는 알람(ALERT ALARM) 아이템(13)을 포함하고 있다.

또한, 도 3a에 도시된 것처럼 화면의 중앙에 선택된 아이템 또는 선택될 아이템을 표시하는 것도 가능하다(19). 이는 시인성을 높이므로 사용자가 선택된 아이템 또는 선택될 아이템이 무엇인지 명확하게 인지할 수 있도록 돕는다. 이 경우 아이템은 형광색으로 식별력 있게 표시될 수 있다.

도 3b에서 제2 모서리 영역(20)에 사용자 객체(200)에 의한 사용자 터치 입력이 있는 경우 메뉴(21)가 표시된 상황이 도시된다. 메뉴(21)는 편집 메뉴(CUSTUMIZATION) 정보에 대한 것이다. 메뉴(21)는 디스플레이 장치(100)의 전체 애플리케이션을 나타내는 앱(APP) 아이템(25), 폴더를 추가하기 위한 폴더 추가(CREATE FOLDER) 아이템(23), 애플리케이션을 삭제하기 위한 앱 삭제(DELETE) 아이템(27)을 포함하고 있다. 도 3b에는 도시되지 않았으나, 앱을 추가하는 아이템이 더 포함될 수 있다.

또한, 도 3b에 도시된 것처럼 화면의 중앙에 선택된 아이템 또는 선택될 아이템을 표시하는 것도 가능하다(29). 이는 시인성을 높이므로 사용자가 선택된 아이템 또는 선택될 아이템이 무엇인지 명확하게 인지할 수 있도록 돕는다. 이 경우 아이템은 형광색으로 식별력 있게 표시될 수 있다.

도 3c에서 제3 모서리 영역(30)에 사용자 객체(200)에 의한 사용자 터치 입력이 있는 경우 메뉴(31)가 표시된 상황이 도시된다. 메뉴(31)는 주요 메뉴(MAIN) 정보에 대한 것이다. 메뉴(31)는 전화를 걸기(CALL) 위한 아이템(33), 즐겨 찾기(FAVORITE CALLS)를 보기 위한 아이템(35), 앱을 다운받기(PLAY STORE) 위한 앱을 실행시키는 아이템(31)을 포함한다. 도 3c에 도시되지는 않았으나, 이 밖에도 문자메시지를 보내는 기능을 실행하기 위한 아이템, 알람을 설정하기 위한 아이템, 폰을 설정하기 위한 아이템, 보이스 레코딩을 수행하기 위한 아이템, 인터넷을 하기 위한 아이템, 이메일을 송수신하기 위한 아이템, 카메라를 구동하기 위한 아이템, 플래너 기능을 사용하기 위한 아이템, 뮤직 플레이어를 구동하기 위한 아이템 등을 더 포함할 수 있다.

또한, 도 3c에 도시된 것처럼 화면의 중앙에 선택된 아이템 또는 선택될 아이템을 표시하는 것도 가능하다(39). 이는 시인성을 높이므로 사용자가 선택된 아이템 또는 선택될 아이템이 무엇인지 명확하게 인지할 수 있도록 돕는다. 이 경우 아이템은 형광색으로 식별력 있게 표시될 수 있다.

도 3d에서 제4 모서리 영역(40)에 사용자 객체(200)에 의한 사용자 터치 입력이 있는 경우 메뉴(41)가 표시된 상황이 도시된다. 메뉴(41)는 나만의 정보(ME)에 대한 것이다. 메뉴(41)는 현재 시간을 표시 (TIME)하기 위한 아이템(45), 주변 정보를 나타내기(NEAR BY) 위한 아이템(43), 날씨를 나타내기(WEATHER) 위한 아이템(47)을 포함한다.

또한, 도 3d에 도시된 것처럼 화면의 중앙에 선택된 아이템 또는 선택될 아이템을 표시하는 것도 가능하다(49). 이는 시인성을 높이므로 사용자가 선택된 아이템 또는 선택될 아이템이 무엇인지 명확하게 인지할 수 있도록 돕는다. 이 경우 아이템은 형광색으로 식별력 있게 표시될 수 있다.

이하에서는 메뉴의 아이템을 선택하는 제어부(120)의 다양한 실시 예를 설명한다.

전술한 것처럼 제어부(120)는 모서리 영역에 사용자 입력이 있는 경우 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 본 발명의 일 실시 예에서 제어부(120)는 화면의 모서리 영역 상에 터치 입력이 있는 동안, 화면에 메뉴를 구성하는 복수의 아이템을 기 설정된 시간 간격으로 변화시키면서 디스플레이 하도록 디스플레이부(130)를 제어할 수 있다. 예를 들어, 사용자가 화면의 제4 모서리 영역(40) 상에 롱 프레스 터치 입력을 지속적으로 하는 동안 1초 간격으로 메뉴를 구성하는 복수의 아이템을 변화시키면서 디스플레이 할 수 있다. 도 4a 내지 4d는 좀더 구체적인 실시 예를 도시한다.

도 4a 내지 4d는 본 발명의 일 실시 예에 따른 메뉴의 아이템을 선택하는 GUI를 도시한 도면이다.

제어부(120)는 화면의 모서리 영역 상에 터치 입력이 수신되면, 복수의 아이템으로 구성된 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 그리고, 메뉴의 기 설정된 위치의 아이템은 활성화 된다. 아이템이 활성화되면, 활성화된 아이템은 선택할 수 있는 상태에 놓이게 된다. 아이템이 선택되면 아이템에 대응되는 애플리케이션이나 디스플레이 장치(100)의 기능이 수행된다. 제어부(120)는 화면의 모서리 영역 상에 터치 입력이 있는 동안, 화면에 메뉴를 구성하는 복수의 아이템을 기 설정된 시간 간격으로 순차적으로 활성화시키면서 디스플레이 하도록 디스플레이부(130)를 제어할 수 있다.

아이템의 선택 방법이 다양할 수 있는데, 일 실시 예로 상기 화면의 모서리 영역 상에 터치 입력이 종료되면, 제어부(120)는 상기 복수의 아이템 중 터치 입력 종료 당시의 활성화 된 아이템에 대응되는 기능이 수행되도록 디스플레이 장치(100)를 제어할 수 있다.

도 4a에서 사용자 객체(200)에 의해 제3 모서리 영역(30)에 사용자 터치 입력이 수신되는 상황이 도시되고 있다. 제어부(120)는 제3 모서리 영역(30) 상에 사용자 터치 입력이 수신되었으므로 메인 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 그리고, 메뉴는 복수의 아이템으로 구성되는데, 도 4b에 도시된 것처럼 메뉴의 중앙에 현재 활성화된 아이템이 표현된다. 현재 전화 아이템(33)이 활성화되어 표시되고 있으며 화면의 중앙에도 표시되고 있다(34).

사용자가 터치를 종료시키지 않고 지속하면 기 설정된 시간 간격으로 복수의 아이템이 순차적으로 활성화되면서 메뉴 구성이 변화된다. 즉, 도 4c에 도시된 것처럼 문자 메시지(36) 아이템이 활성화되고 전화 아이템은 비활성화된다. 문자 메시지 아이템은 화면 중앙에도 표시되었다(38).

이 상태에서 터치를 종료시키면, 터치 입력 종료 당시의 활성화 된 아이템인 문자 메시지(36) 아이템에 대응되는 기능인 문자 메시지 기능이 실행된다. 따라서, 문자 메시지 창이 디스플레이된다(도 4d).

도 5a 내지 5d는 본 발명의 다른 실시 예에 따른 메뉴의 아이템을 선택하는 GUI를 도시한 도면이다.

제어부(120)는 화면의 모서리 영역 상에 터치 입력이 수신되면, 복수의 아이템으로 구성된 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 그리고, 메뉴의 기 설정된 위치의 아이템은 활성화 된다. 아이템이 활성화되면, 활성화된 아이템은 선택할 수 있는 상태에 놓이게 된다. 전자와 마찬가지로 아이템이 선택되면 아이템에 대응되는 애플리케이션이나 디스플레이 장치(100)의 기능이 수행된다. 그러나, 전술한 방법과 달리 터치가 지속되지 않고 이 경우는 터치가 종료된다. 이때 수행된 터치는 롱 프레스가 아닌 탭에 의한 터치이다. 탭이 종료되고 스와이프 터치(SWIPE, 또는 SLIDE)를 통해 활성화 아이템을 변경할 수 있다. 즉, 이 경우 사용자는 스와이프 터치를 통해 선택하고자 하는 아이템을 활성화시킨다. 그리고, 터치가 종료됐으므로, 최종적으로 아이템을 선택하는 경우 화면의 임의의 영역에 더블 탭을 수행한다. 제어부(120)는 더블 탭 입력이 수신되면, 상기 복수의 아이템 중 활성화 된 아이템에 대응되는 기능이 수행되도록 디스플레이 장치(100)를 제어한다.

도 5a에서 사용자 객체(200)에 의해 제3 모서리 영역(30)에 사용자 터치 입력이 수신되는 상황이 도시되고 있다. 제어부(120)는 제3 모서리 영역(30) 상에 사용자 터치 입력이 수신되었으므로 메인 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 그리고, 메뉴는 복수의 아이템으로 구성되는데, 도 5b에 도시된 것처럼 메뉴의 중앙에 현재 활성화된 아이템이 표현된다. 현재 전화 아이템(33)이 활성화되어 표시되고 있으며 화면의 중앙에도 표시되고 있다(34). 다만, 화면의 중앙에 아이템을 표시하는 것은 선택 사항이다.

이때, 사용자는 터치를 종료시킬 수 있다. 즉, 사용자는 더 이상 터치 스크린에 터치 입력을 수행하지 않을 수 있다. 이때 사용자는 복수의 아이템으로 구성된 메뉴를 스와이프(SWIPE, SLIDE) 터치 함으로써 아이템 구성을 변경할 수 있다. 예를 들어, 도 5b에서 반 시계 방향으로 짧은 스와이프 터치를 수행하게 되면 활성화된 전화 아이템(33)이 비활성화되고 즐겨찾기 아이템이 활성화 상태에 놓이게 될 수 있다. 즐겨찾기 외에 아이템이 더 있는 경우 새로운 아이템이 즐겨찾기 아이템의 자리에 위치할 수 있다. 이때 활성화된 즐겨찾기 아이템은 선택적으로 화면의 중앙에 표시될 수 있다.

도 5c에 도시된 실시 예에서는 사용자는 아무런 추가적인 스와이프 입력을 수행하지 않았다. 화면의 임의의 영역에서 더블 탭이 수신되었으며, 활성화된 아이템인 전화 화면이 도시되고 있다(도 5d).

그러나, 도 4a 내지 5d와 같이 메뉴가 반드시 모서리 영역에 표시되어야만 하는 것은 아니다. 즉, 메뉴는 화면의 어느 영역에 표시될 수도 있다. 도 6a 내지 6d는 이러한 실시 예를 도시한다.

도 6a 내지 6d는 본 발명의 또 다른 실시 예에 따른 메뉴의 아이템을 선택하는 GUI를 도시한 도면이다.

도 6a에서 사용자 객체(200)에 의해 제3 모서리 영역(30)에 사용자 터치 입력이 수신되는 상황이 도시되고 있다. 제어부(120)는 제3 모서리 영역(30) 상에 사용자 터치 입력이 수신되었으므로 메인 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 그리고, 메뉴는 복수의 아이템으로 구성되는데, 도 6b에 도시된 것처럼 메뉴의 중앙에 현재 활성화된 아이템이 표현된다. 현재 전화 아이템(34)이 활성화되어 표시되고 있으며 화면의 중앙에 표시된다.

사용자는 스와이프 터치를 통해 큐브(cube)의 일면에 있는 아이템을 정면으로 향하도록 조작할 수 있다. 정면으로 향한 아이템은 활성화된 아이템이고 선택될 수 있는 아이템이 된다. 사용자는 간단한 터치로 아이템을 선택할 수 있다. 도 6c에서 사용자는 문자 메시지를 큐브의 정면으로 향하도록 하였으며, 아이템을 터치 함으로써, 아이템에 대응되는 기능인 문자 메시지 기능이 실행되었다(도 6d). 이러한 실시 예는 사용자의 시각 대상과 터치 대상이 일치한다는 점에서 사용자에게 좀 더 경험적이며, 시인성이 좋다.

한편, 시각 장애인이나 저 시력을 갖고 있는 사람에게 청각은 사물 인지의 효과적인 보조 수단이 될 수 있다. 따라서, 본 발명에 따른 디스플레이 장치(100)의 제어부(120)는 사용자 입력에 대응되는 보이스 메시지를 출력하도록 제어하는 기능을 더 구비할 수 있다.

도 7a 내지 7d는 본 발명의 일 실시 예에 따른 보이스 메시지를 출력하는 디스플레이 장치의 동작을 도시한 도면이다.

도 7a에서 사용자 객체(200)에 의해 제3 모서리 영역(30)에 사용자 터치 입력이 수신되는 상황이 도시되고 있다. 제어부(120)는 제3 모서리 영역(30) 상에 사용자 터치 입력이 수신되었으므로 메인 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 이때, 사용자 터치 입력에 대응되는 보이스 메시지, 예를 들어 “주요 메뉴”와 같은 음성 메시지(sound 1)가 스피커를 통해 출력된다.

그리고, 메뉴는 복수의 아이템으로 구성되는데, 도 7b에 도시된 것처럼 메뉴의 중앙에 현재 활성화된 아이템이 표현된다. 현재 전화 아이템(33)이 활성화되어 표시되고 있으며 화면의 중앙에도 표시되고 있다(34). 이때, 활성화된 아이템에 대응되는 음성 메시지가 스피커를 통해 출력된다. 즉, “전화”와 같은 음성 메시지(sound 2)가 출력된다.

사용자가 터치를 종료시키지 않고 지속하면 기 설정된 시간 간격으로 복수의 아이템이 순차적으로 활성화되면서 메뉴 구성이 변화된다. 즉, 도 7c에 도시된 것처럼 문자 메시지(36) 아이템이 활성화되고 전화 아이템은 비활성화된다. 이때, 새롭게 활성화된 아이템인 “문자 메시지”가 음성 메시지(sound 3)로 출력된다.

이 상태에서 터치를 종료시키면, 터치 입력 종료 당시의 활성화 된 아이템인 문자 메시지(36) 아이템에 대응되는 기능인 문자 메시지 기능이 실행되면서 (도 7d), “문자 메시지 보내기가 실행되었습니다.”와 같은 음성 메시지(sound 4)가 출력된다.

도 8a 내지 8d는 본 발명의 다른 실시 예에 따른 보이스 메시지를 출력하는 디스플레이 장치의 동작을 도시한 도면이다.

도 8a에서 사용자 객체(200)에 의해 제3 모서리 영역(30)에 사용자 터치 입력이 상황이 도시되고 있다. 제어부(120)는 제3 모서리 영역(30) 상에 사용자 터치 입력이 수신되었으므로 메인 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 이때, 사용자 터치 입력에 대응되는 보이스 메시지, 예를 들어 “주요 메뉴”와 같은 음성 메시지(sound 1)가 스피커를 통해 출력된다.

그리고, 메뉴는 복수의 아이템으로 구성되는데, 도 8b에 도시된 것처럼 메뉴의 중앙에 현재 활성화된 아이템이 표현된다. 현재 전화 아이템(33)이 활성화되어 표시되고 있으며 화면의 중앙에도 표시되고 있다(34). 화면의 중앙에 표시하는 것은 선택 사항이다.

이때, 사용자는 터치를 종료시킬 수 있다. 즉, 사용자는 더 이상 터치 스크린에 터치 입력을 수행하지 않을 수 있다. 이때 사용자는 복수의 아이템으로 구성된 메뉴를 스와이프(SWIPE, SLIDE) 터치 함으로써 아이템 구성을 변경할 수 있다. 예를 들어, 도 8b에서 반 시계 방향으로 짧은 스와이프 터치를 수행하게 되면 활성화된 전화 아이템(33)이 비활성화되고 즐겨찾기 아이템이 활성화 상태에 놓이게 될 수 있다. 즐겨찾기 외에 아이템이 더 있는 경우 새로운 아이템이 즐겨찾기 아이템의 자리에 위치할 수 있다. 이때 활성화된 즐겨찾기 아이템은 선택적으로 화면의 중앙에 표시될 수 있다. 이때, 활성화된 아이템에 대응되는 음성 메시지가 스피커를 통해 출력된다. 즉, “전화”와 같은 음성 메시지(sound 2)가 출력된다. 그러나, 활성화된 아이템이 변경되는 경우는 변경된 아이템에 대한 음성 메시지가 출력된다.

도 8c에 도시된 실시 예에서는 사용자는 아무런 추가적인 스와이프 입력을 수행하지 않았다. 화면의 임의의 영역에서 더블 탭이 수신되고, “전화 걸기가 실행되었습니다.”와 같은 음성 메시지(sound 5)가 출력된다. 활성화된 아이템인 전화 걸기 화면이 도시되고 있다(도 8d).

공공 장소에서 매너를 위해서나 기타 이유로 음성 메시지 대신 메뉴를 구성하는 아이템에 따라 진동이 상이하도록 설정될 수 있다. 도 9a 내지 9d는 이러한 실시 예를 도시한다.

도 9a 내지 9d는 본 발명의 일 실시 예에 따른 다양한 진동을 출력하는 디스플레이 장치의 동작을 도시한 도면이다.

도 9a에서 사용자 객체(200)에 의해 제3 모서리 영역(30)에 사용자 터치 입력이 수신되는 상황이 도시되고 있다. 제어부(120)는 제3 모서리 영역(30) 상에 사용자 터치 입력이 수신되었으므로 메인 메뉴를 디스플레이 하도록 디스플레이부(130)를 제어한다. 이때, 디스플레이 장치(100)는 사용자 터치 입력에 대응되는 진동, 예를 들어 한 번의 짧은 진동 패턴으로 진동을 출력할 수 있다.

그리고, 메뉴는 복수의 아이템으로 구성되는데, 도 9b에 도시된 것처럼 메뉴의 중앙에 현재 활성화된 아이템이 표현된다. 현재 전화 아이템(33)이 활성화되어 표시되고 있으며 화면의 중앙에도 표시되고 있다(34). 이때, 활성화된 아이템에 대응되는 진동 패턴이 출력된다. 예를 들어, 두 번의 짧은 연속되는 진동으로 구성되는 진동 패턴의 진동이 출력될 수 있다.

사용자가 터치를 종료시키지 않고 지속하면 기 설정된 시간 간격으로 복수의 아이템이 순차적으로 활성화되면서 메뉴 구성이 변화된다. 즉, 도 9c에 도시된 것처럼 문자 메시지(36) 아이템이 활성화되고 전화 아이템은 비활성화된다. 이때, 새롭게 활성화된 아이템인 문자 메시지의 진동 패턴은 세 번의 짧은 연속되는 진동으로 구성될 수 있다.

이 상태에서 터치를 종료시키면, 터치 입력 종료 당시의 활성화 된 아이템인 문자 메시지(36) 아이템에 대응되는 기능인 문자 메시지 기능이 실행된다(도 9d). 사용자는 이렇게 진동 패턴으로 각 아이템을 구별할 수 있다.

전술한 본 발명의 다양한 실시 예들을 통해 사용자는 좀 더 직관적으로 디스플레이 장치의 각 아이템에 대응되는 기능이나 애플리케이션들을 실행시킬 수 있게 된다. 그런데, 디스플레이 장치(100)가 제공하는 다양한 애플리케이션이나 기능들 역시 다양하고 복잡한 인터페이스와 키를 제공한다. 예를 들어, 도 4d는 문자 메시지를 보내기 위한 사용자 얼마나 인터페이스가 많은 키들로 구성되며 이러한 것들이 노인이나 저 시력을 갖고 있는 사람에게 얼마나 어려울 수 있는가를 보여주고 있다. 따라서, 애플리케이션이나 디스플레이 장치가 제공하는 인터페이스의 시인성을 높일 수 있는 방안이 요구된다.

이를 해결하기 위한 한 가지 방안은 개인에 따라 사용 빈도가 높은 애플리케이션, 키, 오브젝트, 버튼, 아이콘 등에 포커스를 설정해 놓는 것이다. 여기서 포커스란 사용자가 원하는 부분을 그 외의 부분과 다르게 식별력 있게 표시하는 것을 의미한다. 예를 들어, 하이라이트 표시하거나 특정한 색채로 표시하는 것이 될 수 있다.

도 10a 내지 10d는 본 발명의 일 실시 예에 따른 포커스 설정을 도시한다.

도 10a는 전화 애플리케이션의 인터페이스에서 문자 메시지 키(1010)를 자주 사용하는 경우 문자 메시지 키(1010)에 포커스 설정을 해 놓은 상황을 도시한다. 문자 메시지 키(1010)가 하이라이트 표시되어 있음을 알 수 있다. 문자 메시지 키(1010)가 사용 빈도가 높으므로 시인성을 높이고자 하이라이트가 되어 있는 것이다.

도 10b는 문자 메시지 인터페이스에서 파일 첨부 키(1020)에 포커스 설정 해 놓은 상황을 도시한다. 파일 첨부 키(1020)가 하이라이트 표시되어 있음을 알 수 있다. 사용자는 평소에 파일 첨부 키(1020)를 찾는데 어려움을 겪었던 경험으로 시인성을 높이고자 포커싱 처리한 것으로 추측할 수 있다.

유사하게 도 10c는 음성 녹음 애플리케이션의 녹음 시작 버튼(1030)을 포커스 설정 해 놓은 상황을 도시한다. 도 10d는 동영상 재생 애플리케이션에서 일시 정지 버튼(1040)을 포커스 설정 해 놓은 상황을 도시한다.

포커스 설정은 사용성이 높은 오브젝트에 대한 시인성을 높이기 위한 것인데, 햅틱 반응이나 사운드 피드백을 통해 유사한 목적을 달성할 수 있다. 이하에서는 이러한 실시 예를 설명한다.

도 11a 및 11b은 햅틱 반응을 이용한 본 발명의 일 실시 예를 도시한 도면이다.

포커스 설정과 유사하게 사용자의 사용 빈도가 높은 애플리케이션, 키, 오브젝트, 버튼, 아이콘 등에 대해 햅틱 오브젝트를 설정할 수 있다. 오브젝트에 대해 사용자 입력이 수신되면, 제어부(120)는 그 오브젝트를 햅틱 오브젝트로 설정한다. 그리고, 제어부(120)는 상기 설정된 햅틱 오브젝트에 대한 근접 입력이 감지되면, 햅틱 진동을 출력하도록 진동 모듈(미도시)을 제어한다.

도 11a에서 사용자는 사용자 객체(200)에 의해 전화 걸기 아이콘(1110)에 햅틱 오브젝트를 설정하는 상황이 도시된다. 이는 오브젝트에 햅틱 기능을 붙이는 것이므로 햅틱 스티커라고 정의할 수 있다. 그리고, 전체 애플리케이션 오브젝트(1120)에도 햅틱 스티커를 설정하는 상황이 도시된다(도 11b).

이후 사용자 객체(200)가 전화 걸기 오브젝트에 근접하게 되면 근접 센서가 사용자 객체(200)의 근접을 감지하고 햅틱 반응이 일어난다(도 11c). 마찬가지로 전체 애플리케이션 오브젝트(1120) 근처에 사용자 객체(200)가 위치하면, 햅틱 출력이 수행된다(도 11d). 이로써, 사용자는 그 오브젝트가 사용 빈도가 높은 오브젝트임을 알 수 있게 된다. 복수의 햅틱 반응이 존재하는 경우 각 햅틱 반응을 서로 다르게 설정하는 것이 가능하다. 즉, 햅틱1, 햅틱 2, 햅틱 3,… 와 같이 설정하는 것이 가능하며, 이러한 구별은 중요도, 설정 순서, 오브젝트의 종류 등으로 구별될 수 있다.

또한, 제어부(120)는 상기 설정된 햅틱 오브젝트에 대한 근접 입력이 감지되면, 상기 감지된 근접 입력에 대응되는 보이스 메시지를 출력하도록 스피커를 제어할 수 있다.

도 12a 내지 13b은 햅틱 반응을 이용한 본 발명의 다른 실시 예를 도시한 도면이다.

도 12a에서 사용자는 사용자 객체(200)에 의해 문자 메시지 창의 전송 키(1210)과 줄 바꿈 키(1220)에 보이스 오브젝트를 설정하는 상황이 도시된다.

이후 사용자 객체(200)가 문자 메시지 창을 열고 전송 키(1210)에 근접하게 되면 햅틱 반응이 일어난다. 반면, 사용자 객체(200)가 줄 바꿈 키(1220)에 근접하게 되면 보이스 메시지를 출력된다. 보이스 메시지는 “백 스페이스”와 같이 출력될 수 있다. 물론, 햅틱 반응과 함께 일어날 수도 있다(도 12b). 이로써, 사용자는 그 오브젝트가 사용 빈도가 높은 오브젝트임을 알 수 있게 된다.

도 13a 및 13b도 유사한 실시 예를 도시한다. 도 13a 및 13b는 웹 상에서 지원되는 웹 아이콘에 대해서도 햅틱 스티커를 설정할 수 있음을 보여주고 있다(1310, 1320, 1330).

이하에서는 본 발명의 다른 실시 예에 따른 디스플레이 장치(100)의 인터페이스와 상기 인터페이스를 통한 디스플레이 장치(100)의 기능 실행의 실시 예를 설명한다.

도 14a 내지 14c는 본 발명의 다른 실시 예에 따른 디스플레이 장치(100)의 인터페이스를 도시한 참고도이다.

도 14a를 참조하면, 본 발명의 다른 실시 예에 따른 디스플레이 장치(100)의 인터페이스는 화면의 엣지(edge) 영역에 메뉴 선택을 위한 복수의 오브젝트(10-1, 20-1, 30-1, 40-1, 50, 60)들을 디스플레이 한다. 상기 화면의 엣지 영역은 모서리 영역(10-1, 20-1, 30-1, 40-1) 또는 화면의 어느 하나의 사이드(side)의 중심(50, 60)이 될 수 있다. 상기 어느 하나의 사이드의 중심(50, 60)은 디스플레이 화면의 상단 사이드의 중심(50), 하단 사이드의 중심(60)을 포함하며, 양측변 사이드의 중심도 포함될 수 있다.

화면의 상단 사이드의 중심(50)은 디스플레이 장치(100)의 상단 스피커(101)에서 하단 방향으로 향하는 직선상에 위치하므로, 상기 화면 상단 사이즈의 중심(50)은 사용자가 상단 스피커(101)에 사용자 객체를 이용하여 터치하고, 하단 화면 방향으로 터치를 유지하면서 내려오다가 화면과 만나는 지점에 해당한다. 화면 하단 사이드의 중심(60)은 디스플레이 장치(100)의 하단 버튼(102)에서 상단 방향으로 향하는 직선상에 위치하므로, 상기 화면 하단 사이드의 중심(60)은 사용자가 하단 버튼(102)에 사용자 객체를 이용하여 터치하고, 화면 상단 방향으로 터치를 유지하면서 올라가다가 화면과 만나는 지점에 해당한다. 따라서, 시각 장애인이나 저 시력을 갖고 있는 사용자라도 상기 화면 상단 사이드의 중심(50)과 화면 하단 사이드의 중심(60)을 쉽게 찾을 수 있다.

디스플레이 장치(100)의 엣지 영역은 사용자가 촉각으로 감지할 수 있는 가장 정확한 디스플레이 장치(100)의 위치 중에 하나이다. 이는 시각 장애인이나 저 시력을 가진 사람에게도 마찬가지이다. 따라서, 엣지 영역(10-1, 20-1, 30-1, 40-1, 50, 60)은 사용자 명령을 수신할 수 있는 기준 위치가 될 수 있다. 상기 화면의 각 엣지 영역(10-1, 20-1, 30-1, 40-1, 50, 60)에는 전술한 것처럼 메뉴 선택을 위한 오브젝트가 디스플레이 된다. 본 명세서에서는 상기 메뉴 선택을 위한 오브젝트를 가이드 오브젝트(GUIDE OBJECT)라고 정의한다. 상기 가이드 오브젝트 상에 사용자 터치 입력이 이루어 질 수 있다.

각 엣지 영역(10-1, 20-1, 30-1, 40-1, 50, 60)은 상호 구별되어 각 엣지 영역을 통한 사용자 입력은 상이한 사용자 입력으로 간주될 수 있다. 즉, 제1 엣지 영역(10-1), 제2 엣지 영역(20-1), 제3 엣지 영역(30-1), 제4 엣지 영역(40-1), 제5 엣지 영역(50), 제6 엣지 영역(60)은 각각 구별되는 상이한 사용자 입력을 수신할 수 있다.

디스플레이 장치(100)의 제어부(120)는 상기 화면의 엣지(edge) 영역의 가이드 오브젝트 상에 터치와 같은 사용자 입력이 수신되면, 상기 화면에 메뉴와 같은 대응되는 오브젝트를 디스플레이 하도록 제어한다. 이때 상기 사용자 입력이 수신되는 위치에 따라, 상기 화면에 디스플레이 되는 메뉴가 달라질 수 있다. 또한, 상기 메뉴에서 아이템이 선택되면, 상기 선택된 아이템에 대응되는 기능이 실행될 수 있다.

도 14a에 도시된 것처럼 메뉴(1470)는 복수의 메뉴 아이템으로 구성되며, 복수의 메뉴 아이템 각각에 대해 사용자 입력이 수신되면, 디스플레이 장치(100)의 제어부(120)는 대응되는 기능을 수행할 수 있다. 도 14a에 도시된 것처럼 복수의 메뉴 아이템은 타일(tile) 형태로 디스플레이 될 수 있고, 각 메뉴 아이템은 상이한 컬러로 표현될 수 있다.

도 14b는 사용자 객체(200)에 의해 제1 엣지 영역(10-1)(또는 제1 엣지 영역에 디스플레이 된 가이드 오브젝트)에 터치 입력을 수행하는 상황을 도시한다. 제1 엣지 영역(10-1)에 사용자 입력이 수신되면, 디스플레이 장치(100)의 제어부(120)는 즐겨 찾기 메뉴를 디스플레이 하도록 제어할 수 있다. 도 14b의 실시 예에서는 뉴스, voice, 전등, 계산기, 메시지, 등의 메뉴 아이템이 즐겨찾기로 등록되어 있다. 각 메뉴 아이템에 사용자 입력이 수신되면, 디스플레이 장치(100)의 제어부(120)는 대응되는 기능을 수행할 수 있다. 예를 들어, 계산기 아이템에 사용자 입력이 수신되면, 디스플레이 장치(100)의 제어부(120)는 계산기 애플리케이션을 실행시킨다.

도 14c는 사용자 객체(200)에 의해 제4 엣지 영역(40-1)(또는 제4 엣지 영역에 디스플레이 된 가이드 오브젝트)에 터치 입력을 수행하는 상황을 도시한다. 제4 엣지 영역(40-1)에 사용자 입력이 수신되면, 디스플레이 장치(100)의 제어부(120)는 다양한 정보를 알려주는 애플리케이션의 메뉴를 디스플레이 할 수 있다. 도 14c의 실시 예에서는 배터리, 네트워크, 위치 등의 메뉴 아이템이 정보를 나타내는 애플리케이션으로 설정되어 있다. 각 메뉴 아이템에 사용자 입력이 수신되면, 디스플레이 장치(100)의 제어부(120)는 대응되는 기능을 수행할 수 있다. 예를 들어, 날씨 아이템에 사용자 입력이 수신되면, 디스플레이 장치(100)의 제어부(120)는 날씨 정보를 보여주는 애플리케이션을 실행시킨다.

이렇게 상이한 엣지 영역 상에 사용자 입력이 수신되면, 제어부(120)는 상이한 햅틱 진동을 생성하여 출력하도록 진동 모듈(미도시)을 제어한다. 이를 통해 사용자가 좀더 명확하게 엣지 영역을 식별할 수 있도록 돕는다.

전술한 것처럼 각 엣지 영역에는 가이드 오브젝트가 디스플레이 된다. 가이드 오브젝트는 사용자 터치가 있는 경우, 디스플레이 되는 메뉴의 특성을 표시한다. 예를 들어, 즐겨찾기에 대한 가이드 오브젝트는 별표(★)를 통해 사용자에게 해당 오브젝트가 즐겨찾기와 관련이 있음을 알려준다. 이렇게 가이드 오브젝트는 편리한 인터페이스 환경을 제공하지만, 애플리케이션을 실행하는 경우, 실행 화면을 가리게 되는 등 불편이 생길 수 있는 바, 이에 대한 해결책이 필요하다.

도 15a 및 15b는 본 발명의 일 실시 예에 따른 가이드 오브젝트 제거 화면을 됫한 도면이다.

디스플레이 장치(100)의 제어부(120)는 가이드 오브젝트가 디스플레이 된 상황에서 화면에 기 설정된 터치 제스처에 의한 사용자 입력이 수신되면, 상기 표시된 가이드 오브젝트를 상기 화면에서 제거할 수 있다. 즉, 도 15a와 같이 사용자가 화면에 ‘z’모양의 터치 제스처에 의한 사용자 입력을 수행하면, 도 15b와 같이 표시된 가이드 오브젝트가 제거된다. 사용자는 좀더 편리하게 디스플레이 장치(100)를 사용할 수 있다.

도 16a는 본 발명의 일 실시 예에 따른 디스플레이 장치가 보이스 메시지를 함께 출력하는 상황을 도시한 도면이다.

도 16a를 참조하면, 제어부(120)는 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 보이스 메시지를 출력하도록 제어할 수 있다. 예를 들어, 디스플레이 아이템에 대해 사용자 객체(200)에 의한 터치 입력이 수신되면, 상기 아이템이 포함하고 있는 텍스트를 음성으로 변환하여 출력할 수 있다. 이를 위해 디스플레이 장치는 TTS(Text to Speech)모듈을 더 포함할 수 있다. TTS 모듈은 사용자 입력이 있는 아이템의 텍스트를 음성으로 변환한다.

좀더 확장된 실시 예에서 제어부(120)는 메뉴 아이템과 관련된 메타 데이터를 음성으로 변환하여 출력할 수도 있다. 이 경우, 단순히 메뉴 아이템에 표시된 텍스트 만을 음성으로 변환하여 출력하는 것이 아니라, 메뉴 아이템의 특성과 관련된 부가 정보를 음성으로 변환하여 출력할 수 있다. 예를 들어, 뉴스의 기사 목록이 메뉴 아이템으로 제공되는 경우, 그 중 어느 하나의 메뉴 아이템에 대해 사용자 입력이 수신되면, 해당 뉴스 기사의 내용을 음성으로 변환하여 출력할 수 있다. 사용자는 뉴스 기사의 본문 내용을 모두 읽을 필요 없이, 뉴스 기사의 내용을 간편하게 알 수 있게 된다.

한편, 상술한 보이스 메시지는 토크 백(talkback)기능이 실행되는 경우만 출력이 이루어질 수 있다. 토크백 기능이란, 시각 장애인이나 저 시력을 가진 사용자를 위해 디스플레이 장치(100)의 오브젝트 정보를 음성으로 출력해주는 기능을 말한다. 제어부(120)는 사용자가 오브젝트에 대한 입력을 수행하면, 오브젝트에 대한 정보를 음성으로 출력하도록 제어한다.

제어부(120)는 어느 하나의 엣지 영역에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 토크 백 기능(Talk back)을 설정할 수 있다. 전술한 것처럼 상기 화면의 엣지 영역은 상기 디스플레이 장치(100)의 화면 하단 사이드 중심(60)을 포함할 수 있다. 제어부(120)는 상기 화면 하단 사이드의 중심(60)에 대해 트리플 탭(triple tap) 터치에 의한 사용자 입력이 수신되면, 토크 백 기능(Talk back)을 설정할 수 있다. 물론, 이는 하나의 실시 예에 불과하며, 이와 다른 방식으로 토크 백을 설정하도록 구현될 수도 있을 것이다.

도 16b는 멀티 탭 터치에 의해 토크 백 기능을 설정하는 실시 예를 도시한 도면이다.

도 16b에 도시된 것처럼 트리플 탭을 화면 하단 사이드 중심(60)에 수행하면, 토크 백 기능이 설정될 수 있다.

토크 백 기능이 설정되면, 메뉴 아이템에 대해 싱글 탭(또는 원 탭) 터치에 의한 사용자 입력이 수신되면, 토크 백 기능이 실행되어, 메뉴 아이템에 대한 정보가 음성으로 출력된다. 제어부(120)는 상기 수신된 사용자 입력에 대응되는 보이스 메시지를 출력할 수 있다.

이와 달리 토크 백 기능(Talk back)이 설정된 경우, 메뉴 아이템에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 제어부(120)는 메뉴 아이템에 대응되는 기능을 수행하거나, 상기 수신된 사용자 입력에 대응되는 기능을 수행하도록 제어한다.

또한, 제어부(120)는 상기 화면에 디스플레이 된 오브젝트에 대해 상기 원 탭(one tap) 터치에 의한 사용자 입력이 수신되면, 상기 오브젝트를 하이라이트 표시하도록 제어할 수 있다.

도 16c는 토크 백 기능이 설정된 상태에서 멀티 탭 터치에 의해 메뉴 아이템의 기능을 실행시키는 실시 예를 도시한 도면이고, 도 16d는 메뉴 아이템의 기능이 실행되는 화면을 도시한 도면이다.

도 16c에 도시된 것처럼 토크 백 기능이 설정된 상태에서 더블 탭 터치에 의해 메뉴 아이템이 선택되면, 제어부(120)는 상기 메뉴 아이템에 대응되는 기능을 실행시키거나 상기 수신된 사용자 입력에 대응되는 기능을 실행시킨다. 도 16c에서 전화 걸기 메뉴 아이템에 대해 더블 탭 터치에 의한 사용자 입력이 수신되면, 도 16d와 같이 전화 걸기 화면이 디스플레이 된다.

다만, 본원발명이 이러한 실시 예에 한정되는 것은 아니다. 즉, 화면의 엣지 영역에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 기능을 수행하는데, 이때, 상기 멀티 탭(multi tap) 터치의 탭 수(number of taps)에 따라 상기 기능이 달라질 수 있다.

한편, 도 14 내지 16에 도시된 것처럼 복수의 메뉴 아이템이 화면에 디스플레이 되는 경우, 시각 장애인이나 저 시력을 가진 사용자가 복수의 메뉴 아이템들의 위치를 쉽게 알 수 있는 방안이 요구된다. 도 17은 이러한 실시 예를 도시한다.

즉, 도 17은 본 발명의 일 실시 예에 따른 오브젝트의 기준 위치를 진동으로 알려주는 실시 예를 도시한 도면이다.

제어부(120)는 메뉴를 구성하는 복수의 아이템들 중 상기 화면 상의 기 설정된 위치에 있는 아이템에 대한 사용자 입력이 수신되면, 햅틱 진동을 출력하도록 제어할 수 있다. 도 17의 실시 예에서 사용자가 화면의 중앙에 위치한 인터넷 아이콘에 터치 입력을 수행하면, 디스플레이 장치(100)는 햅틱 진동을 출력한다. 이를 통해 사용자는 화면 중앙에 어느 아이템이 위치하고 있는지 쉽게 알 수 있게 된다.

사용자는 알림 메시지와 디스플레이 장치(100)의 빠른 설정 화면을 좀더 쉽게 접근할 필요가 있다. 여기에 전술한 디스플레이 화면의 상단 사이드의 중심(50)을 활용할 수 있다. 또는 상기 화면의 상단 사이드의 중심(50)에 디스플레이 된 가이드 오브젝트를 선택하여 상기와 같은 기능을 실행시킬 수 있다.

도 18a 내지 18c는 디스플레이 장치(100)의 화면 상단 사이드의 중심(50)을 활용한 메뉴 구성을 도시한 도면이다.

도 18a에 도시된 것처럼 사용자는 디스플레이 장치(100)의 화면 상단 사이드의 중심(50)(또는 이 곳에 디스플레이 된 가이드 오브젝트)에 대해 사용자 입력을 수행하여 간편하게 관련 메뉴를 디스플레이 시킬 수 있다.

도 18b에 도시된 것처럼 더블 탭 터치에 의해 메뉴 아이템이 선택되면, 제어부(120)는 최근의 알림 메시지를 화면에 표시한다. 디스플레이 장치(100)는 미디어 기기와의 연결 정보, 부재중 통화 알림, 메시지 알림, 일정 알림 등을 제공한다.

도 18c에 도시된 것처럼 트리플 탭 터치에 의해 메뉴 아이템이 선택되면, 제어부(120)는 디스플레이 장치(100)의 빠른 설정 메뉴를 화면에 표시한다. 빠른 설정 메뉴는 와이파이 설정, 메시지 설정, 메시지 음성안내 설정, 주소록 설정 등을 위한 복수의 메뉴 아이템을 포함한다.

물론, 상기의 내용은 하나의 실시 예에 불과하고, 동일한 기능을 실행시키기 위해 이와 다른 멀티 탭 터치를 수행하도록 구현될 수도 있다.

도 19a는 접근성 설정 메뉴를 표시한 화면을 도시한 도면이다. 도19b는 토크 백 속도 설정을 위한 가이드 오브젝트를 표시한 화면을 나타낸 도면이다.

사용자는 메뉴 아이템 선택을 위해 사용자 객체(200)를 이용하여 터치나 드래그 입력을 수행할 수도 있으나, 버튼을 이용해서 메뉴 아이템을 순차적으로 활성화시킬 수도 있다. 화면의 제2 엣지 영역(20-1)과 제3 엣지 영역(30-1)은 각각 상기 버튼에 대응되는 가이드 오브젝트를 표시한다.

도 19a에 도시된 실시 예에서 제2 엣지 영역(20-1)의 가이드 오브젝트는 위방향의 화살표를 표시하며, 상기 제2 엣지 영역(20-1)의 가이드 오브젝트 상에 사용자 입력이 수신되면, 현재 활성화된 메뉴 아이템이 비활성화되고, 상기 메뉴 아이템의 위에 위치한 메뉴 아이템이 활성화된다. 즉, 위 방향으로 메뉴 아이템을 드래그하여 선택하는 기능을 제공한다. 이때, 토크 백 기능이 설정된 경우라면, 새로 활성화되는 메뉴 아이템에 대한 음성 정보가 출력될 것이다.

또한, 제3 엣지 영역(30-1)의 가이드 오브젝트는 아래 방향의 화살표를 표시하며, 상기 제3 엣지 영역(30-1)의 가이드 오브젝트 상에 사용자 입력이 수신되면, 현재 활성화된 메뉴 아이템이 비활성화되고, 상기 메뉴 아이템의 아래에 위치한 메뉴 아이템이 활성화된다. 즉, 아래 방향으로 메뉴 아이템을 드래그하여 선택하는 기능을 제공한다. 이때, 토크 백 기능이 설정된 경우라면, 새로 활성화되는 메뉴 아이템에 대한 음성 정보가 출력될 것이다.

그러나, 접근성 설정 메뉴에서 중앙에 위치한 “이동” 아이템을 선택하면, 상기 화면의 제2 엣지 영역(20-1)과 제3 엣지 영역(30-1)에 디스플레이 된 가이드 오브젝트가 변경된다. 새롭게 변경된 가이드 오브젝트는 토크 백의 속도를 제어하는 버튼의 기능을 수행한다.

도 19b에 도시된 실시 예에서 제2 엣지 영역(20-1)의 가이드 오브젝트는 왼쪽 방향의 화살표를 표시하며, 상기 제2 엣지 영역(20-1)의 가이드 오브젝트 상에 사용자 입력이 수신되면, 토크 백에 의해 출력되는 음성의 속도가 느려진다.

반면, 제3 엣지 영역(30-1)의 가이드 오브젝트는 오른쪽 방향의 화살표를 표시하며, 상기 제3 엣지 영역(30-1)의 가이드 오브젝트 상에 사용자 입력이 수신되면, 토크 백에 의해 출력되는 음성의 속도가 빨라진다.

도 20a 및 20b는 최근 통화 기록 메뉴를 표시하는 화면을 나타낸 도면이다.

도 20a에 도시된 것처럼, 디스플레이 장치(100)는 최근 통화한 사용자 정보를 수직 방향으로 표시할 수 있다. 사용자는 어느 하나의 사용자 정보를 선택할 수 있고, 이때, 드래그에 의한 터치 입력을 수행할 수도 있다.

어느 하나의 사용자 정보를 선택하는 경우, 도 20b와 같이 그 사용자에게 전화를 거는 메뉴 아이템과 문자를 보내는 메뉴 아이템이 표시된다. 이때, 토크 백 기능이 설정된 경우라면, 선택되는 사용자 정보를 보이스 메시지로 출력할 것이다.

도 21a 내지 21e는 폴더를 생성하는 메뉴를 표시하는 화면을 나타낸 도면이다.

사용자는 디스플레이 장치(100) 상에 폴더를 생성할 수 있다. 도 21a의 ‘+’ 모양의 아이템을 선택하면, 폴더 생성을 위한 화면이 표시된다(도 21b). ‘폴더로 추가’ (2120) 아이템을 선택하면 폴더가 생성되며, 폴더에 추가되는 애플리케이션의 종류를 선택할 수 있다. 사용자는 하나 이상의 애플리케이션을 선택할 수 있으며, 도 21c의 실시 예에서는 ‘뉴스 및 날씨’ 애플리케이션과 ‘메시지’ 애플리케이션(2130)이 선택되었다. 그 다음에 디스플레이 장치(100)는 폴더 이름을 설정할 수 있는 화면을 표시한다(도 21d). 도 21d의 실시 예에서 사용자의 음성을 텍스트로 변환하여 폴더 이름으로 설정할 수 있는 기능이 실행되고 있다. 그러나, 사용자가 직접 폴더 이름을 입력할 수 있는 ‘키패드 입력’(2140) 아이템과, 애플리케이션의 이름에 따라 자동적으로 폴더 이름이 설정되는 ‘자동 입력’(2145) 아이템을 선택할 수도 있다. 최종적으로 폴더 이름이 설정되면, 새로운 아이콘이 생성되어 처음에 선택한 ‘+’ 위치에 표시된다. 도 21e의 실시 예에서는 폴더 이름이 ‘다운로드’로 자동설정된 실시 예로 하나 이상의 애플리케이션을 포함하므로 ‘+1’이 함께 표시되었다(2150).

한편, 최근의 디스플레이 장치(100)는 보안성을 높이기 위해 잠금 설정 및 해제 기능을 제공한다. 그런데, 시각 장애인이나 저 시력을 가진 사용자의 경우, 이러한 잠금 설정 및 해제 기능의 사용이 불편함이 문제된다.

도 22a 내지 22b는 종래의 디스플레이 장치의 잠금 설정 화면을 도시한 도면이다.

도 22a는 비밀번호를 입력하여 잠금 해제를 할 수 있는 디스플레이 장치의 화면을 도시한다. 그러나, 전술한 토크 백 기능이 적용되는 경우, 사용자가 입력하는 숫자가 토크 백으로 음성으로 출력되게 되어 보안성을 떨어뜨리는 문제가 지적된다.

도 22b는 여러 점들을 드래그 터치 입력으로 연결하여 패턴을 입력하고, 입력된 패턴을 암호로 설정된 패턴과 비교하여 패턴이 일치하는지에 따라 잠금을 해제하는 기능을 나타낸다. 그러나, 시각 장애인이나 저 시력 사용자의 경우, 패턴을 그리기 위한 기준 점을 찾기가 어려워 이러한 잠금 해제 기능을 이용하기에 매우 불편한 문제가 있다. 따라서, 기준 위치를 알려주고, 보안성을 높일 수 있는 시각 장애인이나 저 시력 사용자를 위한 잠금 설정 및 해제 기능을 제공할 필요가 있다.

도 23a 내지 23c는 본 발명의 일 실시 예에 따른 잠금 설정 및 해제 기능을 도시한 도면이다.

도 23a를 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치(100)의 제어부(120)는, 화면의 제1 모서리 영역에서 시작하는 제1 드래그 입력과 상기 화면의 제2 모서리 영역에서 시작하는 제2 드래그 입력이 수신되면, 상기 제1 드래그 입력 및 상기 제2 드래그 입력을 조합한 패턴을 인식하며, 상기 인식한 패턴을 암호로 설정된 패턴과 매칭한다. 그리고, 상기 매칭 결과에 따라 상기 디스플레이 장치의 화면 잠금을 해제한다.

이때, 상기 제1 드래그 입력 및 상기 제2 드래그 입력은, 상기 화면의 상하 방향 또는 좌우 방향의 드래그 입력이 될 수 있다.

또한, 상기 제1 모서리 영역과 제2 모서리 영역에 대해 드래그 입력이 있는 경우, 제어부(120)는 햅틱 진동이 생성되어 출력되도록 제어할 수 있다.

또한, 상기 제1 드래그 입력과 제2 드래그 입력은 드래그에 의한 터치 경로가 기 설정된 길이 이상인 경우 정상적인 드래그 입력으로 간주되고, 기 설정된 길이 미만인 경우는 입력 오류로 간주될 수 있다. 예를 들어, 화면의 아래 방향으로 드래그 입력을 하는 경우, 드래그에 의한 터치 경로가 화면 전체 높이의 1/3 이상이면 정상적인 드래그 입력으로 간주되고, 1/3 미만이면, 입력 오류로 간주되어 입력이 무시될 수 있다.

따라서, 상기 제1 드래그 입력과 제2 드래그 입력의 방향, 위치, 드래그 입력 횟수의 조합에 따라 다양한 잠금 패턴을 설정하는 것이 가능하다.

도 23a는 화면의 좌측 상단 모서리 영역(70) 상의 화면 하단 방향의 드래그 입력과, 화면의 좌측 하단 모서리 영역(80) 상의 화면 상단 방향의 드래그 입력 및, 화면의 우측 하단 모서리 영역(90) 상의 화면 상단 방향의 드래그 입력이 조합된 패턴이 암호로 설정되어 있는 패턴과 비교될 것이다.

도 23b는 화면의 좌측 하단 모서리 영역(80) 상의 화면 우측 방향의 드래그 입력 및, 화면의 우측 하단 모서리 영역(90) 상의 화면 좌측 방향의 드래그 입력이 조합된 패턴이 암호로 설정되어 있는 패턴과 비교될 것이다.

또한, 도 23c는 화면의 좌측 하단 모서리 영역(80) 상의 화면 상단 방향의 드래그 입력 및, 화면의 우측 하단 모서리 영역(90) 상의 화면 좌측 방향의 드래그 입력이 조합된 패턴이 암호로 설정되어 있는 패턴과 비교될 것이다.

본 발명의 또 다른 실시 예에 따르면, 잠금 화면이 해제된 경우, 상기 디스플레이 장치(100) 화면의 어느 모서리 영역에서 전술한 드래그 입력을 수행하면, 제어부(120)는 입력된 드래그 입력에 대응하여 기 설정된 애플리케이션을 실행시킬 수 있다.

도 24a 내지 24d는 본 발명의 또 다른 실시 예에 따른 간편하게 애플리케이션을 실행시키는 실시 예를 도시한 도면이다.

도 24a 내지 24d를 참조하면, 제어부(120)는 화면의 모서리 영역에서 시작하는 드래그 입력을 수신하는 경우, 상기 수신된 드래그 입력에 대응하여 기 설정된 애플리케이션을 실행시킬 수 있다. 이때, 상기 화면의 모서리 영역에 따라 상기 기 설정된 애플리케이션이 달라진다.

도 24a에서 화면의 좌측 상단 모서리 영역(70)에서 화면의 아래 방향으로 드래그 입력을 수행하는 경우를 도시하고 있다. 도 24b는 상기 드래그 입력이 있는 경우의 화면을 도시한다. 연락처 애플리케이션이 실행되었음을 알 수 있다.

도 24c에서 화면의 좌측 하단 모서리 영역(80)에서 화면의 우측 방향으로 평행하게 드래그 입력을 수행하는 경우를 도시하고 있다. 도 24d는 상기 드래그 입력이 있는 경우의 화면을 도시한다. 달력 애플리케이션이 실행되었음을 알 수 있다.

화면 잠금이 설정된 상태에서 화면의 엣지 영역에 기 설정된 시간 이상의 터치를 수행하는 경우, 제어부(120)는 주요 알림 메시지과 같은 디스플레이 장치가 수신한 정보와 관련된 아이템을 디스플레이 하도록 제어할 수 있다. 그러나, 상기 터치 입력이 종료되면, 상기 아이템 디스플레이를 종료하고 화면 잠금 이미지를 다시 설정할 수 있다.

이때, 상기 디스플레이 장치(100)가 수신한 정보와 관련된 아이템은, 메시지 알림 정보, 전화 알림 정보 및 이메일 알림 정보 중 적어도 하나일 수 있다.

또한, 상기 디스플레이 장치(100)가 수신한 정보와 관련된 아이템은, 기 설정된 시간 내에 상기 디스플레이 장치(100)가 외부 장치로부터 수신한 데이터와 관련된 것일 수 있다.

전술한 실시 예에서 화면의 엣지 영역이나 모서리 영역에 터치나 드래그 입력을 수행하는 경우, 제어부(120)는 햅틱 진동이나 보이스 메시지를 출력하도록 제어할 수 있다. 그리고, 상기 엣지 영역이나 모서리 영역의 위치에 따라 상기 햅틱 진동과 보이스 메시지의 유형이 달라질 수 있다.

도 25는 본 발명의 또 다른 실시 예에 따른 디스플레이 장치의 인터페이스를 도시한 도면이다.

도 25에 도시된 것처럼 본 발명의 또 다른 실시 예에 따른 디스플레이 장치(100)의 인터페이스는 복수의 투명 타일을 포함할 수 있다. 복수의 투명 타일은 배경 이미지가 투과되어 표시된다. 후술하는 방식에 따라 사용자 입력에 의해 복수의 투명 타일을 설정할 수 있다.

복수의 타일의 각 타일은 애플리케이션 아이콘, 메뉴 아이콘, 및 바로 가기 아이콘 중 어느 하나를 나타낸다. 이들 아이콘들은 타일 형태를 띄고 있으므로 편의상 타일이라고 부르기로 한다.

도 26a 내지 26d는 복수의 투명 타일을 설정하는 사용자 인터페이스를 도시한 도면이다.

도 26a에 도시된 것처럼 본 발명의 또 다른 실시 예에 따른 디스플레이 장치(100)는 타일을 설정하기 위한 인터페이스를 디스플레이 할 수 있다. 타일 설정을 위한 인터페이스는 도 26a에 도시된 것처럼 투명 모드 설정 메뉴 아이템(2610), 서체 설정 메뉴 아이템(2620), 글자 크기 조정 메뉴 아이템(2630), 글자 그림자 설정 메뉴 아이템(2640), 런처 안내 메뉴 아이템(2650) 중 적어도 하나를 포함할 수 있다.

투명 모드 설정 메뉴 아이템(2610)은 타일을 투명하게 설정하기 위한 사용자 인터페이스를 제공하는 메뉴 아이템이다. 서체 설정 메뉴 아이템(2620)은 타일의 서체를 설정하기 위한 사용자 인터페이스를 제공하는 메뉴 아이템이고, 글자 크기 조정 메뉴 아이템(2630)은 타일의 글자 크기를 조정하기 위한 사용자 인터페이스를 제공하는 메뉴 아이템이고, 글자 그림자 설정 메뉴 아이템(2640)은 타일에 표시되는 글자에 그림자를 설정하기 위한 사용자 인터페이스를 제공하는 메뉴 아이템이고, 런처 안내 메뉴 아이템(2650)은 애플리케이션 버전과 같은 런처에 대한 정보를 표시하기 위한 메뉴 아이템이다.

사용자 객체(200)에 의한 터치 입력을 통해 사용자는 원하는 메뉴 아이템을 선택할 수 있다. 토크 백 기능이 실행되는 경우 원하는 메뉴 아이템을 더블탭함으로써 선택할 수 있다. 도 26a는 투명 모드 설정 메뉴 아이템을 선택하는 상황을 도시한다.

투명 모드 설정 메뉴 아이템이 선택되면, 도 26b와 같이 투명 모드 설정을 위한 사용자 인터페이스가 디스플레이 된다. 상기 사용자 인터페이스는 투명 모드를 턴-온하기 위한 투명 모드 온/오프 설정 메뉴 아이템(2611), 배경 이미지를 변경하기 위한 월 페이퍼 설정 아이템(2613), 타일의 투명도를 설정하기 위한 타일 투명도 설정 아이템(2615), 글자 배경을 설정하기 위한 글자 배경 설정 아이템(2617) 중 적어도 하나를 포함할 수 있다.

투명 모드 온/오프 설정 메뉴 아이템(2611)은 투명 모드를 턴-온 또는 턴-오프 하기 위해 선택되어 조작될 수 있다. 투명 모드가 턴-오프 상태에서 투명 모드를 턴-온하기 위해서는 태그(2612)를 터치한 상태로 드래그하여 왼쪽 방향으로 움직이면 투명 모드가 턴-온된다. 반면, 투명 모드를 턴-오프하기 위해서는 태그(2612)를 터치한 상태에서 드래그하여 오른쪽 방향으로 움직일 수 있다. 토크 백 기능이 실행되는 경우 더블 탭을 수행하고 두 번째 탭에서 터치를 유지한 상태로 상기 방향으로 드래그하면 동일하게 조작할 수 있다.

투명 모드가 턴-온되면 타일 투명도를 설정할 수 있다. 사용자 객체(200)를 이용하여 타일 투명도 설정 아이템(2615)을 선택하면 도 26c와 같이 타일 투명도를 설정할 수 있는 인터페이스가 디스플레이 된다.

상기 타일 투명도를 설정할 수 있는 인터페이스는 투명도가 설정된 일부 타일(2619), 설정된 타일 투명도를 표시하는 프로그래스바(2618), 설정 ‘취소’, ‘확인’버튼을 포함한다. 사용자 객체(200)를 이용하여 프로그래스바(2618)을 터치한 상태로 드래그함으로써 사용자는 원하는 타일 투명도를 설정할 수 있다. 도 26c의 실시 예에서 사용자는 투명도 90%를 설정하였음을 알 수 있다. 디스플레이 된 일부 타일(2619)는 설정된 투명도가 반영되어 표시된다.

도 26d는 최종적으로 투명도가 조정된 복수의 타일이 표시된 화면을 도시한다. 타일 투명도가 최초(도 25)에 비해 증가하였음을 알 수 있다.

도 27은 본 발명의 또 다른 실시 예에 따른 타일의 글자 배경이 설정된 사용자 인터페이스를 도시한 도면이다.

사용자는 도 26b에 도시된 글자 배경을 설정하기 위한 글자 배경 설정 아이템(2617)을 선택함으로써 글자 배경색을 설정하는 것이 가능하다. 상술한 사용자 인터페이스는 타일이 투명하므로 배경의 그림과 겹치게 되어 타일 글자의 식별력이 다소 떨어질 수 있다. 본 발명의 또 다른 실시 예에 따르면, 글자가 위치한 영역의 색을 달리 설정함으로써, 글자가 좀더 식별력 있게 인식될 수 있도록 글자 배경을 설정할 수 있다. 이때, 글자 배경은 글자의 색과 콘트라스트가 높은 색으로 설정될 수 있다. 사용자가 글자 배경 설정 아이템(2617)을 선택하는 경우 도 27과 같이 글자 배경이 설정되어 글자가 더욱 식별력 있게 인식될 수 있다.

도 28a 내지 28d는 특정 타일의 색을 설정하는 사용자 인터페이스를 도시한 도면이다.

디스플레이 장치(100)에 설치되는 애플리케이션의 종류가 많아지면서 사용자가 복수의 애플리케이션 아이콘 중에서 원하는 것을 빠르게 찾아 선택하는 것이 어려워지고 있다. 또한, 사용자가 자주 사용하는 애플리케이션의 경우는 식별력 있게 표시하여 사용자가 빨리 찾을 수 있는 방안이 요청된다. 종래의 디스플레이 장치 인터페이스는 이러한 문제를 해결하기 위한 기술 수단을 구비하지 못했다.

본 발명의 또 다른 실시 예에 따른 사용자 인터페이스는 사용자가 원하는 타일을 원하는 색깔로 설정할 수 있는 기능을 제공한다.

도 28a에서 사용자는 색깔을 설정하기를 원하는 타일을 선택한다. 사용자는 원하는 타일을 기 설정된 시간 이상 터치하거나 더블 탭을 수행(토크 백이 실행시)하는 방식으로 선택할 수 있다. 물론, 이러한 선택 방식에 한정되는 것은 아니다. 도 28a에서 사용자는 사용자 객체(200)를 이용하여 원하는 타일을 선택하고 있다.

사용자가 원하는 타일을 선택하면, 선택된 타일의 색상을 변경하기 위한 인터페이스가 디스플레이 된다. 도 28b와 같이 디스플레이 장치(100)는 선택된 타일과 선택된 타일에 적용될 수 있는 복수의 색상을 표시할 수 있다.

도 28c와 같이 사용자는 원하는 색상을 선택할 수 있다. 선택된 색상은 선택된 타일에 적용되어 미리 보여진다.

사용자가 최종적으로 ‘확인’을 선택하면, 도 28d와 같이 선택된 타일의 색상이 설정된 사용자 인터페이스가 표시된다. 색상이 설정된 타일은 다른 타일들보다 식별력이 있으므로 사용자는 빠르고 쉽게 그 타일을 찾을 수 있게 된다.

이하에서는 본 발명의 다양한 실시 예에 따른 디스플레이 장치의 기능 수행 방법을 설명한다.

도 29 내지 36은 본 발명의 다양한 실시 예에 따른 디스플레이 장치의 기능 수행 방법의 흐름도이다.

도 29를 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 엣지 영역 상에 사용자 입력이 수신되면(S2910-Y), 상기 화면에 메뉴를 디스플레이 하는 단계(S2920)를 포함한다. 그리고, 상기 메뉴에서 아이템이 선택되면(S2930-Y), 상기 선택된 아이템에 대응되는 기능을 수행하는 단계(S2940)를 포함한다. 이때, 상기 화면의 엣지 영역은 적어도 두 개의 상이한 엣지 영역을 포함하고, 상기 사용자 입력이 수신되는 위치에 따라, 상기 화면에 디스플레이 되는 메뉴가 달라진다.

또한, 상기 화면의 엣지 영역은 상기 화면의 어느 하나의 사이드(side)의 중심이고, 상기 엣지 영역에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 기능을 수행하고, 상기 멀티 탭(multi tap) 터치의 탭 수(number of taps)에 따라 상기 기능이 달라질 수 있다. 도 30을 참조하면, 본 발명의 다른 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 상이한 엣지 영역 상에 사용자 입력이 수신되면(S3010-Y), 상기 화면에 메뉴를 디스플레이 하고, 대응되는 보이스 메시지를 출력하는 단계(S3020)를 포함한다. 그리고, 상기 메뉴에서 아이템이 선택되면(S3030-Y), 상기 선택된 아이템에 대응되는 기능을 수행하고, 대응되는 보이스 메시지를 출력하는 단계 (S3040)를 포함한다. 이때, 상기 화면의 엣지 영역은 적어도 두 개의 상이한 엣지 영역을 포함하고, 상기 사용자 입력이 수신되는 위치에 따라, 상기 화면에 디스플레이 되는 메뉴가 달라진다.

상기 디스플레이 장치의 기능 수행 방법은, 상기 화면에 메뉴를 디스플레이 하는 단계는, 상기 화면의 엣지 영역 상에 터치 입력이 있는 동안, 상기 화면에 상기 메뉴를 구성하는 복수의 아이템을 기 설정된 시간 간격으로 변화시키면서 디스플레이 할 수 있다.

도 31을 참조하면, 화면에 메뉴를 디스플레이 하는 단계(S3120)는, 상기 화면의 엣지 영역 상에 터치 입력이 있는 동안, 상기 화면에 상기 메뉴를 구성하는 복수의 아이템을 기 설정된 시간 간격으로 순차적으로 활성화시키면서 디스플레이 할 수 있다.

도 31을 참조하면, 선택된 아이템에 대응되는 기능을 수행하는 단계(S3140)는, 상기 화면의 엣지 영역 상에 터치 입력이 종료되면, 상기 복수의 아이템 중 터치 입력 종료 당시의 활성화 된 아이템에 대응되는 기능이 수행될 수 있다.

도 32을 참조하면, 본 발명의 또 다른 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 엣지 영역 상에 사용자 입력이 수신되면(S3210-Y), 상기 화면에 메뉴를 디스플레이 하는 단계(S3220)를 포함한다. 그리고, 상기 메뉴에서 아이템이 선택되면(S3230-Y), 상기 선택된 아이템에 대응되는 기능을 수행하는 단계(S3240)를 포함한다. 또한, 아이템의 기능을 수행하기 위한 오브젝트 중 일부에 하이라이트를 표시하는 단계(S3250)를 포함한다. 이때, 상기 화면의 엣지 영역은 적어도 두 개의 상이한 엣지 영역을 포함하고, 상기 사용자 입력이 수신되는 위치에 따라, 상기 화면에 디스플레이 되는 메뉴가 달라진다.

상기 디스플레이 장치의 기능 수행 방법은, 상이한 엣지 영역 상에 사용자 입력이 수신되면, 상이한 햅틱 진동을 생성하는 단계를 더 포함할 수 있다.

또한, 상기 선택된 아이템에 대응되는 기능을 수행하는 단계는, 상기 디스플레이 된 메뉴 중 기 설정된 위치의 아이템을 활성화하는 단계와, 상기 화면 상에 더블 탭 입력이 수신되면 상기 활성화된 아이템을 선택하는 단계를 더 포함할 수 있다.

도 33를 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 디스플레이 장치의 기능 수행 방법에 있어서, 사용자 입력에 의해 햅틱 오브젝트를 설정하는 단계(S3310)와, 상기 설정된 햅틱 오브젝트에 대한 근접 입력이 감지되면(S3320-Y), 햅틱 진동을 출력하는 단계(S3330)를 포함한다.

또한, 상기 설정된 햅틱 오브젝트에 대한 근접 입력이 감지되면, 상기 감지된 근접 입력에 대응되는 보이스 메시지를 출력하는 단계를 더 포함할 수 있다.

또한, 도 34을 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 제1 모서리 영역에서 시작하는 제1 드래그 입력을 수신하는 단계(S3410), 상기 화면의 제2 모서리 영역에서 시작하는 제2 드래그 입력을 수신하는 단계(S3420), 상기 제1 드래그 입력 및 상기 제2 드래그 입력을 조합한 패턴을 인식하는 단계(S3430), 상기 인식한 패턴을 암호로 설정된 패턴과 매칭하는 단계(S3440), 상기 인식한 패턴과 암호로 설정된 패턴이 일치하면(S3450-Y), 상기 디스플레이 장치의 화면 잠금을 해제하는 단계(S3460)를 포함한다.

또한, 도 35을 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 화면의 모서리 영역에서 시작하는 드래그 입력을 수신하는 단계(S3510), 상기 수신된 드래그 입력에 대응하여 기 설정된 애플리케이션을 실행하는 단계(S3520)를 포함하고, 상기 화면의 모서리 영역에 따라 상기 기 설정된 애플리케이션이 달라진다.

또한, 도 26을 참조하면, 본 발명의 또 다른 실시 예에 따른 디스플레이 장치의 기능 수행 방법은, 타일 설정 입력을 수신하는 단계(S3610), 타일 설정 입력에 따라 타일 투명도 또는 색상을 변경하는 단계(S3620)를 포함한다.

또한, 상기 디스플레이 장치의 기능 수행 방법은, 타일 설정 입력에 따라 타일 글자 배경을 설정하는 단계를 포함할 수 있다. 각 단계에 대한 상세한 내용은 전술한 바와 같다.

한편, 전술한 디스플레이 장치의 기능 수행 방법은 컴퓨터 상에서 판독 가능한 비일시적 기록 매체에 프로그램의 형태로 저장될 수 있다. 여기서 비일시적 판독 가능 매체란 레지스터, 캐쉬 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장이 가능하며, 전자기기에 의해 판독(reading)이 가능한 매체를 의미한다. 예를 들어, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 될 수 있다.

또한, 전술한 디스플레이 장치의 기능 수행 방법은 FPGA와 같은 임베디드 소프트웨어 형태로 하드웨어 IC칩에 내장되어 제공될 수 있고, 전술한 디스플레이 장치(100) 의 일부 구성으로 포함될 수 있다.

이상과 같은 본 발명의 다양한 실시 예에 따르면, 기기의 물리요소 및 기준점을 통한 직관적 UX를 제공할 수 있게 되고, 모서리나 엣지와 같은 고정된 위치를 활용하여 쉽게 인터페이스에 접근할 수 있게 된다. 또한, 메뉴 이동을 위한 처음과 끝의 기준점을 제시하여 빠르게 메뉴를 이동할 수 있게 된다. 아울러, 쉬운 조작 방식을 제공하고, 주요 기능을 빠르게 실행 가능할 뿐 아니라, 자주 사용하는 기능을 빠르게 접근, 기능 실행시 간편한 프로세스를 제공하고 간단한 제스처로 가능하다. 또한, 시각 장애 사용자의 보안성을 제고할 수 있다.

이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.

100 : 디스플레이 장치
110 : 입력부 120 : 제어부
130 : 디스플레이부

Claims

디스플레이 장치의 기능 수행 방법에 있어서,
화면의 엣지(edge) 영역 상에 사용자 입력이 수신되면, 상기 화면에 메뉴를 디스플레이 하는 단계; 및
상기 메뉴에서 아이템이 선택되면, 상기 선택된 아이템에 대응되는 기능을 수행하는 단계;를 포함하고,
상기 화면의 엣지 영역은 적어도 두 개의 상이한 엣지 영역을 포함하고, 상기 사용자 입력이 수신되는 위치에 따라, 상기 화면에 디스플레이 되는 메뉴가 달라지는, 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 보이스 메시지를 출력하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
토크 백 기능(Talk back)이 설정된 경우, 원 탭(one tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 보이스 메시지를 출력하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
토크 백 기능(Talk back)이 설정된 경우, 멀티 탭(one tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 기능을 수행하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1 항에 있어서,
상이한 엣지 영역 상에 사용자 입력이 수신되면, 상이한 햅틱 진동을 생성하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제3항에 있어서,
상기 화면에 디스플레이 된 오브젝트에 대해 상기 원 탭(one tap) 터치에 의한 사용자 입력이 수신되면, 상기 오브젝트를 하이라이트 표시하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
상기 메뉴를 구성하는 복수의 아이템들 중 상기 화면 상의 기 설정된 위치에 있는 아이템에 대한 사용자 입력이 수신되면, 햅틱 진동을 출력하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
상기 화면의 엣지 영역은 상기 화면의 모서리 영역인 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
상기 화면의 엣지 영역은 상기 화면의 어느 하나의 사이드(side)의 중심이고,
상기 엣지 영역에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 토크 백 기능(Talk back)을 설정하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제9항에 있어서,
상기 엣지 영역은 상기 디스플레이 장치의 홈 버튼 및 스피커 중 적어도 하나에 대응되는 상기 화면의 사이드 위치인 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
상기 화면의 엣지 영역에 상기 메뉴의 종류를 표시하는 가이드 오브젝트를 표시하는 단계; 및
상기 화면에 기 설정된 터치 제스처에 의한 사용자 입력이 수신되면, 상기 표시된 가이드 오브젝트를 상기 화면에서 제거하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제1항에 있어서,
상기 화면의 엣지 영역은 상기 화면의 어느 하나의 사이드(side)의 중심이고,
상기 엣지 영역에 대해 멀티 탭(multi tap) 터치에 의한 사용자 입력이 수신되면, 상기 수신된 사용자 입력에 대응되는 기능을 수행하고,
상기 멀티 탭(multi tap) 터치의 탭 수(number of taps)에 따라 상기 기능이 달라지는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
디스플레이 장치의 기능 수행 방법에 있어서,
화면의 제1 모서리 영역에서 시작하는 제1 드래그 입력을 수신하는 단계;
상기 화면의 제2 모서리 영역에서 시작하는 제2 드래그 입력을 수신하는 단계;
상기 제1 드래그 입력 및 상기 제2 드래그 입력을 조합한 패턴을 인식하는 단계;
상기 인식한 패턴을 암호로 설정된 패턴과 매칭하는 단계; 및
상기 매칭 결과에 따라 상기 디스플레이 장치의 화면 잠금을 해제하는 단계;를 포함하는 디스플레이 장치의 기능 수행 방법.
제13항에 있어서,
상기 제1 드래그 입력 및 상기 제2 드래그 입력은, 상기 화면의 상하 방향 또는 좌우 방향의 드래그 입력인 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
디스플레이 장치의 기능 수행 방법에 있어서,
화면의 모서리 영역에서 시작하는 드래그 입력을 수신하는 단계; 및
상기 수신된 드래그 입력에 대응하여 기 설정된 애플리케이션을 실행하는 단계;를 포함하고,
상기 화면의 모서리 영역에 따라 상기 기 설정된 애플리케이션이 달라지는, 디스플레이 장치의 기능 수행 방법.
제15항에 있어서,
상기 화면의 모서리 영역은 제1 모서리 영역과 제2 모서리 영역을 포함하고,
상기 기 설정된 애플리케이션을 실행하는 단계는,
상기 제1 모서리 영역에서 시작하는 드래그 입력이 수신되면, 연락처 애플리케이션을 실행하고, 상기 제2 모서리 영역에서 시작하는 드래그 입력이 수신되면, 스케줄 애플리케이션을 실행하는 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제15항에 있어서,
상기 디스플레이 장치의 화면 잠금이 설정된 상태에서 상기 화면의 모서리 영역에서 기 설정된 시간 이상 지속되는 터치 입력이 수신되면, 상기 디스플레이 장치가 수신한 정보와 관련된 아이템을 디스플레이 하는 단계;를 더 포함하는 것을 특징으로 하는, 디스플레이 장치의 기능 수행 방법.
제17항에 있어서,
상기 터치 입력이 종료되면, 상기 아이템 디스플레이를 종료하고 화면 잠금 이미지를 다시 설정하는 단계;를 더 포함하는 것을 특징으로 하는, 디스플레이 장치의 기능 수행 방법.
제16항에 있어서,
상기 디스플레이 장치가 수신한 정보와 관련된 아이템은,
메시지 알림 정보, 전화 알림 정보 및 이메일 알림 정보 중 적어도 하나인 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.
제16항에 있어서,
상기 디스플레이 장치가 수신한 정보와 관련된 아이템은, 기 설정된 시간 내에 상기 디스플레이 장치가 외부 장치로부터 수신한 데이터와 관련된 것을 특징으로 하는 디스플레이 장치의 기능 수행 방법.