KR101553119B1 - 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치 - Google Patents

연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치 Download PDF

Info

Publication number
KR101553119B1
KR101553119B1 KR1020130156912A KR20130156912A KR101553119B1 KR 101553119 B1 KR101553119 B1 KR 101553119B1 KR 1020130156912 A KR1020130156912 A KR 1020130156912A KR 20130156912 A KR20130156912 A KR 20130156912A KR 101553119 B1 KR101553119 B1 KR 101553119B1
Authority
KR
South Korea
Prior art keywords
tab
previous
tap
current
input
Prior art date
Application number
KR1020130156912A
Other languages
English (en)
Other versions
KR20150010553A (ko
Inventor
이기혁
허성국
한재현
구지성
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to US14/109,308 priority Critical patent/US9612736B2/en
Publication of KR20150010553A publication Critical patent/KR20150010553A/ko
Application granted granted Critical
Publication of KR101553119B1 publication Critical patent/KR101553119B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

터치 스크린을 가진 단말기에서 화면의 연속적인 터치를 이용하여 확대, 축소, 회전 등의 기능을 한 손으로 수행할 수 있게 하는 방법 및 장치가 제시된다. 터치 스크린의 제어 방법은 터치 스크린에서 미리 설정된 거리 임계값 이상 떨어진 두 지점이 미리 설정된 시간 임계값 이내에 이전 탭 및 현재 탭으로 입력되는지 판단하는 단계와 상기 이전 탭 및 상기 현재 탭을 분석하여 연속 탭 조작 모드로 전환하는 단계 및 상기 연속 탭 조작 모드에서 미리 정의된 연속 탭 명령에 따라 동작을 수행하는 단계를 포함할 수 있다.

Description

연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치{USER INTERFACE METHOD AND APPARATUS USING SUCCESSIVE TOUCHES}
아래의 설명은 연속적인 터치를 이용하여 확대, 축소, 회전 등의 다양한 입력을 수행할 수 있게 하는 터치를 이용한 입력 방법 및 장치에 관한 것이다.
최근 출시되는 많은 휴대기기에는 다점의 터치를 감지할 수 있는 멀티터치 터치스크린이 탑재되고 있다. 이러한 멀티터치 터치스크린을 이용하면 그림의 회전이나 확대, 축소 등의 기능을 별도의 버튼 조작 등을 이용하지 않고도 쉽게 수행할 수 있다. 일상생활에서 이러한 멀티 터치 조작을 한 손으로 사용해야 할 상황을 접하는 경우가 종종 있다. 종래 기술에서 한 손으로 동작이 가능한 경우는 단일 탭 또는 더블 탭이 있다. 하지만, 그밖에 다양한 멀티 터치 조작을 한 손으로 수행하기에는 어려움이 있었다.
한 손가락으로도 기존의 터치 입력 외에 확대/축소 등 추가적인 입력을 가능하게 하기 위해 가속도 정보를 함께 사용하여 화면을 터치하는 힘을 추정하거나 (한국등록특허: 10-1173400), 여러 손가락의 움직임을 함께 사용하는 방법(한국공개특허: 10-2008-0091502) 등이 연구되었다.
또한, 특정 시간만큼 대기하였을 때 가상의 손가락을 표시하여 멀티터치 조작을 할 수 있도록 한 발명(한국공개특허: 10-2010-0121785)도 제시되었다.
일 실시예에 따르는 터치를 이용한 사용자 인터페이스 방법은, 이전 탭(previous tap) 및 현재 탭(current tap) 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 단계 및 상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격(time difference) 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드(operation mode)를 결정하는 단계를 포함할 수 있다.
일 실시예에 따르면, 상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드를 결정하는 단계는, 상기 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값(time threshold)보다 작고 상기 이전 탭 및 현재 탭 간의 상기 거리가 미리 설정된 거리 임계값(distance threshold)보다 큰 경우 상기 동작 모드를 연속 탭 조작 모드(successive tap operation mode)로 변경하는 단계를 포함할 수 있다.
상기 시간 임계값은 500ms이고, 상기 거리 임계값은 9.6mm일 수 있다.
또한, 일 실시예에 따르면, 상기 터치를 이용한 사용자 인터페이스 방법은, 상기 현재 탭에 연속되는 드래그(drag) 입력에 따라 미리 결정된 처리를 수행하는 단계를 더 포함할 수 있다.
일 실시예에 따르면, 상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는, 상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 핸들 이미지(handle image)를 표시하는 단계 및 상기 현재 탭의 위치를 상기 이전 탭을 중심으로 상기 드래그 입력을 이용하여 회전시킨 위치로 이동시키는 경우, 상기 핸들 이미지를 기준으로 표시 영상을 회전시키는 단계를 더 포함할 수 있다.
일 실시예에 따르면, 상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는, 상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 핸들 이미지를 표시하는 단계 및 상기 현재 탭의 위치를 상기 이전 탭의 반대 방향으로 상기 드래그 입력을 이용하여 이동시키는 경우, 표시 영상을 확대시키는 단계를 더 포함할 수 있다.
일 실시예에 따르면, 상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는, 상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 핸들 이미지를 표시하는 단계 및 상기 현재 탭의 위치를 상기 이전 탭 쪽 방향으로 상기 드래그 입력을 이용하여 이동시키는 경우, 표시 영상을 축소시키는 단계를 더 포함할 수 있다.
일 실시예에 따르면, 상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는, 상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 원형 핸들 이미지를 표시하는 단계 및 상기 드래그 입력을 이용하여 상기 현재 탭의 위치를 상기 이전 탭을 중심으로 회전시킨 위치로 이동시키는 경우, 회전각에 따라 표시 영상을 스크롤 시키는 단계를 더 포함할 수 있다.
일 실시예에 따르면, 상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는, 상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 파이 형태의 메뉴를 표시하는 단계 및 상기 드래그 입력을 이용하여 상기 현재 탭의 위치를 상기 이전 탭을 중심으로 회전시킨 위치로 이동시키는 경우, 회전각에 따라 상기 메뉴의 항목을 선택하도록 단계를 더 포함할 수 있다.
일 실시예에 따르면, 상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드를 결정하는 단계는, 상기 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 작고 상기 이전 탭 및 현재 탭 간의 상기 거리가 미리 설정된 거리 임계값보다 작거나 같은 경우 상기 동작 모드를 더블 탭 조작 모드(double tap operation mode)로 변경하는 단계를 포함할 수 있다.
일 실시예에 따르면, 상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드를 결정하는 단계는, 상기 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 크거나 같은 경우 상기 동작 모드를 단일 탭 조작 모드(single tap operation mode)로 변경하는 단계를 포함할 수 있다.
일 실시예에 따르면, 상기 터치를 이용한 사용자 인터페이스 방법은, 탭 입력을 수신한 경우, 이전 입력이 탭 입력인지 판단하는 단계를 더 포함하고, 상기 이전 탭 및 현재 탭 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 단계는, 상기 이전 입력이 탭 입력인 경우, 이전 탭 및 현재 탭 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 단계를 포함할 수 있다.
일 실시예에 따르면, 상기 터치를 이용한 사용자 인터페이스 방법은, 상기 이전 입력이 탭 입력이 아닌 경우, 현재 탭의 위치 및 시간을 저장하는 단계를 더 포함할 수 있다.
또 다른 실시예에 따른 터치를 이용한 사용자 인터페이스 방법은, 이전 탭 및 현재 탭을 수신하는 단계, 단계와, 상기 이전 탭 및 상기 현재 탭을 분석하여 연속 탭 조작 모드로 전환하는 단계 및 상기 연속 탭 조작 모드에서 미리 정해진(predetermined) 연속 탭 명령에 따라 동작을 수행하는 단계를 포함할 수 있다.
일 실시예에 따르면, 상기 연속 탭 조작 모드로 전환하는 단계는, 상기 이전 탭 및 현재 탭 간 시간 간격이 미리 설정된 시간 이내에 포함되는지 확인하는 단계 및 상기 이전 탭 및 현재 탭 간 거리 간격이 미리 설정된 거리 이상인지 확인하는 단계를 포함할 수 있다. 또한, 일 실시예에 따르면, 상기 탭 간 시간 간격이 미리 설정된 시간 이내이고, 상기 탭 간 거리 간격이 미리 설정된 거리 이상일 경우, 연속 탭 조작 모드로 전환될 수 있다.
일 실시예에 따르면, 상기 연속 탭 조작 모드에서 미리 정해진 동작을 수행하는 단계는, 상기 이전 탭 및 상기 현재 탭의 터치 지점을 잇는 핸들 이미지를 표시하고, 상기 핸들 이미지의 길이 및 각도의 변화량에 대응하는 상기 연속 탭 명령에 따라 동작을 수행하는 단계를 포함할 수 있다.
일 실시예에 따르면, 상기 미리 정해진 연속 탭 명령은 상기 핸들 이미지의 길이 및 각도의 변화량에 따라 확대, 축소, 회전, 스크롤, 문자열 선택, 파이 형태의 메뉴의 실행 중 적어도 하나를 포함할 수 있다.
또 다른 실시예에 따르는 터치를 이용한 사용자 인터페이스 장치는, 이전 탭 및 현재 탭을 입력 받는 입력부, 상기 이전 탭 및 현재 탭 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 분석부, 및 상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 결정된 동작 모드에 따라 동작을 수행하는 수행부를 포함할 수 있다.
일 실시예에 따르면, 상기 분석부는, 이전 입력이 탭 입력인지 판단하는 탭 확인부와, 상기 이전 탭 및 상기 현재 탭 간 시간 간격이 미리 설정된 시간 이내인지 확인하는 시간 간격 확인부 및 상기 이전 탭 및 상기 현재 탭 간 시간 간격이 미리 설정된 시간 이내에 포함될 경우, 상기 이전 탭 및 상기 현재 탭 간 거리 간격이 미리 설정된 거리 이상인지 확인하는 거리 간격 확인부를 포함할 수 있다.
일 실시예에 따르면, 상기 수행부는, 상기 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 작고 상기 이전 탭 및 현재 탭 간의 상기 거리가 미리 설정된 거리 임계값보다 작거나 같은 경우 상기 동작 모드를 더블 탭 조작 모드로 변경할 수 있다.
일 실시예에 따르면, 상기 수행부는, 상기 탭 간 시간 간격이 미리 설정된 시간 이내이고, 상기 탭 간 거리 간격이 미리 설정된 거리 이상일 경우, 상기 동작 모드를 연속 탭 조작 모드로 변경할 수 있다.
일 실시예에 따르면, 상기 입력부는, 터치 스크린, 프로젝션 입력 장치, 프로젝션 키패드, 및 홀로그램 사용자 인터페이스 장치 중 적어도 하나를 포함할 수 있다.
도 1은 일 실시예에 따른 터치를 이용한 사용자 인터페이스 방법의 순서도이다.
도 2는 일 실시예에 따른 터치를 이용한 사용자 인터페이스 방법의 순서도이다.
도 3은 일 실시예에 따른 터치를 이용한 사용자 인터페이스 장치의 블록도이다.
도 4a 및 도 4b는 일 실시예에 따른 터치를 이용한 사용자 인터페이스 장치를 도시한 도면이다.
도 5는, 일 실시예에 따라, 연속 탭 조작 모드의 실행을 설명하기 위한 도면이다.
도 6a 내지 도 6c는, 일 실시예에 따라, 연속 탭 조작 모드에서 핸들 조작 방법을 설명하기 위한 도면이다.
도 7a 및 도 7b는, 일 실시예에 따라, 현재 탭에 연속되는 드래그 입력에 따라 핸들을 조작할 때, 회전 각도 및 확대 배율을 계산하기 위해 사용하는 파라미터들을 설명하기 위한 도면이다.
도 8은, 일 실시예에 따라, 연속 탭 조작 모드에서 현재 탭에 연속되는 드래그 입력에 따라 스크롤을 실행하는 방법을 설명하기 위한 도면이다.
도 9는, 일 실시예에 따라, 연속 탭 조작 모드에서 현재 탭에 연속되는 드래그 입력에 따라 문자열 선택 및/또는 조작을 실행하는 방법을 설명하기 위한 도면이다.
도 10은, 일 실시예에 따라, 연속 탭 조작 모드에서 현재 탭에 연속되는 드래그 입력에 따라 파이 형태의 메뉴의 호출 및 실행하는 방법을 설명하기 위한 도면이다.
도 11은 일 실시예에 따라 프로젝션 입력 장치(1110)에서 연속 탭 입력을 이용하는 경우를 설명하기 위한 도면이다.
이하, 본 발명의 실시 예를 첨부된 도면을 참조하여 상세하게 설명한다.
터치스크린에서 일반적으로 사용되는 입력 및/또는 제스처(gesture)로는 탭(tap), 더블 탭(double tap), 드래그(drag) 및 멀티 터치 제스처(multi-touch gesture)가 알려져 있다. 탭(tap)은 터치스크린을 한번 터치하는 제스처이다. 더블 탭(double tap)은 짧은 시간 내(일반적으로 500ms 이내)에 실질적으로 동일한 위치를 두 번 터치하는 제스처이다. 드래그(drag)는 터치스크린을 한번 터치한 후 상기 터치를 터치스크린에서 떼지 않고 상기 터치를 이동시키는 제스처이다. 멀티 터치 제스처(multi-touch gesture)는 터치스크린의 서로 다른 복수의 위치를 동시에 터치하는 제스처이다.
짧은 시간 내에 실질적으로 동일한 위치를 두 번 터치하는 더블 탭은 이용되고 있지만, 일정한 시간 간격 내에 서로 다른 복수의 위치(예를 들어, 서로 다른 2개의 위치)를 터치하는 입력은 아직 이용되고 있지 않다. 이하에서는, 미리 정해진 시간 간격 내에 미리 정해진 거리 이상 떨어져 입력되는 2개 이상의 탭을 연속 탭(successive tap)으로 참조(refer)한다. 예를 들어, 터치스크린에서 첫 번째 탭을 입력한 후 짧은 시간 내에 다른 위치에 두 번째 탭을 입력하는 경우가 연속 탭에 포함될 수 있다.
또한, 아래에 설명되는 많은 실시예들이 터치스크린을 이용하는 경우를 예로 들어 설명하지만, 본 발명은 터치스크린에 제한되지 않으며, 터치를 이용한 사용자 인터페이스에 모두 적용 가능하다. 예를 들어, 프로젝션 키패드(projection keypad)를 사용하는 경우에도 본 발명이 적용될 수 있다.
도 1은 일 실시예에 따른 터치를 이용한 사용자 인터페이스 방법의 순서도이다. 도 1을 참고하면, 터치를 이용한 사용자 인터페이스 방법은 이전 탭 및 현재 탭 입력 판단 단계(110), 연속 탭 조작 모드로 전환하는 단계(120), 연속 탭 명령에 따라 동작을 수행하는 단계(130)를 포함할 수 있다.
단계(110)에서, 터치 입력과 관련하여, 이전 탭 및 현재 탭이 입력되었는지 판단할 수 있다.
단계(120)에서, 이전 탭 및 현재 탭을 분석하여 연속 탭 조작 모드로 전환할 수 있다. 연속 탭 조작 모드(successive tap operation mode)는, 미리 정해진 시간 간격 내에 미리 정해진 거리 이상 떨어진 위치를 터치하는 제스처인 연속 탭에 따른 처리를 수행하는 모드로, 연속 탭을 처리하는 모드로, 단일 탭 조작 모드(single tap operation mode) 및 더블 탭 조작 모드(double tap operation mode)와 구별된다. 단일 탭 조작 모드는, 한번 터치하는 제스처인 탭 입력에 따른 처리를 수행하는 모드이다. 더블 탭 조작 모드는, 짧은 시간 내(예를 들어, 500ms 이내)에 실질적으로 동일한 위치를 두 번 터치하는 제스처인 더블 탭에 따른 처리를 수행하는 모드이다.
이때, 이전 탭 및 현재 탭 간 시간 간격이 미리 설정된 시간 이내에 포함되는지 확인하고, 이전 탭 및 현재 탭 간 거리 간격이 미리 설정된 거리 이상인지 확인할 수 있다. 이전 탭 및 현재 탭 간 시간 간격이 미리 설정된 시간 이내에 포함되고, 상기 탭 간 거리 간격이 미리 설정된 거리 이상일 경우, 연속 탭 조작 모드로 전환할 수 있다.
이후, 단계(130)에서, 연속 탭 조작 모드에서 미리 정해진 연속 탭 명령에 따라 동작을 수행할 수 있다. 예를 들어, 연속 탭 명령에 따라 동작을 수행하기 위해 이전 탭 및 현재 탭의 터치 지점을 잇는 핸들 이미지를 표시할 수 있다. 그리고, 핸들 이미지의 길이 및 각도의 변화량에 대응하는 연속 탭 명령에 따라 동작을 수행할 수 있다. 예를 들면, 핸들 이미지의 길이 및 각도의 변화량에 따라 확대, 축소, 회전, 스크롤, 문자열 선택, 파이 형태의 메뉴의 실행 등을 수행할 수 있다. 연속 탭을 이용한 사용자 인터페이스 동작 및 연속 탭 명령의 예들에 대해서는 도 5 내지 도 10을 참조하여 뒤에서 상세하게 설명한다.
도 2는 일 실시예에 따른 터치를 이용한 사용자 인터페이스 방법의 순서도이다.
단계(210)에서, 터치 사용자 인터페이스 장치(touch user interface device)를 현재 탭(current tap)을 수신할 수 있다. 터치 사용자 인터페이스 장치는 터치를 이용한 사용자 인터페이스 장치로, 예를 들어, 터치 스크린, 프로젝션 입력 장치, 프로젝션 키패드, 홀로그램 사용자 인터페이스 장치 등을 포함할 수 있다. 예를 들어, 상기 터치 사용자 인터페이스 장치가 터치 스크린인 경우, 상기 터치 스크린 상의 탭 입력(터치 입력)을 수신한다. 또한, 상기 터치 사용자 인터페이스 장치가 프로젝션 키패드인 경우, 프로젝션된(projected) 키패드 상의 사용자의 탭 입력을 수신한다. 또한, 상기 터치 사용자 인터페이스 장치가 홀로그램 사용자 인터페이스 장치인 경우, 홀로그램 상의 사용자의 탭 입력을 수신한다.
탭 입력을 수신한 경우, 단계(220)에서, 터치 사용자 인터페이스 장치(touch user interface device)는, 이전 입력(previous input)이 탭 입력인지 판단할 수 있다.
단계(220)의 판단 결과 이전 입력이 탭 입력인 경우, 터치 사용자 인터페이스 장치(touch user interface device)는, 이전 탭(previous tap) 및 현재 탭(current tap) 간의 시간 간격(time difference)을 계산할 수 있다. 또한, 터치 사용자 인터페이스 장치(touch user interface device)는, 상기 이전 탭 및 상기 현재 탭 간의 거리(distance)를 계산할 수 있다. 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드가 결정될 수 있다. 예를 들어, 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 복수의 동작 모드(단일 탭 조작 모드, 더블 탭 조작 모드 및/또는 연속 탭 조작 모드) 중 하나의 동작 모드가 선택될 수 있다. 입력되는 두 개의 탭 입력이 단일 탭 입력인지, 더블 탭 입력인지 또는 연속 탭 입력인지에 따라 동작 모드가 결정될 수 있다.
단계(220)의 판단 결과 이전 입력이 탭 입력이 아닌 경우, 터치 사용자 인터페이스 장치는, 단계(225)에서, 현재 탭의 위치 및/또는 시간을 저장할 수 있다. 이는 현재 탭 이후에 다음 탭이 입력된 경우, 현재 탭과 다음 탭 간의 시간 간격 및 거리를 계산하기 위해서이다.
단계(240)에서, 터치 사용자 인터페이스 장치는, 이전 탭 및 현재 탭 간의 시간 간격을 미리 설정된(predetermined) 시간 임계값과 비교할 수 있다. 예를 들어, 상기 미리 설정된 시간 임계값은 500ms일 수 있다.
단계(240)의 비교 결과 이전 탭 및 현재 탭 간의 시간 간격이 미리 설정된 시간 임계값보다 크거나 같은 경우, 터치 사용자 인터페이스 장치는, 단계(245)에서, 상기 동작 모드를 단일 탭 조작 모드로 변경할 수 있다. 단일 탭 조작 모드는, 한번 터치하는 제스처인 탭 입력에 따른 처리를 수행하는 모드이다. 단일 탭 조작 모드에서는 종래의 단일 탭 처리와 동일한 처리를 수행할 수 있다. 예를 들어, 단일 탭 조작 모드에서, 단일 탭을 통하여 어플리케이션의 선택 또는 이미지의 선택 등을 수행할 수 있다.
단계(240)의 비교 결과 이전 탭 및 현재 탭 간의 시간 간격이 미리 설정된 시간 임계값보다 작은 경우, 터치 사용자 인터페이스 장치는, 단계(250)에서, 상기 이전 탭 및 현재 탭 간의 거리를 미리 설정된 거리 임계값과 비교할 수 있다. 예를 들어, 상기 미리 설정된 거리 임계값은 9.6mm일 수 있다. 또 다른 실시예에 따르면, 상기 미리 설정된 거리 임계값은 50픽셀일 수 있다.
단계(250)의 비교 결과 이전 탭 및 현재 탭 간의 거리가 미리 설정된 거리 임계값보다 작거나 같은 경우, 터치 사용자 인터페이스 장치는, 단계(255)에서, 상기 동작 모드를 더블 탭 조작 모드로 변경할 수 있다. 따라서, 단계(255)에서는, 이전 탭 및 현재 탭 간의 시간 간격이 미리 설정된 시간 임계값보다 작고 상기 이전 탭 및 현재 탭 간의 상기 거리가 미리 설정된 거리 임계값보다 작거나 같은 경우, 동작 모드를 더블 탭 조작 모드로 변경할 수 있다. 더블 탭 조작 모드는, 짧은 시간 내(일반적으로 500ms 이내)에 실질적으로 동일한 위치를 두 번 터치하는 제스처인 더블 탭에 따른 처리를 수행하는 모드이다. 더블 탭 조작 모드에서는 종래의 더블 탭 처리와 동일한 처리를 수행할 수 있다. 예를 들면, 더블 탭 조작 모드에서 이미지에 대해 더블 탭을 함으로써 상기 이미지에 대한 확대 등을 수행할 수 있다.
단계(250)의 비교 결과 이전 탭 및 현재 탭 간의 거리가 미리 설정된 거리 임계값보다 큰 경우, 터치 사용자 인터페이스 장치는, 단계(260)에서, 상기 동작 모드를 연속 탭 조작 모드로 변경할 수 있다. 연속 탭 조작 모드(successive tap operation mode)는, 미리 정해진 시간 간격(예를 들어, 500ms) 내에 미리 정해진 거리(예를 들어, 9.6mm 또는 50픽셀) 이상 떨어진 위치를 터치하는 제스처인 연속 탭에 따른 처리를 수행하는 모드이다. 연속 탭 조작 모드에서는 다양하고 새로운 사용자 인터페이스가 가능해진다.
예를 들어, 이전 탭 및 현재 탭을 연결하는 선(line)을 표시하여 이를 이용할 수 있다. 첫 번째 탭 입력 후 시간 임계값 이내의 시간에 거리 임계값보다 먼 거리에 두 번째 탭을 입력하면, 첫 번째 탭과 두 번째 탭을 연결하는 핸들 이미지(handle image)를 표시한다. 그리고, 현재 탭의 위치를 이전 탭을 중심으로 회전시킨 위치로 드래그하여 이동시키는 경우, 핸들 이미지를 기준으로 표시 영상을 회전하여 표시하도록 할 수 있다. 그러면, 사용자는 매우 편하게 표시 영상을 회전시킬 수 있게 된다. 또한, 현재 탭의 위치를 이전 탭의 반대 방향으로 이동시키는 경우, 표시 영상을 확대시킬 수 있다. 또한, 현재 탭의 위치를 이전 탭 쪽 방향으로 이동시키는 경우, 표시 영상을 축소시킬 수 있다. 이러한 핸들 이미지 조작 방법에 관하여는 도 5 내지 도 7을 참조하여 뒤에서 상세히 설명한다.
또 다른 실시예에 따르면, 이전 탭 및 현재 탭에 대응하여 원형 핸들 이미지를 표시할 수 있다. 이때, 현재 탭의 위치를 이전 탭을 중심으로 회전시킨 위치로 이동시키는 경우, 회전각에 따라 터치 스크린의 표시 영상을 스크롤시킬 수 있다. 이러한 실시예에 관하여는 도 8을 참조하여 뒤에서 상세히 설명한다.
또 다른 실시예에 따르면, 이전 탭 및 현재 탭에 대응하여 문자열을 선택할 수 있다. 이전 탭을 시작점으로 하여 현재 탭까지의 문자열을 선택할 수 있다. 이후, 문자열이 선택되면 선택된 문자열을 이용하여 잘라내기, 복사, 글꼴 변형 등의 동작을 수행할 수 있다. 이러한 실시예에 관하여는 도 9를 참조하여 뒤에서 상세히 설명한다.
또 다른 실시예에 따르면, 이전 탭 및 현재 탭에 대응하여 파이 형태의 메뉴를 표시할 수 있다. 현재 탭의 위치를 이전 탭을 중심으로 회전시킨 위치로 이동시키는 경우, 회전각에 따라 메뉴의 항목을 선택할 수 있다. 이러한 실시예에 관하여는 도10을 참조하여 뒤에서 상세히 설명한다.
도 3은 터치 사용자 인터페이스 장치(touch user interface device)(300)의 블록도이다.
터치 사용자 인터페이스 장치(touch user interface device)(300)는 입력부(input unit)(310), 분석부(analyzing unit)(320), 수행부(execution unit)(330)를 포함할 수 있다.
입력부(310)는 이전 탭 및 현재 탭을 입력 받는다. 입력부(310)는 터치 입력을 받을 수 있는 장치로, 예를 들어, 터치 스크린, 프로젝션 입력부, 프로젝션 키패드, 홀로그램 사용자 입력부 등을 포함할 수 있다. 예를 들어, 입력부(310)는 터치스크린일 수 있다. 이 경우, 입력부(310)는 터치스크린 상의 탭(tap) 입력을 수신한다. 또 다른 실시예에 따르면, 입력부(310)는 프로젝션 입력 장치일 수 있다. 이 경우, 입력부(310)는, 프로젝트된 영상 상의 탭 입력을 수신한다. 또 다른 실시예에 따르면, 입력부(310)는 프로젝션 키패드(projection keypad)일 수 있다. 이 경우, 입력부(310)는, 프로젝트된 키패드(projected keypad) 상의 탭 입력을 수신한다. 또 다른 실시예에 따르면, 입력부(310)는 홀로그램 사용자 인터페이스 장치일 수 있다. 이 경우, 입력부(310)는, 홀로그램 상의 탭 입력을 수신한다.
분석부(320)는 이전 탭 및 현재 탭 간의 시간 차이 및 이전 탭 및 현재 탭 간의 거리를 계산할 수 있다. 그리고, 이전 탭 및 현재 탭 간의 시간 차이 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하여 계산 결과에 따라 동작 모드를 결정할 수 있다. 예를 들어, 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 복수의 동작 모드(단일 탭 조작 모드, 더블 탭 조작 모드 및/또는 연속 탭 조작 모드) 중 하나의 동작 모드가 선택될 수 있다. 입력되는 두 개의 탭 입력이 단일 탭 입력인지, 더블 탭 입력인지 또는 연속 탭 입력인지에 따라 동작 모드가 결정될 수 있다.
분석부(320)는, 탭 확인부(tap verification module)(321), 시간 간격 확인부(time difference determining unit)(322), 거리 간격 확인부(distance determining unit)(323), 및 저장부(storing unit)(324)를 포함할 수 있다.
탭 확인부(321)는 현재 입력이 탭 입력인지 확인할 수 있다. 또한, 현재 입력이 탭 입력인 경우, 이전 입력이 탭 입력인지 확인할 수 있다. 예를 들어, 모든 형태의 사용자 입력은 큐(queue)에 저장될 수 있고, 탭 확인부(321)는 상기 큐(queue)를 확인함으로써 이전 입력이 탭 입력인지 확인할 수 있다.
저장부(324)는 입력된 탭들의 위치 및 시간을 저장할 수 있다. 일 실시예에 따르면, 저장부(324)는 복수 개(예를 들어, 10개)의 최근에 입력된 탭들의 위치 및 시간을 저장할 수 있다. 또 다른 실시예에 따르면, 저장부(324)는, 이전 입력이 탭 입력이 아닌 경우, 현재 탭의 위치 및 시간을 저장할 수 있다.
시간 간격 확인부(322)는 이전 탭 및 현재 탭 간 시간 간격이 미리 설정된 시간 이내인지 판단할 수 있다. 시간 간격 확인부(322)는 현재 탭의 입력 시간과 저장부(324)에 저장된 이전 탭의 입력 시간을 비교함으로써, 이전 탭 및 현재 탭 간 시간 간격이 미리 설정된 시간 이내인지 판단할 수 있다.
거리 간격 확인부(323)는 이전 탭 및 현재 탭 간 거리가 미리 설정된 거리 이상인지 판단할 수 있다. 거리 간격 확인부(323)는 현재 탭의 위치와 저장부(324)에 저장된 이전 탭의 위치를 비교함으로써, 이전 탭 및 현재 탭 간 거리가 미리 설정된 시간 이내인지 판단할 수 있다.
분석부(analyzing unit)(320)는 또한, 처리부(도시되지 않음)를 포함할 수 있다. 처리부는 시간 간격 확인부(322) 및 거리 간격 확인부(323)의 판단 결과에 따라 동작 모드를 결정할 수 있다
수행부(330)는 이전 탭 및 현재 탭 간의 시간 간격 및 이전 탭 및 현재 탭 간의 거리에 따라 결정된 동작 모드에 따라 동작을 수행한다. 수행부(330)는, 이전 탭 및 현재 탭 간의 시간 간격이 미리 설정된 시간 임계값보다 작고 이전 탭 및 현재 탭 간의 거리가 미리 설정된 거리 임계값보다 큰 경우, 연속 탭 조작 모드를 수행할 수 있다. 연속 탭 조작 모드에서, 수행부(330)는, 연속 탭 조작 모드에서 이전 탭 및 현재 탭의 터치 지점을 잇는 핸들 이미지를 표시할 수 있다. 그리고, 핸들 이미지의 길이 및 각도의 변화량에 대응하는 미리 정해진 연속 탭 명령에 따라 동작을 수행할 수 있다. 예를 들면, 핸들 이미지는 이전 탭 및 현재 탭 지점을 연결하는 선으로서 나타낼 수 있다. 그리고, 수행부(330)는, 핸들 이미지를 기준으로 터치 스크린의 표시 영상을 이동 시킴으로써 회전, 확대, 축소 등을 실행할 수 있다.
또한, 수행부(330)는, 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 크거나 같은 경우 단일 탭 조작 모드를 수행할 수 있다. 예를 들면, 단일 탭 조작 모드에서 수행부(330)는, 단일 탭 입력에 응답하여(in response to single tap input) 어플리케이션의 선택, 또는 이미지의 선택 등을 수행할 수 있다.
또한, 수행부(330)는, 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 작고 상기 이전 탭 및 현재 탭 간의 상기 거리가 미리 설정된 거리 임계값보다 작거나 같은 경우 상기 동작 모드를 더블 탭 조작 모드를 수행할 수 있다. 예를 들면, 더블 탭 조작 모드에서 수행부(330)는, 더블 탭 입력에 응답하여(in response to double tap input) 이미지의 확대 등을 수행할 수 있다.
도 4a 내지 도 4b는 일 실시예에 따른 터치를 이용한 사용자 인터페이스 장치(410)를 도시 도면이다.
도 4a를 참조하면, 터치 사용자 인터페이스 장치(410)는, 입력부(420)로서 터치스크린이 장착된 휴대폰이다. 여기에서 설명되는 실시예들은 터치스크린이 장착된 휴대폰에서 실시될 수 있지만, 이에 한정되지는 않는다. 터치스크린은 표시부로도 동작할 수 있다.
도 4b는 일 실시예에 따른 터치 사용자 인터페이스 장치(410)에서 수행되는 어플리케이션의 모습을 나타낸 도면이다. 예를 들어, 어플리케이션 화면은 문자 입력이 필요할 경우, 문자를 입력 받기 위한 화상 키보드(440)를 표시부 하단에 표시할 수 있다. 반면에, 문자 입력이 필요하지 않은 경우에는 정보 표시 및 조작 영역(430)을 표시부 전체에 표시할 수 있다. 종래기술에서 연속 탭 조작은 화상 키보드 영역(440)에서 문자 입력을 위해 사용될 수 있다. 하지만, 정보 표시 및 조작 영역(430)에서는 연속 탭 조작은 사용되지 않았다.
일 실시예에 따르면, 터치 사용자 인터페이스 장치(410)는 연속 탭이 입력된 위치가 화상 키보드 영역(440)인지 아닌지 판단할 수 있다. 연속 탭이 입력된 위치가 화상 키보드 영역(440)이면 통상의 키보드 입력을 처리할 수 있다. 그러나, 연속 탭이 입력된 위치가 화상 키보드 영역(440)이 아니라면, 터치 사용자 인터페이스 장치(410)는 연속 탭 조작 모드로 동작 모드를 변경하고, 연속 탭 조작 모드를 수행할 수 있다.
도 5는, 일 실시예에 따라, 연속 탭 조작 모드의 실행을 설명하기 위한 도면이다. 도 5를 참조하여, 터치 사용자 인터페이스 장치에서 연속 탭 명령을 이용하여 한 손으로 동작을 수행하는 예를 설명한다.
예를 들면, 터치 사용자 인터페이스 장치를 한 손으로 잡은 상태에서 입력부 상에 거리 임계값(예를 들어, 9.6mm 또는 50 픽셀) 이상의 거리 간격을 갖는 두 지점(510, 520)을 시간 임계값(예를 들어, 500ms) 내에 연속으로 터치할 경우, 두 지점(510, 520)에 대한 탭 입력은 연속 탭 입력(successive tap input)으로 판단될 수 있다. 따라서, 터치 사용자 인터페이스 장치는 연속 탭 조작 모드로 동작 모드를 변경하고, 연속 탭 조작 모드를 수행할 수 있다. 예를 들어, 터치 사용자 인터페이스 장치는, 두 지점(510, 520) 및 두 지점 사이를 잇는 핸들 이미지(530)를 표시할 수 있다.
도 6a 내지 도 6c는, 일 실시예에 따라, 연속 탭 조작 모드에서 핸들 이미지 조작 방법을 설명하기 위한 도면이다.
도 6a는 표시부에 표시된 이미지 상에 거리 임계값(예를 들어, 9.6mm 또는 50 픽셀) 이상의 거리 간격을 갖는 두 지점을 시간 임계값(예를 들어, 500ms) 내에 연속으로 터치한 경우, 터치 사용자 인터페이스 장치는 연속 탭 조작 모드를 실행할 수 있다. 그리고, 터치 사용자 인터페이스 장치는 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 핸들 이미지(610a)를 표시할 수 있다. 예를 들어, 터치 사용자 인터페이스 장치는, 도 6a와 같이, 자신의 표시부에 이전 탭과 현재 탭의 사이를 잇는 핸들 이미지(610a)를 표시할 수 있다. 사용자는 이 핸들 이미지(610a)를 이용하여 여러 가지 조작을 수행할 수 있다. 핸들 이미지(610a)는 사용자가 직관적으로 조작 형태를 인식하는 것을 돕는 역할을 한다.
터치 사용자 인터페이스 장치는 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행할 수 있다. 예를 들어, 현재 탭의 위치를 이전 탭을 중심으로 드래그 입력을 이용하여 회전시킨 위치로 이동시키는 경우, 핸들 이미지(610a)를 기준으로 터치 스크린의 표시 영상을 회전시킬 수 있다. 예를 들어, 첫 번째 탭에 이어 두 번째 탭을 입력하면 도 6a와 같은 핸들 이미지(610a)가 도시된다. 그리고, 두 번째 탭을 터치스크린으로부터 떼지 않은 상태에서 드래그하여 이동시키면, 이전 탭을 중심으로 드래그 입력에 대응하여 핸들 이미지(610b)가 회전하여 표시되며, 동일한 각도만큼 표시 영상도 회전하여 표시된다. 이렇게 회전되어 표시된 예가 도 6b에 도시되어 있다. 또 다른 실시예에서는 핸들 이미지를 표시하지 않고, 상기와 같은 형태의 연속 탭 입력에 응답하여 상기 회전 동작을 수행할 수 있다.
또 다른 실시예에 따르면, 연속 탭 입력 모드에서, 상기 현재 탭의 위치를 상기 이전 탭의 반대 방향으로 상기 드래그 입력을 이용하여 이동시키는 경우, 터치 스크린의 표시 영상을 확대시킬 수 있다. 예를 들어, 첫 번째 탭에 이어 두 번째 탭을 입력하면 도 6a와 같은 핸들 이미지(610a)가 도시된다. 그리고, 두 번째 탭을 터치스크린으로부터 떼지 않은 상태에서 드래그하여 이전 탭의 반대 방향으로 이동시키면, 핸들 이미지(610c)는 드래그 된 만 큼 확대되어 표시된다. 또한, 표시 영상도 핸들 이미지(610c)의 확대 정도에 비례하여 확대되어 표시될 수 있다. 이렇게 확대되어 표시된 예가 도 6c에 도시되어 있다. 또 다른 실시예에서는 핸들 이미지를 표시하지 않고, 상기와 같은 형태의 연속 탭 입력에 응답하여 상기 확대 동작을 수행할 수 있다.
또 다른 실시예에 따르면, 연속 탭 입력 모드에서, 상기 현재 탭의 위치를 상기 이전 탭 쪽 방향으로 상기 드래그 입력을 이용하여 이동시키는 경우, 표시 영상을 축소시킬 수 있다. 예를 들어, 첫 번째 탭에 이어 두 번째 탭을 입력하면 도 6a와 같은 핸들 이미지(610a)가 도시된다. 그리고, 두 번째 탭을 터치스크린으로부터 떼지 않은 상태에서 드래그하여 이전 탭 쪽 방향으로 이동시키면, 핸들 이미지는 드래그 된 만 큼 축소되어 표시된다. 또한, 표시 영상도 핸들 이미지의 축소 정도에 비례하여 축소되어 표시될 수 있다. 또 다른 실시예에서는 핸들 이미지를 표시하지 않고, 상기와 같은 형태의 연속 탭 입력에 응답하여 상기 축소 동작을 수행할 수 있다.
이와 같이, 핸들 이미지를 나타내는 현재 탭을 드래그하여 이동함으로써, 두 지점 간의 상대적인 각도 변화(회전), 확대 및 축소 비율을 이용하여 표시부에 표시된 이미지를 변형할 수 있다.
도 7a 및 도 7b는 일 실시예에 따라 현재 탭에 연속되는 드래그 입력에 따라 핸들을 조작할 때, 회전 각도 및 확대 배율을 계산하기 위해 사용하는 파라미터들을 설명하기 위한 도면이다.
연속 탭 조작 모드에서 연속 탭 명령 중 하나의 실시예에 따르면, 현재 탭의 위치를 이전 탭을 중심으로 회전시킨 위치로 이동시키는 경우, 핸들 이미지를 기준으로 현재 탭에 연속되는 드래그 입력을 이용하여 터치 스크린의 표시 영상을 회전시킬 수 있다. 그리고, 현재 탭의 위치를 이전 탭의 반대 방향으로 이동시키는 경우, 터치 스크린의 표시 영상을 확대시킬 수 있다. 또한, 현재 탭의 위치를 이전 탭 쪽 방향으로 이동시키는 경우, 터치 스크린의 표시 영상을 축소시킬 수 있다.
도 7a는 연속 탭 조작 모드로 전환하여 핸들 이미지를 표시하였으나 아직 그 중 하나를 이동하지 않은 조작 이전의 핸들 이미지(710a)를 나타내는 도면이다. 이때, 핸들 이미지의 길이는 d1, 핸들 이미지의 각도를 θ1 로 나타낼 수 있다.
도 7b는 핸들 이미지의 두 점 중 하나를 드래그하여 두 지점 간의 각도 및 거리가 변경된 조작 이후의 핸들 이미지(710b)를 나타낸 도면이다. 도 7a 및 도 7b를 참조하면, 조작 이전의 핸들 이미지(710a) 각도가 θ1, 조작 이후의 핸들 이미지(710b) 각도가 θ2이고, 조작 이전의 핸들 이미지(710a) 길이가 d1, 조작 이후의 핸들 이미지(710b) 길이가 d2 일 수 있다. 이때, 초기 회전 각도가 θ0인 핸들 이미지의 회전 각도 θ 는 수학식 1과 같이 나타낼 수 있다.
Figure 112013115273243-pat00001
또한, 조작 이전의 핸들 이미지(710a) 길이가 d1, 조작 이후의 핸들 이미지(710b) 길이가 d2 일 경우, 초기 확대 배율이 S0 인 핸들 이미지의 확대 배율 S 는 수학식 2와 같이 나타낼 수 있다.
Figure 112013115273243-pat00002
도 8은 일 실시예에 따라 연속 탭 조작 모드에서 현재 탭에 연속되는 드래그 입력에 따라 스크롤을 실행하는 방법을 설명하기 위한 도면이다.또 다른 실시예에 따르면, 터치 사용자 인터페이스 장치는, 이전 탭(810) 및 현재 탭(820)에 대응하여 원형 핸들 이미지(830)를 표시할 수 있다. 이때, 드래그 입력을 이용하여 현재 탭(820)의 위치를 이전 탭(810)을 중심으로 회전시킨 위치로 이동(840)시키는 경우, 회전각에 따라 터치 스크린의 표시 영상을 스크롤시킬 수 있다.
예를 들면, 연속 탭 조작 모드에서 이전 탭(810) 지점을 원의 중심으로 하고 이전 탭(810)과 현재 탭(820) 지점까지의 거리를 반지름으로 하는 원형 핸들 이미지(830)를 표시할 수 있다. 원형 핸들 이미지(830) 위에서 현재 탭(820)의 위치를 현재 탭에 연속되는 드래그 입력을 이용하여 회전시킨 위치로 이동(840)하면 스크롤 조작으로 사용할 수 있다. 이 때, 처음 스크롤 지점이 P0, 각도 변화에 따른 스크롤 변화량이 Pinterval 일 때, 각도의 변화에 따른 스크롤 지점 P 는 수학시 3과 같이 나타낼 수 있다.
Figure 112013115273243-pat00003
여기에서, 스크롤 변화량 Pinterval 은 사용자가 설정할 수 있다. 이와 같이, 현재 탭에 연속되는 드래그 입력을 이용하여 스크롤을 실행할 수 있다.
도 9은 일 실시예에 따라 연속 탭 조작 모드에서 현재 탭에 연속되는 드래그 입력에 따라 문자열 선택 및 조작을 실행하는 방법을 설명하기 위한 도면이다.
연속 탭 조작 모드에서 연속 탭 명령 중 또 다른 실시예에 따르면, 이전 탭(910) 및 현재 탭(920)에 대응하여 문자열을 선택(930)할 수 있다. 이전 탭(910)을 시작점으로 하여 현재 탭(920)까지의 문자열을 선택(930)할 수 있다. 이후, 문자열이 선택되면 선택된 문자열을 을 이용하여 잘라내기, 복사, 글꼴 변형 등의 동작(910)을 수행할 수 있다. 따라서, 현재 탭에 연속되는 드래그 입력을 이용하여 문자열 선택 및 조작을 실행할 수 있다.
도 10은 일 실시예에 따라 연속 탭 조작 모드에서 현재 탭에 연속되는 드래그 입력에 따라 파이 형태의 메뉴의 호출 및 실행하는 방법을 설명하기 위한 도면이다.
또 다른 실시예에 따르면, 연속 탭 조작 모드에서, 이전 탭(1010) 및 현재 탭(1020)에 대응하여 파이 형태의 메뉴(1030)를 표시할 수 있다. 드래그 입력을 이용하여 현재 탭(1020)의 위치를 이전 탭(1010)을 중심으로 회전시킨 위치로 이동시키는 경우, 회전각에 따라 메뉴의 항목을 선택할 수 있다. 예를 들면, 파이 형태의 메뉴(1030)는 Home, Forward, Back, Reload 등을 포함할 수 있다. 현재 탭(1020)의 위치를 파이 형태의 메뉴(1030)들 중 하나의 위치로 이동한 후 터치를 뗌으로써 메뉴를 선택할 수 있다. 또한 현재 탭(1020)의 위치를 이전 탭(1010)의 위치로 끌어 놓음으로써 파이 형태의 메뉴(1030)의 취소가 가능할 수 있다. 따라서, 현재 탭에 연속되는 드래그 입력을 이용하여 파이 형태의 메뉴의 호출 및 실행할 수 있다.
도 11은 일 실시예에 따라 프로젝션 입력 장치(1110)에서 연속 탭 입력을 이용하는 경우를 설명하기 위한 도면이다.
이상에서는 터치 사용자 인터페이스 장치로 터치스크린이 장착된 장치를 이용하는 경우로 설명하였으나, 터치 사용자 인터페이스 장치는 이에 한정되지 않으며, 다양한 터치를 이용한 사용자 인터페이스 장치를 포함한다. 예를 들어, 도 11에 도시된 바와 같은 형태의 프로젝션 입력 장치(1110)에서도 연속 탭을 이용할 수 있다.
도 11에서, 프로젝션 입력 장치(1110)는 디스플레이 장치(1120)와 연결된다. 프로젝션 입력 장치(1110)는 디스플레이 장치(1120)에 표시되는 영상과 동일한 영상을 프로젝션을 이용하여 프로젝션된 영상(projected image)(1130)으로 표시할 수 있다. 또한, 프로젝션 입력 장치(1110)는 카메라(도시되지 않음) 등을 이용하여 프로젝션된 영상(projected image)(1130) 위에 사용자가 손으로 입력하는 동작을 인식할 수 있다. 이때, 사용자는 프로젝션된 영상(projected image)(1130) 위에 연속 탭을 입력할 수 있다. 이 경우, 앞에서 설명한 여러 실시예들과 동일한 형태의 인터페이스를 수행할 수 있다.
예를 들어, 사용자가 프로젝션된 영상(projected image)(1130) 위에 첫 번째 탭(1131)을 입력한 후, 미리 설정된 시간 임계값 이내에 첫 번째 탭(1131)으로부터 미리 설정된 거리 임계값 이내의 거리에 두 번째 탭(1132)을 입력할 수 있다. 그러면, 프로젝션 입력 장치(1110)는, 상기 입력을 연속 탭으로 판단하고, 연속 탭 조작 모드로 동작한다. 그러면, 도 5 내지 도 10에서 설명된 것과 같은 인터페이스 동작을 수행할 수 있다.
또 다른 실시예에 따르면, 프로젝션 입력 장치(1110)는 프로젝션 키패드일 수 있다. 이 경우, 프로젝션된 영상(projected image)(1130)은 키패드이다. 키패드 상에서는 드래그 동작은 의미 없는 동작이므로, 프로젝션된 키패드 위에 첫 번째 탭(1131)을 입력한 후, 미리 설정된 시간 임계값 이내에 첫 번째 탭(1131)으로부터 미리 설정된 거리 임계값 이내의 거리에 두 번째 탭(1132)을 입력하고, 두 번째 탭(1132)에 이어서 드래그 동작이 입력되면, 프로젝션 입력 장치(1110)는, 상기 입력을 연속 탭으로 판단하고, 연속 탭 조작 모드로 동작할 수 있다. 드래그 입력이 개입되지 않는 단순한 두 개의 연속한 탭 입력은 통상적인 키보드 입력이므로, 이 경우는 프로젝션 입력 장치(1110)가 키보드 입력 동작을 수행할 수 있다.
이상 설명된 터치 사용자 인터페이스 장치는 설명의 목적으로 제시된 것으로, 본 발명의 터치 사용자 인터페이스 장치는 이에 한정되지 않으며 사용자의 터치 동작을 이용하여 입력을 수행하는 모든 장치를 포함한다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다.　 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다.　 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다.　 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다.　 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다.　 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다.　 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다.　 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.　 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.　 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.　 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.　 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다.　 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (20)

  1. 터치를 이용한 사용자 인터페이스 방법에 있어서,
    이전 탭 및 현재 탭 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 단계; 및
    상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 (복수의 동작 모드 중 하나의) 동작 모드를 결정하는 단계를 포함하고
    상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드를 결정하는 단계는,
    상기 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 작고 상기 이전 탭 및 현재 탭 간의 상기 거리가 미리 설정된 거리 임계값보다 큰 경우 상기 동작 모드를 연속 탭 조작 모드로 변경하는 단계를 포함하는
    터치를 이용한 사용자 인터페이스 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 시간 임계값은 500ms이고, 상기 거리 임계값은 9.6mm인
    터치를 이용한 사용자 인터페이스 방법.
  4. 제1항에 있어서,
    상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계
    를 더 포함하는 터치를 이용한 사용자 인터페이스 방법.
  5. 제4항에 있어서,
    상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는,
    상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 핸들 이미지를 표시하는 단계; 및
    상기 현재 탭의 위치를 상기 이전 탭을 중심으로 상기 드래그 입력을 이용하여 회전시킨 위치로 이동시키는 경우, 상기 핸들 이미지를 기준으로 표시 영상을 회전시키는 단계
    를 더 포함하는 터치를 이용한 사용자 인터페이스 방법.
  6. 제4항에 있어서,
    상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는,
    상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 핸들 이미지를 표시하는 단계; 및
    상기 현재 탭의 위치를 상기 이전 탭의 반대 방향으로 상기 드래그 입력을 이용하여 이동시키는 경우, 표시 영상을 확대시키는 단계
    를 더 포함하는 터치를 이용한 사용자 인터페이스 방법.
  7. 제4항에 있어서,
    상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는,
    상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 핸들 이미지를 표시하는 단계; 및
    상기 현재 탭의 위치를 상기 이전 탭 쪽 방향으로 상기 드래그 입력을 이용하여 이동시키는 경우, 표시 영상을 축소시키는 단계
    를 더 포함하는 터치를 이용한 사용자 인터페이스 방법.
  8. 제4항에 있어서,
    상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는,
    상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 원형 핸들 이미지를 표시하는 단계; 및
    상기 드래그 입력을 이용하여 상기 현재 탭의 위치를 상기 이전 탭을 중심으로 회전시킨 위치로 이동시키는 경우, 회전각에 따라 표시 영상을 스크롤시키는 단계
    를 더 포함하는 터치를 이용한 사용자 인터페이스 방법.
  9. 제4항에 있어서,
    상기 현재 탭에 연속되는 드래그 입력에 따라 미리 결정된 처리를 수행하는 단계는,
    상기 연속 탭 조작 모드에서, 상기 이전 탭 및 상기 현재 탭에 대응하여 파이 형태의 메뉴를 표시하는 단계; 및
    상기 드래그 입력을 이용하여 상기 현재 탭의 위치를 상기 이전 탭을 중심으로 회전시킨 위치로 이동시키는 경우, 회전각에 따라 상기 메뉴의 항목을 선택하도록 단계
    를 더 포함하는 터치를 이용한 사용자 인터페이스 방법.
  10. 제1항에 있어서,
    상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드를 결정하는 단계는,
    상기 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 작고 상기 이전 탭 및 현재 탭 간의 상기 거리가 미리 설정된 거리 임계값보다 작거나 같은 경우 상기 동작 모드를 더블 탭 조작 모드로 변경하는 단계
    를 포함하는 터치를 이용한 사용자 인터페이스 방법.
  11. 제1항에 있어서,
    상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 동작 모드를 결정하는 단계는,
    상기 이전 탭 및 현재 탭 간의 상기 시간 간격이 미리 설정된 시간 임계값보다 크거나 같은 경우 상기 동작 모드를 단일 탭 조작 모드로 변경하는 단계
    를 포함하는 터치를 이용한 사용자 인터페이스 방법.
  12. 제1항에 있어서,
    탭 입력을 수신한 경우, 이전 입력이 탭 입력인지 판단하는 단계
    를 더 포함하고,
    상기 이전 탭 및 현재 탭 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 단계는,
    상기 이전 입력이 탭 입력인 경우, 이전 탭 및 현재 탭 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 단계
    를 포함하는 터치를 이용한 사용자 인터페이스 방법.
  13. 터치를 이용한 사용자 인터페이스 방법에 있어서,
    이전 탭 및 현재 탭을 수신하는 단계;
    상기 이전 탭 및 상기 현재 탭을 분석하여 연속 탭 조작 모드로 전환하는 단계; 및
    상기 연속 탭 조작 모드에서 미리 정해진 연속 탭 명령에 따라 동작을 수행하는 단계를 포함하고,
    상기 연속 탭 조작 모드로 전환하는 단계는,
    상기 이전 탭 및 현재 탭 간 시간 간격이 미리 설정된 시간 이내에 포함되는지 확인하는 단계; 및
    상기 이전 탭 및 현재 탭 간 거리 간격이 미리 설정된 거리 이상인지 확인하는 단계를 포함하고,
    상기 탭 간 시간 간격이 미리 설정된 시간 이내에 포함되고, 상기 탭 간 거리 간격이 미리 설정된 거리 이상일 경우, 연속 탭 조작 모드로 전환하고,
    상기 연속 탭 조작 모드에서 미리 정의된 동작을 수행하는 단계는,
    상기 이전 탭 및 상기 현재 탭의 터치 지점을 잇는 핸들 이미지를 표시하고, 상기 핸들 이미지의 길이 및 각도의 변화량에 대응하는 상기 미리 정해진 연속 탭 명령에 따라 동작을 수행하는 단계를 포함하는
    터치를 이용한 사용자 인터페이스 방법.
  14. 삭제
  15. 삭제
  16. 제13항에 있어서,
    상기 미리 정해진 연속 탭 명령은,
    상기 핸들 이미지의 길이 및 각도의 변화량에 따라 확대, 축소, 회전, 스크롤, 문자열 선택, 파이 형태의 메뉴의 실행 중 적어도 하나
    를 포함하는 터치를 이용한 사용자 인터페이스 방법.
  17. 터치를 이용한 사용자 인터페이스 장치에 있어서,
    이전 탭 및 현재 탭을 입력 받는 입력부;
    상기 이전 탭 및 현재 탭 간의 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 거리를 계산하는 분석부; 및
    상기 이전 탭 및 상기 현재 탭 간의 상기 시간 간격 및 상기 이전 탭 및 상기 현재 탭 간의 상기 거리에 따라 결정된 동작 모드에 따라 동작을 수행하는 수행부를 포함하고,
    상기 분석부는,
    이전 입력이 탭 입력인지 판단하는 탭 확인부;
    상기 이전 탭 및 상기 현재 탭 간 시간 간격이 미리 설정된 시간 이내인지 판단하는 시간 간격 확인부; 및
    상기 이전 탭 및 상기 현재 탭 간 시간 간격이 미리 설정된 시간 이내인 경우, 상기 이전 탭 및 상기 현재 탭 간 거리가 미리 설정된 거리 이상인지 판단하는 거리 간격 확인부를 포함하고,
    상기 수행부는,
    상기 탭 간 시간 간격이 미리 설정된 시간 이내이고, 상기 탭 간 거리 간격이 미리 설정된 거리 이상일 경우, 상기 동작 모드를 연속 탭 조작 모드로 변경하는
    터치를 이용한 사용자 인터페이스 장치.
  18. 삭제
  19. 삭제
  20. 제17항에 있어서,
    상기 입력부는,
    터치 스크린, 프로젝션 입력 장치, 프로젝션 키패드, 및 홀로그램 사용자 인터페이스 장치 중 적어도 하나를 포함하는
    터치를 이용한 사용자 인터페이스 장치.
KR1020130156912A 2013-07-17 2013-12-17 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치 KR101553119B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/109,308 US9612736B2 (en) 2013-07-17 2013-12-17 User interface method and apparatus using successive touches

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20130083986 2013-07-17
KR1020130083986 2013-07-17

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020150039819A Division KR102040798B1 (ko) 2013-07-17 2015-03-23 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150010553A KR20150010553A (ko) 2015-01-28
KR101553119B1 true KR101553119B1 (ko) 2015-09-15

Family

ID=52482358

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020130156912A KR101553119B1 (ko) 2013-07-17 2013-12-17 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치
KR1020150039819A KR102040798B1 (ko) 2013-07-17 2015-03-23 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020150039819A KR102040798B1 (ko) 2013-07-17 2015-03-23 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치

Country Status (1)

Country Link
KR (2) KR101553119B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180068027A (ko) 2016-12-13 2018-06-21 현대자동차주식회사 사용자 인터페이스 장치 및 방법

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101656518B1 (ko) * 2015-05-14 2016-09-09 이상백 탄력 버튼을 제공하는 사용자 단말기, 그를 이용한 특정 기능 실행 방법 및 사용자 인터페이스
KR102057130B1 (ko) 2018-01-11 2019-12-18 주식회사 와드 고객 예약 응대 및 처리 시스템

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013074432A (ja) * 2011-09-27 2013-04-22 Nec Saitama Ltd 情報処理装置、情報処理方法、およびプログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8957918B2 (en) * 2009-11-03 2015-02-17 Qualcomm Incorporated Methods for implementing multi-touch gestures on a single-touch touch surface
KR20130052749A (ko) * 2011-04-15 2013-05-23 엘지전자 주식회사 터치 기반 사용자 인터페이스 장치 및 방법
KR101397907B1 (ko) * 2011-11-22 2014-05-21 인크로스 주식회사 멀티 터치 인식을 위한 시스템, 제어방법과, 기록 매체

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013074432A (ja) * 2011-09-27 2013-04-22 Nec Saitama Ltd 情報処理装置、情報処理方法、およびプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180068027A (ko) 2016-12-13 2018-06-21 현대자동차주식회사 사용자 인터페이스 장치 및 방법
US10423323B2 (en) 2016-12-13 2019-09-24 Hyundai Motor Company User interface apparatus and method

Also Published As

Publication number Publication date
KR102040798B1 (ko) 2019-11-05
KR20150040825A (ko) 2015-04-15
KR20150010553A (ko) 2015-01-28

Similar Documents

Publication Publication Date Title
US9612736B2 (en) User interface method and apparatus using successive touches
JP6465870B2 (ja) パン及び選択ジェスチャの検出
JP5970086B2 (ja) タッチスクリーンホバリング入力処理
RU2541099C2 (ru) Управление программной клавиатурой
US10082948B2 (en) Apparatus and method for grouping and displaying icons on a screen
JP5102412B1 (ja) 情報端末、情報端末の制御方法、及び、プログラム
EP2474896A2 (en) Information processing apparatus, information processing method, and computer program
US20130038544A1 (en) Input and output method in touch screen terminal and apparatus therefor
EP2657811A1 (en) Touch input processing device, information processing device, and touch input control method
US10430071B2 (en) Operation of a computing device functionality based on a determination of input means
JP5761216B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP2012141869A (ja) 情報処理装置、情報処理方法およびコンピュータプログラム
US9632697B2 (en) Information processing apparatus and control method thereof, and non-transitory computer-readable medium
KR102040798B1 (ko) 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치
JP5835240B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP5628991B2 (ja) 表示装置、表示方法、及び表示プログラム
KR101090322B1 (ko) 터치스크린 제어방법, 이를 이용하는 터치스크린 장치, 및 이를 포함하는 모바일 기기
JP5620895B2 (ja) 表示制御装置、方法及びプログラム
EP2993555B1 (en) Screen operation method for electronic device based on electronic device and control action
JP2017142564A (ja) 情報処理装置、情報処理方法、及び、プログラム
KR101074605B1 (ko) 원 터치 기반의 제어인터페이스를 제공하는 단말기 및 단말기 조작 방법
JP2017211903A (ja) 表示装置及び表示方法
JP6253861B1 (ja) タッチジェスチャ判定装置、タッチジェスチャ判定方法、タッチジェスチャ判定プログラム、及びタッチパネル入力装置
KR20150017399A (ko) 터치스크린 입력 방법 및 장치
KR101550450B1 (ko) 휴대단말기의 줌 기능 제어방법 및 제어장치

Legal Events

Date Code Title Description
A201 Request for examination
A107 Divisional application of patent
E902 Notification of reason for refusal
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180823

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190826

Year of fee payment: 5