KR20140116080A - 멀티 터치가 가능한 디스플레이를 작동하기 위한 방법 및 멀티 터치가 가능한 디스플레이를 구비한 장치 - Google Patents

멀티 터치가 가능한 디스플레이를 작동하기 위한 방법 및 멀티 터치가 가능한 디스플레이를 구비한 장치 Download PDF

Info

Publication number
KR20140116080A
KR20140116080A KR1020147018196A KR20147018196A KR20140116080A KR 20140116080 A KR20140116080 A KR 20140116080A KR 1020147018196 A KR1020147018196 A KR 1020147018196A KR 20147018196 A KR20147018196 A KR 20147018196A KR 20140116080 A KR20140116080 A KR 20140116080A
Authority
KR
South Korea
Prior art keywords
touch
information
display
processing unit
objects
Prior art date
Application number
KR1020147018196A
Other languages
English (en)
Inventor
알렉산더 쿨릭
베른트 프로리히
잔 디트리히
Original Assignee
바우하우스-유니베르시타트 바이마르
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 바우하우스-유니베르시타트 바이마르 filed Critical 바우하우스-유니베르시타트 바이마르
Publication of KR20140116080A publication Critical patent/KR20140116080A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 멀티 터치가 가능한 디스플레이(01)를 작동하기 위한 방법 및 컴퓨터 기능을 가진 장치레 관한 것이다. 방법의 단계에서 조작 가능한 컨텐츠가 디스플레이(01)에 표시된다. 컨텐츠는 2개의 계층 레벨의 계층적으로 구조화된 상호작용 객체(04, 06)를 포함한다. 다른 단계에서 디스플레이(01)의 제 1 및 제 2 터치가 검출되고, 이는 상기 터치들에 관한 정보로 안내한다. 제 1 터치에 관한 정보는 제 1 계층 레벨의 상호작용 객체들(06)의 조작을 위해 이용된다. 제 1 터치 후에 예정된 지속시간을 지나서 제 2 터치가 검출되고 제 1 터치가 여전히 검출되는 경우에, 본 발명에 따라 제 2 터치에 관한 정보는 제 2 계층 레벨의 상호작용 객체 들(04)의 조작을 위해 이용된다. 그와 달리, 제 1 터치 후에 정해진 지속시간을 지나지 않아서 제 2 터치가 검출되는 경우에, 제 2 터치에 관한 정보는 제 1 계층 레벨의 상호작용 객체(06)의 조작을 위해 이용된다.

Description

멀티 터치가 가능한 디스플레이를 작동하기 위한 방법 및 멀티 터치가 가능한 디스플레이를 구비한 장치{METHOD FOR OPERATING A MULTI-TOUCH-CAPABLE DISPLAY AND DEVICE HAVING A MULTI-TOUCH-CAPABLE DISPLAY}
본 발명은 멀티 터치가 가능한 디스플레이, 예를 들어 사용자의 2개의 손가락으로 조작될 수 있는 멀티 터치가 가능한 터치 스크린을 작동하기 위한 방법에 관한 것이다. 또한, 본 발명은 멀티 터치가 가능한 디스플레이를 구비한 컴퓨터 기능을 포함하는 장치에 관한 것이다.
US 2010/0328227 A1호에 터치 스크린에서 다수의 마우스 버튼을 가진 컴퓨터 마우스를 시뮬레이션하는 멀티 핑거 마우스 에뮬레이션(multi-finger mouse emulation)이 공개되어 있다.
DE 20 2006 020 369 U1호에 입력 제스처와 관련해서 라이트 터치와 하드 터치가 구분되는 다기능 휴대용 장치가 공개되어 있다.
US 2011/0041096 A1호에는 제스처에 의한 그래픽 요소의 조작이 공개되어 있다. 양손 조작에 의해 다수의 계층 레벨을 갖는 메뉴에서 선택이 가능해진다.
US 2011/0216095 A1호에 사전 설정된 시간 범위 내에서 터치 감응성 표면의 한 번의 터치가 이루졌는지 2개의 터치가 이루어졌는지 여부가 구분되는 터치 감응성 표면의 조작을 위한 방법이 공개되어 있다.
US 2011/0227947 A1호에 특히 멀티 터치가 가능한 마우스를 포함하는 멀티 터치 유저 인터페이스가 공개되어 있다.
US 6,958,749 B1호에 표시된 객체가 손가락에 의해 이동되는 터치 패널의 조작을 위한 방법이 공개되어 있다. 2개의 손가락으로 터치 패널의 터치가 이루어지면, 객체가 회전된다.
US 8,004,498 B1호에 터치 패드 상에서 그래픽의 부분을 일시적으로 고정하기 위한 방법이 공개되어 있다. 이 경우 사용자의 한 손은 터치의 지속 시간에 의존해서 그래픽 요소의 부분을 위한 홀딩 신호를 형성하는 한편, 다른 손은 펜으로 그래픽 요소의 제 2 부분을 처리할 수 있다.
WO 2009/088561 A1호에 제스처 인식을 포함하는 양손 유저 인터페이스를 위한 방법이 공개되어 있다. 제스터 인식은 카메라로 이루어진다.
WO 2005/114369 A2호에 여러 손가락으로 조작될 수 있는 터치 스크린이 공개되어 있다.
WO 2006/020305 A2호에 터치 감응성 입력 장치에서 제스처의 인식을 위한 방법이 공개되어 있다. 상기 방법의 실시예에서 표시된 객체는 2개의 손가락으로 스케일링될 수 있다. 다른 실시예에서 엄지 손가락으로 모드 전환이 이루어질 수 있는 한편, 다른 손가락으로 동시에 객체가 이동될 수 있다.
DE 21 2008 000 001 U1호에 터치 스크린 디스플레이 상에서 목록의 스크롤링 및 문서의 이동, 스케일링 및 회전을 위한 장치가 공개되어 있다. 표시된 컨텐츠의 회전 및 스케일링을 위해 터치 스크린 디스플레이는 2개의 손가락으로 조작될 수 있다.
DE 20 2008 001 338 U1호에 다수의 제스처를 인식할 수 있는 다점 스케닝 장치가 공개되어 있다.
DE 20 2005 021 492 U1호에 새로운 미디어 객체를 표시하기 위해, 제스처가 인식되는 터치 감응식 입력 수단을 포함하는 전자 장치가 공개되어 있다.
WO 2009/100421 A2호에 터치 스크린 상에서 객체를 조작하기 위한 방법이 공개되어 있다. 이러한 방법에서 제 1 터치와 제 2 터치 사이의 상대 위치가 평가된다.
WO 20100/107839 A1호에 멀티 터치 감응성 디스플레이 상에서 "드래그 앤드 드롭(drag and drop)"-입력을 실행하기 위한 방법이 공개되어 있다. WO 2011/107839 A1호의 도 3A 내지 도 3G에 콘택 리스트의 조작이 도시된다. 개별 터치들은 리스트의 이동 또는 개별 엔트리의 선택에 이용된다. 2개의 손가락으로 터치는 드래그 앤드 드롭에 이용되고, 이 경우 동시에 2개의 계층 레벨의 객체들이 조작된다. 2개의 터치의 검출을 위한 기준은 2개의 터치가 시간적으로 중첩되는 것이다. 따라서 정해진 지속시간의 경과는 기준이 되지 않는다. 예를 들어 2개의 손가락으로 바로 연속하는 이중 터치도 드래그 앤드 드롭을 야기한다. 2개의 손가락으로 이중 터치는 항상 드래그 앤드 드롭 모드를 야기하므로, 2개의 동시 터치에 의해 하나의 상호작용 객체의 조작(예를 들어 주밍(zooming)) 또는 동일한 계층 레벨의 2개의 상호작용 객체의 조작은 불가능하다.
본 발명의 과제는 선행기술로부터, 멀티 터치가 가능한 디스플레이에서 정보의 입력을 용이하게 하고, 상응하게 물리적 현실로부터 체험을 제공하는 것이다.
상기 과제는 청구범위 제 1 항 및 제 9 항에 따른 멀티 터치가 가능한 디스플레이의 작동을 위한 방법 및 청구범위 제 10 항에 따른 컴퓨터 기능을 포함하는 장치에 의해 해결된다.
본 발명의 제 1 대상은 예를 들어 테블릿-PC의 터치 스크린 형태의 멀티 터치가 가능한 터치 스크린처럼 데이터 처리 유닛에 의해 작동되는 멀티 터치가 가능한 디스플레이의 작동을 위한 방법이다. 멀티 터치가 가능한 디스플레이는 대안으로서 예를 들어 데이터 장갑 또는 3D-마우스와 같은 데이터 입력 장치를 가진 2차원 또는 3차원 투사 장치에 의해 형성될 수도 있고, 이 경우 데이터 입력 장치의 직접 터치는 표시된 컨텐츠의 가상의 터치를 야기한다. 본 발명에 따른 방법은 특히, 멀티 터치가 가능한 디스플레이의 조작 시 제스처를 평가하고 멀티 터치가 가능한 디스플레이의 표시를 상응하게 조정하는데 이용된다.
본 발명의 제 1 대상에 따른 방법의 단계에서, 조작 가능한 컨텐츠가 디스플레이 상에 또는 내에 시각적으로 표시된다. 컨텐츠는 계층적으로 구조화된 상호작용 객체들을 포함한다. 상호작용 객체들은, 그것의 시각적 표시가 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 직접 또는 간접적으로 터치될 수 있고, 이로 인해 상호작용 객체들이 변경될 수 있는 것을 특징으로 한다. 예를 들어 터치 스크린 상에서 터치는 시각적 표시에 의해 직접적으로 이루어진다. 그와 달리 멀티 터치가 가능한 디스플레이가 데이터 장갑을 가진 투사 장치에 의해 형성되는 경우에, 터치는 데이터 장갑 내에서 이루어지고, 이로써 표시된 상호작용 객체의 가상 터치가 이루어진다. 상호작용 객체들은 계층적으로 구조화되므로, 하위 상호작용 객체들과 상위 상호작용 객체들이 제공된다. 적어도 제 1 계층 레벨 및 제 2 계층 레벨의 상호작용 객체들이 제공된다.
본 발명에 따른 방법의 다른 단계에서 멀티 터치가 가능한 디스플레이의 조작자에 의해 실행된 제 1 터치가 검출되고, 이는 데이터 처리 유닛에 의해 처리 가능한 제 1 터치에 관한 정보로 안내한다. 상기 정보는 제 1 계층 레벨의 상호작용 객체들의 조작을 위해 이용된다. 다른 단계에서 멀티 터치가 가능한 디스플레이의 제 2 터치가 검출되고, 이는 데이터 처리 유닛에 의해 처리 가능한 제 2 터치에 관한 정보로 안내한다. 제 2 터치의 위치는 제 1 터치의 위치와 다르므로, 상기 제 2 터치는 제 2 대상에 의해, 예를 들어 조작자의 제 2 손가락에 의해 실행되었음이 추론될 수 있는 것을 특징으로 한다. 제 1 터치 후에 예정된 지속시을 지나서 제 2 터치가 검출되고 제 1 터치가 여전히 검출되는 경우에, 본 발명에 따라 제 2 터치에 관한 정보는 데이터 처리 유닛에 의해 제 2 계층 레벨의 상호작용 객체들의 조작을 위해 이용된다. 예정된 지속시간의 대기는, 제 2 터치가 제 2 계층 레벨의 상호작용 객체, 예를 들어 제 1 계층 레벨의 조작될 상호작용 객체에 종속되는 상호작용 객체와 관련되어야 한다는 사용자의 의도를 인식하는데 이용된다. 그와 달리, 제 1 터치 후에 예정된 지속시간을 지나지 않아서 제 2 터치가 검출되는 경우에, 본 발명에 따라 제 2 터치에 관한 정보는 데이터 처리 유닛에 의해 제 1 계층 레벨의 상호작용 객체의 조작을 위해 이용된다. 이로써 동시에 또는 약간의 시간 간격을 두고 이루어지는 사용자의 2개의 터치는, 동일한 계층 레벨, 즉 제 1 계층 레벨의 상호작용 객체들 및 바람직하게는 제 1 계층 레벨의 동일한 상호작용 객체와 관련되어야 하는 것으로 파악된다.
본 발명에 따른 방법의 특수한 장점은, 상이한 계층 레벨의 상호작용 객체들이 사용자에 의해 조작될 수 있고, 이를 위해 다른 센서 장치를 필요로 하지 않는 것이다. 계층 레벨의 의도치 않은 교체는 그럼에도 전반적으로 저지된다. 계층 레벨의 교체 시 조작 과정은 중단되지 않는다. 계층 레벨의 교체는 인지 가능한 대기 시간을 필요로 하지 않는다. 본 발명에 따른 방법의 다른 장점은, 멀티 터치가 가능한 디스플레이 상에 또는 내에 추가 조작 요소가 표시되지 않아도 되는 것이고, 따라서 상기 장점은 다른 용도의 컨텐츠를 위해 제공된다. 본 발명에 따른 방법에서, 특히 터치 스크린의 경우에 입력 오류는 진동에 의해 대부분 저지된다. 본 발명에 따른 방법은 멀티 터치가 가능한 디스플레이의 조작을 위한 다른 방법과 충돌하지 않으므로, 예를 들어 또한 동일한 계층 레벨에서 동시 입력이 실행될 수 있다. 본 발명에 따른 방법은 바람직하게 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 위치가 변하는 터치의 속도와 무관하고, 바람직하게 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 터치의 위치와도 무관하다.
본 발명의 사상은, 제 1 계층 레벨의 하나 이상의 상호작용 객체의 처리를 위한 임의의 모드로부터(예를 들어 개별 상호작용 객체들의 활성화 또는 이동, 하나의 상호작용 객체의 주밍) 2개의 다른 계층 레벨의 상호작용 객체들의 처리를 위한 모드로 교체를 결정하는 것이다. 이를 위해 2개의 터치 사이의 예정된 지속시간이 대기된다. 제 2 터치까지 예정된 지속시간보다 짧은 시간이 경과한 경우에, 이는 제 1 레벨의 하나의 상호작용 객체의 처리를 위한 모드에서 지속을 야기한다. 이 경우 제 1 터치가 아직 이루어지고 있는지 아닌지의 여부는 중요하지 않다. 즉, 동시에 2개의 터치를 필요로 하는 모드들이(예를 들어 상호작용 객체의 주밍) 제공된다. 또한, 하나의 터치만을 필요로 하는 모드들이(예를 들어 상호작용 객체의 활성화 또는 이동) 제공된다. 따라서, 제 1 터치 후에 예정된 지속시간 내에 제 2 터치가 시작되는 경우에, 제 1 터치가 여전히 이루어지고 있거나 또한 제 1 터치가 더 이상 이루어지지 않는 것이 고려될 수 있다. 두 경우에 2개의 동시 터치에 의한 2개의 계층 레벨의 상호작용 객체들의 조작을 위한 모드로 이행되지 않는다(예를 들어 홀드-앤드-무브", 이하 참조).
본 발명에 따른 방법의 바람직한 실시예에서, 제 2 터치에 관한 정보가 제 2 계층 레벨의 상호작용 객체들의 조작을 위해 이용되는 경우에, 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 각각 제 1 조작 모드에 따라 처리된다. 조작자는 이로써 동시에 상위 상호작용 객체와 하위 상호작용 객체를 동일한 방식으로 조작할 수 있다. 예를 들어 조작자는 상위 상호작용 객체와 하위 상호작용 객체를 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 이동시킴으로써, 하위 상호작용 객체를 상위 상호작용 객체에 대해 이동시킬 수 있다.
본 발명에 따른 방법의 다른 바람직한 실시예에서, 제 2 터치에 관한 정보가 제 1 계층 레벨의 상호작용 객체들의 조작을 위해 이용되는 경우에, 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 공통적으로 제 2 조작 모드에 따라 처리된다. 이 경우 바람직하게 하나의 동일한 상호작용 객체가 조작된다. 따라서, 사용자가 제 2 손가락을 제 2 계층 레벨의 상호작용 객체에 대한 조작을 실행하기 위해 이용하고자 하지 않는 경우에, 사용자는 예를 들어 제 2 손가락을, 제 1 계층 레벨의 상호작용 객체에 대한 제 2 조작 모드에 따른 복합 조작을 실행하기 위해 이용할 수 있다.
본 발명에 따른 방법의 다른 바람직한 실시예에서, 제 1 터치가 더 이상 검출되지 않는 경우에 제 2 터치에 관한 정보는 제 1 조작 모드에 따라 처리된다. 이로 인해 사용자는 멀티 터치가 가능한 디스플레이의 2개의 터치에 의한 제 2 조작 모드에 따라 상호작용 객체를 조작한 후에, 중단하지 않고 제 1 조작 모드로 복귀할 수 있다.
상호작용 객체들의 제 1 계층 레벨은 바람직하게 상호작용 객체들의 제 2 계층 레벨보다 바로 다음으로 높다. 따라서 제 1 계층 레벨의 상호작용 객체들은 제 2 계층 레벨의 각각의 상호작용 객체들을 포함한다.
제 2 계층 레벨의 상호작용 객체들은 바람직하게 기본 요소이므로, 제 2 계층 레벨은 최저 계층 레벨이된다.
제 1 계층 레벨의 상호작용 객체들은 바람직하게 그룹에 의해 형성되고, 상기 그룹은 각각 제 2 계층 레벨의 기본 요소적인 상호작용 객체들을 포함할 수 있다.
제 2 계층 레벨의 상호작용 객체들은 바람직하게 심볼(아이콘), 픽토그램, 이미지 및/또는 창(윈도우)에 의해 형성된다. 제 1 계층 레벨의 상호작용 객체들은 바람직하게 상징 폴더 및/또는 창에 의해 형성된다.
본 발명에 따른 방법의 바람직한 실시예에서 표시된 컨텐츠는 2개 이상의 계층 레벨의 계층적으로 구조화된, 상호작용 객체들을 포함한다. 본 발명에 따른 방법은 말하자면, 조작자가 다수의 계층 레벨을 넘어서 직관적이고 신속한 상호작용을 가능하게 하는데 적합하다.
제 1 조작 모드와 제 2 조작 모드는 바람직하게 각각, 표시된 상호작용 객체들이 관련 터치에 관한 정보로부터 어떻게 변경될 수 있는지 규정한다. 이 경우 바람직하게 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 관련 터치 위치에 시각적으로 표시된 각각의 상호작용 객체가 조작된다.
제 1 조작 모드에 따른 제 2 계층 레벨의 기본적인 상호작용 객체의 조작은 예를 들어, 조작될 상호작용 객체를 제 1 계층 레벨의 그룹들 중 다른 하나의 그룹에 할당하는 것을 가능하게 한다.
바람직하게는, 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 제 1 터치 위치에 표시되는 제 1 계층 레벨의 그룹이 조작된다.
상호작용 객체들은 바람직하게 제 1 터치의 검출 직후에 또는 제 2 터치의 검출 직후에 변경된다. 이 경우 상호작용 객체들은 바람직하게 검출된 제 1 터치 또는 검출된 제 2 터치의 위치 변동과 시간적으로 동시에 변경된다.
본 발명에 따른 방법의 바람직한 실시예에서, 조작자에게 제 1 조작 모드에 의해 디스플레이에 의해 표시된 컨텐츠 내에서 네비게이션을 가능하게 하는 기능이 제공된다. 따라서 제 1 조작 모드는 바람직하게 멀티 터치가 가능한 디스플레이 상에 또는 내에 표시된 제 1 계층 레벨의 상호작용 객체의 활성화를 야기하고, 상기 상호작용 객체는 제 1 터치가 최초로 검출되고 또는 최초 검출 시 제 1 터치가 가리키는 곳의, 멀티 터치가 가능한 디스플레이 상에 또는 내에 표시된 바로 그 상호작용 객체이다. 동시에 바람직하게 디스플레이에 의해 표시된 제 1 계층 레벨의 나머지 모든 상호작용 객체들은 부동화된다. 동일한 방식으로 제 1 조작 모드는 바람직하게, 제 2 터치에 관한 정보가 제 2 계층 레벨의 상호작용 객체들의 조작을 위해 이용되는 경우에, 바람직하게 디스플레이에 의해 표시된 제 2 계층 레벨의 상호작용 객체의 활성화를 야기하고, 상기 상호작용 객체는 제 2 터치가 최초로 검출되고 또는 최초 검출 시 제 2 터치가 가리키는 곳의, 멀티 터치가 가능한 디스플레이 상에 또는 내에 표시된 바로 그 상호작용 객체이다. 또한, 제 1 조작 모드는 바람직하게 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 관련 터치의 이동에 상응하게 활성화된 상호작용 객체의 이동을 야기한다. 제 2 터치의 정보들이 제 2 계층 레벨의 상호작용 객체들의 조작을 위해 이용되는 경우에, 즉 조작자가 제 1 터치 후에 예정된 지속시간을 지나서 제 2 터치를 실행하는 경우에, 조작자는 상위 상호작용 객체와 하위 상호작용 객체를 동시에 움직일 수 있으므로, 상기 객체들은 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 예를 들어 서로에 대해 이동될 수 있다. 또한, 조작자는 제 1 터치를 위치 고정적으로 유지할 수 있으므로, 제 1 계층 레벨의 상호작용 객체의 위치는 변경되지 않는 한편, 사용자는 제 2 계층 레벨의 상호작용 객체를 이동시킨다. 이로써 본 발명에 따른 방법은 조작자에게 데이터 입력을 위한 "홀드 앤드 무브(Hold and Move)"-메타포의 이용을 가능하게 한다.
제 2 조작 모드는 바람직하게, 멀티 터치가 가능한 디스플레이 상에서 또는 내에서 관련 터치의 이동에 상응하게 관련 터치 위치에서 멀티 터치가 가능한 디스플레이 상에 또는 내에 표시된 상호작용 객체의 변경을 야기한다. 특히 바람직하게 제 2 조작 모드는 관련 실제 또는 가상 터치 위치에 표시된 상호작용 객체의 스케일링 또는 회전을 야기한다.
제 1 조작 모드에서 바람직하게 하나의 터치의 정보는 조작될 상호작용 객체에 적용된다. 그와 달리, 제 2 조작 모드에서 바람직하게 2개의 터치의 정보들은 동일한 하나의 상호작용 객체에 적용된다. 이 경우 바람직하게 2개의 터치의 정보들은 서로 상관적으로 처리된다.
터치는 바람직하게 조작자의 손가락에 의해 이루어진다. 대안으로서 터치는 손 또는 조작자가 사용하는 펜에 의해 이루어질 수도 있다. 디스플레이가 터치 스크린에 의해 형성되는 경우에, 터치는 터치 스크린의 표면에서 이루어진다. 디스플레이가 예컨대 데이터 장갑 또는 3D-마우스와 같은 데이터 입력 장치를 가진 투사 장치에 의해 형성되는 경우에, 데이터 입력 장치 상에서 또는 내에서 직접적인 터치가 이루어지고, 이 경우 표시된 컨텐츠에 대한 데이터 입력 장치의 위치 및/또는 정렬은 가상으로 터치되는 상호작용 객체를 규정한다.
터치의 검출 시 결정된 정보는 바람직하게 터치 스크린에 의해 형성된 디스플레이 상의 터치 위치 및 또한 바람직하게 터치 스크린 상의 터치 위치의 시간에 따른 변경을 나타낸다.
예정된 지속시간은 바람직하게 10 ms 내지 3 s, 또한 바람직하게 20 ms 내지 1 s, 특히 바람직하게 50 ms 내지 200 ms이다. 또한, 예정된 지속시간은 특히 바람직하게 100 ms ± 20 ms이다.
멀티 터치가 가능한 디스플레이는 바람직하게 멀티 터치가 가능한 터치 스크린에 의해, 예를 들어 테블릿-PC의 터치 스크린에 의해 형성된다.
본 발명의 제 2 대상은 데이터 처리 유닛에 의해 작동되는 멀티 터치가 가능한 디스플레이의 작동을 위한 방법이다. 상기 방법은 본 발명의 제 1 대상에 따른 방법과 동일한 적용 분야를 갖는다.
본 발명의 제 2 대상에 따른 방법의 단계에서 멀티 터치가 가능한 디스플레이 상에 또는 내에 컨텐츠의 시각적 표시가 이루어진다. 상기 컨텐츠는 데이터 처리 유닛에 의해 제 1 조작 모드에 따라 그리고 대안으로서 제 2 조작 모드에 따라 조작 가능하다. 제 1 조작 모드는 제 2 조작 모드와 다르다. 다른 단계에서 조작자에 의해 실행된, 멀티 터치가 가능한 디스플레이의 제 1 터치의 검출이 이루어지고, 이는 데이터 처리 유닛에 의해 처리 가능한 제 1 터치에 관한 정보로 안내한다. 다른 단계에서 멀티 터치가 가능한 디스플레이의 제 2 터치의 검출이 이루어지고, 이는 데이터 처리 유닛에 의해 처리 가능한 제 2 터치에 관한 정보로 안내한다.
제 1 터치 후에 예정된 지속시간을 지나서 제 2 터치가 검출되고 제 1 터치가 여전히 검출되는 경우에, 본 발명에 따라 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 각각 제 1 조작 모드에 따라 조작될 컨텐츠의 조작을 위해 처리된다. 그와 달리, 제 1 터치 후에 예정된 지속시간을 지나지 않아서 제 2 터치가 검출되고 바람직하게 제 1 터치가 여전히 검출되는 경우에, 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 제 2 조작 모드에 따라 조작될 컨텐츠의 조작을 위해 처리된다.
본 발명의 제 2 대상에 따른 방법은 2개의 조작 모드 사이에서 신속하고 직관적인 전환을 가능하게 한다. 본 발명에 따른 사상은, 제 1 조작 모드(예를 들어 홀드 앤드 무브)로부터 제 2 조작 모드(예를 들어 개별적인 상호작용 객체들의 활성화 또는 이동, 하나의 상호작용 객체의 주밍)로 및 반대로 교체를 결정하는 것이다. 이를 위해 2개의 터치 사이의 예정된 지속시간이 대기된다. 제 2 터치까지 예정된 지속시간보다 짧은 시간이 경과하면, 이는 제 2 조작 모드로 교체를 야기한다. 이 경우 제 1 터치가 여전히 이루어지고 있는지 또는 아닌지의 여부는 중요하지 않다. 동시에 2개의 터치를 필요로 하는 2개의 조작 모드의 예들이 있다(예를 들어 하나의 상호작용 객체의 주밍). 또한, 개별적인 터치만을 필요로 하는 제 2 조작 모드의 예들이 있다(예를 들어 상호작용 객체의 활성화 또는 이동). 따라서, 제 1 터치 후에 예정된 지속시간 내에 제 2 터치가 시작되는 경우에, 제 1 터치가 여전히 이루어지고 있거나 또한 제 1 터치가 더 이상 이루어지지 않는 것이 고려될 수 있다. 두 경우에 기본적으로 2개의 동시 터치를 필요로 하는 제 1 조작 모드로 이행되지 않는다.
표시된 컨텐츠는 바람직하게 상호작용 객체들을 포함한다. 상호작용 객체들은 바람직하게 계층적으로 구조화된다.
제 1 터치에 관한 정보는 바람직하게 제 1 계층 레벨의 상호작용 객체들의 조작을 위해 이용된다.
제 2 터치에 관한 정보가 제 1 조작 모드에 따라 처리되는 경우에, 제 2 터치에 관한 정보는 바람직하게 제 2 계층 레벨의 상호작용 객체들의 조작을 위해 이용된다.
제 2 터치에 관한 정보가 제 2 조작 모드에 따라 처리되는 경우에, 제 2 터치에 관한 정보는 바람직하게 제 1 계층 레벨의 상호작용 객체들의 조작을 위해 이용된다.
또한, 본 발명의 제 2 대상에 따른 본 발명에 따른 방법은 바람직하게 본 발명의 제 1 대상에 따른 방법에서 바람직한 것으로 제시된 특징들을 포함한다.
본 발명에 따른 장치는 컴퓨터 기능을 포함하고, 예를 들어 스마트폰 또는 예컨대 태블릿-PC와 같은 컴퓨터에 의해 형성된다. 장치는 컨텐츠를 시각적으로 표시하기 위한 그리고 조작자에 의해 실행된 터치를 검출하기 위한 멀티 터치가 가능한 디스플레이를 포함한다. 멀티 터치가 가능한 디스플레이는 바람직하게 멀티 터치가 가능한 스크린에 의해 형성된다. 이러한 터치 스크린은 멀티-터치 스크린 또는 햅틱 스크린이라고도 한다. 디스플레이는 대안으로서 데이터 장갑 또는 3D-마우스와 같은 데이터 입력 장치를 가진 2차원- 또는 3차원 투사 장치에 의해 형성될 수도 있다. 또한 본 발명에 따른 장치는, 본 발명의 제 1 또는 제 2 대상에 따른 본 발명에 따른 방법을 실시하기 위해 구성된 데이터 처리 유닛을 포함한다. 바람직하게 데이터 처리 유닛은 본 발명에 따른 방법의 바람직한 실시예를 실시하기 위해 구성된다.
본 발명의 다른 장점, 세부사항 및 개선예들은 본 발명에 따른 방법의 다양한 과정들의 하기 설명에 도면과 관련해서 제시된다.
도 1은 본 발명에 따른 방법의 바람직한 실시예에 따른 제 1 과정을 도시한 도면.
도 2는 도 1에 도시된 실시예의 제 2 과정을 도시한 도면.
도 3은 도 1에 도시된 실시예의 제 3 과정을 도시한 도면.
도 4는 본 발명에 따른 방법의 바람직한 실시예의 상태 천이도.
도 1은 본 발명에 따른 방법의 바람직한 실시예의 제 1 과정을 도시한다. 조작자의 왼손(02) 및 오른손(03)으로 멀티 터치가 가능한 터치 스크린(01)의 조작 시 4개의 시점(T1, T2, T3, T4)이 도시된다. 멀티 터치가 가능한 터치 스크린(01)은 예를 들어 태블릿-PC의 터치 스크린일 수 있다.
터치 스크린(01)에 창(06) 내에 그룹화된 개별 심볼들(04)이 시각적으로 표시된다. 심볼(04)과 창(06)은 터치 스크린(01)의 터치에 의해 표면적으로는 직접 조작될 수 있고, 따라서 상호작용 객체들이다. 심볼들(04)은 창(06) 내에서 그룹화되어 있기 때문에, 심볼들(04)은 하위 계층 레벨을 형성하고, 창(06)은 상위 계층 레벨을 형성하는 계층적 구조를 형성한다.
시점(T1)에 조작자는 왼손(02)의 제 1 손가락(07)으로 창(06)이 표시된 영역내의 터치 스크린(01)을 터치한다. 이러한 단일 터치는, 창(06)의 특성을 상위 계층 레벨의 상호작용 객체로서 활성화시킨다. 이 경우, 제 1 손가락(07)에 의한 터치 위치에 어떤 심볼(04), 즉 하위 계층 레벨의 어떤 상호작용 객체가 표시되어 있는지는 중요하지 않다.
시점(T2)까지 조작자는 왼손(02)의 제 1 손가락(07)을 멀티 터치 스크린(01) 상에서 도시된 위치까지 아래로 이동하였다. 동일한 방식으로 내부에 표시된 심볼(04)을 포함하는 창(06)은 제 1 손가락(07)의 검출된 이동을 따라서 아래로 이동되었다. 창(06)의 활성화 및 창(06)의 이동은 제 1 조작 모드에 따른 조작이다. 제 1 조작 모드는 특히 표시된 컨텐츠 내에서 네비게이션을 가능하게 하는 기능을 포함한다.
시점(T3)까지 조작자는 왼손(02)의 제 1 손가락(07)을 이용한 멀티 터치 스크린(01)의 터치를 종료하였고, 그 대신에 도시된 위치에서 오른손(03)의 제 2 손가락(08)으로 멀티 터치 스크린(01)의 터치를 실행하였다. 멀티 터치 스크린(01)의 터치는 창(06)이 표시된 영역 내에서 이루어진다. 터치 위치에 어떤 심볼(04)이 표시되어 있는지는 중요하지 않다. 멀티 터치 스크린(01)은 단일 터치에 의해 다시 조작되기 때문에, 터치에 관한 정보는 마찬가지로 제 1 조작 모드에 따라 처리된다. 따라서 상기 터치에 의해 다시 창(06)이 활성화되고, 터치 스크린(01) 상에서 제 2 손가락(08)의 이동에 의해 시점(T4)과 관련해서 도시된 위치까지 이동된다.
도 2는 본 발명에 따른 방법의 바람직한 실시예의 제 2 과정을 도시한다. 도시된 시점(T1)에 조작자는 왼손(02)의 제 1 손가락(07)과 오른손(03)의 제 2 손가락(08)으로 거의 동시에 터치 스크린(01)을 터치하였다. 어느 경우든 제 1 손가락(07)에 의한 터치와 제 2 손가락(08)에 의한 터치는 예를 들어 100 ms의 예정된 시간보다 작은 시간 간격으로 이루어졌다. 조작자에 의해 의도된 이러한 동시성은, 제 1 손가락(07)에 의한 터치 및 제 2 손가락(08)에 의한 터치가 제 2 조작 모드에 따라 평가되게 한다. 제 2 조작 모드는 이 실시예에서 2개의 터치가 창(06)에 적용되는 것을 규정한다. 따라서 2개의 터치는 상위 계층 레벨의 동일한 상호작용 객체에 적용된다.
시점(T2)까지 조작자는 왼손(02)의 제 1 손가락(07)과 오른손(03)의 제 2 손가락(08)을 터치 스크린(10) 상에서, 2개의 터치 위치들이 시점(T1)에서보다 서로 큰 간격을 갖도록 이동시켰다. 제 2 조작 모드에 따라 창(06)이 스케일링되므로, 상기 창은 시점(T2)에 더 크게 표시된다.
도 3은 본 발명에 따른 방법의 바람직한 실시예의 다른 과정을 도시한다. 도시된 시점(T1)에 조작자는 왼손(02)의 제 1 손가락(07)으로 창(06)의 영역 내의 터치 스크린(01)을 터치하였다. 시점(T2)에 조작자는 추가로 오른손(03)의 제 2 손가락(08)으로 터치 스크린(01)을 터치하였다. 2개의 시점(T1, T2)은 서로 예컨대 100 ms의 예정된 지속시간을 초과하기 때문에, 2개의 터치는 도 2에 도시된 과정과 달리 제 2 조작 모드에 따라서가 아니라 각각 제 1 조작 모드에 따라 평가된다. 이 경우 오른손(03)의 제 2 손가락(08)에 의한 터치는 도 2에 도시된 과정과 달리 창(06)과 관련되는 것이 아니라, 하위 계층 레벨의 상호작용 객체들 중 하나의 상호작용 객체, 즉 심볼들(04) 중 하나의 심볼, 말하자면 제 2 손가락(08)에 의한 터치 위치에 표시된 심볼(04)과 관련된다. 따라서 손가락(07, 08)에 의한 2개의 터치는 상이한 계층 레벨의 상호작용 객체들(04, 06)과 관련된다. 손가락(07, 08)에 의한 2개의 터치는 제 1 조작 모드에 따라 처리되므로, 상호작용 객체들(04, 06)의 활성화 및 후속해서 경우에 따라서는 이동이 이루어진다.
시점(T3)에 조작자는 오른손(03)의 제 2 손가락(08)을 터치 스크린(01) 상에서 아래로 이동시킨 한편, 왼손(02)의 제 1 손가락(07)을 위치 변경시키지 않고 그대로 두었다. 제 2 손가락(08)의 이동은, 제 2 손가락(08)으로 활성화된 심볼(04)을 아래로 이동시켰고, 이 경우 이로 인해 창(06)으로부터 심볼(04)의 제거되었다. 제 1 손가락(07)에 의한 터치는 창(06)과 관련되기 때문에, 선택된 위치에서 제 1 손가락(07)은 그대로 있었으므로, 창(06)은 제 위치를 유지하였다. 도시된 과정은 "홀드 앤드 무브(Hold and Move)"-메타포이다.
시점(T4)까지 조작자는 왼손(02)의 제 1 손가락(07)을 위로 이동시켰고, 따라서 터치 스크린(01) 상에서 창(06)의 표시도 위로 이동되었다. 조작자는 제 1 손가락(07)과 제 2 손가락(08)의 이동을 반대 순서로도 또는 동시에 실행할 수도 있으므로, 시점(T4)과 관련해서 도시된 상태가 달성될 수 있다.
도 4는 본 발명에 따른 방법의 바람직한 실시예의 상태 천이도를 도시한다. 상태 천이도의 상부에 "비터치" 상태로부터 "단일 터치"의 상태로 및 반대로의 천이가 도시된다. 멀티 터치가 가능한 터치 스크린(01)의 단일 터치는(도 1에 도시됨) 터치 위치에 표시된 상위 계층 레벨의 상호작용 객체의 제 1 조작 모드에 따른 조작을 야기한다. 이로 인해 도 1에 도시된, 창(06)의 활성화 및 이동이 가능하다.
상태 천이도의 하부는 "단일 터치" 상태로부터 "2개의 손가락으로 터치" 상태로 및 반대로의 천이를 도시하고, 이 경우 상기 상태 천이가 예를 들어 100 ms 이내에 이루어지는지 또는 지나서 이루어지는지 여부가 구분된다. 상기 천이가 100 ms 이내에 이루어지면, 2개의 터치는 공통적으로 제 1 계층 레벨의 상호작용 객체에 적용된다. 2개의 터치의 이동에 의해 도 2에 도시된 창(06)의 스케일링이 이루어진다.
상태 천이가 100 ms를 지나서 이루어지면, 제 2 터치는 예를 들어 심볼(04)의 조작처럼(도 3에 도시됨) 제 2 계층 레벨의 상호작용 객체들 중 하나의 상호작용 객체의 조작을 야기한다. 이로써 도 3에 도시된 "홀드 앤드 무브"-메타포에 따른 2개의 상호작용 객체들의 조작이 이루어질 수 있다.
01 멀티 터치 스크린
02 왼손
03 오른손
04 심볼
05 -
06 창
07 제 1 손가락
08 제 2 손가락

Claims (10)

  1. 데이터 처리 유닛에 의해 작동되는 멀티 터치가 가능한 디스플레이(01)의 작동을 위한 방법으로서, 하기 방법 단계들 즉,
    - 상기 멀티 터치가 가능한 디스플레이(01) 상에 또는 내에 조작 가능한 컨텐츠를 시각적으로 표시하는 단계, 이 경우 컨텐츠는 적어도 제 1 계층 레벨 및 제 2 계층 레벨의 계층적으로 구조화된 상호작용 객체들(04, 06)을 포함하고;
    - 상기 멀티 터치가 가능한 디스플레이(01)의 제 1 터치를 검출하는 단계, 이 경우 제 1 터치의 검출은 데이터 처리 유닛에 의해 처리 가능한 제 1 터치에 관한 정보로 안내하고, 상기 정보는 데이터 처리 유닛에 의해 제 1 계층 레벨의 상호작용 객체들(04)의 조작을 위해 이용되고; 및
    - 상기 멀티 터치가 가능한 디스플레이(01)의 제 2 터치를 검출하는 단계를 포함하고, 이 경우 제 2 터치의 검출은 데이터 처리 유닛에 의해 처리 가능한 제 2 터치에 관한 정보로 안내하는 방법에 있어서,
    제 1 터치 후에 예정된 지속시간을 지나서 제 2 터치가 검출되고 제 1 터치가 여전히 검출되는 경우에, 제 2 터치에 관한 정보는 데이터 처리 유닛에 의해 제 2 계층 레벨의 상기 상호작용 객체들(04)의 조작을 위해 이용되고, 제 1 터치 후에 예정된 지속시간을 지나지 않아서 제 2 터치가 검출되는 경우에, 제 2 터치에 관한 정보는 데이터 처리 유닛에 의해 제 1 계층 레벨의 상호작용 객체들(06)의 조작을 위해 이용되는 것을 특징으로 하는 방법.
  2. 제 1 항에 있어서, 제 2 터치에 관한 정보가 제 2 계층 레벨의 상호작용 객체들(04)의 조작을 위해 이용되는 경우에, 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 각각 제 1 조작 모드에 따라 처리되는 것을 특징으로 하는 방법.
  3. 제 1 항 또는 제 2 항에 있어서, 제 2 터치에 관한 정보가 제 1 계층 레벨의 상호작용 객체들(06)의 조작을 위해 이용되는 경우에, 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 공통적으로 제 2 조작 모드에 따라 처리되는 것을 특징으로 하는 방법.
  4. 제 1 항 내지 제 3 항 중 어느 한 항에 있어서, 상기 제 2 계층 레벨의 상기 상호작용 객체들(04)은 기본 요소인 것을 특징으로 하는 방법.
  5. 제 4 항에 있어서, 상기 제 1 계층 레벨의 상호작용 객체들은 제 2 게층 레벨의 기본 요소적인 상기 상호작용 객체들(04)의 그룹(06)에 의해 형성되는 것을 특징으로 하는 방법.
  6. 제 1 항 내지 제 5 항 중 어느 한 항에 있어서, 상호작용 객체들은 심볼(04), 픽토그램, 이미지, 창(06) 및/또는 개별 심볼들의 상징 폴더에 의해 형성되는 것을 특징으로 하는 방법.
  7. 제 1 항 내지 제 6 항 중 어느 한 항에 있어서, 제 1 조작 모드와 제 2 조작 모드는 각각, 표시된 상호작용 객체들(04, 06)이 관련 터치에 관한 정보로부터 어떻게 변경될 수 있는지를 규정하는 것을 특징으로 하는 방법.
  8. 제 1 항 내지 제 7 항 중 어느 한 항에 있어서, 예정된 지속시간은 20 ms 내지 1 s인 것을 특징으로 하는 방법.
  9. 데이터 처리 유닛에 의해 작동되는 멀티 터치가 가능한 디스플레이(01)의 작동을 위한 방법으로서, 하기 방법 단계들, 즉
    - 상기 멀티 터치가 가능한 디스플레이(01) 상에 또는 내에 컨텐츠(04, 06)를 시각적으로 표시하는 단계, 이 경우 컨텐츠는 데이터 처리 유닛에 의해 제 1 조작 모드에 따라 그리고 제 2 조작 모드에 따라 조작 가능하고;
    - 상기 멀티 터치가 가능한 디스플레이(01)의 제 1 터치를 검출하는 단계, 이 경우 제 1 터치의 검출은 데이터 처리 유닛에 의해 처리 가능한 제 1 터치에 관한 정보로 안내하고; 및
    - 상기 멀티 터치가 가능한 디스플레이(01)의 제 2 터치를 검출하는 단계를 포함하고, 이 경우 제 2 터치의 검출은 데이터 처리 유닛에 의해 처리 가능한 제 2 터치에 관한 정보로 안내하는 방법에 있어서,
    제 1 터치 후에 예정된 지속시간을 지나서 제 2 터치가 검출되고 제 1 터치가 여전히 검출되는 경우에, 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 각각 제 1 조작 모드에 따라 처리되고, 제 1 터치 후에 예정된 지속시간을 지나지 않아서 제 2 터치가 검출되는 경우에, 제 1 터치에 관한 정보 및 제 2 터치에 관한 정보는 제 2 조작 모드에 따라 처리되는 것을 특징으로 하는 방법.
  10. 컴퓨터 기능을 포함하는 장치로서,
    - 컨텐츠(04, 06)를 시각적으로 표시하기 위한 그리고 멀티 터치가 가능한 디스플레이(01)의 터치를 검출하기 위한 멀티 터치가 가능한 디스플레이(01); 및
    - 제 1 항 내지 제 9 항 중 어느 한 항에 따른 방법을 실시하기 위해 구성된 데이터 처리 유닛을 구비한 장치.
KR1020147018196A 2011-12-22 2012-12-11 멀티 터치가 가능한 디스플레이를 작동하기 위한 방법 및 멀티 터치가 가능한 디스플레이를 구비한 장치 KR20140116080A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102011056940.5 2011-12-22
DE102011056940A DE102011056940A1 (de) 2011-12-22 2011-12-22 Verfahren zum Betrieb einer mehrfachberührungsfähigen Anzeige und Vorrichtung mit einer mehrfachberührungsfähigen Anzeige
PCT/EP2012/075034 WO2013092288A1 (de) 2011-12-22 2012-12-11 Verfahren zum betrieb einer mehrfachberührungsfähigen anzeige und vorrichtung mit einer mehrfachberührungsfähigen anzeige

Publications (1)

Publication Number Publication Date
KR20140116080A true KR20140116080A (ko) 2014-10-01

Family

ID=47552957

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147018196A KR20140116080A (ko) 2011-12-22 2012-12-11 멀티 터치가 가능한 디스플레이를 작동하기 위한 방법 및 멀티 터치가 가능한 디스플레이를 구비한 장치

Country Status (7)

Country Link
US (1) US20150169122A1 (ko)
EP (1) EP2795451B1 (ko)
KR (1) KR20140116080A (ko)
CN (1) CN104040476B (ko)
BR (1) BR112014015490A8 (ko)
DE (1) DE102011056940A1 (ko)
WO (1) WO2013092288A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3007050A1 (de) * 2014-10-08 2016-04-13 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zur Anpassung einer Menüleiste auf einer Anwenderschnittstelle
US11010726B2 (en) * 2014-11-07 2021-05-18 Sony Corporation Information processing apparatus, control method, and storage medium
US20160239200A1 (en) * 2015-02-16 2016-08-18 Futurewei Technologies, Inc. System and Method for Multi-Touch Gestures
US9779585B2 (en) * 2015-03-31 2017-10-03 Igt Canada Solutions Ulc Multi-touch user interface for scaling reward value with random failure threshold for gaming system
US10955977B2 (en) 2015-11-03 2021-03-23 Microsoft Technology Licensing, Llc Extender object for multi-modal sensing
US10649572B2 (en) 2015-11-03 2020-05-12 Microsoft Technology Licensing, Llc Multi-modal sensing surface
US10338753B2 (en) 2015-11-03 2019-07-02 Microsoft Technology Licensing, Llc Flexible multi-layer sensing surface
US9933891B2 (en) 2015-11-03 2018-04-03 Microsoft Technology Licensing, Llc User input comprising an event and detected motion
JP6995605B2 (ja) * 2017-12-18 2022-01-14 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム及び記憶媒体

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
JP2001134382A (ja) 1999-11-04 2001-05-18 Sony Corp 図形処理装置
KR101128572B1 (ko) 2004-07-30 2012-04-23 애플 인크. 터치 감지 입력 장치용 제스처
US20070046643A1 (en) * 2004-08-06 2007-03-01 Hillis W Daniel State-Based Approach to Gesture Identification
KR102402377B1 (ko) 2005-03-04 2022-05-25 애플 인크. 다기능 휴대용 장치
US8004498B1 (en) 2007-10-22 2011-08-23 Adobe Systems Incorporated Systems and methods for multipoint temporary anchoring
US20090172606A1 (en) 2007-12-31 2009-07-02 Motorola, Inc. Method and apparatus for two-handed computer user interface with gesture recognition
US8446373B2 (en) 2008-02-08 2013-05-21 Synaptics Incorporated Method and apparatus for extended adjustment based on relative positioning of multiple objects contemporaneously in a sensing region
US20110012848A1 (en) * 2008-04-03 2011-01-20 Dong Li Methods and apparatus for operating a multi-object touch handheld device with touch sensitive display
KR101586627B1 (ko) * 2008-10-06 2016-01-19 삼성전자주식회사 멀티 터치를 이용한 리스트 관리 방법 및 장치
US20110193812A1 (en) * 2008-10-30 2011-08-11 Kaoru Uchida Portable terminal device, data manipulation processing method and data manipulation processing program
US8462134B2 (en) 2009-06-29 2013-06-11 Autodesk, Inc. Multi-finger mouse emulation
US9152317B2 (en) 2009-08-14 2015-10-06 Microsoft Technology Licensing, Llc Manipulation of graphical elements via gestures
US8773366B2 (en) * 2009-11-16 2014-07-08 3M Innovative Properties Company Touch sensitive device using threshold voltage signal
US20110216095A1 (en) * 2010-03-04 2011-09-08 Tobias Rydenhag Methods, Devices, and Computer Program Products Providing Multi-Touch Drag and Drop Operations for Touch-Sensitive User Interfaces
US20110227947A1 (en) 2010-03-16 2011-09-22 Microsoft Corporation Multi-Touch User Interface Interaction
TWI400645B (zh) * 2010-04-01 2013-07-01 Mstar Semiconductor Inc 觸碰判斷方法及相關之觸控手勢判斷方法

Also Published As

Publication number Publication date
US20150169122A1 (en) 2015-06-18
CN104040476A (zh) 2014-09-10
CN104040476B (zh) 2017-05-31
EP2795451B1 (de) 2015-06-03
WO2013092288A1 (de) 2013-06-27
EP2795451A1 (de) 2014-10-29
BR112014015490A8 (pt) 2017-07-04
BR112014015490A2 (pt) 2017-06-13
DE102011056940A1 (de) 2013-06-27

Similar Documents

Publication Publication Date Title
KR20140116080A (ko) 멀티 터치가 가능한 디스플레이를 작동하기 위한 방법 및 멀티 터치가 가능한 디스플레이를 구비한 장치
US9223471B2 (en) Touch screen control
JP6073782B2 (ja) 表示装置、表示制御方法及び表示制御プログラム、並びに、入力装置、入力支援方法及びプログラム
EP2469399B1 (en) Layer-based user interface
EP2575006B1 (en) Touch and non touch based interaction of a user with a device
EP2657811B1 (en) Touch input processing device, information processing device, and touch input control method
US9280265B2 (en) Input control device, input control method, and input control program for controlling display target upon receiving input on display screen of display device
EP2708996A1 (en) Display device, user interface method, and program
JP5780438B2 (ja) 電子機器、位置指定方法及びプログラム
US20130100051A1 (en) Input control device, input control method, and input control program for controlling display target upon receiving input on display screen of display device
WO2008138046A1 (en) Double touch inputs
JP2010517197A (ja) マルチポイント感知装置でのジェスチャー
KR101636665B1 (ko) 프로그래머블 표시기 및 그 화면 조작 처리 프로그램
JP2007280019A (ja) 入力装置およびこの入力装置を使用したコンピュータシステム
EP2575007A1 (en) Scaling of gesture based input
WO2012160829A1 (ja) タッチスクリーン装置、タッチ操作入力方法及びプログラム
JP5374564B2 (ja) 描画装置、描画制御方法、及び描画制御プログラム
JP2008065504A (ja) タッチパネル制御装置およびタッチパネル制御方法
KR20120023405A (ko) 사용자 인터페이스 제공 방법 및 장치
US20140282279A1 (en) Input interaction on a touch sensor combining touch and hover actions
US20130100050A1 (en) Input control device, input control method, and input control program for controlling display target upon receiving input on display screen of display device
CN202133989U (zh) 终端设备及其图标位置互换装置
KR101154137B1 (ko) 터치 패드 상에서 한손 제스처를 이용한 사용자 인터페이스
WO2013061326A1 (en) Method for recognizing input gestures.
KR101442438B1 (ko) 듀얼 터치 경험 필드를 달성하기 위한 싱글 터치 프로세스

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid