KR101495967B1 - 다중의 터치 스크린들로부터의 제스처 입력을 하나의 제스처 입력으로 결합하는 방법, 시스템, 및 컴퓨터 프로그램 제품 - Google Patents

다중의 터치 스크린들로부터의 제스처 입력을 하나의 제스처 입력으로 결합하는 방법, 시스템, 및 컴퓨터 프로그램 제품 Download PDF

Info

Publication number
KR101495967B1
KR101495967B1 KR1020127010590A KR20127010590A KR101495967B1 KR 101495967 B1 KR101495967 B1 KR 101495967B1 KR 1020127010590 A KR1020127010590 A KR 1020127010590A KR 20127010590 A KR20127010590 A KR 20127010590A KR 101495967 B1 KR101495967 B1 KR 101495967B1
Authority
KR
South Korea
Prior art keywords
touch screen
screen gesture
display surface
gesture
command
Prior art date
Application number
KR1020127010590A
Other languages
English (en)
Other versions
KR20120080210A (ko
Inventor
마크 에스 캐스키
스텐 요르겐 루드비히 달
토마스 이 2세 킬패트릭
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20120080210A publication Critical patent/KR20120080210A/ko
Application granted granted Critical
Publication of KR101495967B1 publication Critical patent/KR101495967B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1641Details related to the display arrangement, including those related to the mounting of the display in the housing the display being formed by a plurality of foldable display components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

터치 스크린 디바이스에 의한 사용을 위한 방법은 전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하는 단계, 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하는 단계, 및 제 1 터치 스크린 제스처 및 제 2 터치 스크린 제스처가 제 1 및 제 2 디스플레이면들 상의 디스플레이에 영향을 주는 단일 커맨드를 나타냄을 식별하는 단계를 포함한다.

Description

다중의 터치 스크린들로부터의 제스처 입력을 하나의 제스처 입력으로 결합하는 방법, 시스템, 및 컴퓨터 프로그램 제품{METHOD, SYSTEM, AND COMPUTER PROGRAM PRODUCT COMBINING GESTURAL INPUT FROM MULTIPLE TOUCH SCREENS INTO ONE GESTURAL INPUT}
관련출원에 대한 상호참조
본 출원은, "MULTI-PANEL ELECTRONIC DEVICE" 의 명칭으로 2009년 10월 15일자로 출원되고 그 개시가 본 명세서에 참조로 명백히 전부 통합되는 미국 가출원 제61/252,075호의 이익을 주장한다.
본 개시는 일반적으로 다중 터치 스크린 전자 디바이스에 관한 것으로서, 더 상세하게는, 다중의 터치 스크린들로부터의 터치 스크린 입력들을 인식하는 시스템들, 방법들, 및 컴퓨터 프로그램 제품들에 관한 것이다.
기술에서의 진보는 더 소형이고 더 강력한 컴퓨팅 디바이스들을 창출했다. 예를 들어, 소형이고 경량이며 사용자들에 의해 용이하게 휴대되는 휴대용 무선 전화기들, 개인휴대 정보단말기(PDA)들, 및 페이징 디바이스들과 같은 무선 컴퓨팅 디바이스들을 포함한 다양한 휴대용 개인 컴퓨팅 디바이스들이 현존한다. 더 상세하게, 셀룰러 전화기들 및 인터넷 프로토콜 (IP) 전화기들과 같은 휴대용 무선 전화기들은 무선 네트워크들을 통해 음성 및 데이터 패킷들을 통신할 수 있다. 또한, 다수의 그러한 휴대용 무선 전화기들은 그 안에 통합된 다른 타입들의 디바이스들을 포함한다. 예를 들어, 휴대용 무선 전화기는 또한 디지털 스틸 카메라, 디지털 비디오 카메라, 디지털 레코더, 및 오디오 파일 플레이어를 포함할 수 있다. 또한, 그러한 무선 전화기들은, 인터넷에 액세스하는데 이용될 수 있는 웹 브라우저 애플리케이션과 같은 소프트웨어 애플리케이션들을 포함한 실행가능 명령들을 프로세싱할 수 있다. 이와 같이, 이들 휴대용 무선 전화기들은 현저한 컴퓨팅 능력들을 포함할 수 있다.
그러한 휴대용 디바이스들이 소프트웨어 애플리케이션들을 지원할 수도 있지만, 그러한 휴대용 디바이스들의 유용성은 그 디바이스의 디스플레이 스크린의 사이즈에 의해 제한된다. 일반적으로, 더 소형의 디스플레이 스크린들은 디바이스들로 하여금 더 용이한 휴대성 및 편리성을 위해 더 소형의 폼 팩터들을 갖게 할 수 있다. 하지만, 더 소형의 디스플레이 스크린들은, 사용자에게 디스플레이될 수 있는 컨텐츠의 양을 제한하고, 따라서, 휴대용 디바이스와의 사용자의 상호작용의 풍요로움을 감소시킬 수도 있다.
일 실시형태에 따르면, 다중의 터치 스크린들을 포함하는 전자 디바이스에 의한 사용을 위한 방법이 개시된다. 그 방법은 전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하는 단계, 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하는 단계, 및 제 1 터치 스크린 제스처 및 제 2 터치 스크린 제스처가 제 1 및 제 2 디스플레이면들 상의 디스플레이에 영향을 주는 단일 커맨드를 나타냄을 식별하는 단계를 포함한다.
다른 실시형태에 따르면, 장치가 개시된다. 그 장치는 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하도록 구성된 제 1 터치 감지형 입력 메커니즘을 포함하는 제 1 디스플레이면, 및 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하도록 구성된 제 2 터치 감지형 입력 메커니즘을 포함하는 제 2 디스플레이면을 포함한다. 그 장치는 또한, 제 1 디스플레이면 및 제 2 디스플레이면과 통신하는 디바이스 제어기를 포함한다. 디바이스 제어기는 제 1 터치 스크린 제스처 및 제 2 터치 스크린 제스처를, 제 1 및 제 2 디스플레이면들에서의 디스플레이에 영향을 주는 단일 커맨드로 결합한다.
일 실시형태에 따르면, 컴퓨터 프로그램 로직을 명백히 저장하는 컴퓨터 판독가능 매체를 갖는 컴퓨터 프로그램 제품이 개시된다. 그 컴퓨터 프로그램 제품은 전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 인식하기 위한 코드, 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 인식하기 위한 코드, 및 제 1 터치 스크린 제스처 및 제 2 터치 스크린 제스처가 제 1 및 제 2 디스플레이면들 상에 디스플레이된 적어도 하나의 비주얼 아이템에 영향을 주는 단일 커맨드를 나타냄을 식별하기 위한 코드를 포함한다.
또다른 실시형태에 따르면, 전자 디바이스가 개시된다. 그 전자 디바이스는 전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하는 제 1 입력 수단, 및 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하는 제 2 입력 수단을 포함한다. 그 전자 디바이스는 또한, 제 1 입력 수단 및 제 2 입력 수단과 통신하여, 제 1 터치 스크린 제스처 및 제 2 터치 스크린 제스처를, 제 1 및 제 2 디스플레이면들 상의 적어도 하나의 디스플레이된 아이템에 영향을 주는 단일 커맨드로 결합하는 수단을 포함한다.
상술한 바는 다음의 상세한 설명이 더 잘 이해될 수도 있기 위해 본 개시의 특징들 및 기술적 이점들을 다소 광범위하게 나타냈다. 본 개시의 청구항들의 청구물을 형성하는 부가적인 특징들 및 이점들이 이하 설명될 것이다. 개시된 개념 및 특정 실시형태들은 본 개시의 동일한 목적들을 실행하기 위해 다른 구조들을 변경하거나 설계하는 기반으로서 용이하게 활용될 수도 있음이 당업자에 의해 이해될 것이다. 또한, 그러한 균등의 구성들은 첨부된 청구항들에 기재된 바와 같은 본 개시의 기술로부터 일탈하지 않음이 당업자에 의해 인식될 것이다. 추가의 목적들 및 이점들과 함께, 그 구성 및 동작 방법 양자에 대해 본 개시의 특성이라고 믿어지는 신규한 특징들이 첨부 도면들과 관련하여 고려될 경우에 다음의 설명으로부터 더 잘 이해될 것이다. 하지만, 도면들 각각은 오직 예시 및 설명의 목적으로만 제공될 뿐 본 개시의 한계의 한정으로서 의도되지 않음이 명확히 이해되어야 한다.
본 개시의 더 완전한 이해를 위해, 이제, 첨부 도면들과 결합하여 취해진 다음의 설명이 참조된다.
도 1 은 전자 디바이스의 제 1 실시형태의 도이다.
도 2 는 도 1 의 예시적인 전자 디바이스를 완전 펼침식 구성으로 도시한 것이다.
도 3 은 도 1 의 예시적인 전자 디바이스에 포함된 프로세싱 블록들의 블록 다이어그램이다.
도 4 는 일 실시형태에 따라 적응된 도 3 의 결합된 제스처 인식 엔진의 예시적인 상태 다이어그램이다.
도 5 는 일 실시형태에 따라, 전자 디바이스의 다중의 디스플레이면들에서 다중의 터치 스크린 제스처들을, 단일 커맨드를 나타내는 것으로서 인식하는 예시적인 프로세스의 도이다.
도 6 은 도 2 의 디바이스의 다중의 스크린들 상에 제스처들을 입력하는 휴먼 사용자의 손의 예시적인 도이다.
도 1 을 참조하면, 전자 디바이스의 제 1 예시된 실시형태가 도시되어 있고 일반적으로 도면부호 100 으로 지정되어 있다. 전자 디바이스 (101) 는 제 1 패널 (102), 제 2 패널 (104), 및 제 3 패널 (106) 을 포함한다. 제 1 패널 (102) 은 제 1 접힘 위치 (110) 에서 제 1 에지를 따라 제 2 패널 (104) 에 커플링된다. 제 2 패널 (104) 은 제 2 접힘 위치 (112) 에서 제 2 패널 (104) 의 제 2 에지를 따라 제 3 패널 (106) 에 커플링된다. 패널들 (102, 104, 및 106) 각각은 액정 디스플레이 (LCD) 스크린과 같은, 비주얼 디스플레이를 제공하도록 구성된 디스플레이면을 포함한다. 전자 디바이스 (101) 는 이동 디바이스 (예를 들어, 스마트 폰 또는 포지션 위치결정 디바이스), 데스크탑 컴퓨터, 노트북 컴퓨터, 미디어 플레이어 등과 같은 임의의 종류의 터치 스크린 디바이스일 수 있다. 전자 디바이스 (101) 는, 패널들 (102, 104, 및 106) 중 하나 이상을 스팬하는 다양한 터치 제스처들을 사용자가 입력할 경우, 사용자 인터페이스를 자동으로 조정하거나 이미지들을 디스플레이하도록 구성된다.
도 1 에 도시된 바와 같이, 제 1 패널 (102) 및 제 2 패널 (104) 은, 다양한 디바이스 구성들을 가능케 하도록 제 1 접힘 위치 (110) 에서 회전가능하게 커플링된다. 예를 들어, 제 1 패널 (102) 및 제 2 패널 (104) 은, 디바이스면들이 실질적으로 공면이어서 실질적으로 평면을 형성하도록 위치될 수도 있다. 다른 예로서, 제 1 패널 (102) 및 제 2 패널 (104) 은, 제 1 패널 (102) 의 배면이 제 2 패널 (104) 의 배면에 접촉할 때까지 제 1 접힘 위치 (110) 주위에서 서로에 대해 회전될 수도 있다. 유사하게, 제 2 패널 (104) 은 제 2 접힘 위치 (112) 를 따라 제 3 패널 (106) 에 회전가능하게 커플링되어, 제 2 패널 (104) 의 디스플레이면이 제 3 패널 (106) 의 디스플레이면에 접촉하는 완전 접힘식 폐쇄 구성 및 제 2 패널 (104) 과 제 3 패널 (106) 이 실질적으로 공면인 완전 펼침식 구성을 포함한 다양한 구성들을 가능케 한다.
특정 실시형태에 있어서, 제 1 패널 (102), 제 2 패널 (104), 및 제 3 패널 (106) 은 하나 이상의 물리적 접힘 상태들로 수동으로 구성될 수도 있다. 전자 디바이스 (101) 가 다중의 접힘가능 구성들에 위치될 수 있게 함으로써, 전자 디바이스 (101) 의 사용자는 용이한 기동성 및 기능성을 위해 소형 폼 팩터를 갖도록 선택할 수도 있거나, 또는 풍부한 컨텐츠를 디스플레이하기 위해 그리고 확장된 사용자 인터페이스들을 통해 하나 이상의 소프트웨어 애플리케이션들과의 더 현저한 상호작용을 가능케 하기 위해 펼쳐진 더 대형의 폼 팩터를 선택할 수도 있다.
완전히 펼쳐진 경우, 전자 디바이스 (101) 는 와이드 스크린 텔레비전과 유사한 파노라마 뷰를 제공할 수 있다. 폐쇄 위치로 완전히 접힌 경우, 전자 디바이스 (101) 는 소형의 폼 팩터를 제공하고 또한 셀 폰과 유사한 단축 뷰를 제공할 수 있다. 일반적으로, 다중의 구성가능 디스플레이들 (102, 104, 및 106) 은, 전자 디바이스 (101) 가 접히거나 구성되는 방법에 의존하여, 전자 디바이스 (101) 로 하여금 다중 타입들의 디바이스들로서 이용될 수 있게 할 수도 있다.
도 2 는 도 1 의 전자 디바이스 (101) 를 완전 펼침식 구성 (200) 으로 도시한 것이다. 제 1 패널 (102) 및 제 2 패널 (104) 은 실질적으로 공면이고, 제 2 패널 (104) 은 제 3 패널 (106) 과 실질적으로 공면이다. 패널들 (102, 104, 및 106) 은, 제 1 패널 (102), 제 2 패널 (104), 및 제 3 패널 (106) 의 디스플레이면들이 펼침식 3패널 디스플레이 스크린을 효과적으로 형성하도록 제 1 접힘 위치 (110) 및 제 2 접힘 위치 (112) 에 접촉될 수도 있다. 도시된 바와 같이, 완전 펼침식 구성 (200) 에 있어서, 디스플레이면들 각각은 더 큰 이미지의 일부를 디스플레이하고, 각각의 개별 디스플레이면은 더 큰 이미지의 일부를 세로 모드 (portrait mode) 로 디스플레이하고, 더 큰 이미지는 유효 3패널 스크린에 걸쳐 가로 모드 (landscape mode) 로 펼친다. 대안적으로, 본 명세서에 도시되지는 않았지만, 패널들 (102, 104, 106) 각각은 상이한 이미지 또는 다중의 상이한 이미지들을 도시할 수도 있으며, 디스플레이된 컨텐츠는 비디오, 스틸 이미지들, 전자 문서들 등일 수도 있다.
다음 도면들에 도시된 바와 같이, 패널들 (102, 104, 106) 각각은 각각의 제어기 및 구동기와 연관된다. 패널들 (102, 104, 106) 은, 사용자로부터의 입력을 하나 이상의 터치 제스처들의 형태로 수신하는 터치 스크린들을 포함한다. 예를 들어, 제스처들은, 터치 스크린에 의해 감지될 수 있고 디스플레이 출력을 제어하여 사용자 선택물을 입력하는 것 등을 행하는데 사용될 수 있는 드래그들, 핀치들, 포인트들 등을 포함한다. 다양한 실시형태들은 다중의 패널들로부터 다중의 별개의 제스처들을 수신하고 2 이상의 패널로부터의 제스처들의 일부를 단일 제스처로 결합한다. 예를 들어, 하나의 손가락이 패널 (102) 상에 있고 다른 손가락이 패널 (104) 상에 있는 핀치 제스처는 2개의 별개의 드래그들보다는 단일의 핀치로서 해석된다. 다른 예들이 이하 더 설명된다.
본 명세서에서의 예들은 3개 패널들을 갖는 디바이스를 나타내지만 실시형태들의 범위는 그에 제한되지 않음을 유의해야 한다. 예를 들어, 실시형태들은, 본 명세서에 기술된 개념들이 매우 다양한 다중 터치 스크린 디바이스들에 적용가능한 2개 이상의 패널들을 갖는 디바이스들로의 사용을 위해 적응될 수 있다.
도 3 은 도 1 의 예시적인 전자 디바이스 (101) 에 포함된 프로세싱 블록들의 블록 다이어그램이다. 디바이스 (101) 는 3개의 터치 스크린들 (301-303) 을 포함한다. 터치 스크린들 (301-303) 각각은 각각의 터치 스크린 제어기 (304-306) 와 연관되고, 터치 스크린 제어기들 (304-306) 은 데이터/제어 버스 (307) 및 인터럽트 버스 (308) 를 통해 디바이스 제어기 (310) 와 통신한다. 다양한 실시형태들은, 일 컴포넌트로부터 다른 컴포넌트로 제어 및/또는 데이터를 전송하도록 공지되거나 추후 개발될 수도 있는 I2C (Inter-Integrated Circuit) 버스 또는 다른 커넥션들과 같은 하나 이상의 데이터 커넥션들을 이용할 수도 있다. 데이터/제어 신호들은 데이터/제어 하드웨어 인터페이스 블록 (315) 을 이용하여 인터페이싱된다.
터치 스크린 (301) 은, 터치, 슬라이딩 또는 드래깅 모션, 릴리즈, 다른 제스처들, 또는 이들의 임의의 조합과 같은 하나 이상의 제스처들에 응답하는 제 1 출력을 생성하도록 구성되는 터치 감지형 입력 메커니즘을 포함하거나 그에 대응할 수도 있다. 예를 들어, 터치 스크린 (301) 은 저항식 감지, 표면 탄성파, 용량식 감지, 스트레인 게이지, 광학식 감지, 분산식 신호 감지 등과 같은 하나 이상의 감지 메커니즘을 이용할 수도 있다. 터치 스크린들 (302 및 303) 은 터치 스크린 (301) 과 실질적으로 유사한 방식으로 출력을 생성하도록 동작한다.
터치 스크린 제어기들 (304-306) 은 대응하는 터치 감지형 입력 메커니즘들로부터의 터치 이벤트와 연관된 전기 입력을 수신하고 그 전기 입력을 좌표로 전환한다. 예를 들어, 터치 스크린 제어기 (304) 는, 터치 스크린 (301) 상의 터치 제스처에 대응하는 포지션 및 위치 정보를 포함하는 출력을 생성하도록 구성될 수도 있다. 유사하게, 터치 스크린 제어기들 (305, 306) 은 각각의 터치 스크린들 (302, 303) 상의 제스처들에 대해 출력을 제공한다. 터치 스크린 제어기들 (304-306) 중 하나 이상은, 단일 터치 스크린에서의 다중의 동시적인 제스처들에 대응하는 포지션 및 위치 정보를 생성하도록 동작가능한 다중 터치 제어 회로로서 동작하도록 구성될 수도 있다. 터치 스크린 제어기들 (304-306) 은 손가락 위치/포지션 데이터를 커넥션 (307) 을 통해 디바이스 제어기 (310) 에 개별적으로 리포트한다.
일 예에 있어서, 터치 스크린 제어기들 (304-306) 은 터치에 응답하여 인터럽트 버스 (308) 를 통해 디바이스 제어기 (310) 를 인터럽트한다. 인터럽트의 수신 시, 디바이스 제어기 (310) 는 터치 스크린 제어기들 (304-306) 을 폴링하여 손가락 위치/포지션 데이터를 취출한다. 손가락 위치/포지션 데이터는 구동기들 (312-314) 에 의해 해석되고, 이 구동기들 (312-314) 은 수신된 데이터를 일 타입의 터치 (예를 들어, 포인트, 스와이프 (swipe) 등) 로서 각각 해석한다. 구동기들 (312-314) 은 하드웨어, 소프트웨어, 또는 이들의 조합일 수도 있으며, 일 실시형태에 있어서, 저 레벨 하드웨어 구동기들을 포함하고, 각각의 구동기들 (312-314) 은 개별 터치 스크린 제어기 (304-306) 에 전용된다. 구동기들 (312-314) 로부터의 정보는 결합된 제스처 인식 엔진 (311) 에 전달된다. 결합된 제스처 인식 엔진 (311) 은 또한 하드웨어, 소프트웨어, 또는 이들의 조합일 수도 있으며, 일 실시형태에 있어서, 더 고레벨의 소프트웨어 애플리케이션이다. 결합된 제스처 인식 엔진 (311) 은 정보를, 일 스크린 상의 단일 제스처 또는 2 이상의 스크린들 상의 결합된 제스처로서 인식한다. 그 후, 결합된 제스처 인식 엔진 (311) 은 전자 디바이스 (101) 상에서 구동하는 애플리케이션 (320) 으로 제스처를 전달하여 줌, 플립, 회전 등과 같은 요구된 동작을 수행한다. 일 예에 있어서, 애플리케이션 (320) 은 디바이스 제어기 (310) 에 의해 실행된 프로그램이지만, 실시형태들의 범위는 그에 제한되지 않는다. 따라서, 사용자 터치 입력은, 일부 예에 있어서 사용자 입력을 결합된 다중 스크린 제스처로서 적용하는 것을 포함하여 전자 디바이스 (101) 를 제어하도록 해석된 후 이용된다.
디바이스 제어기 (310) 는, 터치 스크린들 (301-303) 상에 디스플레이될 컨텐츠에 대응하는 디스플레이 데이터를 생성하도록 구성된 전용 회로 엘리먼트들 및/또는 하나 이상의 프로세서 코어들과 같은 하나 이상의 프로세싱 컴포넌트들을 포함할 수도 있다. 디바이스 제어기 (310) 는 결합된 제스처 인식 엔진 (311) 으로부터 정보를 수신하고 터치 스크린들 (301-303) 중 하나 이상의 터치 스크린 상에 디스플레이된 비주얼 데이터를 변경하도록 구성될 수도 있다. 예를 들어, 반시계방향 회전을 나타내는 사용자 커맨드에 응답하여, 디바이스 제어기 (310) 는 터치 스크린들 (301-303) 상에 디스플레이된 컨텐츠의 회전에 대응하는 계산을 수행하고, 업데이트된 디스플레이 데이터를 애플리케이션 (320) 에 전송하여 터치 스크린들 (301-303) 중 하나 이상으로 하여금 회전된 컨텐츠를 디스플레이하게 할 수도 있다.
동작 동안, 결합된 제스처 인식 엔진 (311) 은 2 이상의 별개의 터치 스크린들로부터의 제스처 입력을, 다중 스크린 디바이스에 대한 단일 커맨드를 나타내는 하나의 제스처 입력으로 결합한다. 다중의 스크린들에서 동시에 또는 실질적으로 동시에 사용자에 의해 제공되는 제스처 입력들을 해석하는 것은 직관적인 사용자 인터페이스 및 개선된 사용자 경험을 가능케 할 수도 있다. 예를 들어, "줌인 (zoom in)" 커맨드 또는 "줌 아웃" 커맨드는 인접 패널들 상에서 검출된 슬라이딩 제스처들로부터 식별될 수도 있으며, 일 패널에서의 각 슬라이딩 제스처는 다른 패널로부터 실질적으로 이격되는 (예를 들어, 줌인) 또는 다른 패널을 향하는 (예를 들어, 줌 아웃) 방향에서의 움직임을 나타낸다. 특정 실시형태에 있어서, 결합된 제스처 인식 엔진 (311) 은 물리적 전환, 회전, 스트레칭, 또는 이들의 조합을 에뮬레이션하기 위한 단일 커맨드, 또는 도 2 에 도시된 연속면과 같은 다중의 디스플레이면들을 스팬하는 시뮬레이션된 연속 디스플레이면을 인식하도록 구성된다.
일 실시형태에 있어서, 전자 디바이스 (101) 는 제스처들의 미리 정의된 라이브러리를 포함한다. 즉, 이 예시적인 실시형태에 있어서, 결합된 제스처 인식 엔진 (311) 은 유한 개수의 가능한 제스처들을 인식하며, 이들 중 일부는 단일 제스처들이고, 이들 중 일부는 터치 스크린들 (301-303) 중 하나 이상의 터치 스크린 상의 결합된 제스처들이다. 라이브러리는 메모리 (미도시) 에 저장될 수도 있어서 디바이스 제어기 (310) 에 의해 액세스될 수 있다.
일 예에 있어서, 결합된 제스처 인식 엔진 (311) 은 터치 스크린 (301) 상의 손가락 드래그 및 터치 스크린 (302) 상의 다른 손가락 드래그를 인식한다. 2개의 손가락 드래그들은, 2개의 손가락들이 특정 윈도우, 예를 들어, 수 밀리초 내에서 디스플레이면의 상부에서 서로 근접하고 있음을 나타낸다. 그러한 정보 (즉, 시간 윈도우 내에서의 2개의 상호 근접하고 있는 손가락들) 및 임의의 다른 관련 문맥 데이터를 이용하여, 결합된 제스처 인식 엔진 (311) 은, 핀치 제스처 상에 결국 상주하는 가능한 매칭을 위한 라이브러리를 탐색한다. 따라서, 일부 실시형태들에 있어서, 제스처들을 결합하는 것은 가능한 대응하는 결합된 제스처에 대한 라이브러리를 탐색하는 것을 포함한다. 하지만, 예를 들어 하나 이상의 휴리스틱 기술들을 포함하여 제스처들을 결합하기 위해 지금 공지되어 있거나 추후 개발되는 임의의 기술을 다양한 실시형태들이 이용할 수도 있기 때문에, 실시형태들의 범위는 그에 제한되지 않는다.
더욱이, 특정 애플리케이션은 전체 개수의 가능한 제스처들의 서브세트만을 지원할 수도 있다. 예를 들어, 브라우저는 지원되는 특정 수의 제스처들을 가질 수도 있고, 사진 뷰잉 애플리케이션은 지원되는 상이한 세트의 제스처들을 가질 수도 있다. 즉, 제스처 인식은 애플리케이션별로 상이하게 해석될 수도 있다.
도 4 는 일 실시형태에 따라 적응된 도 3 의 결합된 제스처 인식 엔진 (311) 의 예시적인 상태 다이어그램 (400) 이다. 상태 다이어그램 (400) 은 일 실시형태의 동작을 나타내며, 다른 실시형태들이 다소 상이한 상태 다이어그램들을 가질 수도 있음을 이해한다. 상태 (401) 는 유휴 상태이다. 입력 제스처가 수신될 경우, 상태 (402) 에서, 디바이스는 제스처 페어링 모드인지를 체크한다. 이 예에 있어서, 제스처 페어링 모드는, 적어도 하나의 제스처가 이미 수신되었고 그 제스처가 하나 이상의 다른 제스처들과 결합되어야 하는지를 알기 위해 디바이스가 체크하고 있는 모드이다. 디바이스가 제스처 페어링 모드에 있지 않다면, 상태 (403) 에서, 제스처를 저장하고 타임아웃을 설정한 후, 유휴 상태 (401) 로 복귀한다. 타임아웃이 만료한 후, 상태 (407) 에서, 디바이스는 단일 제스처를 하나의 스크린 상에 포스팅한다.
디바이스가 제스처 페어링 모드에 있다면, 상태 (404) 에서, 디바이스는 수신된 제스처를 또다른 미리 저장된 제스처와 결합한다. 상태 (405) 에서, 디바이스는 결합된 제스처가 유효한 제스처에 대응하는지를 체크한다. 예를 들어, 일 실시형태에 있어서, 디바이스는 결합된 제스처 정보 및 임의의 다른 문맥 정보를 관측하고, 제스처 라이브러리 내 하나 이상의 엔트리들과 비교한다. 결합된 제스처 정보가 유효한 제스처에 대응하지 않는다면, 디바이스는 유휴 상태 (401) 로 복귀하여 무효한 결합된 제스처는 폐기된다.
한편, 결합된 제스처 정보가 유효한 결합된 제스처에 대응한다면, 상태 (406) 에서, 그 결합된 제스처는 하나 이상의 스크린들 상에 포스팅된다. 그 후, 디바이스는 유휴 상태 (401) 로 복귀한다.
도 4 에 있어서, 다중의 스크린들에 걸쳐 단일 제스처의 연속성에 대해 디바이스의 동작이 주목된다. 그러한 제스처의 일 예는 적어도 2개의 스크린들의 부분들을 횡단하는 손가락 스와이프이다. 그러한 제스처는 다중의 스크린들 상의 단일 제스처, 또는 휴먼 사용자에게 부가되고 휴먼 사용자에게 연속인 것으로 보이는 각각 상이한 스크린 상에 있는 다중의 제스처들 중 어느 하나로서 처리될 수 있다.
일 실시형태에 있어서, 도 4 에 도시된 바와 같이, 그러한 제스처는 부가된 다중의 제스처들로서 처리된다. 따라서, 다중의 스크린들에 걸친 드래그의 경우, 소정 스크린 상의 드래그는 그 스크린 상의 단일 제스처이고, 다음 스크린 상의 드래그는 제 1 의 단일 제스처의 연속인 또다른 단일 제스처이다. 양자는 상태 (407) 에서 포스팅된다. 제스처들이 상태들 (406 및 407) 에서 포스팅될 경우, 제스처를 나타내는 정보는 디스플레이를 제어하는 (도 3 의 애플리케이션 (320) 과 같은) 애플리케이션으로 전달된다.
도 5 는 일 실시형태에 따라, 전자 디바이스의 다중의 디스플레이면들에서 다중의 터치 스크린 제스처들을, 단일 커맨드를 나타내는 것으로서 인식하는 예시적인 프로세스 (500) 의 도이다. 특정 실시형태에 있어서, 프로세스 (500) 는 도 1 의 전자 디바이스 (101) 에 의해 수행된다.
502 에서, 프로세스 (500) 는 전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하는 것을 포함한다. 예를 들어, 도 3 을 참조하면, 제 1 제스처는 터치 스크린 (301) 에서 검출될 수도 있다. 어떤 실시형태들에 있어서, 제스처는 메모리에 저장되어, 필요하다면, 동시의 또는 추후의 제스처와 비교될 수 있다.
504 에서, 프로세스 (500) 는 또한, 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하는 것을 포함한다. 도 3 의 예에 있어서, 제 2 제스처는 터치 스크린 (302) (및/또는 터치 스크린 (303), 하지만, 예시의 용이를 위해, 이 예는 터치 스크린들 (301, 302) 에 포커싱됨) 에서 검출될 수도 있다. 특정 실시형태에 있어서, 제 2 터치 스크린 제스처는 제 1 터치 스크린 제스처와 실질적으로 동시에 검출될 수도 있다. 다른 실시형태에 있어서, 제 2 제스처는 제 1 터치 스크린 제스처 직후에 검출될 수도 있다. 어떤 경우라도, 제 2 제스처는 또한 메모리에 저장될 수도 있다. 제 1 및 제 2 제스처들은 임의의 다양한 기술들을 이용하여 포지션 데이터로부터 인식될 수도 있다. 블록들 (502, 504) 은 로우 (row) 포지션 데이터를 검출/저장하는 것, 및/또는 제스처들 자체를 나타내는 프로세싱된 데이터를 저장하는 것을 포함할 수도 있다.
도 6 은 도 2 의 디바이스의 2개의 상이한 스크린들 상에서 제스처들을 수행하는 손 (601) 을 도시한 것이다. 도 6 의 예에 있어서, 손 (601) 은 디스플레이를 조작하기 위해 2개의 상이한 스크린들에 걸쳐 핀치를 수행하고 있다. 다양한 실시형태들은 상기에 및 하기에 설명되는 바와 같이 핀치 제스처들에 제한되지 않는다.
506 에서, 프로세스 (500) 는, 제 1 터치 스크린 제스처 및 제 2 터치 스크린 제스처가 단일 커맨드를 나타내거나 또는 표시한다고 결정하는 것을 더 포함한다. 도 3 의 예를 다시 참조하면, 결합된 제스처 인식 엔진 (311) 은 제 1 제스처 및 제 2 제스처가 단일 커맨드를 나타내거나 표시한다고 결정한다. 예를 들어, 터치 스크린별로 발생할 시에 순차적으로 근접하지만 밀접히 커플링된 2개의 단일 제스처들은 커맨드들의 라이브러리에서 또다른 커맨드로서 해석될 수도 있다. 결합된 제스처 인식 엔진 (311) 은 커맨드들의 라이브러리를 검색하고, 제스처가 다중의 터치 스크린들에 걸친 스와이프를 포함하는 결합된 제스처임을 결정한다.
라이브러리에 저장된 결합된 제스처들의 예들은 다음의 예들을 포함할 수 있지만 이에 제한되지 않는다. 제 1 예로서, 단일 드래그 플러스 단일 드래그가 3개의 가능한 후보들 중 하나일 수도 있다. 2번의 드래그들이 서로로부터 이격되는 실질적으로 반대 방향이다면, 2번의 드래그들은 함께 (예를 들어, 줌 아웃을 위한) 결합된 핀치 아웃 제스처일 가능성이 있다. 2번의 드래그들이 서로를 향하는 실질적으로 반대 방향이다면, 2번의 드래그들은 함께 (예를 들어, 줌인을 위한) 결합된 핀치-인 제스처일 가능성이 있다. 2번의 드래그들이 밀접히 커플링되고 순차적이고 동일 방향이다면, 2번의 드래그들은 함께 (예를 들어, 스크롤링을 위한) 결합된 다중 스크린 스와이프일 가능성이 있다.
다른 예들은 포인트 및 드래그를 포함한다. 그러한 조합은 피봇 포인트로서 기능하는 손가락 포인트를 사용하여 드래그의 방향으로의 회전을 나타낼 수도 있다. 핀치 플러스 포인트는 포인트에서가 아닌 핀치에서의 디스플레이된 오브젝트의 차원들에 영향을 주는 스큐를 나타낼 수도 있다. 다른 제스처들이 가능하고 실시형태들의 범위 내이다. 실제로, 지금 공지되어 있거나 추후 개발되는 임의의 검출가능 터치 스크린 제스처 조합이 다양한 실시형태들에 의해 이용될 수도 있다. 더욱이, 액세스될 수도 있는 다양한 커맨드들은 제한되지 않고 또한 복사, 붙이기, 삭제, 이동 등과 같은 상기에서 명시적으로 언급되지 않은 커맨드들을 포함할 수도 있다.
508 에서, 프로세스 (500) 는 단일 커맨드에 기초하여 제 1 디스플레이면에서의 제 1 디스플레이 및 제 2 디스플레이면에서의 제 2 디스플레이를 변경하는 것을 포함한다. 예를 들어, 도 3 을 참조하면, 디바이스 제어기 (310) 는 결합된 제스처를 애플리케이션 (320) 으로 전송하며, 이 애플리케이션 (320) 은 터치 스크린들 (301 및 302) 에서의 디스플레이를 변경 (예를 들어, 시계방향 회전, 반시계방향 회전, 줌인, 또는 줌 아웃) 한다. 특정 실시형태에 있어서, 제 1 디스플레이 및 제 2 디스플레이는 실질적으로 연속적인 비주얼 디스플레이를 디스플레이하도록 동작가능하다. 그 후, 애플리케이션 (320) 은 인식된 사용자 커맨드에 따라 스크린들 중 하나 이상에 걸쳐 비주얼 디스플레이의 하나 이상의 비주얼 엘리먼트들을 변경한다. 따라서, 결합된 제스처는 다중 패널 디바이스에 의해 인식 및 작용될 수도 있다. 물론, 제 1 및 제 2 디스플레이들 (301 및 302) 에 부가하여, 제 3 디스플레이 (303) 가 또한 커맨드에 기초하여 변경될 수 있다.
당업자는 또한, 본 명세서에 개시된 실시형태들과 관련하여 설명된 다양한 예시적인 논리 블록들, 구성들, 모듈들, 회로들, 및 알고리즘 단계들이 전자 하드웨어, 컴퓨터 소프트웨어, 또는 이들의 조합으로서 구현될 수도 있음을 이해할 것이다. 다양한 예시적인 컴포넌트들, 블록들, 구성들, 모듈들, 회로들 및 단계들은 일반적으로 그들의 기능의 관점에서 상술되었다. 그러한 기능이 하드웨어로서 구현될지 또는 소프트웨어로서 구현될지는 전체 시스템에 부과된 특정 애플리케이션 및 설계 제약에 의존한다. 당업자는 설명된 기능을 각각의 특정 애플리케이션에 대하여 다양한 방식으로 구현할 수도 있지만, 그러한 구현의 결정이 본 개시의 범위로부터의 일탈함을 야기하는 것으로서 해석되지는 않아야 한다.
본 명세서에 개시된 실시형태들과 관련하여 설명된 프로세스 또는 알고리즘의 단계들은 하드웨어에서, 프로세서에 의해 실행되는 소프트웨어 모듈에서, 또는 이들 양자의 조합에서 구현될 수도 있다. 소프트웨어 모듈은 랜덤 액세스 메모리 (RAM), 플래시 메모리, 판독전용 메모리 (ROM), 프로그래머블 판독전용 메모리 (PROM), 소거가능 프로그래머블 판독전용 메모리 (EPROM), 전기적 소거가능 프로그래머블 판독전용 메모리 (EEPROM), 레지스터들, 하드 디스크, 착탈가능 디스크, 컴팩트 디스크 판독전용 메모리 (CD-ROM) 와 같은 유형의 저장 매체, 또는 당업계에 공지된 임의의 다른 형태의 유형의 저장 매체에 상주할 수도 있다. 예시적인 저장 매체는, 프로세서가 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기입할 수 있도록 프로세서에 커플링된다. 대안적으로, 저장 매체는 프로세서에 통합될 수도 있다. 프로세서 및 저장 매체는 주문형 집적회로 (ASIC) 에 상주할 수도 있다. ASIC 는 컴퓨팅 디바이스 또는 사용자 단말기에 상주할 수도 있다. 대안적으로, 프로세서 및 저장 매체는 컴퓨팅 디바이스 또는 사용자 단말기에 별개의 컴포넌트들로서 상주할 수도 있다.
더욱이, 개시된 구현들의 상기 설명은 당업자로 하여금 본 개시를 제조 또는 이용할 수 있도록 제공된다. 이들 구현들에 대한 다양한 변형들은 당업자에게 용이하게 자명할 것이며, 본 명세서에서 정의된 일반적인 원리들은 본 개시의 사상 또는 범위로부터 일탈함없이 다른 구현들에 적용될 수도 있다. 따라서, 본 개시는 본 명세서에 나타낸 특징들에 제한되도록 의도되지 않으며, 본 명세서에 개시된 원리들 및 신규한 특징들과 부합하는 최광의 범위를 부여받도록 의도된다.
본 개시 및 그 이점들이 상세히 설명되었지만, 다양한 변경들, 치환들, 수정들이 첨부된 청구항들에 의해 정의된 바와 같은 본 개시의 기술로부터 일탈함없이 본 명세서에서 행해질 수 있음이 이해될 것이다. 더욱이, 본 출원의 범위는 본 명세서에 설명된 프로세스, 머신, 제조물, 물질의 조성, 수단, 방법들 및 단계들의 특정 실시형태들에 제한되도록 의도되지 않는다. 당업자가 본 개시로부터 용이하게 인식할 것이므로, 본 명세서에 설명된 대응하는 실시형태들과 실질적으로 동일한 기능을 수행하거나 실질적으로 동일한 결과를 달성하는 현존하는 또는 추후에 개발될 프로세스들, 머신들, 제조물, 물질의 조성, 수단, 방법들 또는 단계들은 본 개시에 따라 활용될 수도 있다. 따라서, 첨부된 청구항들은 그 범위 내에서, 그러한 프로세스들, 머신들, 제조물, 물질의 조성, 수단, 방법들 또는 단계들을 포함하도록 의도된다.

Claims (20)

  1. 복수의 터치 스크린들을 포함하는 전자 디바이스에 의한 사용을 위한 방법으로서,
    상기 전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하는 단계;
    상기 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하는 단계; 및
    단일 커맨드를 나타내는 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처의 결합을 이용하여, 복수의 단일 커맨드들 중에서 하나인 단일 커맨드를 식별하는 단계로서, 상기 제 1 디스플레이면 및 상기 제 2 디스플레이면 상의 디스플레이에 영향을 주는 상기 단일 커맨드의 동작은 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처가 모두 검출된 이후에 개시되고, 상기 복수의 단일 커맨드들 중 각각의 커맨드는 그 커맨드를 나타내는 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합을 가지며, 상기 단일 커맨드를 식별하는 단계는 상기 단일 커맨드를 나타내는 상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처의 결합을 이용함으로써, 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합들을 갖는 상기 복수의 단일 커맨드들로부터 상기 단일 커맨드를 식별하기 위한 것인, 상기 단일 커맨드를 식별하는 단계를 포함하는, 전자 디바이스에 의한 사용을 위한 방법.
  2. 제 1 항에 있어서,
    상기 단일 커맨드에 기초하여 상기 제 1 디스플레이면 및 상기 제 2 디스플레이면에서의 상기 디스플레이를 변경하는 단계를 더 포함하는, 전자 디바이스에 의한 사용을 위한 방법.
  3. 제 1 항에 있어서,
    상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처는 각각 터치, 슬라이딩 모션, 드래깅 모션, 및 릴리징 모션 중 적어도 하나인, 전자 디바이스에 의한 사용을 위한 방법.
  4. 제 1 항에 있어서,
    상기 단일 커맨드는, 회전 커맨드, 줌 커맨드, 및 스크롤 커맨드로 이루어진 리스트로부터 선택되는, 전자 디바이스에 의한 사용을 위한 방법.
  5. 제 1 항에 있어서,
    상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처는 실질적으로 동시에 검출되는, 전자 디바이스에 의한 사용을 위한 방법.
  6. 제 1 항에 있어서,
    셀 폰, 노트북 컴퓨터, 및 데스크탑 컴퓨터 중 적어도 하나에 의해 수행되는, 전자 디바이스에 의한 사용을 위한 방법.
  7. 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하도록 구성된 제 1 터치 감지형 입력 메커니즘을 포함하는 제 1 디스플레이면;
    제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하도록 구성된 제 2 터치 감지형 입력 메커니즘을 포함하는 제 2 디스플레이면; 및
    상기 제 1 디스플레이면 및 상기 제 2 디스플레이면과 통신하는 디바이스 제어기를 포함하고,
    상기 디바이스 제어기는, 단일 커맨드를 나타내는 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처의 결합을 이용하여, 복수의 단일 커맨드들 중에서 하나인 단일 커맨드를 식별하고, 상기 제 1 디스플레이면 및 상기 제 2 디스플레이면 상의 디스플레이에 영향을 주는 상기 단일 커맨드의 동작은 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처가 모두 검출된 이후에 개시되고, 상기 복수의 단일 커맨드들 중 각각의 커맨드는 그 커맨드를 나타내는 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합을 가지며, 상기 디바이스 제어기는 상기 복수의 단일 커맨드들의 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합들에 따라, 그 결합이 상기 단일 커맨드를 나타내도록 상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처를 결합하는, 장치.
  8. 제 7 항에 있어서,
    상기 제 1 디스플레이면 및 상기 제 2 디스플레이면은 각각의 터치 스크린 제어기들에 의해 제어되는 별개의 터치 스크린 패널들을 포함하고,
    상기 각각의 터치 스크린 제어기들은 상기 디바이스 제어기와 통신하는, 장치.
  9. 제 8 항에 있어서,
    상기 디바이스 제어기는, 상기 각각의 터치 스크린 제어기들로부터 터치 스크린 포지션 정보를 수신하고 상기 포지션 정보를 상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처로 전환하는 제 1 소프트웨어 구동기 및 제 2 소프트웨어 구동기를 실행하는, 장치.
  10. 제 7 항에 있어서,
    상기 디바이스 제어기로부터 상기 단일 커맨드를 수신하고, 상기 단일 커맨드에 기초하여, 상기 제 1 디스플레이면에서의 제 1 디스플레이 및 상기 제 2 디스플레이면에서의 제 2 디스플레이를 변경하는 애플리케이션을 더 포함하는, 장치.
  11. 제 7 항에 있어서,
    상기 제 1 디스플레이면의 제 1 에지 및 상기 제 2 디스플레이면의 제 2 에지에 커플링된 제 3 디스플레이면을 더 포함하는, 장치.
  12. 제 7 항에 있어서,
    상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처는 각각 터치, 슬라이딩 모션, 드래깅 모션, 및 릴리징 모션 중 하나 이상을 포함하는, 장치.
  13. 제 7 항에 있어서,
    상기 단일 커맨드는 시계방향 회전 커맨드, 반시계방향 회전 커맨드, 줌 인 커맨드, 줌아웃 커맨드, 스크롤 커맨드, 또는 이들의 임의의 조합을 포함하는, 장치.
  14. 제 7 항에 있어서,
    셀 폰, 미디어 플레이어, 및 위치측정 디바이스 중 하나 이상을 포함하는, 장치.
  15. 컴퓨터 프로그램 로직을 유형으로 (tangibly) 저장하는 컴퓨터 판독가능 저장 매체로서,
    상기 컴퓨터 판독가능 저장 매체는,
    전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 인식하기 위한 코드;
    상기 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 인식하기 위한 코드; 및
    단일 커맨드를 나타내는 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처의 결합을 이용하여, 복수의 단일 커맨드들 중에서 하나인 단일 커맨드를 식별하는 코드로서, 상기 제 1 디스플레이면 및 상기 제 2 디스플레이면 상의 디스플레이된 비주얼 아이템에 영향을 주는 상기 단일 커맨드의 동작은 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처가 모두 검출된 이후에 개시되고, 상기 단일 커맨드는 상기 복수의 단일 커맨드들 중 하나로, 상기 복수의 단일 커맨드들 중 각각의 커맨드는 그 커맨드를 나타내는 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합을 가지며, 상기 단일 커맨드를 식별하는 코드는 상기 단일 커맨드를 나타내는 상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처의 결합을 이용함으로써, 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합들을 갖는 상기 복수의 단일 커맨드들로부터 상기 단일 커맨드를 식별하기 위한 것인, 상기 단일 커맨드를 식별하는 코드를 포함하는, 컴퓨터 판독가능 저장 매체.
  16. 제 15 항에 있어서,
    상기 단일 커맨드에 기초하여, 상기 제 1 디스플레이면에서의 제 1 디스플레이 및 상기 제 2 디스플레이면에서의 제 2 디스플레이를 변경하기 위한 코드를 더 포함하는, 컴퓨터 판독가능 저장 매체.
  17. 전자 디바이스의 제 1 디스플레이면에서 제 1 터치 스크린 제스처를 검출하는 제 1 입력 수단;
    상기 전자 디바이스의 제 2 디스플레이면에서 제 2 터치 스크린 제스처를 검출하는 제 2 입력 수단; 및
    상기 제 1 입력 수단 및 상기 제 2 입력 수단과 통신하여, 단일 커맨드를 나타내는 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처의 결합을 이용하여, 복수의 단일 커맨드들 중에서 하나인 단일 커맨드를 식별하는 수단으로서, 상기 제 1 디스플레이면 및 상기 제 2 디스플레이면 상의 디스플레이된 적어도 하나의 아이템에 영향을 주는 상기 단일 커맨드의 동작은 상기 제 1 터치 스크린 제스처와 상기 제 2 터치 스크린 제스처가 모두 검출된 이후에 개시되고, 상기 복수의 단일 커맨드들 중 각각의 커맨드는 그 커맨드를 나타내는 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합을 가지며, 상기 단일 커맨드를 식별하는 수단은 상기 복수의 단일 커맨드들의 대표적인 제 1 터치 스크린 제스처와 제 2 터치 스크린 제스처의 결합들에 따라 그 결합이 상기 단일 커맨드를 나타내도록 상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처를 결합하는, 상기 단일 커맨드를 식별하는 수단을 포함하는, 전자 디바이스.
  18. 제 17 항에 있어서,
    상기 제 1 디스플레이면 및 상기 제 2 디스플레이면에서 이미지를 디스플레이하는 수단; 및
    상기 단일 커맨드에 기초하여 상기 디스플레이된 이미지를 변경하는 수단을 더 포함하는, 전자 디바이스.
  19. 제 17 항에 있어서,
    상기 제 1 디스플레이면 및 상기 제 2 디스플레이면은, 터치 스크린 포지션 정보를 생성하는 각각의 수단에 의해 제어되는 별개의 터치 스크린 패널들을 포함하고,
    상기 각각의 생성하는 수단은 상기 식별하는 수단과 통신하는, 전자 디바이스.
  20. 제 19 항에 있어서,
    상기 식별하는 수단은, 상기 각각의 생성하는 수단으로부터 상기 터치 스크린 포지션 정보를 수신하고 상기 터치 스크린 포지션 정보를 상기 제 1 터치 스크린 제스처 및 상기 제 2 터치 스크린 제스처로 전환하는 제 1 수단 및 제 2 수단을 포함하는, 전자 디바이스.
KR1020127010590A 2009-10-15 2010-10-15 다중의 터치 스크린들로부터의 제스처 입력을 하나의 제스처 입력으로 결합하는 방법, 시스템, 및 컴퓨터 프로그램 제품 KR101495967B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US25207509P 2009-10-15 2009-10-15
US61/252,075 2009-10-15
US12/781,453 US20110090155A1 (en) 2009-10-15 2010-05-17 Method, system, and computer program product combining gestural input from multiple touch screens into one gestural input
US12/781,453 2010-05-17
PCT/US2010/052946 WO2011047338A1 (en) 2009-10-15 2010-10-15 Method, system, and computer program product combining gestural input from multiple touch screens into one gestural input

Publications (2)

Publication Number Publication Date
KR20120080210A KR20120080210A (ko) 2012-07-16
KR101495967B1 true KR101495967B1 (ko) 2015-02-25

Family

ID=43438668

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127010590A KR101495967B1 (ko) 2009-10-15 2010-10-15 다중의 터치 스크린들로부터의 제스처 입력을 하나의 제스처 입력으로 결합하는 방법, 시스템, 및 컴퓨터 프로그램 제품

Country Status (7)

Country Link
US (1) US20110090155A1 (ko)
EP (1) EP2488935A1 (ko)
JP (1) JP5705863B2 (ko)
KR (1) KR101495967B1 (ko)
CN (1) CN102576290B (ko)
TW (1) TW201140421A (ko)
WO (1) WO2011047338A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017086578A1 (ko) * 2015-11-17 2017-05-26 삼성전자 주식회사 에지 스크린을 통한 터치 입력 방법 및 전자 장치
US11003328B2 (en) 2015-11-17 2021-05-11 Samsung Electronics Co., Ltd. Touch input method through edge screen, and electronic device

Families Citing this family (87)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8648825B2 (en) 2010-10-01 2014-02-11 Z124 Off-screen gesture dismissable keyboard
US7782274B2 (en) 2006-06-09 2010-08-24 Cfph, Llc Folding multimedia display device
EP2333651B1 (en) * 2009-12-11 2016-07-20 Dassault Systèmes Method and system for duplicating an object using a touch-sensitive display
JP5351006B2 (ja) * 2009-12-24 2013-11-27 京セラ株式会社 携帯端末及び表示制御プログラム
US8379098B2 (en) * 2010-04-21 2013-02-19 Apple Inc. Real time video process control using gestures
US8810543B1 (en) 2010-05-14 2014-08-19 Cypress Semiconductor Corporation All points addressable touch sensing surface
US8286102B1 (en) * 2010-05-27 2012-10-09 Adobe Systems Incorporated System and method for image processing using multi-touch gestures
US20110291964A1 (en) 2010-06-01 2011-12-01 Kno, Inc. Apparatus and Method for Gesture Control of a Dual Panel Electronic Device
KR20120015968A (ko) * 2010-08-14 2012-02-22 삼성전자주식회사 휴대 단말기의 터치 오동작 방지 방법 및 장치
JP5529700B2 (ja) * 2010-09-27 2014-06-25 株式会社ソニー・コンピュータエンタテインメント 情報処理装置、その制御方法、及びプログラム
US20120084737A1 (en) * 2010-10-01 2012-04-05 Flextronics Id, Llc Gesture controls for multi-screen hierarchical applications
TW201220152A (en) * 2010-11-11 2012-05-16 Wistron Corp Touch control device and touch control method with multi-touch function
KR101802522B1 (ko) * 2011-02-10 2017-11-29 삼성전자주식회사 복수의 터치스크린을 가지는 장치 및 복수의 터치스크린을 가지는 장치의 화면변경방법
JP5678324B2 (ja) * 2011-02-10 2015-03-04 パナソニックIpマネジメント株式会社 表示装置、コンピュータプログラム、及び表示方法
US10120561B2 (en) * 2011-05-05 2018-11-06 Lenovo (Singapore) Pte. Ltd. Maximum speed criterion for a velocity gesture
US20130057479A1 (en) * 2011-09-02 2013-03-07 Research In Motion Limited Electronic device including touch-sensitive displays and method of controlling same
EP2565761A1 (en) * 2011-09-02 2013-03-06 Research In Motion Limited Electronic device including touch-sensitive displays and method of controlling same
WO2013046987A1 (ja) * 2011-09-26 2013-04-04 日本電気株式会社 情報処理端末および情報処理方法
US10192523B2 (en) * 2011-09-30 2019-01-29 Nokia Technologies Oy Method and apparatus for providing an overview of a plurality of home screens
US20130129162A1 (en) * 2011-11-22 2013-05-23 Shian-Luen Cheng Method of Executing Software Functions Using Biometric Detection and Related Electronic Device
US9395868B2 (en) * 2011-12-06 2016-07-19 Google Inc. Graphical user interface window spacing mechanisms
US9026951B2 (en) 2011-12-21 2015-05-05 Apple Inc. Device, method, and graphical user interface for selection of views in a three-dimensional map based on gesture inputs
US9208698B2 (en) 2011-12-27 2015-12-08 Apple Inc. Device, method, and graphical user interface for manipulating a three-dimensional map view based on a device orientation
US9728145B2 (en) * 2012-01-27 2017-08-08 Google Technology Holdings LLC Method of enhancing moving graphical elements
US20130271355A1 (en) * 2012-04-13 2013-10-17 Nokia Corporation Multi-segment wearable accessory
US8866771B2 (en) 2012-04-18 2014-10-21 International Business Machines Corporation Multi-touch multi-user gestures on a multi-touch display
CN109508091A (zh) * 2012-07-06 2019-03-22 原相科技股份有限公司 输入系统
JP5863970B2 (ja) * 2012-07-19 2016-02-17 三菱電機株式会社 表示装置
CN103630143A (zh) * 2012-08-23 2014-03-12 环达电脑(上海)有限公司 导航装置及其控制方法
CN103631413A (zh) * 2012-08-24 2014-03-12 天津富纳源创科技有限公司 触摸屏及触控显示装置
JP5975794B2 (ja) * 2012-08-29 2016-08-23 キヤノン株式会社 表示制御装置、表示制御方法、プログラム及び記憶媒体
US9547375B2 (en) * 2012-10-10 2017-01-17 Microsoft Technology Licensing, Llc Split virtual keyboard on a mobile computing device
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
US20150212647A1 (en) 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
US9772722B2 (en) 2012-10-22 2017-09-26 Parade Technologies, Ltd. Position sensing methods and devices with dynamic gain for edge positioning
AT513675A1 (de) * 2012-11-15 2014-06-15 Keba Ag Verfahren zum sicheren und bewussten Aktivieren von Funktionen und/oder Bewegungen einer steuerbaren technischen Einrichtung
KR20140090297A (ko) 2012-12-20 2014-07-17 삼성전자주식회사 근거리 무선 통신(nfc)을 이용하는 화상 형성 방법 및 장치
EP2960770A4 (en) * 2013-02-21 2017-01-25 Kyocera Corporation Device
ITMI20130827A1 (it) * 2013-05-22 2014-11-23 Serena Gostner Agenda elettronica multischermo
KR101511995B1 (ko) * 2013-06-10 2015-04-14 네이버 주식회사 제스처 정보를 이용하여 서비스에 대한 사용자간 관계를 설정하는 방법 및 시스템
TWI688850B (zh) 2013-08-13 2020-03-21 飛利斯有限公司 具有電子顯示器之物品
CN105793781B (zh) 2013-08-27 2019-11-05 飞利斯有限公司 具有可挠曲电子构件的可附接装置
WO2015031426A1 (en) 2013-08-27 2015-03-05 Polyera Corporation Flexible display and detection of flex state
WO2015038684A1 (en) 2013-09-10 2015-03-19 Polyera Corporation Attachable article with signaling, split display and messaging features
CN105580013A (zh) * 2013-09-16 2016-05-11 汤姆逊许可公司 通过搜索多个用户评论并将其覆盖到内容中来浏览视频
KR102097496B1 (ko) * 2013-10-07 2020-04-06 엘지전자 주식회사 폴더블 이동 단말기 및 그 제어 방법
WO2015100224A1 (en) 2013-12-24 2015-07-02 Polyera Corporation Flexible electronic display with user interface based on sensed movements
TWI676880B (zh) 2013-12-24 2019-11-11 美商飛利斯有限公司 動態可撓物品
CN106031308B (zh) 2013-12-24 2019-08-09 飞利斯有限公司 用于附接式二维挠性电子装置的支撑结构
KR20160103072A (ko) 2013-12-24 2016-08-31 폴리에라 코퍼레이션 가요성 전자 부품용 지지 구조체
CN104750238B (zh) 2013-12-30 2018-10-02 华为技术有限公司 一种基于多终端协同的手势识别方法、设备及系统
US20150227245A1 (en) 2014-02-10 2015-08-13 Polyera Corporation Attachable Device with Flexible Electronic Display Orientation Detection
KR102144339B1 (ko) 2014-02-11 2020-08-13 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
KR20150102589A (ko) * 2014-02-28 2015-09-07 삼성메디슨 주식회사 의료 영상 처리 장치, 의료 영상 처리 방법, 및 컴퓨터 판독가능 기록매체
US20160140933A1 (en) * 2014-04-04 2016-05-19 Empire Technology Development Llc Relative positioning of devices
DE102014206745A1 (de) * 2014-04-08 2015-10-08 Siemens Aktiengesellschaft Verfahren zum Anschluss mehrerer Touchscreens an ein Computer-System und Verteilmodul zum Verteilen von Grafik- und Touchscreensignalen
CN103941923A (zh) * 2014-04-23 2014-07-23 宁波保税区攀峒信息科技有限公司 —种拼合触摸装置方法及拼合触摸装置
WO2015184045A2 (en) 2014-05-28 2015-12-03 Polyera Corporation Device with flexible electronic components on multiple surfaces
US10761906B2 (en) 2014-08-29 2020-09-01 Hewlett-Packard Development Company, L.P. Multi-device collaboration
KR102298972B1 (ko) * 2014-10-21 2021-09-07 삼성전자 주식회사 전자 장치의 엣지에서 수행되는 제스처를 기반으로 하는 동작 수행
KR101959946B1 (ko) * 2014-11-04 2019-03-19 네이버 주식회사 제스처 정보를 이용하여 서비스에 대한 사용자간 관계를 설정하는 방법 및 시스템
KR20160068514A (ko) * 2014-12-05 2016-06-15 삼성전자주식회사 터치 입력을 제어하는 전자 장치 및 방법
KR102358750B1 (ko) 2014-12-29 2022-02-07 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
CN105843672A (zh) * 2015-01-16 2016-08-10 阿里巴巴集团控股有限公司 一种应用程序控制方法、装置及系统
US9791971B2 (en) * 2015-01-29 2017-10-17 Konica Minolta Laboratory U.S.A., Inc. Registration of electronic displays
WO2016138356A1 (en) 2015-02-26 2016-09-01 Polyera Corporation Attachable device having a flexible electronic component
KR102318920B1 (ko) 2015-02-28 2021-10-29 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
CN104881169B (zh) * 2015-04-27 2017-10-17 广东欧珀移动通信有限公司 一种触摸操作的识别方法及终端
CN104850382A (zh) * 2015-05-27 2015-08-19 联想(北京)有限公司 一种显示模组控制方法、电子设备和显示拼接群组
CN104914998A (zh) * 2015-05-28 2015-09-16 努比亚技术有限公司 移动终端及其多手势的桌面操作方法和装置
EP3308259A4 (en) 2015-06-12 2019-01-23 Nureva Inc. METHOD AND DEVICE FOR THE USE OF GESTURES VIA MULTIPLE DEVICES
USD789925S1 (en) * 2015-06-26 2017-06-20 Intel Corporation Electronic device with foldable display panels
ITUB20153039A1 (it) * 2015-08-10 2017-02-10 Your Voice S P A Management of data in an electronic device
CN105224210A (zh) * 2015-10-30 2016-01-06 努比亚技术有限公司 一种移动终端及其控制屏幕显示方向的方法
KR102436383B1 (ko) 2016-01-04 2022-08-25 삼성전자주식회사 전자 장치 및 이의 동작 방법
TWI652614B (zh) 2017-05-16 2019-03-01 緯創資通股份有限公司 攜帶式電子裝置及其操作方法
US11416077B2 (en) * 2018-07-19 2022-08-16 Infineon Technologies Ag Gesture detection system and method using a radar sensor
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11157047B2 (en) * 2018-11-15 2021-10-26 Dell Products, L.P. Multi-form factor information handling system (IHS) with touch continuity across displays
CN109656439A (zh) * 2018-12-17 2019-04-19 北京小米移动软件有限公司 快捷操作面板的显示方法、装置及存储介质
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
CN114442741B (zh) * 2020-11-04 2023-07-25 宏碁股份有限公司 具多屏幕的可携式电子装置
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6331840B1 (en) 1998-03-27 2001-12-18 Kevin W. Nielson Object-drag continuity between discontinuous touch screens of a single virtual desktop
US6377228B1 (en) * 1992-01-30 2002-04-23 Michael Jenkin Large-scale, touch-sensitive video display
KR20070039613A (ko) * 2004-07-30 2007-04-12 애플 컴퓨터, 인크. 터치 감지 입력 장치용 제스처

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5694150A (en) * 1995-09-21 1997-12-02 Elo Touchsystems, Inc. Multiuser/multi pointing device graphical user interface system
JP3304290B2 (ja) * 1997-06-26 2002-07-22 シャープ株式会社 ペン入力装置及びペン入力方法及びペン入力制御プログラムを記録したコンピュータ読み取り可能な記録媒体
US20070177804A1 (en) * 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
US9292111B2 (en) * 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
JP2000242393A (ja) * 1999-02-23 2000-09-08 Canon Inc 情報処理装置及びその制御方法
US6545669B1 (en) * 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
US7088459B1 (en) * 1999-05-25 2006-08-08 Silverbrook Research Pty Ltd Method and system for providing a copy of a printed page
JP2003520998A (ja) * 2000-01-24 2003-07-08 スポットウェア テクノロジーズ インコーポレイテッド 小型化可能/たたみ込み可能なモジュールpda
US7231609B2 (en) * 2003-02-03 2007-06-12 Microsoft Corporation System and method for accessing remote screen content
JP2005346583A (ja) * 2004-06-04 2005-12-15 Canon Inc 画像表示装置、マルチディスプレイ・システム、座標情報出力方法及びその制御プログラム
US20070097014A1 (en) * 2005-10-31 2007-05-03 Solomon Mark C Electronic device with flexible display screen
US7636794B2 (en) * 2005-10-31 2009-12-22 Microsoft Corporation Distributed sensing techniques for mobile devices
US7924271B2 (en) * 2007-01-05 2011-04-12 Apple Inc. Detecting gestures on multi-event sensitive devices
JP5151184B2 (ja) * 2007-03-01 2013-02-27 株式会社リコー 情報表示システム及び情報表示方法
US7936341B2 (en) * 2007-05-30 2011-05-03 Microsoft Corporation Recognizing selection regions from multiple simultaneous inputs
EP2248366A4 (en) * 2008-01-29 2014-04-09 Qualcomm Inc SECURE APPLICATION SIGNATURE
US20090322689A1 (en) * 2008-06-30 2009-12-31 Wah Yiu Kwong Touch input across touch-sensitive display devices
US8169414B2 (en) * 2008-07-12 2012-05-01 Lim Seung E Control of electronic games via finger angle using a high dimensional touchpad (HDTP) touch user interface
US8345014B2 (en) * 2008-07-12 2013-01-01 Lester F. Ludwig Control of the operating system on a computing device via finger angle using a high dimensional touchpad (HDTP) touch user interface
JP5344555B2 (ja) * 2008-10-08 2013-11-20 シャープ株式会社 オブジェクト表示装置、オブジェクト表示方法、およびオブジェクト表示プログラム
CN201298220Y (zh) * 2008-11-26 2009-08-26 陈伟山 基于lcd液晶显示屏的红外反射多点触摸装置
US7864517B2 (en) * 2009-03-30 2011-01-04 Microsoft Corporation Mobile computer device binding feedback
JP5229083B2 (ja) * 2009-04-14 2013-07-03 ソニー株式会社 情報処理装置、情報処理方法及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6377228B1 (en) * 1992-01-30 2002-04-23 Michael Jenkin Large-scale, touch-sensitive video display
US6331840B1 (en) 1998-03-27 2001-12-18 Kevin W. Nielson Object-drag continuity between discontinuous touch screens of a single virtual desktop
KR20070039613A (ko) * 2004-07-30 2007-04-12 애플 컴퓨터, 인크. 터치 감지 입력 장치용 제스처

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017086578A1 (ko) * 2015-11-17 2017-05-26 삼성전자 주식회사 에지 스크린을 통한 터치 입력 방법 및 전자 장치
US11003328B2 (en) 2015-11-17 2021-05-11 Samsung Electronics Co., Ltd. Touch input method through edge screen, and electronic device

Also Published As

Publication number Publication date
TW201140421A (en) 2011-11-16
JP5705863B2 (ja) 2015-04-22
EP2488935A1 (en) 2012-08-22
JP2013508824A (ja) 2013-03-07
KR20120080210A (ko) 2012-07-16
CN102576290B (zh) 2016-04-27
WO2011047338A1 (en) 2011-04-21
CN102576290A (zh) 2012-07-11
US20110090155A1 (en) 2011-04-21

Similar Documents

Publication Publication Date Title
KR101495967B1 (ko) 다중의 터치 스크린들로부터의 제스처 입력을 하나의 제스처 입력으로 결합하는 방법, 시스템, 및 컴퓨터 프로그램 제품
KR102097496B1 (ko) 폴더블 이동 단말기 및 그 제어 방법
US9047046B2 (en) Information processing apparatus, information processing method and program
US8638311B2 (en) Display device and data displaying method thereof
US8823749B2 (en) User interface methods providing continuous zoom functionality
JP6328947B2 (ja) マルチタスキング運用のための画面表示方法及びこれをサポートする端末機
US8448086B2 (en) Display apparatus, display method, and program
WO2020134744A1 (zh) 图标移动方法及移动终端
CN107980158B (zh) 柔性显示屏的显示控制方法及装置
JP6157885B2 (ja) 携帯端末装置の表示制御方法
CN108509105B (zh) 一种应用程序管理方法和终端
TWI616803B (zh) 螢幕畫面的縮放及操作方法、裝置與電腦程式產品
KR20140092059A (ko) 플렉서블 디스플레이를 구비하는 휴대 장치의 제어 방법 및 그 휴대 장치
CN110007835B (zh) 一种对象管理方法及移动终端
KR20150060278A (ko) 다단 절첩형 디스플레이장치 및 그 기능 제어방법
WO2014157357A1 (ja) 情報端末、表示制御方法及びそのプログラム
US9377944B2 (en) Information processing device, information processing method, and information processing program
JP2023510620A (ja) 画像クロップ方法及び電子機器
US9619912B2 (en) Animated transition from an application window to another application window
JP2010072754A (ja) 端末装置、表示制御方法、及び表示機能を備えたプログラム
CN112130741A (zh) 一种移动终端的控制方法及移动终端
WO2014003012A1 (ja) 端末装置、表示制御方法およびプログラム
JP6971573B2 (ja) 電子機器、その制御方法およびプログラム
WO2022193800A1 (zh) 一种多屏设备的控制方法、电子设备和存储介质
JP5626424B2 (ja) 端末装置、表示制御方法、及び表示機能を有するプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171228

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee