KR20120027516A - 연속 줌 기능을 제공하는 사용자 인터페이스 방법들 - Google Patents

연속 줌 기능을 제공하는 사용자 인터페이스 방법들 Download PDF

Info

Publication number
KR20120027516A
KR20120027516A KR1020127000764A KR20127000764A KR20120027516A KR 20120027516 A KR20120027516 A KR 20120027516A KR 1020127000764 A KR1020127000764 A KR 1020127000764A KR 20127000764 A KR20127000764 A KR 20127000764A KR 20120027516 A KR20120027516 A KR 20120027516A
Authority
KR
South Korea
Prior art keywords
path event
event
path
calculating
processor
Prior art date
Application number
KR1020127000764A
Other languages
English (en)
Other versions
KR101384857B1 (ko
Inventor
사무엘 제이 호로데즈키
캄-청 앤소니 초이
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20120027516A publication Critical patent/KR20120027516A/ko
Application granted granted Critical
Publication of KR101384857B1 publication Critical patent/KR101384857B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

방법들 및 디바이스들은 컴퓨팅 디바이스상에서 디스플레이된 이미지의 연속 줌 또는 확대를 제공하는 효율적인 사용자 인터페이스를 제공한다. 사용자는 터치스크린, 터치패드 또는 마우스와 같은 사용자 인터페이스 디바이스를 사용하여 타원형 형상 (예를 들어, 원) 을 트레이싱함으로써 줌-인 또는 줌-아웃 기능을 개시할 수도 있다. 줌 기능은 터치스크린 또는 터치패드가 터치되거나, 마우스 버튼이 눌려지고, 타원형 경로가 트레이싱되는 한 계속된다. 줌-인 또는 확대 스케일링 팩터가 시계방향 경로 트레이스에 응답하여 이미지에 적용될 수도 있고, 줌-아웃 또는 축소 스케일링 팩터가 시계방향 경로 트레이스에 응답하여 이미지에 적용될 수도 있고, 그 반대의 경우도 마찬가지이다. 줌 기능을 실시하기 위해 후속될 수도 있는 시각 보조물이 디스플레이상에 제공될 수도 있다.

Description

연속 줌 기능을 제공하는 사용자 인터페이스 방법들{USER INTERFACE METHODS PROVIDING CONTINUOUS ZOOM FUNCTIONALITY}
본 발명은 일반적으로 컴퓨터 사용자 인터페이스 시스템들에 관한 것으로, 더욱 구체적으로는, 연속 이미지 줌 기능을 제공하는 사용자 시스템들에 관한 것이다.
개인 전자 디바이스들 (예를 들어, 셀 폰, PDA, 랩탑, 게임 디바이스) 은 사용자에게 증가하는 기능 및 데이터 저장부를 제공한다. 개인 전자 디바이스들은 문서, 사진, 비디오 및 음악을 저장하고, 인터넷 및 전자 메일에 대한 포털로서 기능하는 전자 수첩으로서 기능한다. 이러한 디바이스들내의 작은 디스플레이내에 피팅하기 위해, 문서들 (예를 들어, PDF 이미지들 및 사진들) 은 통상적으로, 줌 기능에 의해 제어될 수 있는 스케일링 뷰어로 디스플레이된다. 이미지의 모두 또는 일부를 보기 위해, 통상의 사용자 인터페이스들은 줌 아이콘을 클릭하고, 데이터 입력 윈도우에 확대값을 입력하거나, 디스플레이될 부분상에 선택 박스를 드래그함으로써 사용자들이 줌 팩터를 조정하게 한다. 줌 기능을 활성화하는 다른 알려진 사용자 인터페이스 메카니즘은 애플 컴퓨터 iPhone？ 상에서 구현될 때 터치스크린 디스플레이상에서의 2개의 핑거의 핀치 움직임 (pinch movement) 이다. 그러나, 주밍 기능을 제어하는 이러한 방법들은 조작하는 것이, 특히, 이미지의 깊은 줌 조작을 달성하는 것이 어려울 수 있다. 이것은 특히, 그 유용성이 소형 스크린 사이즈에 의해 제공된 주밍 기능에 의존하는 소형 휴대용 컴퓨팅 디바이스들의 경우이다. 예를 들어, Apple iPhone？ 디스플레이의 소형 사이즈는 이미지가 2개의 핑거 핀치 움직임을 사용하는 일 단계에서 주밍될 수 있는 정도를 제한한다. 추가로, 2개의 핑거 핀치 줌을 가능하게 하는 하드웨어의 높은 비용이 이러한 방법을 더 낮은 가격의 모바일 디바이스에서 실시할 수 없게 한다.
다양한 실시형태들은, 터치스크린상에서 원형 또는 타원형 형상을 트레이싱하거나, 포인팅 디바이스를 이용하고, 움직임의 방향 및 회전의 수 또는 정도에 의해 제어된 이미지 스케일링 팩터를 이용하여 줌-인 및 줌-아웃 기능에서 디스플레이된 이미지를 컴퓨팅 디바이스의 사용자들이 연속적으로 조정할 수 있게 하는 방법들 및 디바이스들을 제공한다. 일 실시형태에서, 컴퓨팅 디바이스는 터치스크린, 터치패드 또는 포인터 디바이스 (예를 들어, 스타일러스) 와 같은 사용자 인터페이스로부터 일련의 사용자 포인팅 이벤트들을 수신하고, 연속 포인팅 이벤트에서 트레이싱된 경로의 형상 및 방향을 결정하기 위해 이벤트 데이터를 검사한다. 트레이싱된 경로가 원형 또는 타원형 형상이면, 스케일링 팩터가 디스플레이된 이미지를 줌-인 및 줌-아웃하기 위해 트레이싱된 경로의 방향 (예를 들어, 시계방향 또는 반시계방향) 및 길이에 기초하여 디스플레이상에 제공된 이미지에 적용되는 줌 기능이 개시될 수도 있다. 일 실시형태에서, 시계 방향에서 트레이싱된 타원형 형상의 경로는 줌-인 기능을 개시하는 것으로 해석되지만, 반시계 방향에서 트레이싱된 타원형 형상의 경로는 줌-아웃 기능을 개시하는 것으로 해석된다. 선택적인 실시형태에서, 트레이싱된 경로의 속도는 줌 기능이 구현되는 레이트 (예를 들어, 단위 경로 길이 당 퍼센트 확대) 를 결정하는 것으로 해석될 수도 있다.
여기에 포함되고 본 명세서의 일부를 구성하는 첨부한 도면들은 본 발명의 예시적인 양태들을 예시한다. 상기 제공된 일반적인 설명 및 아래에 제공된 상세한 설명과 함께, 도면들은 본 발명의 특징들을 설명하기 위해 기능한다.
도 1 내지 도 3 은 터치스크린 디스플레이상에서 시계 방향으로 이동하는 핑거에 의해 활성화된 줌-인 기능을 예시하는 휴대용 컴퓨팅 디바이스의 정면도들이다.
도 4 내지 도 6 은 터치스크린 디스플레이상에서 반시계 방향으로 이동하는 핑거에 의해 활성화된 줌-아웃 기능을 예시하는 휴대용 컴퓨팅 디바이스의 정면도들이다.
도 7 및 도 8 은 터치스크린 디스플레이상에 제공될 수도 있는 대안의 줌 기능 디스플레이 보조물들을 예시하는 휴대용 컴퓨팅 디바이스의 정면도들이다.
도 9 는 포인팅 디바이스를 사용하는 개인 컴퓨터상의 연속 줌 기능의 사용을 예시하는 예시적인 컴퓨터 디스플레이이다.
도 10 은 사용자에게 제공될 수도 있는 줌 기능 디스플레이 보조물을 예시하는 예시적인 컴퓨터 디스플레이이다.
도 11 은 다양한 실시형태와 사용하는데 적합한 컴퓨터 디바이스의 시스템 블록도이다.
도 12 는 연속 줌 기능 사용자 인터페이스를 구현하는 실시형태 방법의 프로세스 흐름도이다.
도 13 은 터치 데이터가 연속 줌 기능을 구현하는 타원형 형상을 구성하는지를 결정하는 실시형태 방법의 프로세스 흐름도이다.
도 14 는 타원형 경로를 트레이싱하는 포인트 디바이스에 의해 활성화된 오브젝트 리사이징 (resizing) 기능을 구현하는 실시형태 방법의 프로세스 흐름도이다.
도 15 는 다양한 실시형태들과 사용하는데 적합한 예시적인 휴대용 컴퓨팅 디바이스의 컴포넌트 블록도이다.
도 16 은 다양한 실시형태들과 사용하는데 적합한 컴퓨터의 컴포넌트 블록도이다.
첨부한 도면들을 참조하여 다양한 실시형태들이 설명될 것이다. 가능하면 어디에서나, 동일하거나 유사한 부분을 지칭하기 위해 동일한 참조 번호들이 도면들 전반적으로 사용될 것이다. 특정한 예들 및 구현들에 이루어진 참조들은 예시 목적용이고, 본 발명의 범위 또는 청구범위를 제한하려는 것이 아니다.
여기에서 사용되는 바와 같이, "포인팅 디바이스" 는 예를 들어, 그래픽 사용자 인터페이스 (GUI) 에서 사용하기 위한 위치들 및 액션들로 변환될 수 있는 사용자로부터의 물리적 입력들을 수신할 수 있는 임의의 인간-컴퓨터 인터페이스 디바이스를 칭한다. 일반의 포인팅 디바이스들은, 마우스, 핑거 또는 스타일러스에 의해 터치되는 터치스크린 디스플레이, (몇몇 노트북 컴퓨터들상에서 통상적으로 이용되는 바와 같은) 핑거 또는 스타일러스에 의해 터치되는 터치패드, 조이스틱, 포인팅 스틱, (몇몇 셀룰러 전화기들상에서 통상적으로 이용되는 바와 같은) 멀티-방향 로커 스위치, 트랙볼 마우스, 및 전자 펜 및 태블릿을 포함한다. 다양한 양태들에 포함되고 개발될 수도 있는 다른 포인팅 디바이스들은, 대형 터치 감지 디스플레이 패널들, 아이 트랙커들, 전자 글로브들, 및 인간 움직임 트랙킹 시스템들을 또한 포함한다. 포인팅 디바이스는 통상적으로, 디스플레이상에 나타나고 포인팅 디바이스에 대한 입력들과 함께 이동하는 커서를 포지셔닝하고 제어하기 위해 GUI 소프트웨어와 통합된다.
여기에서 사용되는 바와 같이, 용어 "커서" 는 GUI 디스플레이상에 아이템들을 표시하고 선택하는데 있어서 사용자들을 보조하기 위해 GUI 에 디스플레이될 수도 있는 화살표 또는 포인팅 핑거 아이콘과 같은 임의의 그래픽 표시자를 칭한다. 통상의 GUI 소프트웨어는, 사용자가 포인팅 디바이스를 사용하여 커서를 내비게이팅하게 하도록 구성된다.
여기에서 사용되는 바와 같이, 용어 "터치스크린" 은 관련된 이미지 디스플레이를 갖는 터치 감지 입력 디바이스 또는 터치 반응 입력 디바이스이다. 여기에서 사용되는 바와 같이, "터치패드" 는 관련된 이미지 디스플레이가 없는 터치 감지 입력 디바이스이다. 터치패드는 예를 들어, 이미지 디스플레이 영역 외부의 전자 디바이스의 임의의 표면상에 구현될 수 있다. 터치스크린들 및 터치패드들은 일반적으로 여기에서 "터치면들" 을 칭한다. 터치면들은 터치스크린 디스플레이와 같은 전자 디바이스, 또는 유선 또는 무선 데이터 링크에 의해 전자 디바이스에 커플링될 수 있는 터치패드와 같은 개별 모듈의 일체형 부품일 수도 있다.
여기에서 사용되는 바와 같이, 용어 "개인 전자 디바이스", "컴퓨팅 디바이스" 및 "휴대용 컴퓨팅 디바이스" 는 셀룰러 전화, 휴대 보조 단말기 (PDA), 팜-탑 컴퓨터, 노트북 컴퓨터, 개인 컴퓨터, 무선 전자 메일 수신기 및 셀룰러 전화 수신기 (예를 들어, Blackberry？ 및 Treo？ 디바이스들), 멀티미디어 인에이블된 셀룰러 전화 (예를 들어, iPhone？), 및 프로그램가능한 프로세서, 메모리 및 접속되거나 일체형의 터치면 또는 다른 포인팅 디바이스 (예를 들어, 컴퓨터 마우스) 를 포함하는 유사한 전자 디바이스 중 어느 하나 또는 모두를 칭한다. 본 발명의 다양한 양태들을 예시하기 위해 사용된 예시적인 실시형태에서, 전자 디바이스는 일체형 터치스크린 디스플레이를 포함하는 셀룰러 전화이다. 그러나, 이러한 실시형태는 다양한 실시형태들의 하나의 예시적인 구현으로서 단지 제공되고, 이와 같이, 청구범위에 기재된 청구물의 다른 가능한 구현들을 배제하는 것으로 의도되지 않는다.
여기에서 사용되는 바와 같이, "터치 이벤트" 는 터치 또는 포인팅 이벤트의 위치 또는 상대 위치 (예를 들어, GUI 디스플레이 이내) 에 관한 정보를 포함할 수도 있는 포인팅 디바이스상의 검출된 사용된 입력을 칭한다. 예를 들어, 터치스크린 또는 터치패드 사용자 인터페이스 디바이스상에서, 터치 이벤트는 디바이스를 터치하는 사용자의 검출을 칭하고, 터치되는 디바이스상의 위치에 관한 정보를 포함할 수도 있다. 다른 예로서, 포인팅 디바이스가 컴퓨터 마우스 또는 트랙볼일 때, 터치 이벤트는 마우스 버튼의 누름을 칭하고, 버튼이 눌려질 때 GUI 디스플레이내의 커서의 위치를 포함할 수도 있다.
여기에서 사용되는 바와 같이, "단일 연속 터치 이벤트" 는 터치 이벤트 (예를 들어, 터치스크린 또는 터치패드의 터치 또는 컴퓨터 마우스 버튼의 누름) 이 현저한 방해없이 계속되는 사용자 인터페이스 디바이스 (예를 들어, 터치스크린, 터치패드 또는 컴퓨터 마우스 버튼 누름) 상에 수신된 임의의 입력을 칭한다. 터치스크린 사용자 인터페이스의 예를 사용하여, 단일 연속 터치 이벤트는 사용자의 핑거가 표면을 계속 터치하는 한 발생한다. 컴퓨터 마우스 사용자 인터페이스의 예를 사용하여, 단일 연속 터치 이벤트는 사용자가 마우스 키 (예를 들어, 좌측 클릭 버튼) 를 계속 누르는 한 발생한다. 단일 연속 터치 이벤트는 사용자 인터페이스상의 경로를 트레이싱할 수도 있지만, 사용자가 하나의 회전 방향 (시계방향) 에서 타원형 경로를 트레이싱한 후, 중지하고 방향을 반전 (예를 들어, 반시계방향) 시킬 수도 있기 때문에, 연속 움직임은 필요하지 않다.
여기에서 사용되는 바와 같이, 용어 "경로" 는 단일 연속 터치 이벤트 동안 GUI 디스플레이내의 경로를 트레이싱하는 터치 이벤트 위치들의 시퀀스를 칭한다. 또한, 여기에서 사용되는 바와 같이, 용어 "경로 이벤트" 는 단일 연속 터치 이벤트 동안 경로를 트레이싱하는 포인팅 디바이스상의 검출된 사용자 입력을 칭한다. 경로 이벤트는 트레이싱된 경로를 구성하는 터치 이벤트들의 (예를 들어, GUI 디스플레이 내의) 위치들 또는 상대 위치들에 관한 정보를 포함할 수도 있다.
여기에서 사용되는 바와 같이, 용어 "타원형 형상" 및 "타원형" 은 원, 타원, 삼각형, 정사각형, 직사각형, 또는 다각형과 같은 거의 자체적으로 폐쇄된 단일 연속 터치 이벤트에서 트레이싱된 임의의 경로를 칭한다. "타원형 형상" 은 경로가 자체적으로 폐쇄되기 이전에 검출될 수도 있고, 단일 연속 터치 이벤트에서 트레이싱된 나선 경로와 같이 폐쇄되지 않고 오버랩하는 경로들을 포함할 수도 있다. 단일 연속 터치 이벤트는 예를 들어, 아이템들을 선택하거나 아이콘을 활성화하는 터치스크린상의 마우스 클릭들 및 탭들과 같은 다른 비연속 터치 이벤트들과 구별될 수 있다.
다양한 실시형태의 방법들 및 디바이스들은 줌-인 및 줌-아웃 기능을 활성화하기 위해 사용자 인터페이스를 사용하는데 있어서 직관적으로 용이함으로 제공한다. 사용자들은 단일 연속 터치 이벤트에서 포인팅 디바이스를 사용하여 경로를 간단히 트레이싱한다. 예를 들어, 사용자들은 휴대용 컴퓨팅 디바이스의 터치스크린상의 원을 터치하고 트레이싱하기 위해 그들의 핑거들을 사용할 수도 있다. 컴퓨팅 디바이스의 프로세서는 단일 연속 터치 이벤트에서 트레이싱된 경로들을 타원형 형상으로서 인식하고, 이에 응답하여, 적합한 줌 기능을 활성화하도록 프로그램될 수도 있다. 그 후, 타원형 형상의 경로는 (예를 들어, 디스플레이 이미지들을 주밍하는 iPhone？ 의 2개의 핑거 핀치 커맨드의 경우에서) 패닝하거나 핀칭하는 터치스크린상의 일 방향에서의 핑거의 움직임과 같은, 다른 경로 형상들과 구별될 수도 있다.
다양한 실시형태들에서, 줌 기능 또는 줌 모드는 자동으로 인에이블될 수도 있다. 예를 들어, GUI 소프트웨어는 단일 연속 터치 이벤트에서 트레이싱된 폐쇄 형상 경로를 자동으로 인식하고, 적절한 줌 기능을 활성화하는 명령들을 포함할 수도 있다. 줌 특징들의 자동 활성화에는 예를 들어, 맵들을 디스플레이하고 GPS 위치 기반 동작들을 수행하는 애플리케이션들이 제공될 수도 있다. 또한, GUI 는 스케일러블 컨텐츠 (예를 들어, 문서 또는 이미지) 를 디스플레이하는 애플리케이션이 활성화될 때 마다 줌 기능을 자동으로 인에이블할 수도 있다. 이러한 구현에서, (물리적 및 가상 키들 모두를 포함하는) 특정한 키들이 줌 기능들에 자동으로 할당될 수도 있다.
몇몇 실시형태들에서, 줌 기능 또는 줌 모드는 주밍이 주요 또는 일반 기능이 아닌 애플리케이션에서 유용할 수도 있는 것과 같이 수동으로 구현될 수도 있다. 이러한 애플리케이션들에서 주밍 기능을 수동으로 인에이블하거나 활성화하기 위해, 사용자는 버튼을 누르거나 GUI 디스플레이상의 아이콘을 활성화함으로써 줌 기능을 선택하고 활성화할 수도 있다. 예시적인 실시형태에서, 줌 활성화 동작은 사용자가 줌 기능 또는 줌 모드를 론치하기 위해 활성화할 수도 있는 (예를 들어, 누르거나 클릭함으로써) 소프트 키에 할당될 수도 있다. 다른 예시적인 실시형태에서, 줌 기능은 사용자 커맨드에 의해 활성화될 수도 있다. 예를 들어, 사용자는 줌 모드를 인에이블하기 위해 "ACTIVATE ZOOM" 과 같은 음성 커맨드를 사용할 수도 있다. 활성화되면, 줌 기능은 후술하는 방식으로 사용될 수도 있다.
연속 줌 기능을 사용하여, 사용자는 (예를 들어, 터치스크린 또는 터치패드를 터치하거나 컴퓨터 마우스를 누름으로써) 단일 연속 터치 이벤트의 시작 및 원과 같은 폐쇄 형상의 트레이싱을 줌-인 및 줌-아웃하기 위해 디스플레이된 이미지를 제어할 수도 있다. 다양한 실시형태들에 따르면, 단일 연속 터치 이벤트에서 트레이싱된 경로의 방향 및 길이는 주밍 기능을 제어한다. 수행된 단일 연속 터치 이벤트에서 트레이싱된 경로의 방향은 줌 레벨들 (즉, 디스플레이 이미지 사이즈의 확대 및 축소) 을 결정할 수도 있다. 예를 들어, 이미지를 확대하기 위해, 사용자는 단일 연속 터치 이벤트에서 포인팅 디바이스를 사용하여 시계 방향에서 원을 트레이싱할 수도 있다. 유사하게는, 이미지를 축소하기 위해, 사용자는 단일 연속 터치 이벤트로 포인팅 디바이스를 사용하여 반시계 방향에서 원을 트레이싱할 수도 있다. 이들 동작들은 도 1 내지 도 9 를 참조하여 아래의 예시적인 실시형태에서 더욱 상세히 설명된다.
이미지 사이즈가 변경되는 정도 (즉, 줌의 깊이) 는 단일 연속 터치 이벤트 동안 트레이싱된 경로의 길이에 의존한다. 따라서, 소정의 이미지 확대 팩터가 단일 루프 또는 타원형 경로에 할당될 수도 있다. 폐쇄 경로가 더 많은 시간 트레이싱되면, 확대 팩터가 이미지에 더 많은 시간 적용된다. 또한, 부분 확대 팩터가 타원형 경로 주위에서 부분적으로 트레이싱된 경로에 대한 이미지에 대해 적용될 수도 있다. 경로 길이는 단일 연속 터치 이벤트의 시작점 (즉, 터치스크린 또는 터치 패드가 터치되거나 마우스 버튼이 눌려진 제 1 포인트의 위치) 로부터 측정될 수도 있다. 다르게는, 적용된 확대 팩터는 타원형 경로에 스팬된 라디안의 수에 의존할 수도 있다. 바람직한 실시형태에서, 확대 팩터는 연속적으로 디스플레이된 이미지에 적용되어서, 이미지 사이즈는 경로가 트레이싱될 때 연속적으로 변화한다. 또한, 바람직한 실시형태에서, 이미지에 적용된 확대 팩터는 트레이싱된 경로의 길이 (또는 스팬된 라디안) 에 선형으로 의존한다. 따라서, 바람직한 실시형태에서, 사용자가 사용자 인터페이스를 사용하여 원을 더 빠르게 드로잉하면, 이미지가 확대 팩터를 더 빠르게 변화시키고, 사용자가 경로의 트레이싱을 중지할 때, 이미지는 현재의 배율로 유지된다.
다양한 실시형태들의 이점들은 다양하다. 특히, 사용자들은 원하는 확대 또는 이미지 사이즈가 달성될 때까지 줌을 연속적으로 조정할 수 있다. 이것은, 사용자가 둠 동작들을 단계적으로 또는 증분적으로 수행해야 하는 공지된 GUI 시스템과는 대조적이다. 예를 들어, Apple iPhone？ 상에서 구현된 2개의 핑거 핀치 줌 기능은 사용자의 핑거들이 터치스크린의 에지들에 도달하기 전에 이미지 사이즈에서 제한된 변화를 달성할 수 있고, 사용자들은 그들의 핑거들을 터치스크린으로부터 떼어서 동작을 반복하기 위해 핑거들을 재위치시켜야 한다. 이러한 분리 및 재연결 액션은 셀룰러 전화 또는 PDA 와 같은 작은 디바이스들에서 특히 곤란할 수 있다. 반대로, 다양한 실시형태들은 사용자가 단일 연속 터치 이벤트에서 트레이스 원에 의해 이미지를 연속적으로 줌인 또는 줌 아웃하게 할 수 있다. 사용자들은 원하는 사이즈가 달성될 때까지 사용자들이 줌 인 및 줌 아웃하는 줌 기능을 제어하기를 원하는 한은 터치스크린상에 그들의 핑거 (또는 마우스 버튼상에 그들의 핑거) 를 유지할 수 있다. 이러한 능력들은 현재 이용가능한 주밍 기능들에 비교하여 더욱 동적이고, 시간 및 실패를 절약한다.
다양한 실시형태들은, 줌 기능이 컨텍스트 감지형이어서, 이용가능성 및 적용된 확대 스케일링 팩터가 디스플레이된 컨텐츠의 본질에 의존하도록 구현될 수도 있다. 예를 들어, 줌 기능은, 디스플레이된 컨텐츠가 줌 가능하지 않을 때 (예를 들어, 메뉴 페이지) 또는 컨텐츠가 타원형 경로들로서 잘못 해석될 수도 있는 상당한 사용자 상호작용들을 수반할 수도 있을 때 (예를 들어, 기입가능 형태 또는 게임) 구현되지 않을 수도 있다. 다른 예로서, 적용된 스케일링 팩터 (즉, 단위 경로 길이 당 적용된 단위 확대 팩터) 는 디스플레이된 컨텐츠의 본질 및/또는 사이즈에 의존할 수도 있다. 예를 들어, 디스플레이된 컨텐츠가 대형 이미지 (즉, 다수의 픽셀들로 이루어짐) 이면, 단위 확대 팩터가 증가될 수도 있어서, 사용자는 타원형 형상 주위에 특정한 수의 루프들 내에 (예를 들어, 원 주위에 5개 경로들 내에) 이용가능한 확대의 한계를 달성할 수 있다.
사용자는 임의의 알려진 디바이스들의 사용을 통해 GUI 의 주밍 특징과 상호작용할 수도 있고, 제어할 수도 있다. 특히 유용한 애플리케이션에서, 포인팅 디바이스는 터치스크린들이 일반적으로 디스플레이상에서 중첩되어, 사용자가 핑거의 터치를 사용하여 디스플레이 이미지와 직접 상호작용할 수 있게 하기 때문에 핑거에 의해 터치되는 터치스크린이다. 이러한 애플리케이션에서, 사용자는 핑거로 터치스크린을 터치하고 타원형 경로를 트레이싱함으로써 이미지와 상호작용한다 (따라서, 터치스크린을 활성화하는 사용자의 핑거는 포인팅 디바이스로서 기능한다). 터치스크린 터치 이벤트 취득 (즉, 터치스크린상의 핑거 터치의 검출) 및 프로세싱은, 그 모두의 전체 내용이 참조로 여기에 포함되는, 미국 특허 제 6,323,846 호, 및 미국 특허 출원 공개 번호 제 2006/009771 호에 개시된 바와 같이 널리 알려져 있다.
터치패드와 같은 포인팅 디바이스들을 사용하여, 사용자들은 커서와 같은 그래픽 표시자의 사용을 통해 컴퓨팅 디바이스의 디스플레이상의 이미지와 간접적으로 상호작용할 수도 있다. 터치패드의 표면을 따라 핑거를 이동함으로써, 사용자들은 디스플레이 스크린상의 커서를 이동시킬 수 있고 단일 연속 터치 이벤트에서 GUI 와 간접적으로 상호작용할 수 있다. 종래의 컴퓨터 마우스의 사용은 또한, 사용자가 커서의 조작을 통해 GUI 와 간접적으로 상호작용하게 한다. 따라서, 마우스 키들 중 하나를 누르면서 컴퓨터 마우스를 이동시킴으로써, 사용자는 단일 연속 터치 이벤트에서 GUI 와 간접적으로 상호작용할 수도 있다.
다른 실시형태에서, 데스크탑 또는 그래픽스 애플리케이션내의 선택된 오브젝트의 사이즈를 제어하기 위해 연속 줌 기능이 사용될 수 있다. 이러한 실시형태에서, 사용자는 예를 들어, 오브젝트를 더블 클릭하거나 탭핑함으로써 리사이징될 수 있는 오브젝트를 선택할 수 있고, 그 후, 시계 방향 또는 반시계 방향에서 포인팅 디바이스 (예를 들어, 터치스크린상의 핑거) 를 사용하여 타원형 경로를 트레이싱할 수 있다. 이에 응답하여, GUI 는 코너를 "그래빙 (grabbing)" 하여, 그것을 내부로 또는 외부로 드래깅함으로써 오브젝트가 GUI 에서 어떻게 리사이징될 수 있는지와 유사한 방식으로 트레이싱된 경로의 길이 또는 트레이싱된 루프들의 수에 비례하여 오브젝트의 사이즈를 조정한다.
따라서, 터치스크린 입력 디바이스상에서 핑거를 이동시킴으로써 디스플레이 스크린상에 제공된 이미지의 사이즈를 변경하는 실시형태가 도 1 내지 도 6 에 예시된다. 도 1 내지 도 3 은 시계 방향에서 폐쇄 경로를 트레이싱함으로써 디스플레이된 이미지의 사이즈를 확대하는 예시적인 방법을 예시한다. 도 4 내지 도 6 은 반시계 방향에서 폐쇄 경로를 트레이싱함으로써 디스플레이된 이미지의 사이즈를 축소하는 예시적인 방법을 예시한다.
도 1 을 참조하면, 예시적인 모바일 컴퓨팅 디바이스 (100) 가 터치스크린 디바이스 (102) 및 GUI 에 인터페이스하는 기능 키들 (106) 을 포함한다. 예시된 예에서, 컴퓨팅 디바이스 (100) 는 터치스크린 디스플레이 (102) 상에 여러 거리 및 빌딩을 디스플레이하는 맵 애플리케이션을 구동한다. 도 1 에 도시된 이미지의 확대시에, 빌딩들 (A, B 및 I) 이 터치스크린 디스플레이 (102) 상에 보여질 수 있다.
사용자는 예를 들어, 핑거 (108) 로 터치스크린 (106) 을 터치하고 단일 연속 터치 이벤트에서 (즉, 터치스크린 디스플레이 (102) 로부터 핑거를 올리지 않고) 폐쇄 경로 (예를 들어, 원) 를 트레이싱하기 위해 핑거를 이동시킴으로써 이미지를 줌 인할 수 있다 (즉, 디스플레이된 이미지를 확대할 수 있다). 사용자가 트레이싱할 수도 있는 경로의 방향 및 일반 형상은 점선 화살표 (110) 에 의해 도시된다. 이들 점선 화살표 (110) 는 핑거 (108) 움직임의 형상 및 방향을 나타내기 위해서만 도시되고, 도 1 에 예시된 실시형태에서 디스플레이 (102) 의 일부로서 포함되지 않는다. 이 도면에 도시되어 있는 바와 같이, 주밍 기능은 포지티브 줌 (확대) 을 나타내는 것으로서 시계방향 타원 경로를 인식하도록 구성될 수도 있다. 따라서, 사용자들이 (화살표 (110) 에 의해 나타낸 바와 같이) 단일 연속 터치 이벤트에서 터치스크린 디스플레이 (102) 상에서 핑거 (108) 로 시계 방향에서 원을 트레이싱할 때, GUI 는 트레이싱된 경로의 길이에 의존하여 디스플레이된 맵 이미지를 확대하기 위한 커맨드로서 트레이싱된 경로를 해석할 것이다.
도 2 는 도 1 에 도시된 터치스크린 디스플레이상에서 단일 연속 터치 이벤트에서 사용자가 시계방향 원을 트레이싱한 이후의 결과적인 이미지를 도시한다. 이러한 예에서, 터치스크린 디스플레이 (102) 상의 맵 이미지는 빌딩 (I) 이 디스플레이된 맵 이미지에서 더 이상 볼 수 없고, 빌딩들 (A 및 B) 이 확대되어 나타나는 포인트로 확대되었다. 이미지의 확대는, 사용자들이 시계 방향으로 터치스크린 (104) 상에서 그들의 핑거들을 계속 이동하는 한 계속될 수도 있다.
도 3 에 도시된 바와 같은, 사용자가 터치스크린 또는 터치패드 (또는 컴퓨터 마우스) 상에서 핑거의 움직임을 중지하거나 터치스크린 또는 터치패드로부터 핑거를 들어올림으로써 (또는 마우스 버튼을 해제함으로써) 연속 터치 이벤트를 종료할 때, 줌 기능은 현재의 세팅에서 이미지 확대를 유지하고, 이미지 디스플레이를 그대로 둔다. 따라서, 사용자가 이미지 사이즈 또는 줌 팩터를 원하는 레벨로 조정하면, 사용자는 원형 모션을 중지하거나 터치스크린 (102) (또는 터치패드 또는 컴퓨터 마우스 버튼) 에서 핑거 (108) 를 들어올린다. 그 후, 이미지는, 사용자가 연속 터치 이벤트를 확립하고 (즉, 터치스크린 또는 터치패드를 터치하거나 마우스 버튼을 클릭하고) 폐쇄 경로를 트레이싱함으로써 연속 줌 동작을 다시 실행할 때까지 최종 확대 또는 줌 레벨에서 유지된다.
도 3 은 사용자가 경로 트레이싱을 중지하지만 터치스크린을 계속 터치할 때 이미지가 어떻게 나타날 수도 있는지를 또한 예시한다는 것에 유의한다. 그렇게 하여 현재의 확대에서 줌 기능을 중지한다. 그 후, 사용자는 시계 방향에서 원형 경로를 트레이싱하거나, 도 4 내지 도 6 을 참조하여 이하 더욱 완벽하게 설명되는 바와 같이 반시계방향 원형 경로를 트레이싱함으로써 계속 줌 인할 수도 있다.
도 4 는 반시계 방향에서 사용자가 원형 경로를 트레이싱함으로써 터치스크린 디스플레이 (102) 를 갖는 컴퓨팅 디바이스 (100) 의 줌-아웃 기능을 예시한다. 디스플레이 이미지에 적용된 확대를 감소시키기 위해 (즉, 줌 아웃), 사용자는 예를 들어, 핑거 (108) 를 사용하여 터치스크린 (102) 을 터치할 수 있고, 표면을 터치하면서, 반시계 방향으로 원형 또는 타원형 경로를 트레이싱하도록 이동시킬 수 있다. 점선 화살표 (110) 는 사용자가 행할 수도 있는 움직임의 방향 및 형상을 나타내고, 이러한 실시형태에서 디스플레이되는 이미지를 나타내는 것으로 의도되지 않는다. 도 5 는 도 4 에 도시된 터치스크린 디스플레이 (102) 상의 단일 연속 터치 이벤트에서 사용자가 반시계 방향 원을 트레이싱한 이후의 결과적인 이미지를 도시한다. 도 5 에 도시되어 있는 바와 같이, 더 작은 스케일 (즉, 낮은 확대 또는 줌 팩터) 맵 이미지는 도 4 에 도시된 시작 디스플레이 스크린상에서는 식별할 수 없는 거리 및 빌딩을 포함한다. 도 5 에서, 맵 이미지는 예를 들어, 도 4 에 도시된 이미지에서는 볼 수 없는 빌딩들 (C, D, E, F, G 및 H) 을 포함한다. 줌 기능은 사용자가 단일 연속 터치 이벤트에서 반시계방향 원형 경로를 계속 트레이싱하는 한은 이미지에 적용된 확대를 계속 축소할 것이다. 도 6 에 도시된 바와 같이, 그 핑거 모션이 중지되거나 사용자가 터치스크린 (102) (또는 터치패드) 로부터 핑거를 제거하면, 줌 기능은 현재의 확대에서 정지된다.
대안의 실시형태에서, GUI 내의 줌 기능은 폐쇄 경로를 트레이싱하는데 있어서 사용자를 보조하기 위해 GUI 디스플레이내에 시각 보조물을 디스플레이하도록 구성될 수도 있다. 예를 들어, 도 7 에 예시된 바와 같이, 줌 기능이 (예를 들어, 트레이싱된 폐쇄 경로의 검출 또는 버튼 누름에 의해) 활성화될 때, 사용자가 이미지 확대를 변경하기 위해 트레이싱할 수 있는 형상을 예시하기 위해 줌 휠 (zoom wheel) (112) 이 디스플레이 (102) 상에 나타날 수도 있다. 줌 휠 (112) 은 증가된 (114) 확대 (즉, 줌-인) 또는 감소된 (116) 확대 (즉, 줌-아웃) 에 영향을 미치도록 트레이싱하는 방향들을 나타내는 표시자들을 포함할 수도 있다.
GUI 는 줌 휠 (112) 이 다수의 상이한 트리거에 응답하여 디스플레이되도록 구성될 수도 있다. 일 구현에서, 줌 휠 (112) 은 사용자의 핑거의 터치에 응답하여 터치스크린 디스플레이 (102) 상에 나타날 수도 있다. 이러한 경우에서, 줌 휠 (112) 은 줌 기능이 인에이블되고 사용자가 터치스크린 디스플레이 (102) 를 터치할 때 마다 나타날 수도 있다. 제 2 구현에서, 줌 휠 (112) 은 사용자 터치 및 터치스크린 (102) 또는 터치패드에 대한 압력 인가에 응답하여 나타날 수도 있다. 이러한 경우에서, 터치스크린 (102) (또는 터치패드) 을 단지 터치하고 형상을 트레이싱하는 것은, 줌 휠 (112) 이 나타나게 하지 않지만, 줌 휠 (112) 은 사용자가 터치스크린 (102) (또는 터치패드) 을 터치하고 누르는 경우에 나타난다. 도 8 에 예시된 제 3 구현에서, 사용자에 의해 눌려질 때 줌 휠 (112) 의 디스플레이를 개시하는 소프트 키 (114) 가 지정될 수도 있다. 이러한 경우에서, 사용자는 소프트 키 (114) 를 누름으로써 터치스크린 디스플레이 (102) 상에서 줌 휠 (112) 을 볼 수도 있고, 그 후, 줌-인 또는 줌-아웃하기 위한 방향에서 줌 휠 (112) 의 형상의 트레이싱을 시작하기 위해 터치스크린을 터치할 수도 있다. 제 4 구현에서, 줌 휠 (112) 은 휴대용 컴퓨팅 디바이스상에서 구현될 수도 있는 다른 음성 활성 기능들의 방식에서와 같이 음성 커맨드에 의해 활성화될 수도 있다. 이러한 경우에서, 사용자의 음성 커맨드가 수신되어 휴대용 컴퓨팅 디바이스 (100) 에 의해 인식될 때, 줌 휠 (112) 은 사용자에 대한 시각 보조물 또는 가이드로서 기능하도록 디스플레이 (102) 상에 제공된다.
상기 제공된 줌 휠 (112) 구현 설명은 연속 줌 기능의 일부로서 구현될 수도 있는 시각 보조물의 단지 하나의 예이다. 이와 같이, 이들 예들은 본 발명의 범위를 제한하는 것으로 의도되지 않는다. 또한, 줌 기능은 사용자가 알려진 방법들을 사용함으로써 그들 개별 선호도에 기초하여 기능의 디스플레이 및 다른 특징들을 변경할 수 있게 하도록 구성될 수도 있다. 예를 들어, 사용자들은 줌 휠 (112) 특징을 턴 오프할 수도 있거나 사용자가 예를 들어, 5 초 보다 많은 기간 동안 터치스크린 (104) 상의 일 장소에서 핑거를 터치하여 홀딩할 때만 줌 휠 (112) 을 나타내도록 줌 기능을 구성할 수도 있다.
연속 줌 기능은 줌하기 위해 사용될 수도 있는 터치패드 또는 컴퓨터 마우스와 같은 개별 포인팅 디바이스를 이용하는 컴퓨팅 디바이스상에서 구현될 수도 있다. 이러한 실시형태의 디스플레이 (104) 가 도 9 에 예시된다. 통상의 GUI 소프트웨어는 컴퓨터와의 사용자 상호작용을 용이하게 하기 위해 디스플레이 (104) 상에 제공된 화살표 (116) 와 같은 커서를 조작하기 위해 터치패드 또는 컴퓨터 마우스와 같은 포인팅 디바이스들로부터 수신된 입력들을 사용하도록 구성된다. 이러한 시스템상에서 연속 줌을 수행하기 위해, 사용자는 터치스크린 (102) 에 대해 상술한 바와 유사한 방식으로 디스플레이 (104) 상의 커서 (116) 로 경로 (110) 를 트레이싱하기 위해 포인팅 디바이스를 사용할 수도 있다. 예를 들어, 사용자는 폐쇄 경로를 트레이싱하면서 (점선 화살표 (110) 에 의해 표시된 바와 같이) 시계 방향으로 커서 (116) 를 이동시키도록 마우스를 조작하고 마우스 키를 홀딩 다운함으로써 이미지에 대해 줌-인할 수도 있다. 줌-인 기능은 커서가 이동되고 마우스 버튼이 눌려지는 한 계속될 수도 있다. 유사하게는, 사용자는 원 또는 유사한 폐쇄 경로를 트레이싱하면서 반시계 방향 (미도시) 으로 커서 (116) 를 이동시키도록 조작하고 마우스 키를 홀딩 다운함으로써 이미지에 대해 줌-아웃할 수도 있다.
대안의 실시형태 (개별적으로 도시되지 않음) 에서, 좌측 및 우측 마우스 키들이 줌-인 기능과 줌-아웃 기능 사이를 구별하기 위해 사용될 수도 있다. 예를 들어, 이러한 실시형태에서, 사용자는 좌측 마우스 키를 클릭하고 폐쇄 경로에서 커서 (116) 를 이동시킴으로써 이미지에 대해 줌-인할 수도 있고, 우측 마우스 키를 클릭하고 폐쇄 경로에서 커서 (116) 를 이동시킴으로써 이미지에 대해 줌-아웃할 수도 있다. 모션들 및 키들의 다른 조합들이 또한 고려된다.
도 10 에 예시된 다른 실시형태에서, 줌 휠 (112) 은 사용자가 터치패드 또는 마우스와 같은 포인팅 디바이스를 사용하여 줌 기능을 수행하기 위해 커서 (116) 로 트레이싱할 수 있는 시각적 보조물로서 기능하도록 컴퓨터 디스플레이 (104) 에 제공될 수도 있다. 이러한 실시형태에서, 줌 기능 소프트웨어는 사용자가 예를 들어, 터치패드 또는 마우스 키를 누르고 홀딩할 때 디스플레이 (104) 상에 줌 휠 (112) 을 디스플레이하도록 구성될 수도 있다.
도 11 은 다양한 실시형태들을 구현하는데 사용하기에 적합한 컴퓨팅 디바이스 (100) 의 소프트웨어 및/또는 하드웨어 컴포넌트들의 시스템 블록도를 예시한다. 컴퓨팅 디바이스 (100) 는 터치면 (즉, 터치스크린 또는 터치패드) 과 같은 포인팅 디바이스 (101), 디스플레이 (104), 프로세서 (103) 및 메모리 디바이스 (105) 를 포함한다. 일부 컴퓨팅 디바이스들 (100) 에서, 포인팅 디바이스 (101) 와 디스플레이 (102) 는 터치스크린 (102) 과 같은 동일한 디바이스일 수도 있다. 터치 이벤트가 포인팅 디바이스 (101) 에 의해 검출되면, 터치의 포지션에 관한 정보가 근접 연속 기반으로 프로세서 (103) 에 제공된다. 프로세서 (103) 는 터치 정보를 수신하고 프로세싱하며, 포인팅 디바이스 (101) 로부터 수신된 터치 위치 정보의 인터럽트되지 않은 스트림과 같은 단일 연속 터치 이벤트를 인식하도록 프로그램될 수도 있다. 프로세서 (103) 는 또한, 예를 들어, 각 순간에 터치의 위치 및 시간을 통한 터치 위치의 움직임에 주의함으로써 단일 연속 터치 이벤트 동안 트레이싱된 경로를 인식하도록 구성될 수도 있다. 이러한 정보를 사용하여, 프로세서 (103) 는 트레이싱된 경로 길이 및 방향을 결정할 수 있고, 이러한 정보로부터 폐쇄 경로를 인식하고, 경로 길이에 기초하여 줌 스케일링 팩터를 계산한다. 프로세서 (103) 는 디스플레이될 이미지를 리사이징하기 위해 결정된 스케일링 팩터를 적용할 수 있고, 디스플레이 (102) 로 전송된 적합한 이미지 정보를 생성할 수 있다. 프로세서는 또한, 터치 이벤트들, 트레이싱된 경로 및 이미지 프로세싱 데이터에 관한 정보를 저장하기 위해 사용될 수도 있는 메모리 (105) 에 커플링될 수도 있다.
도 12 는 터치스크린 (102) 이 장착된 컴퓨팅 디바이스 (100) 상에 연속 줌 기능을 구현하는 실시형태 방법의 프로세스 흐름도이다. 컴퓨팅 디바이스 (100) 의 프로세서 (103) 는 예를 들어, 터치스크린 (102) 이 터치되고 있다는 것을 나타내는 인터럽트 또는 메시지의 형태로, 터치스크린 (102) 으로부터 터치 이벤트를 수신하도록 프로그램될 수도 있다 (단계 1200). 그 후, 프로세서 (103) 는 터치 이벤트가 새로운 터치로부터 수신되는지를 결정할 수도 있다 (결정 1202). 새로운 터치는, 이전의 사이클에서, 터치스크린 (102) 에 의해 보고된 터치 이벤트가 없는 경우에 표시될 것이다. 수신된 터치 이벤트가 새로운 터치로부터이면 (즉, 결정 1202 = "예"), 프로세서 (103) 는 새로운 경로 시작 위치를 결정하는 것 (단계 1204) 을 포함하는 터치 경로의 트랙킹을 시작하도록 프로그램될 수도 있다. 터치 이벤트가 새롭든지 아니든지, 프로세서는 터치스크린 (102) 으로부터 터치 위치 정보를 획득할 수도 있고, 터치 경로 데이터로서 메모리에 터치 위치 정보를 저장할 수도 있다 (단계 1206). 이러한 동작은 프로세서가 트레이싱된 경로 길이를 결정하기 위해 사용할 수 있는 데이터 구조로 터치의 위치를 메모리에 저장하는 것을 수반할 수도 있다. 프로세서 (103) 는 경로 데이터가 타원형 형상을 따르는지를 인식하도록 더 프로그램될 수도 있다 (단계 1208). 이러한 동작은 경로가 타원형 경로를 트레이싱하거나 디스플레이 중심 영역에 외접할 때를 인식하기 위해 기하학적 알고리즘을 사용하여 저장된 경로 데이터를 분석함으로써 달성될 수도 있다. 포인팅 디바이스를 사용하여 타원 타입 제스처를 인식하는 방법들이, 그 전체 내용이 참조로 여기에 포함되는 미국 특허 제 5,590,219 호에 개시되어 있다. 경로 데이터가 타원형 형상이 아니면 (즉, 결정 1208 = "아니오"), 프로세서 (103) 는 이미지 패닝 또는 스크롤링 기능들과 같이 정상 GUI 기능들을 계속할 수도 있다 (단계 1220).
경로 데이터가 타원형인 것으로 인식되면 (즉, 결정 1208 = "예"), 프로세서 (103) 는 트레이싱된 경로의 길이 (또는 디스플레이 중심 주위에 스팬된 라디안 또는 레볼루션들의 수) (단계 1209) 뿐만 아니라 트레이싱된 터치 경로의 방향 (단계 1210) 을 결정할 수도 있다. 이들 동작들은 경로를 따른 터치 위치 포인트들의 시퀀스의 길이 및 순서를 인식하는 저장된 경로 데이터를 분석함으로써 달성될 수도 있다. 경로 방향 정보를 사용하여, 프로세서 (103) 는 시계 방향과 반시계 방향 사이를 구별할 수도 있다 (단계 1212). 따라서, 터치 경로 이벤트의 방향이 시계 방향이면 (즉, 결정 1212 = "예"), 프로세서는 확대 또는 줌-인 스케일링 팩터를 계산하기 위해 결정된 경로 길이 (또는 레볼루션의 수) 를 사용한다 (단계 1214). 터치 경로 데이터가 반시계 방향을 나타내면 (즉, 결정 1212 = "아니오"), 프로세서는 축소 또는 줌-아웃 스케일링 팩터를 계산하기 위해 결정된 경로 길이 (또는 레볼루션의 수) 를 사용한다 (단계 1216). 스케일링 팩터가 단계 1214 또는 1216 에서 계산되면, 팩터는 디스플레이 (102) 상에 제공된 디스플레이 정보를 생성하기 위해 이미지 데이터에 적용된다 (단계 1218). 그 후, 이러한 프로세스는 단계 1200 으로 복귀함으로써 터치스크린 (102) 의 다음의 감지 및 보고 사이클로 계속된다.
도 13 은 트레이싱된 경로가 타원형 형상인지 결정하는 도 12 의 단계 1208 에 포함된 동작들을 구현하는 실시형태 방법의 프로세스 흐름도이다. 프로세서는 메모리에 저장된 경로 데이터에 액세스하고 (단계 1300), 작은 경로 세그먼트들 중에서 제거하거나 보간하기 위해 (즉, "평활화") 알려진 방법들을 사용하여 데이터를 프로세스한다 (단계 1302). 작은 세그먼트들이 평활화되면, 프로세서는 평활화된 경로 데이터가 최소 5개 포인트와 같은 적어도 최소 수의 포인트들을 포함하는 일련의 터치 위치들 (Q) 을 포함하는지 결정하기 위해 검사할 수도 있다 (단계 1304). 대안의 실시형태에서, 최소 수의 스트로크 포인트 어레이 (Q) 는 3, 10 또는 그 이상의 포인트일 수도 있다. Q 가 최소 수의 터치 포인트들을 포함하지 않으면 (즉, 결정 1304 = "아니오"), 경로 데이터 프로세싱은 정상 GUI 프로세싱과 같이 타원형 타입이 아닌 것처럼 계속될 수도 있다 (단계 1220 (도 12)). 그러나, 어레이 (Q) 가 최소 수의 포인트들을 포함하면 (즉, 결정 1304 = "예"), 프로세서는 메모리에 저장된 경로 데이터를 사용하여 트레이싱된 경로의 회전각 및 그 회전각의 도함수를 계산할 수도 있다 (단계 1306). 알려진 방법을 사용함으로써, 그 후 프로세서는 경로 데이터가 타원형을 실질적으로 나타내는지를 결정할 수도 있다 (결정 1308). 경로 데이터가 타원형을 실질적으로 나타내지 않으면 (즉, 결정 1308 = "아니오"), 경로 데이터는 타원형 형상을 구성하지 않는 것으로 가정되고 정상 GUI 프로세싱은 계속될 수도 있다 (단계 1220 (도 12)). 경로 데이터가 타원형 형상을 실질적으로 나타내면 (즉, 결정 1308 = "예"), 프로세스는 도 12 를 참조하여 상술한 단계 1210 으로 계속된다.
도 14 는 터치스크린 (102) 또는 다른 포인팅 디바이스를 장착한 컴퓨팅 디바이스 (100) 상에 디스플레이된 선택된 오브젝트들을 리사이징하는 대안의 실시형태 방법의 프로세스 흐름도이다. 이전에 설명한 실시형태들과 같이, 컴퓨팅 디바이스 (100) 의 프로세서 (103) 는 도 12 를 참조하여 상술한 바와 같이, 터치스크린 (102) 으로부터 새로운 터치 이벤트를 수신하고 인식하도록 프로그램될 수도 있다 (단계 1400). 그 후, 프로세서 (103) 는 디스플레이 내의 오브젝트가 현재 선택되는지 결정할 수도 있다 (결정 1402). 널리 알려진 바와 같이, 오브젝트는 예를 들어, 오브젝트를 더블 클릭하거나 더블 탭핑함으로써 GUI 내에서 선택될 수도 있다. 오브젝트가 선택되지 않으면 (즉, 결정 1402 = "아니오"), 프로세싱은 단계 1204 로 진행하는 것과 같이, 도 12 를 참조하여 상술한 바와 같이 계속될 수도 있다. 오브젝트가 선택되면 (즉, 결정 1402 = "예"), 프로세서 (103) 는 새로운 경로 시작 위치를 결정하는 것을 포함하는 터치 경로의 트랙킹을 시작하도록 프로그램될 수도 있다 (단계 1404). 프로세서는 터치스크린 (102) 으로부터 터치 위치 정보를 획득할 수도 있고 그 터치 위치 정보를 터치 경로 데이터로서 메모리에 저장할 수도 있다 (단계 1406). 이러한 동작은 프로세서가 트레이싱된 경로 길이를 결정하기 위해 사용할 수 있는 데이터 구조로 터치의 위치를 메모리에 저장하는 것을 수반할 수도 있다. 프로세서는 경로 데이터가 타원형 형상을 따르는지 인식하도록 더 프로그램될 수도 있다 (단계 1408). 상술한 바와 같이, 이러한 동작은 경로가 타원형 경로를 트레이싱하거나 디스플레이 중심 영역에 외접할 때를 인식하기 위해 기하학적 알고리즘을 사용하여 저장된 경로 데이터를 분석함으로써 달성될 수도 있다. 경로 데이터가 타원형 형상이 아니면 (즉, 결정 1408 = "아니오"), 프로세서 (103) 는 오브젝트 움직임 기능들과 같이, 정상 GUI 기능들을 계속할 수도 있다 (단계 1220).
경로 데이터가 타원형인 것으로 인식되면 (즉, 결정 1408 = "예"), 프로세서 (103) 는 트레이싱된 경로의 길이 (또는 디스플레이 중심 주위에 스팬된 라디안 또는 레볼루션들의 수) (단계 1409) 뿐만 아니라 트레이싱된 터치 경로의 방향 (단계 1410) 을 결정할 수도 있다. 이들 동작들은 경로를 따른 터치 위치 포인트들의 시퀀스의 길이 및 순서를 인식하는 저장된 경로 데이터를 분석함으로써 달성될 수도 있다. 경로 방향 정보를 사용하여, 프로세서 (103) 는 시계 방향과 반시계 방향 사이를 구별할 수도 있다 (단계 1412). 따라서, 터치 경로 이벤트의 방향이 시계 방향이면 (즉, 결정 1412 = "예"), 프로세서는 포지티브 오브젝트 스케일링 팩터를 계산하기 위해 결정된 경로 길이 (또는 레볼루션의 수) 를 사용한다 (단계 1414). 이러한 오브젝트 스케일링 팩터는 선택된 오브젝트가 사이즈에서 얼마나 많이 증가되어야 하는지 결정하기 위해 GUI 에 의한 것이다. 터치 경로 데이터가 반시계 방향을 나타내면 (즉, 결정 1212 = "아니오"), 프로세서는 네거티브 오브젝트 스케일링 팩터를 계산하기 위해 결정된 경로 길이 (또는 레볼루션의 수) 를 사용한다 (단계 1416). 이러한 오브젝트 스케일링 팩터는 선택된 오브젝트가 사이즈에서 얼마나 많이 증가되어야 하는지 결정하기 위해 GUI 에 의한 것이다. 오브젝트 스케일링 팩터가 단계 1414 또는 1416 에서 계산되면, 팩터는 애플리케이션내에서 그 사이즈를 변경하기 위해 선택된 오브젝트에 적용되고, 새로운 사이즈가 디스플레이 (102) 상에 제공된 디스플레이 정보를 업데이트하기 위해 사용된다 (단계 1418). 그 후, 이러한 프로세스는 단계 1400 으로 복귀함으로써 터치스크린 (102) 의 다음의 감지 및 보고 사이클로 계속된다.
도면들 및 상술한 설명들은 시계방향 경로 트레이스가 줌-인 또는 확대 커맨드로서 해석되고, 반시계 방향 경로 트레이스가 줌-아웃 또는 축소 커맨드로서 (또는 일 실시형태에서는, 포지티브 오브젝트 스케일링 팩터 또는 네거티브 오브젝트 스케일링 팩터로서) 해석되는 예시적인 실시형태를 다룬다. 그러나, 본 발명 및 청구범위는 시계방향 경로 트레이스가 줌-아웃 또는 축소 커맨드로서 해석되고 시계방향 경로 트레이스가 줌-인 또는 확대 커맨드로서 해석되는 실시형태를 포함한다. 따라서, 이러한 대안의 실시형태에서, 프로세서가 시계방향 회전을 갖는 타원형 경로를 검출할 때, 프로세서는 컨텐츠 (예를 들어, 문서 또는 이미지) 에 적용되는 축소 스케일링 팩터를 계산하여 디스플레이상에 이미지를 생성하고, 프로세서가 반시계방향 회전을 갖는 타원형 경로를 검출할 때, 프로세서는 컨텐츠 (예를 들어, 문서 또는 이미지) 에 적용되는 확대 스케일링 팩터를 계산하여 디스플레이상에 이미지를 생성한다. 다른 실시형태에서, 회전의 방향 (즉, 시계방향 또는 반시계방향) 과 관련된 줌 팩터는 사용자 선택가능한 옵션으로서 선택될 수도 있어서, 사용자는 시계 방향 회전이 이미지 확대 (줌-인) 또는 축소 (줌-아웃) 를 발생시키는지 결정할 수 있다.
상술한 실시형태들은 임의의 다양한 휴대용 컴퓨팅 디바이스들 (100) 상에서 구현될 수도 있다. 통상적으로, 이러한 휴대용 컴퓨팅 디바이스들은 도 15 에 예시된 컴포넌트들을 공통으로 가질 것이다. 예를 들어, 휴대용 컴퓨팅 디바이스들 (100) 은 내부 메모리 (105) 에 커플링된 프로세서 (103) 및 터치스크린 입력 디바이스 (102) 또는 디스플레이 (102) 를 포함한다. 터치스크린 입력 디바이스 (102) 는 저항성 감지 터치스크린, 용량성 감지 터치스크린, 적외선 감지 터치스크린, 음향/압전 감지 터치스크린 등과 같은 임의의 타입의 터치스크린일 수 있다. 다양한 양태들은 임의의 특정한 타입의 터치스크린 또는 터치패드 기술에 한정되지 않는다. 추가로, 휴대용 컴퓨팅 디바이스 (100) 는 무선 데이터 링크에 접속되는 전자기 방사를 전송 및 수신하는 안테나 (134) 및/또는 프로세서 (103) 에 커플링된 셀룰러 전화 트랜시버 (135) 를 가질 수도 있다. 몇몇 구현들에서, 셀룰러 전화 통신을 위해 사용된 트랜시버 (135) 및 프로세서 (103) 와 메모리 (105) 의 부분들을, 이것이 무선 데이터 링크를 통한 데이터 인터페이스를 제공하기 때문에 공중 인터페이스라 칭한다. 터치스크린 입력 디바이스 (102) 를 포함하지 않는 (통상적으로, 디스플레이 (104) 를 포함하는) 휴대용 컴퓨팅 디바이스들 (100) 는, 디스플레이 (100) 내에 커서를 포지셔닝하는 사용자 입력들을 수신하는 포인팅 디바이스들로서 기능하는 키패드 (136) 또는 미너어처 키보드 및 메뉴 선택 키들 또는 락커 스위치들 (137) 을 통상적으로 포함한다. 프로세서 (103) 는 프로세서 (103) 를 외부 포인팅 디바이스 (예를 들어, 터치패드 또는 컴퓨터 마우스) 또는 개인 컴퓨터 (160) 와 같은 컴퓨팅 디바이스 또는 외부 로컬 영역 네트워크에 접속하는 유니버셜 시리얼 버스 (USB) 또는 FireWire？ 커넥터 소켓과 같은 유선 네트워크 인터페이스 (138) 에 또한 접속될 수도 있다.
몇몇 구현들에서, 터치면은 터치스크린 (102) 또는 디스플레이 (104) 의 외부의 전자 디바이스 (100) 의 영역들에 제공될 수 있다. 예를 들어, 키패드 (136) 는 매립형 용량성 터치 센서들을 갖는 터치면을 포함할 수 있다. 다른 구현들에서, 키패드 (136) 가 제거될 수도 있어서, 터치스크린 (102) 은 완벽한 GUI 를 제공한다. 또 다른 구현들에서, 터치면은 프로세서 (103) 에 커플링된 무선 트랜시버 (예를 들어, 트랜시버 (135)) 또는 케이블 커넥터 (138) 에 대한 케이블에 의해 전자 디바이스 (100) 에 접속될 수 있는 외부 터치패드일 수도 있다.
프로세서 (103) 는 상술한 다양한 실시형태의 기능들을 포함하는 다양한 기능들을 수행하기 위해 소프트웨어 명령들 (애플리케이션들) 에 의해 구성될 수도 있는 임의의 프로그램가능한 마이크로프로세서, 마이크로컴퓨터 또는 다중의 프로세서 칩 또는 칩들일 수도 있다. 몇몇 휴대용 컴퓨팅 디바이스들 (100) 에서, 무선 통신 기능에 전용된 하나의 프로세서 및 다른 애플리케이션을 구동하는데 전용된 하나의 프로세서와 같은 다중의 프로세서들 (103) 이 제공될 수도 있다. 프로세서는 또한, 통신 칩세트의 일부로서 포함될 수도 있다. 통상적으로, 소프트웨어 애플리케이션들은, 이들이 프로세서 (103) 에 액세스되고 로딩되기 이전에 내부 메모리 (105) 에 저장될 수도 있다. 몇몇 휴대용 컴퓨팅 디바이스들 (100) 에서, 프로세서 (103) 는 애플리케이션 소프트웨어 명령들을 저장하는데 충분한 내부 메모리를 포함할 수도 있다. 이러한 설명의 목적을 위해, 용어 메모리는 내부 메모리 (105) 및 프로세서 (103) 자체내의 메모리를 포함하는 프로세서 (103) 에 의해 액세스가능한 모든 메모리를 칭한다. 애플리케이션 데이터 파일들은 통상적으로 메모리 (105) 에 저장된다. 다수의 휴대용 컴퓨팅 디바이스들 (100) 에서, 메모리 (105) 는 휘발성 메모리 또는 플래시 메모리와 같은 비휘발성 메모리, 또는 양자의 혼합물일 수도 있다.
상술된 양태들은 또한, 도 16 에 예시된 개인 컴퓨터 (160) 와 같은 임의의 다양한 컴퓨팅 디바이스들상에 구현될 수도 있다. 이러한 개인 컴퓨터 (160) 는 통상적으로, 휘발성 메모리 (162) 및 디스크 드라이브 (163) 와 같은 대용량 비휘발성 메모리에 커플링된 프로세서 (161) 를 포함한다. 컴퓨터 (160) 는 프로세서 (161) 에 커플링된 플로피 디스크 드라이브 (164) 및 컴팩트 디스크 (CD) 드라이브 (165) 를 또한 포함할 수도 있다. 컴퓨터 디바이스 (160) 는 또한, 터치패드 (167) 와 같은 터치면 포인팅 디바이스, 키보드 (168) 와 같은 사용자 입력 디바이스, 및 디스플레이 (169) 를 포함할 수도 있다. 컴퓨터 디바이스 (160) 는 또한 데이터 접속들을 확립하거나 네트워크에 프로세서 (161) 를 커플링하기 위해 USB 또는 Firwire？ 커넥터 소켓들 또는 다른 네트워크 접속 회로들 (166) 과 같은 외부 메모리 디바이스들을 수용하는 프로세서 (161) 에 커플링된 다수의 커넥터 포트들을 포함할 수도 있다. 노트북 구성에서, 컴퓨터 하우징은 컴퓨터 분야에 널리 공지되어 있는 바와 같은 터치패드 (167), 키보드 (168) 및 디스플레이 (169) 를 포함한다.
다양한 양태들은 설명된 방법들 중 하나 이상을 구현하도록 구성된 소프트웨어 명령들을 실행하는 컴퓨터 프로세서 (103, 161) 에 의해 구현될 수도 있다. 이러한 소프트웨어 명령들은 개별 애플리케이션들로서, 또는 실시형태 방법을 구현하는 컴파일된 소프트웨어로서 메모리 (105, 162, 163) 에 저장될 수도 있다. 또한, 소프트웨어 명령들은, 랜덤 액세스 메모리 (105, 162), 하드 디스크 메모리 (163), 플로피 디스크 (플로피 디스크 드라이브 (164) 에서 판독가능), 컴팩트 디스크 (CD 드라이브 (165) 에서 판독가능), 전기적으로 소거가능/프로그램가능한 판독 전용 메모리 (EEPROM), 판독 전용 메모리 (예를 들어, 플래시 메모리), 및/또는 외부 메모리 칩과 같은 컴퓨팅 디바이스 (100, 160) 에 플러그된 메모리 모듈 (미도시) 또는 USB 네트워크 포트 (166) 에 플러그된 USB 접속가능 외부 메모리 (예를 들어, "플래시 드라이브") 를 포함하는 임의의 형태의 유형의 프로세서 판독가능한 메모리상에 저장될 수도 있다.
당업자는, 여기에 개시된 양태들과 관련하여 설명된 다양한 예시적인 논리 블록들, 모듈들, 회로들, 및 알고리즘 단계들이 전자 하드웨어, 컴퓨터 소프트웨어, 또는 양자의 조합으로서 구현될 수도 있다는 것을 이해할 것이다. 하드웨어와 소프트웨어의 이러한 상호교환성을 명백하게 예시하기 위해, 다양한 예시적인 컴포넌트들, 블록들, 모듈들 회로들, 및 단계들이 그들의 기능과 관련하여 일반적으로 상술되었다. 이러한 기능이 하드웨어 또는 소프트웨어로서 구현될지는 전체 시스템에 부과된 설계 제약들 및 특정한 애플리케이션에 의존한다. 당업자는 각 특정한 애플리케이션에 대해 변화하는 방식으로 설명된 기능을 구현할 수도 있지만, 이러한 구현 결정이 본 발명의 범위를 벗어나는 것으로서 해석되어서는 안된다.
상술되고 도면에 도시된 방법의 블록들이 몇몇 블록들의 순서로서만 단지 예시적인 목적인 순서가 본 발명의 사상 및 범위 및 청구항을 벗어나지 않고 여기에 설명된 것으로부터 변경될 수도 있다.
여기에 개시된 양태들과 관련하여 설명된 방법 또는 알고리즘의 블록들은 하드웨어, 프로세서에 의해 실행된 소프트웨어 모듈, 또는 2개의 조합에서 직접적으로 구현될 수도 있다. 소프트웨어 모듈은 임의의 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드 디스크, 착탈식 디스크, CD-ROM, 또는 당업계에 알려진 임의의 다른 형태의 저장 매체일 수도 있는 프로세서 판독가능한 메모리에 상주할 수도 있다. 예시적인 저장 매체가 프로세서에 커플링되어서, 프로세서는 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기입할 수 있다. 대안으로, 저장 매체는 프로세서와 일체형일 수도 있다. 프로세서 및 저장 매체는 ASIC 에 상주할 수도 있다. ASIC 는 사용자 단말기 또는 컴퓨팅 디바이스에 상주할 수도 있다. 다르게는, 프로세서 및 저장 매체는 사용자 단말기 또는 컴퓨팅 디바이스에 개별 컴포넌트들로서 상주할 수도 있다. 추가로, 몇몇 양태들에서, 방법 또는 알고리즘의 블록들 및/또는 액션들은 컴퓨터 프로그램 제품으로 포함될 수도 있는 머신 판독가능한 매체 및/또는 컴퓨터 판독가능한 매체상에 코드들 및/또는 명령들의 하나 또는 임의의 조합 또는 세트로서 상주할 수도 있다.
다양한 양태들의 상술한 설명은 당업자가 본 발명을 제조하거나 사용할 수 있게 하기 위해 제공된다. 이들 양태들에 대한 다양한 변경물들이 당업자에게는 쉽게 명백할 것이고, 여기에 정의된 일반 원리들은 본 발명의 사상 또는 범위를 벗어나지 않고 다른 양태들에 적용될 수도 있다. 따라서, 본 발명은 여기에 나타낸 양태들을 제한하는 것으로 의도되지 않고, 대신에 청구범위는 여기에 개시된 신규한 특징들 및 원리들에 부합하는 최광의 범위를 부여해야 한다.

Claims (48)

  1. 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법으로서,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 단계;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 단계;
    상기 경로 이벤트의 길이를 결정하는 단계;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 줌 스케일링 팩터를 계산하는 단계; 및
    상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 단계를 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  2. 제 1 항에 있어서,
    상기 줌 스케일링 팩터를 계산하는 단계 및 상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 단계는, 상기 경로 이벤트가 타원형 형상을 트레이싱한다는 것이 결정되는 경우에만 실시되는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  3. 제 1 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 단계를 더 포함하고,
    상기 줌 스케일링 팩터를 계산하는 단계는, 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 확대 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 축소 팩터를 계산하는 단계를 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  4. 제 1 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 단계를 더 포함하고,
    상기 줌 스케일링 팩터를 계산하는 단계는, 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 축소 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 확대 팩터를 계산하는 단계를 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  5. 제 1 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 단계를 더 포함하고,
    상기 줌 스케일링 팩터를 계산하는 단계는, 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 사용자 정의 세팅에 의존하여 확대 팩터 또는 축소 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 상기 사용자 정의 세팅에 의존하여 축소 팩터 또는 확대 팩터를 계산하는 단계를 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  6. 제 1 항에 있어서,
    상기 경로 이벤트는 터치스크린 및 터치패드 중 하나로부터 연속의 일련의 터치 이벤트들을 수신하는 것을 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  7. 제 1 항에 있어서,
    상기 경로 이벤트는 포인팅 디바이스상의 버튼이 눌려져 있는 동안 상기 포인팅 디바이스로부터의 입력들에 기초하여 연속의 일련의 커서 위치들을 수신하는 것을 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  8. 제 1 항에 있어서,
    상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 단계를 더 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  9. 제 1 항에 있어서,
    상기 경로 이벤트가 타원형 형상을 트레이싱한다는 결정에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 단계를 더 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  10. 제 1 항에 있어서,
    버튼 누름 이벤트에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 단계를 더 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  11. 제 1 항에 있어서,
    터치면 사용자 인터페이스 디바이스의 누름에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 단계를 더 포함하는, 컴퓨팅 디바이스상에 줌 기능을 제공하는 방법.
  12. 컴퓨팅 디바이스로서,
    프로세서;
    상기 프로세서에 커플링된 사용자 인터페이스 포인팅 디바이스;
    상기 프로세서에 커플링된 메모리; 및
    상기 프로세서에 커플링된 디스플레이를 포함하고,
    상기 프로세서는,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 단계;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 단계;
    상기 경로 이벤트의 길이를 결정하는 단계;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 줌 스케일링 팩터를 계산하는 단계; 및
    상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 단계
    를 수행하도록 구성되는, 컴퓨팅 디바이스.
  13. 제 12 항에 있어서,
    상기 프로세서는, 상기 줌 스케일링 팩터를 계산하는 단계 및 상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 단계가 상기 경로 이벤트가 타원형 형상을 트레이싱한다는 것이 결정되는 경우에만 실시되도록 구성되는, 컴퓨팅 디바이스.
  14. 제 12 항에 있어서,
    상기 프로세서는, 상기 경로 이벤트의 방향을 결정하는 것을 포함하는 추가의 단계들을 수행하도록 구성되고,
    상기 프로세서는, 상기 줌 스케일링 팩터를 계산하는 단계가 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 확대 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 축소 팩터를 계산하는 단계를 포함하도록 구성되는, 컴퓨팅 디바이스.
  15. 제 12 항에 있어서,
    상기 프로세서는, 상기 경로 이벤트의 방향을 결정하는 것을 포함하는 추가의 단계들을 수행하도록 구성되고,
    상기 프로세서는, 상기 줌 스케일링 팩터를 계산하는 단계가 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 축소 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 확대 팩터를 계산하는 단계를 포함하도록 구성되는, 컴퓨팅 디바이스.
  16. 제 12 항에 있어서,
    상기 프로세서는, 상기 경로 이벤트의 방향을 결정하는 것을 포함하는 추가의 단계들을 수행하도록 구성되고,
    상기 프로세서는, 상기 줌 스케일링 팩터를 계산하는 단계가 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 사용자 정의 세팅에 의존하여 확대 팩터 또는 축소 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 상기 사용자 정의 세팅에 의존하여 축소 팩터 또는 확대 팩터를 계산하는 단계를 포함하도록 구성되는, 컴퓨팅 디바이스.
  17. 제 12 항에 있어서,
    상기 사용자 인터페이스 포인팅 디바이스는 터치스크린 및 터치패드 중 하나를 포함하고, 상기 프로세서는 상기 사용자 인터페이스 포인팅 디바이스로부터의 연속의 일련의 터치 이벤트들의 수신에 기초하여 상기 경로 이벤트를 검출하도록 구성되는, 컴퓨팅 디바이스.
  18. 제 12 항에 있어서,
    상기 프로세서는, 포인팅 디바이스상의 버튼이 눌려져 있는 동안 상기 포인팅 디바이스로부터의 입력들에 기초하여 연속의 일련의 커서 위치들의 수신에 기초하여 상기 경로 이벤트를 검출하도록 구성되는, 컴퓨팅 디바이스.
  19. 제 12 항에 있어서,
    상기 프로세서는 상기 디스플레이상에 타원 형상의 시각 보조물을 디스플레이하는 것을 포함하는 추가의 단계들을 수행하도록 구성되는, 컴퓨팅 디바이스.
  20. 제 12 항에 있어서,
    상기 프로세서는, 상기 경로 이벤트가 타원형 형상을 트레이싱한다는 결정에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 것을 포함하는 추가의 단계들을 수행하도록 구성되는, 컴퓨팅 디바이스.
  21. 제 12 항에 있어서,
    상기 프로세서는, 버튼 누름 이벤트에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 것을 포함하는 추가의 단계들을 수행하도록 구성되는, 컴퓨팅 디바이스.
  22. 제 12 항에 있어서,
    상기 프로세서는, 터치면 사용자 인터페이스 디바이스의 누름에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 것을 포함하는 추가의 단계들을 수행하도록 구성되는, 컴퓨팅 디바이스.
  23. 컴퓨팅 디바이스로서,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 수단;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 수단;
    상기 경로 이벤트의 길이를 결정하는 수단;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 줌 스케일링 팩터를 계산하는 수단; 및
    상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 수단을 포함하는, 컴퓨팅 디바이스.
  24. 제 23 항에 있어서,
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 수단이 상기 경로 이벤트가 타원형 형상을 트레이싱한다는 것을 결정하는 경우에만, 상기 줌 스케일링 팩터를 계산하는 수단 및 상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 수단을 구현하는, 컴퓨팅 디바이스.
  25. 제 23 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 수단을 더 포함하고,
    상기 줌 스케일링 팩터를 계산하는 수단은, 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 확대 팩터를 계산하는 수단 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 축소 팩터를 계산하는 수단을 포함하는, 컴퓨팅 디바이스.
  26. 제 23 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 수단을 더 포함하고,
    상기 줌 스케일링 팩터를 계산하는 수단은, 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 축소 팩터를 계산하는 수단 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 확대 팩터를 계산하는 수단을 포함하는, 컴퓨팅 디바이스.
  27. 제 23 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 수단을 더 포함하고,
    상기 줌 스케일링 팩터를 계산하는 수단은, 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 사용자 정의 세팅에 의존하여 확대 팩터 또는 축소 팩터를 계산하는 수단 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 상기 사용자 정의 세팅에 의존하여 축소 팩터 또는 확대 팩터를 계산하는 수단을 포함하는, 컴퓨팅 디바이스.
  28. 제 23 항에 있어서,
    상기 사용자 인터페이스 디바이스는 터치스크린 및 터치패드 중 하나이고, 상기 경로 이벤트를 검출하는 수단은 상기 사용자 인터페이스 디바이스로부터 일련의 터치 이벤트들을 수신하고, 그로부터 경로를 결정하는 수단을 포함하는, 컴퓨팅 디바이스.
  29. 제 23 항에 있어서,
    상기 경로 이벤트를 검출하는 수단은, 포인팅 디바이스상의 버튼이 눌려져 있는 동안 상기 포인팅 디바이스로부터의 입력들에 기초하여 연속의 일련의 커서 위치들을 수신하고, 그로부터 경로를 결정하는 수단을 포함하는, 컴퓨팅 디바이스.
  30. 제 23 항에 있어서,
    상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 수단을 더 포함하는, 컴퓨팅 디바이스.
  31. 제 23 항에 있어서,
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 수단이, 상기 경로 이벤트가 타원형 형상을 트레이싱한다는 것을 결정하는 것에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 수단을 더 포함하는, 컴퓨팅 디바이스.
  32. 제 23 항에 있어서,
    버튼 누름 이벤트에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 수단을 더 포함하는, 컴퓨팅 디바이스.
  33. 제 23 항에 있어서,
    상기 사용자 인터페이스 디바이스는 터치면 사용자 인터페이스 디바이스이고,
    상기 터치면 사용자 인터페이스 디바이스의 누름에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 수단을 더 포함하는, 컴퓨팅 디바이스.
  34. 컴퓨팅 디바이스의 프로세서로 하여금,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 단계;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 단계;
    상기 경로 이벤트의 길이를 결정하는 단계;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 줌 스케일링 팩터를 계산하는 단계; 및
    상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 단계를 수행하게 하는 프로세서 실행가능한 소프트웨어 명령들이 저장된, 유형의 저장 매체.
  35. 제 34 항에 있어서,
    상기 줌 스케일링 팩터를 계산하는 단계 및 상기 줌 스케일링 팩터를 사용하여 디스플레이상에 이미지를 생성하는 단계가, 상기 경로 이벤트가 타원형 형상을 트레이싱한다는 것이 결정되는 경우에만 실시되도록 프로세서 실행가능한 명령들이 저장된, 유형의 저장 매체.
  36. 제 34 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 것을 포함하는 추가의 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있고,
    상기 프로세서 실행가능한 명령들은, 상기 줌 스케일링 팩터를 계산하는 단계가 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 확대 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 축소 팩터를 계산하는 단계를 포함하도록 구성되는, 유형의 저장 매체.
  37. 제 34 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 것을 포함하는 추가의 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있고,
    상기 프로세서 실행가능한 명령들은, 상기 줌 스케일링 팩터를 계산하는 단계가 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 축소 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 확대 팩터를 계산하는 단계를 포함하도록 구성되는, 유형의 저장 매체.
  38. 제 34 항에 있어서,
    상기 경로 이벤트의 방향을 결정하는 것을 포함하는 추가의 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있고,
    상기 프로세서 실행가능한 명령들은, 상기 줌 스케일링 팩터를 계산하는 단계가 상기 경로 이벤트의 상기 결정된 방향이 시계방향이면 사용자 정의 세팅에 의존하여 확대 팩터 또는 축소 팩터를 계산하는 단계 및 상기 경로 이벤트의 상기 결정된 방향이 반시계방향이면 상기 사용자 정의 세팅에 의존하여 축소 팩터 또는 확대 팩터를 계산하는 단계를 포함하도록 구성되는, 유형의 저장 매체.
  39. 제 34 항에 있어서,
    터치스크린 및 터치패드 중 하나로부터의 연속의 일련의 터치 이벤트들의 수신에 기초하여 상기 경로 이벤트를 검출하는 것을 더 포함하는 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있는, 유형의 저장 매체.
  40. 제 34 항에 있어서,
    포인팅 디바이스상의 버튼이 눌려져 있는 동안 상기 포인팅 디바이스로부터의 입력들에 기초하여 연속의 일련의 커서 위치들의 수신에 기초하여 상기 경로 이벤트를 검출하는 것을 더 포함하는 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있는, 유형의 저장 매체.
  41. 제 34 항에 있어서,
    상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 것을 더 포함하는 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있는, 유형의 저장 매체.
  42. 제 34 항에 있어서,
    상기 경로 이벤트가 타원형 형상을 트레이싱한다는 결정에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 것을 더 포함하는 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있는, 유형의 저장 매체.
  43. 제 34 항에 있어서,
    버튼 누름 이벤트에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 것을 더 포함하는 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있는, 유형의 저장 매체.
  44. 제 34 항에 있어서,
    터치면 사용자 인터페이스 디바이스의 누름에 응답하여 상기 디스플레이상에 타원형 형상의 시각 보조물을 디스플레이하는 것을 더 포함하는 단계들을 수행하기 위한 프로세서 실행가능한 명령들이 더 저장되어 있는, 유형의 저장 매체.
  45. 컴퓨팅 디바이스상에 디스플레이된 오브젝트를 리사이징 (resizing) 하는 방법으로서,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 단계;
    오브젝트가 선택되는지 결정하는 단계;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 단계;
    상기 경로 이벤트의 길이를 결정하는 단계;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 오브젝트 스케일링 팩터를 계산하는 단계; 및
    상기 오브젝트 스케일링 팩터에 기초하여 상기 선택된 오브젝트를 리사이징하는 단계를 포함하는, 오브젝트를 리사이징하는 방법.
  46. 컴퓨팅 디바이스로서,
    프로세서;
    상기 프로세서에 커플링된 사용자 인터페이스 포인팅 디바이스;
    상기 프로세서에 커플링된 메모리; 및
    상기 프로세서에 커플링된 디스플레이를 포함하고,
    상기 프로세서는,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 단계;
    오브젝트가 선택되는지 결정하는 단계;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 단계;
    상기 경로 이벤트의 길이를 결정하는 단계;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 오브젝트 스케일링 팩터를 계산하는 단계; 및
    상기 오브젝트 스케일링 팩터에 기초하여 상기 선택된 오브젝트를 리사이징하는 단계를 수행하도록 구성되는, 컴퓨팅 디바이스.
  47. 컴퓨팅 디바이스로서,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 수단;
    오브젝트가 선택되는지 결정하는 수단;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 수단;
    상기 경로 이벤트의 길이를 결정하는 수단;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 오브젝트 스케일링 팩터를 계산하는 수단; 및
    상기 오브젝트 스케일링 팩터에 기초하여 상기 선택된 오브젝트를 리사이징하는 수단을 포함하는, 컴퓨팅 디바이스.
  48. 컴퓨팅 디바이스의 프로세서로 하여금,
    사용자 인터페이스 디바이스상에서 경로 이벤트를 검출하는 단계;
    오브젝트가 선택되는지 결정하는 단계;
    상기 경로 이벤트가 타원형 형상을 트레이싱하는지 결정하는 단계;
    상기 경로 이벤트의 길이를 결정하는 단계;
    상기 경로 이벤트의 상기 결정된 길이에 기초하여 오브젝트 스케일링 팩터를 계산하는 단계; 및
    상기 오브젝트 스케일링 팩터에 기초하여 상기 선택된 오브젝트를 리사이징하는 단계
    를 수행하게 하는 프로세서 실행가능한 소프트웨어 명령들이 저장된, 유형의 저장 매체.
KR1020127000764A 2009-06-10 2010-06-10 연속 줌 기능을 제공하는 사용자 인터페이스 방법들 KR101384857B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/482,158 2009-06-10
US12/482,158 US8823749B2 (en) 2009-06-10 2009-06-10 User interface methods providing continuous zoom functionality
PCT/US2010/038207 WO2010144726A1 (en) 2009-06-10 2010-06-10 User interface methods providing continuous zoom functionality

Publications (2)

Publication Number Publication Date
KR20120027516A true KR20120027516A (ko) 2012-03-21
KR101384857B1 KR101384857B1 (ko) 2014-04-25

Family

ID=42753466

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127000764A KR101384857B1 (ko) 2009-06-10 2010-06-10 연속 줌 기능을 제공하는 사용자 인터페이스 방법들

Country Status (6)

Country Link
US (1) US8823749B2 (ko)
EP (1) EP2440993A1 (ko)
JP (2) JP2012530291A (ko)
KR (1) KR101384857B1 (ko)
CN (2) CN107102790A (ko)
WO (1) WO2010144726A1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101307402B1 (ko) * 2012-04-16 2013-09-26 나비스오토모티브시스템즈 주식회사 네비게이션 장치 및 그의 화면 처리방법
KR20140071282A (ko) * 2012-09-29 2014-06-11 후아웨이 디바이스 컴퍼니 리미티드 표시된 대상의 줌을 제어하는 전자 기기 및 방법
KR20150008624A (ko) * 2013-07-15 2015-01-23 삼성전자주식회사 전자 기기 제어 방법 및 장치
KR20150057740A (ko) 2013-11-20 2015-05-28 삼성테크윈 주식회사 팬, 틸트, 줌 제어장치
US9268482B2 (en) 2012-09-17 2016-02-23 Huawei Device Co., Ltd. Touch operation processing method and terminal device
US9819856B2 (en) 2014-07-18 2017-11-14 Xiaomi Inc. Shooting parameter adjustment method and device

Families Citing this family (127)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050134578A1 (en) * 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
US20090136016A1 (en) * 2007-11-08 2009-05-28 Meelik Gornoi Transferring a communication event
US8723811B2 (en) * 2008-03-21 2014-05-13 Lg Electronics Inc. Mobile terminal and screen displaying method thereof
US8368667B2 (en) * 2008-06-26 2013-02-05 Cirque Corporation Method for reducing latency when using multi-touch gesture on touchpad
JP4636131B2 (ja) * 2008-07-04 2011-02-23 ソニー株式会社 情報提供装置、情報提供方法、およびプログラム
JP5093080B2 (ja) * 2008-12-05 2012-12-05 富士通モバイルコミュニケーションズ株式会社 携帯端末
US9141275B2 (en) * 2009-02-17 2015-09-22 Hewlett-Packard Development Company, L.P. Rendering object icons associated with a first object icon upon detecting fingers moving apart
JP5326802B2 (ja) * 2009-05-19 2013-10-30 ソニー株式会社 情報処理装置、画像拡大縮小方法及びそのプログラム
US8509954B2 (en) 2009-08-21 2013-08-13 Allure Energy, Inc. Energy management system and method
US8490013B2 (en) * 2009-07-30 2013-07-16 Atmel Corporation Method and apparatus for single touch zoom using spiral rotation
US8498749B2 (en) 2009-08-21 2013-07-30 Allure Energy, Inc. Method for zone based energy management system with scalable map interface
US9209652B2 (en) * 2009-08-21 2015-12-08 Allure Energy, Inc. Mobile device with scalable map interface for zone based energy management
US9838255B2 (en) 2009-08-21 2017-12-05 Samsung Electronics Co., Ltd. Mobile demand response energy management system with proximity control
US8380225B2 (en) 2009-09-14 2013-02-19 Microsoft Corporation Content transfer involving a gesture
US20110095993A1 (en) * 2009-10-26 2011-04-28 Adobe Systems Incorporated Zoom adjustment process
JP2011141753A (ja) * 2010-01-07 2011-07-21 Sony Corp 表示制御装置、表示制御方法及び表示制御プログラム
JP5160579B2 (ja) * 2010-03-08 2013-03-13 株式会社エヌ・ティ・ティ・ドコモ 表示装置及び画面表示方法
JP5494337B2 (ja) 2010-07-30 2014-05-14 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
KR20120015620A (ko) * 2010-08-12 2012-02-22 삼성전자주식회사 디스플레이 방법 및 장치
US20120050335A1 (en) * 2010-08-25 2012-03-01 Universal Cement Corporation Zooming system for a display
JP5658552B2 (ja) * 2010-12-20 2015-01-28 キヤノン株式会社 表示制御装置及びその制御方法、プログラム、及び記録媒体
US8830238B1 (en) 2011-01-05 2014-09-09 Google Inc. Display of shaded objects on computing device
KR101564955B1 (ko) 2011-03-08 2015-11-02 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 비디오 콘텐츠의 출력
US20120256846A1 (en) * 2011-04-05 2012-10-11 Research In Motion Limited Electronic device and method of controlling same
US20120256857A1 (en) * 2011-04-05 2012-10-11 Mak Genevieve Elizabeth Electronic device and method of controlling same
US8872773B2 (en) 2011-04-05 2014-10-28 Blackberry Limited Electronic device and method of controlling same
US9323415B2 (en) * 2011-06-29 2016-04-26 Nokia Technologies Oy Apparatus and associated methods related to touch sensitive displays
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
JP5318924B2 (ja) * 2011-08-22 2013-10-16 楽天株式会社 画像表示装置、画像表示方法、画像表示プログラム、及びそのプログラムを記録するコンピュータ読み取り可能な記録媒体
JP5341152B2 (ja) 2011-08-22 2013-11-13 楽天株式会社 データ処理装置、データ処理方法、データ処理プログラム、及びそのプログラムを記録するコンピュータ読み取り可能な記録媒体
CA2847360C (en) 2011-08-30 2020-03-24 Allure Energy, Inc. Resource manager, system, and method for communicating resource management information for smart energy and media resources
JP5576841B2 (ja) * 2011-09-09 2014-08-20 Ｋｄｄｉ株式会社 押圧による画像のズームが可能なユーザインタフェース装置、画像ズーム方法及びプログラム
CN102375689B (zh) * 2011-09-23 2016-03-30 上海量明科技发展有限公司 触摸屏操作的方法及系统
JP2013122738A (ja) * 2011-12-12 2013-06-20 Sony Computer Entertainment Inc 電子機器
TWI547858B (zh) * 2011-12-30 2016-09-01 富智康（香港）有限公司 於觸控螢幕上控制檔案縮放及旋轉的系統及方法
US20130263042A1 (en) * 2012-03-27 2013-10-03 Alexander Buening Method And System To Manage Multiple Applications and Corresponding Display Status On A Computer System Having A Touch Panel Input Device
JP2013206180A (ja) * 2012-03-28 2013-10-07 Kyocera Corp 電子機器および表示方法
JP5828297B2 (ja) 2012-04-24 2015-12-02 コニカミノルタ株式会社 情報処理装置、プログラム
US8928699B2 (en) * 2012-05-01 2015-01-06 Kabushiki Kaisha Toshiba User interface for page view zooming
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
JP6082458B2 (ja) 2012-05-09 2017-02-15 アップル インコーポレイテッド ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
EP2847661A2 (en) 2012-05-09 2015-03-18 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
KR101683868B1 (ko) 2012-05-09 2016-12-07 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
EP3410287B1 (en) 2012-05-09 2022-08-17 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169854A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
CN104220975B (zh) * 2012-05-10 2017-12-01 英特尔公司 用于响应手势捕捉图像的方法和设备
WO2013170341A1 (en) * 2012-05-18 2013-11-21 Research In Motion Limited Systems and methods to manage zooming
KR101964348B1 (ko) * 2012-05-18 2019-04-01 삼성전자주식회사 미디어 기기에서의 콘텐츠 정렬 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체
JP5944743B2 (ja) * 2012-05-23 2016-07-05 京セラ株式会社 携帯端末、表示制御プログラムおよび表示制御方法
JP6368455B2 (ja) * 2012-06-12 2018-08-01 京セラ株式会社 装置、方法、及びプログラム
KR101984673B1 (ko) * 2012-07-27 2019-05-31 삼성전자주식회사 복수 어플리케이션을 실행하는 디스플레이 장치 및 그 제어 방법
JP5550124B2 (ja) * 2012-08-17 2014-07-16 Ｎｅｃシステムテクノロジー株式会社 入力装置、機器、入力方法およびプログラム
US20140059489A1 (en) * 2012-08-21 2014-02-27 Amulet Technologies, Llc Rotate Gesture
CN103729128B (zh) * 2012-10-10 2017-12-22 腾讯科技（深圳）有限公司 一种摄像设备变换焦距的方法及装置
CN102929508B (zh) * 2012-10-11 2015-04-01 中兴通讯股份有限公司 一种电子地图触控方法和装置
US9361003B2 (en) 2012-10-18 2016-06-07 Dental Imaging Technologies Corporation Overlay maps for navigation of intraoral images
CN104956681A (zh) * 2012-11-09 2015-09-30 汤姆逊许可公司 手持显示器缩放特征
US9064168B2 (en) * 2012-12-14 2015-06-23 Hand Held Products, Inc. Selective output of decoded message data
CN103870030A (zh) * 2012-12-13 2014-06-18 联想(北京)有限公司 信息处理方法和电子设备
US11003351B2 (en) 2012-12-26 2021-05-11 Gree, Inc. Display processing method and information device
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
JP6093877B2 (ja) 2012-12-29 2017-03-08 アップル インコーポレイテッド 複数接触ジェスチャのために触知出力の生成を見合わせるためのデバイス、方法、及びグラフィカルユーザインタフェース
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
JP6097843B2 (ja) 2012-12-29 2017-03-15 アップル インコーポレイテッド コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
US9716530B2 (en) 2013-01-07 2017-07-25 Samsung Electronics Co., Ltd. Home automation using near field communication
GB2509541A (en) 2013-01-08 2014-07-09 Ibm Display tool with a magnifier with a crosshair tool.
US9507425B2 (en) * 2013-03-06 2016-11-29 Sony Corporation Apparatus and method for operating a user interface of a device
US10063499B2 (en) 2013-03-07 2018-08-28 Samsung Electronics Co., Ltd. Non-cloud based communication platform for an environment control system
US20140278786A1 (en) * 2013-03-14 2014-09-18 Twain Liu-Qiu-Yan System and method to survey and evaluate items according to people's perceptions and to generate recommendations based on people's perceptions
US20140325429A1 (en) * 2013-04-25 2014-10-30 Hung-Sen Chang Method for controlling the display of a document shown on a touch device
KR102134443B1 (ko) 2013-05-03 2020-07-15 삼성전자주식회사 전자 기기 및 제어 동작에 기초한 전자 기기의 화면 조작 방법
US9513702B2 (en) * 2013-07-15 2016-12-06 Lg Electronics Inc. Mobile terminal for vehicular display system with gaze detection
TWM467949U (zh) * 2013-07-25 2013-12-11 wen-fu Zhang 圖樣導向之觸控螢幕裝置
US9177362B2 (en) * 2013-08-02 2015-11-03 Facebook, Inc. Systems and methods for transforming an image
JP5892130B2 (ja) * 2013-08-30 2016-03-23 コニカミノルタ株式会社 表示装置、表示装置の制御方法、および表示装置の制御プログラム
DE102013017611A1 (de) * 2013-10-11 2015-04-16 Yilmaz Capat Modulweise erweiterbares, seitlich- und untereinander zusammensteckbares Smartphone
JP6291785B2 (ja) * 2013-10-23 2018-03-14 日本電気株式会社 情報処理装置、プログラム、および情報処理装置の操作処理方法
CN103699329B (zh) * 2013-12-31 2017-04-05 优视科技有限公司 页面缩放方法、装置及终端设备
MX363254B (es) 2014-01-06 2019-03-19 Samsung Electronics Co Ltd Star Sistema, dispositivo y aparato para coordinar ambientes que utilizan dispositivos de red e informacion de sensores remotos.
EP3092750B1 (en) 2014-01-06 2020-07-15 Samsung Electronics Co., Ltd. System, device, and apparatus for coordinating environments using network devices and remote sensory information
CN104765546A (zh) * 2014-01-07 2015-07-08 昆盈企业股份有限公司 输入系统及其操作方法
BR112016017474A2 (pt) * 2014-01-27 2018-05-08 Tactual Labs Co. estratégias dizimação para processamento de entrada de evento
WO2015130270A1 (en) * 2014-02-26 2015-09-03 Empire Technology Development Llc Photo and document integration
US10042529B2 (en) * 2014-04-01 2018-08-07 Microsoft Technology Licensing, Llc Content display with dynamic zoom focus
US20150277715A1 (en) * 2014-04-01 2015-10-01 Microsoft Corporation Content display with contextual zoom focus
US9524092B2 (en) * 2014-05-30 2016-12-20 Snaptrack, Inc. Display mode selection according to a user profile or a hierarchy of criteria
US20150348496A1 (en) * 2014-05-30 2015-12-03 Pixtronix, Inc. Systems and methods for selecting display operation modes
USD823312S1 (en) * 2014-08-11 2018-07-17 Sony Corporation Display panel or screen with graphical user interface
US10198164B1 (en) 2014-08-25 2019-02-05 Google Llc Triggering location selector interface by continuous zooming
USD763276S1 (en) * 2014-09-02 2016-08-09 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
TWI543068B (zh) * 2015-01-19 2016-07-21 國立成功大學 以單指操作行動裝置螢幕介面方法
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
WO2016182514A1 (en) * 2015-05-12 2016-11-17 Agency For Science, Technology And Research A system and method for displaying a video image
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
CN104898931B (zh) * 2015-06-19 2018-06-19 胡月鹏 一种基于连续渐变操作的控件显示方法及装置
US10133400B2 (en) * 2015-07-01 2018-11-20 Tactual Labs Co. Pressure informed decimation strategies for input event processing
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
CN109069105B (zh) * 2017-02-07 2021-08-24 深圳迈瑞生物医疗电子股份有限公司 超声医学检测设备及成像控制方法、成像系统、控制器
CN109074093B (zh) * 2017-12-18 2021-11-16 深圳市大疆创新科技有限公司 一种无人机的航线规划方法、控制设备及存储介质
CN108363531A (zh) * 2018-01-17 2018-08-03 网易（杭州）网络有限公司 一种游戏中的交互方法及装置
CN111311489B (zh) * 2020-01-17 2023-07-04 维沃移动通信有限公司 一种图像裁剪方法及电子设备
CN111540030A (zh) * 2020-04-24 2020-08-14 Oppo（重庆）智能科技有限公司 图像编辑方法、装置、电子设备和计算机可读存储介质

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5345543A (en) * 1992-11-16 1994-09-06 Apple Computer, Inc. Method for manipulating objects on a computer display
US5583946A (en) 1993-09-30 1996-12-10 Apple Computer, Inc. Method and apparatus for recognizing gestures on a computer system
JPH07121291A (ja) * 1993-10-25 1995-05-12 Toshiba Corp 数値入力制御装置及び同方法
JP3585357B2 (ja) * 1997-11-19 2004-11-04 シャープ株式会社 情報処理装置及び方法並びに情報処理プログラムを記録した記録媒体
EP1717679B1 (en) 1998-01-26 2016-09-21 Apple Inc. Method for integrating manual input
US7695502B2 (en) 2000-02-01 2010-04-13 Depuy Products, Inc. Bone stabilization system including plate having fixed-angle holes together with unidirectional locking screws and surgeon-directed locking screws
CN1332330C (zh) * 2000-09-30 2007-08-15 仁宝电脑工业股份有限公司 一种具有缩放显示功能的掌上型装置
JP2002222034A (ja) 2000-11-22 2002-08-09 Shinichi Komatsu 座標位置入力によるコンピュータの制御方法並びにこの方法によりコンピュータを制御するプログラム及びこのプログラムが記録された記録媒体
JP2002244813A (ja) * 2001-02-14 2002-08-30 Sony Corp 画像表示システムおよび画像表示方法
JP5259898B2 (ja) * 2001-04-13 2013-08-07 富士通テン株式会社 表示装置、及び表示処理方法
US7466307B2 (en) 2002-04-11 2008-12-16 Synaptics Incorporated Closed-loop sensor on a solid-state object position detector
JP4069439B2 (ja) 2002-06-06 2008-04-02 ソニー株式会社 情報処理装置、表示制御方法、表示制御プログラム及び表示制御プログラム格納媒体
JP3893325B2 (ja) * 2002-06-24 2007-03-14 株式会社ケンウッド 入力表示装置及び入力表示方法
JP2004070654A (ja) 2002-08-06 2004-03-04 Matsushita Electric Ind Co Ltd 携帯用電子機器
US7089507B2 (en) * 2002-08-12 2006-08-08 International Business Machines Corporation System and method for display views using a single stroke control
WO2005024616A1 (ja) 2003-09-04 2005-03-17 Matsushita Electric Industrial Co., Ltd. 電子機器、入力装置およびこれを備えた携帯電子機器
US20060227153A1 (en) 2005-04-08 2006-10-12 Picsel Research Limited System and method for dynamically zooming and rearranging display items
US7456849B2 (en) * 2005-04-15 2008-11-25 Microsoft Corporation System and method for zooming an object through spiral interaction
US9395905B2 (en) * 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
WO2007149357A2 (en) 2006-06-16 2007-12-27 Cirque Corporation A method of scrolling that is activated by touchdown in a predefined location on a touchpad that recognizes gestures for controlling scrolling functions
JP2008072673A (ja) 2006-09-15 2008-03-27 Ricoh Co Ltd 画像表示入力装置
KR100761809B1 (ko) * 2006-10-11 2007-09-28 삼성전자주식회사 휴대 단말기 및 휴대 단말기의 대기화면 표시 방법
JP2008250804A (ja) * 2007-03-30 2008-10-16 Kyocera Corp 画像表示装置、画像変更制御装置及び画像変更プログラム
KR20090011367A (ko) 2007-07-26 2009-02-02 (주)멜파스 터치스크린 장치 및 터치스크린 장치를 이용한 화면 제어방법
US20090089705A1 (en) * 2007-09-27 2009-04-02 Microsoft Corporation Virtual object navigation
US8159465B2 (en) * 2008-12-19 2012-04-17 Verizon Patent And Licensing Inc. Zooming techniques for touch screens

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101307402B1 (ko) * 2012-04-16 2013-09-26 나비스오토모티브시스템즈 주식회사 네비게이션 장치 및 그의 화면 처리방법
US11592924B2 (en) 2012-09-17 2023-02-28 Huawei Device Co., Ltd. Touch operation processing method and terminal device
US9268482B2 (en) 2012-09-17 2016-02-23 Huawei Device Co., Ltd. Touch operation processing method and terminal device
US12093481B2 (en) 2012-09-17 2024-09-17 Huawei Device Co., Ltd. Touch operation processing method and terminal device
US10296204B2 (en) 2012-09-17 2019-05-21 Huawei Device Co., Ltd. Touch operation processing method and terminal device
US10754539B2 (en) 2012-09-17 2020-08-25 Huawei Device Co., Ltd. Touch Operation Processing Method and Terminal Device
US11112902B2 (en) 2012-09-17 2021-09-07 Huawei Device Co., Ltd. Touch operation processing method and terminal device
KR20140071282A (ko) * 2012-09-29 2014-06-11 후아웨이 디바이스 컴퍼니 리미티드 표시된 대상의 줌을 제어하는 전자 기기 및 방법
US9632680B2 (en) 2012-09-29 2017-04-25 Huawei Device Co., Ltd. Electronic device and method for controlling zooming of displayed object
US10324604B2 (en) 2012-09-29 2019-06-18 Huawei Device Co., Ltd. Electronic device and method for controlling zooming of displayed object
KR20150008624A (ko) * 2013-07-15 2015-01-23 삼성전자주식회사 전자 기기 제어 방법 및 장치
KR20150057740A (ko) 2013-11-20 2015-05-28 삼성테크윈 주식회사 팬, 틸트, 줌 제어장치
US9819856B2 (en) 2014-07-18 2017-11-14 Xiaomi Inc. Shooting parameter adjustment method and device

Also Published As

Publication number Publication date
US20100315438A1 (en) 2010-12-16
KR101384857B1 (ko) 2014-04-25
JP2012530291A (ja) 2012-11-29
EP2440993A1 (en) 2012-04-18
JP2014102850A (ja) 2014-06-05
JP5893060B2 (ja) 2016-03-23
US8823749B2 (en) 2014-09-02
CN102460364A (zh) 2012-05-16
WO2010144726A1 (en) 2010-12-16
CN107102790A (zh) 2017-08-29

Similar Documents

Publication Publication Date Title
KR101384857B1 (ko) 연속 줌 기능을 제공하는 사용자 인터페이스 방법들
US20210311598A1 (en) Device, Method, and Graphical User Interface for Transitioning from Low Power Mode
US10831337B2 (en) Device, method, and graphical user interface for a radial menu system
EP3803562B1 (en) Devices, methods, and user interfaces for conveying proximity-based and contact-based input events
EP2482179B1 (en) Apparatus and method for controlling screen display in touch screen terminal
EP3435220B1 (en) Device, method and graphical user interface for transitioning between touch input to display output relationships
JP6009454B2 (ja) コンピューティング装置の動きを利用するコンピューティング装置と相互作用するときに発生する入力イベントの解釈の強化
US20140362119A1 (en) One-handed gestures for navigating ui using touch-screen hover events
EP2657831A2 (en) Method and terminal for displaying a plurality of pages, method and terminal for displaying a plurality of applications being executed on terminal, and method of executing a plurality of applications
EP2365426B1 (en) Display device and screen display method
KR20090070491A (ko) 터치스크린을 이용한 화면 제어 장치 및 방법
EP2778880B1 (en) Method for controlling display function and an electronic device thereof
WO2019119799A1 (zh) 一种显示应用图标的方法及终端设备
KR20150095540A (ko) 사용자 단말 장치 및 이의 디스플레이 방법
KR102161061B1 (ko) 복수의 페이지 표시 방법 및 이를 위한 단말
KR101251021B1 (ko) 터치스크린 출력화면 조정방법
US20140085340A1 (en) Method and electronic device for manipulating scale or rotation of graphic on display
KR101692848B1 (ko) 호버링을 이용하는 가상 터치패드 조작방법 및 이를 수행하는 단말기
KR20140027839A (ko) 전자장치에서 화면표시 제어 방법 및 장치
KR20110081737A (ko) 터치 스크린 및 포인팅 디바이스가 구비된 단말장치의 화면 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170330

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180329

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190327

Year of fee payment: 6