KR20140048934A - 동적 컨텍스트 기반 메뉴 - Google Patents

동적 컨텍스트 기반 메뉴 Download PDF

Info

Publication number
KR20140048934A
KR20140048934A KR1020147000782A KR20147000782A KR20140048934A KR 20140048934 A KR20140048934 A KR 20140048934A KR 1020147000782 A KR1020147000782 A KR 1020147000782A KR 20147000782 A KR20147000782 A KR 20147000782A KR 20140048934 A KR20140048934 A KR 20140048934A
Authority
KR
South Korea
Prior art keywords
context
menu
displayed
based menu
user interface
Prior art date
Application number
KR1020147000782A
Other languages
English (en)
Other versions
KR101922749B1 (ko
Inventor
에레츠 키킨 길
매튜 코틀러
비그네쉬 사치다난담
마크 피어슨
도린 그리엡
앤드류 호크만
네드 프렌드
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Publication of KR20140048934A publication Critical patent/KR20140048934A/ko
Application granted granted Critical
Publication of KR101922749B1 publication Critical patent/KR101922749B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04807—Pen manipulated menu

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명에 따르면, 탭핑, 스와이핑 및 프레스 앤 홀드 유형 상호작용에 대해 동적으로 위치되고, 레이아웃되며, 활성화되는 컨텍스트 기반 메뉴가 제공된다. 복수의 실행가능한 커맨드 및/또는 서브메뉴로의 링크를 제시하는 컨텍스트 기반 메뉴는, 이용가능한 디스플레이 공간, 사용자 속성 및 그와 유사한 것들과 같은 다른 요인들 및/또는 사용자 인터페이스 상에 디스플레이된 선택된 콘텐츠와 관련하여 다양한 형태 및 형식으로 디스플레이될 수 있다. 카테고리 내의 커맨드를 제시하는 서브메뉴는 페어런트 컨텍스트 기반 메뉴의 자리, 페어런트 컨텍스트 기반 메뉴의 부근, 또는 페어런트 컨텍스트 기반 메뉴와 겹쳐져서 디스플레이될 수 있다. 메뉴 위치, 콘텐츠, 및/또는 형태가 선택된 콘텐츠의 변화, 사용자 콘택트 위치, 사용자 인터페이스의 변화 등에 응답하여 조정될 수 있다.

Description

동적 컨텍스트 기반 메뉴{DYNAMIC CONTEXT BASED MENUS}
컴퓨팅 및 네트워킹 기술의 확산으로, 컴퓨팅 디바이스의 두 가지 측면, 즉, 비-통상적인(예로서, 마우스 및 키보드) 입력 메커니즘 및 더 작은 폼 팩터들이 일반화 되어가고 있다. 모든 종류의 소프트웨어 애플리케이션에 대한 사용자 인터페이스는 전형적인 스크린 크기와 입력 메커니즘을 고려하여 설계되어져 왔다. 따라서, 통상적인 시스템에서의 사용자 상호작용은 키보드와 마우스 유형 입력 디바이스 및 사용자가 사용자 인터페이스와 정밀하게 상호작용할 수 있게 하는 최소의 스크린 크기를 통해 이루어지는 것으로 여겨진다.
터치-인에이블(touch-enabled) 또는 제스처-인에이블(gesture-enabled) 디바이스에 대한 메뉴는 특별한 제한과 어려움을 갖는다. 예를 들어, 이러한 메뉴는 터치 및 제스처 인에이블 되어야 하며, 마우스보다 낮은 정밀도로 액세스 가능해야 한다. 메뉴는 넓은 스크린 영역을 차지하지 않을 것이며 이용가능한 스크린 영역에서의 변화에 유연해야 한다(예로서, 가로방향(landscape)/세로방향(portrait) 변화, 상이한 해상도, 가상 키보드의 등장/사라짐 등). 메뉴는 터치 디바이스에 대한 특정한 특성을 이용해야 하고 (예로서, 서로 다른 제스처에 응답) 종래의 마우스 및 키보드와도 여전히 작업해야 한다. 사용자는 모바일 디바이스 상의 주로 판독 전용의 생산성 애플리케이션 상에서 다량의 작업을 수행하려는 경향이 있을 수 있으며, 모바일 디바이스 상에서 긴 시간 동안 긴 문서를 편집할 가능성은 낮다. 따라서, 종래의 메뉴는 이러한 이용 모델을 다루도록 설계되어 있지 않다. 또한 종래의 메뉴는 서로 다른 컨텍스트 및/또는 위치(예로서, 한 손가락/엄지의 사용/데스크 및 타이핑 비선호)에서 편리하거나 효율적이지 않다. 또한, 커맨드 경험은 콘텐츠 생성을 위해 훨씬 더 풍부해야 하며 터치가 제공하는 보다 직접적인 상호작용을 통해 기대할 수 있는 자연스럽고 즐거운 경험을 제공할 필요가 있다.
본 요약부는 아래의 상세한 설명에 추가로 기술되는 개념들 중 선택된 것들을 단순화된 형태로 소개하도록 제공되었다. 본 요약부는 청구된 청구사항의 주된 사항 또는 핵심 사항만을 밝히기 위한 것이 아니며, 청구된 청구사항의 범주의 결정을 돕기 위한 것 또한 아니다.
본 발명의 실시예는 동적으로 위치되고, 레이아웃되며, 활성화될 수 있는 컨텍스트 기반 메뉴(context based menu)와 관련된다. 복수의 실행가능한 커맨드 및/또는 서브메뉴로의 링크를 제시하는 컨텍스트 기반 메뉴는, 사용자 인터페이스 상에 디스플레이된 선택된 콘텐츠 및/또는 이용가능한 디스플레이 공간, 사용자 속성 및 그와 유사한 것들과 같은 다른 요인들과 관련하여 다양한 형태 및 형식으로 디스플레이될 수 있다. 카테고리 내의 커맨드를 제시하는 서브메뉴는 페어런트 컨텍스트 기반 메뉴의 자리, 페어런트 컨텍스트 기반 메뉴의 부근, 또는 페어런트 컨텍스트 기반 메뉴와 겹쳐져서 디스플레이될 수 있다. 메뉴 위치, 콘텐츠, 및/또는 형태가 선택된 콘텐츠의 변화, 사용자 콘택트 위치, 사용자 인터페이스의 변화 등에 응답하여 조정될 수 있다.
이러한 특성과 다른 특성들 및 장점들이 아래의 상세한 설명 및 연관된 도면의 검토를 통해 명확해질 것이다. 전술된 일반적인 설명과 아래의 상세한 설명은 모두 예시적인 것이며 본 발명의 측면을 한정하는 것이 아님을 이해해야 한다.
도 1a 및 1b는 컨텍스트 기반 메뉴가 이용될 수 있는 일부 예시적인 디바이스를 도시한다;
도 2는 실시예에 따른 예시적인 컨텍스트 기반 메뉴 및 연관된 서브메뉴의 시작 및 프레젠테이션을 도시한다;
도 3은 실시예에 따라 디스플레이된 콘텐츠 위에 그리고 터치 기반 디바이스의 스크린 상에 있는 예시적인 컨텍스트 기반 메뉴의 배치를 도시한다;
도 4a 내지 4e는 실시예에 따라 컨텍스트 기반 메뉴를 통해 이용가능한 아이템을 선택하기 위한 예시적인 구성 및 서로 다른 형태의 일부 예시적인 컨텍스트 기반 메뉴를 도시한다;
도 5는 일부 실시예에 따른 예시적인 컨텍스트 기반 메뉴의 서로 다른 측면들을 도시한다;
도 6은 일부 실시예에 따른 예시적인 컨텍스트 기반 메뉴에서의 복수의 아이템 선택 표시와 빈 조각의 이용을 도시한다;
도 7은 다른 실시예에 따른 예시적인 컨텍스트 기반 메뉴에서의 키보드 도움의 디스플레이 및 애니메이션 표시의 이용을 도시한다;
도 8은 일부 실시예에 따른 예시적인 컨텍스트 기반 메뉴의 추가적인 측면들을 도시한다;
도 9는 일부 실시예에 따른 예시적인 부분적 컨텍스트 기반 메뉴를 도시한다;
도 10은 실시예에 따른 시스템이 구현될 수 있는 네트워킹된 환경이다;
도 11은 실시예가 구현될 수 있는 예시적인 컴퓨팅 운영 환경의 블록도이다;
도 12는 실시예에 따른 동적 컨텍스트 기반 메뉴를 이용하는 프로세스를 위한 논리적인 흐름도를 도시한다.
간략하게 전술된 바와 같이, 동적 컨텍스트 기반 메뉴는 복수의 실행가능한 커맨드 및/또는 서브메뉴로의 링크를 사용자 인터페이스 상에 디스플레이된 선택된 콘텐츠 및/또는 이용가능한 디스플레이 공간, 사용자 속성 등과 같은 다른 요소들과 관련된 다양한 형태 및 형식들로 제시한다.
아래의 상세한 설명에서, 본 명세서의 일부를 형성하는 첨부된 도면을 참조하며, 도면은 특정 실시예 또는 예시를 설명하도록 도시되었다. 이들 측면들은 결합될 수 있으며, 다른 측면들이 이용될 수도 있고, 구조적 변화가 본 발명의 사상 또는 범주로부터 벗어나지 않고 이루어질 수 있다. 아래의 상세한 설명은 따라서 한정적인 의미로 받아들여져서는 안되고, 본 발명의 범주는 첨부된 특허청구범위 및 그 동등물에 의해서 정의된다. 실시예가 개인 컴퓨터 상의 운영 시스템에서 구동하는 애플리케이션 프로그램과 관련하여 실행하는 프로그램 모듈의 일반적인 맥락에서 기술될 것이지만, 당업자는 측면들이 다른 프로그램 모듈과 결합하여 구현될 수도 있음을 이해할 것이다.
일반적으로, 프로그램 모듈은 루틴, 프로그램, 구성요소, 데이터 구조 및 특정 태스크를 수행하거나 특정 추출 데이터 유형을 구현하는 그 외의 유형의 구조를 포함한다. 또한, 당업자는 실시예가 휴대용 디바이스, 멀티프로세서 시스템, 마이크로프로세서 기반 또는 프로그램가능한 소비자 전자기기, 미니컴퓨터, 메인프레임 컴퓨터 및 유사한 컴퓨팅 디바이스를 포함하는 다른 컴퓨터 시스템 구성과 실시될 수 있음을 이해할 것이다. 실시예들은 또한 통신 네트워크를 통해 링크되는 원격 프로세싱 디바이스에 의해 태스크가 수행되는 분산 컴퓨팅 환경에서도 실시될 수 있다. 분산 컴퓨팅 환경에서, 프로그램 모듈은 로컬 및 원격 메모리 저장 디바이스 모두에 위치될 수 있다.
실시예는 컴퓨터 구현된 프로세스(방법), 컴퓨팅 시스템, 또는 컴퓨터 프로그램 제품 또는 컴퓨터 판독가능한 매체와 같은 제품으로서 구현될 수 있다. 컴퓨터 프로그램 제품은 컴퓨터 시스템에 의해 판독될 수 있고 컴퓨터 또는 컴퓨팅 시스템이 예시적인 프로세스(들)를 수행하게 하기 위한 명령을 포함하는 컴퓨터 프로그램을 인코딩하는 컴퓨터 저장 매체일 수 있다. 컴퓨터 판독가능한 저장 매체는 컴퓨터 판독가능한 메모리 디바이스이다. 컴퓨터 판독가능한 저장 매체는 예를 들어 휘발성 컴퓨터 메모리, 비휘발성 메모리, 하드 드라이브, 플래시 드라이브, 플로피 디스크, 또는 콤팩트 디스크 및 유사한 매체 중 하나 이상을 통해 구현될 수 있다.
실시예에 따르면, 터치-인에이블 또는 제스처-인에이블 디바이스의 사용자 인터페이스는 디스플레이된 콘텐츠를 관리하기 위해 컨텍스트 기반 메뉴를 이용할 수 있다. 컨텍스트 기반 메뉴는 터치 또는 제스처 인에이블 컴퓨팅 디바이스에 특정된 특징들을 이용할 수 있지만, 종래의 마우스 및 키보드와도 작업할 수 있다. 컨텍스트 기반 메뉴는 문서, 이메일, 콘택트 리스트, 다른 통신, 또는 임의의 콘텐츠(예로서 오디오, 비디오 등)를 열람 또는 편집하는 중에 흔히 사용되는 커맨드에 대한 신속한 액세스를 제공하도록 사용된다. 컨텍스트 기반 메뉴는 사용자 인터페이스의 정규 메뉴의 일부로서, 사용자 인터페이스 밖 또는 안의 개별적인 보기 창(viewing pane)(예로서, 윈도우) 등으로 나타날 수 있다. 전형적으로, 컨텍스트 기반 메뉴는 사용자의 용이한 액세스를 위해 제한된 세트의 커맨드를 제시하지만, 추가적인 서브메뉴가 사용자 선택에 따라 제시될 수 있다. 흔히 사용되는 컨텍스트 기반 메뉴가 열람되는 문서 위에 나타날 수 있다. 본 명세서에서 사용되는 탭핑(tap) 또는 스와이핑(swipe) 동작은 사전정의된 키보드 입력 조합 또는 음성 커맨드를 통해서뿐 아니라 손가락, 펜, 마우스, 또는 유사한 디바이스를 통해서 사용자에 의해 제공될 수 있다.
도 1a 및 1b는 컨텍스트 기반 메뉴가 이용될 수 있는 일부 예시적인 디바이스를 도시한다. 터치 및 제스처 기반 기술이 확산되었고 그러한 기술을 이용하는 컴퓨팅 디바이스가 흔해졌기 때문에, 사용자 인터페이스 배치가 어려워졌다. 터치 및/또는 제스처 기반 디바이스, 특히 휴대용 디바이스는 더 작은 스크린 크기를 갖는 경향이 있으며, 이는 사용자 인터페이스를 위해 이용가능한 공간이 더 작음을 의미한다. 예를 들어, 문서(텍스트 및/또는 그래픽)의 편집을 가능하게 하는 사용자 인터페이스에서, 문서의 제시된 부분에 추가로, 이용가능한 공간("실 공간(real estate")을 추가로 제한하는 가상 키보드가 디스플레이되어야만 할 수 있다. 따라서 이러한 시나리오에서, 풀 컨트롤 메뉴를 제공하는 것은 비현실적이거나 불가능할 수 있다. 일부 실시예는 동적, 터치 또는 제스처 인에이블된, 컨텍스트 기반 메뉴와 관련된다.
전술된 바와 같이, 이용가능한 디스플레이 공간이 더 작은 점, 더 많은 콘텐츠 및 서로 다른 가로세로 비율이 종래의 메뉴를 비현실적으로 만들었다. 태블릿 PC와 같은 현존하는 터치 기반 디바이스 및 그와 유사한 디바이스는 전형적으로 데이터 소비(즉, 열람)와 관련된다. 다른 한편으로, 워드 프로세싱 애플리케이션, 스프레드시트 애플리케이션, 프레젠테이션 애플리케이션 및 이와 유사한 애플리케이션과 같이 흔히 사용되는 애플리케이션들은 생성(텍스트, 그래픽 및 그외의 콘텐츠를 갖는 문서의 생성 및 편집)과 관련된다. 현재 이용가능한 컨텍스트 기반 메뉴는 대부분의 시간에서 보이지 않거나 이들이 보여질 때에는 콘텐츠를 가리게 된다. 일부 실시예에 따른 컨텍스트 기반 메뉴는 제시된 콘텐츠와 이용가능한 공간에 기초하여 동적으로 제공될 수 있으며 훨씬 필요한 디스플레이 영역을 빼앗지 않고 사용의 용이성을 제공하는 런처 메커니즘(launcher mechanism)을 통해 활성화될 수 있다.
도 1a 및 1b를 참조하면, 터치 또는 제스처 인에이블 컨텍스트 기반 메뉴가 실시예에 따른 런처 메커니즘에 의한 활성화를 통해 제공될 수 있는 일부 예시적인 디바이스가 도시되었다. 디바이스가 터치 및/또는 제스처 인에이블 되어있는 한, 다양한 폼 팩터 및 능력을 갖는 다른 디바이스에서도 실시예가 구현될 수 있다.
도 1a의 디바이스(104)는 스크린(106) 상에 사용자 인터페이스가 제공될 수 있는 대형 디스플레이 디바이스의 예시이다. 다양한 애플리케이션의 기능이 스크린(106) 상에 디스플레이된 터치 또는 제스처 인에이블 메뉴와 같은 소프트웨어 컨트롤 및/또는 하드웨어 컨트롤(108)을 통해 제어될 수 있다. 사용자는 터치 동작 또는 (비디오 캡처 디바이스에 의해 검출되는) 제스처를 통해 사용자 인터페이스와 상호작용하는 것이 가능할 수 있다. 컨텍스트 기반 메뉴는 선택된 콘텐츠, 이용가능한 디스플레이 영역 및 유사한 요인들에 기초하여 동적으로 조정가능한 위치에서 또는 고정된 위치에서 제시될 수 있다. 디바이스(104)의 예시는 공용 정보 디스플레이 장치, 대형 컴퓨터 모니터 등을 포함할 수 있다. 예시적인 실시예가 작은 크기의 디스플레이와 관련하여 논의되었지만, 이용가능한 디스플레이 영역이 가치가 있으며 컨텍스트 기반 메뉴의 위치, 크기, 콘텐츠 등이 이용가능한 디스플레이 영역에 기초하여 결정될 수 있고, 더 큰 디스플레이에서 그 반대가 고려될 수 있다. 예를 들어, 공용 정보 디스플레이 장치 또는 대형 컴퓨터 모니터와 같은 커다란 디스플레이에서, 컨텍스트 기반 메뉴는 선택된 콘텐츠 부근에 동적으로 위치되어 사용자가 메뉴에 도달해야 하거나 편하게 작업하기 위해서 메뉴를 이동시킬 필요가 없다.
도 1a의 디바이스(112)는 기능을 제어하기 위한 제스처 기반 메뉴의 이용에 대한 예시이다. 사용자 인터페이스는 스크린상에 디스플레이될 수 있거나 또는 표면 상에 영사(project)될 수 있으며, 사용자(110)의 동작이 비디오 캡처 디바이스(114)를 통해 제스처로서 검출될 수 있다. 사용자의 제스처는 디바이스(112) 상에 디스플레이되는 터치 또는 제스처 인에이블 메뉴를 활성화할 수 있다.
도 1b는 터치 인에이블 컴퓨터 모니터(116), 랩탑 컴퓨터(118), 휴대용 컴퓨터(124), 스마트폰(126), 태블릿 컴퓨터(또는 슬레이트)(128) 및 모바일 컴퓨팅 디바이스(132)와 같이 컴퓨팅, 통신, 제어, 측정 및 다수의 다른 목적을 위해 사용될 수 있는 몇몇 예시적인 디바이스를 포함한다. 도 1b의 예시적인 디바이스는 터치 활성화(120)와 함께 도시되었다. 그러나, 임의의 이러한 예시적인 디바이스 및 다른 예시적인 디바이스도 컨텍스트 기반 메뉴의 제스처 인에이블 활성화를 이용할 수 있다. 또한, 펜(130)과 같은 도구가 터치 입력을 제공하도록 사용될 수 있다. 런처 표시자 및 터치 또는 제스처 인에이블된 컨텍스트 기반 메뉴는, 마우스 입력 또는 키보드(122)를 통한 입력과 같은 종래의 방법을 통해서도 제어될 수 있다.
도 2는 실시예에 따른 예시적인 컨텍스트 기반 서브메뉴 및 연관된 서브메뉴의 시작 및 프레젠테이션을 도시한다. 실시예에 따른 컨텍스트 기반 메뉴는 포커스 포인트(삽입 포인트 또는 선택)에 근접하게 나타날 수 있고, 효율적인 적용 및/또는 이용을 가능하게 할 수 있고, 커맨드가 맥락적으로 관찰되게 할 수 있고, (방사 형태를 통한) 향상된 스캔 성능을 제공하고, 처음 이용하는 사용자가 쉽게 습득할 수 있게 하며, 사용자 경험을 개선시킬 수 있다. 이러한 메뉴는 운영 시스템 사용자 인터페이스뿐 아니라 웹 브라우저와 같이 콘텐츠가 열람 및/또는 편집될 수 있게 하는 임의의 애플리케이션에서 구현될 수 있다.
도 2의 컨텍스트 기반 메뉴 및 런처 표시자(launcher indicator)의 예시적인 구성이 예시적인 사용자 인터페이스 상에 도시되었으며, 각각의 사용자 인터페이스는 텍스트 메뉴, 그래픽 커맨드 아이콘 및 텍스트 및/또는 그래픽 콘텐츠를 포함한다. 실시예에 따른 컨텍스트 기반 메뉴는 다른 유형의 메뉴를 갖거나 또는 갖지 않는 임의의 유형의 콘텐츠를 갖는 임의의 사용자 인터페이스 상에서 사용될 수 있다. 사용자 인터페이스(202)를 참조하면, 런처 표시자(206)는 사용자 인터페이스상의 선택 핸들(selection handle) 사이의 선택구간(204) 근처에서 사용될 수 있다. 만약 사용자 인터페이스가 선택을 허용하지 않거나 디스플레이 영역이 제한되면, 표시자(206) 및/또는 언더라잉 컨텍스트 기반 메뉴에 대해 고정 위치가 이용될 수 있다. 이와 달리, 런처는 숨겨질 수 있으며 서로 다른 제스처(예로서, 선택 위에서의 탭핑)는 언더라잉 컨텍스트 기반 메뉴를 위한 활성화로서의 역할을 한다. 키보드, 마우스, 터치, 제스처, 펜 입력, 음성 커맨드는 컨텍스트 기반 메뉴와 관련하여 사용될 수 있는 일부 예시적인 입력 메커니즘이다. 다른 예시적인 입력 메커니즘은 가속도계 또는 방향 센서 기반 입력, 광학적으로 캡처된 제스처, 시간 기반 입력, 다른 디바이스/사람/장소에 대한 근접성 등을 포함할 수 있지만, 이것으로 한정되는 것은 아니다.
런처 표시자(206)를 활성화하면(208), 탑 레벨 컨텍스트 기반 메뉴(212)가 사용자 인터페이스(210) 상에 도시된 바와 같이 선택된 콘텐츠와 관련하여 디스플레이될 수 있다. 컨텍스트 기반 메뉴의 위치는 디스플레이된 콘텐츠의 선택된 부분, 디스플레이된 콘텐츠 유형, 이용가능한 디스플레이 영역, 사용자 인터페이스 경계, 및/또는 디바이스 유형에 기초하여 동적으로 선택된 위치 또는 사용자 인터페이스 상의 고정된 위치에서 선택될 수 있다. 만약 선택된 콘텐츠와 사용자 인터페이스 경계 사이에 컨텍스트 기반 메뉴를 디스플레이하기에 불충분한 디스플레이 영역이 존재한다면, 컨텍스트 기반 메뉴는 사용자 인터페이스 상의 다른 위치로 자동으로 이동될 수 있거나, 자신의 크기가 감소되거나, 또는 컨텍스트 기반 메뉴가 부분적으로 디스플레이될 수 있다. 또한, 컨텍스트 기반 메뉴(212)는 디스플레이된 콘텐츠의 선택된 부분의 크기 변화, 사용자 인터페이스의 크기 변화, 또는 사용자 인터페이스의 방향 변화에 응답하여 이동되거나, 자신의 형태 또는 크기가 조정될 수 있다.
컨텍스트 기반 메뉴가 방사 형태로 디스플레이되었지만, 메뉴는 아래에서 보다 상세하게 논의되는 바와 같이 실질적으로 방사 형태, 실질적으로 직사각형 형태, 일렬 직선, 일렬 곡선, 꽃 모양, 또는 불규칙한 형태를 가질 수 있다. 탭핑 동작, 스와이핑 동작, 또는 프레스 앤 홀드(press and hold) 동작(214)을 통해서 컨텍스트 기반 메뉴(212) 상에 디스플레이된 아이템들 중 하나를 선택하면, 사용자 인터페이스(220) 상의 서브메뉴(226)가 디스플레이될 수 있다. 예시적인 서브메뉴(226)는 컨텍스트 기반 메뉴(222)와 겹쳐지게 도시되었다. 다른 구성에서, 서브메뉴는 컨텍스트 기반 메뉴를 대체할 수 있거나 또는 별개의 위치에 동시에 디스플레이될 수 있다.
컨텍스트 기반 메뉴(222) 상의 아이템들은 개별적인 카테고리 내의 커맨드를 제시하는 서브메뉴와 각각 연관된 링크 또는 서로 다른 카테고리의 커맨드를 나타낼 수 있다. 전술된 동작들 중 하나를 통해 서브메뉴(226) 상의 커맨드를 선택하면(224), 커맨드는 선택된 콘텐츠에 적용될 수 있다. 커맨드의 실행이 완료되면, 서브메뉴는 숨겨질 수 있거나 디스플레이된 채로 남아있을 수 있다.
도 3은 실시예에 따라 디스플레이된 콘텐츠 위에 그리고 터치 기반 디바이스의 스크린 상에 있는 예시적인 컨텍스트 기반 메뉴의 배치를 도시한다. 예시적인 뷰(302)는 선택된 부분(304)을 갖는 텍스트 콘텐츠를 포함한다. 전술된 바와 같이, 실시예에 따른 컨텍스트 기반 메뉴는 선택된 콘텐츠와 관련하여 디스플레이될 수 있으며, 이것은 선택된 콘텐츠 위에 메뉴를 디스플레이하는 일부 경우(예를 들어, 자유로운 디스플레이 공간이 없을 때)를 포함할 수 있다. 따라서, 컨텍스트 기반 메뉴(306)는 선택된 부분(304) 위에 도시되었다. 실시예에 따른 시스템은 컨텍스트 기반 메뉴를 포지셔닝하는 아래의 동작을 수행할 수 있다. 먼저, 메뉴는 현재 선택된 텍스트의 우측(또는 아랍이나 히브리어와 같이 반대 방향성 언어는 좌측) 바로 옆의 남는 공간에 위치되고자 시도할 수 있다. 만약 복수의 라인들이 선택되면, 메뉴는 수직방향으로 뷰 내의 선택된 라인들의 중심에 위치될 수 있다(다시 말하면, 만약 라인들의 일부가 페이지를 스크롤-오프(scroll-off)하였다면, 이는 메뉴의 배치를 계산할 때 제외될 수 있다). 만약 위치가 스크린의 상단 또는 바닥에 있기 때문에(즉, 수평적 위치는 올바르지만 수직적 위치가 스크린을 벗어날 수 있음) 첫 번째 시도가 실패했다면, 메뉴는 스크린 상에 맞추도록 각각 아래 또는 위로 이동될 수 있다. 만약 메뉴가 수평적으로 위치될 수 없어서 젓 번째 시도가 실패하였다면, 디스플레이된 콘텐츠 선택 위로 이동될 수 있으며 동일한 수평적 위치에 위치되도록 시도한다. 만약 여전히 실패한다면, 시스템은 메뉴를 선택 아래로 이동시켜 동일한 수평선상 위치에 위치시키도록 시도한다. 만약 마지막 동작들의 세트도 실패한다면, 이것은 선택부가 전체 페이지를 덮고 있음을 의미할 것이다. 이러한 경우에, 메뉴는 스크린의 우측(또는 좌측) 사이드에 최대한 가깝게 위치될 수 있으며, 이러한 경우에 선택과 겹쳐진다. 만약 콘텐츠가 위치한 장소가 변경되면(예로서, 만약 텍스트 폭이 넓어지거나 이미지가 커지면), 메뉴는 전술된 바와 같이 다시 규칙에 기초하여 위치될 수 있다.
일부 실시예에서, 컨텍스트 기반 메뉴는 탭핑 및/또는 스와이핑과 같은 제스처 또는 터치 동작을 허용하는 현재 선택과 관련하여 나타날 수 있다. 다른 예시에서, 컨텍스트 기반 메뉴는 콘텐츠 내에서의 변화를 위한 공간을 허용할 수 있다. 예를 들어, 컨텍스트 기반 메뉴는 표시자를 가리지 않고 표가 커질 수 있도록 표로부터 고정된 거리에 있는 표에 나타날 수 있다. 또한 컨텍스트 기반 메뉴는 언더라잉 객체의 크기가 변하면(예로서, 만약 텍스트의 라인에 더 많은 텍스트가 추가되거나, 이미지의 크기가 확대 또는 축소되거나, 테이블에 행 또는 열이 추가되는 등) 이동될 수 있다. 전술된 바와 같이, 공공 정보 디스플레이 장치 또는 대형 컴퓨터 모니터와 같은 대형 디스플레이에서, 컨텍스트 기반 메뉴는 사람들이 메뉴에 도달해야 하거나 작업을 편하게 하기 위해 움직여야만 할 필요가 없도록 선택된 콘텐츠의 부근에 동적으로 위치될 수 있다. 이와 달리, 동적으로 위치되는 컨텍스트 기반 메뉴는 동일한 디스플레이 상의 복수의 사람들의 작업도 가능하게 할 수 있다. 예를 들어, 컨텍스트 기반 메뉴는 한번에 하나보다 많은 선택에 묶여질 수 있으며 도구들의 세트가 한번에 한 명보다 많은 사람이 편집할 수 있게 하는 선택에 제공될 수 있다.
예시적인 사용자 인터페이스(310)는 컨텍스트 기반 메뉴(314)가 모바일 또는 휴대용 터치/제스처 가능한 디바이스 상에서 이용될 수 있는 방식을 도시한다. 이러한 디바이스에서, 가상 키보드(318)는 이용가능한 디스플레이 영역을 추가로 감소시키는 콘텐츠의 편집을 허용하도록 디스플레이될 수 있다. 컨텍스트 기반 메뉴(314)는 텍스트 콘텐츠(312)(다른 형태의 콘텐츠도 사용될 수 있다) 우측의 빈 공간에 디스플레이된다. 컨텍스트 기반 메뉴는 또한 사용자 속성에 기초하여 디스플레이된 콘텐츠의 선택된 부분의 좌측, 우측, 상단, 또는 바닥을 따라 제시 및/또는 이동될 수 있다. 사용자 속성은 사용자가 오른손잡이인지 또는 왼손잡이인지 여부, 손가락의 크기, 포인팅 디바이스와 연관된 탭핑 동작 포인터의 크기, 사용자 크리덴셜(credential), 디바이스의 인체공학적 특징 및 사용자 인터페이스에 대한 언어 선택, 지리학적 위치 정보, 타임 존 정보, 및/또는 국가 정보 중 하나 이상을 포함하는 위치 속성을 포함할 수 있다. 만약 캔버스의 크기가 변하면(예로서, 키보드가 나타나면), 컨텍스트 기반 메뉴는 키보드에 의해 커버되지 않도록 자동으로 이동될 수 있다.
다른 실시예에 따르면, 사용자 제스처가 컨텍스트 기반 메뉴를 이동시키도록 사용될 수 있다. 예를 들어, 만약 컨텍스트 기반 메뉴가 사용자가 필요로 하는 콘텐츠 위에 나타난다면, 사용자는 컨텍스트 기반 메뉴 상의 "디스로징(dislodging)"을 프레스 앤 홀드하고 이를 스크린 상의 다른 위치로 드래그 앤 드롭할 수 있다.
도 4a는 서로 다른 형태의 일부 예시적인 컨텍스트 기반 메뉴를 도시한다. 터치 또는 제스처 인에이블된 컨텍스트 기반 메뉴는 탭핑, 프레스 앤 홀드, 드래그/슬라이딩 또는 유사한 동작을 통해 런처 표시자를 선택함으로써 활성화될 수 있다.
예시적인 컨텍스트 기반 메뉴는 꽃 모양 메뉴(402), 방사상 메뉴(404), 직사각형 메뉴(408), 일렬 곡선 메뉴(410) 및 일렬 직선 메뉴(412)를 포함한다. 다른 형태 및 구성들도 사용될 수 있다. 원형 형태의 메뉴들(402, 404)에서, 아이템들은 중심에 있는 백 버튼(back button)과 함께 메뉴의 조각들 상에 디스플레이된다. 메뉴를 없애기 위한 백 버튼은 직사각형 메뉴(408) 상의 버튼(406)과 같은 메뉴와 관련된 다른 위치에 위치될 수도 있다.
일부 실시예에서, 컨텍스트 기반 메뉴 상에 디스플레이된 아이템들의 레이아웃은 사용자 속성 또는 다른 요인들에 자동으로 기초하여 배열 및 재배열될 수 있다. 컬러 설계, 그래픽 설계, 섀딩 설계 및 유사한 설계들과 같은 컨텍스트 기반 메뉴의 효율성을 증가시키기 위한 다수의 설계가 사용될 수 있다. 예를 들어, 아이템은 어두운 포맷 및/또는 밝은 포맷으로 디스플레이될 수 있으며, 이것은 배경 색상에 따라서 상호작용가능하게 이용될 수 있다. 일부 실시예에서, 밝거나 어두운 포맷은 실행된 커맨드를 강조하기 위해 사용될 수 있다.
도 4b는 방사 형태의 컨텍스트 기반 메뉴에 대한 5개의 예시적인 상태 및 이들의 시각화를 도시한다. 예시적인 상태는 "휴지(rest)" 상태(422), "호버(hover)" 상태(424), "누름(pressed)" 상태(426), "선택(selected)" 상태(428) 및 "호버 선택(hover selected)" 상태(430)를 포함한다. 메뉴의 시각화는 도 4b에 도시된 바와 같이 각각 내부 원(423, 425, 427, 429, 431)과 연관된 서로 다른 그래픽 설계뿐 아니라 서로 다른 컬러 또는 섀딩 설계를 이용함으로써 달라질 수 있다. 다른 시각화 설계도 사용될 수 있다.
도 4c 및 4d는 폰트 스타일을 선택하기 위한 컨텍스트 기반 메뉴의 서로 다른 예시적인 구성을 도시한다. 도 4c에서, 방사 형태의 컨텍스트 기반 메뉴(442)는 사용자가 메뉴 상에서 방사상으로 스와이핑할 수 있게 하는 한편, 이용가능한 옵션은 메뉴의 중심에서 스크롤링 방식으로 디스플레이된다. 컨텍스트 기반 메뉴(444) 상의 유사한 방사상 스와이핑 동작(448)은 하이라이트된 현재 선택을 갖는 확장 상자를 통해 스크롤되는 이용가능한 옵션들을 발생시킨다. 유사한 설계가 컨텍스트 기반 메뉴(446)에서 이용되며, 이때 이용가능한 옵션들이 메뉴의 한 측면(좌측 또는 우측)을 따라 스크롤링 방식으로 디스플레이되고, 현재 선택이 컬러 설계, 섀딩 설계, 및/또는 하이라이트 설계를 통해 강조된다.
도 4d에서, 컨텍스트 기반 메뉴(452)는 사용자가 폰트 스타일 중에서 선택하기 위해 방사상으로 형성된 메뉴의 페리미터를 따라 아이콘(454)을 회전시킬 수 있게 한다. 현재 선택된 폰트 스타일(456)은 방사상으로 형성된 메뉴의 중심에 디스플레이되는 반면, 다른 폰트 스타일은 아이콘(454)이 페리미터를 따라 회전할 때 스크롤된다. 방사상으로 형성된 콘텍스트 기반 메뉴(458)는 메뉴의 페리미터를 따라 디스플레이된 문자들이 이용가능한 폰트 스타일에 할당되는 선택 접근법의 다른 변화이다. 다른 실시예에서, 숫자 또는 그래픽 아이콘이 메뉴를 통한 선택에 이용가능한 서로 다른 아이템들에 할당될 수도 있다. 마지막으로, 컨텍스트 기반 메뉴(462)는 회전 스와이핑 동작을 통한 이용가능한 아이템(예로서, 폰트 스타일)의 선택을 가능하게 하는 한편 이용가능한 폰트(및 현재 선택)가 리스트 형식으로 방사 형태의 메뉴의 일 측면 상에 디스플레이된다.
도 4e는 세 개의 서로 다른 컨텍스트 기반 메뉴 스타일 및 구성을 도시한다. 예시적인 구성(472)은 통상적인 컨텍스트 기반 메뉴가 카테고리로 조직화되는 것을 디스플레이하며 이때 카테고리들은 메뉴의 상단을 변경시킨다. 따라서, 메뉴의 룩 앤 필은 종래의 메뉴 설계와 유사하지만, 계층이 전술된 방사 형태의 컨텍스트 기반 메뉴 예시에 기초한다. 구성(474)은 이미지와 겹쳐지는 투명한 방사 형태의 컨텍스트 기반 메뉴의 예시이며, 공간 제한을 수용하기 위해서 탑 레벨 메뉴에서의 아이템들의 숫자가 감소된다. 구성(476)은 메뉴와 연관된 텍스트 콘텐츠에 훨씬 가깝게 접속하는 컨텍스트 기반 메뉴의 예시적인 시각적 스타일을 도시한다. 전술된 구성은 오직 설명을 위한 예시적인 것이다. 임의의 수의 요소 및 프레젠테이션 설계를 갖는 다른 메뉴 형태, 스타일 및 구성이 본 명세서에서 기술된 원리를 이용하여 사용될 수 있다.
물론, 다른 아이콘, 심볼, 텍스트 콘텐츠 등이 특정한 컨텍스트 기반 메뉴 및 서브메뉴를 나타내도록 사용될 수 있다. 일부 실시예에 따르면, 컨텍스트 기반 터치 또는 제스처 인에이블 메뉴는 런처 표시자가 디스플레이되지 않고 활성화될 수 있다. 예를 들어, 메뉴는 디스플레이된 콘텐츠의 일부 선택에 응답하여 직접 제시될 수 있다. 또한 메뉴는 제스처에 기초하여 제시될 수도 있다. 예를 들어, 스크린 상의 임의의 장소에서의 프레스 앤 홀드 또는 키보드 상의 컨텍스트 메뉴 키를 누르는 것이 컨텍스트 기반 메뉴를 디스플레이시킬 수 있다.
도 5는 일부 실시에에 따른 예시적인 컨텍스트 기반 메뉴의 서로 다른 측면들을 도시한다. 컨텍스트 기반 메뉴(502)의 예시적인 구성에서, 메뉴는 메뉴 상의 방사상 조각들 내에 위치된 아이템들을 갖는 원형의 형태이다. 아이템들(예로서, 아이템(504, 506))은 실행가능한 커맨드 또는 서브메뉴로의 링크를 포함할 수 있다. 메뉴 상에 맞춰질 수 있는 더 많은 아이템들이 존재하는 경우에서, 생략부호 아이템(512)와 같은 아이템들 중 하나가 더 많은 커맨드 또는 링크를 갖는 다른 메뉴를 오픈하도록 사용될 수 있다. 아이템들 중 일부는 특정 카테고리 내의 커맨드를 제시하는 하나 이상의 서브메뉴와 연관될 수 있다. 이러한 링크는 메뉴의 중심 부근에 있는 더블 화살표(508)와 같이 그래픽적으로 표시될 수 있다. 또한 메뉴의 중심에 있는 런처 표시자(510)는 메뉴를 없애도록 사용될 수도 있다.
일부 실시예에서, 선택된 아이템 또는 컨텍스트 기반 메뉴의 디스플레이된 아이템들의 카테고리가 컨텍스트 기반 메뉴의 중심에 디스플레이될 수 있다. 다른 실시예에서, 컨텍스트 기반 메뉴를 적용하는 콘텐츠의 선택된 부분의 유형이 중심에 디스플레이될 수 있다.
컨텍스트 기반 메뉴(514)는 또 다른 구성을 도시하며, 여기에서 컨텍스트 기반 메뉴의 중심(520)은 페이지 상의 콘텐츠가 텍스트 선택임을 나타내고 따라서 서로 다른 텍스트 스타일, 크기 등과 같은 이용가능한 옵션들 중에서 선택하기 위해 나타난 친절한 메뉴임을 나타낸다. 또 다른 실시예에서, 컨텍스트 기반 메뉴 상의 아이템들은 마우스 호버, 키보드 포커스, 아이템 누름, 아이템 선택, 호버 선택, 아이템 디스에이블, 디스에이블 호버 및 정산 상태 중 하나 이상을 포함하는 현재 상태를 나타낼 수 있다.
컨텍스트 기반 메뉴(502, 514)는 탑 레벨에서 허브 및 스포크(hub & spoke) 상호작용을 이용할 수 있는 반면, 다이얼 및/또는 허브 및 스포크 상호작용은 서브메뉴 레벨에서 인에이블될 수 있다. 터치 기반 상호작용은 메뉴 아이템 또는 서브메뉴 런처로의 슬라이드, 페리미터 주변의 슬라이드, 또는 메뉴 아이템 상의 탭핑을 포함할 수 있다. 선택된 또는 고려된 메뉴 아이템의 실시간 프리뷰가 제공될 수 있다. 또한, 다양한 메뉴 아이템들에 대한 텍스트 식별자가 각 메뉴 아이템 부근에 또는 바닥/상단/중심에 제공될 수 있다.
도 6은 일부 실시예에 따른 예시적인 컨텍스트 기반 메뉴에서의 복수의 아이템 선택 표시 및 빈 조각의 이용을 도시한다. 이 도면과 다른 도면들에 도시된 방사 형태의 컨텍스트 기반 메뉴의 서로 다른 조각들은 단지 설명을 위해 강조하기 위한 조각들 사이의 선으로 도시되었다. 실시예에 따른 메뉴는 메뉴 상의 서로 다른 아이템들에 상응하는 조각들 사이에 라인 또는 다른 분리기를 포함할 수 있거나 포함하지 않을 수 있다. 예시적인 컨텍스트 기반 메뉴(602)는 5개의 아이템과 세 개의 빈 조각(segment)(604)을 포함한다. 일부 실시예에서, 빈 조각(604)은 컨텍스트 기반 메뉴의 레이아웃에서 그룹화되고 더 많은 디스플레이 영역을 허용하기 위한 투명한 방식으로 렌더링될 수 있다. 예를 들어, 서브메뉴는 컨텍스트 기반 메뉴의 빈 조각과 겹쳐서 디스플레이될 수 있으며, 그에 따라 컨텍스트 기반 메뉴 상의 활성 아이템들을 덮는 것을 막는다.
다른 실시예에서, 디스플레이 표면 상의 하나보다 많은 아이템을 선택하는 것이 가능하게 될 수 있다. 복수의 아이템 선택은 컨텍스트 기반 메뉴(606)의 중심에 있는 숫자 표시자(608)와 같은 메뉴 상에서 뿐 아니라 사용자가 얼마나 많은 아이템이 선택되었는지를 메뉴를 열기 전에 알 수 있도록 메뉴 런처 상에 표시될 수 있다. 컨텍스트 기반 메뉴 상의 선택된 아이템은 디스플레이된 콘텐츠의 복수의 선택된 부분에 적용될 수 있다.
도 7은 예시적인 컨텍스트 기반 메뉴에서 애니메이션 표시의 이용을 도시한다. 일부 실시예에 따르면, 컨텍스트 기반 메뉴 상에 디스플레이된 각 메뉴는 그래픽 객체, 텍스트 객체, 또는 그래픽과 텍스트 객체의 조합을 포함할 수 있다. 또한, 컬러 설계, 그래픽 설계, 애니메이션 설계, 및/또는 섀딩 설계가 컨텍스트 기반 메뉴의 시각적 효과를 개선하기 위해 이용될 수 있다.
예시적인 컨텍스트 기반 메뉴(702)는 애니메이션되는 중심(704)을 포함하며, 표시자(706)가 탭핑 또는 스와이핑과 같은 선택 동작(708)을 검출함에 따라 컨텍스트 기반 메뉴 상의 선택된 아이템을 표시하도록 이동한다. 컨텍스트 기반 메뉴(710)는 다른 선택 동작(714)에 따라 상이한 아이템을 나타내기 위해 표시자(712)의 위치가 변경되는 방식을 도시한다. 다수의 애니메이션 설계가 컨텍스트 기반 메뉴와 관련하여 이용될 수 있다. 페어런트 또는 서브메뉴 상의 아이템을 나타내는 임의의 아이콘 또는 텍스트는 애니메이션 방식으로 디스플레이될 수 있으며, 서로 다른 폰트 스타일, 컬러, 포맷 등과 같은 선택된 아이템에 대한 선택이 애니메이션 방식으로 제시될 수 있고(예로서, 스크롤, 플라잉인(flying in), 나타나고/사라지기 등), 메뉴는 애니메이션 방식으로 호버링 또는 선택과 같은 사용자 동작에 반응할 수 있다. 예를 들어, 런처가 애니메이션될 수 있다(예로서, 펜 메뉴에 있어서, 런처는 펜 움직임을 나타낼 수 있다). 유사하게, 컨텍스트 기반 메뉴는 검출된 사용자 동작(예로서, 스와이프, 탭핑 등)에 응답하여 애니메이션된 손가락 또는 펜을 디스플레이할 수 있다. 또한 애니메이션은 사용자에 의한 활성화 동작에 응답하여 페어런트 메뉴 또는 서브메뉴가 나타나는 것을 포함할 수 있다. 예를 들어, 도 4의 일렬 곡선 메뉴는 접히지 않은 활과 같이 나타날 수 있다. 일부 예시에서, 서브메뉴는 페어런트 메뉴의 중심 또는 다른 위치로부터 애니메이션 방식으로 확장하여 페어런트 메뉴와 겹쳐지거나 페어런트 메뉴를 대체할 수 있다. 다른 애니메이션 설계가 전술된 바와 같은 하나 이상의 다른 설계들과 함께 이용될 수 있다.
터치 및/또는 제스처 기반 동작을 인에이블하는 것에 추가로, 실시예에 따른 컨텍스트 기반 메뉴는 키보드 입력, 마우스 클릭, 및/또는 펜 입력에도 반응할 수 있다. 사용자가 터치 또는 제스처 기반 입력 외의 다른 입력에 대한 입력 디바이스를 이용하는 것을 돕기 위해, 메뉴 상의 각 아이템과 연관된 키보드 상의 키를 나타내는 컨텍스트 기반 메뉴 상의 알파벳 숫자 팁(tip)과 같은 컨텍스트 기반 메뉴의 각 아이템(및 중심)과 관련하여 팁이 디스플레이될 수 있다.
도 8은 예시적인 컨텍스트 기반 메뉴의 다른 측면을 도시한다. 일부 실시예에서, 하나 이상의 디스플레이된 아이템과 연관된 텍스트 팁이 메뉴 아이템과 연관된 팁과 같은 컨텍스트 기반 메뉴 안에 또는 밖에 디스플레이될 수 있다.
컨텍스트 기반 메뉴의 시각적 효과를 개선하기 위한 전술된 설계에 더하여, 메뉴 상의 아이템은 어떤 커맨드가 마지막 실행되었는지에 대한 사용자 이해를 개선하기 위한 방식으로 제시될 수 있다. 이것은 하이라이트, 컬러 변경, 또는 컨텍스트 기반 메뉴(806) 상의 아이템(808)과 같은 선택된 아이템의 배경 변경에 의해 달성될 수 있다. 다른 실시예에서, 선택된 아이템 또는 마지막 실행된 커맨드는 컨텍스트 기반 메뉴(810)의 중심(812)과 같이 리마인더로서 메뉴의 중심에 디스플레이될 수 있다.
다른 실시예에서, 컨텍스트 기반 메뉴는 메뉴 상의 빈 조각 또는 제한된 이용가능한 공간이 존재한다면 부분적으로 디스플레이될 수 있다. 전체가 로딩되었지만 공간이 제한된 메뉴의 경우에, 부분적으로 디스플레이된 메뉴(814)가 회전가능할 수 있다. 따라서, 사용자는 메뉴 상의 특정한 요소를 탭핑하거나 메뉴를 스와이핑함으로써 메뉴를 회전할 수 있으며 추가적인 요소가 제시될 수 있다.
또 다른 실시예에서, 각 카테고리 내의 커맨드의 리스트가 대표적인 커맨드의 선택 또는 하버-온(hover-on) 동작의 검출에 따라 대표적인 커맨드 부근에서 디스플레이될 수 있다. 예를 들어, 컨텍스트 기반 메뉴(816) 내의 폰트 스타일 요소의 선택에 따라, 이용가능한 폰트 스타일의 리스트가 리스트-스타일 메뉴(818) 내의 컨텍스트 기반 메뉴와 겹쳐지게 제시될 수 있다. 당연히, 관련된 커맨드는 리스트 스타일에 추가로 임의의 형식 또는 형태를 이용하여 제시될 수 있다.
도 9는 일부 실시예에 따른 예시적인 부분적 컨텍스트 기반 메뉴를 도시한다. 제한된 디스플레이 공간을 수용하기 위해서, 특히 모바일 디바이스에서, 컨텍스트 기반 메뉴는 부분적으로 콘텐츠의 선택된 부분과 함께 디스플레이될 수 있으며 이는 사용자가 가치있는 디스플레이 공간을 보존하는 한편 선택된 콘텐츠와 메뉴를 연관시킬 수 있게 한다.
사용자 인터페이스(902)는 선택된 콘텐츠(908)(이미지)의 코너에 정착된 예시적인 컨텍스트 기반 메뉴(904)를 도시한다. 메뉴 내의 아이템들은 가장 높은 우선순위(또는 가장 높은 이용도)의 아이템이 먼저 디스플레이되도록 콘텐츠 유형에 기초하여 선택될 수 있다. 다른 아이템들은 추가적인 요소를 나타내는 생략부호 아이템과 같은 아이템(906)의 선택에 따라 또는 컨텍스트 기반 메뉴를 회전시킴으로써 디스플레이될 수 있다. 메뉴는 사용자 속성에 기초하여 선택된 콘텐츠(908)에 인접한 서로 다른 위치에 위치될 수 있다(예로서, 좌측, 우측, 상단, 바닥 등).
도 1 내지 9에 도시된 예시적인 컨텍스트 기반 메뉴, 아이템, 상호작용 및 구성은 단지 예시적인 목적으로 제공되었다. 실시예는 예시적인 도면에 도시된 형태, 형식 및 콘텐츠로 한정되지 않으며, 본 명세서에 기술된 원리를 이용하는 다른 텍스트, 그래픽 및 유사한 설계를 사용하여 구현될 수 있다.
도 10은 실시예가 구현될 수 있는 예시적인 네트워킹된 환경이다. 아래에서 논의되는 애플리케이션(1122)과 같이 로컬로 설치된 애플리케이션에 추가로, 컨텍스트 기반 메뉴는 하나 이상의 서버(1006) 또는 개별적인 서버(1008) 상에서 실행되는 소프트웨어를 통해 구현될 수 있는 호스팅된 애플리케이션 및 서비스와 관련해서도 사용될 수 있다. 호스팅된 서비스 또는 애플리케이션은 웹 기반 서비스 또는 애플리케이션, 클라우드 기반 서비스 또는 애플리케이션 및 그와 유사한 것일 수 있고, 네트워크(들)(1010)를 통해 휴대용 컴퓨터(1001), 데스크탑 컴퓨터(1002), 랩탑 컴퓨터(1003), 스마트폰(1004), 태블릿 컴퓨터(또는 슬레이트)(1005)('클라이언트 디바이스')와 같은 개별적인 컴퓨팅 디바이스 상의 클라이언트 애플리케이션과 통신할 수 있으며, 사용자에게 제시되는 사용자 인터페이스를 제어할 수 있다. 웹 기반 서비스의 일 예시는 클라이언트 디바이스 상의 브라우저 인터페이스를 통해 클라이언트에게 워드 프로세싱, 스프레드시트, 통신, 스케줄링, 프레젠테이션 및 유사한 애플리케이션을 제공하는 생산성 스위트(suite)일 수 있다. 이러한 서비스는 사용자가 본 명세서에서 논의된 바와 같은 다양한 입력 메커니즘 및 컨텍스트 기반 메뉴를 통해 디스플레이된 콘텐츠와 상호작용하게 할 수 있다.
논의되었던 바와 같이, 컨텍스트 기반 메뉴는 호스팅된 서비스 또는 애플리케이션에 의해 제공되는 기능을 제어하도록 사용될 수 있다. 컨텍스트 기반 메뉴는 고정된 또는 동적 위치 런처 표시자를 통해 활성화될 수 있다.
클라이언트 디바이스(1001-1005)는 호스팅된 서비스 또는 애플리케이션에 의해 제공되는 기능에 액세스하도록 사용된다. 하나 이상의 서버들(1006) 또는 서버(1008)는 전술된 다양한 서비스를 제공하도록 사용될 수 있다. 관련 데이터는 서버들(1006) 중 임의의 하나 또는 데이터베이스 서버(1012)에 의해 관리될 수 있는 하나 이상의 데이터 스토어(예로서, 데이터 스토어(1014)) 내에 저장될 수 있다.
네트워크(들)(1010)는 서버, 클라이언트, 인터넷 서비스 제공자 및 통신 매체의 임의의 위상을 포함할 수 있다. 실시예에 따른 시스템은 정적 또는 동적 위상을 가질 수 있다. 네트워크(들)(1010)는 엔터프라이즈 네트워크와 같은 보안 네트워크, 무선 오픈 네트워크와 같은 비보안 네트워크, 또는 인터넷을 포함할 수 있다. 네트워크(들)(1010)는 또한 PSTN 또는 셀룰러 네트워크와 같은 다른 네트워크상의 통신을 조정할 수 있다. 네트워크(들)(1010)는 본 명세서에 기술된 노드들 간의 통신을 제공한다. 예시로서, 네트워크(들)(1010)는 음향, RF, 적외선과 같은 무선 매체 및 그 외의 무선 매체를 포함할 수 있지만 이것으로 한정되는 것은 아니다.
컴퓨팅 디바이스, 애플리케이션, 데이터 소스 및 데이터 분산 시스템의 다수의 다른 구성이 컨텍스트 기반 메뉴에 대한 런처 메커니즘을 제공하도록 사용될 수 있다. 또한, 도 10에서 논의된 네트워킹된 환경은 단지 예시를 위한 것이다. 실시예는 예시적인 애플리케이션, 모듈, 또는 프로세스로 한정되지 않는다.
도 11 및 그와 연관된 논의는, 실시예가 구현될 수 있는 적절한 컴퓨팅 환경에 대한 간략하고 일반적인 설명을 제공하기 위한 것이다. 도 11을 참조하면, 컴퓨팅 디바이스(1100)와 같이 실시예에 따른 애플리케이션을 위한 예시적인 컴퓨팅 운영 환경의 블록도가 도시되었다. 기본 구성에서, 컴퓨팅 디바이스(1100)는 임의의 고정식, 이동식, 또는 도 1a, 1b 및 10과 관련하여 논의된 예시적인 디바이스와 같은 다른 형식의 터치 및/또는 제스처 인에이블 디바이스일 수 있으며, 적어도 하나의 처리 장치(1102) 및 시스템 메모리(1104)를 포함한다. 또한 컴퓨팅 디바이스(1100)는 프로그램 실행시에 협력하는 복수의 처리 장치도 포함할 수 있다. 컴퓨팅 디바이스의 정확한 구성 및 유형에 따라서, 시스템 메모리(1104)는 (RAM과 같은) 휘발성, (ROM, 플래시 메모리 등과 같은) 비휘발성, 또는 이들의 조합일 수 있다. 시스템 메모리(1104)는 미국 워싱턴주 Redmond에 소재한 MICROSOFT CORPORATION사로부터의 WINDOWS®, WINDOWS MOBILE®, 또는 WINDOWS PHONE® 운영 시스템과 같이 전형적으로 플랫폼의 동작을 제어하기에 적합한 운영 시스템(805)을 포함한다. 시스템 메모리(1104)는 또한 프로그램 모듈(1106), 애플리케이션(1122), 컨텍스트 기반 메뉴 모듈(1124) 및 검출 모듈(1126)과 같은 하나 이상의 소프트웨어 애플리케이션을 포함할 수 있다.
컨텍스트 기반 메뉴 모듈(1124)은 운영 시스템(1105) 또는 애플리케이션(1122)과 함께 동작할 수 있으며, 전술된 바와 같은 터치 및/또는 제스처 인에이블된 컨텍스트 기반 메뉴를 제공할 수 있다. 검출 모듈(1126)은 또한 다양한 컨텍스트 기반 메뉴 아이템의 선택을 검출할 수 있다. 이러한 기본 구성은 도 11에서 점선(1108) 내의 구성요소들에 의해 도시되었다.
컴퓨팅 디바이스(1100)는 추가적인 특성 또는 기능을 가질 수 있다. 예를 들어, 컴퓨팅 디바이스(1100)는 예로서 자기 디스크, 광학 디스크, 또는 테이프와 같은 추가적인 데이터 저장 디바이스(제거가능 및/또는 제거 불가능)도 포함할 수 있다. 이러한 추가적인 스토리지가 도 11에서 제거가능한 스토리지(1109) 및 제거 불가능한 스토리지(1110)에 의해 도시되었다. 컴퓨터 판독가능한 저장 매체는, 컴퓨터 판독가능한 명령, 데이터 구조, 프로그램 모듈, 또는 다른 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현되는 휘발성 및 비휘발성, 제거가능 및 제거 불가능한 매체를 포함할 수 있다. 시스템 메모리(1104), 제거가능한 스토리지(1109) 및 제거 불가능한 스토리지(1110)는 모두 컴퓨터 판독가능한 저장 매체의 예시이다. 컴퓨터 판독가능한 저장 매체는 RAM, ROM, EEPROM, 플래시 메모리 또는 그 외의 메모리 기술, CD-ROM, DVD 또는 다른 광학 스토리지, 자기 카세트, 자기 테이프, 자기 디스크 스토리지 또는 다른 자기 스토리지 디바이스, 또는 원하는 정보를 저장하도록 사용될 수 있고 컴퓨팅 디바이스(1100)에 의해 액세스될 수 있는 임의의 다른 매체를 포함하지만, 이것으로 한정되는 것은 아니다. 이러한 임의의 컴퓨터 판독가능한 저장 매체는 컴퓨팅 디바이스(1100)의 일부일 수 있다. 컴퓨팅 디바이스(1100)는 또한 키보드, 마우스, 펜, 음성 입력 디바이스, 터치 입력 디바이스, 제스처 검출을 위한 광학적 캡처 디바이스 및 유사한 입력 디바이스와 같은 입력 디바이스(들)(1112)를 구비할 수 있다. 디스플레이, 스피커, 프린터 및 다른 유형의 출력 디바이스와 같은 출력 디바이스(들)(1114) 또한 포함될 수 있다. 이러한 디바이스들은 당업계에서 잘 알려져 있으며 본 명세서에서 길게 논의될 필요가 없다.
또한 컴퓨팅 디바이스(1100)는 예로서 분산 컴퓨팅 환경에서의 무선 네트워크, 위성 링크, 셀룰러 링크 및 유사한 메커니즘 상에서, 디바이스가 다른 디바이스(1118)와 통신하는 것을 가능케 하는 통신 접속(1116)을 포함할 수 있다. 다른 디바이스(1118)는 통신 애플리케이션을 실행하는 컴퓨터 디바이스(들), 다른 디렉토리 또는 정책 서버 및 유사한 디바이스를 포함할 수 있다. 통신 접속(들)(1116)은 통신 매체의 일 예시이다. 통신 매체는 컴퓨터 판독가능한 명령, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호 또는 다른 수송 메커니즘 내의 다른 데이터를 포함할 수 있으며, 임의의 정보 전달 매체를 포함할 수 있다. "변조된 데이터 신호"라는 용어는, 하나 이상의 자신의 특징 세트를 갖거나 신호 내의 정보를 인코딩하는 것과 관련된 방식이 변경된 신호를 의미한다. 예시로서, 통신 매체는 유선 네트워크 또는 다이렉트-유선 접속과 같은 유선 매체와, 유선, RF, 적외선 및 그 외의 무선 매체와 같은 무선 매체를 포함한다.
또한 예시적인 실시예는 방법을 포함한다. 이러한 방법은 본 명세서에 기술된 구조를 포함하는 다수의 방식으로 구현될 수 있다. 하나의 이러한 방식은 본 명세서에 기술된 유형의 디바이스의 기계 동작에 의한 것이다.
선택할 수 있는 다른 방식은 하나 이상의 사람 운영자와 함께 수행되는 방법의 하나 이상의 개별적인 동작에 대한 것이다. 이러한 사람 운영자들은 서로 같은 위치에 있을 필요가 없으며, 각각이 단지 프로그램의 일부를 수행하는 장치와 함께일 수 있다.
도 12는 실시예에 따라 동적 컨텍스트 기반 메뉴를 이용하는 프로세스에 대한 논리적 순서도를 도시한다. 프로세스(1200)는 애플리케이션 또는 운영 시스템의 일부로서 구현될 수 있다.
프로세스(1200)는 동작(1210)으로 시작하며, 콘텍츠의 선택, 런처 표시자의 활성화, 또는 유사한 동작(예로서, 스크린 탭핑 또는 동격의 제스처)이 검출될 수 있다. 콘텐츠의 일부 선택 또는 유사한 동작을 검출하면, 동적 컨텍스트 기반 메뉴가 동작(1220)에서 제시될 수 있다. 동적 컨텍스트 기반 메뉴의 위치는 선택된 컨텐츠, 사용자 동작의 위치, 이용가능한 디스플레이 영역, 사용자 속성(예로서, 언어가 우측에서 좌측 방향으로 쓰이는 언어인지) 및 유사한 요인들에 자동으로 기초하여 선택될 수 있다.
상기 컨텍스트 기반 메뉴의 제시에 이어서, 메뉴 상의 아이템 선택이 탭핑, 스와이핑, 프레스 앤 홀드, 또는 유사한 동작을 통해서 동작(1230)에서 검출될 수 있다. 메뉴 상의 아이템들은 실행가능한 커맨드 또는 서브메뉴로의 링크일 수 있다. 동작(1240)에서, 선택된 아이템에 따라 선택된 커맨드가 실행될 수 있거나 서브메뉴가 디스플레이될 수 있다. 특정한 커맨드의 실행 또는 컨텍스트 기반 메뉴의 구성에 기초하여, 메뉴는 선택적 동작(1250)에서 숨겨질 수 있다. 만약 서브메뉴가 시작되면, 컨텍스트 기반 메뉴 또한 숨겨질 수 있으며, 전체 또는 부분적으로 계속 디스플레이될 수도 있다. 컨텍스트 기반 메뉴가 나타나는 것 및/또는 사라지는 것은 애니메이션될 수 있다. 일부 실시예에서, 컨텍스트 기반 메뉴 상의 개별적인 요소 및/또는 전이가 애니메이션될 수도 있다.
프로세스(1200) 내에 포함된 동작들은 예시를 위한 것이다. 실시예에 따라 컨텍스트 기반 메뉴를 제시하는 것은 더 적은 단계들을 갖거나 추가의 단계들을 갖는 유사한 프로세스에 의해 구현될 수 있을 뿐 아니라, 본 명세서에 기술된 원리를 이용하는 상이한 순서의 동작들로 구현될 수 있다.
전술된 명세, 예시 및 데이터는 실시예의 구성의 이용 및 제작에 대한 완전한 설명을 제공한다. 청구사항이 구조적 특성들 및/또는 방법론적 동작들에 대해 특정한 언어로 기술되었지만, 첨부된 특허청구범위에 정의된 청구사항이 전술된 특정한 특성들 또는 동작들로 반드시 한정되는 것은 아님을 이해해야 한다. 오히려, 전술된 특정한 특성들 및 동작들은 특허청구범위 및 실시예를 구현하는 예시적인 형태로서 개시되었다.

Claims (15)

  1. 컴퓨팅 디바이스에서 적어도 부분적으로 실행되는 동적 컨텍스트 기반 메뉴(dynamic context based menu)를 제공하는 방법으로서,
    사용자 인터페이스 상에서의 디스플레이된 콘텐츠의 일부분의 선택, 삽입 포인트 그리퍼(gripper) 상에서의 탭핑 동작(tap action) 및 상기 사용자 인터페이스 상의 런처 표시자(launcher indicator)와 연관된 동작 중 하나를 검출한 것에 응답하여, 상기 디스플레이된 콘텐츠의 상기 선택된 부분, 디스플레이된 콘텐츠 유형, 이용가능한 디스플레이 영역, 사용자 인터페이스 경계, 입력 유형 및 디바이스 유형의 세트로부터의 적어도 하나에 기초하여 동적으로 선택된 위치에 상기 컨텍스트 기반 메뉴를 제시하는 단계와,
    상기 컨텍스트 기반 메뉴 상에 디스플레이된 복수의 아이템으로부터 하나 이상의 아이템을 선택한 것의 검출에 응답하여, 커맨드를 실행하는 단계와 상기 선택된 하나 이상의 아이템과 연관된 서브메뉴를 디스플레이하는 단계 중 하나를 수행하는 단계를 포함하는
    방법.
  2. 제 1 항에 있어서,
    상기 동작은, 상기 사용자 인터페이스 상의 고정된 런처 표시자에 대한 탭핑 동작, 동적 런처 표시자에 대한 탭핑 동작, 상기 동적 런처 표시자에 대한 스와이핑(swipe) 동작, 키보드 입력 조합, 마우스 입력, 펜 입력, 선택된 객체에 대한 탭핑 동작, 콘텐츠 선택 핸들의 쌍 중 하나에 대한 탭핑 동작, 가속도계 센서 기반 입력, 방향 센서 기반 입력, 광학적으로 캡처된 제스처, 시간 기반 입력, 다른 디바이스에 대한 근접성, 다른 사람에 대한 근접성 및 장소에 대한 근접성의 세트로부터의 적어도 하나를 포함하는
    방법.
  3. 제 1 항에 있어서,
    상기 사용자 인터페이스 상의 고정된 위치에 상기 컨텍스트 기반 메뉴를 제시하는 단계를 더 포함하는
    방법.
  4. 제 1 항에 있어서,
    사용자 속성에 기초하여 상기 디스플레이된 콘텐츠의 상기 선택된 부분의 좌측, 우측, 상단 및 바닥 중 하나를 따라 상기 컨텍스트 기반 메뉴를 제시하는 단계를 더 포함하는
    방법.
  5. 제 1 항에 있어서,
    상기 이용가능한 디스플레이 영역의 변화에 응답하여, 상기 컨텍스트 기반 메뉴를 상기 사용자 인터페이스 상의 다른 위치로 이동시키는 단계를 더 포함하는
    방법.
  6. 제 1 항에 있어서,
    상기 컨텍스트 기반 메뉴는, 별개의 커맨드 카테고리와 리스트 스타일 메뉴를 나타내는 아이템들을 제시하는 실질적으로 방사상인(radial) 메뉴를 포함하며, 디스플레이된 아이템의 카테고리는 상기 컨텍스트 기반 메뉴 상의 아이템들의 프레젠테이션을 변경시키고, 상기 컨텍스트 기반 메뉴 상에 디스플레이된 다수의 아이템 중 적어도 하나와 메뉴 스타일이 상기 컨텍스트 기반 메뉴가 상기 디스플레이된 콘텐츠의 상기 선택된 부분과 접속되도록 선택된 콘텐츠 유형과 이용가능한 디스플레이 영역에 기초하여 조정되는
    방법.
  7. 제 6 항에 있어서,
    상기 컨텍스트 기반 메뉴는 실질적으로 방사 형태, 실질적으로 직사각형 형태, 일렬 직선, 일렬 곡선, 꽃 모양 및 불규칙한 형태 중 하나를 갖는
    방법.
  8. 제 1 항에 있어서,
    실질적으로 방사 형태인 컨텍스트 기반 메뉴 상에서의 회전 스와이핑 동작을 통해 카테고리 내의 이용가능한 아이템들의 선택을 가능하게 하는 단계를 더 포함하되,
    상기 이용가능한 아이템들은 상기 컨텍스트 기반 메뉴의 중심과 상기 컨텍스트 기반 메뉴 부근 중 하나에 스크롤링 리스트 방식(scrolling list fashion)으로 디스플레이되는
    방법.
  9. 동적 컨텍스트 기반 메뉴를 제공하는 컴퓨팅 디바이스로서,
    입력 디바이스와,
    메모리와,
    상기 메모리 및 상기 입력 디바이스에 연결된 프로세서를 포함하되,
    상기 프로세서는 애플리케이션을 실행하고 상기 애플리케이션과 연관된 사용자 인터페이스가 스크린상에 디스플레이되도록 하며,
    상기 프로세서는,
    사용자 인터페이스 상에서의 디스플레이된 콘텐츠의 일부분의 선택, 삽입 포인트 그리퍼 상에서의 탭핑 동작 및 상기 사용자 인터페이스 상의 런처 표시자와 연관된 동작 중 하나를 검출한 것에 응답하여, 상기 디스플레이된 콘텐츠의 상기 선택된 부분, 디스플레이된 콘텐츠 유형, 이용가능한 디스플레이 영역, 사용자 인터페이스 경계, 입력 유형 및 디바이스 유형의 세트로부터의 적어도 하나에 기초하여 동적으로 선택된 위치에 상기 컨텍스트 기반 메뉴를 제시하고,
    상기 컨텍스트 기반 메뉴 상에 디스플레이된 복수의 아이템으로부터 하나 이상의 아이템을 선택한 것의 검출에 응답하여, 커맨드를 실행하는 단계와 상기 선택된 하나 이상의 아이템과 연관된 서브메뉴를 디스플레이하는 단계 중 하나를 수행하고,
    사전정의된 커맨드의 실행, 상기 컨텍스트 기반 메뉴로부터 떨어진 위치의 탭핑 동작, 상기 컨텍스트 기반 메뉴 상에 디스플레이된 백 버튼(back button)의 선택, 스크롤 동작, 줌 동작, 디스플레이된 콘텐츠의 다른 부분 선택, 새로운 콘텐츠 입력 및 다른 사용자 인터페이스의 선택 중 하나에 응답하여, 상기 컨텍스트 기반 메뉴를 숨기도록 구성되는
    컴퓨팅 디바이스.
  10. 제 9 항에 있어서,
    상기 컨텍스트 기반 메뉴 상의 아이템들은 마우스 호버(hover), 키보드 포커스, 아이템 누름, 아이템 선택, 호버 선택(hover selected), 아이템 디스에이블(disabled), 디스에이블된 호버 및 정상 상태 중 하나 이상을 포함하는 현재 상태를 나타내는
    컴퓨팅 디바이스.
  11. 제 9 항에 있어서,
    상기 애플리케이션은 사용자가 클라이언트 디바이스 상의 브라우저를 통해서 디스플레이되는 콘텐츠와 상호작용할 수 있게 하는 웹 기반 애플리케이션 및 클라우드 기반 애플리케이션 중 하나인
    컴퓨팅 디바이스.
  12. 제 9 항에 있어서,
    상기 컨텍스트 기반 메뉴는 방사 형태를 가지고, 상기 아이템은 상기 컨텍스트 기반 메뉴의 허브 및 스포크(hub and spoke) 스타일 조각 위에 디스플레이되며, 서브메뉴로의 하나 이상의 링크가 상기 컨텍스트 기반 메뉴의 중심에 또는 상기 컨텍스트 기반 메뉴의 외부 반경을 따라 제시되는
    컴퓨팅 디바이스.
  13. 터치 및 제스처 인에이블(touch and gesture enabled) 디바이스를 위한 동적 컨텍스트 기반 메뉴를 제공하기 위한 명령어가 저장된 컴퓨터 판독가능한 메모리 디바이스로서,
    상기 명령어는,
    사용자 인터페이스 상에서의 디스플레이된 콘텐츠의 일부분의 선택, 삽입 포인트 그리퍼 상에서의 탭핑 동작 및 상기 사용자 인터페이스 상의 런처 표시자와 연관된 동작 중 하나를 검출한 것에 응답하여, 상기 디스플레이된 콘텐츠의 상기 선택된 부분, 디스플레이된 콘텐츠 유형, 이용가능한 디스플레이 영역, 사용자 인터페이스 경계, 입력 유형 및 디바이스 유형의 세트로부터의 적어도 하나에 기초하여 동적으로 선택된 위치에 상기 컨텍스트 기반 메뉴를 제시하는 단계와,
    상기 컨텍스트 기반 메뉴 상에 디스플레이된 복수의 아이템으로부터 하나 이상의 아이템을 선택한 것의 검출에 응답하여, 커맨드를 실행하는 단계와 상기 선택된 하나 이상의 아이템과 연관된 서브메뉴를 디스플레이하는 단계 중 하나를 수행하는 단계와,
    사전정의된 커맨드의 실행, 상기 컨텍스트 기반 메뉴로부터 떨어진 위치의 탭핑 동작, 상기 컨텍스트 기반 메뉴 상에 디스플레이된 백 버튼의 선택, 스크롤 동작, 줌 동작, 디스플레이된 콘텐츠의 다른 부분의 선택, 새로운 콘텐츠 입력 및 다른 사용자 인터페이스의 선택 중 하나에 응답하여, 상기 컨텍스트 기반 메뉴를 숨기는 단계
    를 수행하는
    컴퓨터 판독가능한 메모리 디바이스.
  14. 제 13 항에 있어서,
    상기 컨텍스트 기반 메뉴 상에 디스플레이된 각 아이템은 그래픽 객체, 텍스트 객체 및 그래픽 객체와 텍스트 객체의 조합 중 하나를 포함하고,
    컬러 설계, 그래픽 설계, 애니메이션 설계 및 섀딩(shading) 설계의 세트로부터의 적어도 하나가 상기 콘텍스트 기반 메뉴의 시각적 효과를 개선하도록 사용되는
    컴퓨터 판독가능한 메모리 디바이스.
  15. 제 14 항에 있어서,
    상기 명령어는,
    애니메이션 설계(animation scheme)를 통해 컨텍스트 기반 메뉴 런처, 상기 컨텍스트 기반 메뉴, 상기 컨텍스트 기반 메뉴 상의 아이템 및 서브메뉴의 세트로부터의 적어도 하나가 나타나는 것, 사라지는 것, 프레젠테이션 중 하나를 제시하는 단계를 더 수행하는
    컴퓨터 판독가능한 메모리 디바이스.
KR1020147000782A 2011-07-14 2012-07-14 동적 컨텍스트 기반 메뉴 KR101922749B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161507983P 2011-07-14 2011-07-14
US61/507,983 2011-07-14
US13/289,272 2011-11-04
US13/289,272 US9582187B2 (en) 2011-07-14 2011-11-04 Dynamic context based menus
PCT/US2012/046824 WO2013010155A2 (en) 2011-07-14 2012-07-14 Dynamic context based menus

Publications (2)

Publication Number Publication Date
KR20140048934A true KR20140048934A (ko) 2014-04-24
KR101922749B1 KR101922749B1 (ko) 2018-11-27

Family

ID=47506971

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147000782A KR101922749B1 (ko) 2011-07-14 2012-07-14 동적 컨텍스트 기반 메뉴

Country Status (7)

Country Link
US (1) US9582187B2 (ko)
EP (1) EP2732365B1 (ko)
JP (1) JP6050348B2 (ko)
KR (1) KR101922749B1 (ko)
CN (1) CN103649894B (ko)
TW (1) TWI539358B (ko)
WO (1) WO2013010155A2 (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101594946B1 (ko) * 2014-11-21 2016-02-17 스튜디오씨드코리아 주식회사 프로토타이핑 툴을 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR20160041085A (ko) * 2014-10-06 2016-04-18 전자부품연구원 사용자 맞춤형 콘텐츠 적응 객체 구성 방법, 이를 수행하는 사용자 맞춤형 콘텐츠 적응 객체 구성 서버 및 이를 저장하는 기록매체
KR101700117B1 (ko) * 2015-07-23 2017-02-01 주식회사 아이에스엘코리아 인터렉티브 전자저작도구, 이를 제공하는 컴퓨터 장치 및 방법
KR20170078007A (ko) * 2015-12-29 2017-07-07 에스케이플래닛 주식회사 사용자 장치, 그의 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체
US9922260B2 (en) 2014-08-29 2018-03-20 Samsung Electronics Co., Ltd. Scrapped information providing method and apparatus
KR20210080285A (ko) * 2019-12-20 2021-06-30 (주)클로버추얼패션 디자인 정보 제공 방법
KR20220038038A (ko) * 2015-06-18 2022-03-25 삼성전자주식회사 전자 장치 및 전자 장치에서의 노티피케이션 처리 방법
WO2023008916A1 (ko) * 2021-07-30 2023-02-02 삼성전자주식회사 전자 장치 및 이의 제어 방법

Families Citing this family (234)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9886231B2 (en) 2008-03-28 2018-02-06 Kopin Corporation Head worn wireless computer having high-resolution display suitable for use as a mobile internet device
US9418054B2 (en) * 2008-05-12 2016-08-16 Adobe Systems Incorporated Document comment management
US10627860B2 (en) 2011-05-10 2020-04-21 Kopin Corporation Headset computer that uses motion and voice commands to control information display and remote devices
US9513799B2 (en) 2011-06-05 2016-12-06 Apple Inc. Devices, methods, and graphical user interfaces for providing control of a touch-based user interface absent physical touch capabilities
US10001898B1 (en) 2011-07-12 2018-06-19 Domo, Inc. Automated provisioning of relational information for a summary data visualization
US9792017B1 (en) 2011-07-12 2017-10-17 Domo, Inc. Automatic creation of drill paths
US9202297B1 (en) * 2011-07-12 2015-12-01 Domo, Inc. Dynamic expansion of data visualizations
US9146665B2 (en) 2011-09-30 2015-09-29 Paypal, Inc. Systems and methods for enhancing user interaction with displayed information
US10248439B2 (en) * 2011-11-10 2019-04-02 Microsoft Technology Licensing, Llc Format object task pane
CN102566900A (zh) * 2011-11-17 2012-07-11 珠海金山办公软件有限公司 一种上下文工具条的显示控制方法
KR101879333B1 (ko) * 2011-12-06 2018-07-17 엘지전자 주식회사 이동 단말기 및 그의 아이콘 배열방법
US9116611B2 (en) 2011-12-29 2015-08-25 Apple Inc. Devices, methods, and graphical user interfaces for providing multitouch inputs and hardware-based features using a single touch input
US9400588B2 (en) * 2012-01-04 2016-07-26 Oracle International Corporation Supporting display of context menus in both cascaded and overlapping styles
US20130191781A1 (en) * 2012-01-20 2013-07-25 Microsoft Corporation Displaying and interacting with touch contextual user interface
US9928562B2 (en) 2012-01-20 2018-03-27 Microsoft Technology Licensing, Llc Touch mode and input type recognition
US20130219340A1 (en) * 2012-02-21 2013-08-22 Sap Ag Navigation on a Portable Electronic Device
US8954890B2 (en) * 2012-04-12 2015-02-10 Supercell Oy System, method and graphical user interface for controlling a game
US9256351B2 (en) * 2012-07-20 2016-02-09 Blackberry Limited Method and electronic device for facilitating user control of a menu
US9619445B1 (en) * 2012-08-23 2017-04-11 Inkling Systems, Inc. Conversion of content to formats suitable for digital distributions thereof
US9645717B2 (en) * 2012-09-05 2017-05-09 Sap Portals Israel Ltd. Managing a selection mode for presented content
JP5844707B2 (ja) * 2012-09-28 2016-01-20 富士フイルム株式会社 画像表示制御装置、画像表示装置、プログラム及び画像表示方法
US9448694B2 (en) * 2012-11-09 2016-09-20 Intel Corporation Graphical user interface for navigating applications
KR102085225B1 (ko) * 2012-12-05 2020-03-05 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
USD835118S1 (en) 2012-12-05 2018-12-04 Lg Electronics Inc. Television receiver with graphical user interface
US11513675B2 (en) 2012-12-29 2022-11-29 Apple Inc. User interface for manipulating user interface objects
US20140215373A1 (en) * 2013-01-28 2014-07-31 Samsung Electronics Co., Ltd. Computing system with content access mechanism and method of operation thereof
US10649619B2 (en) * 2013-02-21 2020-05-12 Oath Inc. System and method of using context in selecting a response to user device interaction
USD739872S1 (en) * 2013-02-22 2015-09-29 Samsung Electronics Co., Ltd. Display screen with animated graphical user interface
USD702250S1 (en) * 2013-02-27 2014-04-08 Microsoft Corporation Display screen with graphical user interface
USD716819S1 (en) 2013-02-27 2014-11-04 Microsoft Corporation Display screen with graphical user interface
USD702252S1 (en) * 2013-02-27 2014-04-08 Microsoft Corporation Display screen with graphical user interface
USD702251S1 (en) * 2013-02-27 2014-04-08 Microsoft Corporation Display screen with graphical user interface
USD702253S1 (en) * 2013-02-27 2014-04-08 Microsoft Corporation Display screen with graphical user interface
CN104885047A (zh) * 2013-03-07 2015-09-02 东莞宇龙通信科技有限公司 终端和终端操控方法
US10025459B2 (en) 2013-03-14 2018-07-17 Airwatch Llc Gesture-based workflow progression
US9792014B2 (en) 2013-03-15 2017-10-17 Microsoft Technology Licensing, Llc In-place contextual menu for handling actions for a listing of items
US9785240B2 (en) * 2013-03-18 2017-10-10 Fuji Xerox Co., Ltd. Systems and methods for content-aware selection
US20140344755A1 (en) * 2013-05-16 2014-11-20 Avaya, Inc. Method and system for rotational list based user interface
USD741898S1 (en) * 2013-05-29 2015-10-27 Microsoft Corporation Display screen with animated graphical user interface
KR102138505B1 (ko) * 2013-07-10 2020-07-28 엘지전자 주식회사 이동단말기 및 그 제어방법
AU2014290148A1 (en) * 2013-07-16 2016-02-11 Pinterest, Inc. Object based contextual menu controls
US20150033188A1 (en) * 2013-07-23 2015-01-29 Microsoft Corporation Scrollable smart menu
US20150058808A1 (en) * 2013-08-23 2015-02-26 General Electric Company Dynamic contextual touch menu
USD745533S1 (en) * 2013-08-27 2015-12-15 Tencent Technology (Shenzhen) Company Limited Display screen or a portion thereof with graphical user interface
US10503388B2 (en) 2013-09-03 2019-12-10 Apple Inc. Crown input for a wearable electronic device
US10545657B2 (en) * 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
EP3340025B1 (en) 2013-09-03 2019-06-12 Apple Inc. User interface for manipulating user interface objects with magnetic properties
US9519401B2 (en) * 2013-09-18 2016-12-13 Adobe Systems Incorporated Providing context menu based on predicted commands
KR20150055528A (ko) * 2013-11-13 2015-05-21 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CN103616992B (zh) 2013-11-13 2017-10-17 华为技术有限公司 应用程序控制方法和装置
KR102206053B1 (ko) * 2013-11-18 2021-01-21 삼성전자주식회사 입력 도구에 따라 입력 모드를 변경하는 전자 장치 및 방법
CN103645854A (zh) * 2013-11-29 2014-03-19 广州视源电子科技股份有限公司 在触控屏幕任意位置唤出虚拟按键ui的方法
AU2014360630A1 (en) * 2013-12-02 2016-06-09 Thales Canada Inc. User interface for a tactical battle management system
AU2014360629B2 (en) * 2013-12-02 2019-12-05 Thales Canada Inc. Interactive reticle for a tactical battle management system user interface
US20150153932A1 (en) * 2013-12-04 2015-06-04 Samsung Electronics Co., Ltd. Mobile device and method of displaying icon thereof
US9170786B1 (en) * 2013-12-20 2015-10-27 Emc Corporation Composable context menus
US9756147B1 (en) 2013-12-20 2017-09-05 Open Text Corporation Dynamic discovery and management of page fragments
US10466872B1 (en) 2013-12-20 2019-11-05 Open Text Corporation Composable events for dynamic user interface composition
US9529572B1 (en) 2013-12-20 2016-12-27 Emc Corporation Composable application session parameters
US9851951B1 (en) 2013-12-20 2017-12-26 Emc Corporation Composable action flows
USD751606S1 (en) * 2013-12-30 2016-03-15 Beijing Qihoo Technology Co., Ltd. Display screen with animated graphical user interface
US10915698B2 (en) * 2013-12-31 2021-02-09 Barnes & Noble College Booksellers, Llc Multi-purpose tool for interacting with paginated digital content
US10331777B2 (en) 2013-12-31 2019-06-25 Barnes & Noble College Booksellers, Llc Merging annotations of paginated digital content
USD753680S1 (en) * 2014-01-03 2016-04-12 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD738898S1 (en) 2014-01-09 2015-09-15 Microsoft Corporation Display screen with graphical user interface
US10198148B2 (en) * 2014-01-17 2019-02-05 Microsoft Technology Licensing, Llc Radial menu user interface with entry point maintenance
US10291729B2 (en) * 2014-01-21 2019-05-14 Apptimize, Inc. User interface modification and usage tracking
US9804749B2 (en) 2014-03-03 2017-10-31 Microsoft Technology Licensing, Llc Context aware commands
JP6268526B2 (ja) * 2014-03-17 2018-01-31 オムロン株式会社 マルチメディア装置、マルチメディア装置の制御方法、及びマルチメディア装置の制御プログラム
US20150286349A1 (en) * 2014-04-02 2015-10-08 Microsoft Corporation Transient user interface elements
US10366395B2 (en) * 2014-04-11 2019-07-30 Infocus Corporation Interactive and custom-support kiosk, methods and system
US20150331557A1 (en) * 2014-05-14 2015-11-19 Microsoft Corporation Selector to coordinate experiences between related applications
US9552473B2 (en) 2014-05-14 2017-01-24 Microsoft Technology Licensing, Llc Claiming data from a virtual whiteboard
US10270819B2 (en) 2014-05-14 2019-04-23 Microsoft Technology Licensing, Llc System and method providing collaborative interaction
US20150339277A1 (en) * 2014-05-23 2015-11-26 Search Optics, LLC Systems and methods for programming behavior of a website to respond to capabilities of different devices
CN104063241B (zh) * 2014-06-05 2017-07-18 广东威创视讯科技股份有限公司 宿主程序与com组件的图像同步显示的方法与系统
CN104063126A (zh) * 2014-06-09 2014-09-24 深圳市东信时代信息技术有限公司 一种散点式菜单的实现方法
USD765669S1 (en) * 2014-06-10 2016-09-06 Microsoft Corporation Display screen with graphical user interface
CN104007897A (zh) * 2014-06-19 2014-08-27 中科创达软件股份有限公司 一种用于文本编辑的工具栏的显示方法及系统
US20150378530A1 (en) * 2014-06-27 2015-12-31 Microsoft Technology Licensing, Llc Command surface drill-in control
US9804767B2 (en) 2014-06-27 2017-10-31 Microsoft Technology Licensing, Llc Light dismiss manager
CN118192869A (zh) 2014-06-27 2024-06-14 苹果公司 尺寸减小的用户界面
US20150378600A1 (en) * 2014-06-27 2015-12-31 Microsoft Technology Licensing, Llc Context menu utilizing a context indicator and floating menu bar
KR20160019760A (ko) * 2014-08-12 2016-02-22 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN105335045A (zh) * 2014-08-12 2016-02-17 富泰华工业（深圳）有限公司 变更桌面图标的方法及系统
US10534500B1 (en) * 2014-08-29 2020-01-14 Open Invention Network Llc Color based search application interface and corresponding control functions
GB2529703A (en) * 2014-08-29 2016-03-02 Vodafone Ip Licensing Ltd Mobile telecommunications terminal and method of operation thereof
USD752624S1 (en) 2014-09-01 2016-03-29 Apple Inc. Display screen or portion thereof with graphical user interface
USD772284S1 (en) 2014-09-01 2016-11-22 Apple Inc. Display screen or portion thereof with a set of graphical user interfaces
CN105468612A (zh) * 2014-09-01 2016-04-06 深圳富泰宏精密工业有限公司 辅助浏览系统及方法
USD771123S1 (en) 2014-09-01 2016-11-08 Apple Inc. Display screen or portion thereof with multi-state graphical user interface
WO2016036510A1 (en) 2014-09-02 2016-03-10 Apple Inc. Music user interface
TWI676127B (zh) 2014-09-02 2019-11-01 美商蘋果公司 關於電子郵件使用者介面之方法、系統、電子器件及電腦可讀儲存媒體
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
CN112130720A (zh) 2014-09-02 2020-12-25 苹果公司 多维对象重排
USD762659S1 (en) 2014-09-02 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
USD735754S1 (en) * 2014-09-02 2015-08-04 Apple Inc. Display screen or portion thereof with graphical user interface
WO2016036416A1 (en) 2014-09-02 2016-03-10 Apple Inc. Button functionality
USD762660S1 (en) 2014-09-03 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
EP3001296A1 (en) * 2014-09-29 2016-03-30 Silent Circle, LLC Method, device, and computer programm for generating an inverse sliding menu for graphical user interfaces
KR20160038413A (ko) * 2014-09-30 2016-04-07 삼성전자주식회사 콘텐츠 탐색 장치 및 콘텐츠 탐색 방법
US10108320B2 (en) * 2014-10-08 2018-10-23 Microsoft Technology Licensing, Llc Multiple stage shy user interface
EP3007050A1 (de) * 2014-10-08 2016-04-13 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zur Anpassung einer Menüleiste auf einer Anwenderschnittstelle
TWI533196B (zh) * 2014-10-09 2016-05-11 緯創資通股份有限公司 虛擬按鈕的顯示方法及其電子裝置與電腦程式產品
CN105589737A (zh) * 2014-10-22 2016-05-18 深圳富泰宏精密工业有限公司 桌面应用管理方法及系统
US10949075B2 (en) * 2014-11-06 2021-03-16 Microsoft Technology Licensing, Llc Application command control for small screen display
US20160132201A1 (en) * 2014-11-06 2016-05-12 Microsoft Technology Licensing, Llc Contextual tabs in mobile ribbons
US20160132992A1 (en) 2014-11-06 2016-05-12 Microsoft Technology Licensing, Llc User interface scaling for devices based on display size
KR102328823B1 (ko) 2014-11-12 2021-11-19 삼성전자 주식회사 화면 내 빈 영역 활용 방법 및 장치
CN105678826B (zh) * 2014-11-19 2019-01-18 珠海金山办公软件有限公司 多对象动画的实现方法及系统
USD802008S1 (en) * 2014-11-24 2017-11-07 Gd Midea Air-Conditioning Equipment Co., Ltd. Portion of a display screen with graphical user interface
KR102390647B1 (ko) * 2014-11-25 2022-04-26 삼성전자주식회사 전자장치 및 전자장치의 객체 제어 방법
KR102397602B1 (ko) * 2014-11-25 2022-05-16 삼성전자 주식회사 그래픽 사용자 인터페이스를 제공하는 방법 및 전자 장치
USD759081S1 (en) * 2014-12-11 2016-06-14 Microsoft Corporation Display screen with animated graphical user interface
USD768702S1 (en) 2014-12-19 2016-10-11 Amazon Technologies, Inc. Display screen or portion thereof with a graphical user interface
US20160202675A1 (en) * 2015-01-13 2016-07-14 Wallrust, Inc. Dynamically Reconfigurable Service and Status Manager
US10048839B2 (en) * 2015-01-22 2018-08-14 Flow Labs, Inc. Hierarchy navigation in a user interface
US20160231876A1 (en) * 2015-02-06 2016-08-11 Yifei Wang Graphical interaction in a touch screen user interface
US10365807B2 (en) 2015-03-02 2019-07-30 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
USD762671S1 (en) 2015-03-06 2016-08-02 Apple Inc. Display screen or portion thereof with animated graphical user interface
JP6786197B2 (ja) * 2015-03-20 2020-11-18 ヤフー株式会社 情報処理装置、情報処理方法および情報処理プログラム
WO2016151582A1 (en) * 2015-03-26 2016-09-29 Yaron Chen Programmatic personalization of navigation menus in web sites and applications
USD783654S1 (en) * 2015-04-21 2017-04-11 Jingtao HU Display screen with graphic user interface
JP1566075S (ko) * 2015-04-21 2016-12-26
JP1566076S (ko) * 2015-04-21 2016-12-26
CN108353126B (zh) 2015-04-23 2019-08-23 苹果公司 处理相机的内容的方法、电子设备和计算机可读存储介质
US10628006B2 (en) * 2015-05-11 2020-04-21 Samsung Electronics Co., Ltd. Electronic device and method for managing applications on an electronic device
US9961239B2 (en) 2015-06-07 2018-05-01 Apple Inc. Touch accommodation options
CN104991717A (zh) * 2015-06-24 2015-10-21 广州市久邦数码科技有限公司 一种虚拟开关中心及其控制开关切换的方法
US11010539B2 (en) 2015-06-30 2021-05-18 Microsoft Technology Licensing, Llc State-specific commands in collaboration services
CN105045504B (zh) * 2015-07-23 2018-07-31 小米科技有限责任公司 图像内容提取方法及装置
US10620772B2 (en) 2015-07-29 2020-04-14 Microsoft Technology Licensing, Llc Universal back navigation for multiple windows
KR20170024846A (ko) * 2015-08-26 2017-03-08 엘지전자 주식회사 이동단말기 및 그 제어방법
USD784396S1 (en) * 2015-09-02 2017-04-18 Samsung Electronics Co., Ltd Display screen or portion thereof with graphical user interface
US9671244B2 (en) 2015-09-18 2017-06-06 Les Solutions Cyclelabs Inc. Electronic device and method for providing travel information
US10282058B1 (en) * 2015-09-25 2019-05-07 Workday, Inc. Touch screen context menu
US10908776B2 (en) 2015-09-29 2021-02-02 Huawei Technologies Co., Ltd. Human-computer interaction method of user terminal, apparatus, and user terminal
US10386997B2 (en) * 2015-10-23 2019-08-20 Sap Se Integrating functions for a user input device
CN106775264A (zh) * 2015-11-24 2017-05-31 北京国双科技有限公司 展示菜单的方法及装置
CN105653578A (zh) * 2015-12-18 2016-06-08 北京奇虎科技有限公司 一种浏览器的操作方法及电子设备
CN105630305A (zh) * 2015-12-18 2016-06-01 北京奇虎科技有限公司 一种显示浏览器中菜单选项的方法及电子设备
CN105589629A (zh) * 2015-12-18 2016-05-18 北京奇虎科技有限公司 一种操作应用程序的方法及电子设备
CN105630891A (zh) * 2015-12-18 2016-06-01 北京奇虎科技有限公司 一种菜单选项的显示方法及电子设备
CN105630886A (zh) * 2015-12-18 2016-06-01 北京奇虎科技有限公司 一种浏览器的控制方法及电子设备
CN105677177A (zh) * 2015-12-31 2016-06-15 联想(北京)有限公司 显示方法及显示设备
US10599324B2 (en) 2015-12-31 2020-03-24 Microsoft Technology Licensing, Llc Hand gesture API using finite state machine and gesture language discrete values
USD800749S1 (en) 2016-02-04 2017-10-24 Epic Tech, Llc Display screen with graphical user interface for a penny auction
USD801359S1 (en) * 2016-02-04 2017-10-31 Epic Tech, Llc Display screen with graphical user interface for a penny auction
USD800748S1 (en) 2016-02-04 2017-10-24 Epic Tech, Llc Display screen with graphical user interface for a penny auction
USD801358S1 (en) 2016-02-04 2017-10-31 Epic Tech, Llc Display screen with graphical user interface for a penny auction
USD808414S1 (en) 2016-02-04 2018-01-23 Epic Tech, Llc Monitor display screen with penny auction graphical user interface
US10514826B2 (en) * 2016-02-08 2019-12-24 Microsoft Technology Licensing, Llc Contextual command bar
US10241648B2 (en) * 2016-02-29 2019-03-26 Hrb Innovations, Inc. Context-aware field value suggestions
US20170286479A1 (en) * 2016-04-01 2017-10-05 International Business Machines Corporation System and method for intelligent renaming or augmented naming based on common use
CN105912258B (zh) * 2016-04-13 2019-12-13 北京小米移动软件有限公司 操作处理方法及装置
KR102334521B1 (ko) * 2016-05-18 2021-12-03 삼성전자 주식회사 전자 장치 및 이의 입력 처리 방법
USD804494S1 (en) * 2016-05-24 2017-12-05 Sap Se Portion of a display panel with an animated graphical user interface
USD796543S1 (en) 2016-06-10 2017-09-05 Apple Inc. Display screen or portion thereof with graphical user interface
USD803855S1 (en) 2016-06-11 2017-11-28 Apple Inc. Display screen or portion thereof with graphical user interface
USD801365S1 (en) 2016-06-11 2017-10-31 Apple Inc. Display screen or portion thereof with graphical user interface
USD804502S1 (en) 2016-06-11 2017-12-05 Apple Inc. Display screen or portion thereof with graphical user interface
DK201670595A1 (en) 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
USD796547S1 (en) 2016-06-11 2017-09-05 Apple Inc. Display screen or portion thereof with graphical user interface
US9912860B2 (en) 2016-06-12 2018-03-06 Apple Inc. User interface for camera effects
USD794065S1 (en) * 2016-06-17 2017-08-08 Google Inc. Display screen with an animated graphical user interface
USD800764S1 (en) * 2016-06-20 2017-10-24 Caterpillar Inc. Display screen or portion thereof with set of icons
CN106227389A (zh) * 2016-08-12 2016-12-14 乐视控股（北京）有限公司 一种基于屏幕压力感应的富文本编辑控件调用方法及装置
CN107885707A (zh) * 2016-09-30 2018-04-06 珠海金山办公软件有限公司 对象编辑方法及装置、电子设备
CN107885560B (zh) * 2016-09-30 2021-02-23 珠海金山办公软件有限公司 一种底部菜单显示方法及系统
CN107977138A (zh) * 2016-10-24 2018-05-01 北京东软医疗设备有限公司 一种显示方法及装置
US10867445B1 (en) * 2016-11-16 2020-12-15 Amazon Technologies, Inc. Content segmentation and navigation
USD812093S1 (en) * 2016-12-02 2018-03-06 Salesforce.Com, Inc. Display screen or portion thereof with graphical user interface
JP1589813S (ko) * 2016-12-02 2017-11-06
US10782852B1 (en) * 2016-12-11 2020-09-22 Snap Inc. Contextual action mechanisms in chat user interfaces
US20180239422A1 (en) * 2017-02-17 2018-08-23 International Business Machines Corporation Tracking eye movements with a smart device
US11163866B2 (en) * 2017-03-31 2021-11-02 Ricoh Company, Ltd. Shared terminal, display control method, and non-transitory computer-readable medium
JP6496345B2 (ja) * 2017-04-13 2019-04-03 ファナック株式会社 数値制御装置
USD916712S1 (en) * 2017-04-21 2021-04-20 Scott Bickford Display screen with an animated graphical user interface having a transitional flower design icon
DK180127B1 (en) 2017-05-16 2020-05-26 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR MOVING USER INTERFACE OBJECTS
JP6914728B2 (ja) * 2017-05-26 2021-08-04 キヤノン株式会社 通信装置、通信方法、およびプログラム
USD930656S1 (en) * 2017-06-02 2021-09-14 Raytheon Company Display screen with graphical user interface for accessing cluster information
KR20200040752A (ko) * 2017-07-05 2020-04-20 팜 벤처스 그룹, 인코포레이티드 모바일 컴퓨팅 디바이스에서 컨텍스트 액션들을 서피싱하기 위한 개선된 사용자 인터페이스
USD888743S1 (en) * 2017-08-10 2020-06-30 Jpmorgan Chase Bank, N.A. Display screen or portion thereof with a graphical user interface
US10417991B2 (en) 2017-08-18 2019-09-17 Microsoft Technology Licensing, Llc Multi-display device user interface modification
US11301124B2 (en) 2017-08-18 2022-04-12 Microsoft Technology Licensing, Llc User interface modification using preview panel
US11237699B2 (en) * 2017-08-18 2022-02-01 Microsoft Technology Licensing, Llc Proximal menu generation
USD870774S1 (en) 2017-09-29 2019-12-24 Apple Inc. Wearable device with animated graphical user interface
WO2019150675A1 (ja) * 2018-02-02 2019-08-08 株式会社Ｎｔｔドコモ 情報処理装置
US20190243536A1 (en) * 2018-02-05 2019-08-08 Alkymia Method for interacting with one or more software applications using a touch sensitive display
JP7118656B2 (ja) * 2018-02-08 2022-08-16 キヤノン株式会社 情報処理装置、その制御方法、及びプログラム
US10845980B2 (en) * 2018-03-28 2020-11-24 Micosoft Technology Licensing, LLC Facilitating movement of graphical objects across separate screens
US11368443B2 (en) 2018-05-02 2022-06-21 Cloud People Llc Decentralized digital communication platform system and method
WO2019213372A1 (en) * 2018-05-02 2019-11-07 Cloud People Llc Decentralized digital communication platform system and method
US11112939B2 (en) * 2018-05-07 2021-09-07 Servicenow, Inc. Dynamic updates for configurable menu items
USD910708S1 (en) 2018-05-08 2021-02-16 Apple Inc. Electronic device with graphical user interface
CN108803971A (zh) * 2018-05-09 2018-11-13 北京车和家信息技术有限公司 菜单显示方法、装置、电子设备及计算机可读存储介质
CN113630637B (zh) * 2018-05-10 2024-03-01 聚好看科技股份有限公司 一种智能电视的操作界面调节方法及智能电视
US11740761B2 (en) * 2018-06-08 2023-08-29 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for displaying icons, terminal and non-transitory storage medium
USD868094S1 (en) 2018-08-30 2019-11-26 Apple Inc. Electronic device with graphical user interface
USD901525S1 (en) 2018-09-11 2020-11-10 Apple Inc. Electronic device with animated graphical user interface
USD898755S1 (en) 2018-09-11 2020-10-13 Apple Inc. Electronic device with graphical user interface
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
US10712824B2 (en) 2018-09-11 2020-07-14 Apple Inc. Content-based tactile outputs
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
CN109358937A (zh) * 2018-09-30 2019-02-19 上海达龙信息科技有限公司 一种基于虚拟输入装置远程操控pc的方法及系统
USD962244S1 (en) 2018-10-28 2022-08-30 Apple Inc. Electronic device with graphical user interface
USD914756S1 (en) 2018-10-29 2021-03-30 Apple Inc. Electronic device with graphical user interface
CN111273971B (zh) * 2018-12-04 2022-07-29 腾讯科技（深圳）有限公司 视图中的信息处理方法、装置及存储介质
US11068140B2 (en) * 2019-01-04 2021-07-20 Servicenow, Inc. Intelligent overflow menu
USD910050S1 (en) 2019-03-22 2021-02-09 Apple Inc. Electronic device with graphical user interface
USD921506S1 (en) 2019-04-26 2021-06-08 SmartHalo Technologies Inc. Electronic device for providing travel information
US11385785B2 (en) 2019-05-01 2022-07-12 Google Llc Interface for multiple simultaneous interactive views
CN113646740A (zh) 2019-05-01 2021-11-12 谷歌有限责任公司 用于多个同时交互式视图的界面
US11520469B2 (en) * 2019-05-01 2022-12-06 Google Llc Interface for multiple simultaneous interactive views
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
KR20210023680A (ko) 2019-08-22 2021-03-04 삼성전자주식회사 증강 현실 환경에서의 콘텐트 생성
WO2021034022A1 (en) * 2019-08-22 2021-02-25 Samsung Electronics Co., Ltd. Content creation in augmented reality environment
KR20190109337A (ko) * 2019-09-06 2019-09-25 엘지전자 주식회사 증강현실 기반의 기기 제어 장치 및 그 방법
USD916133S1 (en) 2019-09-08 2021-04-13 Apple Inc. Electronic device with icon
CN112492365B (zh) 2019-09-11 2024-06-14 新加坡商欧之遥控有限公司 遥控器导航界面组件
USD994679S1 (en) * 2020-01-29 2023-08-08 Bhs Technologies Gmbh Display screen or portion thereof with a graphical user interface for a medical imaging device
TWD210778S (zh) * 2020-05-06 2021-04-01 宏碁股份有限公司 顯示螢幕之圖形化使用者介面
CN111625158B (zh) * 2020-05-22 2022-05-20 京东方科技集团股份有限公司 电子交互平板、菜单展示方法及书写工具属性的控制方法
TWI751576B (zh) * 2020-06-04 2022-01-01 仁寶電腦工業股份有限公司 具有動態背景之圖形使用者介面的提供方法、系統與紀錄媒體
USD942509S1 (en) 2020-06-19 2022-02-01 Apple Inc. Display screen or portion thereof with graphical user interface
USD951287S1 (en) 2020-06-19 2022-05-10 Apple Inc. Display screen or portion thereof with graphical user interface
US20220019340A1 (en) * 2020-07-15 2022-01-20 yuchen du Social knowledge graph for collective learning
JP1692265S (ko) * 2020-12-25 2021-08-10
US11893212B2 (en) 2021-06-06 2024-02-06 Apple Inc. User interfaces for managing application widgets
US11956199B2 (en) 2021-07-26 2024-04-09 Airship Group, Inc. Software development kit enabled cross-channel two-way software application messaging
US12056474B2 (en) 2021-08-06 2024-08-06 Airship Group, Inc. In-application user interface messaging
WO2023196166A1 (en) * 2022-04-04 2023-10-12 Google Llc Sharing of captured content
US20230393616A1 (en) * 2022-06-05 2023-12-07 Apple Inc. Displaying application views

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0447358A (ja) 1990-06-01 1992-02-17 Nippon Telegr & Teleph Corp <Ntt> 文章等の編集方法
JPH06242885A (ja) 1993-02-16 1994-09-02 Hitachi Ltd 文書編集方法
US6281879B1 (en) 1994-06-16 2001-08-28 Microsoft Corporation Timing and velocity control for displaying graphical information
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US6664991B1 (en) 2000-01-06 2003-12-16 Microsoft Corporation Method and apparatus for providing context menus on a pen-based device
US6828988B2 (en) 2001-02-27 2004-12-07 Microsoft Corporation Interactive tooltip
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
US6801230B2 (en) * 2001-12-18 2004-10-05 Stanley W. Driskell Method to display and manage computer pop-up controls
US7570943B2 (en) 2002-08-29 2009-08-04 Nokia Corporation System and method for providing context sensitive recommendations to digital services
US7210107B2 (en) 2003-06-27 2007-04-24 Microsoft Corporation Menus whose geometry is bounded by two radii and an arc
US7721228B2 (en) 2003-08-05 2010-05-18 Yahoo! Inc. Method and system of controlling a context menu
US6989822B2 (en) 2003-11-10 2006-01-24 Microsoft Corporation Ink correction pad
US20050216834A1 (en) 2004-03-29 2005-09-29 Microsoft Corporation Method, apparatus, and computer-readable medium for dynamically rendering a user interface menu
US7178111B2 (en) 2004-08-03 2007-02-13 Microsoft Corporation Multi-planar three-dimensional user interface
US7895531B2 (en) 2004-08-16 2011-02-22 Microsoft Corporation Floating command object
CN100517196C (zh) 2004-08-16 2009-07-22 微软公司 显示上下文相关软件功能控件的用户界面
US7712049B2 (en) 2004-09-30 2010-05-04 Microsoft Corporation Two-dimensional radial user interface for computer software applications
CN1782977A (zh) * 2004-12-03 2006-06-07 皮克塞(研究)有限公司 具有增强的用户界面的数据处理设备和系统
US8239882B2 (en) 2005-08-30 2012-08-07 Microsoft Corporation Markup based extensibility for user interfaces
US7603633B2 (en) 2006-01-13 2009-10-13 Microsoft Corporation Position-based multi-stroke marking menus
US7644372B2 (en) 2006-01-27 2010-01-05 Microsoft Corporation Area frequency radial menus
EP1840706A1 (en) 2006-03-31 2007-10-03 Research In Motion Limited Context-sensitive menu with a reduced set of functions for a mobile communication device
US20070256029A1 (en) 2006-05-01 2007-11-01 Rpo Pty Llimited Systems And Methods For Interfacing A User With A Touch-Screen
EP1860534A1 (en) 2006-05-22 2007-11-28 LG Electronics Inc. Mobile terminal and menu display method thereof
KR100772875B1 (ko) 2006-05-22 2007-11-02 삼성전자주식회사 사용자 선호도에 따른 사용자 인터페이스를 설정하는 장치및 그 방법
KR100774927B1 (ko) 2006-09-27 2007-11-09 엘지전자 주식회사 이동통신 단말기, 메뉴 및 아이템 선택방법
USD563972S1 (en) 2006-10-25 2008-03-11 Microsoft Corporation User interface for a portion of a display screen
US7873710B2 (en) 2007-02-06 2011-01-18 5O9, Inc. Contextual data communication platform
US8650505B2 (en) * 2007-02-28 2014-02-11 Rpx Corporation Multi-state unified pie user interface
US8352881B2 (en) 2007-03-08 2013-01-08 International Business Machines Corporation Method, apparatus and program storage device for providing customizable, immediate and radiating menus for accessing applications and actions
US8074178B2 (en) 2007-06-12 2011-12-06 Microsoft Corporation Visual feedback display
US8645863B2 (en) 2007-06-29 2014-02-04 Microsoft Corporation Menus with translucency and live preview
US20090037813A1 (en) 2007-07-31 2009-02-05 Palo Alto Research Center Incorporated Space-constrained marking menus for mobile devices
JP5045559B2 (ja) 2008-06-02 2012-10-10 富士通モバイルコミュニケーションズ株式会社 携帯端末
CN101615407A (zh) * 2008-06-23 2009-12-30 侯亮 旋转扇区式数字媒体播放选单界面
US8245156B2 (en) * 2008-06-28 2012-08-14 Apple Inc. Radial menu selection
US8826181B2 (en) 2008-06-28 2014-09-02 Apple Inc. Moving radial menus
US20090328101A1 (en) 2008-06-30 2009-12-31 Nokia Corporation User interface for mobile tv interactive services
US20100122160A1 (en) 2008-11-10 2010-05-13 International Business Machines Corporation Non-contiguous content duplication
US8321802B2 (en) 2008-11-13 2012-11-27 Qualcomm Incorporated Method and system for context dependent pop-up menus
US20100192102A1 (en) 2009-01-29 2010-07-29 International Business Machines Corporation Displaying radial menus near edges of a display area
US9436380B2 (en) 2009-05-19 2016-09-06 International Business Machines Corporation Radial menus with variable selectable item areas
US8549432B2 (en) 2009-05-29 2013-10-01 Apple Inc. Radial menus
US8219930B2 (en) 2009-06-26 2012-07-10 Verizon Patent And Licensing Inc. Radial menu display systems and methods
US8578295B2 (en) 2009-09-16 2013-11-05 International Business Machines Corporation Placement of items in cascading radial menus
JP2011107823A (ja) 2009-11-13 2011-06-02 Canon Inc 表示制御装置及び表示制御方法
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US20110248928A1 (en) 2010-04-08 2011-10-13 Motorola, Inc. Device and method for gestural operation of context menus on a touch-sensitive display
KR101735610B1 (ko) * 2010-05-06 2017-05-15 엘지전자 주식회사 영상표시장치의 동작 방법
DE102010036906A1 (de) 2010-08-06 2012-02-09 Tavendo Gmbh Konfigurierbares Pie-Menü
US20120072867A1 (en) * 2010-09-17 2012-03-22 Apple Inc. Presenting pop-up controls in a user interface
US9400585B2 (en) * 2010-10-05 2016-07-26 Citrix Systems, Inc. Display management for native user experiences
CN102118514A (zh) * 2011-03-31 2011-07-06 深圳市五巨科技有限公司 移动通信终端及其菜单设置方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9922260B2 (en) 2014-08-29 2018-03-20 Samsung Electronics Co., Ltd. Scrapped information providing method and apparatus
KR20160041085A (ko) * 2014-10-06 2016-04-18 전자부품연구원 사용자 맞춤형 콘텐츠 적응 객체 구성 방법, 이를 수행하는 사용자 맞춤형 콘텐츠 적응 객체 구성 서버 및 이를 저장하는 기록매체
KR101594946B1 (ko) * 2014-11-21 2016-02-17 스튜디오씨드코리아 주식회사 프로토타이핑 툴을 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR20220038038A (ko) * 2015-06-18 2022-03-25 삼성전자주식회사 전자 장치 및 전자 장치에서의 노티피케이션 처리 방법
US11404021B2 (en) 2015-06-18 2022-08-02 Samsung Electronics Co., Ltd. Electronic device and method of processing notification in electronic device
KR101700117B1 (ko) * 2015-07-23 2017-02-01 주식회사 아이에스엘코리아 인터렉티브 전자저작도구, 이를 제공하는 컴퓨터 장치 및 방법
KR20170078007A (ko) * 2015-12-29 2017-07-07 에스케이플래닛 주식회사 사용자 장치, 그의 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR20210080285A (ko) * 2019-12-20 2021-06-30 (주)클로버추얼패션 디자인 정보 제공 방법
KR20220097865A (ko) * 2019-12-20 2022-07-08 (주)클로버추얼패션 디자인 정보 제공 방법
US11417039B2 (en) 2019-12-20 2022-08-16 Clo Virtual Fashion Inc. Method to provide design information
US11625877B2 (en) 2019-12-20 2023-04-11 Clo Virtual Fashion Inc. Method to provide design information
WO2023008916A1 (ko) * 2021-07-30 2023-02-02 삼성전자주식회사 전자 장치 및 이의 제어 방법

Also Published As

Publication number Publication date
EP2732365A4 (en) 2015-03-11
WO2013010155A3 (en) 2013-04-18
TW201312448A (zh) 2013-03-16
JP6050348B2 (ja) 2016-12-21
US20130019182A1 (en) 2013-01-17
JP2014521172A (ja) 2014-08-25
TWI539358B (zh) 2016-06-21
EP2732365A2 (en) 2014-05-21
WO2013010155A2 (en) 2013-01-17
US9582187B2 (en) 2017-02-28
CN103649894A (zh) 2014-03-19
EP2732365B1 (en) 2019-03-06
KR101922749B1 (ko) 2018-11-27
CN103649894B (zh) 2018-01-19

Similar Documents

Publication Publication Date Title
KR101922749B1 (ko) 동적 컨텍스트 기반 메뉴
KR101984328B1 (ko) 컨텍스트 기반 메뉴를 위한 런처
EP2699998B1 (en) Compact control menu for touch-enabled command execution
US9250766B2 (en) Labels and tooltips for context based menus
KR20140051228A (ko) 컨텍스트 기반 메뉴 시스템에 대한 서브메뉴
US9026944B2 (en) Managing content through actions on context based menus
TW201329745A (zh) 用於經擴充的通訊服務的動態導覽欄
EP2788845A1 (en) Docking and undocking dynamic navigation bar for expanded communication service

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant