KR20140094526A - 가상 입력 패널에 의한 차폐를 회피하기 위한 컨텐트 조정 기법 - Google Patents

가상 입력 패널에 의한 차폐를 회피하기 위한 컨텐트 조정 기법 Download PDF

Info

Publication number
KR20140094526A
KR20140094526A KR1020147011713A KR20147011713A KR20140094526A KR 20140094526 A KR20140094526 A KR 20140094526A KR 1020147011713 A KR1020147011713 A KR 1020147011713A KR 20147011713 A KR20147011713 A KR 20147011713A KR 20140094526 A KR20140094526 A KR 20140094526A
Authority
KR
South Korea
Prior art keywords
display
content
area
input panel
content area
Prior art date
Application number
KR1020147011713A
Other languages
English (en)
Inventor
나탄 로버트 페너
미쉘 이 리스
벤자민 에드워드 램슨
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Publication of KR20140094526A publication Critical patent/KR20140094526A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

컨텐트 영역의 디스플레이는 가상 입력 패널(예컨대, 가상 키보드, 제스처 영역, 핸드라이팅 영역)의 디스플레이가 사용자가 상호작용하고 있는 컨텐트를 차폐하지 않도록 자동으로 조정된다. 컨텐트 영역의 디스플레이를 조정한 후, 상호작용 중인 컨텐트는 컨텐트 영역 내에서 가시적이다. 컨텐트 영역은 상호작용 동안 가시적으로 유지되도록 자동 조정된다. 몇몇 상황에서, 컨텐트 영역은 또한 가상 입력 패널이 디스플레이되는 동안 일시적으로 크기조정될 수 있다. 컨텐트 영역에 대한 변화에 응답하여 줌 스케일이 자동 변화하도록 설정되면, 줌 스케일은 고정 비율로 설정될 수 있다. 가상 입력 패널이 제거되면, 컨텐트 영역은 가상 입력 패널이 디스플레이되기 전 원래 구성으로 복귀될 수 있다.

Description

가상 입력 패널에 의한 차폐를 회피하기 위한 컨텐트 조정 기법{ADJUSTING CONTENT TO AVOID OCCLUSION BY A VIRTUAL INPUT PANEL}
많은 컴퓨팅 장치는 컨텐트를 입력하기 위하여 가상 키보드를 사용한다. 이러한 가상 키보드의 배치에는 이용가능한 디스플레이 공간의 일 부분이 필요하다. 몇몇 컴퓨팅 장치는 가상 키보드의 디스플레이를 위한 고정 위치를 가진다. 그 외 다른 장치들은 가상 키보드가 디스플레이 상에서 서로 다른 위치들에서 디스플레이되는 것을 허용한다. 가상 키보드의 배치는 사용자가 편집하고자 하는 컨텐트를 위한 디스플레이 공간이 제한되는 결과를 가져온다.
본 요약(summary)은, 아래의 발명을 실시하기 위한 구체적인 내용(Detailed Description)에서 더 기술되는 개념을 단순화하여 소개하기 위하여 제공된다. 본 요약은 청구된 발명 주제의 주요 특징들 또는 본질적인 특징들을 식별하는 것으로 의도되지 않으며, 또한 청구된 발명 주제의 범위를 결정하는데 사용되는 것으로도 의도되지 않는다.
컨텐트 영역의 디스플레이는, 가상 입력 패널(예컨대, 가상 키보드, 제스처 영역, 핸드라이팅 영역,...)의 디스플레이가 사용자가 상호작용하고 있는 컨텐트(상호작용 영역)를 차폐(occlusion)하지 않도록, 자동 조정된다. 컨텐트 영역의 디스플레이를 조정한 후, 상호작용 중인 컨텐트는 컨텐트 영역 내에서 보여질 수 있다. 가상 입력 패널이 디스플레이되고 있는 동안, 컨텐트 영역은 상호작용(예컨대, 새로운 컨텐트를 추가함으로써 새로운 줄이 나타나도록 하는, 커서를 다른 위치로 이동하는) 동안 보여질 수 있는 상태로 유지되도록 자동으로 조정된다. 몇몇 상황에서, 컨텐트 영역은 또한 가상 입력 패널이 디스플레이되는 동안 일시적으로 크기조정될 수 있다. 컨텐트 영역에 대한 변화에 응답하여 자동으로 변화시키는 줌 스케일(zoom scale)이 설정된 경우, 줌 스케일은 컨텐트 영역의 디스플레이가 조정되는 때에 컨텐트 영역 내의 컨텐트의 크기가 변화되지 않도록 미리 고정 비율로 설정될 수 있다. 가상 입력 패널이 사라지면, 컨텐트 영역은 가상 입력 패널이 디스플레이되기 전 원래 구성으로 복귀될 수 있다.
도 1은 예시적인 컴퓨팅 장치를 도시하며;
도 2는 가상 입력 패널의 디스플레이가 상호작용 영역을 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하는 예시적인 시스템을 도시하며;
도 3은 컨텐트와 상호작용이 발생하는 동안 가상 입력 패널의 디스플레이가 상호작용 영역을 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하는 프로세스를 보여주며;
도 4는 가상 입력 패널에 의한 차폐를 회피하기 위하여 컨텐트를 이동하는 및/또는 컨텐트 영역을 크기조정하는 프로세스를 도시하며;
도 5는 가상 입력 패널의 디스플레이가 상호작용 영역을 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하는 시스템 구조를 도시하며;
도 6 내지 도 13은 가상 입력 패널이 상호작용 영역을 차폐할 것이라는 결정에 응답하여 컨텐트 영역의 디스플레이를 조정하는 것을 도시하는 예시적인 디스플레이들을 보여준다.
이제 유사한 숫자는 유사한 요소를 나타내는 도면을 참조하여 다양한 실시예들이 기술될 것이다. 특히, 도 1 및 대응하는 논의는 실시예들이 구현될 수 있는 적절한 컴퓨팅 환경에 대한 간략하고 일반적인 설명의 제공을 의도하고 있다.
일반적으로, 프로그램 모듈에는 특정 태스크를 수행하거나 특정 추상적인 데이터 타입을 구현하는 루틴, 프로그램, 컴포넌트, 데이터 구조, 및 그 외 타입의 구조들이 포함된다. 핸드-핼드 장치, 멀티프로세서 시스템, 마이크로프로세서-기반 또는 프로그래머블 가전, 미니컴퓨터, 메인프레임 컴퓨터 등을 포함하여, 그 외 다른 컴퓨터 시스템 구성들도 또한 사용될 수 있다. 또한 태스크가 통신망을 통해 연결되어 있는 원격 프로세싱 장치들에 의해 수행되는 분산 컴퓨팅 환경도 사용될 수 있다. 분산 컴퓨팅 환경에서, 프로그램 모듈은 로컬 및 원격 메모리 스토리지 장치들 양자 모두에 위치될 수 있다.
이제 도 1을 참조하여, 다양한 실시예들에서 사용되는 컴퓨터(100)를 위한 예시적인 컴퓨터 구조가 기술될 것이다. 도 1에 도시된 컴퓨터 구조는 서버 컴퓨팅 장치, 데스크탑 컴퓨팅 장치, 모바일 컴퓨팅 장치(예컨대, 스마트폰, 노트북, 타블렛...)으로서 구성될 수 있으며 중앙 프로세싱 유닛(5)("CPU"), 시스템 메모리(7) - 랜덤 액세스 메모리(9)("RAM") 및 판독-전용 메모리("ROM")(10)을 포함하는 -, 및 중앙 프로세싱 유닛("CPU")(5)에 메모리를 연결하는 시스템 버스(12)를 포함한다.
예컨대 시동(startup) 동안에, 컴퓨터 내 요소들 사이에 정보 전송을 돕는 기본 루틴들을 포함하는 기본 입력/출력 시스템이 ROM(10) 내에 저장된다. 컴퓨터(100)는 운영 시스템(16), 애플리케이션(들)(24), 프레젠테이션(들)/문서(들)(27), 및 웹 브라우저(25)와 같은 그 외 다른 프로그램 모듈, 및 차폐 관리자(26) - 아래에서 상세히 기술될 - 를 저장하는 대용량 스토리지 장치(14)를 더 포함한다.
대용량 스토리지 장치(14)는 버스(12)에 연결된 대용량 스토리지 컨트롤러(미도시)를 통해 CPU(5)에 연결된다. 대용량 스토리지 장치(14) 및 그것과 연관된 컴퓨터-판독가능 매체는 컴퓨터(100)에 대해 비-휘발성 스토리지를 제공한다. 비록 본 문서에 포함된 컴퓨터-판독가능 매체의 설명이 하드 디스크 또는 CD-ROM 드라이브와 같은 대용량 스토리지 장치를 지칭하고 있지만, 컴퓨터-판독가능 매체는 컴퓨터(100)에 의해 액세스될 수 있는 임의의 이용가능한 매체일 수 있다.
제한적이지 않은 예를 들면, 컴퓨터-판독가능 매체는 컴퓨터 스토리지 매체 및 통신 매체를 포함할 수 있다. 컴퓨터 스토리지 매체는 컴퓨터-판독가능 인스트럭션, 데이터 구조, 프로그램 모듈 및 그 외 다른 데이터와 같은 정보의 저장을 위한 임의의 방법이나 기술로 구현된 휘발성 및 비-휘발성, 탈거가능 및 비-탈거가능 매체를 포함한다. 컴퓨터 스토리지 매체에는 RAM, ROM, EPROM(Erasable Programmable Read Only Memory), EEPROM(Electrically Erasable Programmable Read Only Memory), 플래시 메모리 또는 그 외 다른 고체 메모리 기술, CD-ROM, DVD(digital versatile disks), 또는 그 외 다른 광 스토리지, 자기 카세트, 자기 테이프, 자기 디스크 스토리지 또는 그 외 다른 자기 스토리지 장치들, 또는 원하는 정보를 저장하기 위하여 사용될 수 있으며 컴퓨터(100)에 의해 액세스될 수 있는 임의의 그 외 다른 매체가 포함되지만, 이에만 제한되는 것은 아니다.
다양한 실시예들에 따라, 컴퓨터(100)는 인터넷과 같은 네트워크(18)를 통해 원격 컴퓨터들과의 논리적 연결들을 이용하는 네트워크 환경에서 동작할 수 있다. 컴퓨터(100)는 버스(12)에 연결된 네트워크 인터페이스 유닛(20)을 통해 네트워크(18)에 연결될 수 있다. 네트워크 연결은 무선 및/또는 유선일 수 있다. 네트워크 인터페이스 유닛(20)은 또한 그 외 다른 타입의 네트워크들 및 원격 컴퓨터 시스템들에 연결하기 위하여 이용될 수도 있다. 컴퓨터(100)는 또한 터치 입력 장치와 같은 다수의 그 외 다른 장치들로부터 입력을 수신하고 프로세싱하는 입력/출력 컨트롤러(22)를 포함할 수 있다. 터치 입력 장치는 인식될 단일/멀티-터치 입력(터치방식/비-터치방식)을 허용하는 임의의 기술을 이용할 수 있다. 예를 들어, 이 기술들에는 열, 손가락 압력, 고속 캡쳐 카메라, 적외선 광, 광학적 캡쳐, 튜닝된 전자기 유도, 초음파 수신기, 트랜스듀서 마이크로폰, 레이저 레인지파인더, 새도우 캡쳐 등이 포함될 수 있으나, 이에만 제한되지는 않는다. 일 실시예에 따라, 터치 입력 장치는 근접-터치(즉, 터치 입력 장치를 물리적으로 터치하는 것이 아니라 터치 입력 장치와 가까운 거리 내에서 터치하는)를 검출하도록 구성될 수 있다. 터치 입력 장치는 또한 디스플레이(28)로서 행동할 수도 있다. 입력/출력 컨트롤러(22)는 또한 하나 이상의 디스플레이 스크린, 프린터, 또는 그 외 다른 타입의 출력 장치로 출력을 제공할 수 있다.
카메라 및/또는 몇몇 그 외 다른 감지 장치는 하나 이상의 사용자들을 기록하고 컴퓨팅 장치의 사용자들에 의해 만들어지는 모션들 및/또는 제스처들을 캡쳐하도록 동작할 수 있다. 감지 장치는 또한 예컨대 마이크로폰에 의해 발화된 단어를 캡쳐하거나 및/또는 예컨대 키보드 및/또는 마우스(미 도시됨)에 의해 사용자로부터의 그 외 다른 입력을 캡쳐하도록 동작할 수 있다. 감지 장치는 사용자의 움직임을 검출할 수 있는 임의의 모션 검출 장치를 포함할 수 있다. 예를 들어, 카메라는 복수의 카메라들 및 복수의 마이크로폰들을 포함하는 MICROSOFT KINECT® 모션 캡쳐 장치를 포함할 수 있다.
본 발명의 실시예들은 도면들에 도시되어 있는 컴포넌트들/프로세스들 중 각각 또는 다수가 하나의 단일 집적 회로에 통합되어 있을 수 있는 시스템-온-칩(SOC, system-on-a-chip)을 통해 실시될 수 있다. 이러한 SOC 장치는 하나 이상의 프로세싱 유닛, 그래픽스 유닛, 통신 유닛, 시스템 시각화 유닛 및 다양한 애플리케이션 기능성 - 이들 모두는 하나의 단일 집적 회로로서 칩 기판 상에 통합된(또는 "구워진(burned)") - 을 포함할 수 있다. SOC를 통해 동작할 때, 본 문서에서 기술되는 기능성 중 모두/일부는 이 단일 집적 회로(칩) 상에 컴퓨터(100)의 그 외 다른 컴포넌트들과 함께 통합될 수 있다.
위에서 간단하게 언급된 바와 같이, 다수의 프로그램 모듈들 및 데이터 파일들은, 워싱턴주 레드몬드의 마이크로소프트 코포레이션(MICROSOFT CORPORATION)의 WINDOWS SERVER®, WINDOWS 7® 운영 시스템들과 같은, 네트워크 컴퓨터의 동작 제어를 위해 적합한 운영 시스템(16)을 포함하여, 컴퓨터(100)의 대용량 스토리지 장치(14) 및 RAM(9)에 저장될 수 있다.
대용량 스토리지 장치(14) 및 RAM(9)은 또한 하나 이상의 프로그램 모듈들을 저장할 수 있다. 더 상세하게 말하자면, 대용량 스토리지 장치(14) 및 RAM(9)은 하나 이상의 애플리케이션들, 예컨대 차폐 관리자(occlusion manager)(26), 생산 기능 애플리케이션들(24)(예컨대, 마이크로소프트 파워포인트와 같은 프레젠테이션 애플리케이션, 마이크로소프트 워드와 같은 워드-프로세싱 애플리케이션, 마이크로소프트 엑셀과 같은 스프레드시트 애플리케이션, 마이크로소프트 아웃룩과 같은 메시징 애플리케이션 등)을 저장할 수 있고, 또한 하나 이상의 웹 브라우저들(25)을 저장할 수 있다. 웹 브라우저(25)는 웹 페이지, 비디오, 문서 등과 같은 전자적인 컨텐트와 상호작용을 요구하고, 수신하고, 렌더링하고, 및 제공하도록 동작한다. 일 실시예에 따라, 웹 브라우저는 마이크로소프트 코포레이션의 인터넷 익스플로러 웹 브라우저 애플리케이션 프로그램을 포함한다.
차폐 관리자(26)는 클라이언트 장치 상에 및/또는 서버 장치(예컨대, 서비스(19) 내의) 상에 존재할 수 있다. 차폐 관리자(26)는 하나의 애플리케이션/프로세스로서 및/또는 서로 다른 테넌트(tenant, 입주자)들(예컨대, 마이크로소프트 오피스 365, 마이크로소프트 웹 앱들, 마이크로소프트 셰어포인트 온라인)로서 자원들(예컨대, 서비스, 데이터...)을 제공하는 클라우드 기반 멀티-테넌트(multi-tenant) 서비스의 일부로서 구성될 수 있다.
일반적으로, 차폐 관리자(26)는, 가상 입력 패널(예컨대, 가상 키보드, 제스처 영역, 핸드라이팅 영역, 및 그 외 다른 소프트웨어 입력 패널들)의 디스플레이가 사용자가 상호작용하고 있는 컨텐트를 차폐하지 않도록, 컨텐트 영역의 디스플레이를 자동 조정하도록 구성된다. 컨텐트 영역의 디스플레이를 조정한 후, 상호작용되고 있는 컨텐트는 컨텐트 영역 내에서 가시적이다. 컨텐트 영역은, 사용자가 상호작용하고 이는 컨텐트 부분이 상호작용 동안에(예컨대, 새로운 컨텐트를 추가하여 새로운 라인이 생기는 동안, 커서를 다른 위치로 이동시키는 동안) 계속해서 가시적으로 있도록, 자동 조정된다. 몇몇 상황에서, 컨텐트 영역은 또한 가상 입력 패널이 디스플레이되는 동안에 일시적으로 크기조정될 수 있다. 컨텐트 영역에 대한 변화에 응답하여 줌 스케일(zoom scale)이 자동으로 변화하도록 설정되는 경우, 줌 스케일은, 컨텐트 영역의 디스플레이가 조정될 때, 컨텐트 영역 내의 컨텐트는 크기가 변화되지 않도록, 미리 고정된 비율로 설정될 수 있다. 가상 입력 패널이 해제되면, 컨텐트 영역은 가상 입력 패널이 디스플레이되기 전 원래의 구성으로 복귀될 수 있다. 차폐 관리자(26)의 동작에 관한 추가적인 디테일들이 아래에서 제공될 것이다.
도 2는 가상 입력 패널의 디스플레이가 상호작용 영역을 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하는 예시적인 시스템을 도시한다. 도시된 바와 같이, 시스템(200)은 서비스(210), 차폐 관리자(240), 저장부(245), 터치 스크린 입력 장치/디스플레이(250)(예컨대, 슬레이트) 및 스마트폰(230)을 포함한다.
도시된 바와 같이, 서비스(210)는 생산 기능 서비스(에컨대, 마이크로소프트 오피스 365, 마이크로소프트 웹 앱들, 마이크로소프트 파워포인트)들을 제공하도록 구성될 수 있는 클라우드 기반 및/또는 엔터프라이즈 기반 서비스이다. 서비스(210)에 의해 제공되는 서비스들/애플리케이션들 중 하나 이상의 기능은 또한 클라이언트 기반 애플리케이션으로서 구성될 수도 있다. 예를 들어, 클라이언트 장치는 슬라이드들을 디스플레이하기 위해 사용되는 프레젠테이션 애플리케이션을 포함할 수 있고 서비스(210)는 생산 기능 애플리케이션의 기능성을 제공할 수 있다. 비록 시스템(200)이 생산기능 서비스를 보여주지만, 그 외 다른 서비스들/애플리케이션들도 가상 입력 패널(예컨대, 232, 254)의 디스플레이가 사용자가 컨텐트와 상호작용하는 영역(상호작용 영역)을 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하도록 구성될 수 있다.
도시된 바와 같이, 서비스(210)는 임의의 수의 테넌트들(예컨대, 테턴트들 1-N)에게 자원들(215) 및 서비스들을 제공하는 멀티-테넌트 서비스이다. 일 실시예에 따라, 멀티-테넌트 서비스(210)는 서비스에 가입한 테넌트들에게 자원들/서비스들(215)을 제공하고 각 테넌트의 데이터를 분리하여 유지하고 그 외 다른 테넌트 데이터로부터 보호하도록 하는 클라우드 기반 서비스이다.
도시된 바와 같은 시스템(200)은 터치 입력이 수신된 때(예컨대, 손가락이 터치 스크린을 터치하거나 또는 근접 터치하는 것)를 검출하는 터치 스크린 입력 장치/디스플레이(250)(예컨대, 슬레이트/타블렛 장치) 및 모바일 폰(230)을 포함한다. 사용자의 터치 입력을 검출할 수 있는 임의의 타입의 터치 스크린이 사용될 수 있다. 예를 들어, 터치 스크린은 터치 입력을 검출하는 하나 이상의 용량성 물질층을 포함할 수 있다. 용량성 물질에 추가하여 또는 대체하여 그 외 다른 센서들이 이용될 수 있다. 예를 들어, 적외선(IR) 센서들이 이용될 수 있다. 일 실시예에 따라, 터치 스크린은 터치가능한 표면과 접촉하고 있는 또는 그 위에 있는 오브젝트들을 검출하도록 구성된다. 비록 이 설명에서 "위에(above)"라는 용어가 사용되지만, 터치 패널 시스템의 배향은 관계없다는 점이 이해되어야 한다. "위에"라는 용어는 모든 종류의 배향에 대해 적용될 수 있는 것으로 의도된다. 터치 스크린은 터치 입력이 수신되는 위치들(예컨대, 시작 포인트, 중간 포인트들 및 종료 포인트)을 결정하도록 구성될 수 있다. 터치가능한 표면과 오브젝트 사이의 실제 접촉은 예를 들어 터치 패널에 연결된 진동 센서나 마이크로폰에 의한 것을 포함하여 임의의 적절한 수단에 의해 검출될 수 있다. 접촉을 검출하는 센서들 예의 완결되지 않은 리스트에는 압력-기반 메커니즘, 마이크로-머신형 가속도계, 압전 장치, 용량성 센서, 저항성 센서, 유도성 센서, 레이저 진동계(vibrometer), 및 LED 진동계가 포함된다.
도시된 바와 같이, 터치 스크린 입력 장치/디스플레이(250)는 예시적인 문서(252)(예컨대, 슬라이드, 워드-프로세싱 문서, 스프레드시트 문서)를 보여준다. 차폐 관리자(240)는 사용자로부터 입력(예컨대, 터치-민감형 입력 장차(250) 및/또는 키보드 입력(예컨대, 물리적인 키보드 및/또는 SIP)를 이용한)을 수신하도록 구성된다. 예를 들어, 차폐 관리자(240)는 문서(252)와 연관된 터치 입력을 수신할 수 있다. 터치 입력은 사용자가 상호작용하고자 하는 문서 내 영역/오브젝트를 지시할 수 있다. 예를 들어, 사용자는 선택 위치에서 편집/상호작용을 시작하기 위해 한 오브젝트(예컨대, 차트), 라인 내의 한 단어, 스프레드시트 내의 한 셀, 문서(예컨대, 노트, 코멘트) 내의 한 섹션을 탭핑할 수 있다. 이 선택 주변/근처 영역은 상호작용 영역으로서 지칭된다. 상호작용 영역은 선택 주변의 미리 결정된 크기로 설정될 수 있거나 및/또는 사용자에 의해 이루어진 선택의 타입에 기초하여 결정될 수 있다. 예를 들어, 만약 사용자가 차트를 선택하면, 상호작용 영역은 차트 전체를 포함할 수 있다. 다른 한편, 만약 사용자가 편집을 위해 텍스트의 한 라인을 선택하면, 상호작용 영역은 선택된 라인 위/아래의 하나 이상의 라인들을 포함할 수 있다. 일반적으로, 상호작용 영역은 가상 입력 패널의 디스플레이에 의해 컨텐트가 차폐되지 않으면서 사용자가 컨텐트를 편집할 수 있도록 하기에 충분히 넓은 것으로 정의된다.
문서(260)는 가상 입력 패널(VIP)이 컴퓨팅 장치(예컨대, 스마트폰(230) 및 슬레이트(250) 상에 디스플레이되기 전의 문서(252)의 초기 디스플레이를 도시하는 것으로 의도된다. 문서와의 상호작용에 응답하여, VIP의 디스플레이가 사용자가 선택한 컨텐트를 포함하는 상호작용 영역을 차폐할 것인지(예컨대, 덮어버릴 것인지)가 결정된다. 도시된 바와 같이, 사용자는 문서(252)의 왼쪽 아래 근처에 위치한 그래프를 선택하기 위하여 그의 손가락(264)을 사용하였다. 만약 VIP가 어떠한 컨텐트 영역의 조정없이 디스플레이되었다면, 상호작용 영역(262)은 VIP에 의해 차폐되었을 것이다. VIP의 디스플레이가 상호작용 영역을 차폐하면, 컨텐트 영역의 디스플레이는 그것이 상호작용 영역을 차폐하지 않도록 조정된다. 도시된 바와 같이, 슬레이트 장치(250) 및 모바일 장치(230)는 상호작용 영역 내의 차트가 VIP(예컨대, VIP(254) 및 VIP(232))에 의해 차폐되지 않도록 컨텐트 영역의 디스플레이가 위쪽으로 이동되었음을 보여준다. 논의된 바와 같이, 컨텐트 영역의 디스플레이의 양은 구성가능한 상호작용 영역에 기초하여 결정된다. 예를 들어, 컨텐트 영역의 디스플레이는 컨텐트와의 상호작용(예컨대, 사용자는 컨텐트 영역의 디스플레이가 재조정되기 전에 컨텐트의 2개의 라인을 추가할 수 있다)을 위해 미리결정된 양의 공간이 존재하도록 이동될 수 있다. 일 실시예에 따라, 컨텐트의 스케일은 컨텐트 영역의 디스플레이가 조정되기 전과 동일하게 유지된다(예컨대, 동일한 줌 스케일이 유지된다). 컨텐트 영역의 디스플레이는 서로 다른 방법들을 이용하여 조정될 수 있다. 예를 들어, 문서와 연관된 스크롤 영역은 VIP가 디스플레이된 때에 그것이 차폐되지 않도록 상호작용 영역 내에서 컨텐트를 이동하도록 조정될 수 있다. 컨텐트 영역은 또한 적어도 크기조정된 컨텐트 영역의 상호작용 영역이 입력을 허용하도록 가시적으로 되도록 크기조정될 수 있다. 컨텐트 영역은 또한 그것이 그 외 다른 디스플레이된 컨텐트의 일부(예컨대, 메뉴 바, 윈도우의 경계 등과 같은 하나 이상의 사용자 인터페이스 요소들)를 덮도록 조정될 수 있다. 아래에서 사용자에 의해 지시된 상호작용 영역은 VIP의 디스플레이에 의해 차폐되지 않도록 컨텐트 영역의 디스플레이를 조정하는 것과 관련하여 더 상세한 설명이 제공된다.
도 3 및 도 4는 컨텐트와의 상호작용이 발생하는 상호작용 영역을 가상 입력 패널의 디스플레이가 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하는 예시적인 프로세스를 보여준다. 본 문서에서 제공되는 루틴들의 논의를 읽을 때, 다양한 실시예들의 논리적인 동작들은 (1) 컴퓨터로 구현되는 행위들의 시퀀스 또는 컴퓨팅 시스템 상에서 실행되는 프로그램 모듈들의 시퀀스로서 및/또는 (2) 컴퓨터 시스템 내의 상호연결된 머신 논리 회로들 또는 회로 모듈들로서 구현된다는 점이이해되어야 한다. 구현 방식은 본 발명을 구현하는 컴퓨팅 시스템의 성능 조건에 종속하는 선택의 문제이다. 그러므로, 도시된 논리적 동작들 및 여기서 기술된 실시예들의 구현은 동작들, 구조적 장치들, 행위들 또는 모듈들로서 다양하게 지칭될 수 있다. 이들 동작들, 구조적 장치들, 행위들 및 모듈들은 소프트웨어, 펌웨어, 특수 목적 디지털 로직, 및 이들의 임의의 조합으로 구현될 수 있다.
도 3은 컨텐트와의 상호작용이 발생하는 동안 가상 입력 패널의 디스플레이가 상호작용 영역을 차페하지 않도록 컨텐트 영역의 디스플레이를 조정하는 프로세스를 보여준다.
시작 동작 후, 프로세스는 컨텐트가 컨텐트 영역 내에 디스플레이되는 동작(310)으로 진행된다. 컨텐트는 애플리케이션에 의해 디스플레이되는 임의의 컨텐트일 수 있다. 예를 들어, 컨텐트는 프레젠테이션 슬라이드, 워드-프로세싱 문서, 스프레드시트, 노트 리스트, 웹 페이지, 그래픽스 페이지, 전자 메시지 등일 수 있다. 디스플레이는 하나 이상의 컨텐트 영역들을 포함할 수 있다. 예를 들어, 문서는 독립적으로 편집가능한 서로 다른 문서 섹션들(예컨대, 셀들, 슬라이드의 부분들(예컨대, 제목, 자막, 컨텐트, ...), 오브젝트들(예컨대, 테이블들, 차트들, 오브젝트들, 피봇테이블들...), 스크롤가능하지 않은 영역들(예컨대, 노트 섹션들, 코멘트 섹션) 등)을 가질 수 있다.
동작(320)으로 이동하면, 프로세스는 컨텐트 영역 내 컨텐트와의 상호작용을 수신한다. 상호작용은 제한적이지 않은 예를 들어, 터치 입력, 마우스 입력, 스타일러스 입력 등과 같은 다양한 서로 다른 상호작용들일 수 있다. 상호작용은 사용자가 컨텐트와 상호작용하고자 하는 상호작용 영역을 가리킬 수 있다. 예를 들어, 사용자는 해당 위치에서 편집/상호작용을 시작하기 위해 라인 내의 한 단어, 스프레드시트 내의 한 셀, 문서 내의 한 섹션(예컨대, 노트, 코멘트)을 탭핑할 수 있다.
결정 동작(330)으로 진행하면, 컨텐트와의 상호작용을 위한 입력을 수신하는 가상 입력 패널(VIP, virtual input panel)이 디스플레이된 때에 상호작용 영역을 차폐할 것인지 여부에 대한 결정이 이루어진다. 일 실시예에 따라, VIP는 디스플레이 내에서 임의의 위치(현재 디스플레이된 컨텐트를 덮는 것을 포함하여)에 디스플레이될 수 있는 요소이다. 하나 이상의 VIP는 다양한 서로 다른 입력을 수신하도록 구성될 수 있다. 예를 들어, VIP는 가상 키보드, 핸드라이팅 영역, 제스처 영역 등일 수 있다. VIP의 디스플레이가 상호작용 영역을 차폐하지 않으면, 프로세스는 동작(350)으로 이동한다. VIP의 디스플레이가 상호작용 영역을 차폐하면, 프로세스는 동작(340)으로 이동한다.
동작(340)으로 이동하면, 컨텐트 영역의 디스플레이는 그것이 상호작용 영역을 차폐하지 않도록 조정된다. 컨텐트 영역의 디스플레이는 서로 다른 방법들을 이용하여 조정될 수 있다. 예를 들어, 스크롤 영역은 VIP가 디스플레이될 때 차폐되지 않도록 상호작용 영역 내 컨텐트를 이동하도록 조정될 수 있다. 컨텐트 영역은 또한 적어도 크기조정된 컨텐트 영역의 상호작용 영역이 입력이 허용되도록 하기 위해 가시적으로 되도록 크기조정될 수 있다. 예를 들어, 컨텐트를 스크롤링하는 것 대신, 입력 패널이 일시적으로 크기조정될 수 있다. 양자 모두의 조합도 역시 이용될 수 있다. 일 실시예에 따라, 컨텐트 영역 내의 컨텐트의 스케일링은 차폐되지 않으면서 상호작용 영역을 디스플레이하기 위해 일시적으로 스케일링될 수 있다. 컨텐트 영역은 또한 그 외 다른 디스플레이된 컨텐트 부분(예컨대, 메뉴 바, 윈도우의 경계, 상태 디스플레이 등과 같은 하나 이상의 사용자 인터페이스 요소들)을 덮도록 조정될 수 있다.
동작(350)으로 이동하면, VIP가 디스플레이된다. VIP는 컨텐트 영역을 보여주는 디스플레이 내의 임의의 결정된 위치에서 디스플레이될 수 있다. 예를 들어, VIP는 디스플레이의 상단, 디스플레이의 하단, 디스플레이의 측부, 디스플레이의 중앙 등에서 디스플레이될 수 있다. 상호작용에 종속하여 서로 다른 VIP들(예컨대, 키보드 입력을 수신하는 가상 키보드, 터치 제스처를 수신하는 가상 제스처 패널, 서명을 수신하는 핸드라이팅 입력 패널 등)이 디스플레이될 수 있다. VIP들은 다양한 서로 다른 크기일 수 있다. 예를 들어, 더 큰 VIP는 컨텐트 영역의 디스플레이가 조정되도록 야기할 수 있는 반면에, 더 작은 VIP는 컨텐트 영역의 디스플레이가 조정되도록 야기하지 않을 수 있다.
동작(360)으로 진행하면, VIP 및 상호작용 영역 내의 컨텐트가 디스플레이된 때에 입력이 수신된다. VIP가 디스플레이되면, 컨텐트 영역의 디스플레이가 사용자 상호작용에 응답하여 차폐되지 않도록 조정될 필요가 있는지 여부가 결정된다. 예를 들어, 편집(예컨대, 타이핑, 컨텐트 붙이기)은 만약 컨텐트 영역의 디스플레이가 조정되지 않는다면 차폐되어질 컨텐트 영역 내에서 하나 이상의 새로운 라인들이 삽입되도록 야기할 수 있다. 사용자는 또한 VIP가 디스플레이될 때 컨텐트 영역 내에서 다른 한 위치를 선택할 수도 있다. 컨텐트 영역의 디스플레이는 상호작용 영역의 컨텐트가 사용자에게 가시적으로 유지되도록 조정된다.
동작(370)으로 진행하면, VIP의 디스플레이는 제거되고 컨텐트 영역의 디스플레이는 컨텐트 영역의 디스플레이를 조정하기 이전과 같은 디스플레이로 복구될 수 있다.
그런 다음 프로세스는 종료 동작으로 이동하고 그 외 다른 액션들의 프로세싱으로 복귀한다.
도 4는 가상 입력 패널에 의한 차폐를 회피하기 위한 컨텐트의 이동 및/또는 컨텐트 영역의 크기조정 프로세스를 도시한다.
시작 동작 이후, 프로세스(400)는 동작(410)으로 진행하고, 여기서 컨텐트 영역의 디스플레이를 위한 스케일링 정보가 결정되고 저장된다. 예를 들어, 스케일링이 "컨텐트 영역에 맞춤"인 경우, 스케일링 팩터는 명시적인 값(예컨대, 65%, 90%, 100%, ...)으로서 저장된다. 일 실시예에 따라, VIP가 디스플레이될 때, 컨텐트 영역 내 컨텐트의 크기는 VIP가 디스플레이되기 전과 동일한 줌 스케일로 유지된다(예컨대, 컨텐트는 VIP가 디스플레이되는 것에 응답하여 더 작아지지 않는다). VIP가 디스플레이로부터 사라지면, 스케일은 저장된 스케일링 값으로 리셋될 수 있다.
동작(420)으로 이동하면, 컨텐트 영역 내의 컨텐트는 결정된 때에 이동된다. 예를 들어, 윈도우의 스크롤 위치는 VIP가 디스플레이된 때에 차폐되지 않도록 컨텐트 영역의 컨텐트를 이동하도록 조정도리 수 있다. 스크롤링은 수직적이거나 수평적(패닝)일 수 있다. 컨텐트는 또한 VIP의 디스플레이에 의한 차폐를 회피하기 위하여 몇몇 그 외 다른 위치로 이동될 수 있다.
동작(430)으로 진행하면, VIP의 디스플레이가 상호작용 영역을 차폐하지 않도록 컨텐트 영역이 크기조정될 수 있다. 상호작용 영역은 스크롤가능하지 않거나 또는 디스플레이된 때에 VIP에 의해 완전히 차폐될 수 있는 문서 섹션 내에 있을 수 있다. 예를 들어, 컨텐트 영역 내의 창(pane)은 VIP보다 더 큰 높이로 디스플레이될 수 있다. VIP가 사라지면, 창은 그것의 원래 높이로 복구된다.
그런 다음 프로세스는 종료 동작으로 이동하고 그 외 다른 액션들의 프로세싱으로 복귀한다.
도 5는 가상 입력 패널의 디스플레이가 본 문서에서 기술된 바와 같이 상호작용 영역을 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하는 시스템 구조를 도시한다. 애플리케이션(예컨대, 애플리케이션(1020)) 및 차폐 관리자(26)에 의해 사용되고 디스플레이된 컨텐트는 서로 다른 위치들에 저장될 수 있다. 예를 들어, 애플리케이션(1020)은 디렉토리 서비스들(1022), 웹 포탈들(1024), 메일 박스 서비스들(1026), 인스턴트 메시징 저장부들(1028), 및 소셜 네트워킹 사이트들(1030)을 사용하여 데이터를 이용/저장할 수 있다. 애플리케이션(1020)은 임의의 이들 타입의 시스템들이나 유사한 시스템들을 이용할 수 있다. 서버(1032)는 VIP의 디스플레이가 상호작용 영역을 차폐하지 않도록 컨텐트 영역의 디스플레이를 조정하기 위하여 사용될 수 있다. 예를 들어, 서버(1032)는 클라이언트(예컨대, 브라우저 또는 몇몇 그 외 다른 윈도우)에서 디스플레이하도록 애플리케이션(1020)을 위한 디스플레이들을 생성할 수 있다. 일 예를 들면, 서버(1032)는 하나 이상의 사용자에게 생산 기능 서비스들(예컨대, 프레젠테이션, 워드-프로세싱, 메시징, 스프레드시트, 문서 통합 등)을 제공하도록 구성된 웹 서버일 수 있다. 서버(1032)는 네트워크(1008)를 통해 클라이언트들과 상호작용하기 위해 웹을 이용할 수 있다. 서버(1032)는 또한 애플리케이션 프로그램(예컨대, 생산 기능 애플리케이션)을 포함할 수 있다. 서버(1032)와 프레젠테이션 애플리케이션과 상호작용할 수 있는 클라이언트들의 예에는 컴퓨팅 장치(1002) - 임의의 범용 개인용 컴퓨터를 포함할 수 있는 -, 타블렛 컴퓨팅 장치(1004) 및/또는 스마트폰을 포함할 수 있는 모바일 컴퓨팅 장치(1006)이 포함된다. 이들 장치들 중 임의의 것은 저장부(1016)로부터 컨텐트를 획득할 수 있다.
도 6은 VIP를 디스플레이하기 전에 프레젠테이션 슬라이드와 연관된 컨텐트 영역 조정을 보여주는 예시적인 가로 방향 슬레이트 디스플레이들을 보여준다.
디스플레이(610)는 사용자(622)가 프레젠테이션 슬라이드(625)의 한 섹션(620)을 선택하는 것을 보여준다. 라인(615)은 만약 디스플레이되면 VIP의 디스플레이가 슬라이드를 덮게 될 곳을 나타낸다(라인(615)는 설명을 위한 것이며 디스플레이되지는 않는다). 볼 수 있는 바와 같이, 만약 VIP(660)가 슬라이드의 컨텐트 영역의 디스플레이를 조정하지 않고 디스플레이된다면, 사용자가 선택한 상호작용 영역은 VIP에 의해 차폐될 것이다.
디스플레이(650)는 VIP(660)를 디스플레이하기 전에 사용자에 의해 지시된 상호작용 영역을 노출하도록 슬라이드(625)가 위쪽으로 이동되었음을 보여준다.
도 7은 VIP를 디스플레이하기 전에 프레젠테이션 슬라이드의 컨텐트 영역 크기의 조정을 보여주는 예시적인 가로 방향 슬레이트 디스플레이들을 보여준다.
디스플레이(710)는 사용자(722)가 프레젠테이션 슬라이드(725)의 한 섹션(720)을 스타일러스(724)를 사용하여 선택하는 것을 보여준다. 이 예에서, 섹션(720)은 통상적으로 슬라이드를 위한 약간의 노트를 기입하기 위해 사용되는 일정한 크기의 영역이다. 라인(715)은 만약 컨텐트의 디스플레이를 조정하지 않고 디스플레이되면 VIP(760)의 디스플레이가 슬라이드를 덮게 될 곳을 나타낸다. 볼 수 있는 바와 같이, 만약 VIP가 슬라이드의 컨텐트 영역의 디스플레이를 조정하지 않고 디스플레이된다면, 사용자가 선택한 노트 섹션(720)을 포함하는 상호작용 영역은 VIP(760)에 의해 차폐될 것이다.
디스플레이(750)는 노트 영역(720)이 VIP(760)를 디스플레이하기 전에 더 큰 크기로 크기조정되었음을 보여준다. 볼 수 있는 바와 같이, 사용자는 이제 VIP(760)의 디스플레이에 의해 노트가 차폐되지 않으면서 VIP(760)를 이용하여 노트 영역(720) 내에서 노트를 기입할 수 있다. 현재 예에서, 슬라이드(725)의 디스플레이는 동일한 위치에 유지되어 있다. 일 실시예에 따라, 컨텐트 영역의 크기를 변화하는 것에 추가하여 컨텐트 영역의 디스플레이도 또한 변화할 수 있다(예컨대, 도 10 참조).
도 8은 VIP를 디스플레이하기 전에 워드-프로세싱 문서의 컨텐트 영역의 조정을 보여주는 세로 방향 모드의 예시적인 슬레이트 디스플레이들을 보여준다.
디스플레이(810)는 사용자(822)가 워드-프로세싱 문서(825)의 한 섹션(820)을 선택하는 것을 보여준다. 라인(815)은 디스플레이되면 VIP(860)의 디스플레이가 문서를 덮게 될 곳을 나타낸다. 볼 수 있는 바와 같이, 만약 VIP가 워드-프로세싱 문서의 디스플레이를 조정하지 않고 디스플레이된다면, 사용자가 선택한 상호작용 영역은 VIP에 의해 차폐될 것이다. 만약, 사용자가 라인(815) 위쪽의 위치를 선택한다면, 컨텐트 영역의 디스플레이는 조정되지 않는다.
디스플레이(850)는 워드-프로세싱 문서(825)가 VIP(860)를 디스플레이하기 전에 사용자에 의해 지시된 상호작용 영역을 노출하도록 위쪽으로 이동되었음을 보여준다. 만약 VIP(860)가 디스플레이의 상이한 영역에 디스플레이될 예정이라면, 컨텐트 영역의 디스플레이는 적절하게 조정(예컨대, 컨텐트를 위쪽으로가 아니라 아래쪽으로 스크롤링)될 것이다.
도 9는 VIP를 디스플레이하기 전에 워드-프로세싱 문서의 컨텐트 영역의 조정을 보여주는 가로 방향 모드의 예시적인 슬레이트 디스플레이들을 보여준다.
디스플레이(910)는 사용자(922)가 분리자(930)에 의해 분할된 워드-프로세싱 문서(925)의 한 섹션(920)을 선택하는 것을 보여준다. 분리자(930)는 워드-프로세싱 문서를 동일 디스플레이 내에서 보여질 수 있는 두 개의 서로 다른 문서 섹션들로 분리한다. 라인(915)은 디스플레이되면 VIP(960)의 디스플레이가 문서를 덮게 될 곳을 나타낸다. 볼 수 있는 바와 같이, 만약 VIP가 워드-프로세싱 문서의 디스플레이를 조정하지 않고 디스플레이된다면, 상호작용 영역은 분리된 문서(925)의 전체 하단 섹션의 거의 전부가 차폐될 것이다.
디스플레이(950)는 워드-프로세싱 문서(925)가 VIP(960)를 디스플레이하기 전에 사용자에 의해 지시된 상호작용 영역을 노출하도록 위쪽으로 이동되었음을 보여준다. 다른 실시예에 따라, 분리자(930)도 또한 분리자 아래쪽에 디스플레이되는 문서 부분을 변화시키기 위해 위쪽으로 이동될 수도 있다.
도 10은 VIP를 디스플레이하기 전에 워드-프로세싱 문서의 컨텐트 영역의 조정 및 코멘트 영역의 크기조정을 보여주는 가로 방향 모드의 예시적인 슬레이트 디스플레이들을 보여준다.
디스플레이(1050)는 사용자(1066)가 워드-프로세싱 문서(1052)와 연관된 코멘트 영역(1060)을 선택하는 것을 보여준다. 이 예에서, 사용자는 코멘트 영역(1060)의 디스플레이와 함께/없이 디스플레이될 수 있는 하나의 코멘트(1054)를 기입하였다. 라인(1055)은 디스플레이되면 VIP(1085)의 디스플레이가 워드 프로세싱 문서 및 코멘트를 덮게 될 곳을 나타낸다. 볼 수 있는 바와 같이, 만약 VIP가 워드-프로세싱 문서의 디스플레이를 조정하지 않고 디스플레이된다면, VIP(1085)는 코멘트 영역 전체를 차폐할 것이다.
디스플레이(1080)는 워드-프로세싱 문서(1052)가 사용자 선택과 연관된 관련 코멘트를 노출하도록 위치되었음을 보여준다. 코멘트 영역(1060)은 또한 사용자가 코멘트와 상호작용하도록 허용하기 위하여 크기조정되었을 수 있다. 볼 수 있는 바와 같이, 사용자는 코멘트 영역 내의 코멘트를 위한 컨텐트를 볼 수 있을 뿐만 아니라, 사용자는 또한 문서 자체 내에서 코멘트를 볼 수 있다. 사용자가 상이한 코멘트를 선택하면, 워드-프로세싱 문서의 코멘트 영역 및 컨텐트 영역이 사용자로 하여금 문서 내의 코멘트와 코멘트 영역 내의 코멘트 양자 모두를 볼 수 있도록 조정된다. 일 실시예에 따라, 사용자는 디스플레이될 형태를 결정할 수 있다(예컨대, 코멘트 영역만을 보여주고 문서 내의 대응하는 코멘트를 보여주지 않는).
도 11은 VIP를 디스플레이하기 전에 스프레드시트의 컨텐트 영역의 조정을 보여주는 가로 방향 모드의 예시적인 슬레이트 디스플레이들을 보여준다.
디스플레이(1110)는 사용자(1122)가 스프레드시트(1125)의 한 섹션(1120)을 선택하는 것을 보여준다. 박스(1115)는 디스플레이되면 VIP(1155)의 디스플레이가 스프레드시트를 덮을 곳을 나타낸다. 볼 수 있는 바와 같이, 만약 VIP가 스프레드시트의 디스플레이를 조정하지 않고 디스플레이된다면, VIP는 선택된 컨텐트(1120)를 차폐할 것이다. VIP는 다양한 서로 다른 크기일 수 있다. 예를 들어, 더 큰 VIP는 컨텐트 영역의 디스플레이가 조정되도록 야기할 수 있고, 반면에 더 작은 VIP는 컨텐트 영역의 디스플레이가 조정되도록 야기하지 않는다.
디스플레이(1150)는 스프레드시트(1125)가 VIP(1155)를 디스플레이하기 전에 사용자에 의해 지시된 상호작용 영역을 노출하도록 위쪽으로 이동되었음을 보여준다. 일 실시예에 따라, VIP는 VIP의 디스플레이 아래쪽의 컨텐트 부분도 또한 보여질 수 있도록 투명하게(예컨대, 알파-블렌딩된) 디스플레이될 수 있다. 투명성은 미리 결정된 레벨로 설정될 수 있고 및/또는 투명도 레벨은 VIP 사용 중에 변화될 수 있다. 예를 들어, 투명성은 사용자가 VIP(1155)와 상호작용하기 시작할 때 자동으로 제거될 수 있다.
도 12는 VIP를 디스플레이하기 전에 프레젠테이션 슬라이드와 연관된 사용자 인터페이스의 디스플레이의 조정을 보여주는 예시적인 가로 방향 슬레이트 디스플레이들을 보여준다.
디스플레이(1210)는 사용자(622)가 프레젠테이션 슬라이드(1225)의 한 섹션(1220)을 선택하는 것을 보여준다. 라인(1215)는 디스플레이되면 VIP의 디스플레이가 슬라이드를 덮을 곳을 나타낸다. 볼 수 있는 바와 같이, 선택은 VIP(1260)가 슬라이드의 컨텐트 영역의 디스플레이를 조정하지 않고 디스플레이된다면 차폐할 포인트와 매우 가깝다.
디스플레이(1250)는 슬라이드(1225)가 VIP(1260)를 디스플레이하기 전에 그리고 슬라이드(1225)를 사용자 인터페이스(1212)의 디스플레이 위에/대신에 디스플레이하기 전에 상호작용 영역을 더 노출하도록 위쪽으로 이동되었음을 보여준다. 라인(1255)(단지 예시 목적으로만 도시됨)은 사용자 인터페이스(1212) 위에/대신에 슬라이드를 디스플레이함으로써 보여질 수 있는 추가적인 슬라이드(1225)의 부분을 보여준다. 볼 수 있는 바와 같이, 사용자 인터페이스(1212)의 디스플레이를 변화시킴으로써, 사용자는 전체 제목 섹션을 볼 수 있다.
몇몇 예들에서, 컨텐트 영역은 초기에 디스플레이된 상태로 유지될 수 있고 디스플레이된 요소(들)은 더 많은 컨텐트를 노출시키도록 제거되거나 위로 당겨질 수 있다. 예를 들어, 사용자는 사용자 인터페이스(1212) 근처의 아이템을 선택할 수 있고 그 결과 슬라이드(1225)가 사용자 인터페이스(1212) 위로/대신에 당겨질 수 있게 할 수 있다.
도 13은 VIP를 디스플레이하기 전에 프레젠테이션 슬라이드와 연관된 사용자 인터페이스의 디스플레이의 조정을 보여주는 예시적인 가로 방향 슬레이트 디스플레이들을 보여준다.
디스플레이(1310)는 사용자(622)가 프레젠테이션 슬라이드(1325)의 한 섹션(1320)을 선택하는 것을 보여준다. 라인(1315)는 디스플레이되면 VIP의 디스플레이가 슬라이드를 덮을 곳을 나타낸다. 이 예에서, 상호작용 영역은 다른 예들에 비하여 더 큰 영역(예컨대, 전체 슬라이드)으로 결정되었다. 설사 슬라이드의 일부가 VIP(1360)에 의해 차폐되지 않는다 하더라도, 상호작용 영역(예컨대, 전체 슬라이드)이 상호작용 영역으로서 정의되기 때문에 컨텐트 영역은 조정된다.
디스플레이(1350)는 슬라이드(1325)가 VIP(1360)를 디스플레이하기 전에 전체 슬라이드를 노출하도록 위쪽으로 이동되었음을 보여준다. 또한 UI(1312)는 또한 이용가능한 디스플레이 공간을 증가시키도록 제거/위로 당겨졌다.
본 발명의 실시예들은, 예컨대, 본 발명의 실시예에 따른 방법, 시스템 및 컴퓨터 프로그램 제품의 블록도 및 동작을 예시하는 도면을 참조하여 위에서 기술된다. 블록으로 나타낸 기능/행위는 임의의 흐름도에서 도시된 순서와는 달리 발생할 수 있다. 예를 들어, 연속적으로 도시된 두 개의 블록들은 관련된 기능/행위에 종속하여 실제로는 실질적으로 동시에 실행될 수 있거나 또는 종종 반대 순서로 실행될 수 있다.
비록 본 발명의 특정 실시예들이 기술되었으나, 그 외 다른 실시예들도 존재할 수 있다. 더 나아가, 비록 본 발명의 실시예들이 메모리 및 그 외 다른 스토리지 매체에 저장된 데이터와 연관되는 것으로 기술되었으나, 데이터는 또한 하드 디스크, 플로피 디스크, 또는 CD-ROM, 인터넷의 반송파, 또는 그 외 다른 형태의 RAM이나 ROM와 같은, 이차적인 스토리지 장치와 같은, 그 외 다른 타입의 컴퓨터-판독가능 매체 상에서 저장 또는 판독될 수도 있다. 또한 개시된 방법들의 단계들은 본 발명으로부터 벗어나지 않고도 단계들의 순서를 다시 매기거나 및/또는 순서들을 삽입하거나 삭제하는 것을 포함하여 임의의 방식으로 수정될 수 있다.
위의 상세한 설명, 예시들 및 데이터는 본 발명의 조합의 제조 및 이용에 대한 완전한 기술을 제공한다. 본 발명의 많은 실시예들이 본 발명의 정신 및 범위에서 벗어나지 않고 만들어질 수 있기 때문에, 본 발명은 아래에 첨부되는 청구범위에 의해 정해진다.

Claims (10)

  1. 가상 입력 패널의 디스플레이에 의한 차폐를 회피하기 위해 컨텐트 영역을 조정하는 방법으로서,
    컨텐트 영역을 디스플레이하는 단계,
    상기 컨텐트 영역 내에서 상호작용 영역을 가리키는 컨텐트와의 상호작용을 수신하는 단계,
    상기 가상 입력 패널의 디스플레이가 상기 상호작용 영역을 차폐하는 때는 결정하는 단계, 및
    상기 가상 입력 패널의 디스플레이가 상기 상호작용 영역을 차폐하지 않도록 상기 컨텐트 영역의 디스플레이를 조정하는 단계
    를 포함하는 컨텐트 영역 조정 방법.
  2. 제 1 항에 있어서,
    상기 컨텐트 영역의 디스플레이를 조정하는 단계는
    상기 컨텐트 영역을 스크롤링하는 단계,
    상기 컨텐트 영역 내의 임의의 영역의 크기를 둘 다 조정하는 단계, 및
    상기 컨텐트 영역 내의 컨텐트의 디스플레이를 이동하는 단계
    중 적어도 하나를 포함하는, 컨텐트 영역 조정 방법.
  3. 제 1 항에 있어서,
    상기 가상 입력 패널이 디스플레이되면 상기 조정된 영역의 적어도 일부가 노출되도록 상기 컨텐트 영역 내의 임의의 영역의 크기를 조정하는 단계
    를 더 포함하는, 컨텐트 영역 조정 방법.
  4. 제 1 항에 있어서,
    상기 가상 입력 패널의 디스플레이 아래의 컨텐트의 적어도 일부분이 가시적으로 유지되도록 알파-블렌딩된 상기 가상 입력 패널을 디스플레이하는 단계
    를 더 포함하는, 컨텐트 영역 조정 방법.
  5. 제 1 항에 있어서,
    상기 가상 입력 패널이 디스플레이되는 동안 상기 컨텐트의 일부가 차폐되기 전에 상기 가상 입력 패널이 디스플레이되는 때에 상기 컨텐트 영역을 자동 조정하는 단계
    를 더 포함하는, 컨텐트 영역 조정 방법.
  6. 제 1 항에 있어서,
    상기 컨텐트 영역의 디스플레이를 조정하기 전에 현재 스케일링 팩터를 결정하고 상기 디스플레이로부터 상기 가상 입력 패널이 제거된 때에 상기 컨텐트 영역을 상기 스케일링 팩터로 재 조정하는 단계
    를 더 포함하는, 컨텐트 영역 조정 방법.
  7. 가상 입력 패널의 디스플레이에 의한 차폐를 회피하기 위해 컨텐트 영역을 조정하는 방법을 위한 컴퓨터-실행가능 인스트럭션을 가지는 컴퓨터-판독가능 매체로서,
    상기 방법은
    컨텐트 영역을 디스플레이하는 단계,
    상기 컨텐트 영역 내에서 상호작용 영역을 가리키는 컨텐트와의 상호작용을 수신하는 단계,
    상기 가상 입력 패널을 디스플레이하기 위한 위치를 결정하는 단계,
    결정된 위치에서 상기 가상 입력 패널의 디스플레이가 상기 상호작용 영역을 차폐하는 때는 결정하는 단계, 및
    상기 가상 입력 패널의 디스플레이가 상기 상호작용 영역을 차폐하지 않도록 상기 컨텐트 영역의 디스플레이를 조정하는 단계
    를 포함하는, 컴퓨터-판독가능 매체.
  8. 가상 입력 패널의 디스플레이에 의한 차폐를 회피하기 위해 컨텐트 영역을 조정하는 시스템으로서,
    디스플레이,
    멀티-테넌트 서비스의 테넌트들과 연결된 네트워크 커넥션,
    프로세서 및 컴퓨터-판독가능 매체,
    상기 컴퓨터-판독가능 매체 상에 저장되고 상기 프로세서 상에서 실행되는 운영 환경, 및
    상기 운영 환경의 제어하에 동작하여 액션들을 수행하는 프로세스
    를 포함하고,
    상기 프로세스는
    컨텐트 영역을 디스플레이하는 단계,
    상기 컨텐트 영역 내에서 상호작용 영역을 가리키는 컨텐트와의 상호작용을 수신하는 단계,
    상기 가상 입력 패널을 디스플레이하기 위한 위치를 결정하는 단계,
    결정된 위치에서 상기 가상 입력 패널의 디스플레이가 상기 상호작용 영역을 차폐하는 때는 결정하는 단계, 및
    상기 가상 입력 패널의 디스플레이가 상기 상호작용 영역을 차폐하지 않도록 상기 컨텐트 영역의 디스플레이를 조정하는 단계
    를 포함하는, 시스템.
  9. 제 8 항에 있어서,
    상기 프로세스는
    상기 가상 입력 패널이 디스플레이되면 상기 조정된 영역의 적어도 일부가 노출되도록 상기 컨텐트 영역 내의 임의의 영역의 크기를 조정하는 단계
    를 더 포함하는, 시스템.
  10. 제 8 항에 있어서,
    상기 프로세스는
    상기 가상 입력 패널이 디스플레이되는 동안 상기 컨텐트의 일부가 차폐되기 전에 상기 가상 입력 패널이 디스플레이되는 때에 상기 컨텐트 영역을 자동 조정하는 단계
    를 더 포함하는, 시스템.
KR1020147011713A 2011-11-01 2012-10-31 가상 입력 패널에 의한 차폐를 회피하기 위한 컨텐트 조정 기법 KR20140094526A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/287,036 US20130111391A1 (en) 2011-11-01 2011-11-01 Adjusting content to avoid occlusion by a virtual input panel
US13/287,036 2011-11-01
PCT/US2012/062889 WO2013067073A1 (en) 2011-11-01 2012-10-31 Adjusting content to avoid occlusion by a virtual input panel

Publications (1)

Publication Number Publication Date
KR20140094526A true KR20140094526A (ko) 2014-07-30

Family

ID=47855798

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147011713A KR20140094526A (ko) 2011-11-01 2012-10-31 가상 입력 패널에 의한 차폐를 회피하기 위한 컨텐트 조정 기법

Country Status (12)

Country Link
US (1) US20130111391A1 (ko)
EP (1) EP2774027A4 (ko)
JP (1) JP6165154B2 (ko)
KR (1) KR20140094526A (ko)
CN (1) CN102981699A (ko)
AU (1) AU2012332514B2 (ko)
BR (1) BR112014010242A8 (ko)
CA (1) CA2853646A1 (ko)
IN (1) IN2014CN02830A (ko)
MX (1) MX348174B (ko)
RU (1) RU2609099C2 (ko)
WO (1) WO2013067073A1 (ko)

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9400585B2 (en) 2010-10-05 2016-07-26 Citrix Systems, Inc. Display management for native user experiences
US9612724B2 (en) * 2011-11-29 2017-04-04 Citrix Systems, Inc. Integrating native user interface components on a mobile device
US9064237B2 (en) * 2012-01-23 2015-06-23 Microsoft Technology Licensing, Llc Collaborative communication in a web application
KR101958747B1 (ko) 2012-05-02 2019-03-15 삼성전자주식회사 휴대단말기의 텍스트 입력 방법 및 장치
US9229632B2 (en) 2012-10-29 2016-01-05 Facebook, Inc. Animation sequence associated with image
US9507483B2 (en) 2012-11-14 2016-11-29 Facebook, Inc. Photographs with location or time information
US9607289B2 (en) 2012-11-14 2017-03-28 Facebook, Inc. Content type filter
US9684935B2 (en) 2012-11-14 2017-06-20 Facebook, Inc. Content composer for third-party applications
US9547416B2 (en) 2012-11-14 2017-01-17 Facebook, Inc. Image presentation
US9245312B2 (en) 2012-11-14 2016-01-26 Facebook, Inc. Image panning and zooming effect
US9696898B2 (en) 2012-11-14 2017-07-04 Facebook, Inc. Scrolling through a series of content items
US9507757B2 (en) 2012-11-14 2016-11-29 Facebook, Inc. Generating multiple versions of a content item for multiple platforms
US9606695B2 (en) 2012-11-14 2017-03-28 Facebook, Inc. Event notification
US9235321B2 (en) 2012-11-14 2016-01-12 Facebook, Inc. Animation sequence associated with content item
US9547627B2 (en) * 2012-11-14 2017-01-17 Facebook, Inc. Comment presentation
US9218188B2 (en) 2012-11-14 2015-12-22 Facebook, Inc. Animation sequence associated with feedback user-interface element
US9081410B2 (en) 2012-11-14 2015-07-14 Facebook, Inc. Loading content on electronic device
KR20140087473A (ko) * 2012-12-31 2014-07-09 엘지전자 주식회사 두 개 이상의 화면을 처리하는 영상 처리 장치 및 방법
CN104077313B (zh) * 2013-03-28 2018-02-27 腾讯科技（深圳）有限公司 一种网页页面中多输入框的显示方法、装置及终端设备
CN104102418B (zh) * 2013-04-03 2015-08-26 腾讯科技（深圳）有限公司 一种移动终端浏览器中输入框目标位置定位方法及装置
US10180728B2 (en) * 2013-05-17 2019-01-15 Citrix Systems, Inc. Remoting or localizing touch gestures at a virtualization client agent
US20150007059A1 (en) * 2013-06-30 2015-01-01 Zeta Project Swiss GmbH User interface with scrolling for multimodal communication framework
KR20150009036A (ko) * 2013-07-10 2015-01-26 삼성전자주식회사 휴대단말기의 메모 처리 방법 및 장치
TWI493433B (zh) * 2013-08-28 2015-07-21 Acer Inc 被遮蔽畫面投影方法及應用該方法之可攜式電子裝置
CN104423863A (zh) * 2013-08-30 2015-03-18 宏碁股份有限公司 被遮蔽画面投影方法及应用该方法的可携式电子装置
US9383910B2 (en) 2013-10-04 2016-07-05 Microsoft Technology Licensing, Llc Autoscroll regions
CN104793923A (zh) * 2014-01-20 2015-07-22 中兴通讯股份有限公司 一种实现悬浮输入的方法和装置
US9304599B2 (en) 2014-03-21 2016-04-05 Dell Products L.P. Gesture controlled adaptive projected information handling system input and output devices
US9348420B2 (en) 2014-03-21 2016-05-24 Dell Products L.P. Adaptive projected information handling system output devices
US10133355B2 (en) 2014-03-21 2018-11-20 Dell Products L.P. Interactive projected information handling system support input and output devices
US9965038B2 (en) 2014-03-21 2018-05-08 Dell Products L.P. Context adaptable projected information handling system input environment
US20150268773A1 (en) * 2014-03-21 2015-09-24 Dell Products L.P. Projected Information Handling System Input Interface with Dynamic Adjustment
US20150268739A1 (en) * 2014-03-21 2015-09-24 Dell Products L.P. Projected Information Handling System Input Environment with Object Initiated Responses
CN104951220A (zh) * 2014-03-26 2015-09-30 联想(北京)有限公司 信息处理的方法及电子设备
US10698591B2 (en) 2014-03-31 2020-06-30 Microsoft Technology Licensing, Llc Immersive document interaction with device-aware scaling
US20150281148A1 (en) * 2014-03-31 2015-10-01 Microsoft Corporation Immersive document view
CN105279162B (zh) * 2014-06-12 2019-06-28 腾讯科技（深圳）有限公司 页面顶部输入框调整方法及装置
US10867584B2 (en) 2014-06-27 2020-12-15 Microsoft Technology Licensing, Llc Smart and scalable touch user interface display
KR20160071932A (ko) * 2014-12-12 2016-06-22 삼성메디슨 주식회사 화상 촬영 장치 및 화상 촬영 장치의 제어 방법
US11567626B2 (en) * 2014-12-17 2023-01-31 Datalogic Usa, Inc. Gesture configurable floating soft trigger for touch displays on data-capture electronic devices
CN104679389B (zh) * 2015-03-18 2019-03-26 广州三星通信技术研究有限公司 界面显示方法和装置
US9690400B2 (en) 2015-04-21 2017-06-27 Dell Products L.P. Information handling system interactive totems
CN105988706B (zh) * 2015-06-15 2020-06-05 法法汽车(中国)有限公司 输入键盘界面显示方法与装置
CN105872702A (zh) * 2015-12-09 2016-08-17 乐视网信息技术（北京）股份有限公司 一种虚拟键盘的显示方法及装置
CN106156292A (zh) * 2016-06-28 2016-11-23 乐视控股（北京）有限公司 一种信息显示方法、设备及服务器
CN106227458A (zh) * 2016-08-05 2016-12-14 深圳市金立通信设备有限公司 一种键盘处理的方法以及终端
CN106354369A (zh) * 2016-08-30 2017-01-25 乐视控股（北京）有限公司 字符输入界面显示处理方法及装置
US10139951B2 (en) 2016-11-09 2018-11-27 Dell Products L.P. Information handling system variable capacitance totem input management
US10139930B2 (en) 2016-11-09 2018-11-27 Dell Products L.P. Information handling system capacitive touch totem management
US10139973B2 (en) 2016-11-09 2018-11-27 Dell Products L.P. Information handling system totem tracking management
US10146366B2 (en) 2016-11-09 2018-12-04 Dell Products L.P. Information handling system capacitive touch totem with optical communication support
US10496216B2 (en) 2016-11-09 2019-12-03 Dell Products L.P. Information handling system capacitive touch totem with optical communication support
CN108459781B (zh) * 2016-12-13 2021-03-12 阿里巴巴（中国）有限公司 输入框的展现控制方法、装置及用户终端
CN106843645B (zh) * 2017-01-05 2019-09-17 青岛海信电器股份有限公司 一种确定视图显示位置的方法及设备
CN107122120A (zh) * 2017-05-25 2017-09-01 深圳天珑无线科技有限公司 一种虚拟键盘的处理方法、装置及终端
US10481791B2 (en) 2017-06-07 2019-11-19 Microsoft Technology Licensing, Llc Magnified input panels
CN110020299B (zh) * 2017-11-06 2021-09-14 北京嘀嘀无限科技发展有限公司 显示位置的调整方法及装置
CN107734196A (zh) * 2017-11-28 2018-02-23 福建中金在线信息科技有限公司 防止键盘遮挡输入源的方法和系统
US10459528B2 (en) 2018-02-28 2019-10-29 Dell Products L.P. Information handling system enhanced gesture management, control and detection
US10664101B2 (en) 2018-06-28 2020-05-26 Dell Products L.P. Information handling system touch device false touch detection and mitigation
US10635199B2 (en) 2018-06-28 2020-04-28 Dell Products L.P. Information handling system dynamic friction touch device for touchscreen interactions
US10795502B2 (en) 2018-06-28 2020-10-06 Dell Products L.P. Information handling system touch device with adaptive haptic response
US10817077B2 (en) 2018-06-28 2020-10-27 Dell Products, L.P. Information handling system touch device context aware input tracking
US10761618B2 (en) 2018-06-28 2020-09-01 Dell Products L.P. Information handling system touch device with automatically orienting visual display
US10852853B2 (en) 2018-06-28 2020-12-01 Dell Products L.P. Information handling system touch device with visually interactive region
CN109582209A (zh) * 2018-12-05 2019-04-05 珠海格力电器股份有限公司 一种hmi组态软件的软键盘输入方法、hmi组态软件及工业触摸屏
CN110263519B (zh) * 2019-05-31 2023-01-17 联想(北京)有限公司 信息处理方法及电子设备
CN111309798B (zh) * 2020-02-11 2023-05-12 北京字节跳动网络技术有限公司 表格的处理方法、装置、设备和存储介质
CN111800539A (zh) * 2020-05-29 2020-10-20 北京沃东天骏信息技术有限公司 视图显示方法和装置
JP2021189987A (ja) * 2020-06-04 2021-12-13 富士フイルムビジネスイノベーション株式会社 情報処理装置およびプログラム
JP2022086076A (ja) * 2020-11-30 2022-06-09 キヤノン株式会社 表示装置、表示装置の制御方法、及びプログラム
JP2022133773A (ja) * 2021-03-02 2022-09-14 京セラドキュメントソリューションズ株式会社 表示装置及び画像形成装置
US11509863B2 (en) 2021-03-22 2022-11-22 Google Llc Multi-user interaction slates for improved video conferencing
CN114153370A (zh) * 2021-12-01 2022-03-08 常州市新瑞得仪器有限公司 数字虚拟键盘的控制方法及系统、ue设备和存储介质
CN114625295A (zh) * 2022-01-27 2022-06-14 深圳传音控股股份有限公司 界面显示方法、智能终端及存储介质
CN114745579A (zh) * 2022-03-18 2022-07-12 阿里巴巴（中国）有限公司 基于隔空书写界面的互动方法、界面、终端及存储介质

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5806079A (en) * 1993-11-19 1998-09-08 Smartpatents, Inc. System, method, and computer program product for using intelligent notes to organize, link, and manipulate disparate data objects
JP2944439B2 (ja) * 1994-12-27 1999-09-06 シャープ株式会社 手書き文字入力装置および方法
US6295372B1 (en) * 1995-03-03 2001-09-25 Palm, Inc. Method and apparatus for handwriting input on a pen based palmtop computing device
JP4484255B2 (ja) * 1996-06-11 2010-06-16 株式会社日立製作所 タッチパネルを備えた情報処理装置および情報処理方法
CA2311767C (en) * 1997-12-16 2008-01-29 Microsoft Corporation Soft input panel system and method
US20060033724A1 (en) * 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US7844914B2 (en) * 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US7768501B1 (en) * 1998-05-01 2010-08-03 International Business Machines Corporation Method and system for touch screen keyboard and display space sharing
JP3378801B2 (ja) * 1998-05-22 2003-02-17 シャープ株式会社 情報処理装置
US6714220B2 (en) * 2000-01-19 2004-03-30 Siemens Aktiengesellschaft Interactive input with limit-value monitoring and on-line help for a palmtop device
US20020075317A1 (en) * 2000-05-26 2002-06-20 Dardick Technologies System and method for an on-demand script-activated virtual keyboard
US7036086B2 (en) * 2001-01-04 2006-04-25 Intel Corporation Displaying software keyboard images
KR100703771B1 (ko) * 2005-05-17 2007-04-06 삼성전자주식회사 문자 입력판을 디스플레이하는 장치 및 방법
JP2007025808A (ja) * 2005-07-12 2007-02-01 Canon Inc 仮想キーボードシステム及びその制御方法
US7554529B2 (en) * 2005-12-15 2009-06-30 Microsoft Corporation Smart soft keyboard
JP2007183787A (ja) * 2006-01-06 2007-07-19 Hitachi High-Technologies Corp ソフトウェアキーボード表示装置
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
KR20080078291A (ko) * 2007-02-23 2008-08-27 엘지전자 주식회사 브라우저 디스플레이 방법 및 이를 구현할 수 있는 단말기
KR101339499B1 (ko) * 2007-08-16 2013-12-10 엘지전자 주식회사 터치 스크린을 구비한 이동통신 단말기 및 그 제어방법
US20090064258A1 (en) * 2007-08-27 2009-03-05 At&T Knowledge Ventures, Lp System and Method for Sending and Receiving Text Messages via a Set Top Box
US8213914B2 (en) * 2008-08-04 2012-07-03 Lg Electronics Inc. Mobile terminal capable of providing web browsing function and method of controlling the mobile terminal
EP2329643B1 (en) * 2008-09-22 2020-01-01 DISH Technologies L.L.C. Systems and methods for graphical control of user interface features provided by a television receiver
US20100207888A1 (en) * 2009-02-18 2010-08-19 Mr. Noam Camiel System and method for using a keyboard with a touch-sensitive display
US8427438B2 (en) * 2009-03-26 2013-04-23 Apple Inc. Virtual input tools
US8375295B2 (en) * 2009-05-21 2013-02-12 Sony Computer Entertainment Inc. Customization of GUI layout based on history of use
CN102043574A (zh) * 2009-10-23 2011-05-04 中国移动通信集团公司 一种输入方法及设备
US8381125B2 (en) * 2009-12-16 2013-02-19 Apple Inc. Device and method for resizing user interface content while maintaining an aspect ratio via snapping a perimeter to a gridline
WO2011090467A1 (en) * 2009-12-28 2011-07-28 Hillcrest Laboratories Inc. Tv internet browser
US8621379B2 (en) * 2010-03-12 2013-12-31 Apple Inc. Device, method, and graphical user interface for creating and using duplicate virtual keys
US20110231484A1 (en) * 2010-03-22 2011-09-22 Hillcrest Laboratories, Inc. TV Internet Browser
US9483175B2 (en) * 2010-07-26 2016-11-01 Apple Inc. Device, method, and graphical user interface for navigating through a hierarchy
US9465457B2 (en) * 2010-08-30 2016-10-11 Vmware, Inc. Multi-touch interface gestures for keyboard and/or mouse inputs
KR20120034297A (ko) * 2010-10-01 2012-04-12 엘지전자 주식회사 이동 단말기 및 그에 따른 어플리케이션의 제어방법
US9400585B2 (en) * 2010-10-05 2016-07-26 Citrix Systems, Inc. Display management for native user experiences
CN103348353B (zh) * 2010-10-06 2016-07-06 西里克斯系统公司 基于移动设备的物理位置对资源访问进行中介调节
US8659562B2 (en) * 2010-11-05 2014-02-25 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
CN102087584A (zh) * 2011-01-30 2011-06-08 广州市久邦数码科技有限公司 一种虚拟键盘图形界面显示方法
US20120200503A1 (en) * 2011-02-07 2012-08-09 Georges Berenger Sizeable virtual keyboard for portable computing devices
US8704789B2 (en) * 2011-02-11 2014-04-22 Sony Corporation Information input apparatus
US20120249596A1 (en) * 2011-03-31 2012-10-04 Nokia Corporation Methods and apparatuses for dynamically scaling a touch display user interface
US8941601B2 (en) * 2011-04-21 2015-01-27 Nokia Corporation Apparatus and associated methods
US20120306767A1 (en) * 2011-06-02 2012-12-06 Alan Stirling Campbell Method for editing an electronic image on a touch screen display
US20130106898A1 (en) * 2011-10-26 2013-05-02 Google Inc. Detecting object moving toward or away from a computing device

Also Published As

Publication number Publication date
AU2012332514B2 (en) 2018-01-18
BR112014010242A8 (pt) 2017-12-12
WO2013067073A1 (en) 2013-05-10
MX2014005295A (es) 2014-05-30
RU2609099C2 (ru) 2017-01-30
IN2014CN02830A (ko) 2015-07-03
BR112014010242A2 (pt) 2017-04-18
EP2774027A1 (en) 2014-09-10
JP2014534533A (ja) 2014-12-18
CN102981699A (zh) 2013-03-20
CA2853646A1 (en) 2013-05-10
MX348174B (es) 2017-05-31
JP6165154B2 (ja) 2017-07-19
US20130111391A1 (en) 2013-05-02
EP2774027A4 (en) 2015-10-14
RU2014117165A (ru) 2015-11-10
AU2012332514A1 (en) 2014-05-22

Similar Documents

Publication Publication Date Title
KR20140094526A (ko) 가상 입력 패널에 의한 차폐를 회피하기 위한 컨텐트 조정 기법
US10430917B2 (en) Input mode recognition
US10324592B2 (en) Slicer elements for filtering tabular data
US9442649B2 (en) Optimal display and zoom of objects and text in a document
US8990686B2 (en) Visual navigation of documents by object
US20130191785A1 (en) Confident item selection using direct manipulation
KR102033801B1 (ko) 인플레이스 방식으로 값을 편집하는 사용자 인터페이스 제공 기법
US20140304648A1 (en) Displaying and interacting with touch contextual user interface
KR102118223B1 (ko) 크로스 윈도우 애니메이션
US20130191779A1 (en) Display of user interface elements based on touch or hardware input
US20130191714A1 (en) Fill by example animation and visuals
US20130111333A1 (en) Scaling objects while maintaining object structure

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E902 Notification of reason for refusal
E601 Decision to refuse application