KR102368943B1 - 전자 스프레드시트와의 터치/제스처 가능한 상호작용 기법 - Google Patents

전자 스프레드시트와의 터치/제스처 가능한 상호작용 기법 Download PDF

Info

Publication number
KR102368943B1
KR102368943B1 KR1020167019231A KR20167019231A KR102368943B1 KR 102368943 B1 KR102368943 B1 KR 102368943B1 KR 1020167019231 A KR1020167019231 A KR 1020167019231A KR 20167019231 A KR20167019231 A KR 20167019231A KR 102368943 B1 KR102368943 B1 KR 102368943B1
Authority
KR
South Korea
Prior art keywords
spreadsheet
electronic
electronic spreadsheet
document
displaying
Prior art date
Application number
KR1020167019231A
Other languages
English (en)
Other versions
KR20160099678A (ko
Inventor
존 캠벨
사무엘 초우 라다코비츠
울 알베르트
에릭 더블유 패터슨
칼로스 어거스토 오테로
Original Assignee
마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 filed Critical 마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Publication of KR20160099678A publication Critical patent/KR20160099678A/ko
Application granted granted Critical
Publication of KR102368943B1 publication Critical patent/KR102368943B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/177Editing, e.g. inserting or deleting of tables; using ruled lines
    • G06F40/18Editing, e.g. inserting or deleting of tables; using ruled lines of spreadsheets
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

전자 스프레드시트와의 터치/제스처 가능한 상호작용 및 탐색 방법이 제공된다. 사용자로 하여금 스프레드시트 기능 및 콘텐트를 더욱 완전하게 이용하고 또한 이해할 수 있도록 하는 다양한 터치/제스처 상호작용을 통해서 스프레드시트 및 스프레드시트 개체의 탐색, 내부 콘텐트의 검색, 및 이들과의 상호작용이 향상된다. 터치/제스처 상호작용에 따라서 서로 다른 스프레드시트 애플리케이션 기능 모드 및 스프레드시트 콘텐트 레벨이 탐색될 수 있다. 스프레드시트 및/또는 스프레드시트 개체와 관련되거나 및/또는 배경이 되는 정보가 노출될 수 있다. 선택 가능한 스프레드시트 셀 및/또는 영역/개체 및/또는 선택 가능한 기능 컨트롤 내부 또는 주위의 터치 가능한 영역이 확대되어 터치/제스처 상호작용이 개선될 수 있다.

Description

전자 스프레드시트와의 터치/제스처 가능한 상호작용 기법{TOUCH/GESTURE-ENABLED INTERACTION WITH ELECTRONIC SPREADSHEETS}
컴퓨터 및 컴퓨터 소프트웨어가 출현하면서, 사용자들은 다양한 유형의 데이터를 수신, 입력, 편집, 필터링 및 다른 방식으로 활용하는데 익숙해져 가고 있다. 스프레드시트 애플리케이션은 사용자로 하여금 대량의 데이터를 취급할 수 있도록 하고 또한 복수의 서로 다른 계산 및 자료 구조 함수를 수행할 수 있도록 하고 있어 매우 인기가 있다. 스프레드시트 애플리케이션의 사용자는 다양한 수학적 및 자료 구조화 수식 및 함수의 도움을 받아서 대량의 데이터를 입력하고 또한 조작할 수 있다.
대형 스프레드시트, 또는 다수의 스프레드시트를 포함하고 있는 스프레드시트 워크북을 통한 탐색은 종종 하나 이상의 서로 다른 스프레드시트 개체를 포함하고 있는 대량의 데이터 행(row)과 열(column) 때문에 취급이 어려울 수 있는데, 이와 같은 대형 스프레드시트는 스프레드시트 워크북 또는 개별 스프레드시트를 표시하는데 이용되는 컴퓨팅 장치의 디스플레이 공간을 초과한다. 그와 같은 스프레드시트에 있어서, 예를 들면, 마우스 및 키보드와 같은 종래의 사용자 상호작용 시스템을 사용하는 경우, 탐색, 콘텐트 찾기, 및 다양한 개체와의 상호작용은 어려울 수 있었으며, 더군다나 터치 장치가 사용 중인 경우, 또한 특히 이 터치 장치가 제한된 스크린 공간을 제공하는 경우에는 그와 같은 활동이 더욱 더 어려웠다.
본 발명은 이들 및 기타 고려 사항을 감안하여 이루어졌다.
본 "발명의 내용" 항목은 이하의 "발명을 실시하기 위한 구체적인 내용" 항목에서 더욱 상세하게 설명되는 몇 가지 개념을 선택하여 단순화된 형식으로 소개하기 위해 제공되는 것이다. 본 "발명의 내용" 항목은 청구 범위에 기재된 청구 내용의 주된 특징 또는 핵심 특징을 식별하고자 하는 의도로 제공되는 것이 아니며, 또한 청구 범위에 기재된 청구 대상의 범위를 한정함에 있어서 도움을 주기 위해 의도된 것도 아니다.
본 발명의 각 실시예는 전자 스프레드시트와의 터치 가능한 상호작용을 제공하는 것에 의해서 상술한 문제점 및 기타 문제점을 해결한다. 본 발명의 각 실시예에 따르면, 줌 탐색(또한 시맨틱 줌 탐색으로도 지칭됨)이 제공된다. 본 발명에서 설명되는 줌 탐색에 의하면, 스프레드시트 문서 또는 그 안에 포함된 콘텐트를 광학적으로 줌(zoom)하는(즉, 표시된 콘텐트 아이템이 줌에 따라서 더 커지거나 작아지는) 대신에, 스프레드시트 애플리케이션의 사용자 인터페이스 및/또는 스프레드시트 콘텐트를 통한 탐색이 향상/개선된다. 후술하는 바와 같이, 이와 같은 줌 탐색에 의하면 다양한 레벨의 스프레드시트 애플리케이션 기능을 통한 탐색(탐색 중에 문맥에 따른 기능 및 콘텐트가 창에 표시되는) 및 다양한 레벨의 스프레드시트 콘텐트를 통한 탐색이 가능해진다.
본 발명의 각 실시예에 따르면, 다양한 장치의 터치 및/또는 제스처 상호작용이 제공되어 사용자로 하여금 스프레드시트 애플리케이션 및/또는 스프레드시트 문서와 상호작용할 수 있도록 한다. 사용자로 하여금 스프레드시트 콘텐트를 더욱 완전하게 이용하고 또한 이해할 수 있도록 하는 다양한 터치/제스처 상호작용을 통해서 스프레드시트 및 스프레드시트 개체의 탐색, 내부 콘텐트의 검색, 및 이들과의 상호작용이 향상된다. 본 발명의 각 실시예에 따르면, 향상된 시트(sheet) 탐색을 위해서 스프레드시트는 그룹화되거나 적층(stack)될 수 있다. 큰 스프레드시트는 줌(zoom)될 수 있으며, 또한 특정 스프레드시트 개체가 창에 표시될 수 있다. 하나 이상의 스프레드시트에 포함되어 있는 하나 이상의 이름이 지정된 개체는 창에 표시될 수 있다. 이전의 스프레드시트 상호작용, 예를 들면, 가장 최근의 변경점 및 코멘트가 노출될 수 있다. 향상된 "찾기"(find) 모드가 제공되어 하나 이상의 스프레드시트에 걸쳐서 찾은 데이터 아이템을 노출시킬 수 있다. 하나 이상의 스프레드시트에 걸친 수식 의존성도 제공될 수 있다. 터치/제스처 가능한 "상세 탐색"(drill down)이 제공되어 소정의 스프레드시트 또는 스프레드시트 개체에 대한 배경 또는 외부 데이터가 노출될 수 있다. 또한, 스프레드시트의 터치 가능한 영역이 확대되어 터치/제스처 상호작용의 효율성을 개선할 수 있다.
하나 이상의 실시예의 상세는 첨부 도면 및 이하의 발명의 설명에서 설명된다. 기타 특징 및 장점은 후술하는 발명의 상세한 설명의 해석 및 관련된 도면의 검토로부터 명백해질 것이다. 후술하는 발명의 상세한 설명은 오로지 설명을 위한 것일 뿐이며 또한 청구범위에서 청구하는 바와 같이 본 발명을 제한하는 것이 아님을 알아야 한다.
본 발명에 포함되고 또한 그 일부를 구성하는 첨부 도면은 본 발명의 각 실시예를 도시하고 있다.
도 1은, 본 발명의 각 실시예가 실시될 수 있는 시스템 아키텍처를 도시한 도면이다.
도 2a 내지 도 2f는, 전자 스프레드시트 문서와의 다양한 터치/제스처 가능한 상호작용을 도시한 도면이다.
도 3은, 전자 스프레드시트 문서와 터치/제스처 가능하게 상호작용하여 스프레드시트 애플리케이션 모드 사이에서 탐색하는 것을 도시한 도면이다.
도 4는, 스프레드시트 애플리케이션의 사용자 인터페이스에서의 복수의 스프레드시트의 "적층"(stacking) 또는 그룹화를 도시한 도면이다.
도 5는, 스프레드시트 애플리케이션의 사용자 인터페이스 내의 복수의 스프레드시트의 "적층" 또는 그룹화를 도시하고 있고 또한 하나 이상의 전자 스프레드시트 문서와 관련된 코멘트와 같은 정보를 도시한 도면이다.
도 6은, 대형 스프레드시트와 터치 가능하게 상호작용하여 대형 스프레드시트 내의 하나 이상의 콘텐트 아이템을 노출하는 것을 도시한 도면이다.
도 7은, 하나 이상의 전자 스프레드시트 문서에 포함된 하나 이상의 이름이 지정된 개체의 노출을 도시한 도면이다.
도 8은, 복수의 전자 스프레드시트 문서의 일부분 또는 개체와의 상호작용의 노출 및 매핑을 도시한 도면이다.
도 9a는, 전자 스프레드시트 문서 내에서 찾은 콘텐트 아이템을 도시한 도면이다.
도 9b는, 복수의 전자 스프레드시트 문서 내에서 찾은 콘텐트 아이템을 도시한 도면이다.
도 10a는, 하나 이상의 전자 스프레드시트에 걸친 수식, 함수 또는 자료 의존성의 매핑을 도시한 도면이다.
도 10b는, 하나 이상의 전자 스프레드시트에 걸친 수식, 함수 또는 자료 의존성의 매핑을 도시한 도면이다.
도 11은, 스프레드시트 개체를 "상세 탐색"(drill down)하여 스프레드시트 개체와의 상호작용과 관련된 데이터 또는 기타 개체를 노출하는 것을 도시한 도면이다.
도 12는, 스프레드시트 개체를 "상세 탐색"하여 스프레드시트 개체와의 상호작용과 관련된 데이터 또는 기타 개체를 노출하는 것을 도시한 도면이다.
도 13은, 스프레드시트 개체와의 터치/제스처 상호작용을 향상시키기 위한 노치 모드(notched mode)를 도시한 도면이다.
도 14는, 전자 스프레드시트 문서와 상호작용하기 위한 방법을 도시하고 있는 흐름도이다.
도 15는, 본 발명의 각 실시예가 실시될 수 있는 컴퓨팅 장치의 예시적인 물리적인 구성 요소를 도시하고 있는 간략화된 블록 다이아그램이다.
도 16a 및 도 16b는, 본 발명의 각 실시예가 실시될 수 있는 모바일 컴퓨팅 장치의 간략화된 블록 다이아그램이다.
도 17은, 본 발명의 실시예가 실시될 수 있는 분산형 컴퓨팅 시스템의 간략화된 블록 다이아그램이다.
간략하게 상술한 바와 같이, 본 발명의 각 실시예는 전자 스프레드시트 애플리케이션의 사용자 인터페이스 및 전자스프레드시트 애플리케이션 문서와의 터치/제스처 가능한 상호작용에 관한 것이다. 이하에서 상세하게 설명하는 바와 같이, 본 발명의 각 실시예에 따르면, 복수의 개별 스프레드시트로 이루어진 전자 스프레드시트 워크북, 개별 전자 스프레드시트 문서, 및/또는 전자 스프레드시트 문서에 포함된 하나 이상의 개체(이하, 집합적으로 스프레드시트 또는 스프레드시트 문서라고 함)에 대한 향상된 탐색 방법이 제공된다. 터치/제스처 가능한 줌 상호작용은 사용자로 하여금 하나 이상의 사용자 터치 및/또는 제스처에 따라서 다양한 방향(예컨대, 계층적으로, 상위 레벨에서 하위 레벨로, 하위 레벨에서 상위 레벨로 등)으로 다양한 스프레드시트 애플리케이션의 사용자 인터페이스와 기능 모드 및 스프레드시트 콘텐트 탐색해나갈 수 있도록 한다.
그와 같은 줌 탐색(또한, 시맨틱 줌 탐색으로도 지칭됨)을 사용하면, 스프레드시트 문서 또는 그 안에 포함된 콘텐트를 광학적으로 줌(zoom)하는(즉, 표시된 콘텐트 아이템이 줌에 따라서 더 커지거나 작아지는) 대신에, 본 발명에서 설명된 줌 탐색으로 인해, 스프레드시트 애플리케이션의 사용자 인터페이스 및/또는 스프레드시트 콘텐트를 통한 탐색이 향상/개선된다. 예를 들면, 소정의 스프레드시트 워크북을 줌 탐색하는 방법은 표시된 스프레드시트 워크북 아이콘, 폴더, 또는 기타 그래픽 표시에 대한 터치/제스처를 수신하는 단계로서, 줌(zoom)한 워크북을 포함하는 다양한 시트에 대한 일련의 썸네일 표현이 표시되도록 하는 단계를 포함할 수 있다. 썸네일 표현 중의 하나에 대한 후속하는 터치/제스처로 인해, 대응하는 스프레드시트 파일 또는 워크북이 기동 및/또는 표시될 수 있다. 표시된 스프레드시트에 대한 후속하는 터치/제스처로 인해, 스프레드시트에 포함된 하나 이상의 개체(예컨대, 표, 차트, 그림 등)의 하나 이상의 썸네일 표현이 표시될 수 있다. 스프레드시트 개체 중의 하나에 대한 후속하는 터치/제스처로 인해, 개체와의 상호작용과 관련된 데이터 및/또는 개체가 표시될 수 있다. 또한 서로 다른 콘텐트 레벨로 및 이로부터의 탐색에 추가하여 서로 다른 스프레드시트 함수와 관련된 스프레드시트 모드를 통한 터치/제스처 가능한 탐색이 제공된다. 따라서, 버튼, 컨트롤 또는 문서 위치를 선택하여야 하였던 종래의 탐색 방법과는 달리, 하나 이상의 터치/제스처 상호작용을 통한 문서와의 상호작용에 의해서 스프레드시트 문서 및 관련된 기능을 통한 탐색이 달성될 수 있다.
이하, 첨부 도면을 참조하여 발명을 실시하기 위한 구체적인 내용을 설명하기로 한다. 가능하다면, 도면 및 후술하는 발명을 실시하기 위한 구체적인 설명에서는 동일한 도면 부호를 사용하여 동일 또는 유사한 구성 요소를 지칭하고 있다. 본 발명의 각 실시예에 대해서 기술하고 있지만, 변경, 개작, 및 기타 구현도 가능하다. 예를 들면, 도면에 도시된 각 구성 요소에 대해서 치환, 추가, 또는 변경이 가해질 수 있고, 또한 설명된 방법은 개시된 방법에 대해서 각 단계를 치환, 재배열, 또는 추가하는 것에 의해서 변형될 수 있다. 따라서, 이하의 발명을 실시하기 위한 구체적인 내용은 본 발명을 제한하지 않으며, 오히려 본 발명의 정당한 범위는 첨부 청구 범위에 의해서 한정된다.
도 1은, 본 발명의 각 실시예가 실시될 수 있는 시스템 아키텍처를 도시한 도면이다. 도 1에 있어서, 개별적인 컴퓨팅 장치 상에서 또는 협업 세션에서 본 발명의 각 실시예가 실시될 수 있는 다양한 컴퓨팅 장치가 도시되어 있다. 예를 들면, 소형 스마트 폰 또는 기타 소지형 컴퓨팅 장치(110)가 디스플레이 창(111)을 가지고 있고 또한 애플리케이션(115)과 관련된 것으로 도시되어 있다. 디스플레이 창(106) 및 관련된 스프레드시트 애플리케이션(115)을 가지고 있는 더 큰 형태의 태블릿 스타일 컴퓨팅 장치(105)가 도시되어 있다. 디스플레이 창(121)을 갖는 대형 디스플레이 장치(120)는 컴퓨터(125) 및 스프레드시트 애플리케이션(115)과 관련되어 있는 것으로 도시되어 있다.
이해하여야 하는 바와 같이, 컴퓨팅 장치(105, 110, 120, 125)는 오로지 예시적인 목적일 뿐이며, 본 발명의 각 실시예에 따라서 사용될 수 있는 다양한 유형의 컴퓨팅 장치를 모두 포함하지는 않는다. 예를 들면, 관련된 컴퓨팅 장치(125)를 갖는 디스플레이 유닛으로서 디스플레이 장치(120)가 도시되어 있지만, 대형 디스플레이 장치(120)는, 예를 들면, 필요에 따라서, 대형 디스플레이를 회의실에서 사용하는 것으로부터 개인 컴퓨팅까지 임의로 적절하게 사용할 수 있는 일체형 디스플레이/컴퓨팅 장치로서 동작할 수도 있다. 본 발명의 각 실시예에 따르면, 도 1에 도시된 각각의 컴퓨팅 장치는 터치 또는 제스처 입력, 키보드 입력, 마우스 입력, 음성 명령 입력, 전자 잉크 방식 입력, 시선 추적 등을 포함하는 다양한 적절한 수단을 통해서 입력을 수신할 수 있다.
계속 도 1을 참조하면, 각각의 컴퓨팅 장치(105, 110, 120, 125)와 관련되어 도시되어 있는 소프트웨어 애플리케이션(115)은, 본 발명에서 설명되는 바와 같이, 본 발명의 각 실시예를 가능하게 하기 위한 컴퓨터 실행 가능 인스트럭션을 갖는 임의의 애플리케이션의 예시이다. 예를 들면, 애플리케이션(115)에는 스프레드시트 애플리케이션, 워드 프로세싱 애플리케이션, 슬라이드 프리젠테이션 애플리케이션, 전자 메일 애플리케이션, 노트 애플리케이션, 데스크톱 출판 애플리케이션 등이 포함될 수 있다. 예시적인 스프레드시트 애플리케이션(115)에는 미국 워싱턴주의 레드먼드(Redmond)에 위치하는 마이크로소프트 코포레이션(Microsoft Corporation)에서 제조되는 엑셀(EXCEL)이 포함된다. 이해하여야 하는 바와 같이, 본 예시의 스프레드시트 애플리케이션은 본 발명에서 설명된 각 실시예를 사용할 수 있도록 하기에 적절한 다수의 애플리케이션 중의 하나의 예시일 뿐이다.
각각의 컴퓨팅 장치(105, 110, 120, 125)는 하나 이상의 유무선 데이터 접속부(145, 150, 155)를 통한 협업 환경에서 동작할 수 있다. 즉, 각각의 컴퓨팅 장치는 직접 접속을 통해서, 또는 인터넷 또는 인트라넷과 같은 분산형 컴퓨팅 네트워크(130)를 통한 접속을 통해서 유무선 데이터선을 통해서 서로 통신할 수 있다.
본 발명의 각 실시예에 따르면, 각각의 컴퓨팅 장치(105, 110, 120, 125)와 관련된 애플리케이션 기능은 하나 이상의 변형례에 따라서 동작할 수 있다. 예를 들면, 각각의 애플리케이션(115)은 협업 세션에서 다른 컴퓨팅 장치 상에서 동작하는 다른 애플리케이션(115)으로 데이터를 전송하고 이로부터 데이터를 수신하는 능력을 포함하는 모든 애플리케이션 기능을 가지고 있는 완전하게 기능하는 "씩"(thick) 클라이언트 애플리케이션일 수 있다. 각각의 이와 같은 애플리케이션은 고유의 기능, 예를 들면, 스프레드시트 기능을 가지고 있을 뿐만 아니라, 본 발명의 각 실시예에 따르면, 각각의 이와 같은 애플리케이션은 또한 각각의 애플리케이션이 제어 애플리케이션으로 동작하도록 함으로써 제어 장치로부터 전송된 정보를 제어하여 협업 환경에서 종점 디스플레이 장치에 의해서 수신되도록 하는 충분한 개수의 컴퓨터 실행 가능 인스트럭션도 포함하고 있다. 마찬가지로, 각각의 이와 같은 애플리케이션은 충분한 개수의 컴퓨터 실행 가능 인스트럭션을 가지고 있어 애플리케이션이 종점 디스플레이 장치로서 동작하도록 함으로써 다른 컴퓨팅 장치로부터 제어 기능을 수신할 수 있다.
다른 실시예에 따르면, 컴퓨팅 장치(105, 110, 120, 125)는 분산형 컴퓨팅 네트워크(130), 예를 들면, 인터넷을 통해서 통신할 수 있다. 계속 도 1을 참조하면, 컴퓨팅 장치(135)는, 본 발명에서 설명되는 바와 같이, 하나 이상의 웹 서비스 애플리케이션(140)을 동작시켜서 협업 세션을 제공할 수 있는 인터넷 기반 또는 "클라우드 기반"의 서버 컴퓨터의 예시이다. 이 실시예에 따르면, 각각의 장치(105, 110, 120, 125)는 씬(thin) 클라이언트 시스템으로서 동작할 수 있으며, 또한 이들 장치 사이에서의 협업적 통신은 원격지에서 동작되는 웹 서비스 애플리케이션(140)의 지시에 따라서 동작될 수 있다. 이 실시예에 따르면, 애플리케이션(115)은 원격 서버(105)에서 동작될 수 있으며, 이때 각각의 장치(110, 120, 125, 115)는 서버 기반 애플리케이션(135)으로부터의 원격 서비스, 예를 들면, 웹 서비스 애플리케이션(140)을 통해서 본 발명에서 설명된 기능에 액세스하고 또한 수신할 수 있다.
도 2a 내지 도 2f에 있어서, 예시적인 터치 가능한 태블릿 스타일 컴퓨팅 장치(105) 상에 예시적인 스프레드시트 애플리케이션의 사용자 인터페이스(205) 및 예시적인 스프레드시트 애플리케이션 문서(210)가 도시되어 있다. 이해하여야 하는 바와 같이, 도시된 컴퓨팅 장치(105)는 스프레드시트 애플리케이션의 사용자 인터페이스 및 스프레드시트 애플리케이션 문서가 표시되고 또한 이용될 수 있는 임의의 컴퓨팅 장치, 예를 들면, 도 1을 참조하여 상술한 임의의 컴퓨팅 장치(105, 110, 120, 125)의 예시이다. 본 발명에서 설명된 각 실시예에 따르면, 전자 스프레드시트 사용자 인터페이스(205)와 스프레드시트 문서(210)와의 사용자 상호작용은 키보드 입력, 마우스 입력, 터치/제스처 입력, 음성 명령, 시선 추적, 근거리(thin air) 제스처 입력, 전자 잉크 방식 입력, 및/또는 이들의 조합을 포함하는 다양한 상호작용 방법을 통해서 수행될 수 있다.
전자 스프레드시트 사용자 인터페이스(205)와 스프레드시트 문서(210)는 오로지 예시 및 도해의 목적일 뿐이며 또한 본 발명의 각 실시예에서 이용될 수 있는 데이터를 포함할 수 있는 다양한 유형의 문서를 모두 포함하지는 않는다. 예를 들면, 본 발명에서 설명된 각 실시예에서는 연산과 관련하여 전자 스프레드시트와의 상호작용에 대해서 및 스프레드시트 애플리케이션과의 관련성에 대해서 설명하고 있지만, 본 발명의 각 실시예에 따라서 스프레드시트 콘텐트를 수신하고, 표시하고, 또한 연산을 가능하게 할 수 있는 다른 소프트웨어 애플리케이션 및 관련 문서, 예를 들면, 워드 프로세싱 문서, 슬라이드 프리젠테이션 문서, 전자 메일 문서, 노트 문서 등을 이용할 수도 있다. 예를 들면, 본 발명에서 설명되는 바와 같이, 다른 유형의 문서, 예를 들면, 워드 프로세싱 문서에 내장되어 있거나 다른 유형의 문서에서 참조하는 스프레드시트 콘텐트에 대해서 전자 스프레드시트와의 상호작용을 이용할 수 있으며, 워드 프로세싱 문서에는 이 워드 프로세싱 문서에 포함되어 있는 다른 콘텐트와 관련되어 사용하기 위한 전자 스프레드시트 또는 전자 스프레드시트의 일부분이 내장되어 있다.
계속 도 2a 내지 도 2f를 참조하면, 예시적인 스프레드시트 사용자 인터페이스(205)는 하부의 스프레드시트 애플리케이션(115)의 기능을 획득하고 또한 이 기능을 스프레드시트의 그리드(grid) 또는 캔버스에 포함된 하나 이상의 데이터 아이템(220)에 적용하기 위한 다양한 선택 가능한 버튼 및 컨트롤(control)을 포함하고 있다. 하나 이상의 스프레드시트 셀 참조, 수학 연산자, 스프레드시트의 문법 문자, 수식, 함수 등이 입력 및/또는 배치되어 스프레드시트 문서(210)에 포함된 데이터와 관련되어 하나 이상의 수식 또는 함수를 생성하고 또한 이용할 수 있도록 하는 수식/함수 바(215)가 제공된다. 문서(210)의 열 A에는 복수의 데이터명이 표시되어 있고 또한 스프레드시트 문서(210)의 열 B에는 포함된 다양한 수치 데이터 아이템이 표시되어 있는 다양한 데이터 아이템(220)이 도시되어 있다. 이해하여야 하는 바와 같이, 도 2a 내지 도 2f에 도시된 데이터는 오로지 예시적인 목적일 뿐이며, 스프레드시트 또는 다른 문서에서 조직화될 수 있고 또한 본 발명의 각 실시예에서 이용될 수 있는 방대한 양의 데이터를 모두 포함하지는 않는다.
상술한 바와 같이, 본 발명에서의 각 실시예에 따르면, 소정의 스프레드시트 문서의 다양한 레벨을 통해서 또는 스프레드시트 문서와 관련되어 스프레드시트 애플리케이션(115)에 의해서 제공되는 다양한 기능 모드를 통해서 터치/제스처 가능한 탐색이 가능해지는 줌 탐색(또한 시맨틱 줌(semantic zoom)으로도 지칭됨)이 제공된다. 계속 도 2a 내지 도 2f를 참조하면, 본 발명에서 설명되는 터치/제스처 탐색을 달성할 수 있는 다양한 터치/제스처 사용자 상호작용이 도시 및 설명되어 있다. 본 발명의 각 실시예에 따르면, 터치 및 제스처라는 용어는 상호 교환 가능하게 사용되어 물리적인 터치, 근거리 제스처, 음성 제스처, 안구 추적 제스처 등을 표현할 수 있다. 도 2a를 참조하면, 핀치 줌(225)(pinch zoom)이 도시되어 있으며, 여기에서 사용자는 스프레드시트 콘텐트 아이템 또는 기능과 관련된 장치(105)의 디스플레이 창을 꼬집어서(pinch) 다른 탐색 레벨을 탐색한다. 예를 들면, 예시적인 스프레드시트에 포함된 데이터 아이템(220)을 핀치 줌(225)하게 되면 상호작용하는 콘텐트 아이템이 기초하고 있는 하부의 스프레드시트 개체 또는 데이터 아이템의 탐색이 이루어진다. 유사하게, 스프레드시트 기능 버튼 또는 컨트롤을 핀치 줌(pinch zoom)하는 제스처는 하위 레벨의 스프레드시트 함수로의 탐색이 이루어지도록 한다. 예를 들면, 수식 버튼과 상호작용하는 핀치 줌(225)은 예시적인 스프레드시트와 관련되어 사용될 수 있는 다양한 이용 가능한 수식을 표시하도록 할 수 있다.
이해하여야 하는 바와 같이, 다른 터치/제스처, 예를 들면, 사용자가 디스플레이 창과 접촉하고, 이후에 손가락과 엄지를 벌리는 리버스 핀치 줌(reverse pinch zoom)에 의해서 상술한 상위 레벨로의 탐색을 반대로(reverse) 할 수 있다. 예를 들면, 예시적인 스프레드시트의 데이터 아이템을 리버스 핀치 줌하게 되면 데이터 아이템과의 상호작용을 포함하고 있는, 구비하고 있는, 또는 이에 기초하여 스프레드시트 개체로 축소될 수 있다. 따라서, 이와 같은 핀치 줌 상호작용(225)을 사용하여 소정의 스프레드시트에 포함된 또는 이와 관련된 다양한 콘텐트 및/또는 기능 레벨을 통해서 용이하게 확대 줌 또는 축소 줌이 가능해진다. 본 발명의 각 실시예에 따르면, 이와 같은 핀치 줌 제스처는 적용된 핀치 줌의 스피드에 기초하여 관련된 탐색에 변동을 줄 수도 있다. 예를 들면, 빠르게 핀치 줌하거나 빠르게 핀치 리버스 줌(pinch reverse zoom)을 하게 되면 스프레드시트 콘텐트 또는 스프레드시트 애플리케이션 모드/기능 중의 하나에 대해서 직접적으로 최고 또는 최하 탐색 레벨을 탐색하도록 할 수 있다.
도 2b를 참조하면, 멀티 핑거 핀치 줌 상호작용(230)이 도시되어 있다. 일 실시예에 따르면, 멀티 핑거 핀치 줌 상호작용을 사용하여 소정의 스프레드시트 모드, 예를 들면, 서식 지정 모드, 수식 모드, 표 생성 모드, 코멘트 모드 등에 대해서 직접적으로 자동으로 줌할 수 있고, 또는 멀티 핑거 핀치 줌 상호작용(230)을 사용하여 소정의 스프레드시트 문서의 최상위 또는 최하위 콘텐트 레벨을 자동 탐색할 수도 있다. 예를 들면, 멀티 핑거 핀치 줌 상호작용을 사용하여 소정의 스프레드시트 문서의 표시로부터, 예를 들면, 스프레드시트 문서를 이루고 있는 표, 차트 등과 같은 다양한 스프레드시트 개체의 목록 또는 그래픽 표시를 자동으로 탐색할 수 있다.
이제 도 2c를 참조하면, 멀티 핑거 회전 줌 상호작용(235)이 도시되어 있다. 이 상호작용에 따르면, 사용자는 장치(105)의 디스플레이 창을 터치한 다음 회전 운동하여 다양한 스프레드시트 콘텐트 레벨 사이 및 다양한 스프레드시트 애플리케이션 기능 모드 사이를 자동으로 탐색할 수 있다. 예를 들면, 손가락을 오른쪽으로 또는 시계 방향으로 회전시키면 하위 콘텐트 또는 기능 모드 레벨을 탐색하도록 할 수 있고, 또한 손가락을 왼쪽으로 또는 반시계 방향으로 회전시키면 상위 콘텐트 또는 기능 모드 레벨을 탐색하도록 할 수 있다. 또한, 그와 같은 멀티 핑거 회전 줌 제스처를 이용하여 자동으로 소정의 모드를 입력할 수 있다. 예를 들면, 멀티 핑거 회전 줌 제스처에 따라서, 스프레드시트 워크북을 포함하고 있는 하나 이상의 스프레드시트의 일련의 썸네일 표현의 표시가 제공될 수 있다.
이제 도 2d를 참조하면, 안구 추적 상호작용(240)이 도시되어 있으며 또한 이를 이용하여 다양한 콘텐트 및/또는 기능 모드 레벨을 통한 탐색이 가능하다. 이 실시예에 따르면, 장치(105)에 제공되는 카메라(245)는 사용자의 안구의 움직임을 추적할 수 있으며, 또한 사용자의 안구의 움직임을 이용하여, 본 발명에서 설명되는 바와 같이, 스프레드시트 문서 및 관련된 스프레드시트 기능을 줌 탐색할 수 있다. 예를 들면, 눈의 초점이 소정의 스프레드시트 개체에 오래 머무르고, 이어서 오른쪽에서 왼쪽으로 눈이 이동하는 경우, 초점을 맞추고 있는 스프레드시트 콘텐트 아이템과 관련된 하위 데이터 레벨로의 탐색이 달성될 수 있다. 다른 예를 들면, 눈의 회전이 시계 방향 운동인 경우 하위 콘텐트 및/또는 기능 모드 레벨의 탐색이 달성될 수 있고, 한편으로는 눈의 회전이 반시계 방향 운동인 경우 상위 콘텐트 및/또는 기능 모드 또는 레벨의 탐색이 달성될 수 있다.
도 2e를 참조하면, 음성 활성화 줌 상호작용(250)이 도시되어 있으며, 여기에서 장치(105)의 마이크로폰(255)은, 본 발명에서 설명되는 바와 같이, 장치(105) 또는 애플리케이션(115)과 관련된 음성 인식 및 해석 모듈과 관련하여, 음성 명령을 수신하고, 이어서 이 음성 명령을 탐색 명령으로서 해석하여 스프레드시트 콘텐트 및/또는 기능 모드를 탐색한다. 예를 들면, "워크북의 스프레드시트 목록을 보여줘"(show me a listing of spreadsheets making up the displayed workbook)와 같은 명령에 따라서, 소정의 스프레드시트 워크북을 이루고 있는 하나 이상의 스프레드시트의 썸네일 표현 목록이 자동으로 표시된다. 마찬가지로, "서식 지정 함수를 보여줘"(display formatting functions)와 같은 명령어에 의해서 자동으로 관련이 있는 스프레드시트 기능을 표시하여 소정의 스프레드시트 문서에 대해 하나 이상의 서식 지정 속성을 적용할 수 있다.
도 2f를 참조하면, 근거리(thin air) 제스처 줌 상호작용(260)이 도시되어 있으며, 여기에서 장치(105)의 카메라(245)는 근거리 제스처, 예를 들면, 손이나 손가락을 흔드는 것을 검출하며, 또한 장치(105) 또는 애플리케이션(115)과 관련된 제스처 기능은, 본 발명에서 설명되는 바와 같이, 다양한 콘텐트 및/또는 기능 모드 레벨을 통해서 탐색하기 위한 탐색 명령으로서 이 수신된 제스처를 해석한다. 예를 들면, 오른쪽에서 왼쪽으로 손을 흔들게 되면 하나의 콘텐트 레벨에서 제 2 콘텐트 레벨로, 예를 들면, 표시된 스프레드시트로부터 표시된 스프레드시트 개체로 탐색하게 할 수 있다. 유사하게, 다른 근거리 제스처, 예를 들면, 손가락을 돌리게 되면, 본 발명에서 설명되는 바와 같이, 최상위로부터 최하위 콘텐트 레벨로의 탐색을 위한 탐색 명령으로 해석될 수 있고, 또는 하나의 기능 모드로부터 다음 기능 모드의 탐색을 위한 탐색 명령으로 해석될 수 있다.
이해하여야 하는 바와 같이, 도 2a 내지 도 2f를 참조하여 상술한 상호작용 및 탐색의 예시는 예시 및 도시의 목적일 뿐이며, 또한 본 발명의 각 실시예에 따라서 사용될 수 있는 다양한 터치/제스처 상호작용을 모두 포함하는 것을 제한하지 않는다. 즉, 다양한 탐색 기능과 관련하여 거의 무제한적인 개수의 터치/제스처 상호작용을 사용할 수 있다. 예를 들면, 장치(105)의 디스플레이 창에 사용자의 손가락을 두 번 탭(tap)하면 하나의 레벨에서 다른 레벨로의 탐색이 이루어질 수 있다. 다른 예를 들면, 단일 탭 이후에 손가락으로 스와이프(swipe)하면 하나의 레벨에서 다른 레벨로의 탐색이 이루어질 수 있다. 다른 예시로서, 손가락으로 탭한 다음에 근거리 제스처를 취하면 또 다른 유형의 콘텐트 및/또는 기능 모드 탐색이 가능하다.
도 3 내지 도 13은 본 발명의 각 실시예에 따라서 다양한 레벨의 스프레드시트 콘텐트를 통해서 및 다양한 레벨의 스프레드시트 기능 모드를 통해서 터치/제스처 상호작용 탐색의 도시 및 예시를 제공한다. 도 3을 참조하면, 터치/제스처 가능한 컴퓨팅 장치(105)에 표시된 스프레드시트 애플리케이션의 사용자 인터페이스(205)와 관련되어 표시된 스프레드시트 문서(305)와 관련된 멀티 핑거 핀치(pinch) 줌 상호작용이 도시되어 있다. 도 3의 하부에 도시되어 있는 바와 같이, 도시된 스프레드시트(305)와의 제스처 상호작용을 사용자가 수행한 이후에, 이 스프레드시트의 하위 레벨이 탐색되며, 여기에서, 차트(340) 및 그래픽(350)은, 도 3의 상부에 도시되어 있는 바와 같이, 스프레드시트(305)의 고위 레벨 디스플레이에 표시된 데이터(220)와 관련되어 화면에 표시된다.
또한, 스프레드시트 애플리케이션의 사용자 인터페이스(205)를 참조하면, 스프레드시트(305)와의 제스처 상호작용에 따라서, 다양한 사용자 인터페이스 함수(310, 315, 320, 325, 330)가 노출되어 탐색된 스프레드시트 콘텐트와 관련된 서로 다른 모드의 스프레드시트 애플리케이션 기능이 제공된다. 따라서, 본 발명에서 설명되고, 또한 도 3에 도시되어 있는 바와 같이, 줌 탐색은 사로 다른 레벨의 스프레드시트 콘텐트를 탐색할 수 있도록 하고 또한 추가적인 또는 서로 다른 소프트웨어 애플리케이션 기능 컨트롤, 예를 들면, 코멘트 버튼(310), 수식 버튼(315), 가장 최근의 변경점 버튼(320), 시트 버튼(325), 및 뒤로 가기 버튼(330)을 제공할 수 있다.
상술한 바와 같이, 사용자는 이후에 스프레드시트(305) 또는 스프레드시트 사용자 인터페이스(205)와의 추가적인 상호작용에 의해서 콘텐트 레벨 및/또는 기능 모드를 추가적으로 탐색할 수 있다. 예를 들면, 차트(340)와 제스처 상호작용하게 되면 더 하위 레벨의 스프레드시트 콘텐트를 탐색할 수 있으며, 여기에서 차트(340) 하부에 있거나 이와 관련된 데이터가 스프레드시트(305)에 표시될 수 있다. 마찬가지로, 기능 컨트롤(310, 315, 320, 325, 330) 중의 하나와의 사용자 상호작용, 예를 들면, 탭(tap), 스와이프, 핀치, 또는 본 발명에서 기술된 기타 제스처와 상호작용하면 서로 다른 기능 모드와 관련된 또 다른 추가적인 기능이 노출될 수 있다. 예를 들면, 탭(tap), 핀치(pinch), 또는 기타 제스처가 수식 버튼/컨트롤(315)에 적용되면 하나 이상의 수식의 생성 및/또는 하나 이상의 수식을 스프레드시트(305)에 포함된 데이터에 적용하는 것과 특별히 관련된 스프레드시트 애플리케이션 모드를 탐색할 수 있다.
이제 도 4를 참조하면, 시트 뷰(sheet view)가 도시되어 있으며, 여기에서 스프레드시트 워크북, 스프레드시트 파일, 또는 다른 스프레드시트 표시자를 탐색하게 되면 하나 이상의 스프레드시트 문서(406, 411, 416, 421, 426)가 적층되거나 그룹화한 뷰(view)를 얻을 수 있다. 예를 들면, 사용자가 스프레드시트 애플리케이션의 사용자 인터페이스(205)를 기동한 다음에 다수의 개별 스프레드시트로 이루어진 스프레드시트 워크북을 탐색하는 경우, 사용자는, 상술한, 다양한 터치/제스처 상호작용 중의 하나를 통해서 스프레드시트 워크북과 상호작용하여 도 4에 도시된 시트 뷰 디스플레이 모드를 탐색할 수 있다. 예를 들면, 스프레드시트 워크북은 협업 그룹의 일부로서 생성될 수 있으며, 여기에서 워크북은 협업 그룹의 서로 다른 구성원에 의해서 생성 및/또는 편집된 다수의 스프레드시트로 이루어져 있다. 본 발명의 각 실시예에 따르면, 스프레드시트 워크북과의 터치/제스처 상호작용에 따라서, 도 4에 도시되어 있는 바와 같이, 시트 모드(sheet mode)가 제공되어 사용자로 하여금 상호작용한 워크북에 포함된 각각의 스프레드시트의 썸네일 표현 갤러리 또는 목록을 면밀히 살펴볼 수 있도록 한다. 일단 시트 모드에 있게 되면, 사용자는 각각의 썸네일 표현(406, 411, 416, 421, 426)과 상호작용하여, 도시된 스프레드시트 표현(416)의 경우에서와 같이, 서로 다른 썸네일 표현을 가장 앞쪽으로 이동시키기 위해서, 예를 들면, 오른쪽으로 또는 왼쪽으로 스와이프함으로써, 표현된 스프레드시트를 면밀히 살펴볼 수 있다. 사용자가 특정 시트가 흥미가 있어 검토, 편집 중의 하나, 또는 이들 모두를 행하고자 결정하는 경우, 사용자는 탭, 터치, 핀치/줌 등에 의해서 썸네일 표현과 상호작용하여 상호작용한 썸네일 표현에 의해서 표현되는 실제 스프레드시트 문서를 기동할 수 있다.
또한, 스프레드시트 애플리케이션의 사용자 인터페이스(205)의 하부 에지에는, 다양한 시트 탭(405, 410, 415, 420, 425)이 도시되어 있다. 본 발명의 각 실시예에 따르면, 사용자가 터치/제스처 상호작용을 통해서 썸네일 표현과 상호작용하는 것과 마찬가지로, 사용자는 시트 탭(405-425)과의 터치/제스처 상호작용을 이용하여 관련된 스프레드시트를 기동하여 검토 및/또는 편집할 수 있다. 일 실시예에 따르면, 시트 탭(415)은 적층된 시트 표현에서 다른 표현된 스프레드시트의 가장 앞쪽에 표시된 시트 3(sheet 3)에 대해서 썸네일 표현(416)과 관련되어 확대 모드로 도시되어 있다.
도 4에 도시되어 있는 바와 같이, 복수의 시트를 썸네일 표현 형태로 적층하는 것은 다양한 유용한 디스플레이 메커니즘에 따라서 수행될 수 있다. 도 4에 도시된 디스플레이 메커니즘은 원형 디스플레이 패턴으로 도시된 적층 시트를 나타내고 있으며, 이 패턴은 사용자로 하여금, 예를 들면, 시트의 개수가 디스플레이 화면의 하부 에지를 따라서 채울 수 있는 시트 탭의 개수를 초과하는 경우 다수의 시트를 면밀히 살펴볼 수 있도록 한다. 사용자가 적층된 시트 표현을 오른쪽으로 또는 왼쪽으로 회전시킴에 따라서, 디스플레이 창의 하부 에지를 따라서 도시된 시트 탭이 갱신되어 사용자 인터페이스(205)에 현재 도시된 시트 표현과 대응하게 될 수 있음을 이해하여야 한다.
계속 도 4를 참조하면, 사용자가 다양한 표시된 스프레드시트와 상호작용하거나 이들을 검색함에 따라서, 마찬가지로 각각의 스프레드시트와 관련된 기능 모드가 탐색될 수 있다. 예를 들면, 도 4에 도시되어 있는 기능 버튼/컨트롤(310, 315, 320, 325, 330)은 현재 적층된 스프레드시트 표현의 가장 앞쪽에서 스프레드시트 표현(416)과 관련되어 있을 수 있다. 사용자가 다른 스프레드시트 표현으로부터 가장 앞쪽, 예를 들면 sheet 4에 대한 표현(421)을 탐색함에 따라서, 스프레드시트 애플리케이션(115) 및 사용자 인터페이스(205)의 기능 모드는 상호작용하는 스프레드시트 표현과 관련된 기능 모드로 변경될 수 있다. 즉, 예시적인 스프레드시트 표현(421)이 가장 앞쪽으로 이동하게 되면, 기능 버튼/컨트롤(310-330)은 스프레드시트 표현(421)과 관련된 다른 기능 버튼/컨트롤로 교체될 수 있다.
이제 도 5를 참조하면, 줌 탐색을 사용하는 다른 예시적 방법이 도시 및 설명되어 있다. 사용자 인터페이스(205)에 한 쌍의 대형 시트 썸네일 표현(505, 510)이 표시되어 있다. 도 5에 도시된 실시예에 따르면, 썸네일 시트 표현(505, 510)은 나란한 방향으로 도시되어 있다. 이해하여야 하는 바와 같이, 썸네일 표현은 다양한 서로 다른 표시 방향, 도 4를 참조하여 도시하고 설명한 적층 방향을 포함하는 방향을 따라 표시될 수 있다. 상술한 바와 같이, 본 발명에서 설명된 줌 탐색 기능은 표시된 썸네일 표현(505, 510)과 관련하여 이용될 수 있다. 예를 들면, 사용자가 시트 표현(510)을 선택하게 되면, 대응하는 스프레드시트 2(spreadsheet 2)는 자동으로 사용자 인터페이스(205)에 기동하여 사용자로 하여금 썸네일 스프레드시트 표현(510)에 의해서 표시되는 스프레드시트와 상호작용할 수 있도록 한다. 일단 스프레드시트가 사용자 인터페이스(205)에 기동하게 되면, 사용자는 이후에 자료 입력, 자료 조작, 자료 계산 등을 포함하는 스프레드시트와 관련된 사용 가능한 임의의 및 모든 스프레드시트 함수를 수행할 수 있다.
계속 도 5를 참조하면, 하나 이상의 스프레드시트와 관련된 코멘트 및 정보의 표시를 포함하는 다른 탐색 모드가 제공될 수 있다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 사람에게는 공지된 바와 같이, 코멘트 달기는 대부분의 사용자가 스프레드시트 전체에 걸쳐서 종종 행하는 작업이며, 또한 모든 코멘트를 한 자리에 나타내는 것은 어려웠는데, 이는 이들 코멘트가 전형적으로 소정의 스프레드시트 내의 특정 위치와 관련되어 고정된 위치에 있었기 때문이다. 또한, 전형적인 사용자 인터페이스는 모든 코멘트를 코멘트 태스크 창에 단순히 모아둘 뿐이었기 때문에 취급이 어려웠는데, 이는 소정의 코멘트를 선택하는 것이 전형적으로 관련된 스프레드시트를 가장 앞쪽으로 전환시키거나, 또는 선택된 코멘트가 위치되어 있거나 관련되어 있는 소정의 스프레드시트 내의 서로 다른 위치를 즉각적으로 탐색하였기 때문이다.
본 발명에서의 각 실시예에 따르면, 도 5에 도시되어 있는 바와 같이, 하나 이상의 스프레드시트와 관련된 코멘트가 썸네일 표현(505, 510)과 관련되어 제공될 수 있다. 예를 들면, 코멘트(520, 530)는 각각 스프레드시트 표현(505, 510)과 관련하여 도시되어, 사용자로 하여금 각각의 표시된 스프레드시트와 관련된 코멘트를 신속하고 용이하게 검토할 수 있도록 한다. 이는 사용자가 자신의 협업 그룹과 관련된 스프레드시트 워크북에 포함된 다수의 스프레드시트 표현(505, 510)을 신속하게 탐색하고자 원하는 협업 환경에서 특히 유용하며, 또한, 사용자가 다양한 스프레드시트 표현(505, 510)을 면밀히 탐색하려고 하면, 각각의 표시된 스프레드시트와 관련된 코멘트 정보(520, 530)가 제공될 수 있다. 본 발명의 각 실시예에 따르면, 사용자가 임의의 특정 코멘트(520, 530)에 대한 "상세 탐색"을 원하는 경우, 사용자는 제공된 코멘트에 대해서, 예를 들면, 터치, 핀치, 스와이프 등과 같은 줌 터치/제스처 상호작용을 이용하여 또 다른 모드, 예를 들면, 관련되어 있는 대응하는 스프레드시트 내의 정보와 관련되어 선택된 코멘트가 표시되는 모드를 탐색할 수 있다.
도 5에 도시되어 있는 바와 같이, 다양한 도움이 되는 아이콘, 예를 들면, 각각의 코멘트와 관련되어 도시된 풍선이 제공되어 소정의 스프레드시트와 관련된 하나 이상의 코멘트의 존재를 표시할 수 있다. 예를 들면, 표시되는 아이콘(예컨대, 풍선)의 개수를 사용하여 소정의 스프레드시트와 관련된 코멘트의 (상대적 또는 절대적) 개수를 표시할 수 있다. 일 실시예에 따르면, 코멘트 아이콘을 선택하거나 소정의 코멘트 텍스트를 선택하게 되면 관련된 스프레드시트의 기동 및/또는 선택된 코멘트가 위치한 관련된 스프레드시트 내의 위치를 탐색할 수 있다. 이해하여야 하는 바와 같이, 일 실시예에 따르면, 코멘트는, 도 5에 도시되어 있는 바와 같이, 각각의 스프레드시트 표현(505, 510)과 관련하여 직접적으로 제공되거나, 또는 코멘트는 코멘트 창(540)에 제공되거나, 또는 코멘트는 각각의 스프레드시트 표현(505, 510)과 관련하여 및 적절하게 배치된 코멘트 창(540)의 모두에 제공될 수도 있다.
각각의 스프레드시트 표현(505, 510)과 관련하여 표시된 코멘트에 추가하여, 각각의 스프레드시트와 관련된 코멘트가 제공되어 사용자가 다양한 코멘트를 탐색할 수 있도록 하는 코멘트 창(540)이 사용자 인터페이스(205)에 제공될 수 있다. 일 실시예에 따르면, 코멘트 창에 제공되는 코멘트는 마찬가지 방식으로 터치/제스처 상호작용을 통해서 탐색될 수 있으며, 또한 소정의 코멘트가 코멘트 창으로부터 선택되는 경우, 대응하는 스프레드시트가 기동할 수 있고 또한 표시될 수 있어 코멘트가 제공된 스프레드시트 내의 위치가 탐색 중인 사용자에게 즉각적으로 표시될 수 있다.
코멘트(520, 530)에 추가하여, 각각의 표시된 스프레드시트 표현(505, 510)과 관련되어 다른 시트 정보(525, 535)가 제공될 수 있다. 예를 들면, 시트 정보(525, 535)는 각각의 대응하는 스프레드시트에 대한 통계적인 정보, 예를 들면, 대응하는 스프레드시트에 적용된 편집 일자, 대응하는 스프레드시트의 편집자에 대한 연락처 정보, 각각의 대응하는 스프레드시트에 적용된 편집 및/또는 코멘트 횟수를 나타내는 열 지도(heat map) 등과 같은 정보를 포함할 수 있다. 즉, 이해하여야 하는 바와 같이, 소정의 스프레드시트에 대한 임의의 입수 가능한 정보가 스프레드시트 정보(525, 535)에 제공되고, 따라서 스프레드시트 정보(525, 535)가 선택되면 대응하는 스프레드시트에 대한 다양한 정보를 포함할 수 있는 또 다른 탐색 모드가 기동될 수 있다.
이제 도 6을 참조하면, 본 발명의 각 실시예에 따르면, 본 발명의 줌 탐색 기능을 이용하여 너무 많은 행과 열 데이터를 포함하고 있는 매우 큰 스프레드시트에 대한 탐색이 개선될 수 있다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 사람에게는 공지되어 있는 바와 같이, 수백 개 또는 심지어 수천 개의 행 및/또는 열 데이터를 가지고 있는 매우 큰 스프레드시트가 사용되는 경우, 문서를 탐색하여 특정한 스프레드시트 개체, 예를 들면, 표, 차트, 개별 텍스트 아이템, 개별 데이터 아이템 등을 찾는 것은 취급이 어려웠으며, 또한 때때로 겉보기에는 불가능하였다. 본 발명의 각 실시예에 따르면, 터치/제스처 상호작용을 이용하여 매우 큰 스프레드시트를 탐색하여 이 스프레드시트 내의 원하는 정보를 노출시킬 수 있다. 도 6을 참조하면, 일 실시예에 따라, (도 6의 상부에 도시되어 있는) 큰 스프레드시트에서의 터치/제스처 상호작용에 따라서, 축소된 맵이 표시되어 사용자(605)에 의해서 상호작용한 스프레드시트 영역 내의 스프레드시트에 포함된 하나 이상의 개체를 노출하여 사용자에게 이 큰 스프레드시트 내의 어디에 사용자가 있는지에 대한 신속한 참조를 제공할 수 있다. 예를 들면, 도 6에 도시되어 있는 바와 같이, 스프레드시트와의 상호작용 이후에, 코멘트 박스(615)가 노출되고, 비용 테이블(610)이 노출되고 또한 텍스트 선택(620)이 노출된다. 세 개의 예시적인 개체는 모두 주변에 있는 텍스트/데이터에 비해서 확대된 방식으로 노출되어 사용자에게 상호작용 영역 내의 콘텐트 아이템에 대한 즉각적인 "로드맵"(roadmap)을 부여하여 사용자가 큰 스프레드시트 내에서 현재 위치한 곳을 알 수 있도록 하고 있다.
표시를 위해서 노출될 수 있는 예시적인 콘텐트 아이템/스프레드시트 개체는, 소계(subtotal), 합계, 표, 차트, 이름이 지정된 개체, 피벗 테이블 등을 포함하며, 여기에 한정되지는 않는다. 일 실시예에 따르면, 확대되어 노출된 콘텐트 아이템/개체는 상호작용한 시트의 축소된 뷰에 오버레이되는 실제 아이템/개체의 썸네일 표현으로서 제공될 수 있다. 그와 같이 노출된 아이템/개체를 선택하게 되면 선택된 아이템/개체의 기동, 선택된 문서 중의 문서 내의 위치로의 즉각적인 탐색, 관련된 데이터의 노출, 또는 이들이 조합되어 일어날 수 있다. 이해하여야 하는 바와 같이, 리버스 상호작용, 예를 들면, (도 2a 내지 도 2f를 참조하여 상술한) 리버스 핀치 줌하거나 적절한 사용자 인터페이스 버튼/컨트롤을 선택하게 되면 시트는 상호작용하기 이전의 모드로 되돌아갈 수 있다.
도 6에 도시되어 있는 바와 같이, 대형 스프레드시트와 상호작용하게 되면, 애플리케이션(115)은 상호작용 중인 시트의 영역 내에 있는 콘텐트 아이템/개체를 자동으로 검출할 수 있다. 일 실시예에 따르면, 애플리케이션(115)은 시트를 몇 개의 영역으로 분할, 예를 들면, 스프레드시트를 여러 개의 구역(예컨대, 매 5 %의 열, 매 100 개의 열, 매 10,000 개의 열, 또는 넓고 큰 시트에 대해서는 사분면 등)으로 나눌 수 있다. 이해하여야 하는 바와 같이, 시트는 서로 다른 많은 영역으로 분할 또는 나뉘어질 수 있지만, 중요한 점은, 시트가 분할되는 영역을 사용하여 도 6에 도시된 콘텐트 아이템/개체와 같은 흥미있는 아이템을 위치시키고 노출시켜서 사용자로 하여금 시트 내의 자신의 위치에 대해 매핑할 수 있다는 것이다. 시트가, 용이하게 노출될 수 있는 임의의 특정한 아이템 또는 개체(예컨대, 표, 차트 등)가 없는 문자 또는 데이터의 단순한 큰 집합체인 경우, 셀/행/열 주소는 확대하여 보이도록 하는 방식으로 노출되거나, 개별적인 데이터 아이템 또는 텍스트 아이템이 노출되거나, 또는 이들이 조합되어 시트 내의 위치 및/또는 맥락의 표시를 사용자에게 보여 주도록 할 수 있다. 도 6을 참조하여 본 발명에서 설명된 바와 같이, 그와 같은 줌 기능은 많은 데이터/콘텐트 아이템을 포함하고 있는 대형 스프레드시트에 대한 시각적 지표를 사용자에게 부여하며 또한 사용자의 탐색 경험을 향상시킬 수 있다.
이제 도 7을 참조하면, 다른 탐색 모드에 따라서, 상호작용한 스프레드시트에 포함된 이름이 지정된 개체에 따라서 스프레드시트가 탐색될 수 있다. 예를 들면, 스프레드시트 문서가 많은 행과 열의 데이터를 포함하고 있을 뿐만 아니라, 다수의 이름이 지정된 개체, 예를 들면, 이름이 지정된 차트, 이름이 지정된 표(table), 이름이 지정된 그림 등을 포함하고 있다고 가정한다. 일 실시예에 따르면, 소정의 스프레드시트와의 특정한 터치/제스처 상호작용(예컨대, 도 2a 내지 도 2f를 참조하여 상술한 바와 같이)에 따라서, 서로 다른 디스플레이 모드를 탐색하여 상호작용한 스프레드시트에 포함된 하나 이상의 이름이 지정된 개체를 표시할 수 있다. 도 7에 도시되어 있는 바와 같이, 그와 같은 상호작용 이후에, 다수의 이름이 지정된 개체(705, 710, 715, 720, 725, 730)가 사용자 인터페이스(205)에 노출 및/또는 표시되어 사용자로 하여금 면밀히 살피고, 재검토하도록 하고, 또한, 필요하다면, 표시된 이름이 지정된 개체 중의 하나를 선택할 수 있도록 한다. 일 실시예에 따르면, 각각의 표시된 이름이 지정된 개체(705-730)는 관련된 스프레드시트에 포함된 실제 이름이 지정된 개체의 썸네일 표현으로서 표시될 수 있다. 도 7에서 도시되어 있는 바와 같이, 화면에 표시된 이름이 지정된 개체는 소정의 스프레드시트에 포함된 이름이 지정된 개체이거나, 또는 이름이 지정된 개체는 워크북 또는 스프레드시트 폴더에 포함된 다양한 스프레드시트에 걸쳐서 포함된 이들 이름이 지정된 개체일 수 있다. 이름이 지정된 개체는, 도 7에 도시되어 있는 바와 같이, 이름이 지정된 개체의 집합체로서 표시될 수 있거나, 또는 이름이 지정된 개체는 도 6에 도시되어 있는 바와 같이, 하부의 스프레드시트와 관련되어 표시될 수 있다.
이해하여야 하는 바와 같이, 사용자가 하나 이상의 화면에 표시된 이름이 지정된 개체를 선택하여, 상술한 바와 같이, 특정한 터치/제스처 상호작용을 이용하는 경우, 상호작용한 이름이 지정된 개체 스프레드시트 그리드 또는 캔버스 내로 기동하여 사용자가 이 선택된 이름이 지정된 개체를 편집하거나, 다른 방식으로 이 개체와 상호작용하도록 할 수 있다. 다르게는, 화면에 표시된 이름이 지정된 개체 중의 하나를 선택하게 되면 관련된 스프레드시트의 기동 및 선택된 이름이 지정된 개체와 관련된 데이터를 포함하고 있거나, 또는 선택된 이름이 지정된 개체를 포함하고 있는 위치에서 기동된 스프레드시트를 표시할 수 있게 된다. 도 7에 도시되어 있는 바와 같이, 이름이 지정된 개체 버튼/컨트롤(702)이 사용자 인터페이스(205)에 도시되어 사용자가 이름이 지정된 개체 중의 하나와 관련하여 스프레드시트 애플리케이션(115)의 기능을 이용할 수 있도록 한다.
이제 도 8을 참조하면, 본 발명에서 설명된 줌 기능에 따라 제공될 수 있는 다른 탐색 모드는 하나 이상의 스프레드시트와 관련된 활동이 탐색 중인 사용자에게 그래픽으로 도시되는 탐색 모드를 포함하고 있다. 예를 들면, 각각의 하나 이상의 스프레드시트와 관련된 활동을 나타내는 정보가 제공될 수 있다. 도 8을 참조하면, 썸네일 표현(810, 815, 820, 822)은, 상술한 바와 같이, 특정 터치/제스처 상호작용에 따라서 스프레드시트사용자 인터페이스(205)에 제공된다. 예를 들면, 사용자가 협업 그룹과 관련된 복수의 스프레드시트를 편집하거나 다른 방식으로 이용하고자 하는 경우, 이 사용자는 협업 그룹의 스프레드시트 워크북에 포함된 각각의 스프레드시트의 편집, 다른 방식의 이용, 또는 이와 관련된 다른 활동에 대한 정보를 배우고 싶어할 수 있다. 특정한 터치/제스처 상호작용, 예를 들면, 멀티 핑거 핀치 줌 상호작용에 따라서, 도 8에 도시된 활동 모드를 탐색하여 사용자로 하여금 사용자가 흥미를 가진 각각의 스프레드시트와 관련된 편집/변경 활동에 대한 정보를 수신할 수 있게 한다.
도 8에 도시되어 있는 바와 같이, 각각의 썸네일 표현의 하부에는, 각각의 표시된 스프레드시트에 대한 다양한 변경 정보(825, 835, 845)가 제공되어 각각의 표시된 스프레드시트에 대한 직접적인 정보를 사용자에게 제공한다. 예를 들면, 스프레드시트 표현(810)과 관련된 변경 정보(825)를 참조하면, 사용자는 셀(A2)의 "123"의 값이 "321"의 값으로 변경되었고 또한 셀(B2)은 "xyz"의 문자열이 "abc"의 문자열로 변경되었음을 신속하게 결정할 수 있다. 이해하여야 하는 바와 같이, 소정의 스프레드시트에 가해진 다수의 변경 내역, 대응하는 변경을 가한 사람에 대한 신원 등과 같은 다른 정보가 제공될 수 있다.
계속 도 8을 참조하면, 각각의 스프레드시트 표현(810, 815, 820, 822) 하부에 변경 맵(830, 840, 850, 852)이 도시되어 변경이 가해진 대응하는 스프레드시트 내의 위치에 대한 시각적 맵(map)을 제공한다. 일 실시예에 따르면, 이 변경 맵은 소정의 스프레드시트에 대해서 가해진 변경의 양/횟수를 채색하거나 그림자층을 넣어서 활성 영역을 시각적으로 하일라이트하여 나타내는 "열" 지도(heat map)의 형태일 수 있다. 또한, 맵(830, 840, 850, 852)에 하나 이상의 선택 가능한 아이콘, (정보를 가진) 팝아웃(pop-out) 박스 등이 제공되어 유용한 정보를 제공할 수 있다. 임의의 그와 같은 사용자 인터페이스 구성 요소를 선택하면 관련된 데이터/콘텐트를 탐색할 수 있게 된다.
이해하여야 하는 바와 같이, 임의의 썸네일 표현(810, 815, 820, 822)을 선택하게 되면 관련된 스프레드시트가 즉각적으로 기동하여 사용자로 하여금 상호작용한 스프레드시트를 편집하거나 다른 방식으로 이용할 수 있도록 한다. 유사하게, 변경 맵(830, 840, 850, 852) 중의 하나를 선택하게 되면 관련된 스프레드시트가 기동될 수 있으며, 또한 일 실시예에 따르면, 관련된 스프레드시트가 기동되어 관련된 스프레드시트에 적용된 변경 위치가 사용자에게 표시되고 또한 하일라이트될 수 있다.
이제 도 9a 및 도 9b를 참조하면, 개선된 줌 탐색인 "찾기" 기능이 도시 및 설명되어 있다. 도 9a를 참조하면, 찾기 기능(905) 및 찾기 필드(910)가 사용자 인터페이스(205)에 제공되어 사용자가 소정의 스프레드시트 문서 내 또는 다수의 스프레드시트에 걸쳐서 찾고자 원하는 텍스트 용어 또는 수치 용어를 입력할 수 있도록 한다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 사람에게는 공지된 바와 같이, 전형적인 종래의 찾기 기능은 사용자가 찾아진 숫자/단어의 각각의 인스턴스를 탐색하도록 하고 있다. 사용자는 전형적으로 원하는 위치에 도달하기 전까지 일련의 찾기 기능(예컨대, "다음 찾기", "다음 찾기", "다음 찾기")을 선택하여야 한다. 많은 경우에 사용자들은 원하는 숫자/단어가 문서의 어디에 있는 지에 대해서 모호한 감을 가지고 있을 수 있으며 또한 단지 그 숫자/단어로 가고 싶어한다. 본 발명의 각 실시예에 따르면, 찾기 기능이 제공되며 또한 이 기능은, 도 9a에 도시되어 있는 바와 같이, 단어/숫자의 모든 출현 인스턴스가 하나의 스프레드시트 전체에 걸쳐서, 또는 도 9b에 도시되어 있는 바와 같이, 다수의 스프레드시트(예컨대, 워크북 또는 폴더 내의 모든 시트)에 걸쳐서 한번에 표시되도록 한다.
도 9a를 참조하면, 단어 "비용"(cost)에 대한 예시적인 찾기 기능에 따라서, 단어 "비용"의 모든 인스턴스(915)를 찾은 다음 사용자에게 하일라이트되고 있다. 도 9b에 도시되어 있는 바와 같이, 단어 "비용"(cost)에 대한 모든 인스턴스(915)를 찾은 다음 다수의 스프레드시트(920, 925, 930)에 걸쳐서 하일라이트되고 있다. 일 실시예에 따르면, 찾은 단어/용어의 인스턴스를 포함하고 있는 각각의 풍선, 박스 또는 하일라이트된 영역은, 도 9a 및 도 9b에 도시되어 있는 바와 같이, 충분히 크게 렌더링되어 둘러싸고 있는 몇 개의 단어를 보여주어 일부 문맥을 전달할 수 있다. 이는 또한 단어/용어가 스프레드시트의 "어디에"(where) 출현하는 지를 대략적으로 파악하기 쉽도록 한다. 찾은 단어/용어를 탭하거나, 터치하거나, 또는 다른 방식으로 상호작용하는 것에 의해서, 상호작용한 단어/용어의 즉각적인 탐색이 제공될 수 있다.
이에 도 10a 및 도 10b를 참조하면, 본 발명의 각 실시예에 따라서 제공될 수 있는 다른 탐색 모드는 소정의 스프레드시트 문서에서의 또는 복수의 스프레드시트 문서에 걸친 의존성을 보여주는 것을 포함하고 있다. 예를 들면, 하나 이상의 스프레드시트 내의 셀 위치 간의 의존성 및/또는 수식 의존성의 표시가 제공될 수 있다. 종래의 방법 및 시스템에 따르면, 수식/함수 의존성의 추적은, 특히 스프레드시트가 대형인 경우, 또는 수식/함수가 복수의 스프레드시트에 걸쳐서 존재하는 의존성을 가지고 있는 경우, 수행하기가 어려울 수 있었다. 예를 들면, 소정의 셀 내의 수식이 다섯 개의 서로 다른 스프레드시트에 존재하는 셀로부터 불러오는 10 개의 서로 다른 숫자를 더하는(add) 경우, 각 셀의 위치 추적을 유지하는 것은 취급이 어려웠으며 또한 시간 소모적이었다. 본 발명의 각 실시예에 따르면, 수식/함수의 의존성을 시각적으로 표현하는 방법이 제공될 수 있다.
도 10a를 참조하면, 특정한 터치/제스처 또는 수식/함수 의존성 함수의 선택(1010)에 따라서, 세 개의 예시적인 스프레드시트에 걸친 셀 위치 간의 의존성이 도시되어 있다. 예를 들면, 소정의 셀 또는 수식 또는 함수를 포함하는 수식 바(formula bar)를 더블 탭(double tap)과 같이 터치하면, 수식 또는 함수와 관련된 의존성이 그래픽으로 도시될 수 있다. 도 10a에 도시되어 있는 바와 같이, 일 예시적인 방법은 다양한 스프레드시트 셀 사이에서 화살표(1040)를 표시하여 텍스트, 데이터, 또는 선택된 수식 함수와 관련된 수식/함수를 포함하는 각각의 셀 위치에 대한 신속하고 용이한 시각화를 사용자에게 제공한다. 도 10b는, 단일 스프레드시트에서의 의존성 시각화를 도시한 도면으로, 어떻게 셀(B3)에 있는 데이터(1035)가 셀(F9)에 포함된 데이터와 관련이 있는 지를 나타내고 있다.
도 10a에 도시되어 있는 바와 같이, 소정의 수식/함수 또는 의존성 표시자와의 상호작용 또한 파라미터/의존성의 순위에 따라서 순서가 정해질 수 있는 후행/선행 수식/함수가 표시될 수 있도록 한다. 선택된 또는 상호작용한 수식/함수와 관련된 다양한 스프레드시트(표현(1020, 1025, 1030))는 시각적 표현 내의 각각의 수식/함수에 인접한 스크린에 재배열될 수 있고, 따라서 관련된 스프레드시트가 표시되어 사용자가 소정의 수식/함수에서의 각 단계를 완전하게 이해할 수 있도록 수식/함수 체인(화살표(1040))이 사용자에게 노출되는 주요 표시 아이템이 된다. 일 실시예에 따르면, 그와 같은 의존성 표시는 시각적 효과를 위해서 2 차원, 3 차원 표현으로 달성될 수 있다.
일 실시예에 따르면, 스프레드시트 표현(1020, 1025 및 1030)은 선택되었을 때 관련된 스프레드시트의 탐색을 가능하게 하는 관련된 스프레드시트의 썸네일 표현일 수 있다. 또한, 화살표(1040)는 선택되었을 때 관련된 수식 또는 의존성에 대한 정보를 표현하도록 하고 및/또는 수식 또는 의존성을 포함하고 있는 스프레드시트 내의 특정 위치에 대한 탐색을 허용하는 선택 가능한 개체일 수 있다.
다른 실시예에 따르면, 화살표(1040) 대신에, 다른 의존성 표시자가 제공될 수 있다. 예를 들면, 각각의 수식/함수는 풍선 또는 의존성에 대한 문자 표시를 포함하고 있는 다른 사용자 인터페이스 구성 요소와 관련되어 있을 수 있다. 이와 같은 풍선 또는 사용자 인터페이스 구성 요소를 선택하게 되면 의존성(1040)이 표시되거나 또는 이 의존성에 대한 문자 설명이 표시될 수 있다. 소정의 수식/함수 또는 의존성 표시자(예컨대, 화살표(1040))와의 상호작용 또한 이 상호작용한 수식/함수를 더 크게 또는 하일라이트되는 방식으로 표시되도록 할 수 있다.
이제 도 11을 참조하면, 다른 탐색 모드에 따라서, 소정의 스프레드시트 개체와의 특정한 터치/제스처 상호작용에 따라서, 예를 들면, 스프레드시트 차트, 상호작용한 개체와 관련된 동일한 데이터 (스프레드시트에 대한 내부 데이터) 또는 다른 스프레드시트의 데이터가 화면에 표시되어 상호작용한 개체 하부에 위치하거나 이 개체와 관련되거나 또는 이 개체에 필요한 데이터를 사용자가 이해하도록 할 수 있다. 예를 들면, 표, 차트, 피벗 테이블, 피벗 차트 등과 같은 개체(1105)에 대해 "핀치 줌"(pinch zoom)하면 개체와의 상호작용과 관련된 임의의 데이터(1110) 또는 다른 개체(1115)가 사용자에게 표시될 수 있다. 일 실시예에 따르면, 관련 데이터(1110) 또는 개체(1115)는 썸네일 표현으로서 표시될 수 있다. 썸네일 표현을 선택하면 실제 데이터 또는 개체 또는 데이터 또는 개체가 위치한 스프레드시트 또는 다른 스프레드시트 내의 위치에 대한 탐색이 이루어질 수 있다. 다른 실시예에 따르면, 관련 데이터 또는 개체는 팝업 메뉴 또는 디스플레이에 표시될 수 있으며, 또는 시작 개체(1105)와 상호작용하게 되면 관련 데이터(1110) 또는 개체(1115)의 즉각적인 탐색이 이루어질 수 있다.
이제 도 12를 참조하면, 다른 탐색 모드에 따라서, 소정의 스프레드시트 개체와의 특정한 터치/제스처 상호작용에 따라서, 예를 들면, 스프레드시트 차트, 스프레드시트(또는 특정 개체)와 관련된 메타 데이터 또는 상호작용한 스프레드시트 개체에 대한 외부 데이터(예를 들면, 상호작용된 스프레드시트 개체와 관련된 제 3 자 소스로부터의 외부 데이터)가 화면이 표시되어 상호작용한 개체 하부에 위치하거나 이 개체와 관련되거나 또는 이 개체에 필요한 메타 데이터 또는 외부 데이터를 사용자가 이해하도록 할 수 있다. 즉, 하나 이상의 메타 데이터 아이템과 관련되어 있고 또한 소정의 데이터 소스로부터 전파된 개체를 확대/축소하면, 메타 데이터 또는 데이터 소스(1215, 1220)에 대한 정보가 제공되어 사용자가 이 메타 데이터 또는 데이터 소스에 대한 정보를 수신할 수 있다. 이와 같은 정보는 데이터의 표시, 데이터 소스 간의 접속 문자열에 대한 정보, 데이터 질의에 대한 정보, 인증 속성 등을 포함할 수 있다. 외부 데이터 소스에 대한 정보를 수신하는 단계는 또한 질의 빌더(query builder)를 기동하는 단계로서, 사용자가 스프레드시트(또는 스프레드시트 개체)와 하나 이상의 외부 데이터 소스 사이에서의 데이터 질의를 구축하는데 도움을 주기 위한 단계를 포함할 수 있다. 이와 같은 정보는 사용자 인터페이스 구성 요소(박스, 창, 작은 창(pane) 등)에 제공될 수 있거나, 또는 이 정보는, 도 12에 도시되어 있는 바와 같이, 스프레드시트 위의 오버레이로서 표시될 수도 있다.
이제 도 13을 참조하면, 스프레드시트 개체와의 터치/제스처 상호작용을 향상시키기 위한 노치 모드(notched mode)가 도시 및 설명되어 있다. 본 발명의 각 실시예에 따르면, 소정의 셀로서, 데이터 아이템 또는 개체는 현재의 줌 설정 때문에 또는 작은 디스플레이 창 때문에 너무 작아지게 되므로, 터치 상호작용을 이용하는 것은 문제가 있게 되는데, 그 이유는 사용자가 디스플레이 창의 원하는 위치를 터치하는 경우, 인접하여 배치된 셀, 데이터 아이템, 개체 등을 사용자가 부주의하게 터치할 수 있었으며, 따라서 어떤 아이템이 적절한 상호작용을 수신하였는 지를 애플리케이션(115)이 결정해야 하는 경우 상호작용 에러(잘못된 아이템이 선택됨)가 발생하거나 상호작용의 모호성이 발생할 수 있었다. 도 13을 참조하면, 일 실시예에 따라서, 터치 가능한 패딩(1310)이 소정의 데이터 항목, 또는 개체 주위에 배치되어 효과적인 터치 상호작용이 되도록 하는 노치 모드(notched mode)가 제공될 수 있다. 본 발명의 각 실시예에 따르면, 노치 모드는 특정한 터치/제스처 상호작용에 따라서, 적절한 기능 컨트롤의 선택에 따라서 제공될 수 있으며, 또는 애플리케이션(115)이 디스플레이 공간이 소정의 문턱값 미만이거나 또는 표시된 스프레드시트 또는 개체가 개별 데이터 아이템 또는 개체와의 터치 상호작용이 어렵게 되는 지점까지 광학적으로 줌되었다고 검출되면 자동적으로 제공될 수 있다.
계속 도 13을 참조하면, 터치 가능한 패딩(1310)은 개별 셀 주위의 구역이며, 터치되었을 때 영역을 증가시키는 데이터 아이템 및/또는 데이터 개체는 주위에 패딩이 배치된 아이템을 선택함으로써 수신된다. 이해하여야 하는 바와 같이, 패딩(1310)은, 예를 들면, 수식/함수를 포함하고 있는 셀과 같은 특정 아이템 주변에, 또는 스프레드시트 문서 및 관련 개체의 맥락에 기초하여 선택되어질 가능성이 있다고 간주되는 선택 가능한 특정 버튼 또는 컨트롤 주위에 위치될 수 있다. 일 실시예에 따르면, 패딩(1310)은 셀 내부에 또는 셀 사이에 배치되어 소정의 셀을 선택하기 용이하게 하거나 인접한 셀 사이에서의 선택 모호성을 감소시킬 수 있다.
이상으로, 도 1 내지 도 13을 참조하여 본 발명의 각 실시예의 예시적인 동작 환경 및 다양한 특징에 대해서 설명하였으며, 도 14는 줌 상호작용 및 탐색을 통해서 전자 스프레드시트 문서와의 상호작용하기 위한 방법을 도시하고 있는 플로 차트이다. 방법(1400)은 시작 단계(1405)에서 시작하여 스프레드시트 워크북/파일, 개별 전자 스프레드시트 또는 전자 스프레드시트의 집합체, 또는 스프레드시트의 개체가 수신되어 애플리케이션(115)의 기능에 따라서 사용되는 단계(1410)로 진행한다. 단계(1415)에서, 도 2a 내지 도 2f를 참조하여 상술한 바와 같이, 터치/제스처 상호작용이 수신되어 스프레드시트, 스프레드시트 개체, 또는 복수의 스프레드시트의 줌 탐색 및/또는 상호작용을 개시 또는 시작한다.
단계(1420)에서, 서로 다른 모드의 스프레드시트 애플리케이션의 사용자 인터페이스를 탐색하여 소정의 스프레드시트 또는 스프레드시트 개체와 관련되어 사용되는 다양한 애플리케이션(115) 기능을 획득할 수 있다. 단계(1425)에서, 서로 다른 콘텐트 레벨을 탐색하여 사용자가 상호작용한 스프레드시트 또는 스프레드시트 개체(예컨대, 상호작용한 스프레드시트 또는 개체와 관련된 로컬 또는 외부 데이터, 고위 레벨의 상호작용한 개체와 관련된 스프레드시트 개체 등)와 관련된 서로 다른 레벨의 데이터를 사용자가 검토 및/또는 액세스하도록 한다. 단계(1430)에서, 소정의 터치/제스처 상호작용에 따라서, 본 발명에서 설명된 바와 같이, 변경에 대한 정보, 출처, 수식/함수 의존성, 이름이 지정된 개체에 대한 정보 등을 포함하는 강화된 스프레드시트 정보가 제공될 수 있다. 단계(1435)에서, 필요하다면, 터치 가능한 패딩이 스프레드시트 또는 스프레드시트 개체의 선택 가능한 영역 내에 또는 주변에 배치되어 이 선택 가능한 영역과의 터치 상호작용이 개선될 수 있다. 방법(1400)은 단계(1499)에서 종료된다.
컴퓨터 상의 운영 체제 상에서 동작하는 애플리케이션 프로그램과 연동하여 실행되는 프로그램 모듈의 일반적인 맥락 하에서 본 발명을 설명하였지만, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명은 다른 프로그램 모듈과 조합되어 구현될 수도 있음을 알아야 한다. 일반적으로, 프로그램 모듈은 특정 태스크를 수행하거나 특정 추상 자료형을 구현하는 루틴, 프로그램, 구성 요소(component), 자료 구조, 및 다른 유형의 구조를 포함하고 있다.
본 발명에서 설명된 각 실시예 및 기능은 데스크톱 컴퓨터 시스템, 유무선 컴퓨팅 시스템, 모바일 컴퓨팅 시스템(예컨대, 모바일 텔레폰, 넷북, 태블릿 또는 슬레이트 타입 컴퓨터, 노트북 컴퓨터, 및 랩탑 컴퓨터), 소지형 장치, 멀티 프로세서 시스템, 마이크로 프로세서 기반 또는 프로그램 가능한 가전 제품, 미니 컴퓨터, 및 메인 프레임 컴퓨터를 포함하는 다수의 컴퓨팅 시스템을 통해서 동작될 수 있으며, 이들 시스템만으로 한정되지는 않는다.
또한, 본 발명에서 설명된 각 실시예 및 기능은 분산형 시스템(예컨대, 클라우드 기반의 컴퓨팅 시스템)을 통해서 동작될 수도 있으며, 여기에서 분산형 시스템은 애플리케이션의 기능, 메모리, 데이터의 저장과 검색 및 다양한 처리 기능은 인터넷 또는 인트라넷과 같은 분산형 컴퓨팅 네트워크를 통해서 서로 원격으로 조작될 수 있다. 온보드 컴퓨팅 장치의 디스플레이를 통해서 또는 하나 이상의 컴퓨팅 장치와 관련된 원격 디스플레이 장치를 통해서 다양한 유형의 사용자 인터페이스 및 정보가 표시될 수 있다. 예를 들면, 다양한 유형의 사용자 인터페이스 및 정보가 투사되는 벽면 상에 다양한 유형의 사용자 인터페이스 및 정보가 표시되고 또한 상호작용할 수 있다. 본 발명의 각 실시예가 실시될 수 있는 다수의 컴퓨팅 시스템과의 상호작용에는 키 입력, 터치 스크린 입력, 음성 또는 기타 오디오 입력, 제스처 입력 등이 포함되며, 여기에서 제스처 입력은 관련된 컴퓨팅 장치가 검출 (예컨대, 카메라) 기능을 장착하여 사용자의 제스처를 캡쳐하고 해석하여 컴퓨팅 장치의 기능을 제어한다.
도 15 내지 도 17 및 관련된 설명은 본 발명의 각 실시예가 실시될 수 있는 다양한 운영 환경에 대한 설명을 제공한다. 그러나, 도 15 내지 도 17을 참조하여 도해하고 설명한 장치 및 시스템은 예시 및 도해를 목적으로 하고 있으며, 또한 본 발명에서 설명한 본 발명의 각 실시예를 실시하기 위해서 이용될 수 있는 방대한 개수의 컴퓨팅 장치의 구성을 제한하지는 않는다.
도 15는, 본 발명의 각 실시예가 실시될 수 있는 컴퓨팅 장치(1500)의 물리적인 구성 요소(즉, 하드웨어)를 도시하고 있는 블록 다이아그램이다. 후술하는 컴퓨팅 장치의 구성 요소는 상술한 컴퓨팅 장치(105, 110, 120, 125, 135)에 적합할 수 있다. 기본 구성에 있어서, 컴퓨팅 장치(1500)는 적어도 하나의 처리 장치(1502) 및 시스템 메모리(1504)를 포함할 수 있다. 컴퓨팅 장치의 구성 및 유형에 따라서, 시스템 메모리(1504)는 휘발성 저장 장치(예컨대, 랜덤 액세스 메모리), 비휘발성 저장 장치(예컨대, 읽기 전용 메모리), 플래시 메모리, 또는 임의 이들 메모리의 조합을 포함할 수 있으며, 이들만으로 제한되지는 않는다. 시스템 메모리(1504)는 다양한 애플리케이션(1520)을 동작시키기에 적합한 운영 체제(1505) 및 하나 이상의 프로그램 모듈(1506)을 포함할 수 있다. 운영 체제(1505)는, 예를 들면, 컴퓨팅 장치(1500)의 동작을 제어하기에 적합한 것일 수 있다. 또한, 본 발명의 각 실시예는 그래픽 라이브러리, 다른 운영 체제, 또는 임의의 다른 애플리케이션 프로그램과 관련하여 실시될 수 있으며, 또한 임의의 특정한 애플리케이션 또는 시스템으로 한정되지 않는다. 그 기본적인 구성은 도 15에서 점선(1508) 내의 이들 구성 요소에 의해서 도시되어 있다. 컴퓨팅 장치(1500)는 추가적인 특징 또는 기능을 가질 수 있다. 예를 들면, 컴퓨팅 디바이스(1500)는 또한 자기 디스크, 광학 디스크, 또는 테이프와 같은 추가적인 데이터 저장 장치(탈착식 및/또는 비탈착식)를 포함할 수 있다. 그와 같은 추가 저장 장치는 도 15에서 탈착식 저장 장치(1509) 및 비탈착식 저장 장치(1510)로 도시되어 있다.
상술한 바와 같이, 다수의 프로그램 모듈 및 데이터 파일은 시스템 메모리(1504)에 저장되어 있을 수 있다. 처리 장치(1502)에서의 실행 중에, 프로그램 모듈(1506)은 도 14에 도시된 방법(1400) 중의 하나 이상의 단계를 포함하는 프로세스를 수행할 수 있지만, 이들 프로세스만으로 한정되지는 않는다. 본 발명의 각 실시예에 따라 사용될 수 있는 기타 프로그램 모듈에는 노트 애플리케이션, 인터넷 브라우저 애플리케이션, 전자 메일 및 연락처 애플리케이션, 워드 프로세싱 애플리케이션, 스프레드시트 애플리케이션, 데이터베이스 애플리케이션, 슬라이드 프레젠테이션 애플리케이션, 도면 작성 또는 컴퓨터 보조 애플리케이션 프로그램 등과 같은 애플리케이션이 포함될 수 있다.
또한, 본 발명의 각 실시예는 개별 전자 소자를 포함하는 전기 회로, 논리 게이트를 포함하는 패키징되거나 집적된 전자 칩, 마이크로프로세서를 이용하는 회로에서 실시되거나, 또는 전자 소자 또는 마이크로프로세서를 포함하는 단일 칩 상에서 실시될 수 있다. 예를 들면, 본 발명의 각 실시예는 도 15에 도시된 각각 또는 복수의 구성 요소가 단일 집적 회로 상에 집적될 수 있는 시스템 온 칩(SOC, system-on-a-chip)을 통해서 실시될 수 있다. 그와 같은 SOC 장치는 하나 이상의 처리 장치, 그래픽 장치, 통신 장치, 시스템 가상화 장치, 및 다양한 애플리케이션 기능을 포함하고 있을 수 있으며, 이들은 모두 단일 집적 회로로서 칩 기판 상에 집적될 (또는 "구워질") 수 있다. SOC를 통해서 동작하는 경우, 웹 페이지 콘텐트의 사용에 대해서 본 발명에서 설명한 기능은 단일 집적 회로(칩) 상의 컴퓨팅 장치(1500)의 다른 구성 요소와 함께 집적된 주문형 논리(logic)를 통해서 동작될 수 있다. 본 발명의 각 실시예는 또한, 예를 들면, AND, OR, 및 NOT과 같은 논리 연산을 수행할 수 있는 기타 기술을 이용하여 실시될 수 있으며, 여기에는 기계적, 광학적, 유체 공학적 및 양자 기술이 포함되지만 이들만으로 한정되지는 않는다. 또한, 본 발명의 각 실시예는 범용 컴퓨터에서 또는 임의의 다른 회로 또는 시스템에서 실시될 수 있다.
컴퓨팅 장치(1500)는 또한 키보드, 마우스, 펜, 사운드 입력 장치, 터치 입력 장치 등과 같은 입력 장치(1512)를 하나 이상 가지고 있을 수 있다. 여기에는 디스플레이, 스피커, 프린터 등과 같은 출력 장치(1514) 또한 포함될 수 있다. 상술한 장치는 예시이며 또한 다른 장치가 사용될 수 있다. 컴퓨팅 장치(1500)는 다른 컴퓨팅 장치(1518)와의 통신을 가능하게 하는 하나 이상의 통신 접속부(1516)를 포함할 수 있다. 적절한 통신 접속부(1516)의 예시에는 RF 송신기, 수신기, 및/또는 송수신기 회로, 범용 직렬 버스(USB), 병렬, 및/또는 직렬 포트가 포함되지만, 이들만으로 제한되지는 않는다.
본 명세서에서 사용되는 것과 같은 컴퓨터 판독 가능한 매체라는 용어는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독 가능 인스트럭션, 자료 구조, 또는 프로그램 모듈과 같은 정보의 저장에 적합한 임의의 방법 또는 기술로 구현되는 휘발성 및 비휘발성, 탈착식 및 비탈착식 매체를 포함할 수 있다. 시스템 메모리(1504), 탈착식 저장 장치(1509), 및 비탈착식 저장 장치(1510)는 모두 컴퓨터 저장 매체(즉, 메모리 저장 장치)의 예시이다. 컴퓨터 저장 매체는 RAM, ROM, 전자적으로 소거 가능한 읽기 전용 메모리(EEPROM, electrically erasable read-only memory), 플래시 메모리 또는 기타 메모리 기술, CD-ROM, 디지털 다용도 디스크(DVD, digital versatile disk) 또는 기타 광학 저장 장치, 자기 카세트(magnetic cassette), 자기 테이프, 자기 디스크 저장 장치 또는 기타 자기 저장 장치, 또는 정보를 저장하는데 사용할 수 있고 또한 컴퓨팅 장치(1500)에 의해서 액세스 가능한 임의의 기타 제품을 포함할 수 있다. 임의의 그와 같은 컴퓨터 저장 매체는 컴퓨팅 장치(1500)의 일부일 수 있다.
도 16a 및 도 16b는, 본 발명의 각 실시예가 실시될 수 있는, 예를 들면, 모바일 전화기, 스마트 폰(110), 태블릿 스타일의 개인용 컴퓨터(105), 랩탑 컴퓨터 등과 같은 모바일 컴퓨팅 장치(1600)를 도시한 도면이다. 도 16a를 참조하면, 본 발명의 각 실시예를 구현하기 위한 모바일 컴퓨팅 장치(1600)의 일 실시예가 도시되어 있다. 기본적인 구성에 있어서, 모바일 컴퓨팅 장치(1600)는 입력 소자와 출력 소자를 모두 가지고 있는 소지형(handheld) 컴퓨터이다. 모바일 컴퓨팅 장치(1600)는 전형적으로 디스플레이(1605) 및 사용자로 하여금 이 모바일 컴퓨팅 장치(1600)로 정보를 입력하도록 할 수 있는 하나 이상의 입력 버튼(1610)을 포함하고 있다. 모바일 컴퓨팅 장치(1600)의 디스플레이(1605)는 또한 입력 장치(예를 들면, 터치 스크린 디스플레이)로도 기능할 수 있다. 포함되어 있다면, 선택적인 측면 입력 소자(1615)가 추가적인 사용자 입력을 가능하게 한다. 측면 입력 소자(1615)는 로터리 스위치, 버튼, 또는 임의의 기타 유형의 수동 입력 소자일 수 있다. 다른 실시예에 있어서, 모바일 컴퓨팅 장치(1600)는 더 많거나 더 적은 입력 소자를 포함할 수 있다. 예를 들면, 디스플레이(1605)는 일부 실시예에 있어서 터치 스크린이 아닐 수 있다. 또 다른 실시예에 있어서, 모바일 컴퓨팅 장치(1600)는 휴대 전화와 같은 휴대용 전화 시스템이다. 모바일 컴퓨팅 장치(1600)는 또한 선택적인 키패드(1635)를 포함할 수 있다. 선택적인 키패드(1635)는 물리 키패드 또는 터치 스크린 디스플레이 상에 생성되는 "소프트"(soft) 키패드일 수 있다. 다양한 실시예에 있어서, 그래픽 사용자 인터페이스(GUI, graphical user interface)를 나타내기 위한 디스플레이(1605), 시각적 표시자(1620)(예컨대, 발광 다이오드), 및/또는 오디오 변환기(1625)(예컨대, 스피커)를 포함하고 있다. 일부 실시예에 있어서, 모바일 컴퓨팅 장치(1600)는 사용자에게 촉각 피드백을 제공하기 위한 진동 변환기를 포함하고 있다. 또 다른 실시예에 있어서, 모바일 컴퓨팅 장치(1600)는 외부 장치로 신호를 전달하거나 외부 장치로부터 신호를 받아 들이기 위해서 오디오 입력(예컨대, 마이크로 폰 잭), 오디오 출력(예컨대, 헤드폰 잭), 및 비디오 출력(예컨대, HDMI 포트)와 같은 입력 및/또는 출력 포트를 포함하고 있다.
도 16b는 모바일 컴퓨팅 장치의 일 실시예의 아키텍처를 나타내고 있는 블록 다이아그램이다. 다시 말하면, 모바일 컴퓨팅 장치(1600)는 일부 실시예를 구현하기 위한 시스템(즉, 아키텍처)(1602)을 포함할 수 있다. 일 실시예에 있어서, 시스템(1602)은 하나 이상의 애플리케이션(예컨대, 브라우저, 이메일, 일정 관리, 연락처 관리자, 메시징 클라이언트, 게임, 및 미디어 클라이언트/플레이어)이 동작될 수 있는 "스마트 폰"으로서 구현된다. 일부 실시예에 있어서, 시스템(1602)은, 통합 휴대용 개인 정보 단말기(PDA) 및 무선 전화기와 같은 컴퓨팅 장치로 통합되어 있다.
하나 이상의 애플리케이션 프로그램이 메모리(1662)에 적재될 수 있고 또한 운영 체제(1664) 상에서 실행되거나 이와 관련되어 실행될 수 있다. 애플리케이션 프로그램의 예시로는 전화 걸기 애플리케이션, 이메일 애플리케이션, 개인 정보 관리(PIM, personal information management) 애플리케이션, 워드 프로세싱 애플리케이션, 스프레드시트 애플리케이션, 인터넷 브라우저 애플리케이션, 노트 애플리케이션, 메시징 애플리케이션 등이 포함된다. 시스템(902)은 또한 메모리(1662) 내의 비휘발성 저장 공간(1668)을 포함하고 있다. 비휘발성 저장 공간(1668)은 시스템(1602)의 전원이 나가더라도 결코 잃어버려서는 아니되는 영속적 정보를 저장하는데 사용될 수 있다. 애플리케이션 프로그램은 이메일 애플리케이션 등에 의해서 사용되는 이메일 또는 기타 메시지와 같은 비휘발성 저장 영역(1668) 내의 정보를 사용하고 또한 이 영역에 정보를 저장할 수 있다. 동기화 애플리케이션(미도시) 또한 시스템(1602) 상에 존재할 수 있으며, 또한 호스트 컴퓨터 상에 존재하는 대응하는 동기화 애플리케이션과 상호작용하도록 프로그램되어 비휘발성 저장 영역(1668)에 저장된 정보가 호스트 컴퓨터에 저장된 대응하는 정보와 동기화되도록 한다. 이해하여야 하는 바와 같이, 다른 애플리케이션을 메모리(1662)에 로딩하고 또한 모바일 컴퓨팅 장치(1600) 상에서 실행할 수 있다.
시스템(1602)은 하나 이상의 배터리로 구현될 수 있는 전원 공급 장치(1670)를 가지고 있다. 전원 공급 장치(1670)는 AC 어댑터 또는 배터리를 보조하거나 충전하는 전원 공급식 도킹 크레이들과 같은 외장 전원 공급원을 더 구비할 수 있다.
시스템(1602)은 또한 무선 주파수 통신의 송수신 기능을 수행하는 무선 장치(1672)를 포함할 수 있다. 무선 장치(1672)는 통신 사업자 또는 서비스 제공자를 통해서 시스템(1602)과 "외부 세계"(outside world) 간의 무선 접속을 가능하게 한다. 무선 장치(1672)로부터 및 무선 장치로의 전송은 운영 체제(1664)의 제어 하에서 수행된다. 달리 말하자면, 무선 장치(1672)에서 수신되는 통신은 운영 체제(1664)를 통해서 애플리케이션 프로그램(115)으로 파급될 수 있으며, 그 반대도 가능하다.
시각적 표시자(1620)를 사용하여 시각적 표시를 제공하거나 및/또는 오디오 인터페이스(1674)를 사용하여 오디오 변환기(1625)를 통해 가청 표지를 생성할 수도 있다. 예시한 실시예에 있어서, 시각적 표시자(1620)는 발광 다이오드(LED, light emitting diode)이며 또한 오디오 변환기(1625)는 스피커이다. 이들 장치는 전원 공급 장치(1670)에 직접적으로 접속되어 있을 수 있으며, 따라서 활성화되었을 때, 프로세서(1660) 및 기타 구성 요소가 배터리 전력을 보존하기 위해서 동작을 중지하는 경우에도 통지 메커니즘에 의해서 규정된 기간 동안 전원이 켜져 있게 된다. LED는 장치의 전원이 켜진 상태를 표시하도록 사용자가 행동을 취하기 전까지는 무기한으로 켜져 있도록 프로그램될 수 있다. 오디오 인터페이스(1674)를 사용하여 사용자에게로 가청 신호를 제공하고 또한 사용자로부터의 가청 신호를 수신한다. 예를 들면, 오디오 변환기(1625)로의 접속에 추가하여, 오디오 인터페이스(1674)는 마이크로 폰에 접속되어 전화 통화를 가능하게 하는 것과 같은 가청 입력을 수신하도록 할 수도 있다. 본 발명의 각 실시예에 따르면, 마이크로 폰은 또한, 후술하는 바와 같이, 오디오 센서로 기능하여 통지의 제어를 용이하게 할 수 있게 한다. 시스템(1602)은 온보드 카메라(1630)를 조작하여 정지 화상, 비디오 스트림 등을 기록할 수 있는 비디오 인터페이스(1676)를 더 포함할 수 있다.
시스템(1602)을 구현하고 있는 모바일 컴퓨팅 장치(1600)는 추가적인 특징 또는 기능을 가질 수 있다. 예를 들어, 모바일 컴퓨팅 디바이스(1600)는 또한 자기 디스크, 광학 디스크, 또는 테이프와 같은 추가적인 데이터 저장 장치(탈착식 및/또는 비탈착식)를 포함할 수 있다. 그와 같은 추가 저장 장치는 도 16b에서 비휘발성 저장 영역(1668)으로 도시되어 있다.
모바일 컴퓨팅 장치(1600)에 의해서 생성 또는 캡쳐되고 시스템(1600)을 통해서 저장된 데이터/정보는, 상술한 바와 같이, 모바일 컴퓨팅 장치(1602)에 로컬로 저장될 수도 있고, 또는 이 데이터는 모바일 컴퓨팅 장치(1600) 및 이 모바일 컴퓨팅 장치(1600)와 관련되어 있는 독립된 컴퓨팅 장치, 예를 들면, 인터넷과 같은 분산형 컴퓨팅 네트워크 내의 서버 컴퓨터 사이에서 무선 장치(1672)를 통해서 또는 유선 접속을 통해서 장치에 의해서 액세스될 수 있는 임의의 개수의 저장 매체에 저장될 수도 있다. 이와 같은 데이터/정보는 무선 장치(972)를 통해서 또는 분산형 컴퓨팅 네트워크를 통해서 모바일 컴퓨팅 장치(1600)를 통해서 액세스될 수 있음을 이해하여야 한다. 마찬가지로, 이와 같은 데이터/정보는 전자 메일 및 협업 데이터/정보 공유 시스템을 포함하는 공지의 데이터/정보 전달 및 저장 수단에 따라서 컴퓨팅 장치 사이에서 용이하게 전달되어 저장 및 사용될 수 있다.
도 17은, 상술한 바와 같이, 전자 컴퓨팅 장치와의 효과적인 스프레드시트 상호작용을 제공하기 위한 시스템 아키텍처의 일 실시예를 도시한 도면이다. 본 발명의 각 실시예와 관련되어 개발되거나, 상호작용되거나, 또는 편집되는 콘텐트는 서로 다른 통신 채널 또는 다른 저장 장치 유형에 저장될 수 있다. 예를 들면, 다양한 문서 및 저장된 콘텐트 아이템은 디렉토리 서비스(1722), 웹 포털(1724), 메일 박스 서비스(1726), 인스턴트 메시징 저장 장치(1728), 또는 소셜 네트워킹 사이트(1730)를 사용하여 저장될 수 있다. 본 발명에서 설명한 스프레드시트 상호작용 및 탐색은, 본 발명의 설명에서 설명되는 바와 같이, 임의의 이들 유형의 데이터의 활용을 가능하게 할 수 있다. 서버(135)는 클라이언트에게 스프레드시트 상호작용 및 탐색 결과를 제공할 수 있다. 일 예시로서, 서버(135)는 웹(web)을 통한 스프레드시트 상호작용 및 탐색을 제공하는 웹 서버일 수 있다. 서버(135)는 스프레드시트 상호작용의 결과 및 네트워크(130)를 통해 웹을 통한 클라이언트로의 탐색 기능을 제공할 수 있다. 예시로서, 클라이언트 컴퓨팅 장치는 개인용 컴퓨터(1500), 태블릿 컴퓨팅 장치(105) 및/또는 모바일 컴퓨팅 장치(예컨대, 스마트 폰)(110), 또는 기타 컴퓨팅 장치로 구현 및 실시될 수 있다. 임의의 이들 각 실시예의 클라이언트 컴퓨팅 장치(1500, 105, 110, 120, 125, 135)는 스토어(1716)로부터 콘텐트를 획득할 수 있다.
본 발명의 각 실시예는, 예를 들면, 본 발명의 각 실시예에 따른 방법, 시스템, 및 컴퓨터 프로그램 제품의 블록 다이아그램 및/또는 동작 설명을 참조하여 설명되었다. 블록에 표기된 기능/동작들은 임의의 플로 차트에서 나타낸 순서에서 벗어나서 발생할 수 있다. 예를 들면, 연속적으로 나타낸 두 개의 블록은 실제로는 실질적으로 동시에 실행될 수 있으며, 또는 이들 블록은 관련된 기능/동작에 따라서 어떤 경우에는 반대의 순서로 실행될 수도 있다.
본 발명의 설명에서 제공된 하나 이상의 실시예의 설명 및 도해는 어떠한 방식으로든 청구 범위에서 청구하고 있는 본 발명의 범위를 제한하거나 한정하고자 의도되지 않는다. 본 발명의 설명에서 제공된 각 실시예, 예시, 및 상세는 본 발명의 청구 범위에 기재된 청구 대상에 대한 소유권을 나타내고 또한 다른 사람들이 본 발명의 청구 범위에 기재된 청구 대상의 최적의 양태를 실시하도록 하고 또한 사용할 수 있도록 하는데 충분하다고 간주된다. 본 발명의 청구 범위에 기재된 청구 대상은 본 발명의 설명에서 제공되는 임의의 실시예, 예시, 또는 상세만으로 제한되는 것으로 해석되어서는 아니된다. 조합하여 또는 개별적으로 나타내고 설명한 것과는 무관하게, 다양한 특징(구조적인 것 및 방법적인 것 모두)은 특정한 일련의 특징을 갖는 일 실시예를 제공하기 위해서 선택적으로 포함되거나 선택적으로 생략되도록 의도되었다. 이상 본 발명에 대해서 설명하고 도시하였지만, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 청구 범위에 기재된 청구 대상의 더 넓은 범위로부터 벗어나지 않고도 본 출원 명세서에서 실시된 일반적인 발명의 개념에 대한 더 넓은 특징에 포함되는 변형, 변경, 및 다른 실시예를 구상할 수 있을 것이다.

Claims (10)

  1. 스프레드시트 탐색 시스템으로서,
    하나 이상의 프로세서(1502)와,
    상기 하나 이상의 프로세서에 결합된 메모리(1504)
    를 포함하며,
    상기 하나 이상의 프로세서는
    제 1 스프레드시트 애플리케이션(115) 사용자 인터페이스 모드를 통해 전자 스프레드시트 문서(210)를 표시하고,
    상기 제 1 스프레드시트 애플리케이션 사용자 인터페이스 모드와 연계하여 전자 스프레드시트 문서의 제 1 콘텐트 레벨을 표시하며,
    상기 전자 스프레드시트 문서에서 제 1 제스처를 수신하고,
    자동으로 상기 전자 스프레드시트 문서의 제2 콘텐트 레벨을 탐색하여 표시 - 상기 전자 스프레드시트 문서의 제2 콘텐트 레벨은 상기 전자 스프레드시트 문서의 축소된 뷰에 오버레이된 확대된 콘텐트 아이템들의 썸네일 표현들을 표시하고, 상기 확대된 콘텐트 아이템들의 상기 썸네일 표현들은 상기 전자 스프레드시트 문서에서 상기 콘텐트 아이템들의 위치와 관련된 참조를 제공함 - 하며,
    상기 썸네일 표현들 중 하나의 선택을 수신하고,
    상기 전자 스프레드시트 문서에서 상기 선택된 썸네일 표현의 위치를 탐색하도록 동작 가능한
    스프레드시트 탐색 시스템.
  2. 스프레드시트 탐색 방법으로서,
    제 1 스프레드시트 애플리케이션(115) 사용자 인터페이스 모드를 표시하는 단계와,
    상기 제 1 스프레드시트 애플리케이션 사용자 인터페이스 모드와 연계하여 전자 스프레드시트 문서(210)의 제 1 콘텐트 레벨을 표시하는 단계와,
    상기 전자 스프레드시트 문서를 대상으로 하는 제 1 제스처를 수신하는 단계와,
    자동으로 상기 전자 스프레드시트 문서의 제2 콘텐트 레벨을 탐색하여 표시하는 단계 - 상기 전자 스프레드시트 문서의 제2 콘텐트 레벨은 상기 전자 스프레드시트 문서의 축소된 뷰에 오버레이된 확대된 콘텐트 아이템들의 썸네일 표현들을 표시하고, 상기 확대된 콘텐트 아이템들의 상기 썸네일 표현들은 상기 전자 스프레드시트 문서에서 상기 콘텐트 아이템들의 위치와 관련된 참조를 제공함 - 와,
    상기 썸네일 표현들 중 하나의 선택을 수신하는 단계와,
    상기 전자 스프레드시트 문서에서 상기 선택된 썸네일 표현의 위치를 탐색하는 단계를 포함하는
    스프레드시트 탐색 방법.
  3. 제 2 항에 있어서,
    상기 전자 스프레드시트 문서를 대상으로 하는 제 1 제스처의 수신에 응답하여, 자동으로 제 2 스프레드시트 애플리케이션 사용자 인터페이스 모드를 탐색하여 표시하는 단계를 포함하는
    스프레드시트 탐색 방법.
  4. 제 2 항에 있어서,
    자동으로 상기 전자 스프레드시트 문서의 제 2 콘텐트 레벨을 탐색하여 표시하는 단계는 상기 전자 스프레드시트 문서의 상기 제 1 콘텐트 레벨과 연관된 복수의 스프레드시트 문서의 복수의 썸네일 표현을 표시하는 단계를 포함하는
    스프레드시트 탐색 방법.
  5. 제 4 항에 있어서,
    각각의 표시된 썸네일 표현과 연계하여, 각각의 표시된 썸네일 표현에 대응하는 전자 스프레드시트 문서에 대한 정보를 표시하는 단계를 더 포함하는
    스프레드시트 탐색 방법.
  6. 제 5 항에 있어서,
    상기 전자 스프레드시트 문서에 대한 정보를 표시하는 단계는 각각의 표시된 썸네일 표현에 대응하는 임의의 상기 전자 스프레드시트 문서에 행해진 하나 이상의 변경에 대한 정보를 표시하는 단계를 포함하는
    스프레드시트 탐색 방법.
  7. 제 6 항에 있어서,
    각각의 표시된 썸네일 표현에 대응하는 임의의 상기 전자 스프레드시트 문서에 행해진 하나 이상의 변경에 대한 정보를 표시하는 단계는 각각의 표시된 썸네일 표현에 대응하는 임의의 상기 전자 스프레드시트 문서에 행해진 상기 하나 이상의 변경의 위치를 나타내는 정보를 표시하는 단계를 포함하는
    스프레드시트 탐색 방법.
  8. 제 2 항에 있어서,
    자동으로 상기 전자 스프레드시트 문서의 제 2 콘텐트 레벨을 탐색하여 표시하는 단계는 상기 전자 스프레드시트 문서 내의 탐색 지점에 대한 시각적 표시를 제공하기 위해 상기 전자 스프레드시트 문서에 포함된 하나 이상의 콘텐트 아이템을 확대하여 표시하는 단계를 포함하는
    스프레드시트 탐색 방법.
  9. 제 2 항에 있어서,
    자동으로 상기 전자 스프레드시트 문서의 제 2 콘텐트 레벨을 탐색하여 표시하는 단계는 상기 전자 스프레드시트 문서에 포함된 하나 이상의 수식 의존성(formula dependency)의 시각화를 표시하는 단계를 포함하는
    스프레드시트 탐색 방법.
  10. 컴퓨터에 의해서 실행될 때 스프레드시트 탐색 방법을 수행하는 컴퓨터 실행 가능 명령어를 포함하는 컴퓨터 판독 가능 매체로서,
    상기 방법은,
    제 1 스프레드시트 애플리케이션(115) 사용자 인터페이스 모드를 표시하는 단계와,
    상기 제 1 스프레드시트 애플리케이션 사용자 인터페이스 모드와 연계하여 전자 스프레드시트 문서(210)의 제 1 콘텐트 레벨을 표시하는 단계와,
    상기 전자 스프레드시트 문서를 대상으로 하는 제 1 제스처를 수신하는 단계와,
    자동으로 상기 전자 스프레드시트 문서의 제2 콘텐트 레벨을 탐색하여 표시하는 단계 - 상기 전자 스프레드시트 문서의 제2 콘텐트 레벨은 상기 전자 스프레드시트 문서의 축소된 뷰에 오버레이된 확대된 콘텐트 아이템들의 썸네일 표현들을 표시하고, 상기 확대된 콘텐트 아이템들의 상기 썸네일 표현들은 상기 전자 스프레드시트 문서에서 상기 콘텐트 아이템들의 위치와 관련된 참조를 제공함 - 와,
    상기 썸네일 표현들 중 하나의 선택을 수신하는 단계와,
    상기 전자 스프레드시트 문서에서 상기 선택된 썸네일 표현의 위치를 탐색하는 단계를 포함하는
    컴퓨터 판독 가능 매체.
KR1020167019231A 2013-12-17 2014-12-10 전자 스프레드시트와의 터치/제스처 가능한 상호작용 기법 KR102368943B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/108,847 2013-12-17
US14/108,847 US20150169531A1 (en) 2013-12-17 2013-12-17 Touch/Gesture-Enabled Interaction with Electronic Spreadsheets
PCT/US2014/069420 WO2015094827A1 (en) 2013-12-17 2014-12-10 Touch/gesture-enabled interaction with electronic spreadsheets

Publications (2)

Publication Number Publication Date
KR20160099678A KR20160099678A (ko) 2016-08-22
KR102368943B1 true KR102368943B1 (ko) 2022-02-28

Family

ID=52278795

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167019231A KR102368943B1 (ko) 2013-12-17 2014-12-10 전자 스프레드시트와의 터치/제스처 가능한 상호작용 기법

Country Status (5)

Country Link
US (1) US20150169531A1 (ko)
EP (1) EP3084582B1 (ko)
KR (1) KR102368943B1 (ko)
CN (1) CN106030492B (ko)
WO (1) WO2015094827A1 (ko)

Families Citing this family (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021099839A1 (en) 2019-11-18 2021-05-27 Roy Mann Collaborative networking systems, methods, and devices
WO2021161104A1 (en) * 2020-02-12 2021-08-19 Monday.Com Enhanced display features in collaborative network systems, methods, and devices
US11410129B2 (en) 2010-05-01 2022-08-09 Monday.com Ltd. Digital processing systems and methods for two-way syncing with third party applications in collaborative work systems
WO2021144656A1 (en) 2020-01-15 2021-07-22 Monday.Com Digital processing systems and methods for graphical dynamic table gauges in collaborative work systems
US9202297B1 (en) 2011-07-12 2015-12-01 Domo, Inc. Dynamic expansion of data visualizations
US10001898B1 (en) 2011-07-12 2018-06-19 Domo, Inc. Automated provisioning of relational information for a summary data visualization
US9792017B1 (en) 2011-07-12 2017-10-17 Domo, Inc. Automatic creation of drill paths
US10521092B2 (en) 2014-09-08 2019-12-31 Tableau Software, Inc. Methods and devices for adjusting chart magnification asymmetrically
US10635262B2 (en) 2014-09-08 2020-04-28 Tableau Software, Inc. Interactive data visualization user interface with gesture-based data field selection
US10380770B2 (en) 2014-09-08 2019-08-13 Tableau Software, Inc. Interactive data visualization user interface with multiple interaction profiles
US10347027B2 (en) 2014-09-08 2019-07-09 Tableau Software, Inc. Animated transition between data visualization versions at different levels of detail
US10347018B2 (en) 2014-09-08 2019-07-09 Tableau Software, Inc. Interactive data visualization user interface with hierarchical filtering based on gesture location on a chart
EP3218850A4 (en) 2014-11-10 2018-06-27 Visionize LLC Methods and apparatus for vision enhancement
US11546527B2 (en) 2018-07-05 2023-01-03 Irisvision, Inc. Methods and apparatuses for compensating for retinitis pigmentosa
US11144119B2 (en) 2015-05-01 2021-10-12 Irisvision, Inc. Methods and systems for generating a magnification region in output video images
US11372479B2 (en) 2014-11-10 2022-06-28 Irisvision, Inc. Multi-modal vision enhancement system
US9904456B2 (en) * 2014-12-02 2018-02-27 Business Objects Software Ltd. Gesture-based visualization of data grid on mobile device
US11797172B2 (en) 2015-03-06 2023-10-24 Alibaba Group Holding Limited Method and apparatus for interacting with content through overlays
CA169861S (en) * 2015-06-30 2019-07-17 Gamblit Gaming Llc Display screen with graphical user interface
US10896532B2 (en) 2015-09-08 2021-01-19 Tableau Software, Inc. Interactive data visualization user interface with multiple interaction profiles
CN108604225B (zh) 2015-11-09 2022-05-24 奈克斯莱特有限公司 由多个不同团队进行的协作文档创建
US10387558B2 (en) * 2016-02-23 2019-08-20 International Business Machines Corporation Provision of a separate input interface for user interaction with a spreadsheet
US10365808B2 (en) 2016-04-28 2019-07-30 Microsoft Technology Licensing, Llc Metadata-based navigation in semantic zoom environment
US11574119B2 (en) * 2016-09-28 2023-02-07 International Business Machines Corporation Efficient starting points in mobile spreadsheets
US9983768B2 (en) 2016-10-20 2018-05-29 International Business Machines Corporation Tabulated data selection
US10635286B2 (en) * 2016-10-23 2020-04-28 Oracle International Corporation Visualizations supporting unlimited rows and columns
US10496216B2 (en) 2016-11-09 2019-12-03 Dell Products L.P. Information handling system capacitive touch totem with optical communication support
US10929593B2 (en) * 2018-01-31 2021-02-23 Microsoft Technology Licensing, Llc Data slicing of application file objects and chunk-based user interface navigation
CN108446152B (zh) * 2018-02-02 2021-09-28 创新先进技术有限公司 页面显示方法及装置
US11416503B2 (en) * 2018-02-09 2022-08-16 Microsoft Technology Licensing, Llc Mining data for generating consumable collaboration events
WO2019160962A1 (en) 2018-02-13 2019-08-22 Frank Werblin Methods and apparatus for contrast sensitivity compensation
US10459528B2 (en) 2018-02-28 2019-10-29 Dell Products L.P. Information handling system enhanced gesture management, control and detection
CN108628816B (zh) * 2018-03-30 2022-02-25 创新先进技术有限公司 单元格选取方法和终端设备
US11320983B1 (en) * 2018-04-25 2022-05-03 David Graham Boyers Methods and graphical user interfaces for positioning a selection, selecting, and editing, on a computing device running applications under a touch-based operating system
US10943059B2 (en) 2018-06-27 2021-03-09 Microsoft Technology Licensing, Llc Document editing models and management
US10635199B2 (en) 2018-06-28 2020-04-28 Dell Products L.P. Information handling system dynamic friction touch device for touchscreen interactions
US10817077B2 (en) 2018-06-28 2020-10-27 Dell Products, L.P. Information handling system touch device context aware input tracking
US10852853B2 (en) 2018-06-28 2020-12-01 Dell Products L.P. Information handling system touch device with visually interactive region
US10795502B2 (en) 2018-06-28 2020-10-06 Dell Products L.P. Information handling system touch device with adaptive haptic response
US10664101B2 (en) 2018-06-28 2020-05-26 Dell Products L.P. Information handling system touch device false touch detection and mitigation
US10761618B2 (en) * 2018-06-28 2020-09-01 Dell Products L.P. Information handling system touch device with automatically orienting visual display
US11698890B2 (en) 2018-07-04 2023-07-11 Monday.com Ltd. System and method for generating a column-oriented data structure repository for columns of single data types
US11436359B2 (en) 2018-07-04 2022-09-06 Monday.com Ltd. System and method for managing permissions of users for a single data type column-oriented data structure
CN112241235B (zh) * 2019-07-01 2022-08-09 珠海金山办公软件有限公司 一种电子表格批注方法、显示方法和对应装置
US20210150481A1 (en) 2019-11-18 2021-05-20 Monday.Com Digital processing systems and methods for mechanisms for sharing responsibility in collaborative work systems
CN111290752B (zh) * 2019-12-24 2024-02-20 明度智云(浙江)科技有限公司 一种web表格的边框处理方法和装置
EP4143732A1 (en) 2020-05-01 2023-03-08 Monday.com Ltd. Digital processing systems and methods for enhanced collaborative workflow and networking systems, methods, and devices
US20240184989A1 (en) 2020-05-01 2024-06-06 Monday.com Ltd. Digital processing systems and methods for virtualfile-based electronic white board in collaborative work systems systems
US11277361B2 (en) 2020-05-03 2022-03-15 Monday.com Ltd. Digital processing systems and methods for variable hang-time for social layer messages in collaborative work systems
WO2021233245A1 (zh) * 2020-05-19 2021-11-25 阿里巴巴集团控股有限公司 提供商品对象信息的方法、装置及电子设备
US11449668B2 (en) 2021-01-14 2022-09-20 Monday.com Ltd. Digital processing systems and methods for embedding a functioning application in a word processing document in collaborative work systems
CN113238688B (zh) * 2021-05-10 2023-06-27 北京字跳网络技术有限公司 表格展示方法、装置、设备及介质
US11842226B2 (en) * 2022-04-04 2023-12-12 Ambiq Micro, Inc. System for generating power profile in low power processor
US11741071B1 (en) 2022-12-28 2023-08-29 Monday.com Ltd. Digital processing systems and methods for navigating and viewing displayed content
US11886683B1 (en) 2022-12-30 2024-01-30 Monday.com Ltd Digital processing systems and methods for presenting board graphics
US11893381B1 (en) 2023-02-21 2024-02-06 Monday.com Ltd Digital processing systems and methods for reducing file bundle sizes

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120180002A1 (en) * 2011-01-07 2012-07-12 Microsoft Corporation Natural input for spreadsheet actions

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5612719A (en) * 1992-12-03 1997-03-18 Apple Computer, Inc. Gesture sensitive buttons for graphical user interfaces
US5806078A (en) * 1994-06-09 1998-09-08 Softool Corporation Version management system
US5603021A (en) * 1994-09-02 1997-02-11 Borland International, Inc. Methods for composing formulas in an electronic spreadsheet system
JPH09106336A (ja) * 1995-10-11 1997-04-22 Sharp Corp 複数の表示画像を情報処理装置の表示窓内に表示する方法
WO2001059675A1 (en) * 2000-02-11 2001-08-16 Ryan Mark H Method and system for distributing and collecting spreadsheet information
US8205149B2 (en) * 2001-01-05 2012-06-19 Microsoft Corporation Enhanced find and replace for electronic documents
US20040205524A1 (en) * 2001-08-15 2004-10-14 F1F9 Spreadsheet data processing system
US7882427B2 (en) * 2003-07-24 2011-02-01 Balenz Software, Inc. System and method for managing a spreadsheet
US20060015804A1 (en) * 2004-07-15 2006-01-19 Microsoft Corporation Method and system for presenting editable spreadsheet page layout view
US8745483B2 (en) * 2004-10-07 2014-06-03 International Business Machines Corporation Methods, systems and computer program products for facilitating visualization of interrelationships in a spreadsheet
US7853868B2 (en) * 2005-09-02 2010-12-14 Microsoft Corporation Button for adding a new tabbed sheet
US7783977B2 (en) * 2005-09-29 2010-08-24 Datanab, Llc System and method for balancing of ventilation systems
US7864163B2 (en) * 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US9390059B1 (en) * 2006-12-28 2016-07-12 Apple Inc. Multiple object types on a canvas
US8161416B2 (en) * 2007-03-16 2012-04-17 Sap Ag Navigator for displays
US20090006939A1 (en) * 2007-06-29 2009-01-01 Microsoft Corporation Task-specific spreadsheet worksheets
US8345014B2 (en) * 2008-07-12 2013-01-01 Lester F. Ludwig Control of the operating system on a computing device via finger angle using a high dimensional touchpad (HDTP) touch user interface
US9037959B2 (en) * 2008-09-30 2015-05-19 Apple Inc. Formula display and search in a spreadsheet
US9229922B2 (en) * 2008-09-30 2016-01-05 Apple Inc. Token representation of references and function arguments
US8108779B1 (en) * 2008-12-16 2012-01-31 Adobe Systems Incorporated Collaborative editing operations
US10685177B2 (en) * 2009-01-07 2020-06-16 Litera Corporation System and method for comparing digital data in spreadsheets or database tables
US8689095B2 (en) * 2009-02-09 2014-04-01 Microsoft Corporation Grid presentation in web-based spreadsheet services
US8584008B1 (en) * 2009-02-20 2013-11-12 Adobe Systems Incorporated Method and system for layout of annotation data
US8812625B1 (en) * 2009-04-21 2014-08-19 Google Inc. Tracking changes in on-line spreadsheet
US8319801B2 (en) * 2009-05-08 2012-11-27 International Business Machines Corporation Magnifying content on a graphical display
US8154529B2 (en) * 2009-05-14 2012-04-10 Atmel Corporation Two-dimensional touch sensors
US8786559B2 (en) * 2010-01-06 2014-07-22 Apple Inc. Device, method, and graphical user interface for manipulating tables using multi-contact gestures
US8996978B2 (en) * 2010-05-14 2015-03-31 Sap Se Methods and systems for performing analytical procedures by interactions with visual representations of datasets
TW201222344A (en) * 2010-11-16 2012-06-01 Elan Microelectronics Corp Method for continuing a multi-finger gesture on a touch panel
CN102541401B (zh) * 2010-12-21 2015-06-24 联想(北京)有限公司 一种信息处理设备和信息处理方法
US8863019B2 (en) * 2011-03-29 2014-10-14 International Business Machines Corporation Modifying numeric data presentation on a display
US9361286B2 (en) * 2011-05-05 2016-06-07 Business Objects Software Limited Visual tracking of report changes
US8832588B1 (en) * 2011-06-30 2014-09-09 Microstrategy Incorporated Context-inclusive magnifying area
US9727132B2 (en) * 2011-07-01 2017-08-08 Microsoft Technology Licensing, Llc Multi-visor: managing applications in augmented reality environments
US9086794B2 (en) * 2011-07-14 2015-07-21 Microsoft Technology Licensing, Llc Determining gestures on context based menus
US8719725B2 (en) * 2011-07-18 2014-05-06 Oracle International Corporation Touch optimized pivot table
US20140007018A1 (en) * 2011-10-05 2014-01-02 Fooncrazy Corp Summation of tappable elements results/actions by swipe gestures
US8990686B2 (en) * 2011-11-02 2015-03-24 Microsoft Technology Licensing, Llc Visual navigation of documents by object
US9053083B2 (en) * 2011-11-04 2015-06-09 Microsoft Technology Licensing, Llc Interaction between web gadgets and spreadsheets
US20130145244A1 (en) * 2011-12-05 2013-06-06 Microsoft Corporation Quick analysis tool for spreadsheet application programs
US9323443B2 (en) * 2012-05-02 2016-04-26 International Business Machines Corporation Drilling of displayed content in a touch screen device
JP2014010777A (ja) * 2012-07-02 2014-01-20 Fujitsu Ltd 表示プログラム、表示方法、及び情報処理装置
KR101892267B1 (ko) * 2012-07-26 2018-09-28 삼성전자주식회사 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체
US20140033110A1 (en) * 2012-07-26 2014-01-30 Texas Instruments Incorporated Accessing Secondary Functions on Soft Keyboards Using Gestures
US9223406B2 (en) * 2012-08-27 2015-12-29 Samsung Electronics Co., Ltd. Screen display control method of electronic device and apparatus therefor
US9152618B2 (en) * 2012-08-31 2015-10-06 Microsoft Technology Licensing, Llc Cell view mode for outsized cells
US9268423B2 (en) * 2012-09-08 2016-02-23 Stormlit Limited Definition and use of node-based shapes, areas and windows on touch screen devices
US9922018B2 (en) * 2012-11-12 2018-03-20 Microsoft Technology Licensing, Llc Scrollbar for zooming on rows and columns of a spreadsheet and interpreting cells
US9158766B2 (en) * 2012-11-29 2015-10-13 Oracle International Corporation Multi-touch interface for visual analytics
CN102981768B (zh) * 2012-12-04 2016-12-21 中兴通讯股份有限公司 一种在触屏终端界面实现悬浮式全局按钮的方法及系统
ES2615107T3 (es) * 2012-12-06 2017-06-05 Inventio Ag Entrada de instrucciones de bloqueo por medio de gestos
US9495777B2 (en) * 2013-02-07 2016-11-15 Oracle International Corporation Visual data analysis for large data sets
US10140269B2 (en) * 2013-03-12 2018-11-27 Microsoft Technology Licensing, Llc Viewing effects of proposed change in document before committing change
US20140267130A1 (en) * 2013-03-13 2014-09-18 Microsoft Corporation Hover gestures for touch-enabled devices
US10372292B2 (en) * 2013-03-13 2019-08-06 Microsoft Technology Licensing, Llc Semantic zoom-based navigation of displayed content
US10360297B2 (en) * 2013-06-14 2019-07-23 Microsoft Technology Licensing, Llc Simplified data input in electronic documents
US10664652B2 (en) * 2013-06-15 2020-05-26 Microsoft Technology Licensing, Llc Seamless grid and canvas integration in a spreadsheet application

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120180002A1 (en) * 2011-01-07 2012-07-12 Microsoft Corporation Natural input for spreadsheet actions

Also Published As

Publication number Publication date
US20150169531A1 (en) 2015-06-18
CN106030492A (zh) 2016-10-12
WO2015094827A1 (en) 2015-06-25
KR20160099678A (ko) 2016-08-22
EP3084582A1 (en) 2016-10-26
CN106030492B (zh) 2019-09-10
EP3084582B1 (en) 2019-06-26

Similar Documents

Publication Publication Date Title
KR102368943B1 (ko) 전자 스프레드시트와의 터치/제스처 가능한 상호작용 기법
US10366629B2 (en) Problem solver steps user interface
KR102326309B1 (ko) 전자 스프레드시트에서의 수식 및 함수의 생성 방법 및 사용 방법
US20190196670A1 (en) Navigating content hierarchies and persisting content item collections
US20140365886A1 (en) Using Scrollbars as Live Notification Areas
US11256388B2 (en) Merged experience of reading and editing with seamless transition
EP3084634B1 (en) Interaction with spreadsheet application function tokens
JP2015531530A (ja) サムネイルおよび文書マップに基づく、文書内ナビゲーション
KR20160020439A (ko) 스프레드시트 애플리케이션 내의 무결절성 격자 및 캔버스 통합 기법
KR102129827B1 (ko) 콘텐츠 선택 및 확장된 콘텐츠 선택을 위한 사용자 인터페이스 요소들
KR20160138573A (ko) 슬라이드하는 서피스
KR20160021267A (ko) 슬라이서 스타일 필터링 사용자 인터페이스를 이용한 데이터 필터링
CN108292324A (zh) 内容创作内联命令
US20140372933A1 (en) Automatically displaying suggestions for entry
US20190258393A1 (en) Navigating long distances on navigable surfaces
US9710444B2 (en) Organizing unstructured research within a document
EP3523715B1 (en) Select and move hint

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant