KR20160003683A - 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 기법 - Google Patents
시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 기법 Download PDFInfo
- Publication number
- KR20160003683A KR20160003683A KR1020157031232A KR20157031232A KR20160003683A KR 20160003683 A KR20160003683 A KR 20160003683A KR 1020157031232 A KR1020157031232 A KR 1020157031232A KR 20157031232 A KR20157031232 A KR 20157031232A KR 20160003683 A KR20160003683 A KR 20160003683A
- Authority
- KR
- South Korea
- Prior art keywords
- visualization
- data
- gesture
- application
- action
- Prior art date
Links
- 238000012800 visualization Methods 0.000 claims abstract description 134
- 230000009471 action Effects 0.000 claims abstract description 37
- 230000003993 interaction Effects 0.000 claims abstract description 34
- 238000013079 data visualisation Methods 0.000 claims abstract description 27
- 230000008859 change Effects 0.000 claims abstract description 24
- 238000000034 method Methods 0.000 claims description 28
- 230000004044 response Effects 0.000 claims description 17
- 230000009467 reduction Effects 0.000 claims description 4
- 230000033001 locomotion Effects 0.000 claims description 3
- 230000000007 visual effect Effects 0.000 abstract description 6
- 238000003860 storage Methods 0.000 description 18
- 238000004891 communication Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 8
- 238000004590 computer program Methods 0.000 description 3
- 238000007405 data analysis Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000004424 eye movement Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 241000699666 Mus <mouse, genus> Species 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
Abstract
데이터 시각화 애플리케이션은 시각화된 데이터를 상호작용에 기초하여 자동으로 조작한다. 터치 동작, 시각적 및 음성적 명령 및 안구 추적과 같은 검출된 제스처는 시각화의 데이터에 적용될 연관된 동작에 매칭된다. 동작은 확장, 축소, 병합, 분할, 줌인, 줌 아웃, 스타일 변경, 또는 이와 유사한 것을 포함할 수 있다. 동작은 시각화의 데이터에 대해 실행되어 데이터의 변경을 야기한다. 시각화는 데이터에 대한 변경을 디스플레이하도록 업데이트된다.
Description
사람들은 사용자 인터페이스를 통해 컴퓨터 애플리케이션과 상호작용한다. 음성, 촉각 및 이와 유사한 형식의 사용자 인터페이스가 이용가능하지만, 디스플레이 장치를 통한 시각적 사용자 인터페이스가 가장 일반적인 형식의 사용자 인터페이스이다. 컴퓨팅 장치를 위한 보다 빠른 및 보다 소형의 전자기기가 개발됨으로써, 핸드헬드 컴퓨터, 스마트폰, 태블릿 장치 및 이에 필적하는 장치들과 같은 소형 크기의 장치가 일반적이게 되었다. 이러한 장치는 통신 애플리케이션으로부터 복잡한 분석 도구에 이르기까지 다양하고 광범위한 애플리케이션을 실행한다. 다수의 이러한 애플리케이션은 디스플레이를 통해 시각적 효과를 표현하며 사용자가 애플리케이션의 동작과 연관된 입력을 제공할 수 있게 해준다.
현대의 플랫폼은 거의 시각적 표현과 결합되지 않는 텍스트 형태의 데이터를 제시한다. 현대의 솔루션에서, 데이터는 일반적으로 테이블 형식으로 사용자에게 제시된다. 사용자는 제시된 데이터의 시각화(visualization)를 위한 파라미터를 수동으로 선택 또는 정의한다. 이미 만들어져 있는 차트와 같이, 데이터 시각화의 일부분은 자동화되지만, 일반적인 데이터 시각화는 사용자 상호작용으로 시작한다. 후속하는 데이터 시각화는 데이터와의 다수의 사용자 상호작용을 포함한다. 직장 및 개인 생활에서의 데이터 분석의 확장은 데이터 분석의 효율적인 이용을 위해 데이터 시각화를 생성 및 업데이트하는 동안 수동적인 사용자 상호작용의 제거를 요구한다.
시각화된 데이터의 조작은 데이터 시각화와 연관된 부가적인 어려움의 근원이다. 현대 솔루션에서, 시각화 파라미터(스케일, 축(axes), 증가, 스타일 등), 데이터 범위 등을 선택할 때 수동적인 단계가 필요하다. 수동적인 측면은 현대 및 미래의 컴퓨팅 기술의 터치 및/또는 제스처 기반의 직관적 및 자동화된 상호작용 환경에서 데이터 시각화를 반 생산적 및 반 직관적이게 한다.
본 요약부는 이하의 상세한 설명에서 더 설명되는 선택된 개념들을 간단하게 소개하고자 하는 것이다. 본 요약부는 청구대상의 핵심적인 특징이나 필수적인 특징들을 밝히고자 함이 아니며, 청구대상의 범위를 결정하는 데 도움이 되고자 함도 아니다.
실시예들은 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 것에 관한 것이다. 몇몇 실시예에 따르면, 데이터 시각화 애플리케이션은 데이터 분석 결과를 나타내는 그래프와 같은 데이터의 시각화를 디스플레이한다. 이 애플리케이션은 시각화와 상호작용하는 제스처를 검출할 수 있고 이 제스처와 연관된 동작을 결정할 수 있다. 동작은 시각화에 적용될 확장, 축소, 병합, 분할, 줌인, 줌 아웃, 스타일 변경, 또는 이와 유사한 것을 포함할 수 있다. 동작은 시각화의 데이터에 대해 실행될 수 있고 데이터는 그 동작의 지시에 응답하여 변경될 수 있다. 다음으로, 애플리케이션은 데이터에 대해 실행된 동작과 연관된 변경을 디스플레이하도록 시각화를 업데이트할 수 있다. 이 업데이트는 변경을 시각화에 적용할 수 있다. 이와 달리, 애플리케이션은 변경이 새로운 시각화를 제공하는 경우 새로운 시각화를 디스플레이할 수 있다.
이들 및 다른 특징은 후속하는 상세한 설명을 읽고 연관된 도면을 검토함으로써 명백해질 것이다. 전술한 일반적인 설명 및 후속하는 상세한 설명 모두는 예시적인 것이며 청구대상을 한정하지는 않는다.
도 1은 몇몇 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 예시적인 개념도이다.
도 2는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 축소 동작의 일 예를 나타낸다.
도 3은 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 확장 동작의 일 예를 나타낸다.
도 4는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 줌인 동작의 일 예를 나타낸다.
도 5는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 병합 동작의 일 예를 나타낸다.
도 6은 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 스타일 변경 동작의 일 예를 나타낸다.
도 7은 실시예에 따른 시스템이 구현될 수 있는 네트워크 환경을 나타낸다.
도 8은 실시예들이 구현될 수 있는 예시적인 컴퓨팅 동작 환경의 블록도이다.
도 9는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 프로세스의 논리적 흐름도를 나타낸다.
도 2는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 축소 동작의 일 예를 나타낸다.
도 3은 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 확장 동작의 일 예를 나타낸다.
도 4는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 줌인 동작의 일 예를 나타낸다.
도 5는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 병합 동작의 일 예를 나타낸다.
도 6은 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 스타일 변경 동작의 일 예를 나타낸다.
도 7은 실시예에 따른 시스템이 구현될 수 있는 네트워크 환경을 나타낸다.
도 8은 실시예들이 구현될 수 있는 예시적인 컴퓨팅 동작 환경의 블록도이다.
도 9는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 프로세스의 논리적 흐름도를 나타낸다.
앞서 간단히 설명한 바와 같이, 시각화된 데이터는 상호작용에 기초하여 자동으로 조작된다. 데이터 시각화 애플리케이션은 디스플레이된 데이터의 시각화 상에서 검출된 제스처와 연관된 동작을 결정할 수 있다. 시각화는 시각화된 데이터에 대한 동작의 실행에 응답하여 데이터의 변경을 디스플레이하도록 업데이트될 수 있다.
이하의 상세한 설명에서, 본 명세서의 일부를 형성하고, 예시로서 특정 실시예 또는 예시가 도시되어 있는 첨부한 도면을 참조한다. 이들 측면은 결합될 수도 있고, 다른 측면이 이용될 수 있으며, 본 발명의 사상 또는 범주를 벗어나지 않으면서 구조적 변경이 행해질 수 있다. 따라서, 후속하는 상세한 설명은 제한적 의미로 받아들여져서는 안되고, 본 발명의 범주는 첨부한 청구항 및 이들의 등가물에 의해 정의된다.
실시예들은 컴퓨팅 장치의 운영 체제 상에서 실행되는 응용 프로그램과 연계하여 실행되는 일반적인 상황의 프로그램 모듈로 설명될 것이지만, 당업자라면, 측면들은 또한 다른 프로그램 모듈과 연계하여 구현될 수 있음을 알 수 있을 것이다.
일반적으로, 프로그램 모듈은 특정 태스크를 수행하거나 특정 추상 데이터 유형을 구현하는 루틴, 프로그램, 컴포넌트, 데이터 구조, 및 다른 유형의 구조를 포함한다. 또한, 당업자라면, 실시예들은 핸드헬드 장치, 멀티프로세서 시스템, 마이크로프로세서 기반 또는 프로그램가능 소비자 전자기기, 미니컴퓨터, 메인프레임 컴퓨터, 및 이에 필적하는 컴퓨팅 장치를 포함하는 다른 컴퓨터 시스템 구성으로 실시될 수 있음을 알 것이다. 실시예들은 또한 통신 네트워크를 통해 링크되는 원격 프로세싱 장치에 의해 태스크들이 수행되는 분산형 컴퓨팅 환경에서도 실시될 수 있다. 분산형 컴퓨팅 환경에서, 프로그램 모듈은 로컬 및 원격 메모리 저장 장치 모두에 위치할 수 있다.
실시예들은 컴퓨터 구현 프로세스(방법), 컴퓨팅 시스템, 또는 컴퓨터 프로그램 제품 또는 컴퓨터 판독가능 매체와 같은 제조 물품으로 구현될 수 있다. 컴퓨터 프로그램 제품은 컴퓨터 시스템에 의해 판독가능하고 컴퓨터 또는 컴퓨팅 시스템으로 하여금 예시적인 프로세스(들)를 수행하게 하는 명령어들을 포함하는 컴퓨터 프로그램을 인코딩하는 컴퓨터 저장 매체일 수 있다. 컴퓨터 판독가능 저장 매체는 컴퓨터 판독가능 메모리 장치이다. 컴퓨터 판독가능 저장 매체는 예를 들어 휘발성 컴퓨터 메모리, 비휘발성 메모리, 하드 드라이브, 플래시 드라이브, 플로피 디스크 또는 콤팩트 디스크, 및 이에 필적하는 하드웨어 매체 중 하나 이상을 통해 구현될 수 있다.
본 명세서 전반에 걸쳐, "플랫폼"이라는 용어는 상호작용에 기초하여 시각화 데이터를 자동으로 조작하기 위한 소프트웨어 및 하드웨어 컴포넌트의 조합일 수 있다. 플랫폼의 예는 복수의 서버를 통해 실행되는 호스트 서비스, 단일 컴퓨팅 장치에서 실행되는 애플리케이션, 및 이에 필적하는 시스템을 포함하나 이에 국한되지 않는다. 일반적으로 "서버"라는 용어는 보통 네트워크 환경에서 하나 이상의 소프트웨어 프로그램을 실행하는 컴퓨팅 장치를 지칭한다. 그러나, 서버는 네트워크 상에서 서버로서 관찰되는 하나 이상의 컴퓨팅 장치에서 실행되는 가상 서버(소프트웨어 프로그램)로서 구현될 수도 있다. 이들 기술 및 예시적인 동작에 대한 자세한 내용은 이하에서 제공된다.
도 1은 몇몇 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 예시적인 개념도를 나타낸다. 이 개념도(100)에 도시되어 있는 컴포넌트 및 환경은 예시적인 것이다. 실시예들은 다양한 컴퓨팅 장치 및 시스템, 하드웨어 및 소프트웨어를 이용하는 다양한 로컬, 네트워크형, 클라우드 기반 및 이와 유사한 컴퓨팅 환경에서 구현될 수 있다.
장치(104)는 시각화(106)를 사용자(110)에게 디스플레이할 수 있다. 시각화(106)는 데이터 및 연관된 시각화를 제시하는 데이터 시각화 애플리케이션에 의해 디스플레이된다. 시각화(106)는 그래프, 차트, 3차원(3D) 표현, 그래픽, 이미지, 비디오, 및 이에 필적하는 것들일 수 있다. 시각화(106)는 기저 데이터의 표현일 수 있다. 데이터는 시각화와의 사용자 상호작용에 응답하여 조작될 수 있다. 일 예는 사용자가 시각화의 일부를 줌인하기 위한 제스처(108)를 제공하는 것을 포함할 수 있다. 시각화(106)의 데이터는 제스처(108)로부터 결정된 범위에 부합하도록 스케일링될 수 있다. 데이터의 변경은 시각화(106)에 대한 업데이트를 통해 시각화(106)에 반영될 수 있다. 또한, 장치(104)는 카메라, 마이크, 터치 구동 스크린, 키보드, 마우스 및 이에 필적하는 것들을 포함할 수 있는 하드웨어 기능들을 통해 제스처(108)를 인식할 수 있다.
장치(104)는 시각화(106)의 데이터를 검색 또는 업데이트하기 위해 클라우드 호스트 플랫폼(cloud-hosted platform)(102)과 같은 외부 리소스와 통신할 수 있다. 클라우드 호스트 플랫폼(102)은 데이터 저장소 및 콘텐츠 서버를 포함하는 원격 리소스를 포함할 수 있다. 데이터 시각화 애플리케이션은 사용자 및/또는 데이터와 연관된 컨텍스트 정보에 기초하여 검색된 데이터로부터 시각화를 자동으로 생성할 수 있다.
실시예들은 태블릿과 같은 장치(104)에서의 구현에 국한되지 않는다. 실시예에 따른 데이터 시각화 애플리케이션은 애플리케이션을 디스플레이할 수 있는 임의의 장치에서 실행되는 로컬 애플리케이션일 수 있다. 이와 달리, 데이터 시각화 애플리케이션은 웹 브라우저와 같은 클라이언트 사용자 인터페이스를 통해 애플리케이션 콘텐츠를 디스플레이하면서 서버에서 실행될 수 있는 웹 서비스와 같은 호스트형 애플리케이션일 수 있다. 터치 구동 장치(104)에 더하여, 시각화(106)와의 상호작용은 광학 제스처 캡처, 자이로스코프 입력 장치, 마우스, 키보드, 안구 추적 입력, 및 이에 필적하는 소프트웨어 및/또는 하드웨어 기반 기술과 같은 다른 입력 메카니즘을 통해 달성될 수 있다.
도 2는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 축소 동작의 일 예를 나타낸다. 다이아그램(200)은 해당 시각화(202,212)에 대한 제스처(206,216)에 응답하여 시각화 데이터의 범위 축소의 예를 나타낸다.
데이터 시각화 애플리케이션은 시각화(202)에 대한 제스처(206)를 검출할 수 있다. 애플리케이션은 제스처(206)를 핀치 동작(pinch action)으로 해석할 수 있다. 핀치 동작은 축소 동작(208)에 매칭될 수 있다. 애플리케이션은 축소 동작(208)을 시각화(202)의 데이터에 적용하여 디스플레이된 데이터의 범위를 축소시킬 수 있다. 하나의 예시적인 시나리오에서, 애플리케이션은 핀치 동작의 길이에 비례하여 데이터 요소들의 개수를 감소시킬 수 있다. 애플리케이션은 디스플레이된 데이터 요소들의 개수 감소를 표시하도록 데이터를 업데이트할 수 있다. 이어서, 애플리케이션은 업데이트된 시각화(204)를 디스플레이함으로써 디스플레이된 요소들의 감소를 반영하도록 시각화(202)를 업데이트할 수 있다. 애플리케이션은 축소 동작(208) 동안 시각화(202)의 포맷, 스타일 및 다른 특징을 유지할 수 있다. 이와 달리, 애플리케이션은 업데이트된 데이터 및 사용자와 연관된 컨텍스트 정보에 응답하여 또 다른 시각화 스타일을 디스플레이할 수 있다.
유사한 예로, 제스처(216)의 길이는 시각화(212)에서 디스플레이된 요소들의 개수를 비례적으로 감소시키는데 사용될 수 있다. 애플리케이션은 핀치 동작과 같은 제스처(216)의 길이를 결정할 수 있고 핀치 동작의 종료 길이 및 핀치 동작의 시작 길이에 기초하여 비율을 계산할 수 있다. 이 계산된 비율은 시각화의 디스플레이된 데이터 요소들의 개수에 적용될 수 있다. 애플리케이션은 디스플레이된 데이터 요소들의 개수 감소를 반영하도록 시각화(212)의 데이터를 업데이트할 수 있다. 시각화는 시각화(212)의 데이터에 대한 축소 동작(208)을 반영하도록 업데이트된 시각화(214)로 업데이트될 수 있다.
제스처(206,216)는 비제한적인 예시이다. 스와이프(swipe)와 같은 다른 제스처, 안구 이동, 음성 명령, 및 이에 필적하는 것들이 사용되어 시각화의 데이터에 대한 축소 동작(208)을 실행할 수 있다. 애플리케이션은 또한 디스플레이된 데이터 요소들의 비례적 감소를 결정하기 위해 제스처의 길이를 사용하는 것에 국한되지 않는다. 또 다른 시나리오에서, 애플리케이션은 디스플레이된 데이터 요소들의 비례적 감소를 결정하기 위해 제스처의 속도를 사용할 수 있다. (사전결정된 속도 값에 비해) 높은 속도의 제스처는 보다 많은 개수의 디스플레이된 데이터 요소들을 감소시키는 것으로 해석될 수 있는 반면 낮은 속도의 제스처는 보다 적은 개수의 디스플레이된 데이터 요소들을 감소시키는 것으로 해석될 수 있다. 이와 달리, 낮은 속도의 제스처는 보다 많은 개수의 디스플레이된 데이터 요소들을 감소시키는 것으로 해석될 수 있는 반면 높은 속도의 제스처는 보다 적은 개수의 디스플레이된 데이터 요소들을 감소시키는 것으로 해석될 수 있다. 속도는 제스처의 지속기간 동안 샘플링된 제스처 속도의 평균 속도 계산에 기초하여 해석될 수 있다.
도 3은 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 확장 동작의 일 예를 나타낸다. 다이아그램(300)은 해당 시각화(302,312)에 대한 제스처(306,316)에 응답하여 범위 확장의 예를 나타낸다.
데이터 시각화 애플리케이션은 시각화(302)에 대한 제스처(306)를 검출할 수 있다. 애플리케이션은 제스처(306)를 벌리는 동작(spread action)으로 해석할 수 있다. 벌리는 동작은 확장 동작(308)에 매칭될 수 있다. 애플리케이션은 확장 동작(308)을 시각화(302)의 데이터에 적용하여 디스플레이된 데이터의 범위를 확장시킬 수 있다. 하나의 예시적인 시나리오에서, 애플리케이션은 확장 동작의 길이에 비례하여 데이터 요소들의 개수를 확장시킬 수 있다. 애플리케이션은 디스플레이된 데이터 요소들의 개수 확장을 표시하도록 데이터를 업데이트할 수 있다. 이어서, 애플리케이션은 업데이트된 시각화(304)를 디스플레이함으로써 디스플레이된 요소들의 확장을 반영하도록 시각화(302)를 업데이트할 수 있다. 애플리케이션은 확장 동작(308) 동안 시각화(302)의 포맷, 스타일 및 다른 특징을 유지할 수 있다. 이와 달리, 애플리케이션은 업데이트된 데이터 및 사용자와 연관된 컨텍스트 정보에 응답하여 또 다른 시각화 스타일을 디스플레이할 수 있다.
유사한 예로, 제스처(316)의 길이는 시각화(312)에서 디스플레이된 요소들의 개수를 비례적으로 확장시키는데 사용될 수 있다. 애플리케이션은 확장 동작과 같은 제스처(316)의 길이를 결정할 수 있고 확장 동작의 종료 길이 및 확장 동작의 시작 길이에 기초하여 비율을 계산할 수 있다. 이 계산된 비율은 시각화의 디스플레이된 데이터 요소들의 개수에 적용될 수 있다. 애플리케이션은 디스플레이된 데이터 요소들의 개수 확장을 반영하도록 시각화(312)의 데이터를 업데이트할 수 있다. 시각화는 시각화(312)의 데이터에 대한 확장 동작(308)을 반영하도록 업데이트된 시각화(314)로 업데이트될 수 있다.
제스처(306,316)는 비제한적인 예시이다. 스와이프와 같은 다른 제스처, 안구 이동, 음성 명령, 탭 동작(즉, 한 번의 탭 또는 두 번의 탭) 및 이에 필적하는 것들이 사용되어 시각화의 데이터에 대한 확장 동작(308)을 실행할 수 있다. 애플리케이션은 또한 디스플레이된 데이터 요소들의 비례적 확장을 결정하기 위해 제스처의 길이를 사용하는 것에 국한되지 않는다. 또 다른 시나리오에서, 애플리케이션은 디스플레이된 데이터 요소들의 비례적 확장을 결정하기 위해 제스처의 속도를 사용할 수 있다. (사전결정된 속도 값에 비해) 높은 속도의 제스처는 보다 많은 개수의 디스플레이된 데이터 요소들을 확장시키는 것으로 해석될 수 있는 반면 낮은 속도의 제스처는 보다 적은 개수의 디스플레이된 데이터 요소들을 확장시키는 것으로 해석될 수 있다. 이와 달리, 낮은 속도의 제스처는 보다 많은 개수의 디스플레이된 데이터 요소들을 확장시키는 것으로 해석될 수 있는 반면 높은 속도의 제스처는 보다 적은 개수의 디스플레이된 데이터 요소들을 확장시키는 것으로 해석될 수 있다. 속도는 제스처의 지속기간 동안 샘플링된 제스처 속도의 평균 속도 계산에 기초하여 해석될 수 있다.
도 4는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 줌인 동작의 일 예를 나타낸다. 다이아그램(400)은 제스처(406)에 응답하는 예시적인 줌인 동작(408)을 나타낸다.
데이터 시각화 애플리케이션은 시각화(402)를 데이터 세트의 막대 차트로 디스플레이할 수 있다. 시각화는 데이터 포인트들 간의 증가분(increments)을 지정하는 시스템 또는 사용자 설정에 기초하여 데이터 포인트들을 제시할 수 있다. 한번의 탭 또는 두 번의 탭 동작을 포함하는 탭 동작과 같은 제스처(406)가 디스플레이된 데이터 요소(404) 상에서 검출될 수 있다. 애플리케이션은 디스플레이된 데이터 요소(404) 상에서 탭 동작을 줌인 동작(408)에 매칭시킬 수 있다.
애플리케이션은 디스플레이된 데이터 요소(404)를 중심으로 사용자 또는 시스템 설정에 의해 제공된 사전결정된 바깥 경계 내에서 줌인 동작을 실행하고 소정 범위의 데이터 요소를 검색할 수 있다. 이 소정 범위의 데이터 요소는 시각화(410)에 디스플레이될 것으로 표시될 수 있다. 이 범위의 바깥 경계는 현재 및 후속하는 줌인 동작에 대한 응답으로서 데이터 내의 이용가능 데이터 요소들에 매칭되도록 동적으로 조정될 수 있다.
탭 동작은 줌인 동작(408)을 개시하는 제스처(406)의 비제한적 예시이다. 스와이프 동작, 음성 명령, 안구 이동 및 이에 필적하는 것들과 같이 줌인 동작(408)을 개시하는데 다른 제스처 유형이 사용될 수 있다. 이와 달리, 시각화 바깥에서 검출된 다른 제스처는 시각화에 디스플레이된 데이터 요소들로부터 줌아웃하기 위한 줌아웃 동작에 매칭될 수 있다. 애플리케이션은 데이터에 대해 줌아웃 동작을 실행할 수 있고 디스플레이된 데이터 요소들을 포함하는 소정 범위의 데이터 요소들을 선택할 수 있다. 이 범위의 바깥 경계는 제스처의 위치에 기초하여 결정될 수 있다. 범위의 바깥 경계는 시각화 밖의 제스처의 위치에 인접한 디스플레이된 데이터 요소를 그 중심으로 둔다. 인접한 위치는 디스플레이된 데이터 요소의 위 또는 아래의 위치일 수 있다. 이와 달리, 인접한 위치는 디스플레이된 데이터 요소의 오른쪽 또는 왼쪽의 위치일 수 있다. 바깥 경계는 최소한 시각화 내의 디스플레이된 모든 데이터 요소들을 포함시켜 결정될 수 있다. 바깥 경계의 범위는 상한값으로서 사전결정된 시스템 또는 사용자 설정값에 의해 결정될 수 있다. 다음으로, 애플리케이션은 그 범위를 디스플레이하도록 시각화를 업데이트한다.
도 5는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 병합 동작의 일 예를 나타낸다. 다이아그램(500)은 병합된 시각화(510)를 디스플레이하기 위해 두 개의 시각화(502,504)의 데이터에 병합 동작을 적용하는 일 예를 나타낸다.
데이터 시각화 애플리케이션은 두 개의 디스플레이된 시각화(502,504)에 대한 병합 동작(512)을 개시하는 다수의 제스처를 검출할 수 있다. 애플리케이션은 제스처(506,508)를 수렴하는 것으로 해석할 수 있다. 두 제스처의 수렴 결정에 응답하여, 병합 동작이 시각화(502,504)의 데이터에 실행될 수 있다. 병합 동작은 시스템 또는 사용자에 의해 정의될 수 있다. 예시적인 시나리오에서, 병합 동작은 시각화(502,504)의 데이터 요소들을 매칭시키고 매칭된 데이터 요소들을 더하여 시각화(510)에 디스플레이될 병합된 데이터 세트에 저장되는 병합된 데이터 요소들을 야기하는 것이다. 데이터 요소들을 매칭시키는 것은 시각화(502,504)와 연관된 데이터 세트의 데이터 요소들의 속성에 기초할 수 있다.
이와 달리, 데이터 시각화 애플리케이션은 자동적으로 매칭되지 않는 데이터 세트의 데이터 요소들에 대한 사용자 입력을 촉구할 수 있다. 또한, 병합 동작은 덧셈, 곱셈, 뺄셈, 나눗셈, 맞춤 방정식 및 이에 필적하는 것을 비롯하여 시스템 또는 사용자에 의해 정의된 임의의 방정식을 포함할 수 있다. 애플리케이션은 이 방정식을 데이터 세트의 데이터 요소에 적용하여 병합된 데이터 세트를 생성할 수 있다. 병합된 데이터의 병합된 시각화(510)가 두 시각화(502,504) 대신에 디스플레이될 수 있다. 또 다른 시나리오에서, 병합 동작은 매칭되는 데이터 요소들에 방정식을 적용하는 대신 병합된 시각화에 서로 인접한 대응하는 시각화 요소를 배치함으로써 매칭되는 데이터 요소들을 결합할 수 있다. 또 다른 시나리오에서, 병합 동작은 매칭되는 데이터 요소들의 일 세트는 막대 차트와 같은 유형의 시각화를 이용하여 렌더링하고 매칭되는 데이터 요소들의 다른 세트는 선 차트와 같은 또 다른 유형의 시각화를 이용하여 렌더링함으로써, 병합된 시각화에 매칭된 데이터 요소들을 결합할 수 있다.
제스처는 병합 동작을 개시하는 멀티 터치 동작에 국한되지 않는다. 핀치 동작, 탭 앤 홀드, 드래드 앤 드롭, 및 이와 유사한 것들과 같은 다른 제스처가 사용되어 둘 이상의 시각화 및 그들의 각각의 데이터를 병합할 수 있다. 이와 달리, 애플리케이션은 분할 동작과 연관된 제스처를 검출하는 것에 응답하여 데이터에 대해 분할 동작을 실행할 수 있다. 분할 동작은 시각화의 기저 데이터로부터 둘 이상의 데이터 세트를 생성할 수 있다. 애플리케이션은 분할 동작에 응답하여 생성된 데이터 세트에 대응하는 시각화를 생성할 수 있다.
도 6은 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 조작하기 위한 스타일 변경 동작의 일 예를 나타낸다. 다이아그램(600)은 시각화(602)의 데이터에 스타일 변경 동작(608)을 적용하는 일 예를 나타낸다.
데이터 시각화 애플리케이션은 제스처(606)를 검출할 수 있고 이 제스처를 스타일 변경 동작(608)에 매칭시킬 수 있다. 사전결정된 제스처 위치 및/또는 제스터 유형 결합은 제스처를 스타일 변경 동작(608)에 매칭시키기 위한 매칭 기준일 수 있다. 스타일 변경 동작은 데이터와 연관된 저장된 시각화 속성을 변경시킬 수 있다. 애플리케이션은 데이터의 또 다른 시각화 속성에 기초하여 시각화를 리드로(redraw)할 수 있다. 시각화(604)는 스타일 변경 동작(608)의 실행을 반영하도록 디스플레이될 수 있다.
스타일 변경 동작(608)은 데이터 요소들에 대응하는 시각화 요소를 변경할 수 있다. 스타일 변경 동작(608)은 또한 시각화 유형을 변경할 수 있다. 예시적인 시나리오에서, 막대 차트는 파이 차트로 변환될 수 있다. 시각화 요소들 또는 시각화의 컬러, 음영, 깊이, 형상, 강조 및 이에 필적하는 속성들이 스타일 변경 동작(608)에 의해 변경될 수 있다. 스타일 변경 동작(608)에 대한 명령어는 사용자 또는 시스템 구성가능할 수 있다.
실시예들은 제스처에 응답하여 시각화의 데이터에 적용된 동작에 기초하여 시각화를 자동으로 업데이트하는 것에 국한되지 않는다. 다른 실시예는 애플리케이션이 제스처와 연관된 동작을 결정할 수 없는 경우 시각화의 데이터에 대해 실행할 하나 이상의 동작을 자동으로 제안(자동 제안)할 수 있다. 애플리케이션은 자동 제안 옵션으로서 검출된 제스처에 관련된 동작들을 선택하기 위해 이전 동작들의 이력을 검색할 수 있다. 자동 제안 기능은 시각화에 대한 잠재적 업데이트의 동작가능 텍스트 설명(actionable text descriptions)으로서 동작 옵션들을 제시할 수 있다. 임의의 동작가능 텍스트 설명의 선택은 연관된 동작을 실행할 수 있고 실행된 동작에 응답하여 시각화를 업데이트할 수 있다. 이와 달리, 자동 제안 기능은 시각화에 대한 잠재적 업데이트의 동작가능 그래픽 표현을 제공할 수 있다. 임의의 동작가능 그래픽 표현의 선택은 연관된 동작을 실행할 수 있고 실행된 동작에 응답하여 시각화를 업데이트할 수 있다. 또한, 시각화의 스타일은 데이터, 시각화, 사용자 및 사용 이력의 컨텍스트 정보에 기초하여 애플리케이션에 의해 자동으로 선택될 수 있다.
도 2 내지 도 6에서의 예시적인 시나리오 및 기법은 특정 컴포넌트, 데이터 유형 및 구성 관련하여 설명되었다. 실시예들은 이들 예시적인 구성에 따른 시스템에 국한되지는 않는다. 상호작용에 기초하여 시각화 데이터를 자동적으로 조작하는 것은 애플리케이션 및 사용자 인터페이스에서 보다 적은 또는 보다 많은 컴포넌트를 이용하는 구성으로 구현될 수 있다. 또한, 도 2 내지 도 6에 도시된 예시적인 기법 및 컴포넌트와 이들의 서브컴포넌트는 본 명세서에서 기술한 원리를 사용하는 다른 값을 이용하여 유사한 방식으로 구현될 수 있다.
도 7은 실시예들에 따른 시스템이 구현될 수 있는 예시적인 네트워크 환경이다. 로컬 및 원격 리소스는 하나 이상의 서버(714) 또는 호스트형 서비스와 같은 단일 서버(예컨대, 웹 서버)(716)에 의해 제공될 수 있다. 애플리케이션은 스마트폰(713), 태블릿 장치(712) 또는 랩탑 컴퓨터(711)('클라이언트 장치')와 같은 개별 컴퓨팅 장치 상에서 실행될 수 있고 네트워크(들)(710)를 통해 콘텐츠 리소스와 통신할 수 있다.
앞서 설명한 바와 같이, 데이터 시각화 애플리케이션은 시각화된 데이터를 상호작용에 기초하여 자동으로 조작할 수 있다. 애플리케이션은 디스플레이된 시각화 상에서 터치 동작과 같은 검출된 제스처와 연관된 동작을 결정할 수 있다. 이 동작은 기본적인 데이터에 대해 실행될 수 있다. 애플리케이션은 데이터의 변경사항을 이용하여 시각화를 업데이트할 수 있다. 클라이언트 장치(711-713)는 앞서 설명한 바와 같이 원격 서버(들)(예를 들어, 서버들(714) 중 하나)에서 실행되는 애플리케이션에 대한 액세스를 가능하게 할 수 있다. 서버(들)는 데이터베이스 서버(718)를 통해 또는 직접적으로 데이터 저장소(들)(719)로부터/로 관련 데이터를 인출 또는 저장할 수 있다.
네트워크(들)(710)는 서버, 클라이언트, 인터넷 서비스 제공자, 및 통신 매체의 임의의 토폴로지를 포함할 수 있다. 실시예들에 따른 시스템은 정적 또는 동적 토폴로지를 가질 수 있다. 네트워크(들)(710)는 기업 네트워크와 같은 보안 네트워크, 무선 개방 네트워크와 같은 비보안 네트워크(unsecure network), 또는 인터넷을 포함할 수 있다. 네트워크(들)(710)는 또한 PSTN(Public Switched Telephone Network) 또는 셀룰러 네트워크와 같은 다른 네트워크를 통해 통신을 조정할 수도 있다. 또한, 네트워크(들)(710)는 블루투스 등과 같은 단거리 무선 네트워크를 포함할 수 있다. 네트워크(들)(710)는 본 명세서에 기술된 노드들 사이의 통신을 제공한다. 예컨대, 네트워크(들)(710)는 음향, RF, 적외선 및 기타 무선 매체와 같은 무선 매체를 포함할 수 있다.
시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는데 컴퓨팅 장치, 애플리케이션, 데이터 소스, 및 데이터 분산 시스템의 많은 다른 구성이 이용될 수 있다. 또한, 도 7에 논의된 네트워크 환경은 단지 예를 들기 위한 것이다. 실시예들은 예시적인 애플리케이션, 모듈, 또는 프로세스에 한정되지 않는다.
도 8 및 관련 논의는 실시예들이 구현될 수 있는 적절한 컴퓨팅 환경에 대한 간략한 일반적인 설명을 제공하기 위한 것이다. 도 8을 참고하면, 컴퓨팅 장치(800)와 같은, 실시예들에 따른 애플리케이션에 대한 예시적인 컴퓨팅 동작 환경의 블록도가 도시되어 있다. 기본 구성으로, 컴퓨팅 장치(800)는 적어도 하나의 처리 장치(802) 및 시스템 메모리(804)를 포함할 수 있다. 컴퓨팅 장치(800)는 또한 프로그램 실행시 협업하는 복수의 처리 장치를 포함할 수 있다. 컴퓨팅 장치의 정확한 구성 및 유형에 따라, 시스템 메모리(804)는 휘발성(예컨대, RAM), 비휘발성(예컨대, ROM, 플래시 메모리 등) 또는 이 둘의 일부 조합일 수 있다. 시스템 메모리(804)는 통상적으로, 워싱턴 레드몬드에 위치한 마이크로소프트사의 WINDOWS®, 또는 WINDOWS PHONE® 운영 체제와 같은 플랫폼의 운영을 제어하는데 적합한 운영 체제(805)를 포함한다. 시스템 메모리(804)는 또한 프로그램 모듈(806), 데이터 시각화 애플리케이션(822) 및 상호작용 모듈(824)과 같은 하나 이상의 소프트웨어 애플리케이션을 포함할 수 있다.
데이터 시각화 애플리케이션(822)은 디스플레이된 시각화와 상호작용하는 제스처를 검출할 수 있다. 상호작용 모듈(824)은 축소, 확장, 합병, 분할, 줌인, 줌아웃 및 스타일 변경 동작과 같은 동작을 결정할 수 있다. 데이터 시각화 애플리케이션(822)은 시각화의 데이터에 대해 그 동작을 실행할 수 있고 데이터 세트에 대해 실행된 동작과 연관된 변경을 디스플레이하도록 시각화를 업데이트할 수 있다. 이 기본 구성은 도 8에 점선(808) 내의 컴포넌트들로 도시되어 있다.
컴퓨팅 장치(800)는 부가적인 특징 또는 기능을 가질 수 있다. 예를 들어, 컴퓨팅 장치(800)는 또한, 예컨대 자기 디스크, 광 디스크, 또는 테이프와 같은 부가적인 데이터 저장 장치(착탈식 및/또는 비착탈식)를 포함할 수 있다. 이러한 부가적인 저장소는 도 8에 착탈식 저장소(809) 및 비착탈식 저장소(810)로 도시되어 있다. 컴퓨터 판독 가능 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 기타 데이터와 같은 정보의 저장을 위해 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 착탈식 및 비착탈식 매체를 포함할 수 있다. 컴퓨터 판독가능 저장 매체는 컴퓨터 판독가능 메모리 장치이다. 시스템 메모리(804), 착탈식 저장소(809) 및 비착탈식 저장소(810)는 모두 컴퓨터 판독가능 저장 매체의 예들이다. 컴퓨터 판독가능 저장 매체는, RAM, ROM, EEPROM, 플래시 메모리 또는 기타 메모리 기술, CD-ROM, DVD(digital versatile disk) 또는 기타 광학 저장부, 자기 카세트, 자기 테이프, 자기 디스크 저장부 또는 기타 자기 저장 장치, 또는 원하는 정보를 저장하는데 사용될 수 있고 컴퓨팅 장치(800)에 의해 액세스될 수 있는 임의의 다른 매체를 포함할 수 있지만, 이들로 한정되지는 않는다. 임의의 그러한 컴퓨터 판독가능 저장 매체는 컴퓨팅 장치(800)의 일부일 수 있다. 컴퓨팅 장치(800)는 또한 키보드, 마우스, 펜, 음성 입력 장치, 터치 입력 장치, 및 이에 필적하는 입력 장치와 같은 입력 장치(들)(812)를 가질 수 있다. 디스플레이, 스피커, 프린터 및 그 밖의 다른 유형의 출력 장치와 같은 출력 장치(들)(814)가 포함될 수도 있다. 이들 장치는 모두 당해 기술분야에 공지되어 있으므로 여기서 길게 논의할 필요는 없을 것이다.
컴퓨팅 장치(800)는 장치가, 예컨대 분산 컴퓨팅 환경에서의 무선 네트워크, 위성 링크, 셀룰러 링크 및 이에 필적하는 유사한 메커니즘을 통해 다른 장치(818)와 통신할 수 있게 하는 통신 연결부(816)도 포함할 수 있다. 다른 장치(818)는 통신 애플리케이션을 실행하는 컴퓨터 장치(들), 저장 서버, 및 이에 필적하는 장치를 포함할 수 있다. 통신 연결부(816)는 통신 매체의 일례이다. 통신 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 기타 데이터를 반송파 또는 다른 운송 메카니즘과 같은 변조된 데이터 신호에 포함할 수 있고, 임의의 정보 전달 매체를 포함할 수 있다. "변조된 데이터 신호"라는 용어는 신호 내에 정보를 인코딩하도록 그 신호의 특성 중 하나 이상이 설정 또는 변경된 신호를 의미한다. 제한이 아닌 예로서, 통신 매체는 유선 네트워크 또는 직접 유선 접속과 같은 유선 매체, 및 음향, RF, 적외선 및 기타 무선 매체와 같은 무선 매체를 포함한다.
예시적인 구현예들은 또한 방법을 포함한다. 이들 방법은 본 명세서에 기술된 구조를 포함하는 임의의 수의 방법으로 구현될 수 있다. 한가지 그러한 방법은 본 명세서에 기술된 유형의 장치의 기계 동작에 의한 것이다.
다른 선택적 방법은 방법의 개별 동작들 중 하나 이상이 수행되고 하나 이상의 인간 조작자가 그 일부를 수행하는 것이다. 이들 인간 조작자는 서로 같은 위치에 있을 필요가 없고, 각자가 프로그램의 일부를 수행하는 머신과 같이 있기만 하면 된다.
도 9는 실시예에 따라 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 프로세스에 대한 논리적 흐름도이다. 프로세스(900)는 일부 예에서 데이터 시각화 애플리케이션에 구현될 수 있다.
프로세스(900)는 동작(910)으로 시작하는데, 이 동작(910)에서 데이터 시각화 애플리케이션은 데이터의 시각화를 디스플레이할 수 있다. 시각화는 데이터의 그래프, 차트 및 이에 필적하는 것일 수 있다. 동작(920)에서, 시각화와의 상호작용시 제스처가 검출될 수 있다. 제스처는 터치, 키보드, 펜, 마우스, 시각, 음성, 안구 추적 및 이에 필적하는 것을 포함한 다양한 입력 유형을 포함할 수 있다. 다음으로, 애플리케이션은 동작(930)에서 제스처와 연관된 동작을 결정할 수 있다. 제스처는 축소, 확장, 줌인, 줌아웃, 병합, 분할 또는 스타일 변경 동작에 매칭될 수 있다.
동작(940)에서 데이터 시각화 애플리케이션은 시각화의 데이터에 대해 동작을 실행할 수 있다. 데이터는 그 실행에 응답하여 변경될 수 있다. 동작(950)에서 시각화는 데이터에 대해 실행된 동작과 연관된 변경을 디스플레이하도록 업데이트될 수 있다.
일부 실시예는 통신 모듈, 메모리 및 프로세서를 포함하는 컴퓨팅 장치에서 구현될 수 있는데, 프로세서는 메모리에 저장된 명령어와 연계하여 전술한 방법 또는 이에 필적하는 것을 실행한다. 다른 실시예는 전술한 방법 또는 이와 유사한 것을 실행하는 명령어들이 저장되어 있는 컴퓨터 판독가능 저장 매체로서 구현될 수 있다.
프로세서(900)에 포함된 동작들은 예시 목적이다. 실시예에 따라, 상호작용에 기초하여 시각화 데이터를 자동으로 조작하는 것은 본 명세서에서 설명된 원리를 사용하여 보다 적은 또는 보다 많은 단계를 가지는, 또한 다른 동작 순서를 갖는 유사한 프로세스에 의해 구현될 수 있다.
전술한 설명, 예시 및 데이터는 실시예들의 구성요소들의 제작 및 사용에 대한 완전한 설명을 제공한다. 본 발명은 구조적 특징 및/또는 방법론적 동작에 특정한 언어로 기술되었지만, 첨부한 청구항에 정의된 본 발명은 전술한 바와 같은 특정 특징 또는 동작들에 반드시 국한될 필요는 없다. 그 보다, 전술한 특정 특징 및 동작들은 청구 대상 및 실시예를 구현하기 위한 예시적인 형식으로 개시되어 있다.
Claims (10)
- 시각화된 데이터(visualized data)를 상호작용에 기초하여 자동으로 조작하기 위해 컴퓨팅 장치에서 수행되는 방법으로서,
시각화(visualization)를 디스플레이하는 단계와,
상기 시각화 상에서의 제스처를 검출하는 단계와,
상기 제스처와 연관된 동작을 결정하는 단계와,
상기 시각화의 데이터에 대해 상기 동작을 수행하는 단계와,
상기 데이터에 대한 상기 수행된 동작과 연관된 변경을 디스플레이하도록 상기 시각화를 업데이트하는 단계
를 포함하는 방법.
- 제1항에 있어서,
상기 제스처와 연관된 동작을 결정하는 단계는
확장, 축소, 병합, 분할, 줌인, 줌아웃 및 스타일 변경 중 하나를 상기 제스처에 매칭시키는 단계를 포함하는 방법.
- 제1항에 있어서,
상기 제스처를 핀치 동작(pinch action)으로 해석하는 단계와,
상기 핀치 동작을 축소 동작에 매칭시키는 단계
를 더 포함하는 방법.
- 제1항에 있어서,
상기 제스처를 벌리는 동작(spread action)으로 해석하는 단계와,
상기 벌리는 동작을 확장 동작(expansion operation)에 매칭시키는 단계
를 더 포함하는 방법.
- 제1항에 있어서,
상기 시각화의 디스플레이된 데이터 요소에 대해 상기 제스처를 줌인 동작에 매칭시키는 단계를 더 포함하는 방법.
- 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하기 위한 컴퓨팅 장치로서,
명령어를 저장하도록 구성된 메모리와,
상기 메모리에 연결되며, 상기 메모리에 저장된 명령어와 연계하여 데이터 시각화 애플리케이션를 실행하는 프로세서
를 포함하되,
상기 시각화 애플리케이션은
시각화를 디스플레이하고,
상기 시각화 상에서의 제1 제스처를 검출하고,
확장, 축소, 병합, 분할, 줌인, 줌아웃 및 스타일 변경 중 하나를 포함하는 동작을 상기 제스처에 매칭시키고,
상기 시각화의 데이터에 대해 상기 동작을 수행하고,
상기 데이터에 대한 상기 수행된 동작과 연관된 변경을 디스플레이하도록 상기 시각화를 업데이트하도록 구성된
컴퓨팅 장치.
- 제6항에 있어서,
상기 애플리케이션은
또 다른 시각화 상에서 상기 제1 제스처와 동시에 제2 제스처를 검출하고,
상기 제1 제스처와 상기 제2 제스처를 수렴하는 것으로 해석하며,
상기 제1 제스처와 상기 제2 제스처를 병합 동작에 매칭시키도록
더 구성되는 컴퓨팅 장치.
- 제7항에 있어서,
상기 애플리케이션은
상기 시각화 및 상기 또 다른 시각화의 데이터 요소들을 매칭시키고,
덧셈, 곱셈, 뺄셈, 나눗셈 및 맞춤 방정식 중 적어도 하나를 포함하는 방정식을 상기 또 다른 시각화 및 상기 시각화의 상기 매칭된 데이터 요소들에 적용하여 병합된 데이터를 생성하며,
상기 병합된 데이터의 병합된 시각화를 디스플레이함으로써,
상기 병합 동작을 실행하도록 더 구성되는
컴퓨팅 장치.
- 제6항에 있어서,
상기 애플리케이션은 상기 제1 제스처의 위치 및 상기 제1 제스처의 유형에기초하여 상기 제1 제스처를 스타일 변경 동작에 매칭시키도록 더 구성된
컴퓨팅 장치.
- 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하기 위한 명령어가 저장되어 있는 컴퓨터 판독가능 메모리 장치로서,
상기 명령어는
시각화를 디스플레이하는 단계와,
상기 시각화 상에서의 제스처를 검출하는 단계와,
확장, 축소, 병합, 분할, 줌인, 줌아웃 및 스타일 변경 중 하나를 포함하는 동작을 상기 제스처에 매칭시키는 단계와,
상기 동작을 자동으로 결정할 수 없다는 것에 응답하여 상기 동작을 결정하기 위한 사용자 입력을 촉구하는 단계와,
상기 시각화의 데이터에 대해 상기 동작을 수행하는 단계와,
상기 데이터에 대한 상기 수행된 동작과 연관된 변경에 기초하여 상기 시각화의 유형 및 스타일을 자동으로 선택하면서 상기 변경을 디스플레이하도록 상기 시각화를 업데이트하는 단계
를 수행하는 컴퓨터 판독가능 메모리 장치.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US13/874,216 | 2013-04-30 | ||
| US13/874,216 US20140325418A1 (en) | 2013-04-30 | 2013-04-30 | Automatically manipulating visualized data based on interactivity |
| PCT/US2014/035985 WO2014179377A1 (en) | 2013-04-30 | 2014-04-30 | Automatically manipulating visualized data based on interactivity |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20160003683A true KR20160003683A (ko) | 2016-01-11 |
Family
ID=50942803
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020157031232A KR20160003683A (ko) | 2013-04-30 | 2014-04-30 | 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 기법 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US20140325418A1 (ko) |
| EP (1) | EP2992411A1 (ko) |
| KR (1) | KR20160003683A (ko) |
| CN (1) | CN105247469A (ko) |
| TW (1) | TW201445421A (ko) |
| WO (1) | WO2014179377A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190044400A (ko) * | 2017-10-20 | 2019-04-30 | 주식회사 뉴스젤리 | 탐색적 데이터 시각화 시스템 및 그 방법 |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5908886B2 (ja) * | 2010-04-09 | 2016-04-26 | ライフ テクノロジーズ コーポレーション | ｑＰＣＲ遺伝子型決定データ用の視覚化ツール |
| US10235038B2 (en) * | 2013-09-03 | 2019-03-19 | Samsung Electronics Co., Ltd. | Electronic system with presentation mechanism and method of operation thereof |
| US9208596B2 (en) * | 2014-01-13 | 2015-12-08 | International Business Machines Corporation | Intelligent merging of visualizations |
| US20150355780A1 (en) * | 2014-06-06 | 2015-12-10 | Htc Corporation | Methods and systems for intuitively refocusing images |
| US20160162165A1 (en) * | 2014-12-03 | 2016-06-09 | Harish Kumar Lingappa | Visualization adaptation for filtered data |
| CN104484143B (zh) * | 2014-12-04 | 2018-04-10 | 国家电网公司 | 一种用于显示屏矩阵的单数据多模式展示系统 |
| CN106896998B (zh) * | 2016-09-21 | 2020-06-02 | 阿里巴巴集团控股有限公司 | 一种操作对象的处理方法及装置 |
| CN107451273B (zh) * | 2017-08-03 | 2020-05-12 | 网易（杭州）网络有限公司 | 图表展示方法、介质、装置和计算设备 |
| CN108491078B (zh) * | 2018-03-19 | 2021-06-15 | 广州视源电子科技股份有限公司 | 一种文字处理方法、装置、终端设备和存储介质 |
| CN109806583B (zh) * | 2019-01-24 | 2021-11-23 | 腾讯科技（深圳）有限公司 | 用户界面显示方法、装置、设备及系统 |
| CN110245586A (zh) * | 2019-05-28 | 2019-09-17 | 贵州卓霖科技有限公司 | 一种基于手势识别的数据统计方法、系统、介质及设备 |
| CN111159975B (zh) * | 2019-12-31 | 2022-09-23 | 联想(北京)有限公司 | 一种显示方法及装置 |
| CN111259637A (zh) * | 2020-01-13 | 2020-06-09 | 北京字节跳动网络技术有限公司 | 数据处理方法、装置、计算机设备和存储介质 |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070277118A1 (en) * | 2006-05-23 | 2007-11-29 | Microsoft Corporation Microsoft Patent Group | Providing suggestion lists for phonetic input |
| US8065603B2 (en) * | 2007-04-30 | 2011-11-22 | Google Inc. | Hiding portions of display content |
| US8681104B2 (en) * | 2007-06-13 | 2014-03-25 | Apple Inc. | Pinch-throw and translation gestures |
| US8201109B2 (en) * | 2008-03-04 | 2012-06-12 | Apple Inc. | Methods and graphical user interfaces for editing on a portable multifunction device |
| US8368699B2 (en) * | 2009-02-25 | 2013-02-05 | Mellmo Inc. | Displaying bar charts with a fish-eye distortion effect |
| JP2011066850A (ja) * | 2009-09-18 | 2011-03-31 | Fujitsu Toshiba Mobile Communications Ltd | 情報通信端末 |
| US8799775B2 (en) * | 2009-09-25 | 2014-08-05 | Apple Inc. | Device, method, and graphical user interface for displaying emphasis animations for an electronic document in a presentation mode |
| US8957918B2 (en) * | 2009-11-03 | 2015-02-17 | Qualcomm Incorporated | Methods for implementing multi-touch gestures on a single-touch touch surface |
| US8627230B2 (en) * | 2009-11-24 | 2014-01-07 | International Business Machines Corporation | Intelligent command prediction |
| US8786559B2 (en) * | 2010-01-06 | 2014-07-22 | Apple Inc. | Device, method, and graphical user interface for manipulating tables using multi-contact gestures |
| US20110209058A1 (en) * | 2010-02-25 | 2011-08-25 | Microsoft Corporation | Multi-screen hold and tap gesture |
| JP5413673B2 (ja) * | 2010-03-08 | 2014-02-12 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
| US9747270B2 (en) * | 2011-01-07 | 2017-08-29 | Microsoft Technology Licensing, Llc | Natural input for spreadsheet actions |
| US9239674B2 (en) * | 2010-12-17 | 2016-01-19 | Nokia Technologies Oy | Method and apparatus for providing different user interface effects for different implementation characteristics of a touch event |
| US20120210261A1 (en) * | 2011-02-11 | 2012-08-16 | Apple Inc. | Systems, methods, and computer-readable media for changing graphical object input tools |
| US9256361B2 (en) * | 2011-08-03 | 2016-02-09 | Ebay Inc. | Control of search results with multipoint pinch gestures |
| US20130074003A1 (en) * | 2011-09-21 | 2013-03-21 | Nokia Corporation | Method and apparatus for integrating user interfaces |
| US9971849B2 (en) * | 2011-09-29 | 2018-05-15 | International Business Machines Corporation | Method and system for retrieving legal data for user interface form generation by merging syntactic and semantic contraints |
| EP2584746A1 (en) * | 2011-10-17 | 2013-04-24 | Research In Motion Limited | Methods and devices for creating a communications log and visualisations of communications across multiple services |
| JP5846887B2 (ja) * | 2011-12-13 | 2016-01-20 | 京セラ株式会社 | 携帯端末、編集制御プログラムおよび編集制御方法 |
| WO2013170341A1 (en) * | 2012-05-18 | 2013-11-21 | Research In Motion Limited | Systems and methods to manage zooming |
| KR102014776B1 (ko) * | 2012-08-23 | 2019-10-21 | 엘지전자 주식회사 | 이동단말기 및 그 제어 방법 |
-
2013
- 2013-04-30 US US13/874,216 patent/US20140325418A1/en not_active Abandoned
-
2014
- 2014-04-18 TW TW103114292A patent/TW201445421A/zh unknown
- 2014-04-30 WO PCT/US2014/035985 patent/WO2014179377A1/en active Application Filing
- 2014-04-30 CN CN201480024258.3A patent/CN105247469A/zh active Pending
- 2014-04-30 KR KR1020157031232A patent/KR20160003683A/ko not_active Application Discontinuation
- 2014-04-30 EP EP14730266.5A patent/EP2992411A1/en not_active Withdrawn
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190044400A (ko) * | 2017-10-20 | 2019-04-30 | 주식회사 뉴스젤리 | 탐색적 데이터 시각화 시스템 및 그 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| TW201445421A (zh) | 2014-12-01 |
| US20140325418A1 (en) | 2014-10-30 |
| CN105247469A (zh) | 2016-01-13 |
| WO2014179377A1 (en) | 2014-11-06 |
| EP2992411A1 (en) | 2016-03-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR20160003683A (ko) | 시각화된 데이터를 상호작용에 기초하여 자동으로 조작하는 기법 | |
| US10067635B2 (en) | Three dimensional conditional formatting | |
| EP2699998B1 (en) | Compact control menu for touch-enabled command execution | |
| US20120185787A1 (en) | User interface interaction behavior based on insertion point | |
| US20170277381A1 (en) | Cross-platform interactivity architecture | |
| US20140331179A1 (en) | Automated Presentation of Visualized Data | |
| EP3008620B1 (en) | Tethered selection handle | |
| KR20160044487A (ko) | E-리더 애플리케이션에서 고정 포맷 문서를 네비게이팅하는 기법 | |
| US9377864B2 (en) | Transforming visualized data through visual analytics based on interactivity | |
| CN107615229B (zh) | 用户界面装置和用户界面装置的画面显示方法 | |
| KR101769129B1 (ko) | 온라인 환경에서 구현되는 대시보드 내 차트간 인터랙션 방법 | |
| US11132821B1 (en) | Providing graphical user interface tools for efficiently selecting handles in vector artwork on touch-based devices | |
| NZ613149B2 (en) | User interface interaction behavior based on insertion point |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |