KR20090084927A - 가상 환경에서의 뷰 및 포인트 네비게이션 - Google Patents

가상 환경에서의 뷰 및 포인트 네비게이션 Download PDF

Info

Publication number
KR20090084927A
KR20090084927A KR1020097011795A KR20097011795A KR20090084927A KR 20090084927 A KR20090084927 A KR 20090084927A KR 1020097011795 A KR1020097011795 A KR 1020097011795A KR 20097011795 A KR20097011795 A KR 20097011795A KR 20090084927 A KR20090084927 A KR 20090084927A
Authority
KR
South Korea
Prior art keywords
input
view
virtual environment
interest
mouse
Prior art date
Application number
KR1020097011795A
Other languages
English (en)
Other versions
KR101039167B1 (ko
Inventor
윌리암 파간
Original Assignee
인터내셔널 비지네스 머신즈 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인터내셔널 비지네스 머신즈 코포레이션 filed Critical 인터내셔널 비지네스 머신즈 코포레이션
Publication of KR20090084927A publication Critical patent/KR20090084927A/ko
Application granted granted Critical
Publication of KR101039167B1 publication Critical patent/KR101039167B1/ko

Links

Images

Classifications

    • A63F13/10—
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5252—Changing parameters of virtual cameras using two or more virtual cameras concurrently or sequentially, e.g. automatically switching between fixed virtual cameras when a character changes room or displaying a rear-mirror view in a car-driving game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/837—Shooting of targets
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A63F2300/6669—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera using a plurality of virtual cameras concurrently or sequentially, e.g. automatically switching between fixed virtual cameras when a character change rooms
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A63F2300/6676—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera by dedicated player input

Abstract

동시 뷰 및 포인트 네비게이션 방법은 비행 시뮬레이터, 1인칭 또는 3인칭 슈터 게임 또는 아바타-조정 어드벤처 게임과 같은 단일 가상 환경의 상이한 기하학적인 평면에 각각 대응하는 독립적인 제1 및 제2 뷰를 유지하는 단계를 포함한다. 본 방법은 제1 입력 장치로부터의 제1 입력 지시에 응답하여 제1 뷰를 독립적으로 변경하는 동안 이와 동시에 제2 입력 장치로부터의 제2 입력 지시에 응답하여 제2 뷰를 변경하는 단계를 포함한다. 그 후에, 본 방법은 제1 및 제2 입력 장치 중 하나로부터의 제3 입력 지시에 응답하여 뷰들 중 하나의 관심 지점을 수정하는 단계를 포함한다. 본 장치는 듀얼-포인터 마우스의 일부로서 포함되는 마우스-하부 센서 및 트랙포인트를 포함할 수 있다.
동시 뷰 및 포인트 네비게이션, 가상 환경, 비행 시뮬레이터, 슈터 게임

Description

가상 환경에서의 뷰 및 포인트 네비게이션{VIEW AND POINT NAVIGATION IN A VIRTUAL ENVIRONMENT}
본 발명은 가상 환경 분야에 관한 것으로, 보다 구체적으로는 가상 환경에서 상이한 지리적 평면의 관찰 및 제어를 동시에 수행하는 것에 관한 것이다.
그래픽 디스플레이 및 고성능 컴퓨팅의 극적인 발전은 수십억의 데이터 비트를 실시간으로 조작할 수 있는 쌍방향, 3차원 이미지로 변환할 수 있게 하였다. 가상 환경(Virtual Environments)은, 이와 같은 변환을 가능하게 하는 모든 디스플레이 및 피드백 장치를 통칭한다. 마우스와 키보드는 사용자가 가상 환경에서 상호작용할 수 있게 하는 대중적인 입력 장치이다. 대안적인 입력 장치는 트랙볼, 터치패드, 포인팅 스틱, 완드 및 글로브(wands and gloves)를 포함한다.
처음에 군사적 목적으로 개발된 비행 시뮬레이터(flight simulator)는 가상 환경의 가장 영향력이 있는 선례 중의 하나이다. 군사용 비행 시뮬레이션 시스템에서, 소프트웨어, 하드웨어 및 동작-제어 플랫폼의 조합은 조종사가 매우 상세한 가상 세계 속을 네비게이션할 수 있도록 한다. 비행 시뮬레이션의 통합 컴포넌트는 창밖의 시각적 장면이다. 과거 수십년에 걸쳐서, 가상 환경은 가장 발전되고 자금이 풍부한 조직의 점유물이었지만, 현재는 낮은 비용으로 통상적인 비디오 게 이머 및 개인용 컴퓨터 사용자에게도 광범위하게 사용가능하다. 오늘날 비행 시뮬레이터뿐만 아니라 1인칭 슈터 게임 및 아바타-조정 오락 게임(avatar-driven amusement games)을 개인용 컴퓨팅 환경뿐만 아니라 개인용 비디오 게임 환경에서도 볼 수 있다.
마우스 입력 및 키보드 입력의 조합은 1인칭 슈터 게임 및 3인칭 슈터 게임 등을 플레이할 수 있는 대중적인 방법을 제공한다. 1인칭 슈터 게임은 플레이어(아바타)가 1인칭 시점(first-person perspective)에서 관찰되는 가상 환경에 놓여 있는 컴퓨터 및 비디오 게임의 장르를 나타낸다. 시점(perspective)은 플레이어에게 가상으로 "거기에 있다(being there)"는 느낌을 주고, 플레이어가 표적에 집중할 수 있도록 되어있다. 마찬가지로, 3인칭 슈터 게임은 가상으로 "거기에 있다"는 느낌을 제공하는 것과 유사하게 "어깨 너머의(over the shoulder)" 시점으로 아바타의 동작을 제공한다. 대부분의 최신 1인칭 및 3인칭 슈터 게이머는 게임 제어 및 네비게이션의 수단으로서 QWERTY 키보드 기능과 마우스 기능의 조합을 활용한다.
통상적으로, 1인칭 슈터 환경에서 아바타를 제어할 때, 사용자의 한 손은 플레이어가 조준하고 플레이어의 시야를 수평 및 수직으로 회전시킬 수 있게 하는 "프리 룩(free look)"을 위해서 사용되는 마우스를 동작시킨다. 제1 마우스 버튼은 주요 "발사" 기능을 위해서 사용되고, 마우스의 임의의 추가적인 버튼은 제2 발사 기능과 같은 다른 기능을 수행한다. 키보드 상에서, W, A, S, D와 같은 키는 전진, 후진 및 사이드-투-사이드(플레이어들 사이에서는 주로 "스트래핑(strafing)" 으로 알려져 있음) 왼쪽 및 오른쪽 움직임을 제공한다. 다른 근방의 키들은, 몇 개만 언급하자면 점프, 줍기, 무기 떨어트리기와 같은 추가적인 기능을 수행한다.
통상적인 1인칭 및 3인칭 슈터 게임에서, 네비게이션은 3차원에서 제공되고, 시점은 "프리 룩" 또는 "마우스 룩(mouse look)"을 통해 3차원에서 제공된다. 그러나, 발사를 위한 관심 초점(focal point of interest)("크로스 헤어(cross hair)")은, 이미 네비게이션 뷰 및 프리 룩에 맞도록 설정된 마우스의 사용과 키보드의 선택된 부분으로 인해서 기존의 뷰에 고정되는 것으로 되어 있다. 물론, 키보드의 많은 다른 부분이 포커스 지점(point of focus)을 관리하는데 사용가능하지만, 게이머들은 가상 환경에서 게임할 때 마우스와 키보드에 대한 그들의 손 움직임을 바꾸는 것을 싫어한다.
본 발명의 실시예는 가상 환경에서의 향상된 네비게이션에 대한 선행기술의 부족한 점을 개시하고 동시 뷰 및 포인트 네비게이션(simultaneous view and point navigation)을 위한 신규하고, 비자명한 방법, 시스템, 컴퓨터 프로그램 제품을 제공한다. 본 발명의 제1 실시예에서, 단일 가상 환경 상호작용(single virtual environment interaction) 방법이 제공된다. 본 방법은, 비행 시뮬레이터, 1인칭 또는 3인칭 슈터 게임 또는 아바타-조종 어드벤처 게임과 같은 단일 가상 환경에서, 기하학적으로 상이한 평면에 각각 대응하는 독립적인 제1 및 제2 뷰를 유지하는 것을 포함한다.
제1 뷰는 제1 입력 장치로부터의 제1 입력 지시에 응답하여 독립적으로 변경될 수 있고, 이와 동시에 제2 뷰는 제2 입력 장치로부터의 제2 입력 지시에 응답하여 변경될 수 있다. 중요하게도, 제1 및 제2 입력 장치 중 하나로부터의 제3 입력 지시에 응답하여 뷰들 중 하나의 관심 초점이 동시에 수정될 수 있다. 예를 들어, 제1 뷰가 듀얼-포인터 마우스로부터의 마우스-하부 입력에 응답하여 변경되는 동안, 제2 뷰의 관심 초첨이 듀얼-포인터 마우스로부터의 트랙포인트 입력에 응답하여 동시에 수정될 수 있다.
본 발명의 다른 실시예에서, 동시 뷰 및 포인트 네비게이션 데이터 처리 시스템이 제공될 수 있다. 본 시스템은 가상 환경과의 상호작용 및 단일 호스트 컴퓨팅 플랫폼에 부착된 동시 뷰 제어 로직을 지원하기 위하여 구성된 단일 호스트 컴퓨팅 플랫폼과 각각 결합되는 제1 및 제2 입력 장치를 포함할 수 있다. 로직은 제1 입력 장치로부터의 제1 입력 지시에 응답하여 가상 환경에서의 제1 기하학적인 평면에 대한 제1 뷰를 독립적으로 변경하고 이와 동시에 제2 입력 장치로부터의 제2 입력 지시에 응답하여 가상 환경에서의 제2 기하학적인 평면에 대한 제2 뷰를 변경하며 제1 입력 장치 및 제2 입력 장치 중 하나로부터의 제3 입력 지시에 응답하여 뷰들 중 하나의 관심 지점을 수정할 수 있는 프로그램 코드를 포함할 수 있다.
본 발명의 다른 태양은 아래의 설명에서 부분적으로 개시될 것이고, 부분적으로는 본 설명으로부터 명백해지거나, 또는 본 발명의 실시에 의해서 습득될 수 있을 것이다. 본 발명의 태양은 첨부된 청구항에 구체적으로 기재된 구성요소 및 그 조합에 의해서 구체화되고 성취될 것이다. 다음의 일반적인 설명 및 상세한 설명은 모두 예시일뿐이고 본 발명을 제한하지 않는다는 것을 이해할 수 있다.
본 발명의 실시예는, 첨부된 도면을 참조하여 오직 예시의 방식으로 개시될 것이다.
도 1은 동시 뷰 및 포인트 네비게이션 시스템의 개략도.
도 2는 동시에 적용되는 개별적인 입력 지시가 단일 가상 환경의 대응하는 개별적인 뷰를 네비이게이션하는 동안 뷰들 중 하나에 포커스 지점을 제공하는 가상 환경에 대한 사용자 상호작용을 도시하는 도면.
도 3은 동시 뷰 및 포인트 네비게이션 시스템을 위한 과정을 도시하는 플로우 차트.
본 발명은 가상 환경의 동시 포인트 및 뷰 네비게이션을 위한 방법, 시스템 및 컴퓨터 프로그램이다. 본 발명의 실시예에 따르면, 상이한 기하학적인 평면에 대응하는 상이한 뷰들이 가상환경에서 동시에 독립적으로 제어되는 동안 이와 동시에 뷰들 중 하나의 네비게이션을 관리하기 위해서 사용되는 듀얼-포인터 마우스와 같은 입력 장치를 사용해서 뷰들 중 하나의 포커스 지점이 제어될 수 있다. 이와 같은 방식으로, 단일 가상 환경과 상호작용하는 최종 사용자는 상이한 기하학적인 평면을 제어하는 듀얼 포인터 장치 상에 배치되는 상이한 입력 기법을 통해서 향상된 네비게이션 성능을 즐길 수 있다.
도면에서, 도 1은 가상 환경의 동시 뷰 및 포인트 네비게이션 시스템의 개략도이다. 본 시스템은 호스트 운영 시스템(140)의 동작을 지원하는 호스트 컴퓨팅 플랫폼(100)을 포함할 수 있다. 호스트 컴퓨팅 플랫폼(100)은 전력원, CPU(central processing unit), 동적 메모리 컴포넌트와 정적 메모리 컴포넌트, 고정된 저장소 및 호스트 운영 시스템(140)의 하나 이상의 컴퓨팅 애플리케이션의 실행을 포함하는 개인 컴퓨팅 활동을 지원하기에 적합한 지원 회로를 포함할 수 있다. 구체적으로, 호스트 운영 시스템(140)은, 예를 들어 비행 시뮬레이터, 1인칭 슈터 게임, 또는 아바터-조정 어드벤처 게임과 같은 가상 환경(150)을 제공하는 애플리케이션의 실행을 관리할 수 있다.
특히, 가상 환경(150)은 가상 환경(150)에서의 대응하는 상이한 기하학적인 평면들에 대한 복수의 상이한 뷰(160A, 160B)를 포함할 수 있다. 예를 들어, 뷰들 중 하나(160A)는 가상 환경(150)의 전망(landscape)의 1인칭 정면 뷰를 제공할 수 있고, 반면에 뷰들 중 다른 하나(160B)는 가상 환경(150)의 전망의 1인칭 후면 뷰를 제공할 수 있다. 그러나, 뷰들(160A, 160B) 각각은 예를 들어 키보등 입력 장치(110) 및 마우스-하부(120)와 트랙포인트(130)를 포함하는 듀얼-포인터 마우스와 같은 대응하는 상이한 입력 장치(110, 120, 130)로부터 수신되는 별개의 입력 지시를 통해서 개별적으로 조작되도록 구성될 수 있다. 상이한 입력 장치(110, 120, 130)로부터의 입력 지시에 응답하는 상이한 뷰들(160A, 160B)의 조작을 용이하게 하기 위해서 동시 뷰 제어 로직(300)이 호스트 컴퓨팅 플랫폼(100)에 결합될 수 있다.
동시 뷰 제어 로직(300)은 상이한 입력 장치(110, 120, 130)로부터의 입력 지시의 수신을 가능하도록 하는 프로그램 코드를 포함할 수 있다. 각각의 상이한 입력 장치(110, 120, 130)로부터의 입력 지시는 상이한 뷰들(160A, 160B) 중 대응하는 것들과 관련될 수 있다. 입력 장치(120) 중 하나로부터 수신되는 입력 지시들 중 적어도 하나는 뷰들(160A, 160B) 중 하나를 제어하는데 사용될 수 있지만, 다른 입력 장치(13)로부터 수신되는 입력 지시들 중 다른 하나는 뷰들(160A, 160B) 중 하나의 관심 초점을 제어하기 위해서 사용될 수 있다.
이와 같은 관점에서, 예시적으로 마우스-하부(120)를 통해 수신되는 입력 지시는 뷰(160B)의 수정을 제어하기 위해서 사용될 수 있는 반면에, 트랙포인트(130)를 통해 수신되는 입력은 뷰(160B)의 네비게이션에 영향을 주지 않고 뷰(160A)의 관심 초점(170)을 조정하는데 사용될 수 있다. 이와 같은 방식으로, 최종 사용자는 입력 장치(110, 120, 130) 상에서 어떠한 손 위치(hand positions)도 변경하지 않고 관심 초점(170) 및 뷰(160A, 160B)를 제어할 수 있다.
도면에서, 도 2는 동시에 적용되는 개별적인 입력 지시가 단일 가상 환경의 대응하는 개별적인 네비게이션 뷰를 네비게이션하는 가상 환경에 대한 사용자 상호작용을 도시하는 도면이다. 도 2의 도면에서 보는 바와 같이, 가상 환경은 1인칭 또는 3인칭 슈터 게임 내에서 생성되는 환경을 포함할 수 있다. 통상적인 1인칭 또는 3인칭 슈터 게임에서, 사용자는 오직 하나의 뷰의 중심에 있는 것만을 쏠 수 있어서 사용자는 통상적으로 제1 뷰(200A)와 같은 오직 하나의 기하학적인 평면에서의 제어권을 가진다.
그러나, 도 2에서 보는 바와 같이 사용자 인터페이스는 제1 뷰(200A)뿐만 아니라, 예를 들어 마우스 룩 뷰(mouse look view)로서 알려진 프리 룩 뷰인 제2 뷰(200B)를 제공할 수 있다. 이와 같은 관점에서, 상이한 뷰들(200A, 200B)은 1인칭 또는 3인칭 슈터 게임의 별개의 복도(corridors)를 포함할 수 있다. 본 발명에서, 사용자는 입력 장치로부터의 입력 지시를 사용해서 제1 뷰(200A)의 포커스를 개별적으로 조작하는 동안 동일한 입력 장치로부터의 상이한 입력 지시를 사용해서 제2 뷰(200B)를 조작할 수 있다. 보다 구체적으로, 사용자는 듀얼-포인터 마우스의 마우스-하부를 사용해서 제2 뷰(200B)를 제어하고, 듀얼-포인터 마우스 상의 트랙포인트를 사용해서 제1 표적(220) 상의 1인칭 관심 초점(230)을 조준하는 동안 키보드 네비게이션 스트로크(keaboard navigation strokes)를 사용해서 제1 뷰(200A)를 제어할 수 있다. 이와 같이, 사용자는 제1 뷰(200A)의 제1 표적(220) 상의 조준을 잃지 않고 제2 뷰(200B)에 제2 표적(240)이 언제 나타나는지 알 수 있다.
동시 뷰 제어(300)의 또 다른 도면으로, 도 3은 동시 뷰 및 포인트 네비게이션 시스템을 위한 과정을 도시하는 플로우 차트이다. 블록 310에서 호스트 운영 시스템은 입력 장치로부터 입력 지시를 수신한다. 그 다음에 블록 320에서, 입력 장치가 식별된다. 판정 블록 330에서, 입력 지시가 마우스-하부 센서부터라면, 블록 340에서 입력 지시에 따라서 제2 뷰가 네비게이션될 수 있고 사용자 인터페이스는 블록 370에서 리프레시될 수 있다. 이와는 달리, 판정 블록 330에서, 입력 지시가 마우스-하부로부터가 아니고, 판정 블록 350에서 입력 지시가 트랙포인트부터라면, 블록 360에서 제1 뷰의 관심 초점은 조준될 수 있고 사용자 인터페이스는 블록 370에서 리프레시될 수 있다.
본 발명의 실시예는 전체적으로 하드웨어 실시예, 전체적으로 소프트웨어 실시예 또는 하드웨어 및 소프트웨어 모두의 구성요소를 가지는 실시예의 형식이 될 수 있다. 바람직한 실시예에서, 본 발명은 이에 한정되지는 않지만 펌웨어, 상주 소프트웨어, 마이크로코드 등을 포함하는 소프트웨어로 구성된다. 더 나아가, 본 발명은, 컴퓨터 또는 임의의 명령 실행 시스템에 의해서 사용되기 위한 또는 이들과 관련하여 사용되기 위한 컴퓨터-사용가능 매체 또는 컴퓨터-판독가능 매체로부터 액세스할 수 있는 컴퓨터 프로그램 제품의 형식이 될 수 있다.
본 명세서의 목적을 위해서, 컴퓨터-사용가능 매체 또는 컴퓨터-판독가능 매체는 명령어 실행 시스템, 장치 또는 기기에 의해서 또는 이들과 관련하여 사용되기 위한 프로그램을 포함, 저장, 통신, 전파 또는 전송할 수 있는 임의의 장치가 될 수 있다. 상기 매체는 전자적, 자기적, 광학적, 전자기적, 적외선 또는 반도체 시스템(또는 장치 또는 기기) 또는 전파 매체일 수 있다. 컴퓨터-판독가능 매체의 예시는 반도체 또는 고체 상태 메모리, 마그네틱 테입, 착탈식 컴퓨터 디스켓, RAM(random access memory), ROM(read-only memory), 강성 마그네틱 디스크 및 광학적 디스크를 포함한다. 현재의 광학적 디스크의 예시는 CD-ROM(compact disk-read only memory), CD-R/W(compact disk-read/write) 및 DVD를 포함한다.
프로그램 코드를 저장 및/또는 실행하기에 적합한 데이터 처리 시스템은 적어도 하나의 시스템 버스를 통해서 메모리 구성요소에 직접적으로 또는 간접적으로 결합되는 프로세서를 포함한다. 메모리 구성요소는 프로그램 코드의 실제 실행 동안 채용되는 자체 메모리, 벌크 저장소, 및 실행 동안 벌크 저장소로부터 검색되어 야 하는 코드 횟수를 감소시키기 위해서 적어도 일부 프로그램 코드의 임시 저장소를 제공하는 캐시 메모리를 포함할 수 있다. 입력/출력 또는 I/O 기기(이에 한정되지는 않지만 키보드, 디스플레이, 포인팅 기기 등을 포함함)는 인버팅 I/O 컨트롤러를 통해서 또는 직접적으로 시스템과 결합될 수 있다. 네트워크 아답터는 데이터 처리 시스템을 사설 또는 공용 네트워크를 통해서 다른 데이터 처리 시스템 또는 원격 프린터 또는 저장소와 결합시킬 수 있는 시스템과 결합될 수 있다. 모뎀, 케이블 모뎀, 및 이더넷 카드는 현재 사용가능한 네트워크 아답터의 단지 일부의 종류이다.

Claims (10)

  1. 단일 가상 환경 상호작용 방법(a single virtual environment interaction method)으로서,
    단일 가상 환경에서의 상이한 기하학적인 평면들에 각각 대응하는 독립적인 제1 및 제2 뷰를 유지하는 단계와,
    제1 입력 장치로부터의 제1 입력 지시에 응답하여 상기 제1 뷰를 독립적으로 변경하는 동안 이와 동시에 제2 입력 장치로부터의 제2 입력 지시에 응답하여 상기 제2 뷰를 변경하는 단계와,
    상기 제1 및 제2 입력 장치 중 하나로부터의 제3 입력 지시에 응답하여 상기 뷰들 중 하나의 관심 초점(a focal point of interest)을 수정하는 단계
    를 포함하는 단일 가상 환경 상호작용 방법.
  2. 제1항에 있어서,
    상기 제1 및 제2 입력 장치 중 하나로부터의 제3 입력 지시에 응답하여 상기 뷰들 중 하나의 관심 초점을 수정하는 단계는,
    상기 제1 뷰의 관심 초점을 설정하는 단계와,
    상기 제3 입력 지시로 상기 관심 초점을 조준하는(aiming) 동안 상기 제2 입력 지시를 통해서 상기 제2 뷰를 변경하는 단계 - 상기 지시들은 모두 상기 제1 입력 장치에서 수신됨 -
    를 포함하는 단일 가상 환경 상호작용 방법.
  3. 제2항에 있어서,
    상기 제3 입력 지시로 상기 관심 초점을 조준하는 동안 상기 제2 입력 지시를 통해서 상기 제2 뷰를 변경하는 단계 - 상기 지시들은 모두 상기 제1 입력 장치에서 수신됨 - 는,
    트랙포인트 입력 지시로 상기 관심 초점을 조준하는 동안 마우스-하부 입력 지시들(under-mouse input directives)을 통해 상기 제2 뷰를 변경하는 단계 - 상기 지시들은 모두 듀얼-포인터 마우스에서 수신됨 -
    를 포함하는 단일 가상 환경 상호작용 방법.
  4. 제2항에 있어서,
    상기 제3 입력 지시로 상기 관심 초점을 조준하는 동안 상기 제2 입력 지시를 통해서 상기 제2 뷰를 변경하는 단계 - 상기 지시들은 모두 상기 제1 입력 장치에서 수신됨 - 는,
    마우스-하부 입력 지시들로 상기 관심 초점을 조준하는 동안 트랙포인트 지시들을 통해 상기 제2 뷰를 변경하는 단계 - 상기 지시들은 모두 듀얼-포인터 마우스에서 수신됨 -
    를 포함하는 단일 가상 환경 상호작용 방법.
  5. 동시 뷰 및 포인트 네비게이션 데이터 처리 시스템(simultaneous view and point navigation data processing system)으로서,
    가상 환경과의 상호작용을 지원하기 위해서 구성되는 싱글 호스트 컴퓨팅 플랫폼에 각각 결합되는 제1 및 제2 입력 장치와,
    상기 싱글 호스트 컴퓨팅 플랫폼에 배치되는 동시 뷰포인트 제어 로직(simultaneous viewpoint control logic)을 포함하고,
    상기 로직은 상기 제1 입력 장치로부터의 제1 입력 지시에 응답하여 상기 가상 환경의 제1 기하학적인 평면에 대한 제1 뷰를 독립적으로 변경하는 동안 이와 동시에 상기 제2 입력 장치로부터의 제2 입력 지시에 응답하여 상기 가상 환경의 제2 기하학적인 평면에 대한 제2 뷰를 변경하고 상기 제1 및 제2 입력 장치 중 하나로부터의 제3 입력 지시에 응답하여 상기 뷰들 중 하나의 관심 초점을 수정할 수 있는 프로그램 코드를 포함하는 동시 뷰 및 포인트 네비게이션 데이터 처리 시스템.
  6. 제5항에 있어서,
    상기 제1 및 제2 입력 장치는 듀얼-포인터 마우스에 모두 통합되는 마우스-하부 센서 및 트랙포인트를 포함하는 동시 뷰 및 포인트 네비게이션 데이터 처리 시스템.
  7. 제5항에 있어서,
    상기 가상 환경은 1인칭 또는 3인칭 슈터 게임(shooter game)인 동시 뷰 및 포인트 네비게이션 데이터 처리 시스템.
  8. 제5항에 있어서,
    상기 가상환경은 비행 시뮬레이터(a flight simulator)인 동시 뷰 및 포인트 네비게이션 데이터 처리 시스템.
  9. 제5항에 있어서, 상기 가상 환경은 아바타-기반 어드벤처 게임(an avatar-based adventure game)인 동시 뷰 및 포인트 네비게이션 데이터 처리 시스템.
  10. 가상 환경의 동시 뷰 및 포인트 네비게이션을 위한 컴퓨터 사용가능 프로그램 코드를 구현하는 컴퓨터 사용가능 매체를 포함하는 컴퓨터 프로그램 제품으로서,
    상기 컴퓨터 사용가능 프로그램 코드는 컴퓨터에서 실행될 때 상기 컴퓨터가 제1항 내지 제4항 중 어느 한 항에 따르는 단계들을 수행하도록 하는 컴퓨터 프로그램 제품.
KR1020097011795A 2006-12-19 2007-12-04 가상 환경에서의 뷰 및 포인트 네비게이션 KR101039167B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/612,951 US7768514B2 (en) 2006-12-19 2006-12-19 Simultaneous view and point navigation
US11/612,951 2006-12-19

Publications (2)

Publication Number Publication Date
KR20090084927A true KR20090084927A (ko) 2009-08-05
KR101039167B1 KR101039167B1 (ko) 2011-06-03

Family

ID=39526573

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020097011795A KR101039167B1 (ko) 2006-12-19 2007-12-04 가상 환경에서의 뷰 및 포인트 네비게이션

Country Status (5)

Country Link
US (1) US7768514B2 (ko)
JP (1) JP5734566B2 (ko)
KR (1) KR101039167B1 (ko)
TW (1) TWI409673B (ko)
WO (1) WO2008074627A2 (ko)

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2048640A2 (en) * 2007-10-12 2009-04-15 Gruentjens, Norbert A method and an apparatus for controlling a simulated moving object
US8127235B2 (en) 2007-11-30 2012-02-28 International Business Machines Corporation Automatic increasing of capacity of a virtual space in a virtual world
US20090164919A1 (en) 2007-12-24 2009-06-25 Cary Lee Bates Generating data for managing encounters in a virtual world environment
JP5159375B2 (ja) 2008-03-07 2013-03-06 インターナショナル・ビジネス・マシーンズ・コーポレーション メタバースにおけるオブジェクトの真贋判断システム、方法及びそのコンピュータ・プログラム
US8453062B2 (en) * 2009-02-13 2013-05-28 International Business Machines Corporation Virtual world viewer
US8188969B2 (en) * 2009-06-26 2012-05-29 Panasonic Corporation Dual pointer management method using cooperating input sources and efficient dynamic coordinate remapping
EP2494432B1 (en) 2009-10-27 2019-05-29 Harmonix Music Systems, Inc. Gesture-based user interface
US9981193B2 (en) 2009-10-27 2018-05-29 Harmonix Music Systems, Inc. Movement based recognition and evaluation
US9390578B2 (en) 2010-01-08 2016-07-12 Ami Entertainment Network, Llc Multi-touchscreen module for amusement device
US8118680B2 (en) * 2010-01-08 2012-02-21 Ami Entertainment Network, Inc. Multi-touchscreen module for amusement device
US9205328B2 (en) 2010-02-18 2015-12-08 Activision Publishing, Inc. Videogame system and method that enables characters to earn virtual fans by completing secondary objectives
US9682324B2 (en) 2010-05-12 2017-06-20 Activision Publishing, Inc. System and method for enabling players to participate in asynchronous, competitive challenges
US9358456B1 (en) 2010-06-11 2016-06-07 Harmonix Music Systems, Inc. Dance competition game
US20110306397A1 (en) * 2010-06-11 2011-12-15 Harmonix Music Systems, Inc. Audio and animation blending
JP5586545B2 (ja) * 2011-09-09 2014-09-10 任天堂株式会社 ゲームシステム、携帯型ゲーム装置、情報処理部の制御方法、および情報処理部の制御プログラム
US10137376B2 (en) 2012-12-31 2018-11-27 Activision Publishing, Inc. System and method for creating and streaming augmented game sessions
US10220303B1 (en) 2013-03-15 2019-03-05 Harmonix Music Systems, Inc. Gesture-based music game
DE102013210866A1 (de) * 2013-06-11 2015-01-22 Libertus Mittelhäuser Verfahren zum Steuern eines Computerprogramms
US9789406B2 (en) 2014-07-03 2017-10-17 Activision Publishing, Inc. System and method for driving microtransactions in multiplayer video games
JP6581341B2 (ja) * 2014-10-15 2019-09-25 任天堂株式会社 情報処理装置、情報処理プログラム、情報処理方法、および情報処理システム
US11351466B2 (en) 2014-12-05 2022-06-07 Activision Publishing, Ing. System and method for customizing a replay of one or more game events in a video game
US10118099B2 (en) 2014-12-16 2018-11-06 Activision Publishing, Inc. System and method for transparently styling non-player characters in a multiplayer video game
US10486068B2 (en) 2015-05-14 2019-11-26 Activision Publishing, Inc. System and method for providing dynamically variable maps in a video game
US10315113B2 (en) 2015-05-14 2019-06-11 Activision Publishing, Inc. System and method for simulating gameplay of nonplayer characters distributed across networked end user devices
US10286314B2 (en) 2015-05-14 2019-05-14 Activision Publishing, Inc. System and method for providing continuous gameplay in a multiplayer video game through an unbounded gameplay session
US10668367B2 (en) 2015-06-15 2020-06-02 Activision Publishing, Inc. System and method for uniquely identifying physical trading cards and incorporating trading card game items in a video game
EP3195292B1 (en) 2015-07-10 2019-01-09 SZ DJI Technology Co., Ltd. Systems and methods for gimbal simulation
US10471348B2 (en) 2015-07-24 2019-11-12 Activision Publishing, Inc. System and method for creating and sharing customized video game weapon configurations in multiplayer video games via one or more social networks
US10099140B2 (en) 2015-10-08 2018-10-16 Activision Publishing, Inc. System and method for generating personalized messaging campaigns for video game players
US11185784B2 (en) 2015-10-08 2021-11-30 Activision Publishing, Inc. System and method for generating personalized messaging campaigns for video game players
US10376781B2 (en) 2015-10-21 2019-08-13 Activision Publishing, Inc. System and method of generating and distributing video game streams
US10232272B2 (en) 2015-10-21 2019-03-19 Activision Publishing, Inc. System and method for replaying video game streams
US10245509B2 (en) 2015-10-21 2019-04-02 Activision Publishing, Inc. System and method of inferring user interest in different aspects of video game streams
US10694352B2 (en) 2015-10-28 2020-06-23 Activision Publishing, Inc. System and method of using physical objects to control software access
US10300390B2 (en) 2016-04-01 2019-05-28 Activision Publishing, Inc. System and method of automatically annotating gameplay of a video game based on triggering events
US10226701B2 (en) 2016-04-29 2019-03-12 Activision Publishing, Inc. System and method for identifying spawn locations in a video game
US10179289B2 (en) 2016-06-21 2019-01-15 Activision Publishing, Inc. System and method for reading graphically-encoded identifiers from physical trading cards through image-based template matching
US10573065B2 (en) 2016-07-29 2020-02-25 Activision Publishing, Inc. Systems and methods for automating the personalization of blendshape rigs based on performance capture data
CN106528020B (zh) * 2016-10-26 2019-05-31 腾讯科技（深圳）有限公司 一种视角模式切换方法及终端
US10463964B2 (en) 2016-11-17 2019-11-05 Activision Publishing, Inc. Systems and methods for the real-time generation of in-game, locally accessible heatmaps
US10709981B2 (en) 2016-11-17 2020-07-14 Activision Publishing, Inc. Systems and methods for the real-time generation of in-game, locally accessible barrier-aware heatmaps
US10500498B2 (en) 2016-11-29 2019-12-10 Activision Publishing, Inc. System and method for optimizing virtual games
US10055880B2 (en) 2016-12-06 2018-08-21 Activision Publishing, Inc. Methods and systems to modify a two dimensional facial image to increase dimensional depth and generate a facial image that appears three dimensional
US10861079B2 (en) 2017-02-23 2020-12-08 Activision Publishing, Inc. Flexible online pre-ordering system for media
US10818060B2 (en) 2017-09-05 2020-10-27 Activision Publishing, Inc. Systems and methods for guiding motion capture actors using a motion reference system
US10974150B2 (en) 2017-09-27 2021-04-13 Activision Publishing, Inc. Methods and systems for improved content customization in multiplayer gaming environments
US11040286B2 (en) 2017-09-27 2021-06-22 Activision Publishing, Inc. Methods and systems for improved content generation in multiplayer gaming environments
US10561945B2 (en) 2017-09-27 2020-02-18 Activision Publishing, Inc. Methods and systems for incentivizing team cooperation in multiplayer gaming environments
US10463971B2 (en) 2017-12-06 2019-11-05 Activision Publishing, Inc. System and method for validating video gaming data
US10537809B2 (en) 2017-12-06 2020-01-21 Activision Publishing, Inc. System and method for validating video gaming data
US10981051B2 (en) 2017-12-19 2021-04-20 Activision Publishing, Inc. Synchronized, fully programmable game controllers
US10765948B2 (en) 2017-12-22 2020-09-08 Activision Publishing, Inc. Video game content aggregation, normalization, and publication systems and methods
US10596471B2 (en) 2017-12-22 2020-03-24 Activision Publishing, Inc. Systems and methods for enabling audience participation in multi-player video game play sessions
US11278813B2 (en) 2017-12-22 2022-03-22 Activision Publishing, Inc. Systems and methods for enabling audience participation in bonus game play sessions
US11192028B2 (en) 2018-11-19 2021-12-07 Activision Publishing, Inc. Systems and methods for the real-time customization of video game content based on player data
US11263670B2 (en) 2018-11-19 2022-03-01 Activision Publishing, Inc. Systems and methods for dynamically modifying video game content based on non-video gaming content being concurrently experienced by a user
US20200196011A1 (en) 2018-12-15 2020-06-18 Activision Publishing, Inc. Systems and Methods for Receiving Digital Media and Classifying, Labeling and Searching Offensive Content Within Digital Media
US11679330B2 (en) 2018-12-18 2023-06-20 Activision Publishing, Inc. Systems and methods for generating improved non-player characters
US11305191B2 (en) 2018-12-20 2022-04-19 Activision Publishing, Inc. Systems and methods for controlling camera perspectives, movements, and displays of video game gameplay
US11344808B2 (en) 2019-06-28 2022-05-31 Activision Publishing, Inc. Systems and methods for dynamically generating and modulating music based on gaming events, player profiles and/or player reactions
CN110393916B (zh) * 2019-07-26 2023-03-14 腾讯科技（深圳）有限公司 视角转动的方法、装置、设备及存储介质
US11097193B2 (en) 2019-09-11 2021-08-24 Activision Publishing, Inc. Methods and systems for increasing player engagement in multiplayer gaming environments
US11423605B2 (en) 2019-11-01 2022-08-23 Activision Publishing, Inc. Systems and methods for remastering a game space while maintaining the underlying game simulation
US11712627B2 (en) 2019-11-08 2023-08-01 Activision Publishing, Inc. System and method for providing conditional access to virtual gaming items
US11537209B2 (en) 2019-12-17 2022-12-27 Activision Publishing, Inc. Systems and methods for guiding actors using a motion capture reference system
US11420122B2 (en) 2019-12-23 2022-08-23 Activision Publishing, Inc. Systems and methods for controlling camera perspectives, movements, and displays of video game gameplay
US11563774B2 (en) 2019-12-27 2023-01-24 Activision Publishing, Inc. Systems and methods for tracking and identifying phishing website authors
US11351459B2 (en) 2020-08-18 2022-06-07 Activision Publishing, Inc. Multiplayer video games with virtual characters having dynamically generated attribute profiles unconstrained by predefined discrete values
US11524234B2 (en) 2020-08-18 2022-12-13 Activision Publishing, Inc. Multiplayer video games with virtual characters having dynamically modified fields of view
US11724188B2 (en) 2020-09-29 2023-08-15 Activision Publishing, Inc. Methods and systems for selecting a level of detail visual asset during the execution of a video game
US11833423B2 (en) 2020-09-29 2023-12-05 Activision Publishing, Inc. Methods and systems for generating level of detail visual assets in a video game
US11717753B2 (en) 2020-09-29 2023-08-08 Activision Publishing, Inc. Methods and systems for generating modified level of detail visual assets in a video game
US11439904B2 (en) 2020-11-11 2022-09-13 Activision Publishing, Inc. Systems and methods for imparting dynamic and realistic movement to player-controlled avatars in video games
US11853439B2 (en) 2020-12-30 2023-12-26 Activision Publishing, Inc. Distributed data storage system providing enhanced security
US20220203231A1 (en) * 2020-12-30 2022-06-30 Activision Publishing, Inc. Methods and Systems for Determining Decal Projections Intersecting Spacial Units in a Frame of a Game Space
US11794107B2 (en) 2020-12-30 2023-10-24 Activision Publishing, Inc. Systems and methods for improved collision detection in video games

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5298919A (en) * 1991-08-02 1994-03-29 Multipoint Technology Corporation Multi-dimensional input device
US5771038A (en) 1995-08-09 1998-06-23 Primax Electronics Ltd. Control device for display state change on monitor
US5999169A (en) * 1996-08-30 1999-12-07 International Business Machines Corporation Computer graphical user interface method and system for supporting multiple two-dimensional movement inputs
US5847709A (en) * 1996-09-26 1998-12-08 Xerox Corporation 3-D document workspace with focus, immediate and tertiary spaces
US6146143A (en) * 1997-04-10 2000-11-14 Faac Incorporated Dynamically controlled vehicle simulation system, and methods of constructing and utilizing same
US6480184B1 (en) 1997-12-18 2002-11-12 Micron Technology, Inc. Apparatus for entering data into a computer
TW358189B (en) * 1998-01-15 1999-05-11 Ind Tech Res Inst A field-surrounding image simulation real-time play system and method
US6822638B2 (en) 1999-05-10 2004-11-23 International Business Machines Corporation Pointing device for navigating a 3 dimensional GUI interface
JP2002336542A (ja) * 2001-05-14 2002-11-26 Yukes:Kk ビデオゲーム装置、ビデオゲーム画面制御プログラム及びその記録媒体
US6727889B2 (en) 2001-09-14 2004-04-27 Stephen W. Shaw Computer mouse input device with multi-axis palm control
JP3502869B2 (ja) * 2002-03-20 2004-03-02 株式会社スクウェア・エニックス 球技系ビデオゲームのプログラムを記録したコンピュータ読み取り可能な記録媒体、コンピュータプログラム、球技系ビデオゲーム処理装置および球技系ビデオゲーム処理方法
US20030222924A1 (en) 2002-06-04 2003-12-04 Baron John M. Method and system for browsing a virtual environment
JP4115188B2 (ja) * 2002-07-19 2008-07-09 キヤノン株式会社 仮想空間描画表示装置
US6890077B2 (en) 2002-11-27 2005-05-10 The Boeing Company Method and apparatus for high resolution video image display
US7545362B2 (en) * 2004-02-26 2009-06-09 Microsoft Corporation Multi-modal navigation in a graphical user interface computing system
TWI314309B (en) * 2005-04-29 2009-09-01 Primax Electronics Ltd Cursor control device having buttons for performing a multi-control function

Also Published As

Publication number Publication date
WO2008074627A3 (en) 2008-10-16
JP2010512885A (ja) 2010-04-30
US20080143722A1 (en) 2008-06-19
TW200836091A (en) 2008-09-01
JP5734566B2 (ja) 2015-06-17
KR101039167B1 (ko) 2011-06-03
US7768514B2 (en) 2010-08-03
WO2008074627A2 (en) 2008-06-26
TWI409673B (zh) 2013-09-21

Similar Documents

Publication Publication Date Title
KR101039167B1 (ko) 가상 환경에서의 뷰 및 포인트 네비게이션
McMahan et al. Evaluating display fidelity and interaction fidelity in a virtual reality game
Cummings The evolution of game controllers and control schemes and their effect on their games
KR20140006642A (ko) 온라인 게임에서의 유저 제스처 입력 처리 방법
Andrews et al. Hapticast: a physically-based 3D game with haptic feedback
Bates et al. Gaze interaction with virtual on-line communities: levelling the playing field for disabled users
TW201337711A (zh) 呈現視覺介面內容的系統及其方法
CN115427122A (zh) 虚拟控制台游戏控制器
Joselli et al. An architecture for game interaction using mobile
Velloso et al. Arcade+ a platform for public deployment and evaluation of multi-modal games
Istance et al. For your eyes only: Controlling 3d online games by eye-gaze
Hynninen First-person shooter controls on touchscreen devices: A heuristic evaluation of three games on the iPod touch
Teather et al. Comparing order of control for tilt and touch games
Istance et al. Gaze-based interaction with massively multiplayer on-line games
Dechant et al. Empirical evaluation of hybrid gaze-controller selection techniques in a gaming context
Gyory et al. Build Your Own Arcade Machine with Tinycade
KR102609293B1 (ko) 게임 동작 결정 장치 및 방법
Zheng et al. BlockTower: A Multi-player Cross-Platform Competitive Social Game
Prakash et al. Games technology: Console architectures, game engines and invisible interaction
WO2022130681A1 (ja) ゲームシステム、プログラム及び情報処理方法
KR20190127308A (ko) 게임 동작 예측 장치 및 방법
da Silva Junior et al. An architecture for new ways of game user interaction using mobile devices
WO2023002907A1 (ja) 情報処理システム、プログラム及び情報処理方法
Toktaş et al. Evaluation of crosshair-aided gyroscope gamepad controller
Scerbo et al. Design issues when using commodity gaming devices for virtual object manipulation

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140514

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150512

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160513

Year of fee payment: 6