JP6855416B2 - Game processing system, game processing method, and game processing program - Google Patents

Game processing system, game processing method, and game processing program Download PDF

Info

Publication number
JP6855416B2
JP6855416B2 JP2018129484A JP2018129484A JP6855416B2 JP 6855416 B2 JP6855416 B2 JP 6855416B2 JP 2018129484 A JP2018129484 A JP 2018129484A JP 2018129484 A JP2018129484 A JP 2018129484A JP 6855416 B2 JP6855416 B2 JP 6855416B2
Authority
JP
Japan
Prior art keywords
mode
player
virtual character
game
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018129484A
Other languages
Japanese (ja)
Other versions
JP2019136475A (en
Inventor
貴志 桑谷
貴志 桑谷
誠 千田
誠 千田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GREE Inc
Original Assignee
GREE Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GREE Inc filed Critical GREE Inc
Priority to JP2018129484A priority Critical patent/JP6855416B2/en
Priority to US16/268,600 priority patent/US10981067B2/en
Publication of JP2019136475A publication Critical patent/JP2019136475A/en
Priority to US16/922,459 priority patent/US11161047B2/en
Application granted granted Critical
Publication of JP6855416B2 publication Critical patent/JP6855416B2/en
Priority to US17/488,901 priority patent/US11638879B2/en
Priority to US18/187,446 priority patent/US20230219005A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Description

本明細書における開示は、仮想キャラクタとのインタラクションを提供するアプリケーション処理システム、アプリケーション処理方法、及びアプリケーション処理プログラムに関する。より具体的には、本明細書における開示は、ヘッドマウントディスプレイにより検出された検出情報に応じた仮想キャラクタとのインタラクションを提供可能なアプリケーションを処理するアプリケーション処理システム、アプリケーション処理方法、及びアプリケーション処理プログラムに関する。このアプリケーションの一例hは、ゲームである。よって、本明細書における開示は、より具体的には、ゲームを処理するゲーム処理システム、ゲーム処理方法、及びゲーム処理プログラムに関する。 The disclosure herein relates to application processing systems, application processing methods, and application processing programs that provide interaction with virtual characters. More specifically, the disclosure herein is an application processing system, application processing method, and application processing program that processes an application capable of providing interaction with a virtual character according to detection information detected by a head-mounted display. Regarding. An example h of this application is a game. Therefore, the disclosure in this specification more specifically relates to a game processing system for processing a game, a game processing method, and a game processing program.

仮想キャラクタとのインタラクションを提供するアプリケーションとして、仮想キャラクタとのインタラクションを提供するシミュレーションゲームが知られている。かかるシミュレーションゲームは、例えば、特開2012−055644号公報(特許文献1)に開示されている。 As an application that provides interaction with a virtual character, a simulation game that provides interaction with a virtual character is known. Such a simulation game is disclosed in, for example, Japanese Patent Application Laid-Open No. 2012-055644 (Patent Document 1).

このような仮想キャラクタとのインタラクションを提供するゲームにおいて、ゲームへの没入感を高めるために、ヘッドマウントディスプレイ(以下、「HMD」ということがある。)が利用されることがある。例えば、HMDに仮想空間を表示し、この仮想空間内に登場する仮想キャラクタとHMDを用いてインタラクションできるVRゲームが知られている。この種のVRゲームとして、株式会社バンダイナムコエンターテインメントの「サマーレッスン」が知られている(非特許文献1参照)。 In a game that provides interaction with such a virtual character, a head-mounted display (hereinafter, may be referred to as “HMD”) may be used in order to enhance the immersive feeling in the game. For example, there is known a VR game in which a virtual space is displayed on an HMD and the virtual character appearing in the virtual space can interact with the HMD. As a VR game of this type, "Summer Lesson" by BANDAI NAMCO Entertainment Inc. is known (see Non-Patent Document 1).

HMDは、特開2017−058969号公報(特許文献2)に記載されているように、プレイヤの頭部の位置や向きを検出するためのトラッキングセンサを備えている。HMDを用いてプレイするVRゲームでは、このトラッキングセンサにより検出された検出情報に基づいて仮想空間内における視点が定められ、このようにして定められた視点から見た仮想空間の画像がHMDに表示される。 As described in Japanese Patent Application Laid-Open No. 2017-058969 (Patent Document 2), the HMD includes a tracking sensor for detecting the position and orientation of the player's head. In a VR game played using an HMD, a viewpoint in the virtual space is determined based on the detection information detected by the tracking sensor, and an image of the virtual space viewed from the determined viewpoint is displayed on the HMD. Will be done.

上記の「サマーレッスン」では、HMDのトラッキングセンサにより検出された検出情報に応じて、仮想キャラクタとのインタラクションを特定し、この特定されたインタクラクションをプレイヤに体験させる機能が実現されている。例えば、HMDに表示されている仮想キャラクタの画像の動きに応答して当該HMDを装着したプレイヤが頷くと、この頷きに対応するプレイヤの頭部の動きが検出される。そして、この検出された頭部の動きに基づいて、プレイヤが頷いたことに対応する動作を行う仮想キャラクタの画像がHMDに表示される。 In the above-mentioned "summer lesson", a function of identifying an interaction with a virtual character according to the detection information detected by the tracking sensor of the HMD and allowing the player to experience the identified interaction is realized. For example, when the player wearing the HMD nods in response to the movement of the image of the virtual character displayed on the HMD, the movement of the player's head corresponding to this nod is detected. Then, based on the detected movement of the head, an image of a virtual character that performs an action corresponding to the player nodding is displayed on the HMD.

このように、HMDを用いて仮想キャラクタとのインタラクションを行う従来のVRゲームでは、プレイヤの頭部の動きに追従するように仮想空間の画像が表示され、また、頭部の動きに応じた仮想キャラクタとのインタラクションが体験されるため、プレイヤは高い没入感を得られる。 In this way, in the conventional VR game in which the interaction with the virtual character is performed using the HMD, the image of the virtual space is displayed so as to follow the movement of the player's head, and the virtual according to the movement of the head is displayed. Since the interaction with the character is experienced, the player can get a high immersive feeling.

特開2012−055644号公報Japanese Unexamined Patent Publication No. 2012-055644 特開2017−058969号公報Japanese Unexamined Patent Publication No. 2017-058969

“サマーレッスン”、[online]、平成29年12月12日検索、インターネット(URL: HYPERLINK "http://summer-lesson.bn-ent.net/" http://summer-lesson.bn-ent.net/)"Summer lesson", [online], search on December 12, 2017, Internet (URL: HYPERLINK "http://summer-lesson.bn-ent.net/" http://summer-lesson.bn-ent .net /)

VRゲームをプレイするためには、HMDを頭部に装着する必要がある。HMDは、現在のところ日常的に使用されるデバイスではなく、また、装着時に現実世界での視界が遮られることから、HMDの装着に抵抗感を感じるプレイヤも存在する。したがって、VRゲームのプレイ開始時に、プレイヤにHMDの装着を促す技術的な改善、及び/又は、HMD装着に関するプレイヤの抵抗感を軽減するための技術的な改善が望まれる。 In order to play the VR game, it is necessary to wear the HMD on the head. At present, the HMD is not a device that is used on a daily basis, and since the view in the real world is obstructed when the HMD is worn, there are some players who feel resistance to wearing the HMD. Therefore, a technical improvement for encouraging the player to wear the HMD at the start of playing the VR game and / or a technical improvement for reducing the player's resistance to wearing the HMD is desired.

本開示の目的は、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することである。 An object of the present disclosure is to provide technical improvements that solve or alleviate at least some of the problems of the prior art described above.

一実施形態におけるゲーム処理システムは、一又は複数のコンピュータプロセッサを備え、第1モード及び第2モードを有するゲームの処理を行うゲーム処理システムである。前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、前記第1モードにおいては、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供する。当該一又は複数のコンピュータプロセッサは、また、前記第1モードから前記第2モードへの移行処理を行い、前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する。 The game processing system in one embodiment is a game processing system including one or more computer processors and processing a game having a first mode and a second mode. By executing a computer-readable instruction, the one or more computer processors responded to the first detection information detected by the information processing device not attached to the player's head in the first mode. Provides interaction with virtual characters. The one or more computer processors also perform the transition process from the first mode to the second mode, and after performing the transition process, are attached to the head of the player in the second mode. It provides an interaction with the virtual character according to the second detection information detected by the head-mounted display.

一実施形態におけるゲーム処理システムにおいて、前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記仮想キャラクタが前記第2モードへの移行を促すことが含まれる。 In the game processing system of one embodiment, the interaction with the virtual character in the first mode includes the virtual character promoting the transition to the second mode.

一実施形態において、前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記第2モードにおける設定の選択を行うためのインタラクションが含まれる。 In one embodiment, the interaction with the virtual character in the first mode includes an interaction for making a setting selection in the second mode.

一実施形態によるゲーム処理システムにおいて、前記移行処理は、前記第1モードにおける前記仮想キャラクタとのインタラクションに応じて開始される。 In the game processing system according to one embodiment, the transition process is started in response to the interaction with the virtual character in the first mode.

一実施形態によるゲーム処理システムにおいて、前記移行処理は、前記第1モードにおいて前記情報処理装置において表示された移行開始オブジェクトの選択により開始される。 In the game processing system according to the embodiment, the transition process is started by selecting the transition start object displayed on the information processing apparatus in the first mode.

一実施形態によるゲーム処理システムにおいて、前記移行処理は、前記移行開始オブジェクトの選択に応じて、前記ヘッドマウントディスプレイを装着するように促すガイダンスを前記情報処理装置に表示することを含む。 In the game processing system according to one embodiment, the transition process includes displaying on the information processing device guidance prompting the user to wear the head-mounted display in response to the selection of the transition start object.

一実施形態によるゲーム処理システムにおいて、前記移行処理は、前記プレイヤの注視によって選択可能な移行オブジェクトが選択されたことに応じて前記第2モードへ移行することを含む。 In the game processing system according to one embodiment, the transition process includes transitioning to the second mode in response to the selection of a selectable transition object by the gaze of the player.

一実施形態によるゲーム処理システムにおいて、前記一又は複数のコンピュータプロセッサは、前記第2モードの終了後に前記情報処理装置に前記第1モードを開始するためのログイン画面を表示する。 In the game processing system according to the embodiment, the one or more computer processors display a login screen for starting the first mode on the information processing apparatus after the end of the second mode.

一実施形態によるゲーム処理システムにおいて、前記ヘッドマウントディスプレイは、前記プレイヤの頭部に装着される装着具と、前記装着具に取り付けられた前記情報処理装置と、を有する In the game processing system according to one embodiment, the head-mounted display has a wearer attached to the player's head and the information processing device attached to the wearer.

一実施形態によるゲーム処理システムにおいて、前記第2モードにおいては、前記プレイヤの頭部の位置及び向きの少なくとも一方を特定するためのヘッドトラッキング情報が前記第2検出情報に基づいて算出され、前記ヘッドトラッキング情報に応じた前記仮想キャラクタとのインタラクションが提供される。 In the game processing system according to one embodiment, in the second mode, head tracking information for specifying at least one of the position and orientation of the player's head is calculated based on the second detection information, and the head Interaction with the virtual character according to the tracking information is provided.

一実施形態によるゲーム処理システムにおいて、前記第2モードにおいては、前記仮想キャラクタが立体視画像として表示され、前記第1モードにおいては、前記仮想キャラクタが立体視画像以外の画像として表示される。 In the game processing system according to the embodiment, in the second mode, the virtual character is displayed as a stereoscopic image, and in the first mode, the virtual character is displayed as an image other than the stereoscopic image.

一実施形態によるゲーム処理方法は、一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより、第1モード及び第2モードを有するゲームの処理を行う。当該ゲーム処理方法は、前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供する工程と、前記第1モードから前記第2モードへの移行処理を行う工程と、前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する工程と、を備える。 The game processing method according to one embodiment processes a game having a first mode and a second mode by executing a computer-readable instruction by one or more computer processors. The game processing method includes, in the first mode, a step of providing an interaction with a virtual character according to the first detection information detected by an information processing device not attached to the player's head, and the first mode. According to the step of performing the transition process from the first to the second mode and the second detection information detected by the head-mounted display mounted on the head of the player in the second mode after the transition process is performed. It also includes a step of providing an interaction with the virtual character.

一実施形態によるゲーム処理プログラムは、一又は複数のコンピュータプロセッサに実行されることにより第1モード及び第2モードを有するゲームの処理を実行するためのプログラムである。当該ゲーム処理プログラムは、前記一又は複数のコンピュータプロセッサに、前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供する工程と、前記第1モードから前記第2モードへの移行処理を行う工程と、前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する工程と、を実行させる。 The game processing program according to one embodiment is a program for executing processing of a game having a first mode and a second mode by being executed by one or more computer processors. The game processing program causes the one or more computer processors to interact with the virtual character according to the first detection information detected by the information processing device not attached to the player's head in the first mode. A step of providing, a step of performing a transition process from the first mode to the second mode, and a head mount display mounted on the head of the player in the second mode after the transition process is performed. The step of providing the interaction with the virtual character according to the detected second detection information is executed.

実施形態によれば、第1モードでゲームが進行する過程で、プレイヤに対してヘッドマウントディスプレイの装着を促すことができる。 According to the embodiment, it is possible to urge the player to wear the head-mounted display in the process of progressing the game in the first mode.

一実施形態によるゲーム処理システムを示すブロック図である。It is a block diagram which shows the game processing system by one Embodiment. 図1のゲーム処理システムにおいて利用可能なヘッドマウントディスプレイを示す模式図である。It is a schematic diagram which shows the head-mounted display which can be used in the game processing system of FIG. ゲームのプレイヤに装着されたヘッドマウントディスプレイを模式的に示す図である。It is a figure which shows typically the head-mounted display attached to the player of a game. 一実施形態によるゲーム処理システムにより処理されるゲームのモード移行を説明する図である。It is a figure explaining the mode transition of the game processed by the game processing system by one Embodiment. 一実施形態におけるチャットモードでの処理の流れを示すフロー図である。It is a flow chart which shows the flow of processing in a chat mode in one Embodiment. 一実施形態におけるチャットモードでの表示画像の例を示す図である。図6の画面には、プレイヤにより選択されるメッセージの選択肢が示されている。It is a figure which shows the example of the display image in the chat mode in one Embodiment. The screen of FIG. 6 shows the message options selected by the player. 一実施形態におけるチャットモードでの表示画像の例を示す図である。図7の画面には、プレイヤにより選択されたメッセージが示されている。It is a figure which shows the example of the display image in the chat mode in one Embodiment. The screen of FIG. 7 shows a message selected by the player. 一実施形態におけるチャットモードでの表示画像の例を示す図である。図8の画面には、VRモードへの移行を促すメッセージ、VRモードにおける設定を選択するためのメッセージ、及びVRモードにおいて使用されるアイテムを選択するためのメッセージが示されている。It is a figure which shows the example of the display image in the chat mode in one Embodiment. The screen of FIG. 8 shows a message prompting the transition to the VR mode, a message for selecting a setting in the VR mode, and a message for selecting an item to be used in the VR mode. 一実施形態におけるチャットモードでの表示画像の例を示す図である。図9の画面には、移行開始オブジェクトが示されている。It is a figure which shows the example of the display image in the chat mode in one Embodiment. The transition start object is shown on the screen of FIG. 一実施形態におけるモード移行処理の流れを示すフロー図である。It is a flow figure which shows the flow of the mode transition process in one Embodiment. 一実施形態におけるモード移行処理での表示画像の例を示す図である。図11の画面には、ディスプレイを装着具へ装着するように促すガイダンスが示されている。It is a figure which shows the example of the display image in the mode transition process in one Embodiment. The screen of FIG. 11 shows guidance prompting the display to be attached to the wearer. 一実施形態における移行処理での表示画像の例を示す図である。図12の画面には、移行オブジェクトが示されている。It is a figure which shows the example of the display image in the transition process in one Embodiment. The transition object is shown on the screen of FIG. 一実施形態におけるVRモードでの処理の流れを示すフロー図である。It is a flow chart which shows the flow of the process in the VR mode in one Embodiment. 一実施形態におけるVRモードでの表示画像の例を示す図である。It is a figure which shows the example of the display image in the VR mode in one Embodiment. 他の実施形態によるゲーム処理システムを示すブロック図である。It is a block diagram which shows the game processing system by another embodiment.

以下、図面を適宜参照し、本発明の様々な実施形態を説明する。複数の図面において同一の又は類似する構成要素には同じ参照符号が付される。 Hereinafter, various embodiments of the present invention will be described with reference to the drawings as appropriate. The same or similar components are designated by the same reference numerals in a plurality of drawings.

図1から図3を参照して、一実施形態によるゲーム処理システムについて説明する。図1は、一実施形態によるゲーム処理システム1を示すブロック図であり、図2は、ゲーム処理システム1において用いられるヘッドマウントディスプレイ10(以下、「HMD10」という。)の模式図であり、図3は、プレイヤ5に装着されたHMD10を模式的に示す図である。 A game processing system according to an embodiment will be described with reference to FIGS. 1 to 3. FIG. 1 is a block diagram showing a game processing system 1 according to an embodiment, and FIG. 2 is a schematic diagram of a head-mounted display 10 (hereinafter referred to as “HMD10”) used in the game processing system 1. 3 is a diagram schematically showing the HMD 10 mounted on the player 5.

ゲーム処理システム1は、ゲーム以外のアプリケーションを処理するように構成されてもよい。ゲーム処理システム1は、例えば、運転やその他の分野におけるシミュレーション、医療又はそれ以外の分野におけるトレーニング用アプリケーション、製品やサービスを体験するためのアプリケーション、映画やそれ以外の各種エンターテインメントを鑑賞するためのアプリケーション、及びこれら以外の各種アプリケーションを提供するように構成されてもよい。 The game processing system 1 may be configured to process applications other than games. The game processing system 1 is, for example, a simulation in driving and other fields, a training application in medical or other fields, an application for experiencing products and services, and an application for watching movies and various other entertainments. , And various applications other than these may be provided.

一実施形態によるゲーム処理システム1は、一実施形態によるゲーム処理プログラムを実行することにより様々なゲームを実現する。プレイヤは、ゲームシステム1を利用して、各種ゲームをプレイすることができる。ゲーム処理システム1は、例えば、仮想空間において仮想キャラクタとプレイヤとがインタラクションを行うゲームを実現することができる。ゲーム処理システム1により実現されるゲームは、第1モードと第2モードとを有する。第1モード及び第2モードには、共通のゲーム媒体が用いられてもよい。ゲーム媒体は、ゲーム処理システム1で実現されるゲームにおいて使用される電子データであり、ユーザによってゲーム内で取得、所有、使用、管理、交換、合成、強化、売却、廃棄、贈与、又は前記以外の方法で使用され得る。ゲーム媒体には、例えば、カード、アイテム、仮想通貨、チケット、キャラクタ、アバタ、レベル情報、ステータス情報、パラメータ情報(体力値や攻撃力など)、能力情報、スキル、アビリティ、呪文、ジョブ、及びこれら以外のゲームで利用可能な各種電子データを含む。ゲーム処理システム1で利用可能なゲーム媒体及びその利用態様は本明細書で明示されるものに限られない。第1モードの例はチャットモードであり、第2モードの例はVRモードである。第1モード及び第2モードについては後述される。 The game processing system 1 according to one embodiment realizes various games by executing the game processing program according to one embodiment. The player can play various games by using the game system 1. The game processing system 1 can realize, for example, a game in which a virtual character and a player interact with each other in a virtual space. The game realized by the game processing system 1 has a first mode and a second mode. A common game medium may be used for the first mode and the second mode. The game medium is electronic data used in the game realized by the game processing system 1, and is acquired, owned, used, managed, exchanged, synthesized, strengthened, sold, discarded, gifted, or other than the above in the game by the user. Can be used in the above way. Game media include, for example, cards, items, virtual currencies, tickets, characters, avatars, level information, status information, parameter information (physical strength, attack power, etc.), ability information, skills, abilities, spells, jobs, and these. Includes various electronic data that can be used in games other than. The game medium and its usage mode that can be used in the game processing system 1 are not limited to those specified in this specification. An example of the first mode is a chat mode, and an example of the second mode is a VR mode. The first mode and the second mode will be described later.

ゲーム処理システム1は、HMD10と、サーバ50と、を備える。HMD10とサーバ50とは、ネットワーク40を介して相互に通信可能に接続されている。 The game processing system 1 includes an HMD 10 and a server 50. The HMD 10 and the server 50 are connected to each other so as to be able to communicate with each other via the network 40.

HMD10は、図2に示されているように、人間の頭部に装着される装着具11と、この装着具11に取り付けられる情報処理装置20と、を備えている。 As shown in FIG. 2, the HMD 10 includes a fitting 11 attached to a human head and an information processing device 20 attached to the fitting 11.

装着具11は、開口11dが形成されたゴーグル型の筐体11aと、この筐体11aに取り付けられた第1ベルト11b及び第2ベルト11cと、蓋11eと、を有する。蓋11eは、筐体11aに開閉自在に取り付けられている。筐体11aの前方には開口11dが形成されている。図2においては、蓋11eは開放されている。HME10の使用時には、蓋11eは、開口11dを閉塞するように閉じられる。 The fitting 11 has a goggle-shaped housing 11a having an opening 11d formed therein, a first belt 11b and a second belt 11c attached to the housing 11a, and a lid 11e. The lid 11e is attached to the housing 11a so as to be openable and closable. An opening 11d is formed in front of the housing 11a. In FIG. 2, the lid 11e is open. When using the HME 10, the lid 11e is closed to close the opening 11d.

情報処理装置20は、HMD10の蓋11eの内側に、着脱可能に設けられる。情報処理装置20は、ディスプレイ24を備えている。情報処理装置20は、蓋11eが閉じられたときに、ディスプレイ24が筐体11aの内側を向くように蓋11eに取り付けられる。情報処理装置20は、HMD10の使用時に装着具11に取り付けられる。情報処理装置20は、HMD10を使用しないときには、装着具11から取り外される。 The information processing device 20 is detachably provided inside the lid 11e of the HMD 10. The information processing device 20 includes a display 24. The information processing device 20 is attached to the lid 11e so that the display 24 faces the inside of the housing 11a when the lid 11e is closed. The information processing device 20 is attached to the fitting 11 when the HMD 10 is used. The information processing device 20 is removed from the fitting 11 when the HMD 10 is not in use.

図示の実施形態において、情報処理装置20は、スマートフォンである。情報処理装置20は、スマートフォン以外に、携帯電話機、タブレット端末、パーソナルコンピュータ、電子書籍リーダー、ウェアラブルコンピュータ、ゲーム用コンソール、及びこれら以外の各種情報処理装置であってもよい。HMD10から取り外された情報処理装置20は、その本来の目的に応じて利用される。 In the illustrated embodiment, the information processing device 20 is a smartphone. In addition to smartphones, the information processing device 20 may be a mobile phone, a tablet terminal, a personal computer, an electronic book reader, a wearable computer, a game console, and various other information processing devices. The information processing device 20 removed from the HMD 10 is used according to its original purpose.

情報処理装置20は、上記のように、ディスプレイ24を備えている。図示の実施形態においては、情報処理装置20が装着具11に取り付けられたときには、ディスプレイ24がHMD10における画像表示のための装置として機能する。よって、HMD10を用いてゲームをプレイする場合には、ディスプレイ24に当該ゲームの仮想空間、仮想キャラクタ、及びこれら以外のゲームに関連する画像が表示される。 The information processing device 20 includes a display 24 as described above. In the illustrated embodiment, when the information processing device 20 is attached to the fitting 11, the display 24 functions as a device for displaying an image in the HMD 10. Therefore, when the game is played using the HMD 10, the virtual space of the game, the virtual characters, and images related to the game other than these are displayed on the display 24.

装着具11の形状は、図示されたゴーグル型に限られない。装着具11は、装着されたプレイヤの頭部の動きに追従して動き、装着されたときにディスプレイ24を装着者の眼前に配置できる任意の形状の構造体を含み得る。装着具11は、例えば眼鏡を模した形状、帽子を模した形状、又はヘルメットを模した形状であってもよい。プレイヤの没入感を向上させるためには、HMD10は、装着具11がプレイヤの頭部に装着されたときに、ディスプレイ24が当該プレイヤの両目を覆うように構成されていることが望ましい。 The shape of the fitting 11 is not limited to the illustrated goggle type. The wearer 11 may include a structure of any shape that follows the movement of the worn player's head and allows the display 24 to be placed in front of the wearer's eyes when worn. The fitting 11 may have, for example, a shape imitating eyeglasses, a shape imitating a hat, or a shape imitating a helmet. In order to improve the immersive feeling of the player, it is desirable that the HMD 10 is configured such that the display 24 covers both eyes of the player when the wearer 11 is attached to the head of the player.

HMD10は、使用時において、図3に示されているように、装着具11を介してプレイヤ5の頭部に取り付けられる。プレイヤ5の頭部に装着されている装着具11には、情報処理装置20が取り付けられている。 When in use, the HMD 10 is attached to the head of the player 5 via the fitting 11 as shown in FIG. The information processing device 20 is attached to the attachment 11 attached to the head of the player 5.

再び図1を参照して、情報処理装置20についてさらに説明する。図示のように、一実施形態において、情報処理装置20は、コンピュータプロセッサ21、メモリ22、通信I/F23、ディスプレイ24、センサユニット25、集音装置26、及びストレージ27を備えている。 The information processing apparatus 20 will be further described with reference to FIG. 1 again. As shown in the figure, in one embodiment, the information processing device 20 includes a computer processor 21, a memory 22, a communication I / F 23, a display 24, a sensor unit 25, a sound collecting device 26, and a storage 27.

コンピュータプロセッサ21は、ストレージ27又はそれ以外のストレージからオペレーティングシステムやゲームロジックを実現する様々なプログラムをメインメモリ22にロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ21は、例えば、CPU、MCU、FRPG、又はこれら以外の各種演算装置である。図1においては、コンピュータプロセッサ21が単一の構成要素として図示されているが、コンピュータプロセッサ21は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。本明細書において、コンピュータプロセッサ21によって実行されるとして説明されるプログラム又は当該プログラムに含まれる命令は、単一のコンピュータプロセッサで実行されてもよいし、複数のコンピュータプロセッサにより分散して実行されてもよい。また、コンピュータプロセッサ21によって実行されるプログラム又は当該プログラムに含まれる命令は、複数の仮想コンピュータプロセッサにより実行されてもよい。 The computer processor 21 is an arithmetic unit that loads various programs that realize an operating system and game logic from the storage 27 or other storage into the main memory 22 and executes instructions included in the loaded program. The computer processor 21 is, for example, a CPU, an MCU, an FRPG, or various arithmetic units other than these. Although the computer processor 21 is illustrated as a single component in FIG. 1, the computer processor 21 may be a set of a plurality of physically separate computer processors. In the present specification, the program described as being executed by the computer processor 21 or the instructions contained in the program may be executed by a single computer processor or may be executed by a plurality of computer processors in a distributed manner. May be good. Further, the program executed by the computer processor 21 or the instructions included in the program may be executed by a plurality of virtual computer processors.

メモリ22は、コンピュータプロセッサ21が実行する命令及びそれ以外の各種データを格納するために用いられる。一実施形態によるゲーム処理プログラムの少なくとも一部は、ゲームの進行に応じて、随時メモリ22にロードされる。メモリ22は、例えば、コンピュータプロセッサ21が高速にアクセス可能な主記憶装置(メインメモリ)である。メモリ22は、例えば、DRAMやSRAM等のRAMによって構成される。 The memory 22 is used to store instructions executed by the computer processor 21 and various other data. At least a part of the game processing program according to the embodiment is loaded into the memory 22 at any time as the game progresses. The memory 22 is, for example, a main storage device (main memory) that the computer processor 21 can access at high speed. The memory 22 is composed of, for example, a RAM such as a DRAM or an SRAM.

通信I/F23は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。情報処理装置20は、通信I/F23を介して、他の装置とデータを送受信することができる。 The communication I / F23 is implemented as hardware, firmware, communication software such as a TCP / IP driver or PPP driver, or a combination thereof. The information processing device 20 can send and receive data to and from other devices via the communication I / F 23.

ディスプレイ24は、表示パネル24aと、タッチパネル24bと、を有する。例えば、タッチパネル24bは、表示パネル24aの上面又は下面に積層されている。表示パネル24aは、液晶パネル、有機ELパネル、無機ELパネル、又はこれら以外の画像を表示可能な任意の表示パネルである。タッチパネル24bは、プレイヤのタッチ操作を検出することができるように構成されている。タッチパネル24bは、プレイヤのタップ、ダブルタップ、ドラッグ等の各種タッチ操作を検出することができる。 The display 24 has a display panel 24a and a touch panel 24b. For example, the touch panel 24b is laminated on the upper surface or the lower surface of the display panel 24a. The display panel 24a is a liquid crystal panel, an organic EL panel, an inorganic EL panel, or any other display panel capable of displaying an image other than these. The touch panel 24b is configured to be able to detect a player's touch operation. The touch panel 24b can detect various touch operations such as tapping, double tapping, and dragging of the player.

センサユニット25は、一又は複数のセンサを備える。センサユニット25は、例えば、ジャイロセンサ、加速度センサ、および地磁気センサのうち少なくとも1つのセンサを含む。センサユニット25は、プレイヤの眼球の動きを直接的に検出するアイトラッキングセンサを備えてもよい。アイトラッキングセンサは、例えば、虹彩内に近赤外光を入射しその反射光を検出する視線検出センサである。後述するように、センサユニット25により検出された検出情報に基づいて、HMD10を装着したプレイヤ5の頭部の位置及び向きの少なくとも一方が特定される。センサユニット25を構成する各種センサの少なくとも一部は、装着具11及び/又は装着具11以外の情報処理装置20とは異なる部材に設けられてもよい。 The sensor unit 25 includes one or more sensors. The sensor unit 25 includes, for example, at least one of a gyro sensor, an acceleration sensor, and a geomagnetic sensor. The sensor unit 25 may include an eye tracking sensor that directly detects the movement of the player's eyeball. The eye tracking sensor is, for example, a line-of-sight detection sensor that injects near-infrared light into the iris and detects the reflected light. As will be described later, at least one of the position and orientation of the head of the player 5 wearing the HMD 10 is specified based on the detection information detected by the sensor unit 25. At least a part of the various sensors constituting the sensor unit 25 may be provided on a member different from the information processing device 20 other than the attachment 11 and / or the attachment 11.

集音装置26は、音声を集音することができるように構成されている。集音装置26は、例えば、マイクロフォンである。集音装置26により集音された音声情報に基づいて、プレイヤ5の音声が検出される。 The sound collecting device 26 is configured to be able to collect sound. The sound collector 26 is, for example, a microphone. The voice of the player 5 is detected based on the voice information collected by the sound collecting device 26.

ストレージ27は、コンピュータプロセッサ21によりアクセスされる外部記憶装置である。ストレージ27は、例えば、磁気ディスク、光ディスク、又は半導体メモリである。ストレージ27には、ゲーム処理プログラム等の様々なプログラムが記憶される。また、ストレージ27には、ゲームにおいて用いられる各種データも記憶される。ストレージ27に記憶され得るプログラム及び各種データの少なくとも一部は、情報処理装置20とは物理的に別体のストレージに格納されてもよい。 The storage 27 is an external storage device accessed by the computer processor 21. The storage 27 is, for example, a magnetic disk, an optical disk, or a semiconductor memory. Various programs such as a game processing program are stored in the storage 27. In addition, various data used in the game are also stored in the storage 27. At least a part of the program and various data that can be stored in the storage 27 may be stored in a storage physically separate from the information processing device 20.

図示の実施形態において、ストレージ27には、画像データ28a、チャットデータ28b、シナリオデータ28c、イベントデータ28d、ゲーム進行データ28e、及び前記以外のゲームの進行のために必要な様々なデータが記憶される。 In the illustrated embodiment, the storage 27 stores image data 28a, chat data 28b, scenario data 28c, event data 28d, game progress data 28e, and various data necessary for the progress of a game other than the above. To.

画像データ28aには、ゲームの行われる仮想空間の背景を描画するためのデータ、仮想キャラクタを描画するためのデータ、及びゲームで用いられる仮想キャラクタ以外のオブジェクトを描画するためのデータが含まれる。画像データ28aには、仮想空間内におけるオブジェクトの位置情報を含んでもよい。 The image data 28a includes data for drawing the background of the virtual space in which the game is performed, data for drawing the virtual character, and data for drawing an object other than the virtual character used in the game. The image data 28a may include position information of an object in the virtual space.

チャットデータ28bには、仮想キャラクタのアイコンを描画するためのデータ、プレイヤ5のアイコンを描画するためのデータ、仮想キャラクタの複数のメッセージを特定するためのデータ、当該仮想キャラクタの複数のメッセージの各々に対する応答メッセージの選択肢を示すデータ、及びこれら以外のチャットモードで用いられるデータが含まれる。仮想キャラクタの複数のメッセージは、各メッセージに対応するノードを有し、当該ノード同士がアークで接続されたツリー構造で定義されてもよい。このツリー構造では、例えば、最上位のルートノードである開始メッセージから複数のアークが伸びており、各アークが下位ノードに接続される。この下位ノードからもアークが延び、当該アークがさらに下位のノードに接続される。下位ノードの各々は、開始メッセージよりも後に表示され得る仮想キャラクタのメッセージの候補に対応する。また、チャットデータ28bには、チャットモードからVRモードへの移行を開始する条件であるモード移行条件が含まれてもよい。モード移行条件には、例えば、ゲームがチャットモードで開始されてからの経過時間が所定時間以上であること、ツリー構造のメッセージにおいて末端のノードまでチャットが進行したこと、及びこれら以外の条件が含まれる。チャットデータ28bには、移行オブジェクトの選択が完了しなかった後に再開されたチャットモードで表示されるメッセージを示すデータが含まれてもよい。 The chat data 28b includes data for drawing the icon of the virtual character, data for drawing the icon of the player 5, data for identifying a plurality of messages of the virtual character, and each of the plurality of messages of the virtual character. Includes data indicating the choice of response message to, and data used in other chat modes. A plurality of messages of a virtual character may have a node corresponding to each message and may be defined by a tree structure in which the nodes are connected by an arc. In this tree structure, for example, a plurality of arcs extend from the start message which is the highest root node, and each arc is connected to a lower node. An arc extends from this lower node, and the arc is connected to a lower node. Each of the subordinate nodes corresponds to a virtual character message candidate that can be displayed after the start message. Further, the chat data 28b may include a mode transition condition which is a condition for starting the transition from the chat mode to the VR mode. The mode transition conditions include, for example, the elapsed time from the start of the game in chat mode for a predetermined time or more, the chat progressing to the terminal node in the tree-structured message, and other conditions. Is done. The chat data 28b may include data indicating a message to be displayed in the chat mode resumed after the selection of the migration object has not been completed.

シナリオデータ28cには、ゲームにおいてプレイヤ5によって体験されるシナリオを定義するデータが含まれる。ゲームにおいてプレイヤ5によって体験されるシナリオが複数ある場合、シナリオデータ28cは、複数のシナリオの各々についてシナリオデータを定義してもよい。シナリオデータ28cは、複数のイベントの集合として定義されてもよい。シナリオデータ28cに含まれる複数のイベントは、各イベントに対応するノードを有し、当該ノード同士がアークで接続されたツリー構造で定義されてもよい。このツリー構造では、例えば、最上位のルートノードである冒頭イベントから複数のアークが伸びており、各アークが下位ノードに接続されている。この下位ノードからもアークが延び、当該アークがさらに下位のノードに接続される。あるシナリオにおける下位ノードの各々は、当該シナリオにおいて冒頭イベントよりも後に発生し得るイベントの候補に対応する。 The scenario data 28c includes data that defines a scenario experienced by the player 5 in the game. When there are a plurality of scenarios experienced by the player 5 in the game, the scenario data 28c may define scenario data for each of the plurality of scenarios. The scenario data 28c may be defined as a set of a plurality of events. The plurality of events included in the scenario data 28c may have nodes corresponding to each event and may be defined in a tree structure in which the nodes are connected by an arc. In this tree structure, for example, a plurality of arcs extend from the opening event, which is the highest root node, and each arc is connected to a lower node. An arc extends from this lower node, and the arc is connected to a lower node. Each of the subordinate nodes in a scenario corresponds to a candidate for an event that may occur after the opening event in that scenario.

イベントデータ28dは、シナリオデータ28cを構成するイベントの各々を定義するためのデータである。イベントデータ28dは、ゲームにおける仮想キャラクタの複数のアクションを特定するためのデータの集合として定義されてもよい。仮想キャラクタの複数のアクションは、各アクションに対応するノードを有し、当該ノード同士がアークで接続されたツリー構造で定義されてもよい。このツリー構造では、例えば、最上位のルートノードである冒頭アクションから複数のアークが伸びており、各アークが下位ノードに接続されている。この下位ノードからもアークが延び、当該アークがさらに下位のノードに接続される。あるイベントにおける下位ノードの各々は、当該イベントにおいて冒頭アクションよりも後に発生し得るアクションの候補に対応する。イベントデータ28dは、ノードごとに、当該ノードに対応するアクションに対応する動画像データ、仮想キャラクタに対してプレイヤが取ることができるアクションに関するデータ、及びこれら以外の仮想キャラクタのアクションに関するデータを含むことができる。 The event data 28d is data for defining each of the events constituting the scenario data 28c. The event data 28d may be defined as a set of data for identifying a plurality of actions of a virtual character in a game. A plurality of actions of a virtual character may have nodes corresponding to each action, and may be defined by a tree structure in which the nodes are connected by an arc. In this tree structure, for example, a plurality of arcs extend from the opening action which is the highest root node, and each arc is connected to a lower node. An arc extends from this lower node, and the arc is connected to a lower node. Each of the subordinate nodes in an event corresponds to a candidate action that can occur after the opening action in the event. The event data 28d includes, for each node, moving image data corresponding to the action corresponding to the node, data related to the action that the player can take for the virtual character, and data related to the action of the virtual character other than these. Can be done.

ゲーム進行データ28eには、ゲームの進行の管理に用いられるデータが含まれる。ゲーム進行データ28eは、ゲームの進行に応じて更新されてもよい。ゲーム進行データ28eには、例えば、仮想キャラクタのプレイヤに対する好感度に関するデータ、ゲームにおいてプレイヤが獲得したポイントに関するデータ、及びこれら以外のゲームの進行に応じて変化しえる各種データが含まれ得る。 The game progress data 28e includes data used for managing the progress of the game. The game progress data 28e may be updated according to the progress of the game. The game progress data 28e may include, for example, data regarding the liking of the virtual character for the player, data regarding points acquired by the player in the game, and various other data that can change according to the progress of the game.

図1に示されている情報処理装置20の構成要素及び機能は例示である。本発明に適用可能な情報処理装置20は、図示されていない様々な構成要素を備え得る。例えば、情報処理装置20は、ゲームの効果音や仮想キャラクタの音声を出力するスピーカを備えてもよい。 The components and functions of the information processing apparatus 20 shown in FIG. 1 are examples. The information processing apparatus 20 applicable to the present invention may include various components (not shown). For example, the information processing device 20 may include a speaker that outputs game sound effects and virtual character sounds.

続いて、HMD10の機能について説明する。図示の実施形態においては、情報処理装置20のコンピュータプロセッサ21においてコンピュータ読み取り可能な命令を実行することにより、HMD10の各種機能が実現される。コンピュータプロセッサ21において実行される命令には、一実施形態によるゲーム処理プログラムに含まれる命令が含まれる。 Subsequently, the function of the HMD 10 will be described. In the illustrated embodiment, various functions of the HMD 10 are realized by executing a computer-readable instruction in the computer processor 21 of the information processing device 20. The instructions executed in the computer processor 21 include the instructions included in the game processing program according to the embodiment.

コンピュータプロセッサ21によって一実施形態によるゲーム処理プログラムが実行されることにより、ゲーム処理システム1において第1モード及び当該第1モードとは異なる第2モードを有するゲームが実現される。ゲーム処理システム1において実現されるゲームは、第1モード及び第2モード以外のモードを有していてもよい。 By executing the game processing program according to one embodiment by the computer processor 21, a game having a first mode and a second mode different from the first mode is realized in the game processing system 1. The game realized in the game processing system 1 may have modes other than the first mode and the second mode.

ゲーム処理システム1において実現されるゲームの第1モードでは、HMD10がプレイヤ5に装着されていないときに、すなわち、情報処理装置20が装着具11から取り外されているときに、情報処理装置20により検出された第1検出情報に応じてアプリケーションに関する処理が行われる。例えば、アプリケーションがゲームの場合には、情報処理装置20により検出された第1検出情報に応じて当該ゲームに関する処理が行われる。この第1検出情報には、情報処理装置20のタッチパネル24bにより検出されるプレイヤ5のタッチ操作に関する情報、集音装置26により検出されるプレイヤの音声に関する情報、及びHMD10がプレイヤ5に装着されていない場合に情報処理装置20において検出可能な前記以外の検出情報を含み得る。プレイヤ5は、第1モードにおいては、装着具11から取り外された情報処理装置20を用いてゲームに関する操作を行うことができる。第1モードにおいては、HMD10がプレイヤ5に装着されていないときにゲームを進行させることが想定されているため、一実施形態において、ディスプレイ24には、立体視画像以外の画像が表示される。 In the first mode of the game realized in the game processing system 1, when the HMD 10 is not attached to the player 5, that is, when the information processing device 20 is removed from the attachment 11, the information processing device 20 Processing related to the application is performed according to the detected first detection information. For example, when the application is a game, processing related to the game is performed according to the first detection information detected by the information processing device 20. In the first detection information, information on the touch operation of the player 5 detected by the touch panel 24b of the information processing device 20, information on the player's voice detected by the sound collecting device 26, and HMD 10 are attached to the player 5. If not, it may include detection information other than the above that can be detected by the information processing apparatus 20. In the first mode, the player 5 can perform operations related to the game by using the information processing device 20 removed from the attachment 11. In the first mode, it is assumed that the game progresses when the HMD 10 is not attached to the player 5. Therefore, in one embodiment, an image other than the stereoscopic image is displayed on the display 24.

ゲーム処理システム1において実現されるゲームの第2モードでは、プレイヤ5の頭部に装着されたHMD10によって検出された第2検出情報を用いてアプリケーションに関する処理が行われる。例えば、アプリケーションがゲームの場合には、HMD10によって検出された第2検出情報に応じて当該ゲームに関する処理が行われる。この第2検出情報は、例えば、センサユニット25によって検出される検出情報である。この第2検出情報に基づいて、プレイヤ5の頭部の位置及び向きの少なくとも一方を特定するためのヘッドトラッキング情報が算出される。第2モードにおけるゲームの進行のための処理は、例えば、第2検出情報に基づいて算出されたヘッドトラッキング情報に基づいて実行される。第2モードにおけるゲームの進行のための処理は、ヘッドトラッキング情報に加えて、当該ヘッドトラッキング情報以外の情報も用いて実行されてもよい。プレイヤ5は、第2モードでゲームをプレイする準備として、情報処理装置20を装着具11に取付け、この情報処理装置20が取り付けられた装着具11を頭部に装着する。このように、第2モードにおいては、HMD10がプレイヤ5に装着されているときにゲームを進行させることが想定されているため、一実施形態において、第2モードでは、プレイヤ5によって立体視される立体視画像がディスプレイ24に表示される。立体視画像は、例えば、視差バリア方式によって、ディスプレイ24に表示される。視差バリア方式においては、左目用画像及び右目用画像がディスプレイ24に表示される。このように、立体視画像は、ディスプレイに表示されることによって、左右の目の視差を利用して立体視されるように構成された左目用画像及び右目用画像を含む画像のセットである。 In the second mode of the game realized in the game processing system 1, processing related to the application is performed using the second detection information detected by the HMD 10 mounted on the head of the player 5. For example, when the application is a game, processing related to the game is performed according to the second detection information detected by the HMD 10. This second detection information is, for example, detection information detected by the sensor unit 25. Based on this second detection information, head tracking information for specifying at least one of the position and orientation of the head of the player 5 is calculated. The process for the progress of the game in the second mode is executed, for example, based on the head tracking information calculated based on the second detection information. The process for the progress of the game in the second mode may be executed by using information other than the head tracking information in addition to the head tracking information. The player 5 attaches the information processing device 20 to the attachment 11 and attaches the attachment 11 to which the information processing device 20 is attached to the head in preparation for playing the game in the second mode. As described above, in the second mode, it is assumed that the game progresses when the HMD 10 is attached to the player 5. Therefore, in one embodiment, in the second mode, the player 5 stereoscopically views the game. The stereoscopic image is displayed on the display 24. The stereoscopic image is displayed on the display 24 by, for example, a parallax barrier method. In the parallax barrier method, the image for the left eye and the image for the right eye are displayed on the display 24. As described above, the stereoscopic image is a set of images including a left-eye image and a right-eye image configured to be stereoscopically viewed by utilizing the parallax of the left and right eyes by being displayed on the display.

第1モードは、例えば、チャットモードである。チャットモードは第1モードの例示である。チャットモードにおいては、プレイヤが仮想キャラクタとテキストメッセージを介してチャットする機能が実現される。プレイヤは、第1モードにおいては、仮想キャラクタとチャットを行うことにより、当該仮想キャラクタとのインタラクションを体験することができる。インタラクションとは、広義には、プレイヤが実行したアクションに対して仮想キャラクタがリアクションすることを意味する。仮想キャラクタとのインタラクションには、仮想キャラクタとの会話などによるコミュニケーションとしてなされるインタラクションが含まれる。本明細書においては、仮想キャラクタとのコミュニケーションとして行われるインタラクションをコミュニケーティブインタラクションと呼ぶことがある。仮想キャラクタとのインタラクションには、コミュニケーティブインタラクションの他に、仮想キャラクタとの対戦、仮想キャラクタと協力してゲームをプレイする協力プレイ、及びこれら以外の仮想キャラクタとの相互作用が含まれ得る。本明細書においては、仮想キャラクタとの対戦として行われるインタラクションを対戦インタラクションと呼ぶことがある。本明細書においては、仮想キャラクタとの協力プレイとして行われるインタラクションを協力インタラクションと呼ぶことがある。チャットモードにおける処理の具体的な内容は後述される。第1モードにおいては、チャット以外の方法で仮想キャラクタとのインタラクションが提供されてもよい。例えば、第1モードでは、メール、電話、ビデオ通話、又はこれら以外の態様で仮想キャラクタとのインタラクションが提供される。 The first mode is, for example, a chat mode. The chat mode is an example of the first mode. In the chat mode, a function is realized in which the player chats with a virtual character via a text message. In the first mode, the player can experience the interaction with the virtual character by chatting with the virtual character. Interaction means, in a broad sense, that the virtual character reacts to the action executed by the player. The interaction with the virtual character includes an interaction performed as communication such as a conversation with the virtual character. In the present specification, an interaction performed as communication with a virtual character may be referred to as a communicative interaction. Interactions with virtual characters may include, in addition to communicative interactions, battles with virtual characters, cooperative play in which games are played in cooperation with virtual characters, and interactions with other virtual characters. In the present specification, an interaction performed as a battle with a virtual character may be referred to as a battle interaction. In the present specification, an interaction performed as a cooperative play with a virtual character may be referred to as a cooperative interaction. The specific contents of the processing in the chat mode will be described later. In the first mode, the interaction with the virtual character may be provided by a method other than chat. For example, in the first mode, interaction with the virtual character is provided by email, telephone, video call, or other aspects.

第2モードは、例えば、VRモードである。VRモードにおいては、情報処理装置20のディスプレイに表示される仮想空間に登場する仮想キャラクタと様々なインタラクションを行うための機能が実現される。VRモードにおける処理の具体的な内容は後述される。VRモードは第2モードの例示であり、第2モードには、ヘッドトラッキング情報を用いてゲーム進行のための処理が行われる任意のゲームモードが含まれ得る。 The second mode is, for example, a VR mode. In the VR mode, a function for performing various interactions with a virtual character appearing in the virtual space displayed on the display of the information processing device 20 is realized. The specific contents of the processing in the VR mode will be described later. The VR mode is an example of the second mode, and the second mode may include any game mode in which processing for game progress is performed using the head tracking information.

一実施形態において、ゲーム処理システム1で実現される第1モード及び第2モードを有するゲームは、仮想キャクタとコミュニケーティブインタラクション以外のインタラクションを行うゲームであってもよい。ゲーム処理システム1で実現されるゲームでは、コミュニケーティブインタラクションが行われなくともよい。一実施形態におけるゲームでは、第1モードでは2次元空間でプレイされ、第2モードでは3次元空間でプレイされる。一実施形態におけるゲームでは、第1モードでは3次元空間でプレイされ、第2モードでは当該第1モードの3次元空間とは異なる表示態様で表示される(又は当該第1モードの3次元空間とは異なる態様で構成される)3次元空間でプレイされる。一実施形態において、ゲーム処理システム1で実現されるゲームは、第1モード及び第2モードで共通のゲーム媒体を使用するものであってもよい。このゲーム媒体に関連付けられたパラメータは、第1モードと第2モードとの間で引き継がれてもよい。例えば、第1モードでのプレイ中に特定のゲーム媒体のパラメータが変更され、その後に第2モードへ移行した場合には、変更後のパラメータが設定された当該特定のゲーム媒体が第2モードで用いられる。一実施形態において、特定のゲーム媒体のパラメータは、第1モードから第2モードへの移行時及び第2モードから第1モードへの移行時の少なくとも一方において、変更されてもよい。このゲーム媒体のパラメータの変更は、プレイヤ5にとってゲームの進行上有利となる変更であってもよいし、不利となる変更であってもよい。一実施形態において、第1モードでのプレイ結果が第2モードでのゲームに反映されてもよいし、第2モードでのプレイ結果が第1モードでのゲームに反映されてもよい。例えば、第1モードで獲得されたプレイヤ5の経験値が第2モードにおいて引き継がれてもよい。 In one embodiment, the game having the first mode and the second mode realized by the game processing system 1 may be a game in which an interaction other than the virtual character and the communicative interaction is performed. In the game realized by the game processing system 1, communicative interaction does not have to be performed. In the game of one embodiment, the first mode is played in a two-dimensional space, and the second mode is played in a three-dimensional space. In the game of one embodiment, the game is played in a three-dimensional space in the first mode, and is displayed in a display mode different from the three-dimensional space of the first mode in the second mode (or with the three-dimensional space of the first mode). Is played in a three-dimensional space (consisting of different aspects). In one embodiment, the game realized by the game processing system 1 may use a common game medium in the first mode and the second mode. The parameters associated with this game medium may be inherited between the first mode and the second mode. For example, if the parameters of a specific game medium are changed during play in the first mode and then shift to the second mode, the specific game medium in which the changed parameters are set is set in the second mode. Used. In one embodiment, the parameters of a particular game medium may be changed at least during the transition from the first mode to the second mode and from the second mode to the first mode. The change of the parameter of the game medium may be a change that is advantageous or disadvantageous to the player 5 in the progress of the game. In one embodiment, the play result in the first mode may be reflected in the game in the second mode, or the play result in the second mode may be reflected in the game in the first mode. For example, the experience value of the player 5 acquired in the first mode may be inherited in the second mode.

上記のとおり、ゲーム処理システム1において実現されるゲームの第1モードと第2モードとは互いから識別されるモードである。つまり、第1モードは第2モードと異なるモードである。一実施形態においては、ゲーム処理システム1において実現されるゲームが第1モードでプレイされる場合には、HMD10がプレイヤ5の頭部に装着されないのに対し、当該ゲームが第2モードでプレイされる場合には、HMD10がプレイヤ5の頭部の頭部に装着される。この場合、第1モードにおいては、プレイヤ5の頭部に装着されていない情報処理装置20により検出された第1検出情報に応じてゲームの処理が行われ、第2モードにおいては、プレイヤ5の頭部に装着されたHMD10により検出された第2検出情報に応じてゲームの処理が行われる。 As described above, the first mode and the second mode of the game realized in the game processing system 1 are modes that are distinguished from each other. That is, the first mode is a mode different from the second mode. In one embodiment, when the game realized in the game processing system 1 is played in the first mode, the HMD 10 is not mounted on the head of the player 5, whereas the game is played in the second mode. If so, the HMD 10 is attached to the head of the player 5. In this case, in the first mode, the game is processed according to the first detection information detected by the information processing device 20 not attached to the head of the player 5, and in the second mode, the player 5 The game is processed according to the second detection information detected by the HMD 10 mounted on the head.

一実施形態において、第2モードでは、立体視画像がディスプレイ24に表示されるのに対し、上述したように、第1モードでは立体視画像以外の画像がディスプレイ24に表示される。第2モードでは、ゲーム用の画像のうち少なくとも仮想キャラクタの画像が立体視画像として表示され、第1モードでは、仮想キャラクタの画像が立体視画像以外の画像として表示される。 In one embodiment, in the second mode, the stereoscopic image is displayed on the display 24, whereas as described above, in the first mode, an image other than the stereoscopic image is displayed on the display 24. In the second mode, at least the image of the virtual character is displayed as a stereoscopic image among the images for the game, and in the first mode, the image of the virtual character is displayed as an image other than the stereoscopic image.

一実施形態において、第1モードにおいては第2検出情報に基づいて算出されるヘッドトラッキング情報を用いずにゲームを進行させる処理がなされるのに対して、第2モードにおいては当該ヘッドトラッキング情報に基づいてゲームを進行させる処理がなされる。 In one embodiment, in the first mode, the process of advancing the game is performed without using the head tracking information calculated based on the second detection information, whereas in the second mode, the head tracking information is used. The process of advancing the game is performed based on this.

一実施形態において、第1モードにおいてはタッチパネル24bにより検出されるタッチ操作に応じてゲームを進行させる処理がなされるのに対して、第2モードにおいてはタッチパネル24bのタッチ操作に応じた処理はなされない。別の実施形態においては、第2モードにおいてもタッチパネル24bの操作に応じた処理がなされてもよい。 In one embodiment, in the first mode, the process of advancing the game is performed according to the touch operation detected by the touch panel 24b, whereas in the second mode, the process is performed according to the touch operation of the touch panel 24b. Not done. In another embodiment, the process corresponding to the operation of the touch panel 24b may be performed even in the second mode.

一実施形態において、ゲーム処理システム1において実現されるゲームにおいて仮想キャラクタとのインタラクションが提供される場合には、第1モードにおいては、プレイヤ5の頭部に装着されていない情報処理装置20により検出された第1検出情報に応じた当該仮想キャラクタとのインタラクションが提供され、第2モードにおいては、プレイヤ5の頭部に装着されたHMD10により検出された第2検出情報に応じた当該仮想キャラクタとのインタラクションが提供される。 In one embodiment, when the interaction with the virtual character is provided in the game realized in the game processing system 1, in the first mode, it is detected by the information processing device 20 which is not attached to the head of the player 5. Interaction with the virtual character according to the first detection information is provided, and in the second mode, the interaction with the virtual character corresponding to the second detection information detected by the HMD 10 mounted on the head of the player 5 is provided. Interaction is provided.

ゲームを開始した後には、上記のように区別される第1モードと第2モードとの間での移行が可能となる。図4を参照して、ゲーム処理システム1により処理されるゲームのモード移行の概略を説明する。図示のように、ステップS1においてゲームが開始されると、ステップS2において第1モードであるチャットモードS2が開始される。このチャットモードにおいて、第2モードであるVRモードへ移行するための移行処理が開始されると、ステップS3に移行し、第2モードへの移行処理が行われる。移行処理が完了すると、ステップS4において第2モードであるVRモードが開始される。VRモードが終了又は中断されると、チャットモードへの復帰処理が行われる。 After starting the game, it is possible to transition between the first mode and the second mode, which are distinguished as described above. The outline of the mode transition of the game processed by the game processing system 1 will be described with reference to FIG. As shown in the figure, when the game is started in step S1, the chat mode S2, which is the first mode, is started in step S2. In this chat mode, when the transition process for shifting to the VR mode, which is the second mode, is started, the process proceeds to step S3, and the transition process to the second mode is performed. When the transition process is completed, the VR mode, which is the second mode, is started in step S4. When the VR mode is terminated or interrupted, the process of returning to the chat mode is performed.

次に、コンピュータプロセッサ21により実現される機能についてより具体的に説明する。コンピュータプロセッサ21は、コンピュータ読み取り可能な命令を実行することにより、チャットモード実行部21a、移行処理部21b、及びVRモード実行部21cとして機能する。コンピュータプロセッサ21により実現される機能の少なくとも一部は、ゲームシステム1のコンピュータプロセッサ21以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ21により実現される機能の少なくとも一部は、例えば、サーバ50に搭載されているコンピュータプロセッサにより実現されてもよい。 Next, the functions realized by the computer processor 21 will be described more specifically. The computer processor 21 functions as a chat mode execution unit 21a, a transition processing unit 21b, and a VR mode execution unit 21c by executing a computer-readable instruction. At least a part of the functions realized by the computer processor 21 may be realized by a computer processor other than the computer processor 21 of the game system 1. At least a part of the functions realized by the computer processor 21 may be realized by, for example, the computer processor mounted on the server 50.

チャットモード実行部21aは、一実施形態によるゲーム処理プログラムを実行することにより、第1モードであるチャットモードでゲームを提供するための処理を行う。チャットモード実行部21aは、プレイヤ5と仮想キャラクタとの間でチャットを行うための機能を実現する。チャットモード実行部21aは、チャットモードへのログイン後に、仮想キャラクタのメッセージ及びプレイヤ5により入力又は選択されたメッセージをディスプレイ24に表示し、当該仮想キャラクタとプレイヤ5との間でチャットを行わせることができる。チャットモード実行部21aは、仮想キャラクタのメッセージに続けて、当該メッセージ対するプレイヤ5の応答に関する複数の選択肢をディスプレイ24に表示してもよい。プレイヤ5の操作に応じて当該複数の選択肢から特定された選択肢に対応するメッセージが、仮想キャラクタのメッセージに続けて、プレイヤ5のメッセージとして表示される。プレイヤ5は、タッチパネル24bへのタッチ操作により、表示された選択肢のうち所望のものを選択することができる。仮想キャラクタのメッセージ及び当該メッセージに対するプレイヤの選択肢は、ゲーム処理プログラムに従って、チャットデータ28bを参照して特定することができる。仮想キャラクタのメッセージは、当該仮想キャラクタの画像とともに表示されてもよく、プレイヤ5のメッセージには、当該プレイヤ5の画像とともに表示されてもよい。仮想キャラクタのメッセージは、第2モードであるVRモードへの移行を促すメッセージ、当該VRモードにおける設定をプレイヤ5に選択させるためのメッセージ、及びこれら以外の当該VRモードに関連づけられたメッセージが含まれていてもよい。 The chat mode execution unit 21a performs processing for providing a game in the chat mode, which is the first mode, by executing the game processing program according to the embodiment. The chat mode execution unit 21a realizes a function for chatting between the player 5 and the virtual character. After logging in to the chat mode, the chat mode execution unit 21a displays a message of the virtual character and a message input or selected by the player 5 on the display 24, and causes the virtual character and the player 5 to chat with each other. Can be done. Following the message of the virtual character, the chat mode execution unit 21a may display a plurality of options regarding the response of the player 5 to the message on the display 24. A message corresponding to the option specified from the plurality of options according to the operation of the player 5 is displayed as a message of the player 5 following the message of the virtual character. The player 5 can select a desired option from the displayed options by touching the touch panel 24b. The message of the virtual character and the player's choice for the message can be specified by referring to the chat data 28b according to the game processing program. The message of the virtual character may be displayed together with the image of the virtual character, and the message of the player 5 may be displayed together with the image of the player 5. The virtual character message includes a message prompting the player to shift to the VR mode, which is the second mode, a message for the player 5 to select a setting in the VR mode, and a message associated with the VR mode other than these. You may be.

一実施形態において、チャットモードでは、チャットの進行に応じて、第2モードであるVRモードへの移行を開始するための移行開始オブジェクトが表示される。移行開始オブジェクトの表示は、ゲーム処理プログラムに従って、モード移行条件が成立したときに行われる。チャットモード実行部21aは、タッチパネル24b又はそれ以外のユーザインタフェースからの検出信号に基づいて移行開始オブジェクトが選択されたことを検知することができる。移行開始オブジェクトが選択されたことが検知されると、第2モードであるVRモードへの移行処理が開始される。別の実施形態においては、第1モードにおいて、移行開始オブジェクトの選択以外の方法によって移行処理が開始される。例えば、第1モードにおいて移行開始のための条件が満たされた場合に、ユーザ5が操作可能なコントローラ(情報処理装置20とは別の装置)の特定の操作を検知すること、ユーザが発話した音声を認識すること、及び/又はこれら以外の態様でユーザ5からの指示を認識した場合に移行処理が開始されてもよい。 In one embodiment, in the chat mode, a transition start object for initiating the transition to the VR mode, which is the second mode, is displayed according to the progress of the chat. The transition start object is displayed when the mode transition condition is satisfied according to the game processing program. The chat mode execution unit 21a can detect that the transition start object is selected based on the detection signal from the touch panel 24b or other user interfaces. When it is detected that the migration start object is selected, the transition process to the VR mode, which is the second mode, is started. In another embodiment, in the first mode, the migration process is started by a method other than the selection of the migration start object. For example, when the condition for starting the transition is satisfied in the first mode, the user speaks to detect a specific operation of the controller (a device different from the information processing device 20) that can be operated by the user 5. The transition process may be started when the voice is recognized and / or the instruction from the user 5 is recognized in a mode other than these.

移行処理部21bは、第1モードから第2モードへ移行するための移行処理を行う。この移行処理には、情報処理装置20を装着具11へ装着するように促すガイダンスをディスプレイ24に表示すること、及び、プレイヤの注視によって選択可能な移行オブジェクトをディスプレイ24に表示させること、を含んでもよい。この移行オブジェクトを表示させた後、移行処理部21bは、センサユニット25又はそれ以外のセンサの検出信号を受信し、この検出信号に基づいて移行オブジェクトが注視によって選択されたか否かを判定することができる。この判定のために、移行処理部21bは、センサユニット25の検出信号に基づいてHMD10の位置及び向きの少なくとも一方を算出し、この算出されたHMD10の位置及び向きの少なくとも一方に基づいて、プレイヤ5の注視位置を特定する。注視位置の特定は、様々な公知の方法により行われ得る。例えば、第2検出情報に基づいて表示された立体視画像の中央部分を注視位置として特定してもよい。又は、アイトラッキングセンサの検出信号に基づいて注視位置を特定してもよい。移行処理部21bは、例えば、注視位置が移行オブジェクト上にある時間(注視時間)を計測し、この注視時間が所定時間に達したときに、移行オブジェクトの選択が完了したと判断する。移行処理部21bは、移行オブジェクトの選択が完了したと判断すると第2モードであるVRモードを開始させる。別の実施形態においては、移行オブジェクトの選択以外の方法によって第2モードへの移行が行われてもよい。例えば、ユーザ5が操作可能なコントローラ(情報処理装置20とは別の装置)の特定の操作を検知すること、ユーザが発話した音声を認識すること、及び/又はこれら以外の態様でユーザ5からの指示を認識した場合に移行が行われてもよい。移行オブジェクトは、移行開始オブジェクトとは異なる方法で選択されるように構成されてもよい。例えば、移行開始オブジェクトは、タッチパネル24bの操作により選択され、移行オブジェクトはプレイヤの注視によって選択される。 The transition processing unit 21b performs a transition process for shifting from the first mode to the second mode. This transition process includes displaying guidance on the display 24 prompting the information processing device 20 to be attached to the wearing device 11, and displaying a transition object that can be selected by the player's gaze on the display 24. It may be. After displaying the transition object, the transition processing unit 21b receives the detection signal of the sensor unit 25 or other sensors, and determines whether or not the transition object is selected by gaze based on the detection signal. Can be done. For this determination, the transition processing unit 21b calculates at least one of the position and orientation of the HMD 10 based on the detection signal of the sensor unit 25, and the player is based on at least one of the calculated position and orientation of the HMD 10. Specify the gaze position of 5. The gaze position can be specified by various known methods. For example, the central portion of the stereoscopic image displayed based on the second detection information may be specified as the gaze position. Alternatively, the gaze position may be specified based on the detection signal of the eye tracking sensor. For example, the shift processing unit 21b measures the time (gaze time) at which the gaze position is on the shift object, and determines that the selection of the shift object is completed when the gaze time reaches a predetermined time. When the migration processing unit 21b determines that the selection of the migration object is completed, it starts the VR mode, which is the second mode. In another embodiment, the transition to the second mode may be performed by a method other than the selection of the transition object. For example, detecting a specific operation of a controller (a device different from the information processing device 20) that can be operated by the user 5, recognizing a voice spoken by the user, and / or from the user 5 in other modes. The transition may be made when the instruction of is recognized. The migration object may be configured to be selected differently than the migration start object. For example, the transition start object is selected by operating the touch panel 24b, and the transition object is selected by the player's gaze.

VRモード実行部21cは、センサユニット25の検出信号に基づいてHMD10の位置及び向きの少なくとも一方を特定するためのヘッドトラッキング情報を算出し、算出されたヘッドトラッキング情報に基づいてHMD10の位置及び向きの少なくとも一方を特定することができる。VRモード実行部21cは、特定されたHMD10の位置及び向きの少なくとも一方に応じた仮想空間を構成し、この仮想空間を表示するための画像情報をディスプレイ24に出力する。VRモード実行部21cでは、例えば、HMD10の位置及び向きの少なくとも一方に基づいて注視位置を算出し、仮想空間全体のうち、特定された注視位置を中心として画角等により定められる所定の範囲の画像情報を生成する。このようにして生成された画像情報に基づいて、ディスプレイ24に所定の範囲の仮想空間の画像が表示される。画像情報の生成には、例えば、ストレージ27に記憶された画像データ28a、シナリオデータ28c、イベントデータ28d、ゲーム進行データ28e、及びこれら以外のデータが用いられ得る。 The VR mode execution unit 21c calculates head tracking information for specifying at least one of the position and orientation of the HMD 10 based on the detection signal of the sensor unit 25, and the position and orientation of the HMD 10 based on the calculated head tracking information. At least one of can be identified. The VR mode execution unit 21c configures a virtual space corresponding to at least one of the specified position and orientation of the HMD 10, and outputs image information for displaying the virtual space to the display 24. In the VR mode execution unit 21c, for example, the gaze position is calculated based on at least one of the position and orientation of the HMD10, and within the entire virtual space, a predetermined range determined by the angle of view or the like with the specified gaze position as the center. Generate image information. Based on the image information generated in this way, an image of a virtual space in a predetermined range is displayed on the display 24. For example, image data 28a, scenario data 28c, event data 28d, game progress data 28e, and other data stored in the storage 27 can be used to generate the image information.

VRモード実行部21cは、ゲーム処理プログラムに従って、仮想空間に仮想キャラクタの画像を表示し、この仮想キャラクタとプレイヤ5との間でのインタラクションを実現する。VRモード実行部21cは、ゲーム処理プログラムに従って、仮想空間内での仮想キャラクタの行動を決定し、この仮想キャラクタの行動に対応する画像情報及び音声情報を生成する。当該画像情報はディスプレイ24に出力され、当該音声情報はHMD10が有するスピーカに出力される。これにより、ディスプレイ24には、仮想空間内で仮想キャラクタが動く画像が表示され、スピーカからは仮想キャラクタの動きに対応した音声が出力される。例えば、仮想キャラクタがプレイヤ5に話しかける場合には、仮想キャラクタの頭部及び口が動く画像がディスプレイ24に表示され、仮想キャラクタの発言に対応する音声がスピーカから出力される。仮想キャラクタの行動に対応する画像情報及び音声情報の生成には、例えば、ストレージ27に記憶された画像データ28a、シナリオデータ28c、イベントデータ28d、ゲーム進行データ28e、及びこれら以外のデータが用いられ得る。一実施形態において、VRモード及びチャットモードの各々においてプレイヤ5とインタラクトする仮想キャラクタは、同じ仮想キャラクタである。例えば、VRモードに登場する仮想キャラクタとチャットモードに登場するキャラクタと同じ名前を有し、同一のキャラクタと認識できる程度の外観上の共通性を有する。ただし、VRモードにおいては仮想キャラクタの画像が立体視画像として表示されるのに対し、チャットモードにおいては仮想キャラクタの画像が立体視画像以外の画像として表示される点で、両モードにおける仮想キャラクタの画像は互いと相違している。しかし、このような表現形式の相違は、仮想キャラクタの同一性を妨げることはない。 The VR mode execution unit 21c displays an image of the virtual character in the virtual space according to the game processing program, and realizes an interaction between the virtual character and the player 5. The VR mode execution unit 21c determines the behavior of the virtual character in the virtual space according to the game processing program, and generates image information and audio information corresponding to the behavior of the virtual character. The image information is output to the display 24, and the audio information is output to the speaker included in the HMD 10. As a result, the display 24 displays an image of the virtual character moving in the virtual space, and the speaker outputs the sound corresponding to the movement of the virtual character. For example, when the virtual character speaks to the player 5, an image in which the head and mouth of the virtual character move is displayed on the display 24, and a voice corresponding to the speech of the virtual character is output from the speaker. For example, image data 28a, scenario data 28c, event data 28d, game progress data 28e, and other data stored in the storage 27 are used to generate image information and audio information corresponding to the behavior of the virtual character. obtain. In one embodiment, the virtual characters that interact with the player 5 in each of the VR mode and the chat mode are the same virtual characters. For example, it has the same name as the virtual character appearing in the VR mode and the character appearing in the chat mode, and has a common appearance to the extent that it can be recognized as the same character. However, in the VR mode, the virtual character image is displayed as a stereoscopic image, whereas in the chat mode, the virtual character image is displayed as an image other than the stereoscopic image. The images are different from each other. However, such a difference in expression format does not prevent the identity of the virtual character.

上記の機能に加えて、VRモード実行部21cは、センサユニット25からの検出信号に基づいて、HMD10を用いたプレイヤ5のアクションを特定し、この特定されたアクションに応じて仮想キャラクタの仮想空間内での行動(リアクション)を決定する機能を有していてもよい。HMD10を装着したプレイヤ5によるアクションには、うなずく、首を横に振る、又はこれら以外の頭部の動きを伴う動作、並びに視線の動きが含まれる。このような頭部の動きを伴う動作は、センサユニット25による検出情報に基づいて算出される。具体的には、頭部に装着されているHMD10の位置及び向きの少なくとも一方が、三次元直交座標系での位置および各軸回りの角度として算出される。この三次元直交座標系は、例えば、前後方向に沿ったロール軸、上下方向に沿ったヨー軸、左右方向に沿ったピッチ軸から成る直交座標系である。仮想キャラクタにリアクションを行わせるためのプレイヤ5のアクションには、視線を動かすことが含まれてもよい。このような視線の動きは、センサユニット25に含まれるアイトラッキングセンサによって検出され得る。VRモード実行部21cは、プレイヤ5のアクションに応じて決定された仮想キャラクタの行動を表示するための画像情報を生成し、この生成された画像情報を立体視画像としてディスプレイ24に出力する。これにより、ディスプレイ24には、プレイヤ5のアクションに応じて決定された行動を行う仮想キャラクタの画像が表示される。このように、VRモード実行部21cは、HMD10により検出されたプレイヤ5の頭部のアクション又は視線の動きに応じて仮想キャラクタの行動を決定し、その決定された行動に対応する仮想キャラクタの画像情報をディスプレイ24で表示させる。第2モードでは、このようにしてプレイヤ5と立体視画像として表示される仮想キャラクタとの間でのインタラクションを実現している。 In addition to the above functions, the VR mode execution unit 21c identifies the action of the player 5 using the HMD 10 based on the detection signal from the sensor unit 25, and the virtual space of the virtual character corresponds to the specified action. It may have a function of determining an action (reaction) within. Actions by the player 5 wearing the HMD 10 include nodding, shaking the head, or other movements involving the movement of the head, and movements of the line of sight. Such an operation accompanied by the movement of the head is calculated based on the detection information by the sensor unit 25. Specifically, at least one of the position and orientation of the HMD 10 mounted on the head is calculated as the position in the three-dimensional Cartesian coordinate system and the angle around each axis. This three-dimensional Cartesian coordinate system is, for example, a Cartesian coordinate system including a roll axis along the front-back direction, a yaw axis along the up-down direction, and a pitch axis along the left-right direction. The action of the player 5 for causing the virtual character to perform a reaction may include moving the line of sight. Such movement of the line of sight can be detected by an eye tracking sensor included in the sensor unit 25. The VR mode execution unit 21c generates image information for displaying the action of the virtual character determined according to the action of the player 5, and outputs the generated image information to the display 24 as a stereoscopic image. As a result, the display 24 displays an image of a virtual character that performs an action determined according to the action of the player 5. In this way, the VR mode execution unit 21c determines the action of the virtual character according to the action of the head of the player 5 or the movement of the line of sight detected by the HMD 10, and the image of the virtual character corresponding to the determined action. The information is displayed on the display 24. In the second mode, the interaction between the player 5 and the virtual character displayed as a stereoscopic image is realized in this way.

VRモード実行部21cは、終了条件が満たされるとVRモードを終了するための終了処理を行う。終了条件は、例えば、VRモードの開始から所定時間(例えば、1分)経過したこと、終了対象操作が検知されたこと、VRモードで実行されているシナリオに含まれる最後のイベントが終了したこと、及びこれら以外の条件である。終了条件が満たされたときに行われる終了処理には、情報処理装置20を装着具11から取り外すよう促すガイダンスをディスプレイ24に表示すること、及び、第1モードであるチャットモードへのログイン画面を表示させることが含まれてもよい。 The VR mode execution unit 21c performs termination processing for terminating the VR mode when the termination condition is satisfied. The end conditions are, for example, that a predetermined time (for example, 1 minute) has passed from the start of the VR mode, that the operation to be ended is detected, and that the last event included in the scenario executed in the VR mode has ended. , And other conditions. For the termination process performed when the termination condition is satisfied, a guidance prompting the information processing device 20 to be removed from the fitting 11 is displayed on the display 24, and a login screen for the chat mode, which is the first mode, is displayed. Displaying may be included.

次に、図5から図9を参照して、チャットモードにおけるチャット処理について説明する。図5は、一実施形態におけるチャットモードでの処理の流れを示すフロー図であり、図6から図9は、チャットモードにおける表示画像の例を示す。チャットモードの開始時においては、HMD10はプレイヤ5の頭部に装着されておらず、また、情報処理装置20は装着具11から取り外されていることが想定されている。 Next, the chat process in the chat mode will be described with reference to FIGS. 5 to 9. FIG. 5 is a flow chart showing a flow of processing in the chat mode in one embodiment, and FIGS. 6 to 9 show an example of a display image in the chat mode. At the start of the chat mode, it is assumed that the HMD 10 is not attached to the head of the player 5 and the information processing device 20 is removed from the attachment 11.

ゲーム処理システム1において、ゲームは、チャットモードで開始される。ステップS11では、チャットモードへログインするためのログイン画面が情報処理装置20のディスプレイ24に表示される。プレイヤ5によってログイン処理がなされると、当該チャット処理は、ステップS12に移行する。 In the game processing system 1, the game is started in chat mode. In step S11, a login screen for logging in to the chat mode is displayed on the display 24 of the information processing device 20. When the login process is performed by the player 5, the chat process proceeds to step S12.

ステップS12においては、プレイヤ5と仮想キャラクタとの間でメッセージが交換され、これにより両者の間でチャットが行われる。チャットモードへのログインがなされると、プレイヤ5と仮想キャラクタとの間で行われるチャットを表示するためのチャット表示画像が生成され、当該チャット表示画像がディスプレイ24に表示される。図6は、ディスプレイ24に表示されるチャット表示画像の一例であるチャット表示画像70を示す。チャット表示画像70は、プレイヤ5に対応するアイコン73と、仮想キャラクタに対応するアイコン74と、プレイヤ5のメッセージ75aと、仮想キャラクタのメッセージ76a,76bと、を含むチャット表示領域71を含む。また、チャット表示画像70は、チャット表示領域71の上部に配されたメニュー領域72を含む。仮想キャラクタのメッセージ76a,76bは、ゲーム処理プログラムに従って、ストレージ72に記憶されているチャットデータ28b及びこれ以外のデータに基づいて特定される。例えば、仮想キャラクタのメッセージは、ツリー構造で定義されているチャットデータ28bを参照して、ルートノードにあるメッセージから順に表示される。ノードの分岐点においては、分岐条件に応じたノードが選択され、当該選択されたノードに対応するメッセージが表示される。 In step S12, a message is exchanged between the player 5 and the virtual character, whereby a chat is performed between the two players. When the user logs in to the chat mode, a chat display image for displaying the chat performed between the player 5 and the virtual character is generated, and the chat display image is displayed on the display 24. FIG. 6 shows a chat display image 70, which is an example of a chat display image displayed on the display 24. The chat display image 70 includes a chat display area 71 including an icon 73 corresponding to the player 5, an icon 74 corresponding to the virtual character, a message 75a of the player 5, and messages 76a and 76b of the virtual character. Further, the chat display image 70 includes a menu area 72 arranged above the chat display area 71. The virtual character messages 76a and 76b are specified based on the chat data 28b and other data stored in the storage 72 according to the game processing program. For example, the virtual character message is displayed in order from the message at the root node with reference to the chat data 28b defined in the tree structure. At the branch point of the node, the node corresponding to the branch condition is selected, and the message corresponding to the selected node is displayed.

図6のチャット表示画像70は、チャット表示領域71の下部に、プレイヤ5のメッセージの選択肢77を示す表示を含んでいる。プレイヤ5は、表示されている選択肢77のうちの一つを選択することができる。この選択は、ディスプレイ24において選択したい選択肢が表示されている領域を指で接触することで行われる。この選択がなされると、図7に示すように、選択された選択肢に対応するメッセージ75bが、プレイヤ5のメッセージとしてチャット表示領域71に新たに表示される。 The chat display image 70 of FIG. 6 includes a display showing the message option 77 of the player 5 at the lower part of the chat display area 71. Player 5 can select one of the displayed options 77. This selection is made by touching the area on the display 24 where the option to be selected is displayed with a finger. When this selection is made, as shown in FIG. 7, the message 75b corresponding to the selected option is newly displayed in the chat display area 71 as a message of the player 5.

図8に示すように、チャットの過程で、第2モードであるVRモードでの設定の選択を促すメッセージ76c,76dが仮想キャラクタのメッセージとして表示されてもよい。メッセージ76cは、VRモードにおけるシーンの選択を促すメッセージであり、メッセージ76dは、VRモードで仮想キャラクタが使用するアイテム(例えば、仮想キャラクタがVRモードの仮想空間内で着用する服)の選択を促すメッセージである。つまり、第2モードにおける設定には、VRモードの背景などを規定するシーン、VRモードで仮想キャラクタが使用するアイテム、及びこれら以外の各種設定が含まれ得る。シーンの選択を促すメッセージ76cが表示された後には、ディスプレイ24にシーンの選択肢が表示される。プレイヤ5は、この選択肢の中から好みのシーンを選択することができる。アイテムの選択を促すメッセージ76dが表示された後には、ディスプレイ24にアイテムの選択肢が表示される。プレイヤ5は、この選択肢の中から好みのアイテムを選択することができる。チャットの過程で、第2モードへの移行を促すメッセージが仮想キャラクタのメッセージとして表示されてもよい。 As shown in FIG. 8, in the process of chatting, the messages 76c and 76d prompting the selection of the setting in the VR mode, which is the second mode, may be displayed as the virtual character message. Message 76c is a message prompting the selection of a scene in the VR mode, and message 76d prompts the selection of an item used by the virtual character in the VR mode (for example, clothes worn by the virtual character in the virtual space of the VR mode). It is a message. That is, the settings in the second mode may include a scene that defines the background of the VR mode, items used by the virtual character in the VR mode, and various settings other than these. After the message 76c prompting the selection of the scene is displayed, the selection of the scene is displayed on the display 24. The player 5 can select a favorite scene from this option. After the message 76d prompting the item selection is displayed, the item selection is displayed on the display 24. Player 5 can select a favorite item from this option. In the process of chatting, a message prompting the transition to the second mode may be displayed as a virtual character message.

ステップS13では、第1モードから第2モードへのモード移行条件が成立したか否かが判定される。第1モードから第2モードへのモード移行条件として、例えば、チャットモード開始から所定時間(例えば、1分)が経過したことという条件が用いられる。チャットモード開始からの経過時間は、例えばシステムクロックを用いて計測される。モード移行条件が成立したと判断されるまで、ステップS12に戻ってチャット処理が継続される。他方、モード移行条件が成立したと判断されると、チャット処理は、ステップS14に移行する。 In step S13, it is determined whether or not the mode transition condition from the first mode to the second mode is satisfied. As a mode transition condition from the first mode to the second mode, for example, a condition that a predetermined time (for example, 1 minute) has elapsed from the start of the chat mode is used. The elapsed time from the start of the chat mode is measured using, for example, the system clock. The chat process is continued by returning to step S12 until it is determined that the mode transition condition is satisfied. On the other hand, if it is determined that the mode transition condition is satisfied, the chat process proceeds to step S14.

ステップS14においては、移行開始オブジェクト78がディスプレイ24に表示され、チャット処理は、ステップS15に進む。図9に示されているように、移行開始オブジェクト78は、例えばチャット領域71内に、外縁が円形のオブジェクトとして表示される。移行開始オブジェクト78は、チャット領域71外の領域、例えば、メニュー領域72に表示されてもよい。この場合、プレイヤ5は、メニュー領域72に表示されている移行開始オブジェクト78を選択して、VRモードへ移行することができる。移行開始オブジェクト78は、モード移行条件が成立しなくても、メニュー領域72において選択可能に表示されてもよい。これにより、プレイヤ5は、モード移行条件が成立していなくても、所望のタイミングでVRモードに移行することができる。ステップS15において、移行開始オブジェクトの選択が確認されると、チャット処理は、ステップS16に進む。他方、移行開始オブジェクトが表示されてから所定時間(例えば、10秒)経過しても移行開始オブジェクトの選択が確認されない場合には、移行開始オブジェクトの選択がなされなかったと判定され、チャット処理が終了する。移行開始オブジェクトの選択がなされなかったと判定されたときに、ステップS12に戻り、チャットを再開するための処理が行われてもよい。移行開始オブジェクトの選択がなされたか否かは、タッチパネル24bへの操作に応じて判断されてもよい。例えば、移行開始オブジェクトの表示領域と重複する位置へのタッチ操作(例えば、タップ操作)がなされたことがタッチパネル24bによる検出信号から検出されたときに、当該移行開始オブジェクトが選択されたと判断される。 In step S14, the transition start object 78 is displayed on the display 24, and the chat process proceeds to step S15. As shown in FIG. 9, the migration start object 78 is displayed as an object having a circular outer edge, for example, in the chat area 71. The migration start object 78 may be displayed in an area outside the chat area 71, for example, in the menu area 72. In this case, the player 5 can select the transition start object 78 displayed in the menu area 72 and shift to the VR mode. The transition start object 78 may be displayed selectably in the menu area 72 even if the mode transition condition is not satisfied. As a result, the player 5 can shift to the VR mode at a desired timing even if the mode shift condition is not satisfied. When the selection of the migration start object is confirmed in step S15, the chat process proceeds to step S16. On the other hand, if the selection of the migration start object is not confirmed within a predetermined time (for example, 10 seconds) after the migration start object is displayed, it is determined that the migration start object has not been selected, and the chat process ends. To do. When it is determined that the migration start object has not been selected, the process of returning to step S12 and resuming the chat may be performed. Whether or not the transition start object has been selected may be determined according to the operation on the touch panel 24b. For example, when it is detected from the detection signal by the touch panel 24b that a touch operation (for example, a tap operation) is performed at a position overlapping the display area of the migration start object, it is determined that the migration start object is selected. ..

ステップS16では、第2モードであるVRモードへの移行処理が開始される。移行処理が開始されると、チャット処理は終了する。 In step S16, the process of shifting to the VR mode, which is the second mode, is started. When the migration process is started, the chat process ends.

以上のチャット処理は、チャットモード実行部21aにより実行される。チャットモード実行部21aは、単独で又は他の機能と適宜協働して、上記のチャット処理を実行することができる。チャット処理の実行に際しては、ストレージ27に格納されているデータ以外にも、必要に応じて、他のストレージに格納されているデータ、各種センサによって検出された検出情報、またはこれら以外のデータが用いられ得る。 The above chat process is executed by the chat mode execution unit 21a. The chat mode execution unit 21a can execute the above chat process alone or in cooperation with other functions as appropriate. When executing the chat process, in addition to the data stored in the storage 27, data stored in other storage, detection information detected by various sensors, or data other than these is used as necessary. Can be.

次に、第1モードであるチャットモードから第2モードであるVRモードへのモード移行処理について、図10から図12を参照して説明する。図10は、一実施形態におけるモード移行処理の流れを示すフロー図である。 Next, the mode transition process from the chat mode, which is the first mode, to the VR mode, which is the second mode, will be described with reference to FIGS. 10 to 12. FIG. 10 is a flow chart showing the flow of the mode transition process in one embodiment.

移行処理が開始されると、ステップ31において、HMD10を装着するように促すガイダンスが、情報処理装置20のディスプレイ24に表示される。当該ガイダンスを含むガイダンス表示画像の例であるガイダンス表示画像80が図11に示されている。ガイダンス表示画像80には、情報処理装置20を装着具11に取り付けることを促すガイダンス、HMD10を頭部に装着するように促すガイダンス、及びこれら以外のVRモードを開始するために必要な各種のガイダンスを含むことができる。図11に示されているガイダンス表示画像80には、情報処理装置20を装着具11に取り付けることを促すガイダンス81が含まれている。このガイダンスには、情報処理装置20の装着具11に対する取付方法に関するインストラクションが含まれてもよい。上記ガイダンスの表示後に所定時間が経過すると、モード移行処理はステップS32へ進む。 When the transition process is started, in step 31, guidance prompting the user to wear the HMD 10 is displayed on the display 24 of the information processing device 20. A guidance display image 80, which is an example of a guidance display image including the guidance, is shown in FIG. The guidance display image 80 includes guidance for urging the information processing device 20 to be attached to the fitting 11, guidance for urging the HMD 10 to be attached to the head, and various guidance necessary for starting the VR mode other than these. Can be included. The guidance display image 80 shown in FIG. 11 includes a guidance 81 for urging the information processing device 20 to be attached to the fitting 11. This guidance may include instructions on how to attach the information processing device 20 to the attachment 11. When a predetermined time elapses after the guidance is displayed, the mode transition process proceeds to step S32.

ステップS32では、移行オブジェクトがディスプレイ24に表示される。移行オブジェクトを含む移行処理画像の例が図12に示されている。図12に示されている移行処理画像85には、移行オブジェクト86が含まれている。移行処理画像85は、立体視画像で表示されてもよい。一実施形態においては、モード移行処理の開始時又はモード移行処理開始後の所定のタイミングにおいて、ディスプレイ24へ表示される画像が、立体視画像以外の画像から、立体視画像に切り替えられる。例えば、チャットモードにおいて表示される画像は立体視画像以外の画像として表示され、移行処理開始以後に表示される画像は立体視画像として表示される。 In step S32, the transition object is displayed on the display 24. An example of a migration processed image including a migration object is shown in FIG. The migration processed image 85 shown in FIG. 12 includes a migration object 86. The transition processed image 85 may be displayed as a stereoscopic image. In one embodiment, the image displayed on the display 24 is switched from an image other than the stereoscopic image to a stereoscopic image at the start of the mode transition process or at a predetermined timing after the start of the mode transition process. For example, the image displayed in the chat mode is displayed as an image other than the stereoscopic image, and the image displayed after the start of the transition process is displayed as the stereoscopic image.

次に、ステップS33においては、移行オブジェクト86の選択が完了したか否かが判定される。移行オブジェクト86の選択が完了したと判定された場合には、VRモードへの移行が確定され、モード移行処理はステップS34に移行する。移行オブジェクト86は、例えば、プレイヤ5が所定時間継続して注視することにより選択される。したがって、移行オブジェクト86を選択するためには、プレイヤ5はHMD10を装着していることが前提となる。一実施形態においては、移行オブジェクト86の選択が完了したか否かは、HMD10による検出信号に基づいて算出される注視位置が移行オブジェクト86上に所定時間以上あるか否かによって判定される。注視位置は、上記のように、HMD10に備えられたセンサユニット25によって検出された情報に基づいて算出され得る。上記の判定は、注視位置が移行オブジェクト86上に存在する注視時間をシステムクロックを用いて計測し、この計測された注視時間が所定時間に達したか否かによって判定され得る。例えば、注視時間が所定時間に達した場合には移行オブジェクト86の選択が完了したと判定され、モード移行処理はステップS34に進む。移行オブジェクト86の選択が完了すると、当該移行オブジェクト86の表示態様が変更されてもよい。例えば、移行オブジェクト86の選択が完了したことに応じて、移行オブジェクトの形状、色、又はこれら以外の外観が変更されてもよい。移行オブジェクト86の外観を変化させることにより、第2モードであるVRモードへの移行が行われることをプレイヤ5に認識させることができる。移行オブジェクト86の選択が完了した場合に、移行オブジェクト86の外観の変更以外の態様でユーザ5に対してVRモードへの移行が行われことを通知してもよい。他方、移行オブジェクト86が表示されてから所定時間が経過しても移行オブジェクト86の選択が完了したことが検知されない場合には、移行オブジェクト86の選択は完了しなかったと判定され、モード移行処理はステップS35に進む。 Next, in step S33, it is determined whether or not the selection of the transition object 86 is completed. When it is determined that the selection of the transition object 86 is completed, the transition to the VR mode is confirmed, and the mode transition process proceeds to step S34. The transition object 86 is selected, for example, by the player 5 continuously gazing for a predetermined time. Therefore, in order to select the transition object 86, it is premised that the player 5 is equipped with the HMD 10. In one embodiment, whether or not the selection of the transition object 86 is completed is determined by whether or not the gaze position calculated based on the detection signal by the HMD 10 is on the transition object 86 for a predetermined time or longer. The gaze position can be calculated based on the information detected by the sensor unit 25 provided in the HMD 10 as described above. The above determination can be made by measuring the gaze time at which the gaze position exists on the transition object 86 using the system clock and determining whether or not the measured gaze time has reached a predetermined time. For example, when the gaze time reaches a predetermined time, it is determined that the selection of the transition object 86 is completed, and the mode transition process proceeds to step S34. When the selection of the migration object 86 is completed, the display mode of the migration object 86 may be changed. For example, the shape, color, or other appearance of the transition object may change as the selection of the transition object 86 is complete. By changing the appearance of the transition object 86, it is possible to make the player 5 recognize that the transition to the VR mode, which is the second mode, is performed. When the selection of the migration object 86 is completed, the user 5 may be notified that the transition to the VR mode is performed in a mode other than changing the appearance of the migration object 86. On the other hand, if it is not detected that the selection of the migration object 86 is completed within a predetermined time after the migration object 86 is displayed, it is determined that the selection of the migration object 86 has not been completed, and the mode transition process is performed. The process proceeds to step S35.

VRモードへの移行が確定した後に、ステップS34では、第2モードであるVRモードが開始される。VRモードにおける具体的な処理については後述される。 After the transition to the VR mode is confirmed, in step S34, the VR mode, which is the second mode, is started. Specific processing in the VR mode will be described later.

ステップS35では、VRモードへの移行が選択されなかったため、チャットモードへ復帰するための処理が開始される。チャットモードへの復帰処理が完了すると、チャットモードが再開される。この再開されたチャットモードにおいては、VRモードへの移行がなされなかったことに関連する仮想キャラクタからのメッセージが表示されてもよい。 In step S35, since the transition to the VR mode is not selected, the process for returning to the chat mode is started. When the process of returning to the chat mode is completed, the chat mode is resumed. In this resumed chat mode, a message from the virtual character related to the failure to transition to VR mode may be displayed.

以上のモード移行処理は、移行処理部21bにより実行される。移行処理部21bは、単独で又は他の機能と適宜協働して、上記のモード移行処理を実行することができる。 The above mode transition process is executed by the transition processing unit 21b. The transition processing unit 21b can execute the above-mentioned mode transition processing alone or in cooperation with other functions as appropriate.

次に、図13及び図14を参照して、VRモードにおけるVR処理について説明する。図13は、一実施形態におけるVRモードでのVR処理の流れを示すフロー図であり、図14は、VRモードにおける表示画像の例を示す。上記のように、モード移行処理において移行オブジェクト86を選択するために、プレイヤ5はHMD10を装着している。VRモードの開始時においては、HMD10はプレイヤ5の頭部に装着されていることが想定されている。 Next, the VR processing in the VR mode will be described with reference to FIGS. 13 and 14. FIG. 13 is a flow chart showing the flow of VR processing in the VR mode in one embodiment, and FIG. 14 shows an example of a display image in the VR mode. As described above, the player 5 is equipped with the HMD 10 in order to select the transition object 86 in the mode transition process. At the start of the VR mode, it is assumed that the HMD 10 is attached to the head of the player 5.

VRモードが開始されると、ステップS41において、シナリオに応じた仮想空間の画像情報が生成され、当該画像情報に対応する画像がディスプレイ24に出力される。ステップS41で用いられるシナリオは、ゲーム処理プログラムに従ってプレイヤ5の選択とは無関係に特定されてもよいし、プレイヤ5による選択に基づいて特定されてもよい。特定されたシナリオは、例えば、ツリー構造で定義された複数のイベントを含む。特定されたシナリオに含まれる各イベント及びそのツリー構造については、シナリオデータ28cを参照することにより特定され得る。ステップS41では、まず当該ツリー構造のルートノードに相当する冒頭イベントに対応する画像情報が生成されてもよい。この冒頭イベントに対応する画像情報の表示後には、分岐条件に応じて次のノードが選択され、当該選択されたノードに対応するイベントに対応する画像情報が表示される。 When the VR mode is started, in step S41, image information of the virtual space corresponding to the scenario is generated, and the image corresponding to the image information is output to the display 24. The scenario used in step S41 may be specified according to the game processing program regardless of the player 5's selection, or may be specified based on the player 5's selection. The identified scenario includes, for example, multiple events defined in a tree structure. Each event included in the identified scenario and its tree structure can be identified by referring to the scenario data 28c. In step S41, first, image information corresponding to the opening event corresponding to the root node of the tree structure may be generated. After displaying the image information corresponding to the opening event, the next node is selected according to the branching condition, and the image information corresponding to the event corresponding to the selected node is displayed.

各イベントの画像情報は、例えばイベントデータ28dを参照することにより生成される。各イベントの画像情報には、仮想キャラクタの画像及び背景に相当するオブジェクトが含まれ得る。図14に、VRモードにおいて生成される画像情報に基づいてディスプレイ24に表示されるVR画像の例が示されている。図14に示されているVR画像90は、仮想キャラクタを示す仮想キャラクタ画像91、背景に相当するオブジェクトを示す画像92a〜92c、及びこれら以外の各種オブジェクトを示す画像を含んでいる。VR画像90は、仮想空間の所定の範囲に対応する画像である。VR画像90に対応する仮想空間の範囲は、HMD10の位置及び向きの少なくとも一方に基づき、例えば画角により定められる範囲とすることができる。画像情報の生成には、画像データ28aが用いられる。VR画像90及びこれら以外のVRモードにおいて表示される画像は、立体視画像として表示される。 The image information of each event is generated by referring to the event data 28d, for example. The image information of each event may include an object corresponding to the image and background of the virtual character. FIG. 14 shows an example of a VR image displayed on the display 24 based on the image information generated in the VR mode. The VR image 90 shown in FIG. 14 includes a virtual character image 91 showing a virtual character, images 92a to 92c showing objects corresponding to the background, and images showing various objects other than these. The VR image 90 is an image corresponding to a predetermined range of the virtual space. The range of the virtual space corresponding to the VR image 90 can be a range determined by, for example, an angle of view, based on at least one of the position and orientation of the HMD 10. Image data 28a is used to generate image information. The VR image 90 and the images displayed in the VR modes other than these are displayed as stereoscopic images.

仮想キャラクタ画像91は、イベントデータ28dにより特定されるアクションを仮想空間内で行うことができる。例えば、仮想キャラクタ画像91のアクションには、プレイヤ5に向かって(仮想空間内のプレイヤ5の位置に向かって)話しかける、仮想空間内を移動する、仮想空間内に配置されたオブジェクトを手に取る、及びこれら以外の仮想空間内における様々なアクションが含まれる。 The virtual character image 91 can perform an action specified by the event data 28d in the virtual space. For example, for the action of the virtual character image 91, talk to the player 5 (toward the position of the player 5 in the virtual space), move in the virtual space, or pick up an object arranged in the virtual space. , And various actions in the virtual space other than these are included.

VR画像90がディスプレイ24に表示されている間に、HMD10のセンサユニット25によってプレイヤ5の頭部の動きが検出されると、この検出された頭部の動きに基づいてプレイヤ5のアクションが特定される。そして、特定されたプレイヤ5のアクションに応じた仮想キャラクタの行動(リアクション)が決定され、この決定された行動を行う仮想キャラクタ画像91の画像情報が生成される。このようにして生成された画像情報は、ディスプレイ24に出力される。例えば、プレイヤ5のうなずく動作が検出されると、プレイヤ5のうなずくという動作へのリアクションを取る仮想キャラクタ画像91の画像情報が生成され、当該画像情報がディスプレイ24に表示される。このように、VRモードでは、仮想キャラクタの立体視画像を用いて、プレイヤ5と当該仮想キャラクタとの間でのインタラクションが実現される。 When the movement of the head of the player 5 is detected by the sensor unit 25 of the HMD 10 while the VR image 90 is displayed on the display 24, the action of the player 5 is specified based on the detected movement of the head. Will be done. Then, the action (reaction) of the virtual character according to the action of the specified player 5 is determined, and the image information of the virtual character image 91 that performs the determined action is generated. The image information generated in this way is output to the display 24. For example, when the nodding motion of the player 5 is detected, the image information of the virtual character image 91 that takes a reaction to the nodding motion of the player 5 is generated, and the image information is displayed on the display 24. As described above, in the VR mode, the interaction between the player 5 and the virtual character is realized by using the stereoscopic image of the virtual character.

ステップS42では、VR画像表示処理を終了するための終了条件が成立したか否かが判定される。終了条件が成立していないと判定された場合には、ステップS41に戻ってVR画像表示処理が継続される。他方、終了条件が成立したと判定された場合には、VR処理は、ステップS43に進む。 In step S42, it is determined whether or not the end condition for ending the VR image display process is satisfied. If it is determined that the end condition is not satisfied, the process returns to step S41 and the VR image display process is continued. On the other hand, if it is determined that the end condition is satisfied, the VR process proceeds to step S43.

ステップS43では、VRモードの終了処理がなされる。この終了処理には、情報処理装置20を装着具11から取り外すよう促すガイダンスをディスプレイ24に表示すること、及び、第1モードであるチャットモードへのログイン画面を表示させることが含まれてもよい。 In step S43, the VR mode termination process is performed. This termination process may include displaying a guidance on the display 24 prompting the information processing device 20 to be removed from the fitting 11, and displaying a login screen for the chat mode, which is the first mode. ..

続いて、他の実施形態によるゲーム処理システムについて図15を参照して説明する。図15は、他の実施形態によるゲーム処理システム101を示すブロック図である。ゲーム処理システム101は、情報処理装置20、HMD110、及びHMD110を備えている。ゲーム処理システム101は、情報処理装置20をHMD110に取り付けることなくVRモードを提供できる点で、ゲーム処理システム1と異なっている。以下、ゲーム処理システム101について、ゲーム処理システム1と相違する点に着目して説明する。 Subsequently, a game processing system according to another embodiment will be described with reference to FIG. FIG. 15 is a block diagram showing a game processing system 101 according to another embodiment. The game processing system 101 includes an information processing device 20, an HMD 110, and an HMD 110. The game processing system 101 is different from the game processing system 1 in that the VR mode can be provided without attaching the information processing device 20 to the HMD 110. Hereinafter, the game processing system 101 will be described focusing on the differences from the game processing system 1.

HMD110と、情報処理装置20と、サーバ50とは、ネットワーク40を介して相互に通信可能に接続されている。HMD110と情報処理装置20とは、ネットワーク40を介さずに、Bluetooth(登録商標)などの近距離無線方式に従って通信可能に接続されていてもよい。HMD110は、情報処理装置20が取り付けられなくともVRモードを提供可能な点で、ゲーム処理システム1のHMD10と異なっている。 The HMD 110, the information processing device 20, and the server 50 are connected to each other so as to be able to communicate with each other via the network 40. The HMD 110 and the information processing device 20 may be communicably connected according to a short-range wireless system such as Bluetooth (registered trademark) without going through the network 40. The HMD 110 is different from the HMD 10 of the game processing system 1 in that the VR mode can be provided even if the information processing device 20 is not attached.

HMD110は、コンピュータプロセッサ121と、メモリ122と、通信I/F123と、ディスプレイ124と、センサユニット125と、集音装置126と、ストレージ127と、を備えている。コンピュータプロセッサ121、メモリ122、通信I/F123、ディスプレイ124、センサユニット125、集音装置126、及びストレージ127は、情報処理装置20のコンピュータプロセッサ21、メモリ22、通信I/F23、ディスプレイ24、センサユニット25、集音装置26、及びストレージ27と同様に構成される。ただし、ディスプレイ124は、タッチパネルを備えなくともよい。 The HMD 110 includes a computer processor 121, a memory 122, a communication I / F 123, a display 124, a sensor unit 125, a sound collector 126, and a storage 127. The computer processor 121, the memory 122, the communication I / F 123, the display 124, the sensor unit 125, the sound collecting device 126, and the storage 127 are the computer processor 21, the memory 22, the communication I / F 23, the display 24, and the sensor of the information processing device 20. It is configured in the same manner as the unit 25, the sound collecting device 26, and the storage 27. However, the display 124 does not have to be provided with a touch panel.

チャットモード実行部21a、移行処理部21b、及びVRモード実行部21cの機能は、情報処理装置20とHMD110とで分担して担われる。具体的には、チャットモード実行部21aの機能は情報処理装置20において実現され、VRモード実行部21cの機能はHMD110において実現される。移行処理部21bの機能は、その一部が情報処理装置20で実現され、残部がHMD110において実現される。 The functions of the chat mode execution unit 21a, the transition processing unit 21b, and the VR mode execution unit 21c are shared between the information processing device 20 and the HMD 110. Specifically, the function of the chat mode execution unit 21a is realized in the information processing device 20, and the function of the VR mode execution unit 21c is realized in the HMD 110. A part of the function of the transition processing unit 21b is realized by the information processing apparatus 20, and the rest is realized by the HMD 110.

ゲーム処理システム101においてゲームを開始するときには、プレイヤ5は、情報処理装置20を用いてチャットモードを開始する。このチャットモードの処理は、情報処理装置20のチャットモード実行部21aにより行われる。 When starting a game in the game processing system 101, the player 5 starts a chat mode using the information processing device 20. This chat mode processing is performed by the chat mode execution unit 21a of the information processing device 20.

チャットモードにおいてモード移行条件が成立し、移行開始オブジェクトが選択された場合には、VRモードへのモード移行処理が開始される。このモード移行処理において、ステップ移行処理部21bにより行われる。当該モード移行処理において、上記のステップS31に相当するガイダンスの表示は、情報処理装置20において行われる。例えば、HMD110を装着するように促すガイダンスが、情報処理装置20のディスプレイ24に表示される。他方、ステップS32に相当する移行オブジェクト86の表示及びこれ以後の処理は、HMD110において実行される。 When the mode transition condition is satisfied in the chat mode and the transition start object is selected, the mode transition process to the VR mode is started. In this mode transition process, the step transition process unit 21b performs the mode transition process. In the mode transition process, the information processing apparatus 20 displays the guidance corresponding to the above step S31. For example, guidance prompting the user to wear the HMD 110 is displayed on the display 24 of the information processing device 20. On the other hand, the display of the transition object 86 corresponding to step S32 and the subsequent processing are executed in the HMD 110.

VRモードが開始されたときには、当該VRモードの処理は、HMD110のVRモード実行部21cにより行われる。 When the VR mode is started, the processing of the VR mode is performed by the VR mode execution unit 21c of the HMD 110.

上記の実施形態は、以下の作用効果を発揮しえる。具体的には、上記のゲーム処理システム1,101によれば、HMD10を用いるVRモードは、チャットモードからVRモードへの移行処理の後に実行される。したがって、プレイヤ5は、HMD10の頭部への装着が不要なチャットでゲームを開始することができる。そして、チャットモードでゲームが進行する過程で、プレイヤ5に対してHMD10の装着が促される。ゲーム処理システム101においても、同様に、チャットモードでゲームが進行する過程でHMD110の装着が促される。 The above embodiment can exert the following effects. Specifically, according to the game processing systems 1 and 101 described above, the VR mode using the HMD 10 is executed after the transition process from the chat mode to the VR mode. Therefore, the player 5 can start the game in a chat that does not require the HMD 10 to be attached to the head. Then, in the process of progressing the game in the chat mode, the player 5 is urged to wear the HMD 10. Similarly, in the game processing system 101, the installation of the HMD 110 is urged in the process of progressing the game in the chat mode.

上記のゲーム処理システム1,101によれば、チャットモードにおいて、VRモードへの移行を促すメッセージが仮想キャラクタのメッセージとして表示されるので、チャットモードにおける仮想キャラクタとのインタラクションを通じて、VRモードへの移行が自然に促される。 According to the above-mentioned game processing systems 1,101, in the chat mode, a message prompting the transition to the VR mode is displayed as a message of the virtual character, so that the transition to the VR mode is performed through the interaction with the virtual character in the chat mode. Is naturally prompted.

上記のゲーム処理システム1,101によれば、チャットモードにおいて、VRモードでの設定の選択を促すメッセージ76c,76dが仮想キャラクタからのメッセージとして表示されるので、チャットモードにおける仮想キャラクタとのインタラクションを通じて、VRモードへの移行を行う契機が与えられる。 According to the above-mentioned game processing systems 1,101, in the chat mode, the messages 76c and 76d prompting the selection of the setting in the VR mode are displayed as messages from the virtual character, and therefore, through the interaction with the virtual character in the chat mode. , Is given an opportunity to shift to VR mode.

上記のゲーム処理システム1,101によれば、チャットモードでの仮想キャラクタとのチャットの進行に応じて(例えば、定義されたツリー構造における末端のノードに相当するメッセージが表示されたことに応じて)モード移行処理が開始されるので、チャットモードにおける仮想キャラクタとのインタラクションを通じて自然にVRモードへの移行が促される。 According to the game processing systems 1,101 described above, according to the progress of chat with the virtual character in the chat mode (for example, the message corresponding to the terminal node in the defined tree structure is displayed). ) Since the mode transition process is started, the transition to the VR mode is naturally promoted through the interaction with the virtual character in the chat mode.

上記のゲーム処理システム1,101によれば、チャットモードにおいて情報処理装置20に移行開始オブジェクト78を表示することにより、チャットモードからVRモードへの移行が促される。 According to the game processing systems 1 and 101 described above, the transition from the chat mode to the VR mode is promoted by displaying the transition start object 78 on the information processing apparatus 20 in the chat mode.

上記のゲーム処理システム1,101によれば、VRモードへの移行を選択したプレイヤに対して、HMD10,HMD110を装着するように促すガイダンスを提供することにより、VRモードへの移行準備を行うことを促すことができる。 According to the above-mentioned game processing systems 1,101, the player who has selected the transition to the VR mode is prepared to shift to the VR mode by providing guidance for urging the player to wear the HMD10 and the HMD110. Can be encouraged.

上記のゲーム処理システム1,101によれば、移行オブジェクト86が注視されることによりVRモードへ移行するので、プレイヤに対して、移行オブジェクト86を注視するためにHM10,110の頭部への装着を促すことができる。 According to the above-mentioned game processing systems 1,101, the transition object 86 shifts to the VR mode when the transition object 86 is watched. Therefore, the HMs 10 and 110 are attached to the head of the player in order to watch the transition object 86. Can be encouraged.

上記ゲーム処理システム1,101によれば、VRモードの終了後に、情報処理装置20にチャットモードのログイン画面が表示されるので、プレイヤは、VRモード終了後に、チャットモードからゲームを再開することができる。 According to the game processing systems 1, 101, the chat mode login screen is displayed on the information processing device 20 after the VR mode ends, so that the player can restart the game from the chat mode after the VR mode ends. it can.

上記のゲーム処理システム1,101によれば、プレイヤは、装着具11から取り外された情報処理装置20によりチャットモードでのインタラクションを体験し、装着具11に取り付けられた情報処理装置20によりVRモードのインタラクションを体験することができる。 According to the game processing systems 1 and 101 described above, the player experiences the interaction in the chat mode by the information processing device 20 removed from the fitting 11, and the VR mode by the information processing device 20 attached to the fitting 11. You can experience the interaction of.

上記のゲーム処理システム1,101によれば、プレイヤは、VRモードにおいては、頭部を動かすことによって、仮想キャラクタとインタラクトすることができる。これにより、仮想キャラクタとの自然なインタラクションが実現される。 According to the game processing systems 1,101 described above, the player can interact with the virtual character by moving his head in the VR mode. As a result, natural interaction with the virtual character is realized.

上記のゲーム処理システム1,101によれば、VRモードにおいては立体視画像として表示されている仮想キャラクタとインタラクトできるため、高い没入感を得ることができる。 According to the game processing systems 1, 101 described above, in the VR mode, it is possible to interact with the virtual character displayed as a stereoscopic image, so that a high immersive feeling can be obtained.

上記のゲーム処理システム1,101によれば、第1モードから第2モードへの移行は移行開始オブジェクト78の選択により開始され、この移行開始オブジェクト78とは異なる移行オブジェクト86の選択により完了する。移行開始オブジェクト78は、情報処理装置20又はこれ以外の第1モードでのゲームの進行のために用いられる装置(例えば、情報処理装置20とは別のコントローラ)により検出される検出情報に基づいて選択され、移行オブジェクト86は、HMD10,110又はこれら以外の第2モードでのゲームの進行のために用いられる装置により検出される検出情報に基づいて選択され得る。このように、移行開始オブジェクト78は、第1モードでのゲームのプレイ中における選択が容易となるように構成されており、移行オブジェクト86は、第2モードでのゲームのプレイの準備が整っているときに選択が容易となるように構成されている。以上により、第1モードから第2モードへのスムースな移行が実現される。 According to the game processing systems 1, 101 described above, the transition from the first mode to the second mode is started by selecting the transition start object 78, and is completed by selecting a transition object 86 different from the transition start object 78. The transition start object 78 is based on the detection information detected by the information processing device 20 or a device used for the progress of the game in the other first mode (for example, a controller different from the information processing device 20). The transition object 86 may be selected based on the detection information detected by the HMD 10, 110 or any other device used to advance the game in the second mode. As described above, the transition start object 78 is configured to be easily selected while playing the game in the first mode, and the transition object 86 is ready to play the game in the second mode. It is configured to be easy to select when you are. As described above, a smooth transition from the first mode to the second mode is realized.

本発明の実施形態は、上述した実施形態に限定されるものではなく、その要旨を逸脱しない範囲内で様々な変更が可能である。例えば、コンピュータプロセッサ21及びコンピュータプロセッサ121で実行される機能の一部又は全部は、発明の趣旨を逸脱しない限り、上記の実施形態では図示されていないコンピュータプロセッサにより実現されてもよい。例えば、ゲーム処理システム1及びゲーム処理システム101は、ゲーム処理プログラムの少なくとも一部を実行するゲーム機を備えてもよく、コンピュータプロセッサ21又はコンピュータプロセッサ121の処理によって実現される機能の一部は、当該ゲーム機における処理によって実現されてもよい。 The embodiment of the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the gist thereof. For example, some or all of the functions performed by the computer processor 21 and the computer processor 121 may be realized by a computer processor (not shown in the above embodiment) as long as the gist of the invention is not deviated. For example, the game processing system 1 and the game processing system 101 may include a game machine that executes at least a part of the game processing program, and a part of the functions realized by the processing of the computer processor 21 or the computer processor 121 may be provided. It may be realized by the processing in the game machine.

本願発明の実施形態には、上記以外にも様々な装置、デバイス、及び電子部品を備えることができる。例えば、ゲーム処理システム1及びゲーム処理システム101は、情報処理装置20及びHMD10,110以外に、プレイヤ5の操作を受け付けるための操作機器を備えてもよい。ゲーム処理システム1及びゲーム処理システム101は、当該操作機器によってプレイヤ5の操作を検出し、当該検出した操作に応じてゲームの処理をおこなっても良い。 In addition to the above, various devices, devices, and electronic components may be provided in the embodiment of the present invention. For example, the game processing system 1 and the game processing system 101 may include an operation device for receiving the operation of the player 5 in addition to the information processing device 20 and the HMDs 10 and 110. The game processing system 1 and the game processing system 101 may detect the operation of the player 5 by the operating device and process the game according to the detected operation.

本明細書において説明された処理手順、特にフロー図を用いて説明された処理手順においては、その処理手順を構成する工程(ステップ)の一部を省略すること、その処理手順を構成する工程として明示されていない工程を追加すること、及び/又は当該工程の順序を入れ替えることが可能であり、このような省略、追加、順序の変更がなされた処理手順も本発明の趣旨を逸脱しない限り本発明の範囲に含まれる。
以下に、本願の原出願の出願当初の特許請求の範囲に記載された発明を付記する。
[1]
一又は複数のコンピュータプロセッサを備え、第1モード及び第2モードを有するゲームの処理を行うゲーム処理システムであって、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
前記第1モードにおいては、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供し、
前記第1モードから前記第2モードへの移行処理を行い、
前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する、
ゲーム処理システム。
[2]
前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記仮想キャラクタが前記第2モードへの移行を促すことが含まれる、[1]に記載のゲーム処理システム。
[3]
前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記第2モードにおける設定の選択を行うためのインタラクションが含まれる、[1]又は[2]に記載のゲーム処理システム。
[4]
前記移行処理は、前記第1モードにおける前記仮想キャラクタとのインタラクションに応じて開始される、[1]から[3]のいずれか一つに記載のゲーム処理システム。
[5]
前記移行処理は、前記第1モードにおいて前記情報処理装置において表示された移行開始オブジェクトの選択により開始される、[1]から[4]のいずれか1つに記載のゲーム処理システム。
[6]
前記移行処理は、前記移行開始オブジェクトの選択に応じて、前記ヘッドマウントディスプレイを装着するように促すガイダンスを前記情報処理装置に表示することを含む、[5]に記載のゲーム処理システム。
[7]
前記移行処理は、前記プレイヤの注視によって選択可能な移行オブジェクトが選択されたことに応じて前記第2モードへ移行することを含む、[5]又は[6]に記載のゲーム処理システム。
[8]
前記一又は複数のコンピュータプロセッサは、前記第2モードの終了後に前記情報処理装置に前記第1モードを開始するためのログイン画面を表示する、[1]から[7]のいずれか1つに記載のゲーム処理システム。
[9]
前記ヘッドマウントディスプレイは、前記プレイヤの頭部に装着される装着具と、前記装着具に取り付けられた前記情報処理装置と、を有する、[1]から[8]のいずれか1つに記載のゲーム処理システム。
[10]
前記第2モードにおいては、前記プレイヤの頭部の位置及び向きの少なくとも一方を特定するためのヘッドトラッキング情報が前記第2検出情報に基づいて算出され、前記ヘッドトラッキング情報に応じた前記仮想キャラクタとのインタラクションが提供される、[1]から[9]のいずれか1つに記載のゲーム処理システム。
[11]
前記第2モードにおいては、前記仮想キャラクタが立体視画像として表示され、
前記第1モードにおいては、前記仮想キャラクタが立体視画像以外の画像として表示される、[1]から[10]のいずれか一つに記載のゲーム処理システム。
[12]
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより第1モード及び第2モードを有するゲームの処理を行うゲーム処理方法であって、前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供する工程と、
前記第1モードから前記第2モードへの移行処理を行う工程と、
前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する工程と、
を備えるゲーム処理方法。
[13]
一又は複数のコンピュータプロセッサに実行されることにより第1モード及び第2モードを有するゲームの処理を実行するためのゲーム処理プログラムであって、
前記一又は複数のコンピュータプロセッサに、
前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供する工程と、
前記第1モードから前記第2モードへの移行処理を行う工程と、
前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する工程と、
を実行させるゲーム処理プログラム。
[14]
一又は複数のコンピュータプロセッサを備え、第1モード及び第2モードを有するゲームの処理を行うゲーム処理システムであって、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
前記第1モードにおいては、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた処理を行い、
前記第1モードにおいて前記情報処理装置に表示された移行開始オブジェクトの選択に応じて、前記第1モードから前記第2モードへの移行処理を開始し、
前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより前記移行開始オブジェクトとは異なる移行オブジェクトが選択されたことに応じて前記第2モードへの移行を確定し、
前記第2モードへの移行が確定した後に、前記第2モードにおいて、前記プレイヤの頭部に装着された前記ヘッドマウントディスプレイにより検出された第2検出情報に応じた処理を行う、ゲーム処理システム。
[15]
前記移行オブジェクトは、前記プレイヤの注視によって選択される、[14]に記載のゲーム処理システム。
[16]
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより第1モード及び第2モードを有するゲームの処理を行うゲーム処理方法であって、
前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた処理を行う工程と、
前記第1モードにおいて前記情報処理装置に表示された移行開始オブジェクトの選択に応じて、前記第1モードから前記第2モードへの移行処理を開始する工程と、
前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより前記移行開始オブジェクトとは異なる移行オブジェクトが選択されたことに応じて前記第2モードへの移行を確定する工程と、
前記第2モードへの移行が確定した後に、前記第2モードにおいて、前記プレイヤの頭部に装着された前記ヘッドマウントディスプレイにより検出された第2検出情報に応じた処理を行う工程と、
を備えるゲーム処理方法。
[17]
一又は複数のコンピュータプロセッサに実行されることにより第1モード及び第2モードを有するゲームの処理を実行するためのゲーム処理プログラムであって、
前記一又は複数のコンピュータプロセッサに、
前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた処理を行う工程と、
前記第1モードにおいて前記情報処理装置に表示された移行開始オブジェクトの選択に応じて、前記第1モードから前記第2モードへの移行処理を開始する工程と、
前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより前記移行開始オブジェクトとは異なる移行オブジェクトが選択されたことに応じて前記第2モードへの移行を確定する工程と、
前記第2モードへの移行が確定した後に、前記第2モードにおいて、前記プレイヤの頭部に装着された前記ヘッドマウントディスプレイにより検出された第2検出情報に応じた処理を行う工程と、を実行させるゲーム処理プログラム。
In the processing procedure described in the present specification, particularly the processing procedure described using the flow chart, a part of the steps (steps) constituting the processing procedure is omitted, as a step constituting the processing procedure. It is possible to add steps that are not specified and / or to change the order of the steps, and the processing procedure in which such omissions, additions, and changes in order are made does not deviate from the gist of the present invention. It is included in the scope of the invention.
The inventions described in the claims at the time of filing the original application of the present application are added below.
[1]
A game processing system equipped with one or more computer processors and processing a game having a first mode and a second mode.
The one or more computer processors may execute computer-readable instructions.
In the first mode, the interaction with the virtual character corresponding to the first detection information detected by the information processing device not attached to the player's head is provided.
The transition process from the first mode to the second mode is performed, and the process is performed.
After performing the transition process, in the second mode, the interaction with the virtual character according to the second detection information detected by the head-mounted display mounted on the player's head is provided.
Game processing system.
[2]
The game processing system according to [1], wherein the interaction with the virtual character in the first mode includes the virtual character promoting a transition to the second mode.
[3]
The game processing system according to [1] or [2], wherein the interaction with the virtual character in the first mode includes an interaction for selecting a setting in the second mode.
[4]
The game processing system according to any one of [1] to [3], wherein the transition process is started in response to an interaction with the virtual character in the first mode.
[5]
The game processing system according to any one of [1] to [4], wherein the transition process is started by selecting a transition start object displayed on the information processing apparatus in the first mode.
[6]
The game processing system according to [5], wherein the transition process includes displaying guidance on the information processing device prompting the user to wear the head-mounted display in response to the selection of the transition start object.
[7]
The game processing system according to [5] or [6], wherein the transition process includes transitioning to the second mode according to the selection of a selectable transition object by the gaze of the player.
[8]
The one or a plurality of computer processors according to any one of [1] to [7], which displays a login screen for starting the first mode on the information processing apparatus after the end of the second mode. Game processing system.
[9]
The head-mounted display according to any one of [1] to [8], wherein the head-mounted display has a wearer attached to the player's head and the information processing device attached to the wearer. Game processing system.
[10]
In the second mode, head tracking information for specifying at least one of the position and orientation of the player's head is calculated based on the second detection information, and the virtual character and the virtual character corresponding to the head tracking information are calculated. The game processing system according to any one of [1] to [9], wherein the interaction of the above is provided.
[11]
In the second mode, the virtual character is displayed as a stereoscopic image.
The game processing system according to any one of [1] to [10], wherein in the first mode, the virtual character is displayed as an image other than a stereoscopic image.
[12]
A game processing method for processing a game having a first mode and a second mode by executing a computer-readable instruction by one or more computer processors, which is worn on the head of a player in the first mode. A process of providing interaction with a virtual character according to the first detection information detected by an information processing device that has not been processed, and a process of providing interaction with the virtual character.
The step of performing the transition process from the first mode to the second mode, and
After performing the transition process, in the second mode, a step of providing an interaction with the virtual character according to the second detection information detected by the head-mounted display mounted on the player's head, and
A game processing method that includes.
[13]
A game processing program for executing processing of a game having a first mode and a second mode by being executed by one or more computer processors.
To the one or more computer processors
In the first mode, a step of providing an interaction with a virtual character according to the first detection information detected by an information processing device not attached to the player's head, and
The step of performing the transition process from the first mode to the second mode, and
After performing the transition process, in the second mode, a step of providing an interaction with the virtual character according to the second detection information detected by the head-mounted display mounted on the player's head, and
A game processing program that executes.
[14]
A game processing system equipped with one or more computer processors and processing a game having a first mode and a second mode.
The one or more computer processors may execute computer-readable instructions.
In the first mode, processing is performed according to the first detection information detected by the information processing device not attached to the player's head.
In the first mode, the transition process from the first mode to the second mode is started according to the selection of the transition start object displayed on the information processing apparatus.
The transition to the second mode is confirmed according to the selection of a transition object different from the transition start object by the head-mounted display mounted on the player's head.
A game processing system that performs processing according to the second detection information detected by the head-mounted display mounted on the head of the player in the second mode after the transition to the second mode is confirmed.
[15]
The game processing system according to [14], wherein the transition object is selected by the gaze of the player.
[16]
A game processing method in which one or more computer processors execute a computer-readable instruction to process a game having a first mode and a second mode.
In the first mode, a step of performing processing according to the first detection information detected by an information processing device not attached to the player's head, and
A step of starting the transition process from the first mode to the second mode according to the selection of the transition start object displayed on the information processing apparatus in the first mode, and
A step of determining the transition to the second mode according to the selection of a transition object different from the transition start object by the head-mounted display mounted on the player's head.
After the transition to the second mode is confirmed, in the second mode, a process of performing processing according to the second detection information detected by the head-mounted display mounted on the player's head, and
A game processing method that includes.
[17]
A game processing program for executing processing of a game having a first mode and a second mode by being executed by one or more computer processors.
To the one or more computer processors
In the first mode, a step of performing processing according to the first detection information detected by an information processing device not attached to the player's head, and
A step of starting the transition process from the first mode to the second mode according to the selection of the transition start object displayed on the information processing apparatus in the first mode, and
A step of determining the transition to the second mode according to the selection of a transition object different from the transition start object by the head-mounted display mounted on the player's head.
After the transition to the second mode is confirmed, in the second mode, a step of performing a process according to the second detection information detected by the head-mounted display mounted on the player's head is executed. Game processing program to let you.

1,101 ゲーム処理システム 1,101 Game processing system

Claims (14)

一又は複数のコンピュータプロセッサを備え、第1モード及び第2モードを有するゲームの処理を行うゲーム処理システムであって、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
前記第1モードにおいては、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供し、
前記第1モードから前記第2モードへの移行処理を行い、
前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供し、
前記第1モードは、前記プレイヤ及び前記仮想キャラクタからのメッセージがチャット表示領域に表示されるチャットモードであり前記チャットモードにおいては前記第2モードにおけるシーンの選択を促すメッセージが表示される一方で前記第2モードはチャットモードとは異なるモードであり、
前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記第2モードにおけるシーンの選択を行うためのシーン選択インタラクションが含まれ、前記シーン選択インタラクションにおいて、前記プレイヤが前記第2モードにおけるシーンを複数のシーンから選択することを可能にさせる
ゲーム処理システム。
A game processing system equipped with one or more computer processors and processing a game having a first mode and a second mode.
The one or more computer processors may execute computer-readable instructions.
In the first mode, the interaction with the virtual character corresponding to the first detection information detected by the information processing device not attached to the player's head is provided.
The transition process from the first mode to the second mode is performed, and the process is performed.
After performing the transition process, in the second mode, an interaction with the virtual character according to the second detection information detected by the head-mounted display mounted on the player's head is provided.
The first mode is, in the player and the a chat mode the message is displayed in the chat display area from virtual character the chat mode while the message prompting selection of a scene in the second mode still appears, The second mode is a mode different from the chat mode,
The interaction with the virtual character in the first mode includes a scene selection interaction for selecting a scene in the second mode, and in the scene selection interaction, the player creates a plurality of scenes in the second mode. Allows you to choose from the scenes of
Game processing system.
前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記仮想キャラクタが前記第2モードへの移行を促すことが含まれる、請求項1に記載のゲーム処理システム。 The game processing system according to claim 1, wherein the interaction with the virtual character in the first mode includes promoting the transition to the second mode by the virtual character. 選択された前記シーンによって前記第2モードにおいて表示される画像の背景が規定される、請求項1又は請求項2に記載のゲーム処理システム。 The game processing system according to claim 1 or 2, wherein the background of the image displayed in the second mode is defined by the selected scene. 前記移行処理は、前記第1モードにおける前記仮想キャラクタとのインタラクションに応じて開始される、請求項1から請求項3のいずれか1項に記載のゲーム処理システム。 The game processing system according to any one of claims 1 to 3, wherein the transition process is started in response to an interaction with the virtual character in the first mode. 前記移行処理は、前記第1モードにおいて前記情報処理装置において表示された移行開始オブジェクトの選択により開始される、請求項1から請求項4のいずれか1項に記載のゲーム処理システム。 The game processing system according to any one of claims 1 to 4, wherein the transition process is started by selecting a transition start object displayed on the information processing apparatus in the first mode. 前記移行処理は、前記移行開始オブジェクトの選択に応じて、前記ヘッドマウントディスプレイを装着するように促すガイダンスを前記情報処理装置に表示することを含む、請求項5に記載のゲーム処理システム。 The game processing system according to claim 5, wherein the transition process includes displaying on the information processing device guidance prompting the user to wear the head-mounted display in response to the selection of the transition start object. 前記移行開始オブジェクトは、前記チャットモードにおいてモード移行条件が成立したことに応じて前記チャット表示領域に表示される、
請求項5又は請求項6に記載のゲーム処理システム。
The transition start object is displayed in the chat display area when the mode transition condition is satisfied in the chat mode.
The game processing system according to claim 5 or 6.
前記移行処理において、前記プレイヤの注視によって選択可能な移行オブジェクトが選択されたことに応じて前記第2モードを開始する、請求項5又は請求項6に記載のゲーム処理システム。 The game processing system according to claim 5 or 6, wherein in the transition process, the second mode is started in response to the selection of a selectable transition object by the gaze of the player. 前記一又は複数のコンピュータプロセッサは、前記第2モードの終了後に前記情報処理装置に前記第1モードを開始するためのログイン画面を表示する、
請求項1から請求項8のいずれか1項に記載のゲーム処理システム。
The one or more computer processors display a login screen for starting the first mode on the information processing apparatus after the end of the second mode.
The game processing system according to any one of claims 1 to 8.
前記ヘッドマウントディスプレイは、前記プレイヤの頭部に装着される装着具と、前記装着具に取り付けられた前記情報処理装置と、を有する、請求項1から請求項9のいずれか1項に記載のゲーム処理システム。 The head-mounted display according to any one of claims 1 to 9, wherein the head-mounted display has a wearer attached to the player's head and the information processing device attached to the wearer. Game processing system. 前記第2モードにおいては、前記プレイヤの頭部の位置及び向きの少なくとも一方を特定するためのヘッドトラッキング情報が前記第2検出情報に基づいて算出され、前記ヘッドトラッキング情報に応じた前記仮想キャラクタとのインタラクションが提供される、請求項1から請求項10のいずれか1項に記載のゲーム処理システム。 In the second mode, head tracking information for specifying at least one of the position and orientation of the player's head is calculated based on the second detection information, and the virtual character and the virtual character corresponding to the head tracking information are calculated. The game processing system according to any one of claims 1 to 10, wherein the interaction of the above is provided. 前記第2モードにおいては、前記仮想キャラクタが立体視画像として表示され、
前記第1モードにおいては、前記仮想キャラクタが立体視画像以外の画像として表示される、
請求項1から請求項11に記載のゲーム処理システム。
In the second mode, the virtual character is displayed as a stereoscopic image.
In the first mode, the virtual character is displayed as an image other than the stereoscopic image.
The game processing system according to claim 1 to 11.
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより第1モード及び第2モードを有するゲームの処理を行うゲーム処理方法であって、
前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供する工程と、
前記第1モードから前記第2モードへの移行処理を行う工程と、
前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する工程と、
を備え、
前記第1モードは、前記プレイヤ及び前記仮想キャラクタからのメッセージがチャット表示領域に表示されるチャットモードであり前記チャットモードにおいては前記第2モードにおけるシーンの選択を促すメッセージが表示される一方で前記第2モードはチャットモードとは異なるモードであり、
前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記第2モードにおけるシーンの選択を行うためのシーン選択インタラクションが含まれ、前記シーン選択インタラクションにおいて、前記プレイヤが前記第2モードにおけるシーンを複数のシーンから選択することを可能にさせる
ゲーム処理方法。
A game processing method in which one or more computer processors execute a computer-readable instruction to process a game having a first mode and a second mode.
In the first mode, a step of providing an interaction with a virtual character according to the first detection information detected by an information processing device not attached to the player's head, and
The step of performing the transition process from the first mode to the second mode, and
After performing the transition process, in the second mode, a step of providing an interaction with the virtual character according to the second detection information detected by the head-mounted display mounted on the player's head, and
With
Wherein the first mode, the message in the chat mode a and the chat mode displayed in the chat display area while a message prompting selection of a scene in the second mode still appears from the player and the virtual character The second mode is different from the chat mode,
The interaction with the virtual character in the first mode includes a scene selection interaction for selecting a scene in the second mode, and in the scene selection interaction, the player creates a plurality of scenes in the second mode. Allows you to choose from the scenes of
Game processing method.
一又は複数のコンピュータプロセッサに実行されることにより第1モード及び第2モードを有するゲームの処理を実行するためのゲーム処理プログラムであって、
前記一又は複数のコンピュータプロセッサに、
前記第1モードにおいて、プレイヤの頭部に装着されていない情報処理装置により検出された第1検出情報に応じた仮想キャラクタとのインタラクションを提供する工程と、
前記第1モードから前記第2モードへの移行処理を行う工程と、
前記移行処理を行った後に、前記第2モードにおいて、前記プレイヤの頭部に装着されたヘッドマウントディスプレイにより検出された第2検出情報に応じた前記仮想キャラクタとのインタラクションを提供する工程と、
を実行させ、
前記第1モードは、前記プレイヤ及び前記仮想キャラクタからのメッセージがチャット表示領域に表示されるチャットモードであり前記チャットモードにおいては前記第2モードにおけるシーンの選択を促すメッセージが表示される一方で前記第2モードはチャットモードとは異なるモードであり、
前記第1モードにおける前記仮想キャラクタとのインタラクションには、前記第2モードにおけるシーンの選択を行うためのシーン選択インタラクションが含まれ、前記シーン選択インタラクションにおいて、前記プレイヤが前記第2モードにおけるシーンを複数のシーンから選択することを可能にさせる
ゲーム処理プログラム。

A game processing program for executing processing of a game having a first mode and a second mode by being executed by one or more computer processors.
To the one or more computer processors
In the first mode, a step of providing an interaction with a virtual character according to the first detection information detected by an information processing device not attached to the player's head, and
The step of performing the transition process from the first mode to the second mode, and
After performing the transition process, in the second mode, a step of providing an interaction with the virtual character according to the second detection information detected by the head-mounted display mounted on the player's head, and
To execute,
Wherein the first mode, the message in the chat mode a and the chat mode displayed in the chat display area while a message prompting selection of a scene in the second mode still appears from the player and the virtual character The second mode is different from the chat mode,
The interaction with the virtual character in the first mode includes a scene selection interaction for selecting a scene in the second mode, and in the scene selection interaction, the player creates a plurality of scenes in the second mode. Allows you to choose from the scenes of
Game processing program.

JP2018129484A 2018-02-06 2018-07-06 Game processing system, game processing method, and game processing program Active JP6855416B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2018129484A JP6855416B2 (en) 2018-07-06 2018-07-06 Game processing system, game processing method, and game processing program
US16/268,600 US10981067B2 (en) 2018-02-06 2019-02-06 Game processing system, method of processing game, and storage medium storing program for processing game
US16/922,459 US11161047B2 (en) 2018-02-06 2020-07-07 Game processing system, method of processing game, and storage medium storing program for processing game
US17/488,901 US11638879B2 (en) 2018-02-06 2021-09-29 Game processing system, method of processing game, and storage medium storing program for processing game
US18/187,446 US20230219005A1 (en) 2018-02-06 2023-03-21 Game processing system, method of processing game, and storage medium storing program for processing game

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018129484A JP6855416B2 (en) 2018-07-06 2018-07-06 Game processing system, game processing method, and game processing program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018019001 Division 2018-02-06 2018-02-06

Publications (2)

Publication Number Publication Date
JP2019136475A JP2019136475A (en) 2019-08-22
JP6855416B2 true JP6855416B2 (en) 2021-04-07

Family

ID=67694796

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018129484A Active JP6855416B2 (en) 2018-02-06 2018-07-06 Game processing system, game processing method, and game processing program

Country Status (1)

Country Link
JP (1) JP6855416B2 (en)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000262747A (en) * 1999-03-18 2000-09-26 Sega Enterp Ltd Image processing device, electronic game device and storage medium for tv game machine
JP4862877B2 (en) * 2008-10-27 2012-01-25 株式会社セガ GAME CONTROL METHOD, PROGRAM, AND RECORDING MEDIUM
KR102095765B1 (en) * 2012-10-19 2020-04-01 삼성전자주식회사 Display apparatus and method for controlling the same
JP5568189B1 (en) * 2014-02-25 2014-08-06 株式会社 ディー・エヌ・エー Electronic game providing apparatus and electronic game providing program
JP2014133155A (en) * 2014-03-10 2014-07-24 Namco Bandai Games Inc Program, and game device
WO2017221492A1 (en) * 2016-06-20 2017-12-28 ソニー株式会社 Information processing device, information processing method, and program
JP6201024B1 (en) * 2016-10-12 2017-09-20 株式会社コロプラ Method for supporting input to application for providing content using head mounted device, program for causing computer to execute the method, and content display device

Also Published As

Publication number Publication date
JP2019136475A (en) 2019-08-22

Similar Documents

Publication Publication Date Title
JP6908573B2 (en) Game processing system, game processing method, and game processing program
US11638879B2 (en) Game processing system, method of processing game, and storage medium storing program for processing game
US11644893B2 (en) Application processing system, method of processing application, and storage medium storing program for processing application
JP2019136066A (en) Application processing system, application processing method, and application processing program
JP6691151B2 (en) Game processing system, game processing method, and game processing program
JP2023093647A (en) Game processing system, game processing method, and game processing program
JP6775870B2 (en) Game processing system, game processing method, and game processing program
JP6792604B2 (en) Game processing system, game processing method, and game processing program
JP6855416B2 (en) Game processing system, game processing method, and game processing program
JP6850769B2 (en) Game processing system, game processing method, and game processing program
JP6815373B2 (en) Game processing system, game processing method, and game processing program
JP7148590B2 (en) Game processing system, game processing method, and game processing program
JP7227314B2 (en) Game processing system, game processing method, and game processing program
JP7005435B2 (en) Game processing system, game processing method, and game processing program
JP7211778B2 (en) Application processing system, application processing method, and application processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180706

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190806

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191002

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200214

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201118

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20201118

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20201125

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20201201

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210302

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210317

R150 Certificate of patent or registration of utility model

Ref document number: 6855416

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250