WO2021039347A1 - プログラム、方法、および端末装置 - Google Patents

プログラム、方法、および端末装置 Download PDF

Info

Publication number
WO2021039347A1
WO2021039347A1 PCT/JP2020/030182 JP2020030182W WO2021039347A1 WO 2021039347 A1 WO2021039347 A1 WO 2021039347A1 JP 2020030182 W JP2020030182 W JP 2020030182W WO 2021039347 A1 WO2021039347 A1 WO 2021039347A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
image
character
game
display
Prior art date
Application number
PCT/JP2020/030182
Other languages
English (en)
French (fr)
Inventor
功淳 馬場
潤哉 福重
Original Assignee
株式会社コロプラ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社コロプラ filed Critical 株式会社コロプラ
Priority to CN202080061197.3A priority Critical patent/CN114340749A/zh
Priority to EP20858889.7A priority patent/EP4023310A4/en
Priority to KR1020227010229A priority patent/KR20220052363A/ko
Priority to US17/638,976 priority patent/US20220297006A1/en
Publication of WO2021039347A1 publication Critical patent/WO2021039347A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55—Controlling game characters or game objects based on the game progress
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5252—Changing parameters of virtual cameras using two or more virtual cameras concurrently or sequentially, e.g. automatically switching between fixed virtual cameras when a character changes room or displaying a rear-mirror view in a car-driving game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5258—Changing parameters of virtual cameras by dynamically adapting the position of the virtual camera to keep a game object or game character in its viewing frustum, e.g. for tracking a character or a ball
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55—Controlling game characters or game objects based on the game progress
    • A63F13/56—Computing the motion of game characters with respect to other game characters, game objects or elements of the game scene, e.g. for simulating the behaviour of a group of virtual soldiers or for path finding
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55—Controlling game characters or game objects based on the game progress
    • A63F13/57—Simulating properties, behaviour or motion of objects in the game world, e.g. computing tyre load in a car race game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/847—Cooperative playing, e.g. requiring coordinated actions from several players to achieve a common goal
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/92—Video game devices specially adapted to be hand-held while playing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/18—Commands or executable codes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/426—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving on-screen location information, e.g. screen coordinates of an area at which the player is aiming with a light gun
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes

Definitions

  • the present invention relates to programs, methods, and terminal devices.
  • the part corresponding to the request from the user is decorated according to the request. For this reason, for example, it is not possible to give the user a sense of reality that the display mode of a specific part of the virtual character changes spontaneously, and there is room for improvement.
  • the present invention has been conceived in view of such circumstances, and an object of the present invention is to provide a program, a method, and a terminal device capable of giving a user a sense of reality of a virtual character.
  • a program executed in a terminal device including a processor the processor is provided with an image of a virtual space including a first character that moves in conjunction with the movement of the performer.
  • a step of receiving the first display data for making it displayable and a step of displaying an image in which the first character operates in the virtual space based on the first display data are executed.
  • a predetermined first object is associated with the first character, and the display mode of the first object is changed according to a predetermined rule.
  • FIG. 1 It is a figure which shows a specific example of moving image play. It is a figure which shows the other specific example of moving image play.
  • (A) is a flowchart showing an example of display mode control processing on the game play terminal side
  • (B) is a flowchart showing an example of display mode setting processing on the user terminal side.
  • (A) is a diagram showing an example of the Nth live distribution video
  • (B) is a diagram showing an example of the N + 1th live distribution video
  • (C) shows an example of the N + 2nd live distribution video. It is a figure.
  • (A) is a diagram showing an example of a live distribution video in the normal viewing mode
  • (B) is a diagram showing an example of a live distribution video in the AR viewing mode.
  • the system according to the present disclosure is a system for providing a game to a plurality of users.
  • the system will be described with reference to the drawings. It should be noted that the present invention is not limited to these examples, and is indicated by the scope of claims, and it is intended that all modifications within the meaning and scope equivalent to the scope of claims are included in the present invention. To. In the following description, the same elements are designated by the same reference numerals in the description of the drawings, and duplicate description will not be repeated.
  • FIG. 1 is a diagram showing an outline of the system 1 according to the present embodiment.
  • the system 1 includes a plurality of user terminals 100 (computers), a server 200, a game play terminal 300 (external device, second external device), and a distribution terminal 400 (external, first external device).
  • user terminals 100A to 100C in other words, three user terminals 100 are shown as an example of a plurality of user terminals 100, but the number of user terminals 100 is not limited to the illustrated example. .. Further, in the present embodiment, when it is not necessary to distinguish the user terminals 100A to C, it is described as "user terminal 100".
  • the user terminal 100, the game play terminal 300, and the distribution terminal 400 are connected to the server 200 via the network 2.
  • the network 2 is composed of various mobile communication systems constructed by the Internet and a wireless base station (not shown). Examples of this mobile communication system include so-called 3G and 4G mobile communication systems, LTE (Long Term Evolution), and wireless networks (for example, Wi-Fi (registered trademark)) that can be connected to the Internet by a predetermined access point. Be done.
  • the game provided by the system 1 may be a game in which a plurality of users participate, and is not limited to this example.
  • Gameplay terminal 300 The game play terminal 300 advances the game in response to an input operation by the player. In addition, the game play terminal 300 sequentially delivers information generated by the player's game play (hereinafter, game progress information) to the server 200 in real time.
  • game progress information information generated by the player's game play
  • the server 200 transmits the game progress information (second data) received in real time from the game play terminal 300 to the user terminal 100.
  • the server 200 mediates the transmission and reception of various information between the user terminal 100, the game play terminal 300, and the distribution terminal 400.
  • the distribution terminal 400 generates operation instruction data (first data) in response to an input operation by the user of the distribution terminal 400, and distributes the operation instruction data to the user terminal 100 via the server 200.
  • the operation instruction data is data for playing back a moving image on the user terminal 100, and specifically, is data for operating a character appearing in the moving image.
  • the user of the distribution terminal 400 is a player of this game.
  • the moving image played on the user terminal 100 based on the operation instruction data is a moving image in which the character operated by the player in the game operates. "Movement" is to move at least a part of the character's body, including speech. Therefore, the motion instruction data according to the present embodiment includes, for example, voice data for causing the character to speak and motion data for moving the character's body.
  • the operation instruction data is transmitted to the user terminal 100 after the end of this game.
  • the details of the operation instruction data and the moving image played based on the operation instruction data will be described later.
  • the user terminal 100 receives the game progress information in real time, and generates and displays the game screen using the information. In other words, the user terminal 100 reproduces the game screen of the game being played by the player by real-time rendering. As a result, the user of the user terminal 100 can visually recognize the same game screen as the game screen that the player is viewing while playing the game at substantially the same timing as the player.
  • the user terminal 100 generates information for supporting the progress of the game by the player in response to the input operation by the user, and transmits the information to the game play terminal 300 via the server 200. Details of the information will be described later.
  • the user terminal 100 receives the operation instruction data from the distribution terminal 400, and generates and reproduces a moving image (video) using the operation instruction data. In other words, the user terminal 100 renders and reproduces the operation instruction data.
  • FIG. 2 is a diagram showing a hardware configuration of the user terminal 100.
  • FIG. 3 is a diagram showing a hardware configuration of the server 200.
  • FIG. 4 is a diagram showing a hardware configuration of the game play terminal 300.
  • FIG. 5 is a diagram showing a hardware configuration of the distribution terminal 400.
  • the user terminal 100 is not limited to the smartphone.
  • the user terminal 100 may be realized as a feature phone, a tablet computer, a laptop computer (so-called laptop computer), a desktop computer, or the like.
  • the user terminal 100 may be a game device suitable for game play.
  • the user terminal 100 measures the processor 10, the memory 11, the storage 12, the communication interface (IF) 13, the input / output IF 14, the touch screen 15 (display unit), the camera 17, and the like. It includes a distance sensor 18. These configurations included in the user terminal 100 are electrically connected to each other by a communication bus.
  • the user terminal 100 may be provided with an input / output IF 14 to which a display (display unit) configured separately from the user terminal 100 main body can be connected instead of or in addition to the touch screen 15.
  • the user terminal 100 may be configured to be communicable with one or more controllers 1020.
  • the controller 1020 establishes communication with the user terminal 100 according to a communication standard such as Bluetooth (registered trademark).
  • the controller 1020 may have one or more buttons or the like, and transmits an output value based on a user's input operation to the buttons or the like to the user terminal 100.
  • the controller 1020 may have various sensors such as an acceleration sensor and an angular velocity sensor, and transmits the output values of the various sensors to the user terminal 100.
  • the controller 1020 may have the camera 17 and the distance measuring sensor 18.
  • the user terminal 100 causes a user who uses the controller 1020 to input user identification information such as the user's name or login ID via the controller 1020.
  • the user terminal 100 can associate the controller 1020 with the user, and identifies which user the output value belongs to based on the source of the received output value (controller 1020). be able to.
  • each user terminal 100 communicates with a plurality of controllers 1020, each user grips each controller 1020, so that the one user terminal 100 does not communicate with other devices such as the server 200 via the network 2.
  • Multiplayer can be realized with.
  • each user terminal 100 communicates with each other according to a wireless standard such as a wireless LAN (Local Area Network) standard (communication connection is made without going through a server 200), thereby realizing local multiplayer with a plurality of user terminals 100. You can also do it.
  • a wireless standard such as a wireless LAN (Local Area Network) standard (communication connection is made without going through a server 200), thereby realizing local multiplayer with a plurality of user terminals 100. You can also do it.
  • the user terminal 100 may further include at least a part of various functions described later described in the server 200.
  • the plurality of user terminals 100 may be provided with various functions described later described in the server 200 in a distributed manner.
  • the user terminal 100 may communicate with the server 200.
  • information indicating a play result such as a result or victory or defeat in a certain game may be associated with user identification information and transmitted to the server 200.
  • the controller 1020 may be configured to be detachable from the user terminal 100.
  • a coupling portion with the controller 1020 may be provided on at least one surface of the housing of the user terminal 100.
  • the user terminal 100 may accept the attachment of a storage medium 1030 such as an external memory card via the input / output IF14. As a result, the user terminal 100 can read the program and data recorded on the storage medium 1030.
  • the program recorded on the storage medium 1030 is, for example, a game program.
  • the user terminal 100 may store the game program acquired by communicating with an external device such as the server 200 in the memory 11 of the user terminal 100, or may store the game program acquired by reading from the storage medium 1030 in the memory 11. You may memorize it in.
  • the user terminal 100 includes a communication IF 13, an input / output IF 14, a touch screen 15, a camera 17, and a distance measuring sensor 18 as an example of a mechanism for inputting information to the user terminal 100.
  • a communication IF 13 an input / output IF 14
  • a touch screen 15 a camera 17, and a distance measuring sensor 18
  • an input mechanism can be regarded as an operation part configured to accept a user's input operation.
  • the operation unit when the operation unit is configured by at least one of the camera 17 and the distance measuring sensor 18, the operation unit detects an object 1010 in the vicinity of the user terminal 100 and performs an input operation from the detection result of the object. Identify.
  • a user's hand as an object 1010, a marker having a predetermined shape, or the like is detected, and an input operation is specified based on the color, shape, movement, or type of the object 1010 obtained as a detection result.
  • the user terminal 100 inputs a gesture (a series of movements of the user's hand) detected based on the captured image. Identify and accept as.
  • the captured image may be a still image or a moving image.
  • the user terminal 100 identifies and accepts the user's operation performed on the input unit 151 of the touch screen 15 as the user's input operation.
  • the operation unit is composed of the communication IF 13
  • the user terminal 100 identifies and accepts a signal (for example, an output value) transmitted from the controller 1020 as an input operation of the user.
  • a signal output from an input device (not shown) different from the controller 1020 connected to the input / output IF14 is specified and accepted as a user input operation.
  • the server 200 may be a general-purpose computer such as a workstation or a personal computer.
  • the server 200 includes a processor 20, a memory 21, a storage 22, a communication IF 23, and an input / output IF 24. These configurations included in the server 200 are electrically connected to each other by a communication bus.
  • Gameplay terminal 300 may be a general-purpose computer such as a personal computer.
  • the game play terminal 300 includes a processor 30, a memory 31, a storage 32, a communication IF 33, and an input / output IF 34. These configurations included in the gameplay terminal 300 are electrically connected to each other by a communication bus.
  • the game play terminal 300 is included in the HMD (Head Mounted Display) set 1000 as an example. That is, it can be expressed that the HMD set 1000 is included in the system 1, and the player can also express that he / she plays a game using the HMD set 1000.
  • the device for the player to play the game is not limited to the HMD set 1000.
  • the device may be any device that allows the player to experience the game virtually.
  • the device may be realized as a smartphone, a feature phone, a tablet computer, a laptop computer (so-called laptop computer), a desktop computer, or the like. Further, the device may be a game device suitable for game play.
  • the HMD set 1000 includes a game play terminal 300, an HMD 500, an HMD sensor 510, a motion sensor 520, a display 530, and a controller 540.
  • the HMD 500 includes a monitor 51, a gaze sensor 52, a first camera 53, a second camera 54, a microphone 55, and a speaker 56.
  • the controller 540 may include a motion sensor 520.
  • the HMD 500 may be mounted on the player's head and provide the player with virtual space during operation. More specifically, the HMD 500 displays an image for the right eye and an image for the left eye on the monitor 51, respectively. When each eye of the player visually recognizes the respective image, the player can recognize the image as a three-dimensional image based on the parallax of both eyes.
  • the HMD 500 may include either a so-called head-mounted display including a monitor and a head-mounted device capable of mounting a smartphone or other terminal having a monitor.
  • the monitor 51 is realized as, for example, a non-transparent display device.
  • the monitor 51 is arranged on the main body of the HMD 500 so as to be located in front of both eyes of the player. Therefore, the player can immerse himself in the virtual space when he / she visually recognizes the three-dimensional image displayed on the monitor 51.
  • the virtual space includes, for example, a background, player-operable objects, and player-selectable menu images.
  • the monitor 51 can be realized as a liquid crystal monitor or an organic EL (Electro Luminescence) monitor included in a so-called smartphone or other information display terminal.
  • the monitor 51 can be realized as a transmissive display device.
  • the HMD 500 may be an open type such as a glasses type, not a closed type that covers the player's eyes as shown in FIG.
  • the transmissive monitor 51 may be temporarily configured as a non-transparent display device by adjusting its transmittance.
  • the monitor 51 may include a configuration that simultaneously displays a part of the image constituting the virtual space and the real space.
  • the monitor 51 may display an image of the real space taken by the camera mounted on the HMD 500, or may make the real space visible by setting a part of the transmittance to be high.
  • the monitor 51 may include a sub-monitor for displaying an image for the right eye and a sub-monitor for displaying an image for the left eye.
  • the monitor 51 may be configured to display the image for the right eye and the image for the left eye as a unit.
  • the monitor 51 includes a high speed shutter. The high-speed shutter operates so that the image for the right eye and the image for the left eye can be alternately displayed so that the image is recognized by only one of the eyes.
  • the HMD 500 includes a plurality of light sources (not shown). Each light source is realized by, for example, an LED (Light Emitting Diode) that emits infrared rays.
  • the HMD sensor 510 has a position tracking function for detecting the movement of the HMD 500. More specifically, the HMD sensor 510 reads a plurality of infrared rays emitted by the HMD 500 and detects the position and inclination of the HMD 500 in the real space.
  • the HMD sensor 510 may be implemented by a camera.
  • the HMD sensor 510 can detect the position and tilt of the HMD 500 by executing the image analysis process using the image information of the HMD 500 output from the camera.
  • the HMD 500 may include a sensor (not shown) as a position detector in place of the HMD sensor 510 or in addition to the HMD sensor 510.
  • the HMD500 can use the sensor to detect the position and tilt of the HMD500 itself.
  • the sensor is an angular velocity sensor, a geomagnetic sensor, or an accelerometer
  • the HMD 500 may use any of these sensors instead of the HMD sensor 510 to detect its position and tilt.
  • the angular velocity sensor detects the angular velocity around the three axes of the HMD 500 in real space over time.
  • the HMD500 calculates the temporal change of the angle around the three axes of the HMD500 based on each angular velocity, and further calculates the inclination of the HMD500 based on the temporal change of the angle.
  • the gaze sensor 52 detects the direction in which the line of sight of the player's right eye and left eye is directed. That is, the gaze sensor 52 detects the line of sight of the player.
  • the detection of the direction of the line of sight is realized by, for example, a known eye tracking function.
  • the gaze sensor 52 is realized by a sensor having the eye tracking function.
  • the gaze sensor 52 preferably includes a sensor for the right eye and a sensor for the left eye.
  • the gaze sensor 52 may be, for example, a sensor that irradiates infrared light to the player's right eye and left eye and detects the angle of rotation of each eyeball by receiving reflected light from the cornea and the iris with respect to the irradiation light.
  • the gaze sensor 52 can detect the line of sight of the player based on each of the detected rotation angles.
  • the first camera 53 photographs the lower part of the player's face. More specifically, the first camera 53 captures the nose and mouth of the player.
  • the second camera 54 photographs the eyes and eyebrows of the player.
  • the housing on the player side of the HMD500 is defined as the inside of the HMD500, and the housing on the side opposite to the player of the HMD500 is defined as the outside of the HMD500.
  • the first camera 53 may be located outside the HMD500 and the second camera 54 may be located inside the HMD500.
  • the images generated by the first camera 53 and the second camera 54 are input to the game play terminal 300.
  • the first camera 53 and the second camera 54 may be realized as one camera, and the player's face may be photographed by the one camera.
  • the microphone 55 converts the player's utterance into a voice signal (electric signal) and outputs it to the game play terminal 300.
  • the speaker 56 converts the voice signal into voice and outputs it to the player.
  • the HMD 500 may include earphones instead of the speaker 56.
  • the controller 540 is connected to the gameplay terminal 300 by wire or wirelessly.
  • the controller 540 receives an input of a command from the player to the game play terminal 300.
  • the controller 540 is configured to be grippable by the player.
  • the controller 540 is configured to be wearable on a player's body or part of clothing.
  • the controller 540 may be configured to output at least one of vibration, sound, and light based on a signal transmitted from the gameplay terminal 300.
  • the controller 540 receives from the player an operation for controlling the position and movement of an object arranged in the virtual space.
  • the controller 540 includes a plurality of light sources. Each light source is realized by, for example, an LED that emits infrared rays.
  • the HMD sensor 510 has a position tracking function. In this case, the HMD sensor 510 reads a plurality of infrared rays emitted by the controller 540 and detects the position and inclination of the controller 540 in the real space.
  • the HMD sensor 510 may be implemented by a camera. In this case, the HMD sensor 510 can detect the position and tilt of the controller 540 by executing the image analysis process using the image information of the controller 540 output from the camera.
  • the motion sensor 520 is attached to the player's hand in a certain aspect to detect the movement of the player's hand. For example, the motion sensor 520 detects the rotation speed, the number of rotations, and the like of the hand. The detected signal is sent to the game play terminal 300.
  • the motion sensor 520 is provided in the controller 540, for example.
  • the motion sensor 520 is provided in, for example, a controller 540 configured to be grippable by the player.
  • the controller 540 is attached to something that does not easily fly by being attached to the player's hand, such as a glove type.
  • a sensor not attached to the player may detect the movement of the player's hand.
  • the signal of the camera that shoots the player may be input to the game play terminal 300 as a signal indicating the operation of the player.
  • the motion sensor 520 and the game play terminal 300 are wirelessly connected to each other.
  • the communication mode is not particularly limited, and for example, Bluetooth or other known communication method is used.
  • the display 530 displays an image similar to the image displayed on the monitor 51. As a result, users other than the player wearing the HMD 500 can view the same image as the player.
  • the image displayed on the display 530 does not have to be a three-dimensional image, and may be an image for the right eye or an image for the left eye. Examples of the display 530 include a liquid crystal display and an organic EL monitor.
  • the game play terminal 300 operates a character to be operated by the player based on various information acquired from each part of the HMD 500, the controller 540, and the motion sensor 520, and advances the game.
  • the "movements" here include moving parts of the body, changing postures, changing facial expressions, moving, uttering, touching and moving objects placed in virtual space, and characters. This includes the use of weapons and tools to grasp. That is, in this game, when the player moves each part of the body, the character also moves each part of the body in the same manner as the player. Further, in this game, the character utters the content uttered by the player. In other words, in this game, the character is an avatar object that behaves as a player's alter ego. As an example, at least part of the character's movements may be performed by input to the controller 540 by the player.
  • the motion sensor 520 is attached to, for example, both hands of the player, both feet of the player, the waist of the player, and the head of the player.
  • the motion sensors 520 attached to both hands of the player may be provided in the controller 540 as described above.
  • the motion sensor 520 attached to the player's head may be provided in the HMD 500.
  • the motion sensor 520 may also be attached to the user's elbows and knees. By increasing the number of motion sensors 520 attached to the player, the movement of the player can be more accurately reflected in the character.
  • the player may wear a suit to which one or more motion sensors 520 are attached. That is, the method of motion capture is not limited to the example using the motion sensor 520.
  • the distribution terminal 400 may be a mobile terminal such as a smartphone, a PDA (Personal Digital Assistant), or a tablet computer. Further, the distribution terminal 400 may be a so-called stationary terminal such as a desktop personal computer.
  • the distribution terminal 400 includes a processor 40, a memory 41, a storage 42, a communication IF 43, an input / output IF 44, and a touch screen 45.
  • the distribution terminal 400 may be provided with an input / output IF 44 to which a display (display unit) configured separately from the distribution terminal 400 main body can be connected in place of or in addition to the touch screen 45.
  • Controller 1021 may have one or more physical input mechanisms such as buttons, levers, sticks, wheels and the like.
  • the controller 1021 transmits an output value based on an input operation input to the input mechanism by the operator of the distribution terminal 400 (player in the present embodiment) to the distribution terminal 400.
  • the controller 1021 may have various sensors such as an acceleration sensor and an angular velocity sensor, and may transmit the output values of the various sensors to the distribution terminal 400. The above-mentioned output value is received by the distribution terminal 400 via the communication IF43.
  • the distribution terminal 400 may include a camera and a distance measuring sensor (both not shown).
  • the controller 1021 may have a camera and a distance measuring sensor.
  • the distribution terminal 400 includes a communication IF43, an input / output IF44, and a touch screen 45 as an example of a mechanism for inputting information to the distribution terminal 400.
  • a communication IF43 an input / output IF44
  • a touch screen 45 an example of a mechanism for inputting information to the distribution terminal 400.
  • Each of the above-mentioned parts as an input mechanism can be regarded as an operation part configured to accept a user's input operation.
  • the distribution terminal 400 identifies and accepts the user's operation performed on the input unit 451 of the touch screen 45 as the user's input operation.
  • the distribution terminal 400 identifies and accepts a signal (for example, an output value) transmitted from the controller 1021 as an input operation of the user.
  • the distribution terminal 400 identifies and accepts a signal output from an input device (not shown) connected to the input / output IF44 as a user input operation.
  • the processors 10, 20, 30, and 40 control the overall operation of the user terminal 100, the server 200, the game play terminal 300, and the distribution terminal 400, respectively.
  • Processors 10, 20, 30, and 40 include a CPU (Central Processing Unit), an MPU (Micro Processing Unit), and a GPU (Graphics Processing Unit).
  • Processors 10, 20, 30, and 40 read programs from storages 12, 22, 32, and 42, which will be described later, respectively. Then, the processors 10, 20, 30, and 40 expand the read programs into the memories 11, 21, 31, and 41, which will be described later, respectively.
  • Processors 10, 20, and 30 execute the expanded program.
  • the memories 11, 21, 31, and 41 are main storage devices.
  • the memories 11, 21, 31, and 41 are composed of storage devices such as a ROM (Read Only Memory) and a RAM (Random Access Memory).
  • the memory 11 provides a work area to the processor 10 by temporarily storing a program and various data read from the storage 12 described later by the processor 10.
  • the memory 11 also temporarily stores various data generated while the processor 10 is operating according to the program.
  • the memory 21 provides a work area to the processor 20 by temporarily storing various programs and data read from the storage 22 described later by the processor 20.
  • the memory 21 also temporarily stores various data generated while the processor 20 is operating according to the program.
  • the memory 31 provides a work area to the processor 30 by temporarily storing various programs and data read from the storage 32 described later by the processor 30.
  • the memory 31 also temporarily stores various data generated while the processor 30 is operating according to the program.
  • the memory 41 provides a work area to the processor 40 by temporarily storing the program and various data read from the storage 42 described later by the processor 40.
  • the memory 41 also temporarily stores various data generated while the processor 40 is operating according to the program.
  • the programs executed by the processors 10 and 30 may be game programs of the present game.
  • the program executed by the processor 40 may be a distribution program for realizing distribution of operation instruction data.
  • the processor 10 may further execute a viewing program for realizing the reproduction of the moving image.
  • the program executed by the processor 20 may be at least one of the above-mentioned game program, distribution program, and viewing program.
  • the processor 20 executes at least one of a game program, a distribution program, and a viewing program in response to a request from at least one of the user terminal 100, the game play terminal 300, and the distribution terminal 400.
  • the distribution program and the viewing program may be executed in parallel.
  • the game program may be a program that realizes the game in cooperation with the user terminal 100, the server 200, and the game play terminal 300.
  • the distribution program may be a program that realizes distribution of operation instruction data in collaboration with the server 200 and the distribution terminal 400.
  • the viewing program may be a program that realizes the reproduction of a moving image in collaboration with the user terminal 100 and the server 200.
  • the storages 12, 22, 32, and 42 are auxiliary storage devices.
  • the storages 12, 22, 32, and 42 are composed of a storage device such as a flash memory or an HDD (Hard Disk Drive).
  • various data related to the game are stored in the storages 12 and 32.
  • Various data related to the distribution of operation instruction data are stored in the storage 42.
  • various data related to the reproduction of the moving image are stored in the storage 12.
  • the storage 22 may store at least a part of various data related to the game, the distribution of the operation instruction data, and the reproduction of the moving image.
  • the communication IFs 13, 23, 33, and 43 control the transmission and reception of various data in the user terminal 100, the server 200, the game play terminal 300, and the distribution terminal 400, respectively.
  • the communication IFs 13, 23, 33, and 43 include, for example, communication via a wireless LAN (Local Area Network), Internet communication via a wired LAN, a wireless LAN, or a mobile phone network, and communication using a short-range wireless communication or the like. Control.
  • the input / output IFs 14, 24, 34, and 44 are interfaces for the user terminal 100, the server 200, the game play terminal 300, and the distribution terminal 400 to receive data input and to output data, respectively.
  • the input / output IFs 14, 24, 34, and 44 may input / output data via USB (Universal Serial Bus) or the like.
  • Input / output IFs 14, 24, 34, 44 may include physical buttons, cameras, microphones, speakers, mice, keyboards, displays, sticks, levers and the like. Further, the input / output IFs 14, 24, 34, and 44 may include a connection portion for transmitting and receiving data to and from a peripheral device.
  • the touch screen 15 is an electronic component that combines an input unit 151 and a display unit 152 (display).
  • the touch screen 45 is an electronic component that combines an input unit 451 and a display unit 452.
  • the input units 151 and 451 are, for example, touch-sensitive devices, and are configured by, for example, a touch pad.
  • the display units 152 and 452 are composed of, for example, a liquid crystal display, an organic EL (Electro-Luminescence) display, or the like.
  • the input units 151 and 451 detect the position where the user's operation (mainly a physical contact operation such as a touch operation, a slide operation, a swipe operation, and a tap operation) is input to the input surface, and information indicating the position. Has a function of transmitting as an input signal.
  • the input units 151 and 451 may include touch sensing units (not shown).
  • the touch sensing unit may adopt any method such as a capacitance method or a resistance film method.
  • the user terminal 100 and the distribution terminal 400 may each include one or more sensors for specifying the holding posture of the user terminal 100 and the distribution terminal 400, respectively.
  • This sensor may be, for example, an acceleration sensor, an angular velocity sensor, or the like.
  • the processors 10 and 40 each specify the holding postures of the user terminal 100 and the distribution terminal 400 from the output of the sensor, and perform processing according to the holding posture. It will also be possible.
  • the processors 10 and 40 may be a vertical screen display in which vertically long images are displayed on the display units 152 and 452 when the user terminal 100 and the distribution terminal 400 are held vertically, respectively.
  • a horizontally long image may be displayed on the display unit as a horizontal screen display. In this way, the processors 10 and 40 may be able to switch between the vertical screen display and the horizontal screen display according to the holding postures of the user terminal 100 and the distribution terminal 400, respectively.
  • FIG. 6 is a block diagram showing a functional configuration of a user terminal 100, a server 200, and an HMD set 1000 included in the system 1.
  • FIG. 7 is a block diagram showing a functional configuration of the distribution terminal 400 shown in FIG.
  • the user terminal 100 has a function as an input device that accepts a user's input operation and a function as an output device that outputs a game image or sound.
  • the user terminal 100 functions as a control unit 110 and a storage unit 120 in cooperation with a processor 10, a memory 11, a storage 12, a communication IF 13, an input / output IF 14, a touch screen 15, and the like.
  • the server 200 has a function of mediating the transmission / reception of various information between the user terminal 100, the HMD set 1000, and the distribution terminal 400.
  • the server 200 functions as a control unit 210 and a storage unit 220 in cooperation with the processor 20, the memory 21, the storage 22, the communication IF23, the input / output IF24, and the like.
  • the HMD set 1000 (game play terminal 300) provides a function as an input device for receiving an input operation of a player, a function as an output device for outputting game images and sounds, and game progress information to a user via a server 200. It has a function of transmitting to the terminal 100 in real time.
  • the HMD set 1000 is a control unit 310 in cooperation with the processor 30, the memory 31, the storage 32, the communication IF33, the input / output IF34, and the HMD500, the HMD sensor 510, the motion sensor 520, the controller 540, and the like of the game play terminal 300. And functions as a storage unit 320.
  • the distribution terminal 400 has a function of generating operation instruction data and transmitting the operation instruction data to the user terminal 100 via the server 200.
  • the distribution terminal 400 functions as a control unit 410 and a storage unit 420 in cooperation with a processor 40, a memory 41, a storage 42, a communication IF 43, an input / output IF 44, a touch screen 45, and the like.
  • the storage unit 120 stores the game program 131 (program), the game information 132, and the user information 133.
  • the storage unit 220 stores the game program 231 and the game information 232, the user information 233, and the user list 234.
  • the storage unit 320 stores the game program 331, the game information 332, and the user information 333.
  • the storage unit 420 stores the user list 421, the motion list 422, and the distribution program 423 (program, second program).
  • the game programs 131, 231 and 331 are game programs executed by the user terminal 100, the server 200, and the HMD set 1000, respectively. This game is realized by the cooperative operation of each device based on the game programs 131, 231 and 331.
  • the game programs 131 and 331 may be stored in the storage unit 220 and downloaded to the user terminal 100 and the HMD set 1000, respectively.
  • the user terminal 100 renders the data received from the distribution terminal 400 based on the game program 131, and reproduces the moving image.
  • the game program 131 is also a program for playing a moving image using the moving image instruction data distributed from the distribution terminal 400.
  • the program for playing the moving image may be different from the game program 131.
  • the storage unit 120 stores a program for playing the moving image separately from the game program 131.
  • the game information 132, 232, and 332 are data that the user terminal 100, the server 200, and the HMD set 1000 refer to when executing the game program, respectively.
  • the user information 133, 233, and 333 are data related to the user account of the user terminal 100.
  • the game information 232 is the game information 132 of each user terminal 100 and the game information 332 of the HMD set 1000.
  • the user information 233 is the user information of the player included in the user information 133 of each user terminal 100 and the user information 333.
  • the user information 333 is the user information 133 of each user terminal 100 and the user information of the player.
  • the user list 234 and the user list 421 are a list of users who have participated in the game.
  • the user list 234 and the user list 421 may include a list of users who participated in the most recent gameplay by the player, as well as a list of users who participated in each gameplay before the gameplay.
  • the motion list 422 is a list of a plurality of motion data created in advance.
  • the motion list 422 is, for example, a list in which motion data is associated with each of the information (for example, a motion name) that identifies each motion.
  • the distribution program 423 is a program for realizing distribution of operation instruction data for playing a moving image on the user terminal 100 to the user terminal 100.
  • the control unit 210 comprehensively controls the server 200 by executing the game program 231 stored in the storage unit 220.
  • the control unit 210 mediates the transmission and reception of various information between the user terminal 100, the HMD set 1000, and the distribution terminal 400.
  • the control unit 210 functions as a communication mediation unit 211, a log generation unit 212, and a list generation unit 213 according to the description of the game program 231.
  • the control unit 210 can also function as other functional blocks (not shown) for mediating the transmission and reception of various information related to game play and distribution of operation instruction data, and for supporting the progress of the game.
  • the communication mediation unit 211 mediates the transmission and reception of various information between the user terminal 100, the HMD set 1000, and the distribution terminal 400. For example, the communication mediation unit 211 transmits the game progress information received from the HMD set 1000 to the user terminal 100.
  • the game progress information includes data indicating the movement of the character operated by the player, the parameters of the character, information on items and weapons possessed by the character, enemy characters, and the like.
  • the server 200 transmits the game progress information to the user terminals 100 of all the users participating in the game. In other words, the server 200 transmits common game progress information to the user terminals 100 of all users participating in the game. As a result, the game progresses in the same manner as the HMD set 1000 on each of the user terminals 100 of all the users participating in the game.
  • the communication mediation unit 211 transmits the information received from any one of the user terminals 100 to support the progress of the game by the player to the other user terminals 100 and the HMD set 1000.
  • the information may be an item for the player to advance the game advantageously, and may be item information indicating an item provided to the player (character).
  • the item information includes information (user name, user ID, etc.) indicating the user who provided the item.
  • the communication mediation unit 211 may mediate the distribution of the operation instruction data from the distribution terminal 400 to the user terminal 100.
  • the log generation unit 212 generates a game progress log based on the game progress information received from the HMD set 1000.
  • the list generation unit 213 generates the user list 234 after the end of game play. Although the details will be described later, each user in the user list 234 is associated with a tag indicating the content of the support provided to the player by the user.
  • the list generation unit 213 generates a tag based on the game progress log generated by the log generation unit 212, and associates it with the corresponding user.
  • the list generation unit 213 may associate the content of the support provided by each user to the player, which is input by the game operator or the like using a terminal device such as a personal computer, with the corresponding user as a tag. ..
  • the user terminal 100 transmits information indicating the user to the server 200 based on the user's operation. For example, the user terminal 100 transmits the user ID input by the user to the server 200. That is, the server 200 holds information indicating each user for all the users participating in the game.
  • the list generation unit 213 may generate the user list 234 using the information.
  • the control unit 310 comprehensively controls the HMD set 1000 by executing the game program 331 stored in the storage unit 320. For example, the control unit 310 advances the game according to the game program 331 and the operation of the player. In addition, the control unit 310 communicates with the server 200 to send and receive information as needed while the game is in progress. The control unit 310 may send and receive information directly to and from the user terminal 100 without going through the server 200.
  • the control unit 310 has an operation reception unit 311, a display control unit 312, a UI control unit 313, an animation generation unit 314, a game progress unit 315, a virtual space control unit 316, and a reaction processing unit 317 according to the description of the game program 331. Functions as.
  • the control unit 310 can also function as other functional blocks (not shown) for controlling characters appearing in the game, depending on the nature of the game to be executed.
  • the operation reception unit 311 detects and accepts the input operation of the player.
  • the operation reception unit 311 receives signals input from the HMD 500, the motion sensor 520, the controller 540, etc., determines what kind of input operation has been performed, and outputs the result to each element of the control unit 310.
  • the UI control unit 313 controls a user interface (hereinafter, UI) image to be displayed on the monitor 51, the display 530, and the like.
  • UI image is a tool for the player to make an input necessary for the progress of the game to the HMD set 1000, or a tool for obtaining information output during the progress of the game from the HMD set 1000.
  • UI images are, but are not limited to, icons, buttons, lists, menu screens, and the like.
  • the animation generation unit 314 generates animations showing the motions of various objects based on the control modes of the various objects. For example, the animation generation unit 314 may generate an animation or the like that expresses how an object (for example, a player's avatar object) moves as if it were there, moves its mouth, or changes its facial expression. ..
  • the game progress unit 315 advances the game based on the game program 331, the input operation by the player, the operation of the avatar object in response to the input operation, and the like. For example, the game progress unit 315 performs a predetermined game process when the avatar object performs a predetermined operation. Further, for example, the game progress unit 315 may receive information representing a user's operation on the user terminal 100 and perform game processing based on the user's operation. In addition, the game progress unit 315 generates game progress information according to the progress of the game and transmits it to the server 200. The game progress information is transmitted to the user terminal 100 via the server 200. As a result, the progress of the game in the HMD set 1000 is shared in the user terminal 100. In other words, the progress of the game in the HMD set 1000 and the progress of the game in the user terminal 100 are synchronized.
  • the virtual space control unit 316 performs various controls related to the virtual space provided to the player according to the progress of the game. As an example, the virtual space control unit 316 creates various objects and arranges them in the virtual space. Further, the virtual space control unit 316 arranges the virtual camera in the virtual space. In addition, the virtual space control unit 316 operates various objects arranged in the virtual space according to the progress of the game. Further, the virtual space control unit 316 controls the position and inclination of the virtual camera arranged in the virtual space according to the progress of the game.
  • the display control unit 312 outputs a game screen on which the processing results executed by each of the above elements are reflected to the monitor 51 and the display 530.
  • the display control unit 312 may display an image based on the field of view from the virtual camera arranged in the virtual space on the monitor 51 and the display 530 as a game screen. Further, the display control unit 312 may include the animation generated by the animation generation unit 314 in the game screen. Further, the display control unit 312 may superimpose and draw the above-mentioned UI image controlled by the UI control unit 313 on the game screen.
  • the reaction processing unit 317 receives feedback on the reaction of the user of the user terminal 100 to the game play of the player, and outputs this to the player.
  • the user terminal 100 can create a comment (message) addressed to the avatar object based on the input operation of the user.
  • the reaction processing unit 317 receives the comment data of the comment and outputs it.
  • the reaction processing unit 317 may display the text data corresponding to the user's comment on the monitor 51 and the display 530, or may output the voice data corresponding to the user's comment from a speaker (not shown). In the former case, the reaction processing unit 317 may superimpose and draw an image corresponding to the text data (that is, an image including the content of the comment) on the game screen.
  • the control unit 110 comprehensively controls the user terminal 100 by executing the game program 131 stored in the storage unit 120. For example, the control unit 110 advances the game according to the game program 131 and the user's operation. In addition, the control unit 110 communicates with the server 200 to send and receive information as needed while the game is in progress. The control unit 110 may send and receive information directly to and from the HMD set 1000 without going through the server 200.
  • the control unit 110 has an operation reception unit 111, a display control unit 112, a UI control unit 113, an animation generation unit 114, a game progress unit 115, a virtual space control unit 116, and a video playback unit 117 according to the description of the game program 131. Functions as.
  • the control unit 110 can also function as other functional blocks (not shown) for the progress of the game, depending on the nature of the game being executed.
  • the operation reception unit 111 detects and accepts a user's input operation with respect to the input unit 151.
  • the operation reception unit 111 determines what kind of input operation has been performed from the action exerted by the user on the console via the touch screen 15 and other input / output IF 14, and outputs the result to each element of the control unit 110. To do.
  • the operation receiving unit 111 receives an input operation for the input unit 151, detects the coordinates of the input position of the input operation, and specifies the type of the input operation.
  • the operation reception unit 111 specifies, for example, a touch operation, a slide operation, a swipe operation, a tap operation, and the like as types of input operations. Further, the operation reception unit 111 detects that the contact input is released from the touch screen 15 when the continuously detected input is interrupted.
  • the UI control unit 113 controls a UI image to be displayed on the display unit 152 in order to construct a UI according to at least one of a user's input operation and received game progress information.
  • the UI image is a tool for the user to input necessary input for the progress of the game to the user terminal 100, or a tool for obtaining information output during the progress of the game from the user terminal 100.
  • UI images are, but are not limited to, icons, buttons, lists, menu screens, and the like.
  • the animation generation unit 114 generates animations showing the motions of various objects based on the control modes of the various objects.
  • the game progress unit 115 advances the game based on the game program 131, the received game progress information, the input operation by the user, and the like.
  • the game progress unit 115 performs a predetermined game process by an input operation by the user
  • the game progress unit 115 transmits information about the game process to the HMD set 1000 via the server 200.
  • the predetermined game processing is shared in the HMD set 1000.
  • the predetermined game process is, for example, a process of providing an item to the avatar object, and in this example, the information related to the game process is the item information described above.
  • the virtual space control unit 116 performs various controls related to the virtual space provided to the user according to the progress of the game.
  • the virtual space control unit 116 creates various objects and arranges them in the virtual space.
  • the virtual space control unit 116 arranges the virtual camera in the virtual space.
  • the virtual space control unit 116 operates various objects arranged in the virtual space according to the progress of the game, specifically, the received game progress information.
  • the virtual space control unit 316 controls the position and inclination of the virtual camera arranged in the virtual space according to the progress of the game, specifically, the received game progress information.
  • the display control unit 112 outputs to the display unit 152 a game screen in which the processing results executed by each of the above elements are reflected.
  • the display control unit 112 may display an image based on the field of view from the virtual camera arranged in the virtual space provided to the user on the display unit 152 as a game screen. Further, the display control unit 112 may include the animation generated by the animation generation unit 114 in the game screen. Further, the display control unit 112 may superimpose and draw the above-mentioned UI image controlled by the UI control unit 113 on the game screen.
  • the game screen displayed on the display unit 152 is the same game screen as the game screen displayed on the other user terminal 100 and the HMD set 1000.
  • the moving image reproduction unit 117 analyzes (renders) the operation instruction data received from the distribution terminal 400, and reproduces the moving image.
  • the control unit 410 comprehensively controls the distribution terminal 400 by executing a program (not shown) stored in the storage unit 420. For example, the control unit 410 generates operation instruction data and distributes it to the user terminal 100 according to the operation of the program and the user (player in this embodiment) of the distribution terminal 400. In addition, the control unit 410 communicates with the server 200 to send and receive information as needed. The control unit 410 may send and receive information directly to and from the user terminal 100 without going through the server 200.
  • the control unit 410 functions as a communication control unit 411, a display control unit 412, an operation reception unit 413, a voice reception unit 414, a motion identification unit 415, and an operation instruction data generation unit 416 according to the description of the program.
  • the control unit 410 can also function as other functional blocks (not shown) for the generation and distribution of operation instruction data.
  • the communication control unit 411 controls transmission / reception of information to / from the server 200 or the user terminal 100 via the server 200.
  • the communication control unit 411 receives the user list 421 from the server 200 as an example. Further, the communication control unit 411 transmits the operation instruction data to the user terminal 100 as an example.
  • the display control unit 412 outputs various screens reflecting the processing results executed by each element to the display unit 452. As an example, the display control unit 412 displays a screen including the received user list 234. Further, as an example, the display control unit 412 displays a screen including a motion list 422 for causing the player to select motion data for operating the avatar object included in the motion instruction data to be distributed.
  • the operation reception unit 413 detects and accepts a player's input operation with respect to the input unit 151.
  • the operation reception unit 111 determines what kind of input operation has been performed from the action exerted by the player on the console via the touch screen 45 and other input / output IF44s, and outputs the result to each element of the control unit 410. To do.
  • the operation reception unit 413 receives an input operation for the input unit 451, detects the coordinates of the input position of the input operation, and specifies the type of the input operation.
  • the operation reception unit 413 specifies, for example, a touch operation, a slide operation, a swipe operation, a tap operation, and the like as the types of input operations. Further, the operation reception unit 413 detects that the contact input is released from the touch screen 45 when the continuously detected input is interrupted.
  • the voice reception unit 414 receives the voice generated around the distribution terminal 400 and generates voice data of the voice.
  • the voice receiving unit 414 receives the voice spoken by the player and generates voice data of the voice.
  • the motion specifying unit 415 specifies the motion data selected by the player from the motion list 422 according to the input operation of the player.
  • the operation instruction data generation unit 416 generates operation instruction data.
  • the operation instruction data generation unit 416 generates operation instruction data including the generated voice data and the specified motion data.
  • the functions of the HMD set 1000, the server 200, and the user terminal 100 shown in FIG. 6 and the functions of the distribution terminal 400 shown in FIG. 7 are merely examples.
  • Each device of the HMD set 1000, the server 200, the user terminal 100, and the distribution terminal 400 may include at least a part of the functions provided by the other devices.
  • another device other than the HMD set 1000, the server 200, the user terminal 100, and the distribution terminal 400 may be a component of the system 1, and the other device may be made to execute a part of the processing in the system 1.
  • the computer that executes the game program in the present embodiment may be any of the HMD set 1000, the server 200, the user terminal 100, the distribution terminal 400, and other devices, or a plurality of these. It may be realized by the combination of the devices of.
  • FIG. 8 is a flowchart showing an example of a flow of control processing of the virtual space provided to the player and the virtual space provided to the user of the user terminal 100.
  • FIG. 9 is a diagram showing a virtual space 600A provided to the player and a field of view image visually recognized by the player according to an embodiment.
  • FIG. 10 is a diagram showing a virtual space 600B provided to the user of the user terminal 100 and a field of view image visually recognized by the user according to a certain embodiment.
  • virtual space 600 when it is not necessary to distinguish between the virtual spaces 600A and 600B, it is described as "virtual space 600".
  • step S1 the processor 30 defines the virtual space 600A shown in FIG. 9 as the virtual space control unit 316.
  • the processor 30 defines a virtual space 600A by using virtual space data (not shown).
  • the virtual space data may be stored in the game play terminal 300, may be generated by the processor 30 based on the game program 331, or may be acquired by the processor 30 from an external device such as the server 200. May be good.
  • the virtual space 600 has an all-sky spherical structure that covers the entire 360-degree direction of a point defined as a center.
  • the celestial sphere in the upper half of the virtual space 600 is illustrated so as not to complicate the explanation.
  • step S2 the processor 30 arranges the avatar object 610 (character) in the virtual space 600A as the virtual space control unit 316.
  • the avatar object 610 is an avatar object associated with the player, and operates according to the input operation of the player.
  • step S3 the processor 30 arranges other objects in the virtual space 600A as the virtual space control unit 316.
  • the processor 30 arranges objects 631 to 634.
  • Other objects imitate, for example, character objects (so-called non-player characters, NPCs) that operate according to the game program 331, operation objects such as virtual hands, animals, plants, man-made objects, and natural objects that are arranged as the game progresses.
  • Can include objects and the like.
  • step S4 the processor 30 arranges the virtual camera 620A in the virtual space 600A as the virtual space control unit 316. As an example, the processor 30 arranges the virtual camera 620A at the position of the head of the avatar object 610.
  • step S5 the processor 30 displays the field of view image 650 on the monitor 51 and the display 530.
  • the processor 30 defines a field of view 640A, which is the field of view from the virtual camera 620A in the virtual space 600A, according to the initial position and tilt of the virtual camera 620A. Then, the processor 30 defines the field of view image 650 corresponding to the field of view area 640A.
  • the processor 30 outputs the field of view image 650 to the monitor 51 and the display 530 to display the field of view image 650 on the HMD 500 and the display 530.
  • a part of the object 634 is included in the field of view area 640A, so that the field of view image 650 is one of the objects 634 as shown in FIG. 9B. Including part.
  • step S6 the processor 30 transmits the initial arrangement information to the user terminal 100 via the server 200.
  • the initial placement information is information indicating the initial placement positions of various objects in the virtual space 600A.
  • the initial placement information includes the avatar object 610 and the information of the initial placement positions of the objects 631 to 634.
  • the initial placement information can also be expressed as one of the game progress information.
  • step S7 the processor 30 controls the virtual camera 620A according to the movement of the HMD 500 as the virtual space control unit 316. Specifically, the processor 30 controls the orientation and tilt of the virtual camera 620A according to the movement of the HMD 500, that is, the posture of the player's head. As will be described later, when the player moves the head (changes the posture of the head), the processor 30 moves the head of the avatar object 610 in accordance with this movement. The processor 30 controls the orientation and tilt of the virtual camera 620A so that, for example, the direction of the line of sight of the avatar object 610 coincides with the direction of the line of sight of the virtual camera 620A. In step S8, the processor 30 updates the field of view image 650 in response to changes in the orientation and tilt of the virtual camera 620A.
  • step S9 the processor 30 moves the avatar object 610 as the virtual space control unit 316 according to the movement of the player.
  • the processor 30 moves the avatar object 610 in the virtual space 600A in response to the player moving in the real space.
  • the processor 30 moves the head of the avatar object 610 in the virtual space 600A in response to the player moving the head in the real space.
  • step S10 the processor 30 moves the virtual camera 620A as the virtual space control unit 316 so as to follow the avatar object 610. That is, the virtual camera 620A is always at the position of the head of the avatar object 610 even if the avatar object 610 moves.
  • the processor 30 updates the field of view image 650 in response to the movement of the virtual camera 620A. That is, the processor 30 updates the view area 640A according to the posture of the player's head and the position of the virtual camera 620A in the virtual space 600A. As a result, the field of view image 650 is updated.
  • step S11 the processor 30 transmits the operation instruction data of the avatar object 610 to the user terminal 100 via the server 200.
  • the operation instruction data here is motion data that captures the player's motion, voice data of the voice spoken by the player, and operation data indicating the content of the input operation to the controller 540 during the virtual experience (for example, during game play). Includes at least one.
  • the operation instruction data is transmitted to the user terminal 100 as, for example, game progress information.
  • steps S7 to S11 are continuously and repeatedly executed while the player is playing the game.
  • step S21 the processor 10 of the user terminal 100 of the user 3 defines the virtual space 600B shown in FIG. 10 as the virtual space control unit 116.
  • the processor 10 defines the virtual space 600B by using the virtual space data (not shown).
  • the virtual space data may be stored in the user terminal 100, may be generated by the processor 10 based on the game program 131, or may be acquired by the processor 10 from an external device such as the server 200. Good.
  • step S22 the processor 10 receives the initial placement information.
  • step S23 the processor 10 arranges various objects in the virtual space 600B as the virtual space control unit 116 according to the initial arrangement information.
  • the various objects are the avatar object 610 and the objects 631 to 634.
  • step S24 the processor 10 arranges the virtual camera 620B in the virtual space 600B as the virtual space control unit 116. As an example, the processor 10 arranges the virtual camera 620B at the position shown in FIG. 10 (A).
  • step S25 the processor 10 displays the field of view image 660 on the display unit 152.
  • the processor 10 defines a field of view 640B, which is a field of view from the virtual camera 620B in the virtual space 600B, according to the initial position and tilt of the virtual camera 620B. Then, the processor 10 defines the field of view image 660 corresponding to the field of view area 640B.
  • the processor 10 outputs the field of view image 660 to the display unit 152 to display the field of view image 660 on the display unit 152.
  • the avatar object 610 and the object 631 are included in the field of view area 640B, so that the field of view image 660 is the avatar object 610 as shown in FIG. 10B. And the object 631.
  • step S26 the processor 10 receives the operation instruction data.
  • step S27 the processor 10 moves the avatar object 610 in the virtual space 600B as the virtual space control unit 116 according to the operation instruction data. In other words, the processor 10 reproduces the video in which the avatar object 610 is operating by real-time rendering.
  • step S28 the processor 10 controls the virtual camera 620B as the virtual space control unit 116 according to the operation of the user received as the operation reception unit 111.
  • step S29 the processor 10 updates the field of view image 660 in response to changes in the position of the virtual camera 620B in the virtual space 600B, the orientation and tilt of the virtual camera 620B.
  • the processor 10 may automatically control the virtual camera 620B according to the movement of the avatar object 610, for example, the movement of the avatar object 610 or the change of the orientation.
  • the processor 10 may automatically move the virtual camera 620B or change its orientation and tilt so that the avatar object 610 is always photographed from the front.
  • the processor 10 may automatically move the virtual camera 620B or change the orientation and tilt so as to always shoot the avatar object 610 from the rear according to the movement of the avatar object 610. Good.
  • the avatar object 610 operates according to the movement of the player.
  • the operation instruction data indicating this operation is transmitted to the user terminal 100.
  • the avatar object 610 operates according to the received operation instruction data.
  • the avatar object 610 performs the same operation in the virtual space 600A and the virtual space 600B.
  • the user 3 can visually recognize the movement of the avatar object 610 according to the movement of the player by using the user terminal 100.
  • FIG. 11 is a diagram showing another example of the field of view image displayed on the user terminal 100. Specifically, it is a figure which shows an example of the game screen of the game (this game) executed by the system 1 played by a player.
  • an avatar object 610 that operates weapons such as guns and knives and a plurality of enemy objects 671 that are NPCs appear in the virtual space 600, and the avatar object 610 fights against the enemy object 671. It is a game to let you.
  • Various game parameters such as the physical strength of the avatar object 610, the number of magazines that can be used, the number of remaining bullets of the gun, and the remaining number of the enemy object 671 are updated as the game progresses.
  • a plurality of stages are prepared in this game, and the player can clear the stage by satisfying a predetermined achievement condition associated with each stage.
  • Predetermined achievement conditions are established by, for example, defeating all appearing enemy objects 671, defeating boss objects among the appearing enemy objects 671, acquiring predetermined items, reaching a predetermined position, and the like. It may include the condition to be used.
  • the achievement conditions are defined in the game program 131.
  • the player clears the stage when the achievement condition is satisfied according to the content of the game, in other words, the avatar object 610 wins the enemy object 671 (avatar object 610 and enemy object 671). The victory or defeat between) is decided.
  • the game executed by the system 1 is a racing game or the like, the ranking of the avatar object 610 is determined when the condition of reaching the goal is satisfied.
  • the game progress information is live-distributed to the plurality of user terminals 100 at predetermined time intervals.
  • a field of view image of the field of view region defined by the virtual camera 620B corresponding to the user terminal 100 is displayed.
  • parameter images showing the physical strength of the avatar object 610, the number of magazines that can be used, the number of remaining bullets of the gun, the remaining number of the enemy object 671 and the like are displayed superimposed. ..
  • This field of view image can also be expressed as a game screen.
  • the game progress information includes motion data that captures the player's movements, voice data of the voice spoken by the player, and operation data that indicates the content of the input operation to the controller 540.
  • These data are, that is, information for specifying the position, posture, orientation, etc. of the avatar object 610, information for specifying the position, posture, orientation, etc. of the enemy object 671, and other objects (for example, obstacle objects 672 and 673). It is information that identifies the position of.
  • the processor 10 identifies the position, posture, orientation, and the like of each object by analyzing (rendering) the game progress information.
  • the game information 132 includes data of various objects such as an avatar object 610, an enemy object 671, and obstacle objects 672 and 673.
  • the processor 10 updates the position, posture, orientation, and the like of each object by using the data and the analysis result of the game progress information. As a result, the game progresses, and each object in the virtual space 600B moves in the same manner as each object in the virtual space 600A. Specifically, in the virtual space 600B, each object including the avatar object 610 operates based on the game progress information regardless of whether or not the user operates the user terminal 100.
  • UI images 701 and 702 are displayed superimposed on the field of view image.
  • the UI image 701 is a UI image that accepts an operation for displaying the UI image 711 for displaying the item input operation for supporting the avatar object 610 from the user 3 on the touch screen 15.
  • the UI image 702 receives an operation for displaying a UI image (described later) on the touch screen 15 for receiving an operation for inputting and transmitting a comment for the avatar object 610 (in other words, the player 4) from the user 3. It is a UI image.
  • the operation accepted by the UI images 701 and 702 may be, for example, an operation of tapping the UI images 701 and 702.
  • the UI image 711 is displayed superimposed on the field of view image.
  • the UI image 711 is, for example, a UI image 711A on which a magazine icon is drawn, a UI image 711B on which an first aid box icon is drawn, a UI image 711C on which a triangular cone icon is drawn, and a UI on which a barricade icon is drawn.
  • the item insertion operation corresponds to, for example, an operation of tapping any UI image.
  • the UI image 711A when the UI image 711A is tapped, the number of remaining bullets of the gun used by the avatar object 610 increases.
  • the UI image 711B is tapped, the physical strength of the avatar object 610 is restored.
  • the UI images 711C and 711D are tapped, obstacle objects 672 and 673 that obstruct the movement of the enemy object 671 are placed in the virtual space.
  • One of the obstacle objects 672 and 673 may obstruct the movement of the enemy object 671 more than the other.
  • the processor 10 transmits the item input information indicating that the item input operation has been performed to the server 200.
  • the item input information includes at least information for specifying the type of the item specified by the item input operation.
  • the item input information may include other information about the item, such as information indicating where the item is placed.
  • the item input information is transmitted to the other user terminal 100 and the HMD set 1000 via the server 200.
  • FIG. 12 is a diagram showing another example of the field of view image displayed on the user terminal 100. Specifically, it is a figure which shows an example of the game screen of this game, and is the figure for demonstrating the communication between a player and a user terminal 100 during game play.
  • the user terminal 100 causes the avatar object 610 to execute the utterance 691.
  • the user terminal 100 causes the avatar object 610 to execute the utterance 691 according to the voice data included in the game progress information.
  • the content of the utterance 691 is "There is no bullet! Spoken by the player 4. That is, the content of the utterance 691 is to inform each user that the magazine is 0 and the bullet loaded in the gun is 1, so that the means for attacking the enemy object 671 is likely to be lost.
  • a balloon is used to visually indicate the utterance of the avatar object 610, but in reality, the voice is output from the speaker of the user terminal 100.
  • the balloon shown in FIG. 12A (that is, the balloon including the text of the audio content) may be displayed in the visual field image. This also applies to the utterance 692 described later.
  • the user terminal 100 Upon receiving the tap operation on the UI image 702, the user terminal 100 superimposes and displays the UI images 705 and 706 (message UI) on the field of view image as shown in FIG. 12 (B).
  • the UI image 705 is a UI image that displays a comment on the avatar object 610 (in other words, the player).
  • the UI image 706 is a UI image that accepts a comment transmission operation from the user 3 in order to transmit the input comment.
  • the user terminal 100 when the user terminal 100 receives a tap operation on the UI image 705, the user terminal 100 displays a UI image (not shown, hereinafter simply referred to as "keyboard") imitating a keyboard on the touch screen 15.
  • the user terminal 100 causes the UI image 705 to display text corresponding to the user's input operation on the keyboard.
  • the text "Magazine is sent" is displayed on the UI image 705.
  • the user terminal 100 When the user terminal 100 receives a tap operation on the UI image 706 as an example after inputting the text, the user terminal 100 transmits the comment information including the input content (text content) and the information indicating the user to the server 200. To do.
  • the comment information is transmitted to the other user terminal 100 and the HMD set 1000 via the server 200.
  • the UI image 703A is a UI image showing the user name of the user who sent the comment
  • the UI image 704A is a UI image showing the content of the comment sent by the user.
  • the user whose user name is "BBBBBB” uses his / her own user terminal 100 to transmit comment information having the content "dangerous!, That is, the UI image 703A and the UI image 704A.
  • the UI image 703A and the UI image 704A are displayed on the touch screen 15 of all the user terminals 100 participating in this game and the monitor 51 of the HMD 500.
  • the UI images 703A and 704A may be one UI image. That is, one UI image may include the user name and the content of the comment.
  • the UI image 703B includes the user name "AAAAAA”, and the UI image 704B contains the comment "Magazine send! Entered in the example of FIG. 12B.
  • the user "AAAAA” further inputs a tap operation to the UI image 701, displays the UI image 711 on the touch screen 15, and inputs a tap operation to the UI image 711A. It is a later view image 611. That is, as a result of the item input information indicating the magazine being transmitted from the user terminal 100 of the user "AAAAA" to the other user terminal 100 and the HMD set 1000, the user terminal 100 and the HMD set 1000 have the effect object 674 (described later). Is arranged in the virtual space 600. As an example, the user terminal 100 and the HMD set 1000 execute the effect related to the effect object 674 after the elapsed time indicated in the item input information has elapsed, and execute the process of invoking the effect of the item object.
  • the number of magazines is increased from 0 to 1 by executing the process of invoking the effect of the item object.
  • the player utters "Thank you!” To the user "AAAAA”, and the voice data of the utterance is transmitted to each user terminal 100.
  • each user terminal 100 outputs the voice "Thank you!” As the utterance 692 of the avatar object 610.
  • communication between the user and the avatar object 610 is realized by outputting the utterance voice of the avatar object 610 based on the utterance of the player and inputting a comment by each user.
  • FIG. 13 is a flowchart showing an example of the flow of the game progress process executed by the game play terminal 300.
  • step S31 the processor 30 advances the game as the game progress unit 315 based on the game program 331 and the movement of the player.
  • step S32 the processor 30 generates game progress information and distributes it to the user terminal 100. Specifically, the processor 30 transmits the generated game progress information to each user terminal 100 via the server 200.
  • the processor 30 When the processor 30 receives the item input information in step S33 (YES in S33), the processor 30 arranges the item object in the virtual space 600A based on the item input information in step S34. As an example, the processor 30 arranges the effect object 674 in the virtual space 600A before arranging the item object (see FIG. 11C).
  • the effect object 674 may be, for example, an object imitating a present box.
  • the processor 30 may execute the effect related to the effect object 674 after the elapsed time indicated in the item input information has elapsed.
  • the effect may be, for example, an animation in which the lid of the present box is opened. After executing the animation, the processor 30 executes a process of invoking the effect of the item object. For example, in the example of FIG. 11D, the obstacle object 673 is arranged.
  • the processor 30 may arrange the item object corresponding to the tapped UI image in the virtual space 600A. For example, when a tap operation is performed on the UI image 711A, the processor 30 arranges a magazine object indicating a magazine in the virtual space 600A after executing the animation. Further, when the tap operation is performed on the UI image 711B, the processor 30 arranges the first aid kit object indicating the first aid kit in the virtual space 600A after executing the animation.
  • the processor 30 may execute a process of invoking the effect of the magazine object or the first aid kit object when the avatar object 610 moves to the position of the magazine object or the first aid kit object, for example.
  • the processor 30 continues and repeats the processes of steps S31 to S34 until the game is finished.
  • the game ends for example, when the player inputs a predetermined input operation for ending the game (YES in step S35), the process shown in FIG. 13 ends.
  • FIG. 14 is a flowchart showing an example of the flow of the game progress process executed by the user terminal 100.
  • step S41 the processor 10 receives the game progress information.
  • step S42 the processor 10 advances the game as the game progress unit 115 based on the game progress information.
  • step S43 when the processor 10 accepts the item input operation by the user 3 (YES in step S43), in step S44, the processor 10 consumes the virtual currency and arranges the effect object 674 in the virtual space 600B.
  • the virtual currency is purchased (charged for the game) by the user 3 performing a predetermined operation on the processor 10 before or during the participation in the game. It may be present, or it may be given to the user 3 when a predetermined condition is satisfied.
  • the predetermined conditions may be those that require participation in this game, such as clearing a quest in this game, or those that do not require participation in this game, such as answering a questionnaire.
  • the amount of virtual currency (the amount of virtual currency owned) is stored in the user terminal 100 as game information 132 as an example.
  • step S45 the processor 10 transmits the item input information to the server 200.
  • the item input information is transmitted to the game play terminal 300 via the server 200.
  • the processor 10 arranges the item object in the virtual space 600A when a predetermined time elapses after the arrangement of the effect object 674.
  • the obstacle object 673 is arranged. That is, when the user 3 inputs a tap operation to the UI image 711C, a predetermined amount of virtual currency is consumed and the obstacle object 673 is arranged.
  • the processor 10 continues and repeats the processes of steps S41 to S45 until the game is finished.
  • the game is finished, for example, when the player performs a predetermined input operation for ending the game, or when the user 3 performs a predetermined input operation for leaving the game halfway (YES in step S46). ), The process shown in FIG. 14 is completed.
  • FIG. 15 is a flowchart showing an example of the flow of game progress processing executed on the server 200.
  • step S51 the processor 20 receives the game progress information from the game play terminal 300.
  • step S52 the processor 20 updates the game progress log (hereinafter, play log) as the log generation unit 212.
  • the play log is generated by the processor 20 when the initial arrangement information is received from the game play terminal 300.
  • step S53 the processor 20 transmits the received game progress information to each user terminal 100.
  • step S54 When the item input information is received from any user terminal 100 in step S54 (YES in step S54), the processor 20 updates the play log as the log generation unit 212 in step S55. In step S56, the processor 20 transmits the received item input information to the game play terminal 300.
  • the processor 20 continues and repeats the processes of steps S51 to S56 until the game is finished.
  • the processor 20 acts as a list generator 213 from the play log. Generate a list of users who participated in the game (user list 234).
  • the processor 20 stores the generated user list 234 in the server 200.
  • FIG. 16 is a diagram showing a specific example of the user list 234.
  • information for example, a user name
  • Information (tags) generated based on the support provided by each user to the player is stored in the "tag" column.
  • tags generated based on the support provided by each user to the player is stored in the "tag" column.
  • those without the key brackets are the information automatically generated by the processor 20, and those with the key brackets are those stored by the game operator. This is manually entered information.
  • the user "AAAAA” is associated with information such as a magazine, 10F, a boss, and "winning the boss by presenting the magazine”. This indicates that, for example, in the boss battle on the stage of 10F, the user "AAAAA” inserts a magazine, and the avatar object 610 wins the boss with the bullet of the inserted magazine.
  • the user "BBBBBB” is associated with information such as a first aid kit, 3rd floor, Zako, and "recovery on the verge of game over”. For example, in a battle with a Zako enemy on the 3rd floor, the user “BBBB” “BBBBBB” throws in the first aid kit, and as a result, it shows that the physical strength of the avatar object 610 has recovered just before it becomes 0 (the game is over).
  • the user "CCCCC” is associated with information such as barricade, 5th floor, Zako, and "stopping two zombies at the barricade”. This means that, for example, in a battle with a Zako enemy on the 5th floor, the user "CCCCC” throws in a barricade (obstacle object 672 in FIG. 11), and as a result, succeeds in stopping the two Zako enemies. Shown.
  • one support provided is associated with the user name of each user 3, but the user name of the user 3 who has performed the support a plurality of times has a tag for each of the multiple support times. Can be associated.
  • each tag is distinguished. As a result, after the game is completed, the player who refers to the user list 421 using the distribution terminal 400 can accurately grasp the content of each support.
  • FIG. 17 is a flowchart showing an example of the flow of the distribution process executed by the distribution terminal 400.
  • FIG. 18 is a diagram showing a specific example of a screen displayed on the distribution terminal 400.
  • FIG. 19 is a diagram showing another specific example of the screen displayed on the distribution terminal.
  • step S61 the processor 40 receives the first operation for displaying the list of users who participated in the game (user list 234) as the operation reception unit 413.
  • the download screen 721 shown in FIG. 18A is a screen for downloading the user list 234 from the server 200 and displaying it on the display unit 452.
  • the download screen 721 is a screen displayed immediately after inputting the start operation of the application for executing the distribution process shown in FIG. 17 into the distribution terminal 400.
  • the download screen 721 includes UI images 722 and 723 as an example.
  • the UI image 722 accepts an operation for downloading the user list 234, that is, the first operation.
  • the first operation may be, for example, an operation of tapping the UI image 722.
  • the UI image 723 accepts an operation for terminating the application.
  • the operation may be, for example, an operation of tapping the UI image 723.
  • the processor 40 Upon receiving the tap operation for the UI image 722, in step S62, the processor 40 acquires (receives) the user list 234 from the server 200 as the communication control unit 411. In step S63, the processor 40 causes the display unit 452 to display the user list 234 as the display control unit 412. Specifically, the processor 40 causes the display unit 452 to display the user list screen generated based on the user list 234.
  • the user list screen may be the user list screen 731 shown in FIG. 18B.
  • the user list screen 731 is composed of a record image corresponding to each record in the user list 234.
  • record images 732A to 732C are shown as record images, but the number of record images is not limited to three. In the example of FIG.
  • the player may perform, for example, scroll the screen (eg,).
  • Scroll the screen eg, By inputting a drag operation or a flick operation) to the touch screen 45, another record image can be displayed on the display unit 452.
  • the record images 732A to 732C include user names 733A to 733C, tag information 734A to 734C, and icons 735A to 735C, respectively.
  • the user names 733A to 733C, the tag information 734A to 734C, and the icons 735A to 735C "record image 732", "user name 733", and "user name 733”, respectively. It is described as “tag information 734" and "icon 735".
  • the user name 733 is information indicating each user who has participated in the game, which is stored in the "user" column in the user list 234.
  • the tag information 734 is information indicating a tag associated with each of the information indicating each user who participated in the game in the user list 234.
  • the record image 732A includes "AAAAAA” as the username 733A. Therefore, the record image 732A includes "magazine, 10F, boss,” win the boss by presenting the magazine “” as tag information 734A, which is associated with "AAAAAA” in the user list 234.
  • the icon 735 is, for example, an image preset by the user.
  • the processor 40 may store the received user list in the distribution terminal 400 (user list 421 in FIG. 7).
  • the download screen 721 may include a UI image (not shown) for displaying the user list 421 on the display unit 452.
  • the processor 40 does not download the user list 234, reads the user list 421, generates a user list screen from the user list 421, and displays the user list screen on the display unit 452. ..
  • step S64 the processor 40 receives a second operation for selecting any of the users included in the user list screen 731 as the operation reception unit 413.
  • the second operation may be an operation of tapping any of the record images 732 on the user list screen 731.
  • the player inputs a tap operation to the record image 732A. That is, the player has selected the user "AAAAAA" as the user who distributes the operation instruction data.
  • the processor 40 Upon receiving the tap operation for the record image 732, in step S65, the processor 40 causes the display unit 452 to display the motion list 422 as the display control unit 412. Specifically, the processor 40 causes the display unit 452 to display the motion list screen generated based on the motion list 422.
  • the motion list screen may be the motion list screen 741 shown in FIG.
  • the motion list screen 741 is composed of a record image corresponding to each record in the motion list 422.
  • record images 742A to 742C are described as record images, but the number of record images is not limited to three. In the example of FIG.
  • the player inputs another record, for example, an operation of scrolling the screen (for example, a drag operation or a flick operation) to the touch screen 45.
  • the image can be displayed on the display unit 452.
  • the record images 742A to 742C include motion names 743A to 743C, motion images 744A to 744C, and UI images 745A to 745C, respectively.
  • the motion names 743A to 743C, the motion images 744A to 744C, and the UI images 745A to 745C "record image 7432" and "motion name 743", respectively. It is described as “motion image 744" and "UI image 745".
  • the motion name 743 is information for identifying the motion stored in the motion list 422.
  • the motion image 744 is an image generated from the motion data associated with each motion name in the motion list 422.
  • the processor 40 includes an image of the avatar object 610 that takes the first posture in each motion data in the record image 742 as the motion image 744.
  • the motion image 744 may be a UI image that accepts a predetermined operation (for example, a tap operation on the motion image 744) by the player. When the processor 40 accepts the predetermined operation, the processor 40 may reproduce the motion moving image in which the avatar object 610 operates based on the motion data.
  • the processor 40 may automatically redisplay the motion list screen 741 when the motion moving image is finished.
  • the record image 742 may include, for example, a UI image including the text "motion reproduction" instead of the motion image 744.
  • step S66 the processor 40 receives the third operation of selecting the motion as the operation receiving unit 413.
  • the third operation may be a tap operation on the UI image 745. That is, the UI image 745 accepts an operation of selecting motion data corresponding to each record image 742.
  • the processor 40 specifies the motion data selected by the player as the motion specifying unit 415.
  • step S67 the processor 40 receives the voice input of the player as the display control unit 412 and the voice reception unit 414 while the avatar object 610 reproduces the motion moving image that operates based on the selected motion data.
  • FIG. 20 is a diagram showing a specific example of voice input by the player 4.
  • the player 4 is inputting the utterance voice 820A while playing the motion moving image 810A.
  • the utterance voice 820A is a utterance voice addressed to the user 3 (hereinafter, user 3A) whose user name is "AAAAAA”. That is, in the example of FIG. 20, the player 4 selects the user 3A (first user) in step S64 and creates the operation instruction data addressed to the user 3A. It is assumed that the user terminal 100 used by the user 3A is the user terminal 100A.
  • the utterance voice 820A is a utterance voice addressed to the user 3A
  • the utterance voice is based on the content of the support provided by the user 3A to the avatar object 610 (in other words, the player 4).
  • the user 3A inserts a magazine in the boss battle on the stage of 10F, and the avatar object 610 wins the boss with the bullet of the inserted magazine.
  • the spoken voice 820A says, "Thank you for giving me the magazine in the boss battle! The timing was perfect! Thanks to AAAAA-san, I was able to clear it!
  • the uttered voice includes the content of the support provided by the user 3 in the game and the gratitude to the user 3.
  • the player 4 creates the utterance content addressed to the user 3 before starting the voice input, that is, before inputting the third operation to the distribution terminal 400.
  • the utterance content addressed to the user 3 may be automatically generated by the processor 40. Further, the processor 40 may superimpose and display the tag associated with the user 3 selected by the second operation on the motion moving image 810A.
  • the processor 40 converts the received voice into voice data.
  • the processor 40 generates the operation instruction data including the voice data and the motion data of the selected motion as the operation instruction data generation unit 416.
  • step S69 the processor 40, as the communication control unit 411, distributes the generated operation instruction data to the user terminal 100 (first computer) of the selected user 3 (user 3A in the example of FIG. 20).
  • FIG. 21 is a diagram showing still another specific example of the screen displayed on the distribution terminal 400.
  • the processor 40 causes the display unit 452 to display the distribution screen as the display control unit 412.
  • the distribution screen may be the distribution screen 751 shown in FIG. 21 (A).
  • the distribution screen 751 includes a UI image 752 and a motion image 753A. Further, as shown in FIG. 21A, the distribution screen 751 may include information indicating a user to whom the operation instruction data is distributed.
  • the UI image 752 accepts an operation for delivering the operation instruction data to the selected user 3.
  • the operation may be, for example, a tap operation on the UI image 752.
  • the motion image 753A is a UI image that accepts an operation for playing a moving image based on the generated motion instruction data, that is, a moving image based on the motion instruction data generated for the user 3A.
  • the operation may be, for example, a tap operation on the motion image 753A.
  • the UI image that accepts the operation for playing the generated moving image is not limited to the motion image 753A. For example, it may be a UI image including the text "video playback".
  • the processor 40 may automatically redisplay the distribution screen 751 when the moving image is finished.
  • the distribution screen 751 preferably further includes a UI image that accepts an operation for returning to the acceptance of voice input.
  • the operation may be, for example, a tap operation on the UI image.
  • the player 4 can perform voice input again when the voice input fails, for example, when the content to be spoken is mistaken.
  • the UI image may be a UI image that accepts an operation for returning to the selection of motion data.
  • the processor 40 Upon receiving the tap operation for the UI image 752, the processor 40 transmits the operation instruction data to the server 200 together with the information indicating the user 3A.
  • the server 200 identifies the user terminal 100 to which the operation instruction data is transmitted based on the information indicating the user 3A, and transmits the operation instruction data to the specified user terminal 100 (that is, the user terminal 100A).
  • the processor 40 may display the distribution completion screen 761 shown in FIG. 21B on the display unit 452 as an example.
  • the delivery completion screen 761 includes UI images 762 and 763 as an example. Further, the distribution completion screen 761 may include a text indicating that the transmission of the operation instruction data has been completed, as shown in FIG. 21 (B).
  • the UI image 762 accepts an operation for starting the creation of operation instruction data addressed to another user 3.
  • the operation may be, for example, an operation of tapping the UI image 762.
  • the processor 40 receives the tap operation, the processor 40 causes the display unit 452 to display the user list screen again. That is, when the tap operation is accepted, the distribution process returns to step S63. At this time, the processor 40 may generate a user list screen based on the user list 421 stored in the distribution terminal 400 and display it on the display unit 452.
  • the UI image 763 accepts an operation for terminating the application.
  • the operation may be, for example, an operation of tapping the UI image 763.
  • the distribution process ends.
  • the distribution terminal 400 transmits the operation instruction data of the moving image addressed to the user 3A (the user 3 whose user name is "AAAAAA"). , Sent only to the user terminal 100A.
  • FIG. 22 is a diagram showing another specific example of voice input by the player 4.
  • the player 4 is inputting the utterance voice 820B while playing the motion moving image 810B.
  • the utterance voice 820B is a utterance voice addressed to the user 3 (hereinafter, user 3B) whose user name is "BBBBBB". That is, in the example of FIG. 22, in step S64, the player 4 inputs a tap operation to the record image 732B corresponding to the user 3B, and creates the operation instruction data addressed to the user 3B. It is assumed that the user terminal 100 used by the user 3B is the user terminal 100B.
  • the utterance voice 820B is a utterance voice addressed to the user 3B, the utterance voice is based on the content of the support provided by the user 3B to the avatar object 610 (in other words, the player 4). Specifically, in the battle with the Zako enemy on the 3rd floor, the user "BBBBBB” throws in the first aid kit, and as a result, the physical strength of the avatar object 610 becomes 0 (the game is over). I am recovering my physical strength. For this reason, the utterance voice 820B has the content "Thanks to the first aid kit given by Mr. BBBBB, the game did not end on the 3rd floor. Thank you very much!
  • FIG. 23 is a diagram showing still another specific example of the screen displayed on the distribution terminal 400.
  • the distribution screen 751 shown in FIG. 23A includes a UI image 752 and a motion image 753B.
  • the motion image 753B accepts the tap operation, the motion image 753B reproduces a moving image based on the operation instruction data generated for the user 3B.
  • the processor 40 Upon receiving the tap operation for the UI image 752, the processor 40 transmits the operation instruction data to the server 200 together with the information indicating the user 3B.
  • the server 200 identifies the user terminal 100 to which the operation instruction data is transmitted based on the information indicating the user 3B, and transmits the operation instruction data to the specified user terminal 100 (that is, the user terminal 100B).
  • the distribution terminal 400 transmits the operation instruction data of the moving image addressed to the user 3B (the user 3 whose user name is "BBBBBB"). , Transmit only to the user terminal 100B.
  • the content of the voice based on the voice data included in the operation instruction data is based on the content of the support provided to the player 4 by the user 3 in participating in the latest game. Since the content of the support is different for each user 3, the content of the voice is different for each user 3. That is, after the end of the game, operation instruction data including voices having different contents is transmitted to at least a part of the user terminals 100 of the user 3 who participated in the game.
  • the motion of the avatar object 610 in the example of FIG. 22 is different from the motion of the example of FIG. That is, the player 4 selects motion data different from that at the time of generating the operation instruction data addressed to the user 3A in the operation instruction data generation addressed to the user 3B. Specifically, in step S66, the player 4 inputs a tap operation to the UI image 745B that selects the motion data corresponding to the record image 742B. In this way, the player 4 can make the motion data included in the operation instruction data different for each user 3.
  • unique operation instruction data for each user terminal 100 is transmitted to each of the user terminals 100 of the selected user 3.
  • FIG. 24 is a diagram showing an outline of transmission of game progress information from the game play terminal 300 to the user terminal 100. While the operation instruction data for video reproduction on the user terminal 100 is unique for each user terminal 100, as shown in FIG. 24, the user terminals 100 of all users 3 participating in the game during game execution.
  • the game progress information transmitted to is common among the user terminals 100. That is, the operation instruction data included in the game progress information is also common among the user terminals 100. As described above, it can be said that the operation instruction data for playing the moving image and the operation instruction data for advancing the game are different data from the viewpoints of the same difference between the user terminals 100 and the destination.
  • FIG. 25 is a flowchart showing an example of the flow of the moving image reproduction process executed by the user terminal 100.
  • step S71 the processor 10 receives the operation instruction data as the moving image reproduction unit 117.
  • step S72 the processor 10 notifies the user 3 of the reception of the operation instruction data as the moving image reproduction unit 117.
  • the processor 10 displays a notification image on the display unit 152, reproduces a notification voice from a speaker (not shown), lights a lighting unit (not shown) composed of an LED (light-emitting diode), or the like.
  • the user 3 is notified of the reception of the operation instruction data by at least one of the blinking.
  • step S73 the processor 10 receives the first reproduction operation for reproducing the moving image as the operation reception unit 111.
  • the first reproduction operation may be an operation of tapping the notification image.
  • step S74 the processor 10 renders the operation instruction data as the moving image reproduction unit 117 and reproduces the moving image.
  • the processor 10 may start an application for playing this game and play a video, or may start an application for playing a video different from the application and play a video. Good.
  • the video will be referred to as a "thank you video".
  • FIG. 26 is a diagram showing a specific example of playing a thank-you video. Specifically, it is a figure which shows an example of the reproduction of the thank-you moving image in the user terminal 100 of the user 3A.
  • the avatar object 610 is uttering the voice 920A while executing a certain motion.
  • the processor 10 outputs the audio 920A from the speaker (not shown) while playing the thank-you video 910A including the avatar object 610 that executes a certain motion.
  • the motion in the thank-you video 910A is based on the motion data selected by the player 4 in the generation of the motion instruction data addressed to the user 3A, and the voice 920A is the utterance voice input by the player 4 in the generation of the motion instruction data. It is based on the voice data generated from the 820A. That is, the voice 920A is a voice including the content of the support provided by the user 3A in the game and the gratitude for the support. In this way, the user 3A can watch the thank-you video in which the avatar object 610 utters the content of the support provided in the game and the gratitude for the support by inputting the first playback operation.
  • the user terminal 100 may display at least one UI image on the touch screen 15 after the reproduction of the thank-you moving image 910A is completed.
  • the UI image may be, for example, a UI image that accepts an operation for playing the thank-you video 910A again, a UI image that accepts an operation for transitioning to another screen, or an application. It may be a UI image that accepts an operation for terminating.
  • the user terminal 100 may display at least one UI image on the touch screen 15 during playback of the thank-you moving image 910A.
  • the UI image may be, for example, a plurality of UI images that accept operations such as temporarily stopping the thank-you video 910A being played, ending it, or changing the scene to be played.
  • these UI images displayed during the playback of the thank-you video 910A and after the playback of the thank-you video 910A is hunted do not include a UI image for making a response to the avatar object 610. That is, the thank-you video 910A according to the present embodiment does not have a means for responding to the avatar object 610.
  • FIG. 27 is a diagram showing another specific example of playing the thank-you video. Specifically, it is a figure which shows the example of the reproduction of the thank-you moving image in the user terminal 100 of the user 3B.
  • the avatar object 610 is uttering the voice 920B while executing a certain motion.
  • the processor 10 outputs the audio 920B from the speaker (not shown) while playing the thank-you video 910B including the avatar object 610 that executes a certain motion.
  • the motion in the thank-you video 910B is based on the motion data selected by the player 4 in the generation of the motion instruction data addressed to the user 3B, and the voice 920B is the utterance voice input by the player 4 in the generation of the motion instruction data. It is based on the voice data generated from the 820B. Therefore, in the example of FIG. 27, the motion performed by the avatar object 610 is different from the motion of the example of FIG. 26. Further, the voice 920B is a voice including the content of the support provided by the user 3B in the game and the gratitude for the support. Therefore, in the example of FIG. 27, the content of the voice 920B is different from the content of the voice 920A in the example of FIG. 26.
  • the thank-you video received by at least a part of the user terminals 100 of the users 3 who participated in the game after the end of the game is a video in which the utterance content of the avatar object 610 is different for each user 3.
  • the processor 10 may superimpose and display the UI image 930 including the content prompting participation in the next game on the moving image 910.
  • the UI image 930 may be distributed together with the operation instruction data, or may be stored in the user terminal 100 as the game information 132.
  • the game play terminal 300 distributes the game progress information, which is the distribution content, to the plurality of user terminals 100 via the server 200.
  • Each of the plurality of user terminals 100 displays the distributed content on the touch screen 15 based on the game progress information.
  • a plurality of types of object data for displaying an object including the avatar object 610 are stored in advance in the memory 11 of the user terminal 100.
  • the user terminal 100 receives the game progress information from the game play terminal 300, the user terminal 100 identifies the operation instruction data from the game progress information and analyzes (renders) the operation instruction data to analyze (render) the type, position, and attitude of the object. Etc. are specified.
  • the user terminal 100 arranges the object including the avatar object 610 in the virtual space 600B by using the object data stored in the memory 11 based on the analysis result.
  • the field of view image 660 of the field of view area 640B according to the position and orientation of the current virtual camera 620B is displayed.
  • the object including the avatar object 610 is also arranged in the virtual space 600A defined by the game play terminal 300, and the position, posture, and the like of the object match between the virtual spaces 600A and 600B.
  • the distribution content is provided with a plurality of types of content having different characters displayed as the avatar object 610.
  • the plurality of types of contents include, for example, first-delivered content that is delivered once or irregularly, second-delivered content that is periodically delivered at a predetermined time on a daily or predetermined day of the week, and the like.
  • the first distribution content and the second distribution content are, for example, a plurality of types of content having different characters appearing as the leading role or facilitator, characters appearing in the content, progress, and others, and the type of game played in the content. Is provided. Further, in the second distribution content, although the same character according to the type (for example, the character a according to the content a) appears and the character background (for example, a wreath object) is displayed each time, the same type of content (for example, a wreath object) is displayed. For example, even in the content a), the content and the like are different each time.
  • a decorative object such as clothes and accessories is associated with the character displayed as the avatar object 610 for each type of character.
  • a specific method for specifying the display mode of the decorative object will be illustrated.
  • the distribution content includes the first character content in which the first character appears in the virtual space 600B as the avatar object 610, the second character content in which the second character appears in the virtual space 600B as the avatar object 610, and the like.
  • the operation instruction data is data (first display data) for enabling the display of the image of the virtual space 600B in which the object including the first character is arranged.
  • the operation instruction data is data (second display data) for enabling the display of the image of the virtual space 600B in which the object including the second character is arranged. ..
  • each part of the upper body, lower body, hands, feet, neck, earlobe, eyes, etc. corresponds to clothes and accessories (necklace, earrings, glasses, etc.).
  • Decorative objects are pre-associated. The type and part of the decorative object to be associated are defined to be different depending on the type of character.
  • the first character includes a first object corresponding to a shirt and a third object that covers a part of the first object by putting it on the first object (shirt).
  • Decorative objects including (blouse) are associated.
  • the second character is associated with a decorative object including a second object (a shirt having a different design or the like) of the same type as the first object.
  • the display mode of the first object associated with the first character is determined on the game play terminal 300 side according to a predetermined rule (for example, random number lottery) for each distribution such as at the start of distribution. ..
  • the game play terminal 300 distributes game progress information including display mode information that can identify the display mode to the user terminal 100, and the user terminal 100 displays the display mode of the first object based on the display mode information. Is specified and set.
  • the display mode of the decorative object other than the first object associated with the first character is fixed in advance, including the display mode of the third object.
  • the user terminal 100 sets the display mode of the decorative object other than the first object to a fixed display mode.
  • the display mode of the decorative object associated with the second character is fixed in advance, including the display mode of the second object of the same type as the first object.
  • the user terminal 100 sets the display mode of the decorative object to a fixed display mode.
  • the display mode of the first object among the decorative objects associated with the first character is changed for each distribution.
  • the change of the display mode includes changing the texture image, and the texture image of the first object is changed for each delivery.
  • the display mode is irrespective of the number of deliveries (delivery period). It is fixed without.
  • the display mode is a mode when the decorative object is displayed on the display unit 152.
  • the display mode determined for the first object is the display color (that is, the color of the shirt) of the first object. Therefore, among the decorative objects such as shirts and blouses associated with the first character, the color of the shirt is specified from among a plurality of colors (white, black, red, green, blue, purple, etc.).
  • the second distribution content that is periodically distributed includes, for example, a first character content in which a first character whose display mode of the first object is changed each time appears.
  • a first character for example, a character exhibiting the appearance of an office lady is illustrated.
  • the first character is not limited to this, for example, a character whose age set as a character is less than a predetermined age (18 years old) (for example, a high school student character), a character having the appearance of a cheering party, or a female university student. It may be a character having the appearance of.
  • the content is distributed from the game play terminal 300 during a predetermined distribution period.
  • the processor 30 of the game play terminal 300 executes the display mode control process shown in FIG. 28 (A). Further, viewing of the content on the user terminal 100 side is started by a touch operation from the user on the predetermined content icon or the like. When the viewing of the content is started by the touch operation, the processor 10 on the user terminal 100 side executes the display mode setting process shown in FIG. 28 (B).
  • the game play terminal 300 stores in the memory 31 whether or not the current timing coincides with the content distribution start timing predetermined for each content in step S81. Judgment is made based on the delivery schedule. That is, in the memory 31, information such as the time zone for delivering the content and the type of the content (characters appearing, that is, whether it is the first character content or the second character content, etc.) is used as the delivery schedule. It is remembered. In step S81, it is determined whether or not there is a match based on the delivery schedule.
  • step S82 it is determined whether or not the content to be distributed this time is the first character content based on the distribution schedule. When it is determined that the content is the first character content, the process proceeds to step S83.
  • step S83 the display mode (that is, the color of the shirt) of the first object among the decorative objects associated with the first character in the current delivery period is changed to a plurality of types of display modes (white, black, red, green, etc.). It is decided (randomly) by a random number lottery from among (blue, purple, etc.). More specifically, as described above, the first character content is the second distribution content that is periodically distributed, and in step S83, the display mode at the time of the previous distribution determined at the time of the previous distribution of the first character content. A display mode different from the above is determined by a random number lottery. As a result, the display mode of the first object (that is, the color of the shirt) is changed to a display mode different from that at the time of the previous delivery.
  • step S84 display mode information (first data) capable of specifying the display mode determined in step S83 is set as the information included in the game progress information.
  • game progress information including information according to the motion of the performer and display mode information according to the determination in step S83 is provided every predetermined time (for example, 1/60 second). It will be delivered.
  • step S84 when it is not determined in step S81 that the current timing matches the start timing of content distribution, or in step S82, it is not determined that the content to be distributed this time is the first character content. When it returns. When content other than the first character content is distributed, game progress information according to the performer's motion or the like is distributed at predetermined time (for example, 1/60 second).
  • step S91 the user terminal 100 determines in step S91 whether or not the content viewing start operation has been performed based on the input operation on the touch screen 15. If it is not determined that the viewing start operation has been performed, a return is made, and if it is determined that the viewing start operation has been performed, the process proceeds to step S92.
  • step S92 it is determined by analyzing the game progress information whether or not the game progress information received from the game play terminal 300 includes the display mode information.
  • step S93 the display mode of the first object in the current distribution period is set based on the display mode information. That is, among the display modes of the decorative objects in the current delivery period, the display mode of the first object (that is, the color of the shirt) is the display mode (white, black, red, green, which is specified by the display mode information. Set to either blue, purple, etc.).
  • a fixed display mode is set as a display mode of objects other than the first object among the decorative objects associated with the first character.
  • a decorative object including a shirt associated with a character different from the first character (for example, a second character).
  • a fixed display mode is set. That is, when the first character content is delivered, the decorative objects (blouse, trousers, shoes, etc.) other than the first object (shirt) among the decorative objects associated with the first character are fixed. Set the display mode (fixed color).
  • content different from the first character content for example, second character content
  • all of the costume objects associated with the character different from the first character for example, the second character. Is set to a fixed display mode.
  • step S93 and S94 model data of the avatar object 610 to be operated in the virtual space 600B is generated. While viewing the content, the avatar object 610 based on the model data operates based on the action instruction data included in the game progress information distributed from the game play terminal 300. When the process of step S94 is completed, the process returns.
  • FIG. 29 shows a display example of an object including the first character while viewing the first character content.
  • a wreath object reminiscent of a wreath is arranged behind the first character.
  • the first character operates based on the operation instruction data.
  • a color different from that at the time of the previous distribution is set for each content distribution.
  • white is set as shown in FIG. 29 (A) in the Nth live distribution targeting the first character content.
  • a gray color is set as shown in FIG. 29 (B)
  • a gray color is set as shown in FIG. 29 (C)
  • blue the striped pattern in the figure indicates that it is blue
  • the same first character appears wearing a shirt of a different color for each content distribution.
  • the video of the virtual space 600B including the first character that moves in conjunction with the movement of the performer is based on the movement instruction data (first display data) distributed from the game play terminal 300. Is displayed.
  • a predetermined first object (shirt) is associated with the first character, and the display mode (shirt color) of the first object is changed according to a predetermined rule.
  • the display mode of the first object can be spontaneously changed, and as a result, the user can have a sense of reality of the first character.
  • the image of the virtual space 600B including the second character that moves in conjunction with the movement of the performer is used as the movement instruction data (second display data) distributed from the game play terminal 300. It is displayed based on.
  • the second character is associated with a second object (shirt) of the same type as the first object, and the display mode (shirt color) of the second object is fixed. As a result, the sense of reality of the first character can be emphasized.
  • the display mode of the first object is changed to a display mode different from the display mode in the previous delivery period for each delivery period.
  • the first display data is data distributed from the game play terminal 300, and includes motion data corresponding to the motion input by the performer.
  • the video in which the first character operates in the virtual space 600B is displayed by operating the first character in the virtual space 600B in real time based on the motion data. This makes it possible to suppress the amount of data to be delivered.
  • the display mode of the first object changed by the predetermined rule is specified by the display mode information (first data) distributed from the game play terminal 300.
  • the display mode of the first object is set based on the first data.
  • the display mode of the first object on the plurality of user terminals 100 can be uniformly controlled on the game play terminal 300 side.
  • the first character is associated with a predetermined third object (blouse).
  • the third object is an object that covers at least a part of the first object. As a result, it is possible to control how the first object is displayed by the third object.
  • the avatar object 610 or the like is operated in the same virtual space 600B as the virtual space 600A, and the virtual camera 620B arranged in the virtual space 600B is swiped against the touch screen 15 of the user terminal 100.
  • the normal viewing mode for displaying the field of view image 660 of the field of view area 640B according to the position, orientation, and tilt of the virtual camera 620B, which changes according to the operation, on the touch screen 15 of the user terminal 100 has been described.
  • the space in which the avatar object 610 and the like are operated is not limited to the virtual space, and may be a real space.
  • the real space may be, for example, a space specified by an acquired image captured and acquired by the camera (imaging unit) 17.
  • the user terminal 100 identifies a flat surface such as a floor surface by analyzing the acquired image taken by the camera 17, for example, the avatar object 610.
  • the AR virtual space in which at least is arranged is arranged at a predetermined position of the plane portion (for example, the center position of the plane portion).
  • the virtual camera 620B in this case is arranged at a position where the AR virtual space is captured from the same direction as the shooting direction of the camera 17 when the acquired image is shot.
  • the image in the augmented reality space obtained by superimposing the field of view image from the virtual camera 620B on the image acquired from the camera 17 is displayed on the display unit 152. Further, the user terminal 100 detects the actual position, orientation, tilt, etc. of the camera 17, and changes the position, orientation, tilt, etc. of the virtual camera 620B according to the position, orientation, tilt, etc. As a result, the acquired image can be changed according to changes in the position, orientation, tilt, etc. of the camera 17.
  • the avatar object 610 and the like operate in the augmented reality space in which the object including the avatar object 610 is arranged with respect to the acquired image acquired from the camera 17.
  • the user can have an impression (realism) as if the avatar object 610 or the like is actually operating in the real space in front of the user.
  • FIG. 30 shows an example in which a character imitating a woman wearing a hat (hereinafter referred to as a first character) appears in the virtual space 600B.
  • the 1'character is associated with decorative objects such as a dress worn by the 1'character on the whole body, a hat on the head, and pierced earrings on the ears.
  • the piercing of the decorative objects associated with the 1'character corresponds to the first object. Therefore, the display mode of the pierced earring is set to a different display mode for each delivery according to step S83 of FIG. 28.
  • the second distribution content that is periodically distributed includes, for example, character content in which the first character whose display mode of the first object is changed each time appears.
  • FIG. 30 (A-1) is a display example when the first character faces the front and raises the index finger of the right hand in front.
  • FIG. 30 (A-2) is a display example when the first character faces diagonally forward to the right and points forward with the index finger of the right hand.
  • the position, orientation, and tilt of the virtual camera 620B are changed according to the swipe operation.
  • the pierced earring is covered with a hat corresponding to the third object, and no matter how the swipe operation is performed, the position where the pierced earring can be seen (for example, FIGS. 30 (B-3) and 30 (B) described later).
  • the AR viewing mode will be described with reference to FIG. 30 (B).
  • 30 (B-1) and 30 (B-2) show display examples in the AR viewing mode at the same timing as FIGS. 30 (A-1) and 30 (A-2), respectively.
  • the image from the virtual camera 620B is displayed on the display unit 152. Is displayed.
  • the first'character operates based on the operation instruction data distributed from the game play terminal 300. Further, the position, orientation, tilt, etc. of the virtual camera 620B are changed according to the actual position, orientation, tilt, etc. of the camera 17.
  • the AR mode transition icon 182 is displayed in an emphasized mode (black and white inverted display in FIG. 30B) to notify that the AR viewing mode is in progress.
  • the virtual camera 320B moves to a position where the piercing can be seen, and the image of the piercing is displayed. It is displayed on the display unit 152 (see (B-3) in FIG. 30 (B)). That is, the display mode of the pierced earrings can be confirmed by selecting the AR viewing mode and adjusting the position and orientation of the camera 17. As a result, the user can be motivated to watch in the AR viewing mode, and by extension, the preference can be improved.
  • the position where the piercing which is the first object associated with the first character, can be displayed (for example, the first character).
  • the virtual camera 620B can be moved to a position such as looking up from the neck of the character or looking up from the feet of the first character.
  • the pierced earring which is the first object, can be displayed, and the user can confirm the display mode of the pierced earring.
  • the position where the pierced earring, which is the first object associated with the first character, can be displayed for example, the position of the first'
  • the virtual camera 620B cannot be moved to a position such as looking up from the neck of the character or looking up from the feet of the first character.
  • the pierced earring, which is the first object cannot be displayed, and the user cannot confirm the display mode of the pierced earring.
  • the AR viewing mode it is possible to switch to the normal viewing mode by detecting a touch operation or the like on the AR mode transition icon 182 displayed in the emphasized mode.
  • the AR mode transition icon 182 is displayed in an emphasized manner, the AR mode reset icon is normally displayed, and the AR mode is reset in response to touching the AR mode reset icon ( (Restart) may be done.
  • a flat surface portion such as a floor surface is specified again, and a field view image in the AR virtual space 600C is arranged at a predetermined position of the flat surface portion.
  • the viewpoint of the virtual camera 620B is predetermined. It is returned to the viewpoint (for example, the viewpoint that captures the virtual space 600B from the front), or it is changed to the viewpoint that minimizes the movement amount of the virtual camera 620B within the movable range of the virtual camera 620B in the normal mode. To. As a result, the deviation of the viewpoint before and after the mode switching can be reduced as much as possible. Further, in the state where the first object is displayed in the AR viewing mode (FIG. 30 (B-3), etc.), the AR mode transition icon 182 may be temporarily hidden.
  • the virtual camera 620B is controlled in synchronization with changes in the position, orientation, tilt, and the like of the camera 17.
  • the virtual camera 620B may control the position, orientation, tilt, and the like in response to input operations (for example, swipe operation, touch operation, etc.) from the user.
  • input operations for example, swipe operation, touch operation, etc.
  • the field of view area of the virtual camera 620B can be changed according to the input operation from the user, and as a result, the field of view image arranged on the acquired image can be changed.
  • the avatar object or the like for example, only the avatar object 610, the avatar object 610 and other objects, the entire virtual space
  • the input to the touch screen 15 is performed.
  • the avatar object 610 and the like can be rotated and moved by the operation.
  • a TV mode in which the position, orientation, tilt, etc. of the virtual camera 620B is changed based on the operation of the switcher on the operator side of the system 1 is provided, and the TV mode is switched according to the user's operation. It may be possible. However, in the TV mode, the virtual camera 320B cannot be moved to a position where the first object can be seen, that is, the first object cannot be displayed on the display unit 152.
  • the display mode of the costume or the like of the avatar object 610 in the above embodiment is uniformly determined according to the type of the avatar object 610.
  • the display mode of the costume or the like of the avatar object 610 may be different for each user depending on, for example, the degree of progress of the game (for example, each time the game is won, each time an item is inserted, etc.).
  • the costume of the avatar object 610 may be a costume according to the progress of the game.
  • a plurality of types of costume data of the avatar object 610 may be stored in advance on the user terminal 100 side.
  • the target for differently displaying the avatar object 610 is not limited to the costume, but may be a hairstyle, a skin color, a degree of makeup, and the like. As a result, the variation of the avatar object 610 can be increased without increasing the processing load on the game play terminal 300 side that outputs the game progress information, so that the user can be attracted.
  • the display mode of the avatar object 610 may be different from the display mode displayed on the user terminal 100 of another user according to the charge by the user during the game. .. Further, the display mode of the avatar object 610 may be different depending on the ranking of the users updated according to the result of the game. Further, the user terminal 100 capable of receiving the first character content may be limited to a part of the user terminals 100, for example, the user terminal 100 of a user who charges a large amount during the game.
  • the color of the display mode of the first object is changed by the process of step S83.
  • the shape of the first object may be changed instead of or in combination with the color.
  • the shirt may be changed from a V-neck to a round neck, or the earrings may be changed from a star to a ring.
  • the display (for example, to be worn) or non-display (not to be worn) of the first object itself is determined in place of or in addition to the one that determines the color, shape, type, and the like. May be good.
  • any one of the decorative objects (for example, shirt, piercing) associated with the first character is set as the first object, and the display mode of the first object is set.
  • the first object is not limited to a shirt or earrings as long as it is an object associated with the first character, and may be an object such as socks, trousers, a hair clip, gloves, a hat, or underwear.
  • the object is not limited to the decorative object, and may be, for example, an object related to the first character itself (for example, a hairstyle, a nail, etc.).
  • the display mode of the first object associated with the first character may be changed, and the display mode of the background object (for example, a wreath object) of the first character may be changed.
  • the display mode of the decorative objects other than the first object is fixed in advance.
  • the display mode of the decorative object other than the first object may be changed not for each delivery but for each delivery, for example, every predetermined number of times (5 times), every season, every time zone, and the like.
  • the display mode of the decorative object associated with the second character is fixed in advance, but the display mode is also distributed every predetermined number of times (5 times) or in seasons. It may be changed every time, every time zone, or the like.
  • the display mode of the first object associated with the character (the first character, the first character, etc.) appearing in the second distribution content that is periodically distributed is distributed.
  • the display mode of the first object associated with the character appearing in the first distribution content delivered irregularly may also be changed to a display mode different from that at the time of the previous distribution.
  • a first character (a first character) that is a program executed in a terminal device (user terminal 100) including a processor and moves in conjunction with the movement of the performer on the processor.
  • the virtual A step (S29) of displaying an image in which the first character operates in space is executed, and the first character is associated with a predetermined first object, and the first character is associated with the first character.
  • the display mode (color) of the object is changed according to a predetermined rule.
  • (Appendix 2) In (Appendix 1), the processor receives the second display data for enabling the display of the image of the virtual space including the second character (another avatar object 610) that moves in conjunction with the movement of the performer. Step (S26) and a step (S29) of displaying an image in which the second character operates in the virtual space based on the second display data are executed, and the second character is executed. Is associated with a shirt of a second object of the same type as the first object), and the display mode (color) of the second object is fixed.
  • the first display data is data distributed from the outside, includes motion data corresponding to the motion input by the performer, and is the step to be displayed. Operates the first character in real time in the virtual space based on the motion data, and displays an image in which the first character operates in the virtual space.
  • the processor is set to one of a plurality of types of viewing modes (normal viewing mode, AR viewing mode) in which at least a part of the mode for specifying the viewpoint is different.
  • the step is executed and the displayed step displays an image of the virtual space viewed from a specified viewpoint and is the first viewing mode (AR viewing mode) among the plurality of types of viewing modes.
  • AR viewing mode the first viewing mode
  • the terminal device includes a detection unit for detecting the position and orientation of the terminal device and a touch screen, and the first viewing mode is set to the position and orientation detected by the detection unit. It is a viewing mode in which a viewpoint can be specified based on the above, and the plurality of types of viewing modes include a second viewing mode (normal viewing mode) in which a viewpoint is specified based on a touch operation on the touch screen. In the case of the second viewing mode of the viewing modes, the viewpoint cannot be moved to the position where the first object is displayed.
  • the first display data is data distributed from the outside, and is associated with the first object whose display mode has been changed according to the predetermined rule.
  • the first character is moving image data including an image operating in the virtual space
  • the display step is a moving image in which the first character operates in the virtual space based on the moving image data. indicate.
  • (Appendix 9) In any of (Appendix 1) to (Appendix 8), the first character is associated with a predetermined third object, and the third object is at least the first object. It is an object that covers a part.
  • a method executed in a terminal device including a processor, capable of displaying an image of a virtual space including a first character that moves in conjunction with the movement of a performer.
  • a step of receiving the first display data for the first display and a step of displaying an image in which the first character operates in the virtual space based on the first display data.
  • a predetermined first object is associated with the first character, and the display mode of the first object is changed according to a predetermined rule.
  • a first terminal device including a processor for displaying an image of a virtual space including a first character that moves in conjunction with the movement of a performer.
  • the display data of the above is received, and based on the first display data, an image in which the first character operates in the virtual space is produced, and the first character is given a predetermined first character.
  • Objects are associated with each other, and the display mode of the first object is changed according to a predetermined rule.
  • control blocks (particularly the control units 110, 210, 310, 410) of the user terminal 100, the server 200, the game play terminal 300 (HMD set 1000), and the distribution terminal 400 are logics formed in an integrated circuit (IC chip) or the like. It may be realized by a circuit (hardware) or by software.
  • the user terminal 100, the server 200, the game play terminal 300 (HMD set 1000), and the distribution terminal 400 include a computer that executes instructions of a program that is software that realizes each function.
  • the computer includes, for example, one or more processors and a computer-readable recording medium that stores the program. Then, in the computer, the processor reads the program from the recording medium and executes it, thereby achieving the object of the present invention.
  • the processor for example, a CPU (Central Processing Unit) can be used.
  • the recording medium in addition to a “non-temporary tangible medium” such as a ROM (Read Only Memory), a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • a RAM RandomAccessMemory
  • the program may be supplied to the computer via an arbitrary transmission medium (communication network, broadcast wave, etc.) capable of transmitting the program.
  • a transmission medium communication network, broadcast wave, etc.
  • one aspect of the present invention can also be realized in the form of a data signal embedded in a carrier wave, in which the above program is embodied by electronic transmission.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Or Creating Images (AREA)

Abstract

演者の動作に連動して動く第１のキャラクタを含む仮想空間の映像を表示可能にするための第１の表示用データを受信する。第１の表示用データに基づいて、仮想空間内で第１のキャラクタが動作する映像を表示する。第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、第１のオブジェクトの表示態様は、所定のルールで変更される。

Description

プログラム、方法、および端末装置
本発明は、プログラム、方法、および端末装置に関する。
従来より、演者によって制御されるバーチャルキャラクタを表示するためのシステムがある。このようなシステムにおいては、ユーザから表示要求がなされた装飾オブジェクトをバーチャルキャラクタに装着させて表示するものがあった。
特許第６４２０９３０号公報
しかし、従来のシステムにおいては、ユーザからの要求に応じた部位が当該要求に従って装飾されるものであった。このため、例えばバーチャルキャラクタの特定部位の表示態様が自発的に変化するような実在感をユーザに抱かせることができず、改善の余地があった。
本発明は、かかる実情に鑑み考え出されたものであり、その目的は、バーチャルキャラクタの実在感をユーザに抱かせることができる、プログラム、方法、および端末装置を提供することである。
本開示に示す一実施形態のある局面によれば、プロセッサを備える端末装置において実行されるプログラムであって、プロセッサに、演者の動作に連動して動く第１のキャラクタを含む仮想空間の映像を表示可能にするための第１の表示用データを受信するステップと、第１の表示用データに基づいて、仮想空間内で第１のキャラクタが動作する映像を表示するステップと、を実行させ、第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、第１のオブジェクトの表示態様は、所定のルールで変更される。
本発明によれば、バーチャルキャラクタの実在感をユーザに抱かせることができる。
ある実施の形態に従うシステムの概要の一例を示す図である。 ある実施の形態に従うユーザ端末のハードウェア構成の一例を示すブロック図である。 ある実施の形態に従うサーバのハードウェア構成の一例を示すブロック図である。 ある実施の形態に従うゲームプレイ端末のハードウェア構成の一例を示すブロック図である。 ある実施の形態に従う配信端末のハードウェア構成の一例を示すブロック図である。 ある実施の形態に従うユーザ端末、サーバ、ＨＭＤセットの機能的構成の一例を示すブロック図である。 ある実施の形態に従う配信端末の機能的構成の一例を示すブロック図である。 ある実施の形態に従うユーザ端末およびゲームプレイ端末において実行される処理の一部を表すフローチャートである。 ある実施の形態に従う、プレイヤに提供される仮想空間、および、プレイヤが視認する視界画像の一例を示す図である。 ある実施の形態に従う、ユーザ端末のユーザに提供される仮想空間、および、該ユーザが視認する視界画像の一例を示す図である。 ユーザ端末のユーザが視認する視界画像の他の例を示す図である。 ユーザ端末のユーザが視認する視界画像のさらに別の例を示す図である。 ある実施の形態に従うゲームプレイ端末において実行される処理の一部を表すフローチャートである。 ある実施の形態に従うユーザ端末において実行される処理の一部を表すフローチャートである。 ある実施の形態に従うサーバにおいて実行される処理の一部を表すフローチャートである。 ある実施の形態に従う、ゲームに参加したユーザのリストの一具体例を示す図である。 ある実施の形態に従う配信端末において実行される処理の一部を表すフローチャートである。 ある実施の形態に従う配信端末に表示される画面の一具体例を示す図である。 ある実施の形態に従う配信端末に表示される画面の他の具体例を示す図である。 ある実施の形態に従う、プレイヤによる音声入力の一具体例を示す図である。 ある実施の形態に従う配信端末に表示される画面のさらなる別の具体例と、動作指図データの配信の概要とを示す図である。 ある実施の形態に従う、プレイヤによる音声入力の他の具体例を示す図である。 ある実施の形態に従う配信端末に表示される画面のさらなる別の具体例と、動作指図データの配信の概要とを示す図である。 ある実施形態に従うゲームプレイ端末からユーザ端末へのゲーム進行情報の送信の概要を示す図である。 ある実施の形態に従うユーザ端末において実行される処理の一部を表すフローチャートである。 動画再生の一具体例を示す図である。 動画再生の他の具体例を示す図である。 （Ａ）は、ゲームプレイ端末側における表示態様制御処理の一例を示すフローチャートであり、（Ｂ）は、ユーザ端末側における表示態様設定処理の一例を示すフローチャートである。 （Ａ）はＮ回目のライブ配信映像の一例を示す図であり、（Ｂ）はＮ＋１回目のライブ配信映像の一例を示す図であり、（Ｃ）はＮ＋２回目のライブ配信映像の一例を示す図である。 （Ａ）は通常視聴モードにおけるライブ配信映像の一例を示す図であり、（Ｂ）はＡＲ視聴モードにおけるライブ配信映像の一例を示す図である。
本開示に係るシステムは、複数のユーザにゲームを提供するためのシステムである。以下、該システムについて図面を参照しつつ説明する。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が本発明に含まれることが意図される。以下の説明では、図面の説明において同一の要素には同一の符号を付し、重複する説明を繰り返さない。
＜システム１の動作概要＞
図１は、本実施形態に係るシステム１の概要を示す図である。システム１は、複数のユーザ端末１００（コンピュータ）と、サーバ２００と、ゲームプレイ端末３００（外部装置、第２外部装置）と、配信端末４００（外部、第１外部装置）とを含む。なお、図１では、複数のユーザ端末１００の一例として、ユーザ端末１００Ａ～１００Ｃ、換言すれば、３台のユーザ端末１００を記載しているが、ユーザ端末１００の台数は図示の例に限定されない。また、本実施形態では、ユーザ端末１００Ａ～Ｃを区別する必要が無い場合、「ユーザ端末１００」と記載する。ユーザ端末１００、ゲームプレイ端末３００、および配信端末４００は、サーバ２００とネットワーク２を介して接続する。ネットワーク２は、インターネットおよび図示しない無線基地局によって構築される各種移動通信システム等で構成される。この移動通信システムとしては、例えば、所謂３Ｇ、４Ｇ移動通信システム、ＬＴＥ（Long Term Evolution）、および所定のアクセスポイントによってインターネットに接続可能な無線ネットワーク（例えばWi-Fi（登録商標））等が挙げられる。
（ゲームの概要）
本実施形態では、システム１によって提供されるゲーム（以下、本ゲーム）の一例として、ゲームプレイ端末３００のユーザが主としてプレイするゲームを説明する。以下、ゲームプレイ端末３００のユーザを、「プレイヤ」と称する。プレイヤ（演者）は、一例として、本ゲームに登場するキャラクタを操作することにより、ゲームを進行させる。また、本ゲームにおいて、ユーザ端末１００のユーザは、プレイヤによるゲームの進行を支援する役割を担う。本ゲームの詳細については後述する。なお、システム１によって提供されるゲームは、複数のユーザが参加するゲームであればよく、この例に限定されない。
（ゲームプレイ端末３００）
ゲームプレイ端末３００は、プレイヤによる入力操作に応じてゲームを進行させる。また、ゲームプレイ端末３００は、プレイヤのゲームプレイにより生成された情報（以下、ゲーム進行情報）を、順次、サーバ２００にリアルタイムで配信する。
（サーバ２００）
サーバ２００は、ゲームプレイ端末３００からリアルタイムに受信したゲーム進行情報（第２データ）を、ユーザ端末１００に送信する。また、サーバ２００は、ユーザ端末１００、ゲームプレイ端末３００、および配信端末４００の間の各種情報の送受信を仲介する。
（配信端末４００）
配信端末４００は、配信端末４００のユーザによる入力操作に応じて、動作指図データ（第１データ）を生成し、サーバ２００を介してユーザ端末１００へ動作指図データを配信する。動作指図データとは、ユーザ端末１００において動画を再生するためのデータであり、具体的には、動画に登場するキャラクタを動作させるためのデータである。
本実施形態では、一例として、配信端末４００のユーザは、本ゲームのプレイヤである。また、一例として、ユーザ端末１００にて動作指図データに基づいて再生される動画は、プレイヤがゲームで操作したキャラクタが動作する動画である。「動作」とは、キャラクタの身体の少なくとも一部を動かすことであり、発話も含む。このため、本実施形態に係る動作指図データは、例えば、キャラクタに発話させるための音声データと、キャラクタの身体を動かすためのモーションデータとを含む。
動作指図データは、一例として、本ゲームの終了後にユーザ端末１００へ送信される。動作指図データ、および、該動作指図データに基づいて再生される動画の詳細については後述する。
（ユーザ端末１００）
ユーザ端末１００は、ゲーム進行情報をリアルタイムに受信し、該情報を用いてゲーム画面を生成して表示する。換言すれば、ユーザ端末１００は、リアルタイムレンダリングにより、プレイヤがプレイしているゲームのゲーム画面を再生する。これにより、ユーザ端末１００のユーザは、プレイヤがゲームをプレイしながら視認しているゲーム画面と同一のゲーム画面を、プレイヤとほぼ同じタイミングで視認することができる。
また、ユーザ端末１００は、ユーザによる入力操作に応じて、プレイヤによるゲームの進行を支援するための情報を生成し、該情報を、サーバ２００を介してゲームプレイ端末３００へ送信する。該情報の詳細については後述する。
また、ユーザ端末１００は、配信端末４００から動作指図データを受信し、該動作指図データを用いて動画（映像）を生成して再生する。換言すれば、ユーザ端末１００は、動作指図データをレンダリングして再生する。
＜システム１のハードウェア構成＞
図２は、ユーザ端末１００のハードウェア構成を示す図である。図３は、サーバ２００のハードウェア構成を示す図である。図４は、ゲームプレイ端末３００のハードウェア構成を示す図である。図５は、配信端末４００のハードウェア構成を示す図である。
（ユーザ端末１００）
本実施形態では、一例として、ユーザ端末１００がスマートフォンとして実現される例を説明するが、ユーザ端末１００はスマートフォンに限定されない。例えば、ユーザ端末１００はフィーチャーフォン、タブレット型コンピュータ、ラップトップ型コンピュータ（いわゆる、ノートパソコン）、または、デスクトップ型コンピュータなどとして実現されてもよい。また、ユーザ端末１００は、ゲームプレイに適したゲーム装置であってもよい。
ユーザ端末１００は図２に示すように、プロセッサ１０と、メモリ１１と、ストレージ１２と、通信インターフェース（ＩＦ）１３と、入出力ＩＦ１４と、タッチスクリーン１５（表示部）と、カメラ１７と、測距センサ１８とを備える。ユーザ端末１００が備えるこれらの構成は、通信バスによって互いに電気的に接続される。なお、ユーザ端末１００は、タッチスクリーン１５に代えて、または、加えて、ユーザ端末１００本体とは別に構成されたディスプレイ（表示部）を接続可能な入出力ＩＦ１４を備えていてもよい。
また、図２に示すように、ユーザ端末１００は、１つ以上のコントローラ１０２０と通信可能に構成されることとしてもよい。コントローラ１０２０は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信規格に従って、ユーザ端末１００と通信を確立する。コントローラ１０２０は、１つ以上のボタン等を有していてもよく、該ボタン等に対するユーザの入力操作に基づく出力値をユーザ端末１００へ送信する。また、コントローラ１０２０は、加速度センサ、および、角速度センサ等の各種センサを有していてもよく、該各種センサの出力値をユーザ端末１００へ送信する。
なお、ユーザ端末１００がカメラ１７および測距センサ１８を備えることに代えて、または、加えて、コントローラ１０２０がカメラ１７および測距センサ１８を有していてもよい。
ユーザ端末１００は、例えばゲーム開始時に、コントローラ１０２０を使用するユーザに、該ユーザの名前またはログインＩＤ等のユーザ識別情報を、該コントローラ１０２０を介して入力させることが望ましい。これにより、ユーザ端末１００は、コントローラ１０２０とユーザとを紐付けることが可能となり、受信した出力値の送信元（コントローラ１０２０）に基づいて、該出力値がどのユーザのものであるかを特定することができる。
ユーザ端末１００が複数のコントローラ１０２０と通信する場合、各コントローラ１０２０を各ユーザが把持することで、ネットワーク２を介してサーバ２００などの他の装置と通信せずに、該１台のユーザ端末１００でマルチプレイを実現することができる。また、各ユーザ端末１００が無線ＬＡＮ（Local Area Network）規格等の無線規格により互いに通信接続する（サーバ２００を介さずに通信接続する）ことで、複数台のユーザ端末１００によりローカルでマルチプレイを実現することもできる。１台のユーザ端末１００によりローカルで上述のマルチプレイを実現する場合、ユーザ端末１００は、さらに、サーバ２００が備える後述する種々の機能の少なくとも一部を備えていてもよい。また、複数のユーザ端末１００によりローカルで上述のマルチプレイを実現する場合、複数のユーザ端末１００は、サーバ２００が備える後述する種々の機能を分散して備えていてもよい。
なお、ローカルで上述のマルチプレイを実現する場合であっても、ユーザ端末１００はサーバ２００と通信を行ってもよい。例えば、あるゲームにおける成績または勝敗等のプレイ結果を示す情報と、ユーザ識別情報とを対応付けてサーバ２００に送信してもよい。
また、コントローラ１０２０は、ユーザ端末１００に着脱可能な構成であるとしてもよい。この場合、ユーザ端末１００の筐体における少なくともいずれかの面に、コントローラ１０２０との結合部が設けられていてもよい。該結合部を介して有線によりユーザ端末１００とコントローラ１０２０とが結合している場合は、ユーザ端末１００とコントローラ１０２０とは、有線を介して信号を送受信する。
図２に示すように、ユーザ端末１００は、外部のメモリカード等の記憶媒体１０３０の装着を、入出力ＩＦ１４を介して受け付けてもよい。これにより、ユーザ端末１００は、記憶媒体１０３０に記録されるプログラム及びデータを読み込むことができる。記憶媒体１０３０に記録されるプログラムは、例えばゲームプログラムである。
ユーザ端末１００は、サーバ２００等の外部の装置と通信することにより取得したゲームプログラムをユーザ端末１００のメモリ１１に記憶してもよいし、記憶媒体１０３０から読み込むことにより取得したゲームプログラムをメモリ１１に記憶してもよい。
以上で説明したとおり、ユーザ端末１００は、該ユーザ端末１００に対して情報を入力する機構の一例として、通信ＩＦ１３、入出力ＩＦ１４、タッチスクリーン１５、カメラ１７、および、測距センサ１８を備える。入力する機構としての上述の各部は、ユーザの入力操作を受け付けるように構成された操作部と捉えることができる。
例えば、操作部が、カメラ１７および測距センサ１８の少なくともいずれか一方で構成される場合、該操作部が、ユーザ端末１００の近傍の物体１０１０を検出し、当該物体の検出結果から入力操作を特定する。一例として、物体１０１０としてのユーザの手、予め定められた形状のマーカーなどが検出され、検出結果として得られた物体１０１０の色、形状、動き、または、種類などに基づいて入力操作が特定される。より具体的には、ユーザ端末１００は、カメラ１７の撮影画像からユーザの手が検出された場合、該撮影画像に基づき検出されるジェスチャ（ユーザの手の一連の動き）を、ユーザの入力操作として特定し、受け付ける。なお、撮影画像は静止画であっても動画であってもよい。
あるいは、操作部がタッチスクリーン１５で構成される場合、ユーザ端末１００は、タッチスクリーン１５の入力部１５１に対して実施されたユーザの操作をユーザの入力操作として特定し、受け付ける。あるいは、操作部が通信ＩＦ１３で構成される場合、ユーザ端末１００は、コントローラ１０２０から送信される信号（例えば、出力値）をユーザの入力操作として特定し、受け付ける。あるいは、操作部が入出力ＩＦ１４で構成される場合、該入出力ＩＦ１４と接続されるコントローラ１０２０とは異なる入力装置（図示せず）から出力される信号をユーザの入力操作として特定し、受け付ける。
（サーバ２００）
サーバ２００は、一例として、ワークステーションまたはパーソナルコンピュータなどの汎用コンピュータであってよい。サーバ２００は、プロセッサ２０と、メモリ２１と、ストレージ２２と、通信ＩＦ２３と、入出力ＩＦ２４とを備える。サーバ２００が備えるこれらの構成は、通信バスによって互いに電気的に接続される。
（ゲームプレイ端末３００）
ゲームプレイ端末３００は、一例として、パーソナルコンピュータなどの汎用コンピュータであってよい。ゲームプレイ端末３００は、プロセッサ３０と、メモリ３１と、ストレージ３２と、通信ＩＦ３３と、入出力ＩＦ３４とを備える。ゲームプレイ端末３００が備えるこれらの構成は、通信バスによって互いに電気的に接続される。
図４に示すように、本実施形態に係るゲームプレイ端末３００は、一例として、ＨＭＤ（Head Mounted Display）セット１０００に含まれる。つまり、ＨＭＤセット１０００が、システム１に含まれていると表現することができ、また、プレイヤは、ＨＭＤセット１０００を用いてゲームをプレイすると表現することもできる。なお、プレイヤがゲームをプレイするための装置は、ＨＭＤセット１０００に限定されない。一例として、該装置は、プレイヤにゲームを仮想体験させることが可能な装置であればよい。また、該装置は、スマートフォン、フィーチャーフォン、タブレット型コンピュータ、ラップトップ型コンピュータ（いわゆる、ノートパソコン）、または、デスクトップ型コンピュータなどとして実現されてもよい。また、該装置は、ゲームプレイに適したゲーム装置であってもよい。
ＨＭＤセット１０００は、ゲームプレイ端末３００の他、ＨＭＤ５００、ＨＭＤセンサ５１０、モーションセンサ５２０、ディスプレイ５３０、コントローラ５４０を備える。ＨＭＤ５００は、モニタ５１と、注視センサ５２と、第１カメラ５３と、第２カメラ５４と、マイク５５と、スピーカ５６とを含む。コントローラ５４０は、モーションセンサ５２０を含み得る。
ＨＭＤ５００は、プレイヤの頭部に装着され、動作中に仮想空間をプレイヤに提供し得る。より具体的には、ＨＭＤ５００は、右目用の画像および左目用の画像をモニタ５１にそれぞれ表示する。プレイヤの各目がそれぞれの画像を視認すると、プレイヤは、両目の視差に基づき当該画像を３次元画像として認識し得る。ＨＭＤ５００は、モニタを備える所謂ヘッドマウントディスプレイと、スマートフォンその他のモニタを有する端末を装着可能なヘッドマウント機器のいずれをも含み得る。
モニタ５１は、例えば、非透過型の表示装置として実現される。ある局面において、モニタ５１は、プレイヤの両目の前方に位置するようにＨＭＤ５００の本体に配置されている。したがって、プレイヤは、モニタ５１に表示される３次元画像を視認すると、仮想空間に没入することができる。ある局面において、仮想空間は、例えば、背景、プレイヤが操作可能なオブジェクト、プレイヤが選択可能なメニューの画像を含む。ある局面において、モニタ５１は、所謂スマートフォンその他の情報表示端末が備える液晶モニタまたは有機ＥＬ（Electro Luminescence）モニタとして実現され得る。
別の局面において、モニタ５１は、透過型の表示装置として実現され得る。この場合、ＨＭＤ５００は、図１に示されるようにプレイヤの目を覆う密閉型ではなく、メガネ型のような開放型であり得る。透過型のモニタ５１は、その透過率を調整することにより、一時的に非透過型の表示装置として構成可能であってもよい。モニタ５１は、仮想空間を構成する画像の一部と、現実空間とを同時に表示する構成を含んでいてもよい。例えば、モニタ５１は、ＨＭＤ５００に搭載されたカメラで撮影した現実空間の画像を表示してもよいし、一部の透過率を高く設定することにより現実空間を視認可能にしてもよい。
ある局面において、モニタ５１は、右目用の画像を表示するためのサブモニタと、左目用の画像を表示するためのサブモニタとを含み得る。別の局面において、モニタ５１は、右目用の画像と左目用の画像とを一体として表示する構成であってもよい。この場合、モニタ５１は、高速シャッタを含む。高速シャッタは、画像がいずれか一方の目にのみ認識されるように、右目用の画像と左目用の画像とを交互に表示可能に作動する。
ある局面において、ＨＭＤ５００は、図示せぬ複数の光源を含む。各光源は例えば、赤外線を発するＬＥＤ（Light Emitting Diode）により実現される。ＨＭＤセンサ５１０は、ＨＭＤ５００の動きを検出するためのポジショントラッキング機能を有する。より具体的には、ＨＭＤセンサ５１０は、ＨＭＤ５００が発する複数の赤外線を読み取り、現実空間内におけるＨＭＤ５００の位置および傾きを検出する。
別の局面において、ＨＭＤセンサ５１０は、カメラにより実現されてもよい。この場合、ＨＭＤセンサ５１０は、カメラから出力されるＨＭＤ５００の画像情報を用いて、画像解析処理を実行することにより、ＨＭＤ５００の位置および傾きを検出することができる。
別の局面において、ＨＭＤ５００は、位置検出器として、ＨＭＤセンサ５１０の代わりに、あるいはＨＭＤセンサ５１０に加えてセンサ（不図示）を備えてもよい。ＨＭＤ５００は、該センサを用いて、ＨＭＤ５００自身の位置および傾きを検出し得る。例えば、該センサが角速度センサ、地磁気センサ、あるいは加速度センサである場合、ＨＭＤ５００は、ＨＭＤセンサ５１０の代わりに、これらの各センサのいずれかを用いて、自身の位置および傾きを検出し得る。一例として、ＨＭＤ５００に備えられたセンサが角速度センサである場合、角速度センサは、現実空間におけるＨＭＤ５００の３軸周りの角速度を経時的に検出する。ＨＭＤ５００は、各角速度に基づいて、ＨＭＤ５００の３軸周りの角度の時間的変化を算出し、さらに、角度の時間的変化に基づいて、ＨＭＤ５００の傾きを算出する。
注視センサ５２は、プレイヤの右目および左目の視線が向けられる方向を検出する。つまり、注視センサ５２は、プレイヤの視線を検出する。視線の方向の検出は、例えば、公知のアイトラッキング機能によって実現される。注視センサ５２は、当該アイトラッキング機能を有するセンサにより実現される。ある局面において、注視センサ５２は、右目用のセンサおよび左目用のセンサを含むことが好ましい。注視センサ５２は、例えば、プレイヤの右目および左目に赤外光を照射するとともに、照射光に対する角膜および虹彩からの反射光を受けることにより各眼球の回転角を検出するセンサであってもよい。注視センサ５２は、検出した各回転角に基づいて、プレイヤの視線を検知することができる。
第１カメラ５３は、プレイヤの顔の下部を撮影する。より具体的には、第１カメラ５３は、プレイヤの鼻および口などを撮影する。第２カメラ５４は、プレイヤの目および眉などを撮影する。ＨＭＤ５００のプレイヤ側の筐体をＨＭＤ５００の内側、ＨＭＤ５００のプレイヤとは逆側の筐体をＨＭＤ５００の外側と定義する。ある局面において、第１カメラ５３は、ＨＭＤ５００の外側に配置され、第２カメラ５４は、ＨＭＤ５００の内側に配置され得る。第１カメラ５３および第２カメラ５４が生成した画像は、ゲームプレイ端末３００に入力される。別の局面において、第１カメラ５３と第２カメラ５４とを１台のカメラとして実現し、この１台のカメラでプレイヤの顔を撮影するようにしてもよい。
マイク５５は、プレイヤの発話を音声信号（電気信号）に変換してゲームプレイ端末３００に出力する。スピーカ５６は、音声信号を音声に変換してプレイヤに出力する。別の局面において、ＨＭＤ５００は、スピーカ５６に替えてイヤホンを含み得る。
コントローラ５４０は、有線または無線によりゲームプレイ端末３００に接続されている。コントローラ５４０は、プレイヤからゲームプレイ端末３００への命令の入力を受け付ける。ある局面において、コントローラ５４０は、プレイヤによって把持可能に構成される。別の局面において、コントローラ５４０は、プレイヤの身体あるいは衣類の一部に装着可能に構成される。さらに別の局面において、コントローラ５４０は、ゲームプレイ端末３００から送信される信号に基づいて、振動、音、光のうちの少なくともいずれかを出力するように構成されてもよい。さらに別の局面において、コントローラ５４０は、プレイヤから、仮想空間に配置されるオブジェクトの位置や動きを制御するための操作を受け付ける。
ある局面において、コントローラ５４０は、複数の光源を含む。各光源は例えば、赤外線を発するＬＥＤにより実現される。ＨＭＤセンサ５１０は、ポジショントラッキング機能を有する。この場合、ＨＭＤセンサ５１０は、コントローラ５４０が発する複数の赤外線を読み取り、現実空間内におけるコントローラ５４０の位置および傾きを検出する。別の局面において、ＨＭＤセンサ５１０は、カメラにより実現されてもよい。この場合、ＨＭＤセンサ５１０は、カメラから出力されるコントローラ５４０の画像情報を用いて、画像解析処理を実行することにより、コントローラ５４０の位置および傾きを検出することができる。
モーションセンサ５２０は、ある局面において、プレイヤの手に取り付けられて、プレイヤの手の動きを検出する。例えば、モーションセンサ５２０は、手の回転速度、回転数等を検出する。検出された信号は、ゲームプレイ端末３００に送られる。モーションセンサ５２０は、例えば、コントローラ５４０に設けられている。ある局面において、モーションセンサ５２０は、例えば、プレイヤに把持可能に構成されたコントローラ５４０に設けられている。別の局面において、現実空間における安全のため、コントローラ５４０は、手袋型のようにプレイヤの手に装着されることにより容易に飛んで行かないものに装着される。さらに別の局面において、プレイヤに装着されないセンサがプレイヤの手の動きを検出してもよい。例えば、プレイヤを撮影するカメラの信号が、プレイヤの動作を表わす信号として、ゲームプレイ端末３００に入力されてもよい。モーションセンサ５２０とゲームプレイ端末３００とは、一例として、無線により互いに接続される。無線の場合、通信形態は特に限られず、例えば、Ｂｌｕｅｔｏｏｔｈその他の公知の通信手法が用いられる。
ディスプレイ５３０は、モニタ５１に表示されている画像と同様の画像を表示する。これにより、ＨＭＤ５００を装着しているプレイヤ以外のユーザにもプレイヤと同様の画像を視聴させることができる。ディスプレイ５３０に表示される画像は、３次元画像である必要はなく、右目用の画像や左目用の画像であってもよい。ディスプレイ５３０としては、例えば、液晶ディスプレイや有機ＥＬモニタなどが挙げられる。
ゲームプレイ端末３００は、ＨＭＤ５００の各部、コントローラ５４０、およびモーションセンサ５２０から取得した各種情報に基づいて、プレイヤの操作対象となるキャラクタを動作させ、ゲームを進行させる。ここでの「動作」には、身体の各部を動かすこと、姿勢を変えること、顔の表情を変えること、移動、発話、仮想空間に配置されたオブジェクトに触れたり、動かしたりすること、キャラクタが把持する武器、道具などを使用することなどが含まれる。すなわち、本ゲームでは、プレイヤが身体の各部を動かすことにより、キャラクタもプレイヤと同様に身体の各部を動かす。また、本ゲームでは、プレイヤが発話した内容をキャラクタが発話する。換言すれば、本ゲームにおいて、キャラクタは、プレイヤの分身としてふるまうアバターオブジェクトである。一例として、キャラクタの動作の少なくとも一部が、プレイヤによるコントローラ５４０に対する入力により実行されてもよい。
本実施形態では、モーションセンサ５２０は、一例として、プレイヤの両手、プレイヤの両足、プレイヤの腰部、および、プレイヤの頭部に取り付けられる。プレイヤの両手に取り付けられるモーションセンサ５２０は、上述したとおり、コントローラ５４０に設けられていてもよい。また、プレイヤの頭部に取り付けられるモーションセンサ５２０は、ＨＭＤ５００に設けられていてもよい。モーションセンサ５２０は、さらに、ユーザの両肘や両膝に取り付けられてもよい。プレイヤに取り付けるモーションセンサ５２０の数を増やすことにより、プレイヤの動きをより正確にキャラクタに反映させることができる。また、プレイヤは、モーションセンサ５２０を身体の各部に取り付けることに代えて、１以上のモーションセンサ５２０が取り付けられたスーツを着用してもよい。つまり、モーションキャプチャの方法は、モーションセンサ５２０を用いる例に限定されない。
（配信端末４００）
配信端末４００は、スマートフォン、ＰＤＡ（Personal Digital Assistant）、またはタブレット型コンピュータ等の携帯端末であってよい。また、配信端末４００は、デスクトップパソコン等の、いわゆる据え置き型の端末であってもよい。
配信端末４００は、図５に示すように、プロセッサ４０と、メモリ４１と、ストレージ４２と、通信ＩＦ４３と、入出力ＩＦ４４と、タッチスクリーン４５とを備える。なお、配信端末４００は、タッチスクリーン４５に代えて、または、加えて、配信端末４００本体とは別に構成されたディスプレイ（表示部）を接続可能な入出力ＩＦ４４を備えていてもよい。
コントローラ１０２１は、１つ以上のボタン、レバー、スティック、ホイール等の物理的な入力機構を有していてもよい。コントローラ１０２１は、配信端末４００の操作者（本実施形態ではプレイヤ）が、該入力機構に対して入力した入力操作に基づく出力値を配信端末４００へ送信する。また、コントローラ１０２１は、加速度センサ、および、角速度センサ等の各種センサを有していてもよく、該各種センサの出力値を配信端末４００へ送信してもよい。上述の出力値は、通信ＩＦ４３を介して配信端末４００に受け付けられる。
配信端末４００は、カメラと、測距センサ（ともに不図示）とを備えていてもよい。配信端末４００が備えることに代えて、または、加えて、コントローラ１０２１がカメラと、測距センサとを有してしてもよい。
以上で説明したとおり、配信端末４００は、該配信端末４００に対して情報を入力する機構の一例として、通信ＩＦ４３、入出力ＩＦ４４、タッチスクリーン４５を備える。入力する機構としての上述の各部は、ユーザの入力操作を受け付けるように構成された操作部と捉えることができる。
操作部がタッチスクリーン４５で構成されている場合、配信端末４００は、タッチスクリーン４５の入力部４５１に対して実施されたユーザの操作をユーザの入力操作として特定し、受け付ける。あるいは、操作部が通信ＩＦ４３で構成される場合、配信端末４００は、コントローラ１０２１から送信される信号（例えば、出力値）をユーザの入力操作として特定し、受け付ける。あるいは、操作部が入出力ＩＦ４４で構成される場合、配信端末４００は、該入出力ＩＦ４４と接続される入力装置（図示せず）から出力される信号をユーザの入力操作として特定し、受け付ける。
＜各装置のハードウェア構成要素＞
プロセッサ１０、２０、３０、４０はそれぞれ、ユーザ端末１００、サーバ２００、ゲームプレイ端末３００、配信端末４００の全体の動作を制御する。プロセッサ１０、２０、３０、４０は、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）、およびＧＰＵ（Graphics Processing Unit）を含む。プロセッサ１０、２０、３０、４０は、それぞれ、後述するストレージ１２、２２、３２、４２からプログラムを読み出す。そして、プロセッサ１０、２０、３０、４０は、それぞれ、読み出したプログラムを、後述するメモリ１１、２１、３１、４１に展開する。プロセッサ１０、２０、３０は、展開したプログラムを実行する。
メモリ１１、２１、３１、４１は主記憶装置である。メモリ１１、２１、３１、４１は、ＲＯＭ（Read Only Memory）およびＲＡＭ（Random Access Memory）等の記憶装置で構成される。メモリ１１は、プロセッサ１０が後述するストレージ１２から読み出したプログラムおよび各種データを一時的に記憶することにより、プロセッサ１０に作業領域を提供する。メモリ１１は、プロセッサ１０がプログラムに従って動作している間に生成した各種データも一時的に記憶する。メモリ２１は、プロセッサ２０が後述するストレージ２２から読み出した各種プログラムおよびデータを一時的に記憶することにより、プロセッサ２０に作業領域を提供する。メモリ２１は、プロセッサ２０がプログラムに従って動作している間に生成した各種データも一時的に記憶する。メモリ３１は、プロセッサ３０が後述するストレージ３２から読み出した各種プログラムおよびデータを一時的に記憶することにより、プロセッサ３０に作業領域を提供する。メモリ３１は、プロセッサ３０がプログラムに従って動作している間に生成した各種データも一時的に記憶する。メモリ４１は、プロセッサ４０が後述するストレージ４２から読み出したプログラムおよび各種データを一時的に記憶することにより、プロセッサ４０に作業領域を提供する。メモリ４１は、プロセッサ４０がプログラムに従って動作している間に生成した各種データも一時的に記憶する。
本実施形態において、プロセッサ１０および３０が実行するプログラムは、本ゲームのゲームプログラムであってもよい。本実施形態において、プロセッサ４０が実行するプログラムは、動作指図データの配信を実現するための配信プログラムであってもよい。また、プロセッサ１０は、さらに、動画の再生を実現するための視聴プログラムを実行してもよい。
本実施形態において、プロセッサ２０が実行するプログラムは、上述のゲームプログラム、配信プログラム、視聴プログラムの少なくとも何れかであってもよい。プロセッサ２０は、ユーザ端末１００、ゲームプレイ端末３００、および配信端末４００の少なくとも何れかからの要求等に応じて、ゲームプログラム、配信プログラム、視聴プログラムの少なくとも何れかを実行する。なお、配信プログラムと視聴プログラムは、並行して実行されてもよい。
すなわち、ゲームプログラムは、ゲームをユーザ端末１００、サーバ２００、およびゲームプレイ端末３００の協働により実現するプログラムであってもよい。配信プログラムは、動作指図データの配信を、サーバ２００と配信端末４００との協働により実現するプログラムであってもよい。視聴プログラムは、動画の再生を、ユーザ端末１００とサーバ２００との協働により実現するプログラムであってもよい。
ストレージ１２、２２、３２、４２は補助記憶装置である。ストレージ１２、２２、３２、４２は、フラッシュメモリまたはＨＤＤ（Hard Disk Drive）等の記憶装置で構成される。ストレージ１２、３２には、例えば、ゲームに関する各種データが格納される。ストレージ４２には、動作指図データの配信に関する各種データが格納される。また、ストレージ１２には、動画の再生に関する各種データが格納される。ストレージ２２には、ゲーム、動作指図データの配信、および動画の再生それぞれに関する各種データのうち、少なくとも一部が格納されてもよい。
通信ＩＦ１３、２３、３３、４３は、それぞれ、ユーザ端末１００、サーバ２００、ゲームプレイ端末３００、配信端末４００における各種データの送受信を制御する。通信ＩＦ１３、２３、３３、４３は例えば、無線ＬＡＮ（Local Area Network）を介する通信、有線ＬＡＮ、無線ＬＡＮ、または携帯電話回線網を介したインターネット通信、ならびに近距離無線通信等を用いた通信を制御する。
入出力ＩＦ１４、２４、３４、４４は、それぞれ、ユーザ端末１００、サーバ２００、ゲームプレイ端末３００、配信端末４００がデータの入力を受け付けるため、また、データを出力するためのインターフェースである。入出力ＩＦ１４、２４、３４、４４は、ＵＳＢ（Universal Serial Bus）等を介してデータの入出力を行ってもよい。入出力ＩＦ１４、２４、３４、４４は、物理ボタン、カメラ、マイク、スピーカ、マウス、キーボード、ディスプレイ、スティック、レバーなどを含み得る。また、入出力ＩＦ１４、２４、３４、４４は、周辺機器との間でデータを送受信するための接続部を含み得る。
タッチスクリーン１５は、入力部１５１と表示部１５２（ディスプレイ）とを組み合わせた電子部品である。タッチスクリーン４５は、入力部４５１と表示部４５２とを組み合わせた電子部品である。入力部１５１および４５１は、一例として、タッチセンシティブなデバイスであり、例えばタッチパッドによって構成される。表示部１５２および４５２は、例えば液晶ディスプレイ、または有機ＥＬ（Electro-Luminescence）ディスプレイ等によって構成される。
入力部１５１および４５１は、入力面に対しユーザの操作（主にタッチ操作、スライド操作、スワイプ操作、およびタップ操作等の物理的接触操作）が入力された位置を検知して、位置を示す情報を入力信号として送信する機能を備える。入力部１５１および４５１は、図示しないタッチセンシング部を備えていればよい。タッチセンシング部は、静電容量方式または抵抗膜方式等のどのような方式を採用したものであってもよい。
図示していないが、ユーザ端末１００および配信端末４００は、それぞれ、ユーザ端末１００および配信端末４００の保持姿勢を特定するための１以上のセンサを備えていてもよい。このセンサは、例えば、加速度センサ、または、角速度センサ等であってもよい。
ユーザ端末１００および配信端末４００がセンサを備えている場合、プロセッサ１０および４０は、それぞれ、センサの出力からユーザ端末１００および配信端末４００の保持姿勢を特定して、保持姿勢に応じた処理を行うことも可能になる。例えば、プロセッサ１０および４０は、それぞれ、ユーザ端末１００および配信端末４００が縦向きに保持されているときには、縦長の画像を表示部１５２および４５２に表示させる縦画面表示としてもよい。一方、ユーザ端末１００および配信端末４００が横向きに保持されているときには、横長の画像を表示部に表示させる横画面表示としてもよい。このように、プロセッサ１０および４０は、それぞれ、ユーザ端末１００および配信端末４００の保持姿勢に応じて縦画面表示と横画面表示とを切り替え可能であってもよい。
＜システム１の機能的構成＞
図６は、システム１に含まれるユーザ端末１００、サーバ２００、およびＨＭＤセット１０００の機能的構成を示すブロック図である。図７は、図６に示す配信端末４００の機能的構成を示すブロック図である。
ユーザ端末１００は、ユーザの入力操作を受け付ける入力装置としての機能と、ゲームの画像や音声を出力する出力装置としての機能を有する。ユーザ端末１００は、プロセッサ１０、メモリ１１、ストレージ１２、通信ＩＦ１３、入出力ＩＦ１４、およびタッチスクリーン１５等の協働によって、制御部１１０および記憶部１２０として機能する。
サーバ２００は、ユーザ端末１００、ＨＭＤセット１０００、および配信端末４００の間の各種情報の送受信を仲介する機能を有する。サーバ２００は、プロセッサ２０、メモリ２１、ストレージ２２、通信ＩＦ２３、および入出力ＩＦ２４等の協働によって、制御部２１０および記憶部２２０として機能する。
ＨＭＤセット１０００（ゲームプレイ端末３００）は、プレイヤの入力操作を受け付ける入力装置としての機能と、ゲームの画像や音声を出力する出力装置としての機能と、ゲーム進行情報を、サーバ２００を介してユーザ端末１００へリアルタイムに送信する機能を有する。ＨＭＤセット１０００は、ゲームプレイ端末３００のプロセッサ３０、メモリ３１、ストレージ３２、通信ＩＦ３３、入出力ＩＦ３４、並びに、ＨＭＤ５００、ＨＭＤセンサ５１０、モーションセンサ５２０、およびコントローラ５４０等の協働によって、制御部３１０および記憶部３２０として機能する。
配信端末４００は、動作指図データを生成して、該動作指図データを、サーバ２００を介してユーザ端末１００へ送信する機能を有する。配信端末４００は、プロセッサ４０、メモリ４１、ストレージ４２、通信ＩＦ４３、入出力ＩＦ４４、およびタッチスクリーン４５等の協働によって、制御部４１０および記憶部４２０として機能する。
（各装置の記憶部が格納するデータ）
記憶部１２０は、ゲームプログラム１３１（プログラム）、ゲーム情報１３２、および、ユーザ情報１３３を格納する。記憶部２２０は、ゲームプログラム２３１、ゲーム情報２３２、ユーザ情報２３３、および、ユーザリスト２３４を格納する。記憶部３２０は、ゲームプログラム３３１、ゲーム情報３３２、および、ユーザ情報３３３を格納する。記憶部４２０は、ユーザリスト４２１、モーションリスト４２２、配信プログラム４２３（プログラム、第２プログラム）を格納する。
ゲームプログラム１３１、２３１、３３１は、それぞれ、ユーザ端末１００、サーバ２００、ＨＭＤセット１０００が実行するゲームプログラムである。ゲームプログラム１３１、２３１、３３１に基づいて各装置が協働して動作することにより、本ゲームが実現される。なお、ゲームプログラム１３１および３３１は、記憶部２２０に格納され、ユーザ端末１００およびＨＭＤセット１０００にそれぞれダウンロードされる構成でもよい。なお、本実施形態では、ユーザ端末１００は、ゲームプログラム１３１に基づいて、配信端末４００から受信したデータをレンダリングし、動画を再生するものとする。換言すれば、ゲームプログラム１３１は、配信端末４００から配信された動画指図データを用いて、動画を再生するためのプログラムでもある。該動画を再生するためのプログラムは、ゲームプログラム１３１と異なってもよい。この場合、記憶部１２０は、ゲームプログラム１３１とは別に、該動画を再生するためのプログラムを格納する。
ゲーム情報１３２、２３２、３３２は、それぞれ、ユーザ端末１００、サーバ２００、ＨＭＤセット１０００がゲームプログラムを実行する際に参照するデータである。ユーザ情報１３３、２３３、３３３は、ユーザ端末１００のユーザのアカウントに関するデータである。ゲーム情報２３２は、各ユーザ端末１００のゲーム情報１３２、および、ＨＭＤ セット１０００のゲーム情報３３２である。ユーザ情報２３３は、各ユーザ端末１００のユーザ情報１３３、および、ユーザ情報３３３に含まれる、プレイヤのユーザ情報である。ユーザ情報３３３は、各ユーザ端末１００のユーザ情報１３３、および、プレイヤのユーザ情報である。
ユーザリスト２３４およびユーザリスト４２１は、ゲームに参加したユーザのリストである。ユーザリスト２３４およびユーザリスト４２１は、プレイヤによる直近のゲームプレイにおいて参加したユーザのリストの他、該ゲームプレイ以前の各ゲームプレイにおいて参加したユーザのリストを含んでいてもよい。モーションリスト４２２は、予め作成されている複数のモーションデータのリストである。モーションリスト４２２は、例えば、各モーションを識別する情報（例えば、モーション名）のそれぞれに、モーションデータが対応付けられたリストである。配信プログラム４２３は、ユーザ端末１００にて動画を再生するための動作指図データの、ユーザ端末１００への配信を実現するためのプログラムである。
（サーバ２００の機能的構成）
制御部２１０は、記憶部２２０に格納されたゲームプログラム２３１を実行することにより、サーバ２００を統括的に制御する。例えば制御部２１０は、ユーザ端末１００、ＨＭＤセット１０００、および配信端末４００の間の各種情報の送受信を仲介する。
制御部２１０は、ゲームプログラム２３１の記述に応じて、通信仲介部２１１、ログ生成部２１２、リスト生成部２１３として機能する。制御部２１０は、ゲームプレイおよび動作指図データの配信に係る各種情報の送受信の仲介、並びに、ゲームの進行の支援のために、図示しないその他の機能ブロックとしても機能することができる。
通信仲介部２１１は、ユーザ端末１００、ＨＭＤセット１０００、および配信端末４００の間の各種情報の送受信を仲介する。例えば、通信仲介部２１１は、ＨＭＤセット１０００から受信したゲーム進行情報をユーザ端末１００へ送信する。ゲーム進行情報は、プレイヤによって操作されるキャラクタの動き、該キャラクタのパラメータ、該キャラクタが所持しているアイテムや武器、敵キャラクタなどの情報などを示すデータが含まれる。サーバ２００は、ゲーム進行情報を、ゲームに参加している全てのユーザのユーザ端末１００へ送信する。換言すれば、サーバ２００は、共通のゲーム進行情報をゲームに参加している全てのユーザのユーザ端末１００へ送信する。これにより、ゲームに参加している全てのユーザのユーザ端末１００それぞれにおいて、ＨＭＤセット１０００と同様にゲームが進行する。
また、例えば、通信仲介部２１１は、ユーザ端末１００のいずれかから受信した、プレイヤによるゲームの進行を支援するための情報を、その他のユーザ端末１００、および、ＨＭＤセット１０００へ送信する。該情報は、一例として、プレイヤがゲームを有利に進行するためのアイテムであって、プレイヤ（キャラクタ）に提供されるアイテムを示すアイテム情報であってもよい。アイテム情報は、アイテムを提供したユーザを示す情報（ユーザ名、ユーザＩＤなど）を含む。また、通信仲介部２１１は、配信端末４００からユーザ端末１００への動作指図データの配信を仲介してもよい。
ログ生成部２１２は、ＨＭＤセット１０００から受信するゲーム進行情報に基づいて、ゲーム進行のログを生成する。リスト生成部２１３は、ゲームプレイの終了後にユーザリスト２３４を生成する。詳細については後述するが、ユーザリスト２３４における各ユーザには、そのユーザが行ったプレイヤへの支援の内容を示すタグが関連付けられている。リスト生成部２１３は、ログ生成部２１２が生成したゲーム進行のログに基づいて、タグを生成し、該当するユーザに関連付ける。なお、リスト生成部２１３は、ゲームの運営者などがパーソナルコンピュータなどの端末装置を用いて入力した、各ユーザが行ったプレイヤへの支援の内容を、タグとして、該当するユーザに関連付けてもよい。これにより、各ユーザが行った支援の内容がより詳細なものとなる。なお、ユーザ端末１００は、ユーザがゲームに参加する際、ユーザの操作に基づいて、ユーザを示す情報をサーバ２００へ送信する。例えば、ユーザ端末１００は、ユーザが入力したユーザＩＤをサーバ２００へ送信する。つまり、サーバ２００は、ゲームに参加している全てのユーザについて、各ユーザを示す情報を保持している。リスト生成部２１３は、該情報を用いて、ユーザリスト２３４を生成すればよい。
（ＨＭＤセット１０００の機能的構成）
制御部３１０は、記憶部３２０に格納されたゲームプログラム３３１を実行することにより、ＨＭＤセット１０００を統括的に制御する。例えば、制御部３１０は、ゲームプログラム３３１、および、プレイヤの操作に従って、ゲームを進行させる。また、制御部３１０は、ゲームを進行させている間、必要に応じて、サーバ２００と通信して、情報の送受信を行う。制御部３１０は、情報の送受信を、サーバ２００を介さずにユーザ端末１００と直接行ってもよい。
制御部３１０は、ゲームプログラム３３１の記述に応じて、操作受付部３１１、表示制御部３１２、ＵＩ制御部３１３、アニメーション生成部３１４、ゲーム進行部３１５、仮想空間制御部３１６、および反応処理部３１７として機能する。制御部３１０は、実行されるゲームの性質に応じて、該ゲームに登場するキャラクタの制御などのために、図示しないその他の機能ブロックとしても機能することができる。
操作受付部３１１は、プレイヤの入力操作を検知し、受け付ける。操作受付部３１１は、ＨＭＤ５００、モーションセンサ５２０、コントローラ５４０などから入力された信号を受け付け、いかなる入力操作がなされたかを判別し、その結果を制御部３１０の各要素に出力する。
ＵＩ制御部３１３は、モニタ５１、ディスプレイ５３０などに表示させるユーザインターフェース（以下、ＵＩ）画像を制御する。ＵＩ画像は、プレイヤが、ゲームの進行上必要な入力をＨＭＤセット１０００に対して行うためのツール、または、ゲームの進行中に出力される情報をＨＭＤセット１０００から得るためのツールである。ＵＩ画像は、これには限定されないが、例えば、アイコン、ボタン、リスト、メニュー画面などである。
アニメーション生成部３１４は、各種オブジェクトの制御態様に基づいて、各種オブジェクトのモーションを示すアニメーションを生成する。例えば、アニメーション生成部３１４は、オブジェクト（例えば、プレイヤのアバターオブジェクト）がまるでそこにいるかのように動いたり、口を動かしたり、表情を変えたりする様子を表現したアニメーション等を生成してもよい。
ゲーム進行部３１５は、ゲームプログラム３３１、プレイヤによる入力操作、および、該入力操作に応じたアバターオブジェクトの動作などに基づいて、ゲームを進行する。例えば、ゲーム進行部３１５は、アバターオブジェクトが所定の動作を行った場合に、所定のゲーム処理を行う。また、例えば、ゲーム進行部３１５は、ユーザ端末１００におけるユーザの操作を表す情報を受信し、当該ユーザの操作に基づいてゲーム処理を行ってもよい。また、ゲーム進行部３１５は、ゲームの進行に従ってゲーム進行情報を生成し、サーバ２００へ送信する。該ゲーム進行情報は、サーバ２００を介してユーザ端末１００へ送信される。これにより、ＨＭＤセット１０００におけるゲームの進行が、ユーザ端末１００において共有される。換言すれば、ＨＭＤセット１０００におけるゲームの進行と、ユーザ端末１００におけるゲームの進行とが同期する。
仮想空間制御部３１６は、ゲームの進行に応じて、プレイヤに提供される仮想空間に関する各種の制御を行う。一例として、仮想空間制御部３１６は、各種オブジェクトを生成し、仮想空間に配置する。また、仮想空間制御部３１６は、仮想カメラを仮想空間に配置する。また、仮想空間制御部３１６は、ゲームの進行に応じて、仮想空間に配置した各種オブジェクトを動作させる。また、仮想空間制御部３１６は、ゲームの進行に応じて、仮想空間に配置した仮想カメラの位置、傾きを制御する。
表示制御部３１２は、モニタ５１、ディスプレイ５３０に対して、上述の各要素によって実行された処理結果が反映されたゲーム画面を出力する。表示制御部３１２は、仮想空間に配置された仮想カメラからの視界に基づく画像を、ゲーム画面として、モニタ５１、ディスプレイ５３０に表示してもよい。また、表示制御部３１２は、アニメーション生成部３１４によって生成されたアニメーションを該ゲーム画面に含めてもよい。また、表示制御部３１２は、ＵＩ制御部３１３によって制御される上述のＵＩ画像を、該ゲーム画面に重畳して描画してもよい。
反応処理部３１７は、ユーザ端末１００のユーザによる、プレイヤのゲームプレイに対する反応についてフィードバックを受け付けて、これを、プレイヤに対して出力する。本実施形態では、例えば、ユーザ端末１００は、ユーザの入力操作に基づいて、アバターオブジェクトに宛てたコメント（メッセージ）を作成することができる。反応処理部３１７は、該コメントのコメントデータを受け付けて、これを出力する。反応処理部３１７は、ユーザのコメントに対応するテキストデータを、モニタ５１、ディスプレイ５３０に表示してもよいし、ユーザのコメントに対応する音声データを、図示しないスピーカから出力してもよい。前者の場合、反応処理部３１７は、上記テキストデータに対応する画像（すなわち、コメントの内容を含む画像）を、ゲーム画面に重畳して描画してもよい。
（ユーザ端末１００の機能的構成）
制御部１１０は、記憶部１２０に格納されたゲームプログラム１３１を実行することにより、ユーザ端末１００を統括的に制御する。例えば、制御部１１０は、ゲームプログラム１３１、および、ユーザの操作に従って、ゲームを進行させる。また、制御部１１０は、ゲームを進行させている間、必要に応じて、サーバ２００と通信して、情報の送受信を行う。制御部１１０は、情報の送受信を、サーバ２００を介さずにＨＭＤセット１０００と直接行ってもよい。
制御部１１０は、ゲームプログラム１３１の記述に応じて、操作受付部１１１、表示制御部１１２、ＵＩ制御部１１３、アニメーション生成部１１４、ゲーム進行部１１５、仮想空間制御部１１６、および動画再生部１１７として機能する。制御部１１０は、実行されるゲームの性質に応じて、ゲームの進行のために、図示しないその他の機能ブロックとしても機能することができる。
操作受付部１１１は、入力部１５１に対するユーザの入力操作を検知し受け付ける。操作受付部１１１は、タッチスクリーン１５およびその他の入出力ＩＦ１４を介したコンソールに対してユーザが及ぼした作用から、いかなる入力操作がなされたかを判別し、その結果を制御部１１０の各要素に出力する。
例えば、操作受付部１１１は、入力部１５１に対する入力操作を受け付け、該入力操作の入力位置の座標を検出し、該入力操作の種類を特定する。操作受付部１１１は、入力操作の種類として、例えばタッチ操作、スライド操作、スワイプ操作、およびタップ操作等を特定する。また、操作受付部１１１は、連続して検知されていた入力が途切れると、タッチスクリーン１５から接触入力が解除されたことを検知する。
ＵＩ制御部１１３は、ユーザの入力操作、および、受信したゲーム進行情報の少なくとも何れかに応じて、ＵＩを構築するために表示部１５２に表示させるＵＩ画像を制御する。ＵＩ画像は、ユーザが、ゲームの進行上必要な入力をユーザ端末１００に対して行うためのツール、または、ゲームの進行中に出力される情報をユーザ端末１００から得るためのツールである。ＵＩ画像は、これには限定されないが、例えば、アイコン、ボタン、リスト、メニュー画面などである。
アニメーション生成部１１４は、各種オブジェクトの制御態様に基づいて、各種オブジェクトのモーションを示すアニメーションを生成する。
ゲーム進行部１１５は、ゲームプログラム１３１、受信したゲーム進行情報、および、ユーザによる入力操作などに基づいて、ゲームを進行する。ゲーム進行部１１５は、ユーザによる入力操作により、所定のゲーム処理を行った場合、該ゲーム処理に関する情報を、サーバ２００を介してＨＭＤセット１０００へ送信する。これにより、該所定のゲーム処理が、ＨＭＤセット１０００において共有される。換言すれば、ＨＭＤセット１０００におけるゲームの進行と、ユーザ端末１００におけるゲームの進行とが同期する。所定のゲーム処理とは、例えば、アバターオブジェクトにアイテムを提供する処理であり、この例の場合、ゲーム処理に関する情報は、上述したアイテム情報である。
仮想空間制御部１１６は、ゲームの進行に応じて、ユーザに提供される仮想空間に関する各種の制御を行う。一例として、仮想空間制御部１１６は、各種オブジェクトを生成し、仮想空間に配置する。また、仮想空間制御部１１６は、仮想カメラを仮想空間に配置する。また、仮想空間制御部１１６は、ゲームの進行、具体的には、受信したゲーム進行情報に応じて、仮想空間に配置した各種オブジェクトを動作させる。また、仮想空間制御部３１６は、ゲームの進行、具体的には、受信したゲーム進行情報に応じて、仮想空間に配置した仮想カメラの位置、傾きを制御する。
表示制御部１１２は、表示部１５２に対して、上述の各要素によって実行された処理結果が反映されたゲーム画面を出力する。表示制御部１１２は、ユーザに提供される仮想空間に配置された仮想カメラからの視界に基づく画像を、ゲーム画面として、表示部１５２に表示してもよい。また、表示制御部１１２は、アニメーション生成部１１４によって生成されたアニメーションを該ゲーム画面に含めてもよい。また、表示制御部１１２は、ＵＩ制御部１１３によって制御される上述のＵＩ画像を、該ゲーム画面に重畳して描画してもよい。いずれにしても、表示部１５２に表示されるゲーム画面は、他のユーザ端末１００、および、ＨＭＤセット１０００にて表示されるゲーム画面と同様のゲーム画面である。
動画再生部１１７は、配信端末４００から受信した動作指図データを解析（レンダリング）し、動画を再生する。
（配信端末４００の機能的構成）
制御部４１０は、記憶部４２０に格納されたプログラム（不図示）を実行することにより、配信端末４００を統括的に制御する。例えば、制御部４１０は、該プログラム、および、配信端末４００のユーザ（本実施形態ではプレイヤ）の操作に従って、動作指図データを生成し、ユーザ端末１００に配信する。また、制御部４１０は、必要に応じて、サーバ２００と通信して、情報の送受信を行う。制御部４１０は、情報の送受信を、サーバ２００を介さずにユーザ端末１００と直接行ってもよい。
制御部４１０は、プログラムの記述に応じて、通信制御部４１１、表示制御部４１２、操作受付部４１３、音声受付部４１４、モーション特定部４１５、および動作指図データ生成部４１６として機能する。制御部４１０は、動作指図データの生成および配信のために、図示しないその他の機能ブロックとしても機能することができる。
通信制御部４１１は、サーバ２００、または、サーバ２００を介したユーザ端末１００との情報の送受信を制御する。通信制御部４１１は、一例として、サーバ２００からユーザリスト４２１を受信する。また、通信制御部４１１は、一例として、動作指図データをユーザ端末１００へ送信する。
表示制御部４１２は、表示部４５２に対して、各要素によって実行された処理結果が反映された各種画面を出力する。表示制御部４１２は、一例として、受信したユーザリスト２３４を含む画面を表示する。また、表示制御部４１２は、一例として、配信する動作指図データに含まれる、アバターオブジェクトを動作させるためのモーションデータを、プレイヤに選択させるためのモーションリスト４２２を含む画面を表示する。
操作受付部４１３は、入力部１５１に対するプレイヤの入力操作を検知し受け付ける。操作受付部１１１は、タッチスクリーン４５およびその他の入出力ＩＦ４４を介したコンソールに対してプレイヤが及ぼした作用から、いかなる入力操作がなされたかを判別し、その結果を制御部４１０の各要素に出力する。
例えば、操作受付部４１３は、入力部４５１に対する入力操作を受け付け、該入力操作の入力位置の座標を検出し、該入力操作の種類を特定する。操作受付部４１３は、入力操作の種類として、例えばタッチ操作、スライド操作、スワイプ操作、およびタップ操作等を特定する。また、操作受付部４１３は、連続して検知されていた入力が途切れると、タッチスクリーン４５から接触入力が解除されたことを検知する。
音声受付部４１４は、配信端末４００の周囲で発生した音声を受け付け、該音声の音声データを生成する。音声受付部４１４は、一例として、プレイヤが発話した音声を受け付け、該音声の音声データを生成する。
モーション特定部４１５は、プレイヤの入力操作に応じて、モーションリスト４２２から、プレイヤが選択したモーションデータを特定する。
動作指図データ生成部４１６は、動作指図データを生成する。一例として、動作指図データ生成部４１６は、生成された音声データと、特定されたモーションデータとを含む動作指図データを生成する。
なお、図６に示すＨＭＤセット１０００、サーバ２００、およびユーザ端末１００の機能、並びに、図７に示す配信端末４００の機能は一例にすぎない。ＨＭＤセット１０００、サーバ２００、ユーザ端末１００、および配信端末４００の各装置は、他の装置が備える機能の少なくとも一部を備えていてもよい。さらに、ＨＭＤセット１０００、サーバ２００、ユーザ端末１００、および配信端末４００以外のさらに別の装置をシステム１の構成要素とし、該別の装置にシステム１における処理の一部を実行させてもよい。すなわち、本実施形態においてゲームプログラムを実行するコンピュータは、ＨＭＤセット１０００、サーバ２００、ユーザ端末１００、および配信端末４００、並びに、それ以外の別の装置の何れであってもよいし、これらの複数の装置の組み合わせにより実現されてもよい。
＜仮想空間の制御処理＞
図８は、プレイヤに提供される仮想空間、および、ユーザ端末１００のユーザに提供される仮想空間の制御処理の流れの一例を示すフローチャートである。図９は、ある実施の形態に従う、プレイヤに提供される仮想空間６００Ａ、および、プレイヤが視認する視界画像を示す図である。図１０は、ある実施の形態に従う、ユーザ端末１００のユーザに提供される仮想空間６００Ｂ、および、ユーザが視認する視界画像を示す図である。なお以降、仮想空間６００Ａおよび６００Ｂを区別する必要が無い場合、「仮想空間６００」と記載する。
ステップＳ１において、プロセッサ３０は、仮想空間制御部３１６として、図９に示す仮想空間６００Ａを規定する。プロセッサ３０は、仮想空間データ（不図示）を用いて、仮想空間６００Ａを規定する。仮想空間データは、ゲームプレイ端末３００に記憶されていてもよいし、プロセッサ３０が、ゲームプログラム３３１に基づいて生成してもよいし、プロセッサ３０が、サーバ２００などの外部の装置から取得してもよい。
仮想空間６００は、一例として、中心として定義された点の３６０度方向の全体を覆う全天球状の構造を有する。図９および図１０では、説明を複雑にしないために、仮想空間６００のうちの上半分の天球が例示されている。
ステップＳ２において、プロセッサ３０は、仮想空間制御部３１６として、仮想空間６００Ａに、アバターオブジェクト６１０（キャラクタ）を配置する。アバターオブジェクト６１０は、プレイヤに関連付けられたアバターオブジェクトであり、プレイヤの入力操作に従って動作する。
ステップＳ３において、プロセッサ３０は、仮想空間制御部３１６として、仮想空間６００Ａに、その他のオブジェクトを配置する。図９の例では、プロセッサ３０は、オブジェクト６３１～６３４を配置する。その他のオブジェクトは、例えば、ゲームプログラム３３１に従って動作するキャラクタオブジェクト（いわゆるノンプレイヤキャラクタ、ＮＰＣ）、仮想手などの操作オブジェクト、ゲームの進行に従って配置される動物、植物、人工物、自然物などを模したオブジェクトなどを含み得る。
ステップＳ４において、プロセッサ３０は、仮想空間制御部３１６として、仮想空間６００Ａに仮想カメラ６２０Ａを配置する。プロセッサ３０は、一例として、仮想カメラ６２０Ａを、アバターオブジェクト６１０の頭部の位置に配置する。
ステップＳ５において、プロセッサ３０は、視界画像６５０をモニタ５１およびディスプレイ５３０に表示する。プロセッサ３０は、仮想カメラ６２０Ａの初期の位置と傾きとに応じて、仮想空間６００Ａにおける仮想カメラ６２０Ａからの視界である視界領域６４０Ａを定義する。そして、プロセッサ３０は、視界領域６４０Ａに対応する視界画像６５０を定義する。プロセッサ３０は、視界画像６５０をモニタ５１およびディスプレイ５３０に出力することによって、視界画像６５０をＨＭＤ５００およびディスプレイ５３０に表示させる。
図９の例において、図９（Ａ）に示すように、オブジェクト６３４の一部が視界領域６４０Ａに含まれているため、視界画像６５０は、図９（Ｂ）に示すようにオブジェクト６３４の一部を含む。
ステップＳ６において、プロセッサ３０は、初期配置情報を、サーバ２００を介してユーザ端末１００へ送信する。初期配置情報とは、仮想空間６００Ａにおける各種オブジェクトの初期の配置位置を示す情報である。図９の例において、初期配置情報は、アバターオブジェクト６１０、および、オブジェクト６３１～６３４の初期の配置位置の情報を含む。初期配置情報は、ゲーム進行情報の１つであると表現することもできる。
ステップＳ７において、プロセッサ３０は、仮想空間制御部３１６として、ＨＭＤ５００の動きに応じて仮想カメラ６２０Ａを制御する。具体的には、プロセッサ３０は、ＨＭＤ５００の動き、すなわち、プレイヤの頭部の姿勢に応じて、仮想カメラ６２０Ａの向きおよび傾きを制御する。後述のように、プロセッサ３０は、プレイヤが頭部を動かす（頭部の姿勢を変更する）と、この動きに合わせて、アバターオブジェクト６１０の頭部を動かす。プロセッサ３０は、例えば、アバターオブジェクト６１０の視線の方向と、仮想カメラ６２０Ａの視線の方向とが一致するように、仮想カメラ６２０Ａの向きおよび傾きを制御する。ステップＳ８において、プロセッサ３０は、仮想カメラ６２０Ａの向きおよび傾きが変更されたことに応じて、視界画像６５０を更新する。
ステップＳ９において、プロセッサ３０は、仮想空間制御部３１６として、プレイヤの動きに応じて、アバターオブジェクト６１０を動かす。一例として、プロセッサ３０は、プレイヤが現実空間で移動したことに応じて、仮想空間６００Ａでアバターオブジェクト６１０を移動させる。また、プロセッサ３０は、プレイヤが現実空間で頭部を動かしたことに応じて、仮想空間６００Ａでアバターオブジェクト６１０の頭部を動かす。
ステップＳ１０において、プロセッサ３０は、仮想空間制御部３１６として、仮想カメラ６２０Ａを、アバターオブジェクト６１０に追随するように移動させる。つまり、仮想カメラ６２０Ａは、アバターオブジェクト６１０が移動しても、常にアバターオブジェクト６１０の頭部の位置にある。
プロセッサ３０は、仮想カメラ６２０Ａの移動に応じて、視界画像６５０を更新する。つまり、プロセッサ３０は、プレイヤの頭部の姿勢と、仮想空間６００Ａにおける仮想カメラ６２０Ａの位置とに応じて、視界領域６４０Ａを更新する。その結果、視界画像６５０が更新される。
ステップＳ１１において、プロセッサ３０は、アバターオブジェクト６１０の動作指図データを、サーバ２００を介してユーザ端末１００へ送信する。ここでの動作指図データは、仮想体験中（例えば、ゲームプレイ中）において、プレイヤの動作を取り込んだモーションデータ、プレイヤが発話した音声の音声データ、コントローラ５４０に対する入力操作の内容を示す操作データの少なくとも何れかを含む。プレイヤがゲームをプレイしている場合、動作指図データは、例えば、ゲーム進行情報としてユーザ端末１００へ送信される。
ステップＳ７～Ｓ１１の処理は、プレイヤがゲームをプレイしている間、継続して繰り返し実行される。
ステップＳ２１において、ユーザ３のユーザ端末１００のプロセッサ１０は、仮想空間制御部１１６として、図１０に示す仮想空間６００Ｂを規定する。プロセッサ１０は、仮想空間データ（不図示）を用いて、仮想空間６００Ｂを規定する。仮想空間データは、ユーザ端末１００に記憶されていてもよいし、プロセッサ１０が、ゲームプログラム１３１に基づいて生成してもよいし、プロセッサ１０が、サーバ２００などの外部の装置から取得してもよい。
ステップＳ２２において、プロセッサ１０は、初期配置情報を受信する。ステップＳ２３において、プロセッサ１０は、仮想空間制御部１１６として、初期配置情報に応じて各種オブジェクトを仮想空間６００Ｂに配置する。図１０の例の場合、各種オブジェクトは、アバターオブジェクト６１０、および、オブジェクト６３１～６３４である。
ステップＳ２４において、プロセッサ１０は、仮想空間制御部１１６として、仮想空間６００Ｂに仮想カメラ６２０Ｂを配置する。プロセッサ１０は、一例として、仮想カメラ６２０Ｂを、図１０（Ａ）に示す位置に配置する。
ステップＳ２５において、プロセッサ１０は、視界画像６６０を表示部１５２に表示する。プロセッサ１０は、仮想カメラ６２０Ｂの初期の位置と傾きとに応じて、仮想空間６００Ｂにおける仮想カメラ６２０Ｂからの視界である視界領域６４０Ｂを定義する。そして、プロセッサ１０は、視界領域６４０Ｂに対応する視界画像６６０を定義する。プロセッサ１０は、視界画像６６０を表示部１５２に出力することによって、視界画像６６０を表示部１５２に表示させる。
図１０の例において、図１０（Ａ）に示すように、アバターオブジェクト６１０およびオブジェクト６３１が視界領域６４０Ｂに含まれているため、視界画像６６０は、図１０（Ｂ）に示すようにアバターオブジェクト６１０およびオブジェクト６３１を含む。
ステップＳ２６において、プロセッサ１０は、動作指図データを受信する。ステップＳ２７において、プロセッサ１０は、仮想空間制御部１１６として、動作指図データに応じて、仮想空間６００Ｂでアバターオブジェクト６１０を動かす。換言すれば、プロセッサ１０は、リアルタイムレンダリングにより、アバターオブジェクト６１０が動作している映像を再生する。
ステップＳ２８において、プロセッサ１０は、仮想空間制御部１１６として、操作受付部１１１として受け付けたユーザの操作に応じて仮想カメラ６２０Ｂを制御する。ステップＳ２９において、プロセッサ１０は、仮想カメラ６２０Ｂの仮想空間６００Ｂにおける位置、仮想カメラ６２０Ｂの向きおよび傾きが変更されたことに応じて、視界画像６６０を更新する。なお、ステップＳ２８において、プロセッサ１０は、アバターオブジェクト６１０の動き、例えば、アバターオブジェクト６１０の移動や、向きの変更に応じて仮想カメラ６２０Ｂを自動的に制御してもよい。例えば、プロセッサ１０は、常にアバターオブジェクト６１０を正面から撮影するように自動的に仮想カメラ６２０Ｂを移動させたり、向きおよび傾きを変更したりしてもよい。また、一例として、プロセッサ１０は、アバターオブジェクト６１０の動きに応じて、常にアバターオブジェクト６１０を後方から撮影するように自動的に仮想カメラ６２０Ｂを移動させたり、向きおよび傾きを変更したりしてもよい。
このように、仮想空間６００Ａにおいて、アバターオブジェクト６１０は、プレイヤの動きに応じて動作する。この動作を示す動作指図データは、ユーザ端末１００に送信される。仮想空間６００Ｂにおいて、アバターオブジェクト６１０は、受信した動作指図データに応じて動作する。これにより、仮想空間６００Ａと仮想空間６００Ｂとにおいて、アバターオブジェクト６１０は同様の動作を行う。換言すれば、ユーザ３は、ユーザ端末１００を用いて、プレイヤの動作に応じたアバターオブジェクト６１０の動作を視認することができる。
＜ゲーム概要＞
図１１は、ユーザ端末１００において表示される視界画像の他の例を示す図である。具体的には、プレイヤがプレイしている、システム１が実行するゲーム（本ゲーム）のゲーム画面の一例を示す図である。
本ゲームは、一例として、銃、ナイフなどの武器を操作するアバターオブジェクト６１０と、ＮＰＣである複数の敵オブジェクト６７１とを仮想空間６００に登場させ、アバターオブジェクト６１０に敵オブジェクト６７１との対戦を行わせるゲームである。アバターオブジェクト６１０の体力、使用可能なマガジンの数、銃の残弾数、敵オブジェクト６７１の残数等の各種ゲームパラメータは、ゲームの進行に応じて更新される。
本ゲームには、複数のステージが用意されており、プレイヤは、各ステージに関連付けられている所定の達成条件を成立させることにより、当該ステージをクリアすることができる。所定の達成条件としては、例えば、出現する敵オブジェクト６７１をすべて倒すことや、出現する敵オブジェクト６７１のうちボスオブジェクトを倒すこと、所定のアイテムを獲得すること、所定位置に到達することなどにより成立する条件を含むものであってもよい。該達成条件は、ゲームプログラム１３１内で定義されている。なお、本ゲームでは、ゲームの内容に即し、達成条件が成立された場合にプレイヤはステージをクリア、換言すれば、アバターオブジェクト６１０の敵オブジェクト６７１への勝利（アバターオブジェクト６１０と敵オブジェクト６７１との間の勝敗）が決定される。これに対し、例えば、システム１で実行されるゲームがレースゲーム等である場合、ゴールに到達するという条件が成立した場合に、アバターオブジェクト６１０の順位が決定される。
本ゲームでは、ＨＭＤセット１０００及び複数のユーザ端末１００の間で仮想空間を共有するために、ゲーム進行情報が、所定時間毎に複数のユーザ端末１００にライブ配信される。この結果、ゲームを視聴中のユーザ端末１００のタッチスクリーン１５には、ユーザ端末１００に対応する仮想カメラ６２０Ｂによって規定される視界領域の視界画像が表示される。また、視界画像の右上段および左上段には、アバターオブジェクト６１０の体力、使用可能なマガジンの数、銃の残弾数、敵オブジェクト６７１の残数等を表すパラメータ画像が重畳的に表示される。この視界画像は、ゲーム画面と表現することもできる。
ゲーム進行情報は、上述したとおり、プレイヤの動作を取り込んだモーションデータ、プレイヤが発話した音声の音声データ、コントローラ５４０に対する入力操作の内容を示す操作データを含む。これらのデータはすなわち、アバターオブジェクト６１０の位置、姿勢、向きなどを特定するための情報、敵オブジェクト６７１の位置、姿勢、向きなどを特定する情報、その他オブジェクト（例えば、障害物オブジェクト６７２、６７３）の位置などを特定する情報である。プロセッサ１０は、ゲーム進行情報を解析（レンダリング）することにより、各オブジェクトの位置、姿勢、向きなどを特定する。
ゲーム情報１３２は、アバターオブジェクト６１０、敵オブジェクト６７１、障害物オブジェクト６７２、６７３等の各種オブジェクトのデータを含む。プロセッサ１０は、該データと、ゲーム進行情報の解析結果とを用いて、各オブジェクトの位置、姿勢、向きなどを更新する。これにより、ゲームが進行し、仮想空間６００Ｂにおける各オブジェクトは、仮想空間６００Ａにおける各オブジェクトと同様に動く。具体的には、仮想空間６００Ｂにおいて、アバターオブジェクト６１０を含む各オブジェクトは、ユーザ端末１００に対するユーザからの操作の有無に関わらず、ゲーム進行情報に基づいて動作する。
ユーザ端末１００のタッチスクリーン１５においては、一例として、ＵＩ画像７０１および７０２が、視界画像に重畳して表示される。ＵＩ画像７０１は、アバターオブジェクト６１０を支援するためのアイテム投入操作をユーザ３から受け付けるＵＩ画像７１１を、タッチスクリーン１５に表示するための操作を受け付けるＵＩ画像である。ＵＩ画像７０２は、アバターオブジェクト６１０（換言すれば、プレイヤ４）に対するコメントを入力し、送信するための操作をユーザ３から受け付けるＵＩ画像（後述）を、タッチスクリーン１５に表示するための操作を受け付けるＵＩ画像である。ＵＩ画像７０１および７０２が受け付ける操作は、例えば、ＵＩ画像７０１および７０２をタップする操作であってもよい。
ＵＩ画像７０１がタップされると、ＵＩ画像７１１が、視界画像に重畳して表示される。ＵＩ画像７１１は、例えば、マガジンのアイコンが描かれたＵＩ画像７１１Ａ、救急箱のアイコンが描かれたＵＩ画像７１１Ｂ、三角コーンのアイコンが描かれたＵＩ画像７１１Ｃ、バリケードのアイコンが描かれたＵＩ画像７１１Ｄを含む。アイテム投入操作は、例えば、いずれかのＵＩ画像をタップする操作に相当する。
一例として、ＵＩ画像７１１Ａがタップされると、アバターオブジェクト６１０が使用する銃の残弾数が増加する。ＵＩ画像７１１Ｂがタップされると、アバターオブジェクト６１０の体力が回復する。ＵＩ画像７１１Ｃおよび７１１Ｄがタップされると、敵オブジェクト６７１の移動を妨害する障害物オブジェクト６７２、６７３が仮想空間に配置される。障害物オブジェクト６７２、６７３は、一方が他方に比べて、敵オブジェクト６７１の移動をより妨害するものであってもよい。
プロセッサ１０は、アイテム投入操作が行われたことを示すアイテム投入情報を、サーバ２００へ送信する。アイテム投入情報には、アイテム投入操作により指定されたアイテムの種別を特定するための情報が少なくとも含まれる。アイテム投入情報には、アイテムが配置される位置を示す情報など、アイテムに関するその他の情報が含まれていてもよい。アイテム投入情報は、サーバ２００を介して、他のユーザ端末１００、および、ＨＭＤセット１０００へ送信される。
図１２は、ユーザ端末１００において表示される視界画像の他の例を示す図である。具体的には、本ゲームのゲーム画面の一例を示す図であり、ゲームプレイ中のプレイヤとユーザ端末１００とのコミュニケーションについて説明するための図である。
図１２（Ａ）の例において、ユーザ端末１００は、アバターオブジェクト６１０に発話６９１を実行させている。具体的には、ユーザ端末１００は、ゲーム進行情報に含まれる音声データに従って、アバターオブジェクト６１０に発話６９１を実行させている。発話６９１の内容は、プレイヤ４が発話した「弾が無いよー！」というものである。すなわち、発話６９１の内容は、マガジンが０、銃に装填した銃弾が１となったことにより、敵オブジェクト６７１を攻撃する手段を失いそうであることを各ユーザに伝えるものである。
なお、図１２（Ａ）では、アバターオブジェクト６１０の発話を視覚的に示すため吹き出しを用いているが、実際は、ユーザ端末１００のスピーカから音声が出力される。なお、音声出力とともに、図１２（Ａ）に示す吹き出し（すなわち、音声の内容のテキストを含む吹き出し）が視界画像中に表示されてもよい。これは、後述する発話６９２でも同様である。
ＵＩ画像７０２に対するタップ操作を受け付けると、ユーザ端末１００は、図１２（Ｂ）に示すように、ＵＩ画像７０５および７０６（メッセージＵＩ）を視界画像に重畳して表示する。ＵＩ画像７０５は、アバターオブジェクト６１０（換言すれば、プレイヤ）に対するコメントを表示するＵＩ画像である。ＵＩ画像７０６は、入力されたコメントを送信するためコメント送信操作をユーザ３から受け付けるＵＩ画像である。
ユーザ端末１００は、一例として、ＵＩ画像７０５へのタップ操作を受け付けると、キーボードを模したＵＩ画像（不図示、以下、単に「キーボード」と記載）をタッチスクリーン１５に表示させる。ユーザ端末１００は、キーボードに対するユーザの入力操作に応じたテキストを、ＵＩ画像７０５に表示させる。図１２（Ｂ）の例では、「マガジン送るね」というテキストがＵＩ画像７０５に表示されている。
ユーザ端末１００は、テキスト入力後に、一例として、ＵＩ画像７０６へのタップ操作を受け付けると、入力した内容（テキストの内容）を示す情報と、ユーザを示す情報とを含むコメント情報をサーバ２００へ送信する。コメント情報は、サーバ２００を介して、他のユーザ端末１００、および、ＨＭＤセット１０００へ送信される。
ＵＩ画像７０３Ａは、コメントを送信したユーザのユーザ名を示すＵＩ画像であり、ＵＩ画像７０４Ａは、該ユーザが送信したコメントの内容を示すＵＩ画像である。図１２（Ｂ）の例では、ユーザ名が「ＢＢＢＢＢ」であるユーザが、自身のユーザ端末１００を用い、「危ない！」という内容のコメント情報を送信したことにより、ＵＩ画像７０３ＡおよびＵＩ画像７０４Ａが表示されている。ＵＩ画像７０３ＡおよびＵＩ画像７０４Ａは、本ゲームに参加しているすべてのユーザ端末１００のタッチスクリーン１５、および、ＨＭＤ５００のモニタ５１に表示される。なお、ＵＩ画像７０３Ａおよび７０４Ａは、１つのＵＩ画像であってもよい。すなわち、１つのＵＩ画像にユーザ名とコメントの内容とが含まれていてもよい。
図１２（Ｃ）の例では、図１２に示すユーザ端末１００のユーザである、「ＡＡＡＡＡ」というユーザ名のユーザが、上述したとおりコメントを入力し、送信したことにより、タッチスクリーン１５にＵＩ画像７０３Ｂおよび７０４Ｂが表示されている。ＵＩ画像７０３Ｂにはユーザ名「ＡＡＡＡＡ」が含まれており、ＵＩ画像７０４Ｂには、図１２（Ｂ）の例において入力された「マガジン送るね！」とのコメントが含まれている。
また、図１２（Ｃ）の例は、ユーザ「ＡＡＡＡＡ」がさらに、ＵＩ画像７０１へのタップ操作を入力し、ＵＩ画像７１１をタッチスクリーン１５に表示させ、ＵＩ画像７１１Ａへのタップ操作を入力した後の視界画像６１１である。つまり、ユーザ「ＡＡＡＡＡ」のユーザ端末１００から、他のユーザ端末１００およびＨＭＤセット１０００に、マガジンを示すアイテム投入情報が送信された結果、ユーザ端末１００およびＨＭＤセット１０００は、演出オブジェクト６７４（後述）を仮想空間６００に配置している。一例として、ユーザ端末１００およびＨＭＤセット１０００は、アイテム投入情報にて示された経過時間が経過した後に、演出オブジェクト６７４に関する演出を実行し、アイテムオブジェクトの効果を発動させる処理を実行する。
図１２（Ｄ）の例では、アイテムオブジェクトの効果を発動させる処理の実行により、マガジンの数が０から１に増加している。この結果、プレイヤは、ユーザ「ＡＡＡＡＡ」に対して、「ありがとう！」と発話し、該発話の音声データが、各ユーザ端末１００に送信される。これにより、各ユーザ端末１００は、アバターオブジェクト６１０の発話６９２として、「ありがとう！」という音声を出力する。
以上のように、本ゲームにおいては、プレイヤの発話に基づくアバターオブジェクト６１０の発話音声の出力と、各ユーザによるコメントの入力とにより、ユーザとアバターオブジェクト６１０とのコミュニケーションが実現される。
（ゲームプレイ端末３００におけるゲーム進行処理）
図１３は、ゲームプレイ端末３００で実行されるゲーム進行処理の流れの一例を示すフローチャートである。
ステップＳ３１において、プロセッサ３０は、ゲーム進行部３１５として、ゲームプログラム３３１とプレイヤの動きとに基づいてゲームを進行させる。ステップＳ３２において、プロセッサ３０は、ゲーム進行情報を生成し、ユーザ端末１００へ配信する。具体的には、プロセッサ３０は、生成したゲーム進行情報を、サーバ２００を介して、各ユーザ端末１００へ送信する。
ステップＳ３３において、プロセッサ３０は、アイテム投入情報を受信すると（Ｓ３３でＹＥＳ）、ステップＳ３４において、アイテム投入情報に基づいて、アイテムオブジェクトを仮想空間６００Ａに配置する。一例として、プロセッサ３０は、アイテムオブジェクトの配置の前に、演出オブジェクト６７４を仮想空間６００Ａに配置する（図１１（Ｃ）参照）。演出オブジェクト６７４は、例えば、プレゼント箱を模したオブジェクトであってもよい。プロセッサ３０は、一例として、アイテム投入情報にて示された経過時間が経過した後に、演出オブジェクト６７４に関する演出を実行してもよい。該演出は、例えば、プレゼント箱の蓋が開くアニメーションであってもよい。プロセッサ３０は、該アニメーションの実行の後、アイテムオブジェクトの効果を発動させる処理を実行する。例えば、図１１（Ｄ）の例では、障害物オブジェクト６７３を配置する。
プロセッサ３０は、アニメーションの実行の後、タップ操作されたＵＩ画像に対応するアイテムオブジェクトを仮想空間６００Ａに配置してもよい。例えば、ＵＩ画像７１１Ａに対してタップ操作が行われた場合、プロセッサ３０は、アニメーションの実行の後、マガジンを示すマガジンオブジェクトを仮想空間６００Ａに配置する。また、ＵＩ画像７１１Ｂに対してタップ操作が行われた場合、プロセッサ３０は、アニメーションの実行の後、救急箱を示す救急箱オブジェクトを仮想空間６００Ａに配置する。プロセッサ３０は、例えば、マガジンオブジェクトまたは救急箱オブジェクトの位置に、アバターオブジェクト６１０が移動した場合に、マガジンオブジェクトまたは救急箱オブジェクトの効果を発動させる処理を実行してもよい。
プロセッサ３０は、ゲームが終了するまで、ステップＳ３１～Ｓ３４の処理を継続し、繰り返す。ゲームが終了した場合、例えば、プレイヤがゲームを終了するための所定の入力操作を入力した場合（ステップＳ３５でＹＥＳ）、図１３に示す処理は終了する。
（ユーザ端末１００におけるゲーム進行処理）
図１４は、ユーザ端末１００で実行されるゲーム進行処理の流れの一例を示すフローチャートである。
ステップＳ４１において、プロセッサ１０は、ゲーム進行情報を受信する。ステップＳ４２において、プロセッサ１０は、ゲーム進行部１１５として、ゲーム進行情報に基づいてゲームを進行させる。
ステップＳ４３において、プロセッサ１０が、ユーザ３によるアイテム投入操作を受け付けると（ステップＳ４３にてＹＥＳ）、ステップＳ４４において、プロセッサ１０は、仮想通貨を消費し、演出オブジェクト６７４を仮想空間６００Ｂに配置する。ここで、仮想通貨は、ゲームへの参加の前、あるいは、ゲームへの参加中に、ユーザ３がプロセッサ１０に対し所定の操作を行うことにより購入（本ゲームに対して課金）されるものであってもよいし、所定の条件を満たした場合にユーザ３に付与されるものであってもよい。所定の条件とは、本ゲームにおけるクエストのクリア等、本ゲームへの参加が必要なものであってもよいし、アンケートに答える等、本ゲームへの参加が不要なものであってもよい。仮想通貨の金額（仮想通貨の所有量）は、一例として、ゲーム情報１３２としてユーザ端末１００に記憶される。
ステップＳ４５において、プロセッサ１０は、アイテム投入情報をサーバ２００へ送信する。アイテム投入情報は、サーバ２００を介してゲームプレイ端末３００へ送信される。
プロセッサ１０は、演出オブジェクト６７４の配置後、所定時間が経過すると、アイテムオブジェクトを仮想空間６００Ａに配置する。図１１の例では、障害物オブジェクト６７３を配置する。つまり、ユーザ３が、ＵＩ画像７１１Ｃへのタップ操作を入力することにより、所定量の仮想通貨が消費され、障害物オブジェクト６７３が配置される。
プロセッサ１０は、ゲームが終了するまで、ステップＳ４１～Ｓ４５の処理を継続し、繰り返す。ゲームが終了した場合、例えば、プレイヤがゲームを終了するための所定の入力操作を行った場合や、ユーザ３が、ゲームから途中退席するための所定の入力操作を行った場合（ステップＳ４６でＹＥＳ）、図１４に示す処理は終了する。
（サーバ２００におけるゲーム進行処理）
図１５は、サーバ２００で実行されるゲーム進行処理の流れの一例を示すフローチャートである。
ステップＳ５１において、プロセッサ２０は、ゲーム進行情報をゲームプレイ端末３００から受信する。ステップＳ５２において、プロセッサ２０は、ログ生成部２１２として、ゲーム進行のログ（以下、プレイログ）を更新する。なお、プレイログは、一例として、ゲームプレイ端末３００から初期配置情報を受信したとき、プロセッサ２０が生成する。
ステップＳ５３において、プロセッサ２０は、受信したゲーム進行情報を、各ユーザ端末１００へ送信する。
ステップＳ５４において、アイテム投入情報をいずれかのユーザ端末１００から受信した場合（ステップＳ５４にてＹＥＳ）、ステップＳ５５において、プロセッサ２０は、ログ生成部２１２としてプレイログを更新する。ステップＳ５６において、プロセッサ２０は、受信したアイテム投入情報をゲームプレイ端末３００へ送信する。
プロセッサ２０は、ゲームが終了するまで、ステップＳ５１～Ｓ５６の処理を継続し、繰り返す。ゲームが終了した場合、例えば、ゲームプレイ端末３００から、ゲームが終了したことを示す情報を受信した場合（ステップＳ５７でＹＥＳ）、ステップＳ５８において、プロセッサ２０は、リスト生成部２１３として、プレイログからゲームに参加したユーザのリスト（ユーザリスト２３４）を生成する。プロセッサ２０は、生成したユーザリスト２３４を、サーバ２００に記憶する。
図１６は、ユーザリスト２３４の一具体例を示す図である。「ユーザ」のカラムには、ゲームに参加した各ユーザを示す情報（例えば、ユーザ名）が格納されている。「タグ」のカラムには、各ユーザがプレイヤに対して行った支援に基づいて生成された情報（タグ）が格納されている。図１６の例において、「タグ」のカラムに格納されたタグのうち、鍵括弧を有さないものは、プロセッサ２０が自動生成した情報であり、鍵括弧を有するものは、ゲームの運営者が手動で入力した情報である。
図１６の例において、ユーザ「ＡＡＡＡＡ」には、マガジン、１０Ｆ、ボス、「マガジンのプレゼントによりボスに勝利」という情報が対応付けられている。これは、例えば、１０Ｆというステージでのボス戦において、ユーザ「ＡＡＡＡＡ」がマガジンを投入し、その投入されたマガジンの銃弾でアバターオブジェクト６１０がボスに勝利したことを示している。
また、ユーザ「ＢＢＢＢＢ」には、救急箱、３Ｆ、ザコ、「ゲームオーバー寸前で回復」という情報が対応付けられている、これは、例えば、３Ｆというステージのザコ敵との戦闘において、ユーザ「ＢＢＢＢＢ」が救急箱を投入し、その結果、アバターオブジェクト６１０の体力が０になる（ゲームオーバーになる）寸前で体力が回復したことを示している。
また、ユーザ「ＣＣＣＣＣ」には、バリケード、５Ｆ、ザコ、「バリケードでゾンビを二人足止め」という情報が対応付けられている。これは、例えば、５Ｆというステージのザコ敵との戦闘において、ユーザ「ＣＣＣＣＣ」がバリケード（図１１における障害物オブジェクト６７２）を投入し、その結果、二人のザコ敵の足止めに成功したことを示している。
図１６の例では、各ユーザ３のユーザ名に対し、行った支援が１つ対応付けられているが、支援を複数回行なったユーザ３のユーザ名には、複数回の支援それぞれのタグが対応付けられる。ユーザリスト２３４において、該それぞれのタグは区別されていることが好ましい。これにより、ゲーム終了後に、配信端末４００を用いてユーザリスト４２１を参照するプレイヤが、各支援の内容を正確に把握できる。
＜動作指図データの配信＞
（配信端末４００における配信処理）
図１７は、配信端末４００で実行される配信処理の流れの一例を示すフローチャートである。図１８は、配信端末４００に表示される画面の一具体例を示す図である。図１９は、配信端末に表示される画面の他の具体例を示す図である。
ステップＳ６１において、プロセッサ４０は、操作受付部４１３として、ゲームに参加したユーザのリスト（ユーザリスト２３４）を表示するための第１操作を受け付ける。図１８（Ａ）に示すダウンロード画面７２１は、ユーザリスト２３４をサーバ２００からダウンロードし、表示部４５２に表示させるための画面である。ダウンロード画面７２１は、一例として、図１７に示す配信処理を実行するアプリケーションの起動操作を、配信端末４００に入力した直後に表示される画面である。
ダウンロード画面７２１は、一例として、ＵＩ画像７２２および７２３を含む。ＵＩ画像７２２は、ユーザリスト２３４をダウンロードするための操作、すなわち、上記第１操作を受け付ける。第１操作は、例えば、ＵＩ画像７２２をタップする操作であってもよい。ＵＩ画像７２３は、アプリケーションを終了するための操作を受け付ける。該操作は、例えば、ＵＩ画像７２３をタップする操作であってもよい。
ＵＩ画像７２２に対するタップ操作を受け付けると、ステップＳ６２において、プロセッサ４０は、通信制御部４１１として、ユーザリスト２３４をサーバ２００から取得（受信）する。ステップＳ６３において、プロセッサ４０は、表示制御部４１２として、ユーザリスト２３４を表示部４５２に表示させる。具体的には、プロセッサ４０は、ユーザリスト２３４に基づいて生成されたユーザリスト画面を、表示部４５２に表示させる。ユーザリスト画面は、一例として、図１８（Ｂ）に示すユーザリスト画面７３１であってもよい。ユーザリスト画面７３１は、ユーザリスト２３４における各レコードに対応するレコード画像からなる。図１８（Ｂ）の例では、レコード画像として、レコード画像７３２Ａ～７３２Ｃを記載しているが、レコード画像の数は３つに限定されない。図１８（Ｂ）の例において、ユーザリスト２３４におけるレコードの数が３より多い（すなわち、ゲームに参加したユーザの人数が３人より多い）場合、プレイヤは、例えば画面をスクロールする操作（例えば、ドラッグ操作やフリック操作）をタッチスクリーン４５に入力することにより、他のレコード画像を表示部４５２に表示させることができる。
一例として、レコード画像７３２Ａ～７３２Ｃは、それぞれ、ユーザ名７３３Ａ～７３３Ｃ、タグ情報７３４Ａ～７３４Ｃ、および、アイコン７３５Ａ～７３５Ｃを含む。以降、レコード画像７３２Ａ～７３２Ｃ、ユーザ名７３３Ａ～７３３Ｃ、タグ情報７３４Ａ～７３４Ｃ、および、アイコン７３５Ａ～７３５Ｃについて、区別する必要が無い場合、それぞれ、「レコード画像７３２」、「ユーザ名７３３」、「タグ情報７３４」、「アイコン７３５」と記載する。
ユーザ名７３３は、ユーザリスト２３４において、「ユーザ」のカラムに格納されている、ゲームに参加した各ユーザを示す情報である。タグ情報７３４は、ユーザリスト２３４において、ゲームに参加した各ユーザを示す情報のそれぞれに対応付けられているタグを示す情報である。例えば、レコード画像７３２Ａは、ユーザ名７３３Ａとして、「ＡＡＡＡＡ」を含む。このため、レコード画像７３２Ａは、タグ情報７３４Ａとして、ユーザリスト２３４において「ＡＡＡＡＡ」に対応付けられている、『マガジン、１０Ｆ、ボス、「マガジンのプレゼントによりボスに勝利」』を含む。アイコン７３５は、例えば、ユーザが事前に設定した画像である。
なお、プロセッサ４０は、受信したユーザリストを配信端末４００に記憶してもよい（図７のユーザリスト４２１）。ダウンロード画面７２１は、ユーザリスト４２１を表示部４５２に表示するためのＵＩ画像（不図示）を含んでいてもよい。この例において、該ＵＩ画像がタップされた場合、プロセッサ４０は、ユーザリスト２３４のダウンロードを行わず、ユーザリスト４２１を読み出し、該ユーザリスト４２１からユーザリスト画面を生成し、表示部４５２に表示させる。
ステップＳ６４において、プロセッサ４０は、操作受付部４１３として、ユーザリスト画面７３１に含まれるユーザの何れかを選択するための第２操作を受け付ける。第２操作は、一例として、ユーザリスト画面７３１におけるレコード画像７３２の何れかをタップする操作であってもよい。図１８（Ｂ）の例では、プレイヤは、レコード画像７３２Ａへのタップ操作を入力している。すなわち、プレイヤは、動作指図データを配信するユーザとしてユーザ「ＡＡＡＡＡ」を選択している。
レコード画像７３２に対するタップ操作を受け付けると、ステップＳ６５において、プロセッサ４０は、表示制御部４１２として、モーションリスト４２２を表示部４５２に表示させる。具体的には、プロセッサ４０は、モーションリスト４２２に基づいて生成されたモーションリスト画面を、表示部４５２に表示させる。モーションリスト画面は、一例として、図１９に示すモーションリスト画面７４１であってもよい。モーションリスト画面７４１は、モーションリスト４２２における各レコードに対応するレコード画像からなる。図１９の例では、レコード画像として、レコード画像７４２Ａ～７４２Ｃを記載しているが、レコード画像の数は３つに限定されない。図１９の例において、モーションリスト４２２におけるレコードの数が４より多い場合、プレイヤは、例えば画面をスクロールする操作（例えば、ドラッグ操作やフリック操作）をタッチスクリーン４５に入力することにより、他のレコード画像を表示部４５２に表示させることができる。
一例として、レコード画像７４２Ａ～７４２Ｃは、それぞれ、モーション名７４３Ａ～７４３Ｃ、モーション画像７４４Ａ～７４４Ｃ、および、ＵＩ画像７４５Ａ～７４５Ｃを含む。以降、レコード画像７４２Ａ～７４２Ｃ、モーション名７４３Ａ～７４３Ｃ、モーション画像７４４Ａ～７４４Ｃ、および、ＵＩ画像７４５Ａ～７４５Ｃについて、区別する必要が無い場合、それぞれ、「レコード画像７４３２」、「モーション名７４３」、「モーション画像７４４」、「ＵＩ画像７４５」と記載する。
モーション名７４３は、モーションリスト４２２に格納されているモーションを識別する情報である。モーション画像７４４は、モーションリスト４２２において、各モーション名に対応付けられているモーションデータから生成される画像である。プロセッサ４０は、一例として、各モーションデータにおける最初の姿勢をとるアバターオブジェクト６１０の画像を、モーション画像７４４とてレコード画像７４２に含める。モーション画像７４４は、プレイヤによる所定の操作（例えば、モーション画像７４４に対するタップ操作）を受け付けるＵＩ画像であってもよい。プロセッサ４０は、該所定の操作を受け付けた場合、モーションデータに基づいてアバターオブジェクト６１０が動作するモーション動画を再生してもよい。プロセッサ４０は、モーション動画が終了すると、自動的にモーションリスト画面７４１を再表示してもよい。
なお、レコード画像７４２は、モーション画像７４４に代えて、例えば、「モーション再生」とのテキストを含むＵＩ画像を含んでもよい。
ステップＳ６６において、プロセッサ４０は、操作受付部４１３として、モーションを選択する第３操作を受け付ける。第３操作は、一例として、ＵＩ画像７４５へのタップ操作であってもよい。つまり、ＵＩ画像７４５は、各レコード画像７４２に対応するモーションデータを選択する操作を受け付ける。第３操作を受け付けたことにより、プロセッサ４０は、モーション特定部４１５として、プレイヤが選択したモーションデータを特定する。
ステップＳ６７において、プロセッサ４０は、表示制御部４１２および音声受付部４１４として、アバターオブジェクト６１０が、選択されたモーションデータに基づき動作するモーション動画を再生しながら、プレイヤの音声入力を受け付ける。
図２０は、プレイヤ４による音声入力の一具体例を示す図である。図２０に示すように、プレイヤ４は、モーション動画８１０Ａを再生しながら、発話音声８２０Ａを入力している。この発話音声８２０Ａは、ユーザ名が「ＡＡＡＡＡ」であるユーザ３（以下、ユーザ３Ａ）宛の発話音声である。つまり、図２０の例において、プレイヤ４は、ステップＳ６４にて、ユーザ３Ａ（第１ユーザ）を選択し、該ユーザ３Ａ宛の動作指図データを作成している。なお、ユーザ３Ａが使用するユーザ端末１００は、ユーザ端末１００Ａであるとする。
発話音声８２０Ａは、ユーザ３Ａ宛の発話音声であるため、該ユーザ３Ａがアバターオブジェクト６１０（換言すれば、プレイヤ４）に対して行った支援の内容に基づく発話音声となっている。具体的には、ユーザ３Ａは、１０Ｆというステージでのボス戦において、マガジンを投入し、その投入されたマガジンの銃弾でアバターオブジェクト６１０がボスに勝利している。このため、発話音声８２０Ａは、「ボス戦でマガジンをプレゼントしてくれてありがとう！タイミングも完璧だったね！ＡＡＡＡＡさんのおかげでクリアできたよ！」という内容である。このように、発話音声は、ユーザ３がゲームにおいて行った支援の内容と、ユーザ３への感謝とを含むものであることが好ましい。
ある局面において、プレイヤ４は、音声入力を開始する前、すなわち、第３操作を配信端末４００へ入力する前に、ユーザ３宛の発話内容を作成する。別の局面において、ユーザ３宛の発話内容は、プロセッサ４０が自動生成してもよい。また、プロセッサ４０は、第２操作によって選択されたユーザ３に対応付けられたタグを、モーション動画８１０Ａに重畳して表示させてもよい。
プロセッサ４０は、受け付けた音声を音声データに変換する。ステップＳ６８において、プロセッサ４０は、動作指図データ生成部４１６として、該音声データと、選択されたモーションのモーションデータとを含む動作指図データを生成する。
ステップＳ６９において、プロセッサ４０は、通信制御部４１１として、生成した動作指図データを選択されたユーザ３（図２０の例ではユーザ３Ａ）のユーザ端末１００（第１コンピュータ）に配信する。図２１は、配信端末４００に表示される画面のさらなる別の具体例を示す図である。プロセッサ４０は、ステップＳ６８の実行後、表示制御部４１２として、配信画面を表示部４５２に表示させる。配信画面は、一例として、図２１（Ａ）に示す配信画面７５１であってもよい。配信画面７５１は、ＵＩ画像７５２、および、モーション画像７５３Ａを含む。また、配信画面７５１は、図２１（Ａ）に示すように、動作指図データの配信先のユーザを示す情報を含むものであってもよい。
ＵＩ画像７５２は、動作指図データを選択されたユーザ３へ配信するための操作を受け付ける。該操作は、例えば、ＵＩ画像７５２へのタップ操作であってもよい。モーション画像７５３Ａは、生成した動作指図データに基づく動画、すなわち、ユーザ３Ａ用に生成した動作指図データに基づく動画を再生するための操作を受け付けるＵＩ画像である。該操作は、例えば、モーション画像７５３Ａへのタップ操作であってもよい。なお、生成した動画を再生するための操作を受け付けるＵＩ画像は、モーション画像７５３Ａに限定されない。例えば、「動画再生」とのテキストを含むＵＩ画像であってもよい。プロセッサ４０は、動画が終了すると、自動的に配信画面７５１を再表示してもよい。
配信画面７５１は、音声入力の受け付けに戻るための操作を受け付けるＵＩ画像をさらに含むことが好ましい。該操作は、例えば、該ＵＩ画像へのタップ操作であってもよい。配信画面７５１が該ＵＩ画像を含むことにより、プレイヤ４は、例えば、発話する内容を間違えた場合など、音声入力に失敗した場合に、再度音声入力を行うことができる。なお、該ＵＩ画像は、モーションデータの選択に戻るための操作を受け付けるＵＩ画像であってもよい。
ＵＩ画像７５２に対するタップ操作を受け付けると、プロセッサ４０は、ユーザ３Ａを示す情報とともに、動作指図データをサーバ２００へ送信する。サーバ２００は、ユーザ３Ａを示す情報に基づいて、動作指図データの送信先のユーザ端末１００を特定し、該動作指図データを特定したユーザ端末１００（すなわち、ユーザ端末１００Ａ）へ送信する。
プロセッサ４０は、動作指図データの送信が終了した場合、一例として、図２１（Ｂ）に示す配信完了画面７６１を表示部４５２に表示させてもよい。配信完了画面７６１は、一例として、ＵＩ画像７６２および７６３を含む。また、配信完了画面７６１は、図２１（Ｂ）に示すように、動作指図データの送信が完了したことを示すテキストを含むものであってもよい。
ＵＩ画像７６２は、別のユーザ３宛の動作指図データの作成を開始するための操作を受け付ける。該操作は、例えば、ＵＩ画像７６２をタップする操作であってもよい。プロセッサ４０は、該タップ操作を受け付けると、ユーザリスト画面を、表示部４５２に再度表示させる。すなわち、該タップ操作を受け付けた場合、配信処理は、ステップＳ６３に戻る。このとき、プロセッサ４０は、配信端末４００に記憶したユーザリスト４２１に基づいて、ユーザリスト画面を生成し、表示部４５２に表示させてもよい。ＵＩ画像７６３は、アプリケーションを終了するための操作を受け付ける。該操作は、例えば、ＵＩ画像７６３をタップする操作であってもよい。該操作を受け付けると、配信処理は終了する。
図２０、図２１を参照して説明した例では、図２１（Ｃ）に示すように、配信端末４００は、ユーザ３Ａ（ユーザ名が「ＡＡＡＡＡ」のユーザ３）宛の動画の動作指図データを、ユーザ端末１００Ａのみに送信する。
図２２は、プレイヤ４による音声入力の他の具体例を示す図である。図２２に示すように、プレイヤ４は、モーション動画８１０Ｂを再生しながら、発話音声８２０Ｂを入力している。この発話音声８２０Ｂは、ユーザ名が「ＢＢＢＢＢ」であるユーザ３（以下、ユーザ３Ｂ）宛の発話音声である。つまり、図２２の例において、プレイヤ４は、ステップＳ６４にて、ユーザ３Ｂに対応するレコード画像７３２Ｂへのタップ操作を入力し、ユーザ３Ｂ宛の動作指図データを作成している。なお、ユーザ３Ｂが使用するユーザ端末１００は、ユーザ端末１００Ｂであるとする。
発話音声８２０Ｂは、ユーザ３Ｂ宛の発話音声であるため、該ユーザ３Ｂがアバターオブジェクト６１０（換言すれば、プレイヤ４）に対して行った支援の内容に基づく発話音声となっている。具体的には、ユーザ３Ｂは、３Ｆというステージのザコ敵との戦闘において、ユーザ「ＢＢＢＢＢ」が救急箱を投入し、その結果、アバターオブジェクト６１０の体力が０になる（ゲームオーバーになる）寸前で体力が回復している。このため、発話音声８２０Ｂは、「ＢＢＢＢＢさんがプレゼントしてくれた救急箱のおかげで、３Ｆでゲームオーバーにならずにすんだよ。本当にありがとう！」という内容である。
図２３は、配信端末４００に表示される画面のさらなる別の具体例を示す図である。図２３（Ａ）に示す配信画面７５１は、ＵＩ画像７５２、および、モーション画像７５３Ｂを含む。モーション画像７５３Ｂは、タップ操作を受け付けると、ユーザ３Ｂ用に生成した動作指図データに基づく動画を再生する。
ＵＩ画像７５２に対するタップ操作を受け付けると、プロセッサ４０は、ユーザ３Ｂを示す情報とともに、動作指図データをサーバ２００へ送信する。サーバ２００は、ユーザ３Ｂを示す情報に基づいて、動作指図データの送信先のユーザ端末１００を特定し、該動作指図データを特定したユーザ端末１００（すなわち、ユーザ端末１００Ｂ）へ送信する。
図２２、図２３を参照して説明した例では、図２３（Ｃ）に示すように、配信端末４００は、ユーザ３Ｂ（ユーザ名が「ＢＢＢＢＢ」のユーザ３）宛の動画の動作指図データを、ユーザ端末１００Ｂのみに送信する。
以上のように、動作指図データに含まれる音声データに基づく音声の内容は、ユーザ３が直近のゲームへの参加において、プレイヤ４に対して行った支援の内容に基づくものとなる。該支援の内容はユーザ３ごとに異なるため、音声の内容は、ユーザ３ごとに異なる内容となる。つまり、ゲームの終了後、ゲームに参加したユーザ３の少なくとも一部のユーザ端末１００には、それぞれ異なる内容の音声を含む動作指図データが送信される。
また、図２２の例におけるアバターオブジェクト６１０のモーションは、図２０の例におけるモーションと異なる。つまり、プレイヤ４は、ユーザ３Ｂ宛の動作指図データ生成において、ユーザ３Ａ宛の動作指図データ生成時と異なるモーションデータを選択している。具体的には、プレイヤ４は、ステップＳ６６において、レコード画像７４２Ｂに対応するモーションデータを選択する、ＵＩ画像７４５Ｂへのタップ操作を入力している。このように、プレイヤ４は、動作指図データに含まれるモーションデータを、ユーザ３毎に異ならせることができる。
そして、ユーザ３毎に異なる内容の音声データと、ユーザ３毎に選択されたモーションデータとを含む、ユーザ３毎の動作指図データは、各ユーザ３のユーザ端末１００のみに送信される。換言すれば、ユーザ端末１００毎にユニーク（一意）の動作指図データが、選択されたユーザ３のユーザ端末１００の各々に送信される。
図２４は、ゲームプレイ端末３００からユーザ端末１００へのゲーム進行情報の送信の概要を示す図である。ユーザ端末１００における動画再生のための動作指図データが、ユーザ端末１００毎にユニークである一方、図２４に示すように、ゲーム実行中に、ゲームに参加している全てのユーザ３のユーザ端末１００に送信されるゲーム進行情報は、各ユーザ端末１００の間で共通である。すなわち、ゲーム進行情報に含まれる動作指図データもまた、各ユーザ端末１００の間で共通である。このように、動画再生のための動作指図データと、ゲームを進行させるための動作指図データとは、ユーザ端末１００間での同異、および、送信先といった観点で異なるデータであると言える。
（ユーザ端末１００における動画再生処理）
図２５は、ユーザ端末１００で実行される動画再生処理の流れの一例を示すフローチャートである。
ステップＳ７１において、プロセッサ１０は、動画再生部１１７として、動作指図データを受信する。ステップＳ７２において、プロセッサ１０は、動画再生部１１７として、動作指図データの受信をユーザ３へ通知する。プロセッサ１０は、一例として、通知画像の表示部１５２への表示、スピーカ（不図示）からの通知音声の再生、ＬＥＤ（light-emitting diode）などで構成される点灯部（不図示）の点灯または点滅の少なくともいずれかにより、動作指図データの受信をユーザ３へ通知する。
ステップＳ７３において、プロセッサ１０は、操作受付部１１１として、動画を再生するための第１再生操作を受け付ける。第１再生操作は、一例として、通知画像をタップする操作であってもよい。ステップＳ７４において、プロセッサ１０は、動画再生部１１７として、動作指図データをレンダリングし、動画を再生する。プロセッサ１０は、一例として、本ゲームをプレイするためのアプリケーションを起動し、動画を再生してもよいし、該アプリケーションとは別の、動画再生用のアプリケーションを起動し、動画を再生してもよい。以降、該動画を、「ありがとう動画」と記載する。
図２６は、ありがとう動画の再生の一具体例を示す図である。具体的には、ユーザ３Ａのユーザ端末１００における、ありがとう動画の再生の一例を示す図である。該ユーザ端末１００において再生されたありがとう動画９１０Ａにおいて、アバターオブジェクト６１０は、或るモーションを実行しながら、音声９２０Ａを発話している。換言すれば、プロセッサ１０は、或るモーションを実行するアバターオブジェクト６１０を含むありがとう動画９１０Ａを再生しながら、音声９２０Ａをスピーカ（不図示）から出力させている。
ありがとう動画９１０Ａにおけるモーションは、ユーザ３Ａ宛の動作指図データの生成において、プレイヤ４が選択したモーションデータに基づくものであり、音声９２０Ａは、該動作指図データの生成において、プレイヤ４が入力した発話音声８２０Ａから生成された音声データに基づくものである。つまり、音声９２０Ａは、ユーザ３Ａがゲームにおいて行った支援の内容と、該支援に対する感謝とを含む音声である。このように、ユーザ３Ａは、第１再生操作の入力により、自身がゲームにおいて行った支援の内容と、該支援に対する感謝とを、アバターオブジェクト６１０が発話するありがとう動画を視聴することができる。
ユーザ端末１００は、一例として、ありがとう動画９１０Ａの再生が終了した後、少なくとも１つのＵＩ画像をタッチスクリーン１５に表示させてもよい。該ＵＩ画像は、例えば、ありがとう動画９１０Ａをもう一度再生するための操作を受け付けるＵＩ画像であってもよいし、別の画面に遷移するための操作を受け付けるＵＩ画像であってもよいし、アプリケーションを終了するための操作を受け付けるＵＩ画像であってもよい。
また、ユーザ端末１００は、一例として、ありがとう動画９１０Ａの再生中に、少なくとも１つのＵＩ画像をタッチスクリーン１５に表示させてもよい。該ＵＩ画像は、例えば、再生中のありがとう動画９１０Ａを一時的に停止させたり、終了させたり、再生する場面を変更させたりする操作をそれぞれ受け付ける、複数のＵＩ画像であってもよい。
なお、ありがとう動画９１０Ａの再生中、および、ありがとう動画９１０Ａの再生が狩猟した後に表示されるこれらのＵＩ画像には、アバターオブジェクト６１０に対する返答を行うためのＵＩ画像は含まれない。すなわち、本実施形態に係るありがとう動画９１０Ａにおいては、アバターオブジェクト６１０に対する返答を行うための手段が備えられていない。
図２７は、ありがとう動画の再生の他の具体例を示す図である。具体的には、ユーザ３Ｂのユーザ端末１００における、ありがとう動画の再生の例を示す図である。該ユーザ端末１００において再生されたありがとう動画９１０Ｂにおいて、アバターオブジェクト６１０は、或るモーションを実行しながら、音声９２０Ｂを発話している。換言すれば、プロセッサ１０は、或るモーションを実行するアバターオブジェクト６１０を含むありがとう動画９１０Ｂを再生しながら、音声９２０Ｂをスピーカ（不図示）から出力させている。
ありがとう動画９１０Ｂにおけるモーションは、ユーザ３Ｂ宛の動作指図データの生成において、プレイヤ４が選択したモーションデータに基づくものであり、音声９２０Ｂは、該動作指図データの生成において、プレイヤ４が入力した発話音声８２０Ｂから生成された音声データに基づくものである。このため、図２７の例において、アバターオブジェクト６１０が行っているモーションは、図２６の例のモーションとは異なる。また、音声９２０Ｂは、ユーザ３Ｂがゲームにおいて行った支援の内容と、該支援に対する感謝とを含む音声である。このため、図２７の例において、音声９２０Ｂの内容は、図２６の例における音声９２０Ａの内容とは異なる。
このように、ゲームの終了後に、ゲームに参加したユーザ３の少なくとも一部のユーザ端末１００が受信するありがとう動画は、ユーザ３毎にアバターオブジェクト６１０の発話内容が異なる動画である。
なお、プロセッサ１０は、次回のゲームへの参加を促す内容を含むＵＩ画像９３０を、動画９１０に重畳させて表示させてもよい。ＵＩ画像９３０は、動作指図データとともに配信されてもよいし、ゲーム情報１３２として、ユーザ端末１００が記憶していてもよい。
本ゲームでは、ゲームプレイ端末３００は、配信コンテンツであるゲーム進行情報をサーバ２００を介して複数のユーザ端末１００に配信する。当該複数のユーザ端末１００の各々は、当該ゲーム進行情報に基づいて配信コンテンツをタッチスクリーン１５に表示する。具体的には、ユーザ端末１００のメモリ１１には、アバターオブジェクト６１０を含むオブジェクトを表示するための複数種類のオブジェクトデータが予め記憶されている。ユーザ端末１００は、ゲームプレイ端末３００からゲーム進行情報を受信したとき、当該ゲーム進行情報から動作指図データを特定し、当該動作指図データを解析（レンダリング）することにより、オブジェクトの種類・位置・姿勢等を特定する。また、ユーザ端末１００は、当該解析結果に基づき、メモリ１１に記憶されているオブジェクトデータを用いて、アバターオブジェクト６１０を含むオブジェクトを仮想空間６００Ｂに配置する。タッチスクリーン１５には、現在の仮想カメラ６２０Ｂの位置および向きに応じた視界領域６４０Ｂの視界画像６６０が表示される。なお、アバターオブジェクト６１０を含むオブジェクトは、ゲームプレイ端末３００により規定された仮想空間６００Ａにも配置され、当該オブジェクトの位置・姿勢等は、仮想空間６００Ａおよび６００Ｂの間で一致する。
配信コンテンツには、アバターオブジェクト６１０として表示されるキャラクタが異なる複数種類のコンテンツが設けられている。複数種類のコンテンツには、例えば、１回あるいは不定期に配信される第１配信コンテンツや、毎日あるいは所定曜日の所定時間において定期的に配信される第２配信コンテンツなどが含まれる。
第１配信コンテンツおよび第２配信コンテンツは、それぞれ、例えば主役あるいは進行役として登場するキャラクタや、内容・進行具合い・その他に登場するキャラクタ、コンテンツ中に行われるゲームの種類等が異なる複数種類のコンテンツが設けられている。また、第２配信コンテンツは、毎回、種類に応じた同じキャラクタ（例えば、コンテンツａに応じてキャラクタａ）が登場するとともにキャラクタ背景（例えば花輪オブジェクト等）が表示されるものの、同じ種類のコンテンツ（例えば、コンテンツａ）であっても毎回内容等が異なる。
アバターオブジェクト６１０として表示されるキャラクタには、キャラクタの種類毎に、衣服やアクセサリー等の装飾オブジェクト（テクスチャ画像）が関連付けられている。以下では、当該装飾オブジェクトの表示態様を特定する具体的な手法を例示する。
配信コンテンツには、アバターオブジェクト６１０として第１のキャラクタが仮想空間６００Ｂに登場する第１キャラクタコンテンツや、アバターオブジェクト６１０として第２のキャラクタが仮想空間６００Ｂに登場する第２キャラクタコンテンツなどが含まれる。第１キャラクタコンテンツを配信する場合、動作指図データは、第１のキャラクタを含むオブジェクトが配置された仮想空間６００Ｂの映像を表示可能にするためのデータ（第１の表示用データ）である。一方、第２キャラクタコンテンツを配信する場合、動作指図データは、第２のキャラクタを含むオブジェクトが配置された仮想空間６００Ｂの映像を表示可能にするためのデータ（第２の表示用データ）である。
第１のキャラクタおよび第２のキャラクタのいずれにおいても、上半身や、下半身、手、足、首元、耳たぶ、目元等の各部位には、衣服やアクセサリー（ネックレス、イヤリング、眼鏡等）に相当する装飾オブジェクトが予め関連付けられている。関連付ける装飾オブジェクトの種類や部位は、キャラクタの種類に応じて異なるように定められている。
本実施形態では、第１のキャラクタには、シャツに相当する第１のオブジェクトと、当該第１のオブジェクト（シャツ）の上に羽織ることで当該第１のオブジェクトの一部を覆う第３のオブジェクト（ブラウス）とを含む装飾オブジェクトが関連付けられている。一方、第２のキャラクタには、第１のオブジェクトと同種の第２のオブジェクト（デザイン等が異なるシャツ）を含む装飾オブジェクトが関連付けられている。
ここで、第１のキャラクタに関連付けられている第１のオブジェクトの表示態様については、配信開始時などの配信毎に、ゲームプレイ端末３００側において所定のルール（例えば乱数抽選）にしたがって決定される。ゲームプレイ端末３００は、当該表示態様を特定可能な表示態様情報を含むゲーム進行情報をユーザ端末１００に対して配信し、ユーザ端末１００は、当該表示態様情報に基づいて第１のオブジェクトの表示態様を特定して設定する。一方、第１のキャラクタに関連付けられている第１のオブジェクト以外の装飾オブジェクトの表示態様は、第３のオブジェクトの表示態様も含めて、予め固定されている。ユーザ端末１００は、第１のオブジェクト以外の装飾オブジェクトの表示態様を固定の表示態様に設定する。他方、第２のキャラクタに関連付けられている装飾オブジェクトの表示態様は、第１のオブジェクトと同種の第２のオブジェクトの表示態様も含めて、予め固定されている。ユーザ端末１００は、当該装飾オブジェクトの表示態様を固定の表示態様に設定する。
このため、第１のキャラクタに関連付けられている装飾オブジェクトのうち第１のオブジェクトの表示態様は、配信毎に変更される。ここで、表示態様の変更は、テクスチャ画像を変更することを含み、第１のオブジェクトのテクスチャ画像が、配信毎に変更される。一方、第１のキャラクタに関連付けられている第１のオブジェクト以外の装飾オブジェクトと、第２のキャラクタに関連付けられている装飾オブジェクトとについては、表示態様は、配信の回数目（配信期間）にかかわらず固定される。
表示態様とは、装飾オブジェクトを表示部１５２に表示する際の態様である。本実施形態では、第１のオブジェクト（シャツ）について決定する表示態様が当該第１のオブジェクトの表示色（即ち、シャツの色）である例を示す。このため、第１のキャラクタに関連付けられているシャツ、ブラウス等の装飾オブジェクトのうち、シャツの色が、複数色（白、黒、赤、緑、青、紫等）のうちから特定される。
本実施形態において、定期的に配信される第２配信コンテンツには、例えば、第１のオブジェクトの表示態様が毎回変更される第１のキャラクタが登場する第１キャラクタコンテンツが含まれる。また、本実施形態では、第１のキャラクタとして、例えば、オフィスレディーの様相を呈するキャラクタを例示する。ただし、第１のキャラクタはこれに限るものではなく、例えばキャラクタに設定されている年齢が所定年齢（１８歳）未満となるキャラクタ（例えば高校生キャラクタ）や、応援団の様相を呈するキャラクタ、女子大学生の様相を呈するキャラクタなどであってもよい。
コンテンツは、予め定められている配信期間にゲームプレイ端末３００から配信される。コンテンツの配信を開始する際、ゲームプレイ端末３００のプロセッサ３０は、図２８（Ａ）に示す表示態様制御処理を実行する。また、ユーザ端末１００側におけるコンテンツの視聴は、予め定められているコンテンツアイコンに対するユーザからのタッチ操作などにより開始される。タッチ操作によりコンテンツの視聴を開始する際、ユーザ端末１００側のプロセッサ１０は、図２８（Ｂ）に示す表示態様設定処理を実行する。
図２８（Ａ）を参照して、ゲームプレイ端末３００は、ステップＳ８１において、現在のタイミングがコンテンツ毎に予め定められているコンテンツ配信の開始タイミングと一致するか否かを、メモリ３１に記憶されている配信スケジュールに基づいて判定する。即ち、メモリ３１には、コンテンツを配信する時間帯や、当該コンテンツの種類（登場するキャラクタ、すなわち第１キャラクタコンテンツであるか、第２キャラクタコンテンツであるかなど）などの情報が、配信スケジュールとして記憶されている。ステップＳ８１では、当該配信スケジュールに基づいて一致するか否かを判定する。
当該開始タイミングと一致すると判定されたときは、ステップＳ８２に進む。ステップＳ８２では、今回配信するコンテンツが第１キャラクタコンテンツであるか否かを、当該配信スケジュールに基づいて判定する。当該第１キャラクタコンテンツであると判定されたときは、ステップＳ８３に進む。
ステップＳ８３では、今回の配信期間において第１のキャラクタに関連付けられる装飾オブジェクトのうち第１のオブジェクトの表示態様（即ち、シャツの色）を、複数種類の表示態様（白、黒、赤、緑、青、紫等）のうちから乱数抽選により（ランダムで）決定する。より具体的に、第１キャラクタコンテンツは、前述したとおり、定期的に配信される第２配信コンテンツであり、ステップＳ８３においては、第１キャラクタコンテンツの前回配信時に決定された前回配信時における表示態様とは異なる表示態様を、乱数抽選により決定する。これにより、第１のオブジェクトの表示態様（即ち、シャツの色）は、前回配信時と異なる表示態様に変更される。
ステップＳ８４では、ゲーム進行情報に含まれる情報として、ステップＳ８３で決定された表示態様を特定可能な表示態様情報（第１のデータ）を設定する。第１キャラクタコンテンツが配信される場合には、演者のモーション等に応じた情報であってステップＳ８３の決定に応じた表示態様情報を含むゲーム進行情報が所定時間（例えば１／６０秒）毎に配信される。
ステップＳ８４の処理が完了したとき、ステップＳ８１において現在のタイミングがコンテンツ配信の開始タイミングと一致すると判定されなかったとき、またはステップＳ８２において今回配信するコンテンツが第１キャラクタコンテンツであると判定されなかったときは、リターンする。第１キャラクタコンテンツ以外のコンテンツが配信される場合には、演者のモーション等に応じたゲーム進行情報が所定時間（例えば１／６０秒）毎に配信される。
図２８（Ｂ）を参照して、ユーザ端末１００は、ステップＳ９１において、コンテンツの視聴開始操作が行われたか否かを、タッチスクリーン１５に対する入力操作に基づいて判定する。当該視聴開始操作が行われたと判定されなかったときはリターンし、当該視聴開始操作が行われたと判定されたときはステップＳ９２に進む。ステップＳ９２では、ゲームプレイ端末３００から受信したゲーム進行情報が表示態様情報を含んでいるか否かを、当該ゲーム進行情報を解析することにより判定する。
当該表示態様情報を含んでいると判定されると、ステップＳ９３に進み、今回の配信期間における第１のオブジェクトの表示態様を当該表示態様情報に基づいて設定する。即ち、今回の配信期間における装飾オブジェクトの表示態様のうち、第１のオブジェクトの表示態様（即ち、シャツの色）を、当該表示態様情報により特定された表示態様（白、黒、赤、緑、青、紫等のうちのいずれか）に設定する。ステップＳ９３の処理が完了したとき、またはステップＳ９２において表示態様情報を含むゲーム進行情報を受信したと判定されなかったときは、ステップＳ９４に進む。
ステップＳ９４では、第１のキャラクタに関連付けられている装飾オブジェクトのうち第１のオブジェクト以外のオブジェクトの表示態様として、固定の表示態様を設定する。また、第１のキャラクタ以外のキャラクタが登場するコンテンツを視聴する場合、ステップＳ９４では、第１のキャラクタとは異なるキャラクタ（例えば第２のキャラクタなど）に関連付けられている装飾オブジェクト（シャツを含む）の表示態様として、固定の表示態様を設定する。即ち、第１キャラクタコンテンツが配信される場合には、第１のキャラクタに関連付けられている装飾オブジェクトのうち第１のオブジェクト（シャツ）以外の装飾オブジェクト（ブラウス、ズボン、靴等）を、固定の表示態様（固定の色）に設定する。一方、第１キャラクタコンテンツとは異なるコンテンツ（例えば第２キャラクタコンテンツ）が配信される場合には、第１のキャラクタとは異なるキャラクタ（例えば第２のキャラクタなど）に関連付けられている衣装オブジェクトの全てを、固定の表示態様に設定する。
ステップＳ９３およびＳ９４の処理により、仮想空間６００Ｂ内において動作させるアバターオブジェクト６１０のモデルデータが生成される。コンテンツ視聴中においては、当該モデルデータに基づくアバターオブジェクト６１０が、ゲームプレイ端末３００から配信されたゲーム進行情報に含まれる動作指図データに基づいて動作する。ステップＳ９４の処理が完了すると、リターンする。
図２９は、第１キャラクタコンテンツの視聴中における第１のキャラクタを含むオブジェクトの表示例を示す。図２９においては、第１のキャラクタの背後に、花輪を想起させる花輪オブジェクトが配置されている。第１のキャラクタは、動作指図データに基づいて動作する。
第１のキャラクタに関連付けられる装飾オブジェクトとしては、上半身に着用するシャツ、当該シャツの上に羽織ったブラウス、下半身着用するズボン、足に着用する靴などが定められている。また、第１のオブジェクトであるシャツ以外の装飾オブジェクトについては、表示態様としての色が一律に定められている。例えば、ブラウスおよび靴については白色が定められており、ズボンについてはグレー色が定められている。
一方、第１のオブジェクトであるシャツについては、図２８のステップＳ８３で示したとおり、コンテンツ配信毎に前回配信時とは異なる色が設定される。当該シャツの表示態様として、第１キャラクタコンテンツを対象とするＮ回目のライブ配信においては、図２９（Ａ）に示すように白色が設定されている。また、第１キャラクタコンテンツを対象とするＮ＋１回目のライブ配信においては、図２９（Ｂ）に示すようにグレー色が設定され、第１キャラクタコンテンツを対象とするＮ＋２回目のライブ配信においては、図２９（Ｃ）に示すように青色（図中の縞模様は青色であることを示す）が設定されている。このように、第１キャラクタコンテンツについては、同じ第１のキャラクタが、コンテンツ配信毎に異なる色のシャツを着用して登場する。
＜本実施形態の効果＞
本実施形態によれば、演者の動作に連動して動く第１のキャラクタを含む仮想空間６００Ｂの映像は、ゲームプレイ端末３００から配信された動作指図データ（第１の表示用データ）に基づいて表示される。ここで、第１のキャラクタには、予め定められた第１のオブジェクト（シャツ）が関連付けられており、第１のオブジェクトの表示態様（シャツの色）は、所定のルールで変更される。これにより、第１のオブジェクトの表示態様を自発的に変化させることができ、その結果、第１のキャラクタの実在感をユーザに抱かせることができる。
また、本実施形態によれば、演者の動作に連動して動く第２のキャラクタを含む仮想空間６００Ｂの映像は、ゲームプレイ端末３００から配信された動作指図データ（第２の表示用データ）に基づいて表示される。ここで、第２のキャラクタには、第１のオブジェクトと同種の第２のオブジェクト（シャツ）が関連付けられており、第２のオブジェクトの表示態様（シャツの色）は、固定されている。これにより、第１のキャラクタの実在感を際立たせることができる。
さらに、本実施形態によれば、第１のオブジェクトの表示態様は、配信期間毎に、前回の配信期間における表示態様とは異なる表示態様に変更される。これにより、配信毎に第１のオブジェクトの表示態様を意図的に変化させているといった印象とともに、今回の配信期間においてはどのような表示態様で登場するのかといった面白みをユーザに提供でき、当該配信の視聴率を向上させることができる。
また、本実施形態によれば、第１の表示用データは、ゲームプレイ端末３００から配信されるデータであって、演者の入力したモーションに対応するモーションデータを含む。仮想空間６００Ｂ内で第１のキャラクタが動作する映像は、当該モーションデータに基づいて当該仮想空間６００Ｂ内において第１のキャラクタをリアルタイムに動作させることにより表示される。これにより、配信されるデータ量を抑制することが可能となる。
さらに、本実施形態によれば、所定のルールで変更された第１のオブジェクトの表示態様は、ゲームプレイ端末３００から配信される表示態様情報（第１のデータ）により特定される。第１のオブジェクトの表示態様は、当該第１のデータに基づいて設定される。これにより、複数のユーザ端末１００における第１のオブジェクトの表示態様をゲームプレイ端末３００側で一律に制御することができる。
また、本実施形態によれば、第１のキャラクタには、予め定められた第３のオブジェクト（ブラウス）が関連付けられている。当該第３のオブジェクトは、第１のオブジェクトの少なくとも一部を覆うオブジェクトである。これにより、第１のオブジェクトが表示される具合を、第３のオブジェクトにより制御することが可能となる。
＜変形例＞
以上説明した実施形態の変形例などを以下に列挙する。
（１）上記実施形態においては、仮想空間６００Ａと同じ仮想空間６００Ｂ内においてアバターオブジェクト６１０等を動作させ、仮想空間６００Ｂに配置されている仮想カメラ６２０Ｂであってユーザ端末１００のタッチスクリーン１５に対するスワイプ操作に応じて変化する仮想カメラ６２０Ｂの位置、向き、および傾きに応じた視界領域６４０Ｂの視界画像６６０をユーザ端末１００のタッチスクリーン１５に表示する通常視聴モードについて説明した。
しかし、アバターオブジェクト６１０等を動作させる空間は、仮想空間に限らず、現実空間であってもよい。現実空間としては、例えば、カメラ（撮像部）１７により撮影されて取得した取得画像により特定される空間であってもよい。具体的には、例えばＡＲ視聴モードに切り替えられると、ユーザ端末１００においては、カメラ１７により撮影されて取得した取得画像を解析することにより、床面等の平面部が特定され、例えばアバターオブジェクト６１０が少なくとも配置されているＡＲ用仮想空間が当該平面部の所定位置（例えば平面部の中心位置）に配置される。また、この場合における仮想カメラ６２０Ｂは、取得画像を撮影したときのカメラ１７の撮影方向と同じ方向からＡＲ用仮想空間を捉える位置に配置される。この結果、カメラ１７からの取得画像に対して仮想カメラ６２０Ｂからの視界画像を重畳させてなる拡張現実空間内の画像が表示部１５２に表示される。さらに、ユーザ端末１００は、カメラ１７の実際の位置、向き、傾き等を検出し、当該位置、向き、傾き等に応じて仮想カメラ６２０Ｂの位置、向き、傾き等を変更する。これにより、取得画像は、カメラ１７の位置、向き、傾き等の変更に応じて変化させることができる。
ＡＲ視聴モードが選択されているユーザ端末１００においては、カメラ１７から取得した取得画像に対してアバターオブジェクト６１０を含むオブジェクトを配置させてなる拡張現実空間内において、アバターオブジェクト６１０等が動作する。これにより、ユーザの目の前の現実空間においてアバターオブジェクト６１０等が実際に動作しているかのような印象（臨場感）をユーザに抱かせることができる。
図３０は、帽子を着用した女性を模したキャラクタ（以下、第１’のキャラクタと称する）が仮想空間６００Ｂに登場する例を示す。第１’のキャラクタには、当該第１’のキャラクタが全身に羽織るワンピース、頭部に被る帽子、耳に付けるピアスなどの装飾オブジェクトが関連付けられている。図３０では、第１’のキャラクタに関連付けられている装飾オブジェクトのうちのピアスが、第１のオブジェクトに相当する。このため、当該ピアスの表示態様は、図２８のステップＳ８３により、配信毎に異なる表示態様に設定される。なお、定期的に配信される第２配信コンテンツには、例えば、第１のオブジェクトの表示態様が毎回変更される第１’のキャラクタが登場するキャラクタコンテンツが含まれる。
まず、図３０（Ａ）を参照して、通常視聴モードについて説明する。図３０（Ａ－１）は、第１’のキャラクタが正面を向いて右手の人差し指を前に掲げているときの表示例である。図３０（Ａ－２）は、第１’のキャラクタが右斜め前を向いて右手の人差し指で前方を指しているときの表示例である。当該通常視聴モードでは、スワイプ操作に応じて仮想カメラ６２０Ｂの位置、向き、および傾きが変更される。ただし、ピアスは第３のオブジェクトに相当する帽子により覆われており、どのようにスワイプ操作を行ったとしても、ピアスが見える位置（例えば、後述する図３０（Ｂ－３）や図３０（Ｂ－４）などを表示可能とする位置）に仮想カメラ３２０Ｂを移動させることはできない。通常視聴モードでは、図３０（Ａ）に示すように、ＡＲ視聴モードに切り替えるためのＡＲモード移行用アイコン１８２が通常表示される。通常視聴モードにおいて当該ＡＲモード移行用アイコン１８２に対するタッチ操作等が検出されることにより、ＡＲ視聴モードに切り替えることができる。
図３０（Ｂ）を参照して、ＡＲ視聴モードについて説明する。図３０（Ｂ－１）および図３０（Ｂ－２）は、各々、図３０（Ａ－１）および図３０（Ａ－２）と同じタイミングにおけるＡＲ視聴モード中の表示例を示している。当該ＡＲ視聴モードでは、カメラ１７により撮影されて取得された取得画像に対して第１’のキャラクタが配置されている拡張現実空間の画像のうち、仮想カメラ６２０Ｂからの画像が、表示部１５２に表示される。当該第１’のキャラクタは、ゲームプレイ端末３００から配信された動作指図データに基づいて動作する。また、仮想カメラ６２０Ｂの位置、向き、傾き等は、カメラ１７の実際の位置、向き、傾き等に応じて変更される。なお、ＡＲ視聴モードでは、ＡＲモード移行用アイコン１８２が強調態様で表示（図３０（Ｂ）では白黒反転表示）されることにより、ＡＲ視聴モード中である旨が報知される。
このため、第１’のキャラクタの左方の斜め下あたりから左耳を見上げるようにカメラ１７の位置・向き等を調整すれば、ピアスが見える位置に仮想カメラ３２０Ｂが移動し、ピアスの画像が表示部１５２に表示される（図３０（Ｂ）の（Ｂ－３）参照）。即ち、ピアスの表示態様は、ＡＲ視聴モードを選択し、カメラ１７の位置・向き等を調整することにより、確認することができる。これにより、ＡＲ視聴モードで視聴することに対するモチベーションをユーザに持たせることができ、ひいては好趣を向上させることができる。なお、第１’のキャラクタの足元から当該第１’のキャラクタの左半身を見上げるようにカメラ１７の位置・向き等を調整すれば、図３０（Ｂ）の（Ｂ－４）に示すように、足を含む左半身の画像が表示部１５２に表示される。
このようにＡＲ視聴モードにおいては、カメラ１７の位置・向き等を調整することにより、第１’のキャラクタに関連付けられる第１のオブジェクトであるピアスを表示可能な位置（例えば、第１’のキャラクタの首元から見上げるような位置、第１’のキャラクタの足元から見上げるような位置など）に仮想カメラ６２０Ｂを移動させることができる。その結果、第１のオブジェクトであるピアスを表示させることができ、ユーザは当該ピアスの表示態様を確認できる。一方、通常視聴モードにおいては、前述したように、どのように操作を行ったとしても、第１’のキャラクタに関連付けられる第１のオブジェクトであるピアスを表示可能な位置（例えば、第１’のキャラクタの首元から見上げるような位置、第１’のキャラクタの足元から見上げるような位置など）に仮想カメラ６２０Ｂを移動させることができない。その結果、第１のオブジェクトであるピアスを表示させることができず、ユーザは当該ピアスの表示態様を確認できない。
ＡＲ視聴モードでは、強調態様で表示されているＡＲモード移行用アイコン１８２に対するタッチ操作等が検出されることにより通常視聴モードに切り替えることができる。なお、ＡＲ視聴モードでは、ＡＲモード移行用アイコン１８２を強調態様で表示するとともに、ＡＲモードリセット用アイコンを通常表示するようにし、当該ＡＲモードリセット用アイコンへのタッチに応じてＡＲモードをリセット（再起動）するようにしてもよい。ＡＲモードがリセットされると、床面等の平面部が再度特定され、当該平面部の所定位置にＡＲ用仮想空間６００Ｃ内の視界画像が配置される。
なお、ＡＲ視聴モードにおいて第１のオブジェクトが表示されている状態で、強調態様で表示されているＡＲモード移行用アイコン１８２へのタップ操作が行われた場合、仮想カメラ６２０Ｂの視点は、予め定められている視点（例えば仮想空間６００Ｂを正面から捉える視点）に戻されるか、あるいは通常モードにおいて仮想カメラ６２０Ｂが移動可能な範囲内のうちの仮想カメラ６２０Ｂの移動量が最小となる視点に変更される。これにより、モード切替前後における視点のズレを極力低減できる。また、ＡＲ視聴モードにおいて第１のオブジェクトが表示されている状態（図３０（Ｂ－３）等）では、ＡＲモード移行用アイコン１８２を一時的に非表示とするようにしてもよい。
また、ＡＲ視聴モードでは、カメラ１７の位置、向き、および傾き等の変化に同期させて仮想カメラ６２０Ｂが制御される。しかし、仮想カメラ６２０Ｂは、ユーザからの入力操作（例えば、スワイプ操作、タッチ操作等）に応じて、位置、向き、および傾き等を制御するようにしてもよい。これにより、ユーザからの入力操作に応じて、仮想カメラ６２０Ｂの視界領域を変更でき、その結果、取得画像上に配置される視界画像を変更できる。具体的には、スワイプ操作により、取得画像上に配置されるアバターオブジェクト等（例えば、アバターオブジェクト６１０のみ、アバターオブジェクト６１０およびその他のオブジェクト、仮想空間全体）を回転させたり、移動させたりできる。これにより、例えば、ユーザ端末１００の位置や向き等を十分に調整できないような狭いスペースにおいて拡張現実空間を生成してアバターオブジェクト６１０等を動作させているときであっても、タッチスクリーン１５に対する入力操作により当該アバターオブジェクト６１０等を回転・移動させることが可能となる。
さらに、視聴モードとしては、システム１の運営者側のスイッチャの操作に基づいて仮想カメラ６２０Ｂの位置、向き、傾き等が変更されるＴＶモードを設け、ユーザの操作に応じて当該ＴＶモードに切替え可能とするようにしてもよい。ただし、当該ＴＶモードにおいては、第１のオブジェクトが見える位置に仮想カメラ３２０Ｂが移動させることができず、即ち当該第１のオブジェクトを表示部１５２に表示することができない。
（２）上記実施形態においては、リアルタイムレンダリング方式により、アバターオブジェクト６１０が動作している映像を再生するようにしている。しかし、当該映像は動画配信方式により再生するようにしてもよい。この場合、第１キャラクタコンテンツについては、所定のルールで表示態様が変更された第１のオブジェクトが、ゲームプレイ端末３００において第１のキャラクタに関連付けられ、当該第１のキャラクタが仮想空間内において動作する映像を含む動画データが、第１の表示用データとしてゲームプレイ端末３００から配信される。ユーザ端末１００のタッチスクリーン１５には、当該動画データに基づいて仮想空間内で第１のキャラクタが動作する映像が表示される。
（３）上記実施形態におけるアバターオブジェクト６１０の衣装等の表示態様は、アバターオブジェクト６１０の種類に応じて一律に定められている。しかし、アバターオブジェクト６１０の衣装等の表示態様は、例えば、ゲームの進行度合い（例えば、ゲームで勝利する毎、あるいはアイテムを投入する毎等）に応じてユーザ毎に異なり得るようにしてもよい。例えば、ゲームプレイ端末３００側から送信されるゲーム進行情報が同じであっても、アバターオブジェクト６１０の衣装を、ゲームの進行度合いに応じた衣装とするようにしてもよい。この場合、アバターオブジェクト６１０の衣装データは、各ユーザ端末１００側において予め複数種類記憶されているようにしてもよい。なお、アバターオブジェクト６１０の表示態様を異ならせる対象は、衣装に限らず、髪型、肌の色、化粧の程度等であってもよい。これにより、ゲーム進行情報を出力するゲームプレイ端末３００側の処理負担を増大させることなく、アバターオブジェクト６１０のバリエーションを増やすことができるため、ユーザを惹きつけることが可能となる。
これに替えてあるいは加えて、アバターオブジェクト６１０の表示態様は、ゲーム中においてユーザによる課金に応じて、他のユーザのユーザ端末１００において表示される表示態様と異ならせることができるようにしてもよい。また、アバターオブジェクト６１０の表示態様は、ゲームの結果に応じて更新されるユーザのランキングに応じて異なるようにしてもよい。さらに、第１キャラクタコンテンツを受信できるユーザ端末１００は、例えばゲーム中において課金額が多いユーザのユーザ端末１００のように、一部のユーザ端末１００に制限するようにしてもよい。
（４）上記実施形態においては、ステップＳ８３の処理によって、第１のオブジェクト（シャツ）の表示態様のうちの色を変更するようにしている。しかし、ステップＳ８３においては、色の替わりに、または色とともに、第１のオブジェクトの形状を変更するようにしてもよい。例えば、シャツをＶネックのものから丸首のものに変更したり、ピアスを星形のものからリング状のものに変更するようにしてもよい。また、ステップＳ８３においては、色や形状・種類等を決定するものに替えてあるいは加えて、当該第１のオブジェクト自体の表示（例えば着用させる）・非表示（着用させない）を決定するようにしてもよい。
（５）上記実施形態においては、第１のキャラクタに関連付けられている装飾オブジェクトのうちのいずれかのオブジェクト（例えば、シャツ、ピアス）を第１のオブジェクトとし、当該第１のオブジェクトの表示態様を変更するようにしている。しかし、第１のオブジェクトは、第１のキャラクタに関連付けられているオブジェクトであれば、シャツやピアスに限らず、靴下、ズボン、髪留め、手袋、帽子、下着などのオブジェクトであってもよい。また、装飾オブジェクトに限らず、例えば、第１のキャラクタ自身にかかわるオブジェクト（例えば、髪型、ネイル等）であってもよい。さらに、第１のキャラクタに関連付けられている第１のオブジェクトの表示態様を変更するとともに、第１のキャラクタの背景のオブジェクト（例えば花輪オブジェクト）の表示態様を変更するようにしてもよい。
（６）上記実施形態においては、第１のキャラクタの関連付けられている装飾オブジェクトのうち、第１のオブジェクト以外の装飾オブジェクトの表示態様は、予め固定されている。しかし、第１のオブジェクト以外の装飾オブジェクトの表示態様は、配信毎ではなく、例えば、所定回数（５回）配信される毎や、季節毎、時間帯毎等に変更するようにしてもよい。同様に、上記実施形態においては、第２のキャラクタに関連付けられている装飾オブジェクトの表示態様が予め固定されているが、当該表示態様についても、所定回数（５回）配信される毎や、季節毎、時間帯毎等に変更するようにしてもよい。
（７）上記実施形態においては、定期的に配信される第２配信コンテンツにおいて登場するキャラクタ（第１のキャラクタや第１’のキャラクタなど）に関連付けられている第１のオブジェクトの表示態様が配信毎に変更される例について説明した。しかし、不定期に配信される第１配信コンテンツにおいて登場するキャラクタに関連付けられている第１のオブジェクトの表示態様についても、前回配信時とは異なる表示態様に変更されるようにしてもよい。
＜付記＞
以上の各実施形態で説明した事項を、以下に付記する。
（付記１）：
本開示に示す一実施形態のある局面によれば、プロセッサを備える端末装置（ユーザ端末１００）において実行されるプログラムであって、前記プロセッサに、演者の動作に連動して動く第１のキャラクタ（アバターオブジェクト６１０）を含む仮想空間の映像を表示可能にするための第１の表示用データ（動作指図データ）を受信するステップ（Ｓ２６）と、前記第１の表示用データに基づいて、前記仮想空間内で前記第１のキャラクタが動作する映像を表示するステップ（Ｓ２９）と、を実行させ、前記第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、前記第１のオブジェクトの表示態様（色）は、所定のルールで変更される。
（付記２）：
（付記１）において、前記プロセッサに、演者の動作に連動して動く第２のキャラクタ（別のアバターオブジェクト６１０）を含む仮想空間の映像を表示可能にするための第２の表示用データを受信するステップ（Ｓ２６）と、前記第２の表示用データに基づいて、前記仮想空間内で前記第２のキャラクタが動作する映像を表示するステップ（Ｓ２９）と、を実行させ、前記第２のキャラクタには、前記第１のオブジェクトと同種の第２のオブジェクトのシャツ）が関連付けられており、前記第２のオブジェクトの表示態様（色）は、固定されている。
（付記３）：
（付記１）または（付記２）において、前記第１のオブジェクトの表示態様は、配信期間毎に、前回の配信期間における表示態様とは異なる表示態様に変更される。
（付記４）：
（付記１）から（付記３）のいずれかにおいて、前記第１の表示用データは、外部から配信されるデータであって、演者の入力したモーションに対応するモーションデータを含み、前記表示するステップは、前記モーションデータに基づいて前記仮想空間内において前記第１のキャラクタをリアルタイムに動作させ、前記仮想空間内で当該第１のキャラクタが動作する映像を表示する。
（付記５）：
（付記４）において、前記プロセッサに、前記所定のルールで変更された第１のオブジェクトの表示態様を特定するための第１のデータ（表示態様情報）を受信するステップ（Ｓ９２）と、前記第１のデータに基づいて前記第１のオブジェクトの表示態様を設定するステップ（Ｓ９３）を実行させる。
（付記６）：
（付記４）または（付記５）において、前記プロセッサに、視点を特定するための態様の少なくとも一部が異なる複数種類の視聴モード（通常視聴モード、ＡＲ視聴モード）のうちのいずれかに設定するステップを実行させ、前記表示するステップは、特定される視点から見た前記仮想空間の映像を表示し、前記複数種類の視聴モードのうちの第１の視聴モード（ＡＲ視聴モード）である場合には、前記第１のオブジェクトを表示する位置に視点を移動可能であり、前記第１の視聴モード以外のモードである場合には、前記第１のオブジェクトを表示する位置に視点を移動不可能である。
（付記７）：
（付記６）において、前記端末装置は、当該端末装置の位置および向きを検知する検知部と、タッチスクリーンとを備え、前記第１の視聴モードは、前記検知部により検知された位置および向きに基づいて視点を特定可能な視聴モードであり、前記複数種類の視聴モードは、前記タッチスクリーンに対するタッチ操作に基づいて視点を特定する第２の視聴モード（通常視聴モード）を含み、前記複数種類の視聴モードのうちの前記第２の視聴モードである場合には、前記第１のオブジェクトを表示する位置に視点を移動不可能である。
（付記８）：
（付記１）から（付記３）のいずれかにおいて、前記第１の表示用データは、外部から配信されるデータであって、前記所定のルールで表示態様が変更された第１のオブジェクトが関連付けられている第１のキャラクタが前記仮想空間内において動作する映像を含む動画データであり、前記表示するステップは、前記動画データに基づいて前記仮想空間内で前記第１のキャラクタが動作する映像を表示する。
（付記９）：
（付記１）から（付記８）のいずれかにおいて、前記第１のキャラクタには、予め定められた第３のオブジェクトが関連付けられており、前記第３のオブジェクトは、前記第１のオブジェクトの少なくとも一部を覆うオブジェクトである。
（付記１０）：
本開示に示す一実施形態のある局面によれば、プロセッサを備える端末装置において実行される方法であって、演者の動作に連動して動く第１のキャラクタを含む仮想空間の映像を表示可能にするための第１の表示用データを受信するステップと、前記第１の表示用データに基づいて、前記仮想空間内で前記第１のキャラクタが動作する映像を表示するステップと、を備え、前記第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、前記第１のオブジェクトの表示態様は、所定のルールで変更される。
（付記１１）：
本開示に示す一実施形態のある局面によれば、プロセッサを備える端末装置であって、演者の動作に連動して動く第１のキャラクタを含む仮想空間の映像を表示可能にするための第１の表示用データを受信し、前記第１の表示用データに基づいて、前記仮想空間内で前記第１のキャラクタが動作する映像をし、前記第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、前記第１のオブジェクトの表示態様は、所定のルールで変更される。
〔ソフトウェアによる実現例〕
ユーザ端末１００、サーバ２００、ゲームプレイ端末３００（ＨＭＤセット１０００）、および配信端末４００の制御ブロック（特に制御部１１０、２１０、３１０、４１０）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ソフトウェアによって実現してもよい。
後者の場合、ユーザ端末１００、サーバ２００、ゲームプレイ端末３００（ＨＭＤセット１０００）、および配信端末４００は、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータを備えている。このコンピュータは、例えば１つ以上のプロセッサを備えていると共に、上記プログラムを記憶したコンピュータ読み取り可能な記録媒体を備えている。そして、上記コンピュータにおいて、上記プロセッサが上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記プロセッサとしては、例えばＣＰＵ（Central Processing Unit）を用いることができる。上記記録媒体としては、「一時的でない有形の媒体」、例えば、ＲＯＭ（Read Only Memory）等の他、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムを展開するＲＡＭ（Random Access Memory）などをさらに備えていてもよい。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
１　システム、２　ネットワーク、３、３Ａ、３Ｂ　ユーザ（第１ユーザ）、４　プレイヤ（演者）、１０，２０，３０，４０　プロセッサ、１１，２１，３１，４１        メモリ、１２，２２，３２，４２　ストレージ、１３，２３，３３，４３　通信ＩＦ、１４，２４，３４，４４　入出力ＩＦ、１５，４５　タッチスクリーン、１７　カメラ、１８　測距センサ、５１　モニタ、５２　注視センサ、５３　第１カメラ、５４　第２カメラ、５５　マイク、５６　スピーカ、１００，１００Ａ，１００Ｂ，１００Ｃ　ユーザ端末（コンピュータ、第１コンピュータ、第１情報処理装置）、１１０，２１０，３１０，４１０　制御部（第１制御部、第２制御部）、１１１，３１１，４１３　操作受付部、１１２，３１２，４１２　表示制御部、１１３，３１３　ＵＩ制御部、１１４，３１４　アニメーション生成部、１１５，３１５    ゲーム進行部、１１６，３１６　仮想空間制御部、１１７　動画再生部、１２０，２２０，３２０，４２０　記憶部（第１記憶部、第２記憶部）、１３１，２３１，３３１　ゲームプログラム（プログラム、第１プログラム）、１３２，２３２，３３２　ゲーム情報、１３３，２３３，３３３　ユーザ情報、１５１，４５１ 入力部、１５２，４５２　表示部（ディスプレイ）、２００       　サーバ、２１１　通信仲介部、２１２　ログ生成部、２１３　リスト生成部、２３４，４２１　ユーザリスト、３００　ゲームプレイ端末（外部装置、第２外部装置）、３１７　反応処理部、４００　配信端末（外部、第１外部装置、コンピュータ、第２情報処理装置）、４１１　通信制御部、４１４　音声受付部、４１５　モーション特定部、４１６　動作指図データ生成部、４２２　モーションリスト、４２３    配信プログラム（プログラム、第２プログラム）、５４０，１０２０，１０２１　コントローラ、５００　ＨＭＤ、５１０　ＨＭＤセンサ、５２０　モーションセンサ、５３０　ディスプレイ、６００Ａ、６００Ｂ　仮想空間、６１０　アバターオブジェクト（キャラクタ）、６２０Ａ，６２０Ｂ　仮想カメラ、６３１，６３２，６３３，６３４　オブジェクト、６４０Ａ，６４０Ｂ　視界領域、６５０，６６０　視界画像、６７１　敵オブジェクト、６７２，６７３　障害物オブジェクト、６７４　演出オブジェクト、６９１，６９２　発話、７０１，７０２，７０３Ａ，７０Ｂ，７０４Ａ，７０４Ｂ，７０５，７０６，７１１，７１１Ａ，７１１Ｂ，７１１Ｃ，７１１Ｄ，７２２，７２３，７４５，７４５Ａ，７４５Ｂ，７４５Ｃ，７５２，７６２，７６３，９３０，２０１１、２０２２、２０３１、２０３２、２０３３、２０３４、２０３７、２０３８、２０５１、２０６３、２０７２、２０７３、２０７５  ＵＩ画像（メッセージＵＩ、ＵＩ）、７２１　ダウンロード画面、７３１　ユーザリスト画面（リスト）、７３２，７３２Ａ，７３２Ｂ，７３２Ｃ，７４２，７４２Ａ，７４２Ｂ，７４２Ｃ　レコード画像、７３３，７３３Ａ，７３３Ｂ，７３３Ｃ　ユーザ名、７３４，７３４Ａ，７３４Ｂ，７３４Ｃ　タグ情報、７３５，７３５Ａ，７３５Ｂ，７３５Ｃ　アイコン、７４１　モーションリスト画面（選択肢）、７４３，７４３Ａ，７４３Ｂ，７４３Ｃ        モーション名、７４４，７４４Ａ，７４４Ｂ，７４４Ｃ，７５３　モーション画像、７５１　配信画面、７６１　配信完了画面、８１０Ａ，８１０Ｂ      モーション動画、８２０Ａ，８２０Ｂ      発話音声、９１０Ａ，９１０Ｂ　動画、９２０Ａ，９２０Ｂ　音声、１０００　ＨＭＤセット、１０１０　物体、１０３０　記憶媒体、２０１０　ホーム画面、２０２０　ランキング画面、２０２１　タイトル画像、２０２６，２０２６Ａ，２０２６Ｂ　順位、２０２７，２０２７Ａ，２０２７Ｂ　課金額、２０２８，２０２８Ａ，２０２８Ｂ　送信回数、２０２９　送信済通知、２０３０　前回送信日、２０３５　詳細表示領域、２０３６　スクロールバー、２０４０　詳細画面、２０５０，２０６０　準備画面、２０５２　テキスト、２０５３、２０６１ 　選択画像、２０５４Ａ、２０５４Ｂ、２０５４Ｃ、２０６２Ａ，２０６２Ｂ，２０６２Ｃ，２０６２Ｄ，２０６２Ｅ，２０６２Ｆ　選択肢、２０７０　音声入力画面、２０７４　タグ画像

Claims (11)

  1. プロセッサを備える端末装置において実行されるプログラムであって、前記プロセッサに、
    演者の動作に連動して動く第１のキャラクタを含む仮想空間の映像を表示可能にするための第１の表示用データを受信するステップと、
    前記第１の表示用データに基づいて、前記仮想空間内で前記第１のキャラクタが動作する映像を表示するステップと、を実行させ、
    前記第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、
    前記第１のオブジェクトの表示態様は、所定のルールで変更される、プログラム。
  2. 前記プロセッサに、
    演者の動作に連動して動く第２のキャラクタを含む仮想空間の映像を表示可能にするための第２の表示用データを受信するステップと、
    前記第２の表示用データに基づいて、前記仮想空間内で前記第２のキャラクタが動作する映像を表示するステップと、を実行させ、
    前記第２のキャラクタには、前記第１のオブジェクトと同種の第２のオブジェクトが関連付けられており、
    前記第２のオブジェクトの表示態様は、固定されている、請求項１に記載のプログラム。
  3. 前記第１のオブジェクトの表示態様は、配信期間毎に、前回の配信期間における表示態様とは異なる表示態様に変更される、請求項１または請求項２に記載のプログラム。
  4. 前記第１の表示用データは、外部から配信されるデータであって、演者の入力したモーションに対応するモーションデータを含み、
    前記表示するステップは、前記モーションデータに基づいて前記仮想空間内において前記第１のキャラクタをリアルタイムに動作させ、前記仮想空間内で当該第１のキャラクタが動作する映像を表示する、請求項１～請求項３のいずれかに記載のプログラム。
  5. 前記プロセッサに、
    前記所定のルールで変更された第１のオブジェクトの表示態様を特定するための第１のデータを受信するステップと、
    前記第１のデータに基づいて前記第１のオブジェクトの表示態様を設定するステップを実行させる、請求項４に記載のプログラム。
  6. 前記プロセッサに、
    視点を特定するための態様の少なくとも一部が異なる複数種類の視聴モードのうちのいずれかに設定するステップを実行させ、
    前記表示するステップは、特定される視点から見た前記仮想空間の映像を表示し、
    前記複数種類の視聴モードのうちの第１の視聴モードである場合には、前記第１のオブジェクトを表示する位置に視点を移動可能であり、前記第１の視聴モード以外のモードである場合には、前記第１のオブジェクトを表示する位置に視点を移動不可能である、請求項４または請求項５に記載のプログラム。
  7. 前記端末装置は、当該端末装置の位置および向きを検知する検知部と、タッチスクリーンとを備え、
    前記第１の視聴モードは、前記検知部により検知された位置および向きに基づいて視点を特定可能な視聴モードであり、
    前記複数種類の視聴モードは、前記タッチスクリーンに対するタッチ操作に基づいて視点を特定する第２の視聴モードを含み、
    前記複数種類の視聴モードのうちの前記第２の視聴モードである場合には、前記第１のオブジェクトを表示する位置に視点を移動不可能である、請求項６に記載のプログラム。
  8. 前記第１の表示用データは、外部から配信されるデータであって、前記所定のルールで表示態様が変更された第１のオブジェクトが関連付けられている第１のキャラクタが前記仮想空間内において動作する映像を含む動画データであり、
    前記表示するステップは、前記動画データに基づいて前記仮想空間内で前記第１のキャラクタが動作する映像を表示する、請求項１～３のいずれかに記載のプログラム。
  9. 前記第１のキャラクタには、予め定められた第３のオブジェクトが関連付けられており、
    前記第３のオブジェクトは、前記第１のオブジェクトの少なくとも一部を覆うオブジェクトである、請求項１～請求項８のいずれかに記載のプログラム。
  10. プロセッサを備える端末装置において実行される方法であって、
    演者の動作に連動して動く第１のキャラクタを含む仮想空間の映像を表示可能にするための第１の表示用データを受信するステップと、
    前記第１の表示用データに基づいて、前記仮想空間内で前記第１のキャラクタが動作する映像を表示するステップと、を備え、
    前記第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、
    前記第１のオブジェクトの表示態様は、所定のルールで変更される、方法。
  11. プロセッサを備える端末装置であって、
    演者の動作に連動して動く第１のキャラクタを含む仮想空間の映像を表示可能にするための第１の表示用データを受信し、
    前記第１の表示用データに基づいて、前記仮想空間内で前記第１のキャラクタが動作する映像をし、
    前記第１のキャラクタには、予め定められた第１のオブジェクトが関連付けられており、
    前記第１のオブジェクトの表示態様は、所定のルールで変更される、端末装置。
PCT/JP2020/030182 2019-08-30 2020-08-06 プログラム、方法、および端末装置 WO2021039347A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202080061197.3A CN114340749A (zh) 2019-08-30 2020-08-06 程序、方法、以及终端装置
EP20858889.7A EP4023310A4 (en) 2019-08-30 2020-08-06 PROGRAM, METHOD AND TERMINAL DEVICE
KR1020227010229A KR20220052363A (ko) 2019-08-30 2020-08-06 프로그램, 방법, 및 단말 장치
US17/638,976 US20220297006A1 (en) 2019-08-30 2020-08-06 Program, method, and terminal device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-157900 2019-08-30
JP2019157900A JP6726345B1 (ja) 2019-08-30 2019-08-30 プログラム、方法、および端末装置

Publications (1)

Publication Number Publication Date
WO2021039347A1 true WO2021039347A1 (ja) 2021-03-04

Family

ID=71663903

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/030182 WO2021039347A1 (ja) 2019-08-30 2020-08-06 プログラム、方法、および端末装置

Country Status (6)

Country Link
US (1) US20220297006A1 (ja)
EP (1) EP4023310A4 (ja)
JP (1) JP6726345B1 (ja)
KR (1) KR20220052363A (ja)
CN (1) CN114340749A (ja)
WO (1) WO2021039347A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022147265A (ja) * 2021-03-23 2022-10-06 株式会社コロプラ プログラム、方法、および情報処理装置
JP7317325B1 (ja) * 2022-04-27 2023-07-31 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
JP7445272B1 (ja) 2023-03-31 2024-03-07 グリー株式会社 動画処理方法、動画処理システム、及び動画処理プログラム

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0120930B2 (ja) 1986-11-22 1989-04-19 Zenya Aruminiumu Seisakusho Kk
JPH0243403B2 (ja) * 1981-09-09 1990-09-28
JPH0256301B2 (ja) * 1982-12-23 1990-11-29 Asahi Glass Co Ltd
US20050223328A1 (en) * 2004-01-30 2005-10-06 Ashish Ashtekar Method and apparatus for providing dynamic moods for avatars
JP2011515736A (ja) * 2008-02-27 2011-05-19 ソニー コンピュータ エンタテインメント アメリカ リミテッド ライアビリテイ カンパニー シーンの深度データをキャプチャし、コンピュータのアクションを適用する方法
JP2013517051A (ja) * 2010-01-15 2013-05-16 マイクロソフト コーポレーション モーション・キャプチャー・システムにおけるユーザー意図の認識
JP2018007828A (ja) * 2016-07-13 2018-01-18 株式会社バンダイナムコエンターテインメント プログラム及び電子機器
CN107750005A (zh) * 2017-09-18 2018-03-02 迈吉客科技（北京）有限公司 虚拟互动方法和终端
US20180174347A1 (en) * 2016-12-20 2018-06-21 Sony Interactive Entertainment LLC Telepresence of multiple users in interactive virtual space
JP6463535B1 (ja) * 2018-04-27 2019-02-06 株式会社コロプラ プログラム、情報処理装置、および方法
JP6473265B1 (ja) * 2018-08-31 2019-02-20 株式会社バーチャルキャスト コンテンツ配信サーバ、コンテンツ配信システム、コンテンツ配信方法及びプログラム
US20190065027A1 (en) * 2017-08-31 2019-02-28 Apple Inc. Systems, Methods, and Graphical User Interfaces for Interacting with Augmented and Virtual Reality Environments

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6091054U (ja) 1983-11-29 1985-06-21 ジロフレツクス　エントヴイツクルンクス　アクチエンゲゼルシヤフト 椅子用脚
US6139433A (en) * 1995-11-22 2000-10-31 Nintendo Co., Ltd. Video game system and method with enhanced three-dimensional character and background control due to environmental conditions
US7445549B1 (en) * 2001-05-10 2008-11-04 Best Robert M Networked portable and console game systems
US8187104B2 (en) * 2007-01-29 2012-05-29 Sony Online Entertainment Llc System and method for creating, editing, and sharing video content relating to video game events
US20170282075A1 (en) * 2014-09-24 2017-10-05 Telefonaktiebolaget Lm Ericsson (Publ) Methods, system and nodes for handling media streams relating to an online game
US11836285B2 (en) * 2017-03-10 2023-12-05 Kenneth Perlin System for a spectator to view a virtual reality of a performer and method
JP6470356B2 (ja) * 2017-07-21 2019-02-13 株式会社コロプラ 仮想空間を提供するコンピュータで実行されるプログラム、方法、および当該プログラムを実行する情報処理装置
JP6420930B1 (ja) * 2018-08-01 2018-11-07 グリー株式会社 アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信システム、動画配信方法及び動画配信プログラム
JP6556301B1 (ja) * 2018-07-25 2019-08-07 株式会社バーチャルキャスト コンテンツ配信サーバ、仮想キャラクタ提供サーバ、コンテンツ配信システム、コンテンツ配信方法及びプログラム
JP6543403B1 (ja) * 2018-12-12 2019-07-10 グリー株式会社 動画配信システム、動画配信方法及び動画配信プログラム

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0243403B2 (ja) * 1981-09-09 1990-09-28
JPH0256301B2 (ja) * 1982-12-23 1990-11-29 Asahi Glass Co Ltd
JPH0120930B2 (ja) 1986-11-22 1989-04-19 Zenya Aruminiumu Seisakusho Kk
US20050223328A1 (en) * 2004-01-30 2005-10-06 Ashish Ashtekar Method and apparatus for providing dynamic moods for avatars
JP2011515736A (ja) * 2008-02-27 2011-05-19 ソニー コンピュータ エンタテインメント アメリカ リミテッド ライアビリテイ カンパニー シーンの深度データをキャプチャし、コンピュータのアクションを適用する方法
JP2013517051A (ja) * 2010-01-15 2013-05-16 マイクロソフト コーポレーション モーション・キャプチャー・システムにおけるユーザー意図の認識
JP2018007828A (ja) * 2016-07-13 2018-01-18 株式会社バンダイナムコエンターテインメント プログラム及び電子機器
US20180174347A1 (en) * 2016-12-20 2018-06-21 Sony Interactive Entertainment LLC Telepresence of multiple users in interactive virtual space
US20190065027A1 (en) * 2017-08-31 2019-02-28 Apple Inc. Systems, Methods, and Graphical User Interfaces for Interacting with Augmented and Virtual Reality Environments
CN107750005A (zh) * 2017-09-18 2018-03-02 迈吉客科技（北京）有限公司 虚拟互动方法和终端
JP6463535B1 (ja) * 2018-04-27 2019-02-06 株式会社コロプラ プログラム、情報処理装置、および方法
JP6473265B1 (ja) * 2018-08-31 2019-02-20 株式会社バーチャルキャスト コンテンツ配信サーバ、コンテンツ配信システム、コンテンツ配信方法及びプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ANONYMOUS: "Thorough commentary! What is ''Virtual Cast'' that anyone can become VTuber?", MOGULIVE, 21 April 2018 (2018-04-21), XP055794105, Retrieved from the Internet <URL:https://www.moguravr.com/virtualcast-2> [retrieved on 20190121] *

Also Published As

Publication number Publication date
CN114340749A (zh) 2022-04-12
JP6726345B1 (ja) 2020-07-22
KR20220052363A (ko) 2022-04-27
EP4023310A4 (en) 2023-08-30
JP2021035454A (ja) 2021-03-04
EP4023310A1 (en) 2022-07-06
US20220297006A1 (en) 2022-09-22

Similar Documents

Publication Publication Date Title
JP6776400B1 (ja) プログラム、方法、および情報端末装置
JP6776393B2 (ja) 視聴プログラム、視聴方法、および情報端末装置
WO2021039347A1 (ja) プログラム、方法、および端末装置
WO2021039346A1 (ja) プログラム、方法、および情報処理端末
JP2021010181A (ja) 視聴プログラム、視聴方法、および情報端末装置
JP7479219B2 (ja) プログラム、方法、および端末装置
WO2020262331A1 (ja) ゲームプログラム、ゲーム方法、および端末装置
WO2020262332A1 (ja) ゲームプログラム、ゲーム方法、および情報端末装置
JP6813618B2 (ja) 視聴プログラム、視聴方法、視聴端末、配信プログラム、配信方法、および情報端末装置
JP7437480B2 (ja) プログラム、方法、およびコンピュータ
JP2021168748A (ja) プログラム、コンピュータ、および方法
JP7332562B2 (ja) プログラム、方法、および情報端末装置
JP6818106B1 (ja) プログラム、方法、および視聴端末
JP6826645B1 (ja) プログラム、方法、および端末装置
WO2020255996A1 (ja) プログラム、方法、および端末装置
JP6776425B1 (ja) プログラム、方法、および配信端末
JP6754859B1 (ja) プログラム、方法、およびコンピュータ
JP2021053406A (ja) プログラム、方法、および端末装置
JP2021058747A (ja) ゲームプログラム、ゲーム方法、および端末装置
JP2021053455A (ja) プログラム、方法、および視聴端末
JP2022028694A (ja) プログラム、方法、および情報端末装置
JP2021053453A (ja) ゲームプログラム、ゲーム方法、および情報端末装置
JP2022112769A (ja) プログラム、方法、および情報端末装置
JP2021053401A (ja) プログラム、方法、および配信端末
JP2021049391A (ja) 視聴プログラム、視聴方法、視聴端末、配信プログラム、配信方法、および情報端末装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20858889

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 20227010229

Country of ref document: KR

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 2020858889

Country of ref document: EP

Effective date: 20220330