WO2019130966A1 - コンピュータ装置及び評価制御方法 - Google Patents

コンピュータ装置及び評価制御方法 Download PDF

Info

Publication number
WO2019130966A1
WO2019130966A1 PCT/JP2018/043833 JP2018043833W WO2019130966A1 WO 2019130966 A1 WO2019130966 A1 WO 2019130966A1 JP 2018043833 W JP2018043833 W JP 2018043833W WO 2019130966 A1 WO2019130966 A1 WO 2019130966A1
Authority
WO
WIPO (PCT)
Prior art keywords
timing
input
controller
motion
axis
Prior art date
Application number
PCT/JP2018/043833
Other languages
English (en)
French (fr)
Inventor
直樹 榎戸
真之 清水
Original Assignee
株式会社バンダイナムコエンターテインメント
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社バンダイナムコエンターテインメント filed Critical 株式会社バンダイナムコエンターテインメント
Priority to CN201880084380.8A priority Critical patent/CN111526926A/zh
Publication of WO2019130966A1 publication Critical patent/WO2019130966A1/ja
Priority to US16/911,570 priority patent/US11260286B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/28—Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285—Generating tactile feedback signals via the game input device, e.g. force feedback
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/44—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment involving timing of operations, e.g. performing an action within a time slot
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/814—Musical performances, e.g. by evaluating the player's ability to follow a notation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A63F13/46—Computing the game score
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • A63F13/5375—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen for graphically or textually suggesting an action, e.g. by displaying an arrow indicating a turn in a driving game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1037—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals being specially adapted for converting control signals received from the game device into a haptic signal, e.g. using force feedback
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1043—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals being characterized by constructional details
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/105—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals using inertial sensors, e.g. accelerometers, gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1068—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals being specially adapted to detect the point of contact of the player on a surface, e.g. floor mat, touch pad
    • A63F2300/1075—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals being specially adapted to detect the point of contact of the player on a surface, e.g. floor mat, touch pad using a touch screen
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/61—Score computation
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/63—Methods for processing data by generating or executing the game program for controlling the execution of the game in time
    • A63F2300/638—Methods for processing data by generating or executing the game program for controlling the execution of the game in time according to the timing of operation or a time limit
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8047—Music games

Definitions

  • the present disclosure relates to a technique for evaluating an input timing input by a player.
  • a technique for evaluating operation input timing has been developed and put into practice, for example, as one of the gaming techniques.
  • a game of a genre called a music game, a performance game, a rhythm game or the like (hereinafter collectively referred to as a “music game”) has a predetermined timing (standard timing: target
  • standard timing target
  • the timing game is a representative example of a timing game for enjoying how to perform the instructed operation (standard operation: operation input required for the player). Since the player can enjoy the operation input according to the rhythm by using the favorite music selected by himself as BGM, it goes without saying that single players played by one person, a plurality of players participate and cooperate or play a match It is also popular in multiplayer.
  • Patent Document 1 the selection of game media such as characters and items used in the game is accepted, and the timing gauge (displaying the evaluation criteria of the reference timing in a gauge form) is changed according to the state of the selected game media.
  • the timing gauge displaying the evaluation criteria of the reference timing in a gauge form
  • an acceleration sensor or a gyro sensor is mounted on the game controller of the stationary home type game device or the portable game device, and the operation of shaking the game controller is measured and used for operation input.
  • Patent Document 2 discloses a technique for identifying an operation of shaking the game controller in the air and an operation of applying an impact to the game controller by noting the difference in acceleration at the timing when the acceleration value increases or decreases. It is done.
  • music games are said to be extremely difficult games for latency or response of operation input. That is, if there is a gap between the timing at which the player thinks that an operation has been input and the timing at which the operation sound is emitted as it is reflected in the game, the feeling of playing is greatly impaired.
  • a dedicated game device is prepared for business use.
  • a stick for percussion instrument performance and a portion (striking portion) to be struck by the stick are physically prepared, and the impact on the striking portion can be physically measured by a switch or the like. It is designed so that the above-mentioned timing deviation does not become a problem.
  • the player holds the game controller, regards it as a stick for percussion instrument play, and plays it by swinging down to a physically non-existent striker. At this time, in order to reproduce the feeling of hitting by itself, the player operates not to shake off the game controller, but to stop at the virtual hit surface of the hit portion that does not physically exist.
  • acceleration sensors and gyro sensors used for mass-marketed portable game devices and game controllers for stationary home game devices are relatively inexpensive sensors, their measurement accuracy and resolution are low, and they can not be measured from the zero point. There is a problem that the accumulated error tends to be large. Therefore, the above-mentioned timing deviation tends to be further increased, which makes it difficult to solve the deviation.
  • the operation input timing is appropriately determined so as to be close to the player's sense regarding the timing of the operation input.
  • a first mode is a computer device that evaluates an input timing input by a player.
  • a presentation unit that presents a reference timing for causing the player to perform a motion that causes a controller with a built-in sensor that measures acceleration and / or angular velocity to hold and shake to stop the hand;
  • a timing determination unit that determines the input timing by detecting a peak of the measurement value that appears immediately before the motion stops;
  • An evaluation unit that performs the evaluation based on at least a difference between the reference timing and the input timing;
  • a computer device comprising
  • a case may be considered in which an operation to hit a virtual hit object that is not in reality is used as the operation input.
  • the braking operation is naturally applied to the end of the motion as if it were to reproduce the situation where the tapping tool strikes the object to be struck and stops.
  • the movement of the controller actually stops later than the timing at which the user thinks he has hit. This is because it takes time for the controller to actually stop, although in a short time, due to the influence of inertia or the like.
  • the timing at which the movement of the controller is stopped which is the timing at which the motion is over
  • the time difference between the timing at which the user thinks that he has struck is generated and a sense of being delayed is generated.
  • the second aspect is the computer device according to the first aspect, further comprising: a response output control section for immediately outputting a response by sound and / or display when the timing determination section determines the input timing. is there.
  • the game in which the response output by the sound or display is immediately accompanied by the input timing that is, the game in which the goodness of the latency and the response is required can be particularly effective.
  • the presentation section presents a plurality of the reference timings in the order of arrival, and the timing determination section corresponds the input timing corresponding to each of the reference timings.
  • the evaluation unit sequentially performs an evaluation to be compared with the input timing determined by the timing determination unit for each reference timing, and an evaluation result for notifying the evaluation result of the evaluation unit for each reference timing It is a computer apparatus further provided with the alerting
  • the reference timings come one after another and to repeat the evaluation and notification of the input timing one after another.
  • the controller includes a vibrating device, and the evaluation result notification control unit determines, for each reference timing, a vibration pattern or a vibration according to the evaluation result of the evaluation unit. It is a computer device that operates the vibrating device in size.
  • the evaluation result can be reported by the pattern or size of the vibration of the controller. Since the evaluation result can be felt by the hand holding the controller directly by vibration rather than sound or light, it becomes easier to intuitively understand the degree of timing shift, which is a suitable aid for improving the playing skill.
  • the controller has a longitudinal shape that can be held with a plurality of operation buttons disposed on the front side and held by one hand, and the sensor Measures at least an acceleration whose first axis is a direction perpendicular to the longitudinal direction of the controller and the front normal direction of the controller, and the timing determination unit detects a peak of the acceleration in the first axial direction. It is a computer apparatus which determines the said input timing.
  • the fifth aspect it is possible to realize the determination technique of the input timing suitable when holding and playing with one hand the controller in the longitudinal shape in which the operation button is arranged on the front side.
  • the controller has a longitudinal shape that can be held with a plurality of operation buttons disposed on the front side and held by one hand, and the sensor Measures at least an angular velocity about a second axis whose second axis is the front normal direction of the controller, and the timing determination unit determines the input timing by detecting a peak of an angular velocity about the second axis Is a computer device.
  • the sixth aspect when the user operates the long controller having the operation button arranged on the front side with one hand, for example, the operation involving the change of the controller posture due to the swing of the forearm or the snap of the wrist. Also in the input, a technique for appropriately determining the input timing can be realized.
  • the timing determination unit detects the peak by detecting reversal of the increasing or decreasing tendency of the measurement value, and the peak is detected based on the timing of detection. It is a computer device that determines input timing.
  • the input timing can be appropriately determined by detecting the reversal of the increase / decrease tendency of the measurement value as the timing when the player takes to stop the motion.
  • the timing determination unit determines, as the input timing, a timing adjusted by a given adjustment time from a timing at which the peak is detected. It is a computer device.
  • the eighth aspect it is possible to adjust the time difference between the timing when the peak is detected and the timing when it is determined as the input timing in a given adjustment time.
  • a ninth aspect is the computer device according to the eighth aspect, further comprising: an adjustment time setting unit that sets the adjustment time.
  • the timing of detecting a peak is the same as the input timing, while others may prefer that the timing is somewhat slower. According to the ninth aspect, it is possible to set the adjustment time.
  • the motion is a motion in which the hand swings down so as to stop at the swing down position, and the timing determination unit swings up based on the measured value.
  • a premise determination unit that determines whether the swing down operation has been started continuously, and by detecting the peak of the measurement value in the swing down operation when an affirmative determination is made by the premise determination unit. It is a computer apparatus which determines the said input timing.
  • the motion of lowering the hand holding the controller may occur other than the operation input.
  • the controller has a longitudinal shape that can be held with a plurality of operation buttons disposed on the front side and held by one hand
  • the sensor is a longitudinal shape of the controller Measuring at least an acceleration whose first axis is a direction and a direction orthogonal to the front normal direction of the controller, and an angular velocity about a second axis whose second axis is the front normal direction of the controller;
  • the part is a computer device that determines whether the swing-down operation has been started continuously following the swing-up operation based on the acceleration in the first axial direction and the angular velocity around the second axis.
  • the swinging operation is performed following the swinging operation from the acceleration related to the vertical movement of the controller It can be determined appropriately whether it has been started continuously. For example, based on the posture change of the controller caused by the swing of the forearm, the snap of the wrist, etc., it can be appropriately determined that the swing down operation is continuously started following the swing up operation.
  • the motion includes a plurality of types of motion in different swing directions
  • the presentation unit is configured to select a reference type of the plurality of types of motion.
  • the information processing apparatus further comprises an input type determination unit that presents that the motion should be performed at the reference timing, and determines which type of motion among the plurality of types of motion is input based on the measurement value,
  • the computer unit performs the evaluation based on the difference between the reference timing and the input timing, and whether the input type determined by the input type determination unit is the same as the reference type. is there.
  • the controller has a longitudinal shape which can be held with a plurality of operation buttons disposed on the front side and held by one hand
  • the sensor is a longitudinal part of the controller Measure at least the angular velocity around the first axis with the first axis as the direction and the direction perpendicular to the frontal normal direction of the controller, and in the multiple types of motion, the curve swing down motion that curves and swings your hand down
  • the computer apparatus is included, and the input type determination unit determines whether the curve swing-down motion is input based on an angular velocity about the first axis.
  • the thirteenth aspect when holding and operating the long-shaped controller having the operation button on the front side with one hand, it is possible to appropriately determine the curve swing-down motion based on the change in the controller's posture. It becomes possible to realize the determination of the curve swing-down motion with high accuracy without being influenced by the difference in the trajectory of the swing-down curve by the player.
  • the presenting section performs the motion to be performed at the reference timing at any one of at least two intensity levels with different magnitudes of swing strength.
  • a strength level determination unit that determines the strength level of the input motion based on the measurement value.
  • the evaluation unit is a computer device that further performs the evaluation based on whether the presented strength level is the same as the strength level determined by the strength level determination unit.
  • a fifteenth mode is an evaluation control method for a computer device to evaluate an input timing input by a player, the controller including a sensor for measuring acceleration and / or angular velocity with respect to the player. Presenting a reference timing for performing a motion for holding and moving to stop, determining the input timing by detecting a peak of the measurement value appearing immediately before the motion is stopped, and at least the reference Performing the evaluation based on a difference between the timing and the input timing.
  • FIG. 2 is a front view showing a configuration example of a game device in which a game controller is detachable.
  • FIG. 8 is a view showing a display example of an operation screen related to setting of adjustment time.
  • FIG. 2 is a functional block diagram showing an example of a functional configuration of the game device.
  • FIG. 1 is a front view showing a configuration example of a game apparatus which is a portable game apparatus according to one embodiment and in which a game controller is detachable.
  • FIG. 2 is a view showing the game apparatus in a state in which the game controller is separated.
  • the game device 1400 is a computer classified as a portable game device designed in consideration of portability and convenience at the time of use.
  • the game device 1400 includes a main device 1401 and at least one removable game controller 1460 (right game controller 1460R, left game controller 1460L).
  • the main body device 1401 includes a touch panel 1406 that functions as an image display device and a contact position input device, a connector 1407, a built-in battery 1409, a speaker 1410, and a control substrate 1450.
  • a power button, a volume control button, and the like are appropriately provided.
  • the connectors 1407 are provided at the left and right ends of the main device 1401 corresponding to the right game controller 1460R and the left game controller 1460L. Then, it is connected to the connectors of the right game controller 1460R and the left game controller 1460L to realize communication between the game controller and the main device 1401.
  • the control board 1450 includes various processors such as central processing unit (CPU) 1451, graphics processing unit (GPU), digital signal processor (DSP), various IC memories 1452 such as VRAM, RAM, and ROM, mobile phone base stations and wireless LANs.
  • processors such as central processing unit (CPU) 1451, graphics processing unit (GPU), digital signal processor (DSP), various IC memories 1452 such as VRAM, RAM, and ROM, mobile phone base stations and wireless LANs.
  • CPU central processing unit
  • GPU graphics processing unit
  • DSP digital signal processor
  • various IC memories 1452 such as VRAM, RAM, and ROM
  • a communication module 1453 for wireless communication with a base station, another device including a short distance wireless device, and the like, an interface circuit 1457, and the like are mounted.
  • the interface circuit 1457 includes a driver circuit of the touch panel 1406, a circuit transmitting / receiving a signal to / from the right game controller 1460R or the left game controller 1460L through the connector 1407, an output amplifier circuit outputting an audio signal to the speaker 1410, etc. There is.
  • control board 1450 These elements mounted on the control board 1450 are electrically connected via a bus circuit or the like, and are connected so as to be able to read and write data and transmit and receive signals.
  • control substrate 1450 may be configured using an application specific integrated circuit (ASIC), a field-programmable gate array (FPGA), or a system on chip (SoC).
  • ASIC application specific integrated circuit
  • FPGA field-programmable gate array
  • SoC system on chip
  • the control board 1450 stores programs and various data in the IC memory 1452.
  • the control board 1450 carries out arithmetic processing based on them, thereby implementing various functions for executing the game of the present embodiment.
  • the right game controller 1460R and the left game controller 1460L are designed such that the player is held by the right hand and the left hand, respectively.
  • the right game controller 1460R and the left game controller 1460L are respectively a joystick 1461, a plurality of push switches 1462 serving as operation buttons, a vibrator 1463 serving as a vibration generating device, a speaker 1464, a connector 1467, a controller control board 1470 and a built-in battery (not shown).
  • the controller control board 1470 includes a controller control IC 1471 corresponding to a processor that controls the game controller, a communication module 1473, a three-axis acceleration sensor 1475, a three-axis gyro sensor 1476, and an interface circuit 1477.
  • elements other than these can be included as appropriate.
  • the other elements can be omitted by sharing the functions of the other elements with some elements.
  • a configuration in which the three-axis acceleration sensor 1475 and the three-axis gyro sensor 1476 are realized by one sensor a configuration in which the controller control IC 1471 and the interface circuit 1477 are integrated, and the like are possible.
  • the communication module 1473 implements wireless communication with the communication module 1453 of the main device 1401.
  • the three-axis acceleration sensor 1475 of the right game controller 1460R constitutes right-handed local coordinates (Xr ⁇ Yr ⁇ Zr).
  • the right direction (right side in FIG. 2) toward the front of the right game controller 1460R is the positive direction of Xr axis
  • the longitudinal upper side of the controller (upper side in FIG. 2) is the positive direction of Yr axis
  • front method of the controller The linear direction, that is, the front side of the controller (the front side in FIG. 2) is configured to be the positive direction of the Zr axis.
  • the 3-axis gyro sensor 1476 of the right game controller 1460R constitutes right-handed local coordinates (Xr, Yr, Zr), so that the angular velocity around each axis of the 3-axis acceleration sensor 1475 of the right game controller 1460R can be detected Is configured.
  • an attachment 1468 is attachable to the left end of the right game controller 1460R so as to close the connector 1467.
  • the right game controller 1460R is held so that the right side of the controller is placed on the thumb and the ball of the right hand, and the attachment 1468 of the controller is wrapped with the index finger and the little finger.
  • the back side opposite to the front side is held as held by one hand with the palm side.
  • the three-axis acceleration sensor 1475 of the left game controller 1460L configures left-handed local coordinates (X1, Y1, Z1).
  • the left direction (left side in FIG. 2) toward the front of the left game controller 1460L is the positive direction of the X1 axis
  • the longitudinal upper side of the controller (upper side in FIG. 2) is the positive direction of the Y1 axis
  • front method of the controller The linear direction, that is, the front side (front side in FIG. 2) of the controller is configured to be the positive direction of the Zl axis.
  • the 3-axis gyro sensor 1476 of the left game controller 1460L constitutes a left-handed local coordinate (X1, Y1, Z1), so that the angular velocity around each axis of the 3-axis acceleration sensor 1475 of the left game controller 1460 L can be detected Is configured.
  • an attachment 1468 can be attached to the left end of the left game controller 1460L so as to close the connector 1467.
  • the left game controller 1460L is held so that the left side of the controller is placed on the thumb and the ball of the left hand, and the attachment 1468 of the controller is wrapped with the index finger and the little finger.
  • the back side opposite to the front side is held as held by one hand with the palm side.
  • the interface circuit 1477 includes a circuit for realizing wired communication with the control substrate 1450 of the main device 1401 through the connector 1467. Then, exchange of signals between the various devices (the joystick 1461, the push switch 1462, the vibrator 1463, the speaker 1464, the three-axis acceleration sensor 1475, the three-axis gyro sensor 1476, etc.) mounted in the controller is realized. .
  • FIG. 3 is a view for explaining the game contents in the present embodiment, and is a view showing a display example of the game screen.
  • the game of this embodiment is one of the rhythm games, and while listening to music that is emitted (reproduced) from the speaker 1410 of the main device 1401, the right game controller 1460R and the left game controller 1460L are adjusted according to the rhythm. It is a music game with the theme of playing a virtual percussion instrument that shakes and inputs operations.
  • the player 2 holds the right game controller 1460R and the left game controller 1460L in the intention of holding the handle portion of the virtual percussion virtual tapping tool. And there is a long stick (not visible) at the end of the right game controller 1460R and the left game controller 1460L, and there is a virtual percussion instrument 4 in front of it (though it can not be seen), so as to strike it.
  • the right game controller 1460R and the left game controller 1460L are swung down for operation input.
  • the virtual percussion instrument 4 is a Japanese drum, and the Japanese drum is set such that the drum surface is directed to the player side in the front of the player 2 and near the waist height.
  • the music to be played is emitted from the speaker 1410 of the main device 1401, and the game screen W3 is displayed on the touch panel 1406.
  • an elapsed time display unit 10 On the game screen W3, an elapsed time display unit 10, a music title 12, and a music score 20 are displayed.
  • the design of the music score 20 can be set as appropriate, but in the present embodiment, the reference position 24 shown on the left side of the screen, the indicator 25 (25a, 25b) flow-displayed toward the reference position 24, and the bar It has the demarcation line 26, the evaluation result display part 27, and the score display part 28.
  • the reference position 24 indicates a position serving as a reference for indicating the reference timing (the timing of the target operation input). In the present embodiment, only one music score is displayed on one music score 20, but a plurality of points may be provided.
  • the indicators 25 are prepared in different designs according to the type of reference operation (the correct operation input to be made at the current reference timing). Then, in the present embodiment, it is displayed from the right side of the musical score 20 and is moved and displayed to the left so as to flow along the bar dividing line 26 toward the reference position 24 in a line. Between the measure separation lines 26 will represent one measure in the play music.
  • the timing at which the indicator 25 overlaps the reference position 24 is the reference timing in the present embodiment, and the type of the overlapping indicator 25 indicates the type of standard operation.
  • the evaluation result display unit 27 uses the timing at which the center of the indicator 25 overlaps the center line of the reference position 24 as the reference timing, and uses the type of the overlapping indicator 25 as a reference operation 1) reference timing and input of operation input at that time Display the input evaluation based on the difference from the timing and 2) type match / mismatch between the standard operation and the operation input. For example, the types of the reference operation and the operation input match, and the smaller the difference between the reference timing and the operation input timing, the higher the evaluation.
  • the score display unit 28 displays the total of the points given according to the evaluation result of the operation input.
  • the input timing is first determined, and when the input timing is determined, the input type determination of the operation input is performed. Then, the determined input timing and operation input type are compared with the reference timing and reference operation presented on the musical score 20 to evaluate the operation input.
  • the motion performed by the player 2 includes “swing-up operation” and “swing-down operation” as if the drum is hit with a bee, and virtual percussion instrument performance
  • the three operations of “the braking operation to stop at the swinging-off position Ps considered to be the drum surface of the virtual percussion instrument 4” are continued.
  • FIG. 5 is a diagram for explaining the determination of the input timing for a single shot motion.
  • the left game controller 1460L is described as an example here, the same applies to the right game controller 1460R by changing the local coordinates from left handed to right handed.
  • the single-shot motion includes the start and transition of the three motions constituting the motion, focusing on the posture change of the left game controller 1460L. Therefore, in the present embodiment, the single-shot motion of the first operation input is correctly identified based on the change of the angular velocity ⁇ z about the Zl axis measured by the three-axis gyro sensor 1476, and the appropriate input timing is determined.
  • the player intentionally swings down as a single operation motion of the first operation input. It is determined that there is. In this way, the player simply distinguishes between the action of lowering the tired hand and the swinging action. Since the angular velocity ⁇ z at this time is rotation in the positive direction in the left-handed coordinate system, it is determined that the swing-down operation is performed when the angular velocity ⁇ z reaches a predetermined positive threshold corresponding to the required momentum determination reference angular velocity ⁇ f. Can also be configured.
  • vibration is generated by the vibrator 1463 of the left game controller 1460L at the timing when the required momentum determination reference angular velocity ⁇ f is reached.
  • the vibration intensity Amp is set in proportion to the angular velocity ⁇ z being measured at that time, and the swing-down operation produces a feeling that the virtual stick-like tapping tool blows off the wind. This is called "windbreak effect vibration”.
  • the position of the actual left hand and left game controller 1460L is further lowered to the lower swinging position Ps by the force (inertia) even after the braking operation is started, that is, the striking surface of the virtual percussion instrument 4 for the player. Or you will reach the position where you imagined that you hit the edge or lower than that.
  • an input effect vibration is generated by the vibrator 1463 of the left game controller 1460L at the input timing of the single shot motion.
  • the “input effect vibration” is a vibration that aims to reproduce the feeling that the virtual tapping tool hits the striking surface of the virtual percussion instrument 4 or the edge thereof. Basically, different vibrations are generated according to the result of the type determination of the operation input.
  • input production vibration serves as "evaluation result notice vibration” which notifies an evaluation result. That is, vibration is generated with a vibration intensity and vibration pattern according to the evaluation result of the operation input.
  • FIG. 6 is a conceptual diagram for explaining the determination of the input timing for the continuous hitting motion.
  • the left game controller 1460L is described as an example here, the same applies to the right game controller 1460R by changing the local coordinates from left handed to right handed.
  • the continuous hitting motion since the position of the wrist is substantially constant, it can not be identified based on the posture change as in the case of the single-shot motion. Therefore, the continuous hitting motion is correctly identified based on the change in acceleration measured by the three-axis acceleration sensor 1475 of the left game controller 1460L, and the appropriate input timing is determined.
  • the player holds and operates the left game controller 1460L in a posture in which the left end of the controller is placed on the ball of the thumb with the left end of the controller facing up. Therefore, when the acceleration Ax in the Xl-axis direction measured by the 3-axis acceleration sensor 1475 exceeds a threshold obtained by adding a predetermined swing-up start determination coefficient k1 to the average acceleration Ax_ave which is the average value of the accelerations Ax up to that point, It is determined that "operation" has been started.
  • the average acceleration Ax_ave is an average value of about 10 to 15 measurements of the three-axis acceleration sensor 1475.
  • the measurement cycle can also be a relatively slow cycle of approximately 4 to 6 ms cycle depending on the specification of the sensor employed.
  • acceleration Ax of the direction of Xl axis will be measured by a negative value. Therefore, when the acceleration Ax in the direction of the Xl axis falls below a threshold obtained by adding a predetermined determination criterion coefficient k2 to the average acceleration Ax_ave, it is determined that the player intentionally performs the swing-down motion as the continuous hitting motion. In this way, the player simply distinguishes the action of lowering the tired hand and the swinging action. Also in the continuous hitting motion, "windbreak effect vibration" is executed here.
  • the swing operation is shifted to the braking operation, in which case the acceleration Ax in the Xl-axis direction measured by the three-axis acceleration sensor 1475 has a measured value of “0” as it is decelerated from a negative value. Change to become larger. Therefore, when it is detected that the acceleration Ax @ t at time t is larger than the acceleration Ax @ t-1 one measurement cycle before, that is, when the reversal of the increasing or decreasing tendency is detected, it is determined that the braking operation is started. In other words, it is determined that the braking operation is started by detecting the peak of the measurement value that appears immediately before the player stops the continuous hitting motion. Then, in the present embodiment, this determination timing is basically regarded as the input timing of the continuous hitting motion.
  • the position of the actual left hand and left game controller 1460L is further lowered to the lower swinging position Ps by the force (inertia) even after the braking operation is started, that is, the striking surface of the virtual percussion instrument 4 for the player. Or it will reach the position where I imagined that I hit the edge or the lower part of it.
  • the input effect vibration is generated by the vibrator 1463 of the left game controller 1460L.
  • a condition may be added in which the sum of the absolute values of acceleration measured on all three axes is equal to or more than a predetermined value.
  • the input timing was determined as the timing at which the measured value by the 3-axis acceleration sensor 1475 or 3-axis gyro sensor 1476 of the left game controller 1460L reached a value determined that the game controller has stopped. In this case, there is a gap between the timing at which the user thinks "I hit the virtual hit surface here" and the timing at which the game controller actually stops.
  • a timing for stopping the swing of the hand started at or near the timing at which the user thinks that "I hit the virtual hit surface here" and the braking for stopping the hand movement are detected.
  • the motion of the first operation input (Don) and the second operation input (Katsu) can be divided by focusing on how to shake the hand, the former is a vertical swinging motion in which the hand is swung vertically and the latter is a curve It can be said that it is a curve swinging down motion, which causes the hand to swing down. Further, focusing on the motion of the second operation input (cut), a pattern (don't cut pattern) to be subjected to the second operation input following the first operation input and a pattern (cut pattern) to which the second operation input is continuous are included. is there. Further, contrary to these, there is a pattern (cutaway pattern) to be subjected to the first operation input following the second operation input.
  • FIG. 7 is a conceptual diagram for explaining input type determination of operation input in the don-katsu pattern.
  • the left game controller 1460L is described as an example here, the same applies to the right game controller 1460R by changing the local coordinates from left handed to right handed.
  • the player swings the left game controller 1460L outward in the swing-up operation.
  • the trajectory of the swing-up motion is drawn obliquely upward. And, while making the wrist snap, it swings down.
  • the Zl axis is turned over (left in FIG. 7) so that the Zl axis faces the player, and the Yl axis is upward. Then, through the swing-down operation, the Zl axis is turned substantially upward through the obliquely upward, and the Yl axis is changed so as to face the front of the player. That is, the left game controller 1460L is rotated around the Xl axis. Such motion does not appear in the motion of the first operation input (Don) described above.
  • the absolute value of the angular velocity ⁇ x around the Xl axis measured by the three-axis gyro sensor 1476 of the left game controller 1460L exceeds the predetermined third determination reference value k3 and is the average value of the average angular velocity ⁇ x_ave which is the average value of the angular velocity ⁇ x.
  • a predetermined fourth determination reference value k4 it is determined that the second operation input (cut) is input.
  • the angular velocity ⁇ x at this time is measured as a negative value in the left-handed local coordinate system, the angular velocity ⁇ x reaches a predetermined negative threshold corresponding to the third determination reference value k3, and the average angular velocity ⁇ x_ave is the fourth determination. It is also possible to determine that the second operation input (cut) has been input when the negative threshold corresponding to the reference value k4 is reached.
  • the average angular velocity ⁇ x_ave is an average value of about 10 to 15 measurements of the three-axis gyro sensor 1476.
  • the measurement cycle can also be a relatively slow cycle of approximately 4 to 6 ms cycle depending on the specification of the sensor employed.
  • FIG. 8 is a conceptual diagram for explaining input type determination of an operation input in a cut pattern.
  • the left game controller 1460L is described as an example here, the same applies to the right game controller 1460R by changing the local coordinates from left handed to right handed.
  • the front direction (the positive direction of the Zl axis) of the left game controller 1460L is maintained from the obliquely upward to the upward posture.
  • Such an oblique movement with an oblique posture does not appear in the motion of the first operation input (Don) described above.
  • the ratio of the absolute value of the average acceleration Ax_ave in the Xl-axis direction measured by the 3-axis acceleration sensor 1475 of the left game controller 1460L and the absolute value of the average acceleration Az_ave in the Zl-axis direction is a predetermined fifth judgment reference value If k5 or less, it is determined that the second operation input (cut) is input.
  • FIG. 9 is a conceptual diagram for explaining input type determination of an operation input in a katsdon pattern.
  • the left game controller 1460L is described as an example here, the same applies to the right game controller 1460R by changing the local coordinates from left handed to right handed.
  • the input start position of the second operation input is outside the input start position of the first operation input (Don). Furthermore, in many cases, the input start position of the first operation input is at a higher position. Therefore, focusing on the trajectory of the left game controller 1460L in the Katsudon pattern, this involves movement in the controller front normal direction.
  • all input types are determined as the first operation input (don) except that input type determination by these three patterns is performed.
  • FIG. 10 is a view showing a display example of an operation screen related to setting of adjustment time.
  • the adjustment screen W10 is displayed on the touch panel 1406 in order to set the adjustment time.
  • the adjustment screen W10 includes a point explanation 32 for explaining the point of adjustment, the adjustment operation unit 34, and various operation icons 36 (36a, 36b,).
  • the design of the adjustment operation unit 34 can be set as appropriate, but in the present embodiment, the setting bar 34a is designed to be moved by a touch & slide operation.
  • the player is made to test the first operation input, and the operation sound is emitted at the timing after the initial adjustment time has elapsed from the input timing.
  • the player operates the adjustment operation unit 34 so as to minimize the difference between the timing that he or she imagines and the timing at which the operation sound is emitted.
  • the result of the timing adjustment is stored in the IC memory 1452 or the like as the application adjustment time, and applied to the determination of the input timing thereafter. Adjustment can basically be performed only in the delay direction, but setting the value exceeding 0 as the initial adjustment time reduces the initial adjustment time and brings it closer to 0, thus pseudo input timing Adjustments can be made as if the decision has been made earlier.
  • FIG. 11 is a diagram showing a display example of each of the determination of the input timing on the game screen and the determination of the input type.
  • the evaluation result display unit 27 notifies of the input timing. Specifically, while being determined as an input timing, the display form of the frame for displaying the evaluation result (design element such as display color, thickness of line, presence of shadow, etc.) Is changed to In the example of FIG. 11, the notification form which emphasizes an outline is shown.
  • the input type determination result of the operation input is also notified. For example, when it is determined that the first operation input (Don) is made, the type notification marker 40 is temporarily attached and displayed on the upper part of the evaluation result display section 27. If it is determined that the second operation input (cut), it is determined that the operation input by the right game controller 1460R, the type notification marker 40 is temporarily attached to the right side of the evaluation result display unit 27 Is displayed. When it is determined that the second operation input (cut) is the operation input by the left game controller 1460L, the type notification marker 40 is temporarily attached to and displayed on the left side surface of the evaluation result display unit 27.
  • FIG. 12 is a functional block diagram showing an example of a functional configuration of the game apparatus 1400 in the present embodiment.
  • the game apparatus 1400 in the present embodiment includes an operation input unit 100, a processing unit 200, a sound output unit 390, an image display unit 392, a communication unit 394, and a storage unit 500 in the main device 1401.
  • the operation input unit 100c the acceleration measurement unit 110, the angular velocity measurement unit 112, the controller processing unit 200c, the communication unit 394c, and the excitation unit And 396.
  • the operation input unit 100 is means for inputting various operations. This can be realized by a switch, a lever, a dial, a joystick, a touch panel, a track pad, a touch pad, and the like. In the configuration of FIG. 1, the touch panel 1406 corresponds to this.
  • the processing unit 200 is realized by, for example, a processor such as a CPU or a GPU, or an electronic component such as an ASIC, an FPGA, or an IC memory, and performs data input / output control with each functional unit including the operation input unit 100 and the storage unit 500. I do. Then, various operations are executed based on predetermined programs and data, operation input unit 100, and operation input signals from game controller 1460 to integrally control the operation of game device 1400. In the example of FIG. 1, the control board 1450 corresponds to this.
  • the processing unit 200 of the present embodiment includes a game operation unit 210, a clocking unit 280, a sound generation unit 290, an image generation unit 292, and a communication control unit 294.
  • a game operation unit 210 includes a game operation unit 210, a clocking unit 280, a sound generation unit 290, an image generation unit 292, and a communication control unit 294.
  • a communication control unit 294 includes a communication control unit 294.
  • functional units other than these can also be included as appropriate.
  • the game operation unit 210 executes various processes related to the progress control of the game.
  • the adjustment time setting unit 212 performs processing relating to setting of the adjustment time for adjusting the determination of the input timing.
  • display control related to the adjustment screen W10 and change / setting control of the adjustment time according to various operation inputs related to the screen correspond to this (see FIG. 10).
  • the presentation control unit 214 performs control of presenting a plurality of reference timings in the order of arrival of a plurality of reference timings to cause the player to perform a motion to move the game controller 1460 so as to hold and shake the game controller 1460.
  • the first type indicator 25a and the second type indicator 25b are flow-displayed on the music score 20, and control is performed such that the indicator is overlapped at the reference position 24 at the reference timing. (See Figure 3).
  • the timing determination unit 220 determines the input timing for each reference timing by detecting the peak of the measurement value of the state of the game controller that appears immediately before the end of the motion.
  • the premise determination unit 222 determines whether the swing down operation is continuously started following the swing up operation based on the measurement value.
  • the premise determination unit 222 determines whether the swing-down operation is continuously started following the swing-up operation based on the acceleration in the first axis direction orthogonal to the longitudinal direction of the game controller and the front normal direction of the game controller. Do. Further, the premise determination unit 222 determines whether the swing-down operation is continuously started following the swing-up operation based on the angular velocity around the second axis with the front normal direction of the game controller as the second axis.
  • the timing determination unit 220 detects the peak of the acceleration of the first axis measured in the swing-down operation when the premise determination unit 222 makes a positive determination, by detecting the reverse of the increase / decrease tendency of the measurement value.
  • the input timing is primarily determined based on the timing of the detection. Further, by detecting the peak of the angular velocity about the second axis, the input timing can be determined primarily.
  • the timing determination unit 220 finally determines the adjusted timing as the input timing from the timing determined as the primary determination (the timing at which the peak is detected) for a preset adjustment time.
  • the accelerations measured by the three-axis acceleration sensor 1475 of the right game controller 1460R or the left game controller 1460L corresponds to determining the input timing based on the angular velocity (specifically, the angular velocity around the Zl axis and the Zr axis, the angular velocity) (see FIGS. 5 and 6).
  • the input type determination unit 230 determines which type of motion among a plurality of types of motion is input, based on the measurement value of the state of the game controller measured by the sensor of the game controller. In the present embodiment, this corresponds to determining which of the first operation input (don) and the second operation input (cut) has been input. That is, it is determined whether the vertical swing down motion is input or the curve swing down motion is input.
  • the second axis is for the vertical swing down motion.
  • the determination is based on the acceleration in the axial direction of
  • the curve swing-down motion is determined based on the angular velocity about the first axis or based on the ratio of the acceleration in the axial direction of the first axis and the second axis.
  • the response output control unit 232 immediately causes the response output by sound and / or display.
  • the response output is performed.
  • the response output corresponds to the emission of the operation sound from the speaker 1410 of the main device 1401.
  • control for temporarily changing the display mode of the evaluation result display unit 27 from the standard mode 27s to the notification mode 27h and display control of the type notification marker 40 are also included (see FIG. 11).
  • the generation of the input effect vibration by the vibrator 1463 of the game controller 1460 corresponds to this (see FIGS. 5 and 6).
  • the vibration control unit 234 operates the vibration device of the game controller in the swing-down operation when the premise determination unit 222 makes an affirmative determination.
  • the generation of the windbreak producing vibration by the vibrator 1463 of the game controller 1460 corresponds to this (see FIGS. 5 and 6).
  • the evaluation unit 236 sequentially performs an evaluation based on the difference between the reference timing and the determined input timing for each reference timing. More specifically, the evaluation is performed based on the difference between the reference timing and the input timing and whether the determined input type and the reference type are the same.
  • the evaluation result notification control unit 238 performs control for notifying the determined evaluation result at each reference timing.
  • the display control of the evaluation result in the evaluation result display unit 27 corresponds to this (see FIG. 11).
  • the vibrator 1463 (vibration device) of the game controller 1460 the generation control of the input effect vibration based on the vibration pattern or the magnitude of the vibration according to the evaluation result corresponds to this (see FIGS. 5 and 6).
  • the clock unit 280 clocks the current date and time, an elapsed time from the start of play, a time limit, and the like using the system clock.
  • the sound generation unit 290 is realized by execution of an IC or software for generating and decoding audio data, and generates or decodes sound related to game play and audio data such as BGM. Then, the audio signal is output to the sound output unit 390.
  • it is possible to execute playback / sound emission control based on music data of the music to be played.
  • it is possible to control playback and emission of tapping sound according to the type of operation input.
  • the sound output unit 390 emits sound based on the input audio signal.
  • the speaker 1410 corresponds to this.
  • the image generation unit 292 can generate image data and the like of various display screens such as the game screen W3 (see FIG. 3). Then, an image signal based on the image data can be output to the image display unit 392.
  • the image display unit 392 displays various images based on the image signal input from the image generation unit 292.
  • it can be realized by an image display device such as a flat panel display, a cathode ray tube (CRT), a projector, or a head mounted display.
  • the touch panel 1406 corresponds to this in the example of FIG.
  • the communication control unit 294 executes data processing related to data communication, and realizes exchange of data with an external device via the communication unit 394.
  • a communication unit 394 connects with a communication line to realize communication.
  • the communication line means a communication path capable of data communication. That is, the communication line means a dedicated line (a dedicated cable) for direct connection, a LAN (Local Area Network) by Ethernet (registered trademark), etc., as well as a communication network such as a telephone communication network, a cable network, and the Internet. Also, the communication method may be wired or wireless. Therefore, the communication unit 394 is realized by, for example, a wireless communication device, a modem, a TA (terminal adapter), a jack of a communication cable for wired communication, a control circuit, or the like.
  • the communication module 1453 corresponds to this in the example of FIG.
  • the storage unit 500 stores programs, various data, and the like for realizing various functions for causing the processing unit 200 to control the game apparatus 1400 in an integrated manner. Further, it is used as a work area of the processing unit 200, and temporarily stores calculation results and the like executed by the processing unit 200 according to various programs.
  • This function is realized by, for example, an IC memory such as a RAM or a ROM, a magnetic disk such as a hard disk, an optical disk such as a CD-ROM or a DVD, an online storage, or the like.
  • the IC memory 1452 mounted on the control board 1450 corresponds to this.
  • FIG. 13 is a diagram showing an example of programs and data stored in the storage unit 500 in the present embodiment.
  • the storage unit 500 stores the game program 502 and the game initial setting data 510 in advance.
  • the storage unit 500 stores the play data 700 and the current date and time 800 as data sequentially generated and managed.
  • information such as a timer, a counter, and various flags can be stored appropriately.
  • the game program 502 is a program for realizing the function as the game operation unit 210 by reading and executing the processing unit 200 (see FIG. 12). Programs for functioning as the clock unit 280, the sound generation unit 290, the image generation unit 292, and the communication control unit 294 can also be appropriately included in this.
  • the game initial setting data 510 stores various initial setting data for executing a game.
  • music definition data 520, an initial reference value library 530, notification definition data 540, and an initial adjustment time 542 are included.
  • data other than these can be included as appropriate.
  • the music definition data 520 is prepared for each music playable in the game, and stores various kinds of initial setting data related to the music.
  • one piece of music definition data 520 includes a unique music name 521, music voice data 523, and music score definition data 525 for displaying the music score 20 (see FIG. 3).
  • data other than these can be included as appropriate.
  • the musical score definition data 525 is basic data for displaying various indicators in the musical score 20.
  • the data configuration can be set as appropriate, for example, a combination of a reference timing (for example, described by an elapsed time from the start of play) and a type of reference operation (for example, a type of indicator displayed in the music 20) is time-series It is possible to consider a configuration to store in. Of course, data other than these can also be stored appropriately. For example, even with the same standard operation type, the required intensity level distinction (for example, the distinction between strong and weak) can be stored in association.
  • the initial reference value library 530 stores reference values and threshold values used for determination of input timing and determination of input type of operation input.
  • the library includes the swing-up start determination reference angular velocity value 531 ( ⁇ m), the required momentum determination reference angular velocity value 532 ( ⁇ f), the swing-up start determination reference coefficient 533 (k1), and the decision determination reference coefficient 534 (K2), third determination reference value 535 (k3), fourth determination reference value 536 (k4), fifth determination reference value 537 (k5), and sixth determination reference value 538 (k6) Including.
  • other reference values and threshold values may be included as appropriate.
  • the notification definition data 540 stores various definition data for executing a notification for notifying the player of an operation input condition, a game progress condition, and the like, and is prepared for each notification method.
  • a windbreak effect vibration see FIGS. 5 and 6
  • an input effect vibration and evaluation result notification vibration see FIGS. 5 and 6) are included.
  • the latter is prepared for each type of operation input (in the present embodiment, the first operation input (don) and the second operation input (cut)). Then, in each type, data that defines whether to output a vibration pattern is stored in association with each evaluation result.
  • the play data 700 is prepared for each game play, realizes the play, and stores various data describing the progress of the game and the like.
  • the display of the music title 701 indicating the music selected by the player before the start of the play, the application adjustment time 702, the elapsed time 704 from the play start, and the music score 20 Music display control data 710 for control, measurement history data 720 prepared separately for each game controller 1460, an idle state flag 740 indicating an idle state meaning waiting for input timing determination, an angular velocity use flag list 742, an acceleration use flag list 744, peak timing 746, input determination history data 750, and play result data 760.
  • data other than these can be included as appropriate.
  • the application adjustment time 702 stores the value of the adjustment time of the input timing to be applied. Although it is initialized by the initial adjustment time 542 (see FIG. 13), it is changed along with the setting operation of the adjustment time on the adjustment screen W10 (see FIG. 10).
  • the measurement history data 720 is prepared for each game controller 1460, and stores values measured by the controller and values used for determining the input timing calculated therefrom and determining the type of operation input in time series.
  • acceleration measurement history data 722 storing acceleration measurement values for three axes
  • average acceleration measurement history data 724 storing average accelerations for three axes
  • angular velocity measurement values for storing angular velocity measurement values for three axes It includes measurement history data 726 and average angular velocity measurement history data 728 storing average angular velocities for three axes.
  • data other than these can be included as appropriate.
  • the angular velocity utilization flag list 742 includes various flags used to determine the input timing using the angular velocity.
  • an in-determination flag indicating that the input timing is being determined using the angular velocity
  • a reversal flag that is set when reversal of the positive / negative direction of the angular velocity ⁇ z about the Z axis is detected
  • the angular velocity ⁇ z It includes a demand flag that is set when the required momentum is reached, and a peak flag that is set when the peak of the angular velocity ⁇ z is detected during the swing down operation.
  • the acceleration utilization flag list 744 includes various flags used to determine the input timing using acceleration.
  • an in-determination flag indicating that the input timing is being determined using acceleration
  • a reversal flag that is set when the reversal of the increasing tendency of the acceleration Ax on the X axis is detected, and intentional swinging down It includes a confirmation flag which is set when it is determined to be an operation, and a peak flag which is set when a peak of the acceleration Ax is detected during the swing down operation.
  • the input determination history data 750 is created each time the input timing and the type of operation input are determined, and stores information indicating the result of the determination and the determination.
  • one input determination history data 750 stores an input determination timing, a type determination result, and a controller identification flag indicating which game controller 1460 the determination and determination result is.
  • data other than these can also be stored appropriately.
  • the determination regarding the operation input and the type determination include the identification of the input strength (corresponding to the strength with which the virtual percussion instrument 4 is struck), information of the determined strength can also be included.
  • FIG. 15 is a flowchart for explaining the flow of processing in the game apparatus 1400 of this embodiment. A series of flows described here are realized by executing the game program 502 in the processing unit 200.
  • the local coordinate system of the left and right game controllers 1460 is made common and illustrated and described as an X axis, a Y axis, and a Z axis.
  • the game apparatus 1400 starts recording of measured values for each game controller 1460 (step S10), and then calculates values (average values in this embodiment) used for determining input timing and type of operation input from the measured values. And start recording (step S12). That is, recording / updating of the measurement history data 720 is started by steps S10 and S12 (see FIG. 14). Then, the game apparatus 1400 starts execution of periodical input determination processing for each game controller 1460 (step S14).
  • FIGS. 16 to 17 are flowcharts for explaining the flow of the input determination process in the present embodiment.
  • the game apparatus 1400 first sets the idle state flag 740 to “1 (idle state)” and all flags in the angular velocity use flag list 742 and the acceleration use flag list 744 to “0” (step S30). ).
  • step S32 if the absolute value of the angular velocity ⁇ z about the Z axis is larger than the swing-up start determination reference angular velocity value 531 ( ⁇ m) (YES in step S32), the game apparatus 1400 sets “0 (non-idle) State) and the flag under determination in the angular velocity utilization flag list 742 is set to "1 (under determination)" (step S34). Then, the timeout counter is started (step S36).
  • the game apparatus 1400 waits for detection of positive / negative inversion of the angular velocity ⁇ z about the Z-axis until it is counted up by the timeout counter.
  • the reverse is detected (YES in step S50)
  • the game apparatus 1400 waits for the absolute value of the angular velocity ⁇ z about the Z axis to exceed the required momentum determination reference angular velocity value 532 ( ⁇ f) until the time-out counter counts up after inversion.
  • the required momentum determination reference angular velocity value 532 ( ⁇ f) is exceeded (YES in step S54)
  • the request flag in the angular velocity utilization flag list 742 is changed to “1 (satisfying the required momentum)” (step S56).
  • the wind effect effect vibration is generated (step S57).
  • the game apparatus 1400 waits for the peak detection of the angular velocity ⁇ z about the Z axis until the time-out counter is counted up (step S58). That is, the time change ⁇
  • the game device 1400 recognizes the input timing as the application adjustment time 702 (see FIG. 14; at this stage, it is initialized to “0” of the initial adjustment time 542) from the peak timing 746 and identifies it as the input timing (step S62). And type determination processing (step S64).
  • step S72 the process returns to step S30.
  • step S32 determines whether the result of the determination in step S32 is negative (YES in step S32). If the result of the determination in step S32 is negative (YES in step S32), the game apparatus 1400 proceeds to FIG. 17 and the acceleration Ax in the Xl axis direction measured by the three-axis acceleration sensor 1475 becomes the average acceleration Ax_ave.
  • the threshold value obtained by adding the predetermined swing-up start determination reference coefficient 533 (k1) is exceeded, it is determined that the “swing-up operation” is started (YES in step S100).
  • the game apparatus 1400 sets the idle state flag 740 to "0" and sets the in-determination flag of the acceleration utilization flag list 744 to "1" (step S102). Then, the timeout counter is started (step S104).
  • the game apparatus 1400 waits for the acceleration Ax @ t in the X-axis direction of the latest measurement and the acceleration Ax @ t-1 one measurement cycle before the timeout counter counts up. Compare with. Then, when it is detected that the acceleration Ax @ t in the X-axis direction of the latest measurement becomes smaller than the acceleration Ax @ t-1 one measurement cycle before, that is, when the reversal of the increase / decrease tendency is detected (YES in step S120) The inversion flag of the flag list 744 is changed to "1 (inversion detected)" (step S122).
  • the game apparatus 1400 detects the acceleration Ax in the X-axis direction and the average acceleration Ax_ave as the determination reference coefficient k2 until the time-out counter counts up after reverse detection of the increasing tendency, ie, the affirmation determination, is affirmed. Compare with the added threshold.
  • the acceleration Ax falls below the threshold (YES in step S124)
  • the wind effect rendering vibration is executed (step S128).
  • the game apparatus 1400 compares the latest acceleration Ax @ t with the acceleration Ax @ t-1 one measurement cycle before, until the time-out counter counts up after the swing down operation is determined. Then, if the latest acceleration Ax @ t and the acceleration Ax @ t-1 one measurement cycle before become larger (YES in step S130), the peak of the measurement value appearing immediately before stopping the motion is detected, so braking It is determined that the operation has been started, and the peak flag in the acceleration utilization flag list 744 is changed to "1 (peak detected)" and the peak timing 746 is temporarily stored (step S132).
  • the game device 1400 recognizes the input timing as the application adjustment time 702 (see FIG. 14; at this stage, it is initialized to “0” of the initial adjustment time 542) from the peak timing 746 and identifies it as the input timing (step S134). And type determination processing (step S136).
  • step S140 If there is no reversal of the upward trend, reaching the required momentum, and no peak detection (NO at step S140) until the time-out counter started up after detecting the start of swing-up due to acceleration is counted up. The time-out counter is stopped (step S144), and the process returns to step S30.
  • FIG. 18 is a flowchart for explaining the flow of the type determination process according to this embodiment.
  • the game apparatus 1400 determines whether the operation of the operation input determined this time corresponds to the Katsundon pattern (see FIG. 9).
  • game device 1400 determines with corresponding (YES of step S150), and makes the result of classification
  • the game apparatus 1400 next determines whether it corresponds to the don cut pattern (see FIG. 7).
  • the game apparatus 1400 determines that it corresponds to the don cut pattern (YES in step S154), and sets the result of the type determination as the second operation input (cut) (step S158) .
  • the game apparatus 1400 next determines whether it corresponds to the cut-off pattern (see FIG. 8).
  • the ratio of the absolute value of the average acceleration Ax_ave including the acceleration Ax at the peak timing 746 as the latest measured value and the absolute value of the average acceleration Az_ave including the acceleration Az at the peak timing 746 as the latest measured value is When it is equal to or less than the predetermined fifth determination reference value k5, the game apparatus 1400 determines that it corresponds to the cut pattern (YES in step S156), and sets the result of the type determination as the second operation input (cut) (step S158).
  • the game apparatus 1400 sets the result of type determination as the first operation input (don) (step S160). ).
  • step S180 the game apparatus 1400 next executes setting processing of adjustment time (step S180). That is, the adjustment screen W10 is displayed on the touch panel 1406 (see FIG. 10), and the adjustment time is set so that the player does not feel uncomfortable with the output time difference of the response sound to the operation input. Then, the application adjustment time 702 is updated with this result.
  • the game device 1400 receives the selection of the music to play (play music) (step S182), and starts the game progression control (step S184).
  • the music of the play music is emitted from the speaker 1410, and the game screen W3 (see FIG. 3) is displayed on the touch panel 1406 in synchronization with this.
  • the game apparatus 1400 evaluates the operation input and controls the notification (for example, the notification display of the type determination result (see FIG. 11)), the response output according to the operation input (for example, emission of the operation input sound), the operation Vibration control according to the input (for example, wind blowing effect vibration (see FIGS. 5 and 6) and input effect vibration (see FIGS. 5 and 6) and the like are also started.
  • the notification for example, the notification display of the type determination result (see FIG. 11)
  • the response output according to the operation input for example, emission of the operation input sound
  • the operation Vibration control according to the input for example, wind blowing effect vibration (see FIGS. 5 and 6) and input effect vibration (see FIGS. 5 and 6) and the like are also started.
  • the input determination has already been executed in step S14, and the game controller 1460 is ready for operation input.
  • the player can play the music game by operating the game controller 1460 so as to match the standard operation at the presented standard timing while watching the music score 20 of the game screen W3 while listening to the play music.
  • step S186 When the game play is finished (step S186), the play result is displayed (step S188), and the series of processing is finished.
  • a game device having a game controller equipped with an acceleration sensor or a gyro sensor
  • measurement by the sensor is performed when a game is considered to be an operation input with an operation of shaking the game controller in the air and stopping it.
  • a value can be used to implement a technique that can determine that the operation input timing is performed at a timing that the player feels insensible that it is the operation input timing.
  • a stand-alone executable game has been described as an example, but the present invention is not limited to this.
  • a computer equipped with a three-axis acceleration sensor 1475 and a three-axis gyro sensor 1476 in the controller unit is used as a player terminal, and realized as an on-line game played by accessing a game server Is also possible.
  • the game operation unit 210 in the above embodiment may be realized by a game server.
  • the relative relationship between the game controller 1460 and the measurement axis of the sensor mounted on the game controller 1460 is not limited to the example shown in FIG.
  • the type of the operation input is two types of the first operation input (don) and the second operation input (cut), but the present invention is not limited to this.
  • the level of the strength level can be set as appropriate, but if it is two levels, it can be a game having a total of four types of operation inputs. In this case, it is necessary to prepare four types of indicators to be displayed on the music score 20.
  • the input type determination unit 230 (refer to FIG.
  • the input type determination unit 230 compares the measured value at the input determination, for example, the magnitude of the acceleration at the peak timing 746 or the magnitude of the angular velocity with a predetermined threshold, It is necessary to determine the intensity level of That is, the input type determination unit 230 also functions as a "strength level determination unit".
  • a music game in which goodness in latency and response is required has been exemplified, but the present invention can be similarly applied to games of other genres.
  • a game in which a virtual hit object appears such as a virtual mole hitting game, is preferable.
  • a controller is regarded as a golf club and held by holding and waving.
  • a configuration may also be possible in which either the 3-axis acceleration sensor 1475 or the 3-axis gyro sensor 1476 is omitted from the game controller 1460 and only input determination based on acceleration or input determination based on angular velocity is limited. . Further, depending on the contents of the game, when the input timing is determined, either one of the sound and the response output by the display can be omitted.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

コンピュータ装置は、プレーヤが操作入力した入力タイミングを評価する。プレーヤは、加速度及び角速度を計測するセンサを内蔵したコントローラを手に持って、振って止めるように動かすモーションを行う。コンピュータ装置は、センサと通信接続されている。コンピュータ装置は、モーションが止まる直前に出現する計測値のピークを検出することで入力タイミングを判定する。そして、判定した入力タイミングと規準タイミングとの差に基づいて評価を行う。

Description

コンピュータ装置及び評価制御方法
　本開示は、プレーヤが操作入力した入力タイミングを評価する技術に関する。
　操作入力した入力タイミングを評価する技術は、例えば、ゲーミング技術の１つとして開発され、実用化されてきた。例えば、音楽ゲームや演奏ゲーム、リズムゲーム等と呼ばれるジャンルのゲーム（以下包括して「音楽ゲーム」という）は、再生される音楽のリズム等に合わせた所定のタイミング（規準タイミング：目標とするべきタイミング）で、如何に正確に指示された操作（規準操作：プレーヤに求められている操作入力）を行うかを楽しむタイミングゲームの代表例である。プレーヤは、自身が選んだ好みの楽曲をＢＧＭとして、リズムに合わせた操作入力を楽しむことができるので、１人でプレイするシングルプレイは勿論のこと、複数のプレーヤが参加して協力或いは対戦するマルチプレイでも人気である。
　そして、音楽ゲームの興趣を高めるための様々な技術が提案されてきた。例えば、特許文献１では、ゲームで使用するキャラクタやアイテムといったゲーム媒体の選択を受け付け、選択されたゲーム媒体の状態に応じてタイミングゲージ（規準タイミングの評価基準をゲージ形に表示するもの）を変更し、変更されたタイミングゲージに基づいて操作入力を評価することで、音楽ゲームの興趣を向上させる技術が開示されている。
　また、一方で、据置型家庭用ゲーム装置或いは携帯型ゲーム装置のゲームコントローラに加速度センサやジャイロセンサが搭載されており、ゲームコントローラを振る動作をそれらで計測して操作入力に用いている。
　例えば、特許文献２では、加速度値の増減方向が反転したタイミングにおける加速度の差に着目することで、ゲームコントローラを空中で振る操作と、ゲームコントローラに衝撃を与える操作と、を識別する技術が開示されている。
特開２０１６－１０６４６号公報 特開２００８－３６１６７号公報
　さて、音楽ゲームは、操作入力のレイテンシー或いはレスポンスに極めて厳しいゲームと言われている。すなわち、プレーヤが操作入力したと思っているタイミングと、それがゲームに反映されて操作音が放音されるタイミングとにズレが生じると、演奏している気分を大きく損ねてしまう。
　例えば、打楽器演奏をモチーフとした音楽ゲームでは、業務用に専用のゲーム装置が用意される。そうした業務用のゲーム装置では、打楽器演奏用のスティックと当該スティックで叩打する部位（叩打部）とが物理的に用意されており、叩打部への打撃をスイッチ等で物理的に計測可能に構成されており、上述のようなタイミングのズレが問題にならないように設計されている。
　しかし、同じ音楽ゲームを、加速度センサやジャイロセンサを搭載したゲームコントローラを有するゲーム装置で実行すると、上述のようなタイミングのズレが体感として明りょうに現れ得る。
　すなわち、プレーヤは、ゲームコントローラを把持し、これを打楽器演奏用のスティックと見立て、物理的には存在しない叩打部へ振り下ろすようにしてプレイする。このとき、プレーヤは、叩いている感じを自ら再現すべく、ゲームコントローラを振り切るのではなく、物理的には存在しない叩打部の仮想の被打面で止めるように操作する。
　そこで、加速度センサやジャイロセンサによる計測値から、ゲームコントローラが実際に止まった（又は、略止まった）タイミングを判定し、これを操作入力タイミングとして判断するようにプログラムを設計するのが自然であろう。しかし、プレーヤの気持ちとしては「ここで仮想の被打面を叩いた」と思っているタイミングと、実際にゲームコントローラが止まるタイミングとには、ズレが生じている場合が多い。
　また、量販される携帯型ゲーム装置や据置型家庭用ゲーム装置のゲームコントローラに使用される加速度センサやジャイロセンサは、比較的安価なセンサであるため、計測精度や分解能が低く、ゼロ点からの累積誤差が大きくなり易いといった問題がある。その為、上述のようなタイミングのズレが更に大きくなる傾向にあり、ズレの解決を難しくしている。
　加速度センサやジャイロセンサを搭載したゲームコントローラを空中で振って止める動作によって操作入力がなされたとみなす場合に、操作入力したタイミングに関するプレーヤの感覚に近くなるように、操作入力タイミングを適切に判定することができる技術が求められている。
　第１の形態は、プレーヤが操作入力した入力タイミングを評価するコンピュータ装置であって、
　前記プレーヤに対して加速度及び／又は角速度を計測するセンサを内蔵したコントローラを手に持って振って止めるように動かすモーションを行わせる規準タイミングを提示する提示部と、
　前記モーションの止める直前に出現する前記計測値のピークを検出することで前記入力タイミングを判定するタイミング判定部と、
　少なくとも前記規準タイミングと前記入力タイミングとの差に基づいて前記評価を行う評価部と、
　を備えたコンピュータ装置である。
　コントローラを手に持って振って止めるように動かすモーションを操作入力とする場合、例えば、現実には無い仮想の被叩打体を叩く動作を操作入力とするケースが考えられる。この場合、本人が叩いたと思うタイミングで、あたかも叩打用具が被叩打体に当たって止まる様子を再現するかのように、自然とモーションの最後に制動をかける。しかし実際にコントローラの移動が止まるのは、本人が叩いたと思うタイミングよりも後である。慣性等の影響で、短時間ではあるものの、実際にコントローラが止まるまでに時間を要するからである。故に、モーションが終わったタイミングである、コントローラの移動が止まったタイミングを入力タイミングとしたのでは、本人が叩いたと思うタイミングとは時間的な隔たりが生まれてしまい、遅れている感覚が生じてしまう。
　そこで、改めてモーション全体を解析したところ、本人が叩いたと思うタイミングに近い時点で計測値にピークが現れる知見が得られた。第１の形態ではこの知見に着目し、モーションが止まる前に出現する計測値のピークを検出し、当該ピークに基づいて入力タイミングを判定する。
　よって、コントローラを振って止める動作をもって操作入力と見なす場合に、プレーヤの感覚に近く、違和感の無い操作入力タイミングを判定することができる。
　第２の形態は、第１の形態において、前記タイミング判定部によって前記入力タイミングが判定された場合、直ちに音及び／又は表示による応答出力を行わせる応答出力制御部、を更に備えたコンピュータ装置である。
　第２の形態によれば、例えば、入力タイミングに応じて直ちに音や表示による応答出力が伴うゲーム、つまりレイテンシーやレスポンスの良さが要求されるゲームにおいて、特に効果を発揮させることができる。
　第３の形態は、第１又は第２の形態において、前記提示部が、複数の前記規準タイミングを到来する順に提示し、前記タイミング判定部は、前記規準タイミング毎に、対応する前記入力タイミングを判定し、前記評価部は、前記規準タイミング毎に、前記タイミング判定部によって判定された前記入力タイミングと比較する評価を順次行い、前記規準タイミング毎に、前記評価部の評価結果を報知させる評価結果報知制御部、を更に備えたコンピュータ装置である。
　第３の形態によれば、規準タイミングを次々に到来させ、次々に入力タイミングの評価及び報知を繰り返すことができる。
　第４の形態は、第３の形態において、前記コントローラが、振動デバイスを有し、前記評価結果報知制御部は、前記規準タイミング毎に、前記評価部の評価結果に応じた振動パターン又は振動の大きさで前記振動デバイスを作動させる、コンピュータ装置である。
　第４の形態によれば、評価結果を、コントローラを振動させるそのパターンや大きさで報せることができる。音や光よりも振動により直接的にコントローラを持つ手で評価結果を感じられるので、タイミングのズレ具合を直感的に理解しやすくなり、プレイ技量の向上に好適な手助けとなる。
　第５の形態は、第１～第４の何れかの形態において、前記コントローラが、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、前記センサは、前記コントローラの長手方向および前記コントローラの正面法線方向に直交する方向を第１軸とする加速度を少なくとも計測し、前記タイミング判定部は、第１軸方向の加速度のピークを検出することで前記入力タイミングを判定する、コンピュータ装置である。
　第５の形態によれば、正面側に操作ボタンが配置された長手形状のコントローラを片手で握って遊ぶ場合に好適な入力タイミングの判定技術を実現することができる。
　第６の形態は、第１～第５の何れかの形態において、前記コントローラが、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、前記センサは、前記コントローラの正面法線方向を第２軸とする第２軸回りの角速度を少なくとも計測し、前記タイミング判定部は、第２軸回りの角速度のピークを検出することで前記入力タイミングを判定する、コンピュータ装置である。
　第６の形態によれば、正面側に操作ボタンが配置された長手形状のコントローラを片手で握って操作する場合に、例えば、前腕の振りや手首のスナップ等によるコントローラの姿勢の変化を伴う操作入力においても、適切に入力タイミングを判定する技術を実現することができる。
　第７の形態は、第１～第６の何れかの形態において、前記タイミング判定部が、前記計測値の増減傾向の逆転を検出することで前記ピークを検出し、検出のタイミングに基づいて前記入力タイミングを判定する、コンピュータ装置である。
　コントローラを手に持って振って止めるように動かすモーションを操作入力とする場合、最後の制動の段階で計測値の増減傾向が逆転する知見が得られた。第７の形態ではこの知見に着目し、プレーヤがモーションを止めにかかるタイミングとして計測値の増減傾向の逆転を検出することで、入力タイミングを適切に判定することができる。
　第８の形態は、第１～第７の何れかの形態において、前記タイミング判定部が、前記ピークを検出したタイミングから、所与の調整時間分、調整したタイミングを前記入力タイミングとして判定する、コンピュータ装置である。
　第８の形態によれば、ピークを検出したタイミングと入力タイミングとして判定するタイミングまでの時間差を所与の調整時間で調整することができる。
　第９の形態は、第８の形態において、前記調整時間を設定する調整時間設定部、を更に備えたコンピュータ装置である。
　プレーヤによっては、ピークを検出したタイミングが入力タイミングとぴったりだと感じる人もいれば、やや遅い方がぴったりだと感じる人もいる。第９の形態によれば、調整時間を設定することが可能となる。
　第１０の形態は、第１～第９の何れかの形態において、前記モーションが、振り下ろし位置で止めるように手を振り下ろすモーションであり、前記タイミング判定部は、前記計測値に基づいて振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定する前提判定部を有し、この前提判定部により肯定判定された場合の前記振り下げ動作において前記計測値のピークを検出することで前記入力タイミングを判定する、コンピュータ装置である。
　コントローラを持った手を下ろすモーションは、操作入力以外でも起こり得る。
　しかし、第１０の形態によれば、入力タイミングを判定する前提として、計測値に基づいて振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定するので、操作入力としてのモーションと、それ以外のモーションとを正しく識別できる。
　第１１の形態は、第１０の形態において、前記コントローラが、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、前記センサは、前記コントローラの長手方向および前記コントローラの正面法線方向に直交する方向を第１軸とする加速度と、前記コントローラの正面法線方向を第２軸とする第２軸回りの角速度とを少なくとも計測し、前記前提判定部は、第１軸方向の加速度及び第２軸回りの角速度に基づいて、振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定する、コンピュータ装置である。
　第１１の形態によれば、正面側に複数の操作ボタンが配置された長手形状のコントローラを片手で握って操作する場合に、コントローラの上下移動に係る加速度から振り上げ動作に続いて振り下げ動作が連続して開始されたかを適切に判定できる。例えば、前腕の振りや手首のスナップ等に起因するコントローラの姿勢変化に基づいて振り上げ動作に続いて振り下げ動作が連続して開始されたことを適切に判定できる。
　第１２の形態は、第１～第１０の何れかの形態において、前記モーションには、振る方向が異なる複数種類のモーションがあり、前記提示部は、前記複数種類のモーションのうちの規準種類のモーションを、前記規準タイミングに行わせる旨を提示し、前記計測値に基づいて、前記複数種類のモーションのうち、何れの種類のモーションが入力されたかを判別する入力種類判別部、を更に備え、前記評価部は、前記規準タイミングと前記入力タイミングとの差と、前記入力種類判別部により判別された入力種類と前記規準種類とが同じか否かと、に基づいて前記評価を行う、コンピュータ装置である。
　第１２の形態によれば、更に、振る方向が異なる複数種類のモーションを駆使した操作入力の多様性を実現できる。
　第１３の形態は、第１２の形態において、前記コントローラが、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、前記センサが、前記コントローラの長手方向および前記コントローラの正面法線方向に直交する方向を第１軸とする第１軸回りの角速度を少なくとも計測し、前記複数種類のモーションには、カーブさせて手を振り下ろすカーブ振り下ろしモーションが含まれ、前記入力種類判別部が、前記第１軸回りの角速度に基づいて、前記カーブ振り下ろしモーションが入力されたか否かを判別する、コンピュータ装置である。
　第１３の形態によれば、正面側に操作ボタンが配置された長手形状のコントローラを片手で握って操作する場合に、コントローラの姿勢変化に基づいて、カーブ振り下ろしモーションを適切に判別できるので、プレーヤによる振り下ろしカーブの軌跡の違いに影響されずに、カーブ振り下ろしモーションの判別を精度良く実現することが可能になる。
　第１４の形態は、第１～第１３の何れかの形態において、前記提示部が、前記規準タイミングに行わせる前記モーションを、振る強さが大小異なる少なくとも２つの強度レベルのうちの何れで行わせるかを提示し、
　前記計測値に基づいて、入力された前記モーションの強度レベルを判別する強度レベル判別部、を更に備え、
　前記評価部は、更に、提示した強度レベルと、前記強度レベル判別部により判別された強度レベルとが同じか否か、に基づいて前記評価を行う、コンピュータ装置である。
　第１４の形態によれば、振る強さが異なるモーションを用いた、操作入力がより多彩なゲームを実現できる。
　第１５の形態は、コンピュータ装置が、プレーヤが操作入力した入力タイミングを評価するための評価制御方法であって、前記プレーヤに対して加速度及び／又は角速度を計測するセンサを内蔵したコントローラを手に持って振って止めるように動かすモーションを行わせる規準タイミングを提示することと、前記モーションの止める直前に出現する前記計測値のピークを検出することで前記入力タイミングを判定することと、少なくとも前記規準タイミングと前記入力タイミングとの差に基づいて前記評価を行うことと、を含む評価制御方法である。
　第１５の形態によれば、第１の形態と同様の効果が得られる評価制御方法を実現できる。
ゲームコントローラが着脱自在なゲーム装置の構成例を示す正面図。 ゲームコントローラを分離した状態のゲーム装置を示す図。 ゲーム内容を説明するための図であり、ゲーム画面の表示例を示す図。 規準操作の種類の例を示す図。 単発モーションについての入力タイミングの判定を説明するための概念図。 連打モーションについての入力タイミングの判定を説明するための概念図。 ドンカツパターンにおける操作入力の入力種類判別について説明するための概念図。 カツカツパターンにおける操作入力の入力種類判別について説明するための概念図。 カツドンパターンにおける操作入力の入力種類判別について説明するための概念図。 調整時間の設定に係る操作画面の表示例を示す図。 ゲーム画面における入力タイミングの判定と、入力種類判別のそれぞれの結果の表示例を示す図。 ゲーム装置の機能構成例を示す機能ブロック図。 記憶部が記憶するプログラムやデータの例を示す図。 プレイデータのデータ構成例を示す図。 ゲーム装置における処理の流れを説明するためのフローチャート。 入力判定処理の流れを説明するためのフローチャート。 図１６より続くフローチャート。 種類判別処理の流れを説明するためのフローチャート。
　以下、本発明の実施形態の例を説明するが、本発明を適用可能な形態が以下の実施形態に限られないことは勿論である。コンピュータ装置の一例としてゲーム装置を例に挙げて説明する。
　図１は、一実施形態である携帯型のゲーム装置であって、ゲームコントローラが着脱自在なゲーム装置の構成例を示す正面図である。図２は、ゲームコントローラを分離した状態の同ゲーム装置を示す図である。
　ゲーム装置１４００は、携行性と使用時の利便性とを考慮してデザインされた、携帯型ゲーム装置に分類されるコンピュータである。ゲーム装置１４００は、本体装置１４０１と、少なくとも１つの着脱可能なゲームコントローラ１４６０（右ゲームコントローラ１４６０Ｒ、左ゲームコントローラ１４６０Ｌ）と、を備える。
　本体装置１４０１は、画像表示デバイス兼接触位置入力デバイスとして機能するタッチパネル１４０６と、コネクタ１４０７と、内蔵バッテリー１４０９と、スピーカ１４１０と、制御基板１４５０と、を備える。その他、電源ボタン、音量調節ボタン等が適宜設けられている。
　コネクタ１４０７は、右ゲームコントローラ１４６０Ｒ及び左ゲームコントローラ１４６０Ｌに対応して本体装置１４０１の左右の端部それぞれに設けられている。そして、右ゲームコントローラ１４６０Ｒや左ゲームコントローラ１４６０Ｌのコネクタと接続されて、ゲームコントローラと本体装置１４０１との間の通信を実現する。
　制御基板１４５０は、ＣＰＵ（Central Processing Unit）１４５１やＧＰＵ（Graphics Processing Unit），ＤＳＰ（Digital Signal Processor）などの各種プロセッサ、ＶＲＡＭやＲＡＭ，ＲＯＭ等の各種ＩＣメモリ１４５２、携帯電話基地局や無線ＬＡＮ基地局、近距離無線器を有する他の装置などと無線通信するための通信モジュール１４５３、インターフェース回路１４５７などを搭載する。
　インターフェース回路１４５７には、タッチパネル１４０６のドライバ回路、コネクタ１４０７を介して右ゲームコントローラ１４６０Ｒや左ゲームコントローラ１４６０Ｌと信号を送受信する回路、スピーカ１４１０へ音声信号を出力する出力アンプ回路、などが含まれている。
　制御基板１４５０に搭載されているこれらの要素は、バス回路などを介して電気的に接続され、データの読み書きや信号の送受信が可能に接続されている。なお、制御基板１４５０の一部または全部をＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field-Programmable Gate Array）、ＳｏＣ（System on a Chip）にて構成してもよい。
　制御基板１４５０は、プログラムや各種データをＩＣメモリ１４５２に記憶しており、制御基板１４５０がそれらに基づいて演算処理することにより、本実施形態のゲームを実行する各種機能を実装する。
　右ゲームコントローラ１４６０Ｒ及び左ゲームコントローラ１４６０Ｌは、プレーヤがそれぞれ右手・左手に把持されるようにデザインされている。そして、右ゲームコントローラ１４６０Ｒ及び左ゲームコントローラ１４６０Ｌは、それぞれ、ジョイスティック１４６１と、操作ボタンとなる複数のプッシュスイッチ１４６２と、振動発生デバイスであるバイブレータ１４６３と、スピーカ１４６４と、コネクタ１４６７と、コントローラ制御基板１４７０と、内蔵バッテリー（図視略）と、を備える。
　コントローラ制御基板１４７０は、当該ゲームコントローラを制御するプロセッサに相当するコントローラ制御ＩＣ１４７１と、通信モジュール１４７３と、３軸加速度センサ１４７５と、３軸ジャイロセンサ１４７６と、インターフェース回路１４７７と、を備える。
　勿論、これら以外の要素、例えばイメージセンサモジュールなども適宜含めることができる。或いは、一部の要素で他の要素の機能を兼用させることで、当該他の要素を省略することもできる。例えば、３軸加速度センサ１４７５と３軸ジャイロセンサ１４７６とを１つのセンサで実現する構成、コントローラ制御ＩＣ１４７１とインターフェース回路１４７７とを統合した構成、なども可能である。
　通信モジュール１４７３は、本体装置１４０１の通信モジュール１４５３との間で、無線通信を実現する。
　図２に示すように、右ゲームコントローラ１４６０Ｒの３軸加速度センサ１４７５は、右手系のローカル座標（Ｘｒ・Ｙｒ・Ｚｒ）を構成している。具体的には、右ゲームコントローラ１４６０Ｒの正面向かって右方向（図２の右側）がＸｒ軸の正方向、コントローラの長手方向上側（図２の上側）がＹｒ軸の正方向、コントローラの正面法線方向つまりコントローラの正面手前側（図２の手前側）がＺｒ軸の正方向となるように構成されている。
　右ゲームコントローラ１４６０Ｒの３軸ジャイロセンサ１４７６は、右手系のローカル座標（Ｘｒ・Ｙｒ・Ｚｒ）を構成しており、右ゲームコントローラ１４６０Ｒの３軸加速度センサ１４７５の各軸回りの角速度を検出できるように構成されている。
　そして、右ゲームコントローラ１４６０Ｒの左端には、コネクタ１４６７を塞ぐようにアタッチメント１４６８が装着可能とされる。右ゲームコントローラ１４６０Ｒは、当該コントローラの右側を右手の親指及び母指球に当てて、当該コントローラのアタッチメント１４６８を人差し指から小指で包むようにして把持される。換言すると、正面側とは反対の背面側を掌側にして片手で握るようにして保持される。
　同様にして、左ゲームコントローラ１４６０Ｌの３軸加速度センサ１４７５は、左手系のローカル座標（Ｘｌ・Ｙｌ・Ｚｌ）を構成している。具体的には、左ゲームコントローラ１４６０Ｌの正面向かって左方向（図２の左側）がＸｌ軸の正方向、コントローラの長手方向上側（図２の上側）がＹｌ軸の正方向、コントローラの正面法線方向つまりコントローラの正面手前側（図２の手前側）がＺｌ軸の正方向となるように構成されている。
　左ゲームコントローラ１４６０Ｌの３軸ジャイロセンサ１４７６は、左手系のローカル座標（Ｘｌ・Ｙｌ・Ｚｌ）を構成しており、左ゲームコントローラ１４６０Ｌの３軸加速度センサ１４７５の各軸回りの角速度を検出できるように構成されている。
　そして、左ゲームコントローラ１４６０Ｌの左端には、コネクタ１４６７を塞ぐようにアタッチメント１４６８が装着可能とされる。左ゲームコントローラ１４６０Ｌは、当該コントローラの左側を左手の親指及び母指球に当てて、当該コントローラのアタッチメント１４６８を人差し指から小指で包むようにして把持される。換言すると、正面側とは反対の背面側を掌側にして片手で握るようにして保持される。
　図２や図５等に座標軸の方向を示す表記をしているが、この表記は各座標軸の方向を示しているだけであり、座標原点を示すものではない。
　図１に戻り、インターフェース回路１４７７は、コネクタ１４６７を介した本体装置１４０１の制御基板１４５０との有線通信を実現するための回路を含む。そして、当該コントローラが搭載する各種デバイス（ジョイスティック１４６１、プッシュスイッチ１４６２、バイブレータ１４６３、スピーカ１４６４、３軸加速度センサ１４７５、３軸ジャイロセンサ１４７６、など）と、本体装置１４０１との信号のやり取りを実現する。
　次に、本実施形態のゲームについて説明する。
　図３は、本実施形態におけるゲーム内容を説明するための図であり、ゲーム画面の表示例を示す図である。本実施形態のゲームは、リズムゲームの１つであって、本体装置１４０１のスピーカ１４１０から放音（再生）される楽曲を聴きながら、そのリズムに合わせて右ゲームコントローラ１４６０Ｒ及び左ゲームコントローラ１４６０Ｌを振って操作入力する仮想打楽器の演奏をテーマとした音楽ゲームである。
　プレーヤ２は、右ゲームコントローラ１４６０Ｒ及び左ゲームコントローラ１４６０Ｌを、仮想打楽器の仮想の叩打用具の持ち手部分を持っているつもりで把持する。そして、右ゲームコントローラ１４６０Ｒ及び左ゲームコントローラ１４６０Ｌの先には（見えないけれど）長い棒状のものが有るつもりで、自身の正面に（見えないけれど）仮想打楽器４が有り、これを叩打するように右ゲームコントローラ１４６０Ｒ及び左ゲームコントローラ１４６０Ｌを振り下ろして操作入力をする。ちなみに、本実施形態のゲームでは、仮想打楽器４を和太鼓とし、この和太鼓がプレーヤ２の正面かつ腰高付近に鼓面をプレーヤ側に向けて置かれている設定とする。
　ゲームプレイが開始されると、本体装置１４０１のスピーカ１４１０からプレイする楽曲が放音されるとともに、タッチパネル１４０６にはゲーム画面Ｗ３が表示される。
　ゲーム画面Ｗ３には、プレイ開始からの経過時間表示部１０と、楽曲名１２と、譜面２０とが表示される。譜面２０のデザインは適宜設定可能であるが、本実施形態では、画面左側に示された基準位置２４と、当該基準位置２４へ向けて流れ表示される指示体２５（２５ａ，２５ｂ）と、小節区切り線２６と、評価結果表示部２７と、スコア表示部２８と、を有する。
　基準位置２４は、規準タイミング（目標とする操作入力のタイミング）を示すための基準となる位置を示している。本実施形態では１つの譜面２０に１つだけ表示されるが、複数箇所設ける構成としてもよい。
　指示体２５は、規準操作（その時の規準タイミングでなされるべき正しい操作入力）の種類別に異なるデザインで用意されている。そして、本実施形態では譜面２０の右側から出現表示され、小節区切り線２６とともに基準位置２４へ向けてライン状に流れるように左側へ向けて移動表示される。小節区切り線２６の間がプレイ楽曲における１小節を表すことになる。指示体２５が基準位置２４と重なったタイミングが、本実施形態における規準タイミングであり、当該重なった指示体２５の種類が規準操作の種類を示すこととなる。
　評価結果表示部２７は、指示体２５の中心が基準位置２４の中心線と重なるタイミングを規準タイミングとし、重なった指示体２５の種類を規準操作として、１）規準タイミングとその時の操作入力の入力タイミングとのズレ、及び、２）規準操作と操作入力との種類の一致／不一致、に基づく入力評価を表示する。例えば、規準操作と操作入力との種類が一致し、且つ、規準タイミングと操作入力タイミングとのズレが小さい程、高評価とされる。
　スコア表示部２８には、操作入力の評価結果に応じて付与される得点の累計が表示される。
　さて、本実施形態における規準操作とそれに対応する指示体２５は２種類ある。
　図４に示すように、１つは、仮想打楽器４（和太鼓）の鼓面を叩打する第１操作入力を表す第１種指示体であるドン２５ａ（白丸）と、鼓面フチや胴部の外周を叩打する第２操作入力を表す第２種指示体であるカツ２５ｂ（網掛け四角）と、を含む。勿論、これら以外の種類の規準操作や指示体も適宜設定することができる。本実施形態では、最初に入力タイミングの判定を行い、入力タイミングが判定されると、操作入力の入力種類判別を行う。そして、判定された入力タイミングおよび操作入力種類を、その時譜面２０で提示されている規準タイミングおよび規準操作と比較して、当該操作入力についての評価が行われる。
　では先ず、本実施形態における入力タイミングの判定原理について説明する。
　第１操作入力（ドン）であれ、第２操作入力（カツ）であれ、プレーヤ２が行うモーションは、太鼓をバチで叩くが如く「振り上げ動作」「振り下げ動作」を含み、そして仮想打楽器演奏であるが故の「仮想打楽器４の鼓面と思われる振り下ろし切り位置Ｐｓで止める制動動作」との３つの動作が連続する。
　そして、更に細部に着目すれば、手首の角速度を伴い手首のスナップを効かせて叩くモーションと、手首の回転は少なくほぼ固定している状態で叩くモーションとに分類できる。前者は断続的で単発的な叩打をする場合によく見られ、後者は短時間で連続的に繰り返すいわゆる連打する場合によく見られる。よって、前者を「単発モーション」、後者を「連打モーション」と呼ぶこととする。
　先ず、単発モーションにおける入力タイミングの判定について説明する。
　図５は、単発モーションについての入力タイミングの判定を説明するための図である。なお、ここでは、左ゲームコントローラ１４６０Ｌを例に説明するが、右ゲームコントローラ１４６０Ｒについても、ローカル座標を左手系から右手系に読み変えることで同様に適用される。
　単発モーションは、左ゲームコントローラ１４６０Ｌの姿勢変化に更に着目すると、当該モーションを構成する３つの動作の開始や遷移を含む。そこで、本実施形態では、３軸ジャイロセンサ１４７６で計測されるＺｌ軸回りの角速度ωｚの変化に基づいて、第１操作入力の単発モーションを正しく識別し、適切な入力タイミングを判定する。
　具体的には、先ず、３軸ジャイロセンサ１４７６で計測されるＺ軸回りの角速度ωｚの絶対値が、所定の振り上げ開始判定基準角速度値ωｍを超過すると、「振り上げ動作」が開始されたと判定する。この場合の角速度ωｚは、左手系座標系ではマイナス方向に回転することになるので、振り上げ開始判定基準角速度値ωｍに相当する所定のマイナス基準値を下回ると振り上げ動作が開始されたと判定する構成も可能である。
　次に、振り上げ動作が開始された状態で、Ｚｌ軸回りの角速度ωｚが正負反転したことを検出すると、振り上げ動作から振り下げ動作に切り替わったと判定する。換言すると、振り上げ動作に続いて振り下げ動作が連続して開始された、と判定する。これを「前提判定」と呼ぶ。この前提判定があることで、例えば、手首の疲れをほぐすために手首を回したといった操作入力ではないなにげない動作を除去して誤判定を防止する。
　そして、この前提判定の後、Ｚｌ軸回りの角速度ωｚの絶対値が、所定の要求勢い判定基準角速度ωｆに達すると、プレーヤが意図的に第１操作入力の単発モーションとして振り下ろし動作をしていると判定する。これにより、プレーヤが単に上げた手を疲れたから下ろす行為と、振り下げ動作とを識別する。なお、この時の角速度ωｚは、左手系座標系では、プラス方向の回転なので、角速度ωｚが要求勢い判定基準角速度ωｆに相当するプラスの所定閾値に達すると、振り下ろし動作をしていると判定する構成とすることもできる。
　そして、本実施形態では、要求勢い判定基準角速度ωｆに達したタイミングで、左ゲームコントローラ１４６０Ｌのバイブレータ１４６３で、振動を発生させる。振動強度Ａｍｐは、その時計測されている角速度ωｚに比例して設定され、振り下げ動作により仮想のスティック状の叩打用具が風切りしている感じを演出する。これを「風切り演出振動」と呼ぶ。
　次に、振り下げ動作中に、３軸ジャイロセンサ１４７６で計測されるＺ軸回りの角速度ωｚの絶対値の時間変化Δ｜ωｚ｜が負になると、制動動作が開始されたと判定する。角速度ωｚの絶対値の時間変化が正から負になったということは、角速度ωｚの絶対値が増加傾向から低減傾向に変わったことを意味する。よって、角速度ωｚの絶対値のピークを判定することを意味する。換言すると、プレーヤが単発モーションを止める直前に出現する計測値のピークを検出することとなり、このピークを検出すると、制動動作が開始されたと判定する。そして、本実施形態では、基本的にはこの判定タイミングを単発モーションの入力タイミングと見なす。
　但し、実際の左手及び左ゲームコントローラ１４６０Ｌの位置は、制動動作が開始された以降もそれまでの勢い（慣性）により、更に下方の振り下ろし位置Ｐｓ、つまりはプレーヤにとっての仮想打楽器４の打面或いはその縁を叩いたと想像している位置かそれよりも下方に達することとなる。
　なお、本実施形態では、単発モーションの入力タイミングにおいて、左ゲームコントローラ１４６０Ｌのバイブレータ１４６３にて入力演出振動が発生される。「入力演出振動」は、仮想の叩打用具が仮想打楽器４の打面或いはその縁に当たった感触の再現を狙った振動である。基本的には、操作入力の種類判別結果に応じた異なった振動が発生される。そして、本実施形態では、入力演出振動は評価結果を通知する「評価結果通知振動」を兼ねる。すなわち、当該操作入力の評価結果に応じた振動強度・振動パターンで振動が発生される。
　また、上述の風切り演出振動と入力演出振動は、何れかを省略することができる。
　次に、連打モーションにおける入力タイミングの判定について説明する。
　図６は、連打モーションについての入力タイミングの判定について説明するための概念図である。なお、ここでは、左ゲームコントローラ１４６０Ｌを例に説明するが、右ゲームコントローラ１４６０Ｒについても、ローカル座標を左手系から右手系に読み変えることで同様に適用される。
　連打モーションでは、手首の位置が略一定の状態で行われるので、先の単発モーションのように姿勢変化に基づいて識別することはできない。そこで、左ゲームコントローラ１４６０Ｌの３軸加速度センサ１４７５で計測される加速度の変化に基づいて、連打モーションを正しく識別し、適切な入力タイミングを判定する。
　具体的には、プレーヤは、コントローラ左端を親指の母指球に当てた当該左端を上にした姿勢で左ゲームコントローラ１４６０Ｌを把持して操作する。そこで、３軸加速度センサ１４７５で計測されるＸｌ軸方向の加速度Ａｘが、それまでの加速度Ａｘの平均値である平均加速度Ａｘ_ａｖｅに所定の振り上げ開始判定係数ｋ１を加えた閾値を超過すると、「振り上げ動作」が開始されたと判定する。
　平均加速度Ａｘ_ａｖｅは、３軸加速度センサ１４７５の計測回数１０～１５程度分の平均値とする。計測サイクルは、採用するセンサの仕様によるが概ね４～６ｍｓサイクル程度の比較的ゆっくりとしたサイクルでも可能である。
　次に、時刻ｔの加速度Ａｘ＠ｔが、１計測サイクル前の加速度Ａｘ＠ｔ-１よりも小さくなったこと、つまりは増減傾向の反転を検出すると、振り上げ動作の終了が間近で、間もなく振り下げ動作に移行する状態にあると判定する。当該判定が、連打モーションにおける前提判定に該当する。
　この前提判定の後、振り下げ動作に移行すると、Ｘｌ軸方向の加速度Ａｘは負の値で計測されるようになる。そこで、Ｘｌ軸方向の加速度Ａｘが、平均加速度Ａｘ_ａｖｅに所定の確定判定基準係数ｋ２を加えた閾値を下回ると、プレーヤが意図的に連打モーションとして振り下ろし動作をしていると判定する。これにより、プレーヤが単に上げた手を疲れたから下ろす行為と、振り下げ動作とを識別している。連打モーションにおいても、ここで「風切り演出振動」が実行される。
　次に、振り下げ動作から制動動作に移行するが、その際、３軸加速度センサ１４７５で計測されるＸｌ軸方向の加速度Ａｘは、負の値から減速するのに伴って計測値が「０」に向かって大きくなるように変化する。
　よって、時刻ｔの加速度Ａｘ＠ｔが１計測サイクル前の加速度Ａｘ＠ｔ-１よりも大きくなったこと、つまりは増減傾向の反転を検出すると、制動動作が開始されたと判定する。換言すると、プレーヤが連打モーションを止める直前に出現する計測値のピークを検出して制動動作が開始されたと判定する。
　そして、本実施形態では、基本的にはこの判定タイミングを連打モーションの入力タイミングと見なす。
　但し、実際の左手及び左ゲームコントローラ１４６０Ｌの位置は、制動動作が開始された以降もそれまでの勢い（慣性）により、更に下方の振り下ろし位置Ｐｓ、つまりはプレーヤにとっての仮想打楽器４の打面或いはその縁を叩いたと想像している位置或いはその更に下方に達することとなる。
　なお、連打モーションの入力タイミングが判定された場合も、左ゲームコントローラ１４６０Ｌのバイブレータ１４６３にて入力演出振動が発生される。
　また、入力タイミングの判定時には、更に満たすべき条件として、３軸全てで計測される加速度の絶対値の合計が所定値以上とする条件を追加してもよい。当該追加条件を設けることで、入力タイミングと判定されるときに、振り下げ動作中にプレーヤが手首を曲げてしまう癖があっても、入力タイミングを正しく判定できるようになる。
　従来であれば、左ゲームコントローラ１４６０Ｌの３軸加速度センサ１４７５や３軸ジャイロセンサ１４７６による計測値が、ゲームコントローラが止まったと判断される値に達したタイミングをもって入力タイミングとしていたが、プレーヤの気持ちとしては「ここで仮想の被打面を叩いた」と思っているタイミングと、実際にゲームコントローラが止まるタイミングとにはズレが生じるため不具合を生じさせていた。
　しかし、本実施形態では、「ここで仮想の被打面を叩いた」と思っているタイミングやその近傍で開始される手の振り下げを止めるための制動を検知して、これを入力タイミングとするので、プレーヤの感覚にマッチした入力タイミングを判定することができる。
　次に、操作入力の入力種類の判別について説明する。
　第１操作入力（ドン）と第２操作入力（カツ）それぞれのモーションを、手の振り下ろし方に着目して分けると、前者は縦方向に手を振り下ろす縦振り下ろしモーション、後者は、カーブさせて手を振り下ろすカーブ振り下ろしモーション、であると言える。
　そして、更に第２操作入力（カツ）のモーションに着目すると、第１操作入力に続いて第２操作入力するパターン（ドンカツパターン）と、第２操作入力を連続するパターン（カツカツパターン）とがある。また、これらとは逆に第２操作入力に続いて第１操作入力するパターン（カツドンパターン）とがある。
　図７は、ドンカツパターンにおける操作入力の入力種類判別について説明するための概念図である。なお、ここでは、左ゲームコントローラ１４６０Ｌを例に説明するが、右ゲームコントローラ１４６０Ｒについても、ローカル座標を左手系から右手系に読み変えることで同様に適用される。
　ドンカツパターンにおける左ゲームコントローラ１４６０Ｌの軌跡に着目すると、プレーヤは振り上げ動作において、左ゲームコントローラ１４６０Ｌを外側に振り上げる。これをプレーヤの正面から見ると、振り上げ動作の軌跡は上斜めに向けて描かれる。そして、手首をスナップさせながら振り下げ動作をする。
　これを左ゲームコントローラ１４６０Ｌの姿勢に着目して言い換えると、振り上げ動作の終了時点ではＺｌ軸がプレーヤの側を向くように横倒し（図７では左向き）となり、Ｙｌ軸が上向きとなる。そして、振り下げ動作を経ることで、Ｚｌ軸は斜め上向きを経てほぼ真上を向き、Ｙｌ軸はプレーヤの前方を向くように変化する。つまりは、左ゲームコントローラ１４６０ＬがＸｌ軸回りで回転していることになる。こうした動きは、前述の第１操作入力（ドン）のモーションでは現れない。
　そこで、左ゲームコントローラ１４６０Ｌの３軸ジャイロセンサ１４７６で計測されるＸｌ軸回りの角速度ωｘの絶対値が、所定の第３判定基準値ｋ３を超え、且つ角速度ωｘの平均値である平均角速度ωｘ_ａｖｅの絶対値が、所定の第４判定基準値ｋ４を超える場合に、第２操作入力（カツ）が入力されたと判定する。
　この時の角速度ωｘは、左手系のローカル座標系においてマイナス値として計測されるので、角速度ωｘが第３判定基準値ｋ３に相当する所定のマイナス閾値に達し、且つ、平均角速度ωｘ_ａｖｅが第４判定基準値ｋ４に相当するマイナスの閾値に達すると、第２操作入力（カツ）が入力されたと判定する構成とすることも可能である。
　なお、平均角速度ωｘ_ａｖｅは、３軸ジャイロセンサ１４７６の計測回数１０～１５回程度分の平均値とする。計測サイクルは、採用するセンサの仕様によるが概ね４～６ｍｓサイクル程度の比較的ゆっくりとしたサイクルでも可能である。
　図８は、カツカツパターンにおける操作入力の入力種類判別について説明するための概念図である。なお、ここでは、左ゲームコントローラ１４６０Ｌを例に説明するが、右ゲームコントローラ１４６０Ｒについても、ローカル座標を左手系から右手系に読み変えることで同様に適用される。
　カツカツパターンにおける左ゲームコントローラ１４６０Ｌの軌跡に着目すると、左ゲームコントローラ１４６０Ｌの正面方向（Ｚｌ軸の正方向）が斜め上向きから上向き姿勢のまま維持される。こうした斜め姿勢のままの斜め移動は、前述の第１操作入力（ドン）のモーションでは現れない。
　そこで、左ゲームコントローラ１４６０Ｌの３軸加速度センサ１４７５で計測されるＸｌ軸方向の平均加速度Ａｘ_ａｖｅの絶対値と、Ｚｌ軸方向の平均加速度Ａｚ_ａｖｅの絶対値との割合が、所定の第５判定基準値ｋ５以下である場合に、第２操作入力（カツ）が入力されたと判定する。
　図９は、カツドンパターンにおける操作入力の入力種類判別について説明するための概念図である。なお、ここでは、左ゲームコントローラ１４６０Ｌを例に説明するが、右ゲームコントローラ１４６０Ｒについても、ローカル座標を左手系から右手系に読み変えることで同様に適用される。
　第２操作入力（カツ）の入力開始位置は、第１操作入力（ドン）の入力開始位置よりも外側となる。更には、第１操作入力の入力開始位置の方が高い位置であるケースが多い。よって、カツドンパターンにおける左ゲームコントローラ１４６０Ｌの軌跡に着目すると、コントローラ正面法線方向への移動を伴うことになる。
　ここで、左ゲームコントローラ１４６０Ｌの３軸加速度センサ１４７５で計測されるＺｌ軸方向の平均加速度Ａｚ_ａｖｅが、所定の第６判定基準値ｋ６を超える場合には、第１操作入力（ドン）が入力されたと判定する。
　そして、本実施形態では、これらの３パターンによる入力種類判別がなされる以外は、入力種類を全て第１操作入力（ドン）として判別するものとする。
　上述の入力タイミング判定と、こうした入力種類判別とによって、プレーヤが叩打したと思っている感覚的な入力タイミングを適切に判定しつつ、入り乱れる複数種類の操作入力を正確に識別することができる。
　なお、上述の入力タイミング判定と入力種類判別とによって基本的な入力判定は実現できる。しかし、振り上げ動作や振り下げ動作の腕の回し方や手首の曲げ方などは上述したのと全く同じとは言えないケースもあるだろう。プレーヤによっては、自身が叩打したと思っているタイミングと、上述の方法で判定した入力タイミングとに、僅かにズレが生じる可能性は否定できない。
　そこで、本実施形態では入力タイミングの判定に係る調整時間を設定するタイミング調整機能が用意されている。
　図１０は、調整時間の設定に係る操作画面の表示例を示す図である。調整時間の設定を行うためにタッチパネル１４０６に調整画面Ｗ１０が表示される。調整画面Ｗ１０では、調整の要領を説明する要領説明３２と、調整操作部３４と、各種操作アイコン３６（３６ａ、３６ｂ，…）とを含む。調整操作部３４のデザインは適宜設定可能であるが、本実施形態では設定バー３４ａをタッチ＆スライド操作により移動させるようにデザインされている。
　そして、タイミング調整では、プレーヤに第１操作入力を試しに行ってもらい、入力タイミングから初期調整時間経過後のタイミングで操作音を放音する。プレーヤは、自身がイメージしているタイミングと操作音が放音されるタイミングとのズレをできるだけ小さくするように調整操作部３４を操作する。そして、タイミング調整の結果が、適用調整時間として、ＩＣメモリ１４５２などに記憶されて、これ以降の入力タイミングの判定に適用されることとなる。なお、調整は、基本的に遅らせる方向にしかできないが、初期調整時間として０を超える値を設定しておくことで、この初期調整時間を低減して０に近づけることで、擬似的に入力タイミングの判定を早めているかのような調整が可能となる。
　図１１は、ゲーム画面における入力タイミングの判定と入力種類判別のそれぞれの結果の表示例を示す図である。
　プレイ中のゲーム画面では、評価結果表示部２７にて入力タイミングが報知される。具体的には、入力タイミングと判定されるとともに、評価結果を表示する枠の表示形態（表示色、線の太さ、影の有無などのデザイン要素）が標準形態２７ｓから報知形態２７ｈへ一時的に変更される。図１１の例では、輪郭線を強調する報知形態を示している。
　また、ゲーム画面では、入力タイミングの報知とともに、操作入力の入力種類判別結果も報知される。例えば、第１操作入力（ドン）と判定された場合には種類報知マーカ４０が、評価結果表示部２７の上部に一時的に添付表示される。第２操作入力（カツ）と判定された場合には、それが右ゲームコントローラ１４６０Ｒによる操作入力と判定された場合には、種類報知マーカ４０が評価結果表示部２７の右側面に一時的に添付表示される。第２操作入力（カツ）が左ゲームコントローラ１４６０Ｌによる操作入力と判定された場合には、種類報知マーカ４０が評価結果表示部２７の左側面に一時的に添付表示される。
　［機能構成の説明］
　図１２は、本実施形態におけるゲーム装置１４００の機能構成例を示す機能ブロック図である。本実施形態におけるゲーム装置１４００は、本体装置１４０１にて、操作入力部１００と、処理部２００と、音出力部３９０と、画像表示部３９２と、通信部３９４と、記憶部５００とを備える。
　そして、ゲームコントローラ１４６０（右ゲームコントローラ１４６０Ｒ、左ゲームコントローラ１４６０Ｌ）において、操作入力部１００ｃと、加速度計測部１１０と、角速度計測部１１２と、コントローラ処理部２００ｃと、通信部３９４ｃと、加振部３９６と、を備える。
　操作入力部１００は、各種操作を入力するための手段である。スイッチ、レバー、ダイヤル、ジョイスティック、タッチパネル、トラックパッド、タッチパッドなどにより実現できる。図１の構成では、タッチパネル１４０６がこれに該当する。
　処理部２００は、例えばＣＰＵやＧＰＵ等のプロセッサや、ＡＳＩＣ、ＦＰＧＡ、ＩＣメモリなどの電子部品によって実現され、操作入力部１００や記憶部５００を含む各機能部との間でデータの入出力制御を行う。そして、所定のプログラムやデータ、操作入力部１００、ゲームコントローラ１４６０からの操作入力信号などに基づいて各種の演算処理を実行してゲーム装置１４００の動作を統合的に制御する。図１の例では、制御基板１４５０がこれに該当する。
　そして、本実施形態の処理部２００は、ゲーム演算部２１０と、計時部２８０と、音生成部２９０と、画像生成部２９２と、通信制御部２９４とを含む。勿論、これら以外の機能部も適宜含めることができる。
　ゲーム演算部２１０は、ゲームの進行制御に関する各種処理を実行する。本実施形態では、調整時間設定部２１２と、提示制御部２１４と、タイミング判定部２２０と、入力種類判別部２３０と、応答出力制御部２３２と、振動制御部２３４と、評価部２３６と、評価結果報知制御部２３８と、を有する。
　調整時間設定部２１２は、入力タイミングの判定を時間調整する調整時間の設定に関する処理を行う。本実施形態では、調整画面Ｗ１０に関する表示制御及び当該画面に係る各種操作入力に応じた調整時間の変更・設定制御がこれに該当する（図１０参照）。
　提示制御部２１４は、プレーヤに対してゲームコントローラ１４６０を手に持って振って止めるように動かすモーションを行わせる規準タイミングを、複数の規準タイミングを到来する順に提示する制御を行う。本実施形態では、譜面２０において第１種指示体２５ａや第２種指示体２５ｂを流れ表示させ、規準タイミングにて指示体を基準位置２４にて重ならせるように制御することがこれに該当する（図３参照）。
　タイミング判定部２２０は、モーションの止める直前に出現するゲームコントローラの状態の計測値のピークを検出することで入力タイミングを規準タイミング毎に判定する。
　具体的には、計測値に基づいて振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定する前提判定部２２２を有する。この前提判定部２２２は、ゲームコントローラの長手方向およびゲームコントローラの正面法線方向に直交する第１軸方向の加速度に基づいて、振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定する。また、前提判定部２２２は、ゲームコントローラの正面法線方向を第２軸とする第２軸回りの角速度に基づいて、振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定する。
　そして、タイミング判定部２２０は、前提判定部２２２により肯定判定された場合の振り下げ動作において計測された第１軸の加速度のピークを、計測値の増減傾向の逆転を検出することで検出し、当該検出のタイミングに基づいて前記入力タイミングを１次判定する。また、第２軸回りの角速度のピークを検出することで入力タイミングを１次判定することができる。そして、タイミング判定部２２０は、１次判定されたタイミング（ピークを検出したタイミング）から、予め設定された調整時間分、調整したタイミングを入力タイミングとして最終判定する。
　本実施形態では、右ゲームコントローラ１４６０Ｒや左ゲームコントローラ１４６０Ｌの３軸加速度センサ１４７５で計測される加速度（具体的には、Ｘｌ軸やＸｒ軸の方向の加速度）、及び３軸ジャイロセンサ１４７６で計測される角速度（具体的には、Ｚｌ軸、Ｚｒ軸の周りの角速度、角速度）に基づいて入力タイミングを判定することがこれに該当する（図５、図６参照）
　入力種類判別部２３０は、ゲームコントローラのセンサで計測される、当該ゲームコントローラの状態の計測値に基づいて、複数種類のモーションのうち、何れの種類のモーションが入力されたかを判別する。本実施形態では、第１操作入力（ドン）と、第２操作入力（カツ）の何れが入力されたかを判別することがこれに該当する。つまり、縦振り下ろしモーションが入力されたか、カーブ振り下ろしモーションが入力されたかを判別する。
　より具体的には、ゲームコントローラの長手方向およびゲームコントローラの正面法線方向に直交する方向を第１軸とし、正面法線方向を第２軸とすると、縦振り下ろしモーションについては、第２軸の軸方向の加速度に基づいて判別する。カーブ振り下ろしモーションについては、第１軸回りの角速度に基づいて、又は第１軸および前記第２軸の軸方向の加速度の比に基づいて判別する。
　応答出力制御部２３２は、タイミング判定部２２０によって入力タイミングが判定された場合、直ちに音及び／又は表示による応答出力を行わせる。本実施形態では、入力タイミングが判定されて、入力種類判別部２３０により操作入力が種類判別された場合に、応答出力を行う。応答出力は、本体装置１４０１のスピーカ１４１０からの操作音の放音がこれに該当する。また、評価結果表示部２７の表示形態を、標準形態２７ｓから報知形態２７ｈへ一時的に変更する制御と、種類報知マーカ４０の表示制御も含まれる（図１１参照）。また、ゲームコントローラ１４６０のバイブレータ１４６３による入力演出振動の発生がこれに該当する（図５、図６参照）。
　振動制御部２３４は、前提判定部２２２により肯定判定された場合の振り下げ動作において、ゲームコントローラの振動デバイスを作動させる。本実施形態では、ゲームコントローラ１４６０のバイブレータ１４６３による風切り演出振動の発生がこれに該当する（図５、図６参照）。
　評価部２３６は、規準タイミングと判定された入力タイミングとの差に基づく評価を、規準タイミング毎に順次行う。より具体的には、規準タイミングと入力タイミングとの差と、判別された入力種類と規準種類とが同じか否かと、に基づいて評価を行う。
　評価結果報知制御部２３８は、規準タイミング毎に、判定された評価結果を報知するための制御を行う。本実施形態では、評価結果表示部２７での評価結果の表示制御がこれに該当する（図１１参照）。更には、ゲームコントローラ１４６０のバイブレータ１４６３（振動デバイス）にて、評価結果に応じた振動パターン又は振動の大きさによる入力演出振動の発生制御がこれに該当する（図５、図６参照）。
　計時部２８０は、システムクロックを利用して現在日時やプレイ開始からの経過時間、制限時間等の計時を行う。
　音生成部２９０は、音声データの生成、デコードをするＩＣやソフトウェアの実行により実現され、ゲームプレイに係る音、ＢＧＭなどの音声データを生成或いはデコードする。そして、音声信号を音出力部３９０へ出力する。本実施形態では、プレイする楽曲の音楽データに基づく再生・放音制御を実行することができる。また、操作入力の種類別の叩打演出音の再生・放音制御を行うことができる。
　音出力部３９０は、入力された音声信号に基づいて放音する。図１の例ではスピーカ１４１０がこれに該当する。
　画像生成部２９２は、ゲーム画面Ｗ３（図３参照）等の各種表示画面の画像データ等を生成することができる。そして、画像データに基づく画像信号を画像表示部３９２へ出力することができる。
　画像表示部３９２は、画像生成部２９２から入力される画像信号に基づいて各種画像を表示する。例えば、フラットパネルディスプレイ、ブラウン管（ＣＲＴ）、プロジェクター、ヘッドマウントディスプレイといった画像表示装置によって実現できる。図１の例ではタッチパネル１４０６がこれに該当する。
　通信制御部２９４は、データ通信に係るデータ処理を実行し、通信部３９４を介して外部装置とのデータのやりとりを実現する。
　通信部３９４は、通信回線と接続して通信を実現する。通信回線は、データ通信が可能な通信路を意味する。すなわち、通信回線とは、直接接続のための専用線（専用ケーブル）やイーサネット（登録商標）等によるＬＡＮ（Local Area Network）の他、電話通信網やケーブル網、インターネット等の通信網を含む意味であり、また、通信方法については有線／無線を問わない。よって、通信部３９４は、例えば、無線通信機、モデム、ＴＡ（ターミナルアダプタ）、有線用の通信ケーブルのジャックや制御回路等によって実現される。図１の例では通信モジュール１４５３がこれに該当する。
　記憶部５００は、処理部２００にゲーム装置１４００を統合的に制御させるための諸機能を実現するためのプログラムや各種データ等を記憶する。また、処理部２００の作業領域として用いられ、処理部２００が各種プログラムに従って実行した演算結果などを一時的に記憶する。この機能は、例えばＲＡＭやＲＯＭなどのＩＣメモリ、ハードディスク等の磁気ディスク、ＣＤ－ＲＯＭやＤＶＤなどの光学ディスク、オンラインストレージなどによって実現される。図１の例では制御基板１４５０が搭載するＩＣメモリ１４５２がこれに該当する。
　図１３は、本実施形態における記憶部５００が記憶するプログラムやデータの例を示す図である。記憶部５００は、ゲームプログラム５０２と、ゲーム初期設定データ５１０と、を予め記憶する。また、記憶部５００は、逐次生成・管理されるデータとして、プレイデータ７００と、現在日時８００と、を記憶する。その他、タイマーや、カウンタ、各種フラグなどの情報を適宜記憶できる。
　ゲームプログラム５０２は、処理部２００が読み出して実行することで、ゲーム演算部２１０としての機能を実現させるためのプログラムである（図１２参照）。計時部２８０、音生成部２９０、画像生成部２９２、通信制御部２９４として機能させるためのプログラムも適宜これに含めることができる。
　ゲーム初期設定データ５１０は、ゲームを実行させるための各種初期設定データを格納する。本実施形態では、楽曲定義データ５２０と、初期基準値ライブラリ５３０と、報知定義データ５４０と、初期調整時間５４２と、を含む。勿論、これら以外のデータも適宜含めることができる。
　楽曲定義データ５２０は、ゲームでプレイ可能な楽曲毎に用意され、当該楽曲に関する各種初期設定データを格納する。例えば、１つの楽曲定義データ５２０は、固有の楽曲名５２１と、楽曲音声データ５２３と、譜面２０（図３参照）を表示するための譜面定義データ５２５と、を含む。勿論、これら以外のデータも適宜含めることができる。
　譜面定義データ５２５は、譜面２０にて各種指示体を流れ表示するための基礎データである。データ構成は適宜設定可能であるが、例えば、規準タイミング（例えば、プレイ開始からの経過時間で記述）と規準操作の種類（例えば、譜面２０で流れ表示する指示体の種類）の組み合わせを時系列に格納する構成が考えられる。勿論、これら以外のデータも適宜格納することができる。例えば、同じ規準操作の種類でも、要求する強度レベルの区別（例えば、強弱の区別）も対応づけて格納することができる。
　初期基準値ライブラリ５３０は、入力タイミングの判定や、操作入力の入力種類判別に用いられる基準値や閾値を格納する。本実施形態では、当該ライブラリには、振り上げ開始判定基準角速度値５３１（ωｍ）と、要求勢い判定基準角速度値５３２（ωｆ）と、振り上げ開始判定基準係数５３３（ｋ１）と、確定判定基準係数５３４（ｋ２）と、第３判定基準値５３５（ｋ３）と、第４判定基準値５３６（ｋ４）と、第５判定基準値５３７（ｋ５）と、第６判定基準値５３８（ｋ６）と、を含む。勿論、これら以外の基準値や閾値も適宜含めることができる。
　報知定義データ５４０は、プレーヤへ操作入力状況やゲーム進行状況等を報せるための報知を実行するための各種定義データを格納し、報知の手法別に用意されている。本実施形態では、風切り演出振動（図５、図６参照）と、入力演出振動兼評価結果通知振動（図５、図６参照）と、を含む。後者は、操作入力の種類別（本実施形態では、第１操作入力（ドン）と第２操作入力（カツ））に用意される。そして、それぞれの種類において、各評価結果に対応づけて、振動パターンを出力するかを定義するデータが格納されている。
　プレイデータ７００は、ゲームプレイ毎に用意され、当該プレイを実現し、ゲーム進行状況等を記述する各種データを格納する。
　本実施形態では、例えば図１４に示すように、プレイ開始前にプレーヤが選択した楽曲を示すプレイ楽曲名７０１と、適用調整時間７０２と、プレイ開始からの経過時間７０４と、譜面２０の表示を制御するための譜面表示制御データ７１０と、ゲームコントローラ１４６０別に用意される計測履歴データ７２０と、入力タイミングの判定待ち状態を意味するアイドル状態であることを示すアイドル状態フラグ７４０と、角速度利用フラグリスト７４２と、加速度利用フラグリスト７４４と、ピークタイミング７４６と、入力判定履歴データ７５０と、プレイ成績データ７６０と、を含む。勿論、これら以外のデータも適宜含めることができる。
　適用調整時間７０２は、適用される入力タイミングの調整時間の値を格納する。初期調整時間５４２（図１３参照）により初期化されるが、調整画面Ｗ１０（図１０参照）による調整時間の設定操作にともなって変更される。
　計測履歴データ７２０は、ゲームコントローラ１４６０毎に用意され、当該コントローラで計測された値及びそこから演算される入力タイミングの判定や操作入力の種類判別に使用される値を時系列に格納する。本実施形態では、３軸分の加速度計測値を格納する加速度計測履歴データ７２２と、３軸分の平均加速度を格納する平均加速度計測履歴データ７２４と、３軸分の角速度計測値を格納する角速度計測履歴データ７２６と、３軸分の平均角速度を格納する平均角速度計測履歴データ７２８と、を含む。勿論、これら以外のデータも適宜含めることができる。
　角速度利用フラグリスト７４２は、角速度を利用した入力タイミングの判定に利用するための各種フラグを含む。本実施形態では、角速度を利用した入力タイミングの判定中であることを示す判定中フラグと、Ｚ軸回りの角速度ωｚの正負の方向の反転が検出されると立てられる反転フラグと、角速度ωｚが要求されている勢いに達した場合に立てられる要求フラグと、振り下げ動作中に角速度ωｚのピークが検出されると立てられるピークフラグと、を含む。
　加速度利用フラグリスト７４４は、加速度を利用した入力タイミングの判定に利用するための各種フラグを含む。本実施形態では、加速度を利用した入力タイミングの判定中であることを示す判定中フラグと、Ｘ軸の加速度Ａｘの増加傾向の反転が検出されると立てられる反転フラグと、意図的な振り下げ動作であると確定されると立てられる確定フラグと、振り下げ動作中に加速度Ａｘのピークが検出されると立てられるピークフラグと、を含む。
　入力判定履歴データ７５０は、入力タイミング及び操作入力の種類判別の都度に作成されて、判定及び判別の結果を示す情報を格納する。例えば、１つの入力判定履歴データ７５０は、入力判定タイミングと、種類判別結果と、それがどのゲームコントローラ１４６０についての判定及び判別結果であるかを示すコントローラ識別フラグと、を格納する。勿論、これら以外のデータも適宜格納することができる。例えば操作入力に係る判定や種類判別に、入力強度（仮想打楽器４を叩打する強さに相当）の識別が含まれる場合には、判定された強度の情報も含めることができる。
　［動作の説明］
　図１５は、本実施形態のゲーム装置１４００における処理の流れを説明するためのフローチャートである。ここで説明する一連の流れは、処理部２００にてゲームプログラム５０２を実行することにより実現される。また、左右のゲームコントローラ１４６０のローカル座標系を共通化してＸ軸、Ｙ軸、Ｚ軸として図示および説明する。
　先ずゲーム装置１４００は、ゲームコントローラ１４６０毎の計測値の記録を開始し（ステップＳ１０）、次いで計測値から入力タイミング及び操作入力の種別判別に使用する値（本実施形態では、平均値）の算出及び記録を開始する（ステップＳ１２）。すなわち、ステップＳ１０とステップＳ１２により計測履歴データ７２０の記録・更新が開始される（図１４参照）。
　そして、ゲーム装置１４００は、ゲームコントローラ１４６０別に、周期的な入力判定処理の実行を開始する（ステップＳ１４）。
　図１６～図１７は、本実施形態における入力判定処理の流れを説明するためのフローチャートである。同処理において、ゲーム装置１４００は、先ずアイドル状態フラグ７４０を「１（アイドル状態）」に、角速度利用フラグリスト７４２及び加速度利用フラグリスト７４４の全てのフラグを「０」にそれぞれ設定する（ステップＳ３０）。
　次に、ゲーム装置１４００は、Ｚ軸回りの角速度ωｚの絶対値が、振り上げ開始判定基準角速度値５３１（ωｍ）よりも大きければ（ステップＳ３２のＹＥＳ）、アイドル状態フラグ７４０を「０（非アイドル状態）」に設定し、角速度利用フラグリスト７４２の判定中フラグを「１（判定中）」に設定する（ステップＳ３４）。そして、タイムアウトカウンタを始動する（ステップＳ３６）。
　次に、ゲーム装置１４００は、タイムアウトカウンタでカウントアップするまでの間、Ｚ軸回りの角速度ωｚの正負反転の検出を待つ。そして、反転を検出すると（ステップＳ５０のＹＥＳ）、振り上げ動作から振り下げ動作に移行したと判断し、角速度利用フラグリスト７４２の反転フラグを「１（反転済み）」に変更する（ステップＳ５２）。
　続いて、ゲーム装置１４００は、反転後、タイムアウトカウンタがカウントアップするまでの間、更にＺ軸回りの角速度ωｚの絶対値が要求勢い判定基準角速度値５３２（ωｆ）を超えるのを待つ。そして、要求勢い判定基準角速度値５３２（ωｆ）を超えると（ステップＳ５４のＹＥＳ）、角速度利用フラグリスト７４２の要求フラグを「１（要求勢いを満たした）」に変更する（ステップＳ５６）。そして、風切り演出振動を発生させる（ステップＳ５７）。
　続いて、ゲーム装置１４００は、要求される勢いに達した後、タイムアウトカウンタがカウントアップするまでの間、更にＺ軸回りの角速度ωｚのピーク検出を待つ（ステップＳ５８）。すなわち、絶対値の時間変化Δ｜ωｚ｜を算出する。そして、それが負になるとピークを検出したと判断して（ステップＳ５８のＹＥＳ）、角速度利用フラグリスト７４２のピークフラグを「１（ピーク検出済み）」に変更するとともにピークタイミング７４６を一時記憶する（ステップＳ６０）。
　次いで、ゲーム装置１４００は、ピークタイミング７４６から適用調整時間７０２（図１４参照；この段階では初期調整時間５４２の「０」に初期化されている。）の経過をもって入力タイミングと認定し（ステップＳ６２）、種類判別処理を実行する（ステップＳ６４）。
　もし、振り上げ開始を検出してから始動されたタイムアウトカウンタがカウントアップするまでに、正負反転と、要求される勢いへの到達、そしてピーク検出がなければ（ステップＳ７０のＮＯ）、タイムアウトカウンタを停止して（ステップＳ７２）、ステップＳ３０に戻る。
　一方、ステップＳ３２にて否定された場合（ステップＳ３２のＹＥＳ）、ゲーム装置１４００は、図１７に移行して、３軸加速度センサ１４７５で計測されるＸｌ軸方向の加速度Ａｘが、平均加速度Ａｘ_ａｖｅに所定の振り上げ開始判定基準係数５３３（ｋ１）を加えた閾値を超過すると、「振り上げ動作」が開始されたと判定する（ステップＳ１００のＹＥＳ）。
　振り上げ動作の開始を判定すると、ゲーム装置１４００は、アイドル状態フラグ７４０を「０」にするとともに、加速度利用フラグリスト７４４の判定中フラグを「１」に設定する（ステップＳ１０２）。そして、タイムアウトカウンタを始動する（ステップＳ１０４）。
　振り上げ動作の開始が判定されたならば、ゲーム装置１４００は、タイムアウトカウンタがカウントアップするまでの間、最新計測のＸ軸方向の加速度Ａｘ＠ｔと、１計測サイクル前の加速度Ａｘ＠ｔ-１とを比較する。
　そして、最新計測のＸ軸方向の加速度Ａｘ＠ｔが１計測サイクル前の加速度Ａｘ＠ｔ-１よりも小さくなったこと、つまりは増減傾向の反転を検出すると（ステップＳ１２０のＹＥＳ）、加速度利用フラグリスト７４４の反転フラグを「１（反転検出済み）」に変更する（ステップＳ１２２）。
　続いて、ゲーム装置１４００は、増加傾向の反転検出つまり前提判定が肯定された後、タイムアウトカウンタがカウントアップするまでの間、Ｘ軸方向の加速度Ａｘと、平均加速度Ａｘ_ａｖｅに確定判定基準係数ｋ２を加えた閾値とを比較する。
　そして、加速度Ａｘが当該閾値を下回ると（ステップＳ１２４のＹＥＳ）、プレーヤが意図的に振り下げ動作をしていると確定判定し、加速度利用フラグリスト７４４の確定フラグを「１（振り下げ動作確定）」に変更する（ステップＳ１２６）。次いで、風切り演出振動を実行する（ステップＳ１２８）。
　次に、ゲーム装置１４００は、振り下げ動作が確定してから、タイムアウトカウンタがカウントアップするまでの間、最新の加速度Ａｘ＠ｔと１計測サイクル前の加速度Ａｘ＠ｔ-１とを比較する。
　そして、最新の加速度Ａｘ＠ｔと１計測サイクル前の加速度Ａｘ＠ｔ-１よりも大きくなったならば（ステップＳ１３０のＹＥＳ）、モーションを止める直前に出現する計測値のピークを検出したので制動動作が開始されたと判定し、加速度利用フラグリスト７４４のピークフラグを「１（ピーク検出済み）」に変更するとともにピークタイミング７４６を一時記憶する（ステップＳ１３２）。
　次いで、ゲーム装置１４００は、ピークタイミング７４６から適用調整時間７０２（図１４参照；この段階では初期調整時間５４２の「０」に初期化されている。）の経過をもって入力タイミングと認定し（ステップＳ１３４）、種類判別処理を実行する（ステップＳ１３６）。
　もし、加速度による振り上げ開始を検出してから始動されたタイムアウトカウンタがカウントアップするまでに、増加傾向の反転と、要求される勢いへの到達、そしてピーク検出がなければ（ステップＳ１４０のＮＯ）、タイムアウトカウンタを停止して（ステップＳ１４４）、ステップＳ３０に戻る。
　図１８は、本実施形態における種類判別処理の流れを説明するためのフローチャートである。同処理において、ゲーム装置１４００は、今回判定された操作入力の動作が、カツドンパターンに該当するかを判定する（図９参照）。
　具体的には、ピークタイミング７４６のＺ軸方向の加速度Ａｚを最新の計測値として含む平均加速度Ａｚ_ａｖｅが、第６判定基準値５３８（ｋ６）に達したならば、ゲーム装置１４００は、カツドンパターンに該当すると判定して（ステップＳ１５０のＹＥＳ）、種別判別の結果を第１操作入力（ドン）とする（ステップＳ１５２）。
　もし、カツドンパターンに該当しなければ（ステップＳ１５０のＮＯ）、ゲーム装置１４００は、次にドンカツパターンに該当するかを判定する（図７参照）。
　具体的には、ピークタイミング７４６における角速度ωｘの絶対値が、所定の第３判定基準値ｋ３を超え、且つピークタイミング７４６における角速度ωｘを最新の計測値として含む平均角速度ωｘ_ａｖｅの絶対値が、所定の第４判定基準値ｋ４を超える場合、ゲーム装置１４００は、ドンカツパターンに該当すると判定して（ステップＳ１５４のＹＥＳ）、種別判別の結果を第２操作入力（カツ）とする（ステップＳ１５８）。
　もし、カツドンパターンにも、ドンカツパターンにも該当しなければ（ステップＳ１５４のＮＯ）、ゲーム装置１４００は、次にカツカツパターンに該当するかを判定する（図８参照）。
　具体的には、ピークタイミング７４６の加速度Ａｘを最新の計測値として含む平均加速度Ａｘ_ａｖｅの絶対値と、ピークタイミング７４６の加速度Ａｚを最新の計測値として含む平均加速度Ａｚ_ａｖｅの絶対値との割合が、所定の第５判定基準値ｋ５以下である場合に、ゲーム装置１４００は、カツカツパターンに該当すると判定して（ステップＳ１５６のＹＥＳ）、種別判別の結果を第２操作入力（カツ）とする（ステップＳ１５８）。
　そして、カツドンパターンにも、ドンカツパターンにも、カツカツパターンにも該当しなければ（ステップＳ１５６のＮＯ）、ゲーム装置１４００は、種別判別の結果を第１操作入力（ドン）とする（ステップＳ１６０）。
　図１５に戻って、ステップＳ１４にて、ゲームコントローラ別の周期的な入力判定処理の実行を開始したので、これでゲームコントローラ１４６０の準備ができたことになる。
　そこで、ゲーム装置１４００は、次に調整時間の設定処理を実行する（ステップＳ１８０）。すなわち、タッチパネル１４０６に調整画面Ｗ１０を表示させ（図１０参照）、操作入力に対する応答音の出力時間差が、プレーヤが違和感を覚えないように調整時間の設定を行ってもらう。そして、この結果で適用調整時間７０２を更新する。
　次いで、ゲーム装置１４００は、プレイする楽曲（プレイ曲）の選択を受け付け（ステップＳ１８２）、ゲーム進行制御を開始する（ステップＳ１８４）。これにより、スピーカ１４１０からはプレイ曲の楽曲が放音されるとともに、これと同期するようにしてタッチパネル１４０６では、ゲーム画面Ｗ３（図３参照）が表示される。
　また、ゲーム装置１４００は、操作入力の評価とその報知制御（例えば、種別判定結果の報知表示（図１１参照））、操作入力に応じた応答出力（例えば、操作入力音の放音）、操作入力に応じた振動制御（例えば、風切り演出振動（図５，図６参照）や入力演出振動（図５，図６参照））なども開始する。
　すでに、ステップＳ１４により入力判定が実行されており、ゲームコントローラ１４６０による操作入力の準備が整っている。プレーヤは、プレイ曲を聴きつつ、ゲーム画面Ｗ３の譜面２０を見ながら、提示された規準タイミングで規準操作に合致するようにゲームコントローラ１４６０で操作入力して音楽ゲームをプレイすることができる。
　ゲームプレイが終了したならば（ステップＳ１８６）、プレイ成績の表示を行って（ステップＳ１８８）、一連の処理を終了する。
　以上、本実施形態によれば、加速度センサやジャイロセンサを搭載したゲームコントローラを有するゲーム装置において、当該ゲームコントローラを空中で振って止める動作をもって操作入力と見なすゲームを実行する際に、センサによる計測値を用いて、プレーヤが操作入力したタイミングであると感覚的に感じるタイミングで操作入力タイミングをしたと判定できる技術を実現できる。
　〔変形例〕
　以上、本発明を適用した実施形態について説明したが、本発明を適用可能な実施形態は上記に限定されるものではなく、適宜構成要素の追加・省略・変更を施すことができる。
　例えば、上記実施形態では、スタンドアローンで実行可能なゲームを例に挙げて説明したがこれに限らない。上記実施形態のゲームコントローラ１４６０と同様に３軸加速度センサ１４７５と３軸ジャイロセンサ１４７６とをコントローラ部に備えたコンピュータをプレーヤ端末として使用し、ゲームサーバにアクセスしてプレイするオンラインゲームとして実現する形態も可能である。その場合、上記実施形態におけるゲーム演算部２１０（図１２参照）を、ゲームサーバにて実現すれば良い。
　また、ゲームコントローラ１４６０と、これに搭載されるセンサの計測軸との相対関係は、図２の例に限定されるものではなく、適宜変更可能である。
　また、上記実施形態では、操作入力の種類を第１操作入力（ドン）と第２操作入力（カツ）の２種類としたがこれに限らない。例えば、第１操作入力と第２操作入力とでそれぞれ振る強さが大小異なる強度レベルを設けることができる。強度レベルの段階は適宜設定可能であるが、仮に２段階とすれば合計４種類の操作入力を有するゲームとすることができる。そして、この場合、譜面２０に表示する指示体の種類も４種類分用意する必要がある。加えて、入力種類判別部２３０（図１２参照）にて、入力判定時の計測値、例えばピークタイミング７４６における加速度の大きさや角速度の大きさを所定の閾値と比較することで、入力されたモーションの強度レベルを判別させるようにする必要がある。つまり、入力種類判別部２３０を「強度レベル判別部」としても機能させる。
　また、上記実施形態では、レイテンシーやレスポンスの良さが要求される音楽ゲームを例示したが、その他のジャンルのゲームにおいても同様に適用することができる。
　例えば、仮想のモグラ叩きゲームなど、仮想の被打撃体が出現するゲームが好適である。また、レイテンシーやレスポンスの良さをそれほど要求しない例としては、コントローラをゴルフクラブに見立てて握って振ってプレイするゴルフゲームにも適用することができる。
　そして、ゲーム内容によっては、ゲームコントローラ１４６０から３軸加速度センサ１４７５と、３軸ジャイロセンサ１４７６の何れかを省略し、加速度に基づく入力判定または角速度に基づく入力判定のみに限定した構成も可能である。また、ゲーム内容によっては、入力タイミングが判定された場合、音及び表示による応答出力の何れか一方を省略することができる。
　　４…仮想打楽器
　　２０…譜面
　　２７…評価結果表示部
　　３４…調整操作部
　　４０…種類報知マーカ
　　１１０…加速度計測部
　　１１２…角速度計測部
　　２００…処理部
　　２１０…ゲーム演算部
　　２１２…調整時間設定部
　　２１４…提示制御部
　　２２０…タイミング判定部
　　２２２…前提判定部
　　２３０…入力種類判別部
　　２３２…応答出力制御部
　　２３４…振動制御部
　　２３６…評価部
　　２３８…評価結果報知制御部
　　３９６…加振部
　　５００…記憶部
　　５０２…ゲームプログラム
　　５１０…ゲーム初期設定データ
　　５２０…楽曲定義データ
　　５３０…初期基準値ライブラリ
　　５３１…振り上げ開始判定基準角速度値
　　５３２…要求勢い判定基準角速度値
　　５３３…振り上げ開始判定基準係数
　　５３４…確定判定基準係数
　　５３５…第３判定基準値
　　５３６…第４判定基準値
　　５３７…第５判定基準値
　　５３８…第６判定基準値
　　５４０…報知定義データ
　　５４２…初期調整時間
　　７００…プレイデータ
　　７０２…適用調整時間
　　７１０…譜面表示制御データ
　　７２０…計測履歴データ
　　７２２…加速度計測履歴データ
　　７２４…平均加速度計測履歴データ
　　７２６…角速度計測履歴データ
　　７２８…平均角速度計測履歴データ
　　７４２…角速度利用フラグリスト
　　７４４…加速度利用フラグリスト
　　７４６…ピークタイミング
　　１４００…ゲーム装置
　　１４０１…本体装置
　　１４５０…制御基板
　　１４６０Ｌ…左ゲームコントローラ
　　１４６０Ｒ…右ゲームコントローラ
　　１４７５…３軸加速度センサ
　　１４７６…３軸ジャイロセンサ
　　Ａｘ…Ｘ軸方向の加速度
　　Ａｘ_ａｖｅ…Ｘ軸方向の平均加速度
　　Ａｚ…Ｚ軸方向の加速度
　　Ａｚ_ａｖｅ…Ｚ軸方向の平均加速度
　　ｋ１…振り上げ開始判定係数
　　ｋ２…確定判定基準係数
　　ｋ３…第３判定基準値
　　ｋ４…第４判定基準値
　　ｋ５…第５判定基準値
　　ｋ６…第６判定基準値
　　ωｆ…判定基準角速度
　　ωｍ…振り上げ開始判定基準角速度値
　　ωｘ…Ｘ軸回りの角速度
　　ωｘ_ａｖｅ…Ｘ軸方向の平均角速度
　　ωｚ…Ｚ軸回りの角速度

Claims (15)

  1. 　プレーヤが操作入力した入力タイミングを評価するコンピュータ装置であって、
    　前記プレーヤに対して加速度及び／又は角速度を計測するセンサを内蔵したコントローラを手に持って振って止めるように動かすモーションを行わせる規準タイミングを提示する提示部と、
    　前記モーションの止める直前に出現する前記計測値のピークを検出することで前記入力タイミングを判定するタイミング判定部と、
    　少なくとも前記規準タイミングと前記入力タイミングとの差に基づいて前記評価を行う評価部と、
    　を備えたコンピュータ装置。
  2. 　前記タイミング判定部によって前記入力タイミングが判定された場合、直ちに音及び／又は表示による応答出力を行わせる応答出力制御部、
    　を更に備えた請求項１に記載のコンピュータ装置。
  3. 　前記提示部は、複数の前記規準タイミングを到来する順に提示し、
    　前記タイミング判定部は、前記規準タイミング毎に、対応する前記入力タイミングを判定し、
    　前記評価部は、前記規準タイミング毎に、前記タイミング判定部によって判定された前記入力タイミングと比較する評価を順次行い、
    　前記規準タイミング毎に、前記評価部の評価結果を報知させる評価結果報知制御部、
    　を更に備えた請求項１又は２に記載のコンピュータ装置。
  4. 　前記コントローラは、振動デバイスを有し、
    　前記評価結果報知制御部は、前記規準タイミング毎に、前記評価部の評価結果に応じた振動パターン又は振動の大きさで前記振動デバイスを作動させる、
    　請求項３に記載のコンピュータ装置。
  5. 　前記コントローラは、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、
    　前記センサは、前記コントローラの長手方向および前記コントローラの正面法線方向に直交する方向を第１軸とする加速度を少なくとも計測し、
    　前記タイミング判定部は、第１軸方向の加速度のピークを検出することで前記入力タイミングを判定する、
    　請求項１～４の何れか一項に記載のコンピュータ装置。
  6. 　前記コントローラは、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、
    　前記センサは、前記コントローラの正面法線方向を第２軸とする第２軸回りの角速度を少なくとも計測し、
    　前記タイミング判定部は、第２軸回りの角速度のピークを検出することで前記入力タイミングを判定する、
    　請求項１～５の何れか一項に記載のコンピュータ装置。
  7. 　前記タイミング判定部は、前記計測値の増減傾向の逆転を検出することで前記ピークを検出し、検出のタイミングに基づいて前記入力タイミングを判定する、
    　請求項１～６の何れか一項に記載のコンピュータ装置。
  8. 　前記タイミング判定部は、前記ピークを検出したタイミングから、所与の調整時間分、調整したタイミングを前記入力タイミングとして判定する、
    　請求項１～７の何れか一項に記載のコンピュータ装置。
  9. 　前記調整時間を設定する調整時間設定部、
    　を更に備えた請求項８に記載のコンピュータ装置。
  10. 　前記モーションは、振り下ろし位置で止めるように手を振り下ろすモーションであり、
    　前記タイミング判定部は、
    　前記計測値に基づいて振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定する前提判定部を有し、
    　この前提判定部により肯定判定された場合の前記振り下げ動作において前記計測値のピークを検出することで前記入力タイミングを判定する、
    　請求項１～９の何れか一項に記載のコンピュータ装置。
  11. 　前記コントローラは、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、
    　前記センサは、前記コントローラの長手方向および前記コントローラの正面法線方向に直交する方向を第１軸とする加速度と、前記コントローラの正面法線方向を第２軸とする第２軸回りの角速度とを少なくとも計測し、
    　前記前提判定部は、第１軸方向の加速度及び第２軸回りの角速度に基づいて、振り上げ動作に続いて振り下げ動作が連続して開始されたかを判定する、
    　請求項１０に記載のコンピュータ装置。
  12. 　前記モーションには、振る方向が異なる複数種類のモーションがあり、
    　前記提示部は、前記複数種類のモーションのうちの規準種類のモーションを、前記規準タイミングに行わせる旨を提示し、
    　前記計測値に基づいて、前記複数種類のモーションのうち、何れの種類のモーションが入力されたかを判別する入力種類判別部、を更に備え、
    　前記評価部は、前記規準タイミングと前記入力タイミングとの差と、前記入力種類判別部により判別された入力種類と前記規準種類とが同じか否かと、に基づいて前記評価を行う、
    　請求項１～１１の何れか一項に記載のコンピュータ装置。
  13. 　前記コントローラは、正面側に複数の操作ボタンが配置されて片手で握るようにして保持可能な長手形状を有し、
    　前記センサは、前記コントローラの長手方向および前記コントローラの正面法線方向に直交する方向を第１軸とする第１軸回りの角速度を少なくとも計測し、
    　前記複数種類のモーションには、カーブさせて手を振り下ろすカーブ振り下ろしモーションが含まれ、
    　前記入力種類判別部は、前記第１軸回りの角速度に基づいて、前記カーブ振り下ろしモーションが入力されたか否かを判別する、
    　請求項１２に記載のコンピュータ装置。
  14. 　前記提示部は、前記規準タイミングに行わせる前記モーションを、振る強さが大小異なる少なくとも２つの強度レベルのうちの何れで行わせるかを提示し、
    　前記計測値に基づいて、入力された前記モーションの強度レベルを判別する強度レベル判別部、を更に備え、
    　前記評価部は、更に、提示した強度レベルと、前記強度レベル判別部により判別された強度レベルとが同じか否か、に基づいて前記評価を行う、
    　請求項１～１３の何れか一項に記載のコンピュータ装置。
  15. 　コンピュータ装置が、プレーヤが操作入力した入力タイミングを評価するための評価制御方法であって、
    　前記プレーヤに対して加速度及び／又は角速度を計測するセンサを内蔵したコントローラを手に持って振って止めるように動かすモーションを行わせる規準タイミングを提示することと、
    　前記モーションの止める直前に出現する前記計測値のピークを検出することで前記入力タイミングを判定することと、
    　少なくとも前記規準タイミングと前記入力タイミングとの差に基づいて前記評価を行うことと、
    　を含む評価制御方法。
PCT/JP2018/043833 2017-12-28 2018-11-28 コンピュータ装置及び評価制御方法 WO2019130966A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201880084380.8A CN111526926A (zh) 2017-12-28 2018-11-28 计算机装置及评价控制方法
US16/911,570 US11260286B2 (en) 2017-12-28 2020-06-25 Computer device and evaluation control method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-254823 2017-12-28
JP2017254823A JP7081921B2 (ja) 2017-12-28 2017-12-28 プログラム及びゲーム装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/911,570 Continuation US11260286B2 (en) 2017-12-28 2020-06-25 Computer device and evaluation control method

Publications (1)

Publication Number Publication Date
WO2019130966A1 true WO2019130966A1 (ja) 2019-07-04

Family

ID=67066986

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/043833 WO2019130966A1 (ja) 2017-12-28 2018-11-28 コンピュータ装置及び評価制御方法

Country Status (4)

Country Link
US (1) US11260286B2 (ja)
JP (1) JP7081921B2 (ja)
CN (1) CN111526926A (ja)
WO (1) WO2019130966A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3943168A4 (en) * 2019-12-25 2022-11-30 Clap Hanz Limited OPERATION ENTRY PROGRAM AND OPERATION ENTRY METHOD

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018198229A1 (ja) * 2017-04-26 2018-11-01 株式会社ソニー・インタラクティブエンタテインメント 振動制御装置
JPWO2018220948A1 (ja) * 2017-06-02 2020-05-21 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP6893561B2 (ja) 2017-08-24 2021-06-23 株式会社ソニー・インタラクティブエンタテインメント 振動制御装置
WO2019038887A1 (ja) 2017-08-24 2019-02-28 株式会社ソニー・インタラクティブエンタテインメント 振動制御装置
JP7081922B2 (ja) 2017-12-28 2022-06-07 株式会社バンダイナムコエンターテインメント プログラム、ゲーム装置及びゲームを実行するための方法
KR102009358B1 (ko) * 2018-04-27 2019-08-09 주식회사 네오위즈 게임 제어 방법, 게임 제어 장치 및 그 기록매체
WO2020026301A1 (ja) * 2018-07-30 2020-02-06 株式会社ソニー・インタラクティブエンタテインメント ゲーム装置、ゴルフゲームの制御方法
KR102573182B1 (ko) * 2021-05-06 2023-09-04 주식회사 에스지엠 단말 장치, 가상 스포츠 장치, 가상 스포츠 시스템 및 가상 스포츠 시스템의 동작방법
WO2024047262A1 (es) * 2022-08-30 2024-03-07 Take Profit Gaming, S.L. Método de interacción online eliminando el efecto de la latencia de red

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007293191A (ja) * 2006-04-27 2007-11-08 Nintendo Co Ltd 音出力プログラムおよび音出力装置
JP2008136680A (ja) * 2006-12-01 2008-06-19 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
JP2009195280A (ja) * 2008-02-19 2009-09-03 Konami Digital Entertainment Co Ltd ゲーム装置、ゲーム制御方法、ならびに、プログラム
JP2009536765A (ja) * 2006-05-08 2009-10-15 任天堂株式会社 加速度計データに基づいて、振りの衝撃の時期および／または振りの強度を検出するシステムおよび方法
JP2009247557A (ja) * 2008-04-04 2009-10-29 Namco Bandai Games Inc ゲームコントローラケース、プログラム、情報記憶媒体、及びゲーム装置
JP2010000257A (ja) * 2008-06-20 2010-01-07 Namco Bandai Games Inc ゲームコントローラケース、ゲームコントローラケースセット、プログラム、及び情報記憶媒体
JP2010253253A (ja) * 2009-03-31 2010-11-11 Konami Digital Entertainment Co Ltd ゲーム装置、ゲーム装置用プログラム及び画像オブジェクト制御方法
WO2016079828A1 (ja) * 2014-11-19 2016-05-26 ニャフーン・ゲームス・ピーティーイー・エルティーディー 打撃操作のためのユーザーインターフェースシステムと操作信号解析方法及びプログラム

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0884860A (ja) * 1994-09-14 1996-04-02 Hori Denki Kk ゲーム機用リモコン、受信装置及びゲーム機システム
JP3695217B2 (ja) * 1999-04-30 2005-09-14 オムロン株式会社 画像処理装置及び画像入力装置
EP1860642A3 (en) 2000-01-11 2008-06-11 Yamaha Corporation Apparatus and method for detecting performer´s motion to interactively control performance of music or the like
JP3638885B2 (ja) * 2001-05-24 2005-04-13 コナミ株式会社 打撃操作領域判定方法及びその装置
JP2003325972A (ja) * 2002-05-17 2003-11-18 Nintendo Co Ltd 傾き操作に関連して音と画像を変化させるゲーム装置およびそのゲームプログラム
JP4327578B2 (ja) 2003-09-12 2009-09-09 株式会社バンダイナムコゲームス プログラム、情報記憶媒体、及びゲームシステム
US20070197290A1 (en) 2003-09-18 2007-08-23 Ssd Company Limited Music Game Device, Music Game System, Operation Object, Music Game Program, And Music Game Method
US7682237B2 (en) 2003-09-22 2010-03-23 Ssd Company Limited Music game with strike sounds changing in quality in the progress of music and entertainment music system
KR100668298B1 (ko) * 2004-03-26 2007-01-12 삼성전자주식회사 움직임에 기반한 소리 발생 방법 및 장치
JP4853950B2 (ja) 2006-03-28 2012-01-11 株式会社バンダイナムコゲームス ゲームシステム、プログラム、情報記憶媒体
JP5062655B2 (ja) * 2006-03-30 2012-10-31 株式会社バンダイナムコゲームス ゲーム装置およびタイミングキャリブレーション方法
JP4757089B2 (ja) * 2006-04-25 2011-08-24 任天堂株式会社 音楽演奏プログラムおよび音楽演奏装置
JP4679431B2 (ja) * 2006-04-28 2011-04-27 任天堂株式会社 音出力制御プログラムおよび音出力制御装置
JP4916762B2 (ja) * 2006-05-02 2012-04-18 任天堂株式会社 ゲームプログラムおよびゲーム装置
JP4990580B2 (ja) 2006-08-07 2012-08-01 任天堂株式会社 ゲームプログラムおよびゲーム装置
US7849214B2 (en) 2006-12-04 2010-12-07 Electronics And Telecommunications Research Institute Packet receiving hardware apparatus for TCP offload engine and receiving system and method using the same
US20090069096A1 (en) 2007-09-12 2009-03-12 Namco Bandai Games Inc. Program, information storage medium, game system, and input instruction device
JP5349785B2 (ja) * 2007-10-26 2013-11-20 株式会社バンダイナムコゲームス 操作用具
JP5529399B2 (ja) * 2008-07-11 2014-06-25 任天堂株式会社 操作システム
US8057290B2 (en) 2008-12-15 2011-11-15 Disney Enterprises, Inc. Dance ring video game
KR101492310B1 (ko) * 2010-11-01 2015-02-11 닌텐도가부시키가이샤 조작 장치 및 정보 처리 장치
JP5702585B2 (ja) 2010-11-30 2015-04-15 任天堂株式会社 入力判定プログラム、情報処理装置、システム及び情報処理方法
US8882597B2 (en) 2011-05-25 2014-11-11 Sony Computer Entertainment America Llc Hybrid separable motion controller
JP2013182195A (ja) * 2012-03-02 2013-09-12 Casio Comput Co Ltd 演奏装置及びプログラム
JP6127367B2 (ja) * 2012-03-14 2017-05-17 カシオ計算機株式会社 演奏装置及びプログラム
JP6024136B2 (ja) * 2012-03-15 2016-11-09 カシオ計算機株式会社 演奏装置、演奏方法及びプログラム
JP6453565B2 (ja) 2014-06-30 2019-01-16 株式会社バンダイナムコエンターテインメント ゲームシステム、サーバシステム及びプログラム
JPWO2016111069A1 (ja) * 2015-01-05 2017-10-12 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP6074534B2 (ja) 2015-06-12 2017-02-01 任天堂株式会社 ゲームコントローラ
JP6877893B2 (ja) 2016-06-06 2021-05-26 任天堂株式会社 ゲーム装置、ゲームシステム、ゲームプログラム、および振り入力判定方法
JP7081922B2 (ja) 2017-12-28 2022-06-07 株式会社バンダイナムコエンターテインメント プログラム、ゲーム装置及びゲームを実行するための方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007293191A (ja) * 2006-04-27 2007-11-08 Nintendo Co Ltd 音出力プログラムおよび音出力装置
JP2009536765A (ja) * 2006-05-08 2009-10-15 任天堂株式会社 加速度計データに基づいて、振りの衝撃の時期および／または振りの強度を検出するシステムおよび方法
JP2008136680A (ja) * 2006-12-01 2008-06-19 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
JP2009195280A (ja) * 2008-02-19 2009-09-03 Konami Digital Entertainment Co Ltd ゲーム装置、ゲーム制御方法、ならびに、プログラム
JP2009247557A (ja) * 2008-04-04 2009-10-29 Namco Bandai Games Inc ゲームコントローラケース、プログラム、情報記憶媒体、及びゲーム装置
JP2010000257A (ja) * 2008-06-20 2010-01-07 Namco Bandai Games Inc ゲームコントローラケース、ゲームコントローラケースセット、プログラム、及び情報記憶媒体
JP2010253253A (ja) * 2009-03-31 2010-11-11 Konami Digital Entertainment Co Ltd ゲーム装置、ゲーム装置用プログラム及び画像オブジェクト制御方法
WO2016079828A1 (ja) * 2014-11-19 2016-05-26 ニャフーン・ゲームス・ピーティーイー・エルティーディー 打撃操作のためのユーザーインターフェースシステムと操作信号解析方法及びプログラム

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
16 February 2017 (2017-02-16) *
ESTIFP KK: "Survival kids with Official Guide", KONAMI DIGITAL ENTERMENT CO., 17 September 2008 (2008-09-17), pages 6,114 - 114 *
SQUARE ENIX, MEJA-MAJI MARCH, 24 April 2009 (2009-04-24), pages 9,14 - 20,23-2 5 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3943168A4 (en) * 2019-12-25 2022-11-30 Clap Hanz Limited OPERATION ENTRY PROGRAM AND OPERATION ENTRY METHOD
US11654355B2 (en) 2019-12-25 2023-05-23 Clap Hanz Limited Operation input program and operation inputting method

Also Published As

Publication number Publication date
US11260286B2 (en) 2022-03-01
CN111526926A (zh) 2020-08-11
JP7081921B2 (ja) 2022-06-07
US20200324195A1 (en) 2020-10-15
JP2019118549A (ja) 2019-07-22

Similar Documents

Publication Publication Date Title
WO2019130966A1 (ja) コンピュータ装置及び評価制御方法
WO2019130967A1 (ja) コンピュータ装置及び評価制御方法
JP4979314B2 (ja) ゲームプログラムおよびゲーム装置
JP2010000257A (ja) ゲームコントローラケース、ゲームコントローラケースセット、プログラム、及び情報記憶媒体
JP5116679B2 (ja) 強度のコンピュータ画像および音声処理、ならびにコンピュータプログラムとインタフェースするための入力装置
JP5681633B2 (ja) 視覚情報を通信するためのコントロールデバイス
JP2008136694A (ja) プログラム、情報記憶媒体及びゲーム装置
JP5325060B2 (ja) プログラム、情報記憶媒体および画像制御システム
JP2009536765A (ja) 加速度計データに基づいて、振りの衝撃の時期および／または振りの強度を検出するシステムおよび方法
US20090312102A1 (en) Strum processing for music video game on handheld device
JP2008067865A (ja) ゲームプログラムおよびゲーム装置
JP2009279050A (ja) プログラム、情報記憶媒体及びゲーム装置
JP2006145851A (ja) 息吹きかけ判別プログラム、息吹きかけ判別装置、ゲームプログラムおよびゲーム装置
JP5145470B2 (ja) ゲーム制御入力データを分析するためのシステム及び方法
JP5161328B2 (ja) ゲームシステム及びそのコンピュータプログラム
JP2019170964A (ja) プログラム及びゲーム装置
JP7137944B2 (ja) プログラム及びコンピュータシステム
KR20180081904A (ko) 혼합 현실 기기를 이용한 체험형 리듬 액션 아케이드 게임 시스템 및 그 방법
JP2007075426A (ja) プログラム、情報記憶媒体、携帯型ゲーム機及びゲームシステム
JP5532374B2 (ja) ゲーム制御プログラム
JP2019524392A (ja) ゲーミングイベントをシミュレーションするための方法および装置
JP5532375B2 (ja) ゲーム制御プログラム、情報記憶媒体
JP2022160997A (ja) 情報処理システム、情報処理プログラム、情報処理装置、および情報処理方法
JP2023166357A (ja) ゲームプログラム、ゲームシステム、およびゲーム方法
TW201526960A (zh) 根據玩家揮手範圍切換遊戲畫面之方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18895147

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18895147

Country of ref document: EP

Kind code of ref document: A1