JP4127561B2 - GAME DEVICE, OPERATION EVALUATION METHOD, AND PROGRAM - Google Patents

GAME DEVICE, OPERATION EVALUATION METHOD, AND PROGRAM Download PDF

Info

Publication number
JP4127561B2
JP4127561B2 JP2006312856A JP2006312856A JP4127561B2 JP 4127561 B2 JP4127561 B2 JP 4127561B2 JP 2006312856 A JP2006312856 A JP 2006312856A JP 2006312856 A JP2006312856 A JP 2006312856A JP 4127561 B2 JP4127561 B2 JP 4127561B2
Authority
JP
Japan
Prior art keywords
display
player
operation information
unit
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2006312856A
Other languages
Japanese (ja)
Other versions
JP2008125721A (en
Inventor
祐一 浅見
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konami Digital Entertainment Co Ltd
Original Assignee
Konami Digital Entertainment Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konami Digital Entertainment Co Ltd filed Critical Konami Digital Entertainment Co Ltd
Priority to JP2006312856A priority Critical patent/JP4127561B2/en
Publication of JP2008125721A publication Critical patent/JP2008125721A/en
Application granted granted Critical
Publication of JP4127561B2 publication Critical patent/JP4127561B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、表示装置側にて所定の表示遅れが生じている場合でも、プレイヤの操作を適切に評価することのできるゲーム装置、操作評価方法、および、プログラムに関する。   The present invention relates to a game device, an operation evaluation method, and a program capable of appropriately evaluating a player's operation even when a predetermined display delay occurs on the display device side.

従来より、業務用や家庭用のゲーム装置にて実行されるゲーム(ソフトウェア等)が種々開発されている。中でも、音楽ゲーム(ダンスゲーム等も含まれる)と総称されるゲームは、根強い人気があり、幅広い年齢層のプレイヤから支持されている。
この音楽ゲームは、演奏される楽曲のリズムや音階に符合する操作をプレイヤがタイミングよく行うことにより、高得点を競うというタイプのゲームである。
Conventionally, various games (software or the like) that are executed on a business or home game device have been developed. Among them, games collectively called music games (including dance games and the like) are very popular and are supported by players of a wide range of ages.
This music game is a type of game in which a player competes for a high score by performing an operation that matches the rhythm or musical scale of a musical piece to be played with good timing.

一例を挙げて具体的に説明すると、演奏される楽曲に同調して、所定のオブジェクトが画面上方から順次現れてそれぞれ下方に移動して行き、それらのオブジェクトが基準となる判定ラインに到達したタイミングで、プレイヤがコントローラのボタンを押下すると、得点が得られるようになっている。
なお、オブジェクトの種類や移動レーン(音階等)に応じて、押下すべきボタンがそれぞれ定められており、タイミングが一致したとしても押下するボタンが異なっている場合には得点が得られない。つまりプレイヤには、楽曲演奏と共に移動するオブジェクトを見ながら、正しいボタン操作をリズミカルに行うことが求められている。
To give a specific example, the timing at which predetermined objects appear sequentially from the top of the screen and move downwards in synchronization with the music being played, and when these objects reach the reference judgment line Thus, when the player presses a button on the controller, a score is obtained.
Note that the buttons to be pressed are determined according to the type of object and the moving lane (musical scale, etc.), and if the buttons to be pressed are different even if the timings coincide, no score is obtained. That is, the player is required to perform a correct button operation rhythmically while observing the object that moves with the music performance.

このような音楽ゲームの一例として、操作の案内方法を工夫してプレイヤの興味を高めることのできる音楽ゲームシステムの技術も開示されている(例えば、特許文献1参照)。
特開2001−145777号公報(第7−14頁、第10図)
As an example of such a music game, a technique of a music game system capable of increasing the interest of the player by devising an operation guidance method is also disclosed (for example, see Patent Document 1).
Japanese Patent Laid-Open No. 2001-145777 (pages 7-14, FIG. 10)

近年、液晶ディスプレイやプラズマディスプレイ等の表示装置(薄型テレビ等)が広く普及している。そして、家庭用のゲーム装置をこのような表示装置につないでゲームを楽しむプレイヤも増えている。
この種の表示装置では、一層の大画面化が進んでおり、入力した映像信号に基づく映像を画面表示するまでに、所定の表示遅れ(例えば、数十〜数百ミリ秒のディレイ)が生じている。なお、表示装置は、入力した音声信号からすぐさま音声を出力すると、表示している映像とずれてしまうため(音声が先になり、映像が後になるため)、映像側の表示遅れに合わせて音声側もその分内部で遅延させることにより、映像と音声との同期を維持している。
In recent years, display devices such as liquid crystal displays and plasma displays (such as thin televisions) have become widespread. Further, an increasing number of players enjoy playing games by connecting home game devices to such display devices.
In this type of display device, the screen is further enlarged, and a predetermined display delay (for example, a delay of several tens to several hundreds of milliseconds) occurs before the video based on the input video signal is displayed on the screen. ing. Note that if the display device immediately outputs audio from the input audio signal, it will deviate from the displayed video (because the audio comes first and video later), so the audio will be synchronized with the display delay on the video side. The video side and the audio are also synchronized by delaying the internal side accordingly.

上述した音楽ゲームでは、プレイヤの操作と表示中のオブジェクトの位置(判定ライン上か否か等)との関係が特に重要な要素となっており、このような表示遅れが表示装置に生じていると、ゲーム装置側で認識しているオブジェクトの位置と実際に表示されているオブジェクトの位置とがずれてしまい、プレイヤの操作を適切に評価することができなくなる。
そのため、従来の音楽ゲームでは、このような表示遅れに対応すべく、例えば、ゲーム中の設定画面(環境設定等)にて、使用する表示装置の大まかなタイプ(ブラウン管/液晶・プラズマ等及び、画面サイズの大/小等)をプレイヤが選択することができるようになっている。
そして、選択されたタイプに応じた遅延時間だけ、基準となる規定データ側の比較タイミングを遅らせて、プレイヤの操作内容を評価していた。つまり、プレイヤに課している操作内容を規定する規定データとの比較タイミングを、設定された遅延時間だけ遅らせることにより、表示遅れの影響を解消しようとしていた。
In the music game described above, the relationship between the operation of the player and the position of the object being displayed (whether or not it is on the determination line, etc.) is a particularly important factor, and such a display delay occurs in the display device. Then, the position of the object recognized on the game device side is shifted from the position of the object actually displayed, and the player's operation cannot be evaluated appropriately.
Therefore, in the conventional music game, in order to cope with such a display delay, for example, on the setting screen (environment setting etc.) during the game, the general type of display device to be used (CRT / liquid crystal / plasma etc.) The player can select the screen size (large / small, etc.).
Then, the operation timing of the player is evaluated by delaying the comparison timing on the reference data side as a reference by a delay time corresponding to the selected type. In other words, the effect of the display delay has been attempted to be eliminated by delaying the comparison timing with the prescribed data that defines the operation content imposed on the player by the set delay time.

しかしながら、表示装置の表示遅れは、そもそもメーカや製品等によって異なっているため、大まかなタイプ分けにより設定される遅延時間が実際の表示遅れと一致することは、極めてまれであった。また、プレイヤがタイプの選択等を間違えてしまうと、設定される遅延時間と実際の表示遅れ時間との差がより開いてしまうことも起こり得る。
更に、ゲーム装置を、デジタルレコーダ(ハードディスクレコーダ等)を経由して表示装置に接続しているような場合では、デジタルレコーダ側での遅延も表示遅れに加算されることになるため、設定可能な最長の遅延時間をもってしても、実際の表示遅れ時間との差を埋めることが不可能となっていた。
However, since the display delay of the display device is originally different depending on the manufacturer, product, etc., it is extremely rare that the delay time set by rough typing matches the actual display delay. In addition, if the player makes a mistake in selecting a type or the like, the difference between the set delay time and the actual display delay time may be further increased.
Furthermore, when the game device is connected to the display device via a digital recorder (such as a hard disk recorder), the delay on the digital recorder side is also added to the display delay, so it can be set. Even with the longest delay time, it was impossible to fill the difference from the actual display delay time.

そのため、プレイヤに使用される(ゲーム装置に接続される)実際の表示装置(表示装置までの環境等)に即した、表示遅れの影響を解消する技術が求められていた。   Therefore, there has been a demand for a technique for eliminating the influence of display delay in accordance with an actual display device (connected to the game device) used by the player (environment to the display device or the like).

本発明は、このような課題を解決するためになされたもので、表示装置側にて所定の表示遅れが生じている場合でも、プレイヤの操作を適切に評価することのできるゲーム装置、操作評価方法、および、プログラムを提供することを目的とする。   The present invention has been made to solve such a problem, and a game apparatus and an operation evaluation capable of appropriately evaluating a player's operation even when a predetermined display delay occurs on the display apparatus side. It is an object to provide a method and a program.

本発明の第1の観点に係るゲーム装置は、映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するゲーム装置であって、表示遅れ算定部、画像生成部、操作情報取得部、タイミング調整部、及び、評価部を含んで構成される。   A game apparatus according to a first aspect of the present invention is a game apparatus that supplies a video signal and an audio signal to an external display device that synchronizes video display and audio output, and includes a display delay calculation unit, an image A generation unit, an operation information acquisition unit, a timing adjustment unit, and an evaluation unit are included.

まず、表示遅れ算定部は、例えば、ゲーム開始前に、映像信号を供給してから表示装置に同映像が表示されるまでの表示遅れ時間を、コントローラから得られる情報(一例として、コントローラにおける操作情報(調整情報)や、コントローラにて集音され、又は撮影された情報等)に基づいて算定する。また、画像生成部は、プレイヤに課されるコントローラの操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含む表示画像を生成する。操作情報取得部は、ゲーム中にプレイヤにより操作されたコントローラの操作情報を取得する。タイミング調整部は、取得した操作情報に対する規定操作情報の比較タイミングを、算定した表示遅れ時間に基づいて調整する。そして、評価部は、調整された比較タイミングにおける操作情報と規定操作情報との関係に基づいて、プレイヤの操作を評価する。   First, the display delay calculation unit, for example, before the game starts, information obtained from the controller from the time when the video signal is supplied until the video is displayed on the display device (for example, the operation in the controller It is calculated based on information (adjustment information), information collected by the controller or photographed). Further, the image generation unit generates a display image including an image for guiding the target operation to the player based on the prescribed operation information that defines the operation content of the controller imposed on the player. The operation information acquisition unit acquires operation information of the controller operated by the player during the game. The timing adjustment unit adjusts the comparison timing of the prescribed operation information with respect to the acquired operation information based on the calculated display delay time. Then, the evaluation unit evaluates the player's operation based on the relationship between the operation information and the prescribed operation information at the adjusted comparison timing.

つまり、ゲーム開始前に、表示遅れ算定部が、表示装置に発生している表示遅れを適切に算定する。そして、ゲーム中に、タイミング調整部が、算定された表示遅れに基づいて規定操作情報を時系列に遅延させる。これにより、表示遅れの影響が解消されるため、評価部が、プレイヤの操作情報と規定操作情報との関係に基づいて、プレイヤの操作を適切に評価することができる。
この結果、表示装置側にて所定の表示遅れが生じている場合でも、プレイヤの操作を適切に評価することができる。
That is, before the game starts, the display delay calculation unit appropriately calculates the display delay generated in the display device. Then, during the game, the timing adjustment unit delays the prescribed operation information in time series based on the calculated display delay. Thereby, since the influence of the display delay is eliminated, the evaluation unit can appropriately evaluate the operation of the player based on the relationship between the operation information of the player and the specified operation information.
As a result, even when a predetermined display delay occurs on the display device side, the player's operation can be appropriately evaluated.

前記コントローラは、所定のスピーカを有しており、上記ゲーム装置は、前記表示装置に供給する音声信号と同じ音声信号を前記コントローラに供給する補助音声供給部を、更に備え、前記補助音声供給部は、前記コントローラに供給する当該音声信号の供給タイミングを、プレイヤの操作に応じて変化させ、前記表示遅れ算定部は、前記表示装置からの音声出力と前記コントローラからの音声出力とが同期した状態における、当該供給タイミングの変化量に基づいて、当該表示遅れ時間を算定してもよい。
この場合、例えば、表示装置(スピーカ)からの音声とコントローラのスピーカからの音声とが、同時に出力されるように(1つの音に聞こえるように)、プレイヤがコントローラへの音声の供給タイミングを調整することで、表示遅れ時間が算定される。
The controller has a predetermined speaker, and the game device further includes an auxiliary audio supply unit that supplies the same audio signal as the audio signal supplied to the display device to the controller, and the auxiliary audio supply unit Changes the supply timing of the audio signal supplied to the controller in accordance with the operation of the player, and the display delay calculation unit is in a state where the audio output from the display device and the audio output from the controller are synchronized The display delay time may be calculated based on the amount of change in the supply timing.
In this case, for example, the player adjusts the supply timing of the sound to the controller so that the sound from the display device (speaker) and the sound from the controller's speaker are output simultaneously (so as to be heard as one sound). By doing so, the display delay time is calculated.

前記コントローラは、所定のマイクロフォンを有しており、上記ゲーム装置は、前記表示装置から出力される音声を当該マイクロフォンにて集音した音声を前記コントローラから取得する補助音声取得部を、更に備え、前記表示遅れ算定部は、前記表示装置に音声信号を供給してから前記補助音声取得部が同音声を取得するまでの遅延時間に基づいて、当該表示遅れ時間を算定してもよい。
この場合、表示装置に供給した音声信号に対するコントローラにて集音した音声信号の遅延を求め、この遅延時間を表示遅れ時間として自動的に算定できる。
The controller includes a predetermined microphone, and the game apparatus further includes an auxiliary sound acquisition unit that acquires sound obtained by collecting sound output from the display device with the microphone from the controller. The display delay calculation unit may calculate the display delay time based on a delay time from when the audio signal is supplied to the display device until the auxiliary audio acquisition unit acquires the audio.
In this case, the delay of the audio signal collected by the controller with respect to the audio signal supplied to the display device can be obtained, and this delay time can be automatically calculated as the display delay time.

前記コントローラは、所定の撮像素子(例えば、CCDやCMOS等)を有しており、前記表示装置に表示される映像を当該撮像素子にて撮像した画像情報を前記コントローラから取得する表示画像取得部を、更に備え、前記表示遅れ算定部は、前記表示装置に映像信号を供給してから前記表示画像取得部が同画像を取得するまでの遅延時間に基づいて、当該表示遅れ時間を算定してもよい。
この場合、表示装置に供給した映像信号に対するコントローラにて撮影した表示画像の遅延を求め、この遅延時間を表示遅れ時間として自動的に算定できる。
The controller has a predetermined image sensor (for example, a CCD or a CMOS), and a display image acquisition unit that acquires image information obtained by capturing an image displayed on the display device with the image sensor from the controller. The display delay calculation unit calculates the display delay time based on a delay time from when the video signal is supplied to the display device until the display image acquisition unit acquires the image. Also good.
In this case, the delay of the display image taken by the controller with respect to the video signal supplied to the display device can be obtained, and this delay time can be automatically calculated as the display delay time.

上記ゲーム装置は、楽曲情報から楽曲音を再生する楽曲再生部と、当該楽曲情報に基づいて、前記規定操作情報を生成する規定操作情報生成部と、を更に備え、前記画像生成部は、再生される当該楽曲音に同調して、所定方向に移動するオブジェクトを含む表示画像を生成し、前記操作情報取得部は、当該オブジェクトが表示画像中の所定位置(例えば、判定ライン等)に移動した際に、プレイヤによって操作され得るコントローラの操作情報を取得してもよい。
この場合、音楽ゲームにおけるプレイヤの操作を適切に評価することができる。
The game apparatus further includes a music playback unit that plays back music sound from music information, and a specified operation information generation unit that generates the specified operation information based on the music information, wherein the image generation unit In synchronization with the music sound to be generated, a display image including an object moving in a predetermined direction is generated, and the operation information acquisition unit moves the object to a predetermined position (for example, a determination line) in the display image At this time, operation information of the controller that can be operated by the player may be acquired.
In this case, the player's operation in the music game can be appropriately evaluated.

本発明の第2の観点に係る操作評価方法は、映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するゲーム装置における操作評価方法であって、表示遅れ算定ステップ、画像生成ステップ、操作情報取得ステップと、タイミング調整ステップ、及び、評価ステップを含んで構成される。   An operation evaluation method according to a second aspect of the present invention is an operation evaluation method in a game device that supplies a video signal and an audio signal to an external display device that synchronizes video display and audio output. It includes a delay calculation step, an image generation step, an operation information acquisition step, a timing adjustment step, and an evaluation step.

まず、表示遅れ算定ステップでは、例えば、ゲーム開始前に、映像信号を供給してから表示装置に同映像が表示されるまでの表示遅れ時間を、コントローラから得られる情報(一例として、コントローラにおける操作情報(調整情報)や、コントローラにて集音され、又は撮影された情報等)に基づいて算定する。また、画像生成ステップでは、プレイヤに課されるコントローラの操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含む表示画像を生成する。操作情報取得ステップでは、ゲーム中にプレイヤにより操作されたコントローラの操作情報を取得する。タイミング調整ステップでは、取得した操作情報に対する規定操作情報の比較タイミングを、算定した表示遅れ時間に基づいて調整する。そして、評価ステップでは、調整された比較タイミングにおける操作情報と規定操作情報との関係に基づいて、プレイヤの操作を評価する。   First, in the display delay calculation step, for example, before the game starts, the display delay time from the supply of the video signal to the display of the video on the display device is obtained from the controller (for example, the operation in the controller It is calculated based on information (adjustment information), information collected by the controller or photographed). In the image generation step, a display image including an image for guiding the target operation to the player is generated based on the prescribed operation information that defines the operation content of the controller imposed on the player. In the operation information acquisition step, operation information of the controller operated by the player during the game is acquired. In the timing adjustment step, the comparison timing of the specified operation information with respect to the acquired operation information is adjusted based on the calculated display delay time. In the evaluation step, the player's operation is evaluated based on the relationship between the operation information and the specified operation information at the adjusted comparison timing.

つまり、ゲーム開始前に、表示遅れ算定ステップにて、表示装置に発生している表示遅れが適切に算定される。そして、ゲーム中に、タイミング調整ステップにて、算定された表示遅れに基づいて規定操作情報が時系列に遅延される。これにより、表示遅れの影響が解消されるため、評価ステップにて、プレイヤの操作情報と規定操作情報との関係に基づいて、プレイヤの操作を適切に評価することができる。
この結果、表示装置側にて所定の表示遅れが生じている場合でも、プレイヤの操作を適切に評価することができる。
That is, before the game starts, the display delay occurring in the display device is appropriately calculated in the display delay calculation step. Then, during the game, in the timing adjustment step, the prescribed operation information is delayed in time series based on the calculated display delay. Thereby, since the influence of the display delay is eliminated, the player's operation can be appropriately evaluated based on the relationship between the player's operation information and the prescribed operation information in the evaluation step.
As a result, even when a predetermined display delay occurs on the display device side, the player's operation can be appropriately evaluated.

本発明の第3の観点に係るプログラムは、コンピュータ(電子機器を含む。)を、上記のゲーム装置として機能させるように構成する。   A program according to a third aspect of the present invention is configured to cause a computer (including an electronic device) to function as the above game device.

このプログラムは、コンパクトディスク、フレキシブルディスク、ハードディスク、光磁気ディスク、ディジタルビデオディスク、磁気テープ、半導体メモリ等のコンピュータ読取可能な情報記録媒体に記録することができる。   This program can be recorded on a computer-readable information recording medium such as a compact disk, flexible disk, hard disk, magneto-optical disk, digital video disk, magnetic tape, and semiconductor memory.

上記プログラムは、当該プログラムが実行されるコンピュータとは独立して、コンピュータ通信網を介して配布・販売することができる。また、上記情報記録媒体は、当該コンピュータとは独立して配布・販売することができる。   The above program can be distributed and sold via a computer communication network independently of the computer on which the program is executed. The information recording medium can be distributed and sold independently of the computer.

本発明によれば、表示装置側にて所定の表示遅れが生じている場合でも、プレイヤの操作を適切に評価することができる。   According to the present invention, the player's operation can be appropriately evaluated even when a predetermined display delay occurs on the display device side.

以下に本発明の実施形態を説明する。以下では、理解を容易にするため、ゲーム装置に本発明が適用される実施形態を説明するが、各種のコンピュータ、PDA、携帯電話などの情報処理装置においても同様に本発明を適用することができる。すなわち、以下に説明する実施形態は説明のためのものであり、本願発明の範囲を制限するものではない。したがって、当業者であればこれらの各要素または全要素をこれと均等なものに置換した実施形態を採用することが可能であるが、これらの実施形態も本発明の範囲に含まれる。   Embodiments of the present invention will be described below. In the following, for ease of understanding, an embodiment in which the present invention is applied to a game device will be described. However, the present invention can be similarly applied to information processing devices such as various computers, PDAs, and mobile phones. it can. That is, the embodiment described below is for explanation, and does not limit the scope of the present invention. Therefore, those skilled in the art can employ embodiments in which each or all of these elements are replaced with equivalent ones, and these embodiments are also included in the scope of the present invention.

(実施形態1)
図1は、本発明の実施の形態に係るゲーム装置が実現される典型的な情報処理装置の概要構成を示す模式図である。以下、本図を参照して説明する。
(Embodiment 1)
FIG. 1 is a schematic diagram showing a schematic configuration of a typical information processing device in which a game device according to an embodiment of the present invention is realized. Hereinafter, a description will be given with reference to FIG.

情報処理装置100は、CPU(Central Processing Unit)101と、ROM(Read Only Memory)102と、RAM(Random Access Memory)103と、インターフェース104と、コントローラユニット105と、外部メモリ106と、DVD(Digital Versatile Disk)−ROMドライブ107と、画像処理部108と、音声処理部109と、NIC(Network Interface Card)110と、を備える。   The information processing apparatus 100 includes a CPU (Central Processing Unit) 101, a ROM (Read Only Memory) 102, a RAM (Random Access Memory) 103, an interface 104, a controller unit 105, an external memory 106, and a DVD (Digital Versatile Disk) -ROM drive 107, image processing unit 108, audio processing unit 109, and NIC (Network Interface Card) 110.

なお、ゲーム用のプログラムおよびデータを記憶したDVD−ROMをDVD−ROMドライブ107に装着して、情報処理装置100の電源を投入することにより、当該プログラムが実行され、本実施形態のゲーム装置が実現される。   Note that a DVD-ROM storing a game program and data is loaded into the DVD-ROM drive 107, and the information processing apparatus 100 is turned on to execute the program. Realized.

CPU 101は、情報処理装置100全体の動作を制御し、各構成要素と接続され制御信号やデータをやりとりする。   The CPU 101 controls the overall operation of the information processing apparatus 100 and is connected to each component to exchange control signals and data.

ROM 102には、電源投入直後に実行されるIPL(Initial Program Loader)が記録され、これが実行されることにより、DVD−ROMに記録されたプログラムをRAM 103に読み出してCPU 101による実行が開始される。また、ROM 102には、情報処理装置100全体の動作制御に必要なオペレーティングシステムのプログラムや各種のデータが記録される。   The ROM 102 records an IPL (Initial Program Loader) that is executed immediately after the power is turned on, and when this is executed, the program recorded on the DVD-ROM is read out to the RAM 103 and execution by the CPU 101 is started. The The ROM 102 stores an operating system program and various data necessary for operation control of the entire information processing apparatus 100.

RAM 103は、データやプログラムを一時的に記憶するためのもので、DVD−ROMから読み出したプログラムやデータ、その他ゲームの進行やチャット通信に必要なデータが保持される。   The RAM 103 is for temporarily storing data and programs, and holds programs and data read from the DVD-ROM and other data necessary for game progress and chat communication.

インターフェース104を介して接続された、コントローラユニット105は、ユーザがゲーム実行の際に行う操作入力を受け付ける。より詳細には、後述するコントローラ210がプレイヤにより操作され、その操作情報等を無線通信により受け付ける。なお、コントローラユニット105の詳細については後述する。   The controller unit 105 connected via the interface 104 receives an operation input performed when the user executes the game. More specifically, the controller 210 described later is operated by the player, and the operation information and the like are received by wireless communication. Details of the controller unit 105 will be described later.

インターフェース104を介して着脱自在に接続された外部メモリ106には、ゲームの進行状態を示すデータ、チャット通信のログ(記録)のデータなどが書き換え可能に記憶される。ユーザは、コントローラユニット105を介して指示入力を行うことにより、これらのデータを適宜外部メモリ106に記録することができる。   The external memory 106 detachably connected via the interface 104 stores data indicating the progress of the game, chat communication log (record) data, and the like in a rewritable manner. The user can record these data in the external memory 106 as appropriate by inputting an instruction via the controller unit 105.

DVD−ROMドライブ107に装着されるDVD−ROMには、ゲームを実現するためのプログラムとゲームに付随する画像データや音声データが記録される。CPU 101の制御によって、DVD−ROMドライブ107は、これに装着されたDVD−ROMに対する読み出し処理を行って、必要なプログラムやデータを読み出し、これらはRAM 103等に一時的に記憶される。   A DVD-ROM mounted on the DVD-ROM drive 107 stores a program for realizing the game and image data and sound data associated with the game. Under the control of the CPU 101, the DVD-ROM drive 107 performs a reading process on the DVD-ROM loaded therein, reads out necessary programs and data, and these are temporarily stored in the RAM 103 or the like.

画像処理部108は、DVD−ROMから読み出されたデータをCPU 101や画像処理部108が備える画像演算プロセッサ(図示せず)によって加工処理した後、これを画像処理部108が備えるフレームメモリ(図示せず)に記録する。フレームメモリに記録された画像情報は、所定の同期タイミングでビデオ信号(映像信号)に変換され画像処理部108に接続されるモニタ(後述するディスプレイ290)へ出力される。これにより、各種の画像表示が可能となる。   The image processing unit 108 processes the data read from the DVD-ROM by the CPU 101 or an image arithmetic processor (not shown) included in the image processing unit 108, and then processes the processed data on a frame memory ( (Not shown). Image information recorded in the frame memory is converted into a video signal (video signal) at a predetermined synchronization timing, and is output to a monitor (display 290 described later) connected to the image processing unit 108. Thereby, various image displays are possible.

なお、画像演算プロセッサは、2次元の画像の重ね合わせ演算やαブレンディング等の透過演算、各種の飽和演算を高速に実行できる。
また、仮想3次元空間に配置され、各種のテクスチャ情報が付加されたポリゴン情報を、Zバッファ法によりレンダリングして、所定の視点位置から仮想3次元空間に配置されたポリゴンを俯瞰したレンダリング画像を得る演算の高速実行も可能である。
The image calculation processor can execute a two-dimensional image overlay calculation, a transmission calculation such as α blending, and various saturation calculations at high speed.
In addition, the polygon information arranged in the virtual three-dimensional space and added with various kinds of texture information is rendered by the Z buffer method, and a rendered image is obtained by overlooking the polygon arranged in the virtual three-dimensional space from a predetermined viewpoint position. High speed execution of the obtained operation is also possible.

さらに、CPU 101と画像演算プロセッサが協調動作することにより、文字の形状を定義するフォント情報にしたがって、文字列を2次元画像としてフレームメモリへ描画したり、各ポリゴン表面へ描画することが可能である。フォント情報は、ROM 102に記録されているが、DVD−ROMに記録された専用のフォント情報を利用することも可能である。   Further, the CPU 101 and the image arithmetic processor operate in a coordinated manner, so that a character string can be drawn as a two-dimensional image in a frame memory or drawn on the surface of each polygon according to font information that defines the character shape. is there. The font information is recorded in the ROM 102, but it is also possible to use dedicated font information recorded in the DVD-ROM.

音声処理部109は、DVD−ROMから読み出した音声データをアナログ音声信号に変換し、外部のスピーカ(後述するディスプレイ290のスピーカ)に供給して音声を出力させる。例えば、音声処理部109は、CPU 101による制御の下、ゲームの進行中に発生させるべき効果音や楽曲データを生成し、これに対応した音声をスピーカから出力させる。   The audio processing unit 109 converts audio data read from the DVD-ROM into an analog audio signal, and supplies the analog audio signal to an external speaker (a speaker of a display 290 described later) to output the audio. For example, the sound processing unit 109 generates sound effects and music data to be generated during the game under the control of the CPU 101, and outputs sound corresponding to the sound effects from the speaker.

NIC 110は、情報処理装置100をインターネット等のコンピュータ通信網(図示せず)に接続するためのものであり、LAN(Local Area Network)を構成する際に用いられる10BASE−T/100BASE−T規格に従うものや、電話回線を用いてインターネットに接続するためのアナログモデム、ISDN(Integrated Services Digital Network)モデム、ADSL(Asymmetric Digital Subscriber Line)モデム、ケーブルテレビジョン回線を用いてインターネットに接続するためのケーブルモデム等と、これらとCPU 101との仲立ちを行うインターフェース(図示せず)により構成される。   The NIC 110 is used to connect the information processing apparatus 100 to a computer communication network (not shown) such as the Internet, and is based on the 10BASE-T / 100BASE-T standard used when configuring a LAN (Local Area Network). Or analog modem for connecting to the Internet using a telephone line, ISDN (Integrated Services Digital Network) modem, ADSL (Asymmetric Digital Subscriber Line) modem, cable for connecting to the Internet using a cable television line A modem or the like, and an interface (not shown) that mediates between them and the CPU 101 are configured.

このほか、情報処理装置100は、ハードディスク等の大容量外部記憶装置を用いて、ROM 102、RAM 103、外部メモリ106、DVD−ROMドライブ107に装着されるDVD−ROM等と同じ機能を果たすように構成してもよい。
また、ユーザからの文字列の編集入力を受け付けるためのキーボードや、各種の位置の指定および選択入力を受け付けるためのマウスなどを接続する形態も採用することができる。
In addition, the information processing apparatus 100 uses a large-capacity external storage device such as a hard disk so as to perform the same function as a DVD-ROM or the like attached to the ROM 102, RAM 103, external memory 106, DVD-ROM drive 107, etc. You may comprise.
Further, it is possible to adopt a form in which a keyboard for accepting a character string editing input from a user, a mouse for accepting various position designations and selection inputs, and the like are connected.

また、本実施形態の情報処理装置100にかえて、一般的なコンピュータ(汎用のパーソナルコンピュータ等)をゲーム装置として利用することもできる。たとえば、一般的なコンピュータは、上記情報処理装置100と同様に、CPU、RAM、ROM、DVD−ROMドライブ、および、NICを備え、情報処理装置100よりも簡易な機能となる画像処理部を備え、外部記憶装置としてハードディスクを有する他、フレキシブルディスク、光磁気ディスク、磁気テープ等が利用できるようになっている。また、コントローラではなく、キーボードやマウスなどを入力装置として利用する。そして、ゲームプログラムをインストールした後に、そのプログラムを実行させると、ゲーム装置として機能する。   Further, instead of the information processing apparatus 100 of the present embodiment, a general computer (general-purpose personal computer or the like) can be used as a game apparatus. For example, a general computer, like the information processing apparatus 100, includes a CPU, RAM, ROM, DVD-ROM drive, and NIC, and an image processing unit that has a simpler function than the information processing apparatus 100. In addition to having a hard disk as an external storage device, a flexible disk, a magneto-optical disk, a magnetic tape, and the like can be used. In addition, a keyboard, a mouse or the like is used as an input device instead of a controller. Then, after the game program is installed, when the program is executed, it functions as a game device.

(コントローラユニット及びディスプレイの概要)
図2は、上述したコントローラユニット105及びディスプレイ290の概要を説明するための外観図である。
コントローラユニット105は、図示するようなコントローラ210とセンサバー220とを含んで構成される。情報処理装置100は、所定のケーブルを介してセンサバー220及びディスプレイ290とそれぞれ接続されている。
(Overview of controller unit and display)
FIG. 2 is an external view for explaining an overview of the controller unit 105 and the display 290 described above.
The controller unit 105 includes a controller 210 and a sensor bar 220 as shown. The information processing apparatus 100 is connected to the sensor bar 220 and the display 290 via predetermined cables.

コントローラ210は、例えば、テレビ等のリモコンと類似した外観を有し、情報処理装置100とワイヤレスで(無線通信によって)接続され、プレイヤが片手で持ってそのまま操作可能なコントローラである。
また、センサバー220は、所定の長さの棒状に形成され、ディスプレイ290の上部に、画面の向きに沿って適宜固定される。このセンサバー220には、両端に少なくとも1つずつ発光素子221が埋設されている。
センサバー220は、情報処理装置100から電源供給を受けて発光素子221を適宜発光させる。
The controller 210 has an appearance similar to, for example, a remote controller such as a television, is connected to the information processing apparatus 100 wirelessly (by wireless communication), and can be operated as it is by a player with one hand.
The sensor bar 220 is formed in a bar shape having a predetermined length, and is appropriately fixed on the top of the display 290 along the direction of the screen. The sensor bar 220 has at least one light emitting element 221 embedded at each end.
The sensor bar 220 receives power from the information processing apparatus 100 and causes the light emitting element 221 to appropriately emit light.

コントローラ210の先端部には、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の撮像素子を用いたカメラ211が配置されている。そして、コントローラ210の先端がディスプレイ290に向けられると、このカメラ211がセンサバー220の複数の発光素子221(少なくとも2つの発光点)を含む画像を撮影する。また、コントローラ210は、内部に無線通信部を備えており、撮影した画像の情報を、無線通信にてゲーム装置100に順次送信する。
そして、情報処理装置100は、コントローラ210から送られた画像中における複数の発光点の位置関係等に基づいて、コントローラ210の位置及び向き等を適宜取得する。例えば、CPU 101及び画像処理部108等は、コントローラ210から見える複数の発光点の位置関係等を解析して、コントローラ210の空間位置及び、その先端の向き(長手軸線の方向)を算定し、最終的に、プレイヤがコントローラ210を画面上のどこに向けて操作しているか等を取得する。
なお、このようなコントローラ210の位置等の計測は、例えば、垂直同期割り込み(1/60秒)毎に行われる。
また、コントローラ210は、プレイヤによる各ボタンの押下状況(操作情報)等を、無線通信にて情報処理装置100に順次送信する。更に、コントローラ210は、情報処理装置100から無線通信にて送られた情報も受信でき、例えば、音声情報(音声信号)を受信した場合に、後述する内部のスピーカから音声を出力することが可能となっている。
A camera 211 using an imaging device such as a charge coupled device (CCD) or a complementary metal oxide semiconductor (CMOS) is disposed at the tip of the controller 210. When the tip of the controller 210 is directed to the display 290, the camera 211 captures an image including the plurality of light emitting elements 221 (at least two light emitting points) of the sensor bar 220. In addition, the controller 210 includes a wireless communication unit therein, and sequentially transmits information of captured images to the game apparatus 100 by wireless communication.
Then, the information processing apparatus 100 appropriately acquires the position, orientation, and the like of the controller 210 based on the positional relationship of a plurality of light emitting points in the image sent from the controller 210. For example, the CPU 101, the image processing unit 108, and the like analyze the positional relationship and the like of a plurality of light emitting points visible from the controller 210, calculate the spatial position of the controller 210 and the direction of the tip (the direction of the longitudinal axis), Finally, it is obtained where the player is operating the controller 210 on the screen.
Note that such measurement of the position of the controller 210 is performed, for example, every vertical synchronization interrupt (1/60 seconds).
In addition, the controller 210 sequentially transmits the pressing state (operation information) of each button by the player to the information processing apparatus 100 by wireless communication. Furthermore, the controller 210 can also receive information transmitted from the information processing apparatus 100 through wireless communication. For example, when receiving audio information (audio signal), the controller 210 can output audio from an internal speaker described later. It has become.

また、コントローラ210は、内部に、加速度センサ、角加速度センサ、傾きセンサ等を備えており、プレイヤによるひねりなどの動きも測定することが可能となっている。そして、これらの測定結果も、情報処理装置100に送信される。   In addition, the controller 210 includes an acceleration sensor, an angular acceleration sensor, an inclination sensor, and the like, and can measure movements such as a twist by a player. These measurement results are also transmitted to the information processing apparatus 100.

コントローラ210の上面には、十字形キー212が配置されており、プレイヤが手に持って操作する際に、各種の方向指示入力等を行うことができる。また、Aボタン213や、「+ボタン」等を含む各種ボタン215も上面に配置されており、当該ボタンに対応付けられた指示入力を行うことができる。   A cross-shaped key 212 is arranged on the upper surface of the controller 210, and various direction instruction inputs and the like can be performed when the player operates with a hand. Various buttons 215 including the A button 213 and the “+ button” are also arranged on the upper surface, and an instruction input associated with the button can be performed.

一方、Bボタン214は、コントローラ210の下面に配置され、その下面に窪みが構成されていることもあり、プレイヤが手に持って操作する際に、トリガを引くように押下することができるようになっている。   On the other hand, the B button 214 is disposed on the lower surface of the controller 210, and a depression may be formed on the lower surface thereof, so that the player can press the B button 214 to pull the trigger when the player holds it in hand. It has become.

コントローラ210の上面には、複数の小さな孔216が設けられており、内部に埋設されたスピーカからクリアな音声を出力できるようになっている。また、このスピーカと切り換えて使用可能なマイクロフォンも埋設されており、この孔216を通して、周りの音を集音できるようになっている。   A plurality of small holes 216 are provided on the upper surface of the controller 210 so that clear sound can be output from a speaker embedded therein. Also, a microphone that can be used by switching to this speaker is embedded, and surrounding sounds can be collected through the hole 216.

コントローラ210の上面のインジケータ217は、コントローラ210が複数使用された場合でもプレイヤが識別できるように、適宜点灯する。
コントローラ210の上面に用意された電源ボタン218は、例えば、情報処理装置100のオン・オフを指示する。
The indicator 217 on the upper surface of the controller 210 is appropriately lit so that the player can identify even when a plurality of controllers 210 are used.
A power button 218 prepared on the upper surface of the controller 210 instructs, for example, on / off of the information processing apparatus 100.

更に、コントローラ210の内部には、バイブレータ等の振動機構が配置され、情報処理装置100から送られる指示に応答して、振動を発生させることもできるようになっている。   Further, a vibration mechanism such as a vibrator is disposed inside the controller 210 so that vibration can be generated in response to an instruction sent from the information processing apparatus 100.

ディスプレイ290は、例えば、薄型テレビ(液晶ディスプレイやプラズマディスプレイ等)からなり、情報処理装置100から供給された映像信号に基づいて、映像(ゲーム画像等)を画面に表示し、また、供給された音声信号に基づいて、音声(楽曲音等)をスピーカから出力する。
なお、ディスプレイ290は、入力した映像信号に基づく映像を画面表示するまでに、所定の表示遅れが生じている。また、ディスプレイ290は、入力した音声信号に基づく音声出力を、この表示遅れに合わせて内部で遅延させており、映像表示と音声出力との同期を維持している。
The display 290 is made of, for example, a thin television (such as a liquid crystal display or a plasma display), and displays a video (game image or the like) on the screen based on a video signal supplied from the information processing apparatus 100. Based on the audio signal, audio (music sound, etc.) is output from the speaker.
The display 290 has a predetermined display delay before the video based on the input video signal is displayed on the screen. Further, the display 290 internally delays the audio output based on the input audio signal in accordance with the display delay, and maintains the synchronization between the video display and the audio output.

(ゲーム装置の概要構成)
図3は、本実施形態に係るゲーム装置の概要構成を示す模式図である。このゲーム装置は、一例として、画面表示等に応じたプレイヤの操作を評価する装置である。
より具体的には、所定の楽曲情報を再生しながら、プレイヤの操作を案内する(促す)ための画像をディスプレイ290に表示しつつ、コントローラ210から操作情報を取得して、プレイヤの操作内容を評価するといった音楽ゲームを実装する装置である。以下、本図を参照して説明する。
(Outline configuration of game device)
FIG. 3 is a schematic diagram showing a schematic configuration of the game device according to the present embodiment. As an example, this game apparatus is an apparatus that evaluates a player's operation according to a screen display or the like.
More specifically, while displaying predetermined music information and displaying an image for guiding (promoting) the player's operation on the display 290, the operation information is acquired from the controller 210, and the operation content of the player is displayed. It is a device that implements music games such as evaluation. Hereinafter, a description will be given with reference to FIG.

ゲーム装置300は、無線通信部310と、操作情報取得部320と、補助音声供給部330と、楽曲情報記憶部340と、画像情報記憶部350と、処理制御部360と、楽曲再生部370と、画像生成部380とを備える。   The game apparatus 300 includes a wireless communication unit 310, an operation information acquisition unit 320, an auxiliary audio supply unit 330, a music information storage unit 340, an image information storage unit 350, a processing control unit 360, and a music playback unit 370. And an image generation unit 380.

まず、無線通信部310は、コントローラ210と順次無線通信を行い、必要な情報を送受信する。
例えば、無線通信部310は、コントローラ210から送られる情報を受信し、この情報を操作情報取得部320に供給する。また、無線通信部310は、補助音声供給部330から供給される音声情報(後述する音合わせ用の音声信号)をコントローラ210に向けて送信する。
なお、コントローラユニット105が、このような無線通信部310として機能しうる。
First, the wireless communication unit 310 sequentially performs wireless communication with the controller 210 to transmit / receive necessary information.
For example, the wireless communication unit 310 receives information sent from the controller 210 and supplies this information to the operation information acquisition unit 320. In addition, the wireless communication unit 310 transmits the sound information (a sound signal for sound matching described later) supplied from the auxiliary sound supply unit 330 to the controller 210.
The controller unit 105 can function as such a wireless communication unit 310.

操作情報取得部320は、無線通信部310を介して操作情報を取得し、プレイヤによるコントローラ210の操作内容を取得する。つまり、プレイヤがコントローラ210のどのボタンを押下したか等をリアルタイムに取得する。
なお、操作情報取得部320は、音楽ゲームをプレイする前(初期設定時等)に、後述する音合わせのための操作情報を処理制御部360(より詳細には後述する表示遅れ算定部361)に供給する。また、音楽ゲームをプレイ中に、操作情報取得部320は、プレイヤの操作情報を処理制御部360(より詳細には後述する評価部364)に供給する。
そして、インターフェース104等が、このような操作情報取得部320として機能しうる。
The operation information acquisition unit 320 acquires operation information via the wireless communication unit 310 and acquires the operation content of the controller 210 by the player. That is, it is obtained in real time which button of the controller 210 the player has pressed.
Note that the operation information acquisition unit 320 provides operation information for sound matching, which will be described later, to the processing control unit 360 (display delay calculation unit 361, which will be described later in detail) before playing the music game (at the time of initial setting or the like). To supply. Further, while playing the music game, the operation information acquisition unit 320 supplies the operation information of the player to the processing control unit 360 (more specifically, an evaluation unit 364 described later).
The interface 104 or the like can function as such an operation information acquisition unit 320.

補助音声供給部330は、プレイ前の音合わせのために、音合わせ用の音声信号を、無線通信部310を介してコントローラ210に供給する。この音合わせとは、ディスプレイ290から出力される音声とコントローラ210から出力される音声との同期を取ることであり、このために、補助音声供給部330は、プレイヤの操作に応じて、コントローラ210に音声信号を供給するタイミングを適宜変化させることが可能となっている。
そして、インターフェース104等が、このような補助音声供給部330として機能しうる。
The auxiliary sound supply unit 330 supplies sound signals for sound matching to the controller 210 via the wireless communication unit 310 for sound matching before play. This sound matching is to synchronize the sound output from the display 290 and the sound output from the controller 210. For this purpose, the auxiliary sound supply unit 330 responds to the operation of the player by the controller 210. It is possible to appropriately change the timing for supplying the audio signal to the.
The interface 104 or the like can function as such an auxiliary audio supply unit 330.

楽曲情報記憶部340は、音楽ゲームをプレイする際に伴奏として再生される楽曲情報を複数記憶する。例えば、MIDI(Musical Instrument Digital Interface)データ等の所定形式の楽曲情報を記憶する。そして、プレイヤは好みの楽曲を選んで、その楽曲音に合わせて音楽ゲームをプレイすることができるようになっている。
また、楽曲情報記憶部340は、音合わせに使用するための楽曲情報も記憶する。例えば、一定間隔で繰り返し短く(鋭く)鳴るメトロノーム音のような楽曲情報を記憶する。
なお、DVD−ROMドライブ107に装着されるDVD−ROM及び、RAM 103が、このような楽曲情報記憶部340として機能しうる。
The music information storage unit 340 stores a plurality of pieces of music information to be reproduced as accompaniment when playing a music game. For example, music information in a predetermined format such as MIDI (Musical Instrument Digital Interface) data is stored. The player can select a favorite song and play a music game in accordance with the song sound.
The music information storage unit 340 also stores music information for use in sound matching. For example, music information such as a metronome sound that repeatedly and sharply repeats at regular intervals is stored.
Note that the DVD-ROM and the RAM 103 attached to the DVD-ROM drive 107 can function as such a music information storage unit 340.

画像情報記憶部350は、種々の画像情報を記憶する。例えば、音楽ゲームのプレイ中に表示するための背景画像や、再生される楽曲のリズム等に同調して移動させるオブジェクト等の画像情報等を記憶する。
なお、DVD−ROMドライブ107に装着されるDVD−ROM及び、RAM 103が、このような画像情報記憶部350として機能しうる。
The image information storage unit 350 stores various image information. For example, a background image to be displayed during the play of a music game, image information such as an object to be moved in synchronization with the rhythm of the music to be reproduced, and the like are stored.
Note that the DVD-ROM mounted on the DVD-ROM drive 107 and the RAM 103 can function as such an image information storage unit 350.

処理制御部360は、ゲーム装置300全体を制御する。例えば、処理制御部360は、表示遅れ算定部361、規定操作情報生成部362、タイミング調整部363、及び、評価部364を含んで構成される。   The process control unit 360 controls the entire game device 300. For example, the processing control unit 360 includes a display delay calculation unit 361, a specified operation information generation unit 362, a timing adjustment unit 363, and an evaluation unit 364.

表示遅れ算定部361は、映像信号をディスプレイ290に供給してから同映像が表示されるまでの表示遅れ時間を、コントローラ210から得られる情報に基づいて算定する。
具体的に表示遅れ算定部361は、上述した音合わせ用の楽曲の音声信号を補助音声供給部330及び楽曲再生部370に供給し(再生させ)、コントローラ210のスピーカ及び、ディスプレイ290のスピーカからそれぞれ出力させる。この際、コントローラ210及びディスプレイ290に音声信号をそれぞれ同時に供給すると、図4(a)に示すように、表示遅れに相当する時間(遅れd)だけ、ディスプレイ290からの音声出力がコントローラ210からの音声出力よりも遅れることになる(上述したように、ディスプレイ290が映像表示と音声出力との同期を維持しているため)。
プレイヤは、この状態からコントローラ210の所定のボタンを操作し、補助音声供給部330への音声信号の供給タイミングを適宜遅延させて行き、図4(b)に示すように、コントローラ210からの音声出力をディスプレイ290からの音声出力に同期させる。つまり、それぞれの音声が同時に出力されるように(1つの音に聞こえるように)音合わせを行う。
The display delay calculation unit 361 calculates a display delay time from when the video signal is supplied to the display 290 to when the video is displayed based on information obtained from the controller 210.
Specifically, the display delay calculation unit 361 supplies (reproduces) the audio signal of the above-described music for music matching to the auxiliary audio supply unit 330 and the music reproduction unit 370, and from the speaker of the controller 210 and the speaker of the display 290. Output each. At this time, if audio signals are simultaneously supplied to the controller 210 and the display 290, as shown in FIG. 4A, the audio output from the display 290 is output from the controller 210 for a time corresponding to the display delay (delay d). This is later than the audio output (as described above, the display 290 maintains the synchronization between the video display and the audio output).
In this state, the player operates a predetermined button of the controller 210 to appropriately delay the supply timing of the audio signal to the auxiliary audio supply unit 330. As shown in FIG. The output is synchronized with the audio output from the display 290. That is, sound matching is performed so that each sound is output simultaneously (so that it can be heard as one sound).

表示遅れ算定部361は、この図4(b)に示す音合わせ状態における、供給タイミングの変化量(コントローラ210への音声信号の供給を遅らせている時間)に基づいて、表示遅れ時間を算定する。例えば、表示遅れ算定部361は、プレイヤからの操作に応じた最終的な供給タイミングの遅延時間を、ディスプレイ290の表示遅れ時間として算定する。   The display delay calculation unit 361 calculates the display delay time based on the amount of change in the supply timing (the time during which the supply of the audio signal to the controller 210 is delayed) in the sound matching state shown in FIG. . For example, the display delay calculation unit 361 calculates the delay time of the final supply timing according to the operation from the player as the display delay time of the display 290.

規定操作情報生成部362は、再生される楽曲に応じて、プレイヤに課される(要求される)コントローラの操作内容を規定する規定操作情報を生成する。例えば、規定操作情報生成部362は、楽曲情報のリズム(テンポ)及び、メロディの音階等から、プレイヤが押下すべきコントローラ210のボタンとその押下タイミングを時系列に規定した規定操作情報を生成する。
具体的に規定操作情報生成部362は、図5(a)に示すように、楽曲情報のリズム等に合致する押下タイミングを規定した規定操作情報を生成する。なお、この図5(a)では、説明の理解を容易にするために、1つの音階等に対応した1つのボタンの押下タイミングだけを規定した例を示しているが、実際には、他の音階等に対応して複数のボタンについての押下タイミングがそれぞれ規定されているものとする。
この規定操作情報は、画像生成部380が表示画像を生成する際に使用されると共に、評価部364にて(比較タイミングがタイミング調整部363にて調整された後)、プレイヤの操作内容を評価するためにも使用される。
The prescribed operation information generation unit 362 generates prescribed operation information that defines the operation contents of the controller imposed (required) on the player in accordance with the music to be played. For example, the prescribed operation information generation unit 362 generates prescribed operation information that defines, in time series, the buttons of the controller 210 to be pressed by the player and the pressing timing thereof from the rhythm (tempo) of the music information, the scale of the melody, and the like. .
Specifically, as shown in FIG. 5A, the prescribed operation information generation unit 362 generates prescribed operation information that defines the pressing timing that matches the rhythm of the music information. 5A shows an example in which only the pressing timing of one button corresponding to one musical scale or the like is defined for easy understanding of the description. Assume that the pressing timings for a plurality of buttons are respectively defined corresponding to the scale and the like.
The prescribed operation information is used when the image generation unit 380 generates a display image, and the operation content of the player is evaluated by the evaluation unit 364 (after the comparison timing is adjusted by the timing adjustment unit 363). Also used to do.

タイミング調整部363は、表示遅れ算定部361が算定した表示遅れ時間に基づいて、規定操作情報生成部362が生成した規定操作情報の比較タイミングを調整する。例えば、表示遅れに相当する時間だけ、規定操作情報の時系列を遅延させる。
具体的にタイミング調整部363は、図5(b)に示すように、元の規定操作情報の時系列を、表示遅れ時間(遅延d)に基づいて、遅延させる。なお、この図5(b)でも、1つのボタンの押下タイミングだけを規定した例を示しているが、実際には、他の音階や楽器に対応して複数のボタンについての押下タイミングが規定されているものとする。
The timing adjustment unit 363 adjusts the comparison timing of the specified operation information generated by the specified operation information generation unit 362 based on the display delay time calculated by the display delay calculation unit 361. For example, the time series of the prescribed operation information is delayed by a time corresponding to the display delay.
Specifically, as shown in FIG. 5B, the timing adjustment unit 363 delays the original time series of the prescribed operation information based on the display delay time (delay d). FIG. 5B also shows an example in which only the pressing timing of one button is specified, but actually, the pressing timing for a plurality of buttons is specified corresponding to other scales and musical instruments. It shall be.

評価部364は、タイミング調整部363により調整された比較タイミングにおける操作情報と規定操作情報との関係に基づいて、プレイヤの操作を評価する。つまり、表示遅れに相当する時間だけ時系列を遅延させた規定操作情報と、操作情報取得部320から取得した操作情報とを比較して、プレイヤの操作内容を評価する。
具体的に評価部364は、図5(c)に示すように、タイミングを調整した規定操作情報とプレイヤの操作情報(対応するボタンの押下情報)とを時系列に比較し、プレイヤの操作を評価する。なお、この図5(c)でも、規定した1つのボタンの押下タイミング、及び、実際に操作された1つの(同一の)ボタンの押下タイミングを示しているが、実際には、複数のボタンについてそれぞれ評価が行われるものとする。
そして、CPU 101が、このような構成からなる処理制御部360として機能しうる。
The evaluation unit 364 evaluates the player's operation based on the relationship between the operation information and the prescribed operation information at the comparison timing adjusted by the timing adjustment unit 363. That is, the operation content of the player is evaluated by comparing the prescribed operation information delayed in time series by the time corresponding to the display delay with the operation information acquired from the operation information acquisition unit 320.
Specifically, as shown in FIG. 5C, the evaluation unit 364 compares the prescribed operation information adjusted in timing with the operation information of the player (press information of the corresponding button) in time series, and performs the player's operation. evaluate. FIG. 5C also shows the pressing timing of one specified button and the pressing timing of one (same) button that is actually operated. Each will be evaluated.
The CPU 101 can function as the processing control unit 360 having such a configuration.

図3に戻って、楽曲再生部370は、処理制御部360に制御され、楽曲の再生等を行う。
例えば、楽曲再生部370は、音楽ゲームのプレイ中に、楽曲情報に基づいて楽曲音を再生し、再生に伴う音声信号をディスプレイ290に供給して、楽曲音をディスプレイ290のスピーカから出力させる。
また、プレイ前の音合わせを行う際に、楽曲再生部370は、音合わせ用の楽曲を再生し、音声信号をディスプレイ290に供給する。
なお、音声処理部109が、このような楽曲再生部370として機能しうる。
Returning to FIG. 3, the music playback unit 370 is controlled by the processing control unit 360 to perform playback of music.
For example, the music playback unit 370 plays music based on the music information while playing a music game, supplies a sound signal accompanying the playback to the display 290, and outputs the music sound from the speaker of the display 290.
In addition, when performing sound matching before play, the music reproducing unit 370 reproduces music for sound matching and supplies an audio signal to the display 290.
Note that the audio processing unit 109 can function as such a music playback unit 370.

画像生成部380は、処理制御部360に制御され、音楽ゲームをプレイする際の表示画像(ゲーム画面)等を生成する。
例えば、画像生成部380は、プレイヤの操作を案内するための画像を含む表示画像を生成し、映像信号としてディスプレイ290に供給して、画面表示させる。
The image generation unit 380 is controlled by the processing control unit 360 and generates a display image (game screen) or the like when playing a music game.
For example, the image generation unit 380 generates a display image including an image for guiding the player's operation, and supplies the display image as a video signal to the display 290 for display on the screen.

具体的に画像生成部380は、図6(a)に示すような表示画像を生成する。この図6(a)では、各オブジェクトOBJが、再生される楽曲のリズム等に同調して、音階や楽器等に対応したレーン(レーンLa1〜La3)に沿って、上方から順次現れてそれぞれ下方まで移動して消えて行く様子を示している。
なお、各オブジェクトOBJの出現タイミングや移動速度は、規定操作情報生成部362が生成した規定操作情報に基づいて算出される。つまり、規定操作情報によりプレイヤが操作すべきと定められた各タイミングに、それぞれのオブジェクトOBJが判定ラインLN上に丁度到達するように、各オブジェクトOBJが制御される。これにより、プレイヤには、オブジェクトOBJが判定ラインLNに到達したタイミング(より望ましくは、オブジェクトOBJの横線が判定ラインLNと重なったタイミング)にて、コントローラ210のボタン(レーンLa1〜La3に対応したボタン)の押下を要求することになる。そして、プレイヤによる正しいボタンの押下が行われた場合に、得点が加算される様になっている。
ところで、図6(a)に示すオブジェクトOBJの形状は、一例であり、他の形状であってもよい。例えば、画像生成部380は、図6(b),(c)に示すようなオブジェクトOBJを移動させる表示画像を生成してもよい。
また、オブジェクトOBJの移動方向も図6(a)に示すような、上方から下方(縦方向)に限られず、例えば、右側から左側(横方向)等であってもよい。
そして、画像処理部108が、このような画像生成部380として機能しうる。
Specifically, the image generation unit 380 generates a display image as shown in FIG. In FIG. 6A, each object OBJ appears sequentially from above along lanes (lanes La1 to La3) corresponding to musical scales, musical instruments, etc., in synchronization with the rhythm of the music to be played back, respectively. It shows how it moves to disappear.
Note that the appearance timing and movement speed of each object OBJ are calculated based on the prescribed operation information generated by the prescribed operation information generation unit 362. That is, each object OBJ is controlled such that each object OBJ reaches the determination line LN at each timing determined by the player to be operated by the prescribed operation information. This allows the player to correspond to the buttons (lanes La1 to La3) of the controller 210 at the timing when the object OBJ reaches the determination line LN (more preferably, the timing when the horizontal line of the object OBJ overlaps the determination line LN). Button). When the correct button is pressed by the player, the score is added.
By the way, the shape of the object OBJ shown in FIG. 6A is an example, and may be another shape. For example, the image generation unit 380 may generate a display image for moving the object OBJ as shown in FIGS.
Further, the moving direction of the object OBJ is not limited to the upper side to the lower side (vertical direction) as shown in FIG.
The image processing unit 108 can function as such an image generation unit 380.

(ゲーム装置の動作の概要)
図7は、上述した構成のゲーム装置300において、音楽ゲームのプレイ前に実行される表示遅れ算定処理の流れを示すフローチャートである。また、図8は、音楽ゲームのプレイ中に実行される操作評価処理の流れを示すフローチャートである。以下、これらの図を参照してゲーム装置300の動作について説明する。
最初に、表示遅れ算定処理について、図7を参照して説明する。この表示遅れ算定処理は、例えば、初期設定画面からプレイヤにより表示遅れの算定が指示された際に開始される。
(Overview of game device operation)
FIG. 7 is a flowchart showing the flow of display delay calculation processing executed before playing the music game in the game device 300 having the above-described configuration. FIG. 8 is a flowchart showing the flow of the operation evaluation process executed during the music game play. Hereinafter, the operation of the game apparatus 300 will be described with reference to these drawings.
First, the display delay calculation process will be described with reference to FIG. This display delay calculation process is started, for example, when the display delay calculation is instructed by the player from the initial setting screen.

この表示遅れ算定処理を開始すると、ゲーム装置300は、音合わせ用の楽曲の音声信号を順次生成し、コントローラ210及び、ディスプレイ290にそれぞれ供給する(ステップS301)。例えば一定間隔で繰り返し短い(鋭い)音声を発するメトロノーム音のような楽曲の音声信号を、補助音声供給部330及び楽曲再生部370に供給し(再生させ)、コントローラ210のスピーカ及び、ディスプレイ290のスピーカからそれぞれ出力させる。
なお、初期状態では、コントローラ210及びディスプレイ290に音合わせ用の音声信号が、それぞれ同時に供給され、上述した図4(a)に示すように、表示遅れに相当する時間だけ、ディスプレイ290からの音声がコントローラ210からの音声よりも遅れて出力される。
When the display delay calculation process is started, the game apparatus 300 sequentially generates sound signals of music for sound matching and supplies them to the controller 210 and the display 290, respectively (step S301). For example, an audio signal of a music such as a metronome sound that repeatedly emits a short (sharp) sound at regular intervals is supplied (reproduced) to the auxiliary audio supply unit 330 and the music reproduction unit 370, and the speaker of the controller 210 and the display 290 Output from each speaker.
In the initial state, sound signals for sound matching are simultaneously supplied to the controller 210 and the display 290, respectively, and as shown in FIG. 4A, the sound from the display 290 is output for the time corresponding to the display delay. Is output later than the sound from the controller 210.

ゲーム装置300は、プレイヤの操作によって、調整指示がなされたか否かを判別する(ステップS302)。つまり、ディスプレイ290からの音声と、コントローラ210からの音声とがずれた状態において、プレイヤは、音合わせを行うべく、コントローラ210の所定のボタンを操作して、コントローラ210側のタイミング調整を指示することになるため、ゲーム装置300はそのような調整指示を受け付けたかどうかを判別する。   The game device 300 determines whether or not an adjustment instruction has been given by the player's operation (step S302). That is, in a state where the sound from the display 290 and the sound from the controller 210 are shifted, the player operates a predetermined button on the controller 210 to instruct the timing adjustment on the controller 210 side in order to perform sound matching. Therefore, the game apparatus 300 determines whether or not such an adjustment instruction has been accepted.

ゲーム装置300は、プレイヤからの調整指示がないと判別すると(ステップS302;No)、後述するステップS305に処理を進める。
一方、調整指示があったと判別した場合に(ステップS302;Yes)、ゲーム装置300は、受け付けた調整指示に従って、コントローラ210への音声信号の供給タイミングを調整する(ステップS304)。
例えば、ゲーム装置300は、コントローラ210の「+ボタン」(各種ボタン215中の1つのボタン)が押下され、供給タイミングを遅くする調整指示がなされると、現在の供給タイミングから一定時間(一例として、10ミリ秒)だけ遅延させて、音声信号をコントローラ210に供給する。
If it is determined that there is no adjustment instruction from the player (step S302; No), the game device 300 advances the process to step S305 described later.
On the other hand, when it is determined that there is an adjustment instruction (step S302; Yes), the game apparatus 300 adjusts the supply timing of the audio signal to the controller 210 according to the received adjustment instruction (step S304).
For example, when the “+ button” (one button among the various buttons 215) of the controller 210 is pressed and an adjustment instruction for delaying the supply timing is issued, the game apparatus 300 receives a certain time (as an example) from the current supply timing. The audio signal is supplied to the controller 210 with a delay of 10 milliseconds).

ゲーム装置300は、音合わせが完了したか否かを判別する(ステップS305)。つまり、プレイヤの操作によって、上述した図4(b)に示すように、コントローラ210からの音声出力をディスプレイ290からの音声出力に同期させることができ、プレイヤによって音合わせの完了の操作(例えば、Aボタン213の押下)が行われたかどうかを判別する。   Game device 300 determines whether or not the sound matching is completed (step S305). That is, by the player's operation, as shown in FIG. 4B described above, the sound output from the controller 210 can be synchronized with the sound output from the display 290, and the sound matching completion operation (for example, It is determined whether or not (A button 213 has been pressed).

ゲーム装置300は、音合わせが完了していないと判別すると(ステップS305;No)、上述したステップS302に処理を戻す。
一方、音合わせが完了したと判別した場合に(ステップS305;Yes)、ゲーム装置300は、供給タイミングの遅延時間を求め、これを表示遅れ時間として算定する(ステップS306)。つまり、表示遅れ算定部361は、プレイヤからの操作に応じた最終的な供給タイミングの遅延時間を、ディスプレイ290の表示遅れ時間として算定する。
なお、このようにして算定された表示遅れ時間は、不揮発性のメモリ(例えば、外部メモリ106)等に記憶していつでも読み出し可能とし、接続するディスプレイ290を変えない間は、新たな表示遅れ算定処理を行わないで済むようにしてもよい。
If it is determined that the sound matching is not completed (step S305; No), the game device 300 returns the process to step S302 described above.
On the other hand, when it is determined that the sound matching has been completed (step S305; Yes), the game device 300 obtains a supply timing delay time and calculates it as a display delay time (step S306). That is, the display delay calculation unit 361 calculates the delay time of the final supply timing according to the operation from the player as the display delay time of the display 290.
The display delay time calculated in this way is stored in a non-volatile memory (for example, the external memory 106) and can be read at any time, and a new display delay is calculated while the connected display 290 is not changed. The processing may be omitted.

次に、操作評価処理について、図8を参照して説明する。この操作評価処理は、上述した表示遅れ算定処理によって、ディスプレイ290の表示遅れ時間が算定された状態で開始される。   Next, the operation evaluation process will be described with reference to FIG. This operation evaluation process is started in a state where the display delay time of the display 290 is calculated by the display delay calculation process described above.

まず、ゲーム装置300は、伴奏となる楽曲がプレイヤにより選択されると、その楽曲情報から規定操作情報を生成する(ステップS401)。つまり、規定操作情報生成部362は、楽曲情報のリズム及び、メロディの音階等から、プレイヤが押下すべきコントローラ210のボタンとその押下タイミングを時系列に規定した規定操作情報を生成する。   First, when a music piece to be an accompaniment is selected by the player, the game device 300 generates prescribed operation information from the music information (step S401). That is, the prescribed operation information generation unit 362 generates prescribed operation information that defines the buttons of the controller 210 to be pressed by the player and the pressing timing thereof in time series from the rhythm of the music information, the scale of the melody, and the like.

ゲーム装置300は、算定された表示遅れ時間に基づいて、規定操作情報の比較タイミングを調整する(ステップS402)。つまり、タイミング調整部363は、表示遅れ算定部361が算定した表示遅れに相当する時間だけ、規定操作情報の時系列を遅延させる。   The game device 300 adjusts the comparison timing of the prescribed operation information based on the calculated display delay time (step S402). That is, the timing adjustment unit 363 delays the time series of the prescribed operation information by a time corresponding to the display delay calculated by the display delay calculation unit 361.

ゲーム装置300は、楽曲音の再生を開始し、また、表示画像の生成を開始する(ステップS403)。つまり、楽曲再生部370は、選択された楽曲情報に基づいて楽曲音を再生し、再生に伴う音声信号をディスプレイ290に供給して、ディスプレイ290のスピーカから楽曲音を出力させる。また、画像生成部380は、上述した図6(a)に示すような表示画像を生成し、この映像信号をディスプレイ290に供給して、ディスプレイ290に表示させる。   The game apparatus 300 starts playing the music sound and starts generating a display image (step S403). That is, the music reproducing unit 370 reproduces music sound based on the selected music information, supplies an audio signal accompanying the reproduction to the display 290, and outputs the music sound from the speaker of the display 290. Further, the image generation unit 380 generates a display image as shown in FIG. 6A described above, supplies this video signal to the display 290, and causes the display 290 to display it.

このようにゲーム装置300側で楽曲音が再生され、表示画像が生成されて音声信号及び映像信号がディスプレイ290に供給されると、所定の表示遅れが伴うものの、ディスプレイ290のスピーカから楽曲音が出力され、また、図6(a)に示すような表示画像が表示される。
そして、プレイヤは、図6(a)に示すようなオブジェクトOBJが楽曲のリズム等に同調して移動するのを目で追いながら、オブジェクトOBJが判定ラインLNに到達したタイミングで、対応する操作ボタンの押下を行うべく、コントローラ210を操作することになる。このため、ゲーム装置300は、コントローラ210の操作情報を順次取得する。
As described above, when the music sound is reproduced on the game apparatus 300 side, the display image is generated, and the audio signal and the video signal are supplied to the display 290, the music sound is output from the speaker of the display 290 with a predetermined display delay. In addition, a display image as shown in FIG. 6A is displayed.
Then, the player follows the movement of the object OBJ in synchronization with the rhythm of the music as shown in FIG. 6A, and at the timing when the object OBJ reaches the determination line LN, the corresponding operation button. The controller 210 is operated to press the button. For this reason, the game apparatus 300 sequentially acquires operation information of the controller 210.

ゲーム装置300は、タイミングを調整した規定操作情報と、プレイヤの操作情報とを順次比較する(ステップS404)。つまり、評価部364は、表示遅れに相当する時間だけ時系列を遅延させた規定操作情報と、コントローラ210から操作情報取得部320を介して取得した操作情報とを比較して、プレイヤの操作内容を評価する。
具体的には、上述した図5(c)に示すように、タイミングを調整した規定操作情報とプレイヤの操作情報(対応するボタンの押下情報)とを時系列に比較し、プレイヤの操作を評価する。
The game apparatus 300 sequentially compares the prescribed operation information whose timing has been adjusted and the operation information of the player (step S404). That is, the evaluation unit 364 compares the prescribed operation information delayed in time series by the time corresponding to the display delay with the operation information acquired from the controller 210 via the operation information acquisition unit 320, and the operation content of the player To evaluate.
Specifically, as shown in FIG. 5C described above, the prescribed operation information with adjusted timing and the player's operation information (the corresponding button press information) are compared in time series to evaluate the player's operation. To do.

そして、ゲーム装置300は、プレイヤの操作情報が規定操作情報と合致したと判別した場合にだけ(ステップS405;Yes)、得点を加算すると共に、有効な操作がなされたことを報知するアナウンス画像を表示画像に合成する(ステップS406)。例えば、図9に示すように、レーンLa1のオブジェクトOBJが判定ラインLN上に到達した際に、レーンLa1に対応するコントローラ210のボタンが押下されると、プレイヤの操作が有効であったと評価部364に評価され、アナウンス画像ANが合成されて表示される。   Then, only when it is determined that the operation information of the player matches the specified operation information (step S405; Yes), the game apparatus 300 adds a score and displays an announcement image for notifying that an effective operation has been performed. The display image is synthesized (step S406). For example, as shown in FIG. 9, when the object OBJ in the lane La1 reaches the determination line LN and the button of the controller 210 corresponding to the lane La1 is pressed, the evaluation unit determines that the player's operation is valid. It is evaluated at 364, and the announcement image AN is synthesized and displayed.

ゲーム装置300は、ゲームが終了したか否かを判別する(ステップS407)。つまり、1回(1曲分)の音楽ゲームが終了したかどうかを判別する。
ゲーム装置300は、ゲームが終了していないと判別すると(ステップS407;No)、上述したステップS404に処理を戻す。そして、ステップS404〜S407の処理を繰り返し実行する。
一方、ゲームが終了したと判別した場合に(ステップS407;Yes)、ゲーム装置300は、所定の終了メッセージや総合得点等を表示した後、操作評価処理を終える。
The game device 300 determines whether or not the game is over (step S407). That is, it is determined whether or not the music game for one time (one music) is finished.
If it is determined that the game has not ended (step S407; No), the game device 300 returns the process to step S404 described above. And the process of step S404-S407 is repeatedly performed.
On the other hand, when it is determined that the game has ended (step S407; Yes), the game apparatus 300 displays a predetermined end message, a total score, and the like, and then ends the operation evaluation process.

このような表示遅れ算定処理及び操作評価処理により、プレイヤが使用するディスプレイ290に応じて発生する表示遅れの影響を解消して、プレイヤの操作を適切に評価することができる。つまり、表示遅れ算定処理にて、まず、ディスプレイ290に発生している表示遅れを適切に算定している。そして、操作評価処理にて、算定した表示遅れに基づいて規定操作情報を時系列に遅延させている。これにより、プレイヤの操作情報と規定操作情報とを比較する際に、既に表示遅れの影響が解消しているため、プレイヤの操作を適切に評価することができる。   By such display delay calculation processing and operation evaluation processing, it is possible to eliminate the influence of display delay generated according to the display 290 used by the player, and to appropriately evaluate the player's operation. That is, in the display delay calculation process, first, the display delay occurring in the display 290 is appropriately calculated. In the operation evaluation process, the prescribed operation information is delayed in time series based on the calculated display delay. Thereby, when the operation information of the player is compared with the prescribed operation information, since the influence of the display delay has already been eliminated, the operation of the player can be evaluated appropriately.

この結果、表示装置側にて所定の表示遅れが生じている場合でも、プレイヤの操作を適切に評価することができる。   As a result, even when a predetermined display delay occurs on the display device side, the player's operation can be appropriately evaluated.

(実施形態2)
上記の実施形態では、コントローラ210から出力される音声と、ディスプレイ290から出力される音声とをプレイヤが手動で同期させ、その状態でのコントローラ210への供給タイミングの遅延時間から、表示遅れ時間を算定する場合について説明した。
しかしながら、表示遅れ時間を算定する手法は、これに限られず、適宜変更可能である。例えば、ディスプレイ290から出力される音声を集音し、供給時からの遅れを自動的に求めることにより、表示遅れ時間を算定するようにしてもよい。
(Embodiment 2)
In the above embodiment, the player manually synchronizes the sound output from the controller 210 and the sound output from the display 290, and the display delay time is calculated from the delay time of the supply timing to the controller 210 in that state. The case of calculation was explained.
However, the method for calculating the display delay time is not limited to this, and can be changed as appropriate. For example, the display delay time may be calculated by collecting the sound output from the display 290 and automatically obtaining the delay from the time of supply.

図10は、音声を集音して表示遅れ時間を算定することを特徴とした本発明の第2の実施形態に係るゲーム装置の概要構成を示す模式図である。
このゲーム装置400は、無線通信部310と、操作情報取得部320と、マイク音声取得部410と、楽曲情報記憶部340と、画像情報記憶部350と、処理制御部360と、楽曲再生部370と、画像生成部380とを備える。
なお、マイク音声取得部410以外の構成は、上述した図3のゲーム装置300の構成とほぼ同一である。
また、コントローラ210は、上述したように、スピーカと切り換えて使用可能なマイクロフォンが埋設されており、孔216を通して、周りの音を集音できるようになっている。
FIG. 10 is a schematic diagram showing a schematic configuration of a game apparatus according to the second embodiment of the present invention, which collects sound and calculates display delay time.
The game apparatus 400 includes a wireless communication unit 310, an operation information acquisition unit 320, a microphone sound acquisition unit 410, a music information storage unit 340, an image information storage unit 350, a processing control unit 360, and a music playback unit 370. And an image generation unit 380.
The configuration other than the microphone sound acquisition unit 410 is substantially the same as the configuration of the game apparatus 300 in FIG. 3 described above.
In addition, as described above, the controller 210 is embedded with a microphone that can be used by switching to a speaker, and can collect surrounding sounds through the hole 216.

マイク音声取得部410は、コントローラ210のマイクロフォンにて集音された音声信号を、無線通信部310を介してリアルタイムに取得する。
具体的には、音楽ゲームをプレイする前に、特徴のある音声を楽曲再生部370からディスプレイ290に供給すると共に、マイク音声取得部410は、コントローラ210のマイクロフォンにて集音された音声信号の取得を開始する。そして、取得した音声信号を順次表示遅れ算定部361に供給する。
なお、マイク音声取得部410は、例えば、フィルタ演算等により、特定周波数範囲の音声信号だけを抽出して、表示遅れ算定部361に供給してもよい。
The microphone sound acquisition unit 410 acquires the sound signal collected by the microphone of the controller 210 in real time via the wireless communication unit 310.
Specifically, before playing the music game, characteristic sound is supplied from the music playback unit 370 to the display 290, and the microphone sound acquisition unit 410 receives the sound signal collected by the microphone of the controller 210. Start acquisition. Then, the acquired audio signal is sequentially supplied to the display delay calculation unit 361.
Note that the microphone sound acquisition unit 410 may extract only a sound signal in a specific frequency range by a filter calculation or the like and supply it to the display delay calculation unit 361, for example.

表示遅れ算定部361は、ディスプレイ290に特徴のある音声信号を供給してからマイク音声取得部410が同音声を取得するまでの遅延時間に基づいて、ディスプレイ290の表示遅れ時間を算定する。
例えば、表示遅れ算定部361は、図11(a)に示すように、ディスプレイ290に供給した音声信号に対するコントローラ210にて集音した(マイク音声取得部410にて取得した)音声信号の遅延を求め、この遅延時間をディスプレイ290の表示遅れ時間として算定する。
また、表示遅れ算定部361は、図11(b)に示すように、ディスプレイ290に供給した音声信号とコントローラ210にて集音した音声信号とを時系列に比較して複数の音声出力時の遅延(例えば、遅延d1〜d3)を求め、これらの遅延時間(遅延d1〜d3)から平均や偏差等を求めてディスプレイ290の表示遅れ時間を算定してもよい。この場合、雑音等の影響をあまり受けずに、表示遅れ時間を算定することができる。
The display delay calculation unit 361 calculates the display delay time of the display 290 based on the delay time from when the characteristic audio signal is supplied to the display 290 to when the microphone audio acquisition unit 410 acquires the audio.
For example, as shown in FIG. 11A, the display delay calculation unit 361 calculates the delay of the audio signal collected by the controller 210 (acquired by the microphone audio acquisition unit 410) with respect to the audio signal supplied to the display 290. This delay time is calculated as the display delay time of the display 290.
Further, as shown in FIG. 11B, the display delay calculation unit 361 compares the audio signal supplied to the display 290 and the audio signal collected by the controller 210 in time series, and outputs a plurality of audio outputs. A delay (for example, delays d1 to d3) may be obtained, and an average or deviation may be obtained from these delay times (delays d1 to d3) to calculate the display delay time of the display 290. In this case, the display delay time can be calculated without being significantly affected by noise or the like.

図12は、上述した構成のゲーム装置400において実行される第2の表示遅れ算定処理の流れを示すフローチャートである。この表示遅れ算定処理も、例えば、初期設定画面からプレイヤにより表示遅れの算定が指示された際に開始される。   FIG. 12 is a flowchart showing the flow of the second display delay calculation process executed in game device 400 having the above-described configuration. This display delay calculation process is also started when display delay calculation is instructed by the player from the initial setting screen, for example.

この表示遅れ算定処理を開始すると、ゲーム装置400は、特徴のある音声の音声信号を生成し、ディスプレイ290に供給する(ステップS501)。例えば、ゲーム装置400は、音の強弱や周波数、或いは、音の繰り返し等に特徴のある音声信号を生成してディスプレイ290に供給する。   When the display delay calculation process is started, the game apparatus 400 generates a sound signal having a characteristic sound and supplies it to the display 290 (step S501). For example, the game apparatus 400 generates a sound signal having a characteristic in sound intensity, frequency, or repetition of sound, and supplies the sound signal to the display 290.

ゲーム装置400は、コントローラ210にて集音した音声信号を所定時間記録する(ステップS502)。つまり、特徴のある音声信号をディスプレイ290に供給すると、マイク音声取得部410は、コントローラ210のマイクロフォンにて集音された音声信号の取得を開始する。そして、取得した音声信号を表示遅れ算定部361に順次供給し、処理制御部360の内部メモリ等に、表示遅れが生じ得る充分な時間(例えば、1秒)に渡って格納する。   The game device 400 records the audio signal collected by the controller 210 for a predetermined time (step S502). That is, when a characteristic audio signal is supplied to the display 290, the microphone audio acquisition unit 410 starts acquisition of the audio signal collected by the microphone of the controller 210. Then, the acquired audio signal is sequentially supplied to the display delay calculation unit 361 and stored in the internal memory of the processing control unit 360 for a sufficient time (for example, 1 second) at which a display delay can occur.

ゲーム装置400は、ディスプレイ290に供給した音声信号に対する、コントローラ210にて集音した音声信号の遅延時間を求める(ステップS503)。例えば、上述した図11(a),(b)に示すように、遅延時間を求める。
そして、ゲーム装置400は、求めた遅延時間を表示遅れ時間として算定する(ステップS504)。
The game apparatus 400 obtains the delay time of the audio signal collected by the controller 210 with respect to the audio signal supplied to the display 290 (step S503). For example, as shown in FIGS. 11A and 11B described above, the delay time is obtained.
Then, game device 400 calculates the obtained delay time as the display delay time (step S504).

このような図12に示す表示遅れ算定処理によって、ディスプレイ290から出力される音声を集音し、自動的に表示遅れ時間を算定することができる。つまり、ディスプレイ290に供給した音声信号に対するコントローラ210にて集音した音声信号の遅延を求め、この遅延時間をディスプレイ290の表示遅れ時間として算定できる。
そして、ゲーム装置400は、上述した図8に示すような操作評価処理を実行し、プレイヤが使用するディスプレイ290に応じて発生する表示遅れの影響を解消して、プレイヤの操作を適切に評価することができる。
With the display delay calculation process shown in FIG. 12, the sound output from the display 290 can be collected and the display delay time can be automatically calculated. That is, the delay of the audio signal collected by the controller 210 with respect to the audio signal supplied to the display 290 is obtained, and this delay time can be calculated as the display delay time of the display 290.
Then, the game apparatus 400 executes the operation evaluation process as shown in FIG. 8 described above, eliminates the influence of the display delay that occurs according to the display 290 used by the player, and appropriately evaluates the operation of the player. be able to.

(実施形態3)
上記の第2の実施形態では、ディスプレイ290から出力される音声を集音し、供給時からの遅れ求めることにより、自動的に表示遅れ時間を算定する場合について説明した。
しかしながら、このような音声を集音する手法に限られず他の手法にて、自動的に表示遅れ時間を算定してもよい。例えば、例えば、ディスプレイ290に表示される映像をコントローラ210のカメラ211によって撮影し、表示遅れを直接算定するようにしてもよい。
(Embodiment 3)
In the second embodiment, the case where the display delay time is automatically calculated by collecting the sound output from the display 290 and obtaining the delay from the supply time has been described.
However, the display delay time may be automatically calculated by another method without being limited to such a method of collecting sound. For example, for example, an image displayed on the display 290 may be captured by the camera 211 of the controller 210 and the display delay may be directly calculated.

図13は、映像を撮影して表示遅れ時間を算定することを特徴とした本発明の第3の実施形態に係るゲーム装置の概要構成を示す模式図である。
このゲーム装置600は、無線通信部310と、操作情報取得部320と、表示画像取得部610と、楽曲情報記憶部340と、画像情報記憶部350と、処理制御部360と、楽曲再生部370と、画像生成部380とを備える。
なお、この構成は、上述した図10のゲーム装置400のマイク音声取得部410を表示画像取得部610に置き換えた構成となっている。
また、コントローラ210のカメラ211は、感度(受光感度等)が可変であり、この感度を適宜調整することでディスプレイ290に表示される映像も撮影可能となっている。
FIG. 13 is a schematic diagram showing a schematic configuration of a game apparatus according to the third embodiment of the present invention, which is characterized in that a display delay time is calculated by shooting a video.
The game apparatus 600 includes a wireless communication unit 310, an operation information acquisition unit 320, a display image acquisition unit 610, a music information storage unit 340, an image information storage unit 350, a processing control unit 360, and a music playback unit 370. And an image generation unit 380.
This configuration is a configuration in which the microphone sound acquisition unit 410 of the game apparatus 400 of FIG. 10 described above is replaced with a display image acquisition unit 610.
Further, the camera 211 of the controller 210 has variable sensitivity (light receiving sensitivity, etc.), and by appropriately adjusting this sensitivity, it is possible to take a picture displayed on the display 290.

表示画像取得部610は、コントローラ210のカメラ211にて撮影された画像情報を、無線通信部310を介してリアルタイムに取得する。
具体的には、音楽ゲームをプレイする前に、表示に変化がある特徴的な映像を画像生成部380にて生成してディスプレイ290に供給すると共に、表示画像取得部610は、コントローラ210のカメラ211にて撮影された画像情報の取得を開始する。そして、取得した画像情報を順次表示遅れ算定部361に供給する。
なお、これと並行して処理制御部360は、コントローラ210の位置及び先端の向き等を計測し、カメラ211がディスプレイ290に表示された映像を撮影していることを確認する。つまり、カメラ211がディスプレイ290に表示された映像を撮影した場合に限り、表示画像取得部610は、画像情報を取得するものとする。
The display image acquisition unit 610 acquires image information captured by the camera 211 of the controller 210 in real time via the wireless communication unit 310.
Specifically, before playing a music game, a characteristic video with a change in display is generated by the image generation unit 380 and supplied to the display 290, and the display image acquisition unit 610 is connected to the camera of the controller 210. Acquisition of image information taken at 211 starts. Then, the acquired image information is sequentially supplied to the display delay calculation unit 361.
In parallel with this, the processing control unit 360 measures the position of the controller 210, the orientation of the tip, and the like, and confirms that the camera 211 is shooting the video displayed on the display 290. In other words, the display image acquisition unit 610 acquires image information only when the camera 211 captures an image displayed on the display 290.

画像生成部380は、音楽ゲームをプレイする前に、特徴的な映像を生成して、ディスプレイ290に供給する。例えば、画像生成部380は、画面の全部を低輝度の暗い画像から高輝度の明るい画像に瞬時に切り換えたり、暗画面中(低輝度の暗い背景)に所定形状の発光(輝度の明るい)オブジェクトを1つ以上表示させるといった表示が変化する映像信号を生成する。
なお、特徴的な映像は、これらに限られず、表示が適宜変化するものであれば任意である。
The image generation unit 380 generates a characteristic video and supplies it to the display 290 before playing the music game. For example, the image generation unit 380 instantaneously switches the entire screen from a low-brightness dark image to a high-brightness bright image, or a light emitting (brightness-bright) object having a predetermined shape in the dark screen (low-brightness dark background). A video signal whose display changes such as displaying one or more is generated.
Note that the characteristic video is not limited to these, and is arbitrary as long as the display changes as appropriate.

表示遅れ算定部361は、このような特徴的な映像信号をディスプレイ290に供給してから表示画像取得部610が同映像を取得するまでの遅延時間に基づいて、ディスプレイ290の表示遅れ時間を算定する。
例えば、表示遅れ算定部361は、図14(a)に示すように、ディスプレイ290に供給した映像信号(表示の変化)に対するカメラ211にて撮影した(表示画像取得部610にて取得した)画像情報(表示の変化)の遅延(遅延d)を求め、この遅延時間(遅延d)をディスプレイ290の表示遅れ時間として算定する。
また、表示遅れ算定部361は、図14(b)に示すように、ディスプレイ290に供給した映像信号とカメラ211にて撮影した画像情報とを時系列に比較して複数の遅延(例えば、遅延d1〜d3)を求め、これらの遅延時間(遅延d1〜d3)から平均や偏差等を求めてディスプレイ290の表示遅れ時間を算定してもよい。
The display delay calculation unit 361 calculates the display delay time of the display 290 based on the delay time from the supply of such a characteristic video signal to the display 290 until the display image acquisition unit 610 acquires the same video. To do.
For example, as shown in FIG. 14A, the display delay calculation unit 361 captures an image (acquired by the display image acquisition unit 610) taken by the camera 211 with respect to the video signal (display change) supplied to the display 290. A delay (delay d) of information (display change) is obtained, and this delay time (delay d) is calculated as a display delay time of the display 290.
Further, as shown in FIG. 14B, the display delay calculation unit 361 compares a video signal supplied to the display 290 and the image information captured by the camera 211 in time series, and displays a plurality of delays (for example, delays). d1 to d3) may be obtained, and an average or deviation may be obtained from these delay times (delays d1 to d3) to calculate the display delay time of the display 290.

図15は、上述した構成のゲーム装置600において実行される第3の表示遅れ算定処理の流れを示すフローチャートである。この表示遅れ算定処理も、例えば、初期設定画面からプレイヤにより表示遅れの算定が指示された際に開始される。   FIG. 15 is a flowchart showing a flow of third display delay calculation processing executed in game device 600 having the above-described configuration. This display delay calculation process is also started when display delay calculation is instructed by the player from the initial setting screen, for example.

この表示遅れ算定処理を開始すると、ゲーム装置600は、特徴的な映像の映像信号を生成し、ディスプレイ290に供給する(ステップS701)。例えば、ゲーム装置600は、画面の全部を低輝度の暗い画像から高輝度の明るい画像に瞬時に切り換えるといった表示が変化する映像信号を生成してディスプレイ290に供給する。   When the display delay calculation process is started, the game device 600 generates a video signal of a characteristic video and supplies it to the display 290 (step S701). For example, the game apparatus 600 generates a video signal whose display changes such that the entire screen is instantaneously switched from a low-brightness dark image to a high-brightness bright image, and supplies the video signal to the display 290.

ゲーム装置600は、カメラ211にて撮影した画像情報を所定時間記録する(ステップS702)。つまり、特徴的な映像信号をディスプレイ290に供給すると、表示画像取得部610は、カメラ211にて撮影された画像情報の取得を開始する。なお、ゲーム装置600は、コントローラ210の位置及び先端の向き等を計測し、カメラ211がディスプレイ290に表示された映像を撮影していることを確認しつつ、カメラ211にて撮影された画像情報を取得する。そして、取得した画像情報を表示遅れ算定部361に順次供給し、処理制御部360の内部メモリ等に、表示遅れが生じ得る充分な時間(例えば、1秒)に渡って格納する。   The game device 600 records image information captured by the camera 211 for a predetermined time (step S702). That is, when a characteristic video signal is supplied to the display 290, the display image acquisition unit 610 starts acquiring image information captured by the camera 211. Note that the game device 600 measures the position of the controller 210, the orientation of the tip, and the like, and confirms that the camera 211 is shooting a video displayed on the display 290, and the image information captured by the camera 211. To get. Then, the acquired image information is sequentially supplied to the display delay calculation unit 361 and stored in the internal memory of the processing control unit 360 for a sufficient time (for example, 1 second) during which display delay can occur.

ゲーム装置600は、ディスプレイ290に供給した映像信号(表示の変化)に対する、カメラ211にて撮影された画像情報(表示の変化)の遅延時間を求める(ステップS703)。例えば、上述した図14(a),(b)に示すように、遅延時間を求める。
そして、ゲーム装置600は、求めた遅延時間を表示遅れ時間として算定する(ステップS704)。
The game device 600 obtains the delay time of the image information (display change) taken by the camera 211 with respect to the video signal (display change) supplied to the display 290 (step S703). For example, the delay time is obtained as shown in FIGS. 14 (a) and 14 (b).
Then, game device 600 calculates the obtained delay time as the display delay time (step S704).

このような図15に示す表示遅れ算定処理によって、ディスプレイ290に表示される映像をコントローラ210のカメラ211にて撮影し、自動的に表示遅れ時間を算定することができる。つまり、ディスプレイ290に供給した映像信号(表示の変化)に対するカメラ211にて撮影した画像情報(表示の変化)の遅延を求め、この遅延時間をディスプレイ290の表示遅れ時間として算定できる。
そして、ゲーム装置600は、上述した図8に示すような操作評価処理を実行し、プレイヤが使用するディスプレイ290に応じて発生する表示遅れの影響を解消して、プレイヤの操作を適切に評価することができる。
With the display delay calculation process shown in FIG. 15, the video displayed on the display 290 can be captured by the camera 211 of the controller 210 and the display delay time can be automatically calculated. That is, the delay of the image information (display change) captured by the camera 211 with respect to the video signal (display change) supplied to the display 290 is obtained, and this delay time can be calculated as the display delay time of the display 290.
Then, the game apparatus 600 executes the operation evaluation process as shown in FIG. 8 described above, eliminates the influence of the display delay that occurs according to the display 290 used by the player, and appropriately evaluates the operation of the player. be able to.

上記の実施形態では、音楽ゲームに適用した場合を一例として説明したが、このような音楽ゲームに限られず、表示遅れの影響を受けうる種々のゲームにも適宜適用可能である。   In the above embodiment, the case where the present invention is applied to a music game has been described as an example. However, the present invention is not limited to such a music game, and can be appropriately applied to various games that can be affected by display delay.

以上説明したように、本発明によれば、表示装置側にて所定の表示遅れが生じている場合でも、プレイヤの操作を適切に評価することができる。   As described above, according to the present invention, it is possible to appropriately evaluate the operation of the player even when a predetermined display delay occurs on the display device side.

本発明の実施形態に係る情報処理装置の概要構成を示す模式図である。It is a mimetic diagram showing the outline composition of the information processor concerning an embodiment of the present invention. コントローラユニット及び、ディスプレイの概要を説明するための外観図である。It is an external view for demonstrating the outline | summary of a controller unit and a display. 本発明の実施形態に係るゲーム装置の概要構成を示す模式図である。It is a mimetic diagram showing an outline composition of a game device concerning an embodiment of the present invention. (a),(b)共に、音合わせについて説明するための模式図である。(A), (b) is a schematic diagram for demonstrating sound matching. (a)〜(c)共に、規定操作情報について説明するための模式図である。(A)-(c) is a schematic diagram for demonstrating prescription | regulation operation information. (a)が表示画像の一例を示す模式図であり、(b),(c)他のオブジェクトの形状を示す模式図である。(A) is a schematic diagram which shows an example of a display image, (b), (c) is a schematic diagram which shows the shape of another object. 本発明の実施形態に係る表示遅れ算定処理の一例を示すフローチャートである。It is a flowchart which shows an example of the display delay calculation process which concerns on embodiment of this invention. 本発明の実施形態に係る操作評価処理の一例を示すフローチャートである。It is a flowchart which shows an example of the operation evaluation process which concerns on embodiment of this invention. プレイヤの操作が適切な場合の表示画像の一例を示す模式図である。It is a schematic diagram which shows an example of the display image in case a player's operation is appropriate. 本発明の第2の実施形態に係るゲーム装置の概要構成を示す模式図である。It is a schematic diagram which shows schematic structure of the game device which concerns on the 2nd Embodiment of this invention. (a),(b)共に、第2の実施形態に係るゲーム装置が遅延を求める様子について説明するための模式図である。(A), (b) is a schematic diagram for demonstrating a mode that the game device which concerns on 2nd Embodiment calculates | requires a delay. 本発明の第2の実施形態に係る表示遅れ算定処理の一例を示すフローチャートである。It is a flowchart which shows an example of the display delay calculation process which concerns on the 2nd Embodiment of this invention. 本発明の第3実施形態に係るゲーム装置の概要構成を示す模式図である。It is a schematic diagram which shows schematic structure of the game device which concerns on 3rd Embodiment of this invention. (a),(b)共に、第3の実施形態に係るゲーム装置が遅延を求める様子について説明するための模式図である。(A), (b) is a schematic diagram for demonstrating a mode that the game device which concerns on 3rd Embodiment calculates | requires a delay. 本発明の第3の実施形態に係る表示遅れ算定処理の一例を示すフローチャートである。It is a flowchart which shows an example of the display delay calculation process which concerns on the 3rd Embodiment of this invention.

符号の説明Explanation of symbols

100 情報処理装置
101 CPU
102 ROM
103 RAM
104 インターフェース
105 コントローラユニット
106 外部メモリ
107 DVD−ROMドライブ
108 画像処理部
109 音声処理部
110 NIC
210 コントローラ
220 センサバー
300,400,600 ゲーム装置
310 無線通信部
320 操作情報取得部
330 補助音声供給部
340 楽曲情報記憶部
350 画像情報記憶部
360 処理制御部
370 楽曲再生部
380 画像生成部
410 マイク音声取得部
100 Information processing apparatus 101 CPU
102 ROM
103 RAM
104 Interface 105 Controller Unit 106 External Memory 107 DVD-ROM Drive 108 Image Processing Unit 109 Audio Processing Unit 110 NIC
210 Controller 220 Sensor bar 300, 400, 600 Game device 310 Wireless communication unit 320 Operation information acquisition unit 330 Auxiliary audio supply unit 340 Music information storage unit 350 Image information storage unit 360 Processing control unit 370 Music playback unit 380 Image generation unit 410 Microphone audio Acquisition department

Claims (7)

映像の表示遅れに合わせて音声出力を遅延させることにより映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するゲーム装置であって、
所定のスピーカを有しており、プレイヤによって操作されるコントローラと、
前記表示装置に供給する音声信号と同じ音声信号を、前記表示装置への供給タイミングよりも遅延させて前記コントローラに供給する補助音声供給部と、
前記表示装置表示遅れ時間を、前記補助音声供給部が前記コントローラに供給する音声信号の遅延量に基づいて算定する表示遅れ算定部と、
プレイヤに課される操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含むゲーム画像を生成する画像生成部と、
当該ゲーム画像が前記表示装置に表示され、プレイヤにより操作された前記コントローラの操作情報を取得する操作情報取得部と、
取得した当該操作情報に対する当該規定操作情報の比較タイミングを、算定した当該表示遅れ時間に基づいて調整するタイミング調整部と、
調整された当該比較タイミングにおける当該操作情報と当該規定操作情報との関係に基づいて、プレイヤの操作を評価する評価部と、を備え
前記補助音声供給部は、前記コントローラに供給する音声信号の遅延量を、プレイヤによる前記コントローラの操作に応じて変化させ、
前記表示遅れ算定部は、前記表示装置の音声出力と前記コントローラの音声出力との同期を示すプレイヤの操作時における、前記補助音声供給部による音声出力の遅延量に基づいて前記表示装置の表示遅れ時間を算定する、
ことを特徴とするゲーム装置。
A game device that supplies a video signal and an audio signal to an external display device that synchronizes the video display and the audio output by delaying the audio output in accordance with the video display delay ,
A controller having a predetermined speaker and operated by a player;
An auxiliary audio supply unit that supplies the same audio signal as the audio signal supplied to the display device to the controller with a delay from the supply timing to the display device;
The display delay time of the display device, a display lag calculating unit auxiliary audio feed unit is calculated based on the delay amount of audio signals supplied to the controller,
In accordance with the provisions operation information defining the operation reports that originate imposed on the player, and an image generating unit that generates a game image including an image for guiding the target operation to the player,
The game image is displayed on the display device, the operation information acquisition unit that acquires the controller operation information that has been manipulated by the player,
A timing adjustment unit that adjusts the comparison timing of the specified operation information with respect to the acquired operation information based on the calculated display delay time;
An evaluation unit that evaluates the player's operation based on the relationship between the operation information and the specified operation information at the adjusted comparison timing ,
The auxiliary audio supply unit changes a delay amount of an audio signal supplied to the controller according to an operation of the controller by a player,
The display delay calculation unit is configured to display the display delay of the display device based on a delay amount of the audio output by the auxiliary audio supply unit when a player operates to indicate synchronization between the audio output of the display device and the audio output of the controller. Calculating time,
A game device characterized by that.
映像の表示遅れに合わせて音声出力を遅延させることにより映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するゲーム装置であって、
所定のマイクロフォンを有しており、プレイヤによって操作されるコントローラと、
当該マイクロフォンにて集音した前記表示装置から出力される音声を、前記コントローラから取得する音声取得部と、
前記表示装置の表示遅れ時間を、前記表示装置に音声信号を供給してから前記音声取得部が同音声を取得するまでの遅延時間に基づいて算定する表示遅れ算定部と、
プレイヤに課される操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含むゲーム画像を生成する画像生成部と、
当該ゲーム画像が前記表示装置に表示され、プレイヤにより操作された前記コントローラの操作情報を取得する操作情報取得部と、
取得した当該操作情報に対する当該規定操作情報の比較タイミングを、算定した当該表示遅れ時間に基づいて調整するタイミング調整部と、
調整された当該比較タイミングにおける当該操作情報と当該規定操作情報との関係に基づいて、プレイヤの操作を評価する評価部と、を備える、
ことを特徴とするゲーム装置。
A game device that supplies a video signal and an audio signal to an external display device that synchronizes the video display and the audio output by delaying the audio output in accordance with the video display delay,
A controller having a predetermined microphone and operated by a player;
A sound acquisition unit for acquiring sound output from the display device collected by the microphone from the controller;
A display delay calculating unit that calculates a display delay time of the display device based on a delay time from supplying an audio signal to the display device until the audio acquiring unit acquires the audio;
An image generation unit that generates a game image including an image for guiding the target operation to the player based on the prescribed operation information that defines the operation content imposed on the player;
An operation information acquisition unit configured to acquire operation information of the controller that is displayed on the display device and operated by a player;
A timing adjustment unit that adjusts the comparison timing of the specified operation information with respect to the acquired operation information based on the calculated display delay time;
An evaluation unit that evaluates the player's operation based on the relationship between the operation information and the specified operation information at the adjusted comparison timing,
A game device characterized by that.
請求項1または2に記載のゲーム装置であって、The game device according to claim 1 or 2,
楽曲情報から楽曲音を再生する楽曲再生部と、A music playback unit that plays back the music sound from the music information;
当該楽曲情報に基づいて、前記規定操作情報を生成する規定操作情報生成部と、を更に備え、A prescribed operation information generation unit that generates the prescribed operation information based on the music information;
前記画像生成部は、再生される当該楽曲音に同調して、所定方向に移動するオブジェクトを含むゲーム画像を生成し、The image generation unit generates a game image including an object moving in a predetermined direction in synchronization with the reproduced music sound,
前記操作情報取得部は、当該オブジェクトが表示画像中の所定位置に移動した際に、プレイヤによって操作され得るコントローラの操作情報を取得する、The operation information acquisition unit acquires operation information of a controller that can be operated by a player when the object moves to a predetermined position in a display image.
ことを特徴とするゲーム装置。A game device characterized by that.
映像の表示遅れに合わせて音声出力を遅延させることにより映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するゲーム装置における操作評価方法であって、An operation evaluation method in a game device that supplies a video signal and an audio signal to an external display device that synchronizes the video display and the audio output by delaying the audio output in accordance with the display delay of the video,
当該ゲーム装置は、所定のスピーカを有しプレイヤによって操作されるコントローラと、音声処理部と、演算部と、画像処理部と、インターフェースとを備えており、The game apparatus includes a controller that has a predetermined speaker and is operated by a player, a sound processing unit, a calculation unit, an image processing unit, and an interface.
前記音声処理部が行う、前記表示装置に供給する音声信号と同じ音声信号を、前記表示装置への供給タイミングよりも遅延させて前記コントローラに供給する補助音声供給ステップと、An auxiliary audio supply step of supplying the same audio signal as the audio signal supplied to the display device to the controller with a delay from the supply timing to the display device, performed by the audio processing unit;
前記演算部が行う、前記表示装置の表示遅れ時間を、前記補助音声供給部が前記コントローラに供給する音声信号の遅延量に基づいて算定する表示遅れ算定ステップと、Display delay calculation step for calculating the display delay time of the display device performed by the arithmetic unit based on the delay amount of the audio signal supplied to the controller by the auxiliary audio supply unit;
前記画像処理部が行う、プレイヤに課される操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含むゲーム画像を生成する画像生成ステップと、An image generation step for generating a game image including an image for guiding the target operation to the player, based on prescribed operation information for defining an operation content imposed on the player, performed by the image processing unit;
当該ゲーム画像が前記表示装置に表示され、プレイヤにより操作された前記コントローラの操作情報を前記インターフェースを介して取得する操作情報取得ステップと、An operation information acquisition step for acquiring the operation information of the controller operated by the player when the game image is displayed on the display device via the interface;
前記演算部が行う、取得した当該操作情報に対する当該規定操作情報の比較タイミングを、算定した当該表示遅れ時間に基づいて調整するタイミング調整ステップと、A timing adjustment step of adjusting the comparison timing of the specified operation information with respect to the acquired operation information performed by the arithmetic unit based on the calculated display delay time;
前記演算部が行う、調整された当該比較タイミングにおける当該操作情報と当該規定操作情報との関係に基づいて、プレイヤの操作を評価する評価ステップと、を備え、An evaluation step for evaluating a player's operation based on a relationship between the operation information and the specified operation information at the adjusted comparison timing performed by the arithmetic unit,
前記補助音声供給ステップでは、前記コントローラに供給する音声信号の遅延量を、プレイヤによる前記コントローラの操作に応じて変化させ、In the auxiliary sound supply step, the delay amount of the sound signal supplied to the controller is changed according to the operation of the controller by the player,
前記表示遅れ算定ステップでは、前記表示装置の音声出力と前記コントローラの音声出力との同期を示すプレイヤの操作時における、前記補助音声供給ステップによる音声出力の遅延量に基づいて前記表示装置の表示遅れ時間を算定する、In the display delay calculation step, the display delay of the display device is based on the amount of delay of the audio output by the auxiliary audio supply step during the operation of the player indicating the synchronization between the audio output of the display device and the audio output of the controller. Calculating time,
ことを特徴とする操作評価方法。An operation evaluation method characterized by that.
映像の表示遅れに合わせて音声出力を遅延させることにより映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するゲーム装置における操作評価方法であって、An operation evaluation method in a game device that supplies a video signal and an audio signal to an external display device that synchronizes the video display and the audio output by delaying the audio output in accordance with the display delay of the video,
当該ゲーム装置は、所定のマイクロフォンを有しプレイヤによって操作されるコントローラと、インターフェースと、演算部と、画像処理部とを備えており、The game device includes a controller that has a predetermined microphone and is operated by a player, an interface, a calculation unit, and an image processing unit.
当該マイクロフォンにて集音した前記表示装置から出力される音声を、前記コントローラから前記インターフェースを介して取得する音声取得ステップと、A sound acquisition step of acquiring sound output from the display device collected by the microphone from the controller via the interface;
前記演算部が行う、前記表示装置の表示遅れ時間を、前記表示装置に音声信号を供給してから前記音声取得部が同音声を取得するまでの遅延時間に基づいて算定する表示遅れ算定ステップと、A display delay calculating step for calculating a display delay time of the display device performed by the arithmetic unit based on a delay time from when an audio signal is supplied to the display device until the audio acquiring unit acquires the audio; ,
前記画像処理部が行う、プレイヤに課される操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含むゲーム画像を生成する画像生成ステップと、An image generation step for generating a game image including an image for guiding the target operation to the player, based on prescribed operation information for defining an operation content imposed on the player, performed by the image processing unit;
当該ゲーム画像が前記表示装置に表示され、プレイヤにより操作された前記コントローラの操作情報を前記インターフェースを介して取得する操作情報取得ステップと、An operation information acquisition step for acquiring the operation information of the controller operated by the player when the game image is displayed on the display device via the interface;
前記演算部が行う、取得した当該操作情報に対する当該規定操作情報の比較タイミングを、算定した当該表示遅れ時間に基づいて調整するタイミング調整ステップと、A timing adjustment step of adjusting the comparison timing of the specified operation information with respect to the acquired operation information performed by the arithmetic unit based on the calculated display delay time;
前記演算部が行う、調整された当該比較タイミングにおける当該操作情報と当該規定操作情報との関係に基づいて、プレイヤの操作を評価する評価ステップと、を備える、An evaluation step for evaluating a player's operation based on a relationship between the operation information and the specified operation information at the adjusted comparison timing performed by the arithmetic unit,
ことを特徴とする操作評価方法。An operation evaluation method characterized by that.
映像の表示遅れに合わせて音声出力を遅延させることにより映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するコンピュータを、A computer that supplies a video signal and an audio signal to an external display device that synchronizes the video display and the audio output by delaying the audio output in accordance with the video display delay,
所定のスピーカを有しており、プレイヤによって操作されるコントローラ、A controller having a predetermined speaker and operated by a player;
前記表示装置に供給する音声信号と同じ音声信号を、前記表示装置への供給タイミングよりも遅延させて前記コントローラに供給する補助音声供給部、An auxiliary audio supply unit that supplies the same audio signal as the audio signal supplied to the display device to the controller with a delay from the supply timing to the display device;
前記表示装置の表示遅れ時間を、前記補助音声供給部が前記コントローラに供給する音声信号の遅延量に基づいて算定する表示遅れ算定部、A display delay calculation unit that calculates a display delay time of the display device based on a delay amount of an audio signal supplied to the controller by the auxiliary audio supply unit;
プレイヤに課される操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含むゲーム画像を生成する画像生成部、An image generation unit that generates a game image including an image for guiding the target operation to the player based on the prescribed operation information that defines the operation content imposed on the player;
当該ゲーム画像が前記表示装置に表示され、プレイヤにより操作された前記コントローラの操作情報を取得する操作情報取得部、An operation information acquisition unit configured to acquire operation information of the controller that is displayed on the display device and operated by a player;
取得した当該操作情報に対する当該規定操作情報の比較タイミングを、算定した当該表示遅れ時間に基づいて調整するタイミング調整部、A timing adjustment unit that adjusts the comparison timing of the specified operation information with respect to the acquired operation information based on the calculated display delay time;
調整された当該比較タイミングにおける当該操作情報と当該規定操作情報との関係に基づいて、プレイヤの操作を評価する評価部、として機能させ、Based on the relationship between the operation information and the specified operation information at the adjusted comparison timing, function as an evaluation unit that evaluates the player's operation,
前記補助音声供給部は、前記コントローラに供給する音声信号の遅延量を、プレイヤによる前記コントローラの操作に応じて変化させ、The auxiliary audio supply unit changes a delay amount of an audio signal supplied to the controller according to an operation of the controller by a player,
前記表示遅れ算定部は、前記表示装置の音声出力と前記コントローラの音声出力との同期を示すプレイヤの操作時における、前記補助音声供給部による音声出力の遅延量に基づいて前記表示装置の表示遅れ時間を算定する、The display delay calculation unit is configured to display the display delay of the display device based on a delay amount of the audio output by the auxiliary audio supply unit when a player operates to indicate synchronization between the audio output of the display device and the audio output of the controller. Calculating time,
ように機能させることを特徴とするプログラム。A program characterized by functioning as follows.
映像の表示遅れに合わせて音声出力を遅延させることにより映像表示と音声出力とを同期させている外部の表示装置に、映像信号及び音声信号を供給するコンピュータを、
所定のマイクロフォンを有しており、プレイヤによって操作されるコントローラ、
当該マイクロフォンにて集音した前記表示装置から出力される音声を、前記コントローラから取得する音声取得部、
前記表示装置表示遅れ時間を、前記表示装置に音声信号を供給してから前記音声取得部が同音声を取得するまでの遅延時間に基づいて算定する表示遅れ算定部、
プレイヤに課される操作内容を規定する規定操作情報に基づいて、対象操作をプレイヤに案内するための画像を含むゲーム画像を生成する画像生成部、
当該ゲーム画像が前記表示装置に表示され、プレイヤにより操作された前記コントローラの操作情報を取得する操作情報取得部、
取得した当該操作情報に対する当該規定操作情報の比較タイミングを、算定した当該表示遅れ時間に基づいて調整するタイミング調整部、
調整された当該比較タイミングにおける当該操作情報と当該規定操作情報との関係に基づいて、プレイヤの操作を評価する評価部、
として機能させることを特徴とするプログラム。
A computer that supplies a video signal and an audio signal to an external display device that synchronizes the video display and the audio output by delaying the audio output in accordance with the video display delay ,
A controller having a predetermined microphone and operated by a player;
A sound acquisition unit that acquires sound output from the display device collected by the microphone from the controller;
Wherein the display delay time of the display device, said display device display delay calculation unit, wherein the sound acquisition unit from supplying the audio signal is calculated based on the delay time of obtaining the voice,
In accordance with the provisions operation information defining the operation reports that originate imposed on the player, the image generation unit for generating a game image including an image for guiding the target operation to the player,
The game image is displayed on the display device, the operation information acquisition unit for acquiring the controller operation information that has been manipulated by the player,
A timing adjustment unit that adjusts the comparison timing of the specified operation information with respect to the acquired operation information based on the calculated display delay time;
An evaluation unit that evaluates the player's operation based on the relationship between the operation information and the specified operation information at the adjusted comparison timing;
A program characterized by functioning as
JP2006312856A 2006-11-20 2006-11-20 GAME DEVICE, OPERATION EVALUATION METHOD, AND PROGRAM Active JP4127561B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006312856A JP4127561B2 (en) 2006-11-20 2006-11-20 GAME DEVICE, OPERATION EVALUATION METHOD, AND PROGRAM

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006312856A JP4127561B2 (en) 2006-11-20 2006-11-20 GAME DEVICE, OPERATION EVALUATION METHOD, AND PROGRAM

Publications (2)

Publication Number Publication Date
JP2008125721A JP2008125721A (en) 2008-06-05
JP4127561B2 true JP4127561B2 (en) 2008-07-30

Family

ID=39552158

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006312856A Active JP4127561B2 (en) 2006-11-20 2006-11-20 GAME DEVICE, OPERATION EVALUATION METHOD, AND PROGRAM

Country Status (1)

Country Link
JP (1) JP4127561B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100949931B1 (en) * 2008-06-04 2010-03-30 주식회사 에이앤비소프트 Rhythm action game method using a user equipment with key-pad and recording medium storing program implementing the same
JP4939557B2 (en) * 2009-02-03 2012-05-30 株式会社コナミデジタルエンタテインメント GAME DEVICE, GAME CONTROL METHOD, AND PROGRAM
JP4825273B2 (en) * 2009-02-13 2011-11-30 株式会社コナミデジタルエンタテインメント GAME DEVICE, GAME DEVICE CONTROL METHOD, AND PROGRAM
JP5443832B2 (en) 2009-05-29 2014-03-19 任天堂株式会社 GAME PROGRAM AND GAME DEVICE
US8674935B2 (en) * 2009-10-21 2014-03-18 Qualcomm Incorporated System delay mitigation in interactive systems
JP5372709B2 (en) * 2009-11-10 2013-12-18 株式会社コナミデジタルエンタテインメント GAME DEVICE, GAME DEVICE CONTROL METHOD, AND PROGRAM
JP5252456B2 (en) * 2009-12-04 2013-07-31 株式会社コナミデジタルエンタテインメント Game machine and game program
JP5774314B2 (en) * 2011-01-05 2015-09-09 任天堂株式会社 Delay measurement system and delay measurement method
WO2023135665A1 (en) * 2022-01-12 2023-07-20 日本電信電話株式会社 Lag time measurement server, lag time measurement method, and program

Also Published As

Publication number Publication date
JP2008125721A (en) 2008-06-05

Similar Documents

Publication Publication Date Title
JP4127561B2 (en) GAME DEVICE, OPERATION EVALUATION METHOD, AND PROGRAM
KR100970866B1 (en) Game device, progress control method, and information recording medium
JP6471774B2 (en) Information processing system and moving image reproduction method
US20080102958A1 (en) Game system
JP3579042B1 (en) GAME DEVICE, GAME METHOD, AND PROGRAM
TWI403347B (en) Game device, method for evaluating operation information recording medium, and program
JP6151527B2 (en) Music game program, game device, game device control method, and game system
JP2010233742A (en) Game device, operation determination method, and program
CN103310766B (en) Music performance apparatus and method
US7777124B2 (en) Music reproducing program and music reproducing apparatus adjusting tempo based on number of streaming samples
US8496516B2 (en) Game device, tempo announcement method, information recording medium and program
JP5121487B2 (en) Music correction program and music correction device
JP5548179B2 (en) Game device and program
JP2011048088A (en) Selecting device, selecting method, and program
JP3983789B1 (en) GAME DEVICE, CORRECTION METHOD, AND PROGRAM
JP2002058869A (en) Music game progress control method and device, and readable recording medium with music game progress control program recorded on it
JP2001232061A (en) Game device and information storage medium
JP5386557B2 (en) GAME DEVICE, GAME DEVICE CONTROL METHOD, AND PROGRAM
TW201011615A (en) Audio processing apparatus, audio processing method, information recording medium, and program
JP5462851B2 (en) GAME DEVICE, EVALUATION METHOD, AND PROGRAM
KR101198083B1 (en) Game device, digest display method, and information recording medium
JP5210908B2 (en) Moving image generating device, game device, moving image generating method, and program
JP5222978B2 (en) GAME DEVICE, GAME DEVICE CONTROL METHOD, AND PROGRAM
JP5535168B2 (en) Game device and program
JP2023149618A (en) Generation method, generation system, and control program, and game system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080414

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080507

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080508

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110523

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4127561

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110523

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120523

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130523

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130523

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140523

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250