JP7495187B2

JP7495187B2 - ゲームシステム及びプログラム

Info

Publication number: JP7495187B2
Application number: JP2019225749A
Authority: JP
Inventors: 哲一中西
Original assignee: Kabushiki Kaisha Bandai Namco Entertainment (also trading as Bandai Namco Entertainment Inc.); Namco Ltd
Current assignee: Kabushiki Kaisha Bandai Namco Entertainment (also trading as Bandai Namco Entertainment Inc.); Namco Ltd
Priority date: 2019-12-13
Filing date: 2019-12-13
Publication date: 2024-06-04
Anticipated expiration: 2039-12-13
Also published as: JP2021094086A

Description

本発明は、ゲームシステム及びプログラム等に関する。

例えば音楽ゲームなどにおいては、プレーヤが入力操作を行うと、その入力操作に対応するフィードバック音がプレーヤに対して出力される。入力操作が楽器演奏の操作である場合には、フィードバック音である演奏音がプレーヤに出力される。このような音楽ゲームのゲーム装置の従来技術としては例えば特許文献１、２に開示される技術がある。特許文献１のゲーム装置では、プレーヤの操作を評価し、評価結果に基づいて音量を制御する。例えば、入力指示の種別に適合した種別のボタンが適切なタイミングで操作された場合には、適切でない場合に比べて音量を相対的に大きくする。特許文献２のゲーム装置では、映像信号が供給されてからディスプレイに映像が表示されるまでの表示遅れ時間を算出する。そして、プレーヤに課される操作内容を規定する規定操作情報のタイミングを、算出された表示遅れ時間の分だけ遅延させて、遅延させた規定操作情報のタイミングと、プレーヤの操作情報のタイミングとを比較して、プレーヤの操作を評価する。

特開２００１－２３２０５７号公報特開２００８－１２５７２１号公報

プレーヤの入力操作に対応するフィードバック音等のフィードバックをプレーヤに出力するゲームシステムでは、何らかの要因でこのフィードバックの出力に遅延が発生する場合がある。例えばネットワークでの通信遅延などの環境要因や、基準タイミングに対するプレーヤの入力操作の入力タイミングの遅延などが原因で、フィードバックの出力に遅延が発生する。そして、このようにフィードバックの出力に遅延が発生すると、キータイミングである基準タイミングと、フィードバックの出力タイミングとの間に大きなズレが発生して、プレーヤが違和感を感じてしまうという問題が発生する。

本開示によれば、フィードバックの出力タイミングの遅延により発生する違和感を軽減できるゲームシステム及びプログラム等を提供できる。

本開示の一態様は、プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、前記入力操作に対するフィードバックとして、音又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部と、を含み、前記フィードバック処理部は、前記遅延時間情報に基づいて、前記フィードバックの加工処理を行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行うゲームシステムに関係する。また本開示の一態様は、上記各部としてコンピュータを機能させるプログラム、又は該プログラムを記憶したコンピュータ読み取り可能な情報記憶媒体に関係する。

本開示の一態様によれば、入力操作に対応してプレーヤに出力される音又は振動によるフィードバックの遅延時間情報が測定され、測定された遅延時間情報に基づいて、フィードバックの加工処理が行われ、加工処理後のフィードバックがプレーヤに出力される。このようにすれば、フィードバックの遅延時間情報に応じた加工処理が、音又は振動によるフィードバックに対して行われて、プレーヤに出力されるようになる。このように遅延時間情報に応じて変化する加工処理をフィードバックに対して行って、プレーヤに出力することで、フィードバックの出力タイミングの遅延により発生する違和感を軽減できるゲームシステム等の提供が可能になる。

また本開示の一態様では、前記測定部は、所与の測定タイミング毎に前記遅延時間情報を測定し、前記フィードバック処理部は、前記測定タイミングで測定された前記遅延時間情報に基づいて、前記フィードバックに対して動的に加工処理を行ってもよい。

このようにすれば、環境要因によりフィードバックの遅延時間情報が変動した場合にも、この変動する遅延時間情報を測定して、フィードバックに対して行われる加工処理の内容を動的に変化させることが可能になる。

また本開示の一態様では、前記フィードバック処理部は、端末装置において前記プレーヤが行った前記入力操作に対する前記フィードバックに対して前記加工処理を行い、前記加工処理が行われた前記フィードバックを前記端末装置に対して出力する処理を行ってもよい。

このようにすれば、ネットワークを介してゲームシステムと端末装置が通信接続されるシステムにおいて、ゲームシステムが、端末装置での入力操作に対応するフィードバックの加工処理を行い、加工処理後のフィードバックを端末装置から出力できるようになる。

また本開示の一態様では、前記測定部は、前記端末装置とゲームシステムとを通信接続するネットワークの通信遅延時間を、前記遅延時間情報として測定してもよい。

このようにすれば、ネットワークの通信遅延時間を測定することで、フィードバックの遅延時間情報を特定できるようになり、遅延時間情報に応じた加工処理が行われたフィードバックを端末装置から出力することが可能になる。

また本開示の一態様では、前記フィードバック処理部は、前記遅延時間情報に基づいて、前記フィードバックであるフィードバック音の音量を変更する処理を、前記加工処理として行ってもよい。

このようにすれば、フィードバック音の遅延時間情報に応じて、フィードバック音の音量が変化するようになり、フィードバック音の出力タイミングの遅延により発生する違和感を軽減する音量制御が可能になる。

また本開示の一態様では、前記フィードバック処理部は、前記遅延時間情報に基づいて、前記フィードバック音の音量エンベロープを変更する処理を、前記加工処理として行ってもよい。

このようにすれば、フィードバック音の遅延時間情報に応じてフィードバック音の音量エンベロープが変化するようになり、フィードバック音の出力のズレによる違和感を、プレーヤが感じにくくなるようなフィードバック音の音量制御が可能になる。

また本開示の一態様では、前記フィードバック処理部は、前記フィードバックの種別に応じて、前記加工処理の内容を異ならせてもよい。

このようにすれば、フィードバックの種別に応じた適切な加工内容で、フィードバックの加工処理を実行できるようになる。

また本開示の一態様では、前記判定部は、基準タイミングと前記入力タイミングとの比較を行うことで前記入力操作の評価処理を行い、前記フィードバック処理部は、前記フィードバックと前記評価処理の結果を、前記プレーヤに出力する処理を行い、前記遅延時間情報は、前記基準タイミングに対する前記入力タイミングの遅延時間の情報を含んでもよい。

このようにすれば、基準タイミングと入力タイミングを比較してプレーヤの入力操作を評価するシステムにおいて、基準タイミングに対する入力タイミングの遅延に応じた加工処理をフィードバックに対して行うことが可能になる。

また本開示の一態様では、前記フィードバック処理部は、前記評価処理の結果に応じた前記加工処理を行ってもよい。

このようにすれば、プレーヤの入力操作の評価結果を有効利用して、加工処理の加工内容を決定して、決定された加工内容の加工処理をフィードバックに対して行うことが可能になる。

また本開示の一態様では、前記フィードバック処理部は、前記遅延時間情報により表される遅延時間が所与のしきい値を超えた場合には、前記フィードバックを前記プレーヤに出力せずに、前記評価処理の結果だけを前記プレーヤに出力する処理を行ってもよい。

このように遅延時間がしきい値を超えた場合にフィードバックを出力しないことで、プレーヤが違和感を感じないようにすることができる。そして、プレーヤの入力操作の評価結果については出力することで、プレーヤは、例えば自身の入力操作の遅れが原因で、入力操作に対応するフィードバックが出力されないことを認識できるようになる。

また本開示の一態様では、前記フィードバック処理部は、前記遅延時間情報により表される遅延時間が所与の時間を越えた場合には、その後に前記遅延時間が前記所与の時間を下回った場合にも、前記遅延時間が前記所与の時間を超えたときの前記加工処理を継続して行ってもよい。

このようにすれば、フィードバックに対する加工処理の加工度合いが、頻繁に変化したり、大幅に変動するなどの事態が抑制され、プレーヤが感じる違和感を低減できるようになる。

また本開示の一態様では、前記フィードバック処理部は、ゲーム状況が所与の状況の場合に、前記遅延時間情報に基づく前記加工処理が行われた前記フィードバックに代えて、前記所与の状況用のフィードバックを前記プレーヤに出力する処理を行ってもよい。

このようにすれば、ゲーム状況が所与の状況の場合に、その所与の状況に適合したフィードバックを出力できるようになり、プレーヤが感じる違和感の低減を図れるようになる。

また本開示の一態様では、前記フィードバック処理部は、前記フィードバックであるフィードバック音と共に前記プレーヤに出力される音楽の音量を、前記遅延時間情報に基づいて制御してもよい。

このようにすれば、フィードバック音と共に出力される音楽の音量を制御することで、フィードバック音が遅延することによりプレーヤが感じる違和感を軽減することが可能になる。

また本開示の一態様では、前記フィードバック処理部は、前記プレーヤ以外の他のプレーヤの情報に基づいて、前記フィードバックの前記加工処理を行ってもよい。

このようにすれば、プレーヤ以外の他のプレーヤの情報も加味して、遅延時間情報に基づく加工処理を実行できるようになる。

また本開示の一態様では、前記フィードバック処理部は、前記プレーヤによるオプション選択により、前記フィードバックの前記加工処理のオン又はオフを行ってもよい。

このようにすれば、遅延時間情報に基づく加工処理をフィードバックに対して行うか否かを、プレーヤの意思により任意に選択できるようになる。

また本開示の一態様では、前記フィードバック処理部は、前記フィードバックであるフィードバック音として、音楽ゲームにおける前記プレーヤの演奏音を前記プレーヤに出力する処理を行ってもよい。

このようにすれば、入力操作に対応するフィードバック音として、音楽ゲームにおけるプレーヤの演奏音を出力できるようになると共に、演奏音の遅延時間情報に応じた加工処理を演奏音に対して行うことが可能になる。

図１（Ａ）～図１（Ｆ）は本実施形態のゲームシステムを実現するハードウェア装置の説明図。本実施形態のゲームシステムの構成例。本実施形態の手法の説明図。図４（Ａ）、図４（Ｂ）は入力操作に対応して出力されるフィードバックについての説明図。本実施形態の手法を説明するフローチャート。遅延時間情報を測定して加工処理を行う手法を説明するフローチャート。フィードバックの加工処理の一例を示す図。フィードバックの種別を判断して加工処理を行う手法を説明するフローチャート。図９（Ａ）、図９（Ｂ）はプレーヤの入力操作の評価処理の説明図。プレーヤの入力操作の評価処理に応じた加工処理を行う手法を説明するフローチャート。遅延時間がしきい値を越えた場合にフィードバックの出力をオフにして入力操作の評価結果だけを出力する手法の説明図。遅延時間がしきい値を越えた場合にフィードバックの出力をオフにして入力操作の評価結果だけを出力する手法を説明するフローチャート。遅延時間が所与の時間を越えた場合にそのときの加工処理を継続して行う手法を説明するフローチャート。音楽ゲームにおける連打のゲーム状況についての説明図。ゲーム状況が所与の状況の場合に所与の状況用のフィードバックを出力する手法を説明するフローチャート。遅延時間情報に基づいて加工処理を行うと共に音楽の音量を制御する手法を説明するフローチャート。プレーヤ以外の他のプレーヤの情報に基づいてフィードバックの加工処理を行う手法を説明するフローチャート。プレーヤのオプション選択により加工処理のオン又はオフを行う手法の説明図。

以下、本実施形態について説明する。なお、以下に説明する本実施形態は、特許請求の範囲の記載内容を不当に限定するものではない。また本実施形態で説明される構成の全てが、必須構成要件であるとは限らない。

１．ゲームシステム
まず、図１（Ａ）～図１（Ｅ）を用いて、本実施形態のゲームシステムを実現するハードウェア装置について説明する。

図１（Ａ）では、サーバシステム５００（情報処理システム）が、ネットワーク５１０を介して端末装置ＴＭ１～ＴＭｎと通信接続されている。例えばサーバシステム５００はホストであり、端末装置ＴＭ１～ＴＭｎはクライアントである。なお、本実施形態のゲームシステム及びその処理は、サーバシステム５００により実現してもよいし、端末装置ＴＭ１～ＴＭｎにより実現してもよい。或いはサーバシステム５００と端末装置ＴＭ１～ＴＭｎの分散処理により実現してもよい。

また本実施形態のゲームシステム及び処理は、ブロックチェーンの手法により実現することも可能である。例えばイーサリウム（Ethereum）で実行可能なスマートコントラクトと呼ばれるプログラムを用いて、本実施形態のゲームシステムの各処理を実行してもよい。この場合には端末装置ＴＭ１～ＴＭｎはピア・ツー・ピアで接続されることになる。また端末装置ＴＭ１～ＴＭｎの間で通信されるゲーム情報等の各種の情報は、ブロックチェーンを用いて転送されることになる。なお、以下では、ＴＭ１～ＴＭｎの各端末装置を、適宜、端末装置ＴＭと記載する。

サーバシステム５００は例えば１又は複数のサーバ（管理サーバ、ゲームサーバ、課金サーバ、サービス提供サーバ、コンテンツ配信サーバ、認証サーバ、データベースサーバ、又は通信サーバ等）により実現できる。このサーバシステム５００は、コミュニティ型ウェブサイトやオンラインゲームを運営するための各種サービスを提供し、ゲーム実行に必要なデータの管理や、クライアントプログラム及び各種データ等の配信を行うことができる。これにより、例えば、ユーザ端末である端末装置ＴＭによりＳＮＳ（Social Networking Service）などを利用するためにサーバシステム５００にアクセスし、当該サーバシステム５００から提供されるオンラインゲームやソーシャルゲームや家庭用ゲームなどのネットワークゲームのプレイが可能になる。

ネットワーク５１０（配信網、通信回線）は、例えばインターネットや無線ＬＡＮ等を利用した通信路であり、直接接続のための専用線（専用ケーブル）やイーサネット（登録商標）等によるＬＡＮの他、電話通信網やケーブル網や無線ＬＡＮ等の通信網を含むことができる。また通信方法については有線／無線を問わない。

端末装置ＴＭ（プレーヤ端末）は、例えばネット接続機能（インターネット接続機能）を有する端末である。これらの端末装置ＴＭとしては、例えば図１（Ｂ）に示すパーソナルコンピュータやタブレット型コンピュータなどの情報処理装置、図１（Ｃ）に示すスマートフォンや携帯電話機などの携帯型通信端末、図１（Ｄ）に示す携帯型ゲーム装置、図１（Ｅ）に示す家庭用ゲーム装置（据え置き型）、或いは図１（Ｆ）に示す業務用ゲーム装置などの種々の装置を用いることができる。或いは、端末装置ＴＭとして、プレーヤの頭部や腕などの部位に装着されるウェアラブル機器（ＨＭＤ、ウォッチ型機器等）を用いてもよい。

図２に本実施形態のゲームシステム（キャラクタメイクシステム）の構成例を示す。なお、ゲームシステムの構成は図２に限定されず、その構成要素（各部）の一部を省略したり、他の構成要素を追加するなどの種々の変形実施が可能である。また本実施形態のゲームシステムにより実現されるゲームは、マルチプレイのゲームであってもよいし、シングルプレイのゲームであってもよい。またゲームのジャンルについても特に限定はなく、音楽ゲーム（リズムゲーム）、ＲＰＧ（ロールプレイングゲーム）、アクションゲーム、格闘ゲーム、シューティングゲーム、競争ゲーム又はパズルゲームなどの種々のゲームに適用できる。

ゲームシステムは、処理部１００、操作部１６０、記憶部１７０、表示部１９０、音出力部１９２、Ｉ／Ｆ部１９４、通信部１９６を含む。

処理部１００（プロセッサ）は、記憶部１７０（データベース）に記憶される各種の情報、プログラム、又は操作情報等に基づいて、判定処理、フィードバック処理、測定処理、ゲーム処理、管理処理、表示処理、或いは音処理などを行う。

処理部１００の各部が行う本実施形態の各処理（各機能）はプロセッサ（ハードウェアを含むプロセッサ）により実現できる。例えば本実施形態の各処理は、プログラム等の情報に基づき動作するプロセッサと、プログラム等の情報を記憶するメモリーにより実現できる。プロセッサは、例えば各部の機能が個別のハードウェアで実現されてもよいし、或いは各部の機能が一体のハードウェアで実現されてもよい。例えば、プロセッサはハードウェアを含み、そのハードウェアは、デジタル信号を処理する回路及びアナログ信号を処理する回路の少なくとも一方を含むことができる。例えば、プロセッサは、回路基板に実装された１又は複数の回路装置（例えばＩＣ等）や、１又は複数の回路素子（例えば抵抗、キャパシタ等）で構成することもできる。プロセッサは、例えばＣＰＵ（Central Processing Unit）であってもよい。但し、プロセッサはＣＰＵに限定されるものではなく、ＧＰＵ（Graphics Processing Unit）、或いはＤＳＰ（Digital Signal Processor）等、各種のプロセッサを用いることが可能である。またプロセッサはＡＳＩＣによるハードウェア回路であってもよい。またプロセッサは、アナログ信号を処理するアンプ回路やフィルタ回路等を含んでもよい。メモリー（記憶部１７０）は、ＳＲＡＭ、ＤＲＡＭ等の半導体メモリーであってもよいし、レジスターであってもよい。或いはハードディスク装置（ＨＤＤ）等の磁気記憶装置であってもよいし、光学ディスク装置等の光学式記憶装置であってもよい。例えば、メモリーはコンピュータにより読み取り可能な命令を格納しており、当該命令がプロセッサにより実行されることで、処理部１００の各部の処理（機能）が実現されることになる。ここでの命令は、プログラムを構成する命令セットでもよいし、プロセッサのハードウェア回路に対して動作を指示する命令であってもよい。

処理部１００は、判定部１０２、フィードバック処理部１０４、測定部１０６、ゲーム処理部１０８、管理部１１２、表示処理部１２０、音処理部１３０を含む。

判定部１０２は種々の判定処理を行う。フィードバック処理部１０４はフィードバックについての種々の処理を行う。測定部１０６は種々の測定処理を行う。これらの判定部１０２、フィードバック処理部１０４、測定部１０６の詳細については後述する。

ゲーム処理部１０８はプレーヤがゲームをプレイするための種々のゲーム処理を行う。ゲーム処理は、例えば、ゲーム開始条件が満たされた場合にゲームを開始する処理、開始したゲームを進行させる処理、ゲーム終了条件が満たされた場合にゲームを終了する処理、或いはゲーム成績を演算する処理などである。ネットワークゲームを例にとれば、ゲーム処理部１０８は、ユーザ情報をプレーヤごとに管理することで、プレーヤごとにゲームの進行を制御する。プレーヤのユーザ情報はユーザ情報記憶部１７８に記憶される。

ゲーム処理部１０８は、プレーヤの入力操作に基づいてゲーム処理を行う。例えばプレーヤの入力操作についての判定処理を行う判定部１０２での判定結果に基づいて、ゲームを進行させたり、ゲーム成績を演算するなどのゲーム処理を実行する。ゲーム処理に用いられるゲーム情報は記憶部１７０に記憶される。ゲーム情報は、ゲームパラメータの情報、ゲームの画像情報、ゲームの音情報（音楽情報、演奏音情報等）などである。

管理部１１２は、例えばプレーヤの認証処理を行う。例えば端末装置を用いてログインしたプレーヤの認証処理を行う。この認証処理は、例えばプレーヤが入力するパスワードやアカウント情報などに基づいて行う。また管理部１１２は、種々の課金処理を行う。例えば課金の決定処理、課金データの作成処理、保存処理等を行う。また管理部１１２は、各種の管理処理を行う。例えば各種サービスの管理処理や、各種情報の管理処理を行う。

例えばプレーヤは、図１（Ａ）のサーバシステム５００等が提供するサービスを利用するために、所定の手続きを行ってアカウントを取得する。取得したアカウントと対応づけられるパスワードを入力してログインすることで、プレーヤは、ネットワークゲームのプレイや、ゲーム用サイトでのサービスや、アイテム等のオンライショッピングや、プレーヤ間でのメッセージ交換や、フレンドプレーヤの登録などの各種サービスを利用できるようになる。管理部１１２は、このようなプレーヤのアカウント情報の管理処理等も行う。

表示処理部１２０は、表示部１９０に画像を表示するための処理を行う。例えば処理部１００で行われる種々の処理の結果に基づいて描画処理を行い、これにより画像を生成し、表示部１９０に表示する。２次元画像のゲームにおいては、２次元オブジェクトの描画処理が行われて、ゲーム画像が生成される。３次元画像のゲームにおいては、座標変換（ワールド座標変換、カメラ座標変換）、クリッピング処理、透視変換、或いは光源処理等のジオメトリ処理が行われ、その処理結果に基づいて、描画データ（プリミティブ面の頂点の位置座標、テクスチャ座標、色データ、法線ベクトル或いはα値等）が作成される。そして、この描画データ（プリミティブ面データ）に基づいて、透視変換後（ジオメトリ処理後）のオブジェクト（１又は複数プリミティブ面）を、描画バッファ（フレームバッファ、ワークバッファ等のピクセル単位で画像情報を記憶できるバッファ）に描画する。これにより、仮想空間において仮想カメラから見える画像が生成される。

音処理部１３０は、音出力部１９２から音を出力するための処理を行う。例えば、当該音（音楽、演奏音、音声、ゲーム音、効果音）を生成するための音生成用データを生成する。

操作部１６０は、プレーヤ（ユーザ）が、操作情報等の種々の情報を入力するためのものであり、その機能は、操作ボタン、方向指示キー、アナログスティック、レバー、各種センサ（角速度センサ、加速度センサ等）、マイク、或いはタッチパネル型ディスプレイなどにより実現できる。タッチパネル型ディスプレイを用いる場合には、操作部１６０となるタッチパネルと、ディスプレイとなる表示部１９０とが一体に設けられることになる。

記憶部１７０は、処理部１００や通信部１９６などのワーク領域となるもので、その機能は、半導体メモリー、ＨＤＤ、ＳＳＤ、光ディスク装置などにより実現できる。記憶部１７０は、遅延時間情報記憶部１７２、基準タイミング情報記憶部１７４、フィードバック情報記憶部１７６、ユーザ情報記憶部１７８を含む。遅延時間情報記憶部１７２は、フィードバックの出力の遅延時間を表す遅延時間情報を記憶する。例えば測定部１０６の測定結果に基づく遅延時間情報を記憶する。基準タイミング情報記憶部１７４は、音楽ゲームにおけるキータイミングなどである基準タイミングの情報を記憶する。即ち一連の複数の基準タイミングの各タイミングを特定するための情報を記憶する。フィードバック情報記憶部１７６は、プレーヤに対して出力するフィードバックについての情報を記憶する。例えば出力されるフィードバックの内容を特定するための情報がフィードバック情報として記憶される。ユーザ情報記憶部１７８は、ユーザであるプレーヤの個人情報（名前、性別、生年月日、メールアドレス等）をユーザ情報として記憶する。例えば、プレーヤのアカウント情報（ユーザＩＤ）もユーザ情報として記憶される。例えば課金処理の対象となる課金情報は、各プレーヤの各アカウント情報（ユーザＩＤ）に対応づけられる。

情報記憶媒体１８０（コンピュータにより読み取り可能な媒体）は、プログラムやデータなどを格納するものであり、その機能は、光ディスク、ＨＤＤ、半導体メモリーなどにより実現できる。処理部１００は、情報記憶媒体１８０に格納されるプログラム（データ）に基づいて本実施形態の種々の処理を行う。この情報記憶媒体１８０に、本実施形態の各部としてコンピュータ（操作部、処理部、記憶部、出力部を備える装置）を機能させるためのプログラム（各部の処理をコンピュータに実行させるためのプログラム）を記憶できる。

表示部１９０は、本実施形態により生成された画像を出力するものであり、その機能は、ＬＣＤ、有機ＥＬディスプレイ、ＣＲＴ、或いはＨＭＤなどにより実現できる。音出力部１９２は、本実施形態により生成された音を出力するものであり、その機能は、スピーカー、或いはヘッドホンなどにより実現できる。

Ｉ／Ｆ（インターフェース）部１９４は、携帯型情報記憶媒体１９５とのインターフェース処理を行うものであり、その機能はＩ／Ｆ処理用のＡＳＩＣなどにより実現できる。携帯型情報記憶媒体１９５は、プレーヤが各種の情報を保存するためのものであり、電源が非供給になった場合にもこれらの情報の記憶を保持する記憶装置である。携帯型情報記憶媒体１９５は、ＩＣカード（メモリーカード）、ＵＳＢメモリー、或いは磁気カードなどにより実現できる。

通信部１９６（通信インターフェース）は、外部装置との間で通信を行うものであり、その機能は、通信用ＡＳＩＣ又は通信用プロセッサなどのハードウェアや、通信用ファームウェアにより実現できる。

なお本実施形態の各部としてコンピュータを機能させるためのプログラム（データ）は、サーバシステム（ホスト装置）が有する情報記憶媒体からネットワーク及び通信部１９６を介して情報記憶媒体１８０（あるいは記憶部１７０）に配信してもよい。このようなサーバシステムによる情報記憶媒体の使用も本実施形態の範囲内に含めることができる。

そして図２に示すように本実施形態のゲームシステムは、判定部１０２とフィードバック処理部１０４と測定部１０６を含む。

判定部１０２は、プレーヤの入力操作について判定処理を行う。例えばプレーヤが操作部１６０を用いて入力操作を行うと、判定部１０２は、プレーヤの入力操作の入力タイミングに基づく判定処理を行う。即ち操作部１６０を用いた入力操作の入力タイミングがどのようなタイミングで行われたかについての判定処理を行う。例えば判定部１０２は、基準タイミングとプレーヤの入力操作の入力タイミングとを比較する判定処理を行う。例えば操作部１６０を用いたプレーヤの入力操作は、所与のサンプリングタイミング毎にモニターされており、判定部１０２は、これらのサンプリングタイミングでモニターされた入力操作に基づいて判定処理を行う。このサンプリングタイミングは、画像更新を行うフレームのタイミングよりも時間間隔が短いタイミングになる。

フィードバック処理部１０４は、入力操作に対して行われるフィードバックについての処理を行う。具体的にはフィードバック処理部１０４は、入力操作に対するフィードバックをプレーヤに対して出力する処理を行う。即ち入力操作に対するフィードバックとして、音又は振動によるフィードバックをプレーヤに対して出力する処理を行う。フィードバックは、プレーヤが入力操作を行った場合に、その入力操作が行われたことをプレーヤに感じさせるための出力であり、例えば入力操作に対して音を出力するフィードバック音である。或いはフィードバックは、音によるフィードバックに限らず、振動によるフィードバックであってもよい。即ち本実施形態におけるフィードバックは、音又は振動によるフィードバックであり、プレーヤが入力操作を行った場合に、その入力操作が行われたことを聴覚又は触覚によりプレーヤに感じさせるための出力である。またゲームシステムがサーバシステムにより実現される場合には、フィードバックを出力する処理は、フィードバックをプレーヤに出力することを端末装置に対して指示する処理により実現される。一方、ゲームシステムが端末装置により実現される場合には、フィードバックを出力する処理は、フィードバック音又はフィードバック振動を端末装置がプレーヤに出力することで実現される。

測定部１０６は、フィードバックについての遅延時間情報の測定処理を行う。具体的には測定部１０６は、入力操作に対応してプレーヤに出力されるフィードバックの遅延時間（遅延量）を特定するための遅延時間情報（遅延量情報）を測定する処理を行う。例えばプレーヤに対するフィードバックは、入力操作のタイミングから遅れたタイミングで出力されるが、遅延時間情報は、このフィードバックの出力タイミングの遅れ度合いを表す情報である。遅延時間情報は、入力操作の入力タイミングからのフィードバックが出力されるまでの遅延時間そのものである必要はなく、この遅延時間を特定するものであればよい。例えば端末装置とサーバシステムがネットワークにより通信接続される構成の場合には、ネットワークの通信遅延時間が存在し、入力操作に対して、フィードバックは、このネットワークの通信遅延時間の分だけ遅延する。この場合には、フィードバックの遅延時間情報は、このネットワークの通信遅延時間を表す情報であってもよい。またキータイミングである基準タイミングに対して、プレーヤの技量に応じて、プレーヤの入力操作の入力タイミングは遅れてしまう。フィードバックの遅延時間情報は、このような入力タイミングの遅れについての情報も含む。この場合にはフィードバックの遅延時間情報は、プレーヤの入力タイミングの受け付けタイミングの遅延時間を表す情報であってもよい。測定部１０６は、このような遅延時間情報についての測定処理を行う。

そしてフィードバック処理部１０４は、遅延時間情報に基づいて、フィードバックの加工処理を行う。そして加工処理が行われたフィードバックをプレーヤに対して出力する処理を行う。例えばフィードバック処理部１０４は、遅延時間情報により表される遅延時間に応じて、フィードバック音又はフィードバック振動などが変化する加工処理を行う。例えばフィードバック処理部１０４は、フィードバック音又はフィードバック振動の信号であるフィードバック信号に対する加工処理を行う。例えばフィードバック処理部１０４は、遅延時間情報により表される遅延時間に応じて、フィードバック信号の信号波形を変化させる加工処理を行う。例えば遅延時間が大きいほど、フィードバックがプレーヤの聴覚又は触覚に与える程度が小さくなるような加工処理を行う。即ち、遅延時間が大きいほど、フィードバックをプレーヤが感じにくくなるようにフィードバックの加工処理を行う。なおフィードバックの加工処理は、サーバシステムであるゲームシステムが、フィードバックを加工することを端末装置に指示する処理であってもよい。この場合には端末装置は、ゲームシステムの指示に従ってフィードバックを加工する。同様に、フィードバックの出力処理は、ゲームシステムが、フィードバックを出力することを端末装置に指示する処理であってもよい。この場合には端末装置は、ゲームシステムの指示に従ってフィードバックをプレーヤに出力する。

また測定部１０６は、所与の測定タイミング毎に遅延時間情報を測定する。例えば測定部１０６は、現在のタイミングが測定タイミングか否かを判断し、測定タイミングであると判断された場合に遅延時間情報を測定する。別の言い方をすれば測定部１０６は、所与の単位時間毎に遅延時間情報を測定する。例えば端末装置とサーバシステムがネットワークにより通信接続される構成の場合には、ネットワークの通信遅延時間を遅延時間情報として、所与の測定タイミング毎に測定する。そしてフィードバック処理部１０４は、測定タイミングで測定された遅延時間情報に基づいて、フィードバックに対して加工処理を行う。例えば測定された遅延時間情報に基づいてフィードバックに対して動的に加工処理を行う。遅延時間情報に基づいて動的に加工処理を行うとは、遅延時間情報により表される遅延時間に応じて、その加工内容が変化するように加工処理を行うことである。例えばフィードバック処理部１０４は、測定タイミング毎に変化する遅延時間情報に応じて、加工処理の内容を変化させる。

またフィードバック処理部１０４は、端末装置においてプレーヤが行った入力操作に対するフィードバックに対して加工処理を行う。そして加工処理が行われたフィードバックを端末装置に対して出力する処理を行う。即ちこの場合には、サーバシステムであるゲームシステムは、ネットワークを介して端末装置に通信接続される。そして端末装置においてプレーヤが入力操作を行うと、その入力操作が、ネットワークを介してゲームシステムにより受け付けられる。ゲームシステムのフィードバック処理部１０４は、受け付けた入力操作に対するフィードバックに対して加工処理を行い、加工処理が行われたフィードバックを行うことをネットワークを介して端末装置に指示する。そして端末装置が、指示された加工処理後のフィードバックをプレーヤに対して出力する。

また測定部１０６は、端末装置とゲームシステムとを通信接続するネットワークの通信遅延時間を、遅延時間情報として測定する。例えば測定部１０６は、所与の測定タイミング毎にネットワークの通信遅延時間を測定する。この場合に、ネットワークの通信遅延時間は、測定タイミング毎に測定される通信遅延時間であってもよいし、複数の測定タイミングで測定された通信遅延時間の平均値などの統計値であってもよい。また例えばｐｉｎｇなどにより端末装置が通信遅延時間を求め、求められた通信遅延時間を、サーバシステムであるゲームシステムが端末装置から取得することで、ネットワークの通信遅延時間を測定してもよい。

またフィードバック処理部１０４は、遅延時間情報に基づいて、フィードバックであるフィードバック音の音量を変更する処理を、加工処理として行う。例えばフィードバック処理部１０４は、遅延時間情報により表される遅延時間が大きいほど、フィードバック音をプレーヤが聴覚により感じにくくなるように、フィードバック音の音量を変更する処理を行う。例えばフィードバック音の音量を表す信号を遅延時間情報に基づいて変更する加工処理を行う。

例えばフィードバック処理部１０４は、遅延時間情報に基づいて、フィードバック音の音量エンベロープを変更する処理を、加工処理として行う。例えばフィードバック音の音量を表す信号の波形のエンベロープを変更する加工処理を行う。例えばフィードバック処理部１０４は、遅延時間情報により表される遅延時間が大きいほど、音量エンベロープの立ち上がりの傾斜を緩やかにする加工処理を行う。音量エンベロープは、フィードバック音の音量を表す信号の波形のエンベロープである。

なお遅延時間情報に基づくフィードバック音の加工処理は、このような処理には限定されず、例えばフィードバック音の周波数成分の加工処理により実現してもよい。例えば遅延時間情報により表される遅延時間が大きいほど、フィードバック音の高周波成分を低減するような加工処理を行ってもよい。

またフィードバック処理部１０４は、フィードバックの種別に応じて、加工処理の内容を異ならせる。例えばフィードバックが、フィードバック音なのか、フィードバック振動なのかに応じて、加工処理の内容を異ならせる。例えば入力操作に対するフィードバックが、フィードバック音である場合と、フィードバック振動である場合とで、加工処理の内容を異ならせる。例えばフィードバック振動も、振動を発生させる音信号を用いて実現できるが、例えばフィードバック音における音信号の加工処理の内容と、フィードバック振動における音信号の加工処理の内容を異ならせる。例えば遅延時間に応じて音信号を変更する際の音信号の変更内容を異ならせる。

また判定部１０２は、基準タイミングと入力タイミングとの比較を行うことで入力操作の評価処理を行う。例えば基準タイミングと入力タイミングの時間差が少ないほど、高い評価となる入力操作の評価処理を行う。例えば基準タイミングを含む第１の範囲内に入力タイミングがある場合には、入力操作の評価結果は第１の評価であると判断する。そして基準タイミングを含む第１の範囲よりも狭い第２の範囲内に入力タイミングがある場合には、入力操作の評価結果は、第１の評価結果よりも良い第２の評価であると判断する。そしてフィードバック処理部１０４は、フィードバックと評価処理の結果を、プレーヤに出力する処理を行う。例えばフィードバック音等のフィードバックをプレーヤに出力すると共に、評価処理の結果を画像や音によりプレーヤに出力する。この場合に遅延時間情報は、基準タイミングに対する入力タイミングの遅延時間の情報を含むことになる。即ち基準タイミングに対してプレーヤの入力タイミングが遅れると、フィードバックの遅延時間情報で表される遅延時間も大きくなる。そしてフィードバック処理部１０４は、このように基準タイミングに対する入力タイミングの遅れにより発生するフィードバックの遅延時間に応じて、フィードバックの加工処理を行う。

またフィードバック処理部１０４は、評価処理の結果に応じた加工処理を行う。例えばプレーヤの入力操作の評価結果が第１の評価である場合と第２の評価である場合とで、フィードバックの加工処理の内容を異ならせる。例えば第１の評価の方が第２の評価よりも悪い評価結果であるとすると、第１の評価の場合には、第２の評価の場合に比べて、基準タイミングに対する入力タイミングの遅延時間が大きくなり、フィードバックの遅延時間も大きくなる。従って、第１の評価の場合には、第２の評価の場合に比べて、加工処理の加工度合いを強くする。例えば第１の評価の場合には、第２の評価の場合に比べて、フィードバックがプレーヤの聴覚又は触覚に与える程度が小さくなるような加工処理を行う。

またフィードバック処理部１０４は、遅延時間情報により表される遅延時間が所与のしきい値を超えた場合には、フィードバックをプレーヤに出力せずに、評価処理の結果だけをプレーヤに出力する処理を行う。例えばフィードバック処理部１０４は、フィードバックの遅延時間がしきい値以下の場合には、フィードバック及び評価処理の結果の両方をプレーヤに出力するが、遅延時間がしきい値を越えた場合には、フィードバックについては出力せずに、入力操作の評価結果をプレーヤに出力する。即ちフィードバックの遅延時間がしきい値を越えた場合には、フィードバックの出力をオフにする。

またフィードバック処理部１０４は、遅延時間情報により表される遅延時間が所与の時間を越えた場合には、その後に遅延時間が所与の時間を下回った場合にも、遅延時間が所与の時間を超えたときの加工処理を継続して行う。即ち、フィードバックの遅延時間が、一旦、所与の時間を越えてフィードバックの加工処理を行った場合には、その後に遅延時間が所与の時間を下回った場合にも、そのときの当該加工処理を継続して行い、加工処理の内容が遅延時間に応じて変化しないようにする。例えば遅延時間が所与の時間を越えた後、所与の継続期間の間、遅延時間が所与の時間を越えたときの加工処理を継続してフィードバックに対して行うようにする。例えばフィードバックの加工処理に対して移動平均的な処理を行う。

またフィードバック処理部１０４は、ゲーム状況が所与の状況の場合に、遅延時間情報に基づく加工処理が行われたフィードバックに代えて、所与の状況用のフィードバックをプレーヤに出力する処理を行う。例えばフィードバック処理部１０４は、ゲーム状況が所与の状況（特定状況）になったか否かを判断し、所与の状況になった場合には、その所与の状況用に自動補正されたフィードバックをプレーヤに出力するようにする。例えばゲーム状況が所与の状況以外の場合には、遅延時間情報に基づく加工処理が行われたフィードバックを出力するが、ゲーム状況が所与の状況の場合には、所与の状況用のフィードバックを出力する。所与の状況用のフィードバックは、ゲーム状況が所与の状況になったときにプレーヤに出力されるフィードバックとして、遅延時間情報に基づくフィードバックとは別個に用意されるものである。例えば所与の状況用のフィードバックは、遅延時間情報に基づく通常のフィードバックとは違って、所与の状況に対応して例えば自動補正や自動生成されたフィードバックとなる。

またフィードバック処理部１０４は、フィードバックであるフィードバック音と共にプレーヤに出力される音楽の音量を、遅延時間情報に基づいて制御する。具体的には遅延時間情報に基づいて、音楽の音量の大小を制御する。例えば遅延時間情報により表される遅延時間が大きいほど、フィードバック音と共に出力される音楽の音量を大きくする。例えば遅延時間が大きい場合に、フィードバック音が目立たなくなるように、音楽の音量を制御する。音楽は、音楽ゲームにおいてプレーヤに出力されるものであり、楽曲とも呼ばれる。この場合のフィードバック音は、例えば音楽ゲームにおける演奏音などである。

またフィードバック処理部１０４は、プレーヤ以外の他のプレーヤの情報に基づいて、フィードバックの加工処理を行う。例えばゲームに参加する複数のプレーヤについてのフィードバックの遅延時間情報や基準タイミングに対するズレの情報などを、データベースに蓄積する。そしてデータベースの蓄積情報をビッグデータとして、プレーヤに対して出力されるフィードバックの加工処理を行う。例えば遅延時間情報により表される各遅延時間に対してどのような加工処理を行うかを、データベースの蓄積情報に基づいて決定する。例えばプレーヤが初めてゲームを行う場合の加工処理の設定の初期値を、データベースの蓄積情報に基づいて決定する。或いは複数のプレーヤがゲームをプレイしているときに、プレーヤの加工処理の内容を、他のプレーヤの情報に基づいて変化させるようにしてもよい。

またフィードバック処理部１０４は、プレーヤによるオプション選択により、フィードバックの加工処理のオン又はオフを行う。例えば表示処理部１２０が、プレーヤの端末装置の表示部１９０にオプション画面を表示する処理を行う。そして、このオプション画面において、プレーヤが加工処理をオンにすることを選択した場合には、フィードバック処理部１０４は、遅延時間情報に基づく加工処理を行って、加工処理が行われたフィードバックをプレーヤに出力する処理を行う。一方、オプション画面において、プレーヤが加工処理をオフにすることを選択した場合には、フィードバック処理部１０４は、遅延時間情報に基づく加工処理を行わないようにする。即ちプレーヤの入力操作に対して、遅延時間情報に基づく加工処理が行われていないフィードバックをプレーヤに出力する。

またフィードバック処理部１０４は、フィードバックであるフィードバック音として、音楽ゲームにおけるプレーヤの演奏音をプレーヤに出力する処理を行う。例えばこの音楽ゲームでは、楽曲である音楽がプレーヤに出力されると共に、プレーヤは楽器等の演奏の入力操作を行う。すると、演奏の入力操作に対応するフィードバック音である演奏音が、プレーヤに出力される。この場合に例えば判定部１０２は、音楽における基準タイミングと、プレーヤの演奏の入力操作の入力タイミングとの比較を行って、プレーヤの演奏についての評価処理を行う。そして演奏の評価結果をプレーヤに対して出力するようにする。なお演奏音は、楽器の演奏音には限定されず、例えばプレーヤが歌を唄う演奏を行う場合には、演奏音は歌声であってもよい。或いは、演奏音はラップなどのコール＆レスポンスにおける掛け声などであってもよい。また演奏音は、楽器以外の物体（例えば机、床、椅子又は鐘等）を叩いたり動かしたりすることで出力される演奏音であってもよい。

なお、以上に説明した図２の本実施形態のゲームシステムや処理は、図１（Ａ）のサーバシステム５００により実現したり、端末装置ＴＭにより実現したり、サーバシステム５００と端末装置ＴＭの分散処理により実現するなどの種々の変形実施が可能である。また本実施形態のプログラムとしては、パーソナルコンピュータ用のゲームプログラム、スマートフォンのアプリケーションプログラム、家庭用ゲーム装置のゲームプログラム、スマートフォンやパーソナルコンピュータ用のブラウザゲームプログラム、或いは業務用ゲーム装置のプログラムなどの種々のプログラムに適用できる。

２．本実施形態の手法
次に本実施形態の手法について詳細に説明する。なお以下では本実施形態の処理が、ゲームシステムであるサーバシステムで実現される場合を主に例にとり説明するが、本実施形態の処理は、スタンドアロンの端末装置により実現してもよい。また以下では、本実施形態が適用されるゲームが音楽ゲームである場合を主に例にとり説明するが、本実施形態は音楽ゲーム以外の種々のゲーム（ＲＰＧ、アクションゲーム、格闘ゲーム、シューティングゲーム、競争ゲーム又はパズルゲーム等）に適用できる。

２．１遅延時間情報に基づくフィードバックの加工処理
図３は本実施形態の手法の説明図である。図３ではプレーヤが端末装置１０において入力操作を行う。すると、この入力操作の情報がネットワーク５１０を介して、サーバシステムであるゲームシステムに伝達され、ゲームシステムにより受け付けられる。そしてゲームシステムの判定部１０２は、プレーヤの入力操作の入力タイミングに基づく判定処理を行う。音楽ゲーム（リズムゲーム）を例にとれば、基準タイミングと入力タイミングを比較する判定処理を行う。また測定部１０６は、入力操作に対応してプレーヤに出力されるフィードバックの遅延時間を特定するための遅延時間情報を測定する。フィードバックの遅延時間は、端末装置１０で入力操作が行われてから、この入力操作がゲームシステムに受け付けられるまでの遅延時間を含む。具体的にはフィードバックの遅延時間は、ネットワーク５１０の通信遅延時間を含む。またフィードバックの遅延時間は、例えば基準タイミングに対してプレーヤの入力操作の入力タイミングが遅れることによる遅延時間を含むことができる。またフィードバックの遅延時間は、入力操作に対応するフィードバックの内容を決定したり、フィードバックを生成する処理での遅延時間を含むことができる。そしてフィードバック処理部１０４は、入力操作に対するフィードバックをプレーヤに対して出力する処理を行う。即ち、入力操作に対するフィードバックとして、音又は振動によるフィードバックをプレーヤに対して出力する処理を行う。具体的にはフィードバック処理部１０４は、遅延時間情報に基づいて、フィードバックの加工処理を行い、加工処理が行われたフィードバックをプレーヤに対して出力する処理を行う。例えばフィードバックの遅延時間が長いほど、音又は振動によるフィードバックがプレーヤの聴覚又は触覚に与える程度が小さくなって、プレーヤが感じにくくなるような加工処理を行う。図３ではフィードバック処理部１０４は、フィードバックの加工処理を行うことでフィードバックの内容を決定し、当該フィードバックをプレーヤに対して出力することをネットワーク５１０を介して端末装置１０に指示する。これにより端末装置１０は、例えばフィードバック音又はフィードバック振動などのフィードバックを、プレーヤに対して出力する。例えば端末装置１０は、音出力部を用いてフィードバック音を出力する。或いはゲームコントローラなどの操作部に設けられる振動機構を用いてフィードバック振動を出力する。この場合に、音出力部は、スピーカーであってもよいし、プレーヤが頭に装着するヘッドホンであってもよい。スピーカーは、スマートフォンなどの携帯型情報端末や携帯型ゲーム装置やテレビに設けられるスピーカーであってもよいし、ゲームの筐体に配置されるスピーカーなどであってもよい。また振動機構が設けられるゲームコントローラは、家庭用ゲーム装置に用いられる汎用のゲームコントローラであってもよいし、例えば銃型や剣型などの特定の形状を模したゲームコントローラであってもよい。或いは、振動機構が設けられるゲームコントローラは、車ゲームにおけるステアリングなどであってもよい。或いは、フィードバック振動を出力する振動機構は、プレーヤが搭乗する筐体に設けられるものであってもよい。例えばプレーヤが椅子に座ってプレイする場合には、筐体の椅子に設けられる振動機構を用いてフィードバック振動を出力すればよい。またプレーヤが床に立ってプレイする場合には、筐体の床に設けられる振動機構を用いてフィードバック振動を出力すればよい。

図４（Ａ）、図４（Ｂ）は入力操作に対応して出力されるフィードバックの一例についての説明図であり、太鼓の演奏を行う音楽ゲームの例である。図４（Ａ）は和太鼓を模した太鼓型ゲームコントローラ２０の例であり、図４（Ｂ）は端末装置１０の表示部に表示されるゲーム画面の例である。プレーヤは、太鼓のバチを模した棒状部材３０、３２を用いて、太鼓型ゲームコントローラ２０の太鼓本体２２の打面であるパッド部２４を叩く入力操作を行ったり、リング状のリム部２６を叩く入力操作を行う。図４（Ｂ）に示すゲーム画面では、譜面表示エリア４０に判定ライン４２が固定表示され、譜面表示エリア４０の右端から発生した複数の音符マーク４４、４５、４６、４７が判定ライン４２の方向に向かって所定速度で移動する。これらの音符マーク４４、４５、４６、４７が判定ライン４２を通過するタイミングが基準タイミングであり、プレーヤは、音符マーク４４、４５、４６、４７が判定ライン４２を通過するタイミングである基準タイミングにおいて、入力操作を行う。具体的には、「ドン」に対応する音符マーク４４、４５が判定ライン４２を通過する基準タイミングで、棒状部材３０、３２により太鼓本体２２のパッド部２４を叩く入力操作を行う。また「カツ」に対応する音符マーク４６、４７が判定ライン４２を通過する基準タイミングで、棒状部材３０、３２により太鼓本体２２のリム部２６を叩く入力操作を行う。基準タイミングと入力タイミングのズレが少ないほど、プレーヤの入力操作に対して高い評価が与えられ、プレーヤに対して高い得点が与えられる。

そして図４（Ａ）、図４（Ｂ）の音楽ゲームでは、プレーヤの入力操作に対してフィードバック音が出力される。例えばプレーヤが棒状部材３０、３２により太鼓本体２２のパッド部２４やリム部２６を叩く入力操作を行うと、これらの入力操作に対応して例えば「ドン」、「カツ」などのフィードバック音が出力される。この場合に図３のネットワーク５１０の通信遅延時間やプレーヤの入力操作の遅れなどが原因となって、フィードバック音の出力に遅延が発生する。そしてこのフィードバック音の出力の遅延時間が大きいと、プレーヤが違和感を感じてしまうという課題がある。

即ち、ネットワーク、ハードウェア又はソフトウェアなどの様々な環境要因に起因する遅延が発生したり、プレーヤの操作スキルが低く、プレーヤの入力タイミングがズレているときに、基準タイミングであるキータイミングに対するフィードバックの出力タイミングに大きなズレが発生する。フィードバックの遅延時間が大きく、キータイミングとフィードバックの出力タイミングのズレが大きいと、プレーヤが違和感により不快に感じてしまうため、ズレが大きいときにもプレーヤがゲームを楽しめるようにすることが望ましい。一方、基準タイミングとフィードバックの出力タイミングのズレが少ないときのシンクロ感は、プレーヤにとって気持ち良いので、このような場合には、何もせずにそのままにしておくことが望ましい。

そこで、例えば映像等による視覚によるズレの認知と、音のズレの認知を分けて考える。例えばキータイミングとフィードバックの出力タイミングのズレが大きいときには、フィードバックのアタック度合いを弱める加工処理を行うことで、非シンクロ感に起因するプレーヤの違和感を低減できる。具体的には、キータイミングとフィードバックの出力タイミングのズレの大きさによって、フィードバックのアタックの弱め度合いを変化させる加工処理を行うようにする。

図５は本実施形態の手法を説明するフローチャートである。まずゲームシステムは、プレーヤの入力操作の入力タイミングを取得する（ステップＳ１）。例えば画像更新が行われる１フレームの時間間隔よりも短い時間間隔で入力タイミングが取得される。１フレームは例えば１／６０秒等であり、この１フレームの期間内において複数回の入力タイミングが取得される。そして入力操作の入力タイミングに基づく判定処理を実行する（ステップＳ２）。一例としては図４（Ｂ）においてキータイミングである基準タイミングと入力タイミングを比較する判定処理が行われる。

次にゲームシステムは、入力操作に対応してプレーヤに出力されるフィードバックの遅延時間情報を取得する（ステップＳ３）。例えば測定部１０６により測定された遅延時間情報を取得する。そして遅延時間情報に基づいてフィードバック処理の加工処理を実行する（ステップＳ４）。具体的には後述の図７で説明するような加工処理を実行する。そして加工処理が行われたフィードバックをプレーヤに対して出力する処理を実行する（ステップＳ５）。図４（Ａ）、図４（Ｂ）を例にとれば、プレーヤが太鼓型ゲームコントローラを用いて行った入力操作に対応するフィードバックとして、遅延時間情報に基づく加工処理が行われたフィードバック音を出力する。

図６は、遅延時間情報を測定して加工処理を行う手法を説明するフローチャートである。まずゲームシステムは、遅延情報の測定タイミングか否かを判断する（ステップＳ１１）。例えば所与の時間単位毎に遅延量情報である遅延時間情報を測定する場合には、測定タイミングは時間単位毎のタイミングになる。そして現在のタイミングが測定タイミングである場合には、例えばネットワークの通信遅延時間等のフィードバックの遅延時間情報を測定する（ステップＳ１２）。例えばネットワークの通信遅延時間は端末装置がｐｉｎｇを送信することで測定することができ、ゲームシステムは端末装置での測定結果を取得することでフィードバックの遅延時間情報を測定する。そして測定された遅延時間情報を記憶部に記憶する。例えば図１の遅延時間情報記憶部１７２に記憶する（ステップＳ１３）。

次にゲームシステムはプレーヤの入力操作が行われたかを判断する（ステップＳ１４）。そして入力操作が行われた場合には、測定された遅延時間情報に基づいて、入力操作に対応するフィードバックの加工処理を実行し、加工処理が行われたフィードバックをプレーヤに対して出力する処理を実行する（ステップＳ１５）。例えばフィードバックを出力することを端末装置に対して指示する処理を行う。

このように図６では、所与の測定タイミング毎に遅延時間情報を測定し、測定タイミングで測定された遅延時間情報に基づいて、フィードバックに対して動的に加工処理を行っている。このようにすれば、ネットワーク、ハードウェア又はソフトウェアなどの環境による要因により遅延時間情報により表される遅延時間が変動した場合にも、この変動する遅延時間情報を測定して、フィードバックに対して行われる加工処理の内容を動的に変化させることが可能になる。従って、種々の環境に応じた適切な加工処理をフィードバックに対して行ってプレーヤに出力できるようになる。

図７はフィードバックの加工処理の一例を示す図である。ＴＲ１～ＴＲ７はキータイミングである基準タイミングである。この基準タイミングＴＲ１～ＴＲ７に入力タイミングが一致するようにプレーヤは入力操作を行い、この入力操作に対応するフィードバックがプレーヤに対して出力される。

そして図７のＡ２、Ａ３では、Ａ１に比べてフィードバックの出力が遅延しており、この遅延時間に応じた加工処理がフィードバックに対して行われている。例えばフィードバックがフィードバック音である場合には、図７の縦軸方向が音量に対応し、横軸方向が時間に対応する。そして図７では、遅延時間情報により表される遅延時間に応じて、フィードバック音の音量を変更する処理が、加工処理として行われている。例えば図７のＡ２、Ａ３では遅延時間の大きさが異なっており、フィードバック音の音量を変更する加工処理の内容が異なっている。このように遅延時間情報に基づいてフィードバック音の音量を制御することで、遅延時間情報により表される遅延時間に応じて、フィードバック音の音量が変化するようになる。従って、例えば遅延時間が大きい場合には、フィードバック音がプレーヤの聴覚に感じにくくなるような音量制御が可能になり、フィードバック音の出力タイミングの遅延により発生する違和感を軽減することが可能になる。

具体的には図７では、遅延時間情報に基づいて、フィードバック音の音量エンベロープを変更する処理を、加工処理として行っている。例えば図７のＡ１では基準タイミングＴＲ１に対するフィードバック音の遅延が殆ど無いため、立ち上がりタイミングにおいて直ぐに最大音量になるような音量エンベロープのフィードバック音になっている。

一方、図７のＡ２では、基準タイミングＴＲ２に対してフィードバック音が所与の遅延時間だけ遅れている。このため、立ち上がりタイミングにおいて、Ａ１に比べて緩やかな傾斜で立ち上がるような音量エンベロープのフィードバック音になっている。即ち立ち上がりタイミングにおいて音量が徐々に上昇する音量エンベロープのフィードバック音になっている。またＡ３では、フィードバック音の遅延時間がＡ２での遅延時間よりも大きい。このためＡ３では、立ち上がりタイミングにおいて、Ａ２に比べて更に緩やかな傾斜で立ち上がるような音量エンベロープのフィードバック音になっている。なおＡ４に示すように例えばプレーヤが基準タイミングよりも早いタイミングで入力操作を行った場合にもフィードバックの加工処理を行うようにしてもよい。

このように図７では、フィードバック音の遅延時間に応じて、フィードバック音の音量エンベロープが変更される加工処理が行われている。具体的には遅延時間が大きいほど、音量エンベロープの立ち上がりの傾斜が緩やかになるような加工処理が行われている。このようにすれば、フィードバック音の出力の遅延時間が大きい場合には、フィードバック音のアタック度合いが弱まる加工処理が行われるため、フィードバック音の出力のズレによる違和感を、プレーヤが感じにくくなるようにすることができる。一方、フィードバック音の遅延時間が小さい場合には、入力操作に対して通常のアタック度合いのフィードバック音が出力されるようになる。従って、プレーヤが気持ち良いと感じるシンクロ感でフィードバック音を出力できるようになり、音楽ゲームのプレイの気持ち良さや爽快感を維持できるようになる。

なおフィードバックの遅延時間情報に基づく加工処理は、図７で説明したようなフィードバック音の音量を変更する加工処理には限定されない。例えば遅延時間情報に基づいて、フィードバック音の音色又は音程を変更したり、フィードバック音の所定の周波数成分（例えば高周波数成分）の変更処理を行ったり、フィードバック音の波形信号のピークを変更する加工処理を行ってもよい。例えば遅延時間が大きいほど、プレーヤの聴覚に感じにくくなるような音色、音程、周波数成分又はピークを有するフィードバック音に加工する処理を行う。またフィードバックがフィードバック振動である場合には、遅延時間が大きいほど、フィードバック振動の振幅や周波数が小さくなるような加工処理を行えばよい。

以上のように本実施形態では、入力操作に対応してプレーヤに出力されるフィードバックの遅延時間情報が測定され、測定された遅延時間情報に基づいて、フィードバックの加工処理が行われ、加工処理後のフィードバックがプレーヤに出力される。このようにすれば、フィードバックの遅延時間情報により表される遅延時間に応じた加工処理がフィードバックに対して行われて、プレーヤに出力されるようになる。例えば遅延時間が小さい場合にはフィードバックに対して第１の加工処理が行われ、遅延時間が大きい場合にはフィードバックに対して、第１の加工処理とは異なる第２の加工処理が行われるというように、遅延時間に応じて動的に変化する加工処理が行われるようになる。このように遅延時間に応じて動的に変化する加工処理をフィードバックに対して行ってプレーヤに出力することで、フィードバックの出力タイミングの遅延により発生する違和感を軽減できるゲームシステム等の提供が可能になる。

例えばフィードバックの遅延時間が、画像の更新フレームである１フレーム（１／６０秒）よりも十分に小さければ、フィードバックに対して加工処理を行わなかったり、加工処理の加工度合いが弱くても、プレーヤは殆ど違和感を感じない。そこで本実施形態では、遅延時間が小さい場合には、加工処理を行わないようにしたり、加工度合いが弱い加工処理を行うようにする。このようにすることで、入力操作に対して通常のフィードバックが直ぐに出力されるようになるため、プレーヤが気持ち良いと感じるシンクロ感でフィードバックを出力することが可能になる。

一方、フィードバックの遅延時間が、例えば１フレームよりも大きくなったり、或いは数フレーム以上の遅延時間になった場合には、基準タイミングや入力タイミングに対するフィードバックの出力のズレにプレーヤが違和感を感じてしまう。この場合に本実施形態では、遅延時間が大きい場合には、遅延時間が小さい場合に比べて加工度合いが強い加工処理をフィードバックに対して行う。例えばプレーヤが聴覚又は触覚により感じにくくなるように加工されたフィードバックを出力する。このようにすることで、フィードバックの出力のズレをプレーヤが感じにくくなり、フィードバックの出力のズレに起因する違和感を効果的に低減できるようになる。

例えば本実施形態の比較例の手法として、遅延時間を考慮せずに、フィードバックに対して画一的なフェードイン処理を行う手法が考えられる。しかしながら、この比較例の手法では、遅延時間が小さい場合も、大きい場合も、画一的に同一のフェードイン処理が行われてしまう。従って、フィードバックの遅延時間が小さく、基準タイミングとフィードバックの出力タイミングがほぼ一致している場合にも、フィードバックに対して画一的なフェードイン処理が行われてしまうため、プレーヤが感じるシンクロ感を損ねてしまう問題が発生する。またフィードバックの遅延時間が大きく、フィードバックの出力のズレが大きい場合には、画一的なフェードイン処理では、プレーヤの違和感を十分に軽減できなくなる問題も生じる。

この点、本実施形態によれば、遅延時間に応じて動的に変化する加工処理がフィードバックに対して行われる。従って、例えば遅延時間が小さい場合には加工度合いを弱くし、遅延時間が大きい場合には加工度合いを強くするというような加工処理が可能になり、上記の比較例の手法で発生した問題を解決することが可能になる。

また図３に示すように本実施形態のゲームシステムは、端末装置１０においてプレーヤが行った入力操作に対するフィードバックに対して加工処理を行い、加工処理が行われたフィードバックを端末装置１０に対して出力する処理を行う。即ちサーバシステムであるゲームシステムはネットワーク５１０を介して端末装置１０と通信接続されており、端末装置１０でのプレーヤの入力操作の情報はネットワーク５１０を介して伝達されてゲームシステムが受け付ける。そしてゲームシステムは、受け付けた入力操作に対応するフィードバックを出力することを端末装置１０に指示する。このようにすれば、ネットワーク５１０を介してゲームシステムと端末装置１０が通信接続されるシステムにおいて、ゲームシステムが、端末装置１０でのプレーヤの入力操作を受け付けて、入力操作に対応するフィードバックの加工処理を行い、加工処理後のフィードバックを端末装置１０から出力できるようになる。

また本実施形態では、端末装置１０とゲームシステムとを通信接続するネットワーク５１０の通信遅延時間を、遅延時間情報として測定する。例えば端末装置１０での入力操作の情報は、ネットワーク５１０を介してゲームシステムに伝達される。従って、端末装置１０で入力操作が行われたタイミングから、ネットワーク５１０の通信遅延時間の分だけ遅れたタイミングで、ゲームシステムは当該入力操作を受け付けて、入力操作に対応するフィードバックの出力を端末装置１０に指示することになる。従って、フィードバックの出力タイミングは、少なくともネットワーク５１０の通信遅延時間の分だけ遅れることになる。またゲームシステムによるフィードバックの出力指示のタイミングから、ネットワーク５１０の通信遅延時間の分だけ遅れたタイミングで、端末装置１０はフィードバックを出力することになる。従って、ネットワーク５１０の通信遅延時間を測定することで、フィードバックの出力の遅延時間を特定できるようになる。これにより、遅延時間に応じた加工処理が行われたフィードバックを端末装置１０から出力することが可能になる。

なおネットワーク５１０の通信遅延時間としては、例えば所与の測定タイミング毎に測定された通信遅延時間の平均値等の統計値を用いることができる。そして端末装置１０で入力操作が行われた場合には、その時点での通信遅延時間の統計値を遅延時間情報として、フィードバックの加工処理を行えばよい。またネットワーク５１０の通信遅延時間は例えば公知のｐｉｎｇを用いる手法などにより測定できる。またサーバシステムであるゲームシステムは、端末装置１０に対してフィードバックの出力を指示するのみならず、出力されるフィードバックの内容を端末装置１０に送信してもよい。例えばフィードバックに対してどのような加工処理を行うかをゲームシステムが端末装置１０に指示し、端末装置１０が指示された内容の加工処理を行う。

また本実施形態では、フィードバックであるフィードバック音として、音楽ゲームにおけるプレーヤの演奏音をプレーヤに出力する処理を行っている。例えば図４（Ａ）、図４（Ｂ）のようにプレーヤが太鼓型ゲームコントローラ２０などの演奏用の操作部を操作すると、その入力操作に対応するフィードバック音として、演奏用の操作部による演奏音がプレーヤに出力される。図４（Ａ）、図４（Ｂ）では、例えば「ドン」、「カツ」などの演奏音がフィードバック音として出力される。そして本実施形態では、この演奏音に対して、遅延時間情報に基づく加工処理が行われる。このようにすれば、基準タイミングと入力タイミングが一致している場合には、入力操作に対して殆ど同時に通常の演奏音が出力されるようになり、プレーヤが気持ち良いと感じるシンクロ感で演奏音を出力できるようなる。従って、音楽ゲームのプレイの気持ち良さや爽快感を維持できる。一方、プレーヤの演奏の入力操作が上手く行かず基準タイミングに対して入力タイミングがズレてしまった場合や、ネットワーク、ハードウェア又はソフトウェアの環境に起因する遅延が発生した場合には、演奏音に対して遅延時間に応じた加工処理が行われる。従って、基準タイミングに対する演奏音のズレをプレーヤが聴き取りにくくなり、演奏音がズレることによる違和感を低減することが可能になる。

２．２種々の処理例
次に本実施形態の種々の処理例について説明する。本実施形態では、フィードバックの種別に応じて、フィードバックに対して行われる加工処理の内容を異ならせる。例えばプレーヤに対するフィードバックが、フィードバック音であるか、或いはフィードバック振動であるかに応じて、加工処理の内容を異ならせる。例えばフィードバックの種別に応じて加工処理の強弱を異ならせたり、加工処理において行われる信号処理の内容を異ならせる。

例えば図７ではフィードバック音の音信号に対して音量を変更する加工処理を行っている。一方、フィードバック振動は、例えば低周波数帯域の音信号を振動発生デバイスに入力することで実現できる。例えば振動発生デバイスであるリニア振動モーターに対して、低周波数帯域の音信号を入力することで振動を発生させる。この場合に、フィードバック音を出力させる場合の音信号への加工処理と、フィードバック振動を出力させる場合の音信号への加工処理の内容を異ならせる。図７ではフィードバック音の音信号の音量エンベロープを加工しているが、フィードバック音の場合とフィードバック振動の場合とで、音量エンベロープの加工処理の内容を異ならせる。即ちフィードバックの種別に応じて加工処理の内容を異ならせる。このようにすれば、フィードバックの種別に応じた適切な加工内容で、フィードバックの加工処理を実行できるようになる。

図８は、フィードバックの種別を判断して加工処理を行う手法を説明するフローチャートである。まずゲームシステムは、プレーヤの入力操作が行われたかを判断し、入力操作が行われた場合には、入力操作に対応してプレーヤに出力されるフィードバックの種別を判断する（ステップＳ２１、Ｓ２２）。例えばフィードバックがフィードバック音なのか、フィードバック振動なのかなどを判断する。或いは、フィードバック音が複数種類のフィードバック音に分類されている場合には、どの種別の分類に属するフィードバック音なのかを判断する。そしてフィードバックの種別に応じたフィードバックの加工処理を行い、加工処理が行われたフィードバックをプレーヤに対して出力する処理を実行する（ステップＳ２３、Ｓ２４）。例えば図２のフィードバック情報記憶部１７６には、フィードバックの種別ごとに分類されて、フィードバックの内容を特定するフィードバック情報が記憶されている。そしてフィードバックの種別が判別されると、対応する種別のフィードバック情報がフィードバック情報記憶部１７６から読み出されて、読み出されたフィードバック情報を用いて、加工処理が行われたフィードバックの出力処理が行われることになる。

また本実施形態では、基準タイミングと入力タイミングとの比較を行うことで入力操作の評価処理を行い、フィードバックと評価処理の結果を、プレーヤに出力する処理を行う。この場合にフィードバックの遅延時間情報は、基準タイミングに対する入力タイミングの遅延時間の情報を含むことになる。

例えば図９（Ａ）では基準タイミングＴＲ１、ＴＲ２、ＴＲ３、ＴＲ４と入力タイミングＴＩ１、ＴＩ２、ＴＩ３、ＴＩ４の比較が行われている。図４（Ａ）、図４（Ｂ）を例にとれば、基準タイミングＴＲ１、ＴＲ２、ＴＲ３、ＴＲ４は、音符マーク４４、４５、４６、４７が判定ライン４２を通過するタイミングである。入力タイミングＴＩ１、ＴＩ２、ＴＩ３、ＴＩ４は、太鼓型ゲームコントローラ２０の太鼓本体２２をプレーヤが叩く入力操作を行うタイミングである。そして図９（Ｂ）に示すように、基準タイミングＴＲに対する入力タイミングのズレが少ないほど、プレーヤの入力操作に対して高い評価が与えられる。即ち、ズレが最小限である場合には、「エクセレント」の評価が与えられ、エクセレントの場合よりもズレが大きい場合には「グッド」の評価が与えられる。ズレが非常に大きく、入力操作が失敗であると判断される場合には「バッド」の評価が与えられる。このように本実施形態では、基準タイミングとの入力タイミングの比較を行うことで、プレーヤの入力操作が評価され、評価結果である「エクセレント」、「グッド」又は「バッド」がプレーヤに対して出力（表示）される。そして、このような評価処理が行われる場合に、フィードバックの遅延時間は、基準タイミングに対する入力タイミングの遅延時間の情報を含むことになる。このようにすれば、基準タイミングと入力タイミングを比較してプレーヤの入力操作を評価するシステムにおいて、基準タイミングに対する入力タイミングの遅延に応じた加工処理をフィードバックに対して行うことが可能になる。即ち、プレーヤのゲームプレイのスキルが低い場合には、基準タイミングに対する入力タイミングの遅延時間が大きくなり、この遅延時間が原因でフィードバックの遅延時間も大きくなる。これにより図７のＡ２、Ａ３に示すように、例えば音量エンベロープの立ち上がりを緩やかにするような加工処理が行われる。即ち、フィードバックの出力がプレーヤに感じにくくなるような加工処理が行われる。従って、例えばプレーヤの入力操作の遅れが原因でフィードバックの出力が遅延した場合にも、フィードバックの出力の遅延を原因としてプレーヤが感じる違和感を低減できるようになる。

図１０は、プレーヤの入力操作の評価処理に応じた加工処理を行う手法を説明するフローチャートである。まずゲームシステムは、プレーヤの入力操作が行われたかを判断し、入力操作が行われた場合には、基準タイミングと、プレーヤの入力操作の入力タイミングを比較する（ステップＳ３１、Ｓ３２）。即ち図９（Ａ）で説明したような基準タイミングと入力タイミングの比較処理を行う。そして比較結果に基づくプレーヤの入力操作の評価処理を実行する（ステップＳ３３）。即ち図９（Ｂ）で説明したようなプレーヤの入力操作の評価処理を行う。次に評価処理の結果に応じたフィードバックの加工処理を行って、加工処理が行われたフィードバックをプレーヤに対して出力する処理を実行する（ステップＳ３４、Ｓ３５）。

このように図１０では、プレーヤの入力操作の評価処理の結果に応じたフィードバックの加工処理を行っている。例えば図９（Ｂ）においてプレーヤの入力操作の評価結果が、「エクセレント」、「グッド」又は「バッド」かに応じて、フィードバックの加工処理の内容を異ならせる。例えば入力操作の評価結果が「エクセレント」である場合には、基準タイミングに対する入力タイミングのズレは最小限であり、このためフィードバックの遅延時間も小さいと考えられる。従って、例えば図７のＡ１に示すように加工処理を行わないようにしたり、加工処理の加工度合いを最小限にする。また入力操作の評価結果が「グッド」である場合には、基準タイミングに対する入力タイミングのズレは少なく、このためフィードバックの遅延時間もあまり大きくないと考えられる。従って、加工度合いが最小限の加工処理を行ったり、例えば図７のＡ２に示すように加工度合いが弱い加工処理を行うようにする。また入力操作の評価結果が「バッド」である場合には、基準タイミングに対する入力タイミングのズレが大きく、このためフィードバックの遅延時間も大きいと考えられる。従って、例えば図７のＡ３に示すように、加工度合いが強い加工処理を行うようにする。このようにプレーヤの入力操作の評価処理の結果に応じたフィードバックの加工処理を行うようにすれば、プレーヤの入力操作の評価結果を有効利用して、加工処理の強弱等の加工内容を決定して、決定された加工内容の加工処理をフィードバックに対して行うことが可能になる。従って、プレーヤの入力操作のズレ等を反映させた効果的なフィードバックの加工処理を簡素に実現することが可能になる。

また本実施形態では、遅延時間情報により表される遅延時間が所与のしきい値（しきい値時間）を超えた場合には、フィードバックをプレーヤに出力せずに、評価処理の結果をプレーヤに出力する処理を行う。即ちフィードバックと評価処理の結果のうち、評価処理の結果だけをプレーヤに出力する。

例えば図１１では、基準タイミングＴＲｉに対するフィードバックの出力タイミングＴＦｉの遅延時間であるＴＦｉ－ＴＲｉが、しきい値ＴＴＨを越えている。例えば遅延時間ＴＦｉ－ＴＲｉが非常に大きくなり、例えば複数フレーム以上（例えば２～４フレーム以上）の遅延時間になっている。この場合にはフィードバックの出力をオフにして、入力操作の評価結果のみを出力する。図４（Ａ）、図４（Ｂ）や図７を例にとれば、プレーヤの演奏の入力操作のフィードバックである演奏音の出力をオフにして、「バッド」などの評価結果のみをプレーヤに出力する。即ち、フィードバックの遅延時間がしきい値ＴＴＨを越えるぐらいに大きい場合には、加工度合いが強い加工処理を行ったとしても、フィードバックの出力が大きくズレていることをプレーヤは感じてしまい、プレーヤの違和感が非常に大きくなってしまう。そこで、このような場合には、フィードバックの出力をオフにして、フィードバックが遅れて出力されることによる違和感をプレーヤが感じないようにする。そして、プレーヤの入力操作の評価結果については出力することで、プレーヤは、例えば自身の入力操作の遅れが原因で、入力操作に対応するフィードバックが出力されないことを認識できるようになり、プレーヤが納得できる出力処理の実現が可能になる。また例えばネットワークの通信遅延時間が、加工処理を行ったとしてもごまかしきれないほどの遅延時間になってしまった場合には、潔くフィードバック音などのフィードバック出力をオフすることで、プレーヤが違和感を感じにくくなる。

図１２は、遅延時間がしきい値を越えた場合にフィードバックの出力をオフにして入力操作の評価結果だけを出力する手法を説明するフローチャートである。まずゲームシステムは、プレーヤの入力操作に対応して出力されるフィードバックの遅延時間がしきい値ＴＴＨを越えたか否かを判断する（ステップＳ４１）。例えば図１１において、基準タイミングＴＲｉに対するフィードバックの出力タイミングＴＦｉの遅延時間であるＴＦｉ－ＴＲｉがしきい値ＴＴＨを越えたか否かを判断する。そしてフィードバックの遅延時間がしきい値ＴＴＨを越えていない場合には、フィードバックの加工処理を行い、加工処理が行われたフィードバック及び入力操作の評価結果をプレーヤに対して出力する処理を実行する（ステップＳ４２、Ｓ４３）。即ち、通常通りにフィードバック及び評価結果をプレーヤに対して出力する。一方、フィードバックの遅延時間がしきい値を越えた場合には、フィードバックの出力をオフにして、入力操作の評価結果のみを出力する処理を実行する（ステップＳ４４）。即ち、音楽ゲームを例にとれば、プレーヤが演奏用の操作部を操作することによる演奏音については出力せずに、プレーヤの演奏の入力操作に対する評価結果だけを出力する。

また本実施形態では、遅延時間情報により表される遅延時間（遅延量）が所与の時間（所与の値）を越えた場合には、その後に遅延時間が所与の時間を下回った場合にも、遅延時間が所与の時間を超えたときの加工処理を継続して行う。例えば、一旦、ある程度の遅延時間（遅延量）が測定された場合には、その後に遅延時間が小さくなったときにも、加工処理を維持して行うようにする。そして例えば評価結果が基準内である場合にのみ正常なフィードバックを出力するようにする。例えばプレーヤのプレイ期間内での遅延時間の大小によって、加工処理の加工度合いが頻繁に変わったり、大幅に変わると、プレーヤは違和感を感じてしまう。そこで、遅延時間が所与の時間を越えて、その遅延時間に対応するフィードバックの加工処理を行った場合には、その後の遅延時間の変動に依存せずに、所与の期間の間、フィードバックに対して当該加工処理を継続して行うようにする。このようにすれば、フィードバックに対する加工処理の加工度合いが、頻繁に変化したり、大幅に変動するなどの事態が抑制され、プレーヤが感じる違和感を低減できるようになる。

図１３は、遅延時間が所与の時間を越えた場合にそのときの加工処理を継続して行う手法を説明するフローチャートである。まずゲームシステムは、プレーヤの入力操作に対応して出力されるフィードバックの遅延時間が所与の時間を越えたか否かを判断する（ステップＳ５１）。例えばフィードバックの遅延時間が、しきい値として設定された時間を越えたか否かを判断する。そして遅延時間が所与の時間を越えた場合には、所与の時間を越えたときの加工処理を継続する継続フラグをオンにする（ステップＳ５２）。このように継続フラグがオンになると、その後にフィードバックの遅延時間が変動した場合にも、遅延時間が所与の時間を越えたときの加工処理が継続して行われるようになる。即ち、遅延時間が所与の時間を越えたときの加工度度合いの加工処理が継続して行われる。そして加工処理の継続期間が経過したか否かを判断し、継続期間が経過した場合には、継続フラグをオフにする（ステップＳ５４）。例えば継続フラグがオンになって加工処理を継続する継続期間の長さが予め設定されており、この継続期間の間は、遅延時間が所与の時間を越えたときの加工処理が継続して行われる。そして継続期間が経過すると、継続フラグがオンからオフになり、加工処理の継続処理が終了する。そしてその後は、フィードバックの遅延時間に応じた加工処理が行われるようになる。

また本実施形態では、ゲーム状況が所与の状況の場合に、遅延時間情報に基づく加工処理が行われたフィードバックに代えて、所与の状況用のフィードバックをプレーヤに出力する処理を行う。即ちゲーム状況が所与の状況になった場合には、遅延時間情報に基づく通常の加工処理は行わずに、所与の状況用に用意されたフィードバックをプレーヤに出力するようにする。

例えば図１４は、所与の状況が、プレーヤが連打の入力操作を行うことを要求される状況である場合の例である。この場合には図１４に示すように、譜面表示エリア４０には、連打の入力操作を行うことをプレーヤに指示する連打マーク４８が表示される。このような連打マーク４８が表示されると、プレーヤは、例えば連打マーク４８の左端が判定ライン４２に達してから、連打マーク４８の右端が判定ライン４２を通過するまでの期間において、図４（Ａ）の太鼓型ゲームコントローラ２０の太鼓本体２２を連打する入力操作を行う。そして連打に成功するとプレーヤに対して高い得点が付与される。

図１４のようにゲーム状況が連打の状況になったときに、図７に示すように遅延時間に応じたフィードバックの加工処理を行ってしまうと、プレーヤが違和感を感じるようなフィードバックが出力されてしまうおそれがある。従って、この場合には、連打の状況用のフィードバックをプレーヤに出力するようにする。例えば連打用に自動補正されたり自動生成されたフィードバック音等のフィードバックを出力する。例えばプレーヤの連打の入力操作になるべく同期するように自動補正又は自動生成されたフィードバックを出力する。或いは連打の状況用に予め用意された固定パターンのフィードバックを出力する。例えば音楽である楽曲（ＢＧＭ）に合わせた連打音となるフィードバックを出力する。即ち、このような連打の状況のときにも、遅延時間に応じたフィードバックの加工処理を行ってしまうと、ゲームプレイの気持ち良さが低減してしまう。そこで、入力操作と演奏音の整合性があまり必要とされない連打のときには、歯切れの良い連打音をプレーヤに聞かせてあげるようにする。このようにすれば、ゲーム状況が所与の状況の場合に、その所与の状況に適合したフィードバックを出力できるようになり、プレーヤが感じる違和感の低減等を図れるようになる。

図１５は、ゲーム状況が所与の状況の場合に所与の状況用のフィードバックを出力する手法を説明するフローチャートである。まずゲームシステムは、ゲーム状況が所与の状況か否かを判断する（ステップＳ６１）。例えば図１４に示すような連打の状況か否かを判断する。そしてゲーム状況が所与の状況ではない場合には、フィードバックの加工処理を実行して、加工処理が行われたフィードバックをプレーヤに対して出力する処理を実行する（ステップＳ６２、Ｓ６３）。即ち、通常通りに、遅延時間に応じた加工処理が行われたフィードバックをプレーヤに出力する。一方、ゲーム状況が所与の状況の場合には、所与の状況用のフィードバックをプレーヤに対して出力する処理を実行する（ステップＳ６４）。即ち、遅延時間に応じた加工処理が行われたフィードバックに代えて、所与の状況用に自動補正されたり自動生成されたフィードバックや固定パターンのフィードバックをプレーヤに出力する。

また本実施形態では、フィードバックであるフィードバック音と共にプレーヤに出力される音楽の音量を、遅延時間情報に基づいて制御する。例えば音楽ゲームにおいて、ＢＧＭとして出力される音楽の再生の音量を、遅延時間情報に基づき制御する。例えば、プレーヤに出力される音楽における基準タイミングに合わせて、プレーヤが演奏の入力操作を行う音楽ゲームにおいて、出力される音楽である楽曲の音量を、フィードバックの遅延時間情報に基づいて制御する。具体的には、フィードバックの遅延時間情報により表される遅延時間が大きくなるほど、音楽の音量を大きくする。例えばフィードバック音の音量に対する相対的な音楽の音量を大きくする。このようにフィードバック音と共に出力される音楽の音量を大きくすることで、音楽における演奏音となるフィードバック音が相対的に目立たなくなる。従って、フィードバック音が遅延することによりプレーヤが感じる違和感を低減することが可能になる。

図１６は、遅延時間情報に基づいて加工処理を行うと共に音楽の音量を制御する手法を説明するフローチャートである。まずゲームシステムは、プレーヤの入力操作が行われたかを判断し、入力操作が行われた場合には、フィードバックの遅延時間情報に基づいて、フィードバック音の加工処理を実行する（ステップＳ７１、Ｓ７２）。また遅延時間情報に基づいて、フィードバック音と共に出力される音楽の音量を制御する（ステップＳ７３）。例えばフィードバック音の遅延時間が大きいほど、音楽の音量を大きくする。そして加工処理が行われたフィードバック音と、遅延時間情報に基づき音量が制御される音楽をプレーヤに対して出力する処理を実行する（ステップＳ７４）。

また本実施形態では、プレーヤ以外の他のプレーヤの情報に基づいて、フィードバックの加工処理を行う。例えば他のプレーヤについての遅延時間情報も反映させたフィードバックの加工処理を行う。例えば図１７では、複数のプレーヤがゲームをプレイする複数の端末装置ＴＭ１～ＴＭｎが、ネットワーク５１０を介してプレーヤデータベース１７９に通信接続されている。そしてプレーヤデータベース１７９には、端末装置ＴＭ１～ＴＭｎでプレイするプレーヤについての遅延時間に関係する情報が蓄積されている。そしてプレーヤデータベース１７９に蓄積された情報に基づいて、各プレーヤについてのフィードバックの加工処理を行う。例えばプレーヤデータベース１７９に蓄積された情報に基づいて、遅延時間情報（フィードバックのズレ量）の設定処理を行い、設定された遅延時間情報に基づいてフィードバックの加工処理を実行する。例えばプレーヤが初めてゲームをプレイする際には、どのような基準で、遅延時間情報に基づく加工処理を行うかが定まっていない。そこでプレーヤデータベース１７９に記憶された他のプレーヤの情報に基づいて、フィードバックに対してどのような加工処理を行うかについての初期設定を行う。例えばフィードバックの遅延時間に応じて、どのような加工度合いの加工処理を行うのかを、プレーヤデータベース１７９に記憶された情報をビックデータとして用いて、決定する。例えば、ゲームに参加する各プレーヤの通信環境は様々である。そこで通信遅延時間を遅延時間情報として加工処理を行う場合に、通信遅延時間に基づいてどのような加工度合いの加工処理を行うのが適切なのかを、プレーヤデータベース１７９に記憶された情報に基づいて判断する。このようにすれば、プレーヤ以外の他のプレーヤの情報も加味して、遅延時間情報に基づく加工処理を実行できるようになる。

また本実施形態では、プレーヤによるオプション選択により、フィードバックの加工処理のオン又はオフを行う。即ちプレーヤが、自身の選択により、フィードバックの加工処理をオンにして有効にしたり、フィードバックの加工処理をオフにして無効にできるようにする。

例えば図１８にオプション設定の画面の例を示す。図１８のオプション設定の画面は、プレーヤがプレイする端末装置の表示部に表示される。プレーヤは、表示部に表示されるオプション設定の画面において、フィードバックの加工処理をオンにするか、オフにするかを選択する。プレーヤが、フィードバックの加工処理をオン（有効）にする設定を行うと、図７で説明したような遅延時間情報に基づくフィードバックの加工処理が行われるようになる。即ち、プレーヤが入力操作を行うと、遅延時間情報に基づき加工処理が行われたフィードバックが出力されるようになる。一方、プレーヤが、フィードバックの加工処理をオフ（無効）にする設定を行うと、遅延時間情報に基づくフィードバックの加工処理は行われないようになる。例えばプレーヤが入力操作を行うと、加工処理が行われないフィードバックが出力されるようになる。このようにすれば、遅延時間情報に基づく加工処理をフィードバックに対して行うか否かを、プレーヤの意思により任意に選択できるようになり、プレーヤの利便性等を向上できる。

なお、上記のように本実施形態について詳細に説明したが、本開示の新規事項および効果から実体的に逸脱しない多くの変形が可能であることは当業者には容易に理解できるであろう。従って、このような変形例はすべて本開示の範囲に含まれるものとする。例えば、明細書又は図面において、少なくとも一度、より広義または同義な異なる用と共に記載された用語は、明細書又は図面のいかなる箇所においても、その異なる用語に置き換えることができる。また判定処理、フィードバック処理、測定処理、加工処理等も本実施形態で説明したものに限定されず、これらと均等な手法も本開示の範囲に含まれる。

ＴＭ１～ＴＭｎ、ＴＭ端末装置、ＴＲ、ＴＲ１～ＴＲ６…基準タイミング、
ＴＩ１～ＴＩ４…入力タイミング、ＴＦｉ…出力タイミング、ＴＴＨ…しきい値、
１０…端末装置、２０…太鼓型ゲームコントローラ、２２…太鼓本体、
２４…パッド部、２６…リム部、３０、３２…棒状部材、
４０…譜面表示エリア、４２…判定ライン、
４４、４５、４６、４７…音符マーク、４８…連打マーク、
１００…処理部、１０２…判定部、１０４…フィードバック処理部、１０６…測定部、ｌ
１０８…ゲーム処理部、１１２…管理部、１２０…表示処理部、１３０…音処理部、
１６０…操作部、１７０…記憶部、１７２…遅延情報記憶部、
１７４…基準タイミング情報記憶部、１７６…フィードバック情報記憶部、
１７８…ユーザ情報記憶部、１８０…情報記憶媒体、
１９０…表示部、１９２…音出力部、１９４…Ｉ／Ｆ部、
１９５…携帯型情報記憶媒体、１９６…通信部、
５００…サーバシステム、５１０…ネットワーク

Claims

プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部と、
を含み、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行い、
前記フィードバック処理部は、
前記フィードバックの種別に応じて、前記加工処理の内容を異ならせることを特徴とするゲームシステム。
プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部と、
を含み、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行い、
前記フィードバック処理部は、
前記フィードバックであるフィードバック音として、音楽ゲームにおける前記プレーヤの演奏音を前記プレーヤに出力する処理を行うことを特徴とするゲームシステム。
プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部と、
を含み、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行い、
前記判定部は、
基準タイミングと前記入力タイミングとの比較を行うことで前記入力操作の評価処理を行い、
前記フィードバック処理部は、
前記フィードバックと前記評価処理の結果を、前記プレーヤに出力する処理を行うことを特徴とするゲームシステム。
請求項３において、
前記フィードバック処理部は、
前記評価処理の結果に応じた前記加工処理を行うことを特徴とするゲームシステム。
請求項３又は４において、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間が所与のしきい値を超えた場合には、前記フィードバックを前記プレーヤに出力せずに、前記評価処理の結果だけを前記プレーヤに出力する処理を行うことを特徴とするゲームシステム。
プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音（但し実物体の動きに応じた音声ＡＲコンテンツの音を除く）又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部と、
を含み、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記音声ＡＲコンテンツの音を除く前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行うことを特徴とするゲームシステム。
請求項１乃至６のいずれかにおいて、
前記フィードバック処理部は、
前記遅延時間が大きいほど、前記フィードバックであるフィードバック音の音量エンベロープの立ち上がりの傾斜を緩やかにする加工処理、前記フィードバック音の高周波成分を低減する加工処理、前記プレーヤの聴覚に感じにくくなる音色、音程、周波数成分又はピークを有する音に前記フィードバック音を加工する処理、或いは、前記フィードバックであるフィードバック振動の振幅又は周波数を小さくする加工処理を行うことを特徴とするゲームシステム。
請求項１乃至７のいずれかにおいて、
前記測定部は、
所与の測定タイミング毎に前記遅延時間情報を測定し、
前記フィードバック処理部は、
前記測定タイミングで測定された前記遅延時間情報に基づいて、前記フィードバックに対して動的に加工処理を行うことを特徴とするゲームシステム。
請求項１乃至８のいずれかにおいて、
前記フィードバック処理部は、
端末装置において前記プレーヤが行った前記入力操作に対する前記フィードバックに対して前記加工処理を行い、前記加工処理が行われた前記フィードバックを前記端末装置に対して出力する処理を行うことを特徴とするゲームシステム。
請求項９において、
前記測定部は、
前記端末装置とゲームシステムとを通信接続するネットワークの通信遅延時間を、前記遅延時間情報として測定することを特徴とするゲームシステム。
請求項１乃至１０のいずれかにおいて、
前記フィードバック処理部は、
前記遅延時間情報に基づいて、前記フィードバックであるフィードバック音の音量を変更する処理を、前記加工処理として行うことを特徴とするゲームシステム。
請求項１１において、
前記フィードバック処理部は、
前記遅延時間情報に基づいて、前記フィードバック音の音量エンベロープを変更する処理を、前記加工処理として行うことを特徴とするゲームシステム。
請求項１乃至１２のいずれかにおいて、
前記フィードバック処理部は、
ゲーム状況が所与の状況の場合に、前記遅延時間情報に基づく前記加工処理が行われた前記フィードバックに代えて、前記所与の状況用のフィードバックを前記プレーヤに出力する処理を行うことを特徴とするゲームシステム。
請求項１乃至１３のいずれかにおいて、
前記フィードバック処理部は、
前記フィードバックであるフィードバック音と共に前記プレーヤに出力される音楽の音量を、前記遅延時間情報に基づいて制御することを特徴とするゲームシステム。
請求項１乃至１４のいずれかにおいて、
前記フィードバック処理部は、
前記プレーヤ以外の他のプレーヤの情報に基づいて、前記フィードバックの前記加工処理を行うことを特徴とするゲームシステム。
プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部として、
コンピュータを機能させ、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行い、
前記フィードバック処理部は、
前記フィードバックの種別に応じて、前記加工処理の内容を異ならせることを特徴とするプログラム。
プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部として、
コンピュータを機能させ、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行い、
前記フィードバック処理部は、
前記フィードバックであるフィードバック音として、音楽ゲームにおける前記プレーヤの演奏音を前記プレーヤに出力する処理を行うことを特徴とするプログラム。
プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部として、
コンピュータを機能させ、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行い、
前記判定部は、
基準タイミングと前記入力タイミングとの比較を行うことで前記入力操作の評価処理を行い、
前記フィードバック処理部は、
前記フィードバックと前記評価処理の結果を、前記プレーヤに出力する処理を行うことを特徴とするプログラム。
プレーヤの入力操作の入力タイミングに基づく判定処理を行う判定部と、
前記入力操作に対するフィードバックとして、音（但し実物体の動きに応じた音声ＡＲコンテンツの音を除く）又は振動による前記フィードバックを前記プレーヤに対して出力する処理を行うフィードバック処理部と、
前記入力操作に対応して前記プレーヤに出力される前記フィードバックの遅延時間を特定するための遅延時間情報を測定する測定部として、
コンピュータを機能させ、
前記フィードバック処理部は、
前記遅延時間情報により表される遅延時間（但し前記プレーヤの前記入力操作の入力タイミングの遅れによる遅延時間を除く）が大きいほど、前記音声ＡＲコンテンツの音を除く前記フィードバックが前記プレーヤの聴覚又は触覚に与える程度が小さくなる加工処理を、前記フィードバックに対して行い、前記加工処理が行われた前記フィードバックを前記プレーヤに対して出力する処理を行うことを特徴とするプログラム。