JP7430166B2 - 情報処理プログラム、情報処理装置および情報処理方法 - Google Patents

情報処理プログラム、情報処理装置および情報処理方法 Download PDF

Info

Publication number
JP7430166B2
JP7430166B2 JP2021179135A JP2021179135A JP7430166B2 JP 7430166 B2 JP7430166 B2 JP 7430166B2 JP 2021179135 A JP2021179135 A JP 2021179135A JP 2021179135 A JP2021179135 A JP 2021179135A JP 7430166 B2 JP7430166 B2 JP 7430166B2
Authority
JP
Japan
Prior art keywords
input
operation sound
information processing
gui
gui component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021179135A
Other languages
English (en)
Other versions
JP2023068240A (ja
Inventor
政美 米
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nintendo Co Ltd
Original Assignee
Nintendo Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nintendo Co Ltd filed Critical Nintendo Co Ltd
Priority to JP2021179135A priority Critical patent/JP7430166B2/ja
Priority to US17/956,388 priority patent/US11986732B2/en
Publication of JP2023068240A publication Critical patent/JP2023068240A/ja
Application granted granted Critical
Publication of JP7430166B2 publication Critical patent/JP7430166B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/54—Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/44—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment involving timing of operations, e.g. performing an action within a time slot
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Optics & Photonics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、グラフィカルユーザインターフェース（ＧＵＩ）の技術に関する。
従来から、コンピュータやゲーム等においては、アイコン、ボタン、サブウィンドウ等を画面上に表示したユーザーインターフェースが用いられる。こうしたユーザーインターフェースにおいて、操作に応じて操作音を出力する技術も知られている。
特許文献１は、オブジェクト操作における現実味や自然さを増加させる操作音を生成する装置を開示している。特許文献１には、マウスやタッチパネルを用いたアイコンのドラッグに応じて、「ズズズズ」といったドラッグ音を出力することが記載されている。また、この文献には、ドラッグの速度に応じてドラッグ音の音色や高さを変化させることも記載されている。
特開２００１－５１７５９
操作音を発生させる従来の技術は、このボタンがタッチされたらこの音色、このアイコンがドラッグされたらこの音といったように、個々の操作対象に操作音が紐づくものであった。
本発明は、上記背景に鑑み、操作音を発生させる新しい情報処理プログラム、情報処理装置および情報処理方法を提供することを目的とする。
本発明の情報処理プログラムは、情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、前記コンピュータを、複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出する入力検出手段、前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力する操作音出力手段、前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行する処理実行手段として機能させ、前記操作音出力手段は、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力する。
図１は、本発明の実施の形態のゲーム装置に左コントローラおよび右コントローラを装着した状態の一例を示す図である。 図２は、本発明の実施の形態のゲーム装置から左コントローラおよび右コントローラをそれぞれ外した状態の一例を示す図である。 図３は、本発明の実施の形態のゲーム装置の一例を示す六面図である。 図４は、本発明の実施の形態の左コントローラの一例を示す六面図である。 図５は、本発明の実施の形態の右コントローラの一例を示す六面図である。 図６は、本発明の実施の形態の情報処理プログラムを実行することで実現されるゲームシステムの構成を示すブロック図である。 図７（ａ）は、ゲーム装置に表示される選択画面の例を示す図である。図７（ｂ）は、「項目Ａ」のボタンにフォーカスが当たっている画面の例を示す図である。 図８（ａ）は、画面Ａに遷移した例を示す図である。図８（ｂ）は、画面Ａがポップアップして重畳される例を示す図である。 図９（ａ）は、キャラクタの髪型を選択する選択画面である。図９（ｂ）は「髪型Ｂ」が選択された画面の例を示す図である。 図１０は、本実施の形態のゲームシステムの動作を示すフローチャートである。 図１１は、カウンタ処理の動作を示すフローチャートである。 図１２は、操作音出力部にて音高を決定する処理を示すフローチャートである。
以下、本実施の形態の情報処理プログラム、情報処理装置および情報処理方法について図面を参照して説明する。なお、以下の説明はあくまでも好ましい態様の一例を示したものであり、特許請求の範囲に記載された発明を限定する意図ではない。
本実施の形態の情報処理プログラムは、情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、前記コンピュータを、複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出する入力検出手段、前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力する操作音出力手段、前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行する処理実行手段として機能させ、前記操作音出力手段は、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力する。
「ＧＵＩ部品」とは、コンピュータへ出す命令や指示等を視覚的に捉えて行動を指定できるようにしたインターフェースに用いられる部品であり、「ＧＵＩＣｏｍｐｏｎｅｎｔｓ」とも呼ばれる。ＧＵＩ部品の例は、画面に表示されたボタン、アプリケーションアイコン等である。「ＧＵＩ部品対応処理」は、ＧＵＩ部品の選択を確定することによって実行されることが予定された処理である。例えば、ＧＵＩ部品がアプリケーションアイコンの場合には、アイコンに示されるアプリケーションの実行がＧＵＩ部品対応処理である。また、ＧＵＩ部品がボタンの場合には、ボタンに示される次の画面への遷移がＧＵＩ部品対応処理である。
本実施の形態の情報処理プログラムは、複数個のＧＵＩ部品の各々に対して連続的に第１入力があったときにより音高の高い操作音を出力するので、単独のＧＵＩ部品に対する操作音とは異なる操作音を実現でき、操作感を向上できる。なお、第１入力の検出間隔が小さくなると、より音高が高い操作音を出力する構成としては、検出間隔が所定の閾値より小さいときに音高を高くする構成でもよい。この構成によれば、検出間隔が所定の閾値より小さい状態が続くと操作音の音高は累積的に高くなる。また、検出間隔が小さいときに、その検出間隔に応じて音高を決定する構成でもよい。この構成によれば、検出間隔が小さくなるにつれて操作音の音高が高くなる。また、音高を高くする割合は、段階的でもよいし連続的でもよい。
本実施の形態の情報処理プログラムは、前記第１入力および前記第２入力はともにタッチ入力であり、前記入力検出手段は、前記タッチ入力の座標が前記複数個のＧＵＩ部品の各々の領域のいずれかに含まれるようになったタイミングで前記第１入力を検出し、前記タッチ入力が終了したときの座標が前記複数個のＧＵＩ部品の各々の領域のいずれかに含まれる場合に前記第２入力を検出してもよい。この構成により、複数個のＧＵＩ部品の各々の領域の間でタッチ入力を動かすことで、第１入力を連続的に検出し、より音高の高い操作音を出力する構成を実現できる。そして、いずれかのＧＵＩ部品の領域でタッチ入力を終了することで、当該ＧＵＩ部品のＧＵＩ部品対応処理を実行させることができる。
本実施の形態の情報処理プログラムにおいて、前記第１入力および前記第２入力はともにハードウェア部品を動かす操作による入力であり、前記第１入力が検出された場合に前記複数個のＧＵＩ部品のうちフォーカスされる当該ＧＵＩ部品を変更するとともに、フォーカスされている当該ＧＵＩ部品がフォーカスされていない当該ＧＵＩ部品とは視覚的に異なるように表示するフォーカス変更手段として前記コンピュータをさらに機能させてもよい。この構成により、ハードウェア部品を動かす操作により第１入力を連続的に検出し、より音高の高い操作音を出力する構成を実現できる。
本実施の形態の情報処理プログラムにおいて、前記入力検出手段は、第１入力装置を用いて行われた第１種入力および第２入力装置を用いて行われた第２種入力を検出し、前記操作音出力手段は、前記第１種入力に基づいて第１種の前記第１入力が検出された場合と、前記第２種入力に基づいて第２種の前記第１入力が検出された場合とで、前記操作音の音高および音色の少なくとも一方が異なる前記操作音を出力してもよい。この構成により、入力装置の違いにより異なる操作音を楽しめる。
本実施の形態の情報処理プログラムにおいて、前記第１種入力はタッチ入力であり、前記第２種入力はハードウェア部品を動かす操作による入力であってもよい。この際に、前記操作音出力手段は、前記第２種の前記第１入力が検出された場合、前記第１種の前記第１入力が検出された場合と比べて、前記検出間隔が同じときの音高が低い前記操作音を出力してもよい。
ハードウェア部品を動かす操作による入力の場合、タッチ入力に比べてＧＵＩ部品に対する第１入力が無意識に行われると考えられる。例えば、カーソルを上下左右に移動させるハードウェアボタンのインターフェースでは、ＧＵＩ部品の選択を行う場合に目的外のＧＵＩ部品を経由することがある。ハードウェア部品を動かす操作による入力の場合に、タッチ入力の場合より音高を低くすることで、音高の変化に対する違和感を減らすことができる。
本実施の形態の情報処理プログラムにおいて、前記入力検出手段は、前記ハードウェア部品を動かす操作による入力において同じ操作が継続された場合、前記複数個のＧＵＩ部品の各々に対する前記第１入力を連続して検出してもよい。同じ操作が継続された場合とは、例えば、ハードウェアボタンが押し続けられたり、アナログスティックを倒し続けたりする場合である。この構成により、ハードウェア部品を動かす操作による入力においても、容易に、第１入力の検出間隔を小さくすることができる。
本実施の形態の情報処理プログラムにおいて、前記処理実行手段は、前記ＧＵＩ部品対応処理として、当該ＧＵＩ部品への入力が不可となる画面状態へと変化させてもよい。
本実施の形態の情報処理プログラムにおいて、前記処理実行手段は、前記複数個のＧＵＩ部品のいずれかに対する前記第２入力が検出された場合、前記ＧＵＩ部品が配置された画面とは別の画面に遷移させることで、当該ＧＵＩ部品への入力が不可となる画面状態へと変化させてもよい。
本実施の形態の情報処理プログラムにおいて、前記処理実行手段は、前記複数個のＧＵＩ部品のいずれかに対する前記第２入力が検出された場合、前記ＧＵＩ部品が配置されたレイヤーよりも上側のレイヤーに別の画像を重ねて表示し、当該ＧＵＩ部品への入力が不可となる画面状態へと変化させてもよい。
本実施の形態の情報処理装置は、複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出する入力検出手段と、前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力する操作音出力手段と、前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行する処理実行手段とを備え、前記操作音出力手段は、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力する。本実施の形態の情報処理装置は、上述した情報処理プログラムの各種の構成を備えることができる。
本実施の形態の情報処理方法は、ＧＵＩ部品に対する入力に合わせて操作音を出力する情報処理方法であって、複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出するステップと、前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力するステップと、前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行するステップとを備え、前記操作音を出力ステップでは、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力する。本実施の形態の情報処理方法は、上述した情報処理プログラムの各種の構成を備えることができる。
以下、本実施の形態の情報処理プログラム、情報処理装置および情報処理方法について、図面を参照しながら説明する。以下では、情報処理装置の例としてゲームシステムを取り上げて説明するが、本発明の情報処理装置は、ゲームシステムに限定されることなく、スマートホン、タブレット端末、ナビゲーション装置等にも適用することができる。
本実施の形態におけるゲームシステム１の一例は、ゲーム装置２と左コントローラ３及び右コントローラ４とを含む。ゲーム装置２は、左コントローラ３及び右コントローラ４がそれぞれ着脱可能である。つまり、ゲームシステム１は、左コントローラ３及び右コントローラ４をそれぞれゲーム装置２に装着して一体化された装置として利用できる。また、ゲームシステム１は、ゲーム装置２と左コントローラ３及び右コントローラ４とを別体として利用することもできる（図２参照）。以下では、本実施の形態のゲームシステム１のハードウェア構成について説明し、その後に本実施の形態のゲームシステム１の制御について説明する。
図１は、ゲーム装置２に左コントローラ３及び右コントローラ４を装着した状態の一例を示す図である。図１に示すように、左コントローラ３及び右コントローラ４は、それぞれゲーム装置２に装着されて一体化されている。ゲーム装置２は、ゲームシステム１における各種の処理（例えば、ゲーム処理）を実行する情報処理装置である。ゲーム装置２は、ディスプレイ１２を備える。左コントローラ３及び右コントローラ４は、ユーザが入力を行うための操作部を備える装置である。
図２は、ゲーム装置２から左コントローラ３及び右コントローラ４をそれぞれ外した状態の一例を示す図である。図１及び図２に示すように、左コントローラ３及び右コントローラ４は、ゲーム装置２に着脱可能である。なお、以下において、左コントローラ３及び右コントローラ４の総称として「コントローラ」と記載することがある。
図３は、ゲーム装置２の一例を示す六面図である。図３に示すように、ゲーム装置２は、略板状のハウジング１１を備える。本実施の形態において、ハウジング１１の主面（換言すれば、表側の面、即ち、ディスプレイ１２が設けられる面）は、大略的には矩形形状である。
なお、ハウジング１１の形状及び大きさは、任意である。一例として、ハウジング１１は、携帯可能な大きさであってよい。また、ゲーム装置２単体又はゲーム装置２に左コントローラ３及び右コントローラ４が装着された一体型装置は、携帯型装置となってもよい。また、ゲーム装置２又は一体型装置が手持ち型の装置となってもよい。また、ゲーム装置２又は一体型装置が可搬型装置となってもよい。
図３に示すように、ゲーム装置２は、ハウジング１１の主面に設けられるディスプレイ１２を備える。ディスプレイ１２は、ゲーム装置２が生成した画像を表示する。本実施の形態においては、ディスプレイ１２は、液晶表示装置（ＬＣＤ）とする。ただし、ディスプレイ１２は任意の種類の表示装置であってよい。
また、ゲーム装置２は、ディスプレイ１２の画面上のタッチパネル１３を備える。本実施の形態においては、タッチパネル１３は、マルチタッチ入力が可能な方式（例えば、静電容量方式）のものである。ただし、タッチパネル１３は、任意の種類のものであってよく、例えば、シングルタッチ入力が可能な方式（例えば、抵抗膜方式）のものであってもよい。
ゲーム装置２は、ハウジング１１の内部においてスピーカ（即ち、図６に示すスピーカ８０）を備えている。図３に示すように、ハウジング１１の主面には、スピーカ孔１１ａ及び１１ｂが形成される。そして、スピーカ８８の出力音は、これらのスピーカ孔１１ａ及び１１ｂからそれぞれ出力される。
また、ゲーム装置２は、ゲーム装置２が左コントローラ３と有線通信を行うための端子である左側端子１７と、ゲーム装置２が右コントローラ４と有線通信を行うための右側端子２１を備える。
図３に示すように、ゲーム装置２は、スロット２３を備える。スロット２３は、ハウジング１１の上側面に設けられる。スロット２３は、所定の種類の記憶媒体を装着可能な形状を有する。所定の種類の記憶媒体は、例えば、ゲームシステム１及びそれと同種の情報処理装置に専用の記憶媒体（例えば、専用メモリカード）である。所定の種類の記憶媒体は、例えば、ゲーム装置２で利用されるデータ（例えば、アプリケーションのセーブデータ等）、及び／又は、ゲーム装置２のコンピュータで実行される本実施の形態のゲームプログラムを記憶するために用いられる。また、ゲーム装置２は、電源ボタン２８を備える。
ゲーム装置２は、下側端子２７を備える。下側端子２７は、ゲーム装置２がクレードルと通信を行うための端子である。本実施の形態において、下側端子２７は、ＵＳＢコネクタ（より具体的には、メス側コネクタ）である。上記の一体型装置又はゲーム装置２単体をクレードルに載置した場合、ゲームシステム１は、ゲーム装置２が生成して出力する画像を据え置き型モニタに表示することができる。また、本実施の形態においては、クレードルは、載置された上記一体型装置又はゲーム装置２単体を充電する機能を有する。また、クレードルは、ハブ装置（具体的には、ＵＳＢハブ）の機能を有する。
図４は、左コントローラ３の一例を示す六面図である。図４に示すように、左コントローラ３は、ハウジング３１を備える。本実施の形態においては、ハウジング３１は、縦長の形状、即ち、上下方向（即ち、図１及び図４に示すｙ軸方向）に長い形状である。左コントローラ３は、ゲーム装置２から外された状態において、縦長となる向きで把持されることも可能である。ハウジング３１は、縦長となる向きで把持される場合に片手、特に左手で把持可能な形状及び大きさをしている。また、左コントローラ３は、横長となる向きで把持されることも可能である。左コントローラ３が横長となる向きで把持される場合には、両手で把持されるようにしてもよい。
左コントローラ３は、アナログスティック３２を備える。図４に示すように、アナログスティック３２は、ハウジング３１の主面に設けられる。アナログスティック３２は、方向を入力することが可能な方向入力部として用いることができる。ユーザは、アナログスティック３２を傾倒することによって傾倒方向に応じた方向の入力（及び、傾倒した角度に応じた大きさの入力）が可能である。なお、左コントローラ３は、方向入力部として、アナログディスクに代えて、十字キー又はスライド入力が可能なスライドスティック等を備えるようにしてもよい。また、本実施の形態においては、アナログスティック３２を押下する入力が可能である。
左コントローラ３は、各種操作ボタンを備える。左コントローラ３は、ハウジング３１の主面上に４つの操作ボタン３３～３６（具体的には、右方向ボタン３３、下方向ボタン３４、上方向ボタン３５、及び左方向ボタン３６）を備える。さらに、左コントローラ３は、録画ボタン３７及び－（マイナス）ボタン４７を備える。左コントローラ３は、ハウジング３１の側面の左上に第１Ｌボタン３８及びＺＬボタン３９を備える。また、左コントローラ３は、ハウジング３１の側面の、ゲーム装置２に装着される際に装着される側の面に第２Ｌボタン４３及び第２Ｒボタン４４を備える。これらの操作ボタンは、ゲーム装置２で実行される各種プログラム（例えば、ＯＡプログラムやゲームプログラム）に応じた指示を行うために用いられる。また、左コントローラ３は、左コントローラ３とゲーム装置２と有線通信を行うための端子４２を備える。
図５は、右コントローラ４の一例を示す六面図である。図５に示すように、右コントローラ４は、ハウジング５１を備える。本実施の形態においては、ハウジング５１は、縦長の形状、即ち、上下方向に長い形状である。右コントローラ４は、ゲーム装置２から外された状態において、縦長となる向きで把持されることが可能である。ハウジング５１は、縦長となる向きで把持される場合に片手、特に右手で把持可能な形状及び大きさをしている。また、右コントローラ４は、横長となる向きで把持されることも可能である。右コントローラ４が横長となる向きで把持される場合には、両手で把持されるようにしてもよい。
右コントローラ４は、左コントローラ３と同様、方向入力部としてアナログスティック５２を備える。本実施の形態においては、アナログスティック５２は、左コントローラ３のアナログスティック３２と同じ構成である。また、右コントローラ４は、アナログスティック５２に代えて、十字キー又はスライド入力が可能なスライドスティック等を備えるようにしてもよい。また、右コントローラ４は、左コントローラ３と同様、ハウジング５１の主面上に４つの操作ボタン５３～５６（具体的には、Ａボタン５３、Ｂボタン５４、Ｘボタン５５、及びＹボタン５６）を備える。さらに、右コントローラ４は、＋（プラス）ボタン５７及びホームボタン５８を備える。また、右コントローラ４は、ハウジング５１の側面の右上に第１Ｒボタン６０及びＺＲボタン６１を備える。また、右コントローラ４は、左コントローラ３と同様、第２Ｌボタン６５及び第２Ｒボタン６６を備える。また、右コントローラ４は、右コントローラ４がゲーム装置２と有線通信を行うための端子６４を備える。
（操作音出力のための構成）
図６は、本発明の実施の形態の情報処理プログラムを実行することで実現されるゲームシステム１の構成を示すブロック図である。図６では、本実施の形態の情報処理プログラムの説明に必要な構成を示しており、ゲームシステム１は図６に示す構成以外の構成を備えてもよい。
左コントローラ３は、ゲーム装置２との間で通信を行う通信制御部１１１と、メモリ１１２と、各ボタン１１３（具体的には、上述したボタン３３～３９、４３、４４、及び４７）と、アナログスティック（図６では「スティック」と記載する）３２を備える。各ボタン１１３及びアナログスティック３２は、自身に対して行われた操作に関する情報を、適宜のタイミングで繰り返し通信制御部１１１へ出力する。通信制御部１１１は、操作に関する情報をゲーム装置２に送信する。
右コントローラ４は、ゲーム装置２との間で通信を行う通信制御部１１４と、メモリ１１５と、各ボタン１１６（具体的には、上述したボタン５３～５８、６０、６１、６５及び６５）、アナログスティック５２とを備える。各ボタン１１６及びアナログスティック５２は、自身に対して行われた操作に関する情報を、適宜のタイミングで繰り返し通信制御部１１４へ出力する。通信制御部１１４は、操作に関する情報をゲーム装置２に送信する。
情報処理プログラムは、ゲーム装置２のフラッシュメモリ８１、ＤＲＡＭ８２等の内部記憶媒体、あるいは、スロット２３に装着される外部記憶媒体等に記憶される。情報処理プログラムを実行することにより、制御部１００は、入力検出部１０１、操作音出力部１０２、処理実行部１０３、フォーカス変更部１０４として機能する。
図７（ａ）は、複数のＧＵＩ部品であるボタンが表示された画面の例を示す図である。図７（ｂ）は、「項目Ａ」にフォーカスが当たっている画面の例を示す図である。図７（ａ）に示すように、画面には、「項目Ａ」から「項目Ｈ」の８つのボタンが２列に並んでいる。
入力検出部１０１は、画面に表示された複数のボタンの各々に対する第１入力および第２入力を検出する機能を有する。本実施の形態において、第１入力は複数のボタンのうちのいずれかのボタンを選択することであり、第２入力は選択中のボタンを確定することである。ここで説明する例では、入力検出部１０１は、タッチパネル１３による入力を検出すると共に、右方向ボタン３３、下方向ボタン３４、上方向ボタン３５、及び左方向ボタン３６（以下、これらを総称して「方向ボタン」という）とＡボタン５３による入力を検出する。すなわち、タッチパネル１３と、ハードウェアボタン（方向ボタンとＡボタン５３）の２種類の入力装置によって入力が行われる。
ここでは、ハードウェアの入力装置の例として、方向ボタンとＡボタン５３を挙げているが、ハードウェアの入力装置はこれらに限られない。ハードウェアの入力装置として、例えば、方向ボタンに代えて、アナログスティック３２またはアナログスティック５２を用いてもよい。アナログスティック３２，５２を用いた場合、アナログスティック３２，５２の傾倒により第１入力を検出し、Ａボタン５３によって第２入力を検出してもよい。また、アナログスティック３２，５２を用いる場合には、Ａボタン５３に代えて、アナログスティック３２，５２の押し込みによって第２入力を検出してもよい。
タッチパネル１３での入力の場合、入力検出部１０１は、タッチ入力の座標が複数のボタンの領域のいずれかに含まれるようになったタイミングで第１入力を検出する。また、入力検出部１０１は、タッチ入力の座標がボタンの表示領域にある状態でタッチ入力が終了したときに第２入力を検出する。なお、タッチ入力の終了とは、タッチパネル１３へのタッチが終了したこと（例えば、指やスタイラスがタッチパネル１３から離れたこと）であり、タッチ入力が継続したまま、その座標がボタンの表示領域から当該領域の外へ出ることは、タッチ入力の終了とはみなさない。
図７（ｂ）は、「項目Ａ」のボタンに対する第１入力が検出されたときの画面の例を示す図である。フォーカス変更部１０４は、「項目Ａ」のボタンに対するフォーカス変更処理を行い、フォーカスされていないボタンとは視覚的に異なる表示をしている。具体的には、「項目Ａ」のボタン表示領域を他のボタン表示領域より若干大きくすると共に、「項目Ａ」のボタン表示領域の色を他のボタン表示領域とは異なる色にしている。なお、ここでは、大きさ及び色を変更する態様を挙げているが、フォーカス変更部１０４は、別の態様でフォーカスされているボタンとフォーカスされていないボタンとを視覚的に異なるようにしてもよい。例えば、フォーカス変更部１０４は、大きさのみ又は色のみを変更してもよいし、フォーカスされたボタンにカーソルを合わせるようにしてもよい。
ハードウェアボタンでの入力の場合、入力検出部１０１は、方向ボタンにより第１入力を検出し、Ａボタン５３で第２入力を検出する。まず、第１入力について説明する。複数のボタンのうち、方向ボタンを最初に押したときのデフォルトのボタンが定められている。選択画面ボタンにおいて、いずれかの方向ボタンが押されると、入力検出部１０１は、最初は、デフォルトのボタンに対する第１入力を検出し、その後は方向ボタンで指示される方向にあるボタンに対する第１入力を検出する。
図７を参照して説明する。図７（ａ）に示す選択画面において、方向ボタンを押すと、「項目Ａ」のボタンに対する第１入力を検出する。これにより、図７（ｂ）に示すように、「項目Ａ」のボタンにフォーカスが当たった状態となる。
図７（ｂ）に示す状態で方向ボタンを押すと、入力検出部１０１は、その方向にあるボタンに対する第１入力を検出する。例えば、下方向ボタン３４を押すと、「項目Ａ」のボタンの下にある「項目Ｂ」のボタンに対する第１入力を検出する。図７（ｂ）に示す状態から右ボタンを押すと、「項目Ａ」のボタンの右にある「項目Ｅ」のボタンに対する第１入力を検出する。
なお、ボタンには順番が設定されており（図７に示す例では、アルファベット順）、下方向ボタン３４を押すと、その順番にしたがって第１入力を検出する。例えば、「項目Ｄ」のボタンに対する第１入力を検出した状態から下方向ボタン３４を押すと「項目Ｅ」のボタンに対する第１入力を検出し、「項目Ｈ」のボタンに対する第１入力を検出した状態から下方向ボタン３４を押すと「項目Ａ」のボタンに対する第１入力を検出する。したがって、下方向ボタン３４を押し続けることにより、選択画面に表示された複数のボタンの各々に対する第１入力を連続して検出する。なお、上方向ボタン３５を押すと、上記とは逆の順番で第１入力を検出する。この構成により、下方向ボタン３４または上方向ボタン３５を押し続けることで、短い検出間隔で第１入力を連続して行うことができる。
次に、ハードウェアボタンでの第２入力について説明する。入力検出部１０１は、Ａボタン５３により第２入力を検出する。方向ボタンによる第１入力が検出され、いずれかのボタンが選択された状態でＡボタン５３が押されると、入力検出部１０１は、当該ボタンに対する第２入力を検出する。
操作音出力部１０２は、複数のボタンの各々に対する第１入力に合わせて、操作音を出力する機能を有する。操作音は、ボタンに対する第１入力が行われたことを知らせる役割を有する。よって、操作音の出力タイミングは、第１入力が行われたタイミングと合っていればよい。操作音は、一瞬だけ聞こえる短時間の音である。操作音は、全てのボタンで同じ音色でもよいし、ボタンによって音色を変えてもよい。例えば、ボタンによって違う楽器の音を用いてもよい。
操作音出力部１０２は、複数の異なるボタンに対する第１入力が連続して検出された場合に第１入力の検出間隔が小さくなると、出力する操作音の音高を高くする。操作音出力部１０２による処理の詳細は後述する。
処理実行部１０３は、入力検出部１０１にて第２入力が検出されると、当該ボタンに対応付けられた画面に遷移する処理を行う。ボタンに対応付けられた画面に遷移する処理は、ボタンというＧＵＩ部品の選択の確定により実行されるＧＵＩ部品対応処理である。
図８（ａ）は、「項目Ａ」のボタンの選択を決定し、「項目Ａ」に対応付けられた画面Ａに遷移した例を示す図であり、図８（ｂ）は、画面Ａがポップアップして重畳される例を示す図である。処理実行部１０３は、図８（ａ）に示すように、選択画面の表示を消去して、画面Ａを表示させることとしてもよいし、また、図８（ｂ）に示すように選択画面の表示の上に、画面Ａをポップアップして、選択画面の上側のレイヤに画面Ａを重畳して表示させることとしてもよい。この場合、ゲームシステム１は、画面Ａへの入力を許可するが、選択画面のボタンへの入力を不可とする。処理実行部１０３が、図８（ａ）に示すように次の画面に完全に移行するか、選択画面の上側のレイヤに別のウィンドウを重ねて表示するかは、選択画面および次の画面の内容に応じて決定することができる。
なお、ここでは、「項目Ａ」に対応する処理の実行により画面Ａに遷移した後は、選択画面への入力を受け付けないようにする例を挙げたが、ボタンに対応する処理を実行した後であっても、選択画面に表示されるボタンに対する入力を許容することも可能である。例えば、ボタンに対応する処理が、選択したコンポーネントのプレビューのような場合である。次に一例を示す。
図９（ａ）は、キャラクタの髪型を選択する選択画面である。図９では、「髪型Ａ」～「髪型Ｈ」を示すボタンが２行に並んでいる。この例では、ボタンが横方向にアルファベット順に並んでいる。ボタンにはこのアルファベット順に順番が付けられている。したがって、方向ボタンで入力を行う場合に、第１入力を連続して行うために押し続けるボタンは、右方向ボタン３３あるいは左方向ボタン３６である。
図９（ａ）に示す画面では、「髪型Ｂ」のボタンに対する第１入力が検出されて、「髪型Ｂ」のボタンにフォーカスが当たっている。プレビューウィンドウＰには、現在の髪型である髪型Ａをしたキャラクタが表示される。このように、第１入力が検出されると当該ボタンの表示態様は変わるが、プレビューウィンドウＰの表示は現在の髪型から変更されない。
図９（ｂ）は、「髪型Ｂ」のボタンに対して第２入力が検出されたときの画面を示している。図示するように、「髪型Ｂ」のボタンに対してチェックマークが表示されると共に、プレビューウィンドウＰには、髪型Ｂをしたキャラクタが表示される。プレビューウィンドウＰに選択された髪型Ｂのキャラクタを表示する処理は、「髪型Ｂ」のボタンに対応する処理である。このように「髪型Ｂ」のボタンに対応する処理が行われた画面においても、「髪型Ａ」～「髪型Ｈ」に対する操作を行うことが可能である。なお、このプレビューウィンドウＰに表示された髪型Ｂを確定する場合には、「決定」ボタンを押せばよい。
図１０は、本実施の形態のゲームシステム１の動作を示すフローチャートである。ゲームシステム１は、複数のボタンを有する選択画面（図７（ａ）参照）を表示した状態で、第１入力および第２入力の検出を待つ。具体的には、ゲームシステム１は、第１入力が検出されたか否かを判定し（Ｓ１０）、第１入力が検出されない場合には（Ｓ１０でＮＯ）、第２入力の検出がされたか否かの判定を行う（Ｓ１４）。その結果、第２入力が検出されない場合には（Ｓ１４でＮＯ）、第１入力の検出の処理に戻る（Ｓ１０）。これを繰り返すことで、ゲームシステム１は、第１入力および第２入力の検出を待つ。
入力検出部１０１が第１入力を検出すると（Ｓ１０でＹＥＳ）、ゲームシステム１は、カウンタ処理を行う（Ｓ２０）と共に、フォーカスを変更し（Ｓ１１）、カウンタに応じて音高を決定する（Ｓ１２）。ここで、カウンタは、第１入力の検出間隔に応じて値が定まる変数である。カウンタは、０から１２０の値をとる。操作音出力部１０２は、カウンタの値が大きいほど操作音の音高を高く設定する。ゲームシステム１は、カウンタの値を定めるカウンタ処理と操作音の出力等の処理を別のトラックで並行して実行する。
図１１は、操作音出力部１０２が実行するカウンタ処理の動作を示すフローチャートである。このカウンタ処理は、第１入力が検出されたことをトリガとして実行が開始される。なお、図１１に示すカウンタ処理の実行中に、第１入力を検出した場合には、カウンタ処理は最初から実行される。
第１入力が検出されると、操作音出力部１０２は、カウンタが１００以下であるか判定する（Ｓ２１）。カウンタが１００以下の場合には（Ｓ２１でＹＥＳ）、カウンタに２０を加算する処理を行う（Ｓ２２）。カウンタが１００以下でない場合には（Ｓ２１でＮＯ）、カウンタに２０を加算するとカウンタの上限を超えてしまうことになるので、カウンタの加算の処理をスキップする。次に、操作音出力部１０２は、１５tick待って（Ｓ２３）、カウンタ減算処理（Ｓ２４～Ｓ２６）を行う。なお、１tickは、効果音を再生するテンポによって異なるが、テンポが１２０の場合には１／９６秒である。
カウンタ減算処理では、操作音出力部１０２は、１tick待ち（Ｓ２４）、カウンタが０より大きいか否か判定する（Ｓ２５）。この判定の結果、カウンタが０より大きい場合には（Ｓ２５でＹＥＳ）、カウンタから５を減算する処理を行う（Ｓ２６）。なお、カウンタが５未満である場合には、カウンタから５減算するとカウンタの下限値を下回ってしまうので、カウンタを０にする。
カウンタが０より大きくない場合には（Ｓ２５でＮＯ）、もはやカウントから減算をすることはできないので、操作音出力部１０２は、カウンタを減算する処理（Ｓ２６）をスキップする。すなわち、カウンタが０より大きくなければ、カウンタ減算処理は行われない。カウンタ減算処理では、以上のように１tickごとにカウンタを５ずつ減算する処理を２４回繰り返す。これにより、減算処理の開始前にカウンタが最大値であったとしても、減算処理が開始されてから２４tick後には、カウンタ値は０になる。
ただし、最初に述べたように、入力検出部１０１にて第１入力が検出された場合には、図１１に示すフローの途中であっても、先頭の処理（Ｓ２１）に戻って、カウンタ処理を行う。つまり、第１入力の検出間隔が小さければ、カウンタが０になる前にカウンタ処理を先頭から再開することになるので、短い検出間隔で第１入力を検出した場合にはカウンタの値は高くなっていく。例えば、検出間隔が１５tick以内の場合には、カウンタに２０を加算して（Ｓ２２）、１５tickの待ちがかかっているときに次の第１入力が検出され、処理が最初に戻るので、減算処理が行われることなく、カウンタに次の２０が加算される（Ｓ２１～Ｓ２２）。
また、カウンタが高くなる程度は、検出間隔が小さいほど大きい。例えば、検出間隔が１５tickの場合にはカウンタは２０上がり、１７tickの場合にはカウンタは１０上がる。このように、第１入力の検出間隔が小さくなるほど、カウンタの減算度合が減るためカウンタはより高くなる。つまり、操作音出力部１０２は、第１入力の検出間隔が小さくなるほど、より音高の高い操作音を出力する。
逆に、音高が高くなっている状態で、第１入力の検出間隔が長くなると、カウンタの減算処理（Ｓ２４～Ｓ２６）によりカウンタが減算される。例えば、カウンタ減算処理が５回以上繰り返されて２５以上減算された後に第１入力が検出されると、カウンタに２０を加算しても（Ｓ２２）、前の操作音出力時よりカウンタの値は小さくなるため、前の操作音よりも音高が低くなる。このように第１入力の検出間隔が大きくなると、出力される操作音の音高は次第に低くなる。
図１０に戻って、操作音の出力処理について説明する。ゲームシステム１は、別トラックでカウンタ処理を並行して行う一方で、フォーカスを変更し、新しく第１入力が検出されたボタンにフォーカスをあてる処理を行う（Ｓ１１）。続いて、ゲームシステム１は、カウンタに基づいて操作音の音高を決定する（Ｓ１２）。操作音出力部１０２は、決定された音高の操作音を出力する（Ｓ１３）。なお、フォーカスの変更（Ｓ１１）と操作音の出力（Ｓ１２，Ｓ１３）の順序は逆であってもよい。
操作音出力部１０２は、第１入力がハードウェアボタン（方向ボタン、アナログスティック３２，５２）から入力された場合には、タッチパネル１３から入力された場合に比べて、操作音の音高を高くするスピードを緩やかにする。音高を変えるスピードの調整は、一例として、カウンタ処理の中のカウントアップする処理（Ｓ２２）において、２０ずつ加算するのに代えて１０ずつ加算するなどすればよい。なお、音高を変えるスピードの調整方法は、これに限定されることはない。例えば、待ち時間（Ｓ２３、Ｓ２４）を長くするなどしてもよい。また、操作音出力部１０２は、タッチ入力により第１入力がなされた場合とハードウェアボタンによるボタン入力で第１入力がなされた場合とで操作音の音色を変えることとしてもよい。
ゲームシステム１は、第２入力が検出されたか否かを判定する（Ｓ１４）。第２入力が検出された場合は（Ｓ１４でＹＥＳ）、ゲームシステム１は、第２入力がなされたボタンで示される画面に遷移し、遷移先の画面を表示する（Ｓ１５）。第２入力が検出されず（Ｓ１４でＮＯ）、第１入力が検出された場合には（Ｓ１０でＹＥＳ）、カウンタ処理（Ｓ２０）を行ってカウンタ値を更新すると共に、カウンタに応じて音高を決定し（Ｓ１２）、操作音を出力する（Ｓ１３）。このように、第２入力が検出されるまで（Ｓ１４でＹＥＳ）、第１入力検出に基づくフォーカス変更処理と操作音の出力処理（Ｓ１１～Ｓ１３，Ｓ２０）を繰り返し行う。
本実施の形態の情報処理プログラムは、複数個のボタンの各々に対して連続的に第１入力があったときに、操作音の音高が高くなっていくので操作感を向上させることができる。複数のボタンを有する画面においてはボタンを押すことが目的なので、ボタンを押したことを確認する操作音を出力するのが従来の操作音の思想である。これに対し、本実施の形態の情報処理プログラムによれば、タッチした指をスライドさせて、押しているボタンを素早く切り替えたり、カーソルを移動したりすることで音高が異なる操作音が出力される。ボタンを選択するインターフェースに「遊び」を持たせ、操作するのが楽しくなる。本実施の形態において、第１入力は、ボタンの実行を確定する前の選択に当たる。つまり、ユーザがどの画面に遷移させるかを迷っているときに、単調な操作音が聞こえるのではなく、音高が変化する操作音が聞こえるので、心地良く操作を行える。
以上、本発明の情報処理プログラム、情報処理装置および情報処理方法について、実施の形態を用いて詳細に説明したが、本発明の情報処理プログラムは上記した実施の形態に限定されるものではない。
上記した実施の形態では、タッチ入力とハードウェアボタンによるボタン入力の２種類の入力装置を備えたゲームシステム１を例として説明したが、入力装置はタッチ入力のみ、またはハードウェアボタンによるボタン入力のみでもよい。また、入力装置は、タッチ入力やハードウェアボタンに限られず、例えば、加速度センサやジャイロセンサによるモーション入力であってもよいし、カメラ入力であってもよい。カメラ入力の場合には、ユーザの体の動きを検出し、ジェスチャー等によって第１入力、第２入力を可能とすることができる。また、マイク入力によりユーザの音声指示により第１入力、第２入力を受け付けてもよい。
上記した実施の形態では、第１入力の検出間隔が小さくなると出力する操作音の音高を高くする処理についてカウンタを用いた例を挙げたが、検出間隔に基づく音高の決定の仕方は上記した実施の形態以外にも種々のアルゴリズムが考えられ、そうしたアルゴリズムも本発明の範囲に含まれる。
図１２は、操作音出力部にて音高を決定する処理を示すフローチャートである。操作音出力部は、第１入力を検出したか否かを判定し（Ｓ３０）、第１入力を検出していない場合には（Ｓ３０でＮＯ）、第１入力の検出を待つ。第１入力を検出した場合には（Ｓ３０でＹＥＳ）、第１入力の検出間隔を記憶する（Ｓ３１）。ここでは、過去Ｎ回の検出間隔のデータをサイクリックに記憶し、Ｎ回より前のデータは消去する。
続いて、操作音出力部は過去Ｎ回の検出間隔の平均値を算出し（Ｓ３２）、算出した検出間隔の平均値に基づいて、検出間隔の平均値が小さいほど操作音の音高を高く決定する（Ｓ３３）。操作音出力部は、決定した音高で操作音を出力する（Ｓ３４）。
この構成により、検出間隔が小さくなるほど操作音の音高を高くすることができる。なお、図１２に示す例では、過去Ｎ回の検出間隔の平均値をとる例を挙げたが、過去Ｎ回の検出間隔の代表値を求めることとしてもよい。例えば、過去Ｎ回の検出間隔のデータの最頻値を代表値としてもよい。また、新しいデータほど大きい重みをつける重み付けをした上で加重平均値を計算してもよい。すなわち、直前から過去にさかのぼって各第１入力の検出間隔をｄ１，・・・，ｄＮとし、重みをα１，・・・，αＮ（α１＞α２＞・・・＞αＮ）として、検出間隔の代表値ｄを以下の式で求める。
ｄ＝（α１×ｄ１＋α２×ｄ２＋・・・＋αＮ×ｄＮ）／Ｎ
また、Ｎを１とすれば、今回の第１入力と直前の第１入力との検出間隔に基づいて、音高を決定することができる。この方法によると、操作音の音高は第１入力の検出間隔に対して鋭敏に反応する。
また、第１入力の検出間隔をいくつかのクラスに分け、クラスごとに音高を決定してもよい。例えば、第１入力の検出間隔が１５tick未満はクラス１、１５tick以上２０tick未満はクラス２、２０tick以上２５tick未満はクラス３、２５tick以上３０tick未満はクラス４、３０tick以上はクラス５とし、クラスに応じて音高を決定してもよい。具体的には、クラスの番号が小さいほど高い音高とするように決定する。
上記した実施の形態では、第１入力の検出間隔が小さくなると、より音高の高い操作音を出力する例を挙げたが、音高以外のパラメータを変更してもよい。すなわち、第１入力の検出間隔が小さくなると、操作音の音量や音色を変更してもよい。
また、第１入力の検出間隔が小さくなると音高を高くする（すなわち、周波数を高くする）ことに代えて、音高の異なる効果音を予め用意しておき、順次音高が高くなるように出力することとしてもよい。音高の異なる効果音は、音高に加えて音色が異なっていてもよい。ここで、用意する効果音をそれぞれの音高で構成された楽曲データとしてもよい。これにより、連続して検出される第１入力に応じて楽曲データを出力してメロディーを演奏する。
上記した実施の形態では、ボタンを表示した選択画面として図７を挙げたが、ゲームシステムは複数の選択画面を有してもよい。この場合、選択画面によって第１入力を検出したときに出力する操作音の音色を異ならせてもよい。また、これに伴って、音高を高くする割合を音色に応じて異ならせてもよい。なお、このように音色を変える仕様は、一つの画面に配置されたボタンに対しても可能である。例えば、図７（ａ）に示す「項目Ａ」～「項目Ｄ」のボタン群と、「項目Ｅ」～「項目Ｈ」のボタン群で、操作音の音色または音高を変化させる割合を異ならせてもよい。
上記した実施の形態では、複数のボタンの各々に対する第１入力を検出し、その検出間隔が小さくなるとより高い音高の操作音を出力する例を挙げたが、同じボタンに対する第１入力を連続して検出したときに、その検出間隔が小さくなるとより高い音高の操作音を出力するようにしてもよい。タッチ入力の場合には、タッチした指を同じボタンの表示領域の内側と外側で、その境界を横切るように往復させることで、そのボタンに対する第１入力を連続して検出する。この際に、検出間隔が小さくなると、より高い音高の操作音を出力する。
すなわち、変形例に係る情報処理プログラムは、情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、前記コンピュータを、ＧＵＩ部品に対する第１入力および第２入力を検出する入力検出手段、前記ＧＵＩ部品に対する前記第１入力に合わせて、操作音を出力する操作音出力手段、前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行する処理実行手段として機能させ、前記操作音出力手段は、同じ前記ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力してもよい。
上記した実施の形態では、第１入力の検出間隔が小さくなると、より音高の高い操作音を出力する例を挙げたが、逆に、第１入力の検出間隔が小さくなると、より音高の低い操作音を出力するようにしてもよい。
すなわち、変形例に係る情報処理プログラムは、情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、前記コンピュータを、複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出する入力検出手段、前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力する操作音出力手段、前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行する処理実行手段、として機能させ、前記操作音出力手段は、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が低い前記操作音を出力するようにしてもよい。
１ ゲームシステム
２ ゲーム装置
３ 左コントローラ
４ 右コントローラ
１２ ディスプレイ
１３ タッチパネル
８０ スピーカ
１００ 制御部
１０１ 入力検出部
１０２ 操作音出力部
１０３ 処理実行部
１０４ フォーカス変更部

Claims (12)

  1. 情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、前記コンピュータを、
    複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出する入力検出手段、
    前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力する操作音出力手段、
    前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行する処理実行手段、
    として機能させ、
    前記操作音出力手段は、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力する、情報処理プログラム。
  2. 前記第１入力および前記第２入力はともにタッチ入力であり、
    前記入力検出手段は、前記タッチ入力の座標が前記複数個のＧＵＩ部品の各々の領域のいずれかに含まれるようになったタイミングで前記第１入力を検出し、前記タッチ入力が終了したときの座標が前記複数個のＧＵＩ部品の各々の領域のいずれかに含まれる場合に前記第２入力を検出する、請求項１に記載の情報処理プログラム。
  3. 前記第１入力および前記第２入力はともにハードウェア部品を動かす操作による入力であり、
    前記第１入力が検出された場合に前記複数個のＧＵＩ部品のうちフォーカスされる当該ＧＵＩ部品を変更するとともに、フォーカスされている当該ＧＵＩ部品がフォーカスされていない当該ＧＵＩ部品とは視覚的に異なるように表示するフォーカス変更手段として前記コンピュータをさらに機能させる、請求項１に記載の情報処理プログラム。
  4. 前記入力検出手段は、第１入力装置を用いて行われた第１種入力および第２入力装置を用いて行われた第２種入力を検出し、
    前記操作音出力手段は、前記第１種入力に基づいて第１種の前記第１入力が検出された場合と、前記第２種入力に基づいて第２種の前記第１入力が検出された場合とで、前記操作音の音高および音色の少なくとも一方が異なる前記操作音を出力する、請求項１に記載の情報処理プログラム。
  5. 前記第１種入力はタッチ入力であり、前記第２種入力はハードウェア部品を動かす操作による入力である、請求項４に記載の情報処理プログラム。
  6. 前記操作音出力手段は、前記第２種の前記第１入力が検出された場合、前記第１種の前記第１入力が検出された場合と比べて、前記検出間隔が同じときの音高が低い前記操作音を出力する、請求項５に記載の情報処理プログラム。
  7. 前記入力検出手段は、前記ハードウェア部品を動かす操作による入力において同じ操作が継続された場合、前記複数個のＧＵＩ部品の各々に対する前記第１入力を連続して検出する、請求項６に記載の情報処理プログラム。
  8. 前記処理実行手段は、前記ＧＵＩ部品対応処理として、当該ＧＵＩ部品への入力が不可となる画面状態へと変化させる、請求項１から７のいずれか１項に記載の情報処理プログラム。
  9. 前記処理実行手段は、前記複数個のＧＵＩ部品のいずれかに対する前記第２入力が検出された場合、前記ＧＵＩ部品が配置された画面とは別の画面に遷移させることで、当該ＧＵＩ部品への入力が不可となる画面状態へと変化させる、請求項８に記載の情報処理プログラム。
  10. 前記処理実行手段は、前記複数個のＧＵＩ部品のいずれかに対する前記第２入力が検出された場合、前記ＧＵＩ部品が配置されたレイヤーよりも上側のレイヤーに別の画像を重ねて表示し、当該ＧＵＩ部品への入力が不可となる画面状態へと変化させる、請求項８に記載の情報処理プログラム。
  11. 複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出する入力検出手段と、
    前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力する操作音出力手段と、
    前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行する処理実行手段と、
    を備え、
    前記操作音出力手段は、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力する、情報処理装置。
  12. ＧＵＩ部品に対する入力に合わせて操作音を出力する情報処理方法であって、
    複数個のＧＵＩ部品の各々に対する第１入力および第２入力を検出するステップと、
    前記複数個のＧＵＩ部品のいずれかに対する前記第１入力に合わせて、操作音を出力するステップと、
    前記第１入力が行われた前記ＧＵＩ部品に対する前記第２入力が検出された場合、当該ＧＵＩ部品に対応付けられ、前記操作音の出力とは異なるＧＵＩ部品対応処理を実行するステップと、
    を備え、
    前記操作音を出力ステップでは、前記複数個のＧＵＩ部品のうち異なる当該ＧＵＩ部品に対する前記第１入力の検出間隔が小さくなると、より音高が高い前記操作音を出力する、情報処理方法。
JP2021179135A 2021-11-02 2021-11-02 情報処理プログラム、情報処理装置および情報処理方法 Active JP7430166B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021179135A JP7430166B2 (ja) 2021-11-02 2021-11-02 情報処理プログラム、情報処理装置および情報処理方法
US17/956,388 US11986732B2 (en) 2021-11-02 2022-09-29 Non-transitory storage medium having information processing program stored therein, information processing apparatus, and information processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021179135A JP7430166B2 (ja) 2021-11-02 2021-11-02 情報処理プログラム、情報処理装置および情報処理方法

Publications (2)

Publication Number Publication Date
JP2023068240A JP2023068240A (ja) 2023-05-17
JP7430166B2 true JP7430166B2 (ja) 2024-02-09

Family

ID=86145380

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021179135A Active JP7430166B2 (ja) 2021-11-02 2021-11-02 情報処理プログラム、情報処理装置および情報処理方法

Country Status (2)

Country Link
US (1) US11986732B2 (ja)
JP (1) JP7430166B2 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008136697A (ja) 2006-12-01 2008-06-19 Namco Bandai Games Inc プログラム、情報記憶媒体及びゲーム装置
US20090121903A1 (en) 2007-11-12 2009-05-14 Microsoft Corporation User interface with physics engine for natural gestural control
JP2011254368A (ja) 2010-06-03 2011-12-15 Sharp Corp 通信機器、配信システム、配信データの処理方法、および配信データの処理プログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3525817B2 (ja) 1999-08-12 2004-05-10 日本電気株式会社 操作反応音生成装置及び操作反応音生成プログラムを記録した記録媒体
US7765569B2 (en) * 2004-07-02 2010-07-27 Sony Corporation Navigation aids for television user interface
US20070263014A1 (en) * 2006-05-09 2007-11-15 Nokia Corporation Multi-function key with scrolling in electronic devices
KR101358224B1 (ko) * 2007-06-19 2014-02-05 엘지전자 주식회사 다중언어를 지원하는 단말장치 및 방법
US9760241B1 (en) * 2010-11-05 2017-09-12 Amazon Technologies, Inc. Tactile interaction with content
US9244549B2 (en) * 2012-06-28 2016-01-26 Samsung Electronics Co., Ltd. Apparatus and method for user input
JP6216120B2 (ja) * 2013-01-22 2017-10-18 任天堂株式会社 ゲームプログラム、ゲーム装置、ゲームシステム、および、ゲーム処理方法
US9600172B2 (en) * 2014-01-03 2017-03-21 Apple Inc. Pull down navigation mode
US9928029B2 (en) * 2015-09-08 2018-03-27 Apple Inc. Device, method, and graphical user interface for providing audiovisual feedback

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008136697A (ja) 2006-12-01 2008-06-19 Namco Bandai Games Inc プログラム、情報記憶媒体及びゲーム装置
US20090121903A1 (en) 2007-11-12 2009-05-14 Microsoft Corporation User interface with physics engine for natural gestural control
JP2011254368A (ja) 2010-06-03 2011-12-15 Sharp Corp 通信機器、配信システム、配信データの処理方法、および配信データの処理プログラム

Also Published As

Publication number Publication date
US20230137647A1 (en) 2023-05-04
JP2023068240A (ja) 2023-05-17
US11986732B2 (en) 2024-05-21

Similar Documents

Publication Publication Date Title
US11735014B2 (en) Devices, methods, and graphical user interfaces for providing haptic feedback
KR101419701B1 (ko) 멀티미디어 재생장치에서 멀티 터치를 이용한 재생 제어 방법
JP6188522B2 (ja) ユーザインタフェースにおける使用者の入力を管理するための方法、ユーザインタフェース及びコンピュータ可読媒体
JP6265401B2 (ja) メディアを再生するための方法および端末
EP2251857B1 (en) Music composition method and system for portable device having touchscreen
JP2019204520A (ja) タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法
JP2011525247A (ja) モバイル仮想ギターの指板表示装置及び方法
US9076264B1 (en) Sound sequencing system and method
EP1953632A2 (en) A user interface method for a multimedia playing device having a touch screen
US8809665B2 (en) Electronic percussion gestures for touchscreens
US20140266569A1 (en) Controlling music variables
KR20140096573A (ko) 컨텐츠 재생을 제어하기 위한 방법 및 장치
JP6069680B2 (ja) ゲーム装置及びゲームプログラム
JP7430166B2 (ja) 情報処理プログラム、情報処理装置および情報処理方法
JP5682285B2 (ja) パラメータ設定プログラム及び電子音楽装置
JP6432966B2 (ja) 楽譜表示・演奏プログラム及び楽譜表示・演奏装置
KR20110030893A (ko) 멀티터치 기반 터치 패널 제어장치, 방법 및 이를 이용한 모바일 기기
CN111782865A (zh) 音频信息的处理方法、装置及存储介质
JP6823514B2 (ja) 楽譜表示・演奏プログラム及び楽譜表示・演奏装置
JP5842451B2 (ja) 電子音楽装置およびその制御方法を実現するためのプログラム
JP5382880B2 (ja) ゲームプログラム、ゲーム装置、ゲーム制御方法
JP2012145688A (ja) パラメータ設定プログラム及び電子音楽装置
KR20090046189A (ko) 프로그래스 바를 이용한 동작 제어 방법 및 장치
JP5348173B2 (ja) 電子情報処理装置及びプログラム
JP2016131582A (ja) プログラム、ゲームシステム、ゲーム装置、及び制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220804

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231003

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240130

R150 Certificate of patent or registration of utility model

Ref document number: 7430166

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150