JP6161886B2

JP6161886B2 - 音声出力システム、情報処理装置、情報処理プログラム、および音声出力制御方法

Info

Publication number: JP6161886B2
Application number: JP2012206143A
Authority: JP
Inventors: 真人水田
Original assignee: Nintendo Co Ltd
Current assignee: Nintendo Co Ltd
Priority date: 2012-09-19
Filing date: 2012-09-19
Publication date: 2017-07-12
Anticipated expiration: 2032-09-19
Also published as: US20140079230A1; JP2014060690A; US9277340B2

Description

本発明は、音声出力システム、情報処理装置、情報処理プログラム、音声出力制御方法に関し、より特定的には、異なる複数の音声出力装置を備えており、このうち一つの音声出力装置にヘッドホンが接続可能である音声出力システム、情報処理装置、情報処理プログラム、音声出力制御方法に関する。

従来、スピーカから所定の音声が出力可能な音声再生装置が知られている。そしてこのような音声再生装置の中には、ヘッドホンが接続可能なものも知られている。このようなヘッドホンも接続可能な装置において、ヘッドホンが接続されているときと接続されていないときとで、再生される音の音響特性を変化させることが行われていた。例えば、ヘッドホンが接続されていないとき（スピーカから音声を出力するとき）は、低音を強調するように音響特性を調整し、ヘッドホンが接続されているときは、このような調整を行わずにヘッドホンに音声出力する等、ヘッドホンの装着時と未装着時とで音響特性を変化させるようなことが行われていた。

特開２０１０−８５８６８号公報

上記のような音声再生装置では、ヘッドホンの接続／未接続に応じて、再生される音の音響特性を変化させてはいたが、再生される内容（例えば再生される楽曲そのもの）を変化させるものではなかった。ここで、例えば、複数の音声再生装置を同時に使用し、それぞれの音声再生装置のスピーカから異なる内容の音声が出力されている場合を想定する。このような場合に、ユーザが一方の音楽再生装置にヘッドホンを接続し、このヘッドホンを装着してその音声を聴こうとした場合、当該ヘッドホン装着者には、他方の音楽再生装置（のスピーカ）から出力されている音声が聞こえない、あるいは、聞こえるとしても小さい音でしか聞こえない、という状況になってしまう。

それ故に、本発明の目的は、複数の音声出力装置のそれぞれから出力されている別々の音声を合わせて聴かせることを想定して音全体を構成しているような場合に、一方の装置にヘッドホンを接続して、当該ヘッドホンで音声を聞くような状況下でも、音声制作者が意図したとおりの音を当該ヘッドホン装着者に聴かせることが可能な音声出力システム、情報処理装置、情報処理プログラム、および音声出力制御方法を提供することである。

上記目的は、例えば以下のような構成により達成される。

構成例の一例は、情報処理装置と、第１の音声出力部を備える第１出力装置と、第２の音声出力部を備える第２出力装置とを備える音声出力システムである。情報処理装置は、所定の情報処理に基づいて、第１出力装置へ出力するための第１音声信号と、第２出力装置へ出力するための音声信号であって第１の音声信号とは異なる音声内容となる第２音声信号を生成する音声生成部を備える。また、第２出力装置は、ヘッドホンを接続するためのヘッドホン接続部と、第２音声信号に基づいた第２の音声を第２の音声出力部から出力させ、かつヘッドホン接続部にヘッドホンが接続されているときは、当該ヘッドホンから第２の音声を出力させる第２音声出力制御部と、ヘッドホンの接続の有無を情報処理装置へ伝える接続通知部とを備える。そして、音声生成部は、第２出力装置にヘッドホンが接続されていることが接続通知部から伝えられたときは、当該ヘッドホンが接続されていないときには第２の音声として出力されていなかった第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように第２の音声信号の生成を行う。

上記構成例によれば、プレイヤがヘッドホンを装着しているときでも、音声の制作者が意図する音（ヘッドホンが接続されていないときの音）をプレイヤに聴かせることが可能となる。

また、音声生成部は、第２出力装置にヘッドホンが接続されていないときは、所定の楽曲データに基づいて第１の音声信号を生成し、かつ、所定の効果音データに基づいて第２の音声信号を生成し、第２出力装置にヘッドホンが接続されているときは、所定の楽曲の音声に含まれる少なくとも一部の音声が第２の音声に含まれるように第２の音声信号の生成を行うようにしてもよい。

また、第１出力装置はさらに第１の表示部を備え、第２出力装置はさらに第２の表示部を備え、情報処理装置はさらに、第１の表示部へ表示させる第１の画像と、第２の表示部へ表示させる第２の画像を生成する画像生成部を備えていてもよい。

また、第２出力装置はさらに、プレイヤの操作に基づいた操作データを生成する操作データ生成部を備え、情報処理装置は、操作データに基づいてゲーム処理を行うゲーム処理部をさらに備えていてもよい。

また、他の構成例は、情報処理装置と、第１の音声出力部を備える第１出力装置と、第２の音声出力部を備える第２出力装置とを備える音声出力システムである。情報処理装置は、所定の情報処理に基づいて、第１出力装置へ出力するための第１音声信号と、第２出力装置へ出力するための音声信号であって第１の音声信号とは異なる音声内容となる第２音声信号とを生成する音声生成部を備える。また、第２出力装置は、ヘッドホンを接続するためのヘッドホン接続部と、ヘッドホン接続部にヘッドホンが接続されていないときは、第２音声信号に基づいた第２の音声を第２の音声出力部から出力させ、ヘッドホン接続部にヘッドホンが接続されているときは、当該ヘッドホンからのみ第２の音声を出力させる第２音声出力制御部と、ヘッドホンの接続の有無を情報処理装置へ伝える接続通知部とを備える。そして、音声生成部は、第２出力装置にヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには第２の音声として出力されていなかった第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように音声の生成を行うと共に、当該ヘッドホンが接続されていないときには第１の音声として出力されていなかった第２の音声に含まれる少なくとも一部の音声が第１の音声に含まれるように音声信号の生成を行う。

上記構成例によれば、プレイヤがヘッドホンを第２出力装置に接続して利用しているときでも、当該ヘッドホン利用プレイヤ以外の人にも、音声の制作者が意図した音声を聴かせることが可能となる。

また、他の構成例は、情報処理装置と、第１の音声出力部を備える第１出力装置と、第２の音声出力部を備える第２出力装置とを備える音声出力システムである。情報処理装置は、所定の情報処理に基づいて、第１の音声出力部へ出力するための第１音声信号と、第２出力装置へ出力するための音声信号であって第１の音声信号とは異なる音声内容となる第２音声信号を生成する音声生成部を備える。また、第２出力装置は、ヘッドホンを接続するためのヘッドホン接続部と、ヘッドホン接続部にヘッドホンが接続されていないときは、第２音声信号に基づいた第２の音声を第２の音声出力部から出力させ、ヘッドホン接続部にヘッドホンが接続されているときは、当該ヘッドホンからのみ第２の音声を出力させる第２音声出力制御部と、ヘッドホンの接続の有無を情報処理装置へ伝える接続通知部とを備える。そして、音声生成部は、第２出力装置にヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときに出力される第１の音声および第２の音声のいずれにも含まれていない音声が第２の音声に含まれるように音声信号の生成を行う。

上記構成例によれば、ヘッドホンを接続したときにのみプレイヤに聴かせることが可能な音声を提供でき、例えばゲーム処理を実行する場合に、そのゲームの興趣性を高めることができる。

他の構成の一例は、第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置である。情報処理装置は、第２出力装置へのヘッドホン接続の有無を検出する接続検出部と、所定の情報処理に基づいて、第１出力装置へ出力するための第１音声信号と、第２出力装置へ出力するための音声信号であって第１の音声信号とは異なる音声内容となる第２の音声信号を生成する音声生成部とを備える。そして、音声生成部は、第２出力装置にヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには第２の音声出力部からは出力されていなかった第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように第２の音声信号の生成を行う。

また、他の構成例は、第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置である。情報処理装置は、第２出力装置へのヘッドホン接続の有無を検出する接続検出部と、所定の情報処理に基づいて、第１出力装置へ出力するための第１音声信号と、第２出力装置へ出力するための音声信号であって第１の音声信号とは異なる音声内容となる第２の音声信号を生成する音声生成部とを備える。そして、音声生成部は、第２出力装置にヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには第２の音声として出力されていなかった第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように音声の生成を行うと共に、当該ヘッドホンが接続されていないときには第１の音声として出力されていなかった第２の音声に含まれる少なくとも一部の音声が当該第１の音声に含まれるように音声信号の生成を行う。

また、他の構成例は、第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに当該音声信号を出力可能な情報処理装置である。情報処理装置は、第２出力装置へのヘッドホン接続の有無を検出する接続検出部と、所定の情報処理に基づいて、第１出力装置へ出力するための第１音声信号と、第２出力装置へ出力するための音声信号であって第１の音声信号とは異なる音声内容となる第２音声信号を生成する音声生成部とを備える。そして、音声生成部は、第２出力装置にヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときに出力される第１の音声および第２の音声のいずれにも含まれていない音声が第２の音声に含まれるように音声の生成を行う。

本発明によれば、別々の音声を出力している複数の音声出力装置からの音を合わせることを想定して音声を構成している場合において、ヘッドホンを装着しているときも装着していないときも、制作者が意図したとおりの音をプレイヤに聴かせることができる。

本発明の一実施形態に係るゲームシステム１の一例を示す外観図図１のゲーム装置本体５の一例を示す機能ブロック図図１の端末装置６の外観構成の一例を示す図端末装置６の内部構成の一例を示すブロック図ゲーム音声の出力状態の一例を示す図ゲーム音声の出力状態の一例を示す図メモリ１２のメモリマップ端末操作データ８３の構成の一例ゲーム処理プログラム８１に基づくゲーム処理の流れを示すフローチャート図９のゲーム音声生成処理の詳細を示すフローチャート端末装置６の制御処理の流れを示すフローチャートゲーム音声の出力状態の一例を示す図ゲーム音声の出力状態の一例を示す図ゲーム音声の出力状態の一例を示す図

図１を参照して、本発明の一実施形態に係るゲームシステムについて説明する。

図１において、ゲームシステム１は、表示手段の一例である家庭用テレビジョン受像機（以下、モニタと記載する）２と、モニタ２に接続コードを介して接続する据置型のゲーム装置３とから構成される。モニタ２は、スピーカ２ａを備える。また、ゲーム装置３は、ゲーム装置本体５と、端末装置６とを含む。

モニタ２は、ゲーム装置本体５から出力されるゲーム画像を表示する。モニタ２はスピーカ２ａを有しており、スピーカ２ａは、ゲーム装置本体５から出力されるゲーム音声を出力する。なお、この例ではモニタ２がスピーカ２ａを有する例を示したが、この他、モニタ２に別途外部のスピーカを接続するような形態であってもよい。

ゲーム装置本体５は、当該ゲーム装置本体５で読み取り可能な光ディスクに記憶されたゲームプログラム等に基づいてゲーム処理等を実行する。

端末装置６は、ユーザが把持可能な入力装置である。ユーザは端末装置６を手に持って動かしたり、あるいは、端末装置６を自由な位置に配置したりして使用することが可能である。端末装置６は、表示手段であるＬＣＤ（ＬｉｑｕｉｄＣｒｙｓｔａｌＤｉｓｐｌａｙ：液晶表示装置）２１、スピーカ２３、後述するヘッドホン端子、および入力手段（アナログスティックや押下型のボタン、タッチパネル等）等を備える。端末装置６とゲーム装置本体５とは無線（有線であってもよい）によって通信可能である。端末装置６は、ゲーム装置本体５で生成された画像（例えばゲーム画像）のデータをゲーム装置本体５から受信し、当該データが示す画像をＬＣＤ６１に表示する。また、端末装置６は、ゲーム装置本体５で生成された音声（例えばゲームの効果音やＢＧＭ）のデータをゲーム装置本体５から受信し、当該データが示す音声をスピーカ２３、あるいは、ヘッドホンが接続されている場合は当該ヘッドホンから出力する。また、端末装置６は、ゲーム装置本体５へ、自機に対して行われた操作の内容を表す操作データを送信する。

図２は、ゲーム装置本体５のブロック図である。図２において、ゲーム装置本体５は、情報処理装置の一例である。本実施形態においては、ゲーム装置本体５はＣＰＵ（制御部）１１およびメモリ１２、システムＬＳＩ１３、無線通信部１４およびＡＶ−ＩＣ（ＡｕｄｉｏＶｉｄｅｏ−ＩｎｔｅｇｒａｔｅｄＣｉｒｃｕｉｔ）１５等を有する。

ＣＰＵ１１は、メモリ１２やシステムＬＳＩ１３等を用いて所定の情報処理プログラムを実行する。これにより、ゲーム装置３における各種機能（例えば、ゲーム処理）が実現される。

システムＬＳＩ１３には、ＧＰＵ（ＧｒａｐｈｉｃｓＰｒｏｃｅｓｓｏｒＵｎｉｔ）１６、ＤＳＰ（ＤｉｇｉｔａｌＳｉｇｎａｌＰｒｏｃｅｓｓｏｒ）１７、入出力プロセッサ１８、等が含まれる。

ＧＰＵ１６は、ＣＰＵ１１からのグラフィクスコマンド（作画命令）に従って画像を生成する。なお、本実施形態においては、ゲーム装置本体５は、モニタ２に表示するゲーム画像と、端末装置６に表示するゲーム画像との両方を生成することがある。以下では、モニタ２に表示されるゲーム画像を「モニタ用ゲーム画像」と呼び、端末装置６に表示されるゲーム画像を「端末用ゲーム画像」と呼ぶことがある。

ＤＳＰ１７は、オーディオプロセッサとして機能し、メモリ１２に記憶されるサウンドデータや音波形（音色）データを用いて、音声データを生成する。なお、本実施形態においては、ゲーム音声についてもゲーム画像と同様、モニタ２のスピーカ２ａから出力するゲーム音声と、端末装置６のスピーカ２３あるいはヘッドホンから出力するゲーム音声との両方が生成されることがある。以下では、モニタ２から出力されるゲーム音声を「モニタ用ゲーム音声」と呼び、端末装置６から出力されるゲーム音声を「端末用ゲーム音声」と呼ぶことがある。

入出力プロセッサ３１は、無線通信部１４を介して、端末装置６との間でデータの送受信を実行したりする。本実施形態では、入出力プロセッサ１８は、ＧＰＵ１６が生成したゲーム画像（端末用ゲーム画像）、および、ＤＳＰ１７が生成したゲーム音声（端末用ゲーム音声）のデータを、無線通信部１４を経由して端末装置６に送信する。この際、端末用ゲーム画像については、表示画像の遅延が生じないように圧縮して送信するようにしても良い。また、入出力プロセッサ１８は、上記無線通信部１４を介して、端末装置６から送信される操作データ等を受信し、メモリ１２のバッファ領域に記憶（一時記憶）する。

また、ゲーム装置本体５において生成される画像および音声のうち、モニタ２に出力される画像データおよび音声データは、ＡＶ−ＩＣ１５によって読み出される。ＡＶ−ＩＣ１５は、図示しないＡＶコネクタを介して、読み出した画像データをモニタ２に出力するとともに、読み出した音声データをモニタ２に内蔵されるスピーカ２ａに出力する。これによって、モニタ２に画像が表示されるとともにスピーカ２ａから音声が出力される。

図３は、端末装置６の外観構成の一例を示す図である。図３に示すように、端末装置６は略板状のハウジング２０を備える。ハウジング２０は、ユーザが両手または片手で把持可能な大きさ（形状）である。また、端末装置６は、表示部の一例であるＬＣＤ２１を備える。ＬＣＤ２１には、上記端末用ゲーム画像が表示される。

また、端末装置６は、スピーカ２３を備える。スピーカ２３からは、上記端末用ゲーム音声が出力される。更に、端末装置６は、所定のヘッドホンが着脱可能なヘッドホン端子２４を備える。ここで、端末装置６は、当該ヘッドホン端子にヘッドホンが接続されていないときはスピーカ２３からの音声出力を行うが、当該ヘッドホン端子にヘッドホンが接続されているときは、スピーカ２３からの音声出力は行わない。つまり、本実施形態では、両者の同時出力は行われず、スピーカ２３からの出力とヘッドホンからの出力とは排他的な関係になっている（但し、他の実施例においては同時出力可能としてもよい）。なお、詳細は後述するが、本実施形態では、ヘッドホンが端末装置６に接続されているときと接続されていないときとで、上記端末用ゲーム音声の内容を変更するような処理を行う。

なお、端末装置６とヘッドホンの接続に関しては、上記のようなヘッドホン端子２４を介する有線接続の他、他の実施例においては、無線接続であってもよい。

また、端末装置６はタッチパネル２２を備える。タッチパネル２２は、ハウジング２０に設けられる所定の入力面（表示部の画面）に対して入力された位置を検出する位置検出部の一例である。さらに、端末装置６は、操作部（図４に示す操作部３１）として、アナログスティック２５、十字キー２６、およびボタン２７等を備える。

図４は、端末装置６の電気的な構成を示すブロック図である。図４に示すように、端末装置６は、上述のＬＣＤ２１、タッチパネル２２、スピーカ２３、および操作部３１を備える。また、ヘッドホン端子２４を介してヘッドホンが接続可能である。また、端末装置６の姿勢を検出するためのモーションセンサ３２（例えば加速度センサやジャイロセンサ）も備える。

また、端末装置６は、ゲーム装置本体５との無線通信が可能な無線通信部３４を備える。本実施形態においては、端末装置６とゲーム装置本体５との間では無線通信が行われるが、他の実施形態においては有線で通信が行われてもよい。

また、端末装置６は、端末装置６における動作を制御する制御部３３を備える。具体的には、制御部３３は、各入力部（タッチパネル２２、操作部３１、モーションセンサ３２）からの出力データを受け取り、操作データとして無線通信部３４を介してゲーム装置本体５へ送信する。また、制御部３３は、ヘッドホン端子２４の接続状態を検知し、その接続状態（接続／未接続）を示すデータ（検知結果）も上記操作データに含めてゲーム装置本体５に送信する。また、制御部３３は、ゲーム装置本体５からの端末用ゲーム画像が無線通信部３４において受信されると、必要に応じて適宜の処理（例えば、画像データが圧縮されている場合には伸張処理）を行い、ゲーム装置本体５からの画像をＬＣＤ２１に表示させる。更に、ゲーム装置本体５からの端末用ゲーム音声が無線通信部３４において受信されると、制御部３３は、ヘッドホンが接続されていない場合はスピーカ２３に当該端末用ゲーム音声を出力し、ヘッドホンが接続されているときは当該ヘッドホンに当該端末用ゲーム音声を出力する。

次に、図５〜図６を参照して、本実施形態のシステムにおいて実行される処理の概要を説明する。

本実施形態では、所定のゲーム処理が実行される場合を想定する。このゲームでは、ゲームの音声として所定のＢＧＭと効果音が適宜再生されている。そして、端末装置６にヘッドホンが接続されていない状態（通常のプレイ状態）では、ＢＧＭはモニタ２のスピーカ２ａのみから出力され、効果音は端末装置６のスピーカ２３のみから出力されている場合を想定する。図５は、このような通常のプレイ状態におけるモニタ２と端末装置６の音声出力を模式的に示した図である。なお、ＢＧＭと効果音の出力を２つの音声出力デバイス（モニタのスピーカと端末装置のスピーカ）に分けているのは、例えば、次のような理由による。すなわち、ＢＧＭをモニタ２のスピーカ２ａと端末装置６のスピーカ２３の双方で出力すると、モニタ２の性能（例えば、ゲーム装置本体５から出力された画像や音声を加工したり補正したりする機能を有するモニタ等）によっては、モニタ２の内部で映像音声出力の遅延が発生することがあり、モニタ２からの音声出力と端末装置６からの音声出力との間でズレが生じる可能性がある。このような場合、プレイヤにとって違和感のあるＢＧＭの聞こえ方になる。また、例えば、プレイヤが主に端末装置６のＬＣＤ２１を見てゲームの操作を行うような場合は、効果音のみを端末装置６で出力させることで、プレイヤをゲームプレイに集中させやすくすることもできる、このような場合を考慮すると、モニタ２と端末装置６の双方でＢＧＭを出力するよりも、いずれか一方だけでＢＧＭを出力すれば充分であると考えられるため（効果音についても同様）、通常のプレイ状態では、ＢＧＭはモニタ２のスピーカ２ａのみから出力し、効果音は端末装置６のスピーカ２３のみから出力するという処理が行われることがある。

ここで、図５のような状態において、プレイヤが端末装置６にヘッドホンを接続したと想定する。この場合、図６に示すように、端末装置６において、スピーカ２３からの音声出力は行われなくなると共に、ヘッドホンから音声が出力される。そして、このヘッドホンからは、上記効果音に加えてモニタ２で出力されている上記ＢＧＭについても出力される。つまり、端末装置６において、ヘッドホンが未接続の時は効果音しか出力されないが、ヘッドホン装着時には、効果音と一緒にＢＧＭも出力されることになる。これは、ヘッドホンをプレイヤが装着することで、モニタ２からの音声出力（ＢＧＭ）がプレイヤに聞こえにくくなる（あるいは全く聞こえなくなる）ため、ヘッドホンが接続された場合には、ＢＧＭについても端末装置６において出力するようにしたものである。これにより、ヘッドホンを付けた場合でも、ＢＧＭを楽しみながらゲームプレイを続けることが可能となる。また、その他、例えば高級ヘッドホンと呼ばれるような高品質のヘッドホンを利用することで、ＢＧＭについてもより良い音質で聴きたいというユーザのニーズもあるが、そのようなニーズにも対応可能となる。

次に、図７〜図１１を参照して、上記のようなゲーム処理を実現するためのシステム１の動作について詳細に説明する。

図７は、上記ゲームを実行するときにゲーム装置本体５のメモリ１２に記憶される各種データの一例を示している。

ゲーム処理プログラム８１は、ゲーム装置本体５のＣＰＵ１１に、上記ゲームを実現するためのゲーム処理を実行させるためのプログラムである。ゲーム処理プログラム８１は、例えば、光ディスクからメモリ１２にロードされる。

処理用データ８２は、ＣＰＵ１１において実行されるゲーム処理において用いられるデータである。処理用データ８２は、端末操作データ８３、端末送信用データ８４、ゲーム音声データ８５等を含む。

端末操作データ８３は、端末装置６から周期的に送信される操作データである。図８は、端末操作データ８３の構成の一例を示す図である。端末操作データ８３には、操作ボタンデータ９１、タッチ位置データ９２、ヘッドホン接続状態データ９３等が含まれる。操作ボタンデータ９１は、操作部３１（アナログスティック２５、十字キー２６、およびボタン２７）に対する入力状態を示すデータである。また、モーションセンサ３２に対する入力内容も操作ボタンデータ９１に含まれる。タッチ位置データ９２は、タッチパネル２２の入力面において入力が行われた位置（タッチ位置）を示すデータである。ヘッドホン接続状態データ９３は、ヘッドホン端子２４にヘッドホンが接続されているか否かを示すためのデータである。

端末送信用データ８４は、端末装置６へ周期的に送信するデータである。端末送信用データ８４には、上記端末用ゲーム画像や端末用ゲーム音声が含まれる。

ゲーム音声データ８５は、上記端末用ゲーム音声およびモニタ用ゲーム音声の素になるデータである。ゲーム音声データ８５には、少なくとも１以上のＢＧＭデータ８６と、少なくとも１以上の効果音データ８７が含まれる。ＢＧＭデータ８６および効果音データ８７は、例えばＡＤＰＣＭ形式やＭＰ３形式のような音声ファイルでもよいし、また、例えば、ゲーム装置本体５の内蔵音源で演奏可能な楽譜データのような形式であっても良い。

次に、図９〜図１０のフローチャートを参照し、ゲーム処理プログラム８１に基づいてゲーム装置本体５のＣＰＵ１１によって実行されるゲーム処理の流れを説明する。

ゲーム処理プログラム８１の実行が開始されると、所定の初期化処理が行われた後、図９のステップＳ１において、ＣＰＵ１１は、端末操作データ８３の取得を行う。

次に、ステップＳ２において、ＣＰＵ１１は、端末操作データ８３で示される操作内容（主に操作ボタンデータ９１やタッチ位置データ９２で示される操作内容）に基づき、所定のゲーム処理を実行する。例えば、プレイヤキャラクタ等の各種キャラクタやオブジェクトを移動させたり、当たり判定処理や点数加算処理等を行ったりする。

次に、ステップＳ３において、ＣＰＵ１１は、上記ゲーム処理の結果が反映されたゲーム画像を生成する処理を実行する。例えば、上記操作内容に基づいてプレイヤキャラクタが移動した後の仮想ゲーム空間を仮想カメラで撮影することでゲーム画像が生成される。また、このとき、ＣＰＵ１１は、ゲーム内容に応じて、適宜、モニタ用ゲーム画像と端末用ゲーム画像の２つの画像を生成する。例えば、２つの仮想カメラを用いることでそれぞれの画像が生成される。

次に、ステップＳ４において、ＣＰＵ１１は、モニタ用ゲーム音声および端末用ゲーム音声を生成するためのゲーム音声生成処理を実行する。図１０は、上記ステップＳ４で示したゲーム音声生成処理の詳細を示すフローチャートである。図１０において、まず、ステップＳ２１で、ＣＰＵ１１は、モニタ用ゲーム音声を生成する処理を行う。具体的には、ＣＰＵ１１は、ＢＧＭの再生ボリュームを０以外の所定の値に設定して、モニタ用の音声としてＢＧＭデータ８６を再生することで、モニタ用ゲーム音声を生成する。

次に、ステップＳ２２で、ＣＰＵ１１は、端末操作データ８３のヘッドホン接続状態データ９３を参照して、端末装置６にヘッドホンが接続されているか否かを判定する。当該判定の結果、ヘッドホンが接続されていないときは（ステップＳ２２でＮＯ）、ＣＰＵ１１は、効果音のみが端末装置６のスピーカ２３から出力されるようにするための処理を行う。すなわち、ステップＳ２３において、ＣＰＵ１１は、ＢＧＭの再生ボリュームを０に設定する。次に、ステップＳ２４において、端末装置用の音声としてＢＧＭデータ８６を再生する。但し、再生ボリュームは０であるため、ここでは実際にはＢＧＭの音声は出力されないことになる。次に、ステップＳ２５において、ＣＰＵ１１は、上記ステップＳ２におけるゲーム処理の結果に応じて所定の効果音データ８７を再生することで、端末用ゲーム音声が生成される（効果音の再生ボリュームは０以外の所定の値に設定されている）。

一方、上記ステップＳ２２の判定の結果、端末装置６にヘッドホンが接続されているときは（ステップＳ２２でＹＥＳ）、ＣＰＵ１１は、ＢＧＭと効果音の双方がヘッドホンから出力されるようにするための処理を行う。すなわち、ステップＳ２６において、ＣＰＵ１１は、ＢＧＭの再生ボリューム値を０以外の所定の値（プレイヤが充分に音声を聴き取り可能な程度のボリューム値）に設定する。次に、ステップＳ２７において、ＣＰＵ１１は、端末装置用の音声としてＢＧＭデータ８６を再生する。更に、ステップＳ２８において、ＣＰＵ１１は、上記ゲーム処理の結果に応じた所定の効果音データ８７を再生する。そして、ステップＳ２９において、ＣＰＵ１１は、上記再生されたＢＧＭおよび効果音をミックスすることで、端末用ゲーム音声を生成する。以上で、ゲーム音声生成処理は終了する。なお、ステップＳ２１におけるモニタ用のＢＧＭ再生は、ステップＳ２３およびステップＳ２７において端末装置向けにＢＧＭを再生する際に同時に行われてもよい。すなわち、ＢＧＭを再生し、０以外のボリュームでモニタ用の音声として出力すると共に、同時にヘッドホンの有無に応じたボリュームで端末装置用の音声として出力されるようにしてもよい。

なお、上記のゲーム音声生成の方法はあくまで一例であり、これに限らず、端末装置６にヘッドホンが接続されているときはＢＧＭの音声もヘッドホンから出力し、ヘッドホン未接続の時はＢＧＭの音声が端末装置６からは出力されないようにできれば、どのような処理方法を用いても良い。例えば、上記のようなＢＧＭの再生処理における再生ボリュームによる調整の他、端末装置６にヘッドホンが接続されていないときは、端末用ゲーム音声の生成の際にＢＧＭの再生処理そのものを実行しないようにしてもよい。

図９に戻り、ゲーム音声生成処理の次に、ステップＳ５において、ＣＰＵ１１は、上記ステップＳ３で生成された端末用ゲーム画像およびステップＳ４で生成された端末用ゲーム音声を端末送信用データ８４に格納し、当該端末送信用データ８４を端末装置６に送信する。なお、ここでは説明の便宜上、端末用ゲーム音声の送信周期を端末用ゲーム画像の送信周期を合わせている例を挙げているが、他の実施形態では、端末用ゲーム音声の送信周期については端末用ゲーム画像の送信周期よりも短くしてもよい。例えば、端末用ゲーム画像については１／６０秒周期で送信するようにし、端末用ゲーム音声については１／１８０秒周期で送信するようにしてもよい。

次に、ステップＳ６において、ＣＰＵ１１は、上記ステップＳ３で生成されたモニタ用ゲーム画像をモニタ２に出力する。続くステップＳ７において、ＣＰＵ１１は、上記ステップＳ４で生成されたモニタ用ゲーム音声をスピーカ２ａに出力する。なお、当該モニタ用ゲーム音声に関しても、モニタ用ゲーム画像の出力周期より短い周期で出力するようにしても良い。

次に、ステップＳ８で、ＣＰＵ１１は、ゲーム処理を終了するための所定の条件が満たされたか否かを判定する。その結果、所定の条件が満たされていないときは（ステップＳ８でＮＯ）、上記ステップＳ１に戻り、上述の処理を繰り返す。所定の条件が満たされたときは（ステップＳ８でＹＥＳ）、ＣＰＵ１１は当該ゲーム処理を終了する。

次に、図１１のフローチャートを参照して、端末装置６の制御部３３が実行する制御処理の流れを説明する。まず、ステップＳ４１において、制御部３３は、ゲーム装置本体５から送信された端末送信用データ８４を受信する。

次に、ステップＳ４２において、制御部３３は、上記受信した端末送信用データ８４に含まれている端末用ゲーム画像をＬＣＤ２１に出力する。

次に、ステップＳ４３において、制御部３３は、上記受信した端末送信用データ８４に含まれている端末用ゲーム音声を出力する。出力先は、ヘッドホンが接続されていないときはスピーカ２３に出力し、ヘッドホンが接続されている場合は、当該ヘッドホンに出力する。

次に、ステップＳ４４において、制御部３３は、操作部３１やモーションセンサ３２、タッチパネル２２に対する入力（操作内容）を検出し、操作ボタンデータ９１およびタッチ位置データ９２を生成する。

次に、ステップＳ４５において、制御部３３は、ヘッドホン端子２４にヘッドホンが接続されているか否かを検出する。そして、ヘッドホンが接続されているか未接続であるかを示すデータをヘッドホン接続状態データ９３として生成する。

次に、ステップＳ４６において、制御部３３は、上記ステップＳ４４およびＳ４５で生成した操作ボタンデータ９１、タッチ位置データ９２、およびヘッドホン接続状態データ９３を含む端末操作データ８３を生成し、ゲーム装置本体５に送信する。

次に、ステップＳ４７において、制御部３３は、端末装置６の制御処理を終了するための所定の条件が満たされたか否かを判定する（例えば、電源オフ操作が行われたか否か等）。その結果、所定の条件が満たされていないときは（ステップＳ４７でＮＯ）、上記ステップＳ４１に戻り、上述の処理を繰り返す。所定の条件が満たされたときは（ステップＳ４７でＹＥＳ）、制御部３３は当該端末装置６の制御処理を終了する。

このように、本実施例では、モニタ２のスピーカ２ａからは第１の音声（モニタ用ゲーム音声）を出力し、端末装置６からは第２の音声（端末用ゲーム音声）を出力している。そして、端末装置６においてヘッドホンが未接続のときは、第１の音声については端末装置６（のスピーカ２３）からは出力されないが、端末装置６にヘッドホンが接続されているときは、当該ヘッドホンからも第１の音声を出力するようにしている。これにより、別々のスピーカ（上記実施例ではモニタ２のスピーカ２ａと、端末装置６のスピーカ２３）から、その内容の異なる音声（第１の音声と第２の音声）を出力することで音全体（上記実施例ではＢＧＭ＋効果音等）を構成しているような場合に、プレイヤがヘッドホンを装着したときでも、ＢＧＭ＋効果音の音声をヘッドホンを通じて聴かせることができ、ゲーム制作者の意図した音声をプレイヤに聴かせることが可能となる。

［変形例］
なお、端末装置６にヘッドホンが接続されているときに出力する第１の音声（上記の例ではＢＧＭ）については、その全体を出力しても良いし、その一部分のみ出力するようにしても良い。例えば、上記ＢＧＭがメロディパート、ベースパート、ドラムパートの３つのパートから構成されている場合に、端末装置６にヘッドホンが接続されているときに出力する第１の音声としては、メロディパートのみを出力するようにしてもよい。あるいは、上記第１の音声として例えば異なる２つの曲（ＢＧＭ）を同時に出力しているような場合は、端末装置６にヘッドホンが接続されているときに出力する第１の音声として、いずれか１つの曲のみを出力するようにしてもよい。

また、上記の実施例では、異なるスピーカから出力される音声の内容について、ＢＧＭと効果音という組み合わせを例に挙げたが、もちろん、音声の内容はこのような組み合わせに限るものではない。ヘッドホン未接続時はモニタ２側からのみ出力される第１の音声について、ヘッドホン装着時にはこの第１の音声の少なくとも１部がヘッドホンから出力されるものであれば、どのような種類の音声でも上記の実施例で説明したような処理は適用可能である。

また、上記実施例では、端末装置６にヘッドホンが接続されているとき、モニタ２側における第１の音声（ＢＧＭ）の出力も行っているが、これに限るものではない。例えば、図１２に示すように、ヘッドホン接続時には、モニタ２からの第１の音声の出力を行わないようにしても良い。

また、図１３に示すように、ヘッドホン接続時には、モニタ２から効果音を出力するようにしても良い。これは、ヘッドホンが端末装置６に接続されると、端末装置６を操作しているプレイヤ以外の人からすると、それまでは端末装置６から聞こえていた効果音が聞こえなくなることから、当該プレイヤ以外の人にも（モニタ２のスピーカ２ａを介して）引き続き効果音を聞こえるようにできるという点で有利である。（特に、多人数プレイの場合に有用である）

その他、例えば、図１４に示すように、端末装置６にヘッドホンが接続されているときだけ当該ヘッドホンから聞こえるような音声を出力するように構成しても良い。この場合は、ＣＰＵ１１が、端末装置６にヘッドホンが接続されていると判定したとき、「隠し音声」として設定されている所定のＢＧＭや効果音を再生し、これを含む端末用ゲーム音声を生成して送信するよう構成すればよい。このようなギミックを利用したゲーム処理を実行することで、ゲームの展開に幅を持たせ、ゲームの興趣性を高めることが可能となる。

また、上述の実施例にかかる処理を実行するためのゲーム処理プログラムは、任意のコンピュータ読み取り可能な記憶媒体（例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、半導体メモリカード、ＲＯＭ、ＲＡＭなど）に格納され得る。

また、上記実施例ではゲーム処理を一例に説明しているが、情報処理の内容はゲーム処理に限るものではなく、ゲーム以外の他の情報処理においても上記実施例の処理は適用可能である。

また、上記実施形態においては、ヘッドホンの接続状態に応じて端末用ゲーム音声の内容を変化させるための一連の処理が単一の装置（ゲーム装置本体５）において実行される場合を説明したが、他の実施形態においては、上記一連の処理が複数の情報処理装置からなる情報処理システムにおいて実行されてもよい。例えば、ゲーム装置本体５と、当該ゲーム装置本体５とネットワークを介して通信可能なサーバ側装置とを含む情報処理システムにおいて、上記一連の処理のうちの一部の処理がサーバ側装置によって実行されてもよい。また、上記情報処理システムにおいて、サーバ側のシステムは、複数の情報処理装置によって構成され、サーバ側で実行するべき処理を複数の情報処理装置が分担して実行してもよい。

１…ゲームシステム
２…モニタ
２ａ…スピーカ
３…ゲーム装置
５…ゲーム装置本体
６…端末装置
２０…ハウジング
２１…ＬＣＤ
２３…スピーカ
２４…ヘッドホン接続端子

Claims

情報処理装置と、第１の音声出力部を備える第１出力装置と、第２の音声出力部を備える第２出力装置とを備える音声出力システムであって、
前記情報処理装置は、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成部を備え、
前記第２出力装置は、
ヘッドホンを接続するためのヘッドホン接続部と、
前記第２音声信号に基づいた第２の音声を前記第２の音声出力部から出力させ、かつ前記ヘッドホン接続部にヘッドホンが接続されているときは、当該ヘッドホンから前記第２の音声を出力させる第２音声出力制御部と、
前記ヘッドホンの接続の有無を前記情報処理装置へ伝える接続通知部とを備え、
前記音声生成部は、前記第２出力装置に前記ヘッドホンが接続されていることが前記接続通知部から伝えられたときは、当該ヘッドホンが接続されていないときには前記第２の音声として出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように第２の音声信号の生成を行う、音声出力システム。
前記音声生成部は、
前記第２出力装置に前記ヘッドホンが接続されていないときは、所定の楽曲データに基づいて前記第１音声信号を生成し、かつ、所定の効果音データに基づいて前記第２音声信号を生成し、
前記第２出力装置に前記ヘッドホンが接続されているときは、前記所定の楽曲の音声に含まれる少なくとも一部の音声が前記第２の音声に含まれるように第２音声信号の生成を行う、請求項１記載の音声出力システム。
前記第１出力装置はさらに第１の表示部を備え、
前記第２出力装置はさらに第２の表示部を備え、
前記情報処理装置はさらに、前記第１の表示部へ表示させる第１の画像と、前記第２の表示部へ表示させる第２の画像を生成する画像生成部を備える、請求項１または２記載の音声出力システム。
前記第２出力装置はさらに、プレイヤの操作に基づいた操作データを生成する操作データ生成部を備え、
前記情報処理装置は、前記操作データに基づいてゲーム処理を行うゲーム処理部をさらに備える、請求項１乃至３のいずれかに記載の音声出力システム。
情報処理装置と、第１の音声出力部を備える第１出力装置と、第２の音声出力部を備える第２出力装置とを備える音声出力システムであって、
前記情報処理装置は、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号とを生成する音声生成部を備え、
前記第２出力装置は、
ヘッドホンを接続するためのヘッドホン接続部と、
前記ヘッドホン接続部にヘッドホンが接続されていないときは、前記第２音声信号に基づいた第２の音声を前記第２の音声出力部から出力させ、前記ヘッドホン接続部にヘッドホンが接続されているときは、当該ヘッドホンからのみ前記第２の音声を出力させる第２音声出力制御部と、
前記ヘッドホンの接続の有無を前記情報処理装置へ伝える接続通知部とを備え、
前記音声生成部は、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには前記第２の音声として出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように音声の生成を行うと共に、当該ヘッドホンが接続されていないときには当該第１の音声として出力されていなかった第２の音声に含まれる少なくとも一部の音声が第１の音声に含まれるように音声信号の生成を行う、音声出力システム。
情報処理装置と、第１の音声出力部を備える第１出力装置と、第２の音声出力部を備える第２出力装置とを備える音声出力システムであって、
前記情報処理装置は、
所定の情報処理に基づいて、前記第１の音声出力部へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成部を備え、
前記第２出力装置は、
ヘッドホンを接続するためのヘッドホン接続部と、
前記ヘッドホン接続部にヘッドホンが接続されていないときは、前記第２音声信号に基づいた第２の音声を前記第２の音声出力部から出力させ、前記ヘッドホン接続部にヘッドホンが接続されているときは、当該ヘッドホンからのみ前記第２の音声を出力させる第２音声出力制御部と、
前記ヘッドホンの接続の有無を前記情報処理装置へ伝える接続通知部とを備え、
前記音声生成部は、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときに出力される前記第１音声信号に基づく第１の音声および前記第２の音声のいずれにも含まれていない音声が当該第２の音声に含まれるように音声信号の生成を行う、音声出力システム。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置であって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出部と、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容と
なる第２音声信号を生成する音声生成部とを備え、
前記音声生成部は、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには前記第２の音声出力部からは出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が前記第２音声信号に基づく第２の音声に含まれるように第２音声信号の生成を行う、情報処理装置。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置であって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出部と、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成部とを備え、
前記音声生成部は、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには第２音声信号に基づく第２の音声として出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように音声の生成を行うと共に、当該ヘッドホンが接続されていないときには前記第１の音声として出力されていなかった第２の音声に含まれる少なくとも一部の音声が当該第１の音声に含まれるように音声信号の生成を行う、情報処理装置。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置であって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出部と、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって第１の音声信号とは異なる音声内容となる第２音声信号を生成する音声生成部とを備え、
前記音声生成部は、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときに出力される前記第１音声信号に基づく第１の音声および前記第２音声信号に基づく第２の音声のいずれにも含まれていない音声が、当該第２の音声に含まれるように音声の生成を行う、情報処理装置。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出手段と、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成手段として前記コンピュータを機能させ、
前記音声生成手段は、
前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには前記第２の音声出力部からは出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が前記第２音声信号に基づく第２の音声に含まれるように第２音声信号の生成を行う、情報処理プログラム。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出手段と、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記
第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成手段として前記コンピュータを機能させ、
前記音声生成手段は、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには第２音声信号に基づく第２の音声として出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように音声の生成を行うと共に、当該ヘッドホンが接続されていないときには前記第１の音声として出力されていなかった第２の音声に含まれる少なくとも一部の音声が第１の音声に含まれるように音声の生成を行う、情報処理プログラム。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置のコンピュータにおいて実行される情報処理プログラムであって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出手段と、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成手段として前記コンピュータを機能させ、
前記音声生成手段は、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときに出力される前記第１音声信号に基づく第１の音声および前記第２音声信号に基づく第２の音声のいずれにも含まれていない音声が第２の音声に含まれるように音声の生成を行う、情報処理プログラム。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置または情報処理システムを制御するための制御方法であって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出ステップと、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成ステップとを備え、
前記音声生成ステップでは、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには前記第２の音声出力部からは出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が前記第２音声信号に基づく第２の音声に含まれるように第２音声信号の生成を行う、音声出力制御方法。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置または情報処理システムを制御するための制御方法であって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出ステップと、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成ステップとを備え、
前記音声生成ステップでは、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときには前記第２音声信号に基づく第２の音声として出力されていなかった前記第１音声信号に基づく第１の音声に含まれる少なくとも一部の音声が当該第２の音声に含まれるように音声の生成を行うと共に、当該ヘッドホンが接続されていないときには前記第１の音声として出力されていなかった第２の音声に含まれる少なくとも一部の音声が第１の音声に含まれるように音声の生成を行う、音声出力制御方法。
第１の音声出力部を備える第１出力装置と、第２の音声出力部およびヘッドホンを接続するためのヘッドホン接続部を備える第２出力装置とに音声信号を出力可能な情報処理装置または情報処理システムを制御するための制御方法であって、
前記第２出力装置へのヘッドホン接続の有無を検出する接続検出ステップと、
所定の情報処理に基づいて、前記第１出力装置へ出力するための第１音声信号と、前記第２出力装置へ出力するための音声信号であって当該第１音声信号とは異なる音声内容となる第２音声信号を生成する音声生成ステップとを備え、
前記音声生成ステップでは、前記第２出力装置に前記ヘッドホンが接続されているときは、当該ヘッドホンが接続されていないときに出力される前記第１音声信号に基づく第１の音声および前記第２音声信号に基づく第２の音声のいずれにも含まれていない音声が第２の音声に含まれるように音声の生成を行う、音声出力制御方法。