JP2013178727A - 立体ディスプレイにおける複数のオブジェクトを制御する装置および方法 - Google Patents

Abstract

【課題】立体ディスプレイにおける複数のオブジェクトを管理するための装置および方法を提供する。
【解決手段】立体ディスプレイにおけるオブジェクトの位置が測定され、立体ディスプレイからのオブジェクトの視距離が測定される。この装置および方法は、オブジェクトの視距離が閾値を超えているか否かを判定し、視距離が閾値を超えている場合、オブジェクトの外観が、ディスプレイから遷移される（例えば、徐々に消される）。このようにして、オブジェクトは、視聴者を混乱させたり不自然に見えたりしないように、ディスプレイ上で適切に遷移される。
【選択図】図５Ａ

Description

立体ディスプレイにおける複数のオブジェクトを管理するための装置および方法が提供される。

ビデオゲームの環境は、ここ数十年で大きく発展している。ビデオゲームは、従来、プレイヤがＸＹ座標空間内でプレイヤキャラクタを操作可能な２次元（２Ｄ）ゲーム環境において行われていた。例えば、代表的な８０年代のゲームであるスーパーマリオブラザーズでは、プレイヤは、プレイヤキャラクタであるマリオを、コントローラを用いて左右に動かしたり、ボタンを用いて飛び跳ねたり飛び降りたりさせることによって、Ｘ−Ｙ座標空間内で動かすことができた。

ビデオゲームは、最終的に、より堅牢な３次元（３Ｄ）環境へと進化した。３Ｄ環境では、プレイヤキャラクタが、ＸＹＺ座標空間内で移動され得た。例えば、「一人称視点シューティング（ｆｉｒｓｔ−ｐｅｒｓｏｎ−ｓｈｏｏｔｅｒ）」ゲームでは、プレイヤは、プレイヤキャラクタの「眼」にある仮想カメラを通して見ることができた。コントローラを左右に動かすと、それに従って、プレイヤキャラクタは、ＸＹＺ座標空間の正のｘ軸正方向またはｘ軸負方向に移動する。同様に、コントローラを上下に動かすことによって、そのプレイヤキャラクタは、ｚ軸正方向またはｚ軸負方向に移動する。ボタンを押すことによって、プレイヤキャラクタは、ｙ軸方向で上下に「跳ぶ」。

３Ｄゲーム環境、または、仮想３Ｄ世界を実装するゲーム環境が、標準的なコンピュータモニタまたはテレビ受信機の２Ｄディスプレイによって、制限されていた。その結果、ビデオゲームが、２Ｄディスプレイが「３Ｄ」世界を見せることがきるように、３Ｄ座標空間の３Ｄレンダリングを行っていた。これによって、ディスプレイの２Ｄ画像生成によって制限されてはいるが、プレイヤに、まるでそれらが３Ｄ環境で移動しているような様子を与えていた。

現在、３Ｄテレビおよび３Ｄディスプレイの到来に伴って、ゲーム環境の３Ｄ座標空間が、実際の３Ｄ画像ディスプレイに表示され得る。したがって、オブジェクトが、例えば、まるで視界の「ｚ軸」に沿って移動しているように、画面から離れたり、画面に向かって移動したりし得る。

しかしながら、３Ｄ映画を見ているように、表示画面からあまりにも遠くに離れて移動するオブジェクトは、視聴者を混乱させたり、そのオブジェクトを見る際に不自然に見えたりし得る。例えば、オブジェクトが視聴者に近づき過ぎると、視聴者は、他の視覚オブジェクトに焦点を合わせることが難しくなる。

ゲーム装置として、オブジェクトが視聴者を混乱させたり不自然に見えたりする位置に仮想カメラが移動するのを防止することによって、この問題に部分的に対処しているものがある。しかしながら、これは、ゲームプレイを損なうように仮想カメラを拘束するため、不都合である。

他のゲーム装置として、視覚オブジェクトを基本的に「切り取る」切り取り面を提供しているものもある。この方法も、不都合である。なぜならば、視聴者に最も近いオブジェクトの一部を切り取り、当該オブジェクトに対して、画面から離れると共にまるでばらばらになるような様子を与えているからである。したがって、オブジェクトが視聴者に向かって来ながら当該オブジェクトを適切に遷移させるシステムを提供することが望ましい。

この課題に対処するために、３Ｄオブジェクトがプレイヤの視界で適切に遷移されるゲーム環境が提供される。例えば、３次元（３Ｄ）の実空間において上記３Ｄオブジェクトが認識された位置が測定され、ディスプレイからの距離が閾値を超える場合、上記システムは、線形ブレンディング処理を上記オブジェクトに対して行い、上記オブジェクトをプレイヤの視界の外に徐々に遷移させる。これによって、そのオブジェクトは、プレイヤを混乱させたり不自然に見えたりする前に、画面からスムーズに遷移できる。それと同時に、上記オブジェクトの外観をそのままにして、仮想カメラが制限なく移動できる。

立体ディスプレイにおける複数のオブジェクトを管理する方法が提供される。立体ディスプレイにおけるオブジェクトの位置が測定され、上記立体ディスプレイからの上記オブジェクトの視距離が測定される。上記オブジェクトの視距離が閾値を超えている場合、上記オブジェクトの外観が上記立体ディスプレイ上で遷移される。

前述の段落に記載された立体表示方法において複数のオブジェクトの管理を実行するためのコンピュータ読み取り可能なコードを組み込んだ非一時的コンピュータ読み取り可能な記録媒体が提供される。

別の局面は、立体ディスプレイと、当該立体ディスプレイにおける複数のオブジェクトを管理するためのプログラムを記憶するように構成されるメモリと、当該立体ディスプレイにおける当該複数のオブジェクトを管理するために構成されるプロセッサとを有するゲーム装置に関する。上記プロセッサは、上記立体ディスプレイにおける上記オブジェクトの位置を測定し、上記立体ディスプレイからのその視距離を測定するように構成される。上記オブジェクトの視距離が閾値を超えている場合、上記オブジェクトの外観が上記ディスプレイ上で遷移する。

別の局面は、方法およびシステムに関し、当該方法およびシステムは、コンピュータプロセッサを用いて、仮想オブジェクトの位置を測定し、上記仮想オブジェクトの位置に基づいて、３次元世界の画像の前側における上記仮想オブジェクトの画像の認識された距離を測定し、上記認識された距離が限度に達しているか否かを判定し、上記認識された距離が所定の限度に達している場合、上記オブジェクトの画像の外観を徐々に削除していく。上記仮想オブジェクトが第１種類のオブジェクトである場合、上記限度は第１の値を有してもよく、上記仮想オブジェクトが当該第１種類のオブジェクトと異なる種類のオブジェクトである場合、当該限度は異なる値を有してもよい。上記仮想オブジェクトが上記画像の中心またはその付近に位置する場合、上記限度は第１の値を有してもよく、当該仮想オブジェクトが、当該画像の縁またはその付近に位置する場合、当該限度は異なる値を有してもよい。

限定されない例示的な実装例では、上記オブジェクトの外観は、予め設定された期間に亘って徐々に遷移する。上記オブジェクトの外観の遷移は、例えば、ブレンディング技術を用いてフェード処理することである。

さらに別の実装例では、上記オブジェクトの位置は、３次元装置空間内であり、上記オブジェクトの視距離の測定は、当該３次元装置空間での距離である。上記３次元装置空間における上記オブジェクトの位置は、例えば、仮想３次元空間における上記オブジェクトの位置の変換に基づいて測定され得る。上記装置空間は、どのように実際の３次元空間が感知されるかを表す。

別の限定されない実施の例では、上記閾値は、前記オブジェクトの種類によって、可変であり得る。上記閾値は、例えば上記オブジェクトが関与するゲームプレイの状態によって、可変であり得る。

図１は、開状態のゲーム装置１０の一例を示す正面図である。 図２は、開状態のゲーム装置１０の一例を示す側面図である。 図３Ａは、閉状態のゲーム装置１０の一例を示す左側面図である。図３Ｂは、閉状態のゲーム装置１０の一例を示す正面図である。図３Ｃは、閉状態のゲーム装置１０の一例を示す右側面図である。図３Ｄは、閉状態のゲーム装置１０の一例を示す背面図である。 図４は、ゲーム装置１０の内部構成の一例を示すブロック図である。 図５Ａは、本システムのためのアプリケーション処理を示す例示的なアプリケーションフローチャートである。 図５Ｂは、本システムのためのアプリケーション処理を示す例示的なアプリケーションフローチャートである。 図５Ｃは、本システムのためのアプリケーション処理を示す例示的なアプリケーションフローチャートである。 図６Ａは、ゲーム装置１０における本システムの実装例を示す例示的な図である。 図６Ｂは、ゲーム装置１０における本システムの実装例を示す例示的な図である。 図６Ｃは、ゲーム装置１０における本システムの実装例を示す例示的な図である。 図７Ａは、本システムの実装例を示す例である。 図７Ｂは、本システムの実装例を示す例である。 図７Ｃは、本システムの実装例を示す例である。

本システムの実施形態に係る画像処理プログラムを実行する画像処理装置の具体例を記載する。以下の実施形態は、しかしながら、例示的なものであって、本システムは、以下の実施形態の構成に限定されるものではない。

なお、以下の実施形態では、コンピュータによって処理されたデータは、図表および自然言語を用いて例示されることに留意すべきである。しかし、より具体的には、このデータは、コンピュータ認識可能な疑似言語、コマンド、パラメータ、機械語、配列等によって規定される。本実施形態は、そのデータを表す方法を限定しない。

まず、図を参照して、本実施形態に係る画像処理プログラムを実施する画像処理装置の一例としての携帯ゲーム装置１０を説明する。本システムに係る画像処理装置は、しかしながら、ゲーム装置に限定されない。本システムに係る画像処理装置は、汎用コンピュータ等の所定のコンピュータであってもよい。画像処理装置は、携帯型電子ゲーム装置にも限定されず、例えば、任天堂のＷｉｉ等の家庭用娯楽ゲーム装置に実装されてもよい。家庭用娯楽ゲーム装置の一例の記載が、米国特許出願１２／２２２，８７３号（米国特許出願公開第２００９／０１８１７３６号）に見出され得て、当該公報は、参考として本明細書中で援用される。この家庭用娯楽ゲーム装置は、例えば、標準的なテレビ、３Ｄテレビ、または、ホログラフィックテレビでプレイできる。

なお、本実施形態に係る画像処理プログラムは、ゲームプログラムである。本システムに係る画像処理プログラムは、しかしながら、ゲームプログラムに限定されない。本システムに係る画像処理プログラムは、所定のコンピュータシステムによって実行されることによって適用され得る。さらに、本実施形態の処理は、ネットワーク化された複数の機器による分散処理を受けてもよく、主な処理がサーバによって行われた後、その処理結果が端末に分散されるネットワークシステムによって、行われてもよく、いわゆるクラウドネットワークによって行われてもよい。

図１、２、３Ａ、３Ｂ、３Ｃおよび３Ｄは、それぞれ、ゲーム装置１０の外観の一例を示す平面図である。図１〜３Ｄに示すゲーム装置１０は、撮像部（カメラ）を備え、したがって、当該撮像部を用いて画像を撮像し、撮像画像を画面に表示し、当該撮像画像のデータを記憶可能である。さらに、ゲーム装置１０は、交換可能なメモリーカードに記憶されたゲームプログラムまたはサーバまたは他のゲーム装置からネットワークを介して受信したゲームプログラムを実行可能である。ゲーム装置１０は、例えば、仮想空間内に設定された仮想カメラによって撮像された画像等、コンピュータグラフィックス処理によって生成された画像を、画面に表示することも可能である。なお、本明細書では、カメラで画像データを取得する行為は、「撮像（ｃａｐｔｕｒｉｎｇ）」として記載し、撮像画像の画像データを記憶する行為を「撮影（ｐｈｏｔｏｇｒａｐｈｉｎｇ）」として記載する。

図１〜３Ｄに示すゲーム装置１０は、下側ハウジング１１と上側ハウジング２１とを備える。下側ハウジング１１および上側ハウジング２１は、ヒンジ構造によって、折り畳む様式で開閉可能（折り畳み可能）に連結されている。すなわち、上側ハウジング２１は、下側ハウジング１１に対して回転可能（枢動可能）に下側ハウジング１１に接続されている。よって、ゲーム装置１０は、以下の２つの形態、例えば図３Ａおよび３Ｃに見られるように上側ハウジング２１が下側ハウジング１１と密着する閉状態と、上側ハウジング２１が下側ハウジング１１に対して回転して密着状態が解放される状態（開状態）を取る。上側ハウジング２１は、図２に示すように、上側ハウジング２１と下側ハウジング１１が開状態で互いにほぼ平行になる位置にまで回転できる（図２参照）。

図１は、開いている（開状態の）ゲーム装置１０の一例を示す正面図である。下側ハウジング１１および上側ハウジング２１のそれぞれの平面形状は、長手方向（横方向（左右方向）：図１ではｘ方向）と横断方向（上下方向）とを有する、横長な長方形板状の形状である。下側ハウジング１１および上側ハウジング２１は、下側ハウジング１１の長手方向上側外端と上側ハウジング２１の長手方向下側外端で、ヒンジ構造によって、互いに回転可能に連結されている。通常、ユーザは、開状態でゲーム装置１０を使用する。ユーザは、閉状態でゲーム装置１０を保管する。さらに、上側ハウジング２１は、例えば、下側ハウジング１１と上側ハウジング２１の連結部分に発生する摩擦力によって、下側ハウジング１１と上側ハウジング２１とがなす所望の角度で静止状態を維持可能である。すなわち、ゲーム装置１０は、上側ハウジング２１を、下側ハウジング１１に対して所望の角度で静止できる。一般に、上側ハウジング２１に設けられた画面の視認性の観点から、上側ハウジング２１は、下側ハウジング１１に対して、直角または鈍角で開く。以下、ゲーム装置１０の閉状態において、上側ハウジング２１および下側ハウジング１１の各対向する面を、「内側面」または「主面」と呼ぶ。さらに、上側ハウジング２１および下側ハウジング１１の各内側面（主面）と反対の面を、「外側面」と呼ぶ。

突起部１１Ａが、下側ハウジング１１の上側長辺部に設けられ、各突起部１１Ａは、下側ハウジング１１の内側面（主面）１１Ｂに対して垂直（図１のｚ方向）に突出している。突起部（軸受け）２１Ａが、上側ハウジング２１の下側短辺部に設けられ、当該突起部２１Ａは、上側ハウジング２１の下側面から、上側ハウジング２１の下側面に対して垂直に突出している。突起部１１Ａおよび２１Ａ内には、例えば、回転軸（図示せず）が、収容され、一方の突起部１１Ａから突起部２１Ａを介して他方の突起部１１Ａへとｘ方向に延在している。上側ハウジング２１は、下側ハウジング１１に対して回転軸を中心に回転自在である。よって、下側ハウジング１１および上側ハウジング２１は、折り畳み可能な様式で連結している。

図１に示す下側ハウジング１１の内側面１１Ｂは、下側液晶表示装置（ＬＣＤ）１２と、タッチパネル１３と、操作ボタン１４Ａ〜１４Ｌと、アナログスティック１５と、第１ＬＥＤ１６Ａと、第４ＬＥＤ１６Ｄと、マイクロフォン用孔１８とを含む。

下側ＬＣＤ１２は、下側ハウジング１１に収容される。下側ＬＣＤ１２の平面形状は、横長の長方形であり、下側ＬＣＤ１２の長辺方向が下側ハウジング１１の長手方向（図１のｘ方向）に一致するように配置される。下側ＬＣＤ１２は、下側ハウジング１１の内側面（主面）の中心に設けられる。下側ＬＣＤ１２の画面は、下側ハウジング１１の内側面の開口を介して露出される。ゲーム装置１０は、用いられない場合、閉状態であり、それによって、下側ＬＣＤ１２の画面が汚れたり損傷したりするのが防止される。一例として、下側ＬＣＤ１２の画素数は、３２０ｄｏｔ×２４０ｄｏｔ（横×縦）である。後述する上側ＬＣＤ２２と異なり、下側ＬＣＤ１２は、平面的な様式で（立体視可能な様式ではなく）画像を表示する表示装置である。なお、ＬＣＤが、第１の実施形態では表示装置として用いられるが、エレクトロルミネッセンス（ＥＬ）を用いる表示装置等の他の任意の表示装置が用いられてもよい。さらに、所望の解像度を有する表示装置が、下側ＬＣＤ１２として用いられてもよい。

タッチパネル１３は、ゲーム装置１０の入力装置の１つである。タッチパネル１３は、下側ＬＣＤ１２の画面を覆うように装着されている。第１の実施形態では、タッチパネル１３は、抵抗膜方式タッチパネルでもよいが、それには限定されない。タッチパネルは、静電容量方式等、任意の加圧方式のタッチパネルであってもよい。第１の実施形態では、タッチパネル１３は、下側ＬＣＤ１２と解像度と同じ解像度（検出精度）を有する。しかしながら、タッチパネル１３および下側ＬＣＤ１２の解像度は、必ずしも一致している必要ははい。

操作ボタン１４Ａ〜１４Ｌは、それぞれ、所定の入力を提供するための入力装置である。操作ボタン１４Ａ〜１４Ｌのうち、十字ボタン１４Ａ（方向入力ボタン１４Ａ）、ボタン１４Ｂ、ボタン１４Ｃ、ボタン１４Ｄ、ボタン１４Ｅ、電源ボタン１４Ｆ、セレクトボタン１４Ｊ、ホームボタン１４Ｋおよびスタートボタン１４Ｌは、下側ハウジング１１の内側面（主面）に設けられる。

十字ボタン１４Ａは、十字形状であり、かつ、少なくとも上方向、下方向、左方向および右方向のそれぞれを示すボタンを備える。十字ボタン１４Ａは、下側ＬＣＤ１２の左の領域の下側領域に設けられる。十字ボタン１４Ａは、下側ハウジング１１を保持している左手の親指によって操作されるように配置される。

ボタン１４Ｂ、ボタン１４Ｃ、ボタン１４Ｄおよびボタン１４Ｅは、下側ＬＣＤ１２の右の領域の上側部分に十字状に配置される。ボタン１４Ｂ、ボタン１４Ｃ、ボタン１４Ｄおよびボタン１４Ｅは、下側ハウジング１１を保持している右手の親指が自然に置かれる箇所に配置される。電源ボタン１４Ｆは、下側ＬＣＤ１２の右の領域の下側部分に配置される。

セレクトボタン１４Ｊ、ホームボタン１４Ｋおよびスタートボタン１４Ｌは、下側ＬＣＤ１２の下側領域に設けられる。ボタン１４Ａ〜１４Ｅ、セレクトボタン１４Ｊ、ホームボタン１４Ｋおよびスタートボタン１４Ｌは、ゲーム装置１０によって実行されるプログラムに従って、それぞれ機能が適宜割り当てられる。十字ボタン１４Ａは、例えば、ゲーム中でのキャラクタの選択操作および移動操作のために用いられる。操作ボタン１４Ｂ〜１４Ｅは、例えば、決定操作または取消操作のために用いられる。電源ボタン１４Ｆは、ゲーム装置１０の電源をオン／オフするために用いられ得る。別の実施形態では、電源ボタン１４Ｆは、省電力を目的とするスリープモードになるようにゲーム装置１０に指示するために用いられ得る。

アナログスティック１５は方向を指示するための装置である。アナログスティック１５は、下側ハウジング１１の内側面（主面）の、下側ＬＣＤ１２の左の領域の上側部分に設けられる。すなわち、アナログスティック１５は、十字ボタン１４Ａの上側に設けられる。アナログスティック１５は、下側ハウジング１１を保持している左手の親指によって操作されるように配置される。上側領域にアナログスティック１５を設けることによって、アナログスティック１５は、下側ハウジング１１を保持しているユーザの左手の親指が自然に置かれる位置に配置されることになる。十字ボタン１４Ａは、下側ハウジング１１を保持している左手の親指がわずかに下に移動した位置に配置される。これによって、ユーザは、下側ハウジング１１を保持している左手の親指を上下に動かすことによって、アナログスティック１５と十字ボタン１４Ａを操作できるようになる。アナログスティック１５のキートップは、下側ハウジング１１の内側面に平行にスライドするように構成される。アナログスティック１５は、ゲーム装置１０によって実行されるプログラムに従って機能する。例えば、ゲーム装置１０が、所定のオブジェクトが３次元仮想空間に登場するゲームを実行する場合、アナログスティック１５は、３次元仮想空間内で当該所定のオブジェクトを移動させるための入力装置として機能する。この場合、所定のオブジェクトは、アナログスティック１５のキートップがスライドした方向に動かされる。なお、アナログスティック１５は、上方向、下方向、右方向、左方向および斜め方向のいずれかの方向に所定量だけ傾倒されることによって、アナログ入力を提供可能な部品であってもよい。

なお、４つのボタン、つまり、ボタン１４Ｂ、ボタン１４Ｃ、ボタン１４Ｄおよびボタン１４Ｅならびにアナログスティック１５は、下側ＬＣＤ１２に対して互いに対称となるように配置される。これによって、例えば、左利きの人が、ゲームプログラムによって、これら４つのボタン、つまり、ボタン１４Ｂ、ボタン１４Ｃ、ボタン１４Ｄおよびボタン１４Ｅを用いて方向指示入力を提供できるようにもなる。

第１ＬＥＤ１６Ａ（図１）は、ユーザに、ゲーム装置１０の電源のＯＮ／ＯＦＦ状況を通知する。第１ＬＥＤ１６Ａは、下側ハウジング１１の内側面（主面）と下側ハウジング１１の下側面に共有される端部の右部分に設けられる。これによって、ユーザは、ゲーム装置１０の開／閉状態に関わらず、第１ＬＥＤ１６Ａが点灯しているか否かを見ることができる。第４ＬＥＤ１６Ｄ（図１）は、ユーザに、ゲーム装置１０が充電中であることを通知し、第１ＬＥＤ１６Ａの近傍に配置される。

マイクロフォン用孔１８は、音声入力装置としてゲーム装置１０に内蔵されるマイクロフォン用の孔ある。内蔵マイクロフォンおよびマイクロフォン用孔１８は、下側ハウジング１１の内側面（主面）上の電源ボタン１４Ｆの下側に設けられる。

下側ハウジング１１の上側面は、タッチペン２８用の開口１７（図１および３Ｄに示す点線）を含む。開口１７は、タッチパネル１３に対する操作を行うために用いられるタッチペン２８を収容可能である。なお、通常、入力が、タッチペン２８を用いて、タッチパネル１３に提供される。しかしながら、タッチパネル１３は、タッチペン２８だけでなくユーザの指によっても操作され得る。

下側ハウジング１１の上側面は、ゲームプログラムを記憶している外部メモリ４５が挿入される挿入口１１Ｄ（図１および３Ｄに示す点線）を含む。挿入口１１Ｄ内には、コネクタ（図示せず）が、取り外し可能な様式でゲーム装置１０と外部メモリ４５とを電気的に接続するために設けられる。外部メモリ４５のゲーム装置１０への接続によって、内部回路に含まれるプロセッサが、所定のゲームプログラムを実行できる。なお、コネクタおよび挿入口１１Ｄは、下側ハウジング１１の他の面（例えば、右側面）に設けられてもよい。

図１に示す上側ハウジング２１の内側面２１Ｂは、スピーカ用孔２１Ｅと、上側ＬＣＤ２２と、内側撮像部２４と、３Ｄ調整スイッチ２５と、３Ｄインジケータ２６とを含む。内側撮像部２４は、第１撮像装置の一例である。

上側ＬＣＤ２２は、立体視可能な画像を表示可能な表示装置である。上側ＬＣＤ２２は、略同一の表示領域を用いて、左眼用画像と右眼用画像を表示可能である。具体的には、上側ＬＣＤ２２は、左眼用画像と右眼用画像が所定単位で（例えば、１列ずつ）横方向に交互に表示される方式を用いる表示装置である。なお、上側ＬＣＤ２２は、左眼用画像と右眼用画像が、所定時間、交互に表示される方式を用いる表示装置であってもよい。さらに、上側ＬＣＤ２２は、裸眼で立体視可能な画像を表示可能な表示装置である。この場合、レンチキュラー方式の表示装置またはパララックスバリア方式の表示装置が、横方向に交互に表示される左眼用画像と右眼用画像が左眼と右眼で別々に視認され得るように、用いられる。第１の実施形態では、上側ＬＣＤ２２は、パララックスバリア方式の表示装置である。上側ＬＣＤ２２は、右眼用画像と左眼用画像を用いて、裸眼で立体視可能な画像（立体画像）を表示する。すなわち、上側ＬＣＤ２２は、視差バリアを用いて、ユーザに、ユーザの左眼で左眼用画像をユーザの右眼で右眼用画像を視認させる。これによって、立体感をユーザに与える立体画像（立体視可能な画像）を表示可能となる。さらに、上側ＬＣＤ２２は、上記視差バリアを無効にすることが可能である。視差バリアを無効にする場合、上側ＬＣＤ２２は、画像を平面的な様式で表示可能である（上側ＬＣＤ２２は、上記の立体視可能な画像とは反対に、平面視画像を表示可能である。これは、同一の表示画像が左眼と右眼の両方で視認され得る表示モードである。）。よって、上側ＬＣＤ２２は、立体視可能な画像を表示するための立体表示モードと画像を平面的な様式で表示する（平面視画像を表示する）ための平面表示モードとの間で切り替え可能な表示装置である。表示モードの切り替えは、後述の３Ｄ調整スイッチ２５によって行われる。

上側ＬＣＤ２２は、上側ハウジング２１に収容される。上側ＬＣＤ２２の平面形状は、横長の長方形であり、上側ＬＣＤ２２の長辺方向が上側ハウジング２１の長辺方向に一致するように、上側ハウジング２１の中心に配置される。一例として、上側ＬＣＤ２２の画面の面積は、下側ＬＣＤ１２より大きく設定される。具体的には、上側ＬＣＤ２２の画面は、下側ＬＣＤ１２の画面より横方向に長く設定される。すなわち、上側ＬＣＤ２２の画面のアスペクト比における幅の割合は、下側ＬＣＤ１２より大きく設定される。上側ＬＣＤ２２の画面は、上側ハウジング２１の内側面（主面）２１Ｂに設けられ、上側ハウジング２１の内側面の開口を介して露出される。さらに、上側ハウジング２１の内側面は、透明な画面カバー２７によって覆われる。画面カバー２７は、上側ＬＣＤ２２の画面を保護し、上側ＬＣＤ２２と上側ハウジング２１の内側面を一体化させ、それによって、単一性をもたらす。一例として、上側ＬＣＤ２２の画素数は、８００ｄｏｔ×２４０ｄｏｔ（横×縦）である。なお、ＬＣＤが、第１の実施形態では上側ＬＣＤ２２として用いられる。しかしながら、上側ＬＣＤ２２は、これには限定されず、ＥＬを用いる表示装置等が用いられてもよい。さらに、任意の解像度を有する表示装置が、上側ＬＣＤ２２として用いられてもよい。

スピーカ用孔２１Ｅは、ゲーム装置１０の音声出力装置として機能するスピーカ４４からの音声が出力される孔である。スピーカ用孔２１Ｅは、上側ＬＣＤに対して対称となるように配置される。後述のスピーカ４４からの音声は、スピーカ用孔２１Ｅを通って出力される。

内側撮像部２４は、撮像方向を、上側ハウジング２１の内側面２１Ｂの内側法線方向と同じ方向とする撮像部として機能する。内側撮像部２４は、所定の解像度を有する撮像素子とレンズとを備える。レンズは、ズーム機構を有するものでもよい。

内側撮像部２４は、上側ハウジング２１の内側面２１Ｂ上で、上側ＬＣＤ２２の画面の上端の上側で、かつ、左右方向の上側ハウジング２１の中心に（上側ハウジング２１（上側ＬＣＤ２２の画面）を左右に２等分する線上に）配置される。内側撮像部２４をそのように配置することによって、ユーザが上側ＬＣＤ２２を正面から見たとき、内側撮像部２４が、ユーザの顔を正面から撮像可能となる。左外側撮像部２３ａと右外側撮像部２３ｂについては、後述する。

３Ｄ調整スイッチ２５は、スライドスイッチであり、上記のように上側ＬＣＤ２２の表示モードを切り替えるために用いられる。また、３Ｄ調整スイッチ２５は、上側ＬＣＤ２２に表示された立体視可能な画像（立体画像）の立体感を調整するために用いられる。３Ｄ調整スイッチ２５は、ゲーム装置１０の開／閉状態に関わらずユーザに見えるように、上側ハウジング２１の内側面と右側面によって共有される端部に設けられる。３Ｄ調整スイッチ２５は、所定の方向（例えば、上下方向）の任意の位置にスライド可能なスライダを備え、上側ＬＣＤ２２の表示モードが、当該スライダの位置に応じて設定される。

例えば、３Ｄ調整スイッチ２５のスライダが最下点位置に位置する場合、上側ＬＣＤ２２は平面表示モードに設定され、平面画像が上側ＬＣＤ２２の画面に表示される。なお、上側ＬＣＤ２２が立体表示モードに設定され、よって平面表示を行う間、同一の画像が、左眼用画像と右眼用画像として用いられてもよい。他方、スライダが、最下点位置より上に位置する場合、上側ＬＣＤ２２は立体表示モードに設定される。この場合、立体視可能な画像が、上側ＬＣＤ２２の画面に表示される。スライダが、最下点位置より上に位置する場合、立体画像の視認性が、スライダの位置に応じて調整される。具体的には、右眼用画像の位置および左眼用画像位置の横方向のずれ量が、スライダの位置に応じて、調整される。

３Ｄインジケータ２６は、上側ＬＣＤ２２が立体表示モードであるか否かを示す。例えば、３Ｄインジケータ２６は、ＬＥＤであり、上側ＬＣＤ２２の立体表示モードが有効の場合に点灯する。３Ｄインジケータ２６は、上側ＬＣＤ２２の画面の近傍の上側ハウジング２１の内側面２１Ｂに配置される。したがって、ユーザが上側ＬＣＤ２２の画面を正面から見る場合、ユーザは、３Ｄインジケータ２６を容易に視認可能である。これによって、ユーザは、上側ＬＣＤ２２の画面を見ている際であっても、上側ＬＣＤ２２の表示モードを容易に確認できる。

図２は、開状態のゲーム装置１０の一例を示す右側面図である。下側ハウジング１１の右側面は、第２ＬＥＤ１６Ｂと、無線スイッチ１９と、Ｒボタン１４Ｈとを含む。第２ＬＥＤ１６Ｂは、ユーザに、ゲーム装置１０の無線通信の確立状況を通知する。ゲーム装置１０は、他の機器と無線通信可能であり、第２ＬＥＤ１６Ｂは、ゲーム装置１０と他の機器との間で無線通信が確立している場合に点灯する。ゲーム装置１０は、例えば、ＩＥＥＥ８０２．１１．ｂ／ｇの規格に準拠した方式により、無線ＬＡＮとの接続を確立する機能を有する。無線スイッチ１９は、この無線通信の機能を有効／無効にする。Ｒボタン１４Ｈについては、後述する。

図３Ａは、閉まっている（閉状態の）ゲーム装置１０の一例を示す左側面図である。図３Ａに示す下側ハウジング１１の左側面は、開閉可能なカバー部１１Ｃと、Ｌボタン１４Ｈと、音量ボタン１４Ｉとを含む。音量ボタン１４Ｉは、ゲーム装置１０のスピーカの音量を調整するために用いられる。

カバー部１１Ｃ内には、コネクタ（図示せず）が、ゲーム装置１０とデータ保存用外部メモリ４６とを電気的に接続するために設けられる（図１参照）。データ保存用外部メモリ４６は、コネクタに取り外し可能に装着される。データ保存用外部メモリ４６は、例えば、ゲーム装置１０によって撮像された画像のデータを記憶（保存）するために用いられる。なお、コネクタとカバー部１１Ｃは、下側ハウジング１１の右側面に設けられてもよい。Ｌボタン１４Ｇについては、後述する。

図３Ｂは、閉状態のゲーム装置１０の一例を示す正面図である。図３Ｂに示す上側ハウジング２１の外側面は、左外側撮像部２３ａと、右外側撮像部２３ｂと、第３ＬＥＤ１６Ｃとを含む。

左外側撮像部２３ａおよび右外側撮像部２３ｂはそれぞれ、所定の共通の解像度を有する撮像素子（例えば、ＣＣＤイメージセンサまたはＣＭＯＳイメージセンサ）とレンズとを備える。レンズは、ズーム機構を有するものでもよい。左外側撮像部２３ａおよび右外側撮像部２３ｂの撮像方向（カメラの光軸）は、それぞれ、外側面２１Ｄの外側法線方向と同じ方向である。すなわち、左外側撮像部２３ａの撮像方向および右外側撮像部２３ｂの撮像方向は、互いに平行である。以下、左外側撮像部２３ａと右外側撮像部２３ｂを、総称して「外側撮像部２３」と呼ぶ。外側撮像部２３は、第２撮像装置の一例である。

外側撮像部２３に含まれる左外側撮像部２３ａおよび右外側撮像部２３ｂは、上側ＬＣＤ２２の画面の横方向に沿って配置される。すなわち、左外側撮像部２３ａおよび右外側撮像部２３ｂは、左外側撮像部２３ａと右外側撮像部２３ｂとを結ぶ直線が上側ＬＣＤ２２の画面の横方向に沿って位置するように、配置される。ユーザが、上側ハウジング２１を下側ハウジング１１に対して所定の角度（例えば、９０°）に枢動させ、上側ＬＣＤ２２の画面を正面から見る場合、左外側撮像部２３ａは、画面を見ているユーザの左側に位置し、右外側撮像部２３ｂは、ユーザの右側に位置する（図１参照）。左外側撮像部２３ａと右外側撮像部２３ｂとの距離は、人の両眼の距離に対応するように設定され、例えば、３０ｍｍ〜７０ｍｍの範囲に設定されてもよい。但し、左外側撮像部２３ａと右外側撮像部２３ｂとの距離は、この範囲に限定されない。なお、第１の実施形態では、左外側撮像部２３ａおよび右外側撮像部２３ｂは、ハウジング２１に固定され、したがって、撮像方向は変更され得ない。

左外側撮像部２３ａおよび右外側撮像部２３ｂは、上側ＬＣＤ２２（上側ハウジング２１）を左右に２等分する線に対して対称になるように配置される。さらに、左外側撮像部２３ａおよび右外側撮像部２３ｂは、上側ハウジング２１が開いた状態において、上側ハウジング２１の上側部分に、かつ、上側ＬＣＤ２２の画面の上端より上の部分の裏側に、設けられる（図１参照）。すなわち、左外側撮像部２３ａおよび右外側撮像部２３ｂは、上側ハウジング２１の外側面に配置され、もし上側ＬＣＤ２２が上側ハウジング２１の外側面上で突出する場合、突出する上側ＬＣＤ２２の画面の上端より上に配置される。

よって、外側撮像部２３の左外側撮像部２３ａおよび右外側撮像部２３ｂは、横断方向に延在する上側ＬＣＤ２２の中央線に対して対称になるように配置される。これによって、ユーザが上側ＬＣＤ２２を正面から見る場合、外側撮像部２３の撮像方向がユーザの右眼と左眼の各視線の方向に一致し得る。また、外側撮像部２３は、上側ＬＣＤ２２の画面の上端よりも上の部分の裏側に配置され、したがって、外側撮像部２３および上側ＬＣＤ２２は、上側ハウジング２１の内部で、互いに干渉しない。さらに、図３Ｂの点線によって示すように、上側ハウジング２１の内側面に設けられた内側撮像部２４が、上側ハウジング２１の外側面上で突出する場合、左外側撮像部２３ａおよび右外側撮像部２３ｂは、突出する内側撮像部２４に対して対称になるように配置される。これによって、外側撮像部２３が上側ＬＣＤ２２の画面の裏側に配置される場合、または外側撮像部２３が内側撮像部２４の裏側に配置される場合と比較して、上側ハウジング２１の厚さを低減できる。

左外側撮像部２３ａおよび右外側撮像部２３ｂは、ゲーム装置１０に実行されるプログラムによって、ステレオカメラとして用いられ得る。代替的に、プログラムによって、外側撮像部２３が非ステレオカメラとしても用いられ得るように、２つの外側撮像部（左外側撮像部２３ａと右外側撮像部２３ｂ）のいずれか一方が、単独で用いられてもよい。プログラムが、左外側撮像部２３ａおよび右外側撮像部２３ｂをステレオカメラとして機能させるために実行される場合、左外側撮像部２３ａが、ユーザの左眼で視認される左眼用画像を撮像し、右外側撮像部２３ｂが、ユーザの右眼で視認される右眼用画像を撮像する。さらに代替的に、プログラムによって、２つの外側撮像部（左外側撮像部２３ａおよび右外側撮像部２３ｂ）によって撮像された画像が、合成されてもよく、またお互いを補完するように用いられてもよく、それによって、広がった撮像範囲で撮像を行われ得る。さらに代替的に、視差を有する左眼用画像と右眼用画像が、外側撮像部２３ａおよび２３ｂの一方を用いて撮像された１つの画像から生成されてもよく、擬立体画像が、まるで２つのカメラから撮像されたかのごとく生成され得る。擬立体画像を生成するために、仮想カメラ間の距離を適宜設定可能である。

第３ＬＥＤ１６Ｃは、外側撮像部２３が動作中の場合、点灯し、外側撮像部２３が動作中であることを通知する。第３ＬＥＤ１６Ｃは、上側ハウジング２１の外側面上の外側撮像部２３近傍に設けられる。

図３Ｃは、閉状態のゲーム装置１０の一例を示す右側面図である。図３Ｄは、閉状態のゲーム装置１０の一例を示す背面図である。

Ｌボタン１４ＧおよびＲボタン１４Ｈは、図３Ｄに示す下側ハウジング１１の上側面に設けられる。Ｌボタン１４Ｇは、下側ハウジング１１の上側面の左端部に設けられ、Ｒボタン１４Ｈは、下側ハウジング１１の上側面の右端部に設けられる。Ｌボタン１４ＧおよびＲボタン１４Ｈは、ゲーム装置１０によって実行されるプログラムに従って、それぞれ機能が適宜割り当てられる。例えば、Ｌボタン１４ＧおよびＲボタン１４Ｈは、上記の撮像部のシャッターボタン（撮像指示ボタン）として機能する。

なお、図示しないが、ゲーム装置１０の電源として機能する充電式電池が、下側ハウジング１１に収容され、当該電池は、下側ハウジング１１の側面（例えば、上側面）に設けられた端子を介して充電され得ることに留意すべきである。

図４は、ゲーム装置１０の内部構成の一例を示すブロック図である。ゲーム装置１０は、上記の各部品に加えて、情報処理部３１、メインメモリ３２、外部メモリインターフェイス（外部メモリＩ／Ｆ）３３、データ保存用外部メモリＩ／Ｆ３４、データ保存用内部メモリ３５、無線通信モジュール３６、ローカル通信モジュール３７、リアルタイムクロック（ＲＴＣ）３８、加速度センサ３９、角速度センサ４０、電源回路４１、インターフェース回路（Ｉ／Ｆ回路）４２等の電子部品を備えている。これらの電子部品は、電子回路基板上に実装され、下側ハウジング１１に収容されているが、上側ハウジング２１に収容されてもよい。

情報処理部３１は、所定のプログラムを実行する中央処理装置（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ：ＣＰＵ）３１１、画像処理を行うグラフィックスプロセッシングユニット（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ：ＧＰＵ）３１２等を含む情報処理手段である。第１の実施形態では、所定のプログラムが、ゲーム装置１０に含まれるメモリ（例えば、外部メモリＩ／Ｆ３３に接続された外部メモリ４５、またはデータ保存用内部メモリ３５）に記憶されている。情報処理部３１のＣＰＵ３１１は、この所定のプログラムを実行することによって、後述の画像処理またはゲーム処理を行う。なお、情報処理部３１のＣＰＵ３１１によって実行されるプログラムは、他の機器から、当該他の機器との通信によって、取得されてもよい。情報処理部３１は、さらにビデオＲＡＭ（ｖｉｄｅｏ ＲＡＭ：ＶＲＡＭ）３１３を含む。情報処理部３１のＧＰＵ３１２は、情報処理部３１のＣＰＵ３１１からの命令に応じて画像を生成し、ＶＲＡＭ３１３に当該画像を描画する。情報処理部３１のＧＰＵ３１２は、ＶＲＡＭ３１３に描画された画像を上側ＬＣＤ２２および／または下側ＬＣＤ１２に出力し、当該画像が上側ＬＣＤ２２および／または下側ＬＣＤ１２に表示される。

情報処理部３１には、メインメモリ３２、外部メモリＩ／Ｆ３３、データ保存用外部メモリＩ／Ｆ３４およびデータ保存用内部メモリ３５が接続される。外部メモリＩ／Ｆ３３は、外部メモリ４５との取り外し可能な接続を確立するためのインターフェースである。データ保存用外部メモリＩ／Ｆ３４は、データ保存用外部メモリ４６との取り外し可能な接続を確立するためのインターフェースである。

メインメモリ３２は、情報処理部３１（ＣＰＵ３１１）のワーク領域またはバッファ領域として用いられる揮発性の記憶手段である。すなわち、メインメモリ３２は、画像処理またはゲーム処理で用いられる各種データを一時的に記憶したり、ゲーム装置１０の外部（外部メモリ４５、他の機器等）から取得されるプログラムを一時的に記憶したりする。第１の実施形態では、メインメモリ３２は、例えば、疑似ＳＲＡＭ（ｐｓｅｕｄｏ ＳＲＡＭ：ＰＳＲＡＭ）である。

外部メモリ４５は、情報処理部３１によって実行されるプログラムを記憶するための不揮発性の記憶手段である。外部メモリ４５は、例えば読み取り専用の半導体メモリで構成される。外部メモリ４５が外部メモリＩ／Ｆ３３に接続されると、情報処理部３１は、外部メモリ４５に記憶されたプログラムを読み込むことができる。情報処理部３１に読み込まれたプログラムの実行に従って、所定の処理が行われる。データ保存用外部メモリ４６は、不揮発性の読み書き可能なメモリ（例えば、ＮＡＮＤ型フラッシュメモリ）で構成され、所定のデータを記憶するために用いられる。例えば、データ保存用外部メモリ４６は、外側撮像部２３で撮像された画像および／または他の機器で撮像された画像を記憶する。データ保存用外部メモリ４６がデータ保存用外部メモリＩ／Ｆ３４に接続されると、情報処理部３１は、データ保存用外部メモリ４６に記憶された画像を読み込み、当該画像が、上側ＬＣＤ２２および／または下側ＬＣＤ１２に表示され得る。

データ保存用内部メモリ３５は、読み書き可能な不揮発性メモリ（例えば、ＮＡＮＤ型フラッシュメモリ）で構成され、所定のデータを記憶するために用いられる。例えば、データ保存用内部メモリ３５は、無線通信モジュール３６を介した無線通信によってダウンロードされたデータおよび／またはプログラムを記憶する。

無線通信モジュール３６は、例えばＩＥＥＥ８０２．１１．ｂ／ｇの規格に準拠した方式により、無線ＬＡＮへの接続を確立する機能を有する。さらに、ローカル通信モジュール３７は、所定の通信方式（例えば、赤外線通信）により同種の他のゲーム装置と無線通信を行う機能を有する。無線通信モジュール３６およびローカル通信モジュール３７は、情報処理部３１に接続される。情報処理部３１は、無線通信モジュール３６を用いてインターネットを介して他の機器との間でデータを送受信したり、ローカル通信モジュール３７を用いて同種の他のゲーム装置との間でデータを送受信したりすることができる。

加速度センサ３９は、情報処理部３１に接続される。加速度センサ３９は、それぞれ３軸（本実施形態では、ｘｙｚ軸）方向に沿った直線方向の加速度（直線加速度）の大きさを検出できる。加速度センサ３９は、例えば下側ハウジング１１内に設けられる。図１に示すように、下側ハウジング１１の長辺方向は、ｘ軸方向として定義され、下側ハウジング１１の短辺方向は、ｙ軸方向として定義され、下側ハウジング１１の内側面（主面）に垂直な方向は、ｚ軸方向として定義される。加速度センサ３９は、よって、各軸方向に生じる直線加速度の大きさを検出する。なお、加速度センサ３９は、例えば、静電容量式の加速度センサであるが、他の方式の加速度センサであってもよい。さらに、加速度センサ３９は、１軸方向の加速度または２軸方向の加速度を検出するための加速度センサであってもよい。情報処理部３１は、加速度センサ３９によって検出された加速度を示すデータ（加速度データ）を受信して、ゲーム装置１０の向きおよび動きを計算する。

角速度センサ４０は、情報処理部３１に接続される。角速度センサ４０は、ゲーム装置１０の３軸（本実施例では、ｘｙｚ軸）周りに生じる角速度をそれぞれ検出し、検出した角速度を示すデータ（角速度データ）を情報処理部３１へ出力する。角速度センサ４０は、例えば下側ハウジング１１内に設けられる。情報処理部３１は、角速度センサ４０から出力された角速度データを受信して、ゲーム装置１０の向きおよび動きを計算する。

ＲＴＣ３８および電源回路４１は、情報処理部３１に接続される。ＲＴＣ３８は、時間をカウントして、カウントした時間を情報処理部３１に出力する。情報処理部３１は、ＲＴＣ３８によってカウントされた時間に基づき現在時刻（日付）を計算する。電源回路４１は、ゲーム装置１０の電源（下側ハウジング１１に収容される上記充電式電池）からの電力を制御し、ゲーム装置１０の各部品に電力を供給する。

Ｉ／Ｆ回路４２は、情報処理部３１に接続される。Ｉ／Ｆ回路４２には、マイク４３、スピーカ４４、およびタッチパネル１３が接続される。具体的には、Ｉ／Ｆ回路４２には、図示しないアンプを介してスピーカ４４が接続される。マイク４３は、ユーザからの音声を検知して音声信号をＩ／Ｆ回路４２に出力する。アンプは、Ｉ／Ｆ回路４２からの音声信号を増幅し、音声をスピーカ４４から出力させる。Ｉ／Ｆ回路４２は、マイク４３およびスピーカ４４（アンプ）を制御する音声制御回路と、タッチパネル１３を制御するタッチパネル制御回路とを含む。例えば、音声制御回路は、音声信号に対してＡ／Ｄ変換およびＤ／Ａ変換を行ったり、音声信号を所定の形式の音声データに変換したりする。タッチパネル制御回路は、タッチパネル１３からの信号に基づいて、所定の形式のタッチ位置データを生成し、当該タッチ位置データを情報処理部３１に出力する。タッチ位置データは、タッチパネル１３の入力面における入力が提供された位置（タッチ位置）の座標を示すデータである。なお、タッチパネル制御回路は、タッチパネル１３からの信号の読み込みと、タッチ位置データの生成とを、所定時間に１回行う。情報処理部３１は、タッチ位置データを取得することにより、タッチパネル１３において入力が提供されたタッチ位置を認識する。

操作ボタン１４は、上記の操作ボタン１４Ａ〜１４Ｌを含み、情報処理部３１に接続される。操作データが、操作ボタン１４から情報処理部３１へ出力され、当該操作データは、各操作ボタン１４Ａ〜１４Ｉに提供された入力の状況（操作ボタン１４Ａ〜１４Ｉが押下されたか否か）を示すものである。情報処理部３１は、操作ボタン１４から操作データを取得することによって、操作ボタン１４に提供された入力に応じた処理を行う。

下側ＬＣＤ１２および上側ＬＣＤ２２は、情報処理部３１に接続される。下側ＬＣＤ１２および上側ＬＣＤ２２は、それぞれ、情報処理部３１（ＧＰＵ３１２）からの指示に従って画像を表示する。第１の実施形態では、情報処理部３１は、手描き画像入力操作のための画像を下側ＬＣＤ１２に表示させ、外側撮像部２３および内側撮像部２４のいずれか一方から取得された画像を上側ＬＣＤ２２に表示させる。すなわち、例えば、情報処理部３１は、例えば、内側撮像部２４によって撮像された右眼用画像および左眼用画像を用いて、立体画像（立体視可能な画像）を上側ＬＣＤ２２に表示させ、または外側撮像部２３によって撮像された右眼用画像および左眼用画像の一方を用いて、平面画像を上側ＬＣＤ２２に表示させる。

具体的には、情報処理部３１は、上側ＬＣＤ２２のＬＣＤコントローラ（図示せず）に接続され、当該ＬＣＤコントローラに対して視差バリアのＯＮ／ＯＦＦを設定する。上側ＬＣＤ２２において視差バリアがＯＮになっている場合、情報処理部３１のＶＲＡＭ３１３に記憶された（外側撮像部２３によって撮像された）右眼用画像および左眼用画像が、上側ＬＣＤ２２に出力される。より具体的には、ＬＣＤコントローラは、縦方向に１ライン分の右眼用画像の画素データの読み出しと、縦方向に１ライン分の左眼用画像の画素データの読み出しとを交互に繰り返すことによって、ＶＲＡＭ３１３から右眼用画像および左眼用画像を読み出す。これにより、右眼用画像および左眼用画像は、それぞれ、縦方向に並んだ１ラインの画素を各有する短冊状画像に分割され、分割された右眼用短冊状画像および左眼用短冊状画像が交互に配置された画像が、上側ＬＣＤ２２の画面に表示される。ユーザが上側ＬＣＤ２２の視差バリアを介して当該画像を視認することによって、ユーザの右眼に右眼用画像が、ユーザの左眼に左眼用画像が視認される。これにより、立体視可能な画像が、上側ＬＣＤ２２の画面に表示される。

外側撮像部２３および内側撮像部２４は、情報処理部３１に接続される。外側撮像部２３および内側撮像部２４は、それぞれ、情報処理部３１からの指示に従って画像を撮像し、当該撮像画像のデータを情報処理部３１に出力する。第１の実施形態では、情報処理部３１は、外側撮像部２３および内側撮像部２４のいずれか一方に、画像を撮像する指示を与え、当該指示を受けた撮像部は、画像を撮像し、当該撮像画像のデータを情報処理部３１に送信する。具体的には、ユーザは、タッチパネル１３および操作ボタン１４を用いた操作によって、使用する撮像部を選択する。情報処理部３１（ＣＰＵ３１１）は、撮像部が選択されたことを検出し、そして、外側撮像部２３および内側撮像部２４のうちの選択された方に、画像を撮像する指示を与える。

情報処理部３１（ＣＰＵ３１１）からの指示によって開始される際、外側撮像部２３および内側撮像部２４は、例えば毎秒６０画像の速度で、撮像を行う。外側撮像部２３および内側撮像部２４によって撮像された撮像画像は、情報処理部３１に順次送信され、情報処理部３１（ＧＰＵ３１２）によって、上側ＬＣＤ２２または下側ＬＣＤ１２に表示される。情報処理部３１に出力される際、撮像画像は、ＶＲＡＭ３１３に記憶され、上側ＬＣＤ２２または下側ＬＣＤ１２に出力され、そして、所定の時間に削除される。よって、画像が、例えば毎秒６０画像の速度で撮像され、当該撮像画像が表示されることによって、ゲーム装置１０は、外側撮像部２３および内側撮像部２４の撮像範囲の視界をリアルタイムで下側ＬＣＤ１２または上側ＬＣＤ２２に表示できる。

３Ｄ調整スイッチ２５は、情報処理部３１に接続される。３Ｄ調整スイッチ２５は、スライダの位置に応じた電気信号を、情報処理部３１に送信する。

３Ｄインジケータ２６は、情報処理部３１に接続される。情報処理部３１は、３Ｄインジケータ２６を点灯するか否かを制御する。例えば、上側ＬＣＤ２２が立体表示モードである場合、情報処理部３１は、３Ｄインジケータ２６を点灯させる。

図５Ａは、立体ディスプレイにおけるオブジェクトの制御のためのアプリケーションフローチャートの一例を示す。このアプリケーションは、例えばゲーム装置１０を用いて実行されてもよい。このシステムは、Ｓ１を開始して、そこでは、立体ディスプレイにおけるオブジェクトの位置が測定される。本実施形態に限定はされないが、立体ディスプレイにおけるオブジェクトの位置は、３Ｄ座標（すなわち、「ＸＹＺ」）値によって、表され得る。

一旦、上記システムがそのオブジェクトの位置を測定すると、当該システムはＳ２に進み、そこで、ディスプレイからのオブジェクトまでの認識された視距離の測定値を測定する。本実施形態に限定されないが、そのシステムは、３次元実空間を表現する３Ｄ装置空間でのオブジェクトの認識された位置を測定することによって、立体ディスプレイからオブジェクトまでの視距離の測定値を測定する。これより、そのディスプレからオブジェクトの認識された視距離（すなわち、これは３次元実空間における実距離に対応する）が測定される。その認識された位置は、ディスプレイの裏側または前側のいずれかとなり得て、対応する負または正の距離となり得ると理解されるべきである。

立体ディスプレイからオブジェクトまでの距離を測定後、そのシステムはＳ３に進み、そこで、そのオブジェクトが閾値を超えているか否かを判定する。別の実施形態では、オブジェクトは、その閾値と同じかまたはそれを超え得る。このシステムは、ステップＳ１〜Ｓ３を、例えば各生成画像（すなわち、各生成フレーム）に対して行ってもよい。オブジェクトが閾値を超えているか否かを判定する基準のうち幾つかを、図５の説明で以下にさらに詳しく説明する。

上記システムは、例えば、立体ディスプレイの前側におけるオブジェクトの距離が最大限度に達したか否かを判定し、当該最大限度は、例えばオブジェクトの種類および／またはゲームプレイの状態に基づいて可変である。この最大限度の距離の一例は、１〜３センチメートル（ｃｍ）の範囲の値である。例えば、仮に、可変の最大限度が２ｃｍに設定された場合、そのオブジェクトは、立体ディスプレイの前側に２ｃｍを超える距離を有しているとして（３次元実空間に対応する）３Ｄ装置空間で認識されると、（ステップＳ４で以下に説明するように）遷移処理を受け始める。

そのオブジェクトが閾値を超えていない場合、上記システムはＳ１〜Ｓ３を繰り返し、立体ディスプレイからそのオブジェクトまでの認識された距離を測定する。そのオブジェクトが閾値を超えている場合、当該システムはＳ４に進み、そこで、そのオブジェクトが３Ｄ立体ディスプレイで遷移処理を受ける。Ｓ４のさらなる詳細を、図５Ｃの説明で、以下に説明する。図５ＡのＳ１〜Ｓ４に示された処理は、例示的な実施形態では、当該システムがゲーム環境を表示するフレーム毎に、生じると理解されるべきである。

図５Ｂは、立体ディスプレイからオブジェクトまでで認識された距離を測定する場合に、そのオブジェクトが閾値を超えているか否かを判定するためのアプリケーションフローチャートの一例を示す。このシステムは、Ｓ３−１で始まり、そこでは、オブジェクトの種類を判定する。この例の一覧には限定されないが、そのオブジェクトは、プレイヤキャラクタ、敵キャラクタ、協力するプレイヤキャラクタ、または視認できる特定物体（ｐｒｏｐ）であってもよい。後述するように、オブジェクトの種類は、そのオブジェクトの閾値を決定するのに役立つ。

上記システムがオブジェクトの種類を判定すると、そのシステムはＳ３−２に進み、そこで、当該システムは、ゲームプレイの状態を判定する。この例には限定されないが、ゲームプレイの状態は、プレイヤキャラクタがボスキャラクタと戦い得るゲームのストーリーラインの時点であってもよい。そのゲームプレイの状態は、プレイヤキャラクタが動いている状態（すなわち、対比して捉えられる、走っている状態、歩いている状態）を指してもよい。ゲームプレイの状態は、プレイヤキャラクタ（または、消える遷移処理を受けるべき他のオブジェクト）がディスプレイに現れる状態を指してもよい。

そのオブジェクトの種類とゲームプレイの状態を判定した後、上記システムはＳ３−３に進み、そこで、オブジェクトのための閾値を決定する。これらの要素に限定されないが、閾値を決定する際、そのシステムは、オブジェクトの種類とゲームプレイの状態を考慮する。例えば、そのオブジェクトの種類がボスキャラクタであって、当該ボスキャラクタとの戦闘モードである場合に、その閾値が、キャラクタの種類が特定物体であって、プレイヤキャラクタが歩き回っており特定の戦闘モードではないゲーム状態の場合よりも、高い値となってもよい。

別の実施例として、表示画面の縁またはその付近に現れるオブジェクトが、その表示画面の中心またはその付近に現れる場合より、低い閾値を有してもよい。これによって、表示画面の縁またはその付近に現れるオブジェクトが、その同じオブジェクトがその表示画面の中心またはその付近に現れている場合よりも、早く（すなわち、当該オブジェクトがその表示画面から「離れる方向で」ユーザに「向かって」現れたときに、その立体ディスプレイから前側における距離がより短くしか到達しなくとも）消える遷移処理を受け得る効果を生じる。

Ｓ３−３において、閾値がそのオブジェクトに対して設定されると、上記システムは、Ｓ３−４に進み、そこでは、立体ディスプレイからそのオブジェクトまでの距離が、その閾値を超えているか否かを判定する。もし超えていれば、このシステムは、Ｓ３−５で、オブジェクト遷移フラグを「ＴＲＵＥ」に設定する。オブジェクトがその閾値を超えていない場合、当該システムは、Ｓ３−６で、オブジェクト遷移フラグを「ＦＡＬＳＥ」に設定する。

図５Ｃは、オブジェクトへの距離が上記閾値を超えている場合に、立体ディスプレイにおける当該オブジェクトの遷移処理を行うためのアプリケーションフローチャートの一例を示す。図５Ａおよび５Ｂの説明で説明したように、そのオブジェクトが閾値を超えている場合、このシステムは、立体ディスプレイにおける当該オブジェクトの遷移処理を始める。

上記システムは、そのオブジェクトの遷移処理をＳ４−１で始め、そこでは、オブジェクトの遷移量を決定する。オブジェクトの遷移量は、遷移目標量に基づいて決定される。例えば、遷移目標量は、オブジェクトの不透明度または透明度を指し得る。よって、例えば、「１」の遷移目標量は、当該オブジェクトを完全に不透明にすることを目標とすることを指してもよく、「０」の遷移目標量は、当該オブジェクトを完全に透明にすることを目標とすることを指してもよい。したがって、そのオブジェクトの遷移量は、当該オブジェクトが各フレーム中に遷移されるべき量を指してもよい。よって、その標的（処理対象）が完全に不透明であるが透明になる必要がある場合、遷移目標量は、「０」に設定されてもよく、オブジェクトの遷移量は０．０５であってもよい。このように、各フレームは、遷移目標量に近づくようにオブジェクトに遷移処理をなすことになる。その結果、１番目のフレーム後、標的の不透明度（透明度）は、０．９５に低下する。同様に、２番目のフレーム後、標的の不透明度（透明度）は、０．９０に低下する。例示的な実施形態では、オブジェクトがその遷移目標量（すなわち「０」）に到達するまで、これが継続する。

代替的な実施形態では、オブジェクトの遷移量は、立体ディスプレイからのオブジェクトの距離に直接相関し得る。例えば、ディスプレイにより近いオブジェクトは、より不透明に現れ、ディスプレイからより遠いオブジェクトはより透明に現れる。

オブジェクトの遷移量が決定されると、システムはＳ４−２に進み、そこで、ディスプレイにおけるオブジェクトの遷移処理を行う。本実施形態に限定されないが、オブジェクトの遷移量は、上記で説明したように、オブジェクトが現在の表示状態からの遷移を変化させる量を決定する。オブジェクトの視覚的な遷移は、オブジェクトの線形アルファブレンディングを用いて行われ得る。上記で説明したように、オブジェクトは、オブジェクトの遷移量に基づいて、ディスプレイ上で徐々に遷移する。

オブジェクトの外観の遷移処理の後、そのシステムは、Ｓ４−３に進み、そこでは、当該オブジェクトがディスプレイにおいて完全に遷移処理を受けたか否かを判定する。そのオブジェクトが当該ディスプレイにおいて完全に遷移処理を受けていない場合、そのシステムは、当該オブジェクトがディスプレイにおいて完全に遷移処理を受けるまで、Ｓ４−１とＳ４−２とを繰り返す。例えば、もし、そのオブジェクトが完全に不透明であり、ディスプレイから完全に消えていく場合、本システムは、当該オブジェクトが完全にディスプレイから取り除かれるまで、継続的に当該オブジェクトをより透明にしていく。

オブジェクトが閾値を超えていると判定される場合、例示的な実施形態では、そのシステムは、事前に設定された期間、ディスプレイにおいて当該オブジェクトの遷移処理を開始させると理解されるべきである。例えば、オブジェクトが完全に不透明であり閾値を超えている場合、当該オブジェクトは、事前に設定された期間に亘って、ディスプレイから消え始める。本実施形態に限定されないが、事前に設定された時間間隔が、１秒であってもよい。よって、例えば、１秒の内に、オブジェクトは、完全に不透明な状態から完全に透明な状態へと遷移する（すなわち、ディスプレイから取り除かれる）。

また、上述の処理は、そのオブジェクトがディスプレイから「消える（フェード・アウトする）」場合とディスプレイにおいて「現れる（フェード・インする）」場合との両方の状況に適用可能であると理解されるべきである。上記で示された例は、概して、上記オブジェクトがディスプレイから「フェード・アウトする」ことを指しているが、上記と同じ処理は、ディスプレイに「フェード・インする」オブジェクトに対しても適用可能である。よって、ディスプレイに戻ってくるオブジェクトが、上記の処理を用いて、完全に透明な状態から完全に不透明な状態に遷移する。

また、上記の処理は、オブジェクトが中間の遷移状態であっても適用可能であると理解されるべきである。よって、例えば、オブジェクトが完全な不透明から完全な透明に向かって遷移していて、システムが処理を逆転させることを決定し当該オブジェクトを完全な不透明に戻す場合、システムは、オブジェクトが「フェード・アウト」する最中であっても、オブジェクトを「フェード・イン」させ得る。よって、そのオブジェクトの不透明度が０．５５であって、透明状態（すなわち、「０」）に向かって遷移している場合、そのシステムは、オブジェクトの遷移目標量を「０」から「１」へとリセットし、標的の不透明度値を増加させ、「１」に到達させ得る。

図６Ａは、オブジェクトＯＢＪがゲーム装置１０のディスプレイにおいて視覚的に遷移する、本システムの実施形態の図の一例を示す。図６Ａに示す例では、プレイヤキャラクタＰＣが、敵キャラクタＥＣに向かって歩いている。プレイヤキャラクタＰＣの右側であり、かつプレイヤキャラクタＰＣの「背後」には、仮想天井からつり下げられたオブジェクトＯＢＪがある。好ましい実施形態では、敵キャラクタＥＣ、プレイヤキャラクタＰＣおよびオブジェクトＯＢＪは、３Ｄディスプレイでは３Ｄオブジェクトとして飛び出ている。

図６Ｂでは、プレイヤキャラクタＰＣは、引き続き敵キャラクタＥＣに向かって移動している。プレイヤキャラクタＰＣが前進すると、仮想カメラは、プレイヤキャラクタＰＣに追従し、前景をディスプレイの「範囲外」に移動させる。図６Ｂに示すように、前景にあるオブジェクトＯＢＪは、視聴者に向かってくるように、立体ディスプレイから「離れる方向」に飛び出す。同時に、オブジェクトＯＢＪは、視界から消え始める。このようにして、オブジェクトは、まるで視聴者に依然として向かってくるように見えるが、視聴者を混乱させないように、視界から消える。上記で説明したように、この消滅は、線形アルファブレンディングを用いて行われ得る。上記でさらに説明したように、オブジェクトＯＢＪは、例示的な実施形態では、設定された時間間隔に亘って、ゆっくりとディスプレイから消える。

図６Ｃでは、十分な時間が経過しており、よって、オブジェクトＯＢＪは、図５Ｃの説明で説明したような処理によって、完全に遷移している。この時点では、図６Ａおよび６Ｂに示すオブジェクトＯＢＪは、遷移して、それによって、完全に消えてもはや見えない状態となっている。上述のように、オブジェクトＯＢＪは不透明であり、その後、立体ディスプレイからさらに「外に」移動するとともに継続的に消えていく。このように、オブジェクトＯＢＪは、例えば、完全に不透明な状態から完全に透明な状態へと遷移する。

図７Ａ〜Ｃは、本システムの例を示す。図７Ａでは、プレイヤキャラクタが、敵キャラクタに向かって歩いていて、一方、オブジェクトが当該プレイヤキャラクタの右後ろで天井からつり下がっている。本実施形態では、敵キャラクタは蜘蛛であり、プレイヤキャラクタは、蜘蛛の巣の近くの蜘蛛に近づいている。

図７Ｂでは、プレイヤキャラクタは、敵キャラクタにより近づいて歩いている。この例では、プレイヤキャラクタが前進すると、背景が、プレイヤキャラクタの動きに追従する。例えば、プレイヤキャラクタが前進すると、仮想カメラは、基本的にプレイヤキャラクタとともに通路を進むため、当該通路は、視聴者に向かって動く。図７Ｂに見られ得るように、プレイヤキャラクタの右側で天井からつり下がっているオブジェクトは、画面から視界の外へゆっくりと消え始める。図７Ｂでは、オブジェクトは、部分的に透明になっていて、よって、当該オブジェクトは見えるが、視聴者は当該オブジェクトを透視できる。

図７Ｃは、敵キャラクタにさらに近づいて移動しているプレイヤキャラクタを示す。この例では、図７Ａおよび７Ｂで見ることができたオブジェクトは、ディスプレイから完全に消えたため、もはや見ることができない。このようにして、オブジェクトは、視聴者を混乱させるまたは不自然に見える前に、消える。

単一の仮想カメラを用いて、システムを上記で説明したが、同様のシステムが、２つの仮想カメラを用いたシステムにおいて、実施され得る。例えば、このシステムは、少なくとも２つの仮想カメラを用いた３Ｄ視聴システムにおいて実施され得る。

本願のシステムが、最も実用的で好ましい実施形態であると現時点で考えられるものと関連づけて説明した。しかしながら、当該システムは、その開示された実施形態に限定されず、それどころか、添付の特許請求の範囲に記載される要旨およびその範囲に属する様々な改良物および均等な構成をも裏付けることが意図されると理解されるべきである。

上記で説明したように、立体ディスプレイにおける複数のオブジェクトを管理するための装置および方法が提供される。立体ディスプレイにおけるオブジェクトの位置が測定され、立体ディスプレイからのオブジェクトまでの視距離が測定される。この装置および方法は、オブジェクトの視距離が閾値を超えているか否かを判定し、その視距離が閾値を超えている場合、オブジェクトの外観が、ディスプレイにおける遷移処理に供される（例えば、徐々に消される）。このようにして、当該オブジェクトは、視聴者を混乱させたり不自然に見えたりしないように、そのディスプレイで適切に遷移される。

Claims (27)

1. 立体ディスプレイにおける複数のオブジェクトを管理する方法であって、当該方法は、
   立体ディスプレイにおけるオブジェクトの位置を測定する工程；
   前記立体ディスプレイから前記オブジェクトまでの視距離を測定する工程；
   前記オブジェクトの視距離が閾値を超えているか否かを判定する工程；および
   前記視距離が前記閾値を超えている場合、前記オブジェクトの外観の遷移処理を行う工程を含む、方法。
2. 前記オブジェクトの外観は、予め設定された期間に亘って徐々に遷移する、請求項１に記載の方法。
3. 前記オブジェクトの外観の遷移処理を行う工程は、ブレンディング技術を用いて前記オブジェクトのフェード処理を行うことを含む、請求項１に記載の方法。
4. 前記オブジェクトの位置は、仮想３次元空間における前記オブジェクトの位置から３次元装置空間に変換され、前記オブジェクトの視距離の測定値は、前記３次元装置空間における距離である、請求項１に記載の方法。
5. 前記閾値は、前記オブジェクトの種類に応じて可変である、請求項１に記載の方法。
6. 前記閾値は、前記オブジェクトが関与するゲームプレイの状態に応じて可変である、請求項１に記載の方法。
7. 前記閾値は、前記オブジェクトが前記立体ディスプレイに現れる場合に応じて可変であって、当該オブジェクトが当該立体ディスプレイの縁またはその付近に現れた場合に当該閾値がより小さい値となるように変化する、請求項１に記載の方法。
8. アプリケーションプログラムを実行するためのコンピュータ読み取り可能なコードを組み込んだ非一時的コンピュータ読み取り可能な記録媒体であって、当該プログラムは、
   立体ディスプレイにおけるオブジェクトの位置を測定する処理；
   前記立体ディスプレイから前記オブジェクトまでの視距離を測定する処理；
   前記オブジェクトの視距離が閾値を超えているか否かを判定する処理；および
   前記視距離が前記閾値を超えている場合、前記オブジェクトの外観の遷移処理を行う処理を含む、非一時的コンピュータ読み取り可能な記録媒体。
9. 前記オブジェクトの外観は、予め設定された期間に亘って徐々に遷移する、請求項８に記載の非一時的コンピュータ読み取り可能な記録媒体。
10. 前記オブジェクトの外観の遷移処理を行う処理は、ブレンディング技術を用いて前記オブジェクトのフェード処理を行うことを含む、請求項８に記載の非一時的コンピュータ読み取り可能な記録媒体。
11. 前記オブジェクトの位置は、仮想３次元空間における前記オブジェクトの位置から３次元装置空間に変換され、前記オブジェクトの視距離の測定値は、前記３次元装置空間における距離である、請求項８に記載の非一時的コンピュータ読み取り可能な記録媒体。
12. 前記閾値は、前記オブジェクトの種類に応じて可変である、請求項８に記載の非一時的コンピュータ読み取り可能な記録媒体。
13. 前記閾値は、前記オブジェクトが関与するゲームプレイの状態に応じて可変である、請求項８に記載の非一時的コンピュータ読み取り可能な記録媒体。
14. 前記閾値は、前記オブジェクトが前記立体ディスプレイに現れる場合に応じて可変であって、当該オブジェクトが当該立体ディスプレイの縁またはその付近に現れた場合に当該閾値がより小さい値となるように変化する、請求項８に記載の非一時的コンピュータ読み取り可能な記録媒体。
15. ゲーム装置であって、当該ゲーム装置は、
    複数のオブジェクトを表示する立体ディスプレイ；
    前記立体ディスプレイにおける前記複数のオブジェクトを管理するためのプログラムを記憶するよう構成されるメモリ；そして
    前記立体ディスプレイにおける前記複数のオブジェクトを管理するために構成されるプロセッサを備え、
    当該プロセッサは、
    立体ディスプレイ上のオブジェクトの位置を測定し；
    前記立体ディスプレイからの前記オブジェクトの視距離を測定し；
    前記オブジェクトの視距離が閾値を超えているか否かを判定し；そして
    前記視距離が前記閾値を超えている場合、前記オブジェクトの外観の遷移処理を行うように構成される、ゲーム装置。
16. 前記オブジェクトの外観は、予め設定された期間に亘って徐々に遷移する、請求項１５に記載のゲーム装置。
17. 前記オブジェクトの外観の遷移処理は、ブレンディング技術を用いて前記オブジェクトのフェード処理を行うことを含む、請求項１５に記載のゲーム装置。
18. 前記オブジェクトの位置は、仮想３次元空間における前記オブジェクトの位置から３次元装置空間に変換され、前記オブジェクトの視距離の測定は、前記３次元装置空間における距離である、請求項１に記載の方法。
19. 前記閾値は、前記オブジェクトの種類に応じて可変である、請求項１５に記載のゲーム装置。
20. 前記閾値は、前記オブジェクトが関与するゲームプレイの状態に応じて可変である、請求項１５に記載のゲーム装置。
21. 前記閾値は、前記オブジェクトが前記立体ディスプレイの縁またはその付近に現れた場合に当該閾値が小さい値となるように、当該オブジェクトが当該立体ディスプレイに現れることに応じて可変である、請求項１５に記載のゲーム装置。
22. コンピュータプロセッサを用いて、仮想オブジェクトの位置を測定する工程；
    ３次元世界の画像の前側における前記仮想オブジェクトの画像で認識された距離を測定する工程；
    前記認識された距離が閾値に達したか否かを判定する工程；および
    前記認識された距離が前記閾値に達している場合、前記オブジェクトの前記画像の外観を徐々に削除していく工程
    を含む、方法。
23. 前記仮想オブジェクトが第１種類のオブジェクトである場合、前記閾値は第１の値を有し、当該仮想オブジェクトが前記第１種類のオブジェクトと異なる種類のオブジェクトである場合、当該閾値は異なる値を有する、請求項２２に記載の方法。
24. 前記仮想オブジェクトが前記画像の中心またはその付近に位置する場合、前記閾値は第１の値を有し、当該仮想オブジェクトが当該画像の縁またはその付近に位置する場合、当該閾値は異なる値を有する、請求項２２に記載の方法。
25. ３次元仮想世界の画像を示すように構成される３次元ディスプレイ；および
    プロセッサを備えるシステムであって、、
    当該プロセッサは、
    仮想オブジェクトの位置を測定し；
    前記３次元仮想世界の画像の前側における前記仮想オブジェクトの画像で認識された距離を測定し；
    前記認識された距離が閾値に達しているか否かを判定し；そして
    前記認識された距離が前記閾値に達している場合、前記オブジェクトの画像の外観を徐々に削除していくように構成される、システム。
26. 前記仮想オブジェクトが第１種類のオブジェクトである場合、前記閾値は第１の値を有し、当該仮想オブジェクトが異なる種類のオブジェクトである場合、当該閾値は異なる値を有する、請求項２５に記載のシステム。
27. 前記仮想オブジェクトが前記画像の中心またはその付近に位置する場合、前記閾値は第１の値を有し、当該仮想オブジェクトが当該画像の縁またはその付近に位置する場合、当該閾値は異なる値を有する、請求項２５に記載のシステム。

Images