WO2020235191A1

WO2020235191A1 - 情報処理装置、情報処理装置の制御方法、及びプログラム

Info

Publication number: WO2020235191A1
Application number: PCT/JP2020/010921
Authority: WO
Inventors: 善数大貫
Original assignee: Sony Interactive Entertainment Inc
Current assignee: Sony Interactive Entertainment Inc
Priority date: 2019-05-21
Filing date: 2020-03-12
Publication date: 2020-11-26
Anticipated expiration: 2021-11-21
Also published as: JPWO2020235191A1

Abstract

仮想的な三次元空間である仮想空間内のオブジェクトに係る情報を取得し、表示装置を装着したユーザの頭部正面方向を表す情報と視線方向の情報を取得し、仮想空間の基準方向候補を決定し、所定の設定条件が満足されたときに、当該決定した基準方向候補が表す仮想空間内の方向を、仮想空間の基準方向として設定する情報処理装置である。

Description

情報処理装置、情報処理装置の制御方法、及びプログラム

　本発明は、情報処理装置、情報処理装置の制御方法、及びプログラムに関する。

　ユーザの頭部に装着され、仮想的な空間の画像をユーザに提示する表示装置を用いた情報処理システムが近年普及しつつある。このような情報処理システムでは、表示装置により表示される仮想的な空間内で、ユーザ自身が認識する体の動きと、認識上整合しない視野の移動を伴う表示を行うと、ユーザが、いわゆるＶＲ酔いを感じることがある。

　例えば、ユーザが実際には体の方向を右に向けていないのに、右側にターンしたかのような表示（仮想的な空間を相対的に、ユーザの身長方向を軸として、この軸周りに左に回転させる表示）を行うと、ユーザが認識上の違和感を感じてＶＲ酔いの状態になることがある。

　このようなＶＲ酔いの軽減のためには、移動を不連続に行うことなどが考えられているが、不連続移動ばかりを行うのでは、現実感が損なわれ、仮想空間の体験の質が低下してしまう。

　このように、近年では、体験の質の低下を抑制しつつ、ＶＲ酔いを軽減できる画像の提示を行う情報処理が求められている。

　本発明は上記実情に鑑みて為されたもので、仮想空間の体験の質の低下を抑制しつつ、ＶＲ酔いを軽減できる情報処理装置、情報処理装置の制御方法、及びプログラムを提供することを、その目的の一つとする。

　上記従来例の問題点を解決する本発明の一態様は、ユーザの頭部に装着される表示装置に接続される情報処理装置であって、仮想的な三次元空間である仮想空間内のオブジェクトに係る情報を取得する手段と、前記表示装置を装着したユーザの頭部正面方向を表す情報、及び当該ユーザの視線方向の情報を取得する取得手段と、前記仮想空間内に定められた仮想的な基準方向を基準としたユーザの視野を、前記取得した頭部正面方向を表す情報、または視線方向の情報に基づいて設定し、当該設定したユーザの視野内の前記オブジェクトの画像を生成して、前記表示装置に出力する画像出力手段と、前記仮想空間の基準方向候補を決定する基準決定手段と、所定の設定条件が満足されたときに、前記基準決定手段が決定した基準方向候補が表す仮想空間内の方向を、前記仮想空間の基準方向として設定する基準設定手段と、を含むこととしたものである。

　本発明によると、不連続な移動を、所定の設定条件が満足されたときに行うようにしたので、仮想空間の体験の質の低下を抑制しつつ、ＶＲ酔いを軽減できる。

本発明の実施の形態に係る情報処理装置の構成例及び接続例を表すブロック図である。本発明の実施の形態に係る情報処理装置の例を表す機能ブロック図である。本発明の実施の形態に係る情報処理装置が表示するオブジェクトの例を表す説明図である。本発明の実施の形態に係る情報処理装置の動作例を表すフローチャート図である。本発明の実施の形態に係る情報処理装置の動作例を表す説明図である。本発明の実施の形態に係る情報処理装置のもう一つの動作例を表す説明図である。本発明の実施の形態に係る情報処理装置のさらにもう一つの動作例を表す説明図である。

　本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る情報処理装置１は、表示装置２が表示すべき画像を表す画像データを供給する装置であって、例えば家庭用ゲーム機、携帯型ゲーム機、パーソナルコンピューター、スマートフォン、タブレット等である。具体的にこの情報処理装置１は、図１に示すように、ユーザの頭部に装着される表示装置２や操作デバイス３等に接続され、制御部１１と、記憶部１２と、インタフェース部１３と、を含んで構成される。

　ここで制御部１１は、ＣＰＵ等のプログラム制御デバイスであり、記憶部１２に格納されているプログラムを実行する。本実施の形態では、この制御部１１は、仮想的な三次元空間内のオブジェクトに係る情報を、例えばゲームのアプリケーション等から取得して、この情報に基づいて上記仮想的な三次元空間（仮想空間）の画像を描画して、表示装置２に出力する処理を実行する。この描画の際、制御部１１は、指定された三次元空間中の視点から、別途定めた視野内の画像をレンダリングする処理を実行する。このレンダリングの処理は広く知られたものであるので、ここでの詳細な説明を省略する。

　制御部１１は、表示装置２を装着したユーザの頭部正面方向を表す情報、及び当該ユーザの視線方向の情報を取得する。制御部１１は、仮想空間内に定めた仮想的な基準方向（以下、仮想空間基準方向と呼ぶ）を基準としたユーザの視野を、当該取得した頭部正面方向を表す情報、または視線方向の情報に基づいて設定する。そして制御部１１は、当該設定したユーザの視野内のオブジェクトの画像を生成して、表示装置２に出力する。

　また制御部１１は、例えば取得した情報が表すユーザの頭部正面方向または視線方向が、所定の候補決定条件を満足する方向である間に、当該取得した視線方向の情報に基づいて、仮想空間内の基準方向の候補（仮想空間基準方向候補）を決定する。

　さらに制御部１１は、仮想空間基準方向候補が決定された後、上記候補決定条件とは異なる所定の設定条件が満足されたときに、当該決定した仮想空間基準方向候補が表す仮想空間内の方向を、仮想空間基準方向として設定する。

　ここで、設定条件は、ユーザの視覚認知能力が低下しているとの条件であり、例えば頭部を回転しているとき、つまり視野が変化しているときや、まばたきをしたとき、目を細く開けた状態としているとき、例えば薄目にしているときなどが広く知られている。

　本実施の形態では、一例として上記仮想空間基準方向が仮想空間におけるユーザの前方に一致するものとするとき、制御部１１は、候補決定条件を満足している間に取得した方向を基準方向の候補としておく。ここでユーザの前方は、ユーザが頭部をまっすぐ前に向けたときの当該頭部の方向を意味する。そしてその後、制御部１１は、まばたきをしたときなど、所定の設定条件が満足されたときに、当該基準方向の候補とした方向がユーザの前方の方向となるように設定する。この制御部１１の詳しい動作については、後に述べる。

　記憶部１２は、ＲＡＭ等のメモリデバイスを少なくとも一つ含み、制御部１１が実行するプログラムを格納する。また、この記憶部１２は制御部１１のワークメモリとしても動作し、制御部１１がプログラム実行の過程で使用するデータを格納する。このプログラムは、コンピュータ可読かつ非一時的な記録媒体に格納されて提供され、この記憶部１２に格納されたものであってもよい。

　インタフェース部１３は、操作デバイス３や表示装置２との間で情報処理装置１の制御部１１がデータ通信を行うためのインタフェースである。情報処理装置１は、このインタフェース部１３を介して有線又は無線のいずれかで操作デバイス３や表示装置２等と接続される。一例として、このインタフェース部１３は、情報処理装置１が供給する画像データや音声を表示装置２に送信するために、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）などのマルチメディアインタフェースを含んでよい。また、このインタフェース部１３は、表示装置２から各種の情報を受信したり、制御信号等を送信したりするために、ＵＳＢ等のデータ通信インタフェースを含んでよい。さらにインタフェース部１３は、操作デバイス３に対するユーザの操作入力の内容を示す信号を受信するために、ＵＳＢ等のデータ通信インタフェースを含んでよい。

　表示装置２は、ユーザが頭部に装着して使用する表示デバイスであって、情報処理装置１から供給される画像データや音声のデータを受け付ける。そしてこの表示装置２は、入力された画像データを、表示装置２の映像表示素子２１における表示部の画素の配列に並べ替えた画像データを生成する。この映像表示素子２１については後に述べる。また表示装置２は、さらに、必要に応じて、供給された画像データが表す画像に対して、表示装置２の光学系によって生じる歪みを補正する処理などを実行し、補正された画像を表す映像信号を生成する。

　なお、ここで生成する映像信号は、左目用のものと右目用のものとの二つの映像信号を含んでいてよい。また表示装置２は、生成した映像信号に応じた映像を表示し、ユーザに閲覧させる。本実施形態では、表示装置２はユーザの右目と左目とのそれぞれの目の前に、それぞれの目に対応した映像を表示するものとする。この表示装置２は、図１に示したように、映像表示素子２１、及び光学素子２２を含んで構成される。またこの表示装置２は、視線検出部２３を備えてもよい。

　映像表示素子２１は、例えば、複数の画素を二次元的に配列した有機ＥＬ表示パネルや液晶表示パネルなどであって、情報処理装置１から入力される指示に従って映像を表示する。この映像表示素子２１は、左目用の映像と右目用の映像とを一列に並べて表示する１つの表示素子であってもよいし、左目用の映像と右目用の映像とをそれぞれ独立に表示する一対の表示素子を含んで構成されてもよい。また、本実施の形態の別の例では、スマートフォンの画面をそのまま映像表示素子２１として用いてもよいし、ユーザの網膜に直接映像を投影する網膜照射型（網膜投影型）の装置であってもよい。

　映像表示素子２１をスマートフォンの画面とする場合、このスマートフォンが情報処理装置１から供給される画像データや音声のデータを受け付ける。そしてこの表示装置２は、入力された画像データを、表示装置２の映像表示素子２１における表示部の画素の配列に並べ替えた画像データを生成する。また表示装置２は、さらに必要に応じて、供給された画像データが表す画像に対して、表示装置２の光学系によって生じる歪みを補正する処理などを実行し、補正された画像を表す映像信号を生成することとなる。また、映像表示素子２１はユーザの網膜に直接、映像を投影するデバイスであってもよい。

　光学素子２２は、レンズや、ホログラム、プリズム、ハーフミラーなどであって、ユーザの目の前に配置され、映像表示素子２１が表示する映像の光を透過又は屈折させて、ユーザの目に入射させる。具体的に、この光学素子２２は、左目用光学素子２２Ｌと、右目用光学素子２２Ｒとを含み、映像表示素子２１が表示する左目用の映像は、左目用光学素子２２Ｌを経由してユーザの左目に入射し、右目用の映像は右目用光学素子２２Ｒを経由してユーザの右目に入射するようにしてもよい。これによりユーザは、表示装置２を頭部に装着した状態で、左目用の映像を左目で、右目用の映像を右目で、それぞれ見ることができるようになる。なお、本実施形態において表示装置２は、ユーザが外界の様子を視認することができない非透過型の表示装置であるものとしている。もっとも、本発明の実施の形態の別の例では表示装置２は非透過型に限られず、ユーザが外界を視認可能な（外界の像に表示された像がオーバーレイされる）、透過型の表示装置であってもよい。この場合、予めユーザ周囲の仮想的な三次元空間に配されたメニューの画像などを表示（外界の像にオーバーレイして表示）する際に、以下に説明する本実施の形態の処理を利用できる。

　表示装置２が視線検出部２３を備える例では、この視線検出部２３は、表示装置２を装着した状態でユーザの左右の目の少なくとも一方の瞳の位置を検出する。具体的な例として、この視線検出部２３は、カメラを含んで構成され、ユーザの目を撮像する。そして視線検出部２３は、当該撮像したユーザの目のうち、瞳を検出して、目の範囲のどの位置に瞳が位置するかを表す情報を得る。そして視線検出部２３は、頭部の方向（瞳が目の中心にあるときの視線の方向）に対して、ユーザの視線がどの方向を向いているかを表す情報を、当該瞳の位置の情報に基づいて演算して出力する。このような視線検出部２３は、アイ・トラッカーなどとして広く知られたものを採用できるので、ここでの詳しい動作の説明は省略する。

　また操作デバイス３は、例えば家庭用ゲーム機のコントローラ等であって、ユーザが情報処理装置１に対して各種の指示操作を行うために使用される。操作デバイス３に対するユーザの操作入力の内容は、有線又は無線のいずれかにより情報処理装置１に送信される。なお、操作デバイス３は必ずしも情報処理装置１と別体でなくてもよく、情報処理装置１の筐体表面に配置された操作ボタンやタッチパネル等を含んでもよい。

　また本実施の形態の情報処理装置１は、ユーザのまばたきを検出するまばたきセンサ４に接続されてもよい。このまばたきセンサ４は例えば、表示装置２と一体に構成され、表示装置２を装着したユーザの目の近傍の筋電位を計測してまばたきを検出するものであってもよい。または、このまばたきセンサ４は、表示装置２と一体に構成され、表示装置２を装着したユーザのまぶたの動きをドップラーセンサで検出するものであってもよい。さらにまばたきセンサ４は、視線トラッカーを用いてもよい。この場合、視線トラッカーが視線を検出できなかった（角膜反射の検出ができないなどの理由で、視線が検出できなかった）ときに、ユーザがまぶたを閉じたと判断する。また視線トラッカーをまばたきセンサ４として用いて、瞳の認識を行い、瞳が認識できないときに、ユーザがまぶたを閉じた判断することとしてもよいし、瞳の認識に代えて、目の開口度を推定してまぶたを閉じたか否かを判断することとしてもよい。

　まばたきセンサ４は、ユーザがまぶたを閉じたときに、まばたきがあったものとしてまばたきを検出した旨の信号を出力する。

　次に、情報処理装置１の制御部１１の動作について説明する。本実施の形態に係る制御部１１は、記憶部１２に格納されたプログラムを実行することにより、機能的に、図２に例示するように、オブジェクト情報取得部３１と、方向情報取得部３２と、基準決定部３３と、基準設定部３４と、レンダリング部３５と、出力部３６とを含む構成を実現する。

　オブジェクト情報取得部３１は、仮想空間内に表示する仮想的なオブジェクトの情報を取得する。具体的にこのオブジェクト情報取得部３１が取得するオブジェクトの情報は、ゲームアプリケーション等のアプリケーションプログラム側から提供され、一つ以上のオブジェクトの形状やテクスチャ、配置する位置や向き等の情報を含む。このようなオブジェクトの情報やその取得の処理については広く知られているので、ここでの詳しい説明は省略する。

　方向情報取得部３２は、表示装置２を装着したユーザの視線方向の情報を、所定のタイミングごと（例えば１／３０秒ごとのなど定期的）に繰り返し取得する。一例として、この方向情報取得部３１は、ユーザが装着する表示装置２の姿勢を図示しないカメラで撮影したユーザの画像に基づいて、あるいは表示装置２が備える姿勢センサが出力する情報等を用いて検出して、ユーザの頭部の方向（頭部の向き、顔の正面の向いている方向）の情報を取得する。

　またこの方向情報取得部３２は、表示装置２が備える、図示しないカメラが撮影した画像に基づいてユーザの頭部の方向（顔の正面の向いている方向）の情報を取得してもよい。このような処理は例えばＳＬＡＭ（Simultaneous Localization and Mapping）技術を応用したものなど、広く知られた方法を採用できる。

　また以下の説明では、ユーザの頭部の方向を次のように表すものとする。すなわち、実空間でのユーザの顔の仰角方向への角度（矢状面内の角度）をθ、左右方向への角度（横断面内の角度）をφ、冠状面内の角度をψとする。そしてユーザの頭部の方向（ワールド座標系での方向）は、これらの角度のセット（θ，φ，ψ）で表されるものとする。方向情報取得部３２は、この角度のセットの情報を、ユーザの頭部の方向を表す情報として取得するものとする。

　なお、この例の方向情報取得部３２は、情報処理装置１に対して所定の初期化操作（例えば起動、あるいはキャリブレーション）を行ったときの実空間でのユーザの頭部の方向（ユーザの顔が向く正面方向）を基準の方向（実空間基準方向と呼ぶ）（θ，φ，ψ）＝（０，０，０）として、この実空間基準方向からの各方向への角度の変化量でユーザの頭部の方向を検出する。

　また、方向情報取得部３２は、ユーザの視線方向の情報を取得する。具体的に方向情報取得部３２は、表示装置２が視線検出部２３を備える場合は、表示装置２からユーザの視線の方向を表す情報（ユーザの頭部の方向を基準とした方向）の情報を得る。この情報もまた、視線の方向を表す情報を得たときの、実空間でのユーザの頭部の方向（ユーザの顔が向く正面方向）を実空間基準方向（θ′H，φ′H，ψ′H）＝（０，０，０）として表す。すなわちユーザの視線の方向は、この実空間基準方向から仰角方向への角度（矢状面内の角度）をΔθE、左右方向への角度（横断面内の角度）をΔφEとして表されるものとする。なお、瞳は冠状面内で回転しても視線方向には変化がないので、冠状面内の成分は無視する。

　つまり本実施の形態のこの例では、方向情報取得部３２は、ユーザが情報処理装置１を起動、あるいは情報処理装置１にキャリブレーションの指示を行うなど所定の初期化操作を行ったときのユーザの頭部の方向（ユーザの顔が向く正面方向）の情報を取得しておく。以下、方向情報取得部３２は、ここで取得したユーザの頭部の方向を、実空間基準方向（θ，φ，ψ）＝（０，０，０）とする。そして方向情報取得部３２は、視線の方向を表す情報を得たときのユーザの頭部の方向（ユーザの顔が向く正面方向）を（θH，φH，ψH）として、視線の方向を表す情報（θE，φE，ψE）を、（θH＋ΔθE，φH＋ΔφE，ψH）と、求める。

　また方向情報取得部３２は、表示装置２が視線検出部２３を備えない場合は、検出したユーザの頭部の方向の情報をそのまま、ユーザの視線方向の情報としてもよい。この場合は、視線の方向を表す情報（θE，φE，ψE）は、ユーザの頭部の方向（ユーザの顔が向く正面方向）（θH，φH，ψH）と等しいものとなる。

　方向情報取得部３２は、このような方法でユーザの頭部の方向を表す情報と、ユーザの視線方向の情報とを所定のタイミングごと（例えば１／３０秒に一度など）に繰り返し取得して出力する。

　基準決定部３３は、ユーザの仮想空間内での基準方向（仮想空間基準方向）を決定する。本実施の形態では基準決定部３３は、次のようにしてユーザの仮想空間基準方向を決定する。

　基準決定部３３は、当初（起動時、制御部１１によるプログラムの実行開始時）は方向情報取得部３２が取得した、現実空間でのユーザの頭部の方向の情報（θH，φH，ψH）を用いて、仮想空間基準方向（α0，β0，γ0）を設定する。

　ここで、仮想空間基準方向を表す情報の各成分は、仰角方向への角度（仮想空間の床面に垂直な面内での角度）α、左右方向への角度（仮想空間の床面に平行な面内での角度）β、及び視線の方向を回転軸とした、この軸周りでの回転角度γをそれぞれ表すものである。

　本実施の形態では、基準決定部３３は、当初は、起動時に方向情報取得部３２が取得した、現実空間でのユーザの頭部の方向の情報（θH，φH，ψH）、または視線方向（θE，φE，ψE）を用い、仮想空間基準方向（α0，β0，γ0）を、（α0，β0，γ0）＝（θH，φH，ψH）または（α0，β0，γ0）＝（θE，φE，ψE）と定める。

　またこの基準決定部３３は、方向情報取得部３２が取得した情報が表すユーザの頭部の方向（頭部の正面の方向）または視線方向が、所定の候補決定条件を満足する方向である間に、方向情報取得部３２が取得した視線方向の情報に基づいて、仮想空間基準方向の候補を決定する。本実施の形態では、基準決定部３３は、仮想空間基準方向の候補を決定するが、その時点では仮想空間基準方向を変更しない。以下の説明では、基準決定部３３が仮想空間基準方向の候補を決定した状態にあるか否かを表すため、当初はオフに設定される候補決定フラグの情報を用いる。

　具体的に、基準決定部３３は、方向情報取得部３２が取得した情報が表すユーザの頭部の方向（θH，φH，ψH）のうち、仰角方向成分θH及び左右方向成分φHと、実空間基準方向（０，０，０）の対応する成分の値との差を求める。そして基準決定部３３は、各成分の差の値のうち最も大きい値となっている成分の差が予め定めたしきい値を超えることを、上記候補決定条件として、この候補決定条件が満足されるか否かを判断する。

　例えば、しきい値を５度とする場合に、ユーザが仰角方向にはほとんど首を動かすことなく（θH＝０）、右方向に９０度だけ首を向けた（φH＝９０度）とするとき、基準方向の対応する成分の差は、それぞれΔθH＝０，ΔφH＝９０となる。そこで、基準決定部３３は、これらの値のうち最も大きい値であるΔφH＝９０が、しきい値である５度を超えるか否かを判断する。ここでは当該値がしきい値を超えているので、基準決定部３３は、候補決定条件が満足されたと判断する。

　基準決定部３３は、この候補決定条件が満足されたと判断されている間に、ユーザが所定の候補決定操作または行動をしたときのユーザの視線方向（θE，φE，ψE）に相当する仮想空間の方向を仮想空間基準方向の候補として決定する。

　ここでユーザが行う所定の候補決定操作または行動は、例えば操作デバイス３の所定のボタンを押下する操作であってもよい。また、情報処理装置１にまばたきセンサ４が接続されているならば、ユーザが行う所定の候補決定操作または行動は、まばたきであってもよい。さらにユーザが行う所定の候補決定操作または行動は、所定の時間の間、視線方向を変化させないというものであってもよい。具体的にユーザが視線方向が変化させないことを検出するには、所定の時間の間に取得されたユーザの視線の方向の変化量の最大値が所定のしきい値を下回ったことを検出すること、つまり画面上の所定の範囲を凝視していることを検出することとすればよい。

　基準決定部３３は、例えばユーザが右方向に５度以上、一例として９０度頭部を回転させた状態で、操作デバイス３の所定のボタンを押下したとき、その時点でのユーザの視線方向の情報（θE，φE，ψE）に相当する仮想空間の方向を、仮想空間基準方向の候補として決定して記憶し、候補決定フラグをオンとする。つまり、基準決定部３３は、ユーザが操作デバイス３の所定のボタンを押下した時点での仮想空間基準方向を表す値をα0，β0，γ0として、仮想空間基準方向の候補を、（αC，βC，γC）＝（θE－α0，φE－β0，ψE－γ0）と決定して記憶する。

　基準設定部３４は、候補決定フラグがオンでない場合（基準決定部３３が仮想空間基準方向の候補を決定した状態でないとき）は、仮想空間内のユーザの視野の方向及び傾き（αW，βW，γW）をαW＝θE－α0，βW＝φE－β0，γW＝ψE－γ0と設定し、視野の画角を予め定めた値とする。なお、ここでは仮想空間内でのユーザの顔の仰角方向への角度（矢状面内の角度）をα、左右方向への角度（横断面内の角度）をβ、視野方向の面（冠状面内）の角度をγとして表現している。

　またこの基準設定部３４は、候補決定フラグがオンであるとき（基準決定部３３が仮想空間基準方向の候補を決定したとき）には、候補決定条件とは別に定められた、所定の設定条件が満足されたか否かを判断する。そしてこの設定条件が満足されていないときには、基準決定部３３が仮想空間基準方向の候補を決定していない間と同様、仮想空間内のユーザの視野の方向及び傾き（α，β，γ）をα＝θE－α0，β＝φE－β0，γ＝ψE－γ0と設定し、視野の画角を予め定めた値とする。つまり、この段階では仮想空間におけるユーザの前方に相当する仮想空間の方向は、決定した仮想空間基準方向の候補の方向へと変化していない。

　一方、候補決定フラグがオンであるときに上記設定条件が満足されたと判断すると、基準設定部３４は、新たな仮想空間基準方向（α0，β0，γ0）を、上記記憶している仮想空間基準方向の候補（αC，βC，γC）に設定する。また基準設定部３４は、ユーザの視野の方向及び傾き（α，β，γ）を、ユーザの視線方向の情報（θE，φE，ψE）と、新たに設定した仮想空間基準方向（α0，β0，γ0）とを用いて、（α，β，γ）＝（θE－α0，φE－β0，ψE－γ0）と設定する。

　そして基準設定部３４は、基準決定部３３が記憶した視野の方向の情報を削除するなどして無効なものとし、候補決定フラグをオフに戻して処理を続ける。

　ここで、上記設定条件は、
（１）ユーザの視線方向または頭部の方向が基準方向に向かって移動していること
（２）ユーザの視線方向または頭部の方向が基準方向に向かって移動しており、かつ、まばたきが行われたこと
（３）ユーザが所定の設定操作または行動を行ったこと
などとして予め定める。

　このために基準設定部３４は、方向情報取得部３２が所定のタイミングごとに繰り返し出力するユーザの視線方向の情報Ｅi（ｉ＝１，２，…）または頭部の方向を表す情報Ｈi（ｉ＝１，２，…）を参照し、ある時点の情報（例えば最後に出力された情報Ｈn）と基準方向との距離Ｄn、及びその一つ前の時点（例えばＨn-1）と基準方向との距離Ｄn-1とを求めてもよい。

　なお、ここで基準設定部３４は、設定条件を満足するか否かを判断する際には、方向情報取得部３２が出力する情報のうち、冠状面内の角度は無視する。例えばＨn＝（θHn，φHn），Ｈn-1＝（θHn-1，φHn-1）として、これらと基準方向との距離を求める。各距離は、球面余弦定理を用いる等の方法により、
Ｄ＝cos^-1（sin θ・sin ０＋cosθ・cos０・cos（φ－０））
　＝cos^-1（cosθ・cosφ）
と求めることができる。例えば、頭部の方向を表す情報を用いる場合、基準設定部３４は、
Ｄn＝cos^-1（cosθHn・cosφHn）、
Ｄn-1＝cos^-1（cosθHn-1・cosφHn-1）
を求め、Ｄn＜Ｄn-1であれば、ユーザの頭部の方向が基準方向に向かって移動していると判断する。

　具体的に基準設定部３４が、設定条件を、
（１）ユーザの頭部の方向が基準方向に向かって移動していること
とする場合について説明する。この場合、基準設定部３４は、上記の方法により、ユーザの頭部の方向が基準方向に向かって移動していると判断すると、仮想空間基準方向（α0，β0，γ0）を、記憶している値（αC，βC，γC）に設定する。そして基準設定部３４は、その後、ユーザの視野の方向及び傾き（α，β，γ）を、ユーザの視線方向の情報（θE，φE，ψE）と、新たに設定した仮想空間基準方向（α0，β0，γ0）とを用いて、（α，β，γ）＝（θE－α0，φE－β0，ψE－γ0）と設定する。

　なお、頭部の方向に代えて視線方向の情報を用いる場合は、基準設定部３４は、
Ｄn＝cos^-1（cosθEn・cosφEn）、
Ｄn-1＝cos^-1（cosθEn-1・cosφEn-1）
を求め、Ｄn＜Ｄn-1であれば、ユーザの頭部の方向が基準方向に向かって移動していると判断することとすればよい。

　また情報処理装置１にまばたきセンサ４が接続されている場合は、基準設定部３４は、設定条件を、
（２）ユーザの頭部の方向が基準方向に向かって移動しており、かつ、まばたきが行われたこと
としてもよい。この場合、基準設定部３４は、上記の方法により、ユーザの頭部の方向が基準方向に向かって移動していると判断したときに、まばたきセンサ４がまばたきを検出した旨の信号を出力すると、設定条件が満足されたものとする。基準設定部３４は、設定条件が満足されたものとしたときには、仮想空間基準方向（α0，β0，γ0）を、記憶している値（αC，βC，γC）に設定する。そして基準設定部３４は、その後、ユーザの視野の方向及び傾き（α，β，γ）を、ユーザの視線方向の情報（θE，φE，ψE）と、新たに設定した仮想空間基準方向（α0，β0，γ0）とを用いて、（α，β，γ）＝（θE－α0，φE－β0，ψE－γ0）と設定する。なお、頭部の方向に代えて視線方向の情報を用いる場合の動作は上述の例と同様であるので、繰り返しての説明は省略する。

　さらに基準設定部３４は、設定条件を、
（３）ユーザが所定の設定操作または行動を行ったこと
としてもよい。この場合、基準設定部３４は、ユーザが操作デバイス３の所定のボタンを押下（または押下した状態から放す）する操作を行ったか、あるいは、まばたきなどの行動を行った、など、所定の設定操作や行動を行った場合に、設定条件が満足されたとして、仮想空間基準方向（α0，β0，γ0）を、記憶している値（αC，βC，γC）に設定する。そして基準設定部３４は、その後、ユーザの視野の方向及び傾き（α，β，γ）を、ユーザの視線方向の情報（θE，φE，ψE）と、新たに設定した仮想空間基準方向（α0，β0，γ0）とを用いて、（α，β，γ）＝（θE－α0，φE－β0，ψE－γ0）と設定する。

　基準設定部３４は、例えば上記のいずれかの方法で視野の方向及び傾きを設定し、視野の画角については別途（例えばゲームアプリケーションの指示に従うなどして）設定することで、視野の設定を行う。

　レンダリング部３５は、基準設定部３４が設定した、ユーザの視野に投影した仮想的な三次元空間に含まれるオブジェクトの画像をレンダリングして生成する。この処理は、一般的な三次元グラフィックスの処理であるので、ここでの詳しい説明を省略する。出力部３６は、レンダリング部３５が生成した、仮想的な三次元空間内のオブジェクトの画像を、表示装置２に対して出力する。

［動作］
　本実施の形態は、以上の構成を基本的に備えてなり、次のように動作する。以下の説明では、情報処理装置１は、ゲームアプリケーション等の処理において、仮想的なゲーム空間（仮想空間）内にオブジェクトを配して表示する処理を実行しているものとする。なお、以下では、説明のため、図３（ａ），（ｂ）にそれぞれ平面図及び側面図を例示するように、仮想空間でのユーザの位置（レンダリング用の仮想的なカメラの位置）を中心とした球面状のオブジェクトＰの内面に、３６０度画像のテクスチャを貼り付けた場合を例とする。もっとも、本実施の形態の情報処理装置１はこのような例に限られるものではなく、仮想的な三次元空間内に、複数の仮想的なオブジェクトが配されているような例にも適用できる。

　情報処理装置１は、ユーザが表示装置２を装着して電源を投入した当初のユーザの頭部の方向を表す情報を取得し、当該取得した情報が（θ，φ，ψ）＝（０，０，０）の方向（実空間基準方向）であるものとして初期化するものとする。なお、ここでは既に述べたように、ユーザの顔の仰角方向への角度（矢状面内の角度）をθ、左右方向への角度（横断面内の角度）をφ、冠状面内の角度をψとしている。

　また情報処理装置１は、この時点での現実空間でのユーザの頭部の方向の情報（θ，φ，ψ）＝（０，０，０）を用いて、仮想的な三次元空間内でのユーザの視線の基準方向（仮想空間基準方向）を、（α0，β0，γ0）＝（θ，φ，ψ）＝（０，０，０）と設定する。ここでも仮想的な三次元空間内でのユーザの顔の仰角方向への角度（矢状面内の角度）をα、左右方向への角度（横断面内の角度）をβ、視野（仮想的なカメラの視野）の面内（冠状面内）の角度をγとして表現している。

　そして情報処理装置１は、図４に示す処理を行い、仮想空間内に配されるオブジェクトの情報（形状や、位置、テクスチャなどの情報）を取得する（Ｓ１）。以下、情報処理装置１は、所定のタイミングごとにユーザの頭部の方向の情報（θH，φH，ψH）と、視線方向の情報（θE，φE，ψE）とを繰り返し取得する（Ｓ２）。

　また情報処理装置１は、これらの情報を取得すると、そのうちユーザの頭部の方向（θH，φH，ψH）のうち、仰角方向成分θH及び左右方向成分φHと、基準方向（０，０，０）の対応する成分の値との差を求める。そして情報処理装置１は、当該求めた各成分の差の値のうち最も大きい値となっている成分の差が予め定めたしきい値（例えば５度）を超えているか否かを調べる（Ｓ３）。ここで、上記成分の差が予め定めたしきい値を超えていれば（Ｓ３：Ｙｅｓ）、情報処理装置１はさらに、ユーザが所定の候補決定操作または行動をしたか否かを調べる（Ｓ４）。具体的に、ここでの所定の候補決定操作または行動は、操作デバイス３の所定のボタンを押下する操作などとして予め定めておく。

　情報処理装置１は、処理Ｓ４において、ユーザが所定の候補決定操作または行動をしたと判断すると（Ｓ４：Ｙｅｓ）、その時点でのユーザの視線方向の情報（θE，φE，ψE）に相当する仮想空間の方向（つまり、（θE－α0，φE－β0，ψE－γ0））を、仮想空間基準方向の候補（αC，βC，γC）として決定して記憶し、候補決定フラグをオンとする（Ｓ５）。

　次に、情報処理装置１は、候補決定フラグがオンであるか否かを判断し（Ｓ６）、オンであれば（処理Ｓ６：Ｙｅｓ）、設定条件が満足されたか否かを判断する（Ｓ７）。

　ここで設定条件が満足されていないとき（Ｓ７：Ｎｏ）は、仮想的な三次元空間内のユーザの視野の方向及び傾き（α，β，γ）をα＝θE－α0，β＝φE－β0，γ＝ψE－γ0と設定する（Ｓ８：視線方向に基づく視野決定）。なお、情報処理装置１は、視野の画角については別途（ゲームアプリケーションの指示によるなどして）定める。

　そして情報処理装置１は、この仮想的な三次元空間内の、この視野内のオブジェクトの画像をレンダリングして（Ｓ９）、当該レンダリングして得た画像を表示装置２に表示させる（Ｓ１０）。なお、ここで左右の目で互いに異なる画像を表示する場合には、左右の目の位置に対応する位置から上記視野内のオブジェクトの画像をレンダリングすることで、左右の目にそれぞれ提示する画像を得ることとすればよい。情報処理装置１は、そして、処理Ｓ２に戻って処理を続ける。

　また処理Ｓ７において、設定条件が満足されていたときには（Ｓ７：Ｙｅｓ）、情報処理装置１は、処理Ｓ５で決定された視野の方向を仮想空間基準方向に設定し（Ｓ１１）、候補決定フラグをオフとして（Ｓ１２）、処理Ｓ８に移行する。つまり、この処理Ｓ１１では仮想的な三次元空間内のユーザの仮想空間基準方向（α0，β0，γ0）が処理Ｓ５で記憶した仮想空間基準方向の候補（αC，βC，γC）に設定される。なお、仮想空間基準方向を定める際には、この仮想空間基準方向の視野の面内の角度は常に床面に平行なものとして、仮想的な三次元空間内のユーザの仮想空間基準方向（α0，β0，γ0）を決定された視野の方向の情報のうち、左右方向の情報のみを用いて（０，βC，０）に設定してもよい。また、仮想空間が宇宙空間である場合など、天地が反転しても構わない場合などでは、仰角と左右方向との情報を用いてこの仮想空間基準方向を（αC，βC，０）に設定するなど、一部の情報を用いることとしても構わないし、すべての情報を用いて仮想空間基準方向を（αC，βC，γC）に設定してもよい。

　これにより、設定条件が満足されると、その後、仮想空間基準方向がユーザが過去に視線を向けて所定の候補決定操作や行動を行った方向（αC，βC，γC）に設定される。従って、これ以後は、視線方向に基づいて視野を決定する際に、この仮想空間基準方向が利用されることとなり、ユーザが頭部の正面を、実空間基準方向（一般的にはユーザの正面側（体の前方側））を向けたときに、処理Ｓ８で決定した方向の視野内の画像がレンダリングされて提示されるようになる。

　また情報処理装置１は、処理Ｓ６において、候補決定フラグがオフであったとき（処理Ｓ６：Ｎｏ）には、仮想空間内のユーザの視野の方向及び傾き（α，β，γ）をα＝θE－α0，β＝φE－β0，γ＝ψE－γ0と設定し（Ｓ８：視線方向に基づく視野決定）、処理Ｓ９に移行して処理を続ける。

　さらに情報処理装置１は、処理Ｓ３において各成分の差の値のうち最も大きい値となっている成分の差が予め定めたしきい値（例えば５度）を超えていないとき（処理Ｓ３：Ｎｏ）、及び、処理Ｓ４においてユーザが所定の候補決定操作または行動をしたと判断しなかったとき（処理Ｓ４：Ｎｏ）には、処理Ｓ６に移行して処理を続ける。

　以下、さらに設定条件の内容に応じた動作例について、それぞれ分けて説明する。

［第１の動作例］
　まず設定条件を、ユーザの視線方向または頭部の方向が基準方向に向かって移動していることを条件とする場合について説明する。

　この例の本実施の形態の情報処理装置１は、ユーザの頭部に装着される表示装置２、及びユーザにより操作される操作デバイス３に接続される。この例では、まばたきセンサ４は必ずしも必要ではない。

　図５に例示するように、当初、ユーザが所定の方向（「Ｎ」の文字が描画されている向き）を向いている状態から、頭部を右（φが大きくなる方向、図５の「Ｅ」の文字が描画されている向き）に向け、さらに視線をより右側に向けて、図５のＳＥの向きを見る方向へ向けたとする（Ｓ２１）。このとき、情報処理装置１がユーザの頭部の方向、及び視線方向の情報を取得して、頭部の方向（θH，φH，ψH）＝（０，９０，０）、視線方向（θE，φE，ψE）＝（０，１３５，０）を取得する。

　このとき各成分と基準方向の対応する成分との差の値のうち最も大きい値となっている成分（φH）は、予め定めたしきい値（例えば５度）を超えている（候補決定条件を満足する）。そこで、ここでユーザが操作デバイス３の所定のボタン（視野を設定するボタンとして予め設定されたボタン）を押下すると（Ｓ２２）、情報処理装置１は、その時点でのユーザの視線方向の情報（θE，φE，ψE）＝（０，１３５，０）に相当する仮想空間の方向（つまり、（θE－α0，φE－β0，ψE－γ0）、ここでは（θE，φE，ψE）となる）を、仮想空間基準方向の候補（αC，βC，γC）＝（θE，φE，ψE）として決定して記憶し、候補決定フラグをオンとする。

　次に、ユーザが頭部の向きを基準方向に戻すよう頭部を動かすと、情報処理装置１は、連続して取得した二回分のユーザの頭部の方向の情報を用い、頭部の方向が基準方向に移動していると判断する（Ｓ２３）。そして情報処理装置１は、ユーザの頭部の方向が基準方向に向かって移動している（設定条件が満足されている）と判断して、記憶している仮想空間基準方向の候補（「ＳＥ」の文字が描画されている向き）を新たな仮想空間基準方向として設定し（α0，β0，γ0）＝（αC，βC，γC）、候補決定フラグをオフとする。

　情報処理装置１は、以降、取得したユーザの視線方向の情報（θE，φE，ψE）と、設定された仮想空間基準方向（「ＳＥ」の文字が描画されている向き）の情報（α0，β0，γ0）とを用いて、仮想空間でのユーザの視野の方向を（θE－α0，φE－β0，ψE－γ0）と定め、この方向の所定の画角の範囲（視野）内のオブジェクトの画像をレンダリングし、表示装置２に表示させる。

　従ってユーザの視線が実空間基準方向に戻ったときには、ユーザは、設定された仮想空間基準方向のオブジェクトの画像として「ＳＥ」の文字が描画されている向きの画像を見ることとなる。

　つまりこの例では、ユーザは当初仮想空間の「Ｎ」の文字が描画されている向きを正面としているが、「ＳＥ」の文字が描画されている向きを見ながら所定の候補決定操作を行い、次に正面側に頭部の方向を戻すと、当該頭部の方向を正面に戻す間に、仮想空間がユーザの周りに回転されて、「ＳＥ」の文字が描画されている向きがユーザの正面となるように設定される。

［第２の動作例］
　次に、設定条件を、ユーザの視線方向または頭部の方向が基準方向に向かって移動しており、かつ、まばたきが行われたことを条件とする場合について説明する。

　この例の本実施の形態の情報処理装置１は、ユーザの頭部に装着される表示装置２、ユーザにより操作される操作デバイス３、及びまばたきセンサ４に接続される。

　図６に例示するように、当初、ユーザが所定の方向（「Ｎ」の文字が描画されている向き）を向いている状態から、頭部を右（φが大きくなる方向、図６の「Ｅ」の文字が描画されている向き）に向け、さらに視線をより右側に向けて、図６の「ＳＥ」の文字が描画された向きを見る方向へ向けたとする（Ｓ３１）。このとき、情報処理装置１がユーザの頭部の方向、及び視線方向の情報を取得して、頭部の方向（θH，φH，ψH）＝（０，９０，０）、視線方向（θE，φE，ψE）＝（０，１３５，０）を取得する。

　このとき各成分と基準方向の対応する成分との差の値のうち最も大きい値となっている成分（φH）は、予め定めたしきい値（例えば５度）を超えている（候補決定条件を満足する）。そこで、ここでユーザが操作デバイス３の所定のボタン（視野を設定するボタンとして予め設定されたボタン）を押下すると（Ｓ３２）、情報処理装置１は、その時点でのユーザの視線方向の情報（θE，φE，ψE）＝（０，１３５，０）に相当する仮想空間の方向（つまり、（θE－α0，φE－β0，ψE－γ0）、ここでは（θE，φE，ψE）となる）を、仮想空間基準方向の候補（αC，βC，γC）＝（θE，φE，ψE）として決定して記憶し、候補決定フラグをオンとする。

　次に、ユーザが頭部の向きを基準方向に戻すよう頭部を動かす。情報処理装置１は、ユーザのこの動作の間、連続して取得した二回分のユーザの頭部の方向の情報を用い、頭部の方向が基準方向に移動していると判断する（Ｓ３３）。そして情報処理装置１は、ユーザの頭部の方向が基準方向に向かって移動していると判断している間に、まばたきセンサ４が、ユーザがまばたきをしたことを示す信号を出力すると（Ｓ３４）、設定条件が満足されたものとして、記憶している仮想空間基準方向の候補（「ＳＥ」の文字が描画された向き）を新たな仮想空間基準方向として設定し（α0，β0，γ0）＝（αC，βC，γC）、候補決定フラグをオフとする。

　情報処理装置１は、以降、取得したユーザの視線方向の情報（θE，φE，ψE）と、設定された仮想空間基準方向（「ＳＥ」の文字が描画された向き）の情報（α0，β0，γ0）とを用いて、仮想空間でのユーザの視野の方向を（θE－α0，φE－β0，ψE－γ0）と定め、この方向の所定の画角の範囲（視野）内のオブジェクトの画像をレンダリングし、表示装置２に表示させる。

　つまりこの例では、ユーザは当初仮想空間の「Ｎ」の文字が描画されている向きを正面としているが、「ＳＥ」の文字が描画されている向きを見ながら所定の候補決定操作を行い、次に正面側に頭部の方向を戻しつつまばたきを行うと、当該まばたきをしている間に、仮想空間がユーザの周りに回転されて、「ＳＥ」の文字が描画された向きがユーザの正面となるように設定される。

［第３の動作例］
　次に、設定条件を、ユーザが所定の設定操作または行動を行ったことを条件とする場合について説明する。

　またここでの例では、候補決定条件として操作デバイス３の所定のボタンを押下したこと（押下したままとしていること）とし、設定条件を、操作デバイス３の当該所定のボタンから指を離したこととする。

　図７に例示するように、当初、ユーザが所定の方向（「Ｎ」の文字が描画されている向き）を向いている状態から、頭部を右（φが大きくなる方向、図７の「Ｅ」が描画された向き）に向け、さらに視線をより右側に向けて、図７の「ＳＥ」の文字が描画されている向きを見る方向へ向けたとする（Ｓ４１）。このとき、情報処理装置１がユーザの頭部の方向、及び視線方向の情報を取得して、頭部の方向（θH，φH，ψH）＝（０，９０，０）、視線方向（θE，φE，ψE）＝（０，１３５，０）を取得する。

　ここでユーザが操作デバイス３の所定のボタン（視野を設定するボタンとして予め設定されたボタン）を押下する（そしてそのまま押下した状態を維持する）と（Ｓ４２）、情報処理装置１は、当該ボタンを押下した時点でのユーザの視線方向の情報（θE，φE，ψE）＝（０，１３５，０）に相当する仮想空間の方向（つまり、（θE－α0，φE－β0，ψE－γ0）、ここでは（θE，φE，ψE）となる）を、仮想空間基準方向の候補（αC，βC，γC）＝（θE，φE，ψE）として決定して記憶し、候補決定フラグをオンとする。

　次に、ユーザが頭部の向きを実空間基準方向に戻すよう頭部を動かしつつ、ユーザが上記ボタンから指を離すと（Ｓ４３）、情報処理装置１は、設定条件が満足されたものとして、記憶している仮想空間基準方向の候補（「ＳＥ」の文字が描画された向き）を新たな仮想空間基準方向として設定し（α0，β0，γ0）＝（αC，βC，γC）、候補決定フラグをオフとする。

　従ってユーザがボタンから指を離した時点以降、ユーザは、正面に向いたときに、設定された仮想空間基準方向のオブジェクトの画像として「ＳＥ」の文字が描画されている向きの画像を見ることとなる。

［基準方向へ戻るまでの間に複数回の操作が行われる場合］
　なお、ここでは、ユーザが頭部の向きを実空間基準方向に戻すよう頭部を動かしつつ、ユーザが上記ボタンから指を離すと、情報処理装置１は、その時点で設定条件が満足されたものとして、記憶している仮想空間基準方向の候補（「ＳＥ」の文字が描画されている向き）を新たな仮想空間基準方向として設定する（α0，β0，γ0）＝（αC，βC，γC）こととした。しかしながら、本実施の形態はこれに限られない。

　例えば、ユーザが頭部の向きを実空間基準方向に戻すよう頭部を動かしつつ、実空間基準方向と所定の角度（しきい値となる角度、例えば５度、などとして予め定める）を超えて離れている方向で上記ボタンから指を離した場合、情報処理装置１は、その時点の実空間での頭部の方向（θM，φM，ψM）を用いて、次のように仮想空間基準方向を設定してもよい。

　すなわち情報処理装置１は、上記の場合、仮想空間基準方向を、（α0，β0，γ0）＝（αC－θM，βC－φM，γC－ψM）とする。つまり、情報処理装置１は、ユーザが頭部の向きを実空間基準方向に戻すよう頭部を動かしつつ、実空間基準方向と所定の角度を超えて離れている方向で上記ボタンから指を離した場合、その時点のユーザの視線方向に、決定した仮想空間基準方向の候補が表す方向が位置するように、仮想空間を、仮想空間内でのユーザの周りに回転させる。

　その後、情報処理装置１は、所定の設定操作が行われるごとに、ユーザの頭部の向きが、実空間基準方向と所定の角度を超えて離れている方向にあるか否かを調べ、所定の角度を超えて離れている方向にあれば、その時点の実空間での頭部の方向（θM，φM，ψM）を用いて、仮想空間基準方向を、（α0，β0，γ0）＝（αC－θM，βC－φM，γC－ψM）と設定する。また、所定の設定操作が行われたときに、ユーザの頭部の向きが、実空間基準方向と所定の角度を超えて離れている方向になければ（実空間基準方向から所定の角度範囲内であれば）、記憶している仮想空間基準方向の候補を新たな仮想空間基準方向として設定し（α0，β0，γ0）＝（αC，βC，γC）、候補決定フラグをオフとする。

　この例では、ユーザが上記所定の設定操作を行う度に、その時点の視野の方向に、決定された仮想空間基準方向の方向が表す方向のオブジェクト（上記の例では「ＳＥ」の文字）が描画されるようになる。

［まばたきを利用する変形例］
　またここまでの説明では、ユーザが仰角方向または左右方向に頭部を回転させて正面以外の方向に視線を向けた状態で操作デバイス３のボタンを押下すると、情報処理装置１が当該ユーザの視線の方向を仮想空間基準方向の候補として決定していた。また情報処理装置１は、その後の所定のタイミングで仮想空間基準方向を、当該決定した仮想空間基準方向の候補の方向に設定することとしていた。しかしながら本実施の形態はこの例に限られない。

　例えば情報処理装置１は、まばたきセンサ４に接続され、ユーザが操作デバイス３の所定の第１のボタン（右方向回転を指示するものとして設定されたボタン）を押下したときに、その時点での仮想空間基準方向から右へ所定の角度Δβだけ回転した方向（β0＋Δβの方向）を、仮想空間基準方向の候補と決定してもよい。

　またこの場合、ユーザが操作デバイス３の所定の第２のボタン（左方向回転を指示するものとして設定されたボタン）を押下したときに、その時点での仮想空間基準方向から左へ所定の角度Δβだけ回転した方向（β0－Δβの方向）を、仮想空間基準方向の候補と決定してもよい。

　そしてこの例では、情報処理装置１は、仮想空間基準方向の候補が設定された後、次にユーザがまばたきをしたとき（まばたきセンサ４が、ユーザがまばたきをした旨の信号を出力したとき）に、仮想空間基準方向を、当該決定した仮想空間基準方向の候補の方向に設定する。

　この例では、ユーザがまばたきをしている間に、視野の方向の回転が行われることとなる。

　またこの例において、仮想空間基準方向の候補の方向を得る際の回転の方向は上記の右方向または左方向に限られず、操作デバイス３のボタンの設定によって、仰角方向に上方向または下方向への回転が行われてもよい。

　さらに、ここでは操作デバイス３のボタンを操作することとしたが本実施の形態はこれに限られない。例えば、ユーザが頭部を左または右方向に所定の角度以上に回転させた状態で、まばたきをしたときに、その時点での仮想空間基準方向から所定の角度以上に回転している方向に所定の角度Δβだけ回転した方向を仮想空間基準方向の候補と決定してもよい。そしてさらに、仮想空間基準方向を、当該決定した仮想空間基準方向の候補の方向に設定することとしてもよい。

　この例では、操作デバイス３の操作が必要でなくなるので、より直感的な方法で視野方向の回転を行うことができる。

［目の開き具合を検出する例］
　なお、本実施の形態の情報処理装置１に接続されるまばたきセンサ４は、まばたきだけでなくユーザの目の開度を検出可能なものであってもよい。この場合、まばたきセンサ４は、所定のタイミングごとに繰り返してユーザの目の開度の情報を検出して情報処理装置１に出力するものとする。また、このときも、まばたきセンサ４は、ユーザがまばたきをしたときには、まばたきをした旨を表す信号を情報処理装置１に出力するものとする。

　この例では、情報処理装置１は、候補決定フラグがオンであるときに、まばたきセンサ４が出力するユーザの目の開度が予め定めたしきい値を下回るか否かを判断する。ここで目の開度が予め定めたしきい値を下回る状態とは、いわゆる薄目の状態である。つまり、ここでのしきい値は、一般的な人間が、視覚的認識が低下した状態にあると想定されるしきい値を設定しておくものとする。情報処理装置１は、ユーザの目の開度が当該しきい値を下回り、いわゆる薄目の状態にあると判断すると、情報処理装置１は、その時点の実空間での頭部の方向（θM，φM，ψM）と記憶している仮想空間基準方向の候補（αC，βC，γC）とを用いて、仮想空間基準方向を、（α0，β0，γ0）＝（αC－θM，βC－φM，γC－ψM）とする。つまり、情報処理装置１は、各時点のユーザの視線方向に、決定した仮想空間基準方向の候補が表す方向が位置するように、仮想空間を、仮想空間内でのユーザの周りに回転させる。

［任意の方向への回転］
　また、本実施の形態の情報処理装置１は、仮想空間基準方向を設定する設定条件として、ユーザが所定の設定操作を行ったことを条件とし、またユーザが当該操作を行ったときのユーザの実空間での頭部または視線の方向（θM，φM，ψM）と、仮想空間基準方向の候補（αC，βC，γC）とを用いて、仮想空間基準方向を、（α0，β0，γ0）＝（αC＋θM，βC＋φM，γC＋ψM）と設定してもよい。

　この例では、記憶している仮想空間基準方向の候補の方向が、上記設定操作を行ったときのユーザの視線の方向に設定される。つまり、ユーザは、頭部を動かして所望の方向に視線を配した状態で、仮想空間基準方向の候補を決定する候補決定操作等を行い、次に、別の方向（設定方向と呼ぶ）に視線を配した状態で、仮想空間基準方向を設定するための設定操作を行う。このとき、この例の情報処理装置１は、設定方向に仮想空間基準方向の候補が表す方向が位置するよう、仮想空間を、仮想的なユーザの位置の周りに回転させる。これによりユーザは任意の方向へ仮想空間を回転させることが可能となる。

　１　情報処理装置、２　表示装置、３　操作デバイス、４　まばたきセンサ、１１　制御部、１２　記憶部、１３　インタフェース部、２１　映像表示素子、２２　光学素子、２３　視線検出部、３１　オブジェクト情報取得部、３２　方向情報取得部、３３　基準決定部、３４　基準設定部、３５　レンダリング部、３６　出力部。

Claims

　ユーザの頭部に装着される表示装置に接続される情報処理装置であって、
　仮想的な三次元空間である仮想空間内のオブジェクトに係る情報を取得する手段と、
　前記表示装置を装着したユーザの頭部正面方向を表す情報、及び当該ユーザの視線方向の情報を取得する取得手段と、
　前記仮想空間内に定められた仮想的な基準方向を基準としたユーザの視野を、前記取得した頭部正面方向を表す情報、または視線方向の情報に基づいて設定し、当該設定したユーザの視野内の前記オブジェクトの画像を生成して、前記表示装置に出力する画像出力手段と、
　前記仮想空間の基準方向候補を決定する基準決定手段と、
　所定の設定条件が満足されたときに、前記基準決定手段が決定した基準方向候補が表す仮想空間内の方向を、前記仮想空間の基準方向として設定する基準設定手段と、
を含む情報処理装置。
　請求項１に記載の情報処理装置であって、
　前記基準決定手段は、前記取得した情報が表すユーザの頭部正面方向または視線方向が、所定の候補決定条件を満足する方向である間に、前記取得した視線方向の情報に基づいて、前記仮想空間内の基準方向候補を決定する情報処理装置。
　請求項２に記載の情報処理装置であって、
　前記設定条件は、ユーザの頭部正面方向が、予め定められた方向へ向かって回転しているとの条件を含む情報処理装置。
　請求項３に記載の情報処理装置であって、
　前記設定条件は、ユーザの頭部正面方向が、予め定められた方向へ向かって回転しており、かつ、ユーザがまばたきをしたとの条件を含む情報処理装置。
　請求項３に記載の情報処理装置であって、
　前記設定条件は、ユーザが所定の操作を行ったとの条件を含む情報処理装置。
　請求項１に記載の情報処理装置であって、
　前記基準決定手段は、ユーザの指示に応じて、前記仮想空間内の基準方向を所定の回転角だけ回転して、前記仮想空間内の基準方向の候補を決定する情報処理装置。
　ユーザの頭部に装着される表示装置に接続される情報処理装置を用い、
　仮想的な三次元空間である仮想空間内のオブジェクトに係る情報を取得させ、
　取得手段が、前記表示装置を装着したユーザの頭部正面方向を表す情報、及び当該ユーザの視線方向の情報を取得するステップと、
　画像出力手段が、前記仮想空間内に定められた仮想的な基準方向を基準としたユーザの視野を、前記取得した頭部正面方向を表す情報、または視線方向の情報に基づいて設定し、当該設定したユーザの視野内の前記オブジェクトの画像を生成して、前記表示装置に出力するステップと、
　基準決定手段が、前記仮想空間の基準方向候補を決定するステップと、
　基準設定手段が、所定の設定条件が満足されたときに、前記基準決定手段が決定した基準方向候補が表す仮想空間内の方向を、前記仮想空間の基準方向として設定するステップと、
を含む情報処理装置の制御方法。
　ユーザの頭部に装着される表示装置に接続される情報処理装置を、
　仮想的な三次元空間である仮想空間内のオブジェクトに係る情報を取得する手段と、
　前記表示装置を装着したユーザの頭部正面方向を表す情報、及び当該ユーザの視線方向の情報を取得する取得手段と、
　前記仮想空間内に定められた仮想的な基準方向を基準としたユーザの視野を、前記取得した頭部正面方向を表す情報、または視線方向の情報に基づいて設定し、当該設定したユーザの視野内の前記オブジェクトの画像を生成して、前記表示装置に出力する画像出力手段と、
　前記仮想空間の基準方向候補を決定する基準決定手段と、
　所定の設定条件が満足されたときに、前記基準決定手段が決定した基準方向候補が表す仮想空間内の方向を、前記仮想空間の基準方向として設定する基準設定手段と、
として機能させるプログラム。