JP6730753B2 - Program and image display system - Google Patents
Program and image display system Download PDFInfo
- Publication number
- JP6730753B2 JP6730753B2 JP2019163708A JP2019163708A JP6730753B2 JP 6730753 B2 JP6730753 B2 JP 6730753B2 JP 2019163708 A JP2019163708 A JP 2019163708A JP 2019163708 A JP2019163708 A JP 2019163708A JP 6730753 B2 JP6730753 B2 JP 6730753B2
- Authority
- JP
- Japan
- Prior art keywords
- character
- display
- motion
- control unit
- virtual space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 claims description 131
- 230000010365 information processing Effects 0.000 claims description 21
- 238000003384 imaging method Methods 0.000 claims description 15
- 230000004048 modification Effects 0.000 description 41
- 238000012986 modification Methods 0.000 description 41
- 210000003128 head Anatomy 0.000 description 31
- 230000009471 action Effects 0.000 description 30
- 230000008859 change Effects 0.000 description 29
- 238000001514 detection method Methods 0.000 description 20
- 230000003287 optical effect Effects 0.000 description 15
- 238000004458 analytical method Methods 0.000 description 11
- 238000000034 method Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000008901 benefit Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 210000001508 eye Anatomy 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 210000005252 bulbus oculi Anatomy 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000011435 rock Substances 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- IUVCFHHAEHNCFT-INIZCTEOSA-N 2-[(1s)-1-[4-amino-3-(3-fluoro-4-propan-2-yloxyphenyl)pyrazolo[3,4-d]pyrimidin-1-yl]ethyl]-6-fluoro-3-(3-fluorophenyl)chromen-4-one Chemical class C1=C(F)C(OC(C)C)=CC=C1C(C1=C(N)N=CN=C11)=NN1[C@@H](C)C1=C(C=2C=C(F)C=CC=2)C(=O)C2=CC(F)=CC=C2O1 IUVCFHHAEHNCFT-INIZCTEOSA-N 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003867 tiredness Effects 0.000 description 1
- 208000016255 tiredness Diseases 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、仮想空間を撮像した画像を表示するための技術に関する。 The present invention relates to a technique for displaying an image obtained by capturing a virtual space.
仮想空間内に設置された仮想的なカメラ(以下「仮想カメラ」という)により撮像された画像を表示装置に表示させる技術が従来から提案されている。例えば特許文献1には、ヘッドマウントディスプレイの傾きに応じて仮想空間内にメニュー画像を表示する構成が開示されている。 Conventionally, there has been proposed a technique for displaying an image captured by a virtual camera (hereinafter referred to as “virtual camera”) installed in a virtual space on a display device. For example, Patent Document 1 discloses a configuration in which a menu image is displayed in the virtual space according to the tilt of the head mounted display.
仮想空間内のキャラクタ等のオブジェクトとの間でコミュニケーションするゲーム等のコンテンツが従来から提案されている。この種のコンテンツをヘッドマウントディスプレイにより表示する場面では、利用者による操作が制限されるという問題がある。ヘッドマウントディスプレイとは別個の操作機器を用意すれば、利用者による操作の制限は緩和されるが、装置構成が複雑化するという問題がある。以上の事情を考慮して、本発明は、仮想空間内のオブジェクトに対する操作を簡便に実現することを目的とする。 BACKGROUND ART Contents such as games that communicate with objects such as characters in a virtual space have been conventionally proposed. When displaying this kind of content on the head mounted display, there is a problem that the operation by the user is limited. If an operating device separate from the head mounted display is prepared, the restriction on the operation by the user is eased, but there is a problem that the device configuration becomes complicated. In consideration of the above circumstances, an object of the present invention is to easily realize an operation on an object in a virtual space.
以上の課題を解決するために、本発明の好適な態様に係るプログラムは、ヘッドマウントディスプレイの方向に応じて方向が制御される仮想カメラで仮想空間を撮像した画像であって、両眼視差を利用した立体視画像を、前記ヘッドマウントディスプレイの表示装置に表示させる表示制御部、および、前記ヘッドマウントディスプレイのロール方向の回転と、前記ヘッドマウントディスプレイの方向に応じて前記仮想空間における方向が変化する基準線と前記仮想空間内のオブジェクトとの位置関係と、に応じて当該オブジェクトの動作を制御する動作制御部としてコンピュータを機能させる。 In order to solve the above problems, a program according to a preferred embodiment of the present invention is an image obtained by capturing a virtual space with a virtual camera whose direction is controlled according to the direction of a head mounted display, A display control unit that causes the display device of the head-mounted display to display the stereoscopic image used, rotation of the head-mounted display in a roll direction, and a direction in the virtual space changes according to the direction of the head-mounted display. The computer is caused to function as an operation control unit that controls the operation of the object according to the positional relationship between the reference line and the object in the virtual space.
本発明の好適な態様に係る画像表示システムは、ヘッドマウントディスプレイと情報処理装置とを具備する画像表示システムであって、前記情報処理装置は、ヘッドマウントディスプレイの方向に応じて方向が制御される仮想カメラで仮想空間を撮像した画像であって、両眼視差を利用した立体視画像を、前記ヘッドマウントディスプレイの表示装置に表示させる表示制御部と、前記ヘッドマウントディスプレイのロール方向の回転と、前記ヘッドマウントディスプレイの方向に応じて前記仮想空間における方向が変化する基準線と前記仮想空間内のオブジェクトとの位置関係と、に応じて当該オブジェクトの動作を制御する動作制御部とを具備する。 An image display system according to a preferred aspect of the present invention is an image display system including a head mounted display and an information processing apparatus, and the information processing apparatus is controlled in direction according to the direction of the head mounted display. An image obtained by capturing a virtual space with a virtual camera, a stereoscopic image using binocular parallax, a display control unit for displaying on a display device of the head mounted display, rotation of the head mounted display in a roll direction, A motion control unit that controls the motion of the object according to the positional relationship between the reference line whose direction in the virtual space changes according to the direction of the head mounted display and the object in the virtual space.
[A:第1実施形態]
図1は、本発明の第1実施形態に係る画像表示システム1Aの外観を例示する斜視図である。画像表示システム1Aは、画像を表示するための映像機器であり、端末装置10と装着具20とを具備する。端末装置10は、例えばスマートフォンまたはタブレット端末等の可搬型の情報端末である。端末装置10は、装着具20に対して着脱可能に設置される。装着具20は、端末装置10を利用者Uの頭部に装着するための器具である。例えば、図1の例示の通り、利用者Uの頭部に巻回されるベルトを具備するゴーグル型のアタッチメントが装着具20として好適である。
[A: First Embodiment]
FIG. 1 is a perspective view illustrating the appearance of an
図2は、端末装置10の構成を例示するブロック図である。図2に例示される通り、端末装置10は、制御装置11と記憶装置12と表示装置13と検出装置14とを具備するコンピュータシステムである。制御装置11は、CPU(Central Processing Unit)等のプロセッサであり、画像表示システム1Aの各要素を統括的に制御する。記憶装置12は、制御装置11が実行するプログラムと制御装置11が使用する各種のデータとを記憶する。例えば、磁気記録媒体もしくは半導体記録媒体等の公知の記録媒体、または、複数種の記録媒体の組合せにより、記憶装置12が構成される。
FIG. 2 is a block diagram illustrating the configuration of the
表示装置13は、制御装置11による制御のもとで画像を表示する。例えば液晶表示パネルまたは有機EL(Electroluminescence)表示パネル等の平面型の表示器が表示装置13として利用される。図1から理解される通り、利用者Uの頭部に装着具20が装着された状態では、利用者Uの頭部に表示面が対向した状態で利用者Uの両眼の前方に表示装置13が配置される。第1実施形態の表示装置13は、利用者Uが立体感を知覚可能な立体視画像を表示する。立体視画像は、両眼視差が付与された右眼用画像と左眼用画像とで構成される。右眼用画像を利用者Uの右眼に視認させ、左眼用画像を利用者Uの左眼に視認させることで、利用者Uは立体感を知覚する。
The
図2に例示される通り、表示装置13と検出装置14と装着具20とはヘッドマウントディスプレイ(以下「HMD」という)30を構成し、制御装置11と記憶装置12とは、HMD30に画像を表示させる情報処理装置40を構成する。すなわち、画像表示システム1Aは、HMD30と情報処理装置40とを具備する。前述の通り、第1実施形態では、情報処理装置40と表示装置13と検出装置14とが単体の端末装置10により実現される。なお、情報処理装置40をHMD30の要素として把握してもよい。
As illustrated in FIG. 2, the
図2の検出装置14は、HMD30の姿勢に応じた検出信号を出力するセンサである。具体的には、検出装置14は、角速度を検知するジャイロセンサ、加速度を検知する加速度センサ、傾斜角を検知する傾斜センサ、および、地磁気により方向を検知する地磁気センサ等の複数種のセンサから選択された1種類以上のセンサで構成される。検出装置14から出力される検出信号の解析により、HMD30の姿勢または姿勢の変化を特定することが可能である。検出装置14は、表示装置13または端末装置10の姿勢に応じた検出信号を出力するセンサとも換言される。なお、検出信号を増幅する増幅器、および検出信号をアナログからデジタルに変換するA/D変換器の図示は便宜的に省略した。
The
図1に例示される通り、HMD30の姿勢は、原点Oにおいて相互に直交する3軸(X軸,Y軸,Z軸)で規定される。X軸は、表示装置13の表示面に垂直な軸線であり、利用者Uの前後方向に相当する。Y軸およびZ軸は、表示装置13の表示面に平行な軸線である。Y軸は、利用者Uの左右方向に相当し、Z軸は、利用者Uの上下方向に相当する。表示装置13の表示面に着目すると、X軸は表示面の奥行き方向に相当し、Y軸は表示面の横方向に相当し、Z方向は表示面の縦方向に相当する。X軸を中心とした円周の方向はロール方向であり、Y軸を中心とした円周の方向はピッチ方向であり、Z軸を中心とした円周の方向はヨー方向である。X軸の方向は、ピッチ方向の角度とヨー方向の角度とにより確定する。ロール方向の回転は、利用者Uが前方を向いた状態で頭部を左右に傾斜させる動作に相当する。すなわち、例えば利用者Uが首をかしげた場合にHMD30はロール方向に回転する。以下の説明では、図1に例示される通り、ロール方向における一方側を「第1側」と表記し、他方側を「第2側」と表記する。X軸を中心とした時計回りおよび反時計回りの一方が第1側であり、他方が第2側である。
As illustrated in FIG. 1, the attitude of the
図2の制御装置11は、記憶装置12に記憶されたプログラムを実行することで、図3に例示される通り、姿勢解析部41、表示制御部42Aおよび動作制御部43Aとして機能する。なお、制御装置11の機能の一部または全部を専用の電子回路で実現してもよい。
By executing the program stored in the
姿勢解析部41は、検出装置14が出力する検出信号を解析することでHMD30の姿勢を特定する。具体的には、姿勢解析部41は、HMD30の姿勢に関する姿勢データを所定の周期で順次に生成する。姿勢データは、HMD30の姿勢または姿勢の変化を表すデータである。
The
表示制御部42Aは、仮想空間V内の仮想カメラEにより撮像した画像を表示装置13に表示させる。図4は、仮想空間Vの説明図である。図4に例示される通り、仮想カメラEは、仮想空間V内に設置され、仮想空間Vにおける特定の範囲(以下「撮像範囲」という)Rを撮像する。撮像範囲Rは、仮想カメラEの光軸に対して縦方向および横方向における所定の角度にわたる範囲である。仮想カメラEの光軸は、仮想空間V内における利用者Uの仮想的な視線に相当する。第1実施形態の表示制御部42Aは、両眼視差を利用した立体視画像(右眼用画像および左眼用画像)を表示装置13に表示させる。したがって、仮想カメラEは、左眼用画像を撮像する第1仮想カメラと右眼用画像を撮像する第2仮想カメラとを含んで構成される。仮想カメラEが撮像した立体視画像を表す画像データが表示制御部42Aから表示装置13に順次に供給されることで、表示装置13には立体視画像が表示される。
The
表示制御部42Aは、仮想空間V内における仮想カメラEの方向を、姿勢解析部41が特定したHMD30の方向に応じて制御する。具体的には、原点Oを中心としたX軸の回転に連動して仮想カメラEの光軸の方向(さらには撮像範囲R)が変化する。例えば、HMD30がヨー方向に回転した場合には、仮想カメラEの光軸が原点Oを中心として左右に回転し、HMD30がピッチ方向に回転した場合には、仮想カメラEの光軸が原点Oを中心として上下に回転する。第1実施形態では、HMD30がロール方向に回転した場合でも仮想カメラEの姿勢(光軸を中心とした角度)は変化しない。ただし、HMD30のロール方向の回転に応じて、光軸を中心とした仮想カメラEの傾きを変化させてもよい。
The
図4に例示される通り、仮想カメラEが設置された仮想空間V内にはキャラクタCが配置される。第1実施形態のキャラクタCは、仮想空間V内で活動する仮想的な生物(例えば人間、動物またはモンスター)を表すオブジェクトであり、頭部と胴体部とを含んで構成される。仮想空間V内でキャラクタCに対して随時に接触(スキンシップ)しながら当該キャラクタCと交流するゲームが画像表示システム1Aにより利用者Uに提供される。
As illustrated in FIG. 4, the character C is arranged in the virtual space V in which the virtual camera E is installed. The character C of the first embodiment is an object that represents a virtual creature (for example, a human being, an animal, or a monster) that is active in the virtual space V, and includes a head and a body. The
仮想空間V内には基準線Qが設定される。基準線Qは、HMD30の方向(X軸の方向)に応じて仮想空間V内における方向が変化する直線である。第1実施形態では、図4に例示される通り、仮想カメラEの光軸を基準線Qとして例示する。例えば、利用者Uが頭部を右側に向ければ基準線Qは右側に回転し、利用者Uが頭部を左側に向ければ基準線Qは左側に回転する。以上の説明から理解される通り、基準線Qは、仮想空間V内における利用者Uの仮想的な視線である。 A reference line Q is set in the virtual space V. The reference line Q is a straight line whose direction in the virtual space V changes according to the direction of the HMD 30 (direction of the X axis). In the first embodiment, as illustrated in FIG. 4, the optical axis of the virtual camera E is illustrated as the reference line Q. For example, if the user U points his head to the right, the reference line Q rotates to the right, and if the user U points his head to the left, the reference line Q rotates to the left. As can be understood from the above description, the reference line Q is a virtual line of sight of the user U in the virtual space V.
図5は、表示装置13に表示される画像の模式図である。図5に例示される通り、表示制御部42Aは、仮想空間V内で仮想カメラEが撮像した立体視画像を表示装置13に表示させる。撮像範囲R内にキャラクタCが位置する場合には当該キャラクタCが表示装置13に表示される。また、表示制御部42Aは、基準線Qの方向を表す画像(以下「指示画像」という)Gを表示装置13に表示させる。指示画像Gは、仮想空間V内において基準線Qの線上の所定の位置に配置される。第1実施形態における基準線Qは仮想カメラEの光軸であるから、表示装置13の表示面内における所定の位置に指示画像Gは表示される。
FIG. 5 is a schematic diagram of an image displayed on the
図3の動作制御部43Aは、仮想空間V内におけるキャラクタCの動作を制御する。動作制御部43Aは、ゲームの進行に応じてキャラクタCの動作を制御するほか、仮想空間V内における利用者Uの接触に対応した動作(以下「反応動作」という)をキャラクタCに実行させる。具体的には、動作制御部43Aは、仮想空間V内で利用者UがキャラクタCに接触したか否かを判定し、利用者Uによる接触に対する反応動作をキャラクタCに実行させる。例えば、姿勢の変化、表情の変化、または特定の台詞の発音等の各種の動作が、反応動作の典型例である。
The
動作制御部43Aは、姿勢解析部41が特定したHMD30の姿勢の変化に応じて、仮想空間V内で利用者UがキャラクタCに接触したか否かを判定する。第1実施形態の動作制御部43Aは、HMD30がロール方向に回転した場合に、仮想空間V内で利用者UがキャラクタCに接触したと判定する。すなわち、HMD30のロール方向の回転は、仮想空間V内で利用者UがキャラクタCに接触するための指示(動作指示)に相当する。具体的には、動作制御部43Aは、HMD30がロール方向に回転した場合に、基準線QとキャラクタCの表面とが交差する地点(以下「接触地点」という)Pに利用者Uが接触したと判定する。接触地点PはキャラクタCの表面上に位置する。なお、基準線Qが複数の地点でキャラクタCの表面に交差する場合、複数の地点のうち仮想カメラE(すなわち利用者U)に最も近い地点が接触地点Pとして選択される。
The
以上に説明した通り、第1実施形態では、HMD30のロール方向の回転に応じて仮想空間V内のキャラクタCの動作が制御される。したがって、キャラクタCの動作を制御するための指示を利用者Uが入力する操作装置をHMD30とは別個に用意することを必要とせずに、利用者Uからの指示をキャラクタCの動作に反映させることができる。第1実施形態では特に、基準線QとキャラクタCとが交差する関係にある場合に利用者UがキャラクタCに接触したと判定されるから、利用者UはキャラクタCを視界内に捉えながら当該キャラクタCを操作することが可能である。すなわち、利用者UがキャラクタCをより直観的に操作できるという利点がある。
As described above, in the first embodiment, the motion of the character C in the virtual space V is controlled according to the rotation of the
図6は、動作制御部43Aが実行する処理(以下「第1制御処理」という)の具体的な内容を例示するフローチャートである。動作制御部43Aは、図6の第1制御処理を所定の周期で反復的に実行する。記憶装置12には、仮想空間V内において利用者UがキャラクタCに接触した状態(以下「接触状態」という)にあるか否かを表す接触判定データが記憶される。接触判定データは、例えば接触状態および非接触状態の何れかを示すフラグである。
FIG. 6 is a flowchart exemplifying the specific contents of the processing executed by the
第1制御処理を開始すると、動作制御部43Aは、接触判定データが接触状態を示すか否かを判定する(Sa1)。接触判定データが非接触状態を示す場合(Sa1:NO)、動作制御部43Aは、HMD30がロール方向に回転したか否かを判定する(Sa2)。具体的には、動作制御部43Aは、姿勢解析部41から順次に供給される姿勢データを参照することで、HMD30がロール方向の第1側(例えば時計回り)に回転したか否かを判定する。
When the first control process is started, the
図7は、HMD30がロール方向に回転したか否かを判定する処理の説明図である。図7に例示される通り、動作制御部43Aは、HMD30がロール方向の第1側に回転した角度θが閾値θtを上回る場合に、HMD30がロール方向に回転したと判定する。角度θは、X軸を中心としてZ軸またはY軸が回転した角度であり、例えば鉛直方向を基準(θ=0)として規定される。他方、HMD30の回転角度θが閾値θtを下回る場合、動作制御部43Aは、HMD30がロール方向に回転したと判定しない。以上に説明した通り、第1実施形態では、閾値θtを下回る程度の回転ではHMD30はロール方向に回転したと判定されない。したがって、HMD30が回転したと過剰な頻度で判定される可能性を低減できる。また、利用者UがHMD30の回転を意図していないにも関わらずHMD30が回転したと判定される可能性(すなわち誤操作の可能性)を低減できるという利点もある。
FIG. 7 is an explanatory diagram of a process of determining whether the
なお、HMD30にロール方向の回転のみが単独で発生した場合だけでなく、ロール方向の回転とともにピッチ方向またはヨー方向の回転が発生した場合でも、ロール方向における回転の角度が閾値θtを上回る場合には、HMD30がロール方向に回転したと判定される。
It should be noted that not only when the rotation in the roll direction alone occurs in the
図6の第1制御処理において、HMD30がロール方向の第1側に回転したと判定すると(Sa2:YES)、動作制御部43Aは、基準線Qが仮想空間V内のキャラクタCに交差するか否かを判定する(Sa3)。すなわち、基準線Qの線上にキャラクタCが存在するか否かが判定される。図8の例示の通り、基準線Qが仮想空間V内のキャラクタCに交差する場合(Sa3:YES)、動作制御部43Aは、利用者UがキャラクタCの接触地点Pに接触した接触状態にあると判定する(Sa4)。具体的には、接触状態を示す数値に接触判定データを変更する。以上の説明から理解される通り、動作制御部43Aは、HMD30がロール方向に回転した場合に、利用者Uが仮想空間V内でキャラクタCの接触地点Pに接触したと判定する。すなわち、利用者Uは、HMD30をロール方向に回転させることで、キャラクタCの接触地点Pに対する接触を指示することが可能である。
In the first control process of FIG. 6, when it is determined that the
接触状態に遷移した場合、動作制御部43Aは、反応動作をキャラクタCに実行させる(Sa5)。具体的には、動作制御部43Aは、キャラクタCのうち基準線Qが交差する接触地点Pの位置に応じた反応動作をキャラクタCに実行させる。すなわち、キャラクタCが実行する反応動作は、接触地点Pの位置に応じて変化する。例えば、キャラクタCの表面を区分した複数の領域の各々について反応動作の種類を規定するテーブルが記憶装置12に記憶される。動作制御部43Aは、キャラクタCの表面の複数の領域のうち、接触地点Pを含む領域についてテーブルに規定された反応動作をキャラクタCに実行させる。例えば、動作制御部43Aは、接触地点PがキャラクタCの頭部に位置する場合には、利用者Uによる接触を受容する反応動作(例えば喜ぶ、笑うまたは近付く等の好意的な動作)をキャラクタCに実行させる。他方、動作制御部43Aは、接触地点PがキャラクタCの胴体部に位置する場合には、利用者Uによる接触を拒否する反応動作(例えば怒る、悲しむまたは遠離る等の否定的な動作)をキャラクタCに実行させる。以上の構成によれば、接触地点Pの位置に応じてキャラクタCの反応動作を多様に変化させることが可能である。
When transitioning to the contact state, the
他方、HMD30がロール方向の第1側に回転しない場合(Sa2:NO)、または、基準線QがキャラクタCに交差しない場合(Sa3:NO)、動作制御部43Aは、非接触状態を示す数値に接触判定データを維持する。すなわち、HMD30がロール方向の第1側に回転した場合でも、図5の例示のように基準線QがキャラクタCに交差しないときには、利用者UがキャラクタCに接触していないと判定される。
On the other hand, when the
仮想空間V内で利用者UがキャラクタCに接触した場合、以降における第1制御処理のステップSa1では、接触判定データが接触状態を示すと判定される。接触判定データが接触状態を示す場合(Sa1:YES)、動作制御部43Aは、姿勢解析部41から順次に供給される姿勢データを参照することで、HMD30がロール方向の第2側(例えば反時計回り)に回転したか否かを判定する。具体的には、動作制御部43Aは、ロール方向の第2側に対する回転角度θが所定の閾値θtを上回る場合に、HMD30がロール方向の第2側に回転したと判定する。HMD30がロール方向の第2側に回転した場合(Sa6:YES)、動作制御部43Aは、キャラクタCに対する接触が解除されたと判定する(Sa7)。具体的には、動作制御部43Aは、非接触状態を示す数値に接触判定データを変更する。他方、HMD30がロール方向の第2側に回転しない場合(Sa6:NO)、動作制御部43Aは、接触状態を示す数値に接触判定データを維持する。
When the user U contacts the character C in the virtual space V, it is determined that the contact determination data indicates the contact state in step Sa1 of the first control process thereafter. When the contact determination data indicates the contact state (Sa1: YES), the
なお、キャラクタCに対する接触が解除された場合に、動作制御部43Aが、接触の解除に反応する動作をキャラクタCに実行させる構成が好適であるが、接触の解除に反応する動作をキャラクタCに実行させない構成も想定される。
It should be noted that it is preferable that the
以上の説明から理解される通り、動作制御部43Aは、HMD30がロール方向の第1側に回転した場合(Sa2:YES)に利用者UがキャラクタCに接触したと判定する(Sa4)。他方、利用者UがキャラクタCに接触した状態(Sa1:YES)において、HMD30がロール方向の第2側に回転した場合(Sa6:YES)に、キャラクタCに対する接触が解除されたと判定する。以上の構成によれば、利用者Uは、ロール方向におけるHMD30の回転の向きに応じて、仮想空間V内のキャラクタCに対する接触の発生と解除とを指示することができる。ロール方向において相互に逆向きの回転が、キャラクタCに対する接触の発生および解除という反対の動作に対応するから、キャラクタCに対する接触の発生および解除を利用者Uが直観的に把握し易いという利点もある。
As understood from the above description, the
第1実施形態においては、例えば以下に例示する構成を採用してもよい。 In the first embodiment, for example, the configuration exemplified below may be adopted.
[変形例A1]
変形例A1における動作制御部43Aは、仮想空間V内においてキャラクタCに対する接触が維持される時間長に応じた反応動作をキャラクタCに実行させる。具体的には、動作制御部43Aは、接触状態が継続する期間(以下「接触期間」という)内において反応動作を経時的に変化させる。接触期間は、HMD30がロール方向の第1側に回転してから第2側に回転するまでの期間である。なお、接触判定データが接触状態を示す数値に設定されてから、非接触状態を示す数値に変更されるまでの期間を接触期間としてもよい。動作制御部43Aは、接触期間の始点から終点にかけてキャラクタCの反応動作を経時的に変化させる。したがって、接触期間の時間長に応じてキャラクタCの反応動作は変化する。以上の構成によれば、利用者UがキャラクタCに接触する時間長に応じてキャラクタCの反応動作を多様に変化させることができる。
[Modification A1]
The
[変形例A2]
変形例A2における記憶装置12には、キャラクタCに関するパラメータが記憶される。具体的には、利用者Uに対するキャラクタCの好感度がパラメータとして記憶装置12に記憶される。好感度は、キャラクタCから利用者Uに対する好意的な感情の度合を示すパラメータである。動作制御部43Aは、ゲームの進行に応じて好感度を変化させるほか、キャラクタCから利用者Uに対する好感度を当該キャラクタCに対する接触に応じて変化させる。具体的には、利用者UがキャラクタCに接触する度合(例えば回数または時間)が大きいほど、当該利用者Uに対するキャラクタCからの好感度は大きい数値に設定される。なお、以上の例示では、利用者Uに対するキャラクタCの好感度として説明したが、記憶装置12に記憶される好感度は、利用者Uが使用するキャラクタ(プレイヤキャラクタ)に対するキャラクタCからの好感度でもよい。利用者Uは仮想空間V内に複数のプレイヤキャラクタを所持し得る。
[Modification A2]
The
また、動作制御部43Aは、キャラクタCについて記憶された好感度に応じて反応動作を変化させる。すなわち、利用者UがキャラクタCに接触した場合(Sa2:YES,Sa3:YES)にキャラクタCが実行(Sa4)する反応動作の種類が、当該キャラクタCの好感度に応じて変化する。例えば、キャラクタCとの接触の回数または時間が不足していて好感度が低い状態では、利用者Uが頭部に接触するとキャラクタCは当該接触を拒否する反応動作を実行する。他方、キャラクタCとの接触の回数または時間が充分に確保されて好感度が高い状態では、利用者Uが頭部に接触するとキャラクタCは当該接触を受容する反応動作を実行する。以上の構成によれば、キャラクタCに関するパラメータに応じてキャラクタCの反応動作を多様に変化させることができる。
Further, the
なお、キャラクタCの反応動作に影響するパラメータは、以上に例示した好感度に限定されない。例えば、キャラクタCの成長度(レベル)、または、利用者UとキャラクタCとの間の親密度等の各種のパラメータが、利用者UによるキャラクタCの接触に応じて変化し、当該パラメータに応じてキャラクタCの反応動作が制御される。 The parameters that influence the reaction action of the character C are not limited to the positivity illustrated above. For example, various parameters such as the degree of growth (level) of the character C or the degree of intimacy between the user U and the character C change according to the contact of the character C by the user U, and Thus, the reaction motion of the character C is controlled.
[変形例A3]
変形例A3における動作制御部43Aは、HMD30がロール方向に回転した角度θに応じた反応動作をキャラクタCに実行させる。例えば、HMD30の回転角度θは、仮想空間V内において利用者UがキャラクタCに接触する仮想的な圧力に相当する。例えば、回転角度θが小さい場合には、利用者UがキャラクタCに対して軽く接触している状態を意味し、回転角度θが大きい場合には、利用者UがキャラクタCを強く押圧している状態を意味する。動作制御部43Aは、例えば回転角度θが小さい場合には、利用者Uによる接触を受容する反応動作をキャラクタCに実行させ、回転角度θが大きい場合には、利用者Uによる接触を拒否する反応動作をキャラクタCに実行させる。以上の構成によれば、HMD30の回転角度θ(すなわち利用者UがキャラクタCに接触する仮想的な圧力)に応じてキャラクタCの反応動作を多様に変化させることができる。
[Modification A3]
The
[変形例A4]
変形例A4における表示制御部42Aは、HMD30のロール方向における回転に応じて仮想カメラE(すなわち仮想空間V内における仮想的な視点)を仮想空間V内で移動させる。具体的には、表示制御部42Aは、仮想空間V内における仮想カメラEとキャラクタCとの位置関係をHMD30の回転に連動して変化させる。例えば、仮想カメラEとキャラクタCとの距離がHMD30の回転角度θに応じて制御される。すなわち、HMD30のロール方向における回転に連動して仮想カメラEがオブジェクトの方向に移動する。
[Modification A4]
The
例えば、HMD30がロール方向の第1側に回転した場合、表示制御部42Aは、図9に矢印a1で示す通り、HMD30の回転角度θ(θ>0)に応じた移動量だけ仮想カメラEを仮想空間V内でキャラクタCに接近させる。他方、HMD30がロール方向の第2側に回転した場合、表示制御部42Aは、図9に矢印a2で示す通り、HMD30の回転角度θ(θ<0)に応じた移動量だけ仮想カメラEを仮想空間V内でキャラクタCから離間させる。以上の構成によれば、HMD30をロール方向に回転させる簡便な操作により、利用者Uは、仮想空間Vにおいて仮想カメラEを移動させることができる。
For example, when the
[変形例A5]
変形例A5における表示制御部42Aは、HMD30のロール方向における回転に応じて仮想カメラEによる撮像範囲R(すなわち仮想カメラEの画角)を変化させる。すなわち、仮想空間V内において表示装置13に表示される範囲がHMD30のロール方向の回転に応じて変化する。例えば、HMD30がロール方向の第1側に回転した場合、表示制御部42Aは、図10に矢印b1で示す通り、HMD30の回転角度θに応じた比率で撮像範囲Rを縮小する。したがって、例えば仮想空間V内のキャラクタCがズームイン(拡大)される。他方、HMD30がロール方向の第2側に回転した場合、表示制御部42Aは、図10に矢印b2で示す通り、HMD30の回転角度θに応じた比率で撮像範囲Rを拡大する。したがって、例えば仮想空間V内のキャラクタCがズームアウト(縮小)される。以上の構成によれば、HMD30をロール方向に回転させる簡便な操作により、利用者Uは、仮想空間V内における仮想カメラEの撮像範囲Rを変化させることができる。
[Modification A5]
The
[変形例A6]
第1実施形態では、HMD30がロール方向の第2側に回転した場合(Sa6:YES)にキャラクタCに対する接触が解除されたと判定したが、キャラクタCに対する接触が解除されたと判定するための条件は以上の例示に限定されない。例えば、動作制御部43Aは、HMD30がロール方向に回転した状態(Sa2:YES)から元に戻った場合に、キャラクタCに対する接触が解除されたと判定してもよい。具体的には、動作制御部43Aは、図6のステップSa6において、HMD30の回転角度θが、キャラクタCに対する接触のための回転が開始された時点における初期的な角度(例えばθ=0)に変化した場合に、キャラクタCに対する接触が解除されたと判定する(Sa7)。他方、ステップSa2では、動作制御部43Aは、HMD30の回転の方向(第1側/第2側)に関わらず、回転角度θが変化した場合に、利用者UがキャラクタCに接触したと判定する。以上の説明から理解される通り、HMD30の回転角度θを監視することで、HMD30の回転の方向(第1側/第2側)までは判別しなくても、キャラクタCに対する接触の発生と解除とを判定できる。すなわち、キャラクタCに対する接触の判定において、動作制御部43Aが、HMD30の回転の方向を判別する必要は必ずしもない。
[Modification A6]
In the first embodiment, when the
[変形例A7]
第1実施形態では、基準線Qが仮想空間V内のキャラクタCに交差する場合(Sa3:YES)に、利用者Uによる接触に対する反応動作をキャラクタCに実行させたが、基準線QとキャラクタCとの間の位置関係に関する条件は以上の例示に限定されない。例えば、基準線QとキャラクタCとの距離が所定の閾値を下回ることを条件として、反応動作をキャラクタCに実行させてもよい。基準線QとキャラクタCとの距離が所定の閾値を下回る場合には、基準線QがキャラクタCに交差する場合のほか、閾値を下回る範囲で基準線QがキャラクタCから離間した場合も含まれる。また、基準線QがキャラクタCの特定の部位に交差することを条件として、反応動作をキャラクタCに実行させてもよい。基準線QがキャラクタCの特定の部位以外に交差する場合、動作制御部43Aは、反応動作をキャラクタCに実行させない。以上の説明から理解される通り、第1実施形態の動作制御部43Aは、基準線QとキャラクタCとの位置関係(例えば基準線QとキャラクタCとが交差する関係)に応じてキャラクタCの動作を制御する要素として包括的に表現される。
[Modification A7]
In the first embodiment, when the reference line Q intersects the character C in the virtual space V (Sa3: YES), the character C is caused to perform a reaction action to the contact by the user U. The conditions regarding the positional relationship with C are not limited to the above examples. For example, the reaction action may be performed by the character C on condition that the distance between the reference line Q and the character C is less than a predetermined threshold value. When the distance between the reference line Q and the character C is less than a predetermined threshold value, in addition to the case where the reference line Q intersects with the character C, the case where the reference line Q is separated from the character C within the range below the threshold value is included. .. Further, the reaction action may be executed by the character C on condition that the reference line Q intersects with a specific part of the character C. When the reference line Q intersects with a portion other than the specific portion of the character C, the
[B:第2実施形態]
本発明の第2実施形態を説明する。なお、以下の各例示において機能が第1実施形態と同様である要素については、第1実施形態の説明で使用した符号を流用して各々の詳細な説明を適宜に省略する。
[B: Second Embodiment]
A second embodiment of the present invention will be described. Note that in each of the following exemplifications, the elements having the same functions as those in the first embodiment have the same reference numerals used in the description of the first embodiment, and the detailed description thereof will be appropriately omitted.
第2実施形態における画像表示システムは、図1および図2に例示した第1実施形態と同様の構成である。すなわち、第2実施形態のHMD30は、端末装置10の表示装置13および検出装置14と装着具20とを具備し、情報処理装置40は、端末装置10の制御装置11と記憶装置12とを具備する。
The image display system according to the second embodiment has the same configuration as that of the first embodiment illustrated in FIGS. 1 and 2. That is, the
図11は、第2実施形態の端末装置10における機能的な構成を例示するブロック図である。図11に例示される通り、第2実施形態の制御装置11は、記憶装置12に記憶されたプログラムを実行することで、姿勢解析部41、表示制御部42Bおよび動作制御部43Bとして機能する。なお、制御装置11の一部または全部を専用の電子回路で実現してもよい。姿勢解析部41は、第1実施形態と同様に、検出装置14が出力する検出信号を解析することで、HMD30の姿勢に関する姿勢データを順次に生成する。
FIG. 11 is a block diagram illustrating a functional configuration of the
表示制御部42Bは、第1実施形態の表示制御部42Aと同様に、仮想空間Vのうち仮想カメラEによる撮像範囲R内の画像と、基準線Qの方向を表す指示画像Gとを表示装置13に表示させる。第1実施形態について前述した通り、基準線Qは、HMD30の方向に応じて仮想空間V内における方向が変化する仮想的な直線である。
Similar to the
第2実施形態の表示制御部42Bは、基準線Qと仮想空間V内のキャラクタC(オブジェクトの例示)との位置関係に応じて指示画像Gの表示態様を変化させる。具体的には、表示制御部42Bは、基準線QがキャラクタCに交差する場合と基準線QがキャラクタCに交差しない場合とで指示画像Gの表示態様を相違させる。表示態様とは、利用者Uが視覚的に弁別可能な画像の性状を意味する。例えば、色の3属性である色相(色調)、彩度および明度(階調)のほか、サイズおよび画像内容(例えば模様または形状)も、表示態様の概念に包含される。
The
基準線QがキャラクタCに交差しない場合、表示制御部42Bは、図12に例示される通り、画像G1を指示画像Gとして表示装置13に表示させる。画像G1は、仮想空間V内に配置された円状または点状のオブジェクトであり、仮想空間V内において基準線Qの線上に配置される。他方、基準線QがキャラクタCに交差する場合、表示制御部42Bは、図13に例示される通り、画像G1とは相違する画像G2を指示画像Gとして表示装置13に表示させる。画像G2は、利用者Uの手を模式的に表す平面状のオブジェクトである。表示制御部42Bは、図14に例示される通り、仮想空間V内におけるキャラクタCの表面のうち基準線Qと交差する地点(すなわち接触地点P)に画像G2を配置する。すなわち、画像G2は、仮想空間V内においてキャラクタCの表面上の接触地点Pに接触する。接触地点Pは、キャラクタCの表面において画像G2が接触する地点とも換言される。
When the reference line Q does not intersect with the character C, the
なお、以上の説明では、画像G1と画像G2との間の切替を例示したが、指示画像Gの表示態様の変化には、表示/非表示の切替も含まれる。すなわち、表示制御部42Bは、基準線QがキャラクタCに交差する場合に画像G2を指示画像Gとして表示し、基準線QがキャラクタCに交差しない場合には指示画像Gを非表示としてもよい。
In the above description, the switching between the image G1 and the image G2 is illustrated, but the change of the display mode of the instruction image G includes the switching between display/non-display. That is, the
以上の説明から理解される通り、第2実施形態においては、仮想空間V内における基準線Qの方向を表す指示画像Gの表示態様が基準線QとキャラクタCとの位置関係に応じて変化する。したがって、仮想空間V内における基準線QとキャラクタCとの位置関係を利用者Uが容易に把握できる。また、仮想空間V内におけるキャラクタCの表面に指示画像G(画像G2)が配置されるから、仮想空間V内でキャラクタCの表面に接触している状態を利用者Uが知覚し易いという利点がある。指示画像GがキャラクタCの表面に配置されることで、利用者Uが接触地点Pを視覚的に的確に把握し易いという利点もある。 As can be understood from the above description, in the second embodiment, the display mode of the instruction image G indicating the direction of the reference line Q in the virtual space V changes according to the positional relationship between the reference line Q and the character C. .. Therefore, the user U can easily understand the positional relationship between the reference line Q and the character C in the virtual space V. Further, since the instruction image G (image G2) is arranged on the surface of the character C in the virtual space V, the user U can easily perceive the state of being in contact with the surface of the character C in the virtual space V. There is. By arranging the instruction image G on the surface of the character C, there is also an advantage that the user U can easily grasp the contact point P visually and accurately.
図11の動作制御部43Bは、第1実施形態の動作制御部43Aと同様に、仮想空間V内におけるキャラクタCの動作を制御する。具体的には、動作制御部43Bは、仮想空間V内における利用者Uの接触に反応する動作(すなわち反応動作)をキャラクタCに実行させる。反応動作の典型例は、姿勢の変化、表情の変化、または特定の台詞の発音である。
The
具体的には、動作制御部43Bは、キャラクタCのうち基準線Qが交差する接触地点Pの位置に応じた動作をキャラクタCに実行させる。例えば、動作制御部43Bは、接触地点PがキャラクタCの頭部に位置する場合には、利用者Uによる接触を受容する反応動作をキャラクタCに実行させ、接触地点PがキャラクタCの胴体部に位置する場合には、利用者Uによる接触を拒否する動作をキャラクタCに実行させる。以上の構成によれば、接触地点Pの位置に応じてキャラクタCの動作を多様に変化させることが可能である。
Specifically, the
図15は、第2実施形態の表示制御部42Bおよび動作制御部43Bが実行する処理(以下「第2制御処理」という)の具体的な内容を例示するフローチャートである。図15の第2制御処理は所定の周期で反復的に実行される。
FIG. 15 is a flowchart exemplifying the specific content of the processing (hereinafter, referred to as “second control processing”) executed by the
第2制御処理を開始すると、表示制御部42Bは、仮想空間V内において基準線QがキャラクタCに交差するか否かを判定する(Sb1)。基準線QがキャラクタCに交差する場合(Sb1:YES)、表示制御部42Bは、基準線QとキャラクタCとが交差する接触地点Pに配置された画像G2を指示画像Gとして表示装置13に表示させる(Sb2)。他方、基準線QがキャラクタCに交差しない場合(Sb1:NO)、表示制御部42Bは、基準線Qの線上に配置された画像G1を指示画像Gとして表示装置13に表示させる(Sb3)。
When the second control process is started, the
キャラクタCに重なる画像G2が表示された状態において、動作制御部43Bは、キャラクタCに対する動作の指示(以下「動作指示」という)を、利用者Uから受付けたか否かを判定する(Sb4)。動作指示は、仮想空間V内のキャラクタCに対する作用を発生させるための指示である。第2実施形態の動作指示は、仮想空間V内で利用者UがキャラクタCに接触することの指示を意味する。
In the state where the image G2 overlapping the character C is displayed, the
第2実施形態の動作制御部43Bは、HMD30の姿勢に関する特定の変化を、利用者Uからの動作指示として受付ける。具体的には、動作制御部43Bは、HMD30の姿勢の変化が所定の条件(以下「指示判定条件」という)を充足する場合に動作指示を受付けたと判定する。例えば、動作制御部43Bは、第1実施形態と同様に、HMD30がロール方向に回転した場合に、利用者Uから動作指示が付与されたと判定する。すなわち、HMD30のロール方向の回転が指示判定条件である。他方、HMD30の姿勢の変化が指示判定条件を充足しない場合、動作制御部43Bは、動作指示を受付けていないと判定する。なお、図7を参照して前述した通り、HMD30の回転角度θが閾値θtを上回る場合にHMD30が回転したと判定する構成が好適である。
The
利用者Uから動作指示を受付けた場合(Sb4:YES)、動作制御部43Bは、仮想空間V内で利用者UがキャラクタCに接触したと判定し、利用者Uによる接触に反応する動作をキャラクタCに実行させる(Sb5)。具体的には、動作制御部43Bは、前述の通り、キャラクタCのうち基準線Qが交差する接触地点Pの位置に応じた動作をキャラクタCに実行させる。以上の説明から理解される通り、第2実施形態においては、利用者Uは、キャラクタCの所望の位置に交差するように基準線Qを移動させた状態で動作指示を付与することにより、仮想空間V内でキャラクタCの所望の位置に接触することが可能である。
When a motion instruction is received from the user U (Sb4: YES), the
なお、HMD30の姿勢の変化を動作指示として認識する構成では、表示面に対するタッチ操作等の直接的な操作が不要であるから、利用者Uが接触の感覚を実感し難いという問題がある。第2実施形態では、基準線QとキャラクタCとの位置関係(具体的には基準線QがキャラクタCに交差するか否か)に応じて指示画像Gの表示態様が変化するから、指示画像Gが固定的な態様で表示される構成と比較して、仮想空間V内で利用者UがキャラクタCに接触した感覚を利用者Uが実感し易いという利点がある。
In the configuration in which the change in the attitude of the
第2実施形態においては、例えば以下に例示する構成を採用してもよい。 In the second embodiment, for example, the configuration exemplified below may be adopted.
[変形例B1]
第2実施形態では、接触地点Pの位置に応じた反応動作をキャラクタCに実行させたが、第1実施形態と同様に、HMD30の姿勢の変化量(例えばロール方向の回転角度θ)に応じた反応動作をキャラクタCに実行させてもよい。例えば、HMD30の姿勢の変化量を、仮想空間V内において利用者UがキャラクタCに接触する仮想的な圧力と仮定する。変形例B1の動作制御部43Bは、HMD30の姿勢の変化量が小さい場合には、利用者Uによる接触を受容する反応動作をキャラクタCに実行させ、姿勢の変化量が大きい場合には、利用者Uによる接触を拒否する反応動作をキャラクタCに実行させる。以上の態様によれば、HMD30の姿勢に応じた多様な反応動作をキャラクタCに実行させることができる。
[Modification B1]
In the second embodiment, the character C is caused to perform a reaction motion according to the position of the contact point P, but as in the first embodiment, according to the amount of change in the posture of the HMD 30 (for example, the rotation angle θ in the roll direction). The character C may be caused to execute the reaction action. For example, it is assumed that the amount of change in the posture of the
[変形例B2]
変形例B2の動作制御部43Bは、時間軸上の特定の期間(以下「指示受付期間」という)内において利用者Uからの動作指示を受付ける。すなわち、指示受付期間内に利用者Uが付与した動作指示はキャラクタCの動作に有効に反映されるが、指示受付期間の経過後の時点で利用者Uが付与した動作指示は無視される。指示受付期間は、例えば、基準線QがキャラクタCに交差し始めた時点を始点とする所定の時間長(例えば数秒)の期間である。なお、指示受付期間の始点または終点は以上の例示に限定されない。例えば、ゲーム内で特定のイベントが開始した時点を指示受付期間の始点としてもよい。以上のように動作指示の受付を指示受付期間に制限することで、利用者Uに適度な緊張感が付与され、結果的にゲームの飽きを抑制することが可能である。
[Modification B2]
The
表示制御部42Bは、指示受付期間内において指示画像G(画像G2)の表示態様を経時的に変化させる。例えば、図16に例示される通り、基準線QがキャラクタCに交差するときに指示画像Gとして表示される画像G2が、画像G21と画像G22とを含む場合を想定する。画像G21は、第1実施形態の画像G2と同様に利用者Uの手を表す画像であり、画像G22は、画像G21の背後に配置された円形状の画像である。表示制御部42Bは、指示受付期間の始点から終点にかけて画像G22のサイズを経時的に縮小する。画像G21のサイズは変化しない。以上の構成によれば、動作指示の受付が許可される指示受付期間(例えば残り時間)を、利用者Uが指示画像Gの表示態様から視覚的に把握できるという利点がある。
The
[変形例B3]
変形例B3の表示制御部42Bは、仮想空間V内のキャラクタCのうち基準線Qが交差する接触地点Pの位置に応じて指示画像Gの表示態様を変化させる。具体的には、図17に例示される通り、仮想空間V内で接触地点PがキャラクタCの表面の第1位置にある場合とキャラクタCの表面の第2位置にある場合とで、指示画像Gの表示態様が相違する。第1位置は、例えば利用者Uによる接触をキャラクタCが受容する位置(例えばキャラクタCの胴体部)であり、第2位置は、例えば利用者Uによる接触をキャラクタCが拒否する位置(例えばキャラクタCの頭部)である。
[Modification B3]
The
なお、図17においては接触地点Pが第1位置または第2位置にある場合を例示したが、表示制御部42Bは、キャラクタCにおける接触地点Pの位置の変化に並行して指示画像Gの表示態様を経時的に変化させてもよい。すなわち、利用者UがHMD30の姿勢に応じて接触地点PをキャラクタCの表面上を移動させると、表示制御部42Bは、接触地点Pの移動に連動して指示画像Gの表示態様を経時的に変化させる。例えば、接触地点Pが図17の第1位置から第2位置まで移動する期間内に、表示制御部42Bは、指示画像Gの表示態様を、第1位置における表示態様から第2位置における表示態様まで連続的または段階的に変化させる。
Although the case where the contact point P is at the first position or the second position is illustrated in FIG. 17, the
変形例B3では、接触地点Pの位置に応じて指示画像Gの表示態様が変化する。したがって、指示画像Gの表示態様を視認することで、利用者Uは、接触時のキャラクタCの動作を利用者Uを推測できる。すなわち、指示画像Gの表示態様を確認することで接触時のキャラクタCの動作を推測しながら接触地点Pを徐々に移動させ、所望の動作が予想される位置に接触地点Pを維持した状態で動作指示を付与する、という興趣性を利用者Uに提供できる。 In the modified example B3, the display mode of the instruction image G changes according to the position of the contact point P. Therefore, by visually recognizing the display mode of the instruction image G, the user U can infer the user U about the action of the character C at the time of contact. That is, while confirming the display mode of the instruction image G, the contact point P is gradually moved while estimating the motion of the character C at the time of contact, and the contact point P is maintained at a position where a desired motion is expected. The interest of giving an operation instruction can be provided to the user U.
[変形例B4]
変形例B4の表示制御部42Bは、キャラクタCの視線が基準線Qを追跡するようにキャラクタCを制御する。例えば、基準線QがキャラクタCに交差する接触地点Pを視線が向くようにキャラクタCが制御される。具体的には、図18に例示される通り、キャラクタCの眼球(例えば瞳)および頭部が、基準線Qを追跡するように回転する。なお、キャラクタCの眼球および頭部の一方のみが基準線Qを追跡してもよい。変形例B4によれば、利用者UがキャラクタCに影響している感覚を利用者Uが把握し易いという利点がある。
[Modification B4]
The
[変形例B5]
第2実施形態では、基準線QがキャラクタCに交差するか否かに応じて指示画像Gの表示態様を変化させたが、指示画像Gの表示態様を変化させるための条件は以上の例示に限定されない。例えば、表示制御部42Bは、基準線QとキャラクタCとの距離に応じて指示画像Gの表示態様を連続的または段階的に変化させてもよい。基準線QとキャラクタCとの交差は、指示画像Gの表示態様を変化させるための必須の条件ではない。また、基準線QがキャラクタCの特定の部位に交差するか否かに応じて、指示画像Gの表示態様を変化させてもよい。基準線QがキャラクタCの特定の部位以外に交差する状態では、基準線QがキャラクタCに交差しない場合と同様の表示態様で指示画像Gが表示される。以上の説明から理解される通り、第2実施形態の動作制御部43Bは、基準線QとキャラクタCとの位置関係に応じて指示画像Gの表示態様を変化させる要素として包括的に表現される。
[Modification B5]
In the second embodiment, the display mode of the instruction image G is changed depending on whether or not the reference line Q intersects with the character C. However, the conditions for changing the display mode of the instruction image G are described above. Not limited. For example, the
[変形例B6]
基準線QとキャラクタCとの位置関係に応じて指示画像Gの表示態様を変化させる第2実施形態の構成は、利用者Uが端末装置10(例えばスマートフォン)を手で把持した状態で使用する場合にも同様に適用される。第2実施形態と同様に、仮想空間Vのうち表示装置13に表示される撮像範囲Rは、端末装置10の姿勢に応じて変化する。
[Modification B6]
The configuration of the second embodiment in which the display mode of the instruction image G is changed according to the positional relationship between the reference line Q and the character C is used while the user U holds the terminal device 10 (for example, a smartphone) with his/her hand. The same applies for cases as well. Similar to the second embodiment, the imaging range R displayed on the
変形例B6の端末装置10は、表示装置13の表示面に対する利用者Uの接触を検出するタッチパネルを具備する。第2実施形態では、仮想空間V内の接触地点Pの位置をHMD30の姿勢に応じて変化させたが、変形例B6では、表示装置13の表示面に対して利用者Uが接触した地点を接触地点Pとして指示画像Gが表示される。例えば、利用者Uが接触した接触地点Pを通過する基準線Qが仮想空間V内に設定される。すなわち、表示装置13の表示面に対する接触(すなわちタッチ操作)で利用者Uが指示した方向の仮想的な直線が基準線Qとして仮想空間V内に設定される。表示制御部42Bは、基準線QがキャラクタCに交差する場合には画像G2を指示画像Gとして表示装置13に表示させ、基準線QがキャラクタCに交差しない場合には画像G1を指示画像Gとして表示装置13に表示させる。以上の構成でも、仮想空間V内における基準線QとキャラクタCとの位置関係(例えば仮想空間V内で利用者UがキャラクタCに接触している状態)を利用者Uが容易に把握できるという利点がある。
The
変形例B6の例示から理解される通り、第2実施形態において、表示装置13を利用者Uの頭部に装着する構成は省略され得る。利用者Uの頭部に装着されることを前提としない構成における表示制御部42Bは、表示装置13の姿勢に応じて姿勢が制御される仮想カメラEで仮想空間Vを撮像した画像を表示装置13に表示させる要素として表現される。また、利用者Uが手に把持した状態で使用される表示装置13においては、当該表示装置13に対する操作(例えばタッチ操作)で指示された方向の仮想的な直線が「基準線」である。
As can be understood from the illustration of the modified example B6, in the second embodiment, the configuration of mounting the
[C:他の変形例]
第1実施形態または第2実施形態に対する具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2個以上の態様を、相互に矛盾しない範囲で適宜に併合してもよい。
[C: other modifications]
A specific mode of modification to the first embodiment or the second embodiment will be exemplified below. Two or more aspects arbitrarily selected from the following exemplifications may be appropriately merged as long as they do not conflict with each other.
[変形例C1]
基準線Qは、前述の各形態で例示した仮想カメラEの光軸に限定されない。例えば、表示装置13の表示面に垂直な直線が基準線Qとして利用される。また、仮想カメラEの光軸または表示面に垂直な直線に対して所定の角度をなす直線を基準線Qに利用してもよい。なお、利用者Uの視線の方向を推定するアイトラッキング(視線計測)機能を搭載したHMD30においては、当該機能により推定された視線を基準線Qとして利用してもよい。以上の例示から理解される通り、基準線Qは、仮想空間V内に設定される仮想的な直線として包括的に表現される。
[Modification C1]
The reference line Q is not limited to the optical axis of the virtual camera E illustrated in each of the above-described embodiments. For example, a straight line perpendicular to the display surface of the
[変形例C2]
前述の各形態では、仮想空間Vに配置されるオブジェクトとしてキャラクタCを例示したが、仮想空間V内で利用者Uが接触するオブジェクトはキャラクタCに限定されない。例えば、仮想空間V内の建造物や自然物等の無生物的な要素もオブジェクトの概念に包含される。生物的なオブジェクト(キャラクタC)について「動作」とは、例えば当該オブジェクトの挙動、行為、様子または態度である。また、無生物的なオブジェクトについて「動作」とは、例えば当該要素の形態の変化である。例えば建造物のドアが開く動作、または、岩石等の自然物が変形ないし移動する動作が、オブジェクトの動作として例示される。
[Modification C2]
In each of the above-described embodiments, the character C is illustrated as an object arranged in the virtual space V, but the object with which the user U contacts in the virtual space V is not limited to the character C. For example, inanimate elements such as buildings and natural objects in the virtual space V are also included in the concept of objects. The “motion” of a biological object (character C) is, for example, the behavior, action, appearance or attitude of the object. The “motion” of an inanimate object is, for example, a change in the form of the element. For example, an operation of opening a door of a building or an operation of deforming or moving a natural object such as rock is exemplified as an operation of an object.
[変形例C3]
前述の各形態では、HMD30がロール方向に回転した場合に、仮想空間V内で利用者UがキャラクタCに接触したと判定してキャラクタCに反応動作を実行させたが、反応動作の契機(すなわち動作指示)は以上の例示に限定されない。例えば、ピッチ方向またはヨー方向におけるHMD30の回転を利用者Uによる接触としてキャラクタCに反応動作を実行させてもよい。また、例えば基準線QがキャラクタCの特定の範囲内に交差した状態(すなわち利用者Uが当該範囲内を長時間にわたり凝視した場合)が所定の時間にわたり継続したことを条件としてキャラクタCに反応動作を実行させてもよい。HMD30に接続された操作装置(図示略)を利用者Uが操作することを条件としてキャラクタCに反応動作を実行させてもよい。以上の例示から理解される通り、HMD30の姿勢の変化(特にロール方向の回転)をキャラクタCの反応動作の契機とする構成は省略され得る。
[Modification C3]
In each of the above-described modes, when the
[変形例C4]
前述の各形態では、ロール方向におけるHMD30の回転を動作指示(キャラクタCに対する接触の指示)として受付けたが、動作指示と判定されるHMD30の姿勢の変化はロール方向の回転に限定されない。例えば、ピッチ方向またはヨー方向におけるHMD30の回転を動作指示として受付けてもよい。
[Modification C4]
In each of the above-described embodiments, the rotation of the
[変形例C5]
第1実施形態について例示した変形例(変形例A1から変形例A7)は、第2実施形態にも同様に適用される。また、第2実施形態について例示した変形例(変形例B1から変形例B6)は、第1実施形態にも同様に適用される。
[Modification C5]
The modifications (Modifications A1 to A7) illustrated for the first embodiment are similarly applied to the second embodiment. Further, the modifications (Modifications B1 to B6) illustrated in the second embodiment are similarly applied to the first embodiment.
[変形例C6]
前述の各形態では、HMD30の表示装置13および検出装置14とHMD30を制御する情報処理装置40とを単体の端末装置10で実現した構成を例示したが、図19の画像表示システム1BのようにHMD30と情報処理装置40とを別体の装置として実現してもよい。HMD30と情報処理装置40とは有線または無線により相互に通信可能である。HMD30と情報処理装置40との間の通信の方式は任意であるが、例えばbluetooth(登録商標)等の近距離無線通信が好適である。
[Modification C6]
In each of the above-described embodiments, a configuration in which the
HMD30は、第1実施形態と同様に、表示装置13と検出装置14と装着具20とを具備し、利用者Uの頭部に装着される。情報処理装置40は、HMD30と通信することで各種の画像をHMD30に表示させる制御機器であり、制御装置11と記憶装置12とを具備する。例えば、携帯電話機、スマートフォン、タブレット端末、パーソナルコンピュータ、または家庭用ゲーム装置等の各種の情報端末が情報処理装置40として利用される。なお、情報処理装置40が可搬型であるか据置型であるかは不問である。制御装置11は、記憶装置12に記憶されたプログラムを実行することで、第1実施形態または第2実施形態と同様に、姿勢解析部41、表示制御部42(42A,42B)および動作制御部43(43A,43B)として機能する。したがって、図19の構成においても第1実施形態または第2実施形態と同様の効果が実現される。
Similar to the first embodiment, the
[変形例C7]
本発明の好適な態様は、前述の各形態での例示の通り、コンピュータ(具体的には制御装置11)とプログラムとの協働により実現される。前述の各形態に係るプログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされる。記録媒体は、例えば非一過性(non-transitory)の記録媒体であり、CD-ROM等の光学式記録媒体(光ディスク)が好例であるが、半導体記録媒体または磁気記録媒体等の公知の任意の形式の記録媒体を含む。なお、非一過性の記録媒体とは、一過性の伝搬信号(transitory, propagating signal)を除く任意の記録媒体を含み、揮発性の記録媒体を除外するものではない。また、通信網を介した配信の形態でプログラムをコンピュータに提供することも可能である。
[Modification C7]
A preferred aspect of the present invention is realized by cooperation of a computer (specifically, the control device 11) and a program, as illustrated in each of the above-described modes. The program according to each of the above-described modes is provided in a form stored in a computer-readable recording medium and installed in the computer. The recording medium is, for example, a non-transitory recording medium, and an optical recording medium (optical disk) such as a CD-ROM is a good example. However, any known recording medium such as a semiconductor recording medium or a magnetic recording medium is used. Including recording media of the form. It should be noted that the non-transitory recording medium includes any recording medium excluding transitory propagating signals, and does not exclude a volatile recording medium. It is also possible to provide the program to the computer in the form of distribution via a communication network.
[D:付記]
以上の記載から、例えば以下のように本発明の好適な態様が把握される。なお、各態様の理解を容易にするために、以下では、図面の符号を便宜的に括弧書で併記する、本発明を図示の態様に限定する趣旨ではない。
[D: Note]
From the above description, the preferred embodiments of the present invention are understood as follows, for example. Note that, in order to facilitate understanding of each aspect, the reference numerals in the drawings are also shown in parentheses for convenience, and the present invention is not intended to be limited to the illustrated aspects.
[態様1]
本発明の好適な態様(態様1)に係るプログラムは、ヘッドマウントディスプレイ(30)の方向に応じて方向が制御される仮想カメラ(E)で仮想空間(V)を撮像した画像であって、両眼視差を利用した立体視画像を、前記ヘッドマウントディスプレイ(30)の表示装置(13)に表示させる表示制御部(42A)、および、前記ヘッドマウントディスプレイ(30)のロール方向の回転と、前記ヘッドマウントディスプレイ(30)の方向に応じて前記仮想空間(V)における方向が変化する基準線(Q)と前記仮想空間(V)内のオブジェクト(C)との位置関係と、に応じて当該オブジェクト(C)の動作を制御する動作制御部(43A)としてコンピュータ(11)を機能させる。以上の態様では、ヘッドマウントディスプレイ(30)のロール方向の回転に応じて仮想空間(V)内のオブジェクト(C)の動作が制御されるから、オブジェクト(C)の動作を制御するための指示を利用者(U)が入力する操作装置をヘッドマウントディスプレイ(30)とは別個に用意することを必要とせずに、利用者(U)からの指示をオブジェクト(C)の動作に反映させることができる。
[Aspect 1]
A program according to a preferred aspect (Aspect 1) of the present invention is an image obtained by capturing a virtual space (V) with a virtual camera (E) whose direction is controlled according to the direction of a head mounted display (30), A display control unit (42A) for displaying a stereoscopic image using binocular parallax on the display device (13) of the head mounted display (30); and rotation of the head mounted display (30) in the roll direction, Depending on the positional relationship between the reference line (Q) whose direction changes in the virtual space (V) depending on the direction of the head mounted display (30) and the object (C) in the virtual space (V). The computer (11) is caused to function as a motion control unit (43A) that controls the motion of the object (C). In the above aspect, since the operation of the object (C) in the virtual space (V) is controlled according to the rotation of the head mounted display (30) in the roll direction, an instruction for controlling the operation of the object (C). To reflect an instruction from the user (U) in the operation of the object (C) without the need to prepare an operating device for the user (U) to input separately from the head mounted display (30). You can
なお、「ヘッドマウントディスプレイ」は、利用者(U)の頭部に装着可能な画像表示機器である。好適な態様におけるヘッドマウントディスプレイ(30)は、画像を表示する表示装置(13)と、表示装置(13)を利用者(U)の頭部に装着するための装着具(20)とを具備する。表示装置(13)を頭部に装着するための装着具(20)に専用の表示装置(13)が固定的に設置された構成(いわばヘッドマウントディスプレイの専用品)のほか、頭部に装着された状態以外でも利用され得る汎用的な表示装置(13)を装着具(20)に対して着脱可能である構成も含む。すなわち、ヘッドマウントディスプレイ(30)の表示装置(13)には、専ら頭部に装着された状態で使用される装置のほか、頭部に装着されていない状態と頭部に装着された状態との双方で使用可能な装置も含まれる。表示装置(13)を装着具(20)に対して着脱可能である構成では、例えばスマートフォンまたはタブレット端末等の可搬型の端末装置(10)が表示装置(13)として利用される。 The “head mount display” is an image display device that can be mounted on the head of the user (U). A head mounted display (30) in a preferred mode includes a display device (13) for displaying an image, and a mounting tool (20) for mounting the display device (13) on the head of a user (U). To do. In addition to a configuration in which a dedicated display device (13) is fixedly installed on a wearing tool (20) for mounting the display device (13) on the head (so-called head mount display dedicated product), it is also mounted on the head. It also includes a configuration in which a general-purpose display device (13) that can be used in a state other than the mounted state is attachable to and detachable from the wearing tool (20). That is, the display device (13) of the head-mounted display (30) is used not only for a device that is worn on the head but also for a state where it is not worn on the head and a state where it is worn on the head. A device that can be used in both is also included. In the configuration in which the display device (13) can be attached to and detached from the wearing tool (20), a portable terminal device (10) such as a smartphone or a tablet terminal is used as the display device (13).
「ロール方向」とは、利用者(U)の前後方向(例えば、ヘッドマウントディスプレイ(30)において画像が表示される表示画面に垂直な方向)の軸線を中心とした円周方向を意味する。例えば、ヘッドマウントディスプレイ(30)を頭部に装着した利用者(U)が、前方を向いたまま頭部を左右に傾けた場合に、ヘッドマウントディスプレイ(30)はロール方向に回転する。ヘッドマウントディスプレイ(30)にロール方向の回転のみが単独で発生した場合だけでなく、ロール方向の回転とともにピッチ方向またはヨー方向の回転が発生した場合でも、ヘッドマウントディスプレイ(30)がロール方向に回転したと判定され得る。なお、ロール方向の回転に応じて仮想カメラ(E)の姿勢を変化させるか否かは不問である。すなわち、ロール方向の回転に連動して仮想カメラ(E)を光軸周りに回転させる構成と、ロール方向の回転が発生した場合でも仮想カメラ(E)を回転させない構成との双方が、態様1の範囲には含まれる。 The “roll direction” means a circumferential direction around an axis of the user (U) in the front-rear direction (for example, the direction perpendicular to the display screen on which an image is displayed on the head mounted display (30)). For example, when the user (U) wearing the head mounted display (30) on his head tilts his head left and right while facing forward, the head mounted display (30) rotates in the roll direction. Not only when the head mounted display (30) alone rotates in the roll direction, but also when the head mounted display (30) rotates in the pitch direction or the yaw direction along with the rotation in the roll direction, the head mounted display (30) moves in the roll direction. It may be determined that it has rotated. It does not matter whether or not the posture of the virtual camera (E) is changed according to the rotation in the roll direction. That is, both the configuration in which the virtual camera (E) is rotated around the optical axis in conjunction with the rotation in the roll direction and the configuration in which the virtual camera (E) is not rotated even when the rotation in the roll direction occurs are the aspects 1 Is included in the range.
「オブジェクト」とは、仮想空間(V)内に設置される仮想的な物体である。オブジェクト(C)の典型例はキャラクタ(例えば人間,動物またはモンスター)であるが、仮想空間(V)内の建造物または自然物等の無生物的な要素もオブジェクトの概念に含まれ得る。キャラクタについて「オブジェクトの動作」とは、例えば、当該キャラクタの挙動,行為,様子または態度である。また、無生物的な要素について「オブジェクトの動作」とは、例えば当該要素の形態の変化(例えば建造物のドアまたは窓が開く、岩石等の自然物が変形ないし移動する等)である。 The “object” is a virtual object installed in the virtual space (V). A typical example of the object (C) is a character (for example, a human being, an animal, or a monster), but inanimate elements such as buildings or natural objects in the virtual space (V) may be included in the concept of the object. The “motion of the object” for the character is, for example, the behavior, action, appearance or attitude of the character. In addition, the “motion of an object” with respect to an inanimate element is, for example, a change in the form of the element (for example, a door or window of a building opens, a natural object such as rock deforms or moves).
「基準線」は、仮想空間(V)内に設定された仮想的な直線である。例えば、仮想カメラ(E)の光軸、表示装置(13)による表示画面の中心線、または、これらの直線に対して所定の角度をなす直線が、基準線(Q)の好適例である。なお、利用者(U)の視線を推定するアイトラッキング機能を利用可能な構成では、以上に例示した直線のほか、利用者(U)の視線を基準線(Q)として利用してもよい。 The “reference line” is a virtual straight line set in the virtual space (V). For example, the optical axis of the virtual camera (E), the center line of the display screen of the display device (13), or a straight line forming a predetermined angle with respect to these straight lines is a preferable example of the reference line (Q). In addition, in the configuration in which the eye tracking function for estimating the line of sight of the user (U) can be used, the line of sight of the user (U) may be used as the reference line (Q) in addition to the straight line exemplified above.
[態様2]
態様1の好適例(態様2)において、前記位置関係は、前記基準線(Q)と前記オブジェクト(C)とが交差する関係である。以上の態様によれば、基準線(Q)とオブジェクト(C)との交差に応じた指示をオブジェクト(C)の動作に反映させることができる。
[Aspect 2]
In a preferred example of Aspect 1 (Aspect 2), the positional relationship is a relationship in which the reference line (Q) and the object (C) intersect. According to the above aspect, it is possible to reflect the instruction corresponding to the intersection of the reference line (Q) and the object (C) in the motion of the object (C).
[態様3]
態様1または態様2の好適例(態様3)において、前記動作制御部(43A)は、前記ヘッドマウントディスプレイ(30)がロール方向に回転した場合に、前記仮想空間(V)内において前記オブジェクト(C)のうち前記基準線(Q)が交差する地点(P)に接触したと判定し、当該接触に対応した動作を前記オブジェクト(C)に実行させる。以上の態様によれば、利用者(U)は、ヘッドマウントディスプレイ(30)をロール方向に回転させることで、オブジェクト(C)のうち基準線(Q)と交差する地点(P)に対する接触を指示することができる。
[Aspect 3]
In a preferred example of Aspect 1 or Aspect 2 (Aspect 3), the operation control unit (43A) causes the object () to move in the virtual space (V) when the head mounted display (30) rotates in a roll direction. It is determined that the object (C) is in contact with a point (P) where the reference line (Q) intersects, and the object (C) is caused to perform an action corresponding to the contact. According to the above-described aspect, the user (U) rotates the head mounted display (30) in the roll direction, so that the contact with the point (P) of the object (C) that intersects with the reference line (Q) is performed. You can give instructions.
[態様4]
態様3の好適例(態様4)において、前記動作制御部(43A)は、前記オブジェクト(C)に対する接触が維持される時間長に応じた動作を、前記オブジェクト(C)に実行させる。以上の態様によれば、ヘッドマウントディスプレイ(30)がロール方向に回転した状態に維持する時間長に応じてオブジェクト(C)の動作を多様に変化させることができる。
[Aspect 4]
In a preferred example of Aspect 3 (Aspect 4), the action control section (43A) causes the object (C) to perform an action according to the length of time that the contact with the object (C) is maintained. According to the above aspect, the motion of the object (C) can be variously changed according to the length of time that the head mounted display (30) is kept rotated in the roll direction.
[態様5]
態様3または態様4の好適例(態様5)において、前記動作制御部(43A)は、前記オブジェクト(C)に対する接触に応じて前記オブジェクト(C)に関するパラメータを変化させる。以上の態様によれば、ヘッドマウントディスプレイ(30)をロール方向に回転させる簡便な操作により、仮想空間(V)内のオブジェクト(C)に関するパラメータを変化させることができる。
[Aspect 5]
In the preferred example of the third aspect or the fourth aspect (the fifth aspect), the motion control section (43A) changes the parameter relating to the object (C) according to the contact with the object (C). According to the above aspect, the parameter relating to the object (C) in the virtual space (V) can be changed by a simple operation of rotating the head mounted display (30) in the roll direction.
[態様6]
態様3から態様5の何れかの好適例(態様6)において、前記動作制御部(43A)は、前記オブジェクト(C)のうち前記基準線(Q)が交差する位置に応じた動作を、前記オブジェクト(C)に実行させる。以上の態様によれば、仮想空間(V)内の基準線(Q)がオブジェクト(C)に交差する地点(P)の位置に応じてオブジェクト(C)の動作を多様に変化させることができる。
[Aspect 6]
In a preferred example (Aspect 6) of any one of Aspects 3 to 5, the action control unit (43A) performs the action according to the position where the reference line (Q) of the object (C) intersects. Cause the object (C) to execute. According to the above aspect, the motion of the object (C) can be variously changed according to the position of the point (P) where the reference line (Q) in the virtual space (V) intersects the object (C). ..
[態様7]
態様3から態様6の何れかの好適例(態様7)において、前記動作制御部(43A)は、前記ヘッドマウントディスプレイ(30)がロール方向の一方側に回転した場合に、前記オブジェクト(C)に接触したと判定し、前記オブジェクト(C)に接触した状態において、前記ヘッドマウントディスプレイ(30)がロール方向の他方側に回転した場合、または、前記ヘッドマウントディスプレイが前記一方側への回転から元に戻った場合に、前記オブジェクト(C)に対する接触が解除されたと判定する。以上の態様によれば、利用者(U)は、ロール方向における回転の向きに応じて、仮想空間(V)内のオブジェクト(C)に対する接触の発生と解除とを指示することができる。
[Aspect 7]
In a preferred example (Aspect 7) of any one of Aspects 3 to 6, when the head mount display (30) rotates to one side in the roll direction, the operation control unit (43A) causes the object (C) to move. When the head mounted display (30) is rotated to the other side in the roll direction in the state where the head mounted display is in contact with the object (C), or when the head mounted display is rotated to the one side. When returning to the original, it is determined that the contact with the object (C) has been released. According to the above aspect, the user (U) can instruct to generate and release the contact with the object (C) in the virtual space (V) according to the direction of rotation in the roll direction.
[態様8]
態様1から態様7の何れかの好適例(態様8)において、前記動作制御部(43A)は、前記ヘッドマウントディスプレイ(30)のロール方向における回転角度(θ)に応じた動作を、前記オブジェクト(C)に実行させる。以上の態様によれば、ヘッドマウントディスプレイ(30)の回転角度(θ)に応じた多様な動作をオブジェクト(C)に実行させることができる。
[Aspect 8]
In a preferred example (Aspect 8) of any one of Aspects 1 to 7, the motion control unit (43A) performs a motion corresponding to a rotation angle (θ) of the head mounted display (30) in a roll direction on the object. Cause (C) to execute. According to the above aspect, it is possible to cause the object (C) to perform various actions according to the rotation angle (θ) of the head mounted display (30).
[態様9]
態様1から態様8の何れかの好適例(態様9)において、前記表示制御部(42A)は、前記ヘッドマウントディスプレイ(30)のロール方向における回転に応じて、前記仮想カメラ(E)を前記仮想空間(V)内で移動させる。以上の態様によれば、ヘッドマウントディスプレイ(30)をロール方向に回転させる簡便な操作により、仮想空間(V)内で仮想カメラ(E)(仮想的な視点)をオブジェクト(C)に接近または離間させることができる。なお、仮想カメラ(E)の移動の方向は任意であるが、例えば、仮想カメラ(E)をオブジェクト(C)の方向に移動させる構成が好適である。例えば、ヘッドマウントディスプレイ(30)がロール方向の一方側に回転した場合に仮想カメラ(E)をオブジェクト(C)に接近させ、ヘッドマウントディスプレイ(30)がロール方向の他方側に回転した場合に仮想カメラ(E)をオブジェクト(C)から離間させる構成が好適である。
[Aspect 9]
In a preferred example (Aspect 9) of any one of Aspects 1 to 8, the display control unit (42A) controls the virtual camera (E) according to the rotation of the head mounted display (30) in the roll direction. It is moved in the virtual space (V). According to the above aspect, the virtual camera (E) (virtual viewpoint) approaches the object (C) in the virtual space (V) by a simple operation of rotating the head mounted display (30) in the roll direction. It can be separated. Although the moving direction of the virtual camera (E) is arbitrary, for example, a configuration in which the virtual camera (E) is moved in the direction of the object (C) is suitable. For example, when the virtual camera (E) approaches the object (C) when the head mounted display (30) rotates to one side in the roll direction and the head mounted display (30) rotates to the other side in the roll direction. A configuration in which the virtual camera (E) is separated from the object (C) is suitable.
[態様10]
態様1から態様9の何れかの好適例(態様10)において、前記表示制御部(42A)は、前記ヘッドマウントディスプレイ(30)のロール方向における回転に応じて、前記仮想カメラ(E)による撮像範囲(R)を変化させる。以上の態様によれば、ヘッドマウントディスプレイ(30)をロール方向に回転させる簡便な操作により、仮想空間(V)内で仮想カメラ(E)が撮像する範囲(すなわち画角)を変化させることができる。なお、仮想カメラ(E)の撮像範囲(R)の変化は、仮想空間(V)において撮像される要素(例えばオブジェクト(C))の拡大(ズームイン)または縮小(ズームアウト)を意味する。
[Aspect 10]
In a preferred example (Aspect 10) of any one of Aspects 1 to 9, the display control unit (42A) captures an image with the virtual camera (E) according to the rotation of the head mounted display (30) in the roll direction. Change the range (R). According to the above aspect, the range (that is, the angle of view) captured by the virtual camera (E) in the virtual space (V) can be changed by a simple operation of rotating the head mounted display (30) in the roll direction. it can. The change in the imaging range (R) of the virtual camera (E) means enlargement (zoom in) or reduction (zoom out) of an element (for example, the object (C)) imaged in the virtual space (V).
[態様11]
態様1から態様10の何れかの好適例(態様11)において、前記動作制御部(43A)は、前記ヘッドマウントディスプレイ(30)のロール方向における回転角度(θ)が閾値(θt)を超えた場合に、前記ヘッドマウントディスプレイ(30)がロール方向に回転したと判定する。以上の態様では、回転角度(θ)が閾値(θt)を超えた場合に、ヘッドマウントディスプレイ(30)がロール方向に回転したと判定される。すなわち、閾値(θt)を下回る程度の回転では、ヘッドマウントディスプレイ(30)はロール方向に回転したと判定されない。したがって、ヘッドマウントディスプレイ(30)が回転したと過剰な頻度で判定される可能性を低減できる。
[Aspect 11]
In the preferred example (embodiment 11) of any one of the embodiments 1 to 10, the operation control unit (43A) causes the rotation angle (θ) of the head mounted display (30) in the roll direction to exceed a threshold value (θt). In this case, it is determined that the head mounted display (30) has rotated in the roll direction. In the above aspect, when the rotation angle (θ) exceeds the threshold value (θt), it is determined that the head mounted display (30) has rotated in the roll direction. That is, if the rotation is below the threshold value (θt), it is not determined that the head mounted display (30) has rotated in the roll direction. Therefore, it is possible to reduce the possibility that it is determined that the head mounted display (30) has rotated with excessive frequency.
[態様12]
本発明の好適な態様(態様12)に係る画像表示システム(1A,1B)は、ヘッドマウントディスプレイ(30)と情報処理装置(40)とを具備する画像表示システム(1A,1B)であって、前記情報処理装置(40)は、ヘッドマウントディスプレイ(30)の方向に応じて方向が制御される仮想カメラ(E)で仮想空間(V)を撮像した画像であって、両眼視差を利用した立体視画像を、前記ヘッドマウントディスプレイ(30)の表示装置(13)に表示させる表示制御部(42A)と、前記ヘッドマウントディスプレイ(30)のロール方向の回転と、前記ヘッドマウントディスプレイ(30)の方向に応じて前記仮想空間(V)における方向が変化する基準線(Q)と前記仮想空間(V)内のオブジェクト(C)との位置関係と、に応じて当該オブジェクト(C)の動作を制御する動作制御部(43A)とを具備する。以上の態様では、ヘッドマウントディスプレイ(30)のロール方向の回転に応じて仮想空間(V)内のオブジェクト(C)の動作が制御されるから、オブジェクト(C)の動作を制御するための指示を利用者(U)が入力する操作装置をヘッドマウントディスプレイ(30)とは別個に用意することを必要とせずに、利用者(U)からの指示をオブジェクト(C)の動作に反映させることができる。
[Aspect 12]
An image display system (1A, 1B) according to a preferred aspect (Aspect 12) of the present invention is an image display system (1A, 1B) including a head mounted display (30) and an information processing device (40). The information processing device (40) is an image obtained by capturing a virtual space (V) with a virtual camera (E) whose direction is controlled according to the direction of the head mounted display (30), and uses binocular parallax. The display control unit (42A) for displaying the stereoscopic image thus displayed on the display device (13) of the head mounted display (30), the rotation of the head mounted display (30) in the roll direction, and the head mounted display (30). Of the object (C) in accordance with the positional relationship between the reference line (Q) in which the direction in the virtual space (V) changes according to the direction) and the object (C) in the virtual space (V). And an operation control section (43A) for controlling the operation. In the above aspect, since the operation of the object (C) in the virtual space (V) is controlled according to the rotation of the head mounted display (30) in the roll direction, an instruction for controlling the operation of the object (C). To reflect an instruction from the user (U) in the operation of the object (C) without the need to prepare an operating device for the user (U) to input separately from the head mounted display (30). You can
1A,1B…画像表示システム、10…端末装置、11…制御装置、12…記憶装置、13…表示装置、14…検出装置、20…装着具、30…HMD、40…情報処理装置、41…姿勢解析部、42A,42B…表示制御部、43A,43B…動作制御部、V…仮想空間、E…仮想カメラ、C…キャラクタ、R…撮像範囲、Q…基準線、G…指示画像、P…接触地点。 1A, 1B... Image display system, 10... Terminal device, 11... Control device, 12... Storage device, 13... Display device, 14... Detection device, 20... Wearing device, 30... HMD, 40... Information processing device, 41... Posture analysis unit, 42A, 42B... Display control unit, 43A, 43B... Motion control unit, V... Virtual space, E... Virtual camera, C... Character, R... Imaging range, Q... Reference line, G... Instruction image, P … Contact point.
Claims (4)
前記ヘッドマウントディスプレイの方向に応じて前記仮想空間における方向が変化する基準線と、前記仮想空間内のオブジェクトとの位置関係に応じて、前記オブジェクトの動作を制御する動作制御部であって、前記表示装置の表示面に垂直で前記ヘッドマウントディスプレイを通過する軸線を中心とした前記ヘッドマウントディスプレイのロール方向の回転角度が大きい場合に前記オブジェクトに第1動作を実行させ、前記回転角度が小さい場合に、前記第1動作とは異なる第2動作を前記オブジェクトに実行させる動作制御部
としてコンピュータを機能させるプログラム。 An image obtained by capturing a virtual space with a virtual camera whose direction changes according to the direction of the head-mounted display, wherein a stereoscopic image using binocular parallax is displayed on a display device of the head-mounted display. and,
A motion control unit configured to control a motion of the object according to a positional relationship between a reference line whose direction in the virtual space changes according to the direction of the head mounted display and an object in the virtual space, When the rotation angle in the roll direction of the head mounted display about the axis passing through the head mounted display perpendicular to the display surface of the display device is large, the object is caused to execute the first operation, and the rotation angle is small. A program that causes a computer to function as a motion control unit that causes the object to perform a second motion different from the first motion .
前記ヘッドマウントディスプレイの方向に応じて前記仮想空間における方向が変化する基準線と、前記仮想空間内のオブジェクトとの位置関係に応じて、前記オブジェクトの動作を制御する動作制御部であって、前記表示装置の表示面に垂直で前記ヘッドマウントディスプレイを通過する軸線を中心とした前記ヘッドマウントディスプレイのロール方向の回転方向が第1方向である場合に前記オブジェクトに第1動作を実行させ、前記回転方向が前記第1方向とは反対の第2方向である場合に、前記第1動作とは異なる第2動作を前記オブジェクトに実行させる動作制御部
としてコンピュータを機能させるプログラム。 An image obtained by capturing a virtual space with a virtual camera whose direction changes according to the direction of the head-mounted display, wherein a stereoscopic image using binocular parallax is displayed on a display device of the head-mounted display. and,
A motion control unit configured to control a motion of the object according to a positional relationship between a reference line whose direction in the virtual space changes according to the direction of the head mounted display and an object in the virtual space, When the rotation direction of the roll direction of the head mounted display centering on the axis line passing through the head mounted display perpendicular to the display surface of the display device is the first direction, the object is caused to perform the first operation, and the rotation is performed. A program that causes a computer to function as a motion control unit that causes the object to perform a second motion different from the first motion when the direction is a second direction opposite to the first direction .
前記情報処理装置は、
前記ヘッドマウントディスプレイの方向に応じて方向が変化する仮想カメラで仮想空間を撮像した画像であって、両眼視差を利用した立体視画像を、前記ヘッドマウントディスプレイの表示装置に表示させる表示制御部と、
前記ヘッドマウントディスプレイの方向に応じて前記仮想空間における方向が変化する基準線と、前記仮想空間内のオブジェクトとの位置関係に応じて、前記オブジェクトの動作を制御する動作制御部であって、前記表示装置の表示面に垂直で前記ヘッドマウントディスプレイを通過する軸線を中心とした前記ヘッドマウントディスプレイのロール方向の回転角度が大きい場合に前記オブジェクトに第1動作を実行させ、前記回転角度が小さい場合に、前記第1動作とは異なる第2動作を前記オブジェクトに実行させる動作制御部と
を具備する画像表示システム。 An image display system comprising a head mounted display and an information processing device,
The information processing device,
An image obtained by imaging a virtual space with a virtual camera which direction changes depending on the direction of the head-mounted display, a stereoscopic image using binocular parallax, the display on the display device of the head mounted display controller When,
A motion control unit configured to control a motion of the object according to a positional relationship between a reference line whose direction in the virtual space changes according to the direction of the head mounted display and an object in the virtual space, When the rotation angle in the roll direction of the head mounted display about the axis passing through the head mounted display perpendicular to the display surface of the display device is large, the object is caused to execute the first operation, and the rotation angle is small. And a motion control unit that causes the object to perform a second motion different from the first motion .
前記情報処理装置は、
前記ヘッドマウントディスプレイの方向に応じて方向が変化する仮想カメラで仮想空間を撮像した画像であって、両眼視差を利用した立体視画像を、前記ヘッドマウントディスプレイの表示装置に表示させる表示制御部と、
前記ヘッドマウントディスプレイの方向に応じて前記仮想空間における方向が変化する基準線と、前記仮想空間内のオブジェクトとの位置関係に応じて、前記オブジェクトの動作を制御する動作制御部であって、前記表示装置の表示面に垂直で前記ヘッドマウントディスプレイを通過する軸線を中心とした前記ヘッドマウントディスプレイのロール方向の回転方向が第1方向である場合に前記オブジェクトに第1動作を実行させ、前記回転方向が前記第1方向とは反対の第2方向である場合に、前記第1動作とは異なる第2動作を前記オブジェクトに実行させる動作制御部と
を具備する画像表示システム。 An image display system comprising a head mounted display and an information processing device,
The information processing device,
An image obtained by imaging a virtual space with a virtual camera which direction changes depending on the direction of the head-mounted display, a stereoscopic image using binocular parallax, the display on the display device of the head mounted display controller When,
A motion control unit configured to control a motion of the object according to a positional relationship between a reference line whose direction in the virtual space changes according to the direction of the head mounted display and an object in the virtual space, When the rotation direction of the roll direction of the head mounted display centering on the axis line passing through the head mounted display perpendicular to the display surface of the display device is the first direction, the object is caused to perform the first operation, and the rotation is performed. An image display system comprising: a motion control unit that causes the object to perform a second motion different from the first motion when the direction is a second direction opposite to the first direction .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019163708A JP6730753B2 (en) | 2019-09-09 | 2019-09-09 | Program and image display system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019163708A JP6730753B2 (en) | 2019-09-09 | 2019-09-09 | Program and image display system |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018007913A Division JP6587364B2 (en) | 2018-01-22 | 2018-01-22 | Program and image display system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020074065A JP2020074065A (en) | 2020-05-14 |
JP6730753B2 true JP6730753B2 (en) | 2020-07-29 |
Family
ID=70610147
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019163708A Active JP6730753B2 (en) | 2019-09-09 | 2019-09-09 | Program and image display system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6730753B2 (en) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010231290A (en) * | 2009-03-26 | 2010-10-14 | National Institute Of Advanced Industrial Science & Technology | Input device and method using head motion |
JP6110893B2 (en) * | 2015-06-12 | 2017-04-05 | 株式会社コロプラ | Virtual space location designation method, program, recording medium recording program, and apparatus |
JP6587364B2 (en) * | 2018-01-22 | 2019-10-09 | 株式会社コナミデジタルエンタテインメント | Program and image display system |
-
2019
- 2019-09-09 JP JP2019163708A patent/JP6730753B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2020074065A (en) | 2020-05-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109690447B (en) | Information processing method, program for causing computer to execute the information processing method, and computer | |
US20190243445A1 (en) | Application processing system, method of processing application and storage medium storing program for processing application | |
US20220291744A1 (en) | Display processing device, display processing method, and recording medium | |
WO2017126433A1 (en) | Information processing device and user guide presentation method | |
JP7040521B2 (en) | Information processing equipment, information processing methods, and programs | |
JP2024050696A (en) | Information processing apparatus, user guide presentation method, and head mounted display | |
US10525352B2 (en) | Game processing method and recording medium | |
JP2018147377A (en) | Information processing method, computer, and program for causing computer to execute the method | |
JP6587364B2 (en) | Program and image display system | |
JP2018147465A (en) | Information processing method, device, and program for causing computer to execute the method | |
JP7248720B2 (en) | GAME PROGRAM, GAME DEVICE, GAME SYSTEM, AND GAME PROCESSING METHOD | |
JP2024061769A (en) | Information processor and warning presentation method | |
JP6730753B2 (en) | Program and image display system | |
US11178384B2 (en) | Information processing system, storage medium, information processing apparatus and information processing method | |
JP7106140B2 (en) | Program and image display system | |
JP6628331B2 (en) | Program and image display system | |
CN108369477B (en) | Information processing apparatus, information processing method, and program | |
JP6263292B1 (en) | Information processing method, computer, and program for causing computer to execute information processing method | |
WO2019142817A1 (en) | Image display system and recording medium on which program for image display system is recorded | |
JP2018195172A (en) | Information processing method, information processing program, and information processing device | |
JP6469752B2 (en) | INFORMATION PROCESSING METHOD, INFORMATION PROCESSING PROGRAM, INFORMATION PROCESSING SYSTEM, AND INFORMATION PROCESSING APPARATUS | |
JP6403843B1 (en) | Information processing method, information processing program, and information processing apparatus | |
JP6330072B1 (en) | Information processing method, apparatus, and program for causing computer to execute information processing method | |
US20240261680A1 (en) | Non-transitory computer-readable storage medium having information processing program stored therein, information processing system, and information processing method | |
WO2022201736A1 (en) | Information processing device, information processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190913 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190927 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20191004 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20191016 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191029 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191223 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200403 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200430 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20200430 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200616 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200630 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6730753 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |