JP2012106005A - Image display device, game program, and game control method - Google Patents
Image display device, game program, and game control method Download PDFInfo
- Publication number
- JP2012106005A JP2012106005A JP2012012782A JP2012012782A JP2012106005A JP 2012106005 A JP2012106005 A JP 2012106005A JP 2012012782 A JP2012012782 A JP 2012012782A JP 2012012782 A JP2012012782 A JP 2012012782A JP 2012106005 A JP2012106005 A JP 2012106005A
- Authority
- JP
- Japan
- Prior art keywords
- image
- player
- stereoscopic image
- operating body
- parallax
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
本発明は、2次元の視差画像を表示して観察者に仮想的な立体像を認識させ、その仮想的な立体像を利用した情報処理技術に関する。 The present invention relates to an information processing technology that displays a two-dimensional parallax image, allows a viewer to recognize a virtual stereoscopic image, and uses the virtual stereoscopic image.
従来、2次元の視差画像を表示して観察者に仮想的な立体像を認識させる技術が知られている。例えば、特許文献1には、空間変調素子に右目用画像および左目用画像を表示し、プレイヤ(観察者)の画像から得られた顔半面像を照明用図形表示装置に表示し、その顔半面像を照明として、レンズにより、右目用画像または左目用画像をそのプレイヤの右目または左目のみに観察させるようにした、画像表示装置としての立体画像ゲーム装置が開示されている。この装置によれば、プレイヤに立体画像(立体像)を認識させるのに左右の眼へそれぞれの画像を振り分ける作用を有する専用の眼鏡が不要となる、とされている。
Conventionally, a technique for displaying a two-dimensional parallax image and allowing a viewer to recognize a virtual stereoscopic image is known. For example, in
上述した従来の装置によれば、専用の眼鏡を装着することなく立体像を観察者に認識させることができるものの、従来、立体像に対して直接操作を行なえるかのような感覚を得ることができるような装置は存在しなかった。 According to the above-described conventional apparatus, a stereoscopic image can be recognized by an observer without wearing dedicated glasses, but conventionally, a feeling as if a direct operation can be performed on a stereoscopic image is obtained. There was no device that could do this.
本発明は上記に鑑みてなされたもので、画像表示装置の観察者が、実際には存在しない立体像に対してあたかも直接的に操作を行う感覚を得ることができる画像表示装置、ゲームプログラム、ゲーム制御方法を提供することを目的とする。 The present invention has been made in view of the above, and an image display device, a game program, and an image display device that allow an observer of the image display device to obtain a feeling of directly operating a stereoscopic image that does not actually exist, An object is to provide a game control method.
発明1に係る画像表示装置は、以下の構成を備えた装置である。
(1)表示画面に視差画像を表示する画像表示手段。
(2)視差画像の観察者によって表示画面と観察者との間に認識される立体像の仮想的な空間座標を算出する第1座標算出手段。
(3)観察者の操作対象である操作体の空間座標を算出する第2座標算出手段。
(4)第1座標算出手段によって算出された立体像の少なくとも1点の空間座標と、第2座標算出手段によって算出された操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、上記視差画像、または上記視差画像以外の表示画面上の画像の少なくとも一方の変化を伴う所定のイベントを発生させるイベント発生手段。
The image display apparatus according to the first aspect of the present invention is an apparatus having the following configuration.
(1) Image display means for displaying a parallax image on the display screen.
(2) First coordinate calculating means for calculating virtual spatial coordinates of a stereoscopic image recognized between the display screen and the observer by the observer of the parallax image.
(3) Second coordinate calculation means for calculating the spatial coordinates of the operating body that is the operation target of the observer.
(4) The distance between the spatial coordinates of at least one point of the stereoscopic image calculated by the first coordinate calculating unit and the spatial coordinates of at least one point of the operating tool calculated by the second coordinate calculating unit is a predetermined threshold value Event generating means for generating a predetermined event accompanied by a change in at least one of the parallax image or an image on the display screen other than the parallax image when the following occurs.
この画像表示装置では、画像表示手段によって表示画面に視差画像が表示される。この視差画像を見た観察者が、視差画像のうち左目用画像を観察者の左目のみで見つつ視差画像のうち右目用画像を観察者の右目で見ることで、観察者にとって観察者と表示画面の間の仮想的な立体像の存在が認識される。第1座標算出手段は、その立体像の仮想的な空間座標を算出する。
この画像表示装置では、観察者が、立体像に対する操作対象である操作体を有していることが予定されている。この操作体は、例えば細長い棒状のペン等、観察者とは別個の物理的な実体であってもよく、代替的に例えば観察者の手または指等、観察者の一部である物理的な実体であってもよい。そして、第2座標算出手段は、上記操作体の空間座標を算出する。
In this image display device, the parallax image is displayed on the display screen by the image display means. The observer who sees this parallax image displays the image for the left eye in the parallax image only with the left eye of the observer while viewing the image for the right eye in the parallax image with the right eye of the observer. The existence of a virtual stereoscopic image between the screens is recognized. The first coordinate calculation means calculates virtual spatial coordinates of the stereoscopic image.
In this image display apparatus, it is planned that the observer has an operating body that is an operation target for a stereoscopic image. The operating body may be a physical entity separate from the observer, such as an elongated rod-shaped pen, or alternatively a physical part that is part of the observer, such as the observer's hand or finger. It may be an entity. Then, the second coordinate calculation means calculates the spatial coordinates of the operating body.
この画像表示装置では、イベント発生手段は、第1座標算出手段によって算出された立体像の少なくとも1点の空間座標と、第2座標算出手段によって算出された操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、上記視差画像、または上記視差画像以外の表示画面上の画像の少なくとも一方の変化を伴う所定のイベントを発生させる。つまり、イベント発生手段は、観察者の操作対象である操作体と、観察者に認識される立体像とが十分に接近、または接触していると判断されるときに、所定のイベントを発生させる。この所定のイベントは、上記視差画像、または上記視差画像以外の表示画面上の画像の少なくとも一方の変化を伴うもの、すなわち、観察者に認識される立体像、および/または、表示画面上の2次元画像の変化を伴うものであり、その変化は観察者が視認できるものとなっている。そのため、この画像表示装置によれば、観察者は、実際には存在しない立体像に対してあたかも直接的に操作を行なえるかのような感覚を味わうことができる。 In this image display device, the event generating means includes at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculating means, and at least one spatial coordinate of the operating body calculated by the second coordinate calculating means. When the distance between them becomes equal to or less than a predetermined threshold value, a predetermined event accompanied by a change in at least one of the parallax image or an image on the display screen other than the parallax image is generated. In other words, the event generation means generates a predetermined event when it is determined that the operating body that is the operation target of the observer and the stereoscopic image recognized by the observer are sufficiently approaching or in contact with each other. . This predetermined event is accompanied by a change in at least one of the parallax image or the image on the display screen other than the parallax image, that is, a stereoscopic image recognized by the observer and / or 2 on the display screen. This is accompanied by a change in the dimensional image, and the change is visible to the observer. Therefore, according to this image display device, an observer can feel as if he / she can directly operate a stereoscopic image that does not actually exist.
例えば、この画像表示装置を、プレイヤに仮想的に認識される立体像を対象としてプレイヤが操作を行うゲームの進行を制御するゲーム装置に適用した場合を想定する。そのようなゲームの進行は例えば、プレイヤに認識される立体像に対してプレイヤがあたかも操作体(例えばペン等)を接触させること、あるいは十分に接近させることの動機付けをプレイヤに付与することで行われる。そして、ゲーム装置のイベント発生手段は、プレイヤに動機付けを付与するために、立体像に対応する視差画像、または当該視差画像以外の表示画面上の2次元画像の少なくとも一方の変化を伴う所定のイベントを発生させるようにしてもよい。この場合、所定のイベントとしては、操作体が接触あるいは十分に接近した立体像に対応する視差画像の消失、変形、拡大縮小、移動速度の変化(つまり、立体像の消失、変形、拡大縮小、移動速度の変化)、新たな立体像に対応する視差画像の出現(つまり、立体像の出現)、あるいは表示画面上のポイント表示の変化(プレイヤが獲得したポイント数の増加)等が挙げられる。このように、この画像表示装置をゲーム装置に適用した場合、プレイヤは、立体像に対してあたかも直接的な操作を行えるかのような感覚をもってゲームを進行させることができる。すなわち、立体的な操作感覚を伴う新たなゲームの興趣性をもたらすことができる。 For example, it is assumed that this image display device is applied to a game device that controls the progress of a game operated by the player for a stereoscopic image virtually recognized by the player. The progress of such a game is, for example, by giving the player the motivation to bring the operating body (for example, a pen or the like) into contact with the stereoscopic image recognized by the player, or to make the player approach sufficiently. Done. Then, the event generation means of the game device has a predetermined change accompanied by a change in at least one of a parallax image corresponding to the stereoscopic image or a two-dimensional image on the display screen other than the parallax image in order to give motivation to the player. An event may be generated. In this case, as the predetermined event, the disappearance, deformation, enlargement / reduction, and change in moving speed of the parallax image corresponding to the stereoscopic image with which the operating body is in contact or sufficiently close (that is, the disappearance, deformation, enlargement / reduction of the stereoscopic image, Change in movement speed), appearance of a parallax image corresponding to a new stereoscopic image (that is, appearance of a stereoscopic image), change in point display on the display screen (increase in the number of points acquired by the player), and the like. As described above, when this image display device is applied to a game device, the player can advance the game as if a direct operation can be performed on the stereoscopic image. In other words, it is possible to bring about a new game interest with a three-dimensional operation feeling.
発明2に係る画像表示装置は、発明1に記載の画像表示装置において、以下の構成をさらに備えた装置である。
(5)視差画像が表示される前に、当該視差画像によって認識される仮想的な立体像が観察者から見て操作体と重複し、かつ、操作体が仮想的な立体像と表示画面との間に位置するようになると判定される場合には、予め視差画像を表示しないように画像表示手段を制御する第1制御手段。
An image display device according to a second aspect of the present invention is the image display device according to the first aspect of the present invention, further comprising the following configuration.
(5) Before the parallax image is displayed, the virtual stereoscopic image recognized by the parallax image overlaps with the operating body when viewed from the observer, and the operating body is a virtual stereoscopic image and the display screen. First control means for controlling the image display means so as not to display the parallax image in advance when it is determined that the position is located between the two.
この画像表示装置では、第1制御手段は、視差画像が表示される前に、当該視差画像によって認識される仮想的な立体像が観察者から見て操作体と重複し、かつ、操作体が仮想的な立体像と表示画面との間に位置するようになると判定される場合には、予め視差画像を表示しないように画像表示手段を制御する。つまり、観察者から見て、観察者に認識される立体像の仮想的な空間位置よりも裏側に操作体が存在するという位置関係になる場合には、立体像によって観察者から操作体が不自然に見えることになる。具体的には、操作体のうち、立体像と重なった部分のみが、立体像の手前(観察者側)に浮き出て見える。そこで、第1制御手段は、かかる不自然な見え方を予め防止するため、上記位置関係となるような視差画像を予め表示しないように画像表示手段を制御する。これにより、操作体による立体像に対する操作感覚をより自然なものとすることができる。 In this image display device, the first control means, before the parallax image is displayed, the virtual stereoscopic image recognized by the parallax image overlaps with the operating body when viewed from the observer, and the operating body is When it is determined that the image is positioned between the virtual stereoscopic image and the display screen, the image display unit is controlled in advance so as not to display the parallax image. That is, when the positional relationship is such that the operating body exists behind the virtual spatial position of the stereoscopic image recognized by the observer as viewed from the observer, the operating body is It will look natural. Specifically, only the portion of the operating body that overlaps the stereoscopic image appears to appear in front of the stereoscopic image (observer side). Therefore, the first control unit controls the image display unit so as not to display the parallax image having the above positional relationship in advance in order to prevent such an unnatural appearance. Thereby, the operation feeling with respect to the stereoscopic image by the operating body can be made more natural.
発明3に係る画像表示装置は、発明1または2に記載の画像表示装置において、以下の構成をさらに備えた装置である。
(6)操作体が、観察者から見て立体像と重複し、かつ立体像と表示画面の間の位置に移動した場合には、その立体像に対応する視差画像を表示しないように画像表示手段を制御する第2制御手段。
An image display device according to a third aspect of the present invention is the image display device according to the first or second aspect, further comprising the following configuration.
(6) When the operating body overlaps with the stereoscopic image as viewed from the observer and moves to a position between the stereoscopic image and the display screen, the image display is performed so that the parallax image corresponding to the stereoscopic image is not displayed. Second control means for controlling the means.
この画像表示装置では、第2制御手段は、操作体が、観察者から見て立体像と重複し、かつ立体像と表示画面の間の位置に移動した場合には、その立体像に対応する視差画像を表示しないように画像表示手段を制御する。つまり、操作体が移動した結果として、その操作体が、観察者から見て、観察者に認識される立体像の仮想的な空間位置よりも裏側に存在するという位置関係になる場合には、立体像によって観察者から操作体が不自然に見えることになる。具体的には、操作体のうち、立体像と重なった部分のみが、立体像の手前(観察者側)に浮き出て見える。そこで、第2制御手段は、かかる不自然な見え方を防止するため、上記位置関係となるような位置に操作体が移動した場合には、立体像に対応する視差画像を表示しないように画像表示手段を制御する。すなわち、立体像自体を消してしまうことによって、不自然な表示を回避している。これにより、操作体による立体像に対する操作感覚をより自然なものとすることができる。 In this image display device, the second control means corresponds to the stereoscopic image when the operating body overlaps with the stereoscopic image as viewed from the observer and moves to a position between the stereoscopic image and the display screen. The image display means is controlled so as not to display the parallax image. In other words, as a result of the movement of the operating body, when the operating body is in a positional relationship that the operating body is present behind the virtual spatial position of the stereoscopic image recognized by the observer, The operation body looks unnatural from the observer by the stereoscopic image. Specifically, only the portion of the operating body that overlaps the stereoscopic image appears to appear in front of the stereoscopic image (observer side). Therefore, in order to prevent such an unnatural appearance, the second control unit displays an image so as not to display the parallax image corresponding to the stereoscopic image when the operating body moves to a position that satisfies the positional relationship. Control the display means. That is, unnatural display is avoided by erasing the stereoscopic image itself. Thereby, the operation feeling with respect to the stereoscopic image by the operating body can be made more natural.
発明4に係る画像表示装置は、発明1または2に記載の画像表示装置において、以下の構成をさらに備えた装置である。
(7)操作体が、観察者から見て立体像と重複し、かつ立体像と表示画面の間の位置に移動した場合には、その立体像に対応する視差画像を、視差画像に対応する立体像が観察者から見て操作体と重複しない位置に移動するように画像表示手段を制御する第3制御手段。
An image display device according to a fourth aspect of the present invention is the image display device according to the first or second aspect, further comprising the following configuration.
(7) When the operating body overlaps with the stereoscopic image as viewed from the observer and moves to a position between the stereoscopic image and the display screen, the parallax image corresponding to the stereoscopic image corresponds to the parallax image. Third control means for controlling the image display means so that the stereoscopic image moves to a position that does not overlap with the operating body when viewed from the observer.
この画像表示装置では、第3制御手段は、操作体が、観察者から見て立体像と重複し、かつ立体像と表示画面の間の位置に移動した場合には、その立体像に対応する視差画像を、視差画像に対応する立体像が観察者から見て操作体と重複しない位置に移動するように画像表示手段を制御する。つまり、操作体が移動した結果として、その操作体が、観察者から見て、観察者に認識される立体像の仮想的な空間位置よりも裏側に存在するという位置関係になる場合には、立体像によって観察者から操作体が不自然に見えることになる。具体的には、操作体のうち、立体像と重なった部分のみが、立体像の手前(観察者側)に浮き出て見える。そこで、第3制御手段は、かかる不自然な見え方を防止するため、上記位置関係となるような位置に操作体が移動した場合には、立体像に対応する視差画像を上記位置関係とならない位置に移動するように画像表示手段を制御する。すなわち、立体像の位置を操作体から離れるように移動させることによって、不自然な表示を回避している。これにより、操作体による立体像に対する操作感覚をより自然なものとすることができる。 In this image display device, the third control unit corresponds to the stereoscopic image when the operating body overlaps with the stereoscopic image as viewed from the observer and moves to a position between the stereoscopic image and the display screen. The image display means is controlled so that the parallax image moves to a position where the stereoscopic image corresponding to the parallax image does not overlap with the operating body when viewed from the observer. In other words, as a result of the movement of the operating body, when the operating body is in a positional relationship that the operating body is present behind the virtual spatial position of the stereoscopic image recognized by the observer, The operation body looks unnatural from the observer by the stereoscopic image. Specifically, only the portion of the operating body that overlaps the stereoscopic image appears to appear in front of the stereoscopic image (observer side). Therefore, in order to prevent such an unnatural appearance, the third control unit does not place the parallax image corresponding to the stereoscopic image in the positional relationship when the operating body moves to a position that satisfies the positional relationship. The image display means is controlled to move to the position. That is, unnatural display is avoided by moving the position of the stereoscopic image away from the operating body. Thereby, the operation feeling with respect to the stereoscopic image by the operating body can be made more natural.
発明5に係る画像表示装置は、発明1〜4のいずれかに記載の画像表示装置において、以下の構成をさらに備えた装置である。
(8)操作体が実質的に移動していない状態で、立体像の少なくとも1点の空間座標と、操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときには、所定のイベントの発生を禁止するようにイベント発生手段を制御する第4制御手段。
An image display device according to a fifth aspect of the present invention is the image display device according to any one of the first to fourth aspects, further comprising the following configuration.
(8) When the distance between the spatial coordinates of at least one point of the three-dimensional image and the spatial coordinates of at least one point of the operating body is equal to or less than a predetermined threshold in a state where the operating body is not substantially moved , Fourth control means for controlling the event generating means to prohibit the occurrence of a predetermined event.
この画像表示装置では、第4制御手段は、操作体が実質的に移動していない状態で、立体像の少なくとも1点の空間座標と、操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときには、所定のイベントの発生を禁止するようにイベント発生手段を制御する。操作体が実質的に移動していない状態では、観察者には、自身が認識する立体像に対して操作体を近付けようとする積極的な意思が欠如していると考えられる。そこで、かかる場合には、立体像の少なくとも1点の空間座標と、操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になる、つまり、両者が十分に接近していると判断される場合であっても、第4制御手段は、イベント発生手段によるイベントの発生を禁止するようにする。これにより、観察者による積極的な意思によるものではなく、偶然に操作体と立体像が接近した場合のイベントの発生を阻止でき、イベントの発生の実効性を高めることができる。 In this image display device, the fourth control means is a distance between the spatial coordinates of at least one point of the stereoscopic image and the spatial coordinates of at least one point of the operating body in a state where the operating body is not substantially moved. When the value falls below a predetermined threshold value, the event generating means is controlled so as to prohibit the generation of a predetermined event. In a state where the operating tool is not substantially moved, it is considered that the observer lacks the willingness to bring the operating tool closer to the stereoscopic image recognized by the observer. Therefore, in such a case, the distance between the spatial coordinates of at least one point of the stereoscopic image and the spatial coordinates of at least one point of the operating body is equal to or smaller than a predetermined threshold, that is, they are sufficiently close to each other. The fourth control means prohibits the occurrence of an event by the event generation means even if it is determined that the Thus, it is possible to prevent the occurrence of an event when the operating body and the stereoscopic image are accidentally approached, and to increase the effectiveness of the occurrence of the event.
例えば、この画像表示装置を、プレイヤに仮想的に認識される立体像を対象としてプレイヤが操作を行うゲームの進行を制御するゲーム装置に適用した場合を想定する。そのようなゲームの進行は例えば、プレイヤに認識される立体像に対してプレイヤがあたかも操作体を接触させること、あるいは十分に接近させることの動機付けをプレイヤに付与することで行われる。そして、ゲーム装置のイベント発生手段は、プレイヤに動機付けを付与するために、立体像に対応する視差画像、または当該視差画像以外の表示画面上の2次元画像の少なくとも一方の変化を伴う所定のイベント(例えば、立体像の消失、立体像の出現、プレイヤが獲得したポイント数の増加等)を発生させるようにしてもよい。ここで、プレイヤが操作体を移動させていないのにも関わらず偶然に立体像と操作体が接触あるいは十分に接近したことをもってイベントを発生させたとすれば、プレイヤの適切な操作を伴わずにイベントを発生させることになり、ゲームの興趣性を低下させることにもなる。そこで、第4制御手段によって、プレイヤの適切な操作を伴わずにイベントを発生させるという不適切なイベント発生を防止する。 For example, it is assumed that this image display device is applied to a game device that controls the progress of a game operated by the player for a stereoscopic image virtually recognized by the player. The progress of such a game is performed, for example, by giving the player the motivation to bring the operating body into contact with the stereoscopic image recognized by the player or to make the player approach sufficiently. Then, the event generation means of the game device has a predetermined change accompanied by a change in at least one of the parallax image corresponding to the stereoscopic image or the two-dimensional image on the display screen other than the parallax image in order to give the player motivation. An event (for example, disappearance of a stereoscopic image, appearance of a stereoscopic image, increase in the number of points acquired by a player, etc.) may be generated. Here, if the event is generated by chance that the stereoscopic image and the operating body are in contact or sufficiently close even though the player has not moved the operating body, without the player's proper operation, An event will be generated, and the fun of the game will be reduced. Therefore, the fourth control means prevents the occurrence of an inappropriate event in which an event is generated without an appropriate operation by the player.
発明6に係る画像表示装置は、発明1〜5のいずれかに記載の画像表示装置において、以下の構成をさらに備えた装置である。
(9)第1座標算出手段は、観察者と表示画面の間の第1の距離と、観察者の瞳孔間の距離として予め設定される第2の距離と、視差画像を構成する左目用画像と右目用画像のずれ量とに基づいて、その視差画像に対応する立体像の仮想的な空間座標を算出すること。(10)第2座標算出手段は、1または一対の撮像手段によって得られる操作体の像の色および/または形状に基づいて、操作体の空間座標を算出すること。
An image display device according to a sixth aspect of the present invention is the image display device according to any one of the first to fifth aspects, further comprising the following configuration.
(9) The first coordinate calculation means includes a first distance between the observer and the display screen, a second distance set in advance as a distance between the pupils of the observer, and a left-eye image constituting a parallax image. And a virtual spatial coordinate of the stereoscopic image corresponding to the parallax image based on the shift amount of the right-eye image. (10) The second coordinate calculating means calculates the spatial coordinates of the operating body based on the color and / or shape of the image of the operating body obtained by one or a pair of imaging means.
この画像表示装置では、表示画面に表示される視差画像によって観察者に立体像を認識させるための観察者の位置、つまり表示画面から観察者までの距離が所定の第1の距離となっている。換言すれば、画像表示装置の表示画面上の視差画像を見てその視差画像に対応する立体像を適切に認識するために、画像表示装置の観察者は、表示画面から所定の第1の距離だけ離間した位置で表示画面を見ることが予定されている。そして、第1座標算出手段は、上記第1の距離と、観察者の瞳孔間の距離として予め設定される第2の距離と、視差画像を構成する左画像と右画像のずれ量とに基づいて、例えば表示画面と同一平面上の任意の位置を基準とした、その視差画像に対応する立体像の仮想的な空間座標を算出する。 In this image display device, the position of the observer for causing the observer to recognize a stereoscopic image based on the parallax image displayed on the display screen, that is, the distance from the display screen to the observer is the predetermined first distance. . In other words, in order to appropriately recognize a stereoscopic image corresponding to the parallax image by viewing the parallax image on the display screen of the image display device, the observer of the image display device has a predetermined first distance from the display screen. It is planned to see the display screen at a position separated by only a distance. The first coordinate calculation means is based on the first distance, a second distance set in advance as a distance between the pupils of the observer, and a shift amount between the left image and the right image constituting the parallax image. Thus, for example, the virtual spatial coordinates of the stereoscopic image corresponding to the parallax image with respect to an arbitrary position on the same plane as the display screen are calculated.
この画像表示装置では、画像表示装置内に内蔵されている1または一対の撮像手段、あるいは画像表示装置と電気的に接続される外部の1または一対の撮像手段が、操作体を含む画像を取得する。そして、第2座標算出手段は、撮像手段によって得られる操作体の像の色および/または形状に基づいて、例えば撮像手段の焦点位置を基準とした、操作体の空間座標を算出する。ここで、操作体の像の色は、1または一対の撮像手段によって得られる画像の中から素早く操作体の像を特定し、かつ操作体のうち空間座標の算出範囲を一部の領域に限定して処理の負荷を軽減するために利用されうる。 In this image display device, one or a pair of imaging means built in the image display device, or one or a pair of external imaging means electrically connected to the image display device acquires an image including an operating tool. To do. Then, the second coordinate calculating means calculates the spatial coordinates of the operating body based on the focal position of the imaging means, for example, based on the color and / or shape of the image of the operating body obtained by the imaging means. Here, the color of the image of the operating tool is used to quickly identify the image of the operating tool from the images obtained by one or a pair of imaging means, and to limit the calculation range of the spatial coordinates of the operating tool to a partial area. Thus, it can be used to reduce the processing load.
この画像表示装置によれば、表示画面に対する観察者の位置が予定され、それによって観察者と表示画面の間で観察者によって認識される立体像の仮想的な空間位置が一意に定まる。そして、表示画面に対する観察者の位置を予定しておくことで、観察者が専用眼鏡を装着することなしに立体像を認識できるように、画像表示装置の表示態様が設定される。そのような表示態様として例えば、パララックスバリア方式(視差バリア方式),レンティキュラ方式の視差画像の表示態様が挙げられる。この画像表示装置によれば、観察者は、実際には存在しない立体像に対する直接的な操作を、煩わしい専用眼鏡を装着することなく快適に行うことができる。 According to this image display device, the position of the observer with respect to the display screen is scheduled, and thereby the virtual spatial position of the stereoscopic image recognized by the observer is uniquely determined between the observer and the display screen. Then, the display mode of the image display device is set so that the observer can recognize the stereoscopic image without wearing dedicated glasses by planning the position of the observer with respect to the display screen. Examples of such display modes include parallax barrier (parallax barrier) and lenticular parallax image display modes. According to this image display apparatus, the observer can comfortably perform a direct operation on a stereoscopic image that does not actually exist without wearing troublesome dedicated glasses.
発明7に係る画像表示装置は、発明1〜6のいずれかに記載の画像表示装置において、以下の構成をさらに備えた装置である。
(11)操作体の先端部は、先端部以外の部位とは異なる色および/または形状で構成されていること。
(12)イベント発生手段は、第1座標算出手段によって算出された立体像の少なくとも1点の空間座標と、第2座標算出手段によって算出された操作体の先端部の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、所定のイベントを発生させること。
An image display device according to a seventh aspect of the present invention is the image display device according to any one of the first to sixth aspects, further comprising the following configuration.
(11) The distal end portion of the operating body is configured with a color and / or shape different from the portion other than the distal end portion.
(12) The event generation means includes at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculation means, and at least one spatial coordinate of the tip of the operating body calculated by the second coordinate calculation means. A predetermined event is generated when the distance between the two becomes a predetermined threshold value or less.
この画像表示装置では、観察者が、操作体の先端部を、観察者が認識する立体像に対して近付ける動作を行うことが予定されている。その操作体は、先端部以外の部位とは異なる色および/または形状で構成されるようにしている。かかる操作体の色および形状として様々なものが考えられるが、例えば、操作体を全体として細長い棒状のペンとした場合、先端部のみを先鋭形状とし、先端部以外の部分を棒状としてもよい。あるいは、先端部のみをパターン認識しやすい任意の形状、例えば星型形状などとしてもよい。また、先端部のみを赤色とし、先端部以外の部分を白色としてもよい。このとき、第2座標算出手段は、操作体の先端部の少なくとも1点の空間座標を算出するが、操作体の先端部が先端部以外の部位とは異なる色および/または形状で構成されているため、操作体の位置を素早く特定できる、あるいは操作体の中で空間座標の算出対象の領域を限定することができ、空間座標の算出処理の負荷を軽減できるようになっている。そして、イベント発生手段は、立体像の少なくとも1点の空間座標と、操作体の先端部の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、所定のイベントを発生させる。この画像表示装置によれば、空間座標の算出処理の負荷を軽減され、処理の高速化を図ることができる。 In this image display device, the observer is scheduled to perform an operation of bringing the distal end portion of the operating body close to the stereoscopic image recognized by the observer. The operating body is configured to have a color and / or shape different from those other than the tip. Various colors and shapes of the operating body are conceivable. For example, when the operating body is formed as an elongated rod-shaped pen as a whole, only the tip portion may be sharpened, and the portion other than the tip portion may be rod-shaped. Or it is good also as arbitrary shapes which are easy to pattern-recognize only the front-end | tip part, for example, a star shape. Further, only the tip portion may be red and the portion other than the tip portion may be white. At this time, the second coordinate calculation means calculates the spatial coordinates of at least one point of the distal end portion of the operating body, but the distal end portion of the operating body is configured with a color and / or shape different from the portion other than the distal end portion. Therefore, the position of the operating body can be quickly identified, or the area for calculating the spatial coordinates in the operating body can be limited, and the load of the processing for calculating the spatial coordinates can be reduced. Then, the event generating means generates a predetermined event when the distance between the spatial coordinates of at least one point of the stereoscopic image and the spatial coordinates of at least one point of the tip of the operating body is equal to or less than a predetermined threshold. generate. According to this image display device, the load of the spatial coordinate calculation process can be reduced, and the processing speed can be increased.
発明8に係るゲームプログラムは、プレイヤに仮想的に認識される立体像を対象としてプレイヤが操作を行うゲームを実現可能なコンピュータに、以下の機能を実現させるためのゲームプログラムである。
(13)表示画面に視差画像を表示する画像表示機能。
(14)視差画像を観察するプレイヤによって表示画面とプレイヤとの間に認識される立体像の仮想的な空間座標を算出する第1座標算出機能。
(15)プレイヤの操作対象である操作体の空間座標を算出する第2座標算出機能。
(16)第1座標算出機能によって算出された立体像の少なくとも1点の空間座標と、第2座標算出機能によって算出された操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、上記視差画像、または上記視差画像以外の表示画面上の画像の少なくとも一方の変化を伴う所定のイベントを発生させるイベント発生機能。
A game program according to an eighth aspect of the present invention is a game program for causing a computer capable of realizing a game operated by a player for a stereoscopic image virtually recognized by the player to realize the following functions.
(13) An image display function for displaying a parallax image on the display screen.
(14) A first coordinate calculation function for calculating a virtual spatial coordinate of a stereoscopic image recognized between the display screen and the player by the player observing the parallax image.
(15) A second coordinate calculation function for calculating the spatial coordinates of the operating body that is the operation target of the player.
(16) The distance between at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculation function and at least one spatial coordinate of the operating tool calculated by the second coordinate calculation function is a predetermined threshold value. An event generation function for generating a predetermined event accompanied by a change in at least one of the parallax image or an image on the display screen other than the parallax image when the following occurs.
コンピュータは、例えば家庭用ゲーム機、業務用ゲーム機、携帯用ゲーム機、携帯電話機、携帯情報端末、パーソナルコンピュータ、サーバコンピュータ、ホームサーバ等である。また、このゲームプログラムは、DVD−ROMやCD−ROM等のコンピュータが読み取り可能な情報記憶媒体に格納されてもよい。 The computer is, for example, a home game machine, an arcade game machine, a portable game machine, a mobile phone, a portable information terminal, a personal computer, a server computer, a home server, or the like. The game program may be stored in a computer-readable information storage medium such as a DVD-ROM or a CD-ROM.
発明9に係るゲーム制御方法は、プレイヤに仮想的に認識される立体像を対象としてプレイヤが操作を行うゲームの進行を制御するゲーム装置におけるゲーム制御方法であって、以下の各ステップを備える。
(17)表示画面に視差画像を表示する画像表示ステップ。
(18)視差画像を観察するプレイヤによって表示画面とプレイヤとの間に認識される立体像の仮想的な空間座標を算出する第1座標算出ステップ。
(19)プレイヤの操作対象である操作体の空間座標を算出する第2座標算出ステップ。(20)第1座標算出ステップによって算出された立体像の少なくとも1点の空間座標と、第2座標算出ステップによって算出された操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、上記視差画像、または上記視差画像以外の前記表示画面上の画像の少なくとも一方の変化を伴う所定のイベントを発生させるイベント発生ステップ。
A game control method according to a ninth aspect of the present invention is a game control method in a game device that controls the progress of a game that is operated by a player for a stereoscopic image that is virtually recognized by the player, and includes the following steps.
(17) An image display step for displaying a parallax image on the display screen.
(18) A first coordinate calculation step of calculating virtual spatial coordinates of a stereoscopic image recognized between the display screen and the player by the player observing the parallax image.
(19) A second coordinate calculating step of calculating the spatial coordinates of the operating body that is the operation target of the player. (20) A distance between at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculating step and at least one spatial coordinate of the operating body calculated by the second coordinate calculating step is a predetermined threshold value. An event generation step of generating a predetermined event accompanied by a change in at least one of the parallax image or the image on the display screen other than the parallax image when the following occurs.
本発明の画像表示装置、ゲームプログラム、ゲーム制御方法によれば、画像表示装置の観察者が、実際には存在しない立体像に対してあたかも直接的に操作を行えるかのような感覚を得ることができる。 According to the image display device, the game program, and the game control method of the present invention, an observer of the image display device obtains a feeling as if it can directly operate on a stereoscopic image that does not actually exist. Can do.
(1)第1の実施形態
(1−1)ゲーム装置の構成と動作
図1は、本発明の画像表示装置の一実施形態としてのゲーム装置1の外観とゲーム装置1のプレイヤとを示している。ゲーム装置1は、観察者としてのプレイヤに仮想的に認識される立体像を対象としてプレイヤが操作を行うゲームの進行を制御するゲーム装置である。図2は、本実施形態のゲーム装置1の構成を示すブロック図である。
図1に示すように、本実施形態のゲーム装置1の前面部には、表示装置3の液晶モニタ3a(表示画面)が設けられる。液晶モニタ3aの下方には、撮像対象をプレイヤの方に向けた左撮像部20Lと右撮像部20Rの撮像用レンズが平行等位に配置されている。この左撮像部20Lと右撮像部20Rは、後述するステレオ計測のために設けられている。なお、図1に示した例では、各撮像部がゲーム装置1に内蔵された形態で示しているが、別体の撮像装置が設けられ、その撮像装置がゲーム装置1内の制御装置10と電気的に接続される形態であってもよい。各撮像部で得られたフレーム単位の画像のデータは逐次、制御装置10のCPU11へ送出される。
(1) First Embodiment (1-1) Configuration and Operation of Game Device FIG. 1 shows an appearance of a
As shown in FIG. 1, a
図1には図示していないが、プレイヤの操作入力を受け入れるための1または複数の釦がゲーム装置1に設けられうる。そのような釦として、例えばゲーム装置1を起動するための電源釦、ゲーム装置1に設定されているいずれかのアプリケーションプログラムを動作させるための選択用釦等が含まれてよい。図2に示した入力部4には、ゲーム装置1に設けられた1または複数の釦、およびその釦に対する押下入力あるいは操作入力を検出するためのインタフェース回路が含まれる。
図2における記憶媒体装着部5(図1では不図示)は、例えばゲーム装置1の筐体に設けられ記憶媒体17を受け入れるためのスロット、および記憶媒体17からデータを読み出し、あるいは記憶媒体17にデータを書き込むためのインタフェース回路を備えうる。記憶媒体17は、例えばフラッシュメモリを内蔵したカード型記憶媒体、光ディスク等のディスク状記憶媒体などである。
Although not shown in FIG. 1, the
A storage medium mounting unit 5 (not shown in FIG. 1) in FIG. 2 reads, for example, data from a slot for receiving the
図2を参照すると、本実施形態のゲーム装置1の制御装置10は、ゲームプログラムの実行や、ゲームプログラムの実行に伴う信号転送処理およびデータ処理を行うために設けられている。制御装置10は主として、CPU(Central Processing Unit)11、RO
M(Read Only Memory)12、RAM(Random Access Memory)13、画像処理回路14およびサウンド処理回路15を含む。制御装置10の各部は、入力部4、左撮像部20L、右撮像部20Rおよび記憶媒体装着部5とバス16を介して、信号を転送可能に接続される。
Referring to FIG. 2, the
An M (Read Only Memory) 12, a RAM (Random Access Memory) 13, an
CPU11は、ゲームプログラムの命令を解釈し、その命令に応じた各種のデータ処理を行う。
画像処理回路14は、主に、画像データの生成加工処理を行う。例えば、画像処理回路14は、2次元の画像の重ね合わせ演算やαブレンディング等の透過演算、各種の飽和演算を行う。本実施形態では特に、画像処理回路14は、プレイヤに仮想的な立体像を認識させるための視差画像の生成および表示を行う。また、画像処理回路14は、描画すべき画像データをフレーム毎にバッファリングする機能(いわゆるVRAMとしての機能)を備える。
CPU11 interprets the command of a game program and performs various data processing according to the command.
The
記憶媒体17には、例えば、ゲームプログラムや、ゲームプログラムで使用される各種データを格納するために設けられている。記憶媒体17から読み出された各種データは、RAM13に一時的に格納される。また、RAM13にはゲームの進行に必要なデータが格納され、CPU11によって逐次更新・削除・追加されうる。
The
表示装置3は、主に、画像処理回路14によって生成される画像(視差画像を含む。)のデータや、記憶媒体17から読み出される画像(視差画像を含む。)のデータなどを、液晶モニタ3aに画像として出力するために設けられている。なお、以下の説明では、単に「画像」というときには、立体像をプレイヤに認識させるための視差画像と、液晶モニタ3a上で直接プレイヤに視認させるための2次元画像の両方を含む。表示装置3の液晶モニタ3aは、例えばLCD(Liquid Cristal Display)モニタであり、画像のデータに基づき、マトリクス状の画素単位で設けられる薄膜トランジスタを水平駆動および垂直駆動することで画像が表示される。
The
本実施形態のゲーム装置1では、プレイヤが立体像用の専用眼鏡を装着することなしに立体像を認識することができるような方式で視差画像が表示されることが好ましい。そのような表示態様としては例えば、パララックスバリア方式(視差バリア方式)、レンティキュラ方式の視差画像の表示態様が挙げられる。
パララックスバリア方式は表示画面(液晶パネル)上に微細なスリットを設ける方式であり、レンティキュラ方式は表示画面上に多数の微小な半円筒状のレンズからなるレンティキュラレンズを設ける方式である。これらの方法では、スリットや半円筒状のレンズにより、観察者(ここではプレイヤ)の左右の目によって見る角度(視線角度)に応じて、画像上の異なる位置が見える。すなわち、左右の目の位置に対応する各視点から見た画像(立体視差のある画像)を垂直に分割して、適切な位置に配置することにより、右目と左目に個別の画像(立体視差のある画像)を見せることができ、立体画像を得ることができる。
In the
The parallax barrier method is a method in which fine slits are provided on a display screen (liquid crystal panel), and the lenticular method is a method in which lenticular lenses comprising a large number of minute semi-cylindrical lenses are provided on the display screen. In these methods, a slit or a semi-cylindrical lens allows different positions on the image to be seen depending on the angle (line-of-sight angle) viewed by the left and right eyes of the observer (here, the player). That is, by dividing an image viewed from each viewpoint corresponding to the positions of the left and right eyes (an image having a stereoscopic parallax) vertically and arranging them at appropriate positions, individual images (a stereoscopic parallax of the right eye and the left eye) are obtained. A certain image) and a stereoscopic image can be obtained.
例えば図1を参照すると、本実施形態のゲーム装置1の液晶モニタ3aには、視差画像を構成する左目用画像ImLおよび右目用画像ImRが表示される。このとき、プレイヤの左目には、視差画像のうち左目用画像ImLのみを見ることができ、プレイヤの右目には、視差画像のうち右目用画像ImRのみを見ることができる。その結果、観察者の目には、プレイヤと表示画面の間の仮想的な立体像VRの存在が認識されることになる。
For example, referring to FIG. 1, a left-eye image ImL and a right-eye image ImR that constitute a parallax image are displayed on the liquid crystal monitor 3 a of the
サウンド処理回路15は、主に、記憶媒体17から読み出される音声データ、及び/又は自ら生成した音声データを、音声としてスピーカ22から出力するために設けられている。サウンド処理回路15には、例えば圧縮音声データをデコードするデコード回路、デコードした音声信号を増幅する増幅回路などが含まれうる。
The
なお、図1を参照すると、プレイヤの操作対象である操作体30が示される。操作体30は、プレイヤが立体像VRに対する操作を行うために使用される。この操作体30は、本実施形態のゲーム装置1の前面部に設けられる左撮像部20Lおよび右撮像部20Rによる撮像対象となる。操作体30の材質、形状および/または色は問わないが、後述する左撮像部20Lおよび右撮像部20Rによるステレオ計測において、その計測範囲を限定して処理負荷を軽減する目的で、操作体30の先端部を、先端部以外の部位とは異なる色および/または形状で構成されるようにすることが好ましい。例えば、図1に示すように、操作体30を全体として細長い棒状のペンとした場合には、先端部のみを先鋭形状とし、先端部以外の部位を棒状としてもよい。あるいは、先端部のみをパターン認識しやすい任意の形状、例えば星型形状などとしてもよい。また、先端部のみを赤色とし、先端部以外の部位を白色としてもよい。
Referring to FIG. 1, an operating
(1−2)ゲーム装置において実行されるゲームの例
次に、本実施形態のゲーム装置1において実行されるゲームとして、プレイヤに仮想的に認識される立体像を対象としてプレイヤが操作を行うゲームの一例について、図3および図4を参照して説明する。図3は、このゲームにおいて、液晶モニタ3aを見たプレイヤに認識される立体像を、時間の経過とともに(a),(b),(c)の順で例示する図である。図4は、このゲームにおいて、プレイヤによる操作と、その操作によって生ずるイベントの一例を、時間の経過とともに(a),(b),(c)の順で示す図である。
(1-2) Example of game executed in game device Next, as a game executed in the
先ず図3を参照すると、このゲームでは、液晶モニタ3a上に複数の視差画像を表示し、これによってプレイヤには、液晶モニタ3aと自身の間に各視差画像に対応した複数の立体像VR1〜5の存在が認識される。ここでは、プレイヤに認識される各立体像は、球形のものを例として挙げている。各視差画像は時間の経過に伴って移動して表示され、それによりプレイヤは、球形の各立体像が空間上であたかも移動しているかのように認識することになる。球形の各立体像は、任意のタイミングで出現して移動を開始し、出現してから時間が経過するにつれて、その大きさが小さくなっていき、出現してから所定の時間が経過すると消失する。例えば、図3の(a)の時点では、複数の立体像VR1〜5が矢印の方向に移動している。図3の(b)の時点では、複数の立体像VR1〜5はすべて存在するが、(a)の時点と比較して位置を移動し、かつその大きさが小さくなっている。図3の(c)の時点になると、立体像VR3が消失し、新たに立体像VR6が出現する。
なお、図3に示す液晶モニタ3aには、プレイヤに与えられたプレイ時間(TIME)、プレイヤが獲得したポイント(POINT)をそれぞれ表示するための表示領域101、102が示されている。
Referring first to FIG. 3, in this game, a plurality of parallax images are displayed on the liquid crystal monitor 3 a, thereby allowing the player to display a plurality of stereoscopic images VR <b> 1 corresponding to each parallax image between the liquid crystal monitor 3 a and itself. The presence of 5 is recognized. Here, each stereoscopic image recognized by the player has a spherical shape as an example. Each parallax image is moved and displayed as time passes, so that the player recognizes as if each spherical stereoscopic image is moving in space. Each spherical three-dimensional image appears at an arbitrary timing and starts moving. As time passes after the appearance, its size decreases, and disappears after a predetermined time has passed since it appeared. . For example, at the time of FIG. 3A, the plurality of stereoscopic images VR1 to VR5 have moved in the direction of the arrow. Although the plurality of stereoscopic images VR1 to VR5 are all present at the time point (b) in FIG. 3, the position is moved and the size thereof is smaller than that at the time point (a). At the point of time (c) in FIG. 3, the stereoscopic image VR3 disappears and a stereoscopic image VR6 newly appears.
Note that the
このゲームでは、プレイヤが認識している仮想的な立体像に対して、操作体30が接触した、あるいは十分に接近したと判断された場合に、所定のイベントが生ずるようになっている。その所定のイベントの例としては、操作体30を接触した、あるいは十分に接近したと判断された立体像に対応する視差画像の消失(つまり、立体像の消失)、新たな立体像に対応する視差画像の出現(つまり、立体像の出現)、あるいは表示画面上のポイント表示の変化(プレイヤが獲得したポイント数の増加)等である。例えば、このゲームは、プレイヤに与えられた所定のプレイ時間の間に(例えば、図3に表示されているTIMEが0になるまでに)、操作体30とできるだけ多くの立体像とを接触、あるいは十分に接近させることによってできるだけ多くの立体像を消失させることを、複数のプレイヤの間で競うゲームであってよい。
In this game, a predetermined event is generated when it is determined that the operating
図4は、プレイヤの操作体30による立体像VRに対する操作を時系列に沿って示している。図4の(a)の時点では、プレイヤは、自身が認識する立体像VRに向けて操作体30を移動させているが、操作体30と立体像VRの距離が閾値より大きく、イベントが生じない。(b)の時点では、プレイヤは、自身が認識する立体像VRに向けて操作体30をさらに移動させているが、未だ操作体30と立体像VRの距離が閾値より大きく、イベントが生じない。(c)の時点になると、操作体30と立体像VRの距離が閾値以下となり、立体像に対して操作体30が接触した、あるいは十分に接近したと判断される。それによってあたかも立体像VRが爆発して消失したかのように、液晶モニタ3a上に表示される視差画像の変化を伴うイベントが発生する例が示される。さらに発生するイベントとして、図3に示した表示領域102内に表示されるポイントの変化(例えば、図3に表示されているPOINTの値の増加)が行われてもよい。
FIG. 4 shows the operations on the stereoscopic image VR by the
(1−3)ゲーム装置における各機能の概要
以下では、ゲーム装置1で実現される機能について、図3および図4を参照して説明したゲームをゲーム装置1が実行する場合に言及しつつ説明する。図5は、本実施形態のゲーム装置1において制御装置10で主要な役割を果たす機能を説明するための機能ブロック図である。
(1-3) Overview of Functions in Game Device Hereinafter, functions realized by the
ゲーム進行手段51は、プレイヤによるゲームプログラムの実行指示入力(あるいはゲームプログラムの選択入力)に応じて、ゲームの進行に必要なデータの設定等を含むゲーム環境を整える機能を備える。ゲーム進行手段51では、ゲームプログラムが記録媒体17からRAM13にロードされてCPU11により実行されると、オブジェクトやキャラクタを含む各種のデータが、記録媒体17からRAM13へ転送される。
ゲーム進行手段51は、RAM13内のオブジェクトのデータを基に、オブジェクトをゲーム空間内に配置しうる。
ゲーム進行手段51は、ゲームの進行に応じて、プレイヤに対して与えられるプレイ時間の管理、プレイヤのポイントの管理、プレイの状況あるいはプレイヤの入力部4に対する入力に応じた表示処理等を行う機能を備えている。
The game progress means 51 has a function of preparing a game environment including setting of data necessary for the progress of the game in response to a game program execution instruction input (or game program selection input) by the player. In the game progress means 51, when a game program is loaded from the
The game progress means 51 can arrange an object in the game space based on the data of the object in the
The game progress means 51 performs functions such as management of play time given to the player, management of the player's points, display processing according to the play situation or input to the
画像表示手段52は、ゲーム装置1の表示画面である液晶モニタ3aに視差画像を表示する機能を備える。この画像表示手段52では、画像処理回路14は、画像処理回路14は、CPU11から指示されるタイミング、CPU11から指示される液晶モニタ3a上の位置に視差画像を表示する。図3に示したゲームの例では、CPU11は、複数の視差画像の各々に対して個別に、視差画像の出現タイミング、出現後の視差画像の軌跡、出現後の視差画像の形状変化、視差画像の消失タイミング、視差画像のうち左目用画像と右目用画像の間のずれ量(つまり、プレイヤが認識する立体像の奥行き方向の位置の設定)等を画像処理回路14に指示する。画像処理回路14は、CPU11からの指示に基づいて、視差画像を含むフレーム単位の画像のデータを逐次生成し、表示装置3へ出力する。表示装置3では、画像処理回路14から入力する画像のデータを基に、画像を液晶モニタ3aへ表示出力する。
The image display means 52 has a function of displaying a parallax image on the liquid crystal monitor 3 a that is a display screen of the
第1座標算出手段53は、視差画像の観察者であるプレイヤによって認識される立体像の仮想的な空間座標を算出する機能を備える。つまり、視差画像を見たプレイヤがその視差画像に含まれる左目用画像および右目用画像を視認することで、プレイヤには、プレイヤと表示画面の間の仮想的な立体像の存在が認識される。第1座標算出手段は、その立体像の仮想的な空間座標を算出する。以下、立体像の仮想的な空間座標を算出方法の具体例について、図6を参照して説明する。
The first coordinate
図6は、プレイヤに認識される立体像の仮想的な空間座標の算出方法を説明するための図であり、図中、d、D、P、Lを以下のように定義する。
d:視差画像の左目用画像ImLと右目用画像ImRの間のずれ量
D:プレイヤと液晶モニタ3a(視差画像の表示面)の間の距離(第1の距離)
P:プレイヤの瞳孔間の距離(第2の距離)
L:液晶モニタ3aから立体像VRまでの距離
FIG. 6 is a diagram for explaining a method of calculating a virtual spatial coordinate of a stereoscopic image recognized by the player. In the figure, d, D, P, and L are defined as follows.
d: A shift amount between the left-eye image ImL and the right-eye image ImR of the parallax image D: A distance (first distance) between the player and the
P: Distance between player's pupils (second distance)
L: Distance from the
このとき、L/d=(D−L)/Pが成立するため、CPU11は、以下の式(E1)に従って距離Lを算出する。
L=d/(P+d)×D …(E1)
At this time, since L / d = (D−L) / P is established, the CPU 11 calculates the distance L according to the following equation (E1).
L = d / (P + d) × D (E1)
ここで、表示装置3が前述したパララックスバリア方式(視差バリア方式)、レンティキュラ方式の視差画像の表示態様を採る場合には、プレイヤが液晶モニタ3a上の視差画像に基づいて仮想的な立体像を適切に認識するための、液晶モニタ3aからプレイヤまでの距離Dは、ほぼ固定値であると考えてよい。換言すれば、上記表示態様を採る場合には、ゲーム装置1のプレイヤは、液晶モニタ3aから所定の上記距離Dだけ離間した位置で液晶モニタ3aを見ることが予定されている。このような場合には、上記式(E1)の演算において距離Dを固定値として設定してよい。
また、プレイヤの瞳孔間の距離Pは、プレイヤ毎に大きく変動する値ではないため、上記式(E1)の演算に当たっては、予め設定された固定値でよい。
視差画像の左目用画像ImLと右目用画像ImRの間のずれ量であるdは、プレイヤが認識する立体像の奥行き方向の位置の設定のために、CPU11によって逐次設定されており、その設定値が上記式(E1)の演算においてもそのまま利用される。
Here, when the
Further, since the distance P between the pupils of the player is not a value that varies greatly from player to player, a predetermined fixed value may be used in the calculation of the above formula (E1).
The shift amount d between the left-eye image ImL and the right-eye image ImR of the parallax image is sequentially set by the CPU 11 in order to set the position in the depth direction of the stereoscopic image recognized by the player. Is also used as it is in the calculation of the above formula (E1).
なお、上記式(E1)の算出方法では、プレイヤの視点の上下方向の位置に応じてプレイヤに認識される仮想的な立体像VRの上下方向の空間位置も変化することになるが、ゲーム装置1に設けられる液晶モニタ3aの位置に応じてプレイヤの視点位置はほぼ固定位置であると考えてよい。そこで、上記式(E1)によって算出するに当たって、プレイヤの両目の瞳孔の空間位置は予め決定された所定値とすることができる。
In the calculation method of the above formula (E1), the vertical spatial position of the virtual stereoscopic image VR recognized by the player also changes according to the vertical position of the player's viewpoint. Depending on the position of the
第1座標算出手段53では、CPU11が逐次(フレーム単位で)、上記式(E1)の演算を行うことによって、視差画像の表示面(液晶モニタ3aの表示面)の所定の位置を基準として、プレイヤに認識される立体像VRの仮想的な空間座標を算出する。例えば、視差画像の表示面の所定の位置を原点とし、その表示面をX−Y平面、その原点からプレイヤに向かう軸を+Z軸として定義すれば、CPU11は、時々刻々と変化する視差画像の左目用画像ImLおよび右目用画像ImRの中心位置(この例では、ほぼ円形状の中心位置)のXおよびY座標を把握しており、逐次上記式(E1)の算出結果として立体像VRの中心位置のZ座標を算出している。そのため、図6に示した幾何学的条件から、原点を基準とした立体像VRのX、YおよびZ座標を算出することができる。また、立体像VRは、視差画像の左目用画像ImLと右目用画像ImRを投影したものであるため、立体像VRの大きさは左目用画像ImLと右目用画像ImRと同一半径の球形と考えてよい。以上から、表示面の所定の位置を原点とした、プレイヤに認識される球形の立体像VRの表面上の任意の点の仮想的な空間座標を算出することができる。
In the first coordinate calculation means 53, the CPU 11 performs the calculation of the above formula (E1) sequentially (in units of frames), thereby using a predetermined position on the display surface of the parallax image (display surface of the
第2座標算出手段54は、プレイヤの操作対象である操作体30の空間座標を算出する機能を備える。第2座標算出手段54では、CPU11が、左撮像部20Lと右撮像部20Rからそれぞれ、逐次(フレーム単位で)取得する左画像と右画像に基づいて、公知のステレオ計測によって操作体30の空間座標を算出する。以下、操作体30の空間座標を算出方法(3次元情報取得手法)について、図7を参照して説明する。
The second coordinate calculation means 54 has a function of calculating the spatial coordinates of the operating
図7は、操作体30の空間座標の算出方法を説明するための図であり、操作体30または操作体30の一部(例えば先端部)が四角錐である場合を例としている。
ステレオ計測による3次元情報取得手法は、異なる視点から対象物体の画像を取得し、各視点の位置関係と各画像の見え方の違いから対象物体の3次元情報を得るというものである。図7において、fLは左撮像部20Lの焦点位置を示し、fRは右撮像部20Rの焦点位置を示す。
本実施形態のゲーム装置1では、撮像用レンズが平行等位に配置された左撮像部20Lと右撮像部20Rからの2つの画像(左画像、右画像)を取得し、その中の1つの画像、例えば左画像を基準画像とする。そして、図7に示す例では、計測対象の操作体30上の点A,Bに対応する、基準画像(左画像)の座標上での位置AL,BL(点A,Bが左撮像部20Lに投影された点)と、右画像の座標上での位置AR,BR(点A,Bが右撮像部20Rに投影された点)との差(視差)と、左右の焦点位置fL,fRとから三角測量の原理に基づいて、点A,Bの空間座標を算出する。例えば、操作体30のA点の空間座標を算出する場合、CPU11は、A点の左画像に対応する位置ALと、A点の右画像に対応するARと、既知の焦点位置fL,fRとに基づいて、例えば焦点位置fL,fRのいずれかを基準としたA点の空間座標を算出する。
通常、ステレオ視による3次元情報の取得を行う場合、1つの基準となる画像上の点が、その他の画像上のどの点に対応しているかを対応点探索(マッチング演算)によって認識する。そして、一方の画像上にある点に対して、その対応点は、他方の画像内のある直線上に存在する。一般に、この直線をエピポーラ線(Epipolar Line)と呼ぶ。本実施形態のゲーム装置1では、図1に示したように、左撮像部20Lと右撮像部20Rの撮像用レンズが平行等位に配置されているため、エピポーラ線が水平となり、水平方向の一次元探索でマッチングをとることができる。
FIG. 7 is a diagram for explaining a method of calculating the spatial coordinates of the operating
The three-dimensional information acquisition method based on stereo measurement acquires an image of a target object from different viewpoints, and acquires the three-dimensional information of the target object from the difference in the positional relationship between the viewpoints and the appearance of the images. In FIG. 7, fL indicates the focal position of the left imaging unit 20L, and fR indicates the focal position of the
In the
Usually, when acquiring three-dimensional information by stereo vision, it is recognized by corresponding point search (matching calculation) which point on the image used as one reference corresponds to which point on the other image. Then, for a point on one image, the corresponding point exists on a straight line in the other image. In general, this straight line is called an epipolar line. In the
第2座標算出手段54では、CPU11が逐次(フレーム単位で)、操作体30を構成する各点の空間座標を、上述したステレオ計測によって算出する。なお、このとき算出される操作体30の空間座標の原点は、第1座標算出手段53で算出される立体像の空間座標の原点と一致させておくことが好ましい。第1座標算出手段53において原点とした表示面上の所定の位置と、左撮像部20Lおよび右撮像部20Rの各焦点位置との位置関係は固定であるため、そのような座標変換処理は容易に行うことができることは言うまでもない。
In the second coordinate calculation means 54, the CPU 11 sequentially (in frame units) calculates the spatial coordinates of each point constituting the operating
上述したステレオ計測では、左画像および右画像の中から素早く操作体30に対応する像を特定することが好ましい。また、上述したステレオ計測における対応点検索の処理の負荷は、検索対象となる点が多くなるにつれて計算量が大きくなる。そこで、左画像および右画像の中から素早く操作体30の像を特定し、かつ操作体30のうち空間座標の算出範囲を限定して対応点検索の処理の負荷を軽減するために、操作体30の像の色が利用されるようにしてもよい。例えば、操作体30の先端部のみを赤色とし、先端部以外の部位を白色とした場合、左画像および右画像における輝度情報に基づいて各画像内における操作体30の像を素早く特定できるとともに、操作体30の空間座標の算出範囲を限定することが可能となり、より高速な処理が実現できる。
In the above-described stereo measurement, it is preferable to quickly identify an image corresponding to the operating
イベント発生手段55は、第1座標算出手段53によって算出された立体像の少なくとも1点の空間座標と、第2座標算出手段54によって算出された操作体30の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、視差画像、または視差画像以外の液晶モニタ3a上の画像の少なくとも一方の変化を伴う所定のイベントを発生させる機能を備える。ここで、所定の閾値は、本実施形態のゲーム装置1が実行するゲームの種類、あるいはイベントの発生有無について適切な遊びを設けるために適宜設定しうる。
The event generation means 55 is between the spatial coordinates of at least one point of the stereoscopic image calculated by the first coordinate calculation means 53 and the spatial coordinates of at least one point of the operating
イベント発生手段55は、プレイヤの操作対象である操作体30と、プレイヤに認識される立体像とが十分に接近していると判断されるときに、所定のイベントを発生させる。イベント発生手段55では、CPU11が逐次(フレーム単位で)、所定の原点を基準として、プレイヤによって認識される立体像の各点(例えば、図3に示した球状の立体像であればその表面の複数の代表点)の仮想的な空間座標の算出結果と、操作体30の各点の空間座標の算出結果とを比較し、両者の点間の距離を算出する。そしてCPU11は、算出した距離を所定の閾値と比較し、算出した距離が所定の閾値以下となったと判断した場合には、所定のイベントを発生させるための表示上の制御を行う。
The event generating means 55 generates a predetermined event when it is determined that the operating
この所定のイベントは、液晶モニタ3a上の視差画像、または視差画像以外の液晶モニタ3a上の画像の少なくとも一方の変化を伴うもの、すなわち、プレイヤに認識される立体像、および/または、液晶モニタ3a上の2次元画像の変化を伴うものであり、その変化はプレイヤが視認できるものとなっている。例えば、図4に示した例では、CPU11は、所定のイベントとして、あたかも立体像VRが爆発して消失したかのように、液晶モニタ3a上に表示される視差画像の変化がなされるように画像処理回路14を制御しうる。また、CPU11は、所定のイベントとして、図3に示した表示領域102内に表示されるポイントの変化、つまりポイント数の増加が行われるように、画像処理回路14を制御しうる。所定のイベントは、実行されるゲームの内容に応じて任意に設定され、例えば、操作体30が接触あるいは十分に接近した立体像に対応する視差画像の消失、変形、拡大縮小、移動速度の変化(つまり、立体像の消失、変形、拡大縮小、移動速度の変化)、新たな立体像に対応する視差画像の出現(つまり、立体像の出現)を伴うものであってもよい。ここで、移動速度の変化とは、例えば、移動している立体像の速度が上がる、あるいは低下する、停止するという場合、または逆に、停止していた立体像が移動を開始するという場合も含む。
This predetermined event is accompanied by a change in at least one of a parallax image on the
本実施形態のゲーム装置1では、イベント発生手段55によって、プレイヤの操作対象である操作体30と、プレイヤに認識される立体像とが十分に接近していると判断されるときには所定のイベントが行われるので、ゲーム装置1のプレイヤは、表示上の変化を伴う所定のイベントが発生することを期待して、あるいは所定のイベントが発生することを目指して、操作対象である操作体30を積極的に、自身が認識する立体像に近付けようとすることになる。この場合、図3に示したようにプレイヤに認識される立体像が移動していると、プレイヤが操作体30を立体像に近付けることに対してプレイヤの技量を要することとなって、ゲームの設定上好ましい。このとき、プレイヤは、実際には存在しない立体像に対してあたかも直接的に操作を行えるかのような感覚を味わいながらゲームを進行させることができる。すなわち、立体的な操作感覚を伴う新たなゲームの興趣性をもたらすことができる。
In the
(1−4)ゲームの主要な処理のフロー
次に、図3および図4を参照して例示したゲームを実行するときの、本実施形態のゲーム装置1における主要な処理フローの一例について、図8のフローチャートを参照して説明する。
(1-4) Flow of Main Process of Game Next, an example of a main process flow in the
ここでは先ず、ゲームプログラムの他、各オブジェクト等の各種データが記録媒体17からRAM13にロードされ、RAM13に格納される(ステップS100)。ロードされたゲームプログラムをCPU11が解釈すると先ず、ゲーム進行手段51が実行される。ゲーム進行手段51は、RAM13内のオブジェクトのデータを参照し、オブジェクトを所定の位置に配置したゲーム空間を設定する(ステップS102)。
次に、ゲーム進行手段51は、プレイ開始命令を発行すると(ステップS104)、これ以降、ゲームの進行に応じて、プレイヤに対して与えられるプレイ時間の管理、プレイヤのポイントの管理、プレイの状況あるいはプレイヤの入力部4に対する入力に応じた表示処理等を開始する。さらに、プレイ開始命令の発行に伴い、画像表示手段52が視差画像の表示を開始する(ステップS106)。より具体的には、画像表示手段52は、複数の球形の立体像が任意のタイミングで出現して移動を開始し、出現してから時間が経過するにつれてその大きさが小さくなっていき、出現してから所定の時間が経過すると消失するように、立体像に対応する複数の視差画像を液晶モニタ3a上に表示させる。
Here, first, in addition to the game program, various data such as objects are loaded from the
Next, when the game progression means 51 issues a play start command (step S104), thereafter, the management of the play time given to the player, the management of the player's points, and the status of play according to the progress of the game Or the display process etc. according to the input with respect to the
また、プレイ開始命令の発行に伴い、左撮像部20Lおよび右撮像部20Rが液晶モニタ3aの前方の画像(左画像および右画像)の取得を開始し(ステップS108)、フレーム単位で順次、CPU11へ画像を送出する。
As the play start command is issued, the left imaging unit 20L and the
ステップS106で視差画像の表示が開始されると、第1座標算出手段53は、プレイヤによって認識される複数の球状の立体像の各々に対して、その表面上の複数の点(例えば、予め設定された代表点)における仮想的な空間座標(ここでは「P1」とする。)を算出する(ステップS110)。ここでは、第1座標算出手段53が、フレーム単位で変化する視差画像の位置、視差画像を構成する左目用画像および右目用画像のずれ量に応じて逐次、上記式(E1)に基づいて、球状の各立体像の中心位置を算出し、その中心位置に対して所定の半径(円形の視差画像の半径と同じ)の球の表面の仮想的な空間座標P1が算出される。
次に、第2座標算出手段54は、ステップS108においてフレーム単位で逐次取得する左撮像部20Lおよび右撮像部20Rからの左画像および右画像に基づいて、ステレオ計測を行い、操作体30の各点の空間座標(ここでは「P2」とする。)を算出する(ステップS112)。ここでは、前述したように、操作体30の点が左画像と右画像に投影された点と、左右の焦点位置fL,fRとから三角測量の原理に基づいて、操作体30の点の空間座標が算出される。このとき、後述するステップS114での判定のために、ステップS110で算出される空間座標の原点と、ステップS112で算出される空間座標の原点とを一致させる処理を行っておくのがよい。
When the display of the parallax image is started in step S106, the first coordinate
Next, the second coordinate
このゲームは、例えば、プレイヤに与えられた所定のプレイ時間の間に、操作体30をできるだけ多くの立体像と接触、あるいは十分に接近させることを競うゲームであって、移動する立体像に対してタイミングを合わせて操作体30を立体像に接触、あるいは十分に接近させることの動機付けがプレイヤに与えられることが想定されている。そして、イベント発生手段55は、ステップS110で算出された球状の各立体像の各点における仮想的な空間座標P1と、ステップS112で算出された操作体30の各点の空間座標P2との距離を算出し、その距離を所定の閾値と比較する(ステップS114)。その結果、算出した距離が所定の閾値以下であると判断した場合、すなわち、プレイヤが操作体30を、プレイヤに認識されているいずれかの立体像(つまり、液晶モニタ3aに表示中の視差画像によって認識される立体像)と十分に接近していると判断した場合には、イベント発生手段55は、該当する立体像に対応する視差画像を変化させることを含む所定のイベントを発生させる(ステップS116)。所定のイベントに含まれる視差画像の変化の一例としては、図4に例示したように、あたかも立体像VRが爆発して消失したかのように、視差画像を変化させることが挙げられる。さらに、発生するイベントとしては、図3に示した表示領域102内に表示されるポイントの変化、つまりプレイヤが獲得したポイント数の増加が行われてもよい。以上のように、このゲームでは、所定のプレイ時間内に、操作体30を立体像と接触、あるいは十分に接近させて消失させ、そのようにして消失させた立体像の数が競われる。このとき、プレイヤは、実際には存在しない立体像に対してあたかも直接的に操作を行えるかのような感覚を味わいながらゲームを進行させることができる。すなわち、立体的な操作感覚を伴う新たなゲームの興趣性をもたらすことができる。
This game is a game in which, for example, the
(2)第2の実施形態
以下、本発明の第2の実施形態について説明する。なお、以下の各実施形態では、特記しない限り、ゲーム装置の構成及び動作、ゲーム装置によって実行される各手段、ゲームの主要な処理のフローは、第1の実施形態で説明したものと同様である。
(2) Second Embodiment Hereinafter, a second embodiment of the present invention will be described. In the following embodiments, unless otherwise specified, the configuration and operation of the game device, each means executed by the game device, and the main processing flow of the game are the same as those described in the first embodiment. is there.
図9は、本実施形態の制御装置10で主要な役割を果たす機能を説明するための機能ブロック図である。図9に示す機能ブロック図は、図2に示したものと比較すると、第1制御手段56、第2制御手段57、第3制御手段58および第4制御手段59が追加された点で異なる。なお、便宜上、図2に示す本実施形態の制御装置10では、第1制御手段56、第2制御手段57、第3制御手段58および第4制御手段59のすべてを含む構成となっているが、かかる構成に限られない。第1制御手段56、第2制御手段57、第3制御手段58または第4制御手段59の少なくともいずれかの手段を備えていればよい。
FIG. 9 is a functional block diagram for explaining functions that play a major role in the
第1制御手段56は、視差画像が表示される前に、当該視差画像によって認識される仮想的な立体像がプレイヤから見て操作体30と重複し、かつ、操作体30が仮想的な立体像と液晶モニタ3aとの間に位置するようになると判定される場合には、予め視差画像を表示しないように画像表示手段52を制御する機能を備える。
Before the parallax image is displayed, the
図10は、視差画像(左目用画像ImL、右目用画像ImR)によって認識される仮想的な立体像がプレイヤから見て操作体30と重複し、かつ、操作体30が仮想的な立体像VRと液晶モニタ3aとの間に位置する状態を示す図であり、(a)はその状態を示す平面図、(b)はプレイヤの視点から立体像VRおよび操作体30を眺めた図である。図10に示すように、視差画像によって認識される仮想的な立体像VRがプレイヤから見て操作体30と重複し、かつ、操作体30が仮想的な立体像VRと液晶モニタ3aとの間に位置する状態となる場合、すなわち、プレイヤに認識される立体像VRの仮想的な空間位置よりも裏側に操作体30が存在するという位置関係になる場合には、プレイヤから見て操作体30が立体像VRを通して不自然に映ることになる。具体的には、図10(b)の斜線で示した操作体30の先端部のみが、立体像VRの手前(プレイヤ側)に浮き出て見える。この理由は、操作体30は現実に存在する物体であるのに対して、立体像VRは現実には存在せず、人間の脳内で構成される仮想の存在であることから、図10(a)からも明らかな通り、操作体30が、視差画像と人間の目との間のラインを切ることになり、操作体30によって立体像VRの一部が構成されなくなるためである。そこで、第1制御手段56は、かかる不自然な表示を予め防止するため、上記位置関係となるような視差画像を予め表示しないように画像表示手段52を制御する。これにより、操作体による立体像に対する操作性をより自然なものとすることができる。
FIG. 10 shows that the virtual stereoscopic image recognized by the parallax images (the left-eye image ImL and the right-eye image ImR) overlaps with the operating
具体的には、第1制御手段56では、以下の処理を行う。
CPU11は、フレーム単位で逐次算出される操作体30の各点の空間座標を算出する。そしてCPU11は、第1座標算出手段53において立体像VRの仮想的な空間位置を算出するときの前提としたプレイヤの両目の瞳孔の空間位置(既知の位置)から見た、操作体30の各点の空間座標の液晶モニタ3aにおける投影位置を算出する。この投影位置は、プレイヤから見た操作体30の液晶モニタ3a上の位置であり、これによってプレイヤから見た操作体30の液晶モニタ3a上の領域(以下、「投影領域」という。)が画定される。CPU11はさらに、液晶モニタ3aにおいて、逐次算出する操作体30の投影領域内に視差画像を表示させないようにするか、操作体30の投影領域内に視差画像を表示させる場合には、プレイヤから見て立体像VRの裏側に操作体30が位置しないように、視差画像の左目用画像と右目用画像の間のずれ量(図6のd)を調整する。つまり、操作体30の各点の空間座標が分かっているため、操作体30よりも液晶モニタ3a側に立体像VRが認識されるように、表示される視差画像の左目用画像と右目用画像の間のずれ量を調整する。
Specifically, the
The CPU 11 calculates the spatial coordinates of each point of the operating
第2制御手段57は、操作体30が、プレイヤから見て立体像と重複し、かつ立体像と液晶モニタ3aの間の位置に移動した場合には、その立体像に対応する視差画像を表示しないように画像表示手段52を制御する。
The
上述したように、操作体30が移動した結果として、操作体30が、プレイヤから見て、プレイヤに認識される立体像の仮想的な空間位置よりも裏側に存在するという位置関係(図10に示した位置関係)になる場合には、プレイヤから見える操作体30が立体像によって不自然な表示となる。具体的には、操作体30のうち、立体像と重なった部分のみが、立体像の手前(プレイヤ側)に浮き出て見える。そこで、第2制御手段57は、かかる不自然な表示を予め防止するため、上記位置関係となるような位置に操作体30が移動した場合には、立体像に対応する視差画像を表示しないように画像表示手段52を制御する。すなわち、立体像自体を消してしまうことによって、不自然な表示を回避している。これにより、操作体30による立体像に対する操作性をより自然なものとすることができる。
As described above, as a result of the movement of the operating
具体的には、第2制御手段57では、以下の処理を行う。
CPU11は、フレーム単位で逐次算出される操作体30の各点の空間座標を算出する。そしてCPU11は、第1座標算出手段53において立体像の仮想的な空間位置を算出するときの前提としたプレイヤの両目の瞳孔の空間位置(既知の位置)から見た、操作体30の各点の空間座標の液晶モニタ3aにおける投影位置を算出する。この投影位置は、プレイヤから見た操作体30の液晶モニタ3a上の位置であり、これによってプレイヤから見た操作体30の液晶モニタ3a上の投影領域が画定される。CPU11は操作体30の投影領域を逐次モニタしている。そして、この投影領域内に視差画像が移動し、かつ、その視差画像によって第1座標算出手段53により算出される立体像の仮想的な空間位置が、操作体30よりもプレイヤ側にあると判断した場合には、その視差画像の表示を禁止する。
Specifically, the second control means 57 performs the following processing.
The CPU 11 calculates the spatial coordinates of each point of the operating
第3制御手段58は、操作体30が、プレイヤから見て立体像と重複し、かつ立体像と液晶モニタ3aの間の位置に移動した場合には、その立体像に対応する視差画像を、視差画像に対応する立体像がプレイヤから見て操作体30と重複しない位置に移動するように画像表示手段52を制御する。
When the operating
上述したように、操作体30が移動した結果として、操作体30が、プレイヤから見て、プレイヤに認識される立体像の仮想的な空間位置よりも裏側に操作体30が存在するという位置関係になる場合には、プレイヤから見える操作体30が立体像によって不自然な表示となる。具体的には、操作体30のうち、立体像と重なった部分のみが、立体像の手前(プレイヤ側)に浮き出て見える。そこで、第3制御手段58は、かかる不自然な表示を予め防止するため、上記位置関係となるような位置に操作体30が移動した場合には、立体像に対応する視差画像を上記位置関係とならない位置に移動するように画像表示手段52を制御する。すなわち、立体像の位置を操作体から離れるように移動させることによって、不自然な表示を回避している。これにより、操作体30による立体像に対する操作性をより自然なものとすることができる。
As described above, as a result of the movement of the operating
具体的には、第3制御手段58では、以下の処理を行う。
CPU11は、フレーム単位で逐次算出される操作体30の各点の空間座標を算出する。そしてCPU11は、第1座標算出手段53において立体像の仮想的な空間位置を算出するときの前提としたプレイヤの両目の瞳孔の空間位置(既知の位置)から見た、操作体30の各点の空間座標の液晶モニタ3aにおける投影位置を算出する。この投影位置は、プレイヤから見た操作体30の液晶モニタ3a上の位置であり、これによってプレイヤから見た操作体30の液晶モニタ3a上の投影領域が画定される。CPU11は操作体30の投影領域を逐次モニタしている。そして、この投影領域内に視差画像が移動し、かつ、その視差画像によって第1座標算出手段53により算出される立体像の仮想的な空間位置が、操作体30よりもプレイヤ側にあると判断した場合には、その視差画像を、液晶モニタ3a上の投影領域以外の領域に移動させるように画像処理回路14を指示する。
Specifically, the
The CPU 11 calculates the spatial coordinates of each point of the operating
第4制御手段59は、操作体30が実質的に移動していない状態で、立体像の少なくとも1点の空間座標と、操作体30の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときには、所定のイベントの発生を禁止するようにイベント発生手段55を制御する。
The
操作体30が実質的に移動していない状態では、プレイヤには、自身が認識する立体像に対して操作体30を近付けようとする積極的な意思が欠如していると考えられる。そこで、かかる場合には、立体像の少なくとも1点の空間座標と、操作体30の少なくとも1点の空間座標との間の距離が所定の閾値以下になる、つまり、両者が十分に接近していると判断される場合であっても、第4制御手段59は、イベント発生手段55によるイベントの発生を禁止するようにする。これにより、プレイヤによる積極的な意思によるものではなく、偶然に操作体と立体像が接近した場合のイベントの発生を阻止でき、イベントの発生の実効性を高めることができる。
In a state where the operating
例えば、図3および図4を参照して説明したゲームの場合、プレイヤが操作体30を移動させていないのにも関わらず偶然に立体像と操作体30が接触あるいは十分に接近したこと(つまり、移動する立体像が静止する操作体30に十分に接近したこと)をもって立体像の消失あるいはポイントの獲得が行われたとすれば、プレイヤの適切な操作を伴わずに立体像VRの消失あるいはポイントの獲得を生じさせることになり、ゲームの興趣性を低下させることにもなる。そこで、第4制御手段59は、プレイヤの適切な操作を伴わずにイベントを発生させるという不適切なイベント発生を防止するようにする。
For example, in the case of the game described with reference to FIGS. 3 and 4, the three-dimensional image and the operating
具体的には、第4制御手段59では、以下の処理を行う。
CPU11は、第2座標算出手段54によって逐次算出される、操作体30を構成する各点の空間座標に基づいて、操作体30の移動速度をフレーム単位で算出する。つまり、1フレーム期間の間の操作体30の座標変化に基づいて、操作体30の移動速度が逐次算出される。そして、操作体30と、プレイヤに認識される立体像とが十分に接近していると判断された時点において、操作体30の移動速度が所定の閾値以上であれば、所定のイベントを発生させることをイベント発生手段55に対して許可する。また、その時点において、操作体30の移動速度が所定の閾値よりも小さい場合には、所定のイベントを発生させることをイベント発生手段55に対して許可しないようにする。
Specifically, the fourth control means 59 performs the following processing.
The CPU 11 calculates the moving speed of the operating
(3)第3の実施形態
以下、第3の実施形態について説明する。
図11は、本発明の画像表示装置の別の実施形態としてのゲーム装置2の外観と、ゲーム装置2のプレイヤとを示している。ゲーム装置2は、図1に示したゲーム装置1と同様、プレイヤに仮想的に認識される立体像を対象としてプレイヤが操作を行うゲームの進行を制御するゲーム装置であるが、ゲーム装置1とは異なり、比較的小型の携帯型ゲーム装置として想定されている。図12は、本実施形態のゲーム装置2の構成を示すブロック図である。なお、図12に示すブロック図中、図2に示したものと同一の構成については、概ね同一符号を付して重複説明を省略するが、図2に示したものと同一符号であっても図2に示したものと異なる機能を備えるものについては、その異なる部分について以下説明する。
(3) Third Embodiment Hereinafter, a third embodiment will be described.
FIG. 11 shows an appearance of a
図11に示すように、本実施形態のゲーム装置2は、上部筐体2aと下部筐体2bを備え、上部筐体2aと下部筐体2bとは、互いに開閉自在に連結されている。本実施形態のゲーム装置2の表示装置3には、上部筐体2aに設けられた上部液晶モニタ3aと、下部筐体2bに設けられた下部液晶モニタ3bとが含まれる。
入力部4は、プレイヤの操作入力を受け入れるための複数の釦を含む。図11に示す釦の筐体に対する配置例によれば、この複数の釦は下部筐体2bに設けられており、下部液晶モニタ3bよりも左側に配置された十字状の方向指示釦4a、下部液晶モニタ3bよりも右側に配置されたセレクト釦4b、スタート釦4cおよび複数の指示釦4dを含む。入力部4には、図示しない電源釦も含みうる。
図11に示すように、上部液晶モニタ3aには、それぞれ左目用画像ImLおよび右目用画像ImRからなる1または複数の視差画像が表示され、この視差画像を見たプレイヤには、プレイヤと上部液晶モニタ3aの間に立体像VRの存在が認識される。
As shown in FIG. 11, the
The
As shown in FIG. 11, the upper
本実施形態のゲーム装置2では前述したゲーム装置1と異なり、上部筐体2aにおいて上部液晶モニタ3aの下方の中央近傍に、撮像対象をプレイヤの方に向けた単一の撮像部20の撮影用レンズが配置されている。すなわち、本実施形態のゲーム装置2では、ゲーム装置1と異なり、単一の撮像部20により取得した画像に基づいて、ステレオ計測を用いずに操作体30の空間座標を特定する。なお、図11に示した例では、撮像部20がゲーム装置2に内蔵された形態で示しているが、別体の撮像装置が設けられ、その撮像装置がゲーム装置2内の制御装置10と電気的に接続される形態であってもよい。撮像部20で得られたフレーム単位の画像のデータは逐次、制御装置10のCPU11へ送出される。
Unlike the
第1、第2の実施形態で参照した図5、図9の機能ブロック図中の各手段は、図11および図12に示したゲーム装置2の構成によっても実現される。ここで、本実施形態のゲーム装置2のハードウエア上の構成上、図1および図2に示したゲーム装置1のそれとの主要な相違点は、撮像部が単一である点にある。そこで、以下では、本実施形態において、単一の撮像部を用いて第2座標算出手段54が如何にして実行されるかについて説明する。図5および図9に示した手段のうち、第2座標算出手段54以外の各手段は、操作体30の空間座標の算出とは無関係であるか、あるいはいったん操作体30の空間座標が算出されれば第1の実施形態で述べた方法と同様にして実現されうることは明白であるため、ここでは、かかる手段の重複説明を省略する。
Each unit in the functional block diagrams of FIGS. 5 and 9 referred to in the first and second embodiments is also realized by the configuration of the
単一画像を用いた物体(本実施形態では、操作体30)の位置特定方法は様々な公知の技術が知られており、ここでは如何なる公知の技術を適用してもよい。そのような技術を開示した公知の文献の一例として、特開平5−157518号公報を挙げることができる。同文献による物体の位置特定方法は概ね、以下のとおりである。先ず取得した画像のエッジ検出結果に基づいて、対象となる物体の特徴点の画像内の位置を特定する。次に、物体の特徴点あるいは特徴部の位置が特定されると、取得した画像上における物体の特徴点の2次元座標を、物体の特徴点の実空間(3次元空間)上の座標へ変換する。この座標変換に当たって、特徴部の画像内における大きさ、画像の倍率、撮像角、撮像部の位置等のパラメータが参照される。
本実施形態において、取得した画像の中から操作体30の形状を特定する場合には、上述したようなエッジ検出結果と、予め操作体30の形状として記録した複数の形状を基にしたパターン認識結果とを組み合わせてもよい。また、取得した画像内において操作体30の一部(例えば先端部)を他の部位と異なる特殊な形状とすることが、容易に操作体30の特徴部を特定できる点で好ましい。この場合には、操作体30の先端部が特徴部となる。さらに好ましくは、その先端部を他の部位と異なる色とすることで、取得した画像中の輝度情報から操作体30の特徴部を容易かつ高速に特定できる。
Various known techniques are known as the method for specifying the position of the object (in this embodiment, the operating body 30) using a single image, and any known technique may be applied here. As an example of a known document disclosing such a technique, JP-A-5-157518 can be cited. The method for specifying the position of an object according to this document is generally as follows. First, based on the edge detection result of the acquired image, the position in the image of the feature point of the target object is specified. Next, when the position of the feature point or the feature portion of the object is specified, the two-dimensional coordinates of the feature point of the object on the acquired image are converted into coordinates in the real space (three-dimensional space) of the feature point of the object. To do. In this coordinate conversion, parameters such as the size of the feature portion in the image, the magnification of the image, the imaging angle, and the position of the imaging unit are referred to.
In this embodiment, when specifying the shape of the
以上、本発明の複数の実施形態について詳細に説明したが、本発明は上記各実施形態に限定されない。また、各実施形態は、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのは勿論である。 As mentioned above, although several embodiment of this invention was described in detail, this invention is not limited to said each embodiment. In addition, it goes without saying that each embodiment may be variously improved and changed without departing from the gist of the present invention.
例えば、上述した各実施形態では、操作体30が、細長い棒状のペン等の、プレイヤとは別個の物理的な実体である場合について説明してきたが、これに限られない。操作体は、プレイヤの指や手等のプレイヤの一部である物理的な実体であってもよい。例えば操作体をプレイヤの手とする場合には、ゲーム装置の撮像部から取得した画像のうち肌色の輝度情報のピクセルの中から手の形状認識を行うアルゴリズムを実装することで、操作体としての手の位置を上記画像から取得することができる。この画像中の手の位置から操作体としての手の空間座標を算出すればよい。
For example, in each of the above-described embodiments, the case where the
上述した各実施形態では、本発明の画像表示装置がゲーム装置に適用される場合を中心に説明してきたが、ゲーム装置以外の用途に適用できることは言うまでもない。例えば、本発明の画像表示装置のゲーム装置以外の用途として、観察者と表示画面の間に認識される立体像に対する擬似的な入力操作を観察者が行う方式で画像表示装置に対して観察者が入力を行うようにした、入力装置として機能させてもよい。 In each of the above-described embodiments, the case where the image display device of the present invention is applied to a game device has been mainly described, but it goes without saying that the image display device can be applied to uses other than the game device. For example, as an application of the image display device of the present invention other than the game device, the viewer performs an artificial input operation on a stereoscopic image recognized between the viewer and the display screen in a manner in which the viewer performs an operation on the image display device. May function as an input device that performs input.
上述した各実施形態では、図3および図4に示したゲームを例として説明したが、当該ゲームは本発明の適用例を示す単なる一例に過ぎず、本発明は様々なアプリケーションに適用しうることは言うまでもない。すなわち、本発明の画像表示装置としてのゲーム装置が実行するゲームとして、図3および図4に例示したゲーム以外に、プレイヤが操作体によってプレイヤに認識される立体像を直接的に操作する行為を伴うゲームであればゲームの種類は問わない。
例えば、立体像として認識される動物(ペット)に対して操作体としてのタッチペンをプレイヤが接触する行為(擬似的に撫でる行為)を行うことで、立体像としての動物が所定の動作を行うように認識されるように、立体像としての動物に対応する視差画像を変化させるようにさせたコミュニケーションゲームとしてもよい。
また、立体像として認識されるボールに対して操作体としてのタッチペンをバットに見立ててプレイヤが接触する行為(擬似的に打撃する行為)を行うことで、立体像としてのボールが移動するように認識されるように、立体像としてのボールに対応する視差画像を変化させるようにさせた野球ゲームとしてもよい。
立体像として認識される宝箱に対して操作体としてのタッチペンをプレイヤが接触する行為(擬似的に宝箱を選択し、開く行為)を行うことで、立体像としての宝箱が開くように認識されるように、立体像としての宝箱に対応する視差画像を変化させる動作を含むロールプレイングゲームとしてもよい。
In each of the above-described embodiments, the game shown in FIGS. 3 and 4 has been described as an example. However, the game is merely an example of an application example of the present invention, and the present invention can be applied to various applications. Needless to say. That is, as a game executed by the game device as the image display device of the present invention, in addition to the games illustrated in FIG. 3 and FIG. 4, the player directly operates a stereoscopic image recognized by the player with the operating tool. The type of game is not limited as long as the game is accompanied.
For example, an animal as a three-dimensional image may perform a predetermined operation by performing an action (pseudo-blowing action) in which a player touches a touch pen as an operation body on an animal (pet) recognized as a three-dimensional image. It is good also as a communication game made to change the parallax image corresponding to the animal as a three-dimensional image so that it may be recognized.
Further, the ball as a three-dimensional image is moved by performing an action (pseudo hitting action) in which the player contacts the ball recognized as a three-dimensional image as if the touch pen as the operation body is a bat. As may be recognized, a baseball game in which a parallax image corresponding to a ball as a stereoscopic image is changed may be used.
It is recognized that a treasure box as a three-dimensional image is opened by performing an action (actually selecting and opening a treasure box) by a player touching a touch pen as an operation body with respect to the treasure box recognized as a three-dimensional image. Thus, it is good also as a role-playing game including the operation | movement which changes the parallax image corresponding to the treasure box as a three-dimensional image.
1,2…ゲーム装置
3…表示装置
3a…液晶モニタ,上部液晶モニタ
3b…下部液晶モニタ
4…入力部
5…記憶媒体装着部
10…制御装置
11…CPU
12…ROM
13…RAM
14…画像処理回路
15…サウンド処理回路
16…バス
17…記憶媒体
20…撮像部
20L…左撮像部
20R…右撮像部
22…スピーカ
51…ゲーム進行手段
52…画像表示手段
53…第1座標算出手段
54…第2座標算出手段
55…イベント発生手段
56…第1制御手段
57…第2制御手段
58…第3制御手段
59…第4制御手段
DESCRIPTION OF
12 ... ROM
13 ... RAM
DESCRIPTION OF
Claims (9)
前記視差画像の観察者によって前記表示画面と前記観察者との間に認識される立体像の仮想的な空間座標を算出する第1座標算出手段と、
前記観察者の操作対象である操作体の空間座標を算出する第2座標算出手段と、
前記第1座標算出手段によって算出された立体像の少なくとも1点の空間座標と、前記第2座標算出手段によって算出された操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、前記視差画像、または前記視差画像以外の前記表示画面上の画像の少なくとも一方の変化を伴う所定のイベントを発生させるイベント発生手段と、
を備えた画像表示装置。 Image display means for displaying a parallax image on a display screen;
First coordinate calculation means for calculating virtual spatial coordinates of a stereoscopic image recognized between the display screen and the observer by an observer of the parallax image;
Second coordinate calculating means for calculating the spatial coordinates of the operating body that is the operation target of the observer;
A distance between at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculating unit and at least one spatial coordinate of the operating body calculated by the second coordinate calculating unit is a predetermined threshold value or less. Event generating means for generating a predetermined event accompanied by a change in at least one of the parallax image or the image on the display screen other than the parallax image when
An image display device comprising:
請求項1に記載された画像表示装置。 Before the parallax image is displayed, a virtual stereoscopic image recognized by the parallax image overlaps with the operating body when viewed from the observer, and the operating body displays the virtual stereoscopic image and the display. A first control unit that controls the image display unit so as not to display the parallax image in advance when it is determined that the parallax image is positioned between the screen and the screen;
The image display device according to claim 1.
請求項1または2に記載された画像表示装置。 When the operation body overlaps with the stereoscopic image as viewed from the observer and moves to a position between the stereoscopic image and the display screen, a parallax image corresponding to the stereoscopic image is not displayed. A second control means for controlling the image display means;
The image display device according to claim 1.
請求項1または2に記載された画像表示装置。 When the operating body overlaps with the stereoscopic image as viewed from the observer and moves to a position between the stereoscopic image and the display screen, a parallax image corresponding to the stereoscopic image is converted into a parallax image. A third control means for controlling the image display means so that the corresponding stereoscopic image moves to a position that does not overlap with the operating body as seen from the observer,
The image display device according to claim 1.
請求項1〜4のいずれかに記載された画像表示装置。 When the distance between the spatial coordinates of at least one point of the three-dimensional image and the spatial coordinates of at least one point of the operating body is equal to or less than a predetermined threshold in a state where the operating body is not substantially moved The apparatus further comprises fourth control means for controlling the event generation means so as to prohibit the occurrence of the predetermined event.
The image display device according to claim 1.
前記第2座標算出手段は、1または一対の撮像手段によって得られる前記操作体の像の色および/または形状に基づいて、操作体の空間座標を算出することを特徴とする、
請求項1〜5のいずれかに記載された画像表示装置。 The first coordinate calculation means includes a first distance between the observer and the display screen, a second distance set in advance as a distance between the pupils of the observer, and a left-eye image constituting a parallax image. And the amount of deviation between the right-eye image and the virtual spatial coordinates of the stereoscopic image corresponding to the parallax image,
The second coordinate calculating means calculates the spatial coordinates of the operating body based on the color and / or shape of the image of the operating body obtained by one or a pair of imaging means.
The image display device according to claim 1.
前記イベント発生手段は、前記第1座標算出手段によって算出された立体像の少なくとも1点の空間座標と、前記第2座標算出手段によって算出された操作体の先端部の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、前記所定のイベントを発生させることを特徴とする、
請求項1〜6のいずれかに記載された画像表示装置。 The distal end portion of the operating body is configured in a color and / or shape different from the portion other than the distal end portion,
The event generating means includes at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculating means, and at least one spatial coordinate of the tip of the operating body calculated by the second coordinate calculating means. Generating the predetermined event when the distance between the two becomes a predetermined threshold value or less,
The image display device according to claim 1.
表示画面に視差画像を表示する画像表示機能と、
前記視差画像を観察するプレイヤによって前記表示画面と前記プレイヤとの間に認識される立体像の仮想的な空間座標を算出する第1座標算出機能と、
前記プレイヤの操作対象である操作体の空間座標を算出する第2座標算出機能と、
前記第1座標算出機能によって算出された立体像の少なくとも1点の空間座標と、前記第2座標算出機能によって算出された操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、前記視差画像、または前記視差画像以外の前記表示画面上の画像の少なくとも一方の変化を伴う所定のイベントを発生させるイベント発生機能と、
を実現させるためのゲームプログラム。 In a computer capable of realizing a game operated by a player for a stereoscopic image virtually recognized by the player,
An image display function for displaying a parallax image on the display screen;
A first coordinate calculation function for calculating a virtual spatial coordinate of a stereoscopic image recognized between the display screen and the player by the player observing the parallax image;
A second coordinate calculation function for calculating the spatial coordinates of the operating body that is the operation target of the player;
A distance between at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculating function and at least one spatial coordinate of the operating body calculated by the second coordinate calculating function is equal to or less than a predetermined threshold value. An event generation function that generates a predetermined event accompanied by a change in at least one of the parallax image or the image on the display screen other than the parallax image when
A game program to make it happen.
表示画面に視差画像を表示する画像表示ステップと、
前記視差画像を観察するプレイヤによって前記表示画面と前記プレイヤとの間に認識される立体像の仮想的な空間座標を算出する第1座標算出ステップと、
前記プレイヤの操作対象である操作体の空間座標を算出する第2座標算出ステップと、
前記第1座標算出ステップによって算出された立体像の少なくとも1点の空間座標と、前記第2座標算出ステップによって算出された操作体の少なくとも1点の空間座標との間の距離が所定の閾値以下になったときに、前記視差画像、または前記視差画像以外の前記表示画面上の画像の少なくとも一方の変化を伴う所定のイベントを発生させるイベント発生ステップと、
を備えたゲーム制御方法。
A game control method in a game device for controlling the progress of a game operated by a player for a stereoscopic image virtually recognized by the player,
An image display step for displaying a parallax image on the display screen;
A first coordinate calculating step of calculating a virtual spatial coordinate of a stereoscopic image recognized between the display screen and the player by the player observing the parallax image;
A second coordinate calculating step of calculating a spatial coordinate of an operating body that is an operation target of the player;
A distance between at least one spatial coordinate of the stereoscopic image calculated by the first coordinate calculating step and at least one spatial coordinate of the operating body calculated by the second coordinate calculating step is equal to or less than a predetermined threshold value. An event generation step of generating a predetermined event accompanied by a change in at least one of the parallax image or the image on the display screen other than the parallax image when
A game control method comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012012782A JP2012106005A (en) | 2012-01-25 | 2012-01-25 | Image display device, game program, and game control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012012782A JP2012106005A (en) | 2012-01-25 | 2012-01-25 | Image display device, game program, and game control method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010240334A Division JP4917664B1 (en) | 2010-10-27 | 2010-10-27 | Image display device, game program, and game control method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012106005A true JP2012106005A (en) | 2012-06-07 |
Family
ID=46492271
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012012782A Pending JP2012106005A (en) | 2012-01-25 | 2012-01-25 | Image display device, game program, and game control method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2012106005A (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9778464B2 (en) | 2013-02-19 | 2017-10-03 | Mirama Service Inc. | Shape recognition device, shape recognition program, and shape recognition method |
US9906778B2 (en) | 2013-02-19 | 2018-02-27 | Mirama Service Inc. | Calibration device, calibration program, and calibration method |
US9933853B2 (en) | 2013-02-19 | 2018-04-03 | Mirama Service Inc | Display control device, display control program, and display control method |
US9979946B2 (en) | 2013-02-19 | 2018-05-22 | Mirama Service Inc | I/O device, I/O program, and I/O method |
US10171800B2 (en) | 2013-02-19 | 2019-01-01 | Mirama Service Inc. | Input/output device, input/output program, and input/output method that provide visual recognition of object to add a sense of distance |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09237353A (en) * | 1995-12-29 | 1997-09-09 | Sega Enterp Ltd | Stereoscopic image system, method therefor, game machine and recording medium |
JP2000184398A (en) * | 1998-10-09 | 2000-06-30 | Sony Corp | Virtual image stereoscopic synthesis device, virtual image stereoscopic synthesis method, game machine and recording medium |
JP2001101256A (en) * | 1999-10-04 | 2001-04-13 | Sekisui House Ltd | Method and device for adjusting position of each part of structure using cg image |
JP2003085593A (en) * | 2001-09-13 | 2003-03-20 | Nippon Hoso Kyokai <Nhk> | Interactive image operating apparatus and displaying method for image content |
-
2012
- 2012-01-25 JP JP2012012782A patent/JP2012106005A/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09237353A (en) * | 1995-12-29 | 1997-09-09 | Sega Enterp Ltd | Stereoscopic image system, method therefor, game machine and recording medium |
JP2000184398A (en) * | 1998-10-09 | 2000-06-30 | Sony Corp | Virtual image stereoscopic synthesis device, virtual image stereoscopic synthesis method, game machine and recording medium |
JP2001101256A (en) * | 1999-10-04 | 2001-04-13 | Sekisui House Ltd | Method and device for adjusting position of each part of structure using cg image |
JP2003085593A (en) * | 2001-09-13 | 2003-03-20 | Nippon Hoso Kyokai <Nhk> | Interactive image operating apparatus and displaying method for image content |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9778464B2 (en) | 2013-02-19 | 2017-10-03 | Mirama Service Inc. | Shape recognition device, shape recognition program, and shape recognition method |
US9906778B2 (en) | 2013-02-19 | 2018-02-27 | Mirama Service Inc. | Calibration device, calibration program, and calibration method |
US9933853B2 (en) | 2013-02-19 | 2018-04-03 | Mirama Service Inc | Display control device, display control program, and display control method |
US9979946B2 (en) | 2013-02-19 | 2018-05-22 | Mirama Service Inc | I/O device, I/O program, and I/O method |
US10095030B2 (en) | 2013-02-19 | 2018-10-09 | Mirama Service Inc. | Shape recognition device, shape recognition program, and shape recognition method |
US10171800B2 (en) | 2013-02-19 | 2019-01-01 | Mirama Service Inc. | Input/output device, input/output program, and input/output method that provide visual recognition of object to add a sense of distance |
US10295826B2 (en) | 2013-02-19 | 2019-05-21 | Mirama Service Inc. | Shape recognition device, shape recognition program, and shape recognition method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4917664B1 (en) | Image display device, game program, and game control method | |
US9495800B2 (en) | Storage medium having stored thereon image processing program, image processing apparatus, image processing system, and image processing method | |
US10183220B2 (en) | Image generation device and image generation method | |
JP5627973B2 (en) | Program, apparatus, system and method for game processing | |
JP5791433B2 (en) | Information processing program, information processing system, information processing apparatus, and information processing method | |
JP5539945B2 (en) | GAME DEVICE AND PROGRAM | |
JP6097377B1 (en) | Image display method and program | |
EP2493202A2 (en) | Display control program, display control apparatus, display control system, and display control method | |
US8684837B2 (en) | Information processing program, information processing system, information processing apparatus, and information processing method | |
JP5675260B2 (en) | Image processing program, image processing apparatus, image processing system, and image processing method | |
JP2012212237A (en) | Image generation system, server system, program, and information storage medium | |
JP5939733B2 (en) | Image processing program, image processing apparatus, image processing system, and image processing method | |
JP2019139425A (en) | Simulation system and program | |
JP7144796B2 (en) | Simulation system and program | |
JP2012252566A (en) | Information processing program, information processor, information processing system, and information processing method | |
JP2012106005A (en) | Image display device, game program, and game control method | |
JP2012141820A (en) | Program, information storage medium, image generation system and server system | |
JP2016001476A (en) | Display control program, display control device, display control system and display control method | |
JP5649846B2 (en) | Program and image generation system | |
JP2012141826A (en) | Program, information storage medium, image generation system and server system | |
JP5816435B2 (en) | Display control program, display control apparatus, display control system, and display control method | |
JP5777332B2 (en) | GAME DEVICE, GAME PROGRAM, GAME SYSTEM, AND GAME METHOD | |
JP2017097918A (en) | Image display method and program | |
JP2022169526A (en) | Application control program, application control method, and application control system | |
JP2019101513A (en) | Virtual space display device, game system, and method of determining orientation of virtual object in virtual space |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131001 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140212 |