JP5702653B2 - 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 - Google Patents
情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 Download PDFInfo
- Publication number
- JP5702653B2 JP5702653B2 JP2011086798A JP2011086798A JP5702653B2 JP 5702653 B2 JP5702653 B2 JP 5702653B2 JP 2011086798 A JP2011086798 A JP 2011086798A JP 2011086798 A JP2011086798 A JP 2011086798A JP 5702653 B2 JP5702653 B2 JP 5702653B2
- Authority
- JP
- Japan
- Prior art keywords
- posture
- image
- display
- information processing
- marker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 139
- 238000003672 processing method Methods 0.000 title description 2
- 239000003550 marker Substances 0.000 claims description 262
- 238000003384 imaging method Methods 0.000 claims description 124
- 230000001133 acceleration Effects 0.000 claims description 76
- 230000005484 gravity Effects 0.000 claims description 27
- 238000001514 detection method Methods 0.000 claims description 19
- 238000004364 calculation method Methods 0.000 claims description 12
- 230000036544 posture Effects 0.000 description 168
- 238000000034 method Methods 0.000 description 48
- 230000008569 process Effects 0.000 description 30
- 238000012545 processing Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 22
- 238000004891 communication Methods 0.000 description 19
- 238000013500 data storage Methods 0.000 description 16
- 239000011159 matrix material Substances 0.000 description 14
- 230000004888 barrier function Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 210000003128 head Anatomy 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000005401 electroluminescence Methods 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 238000003780 insertion Methods 0.000 description 4
- 230000037431 insertion Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
- A63F13/525—Changing parameters of virtual cameras
- A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
- A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/25—Output arrangements for video game devices
- A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
- A63F13/92—Video game devices specially adapted to be hand-held while playing
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/105—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals using inertial sensors, e.g. accelerometers, gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/20—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
- A63F2300/204—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform the platform being a handheld device
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/6045—Methods for processing data by generating or executing the game program for mapping control signals received from the input arrangement into game commands
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
- A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
- A63F2300/6676—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera by dedicated player input
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
- A63F2300/8082—Virtual reality
Description
以下、本発明の一実施形態に係るゲーム装置について説明する。図1は、開状態におけるゲーム装置10の外観を示す正面図である。図2(a)は閉状態におけるゲーム装置10の左側面図であり、図2(b)は閉状態におけるゲーム装置10の正面図であり、図2(c)は閉状態におけるゲーム装置10の右側面図であり、図2(d)は閉状態におけるゲーム装置10の背面図である。ゲーム装置10は携帯型のゲーム装置であり、図1および図2に示すように折り畳み可能に構成されている。図1は、開いた状態(開状態)におけるゲーム装置10を示し、図2は、閉じた状態(閉状態)におけるゲーム装置10を示している。ゲーム装置10は、撮像部によって画像を撮像し、撮像した画像を画面に表示したり、撮像した画像のデータを保存したりすることが可能である。また、ゲーム装置10は、交換可能なメモリカード内に記憶され、または、サーバや他のゲーム装置から受信したゲームプログラムを実行可能であり、仮想空間に設定された仮想カメラで撮像した画像などのコンピュータグラフィックス処理により生成された画像を画面に表示したりすることができる。
まず、下側ハウジング11の構成について説明する。図1および図2に示すように、下側ハウジング11には、下側LCD(Liquid Crystal Display:液晶表示装置)12、タッチパネル13、各操作ボタン14A〜14L、アナログスティック15、LED16A〜16B、挿入口17、および、マイクロフォン用孔18が設けられる。以下、これらの詳細について説明する。
次に、上側ハウジング21の構成について説明する。図1および図2に示すように、上側ハウジング21には、上側LCD(Liquid Crystal Display:液晶表示装置)22、外側撮像部23(外側撮像部(左)23aおよび外側撮像部(右)23b)、内側撮像部24、3D調整スイッチ25、および、3Dインジケータ26が設けられる。以下、これらの詳細について説明する。
次に、図3を参照して、ゲーム装置10の内部の電気的構成について説明する。図3は、ゲーム装置10の内部構成を示すブロック図である。図3に示すように、ゲーム装置10は、上述した各部に加えて、情報処理部31、メインメモリ32、外部メモリインターフェイス(外部メモリI/F)33、データ保存用外部メモリI/F34、データ保存用内部メモリ35、無線通信モジュール36、ローカル通信モジュール37、リアルタイムクロック(RTC)38、加速度センサ39、電源回路40、およびインターフェイス回路(I/F回路)41等の電子部品を備えている。これらの電子部品は、電子回路基板上に実装されて下側ハウジング11(または上側ハウジング21でもよい)内に収納される。
次に、図4から図9を参照して、本実施形態に係るゲーム装置10において行われる表示処理の概要について説明する。図4は、本実施形態に係る表示処理に用いられるマーカ51の一例を示す図である。本実施形態においては、図4に示すようなマーカ51をゲーム装置10の外側撮像部23で撮像すると、所定の仮想キャラクタが上側LCD22に表示されるものとする。
次に、図10〜図19を参照して、本実施形態に係る表示処理の詳細について説明する。まず、表示処理の際にメインメモリ32およびVRAM313(以下、これらを総称してRAMと呼ぶことがある)に記憶される主なデータについて説明する。図10は、ゲーム装置10のRAM(メインメモリ32等)のメモリマップを示す図である。図10に示されるように、RAMには、ゲームプログラム70、左目用実画像71L、右目用実画像71R、加速度データ72、キャラクタ姿勢情報73、マーカ情報74、左仮想キャラクタ画像75L、右仮想キャラクタ画像75R、閾値データ76、前回キャラクタ姿勢情報77等が記憶される。これらの他、RAMには、仮想キャラクタ65の形状を示すデータ、ユーザによって行われたボタン操作に関するデータ等が記憶される。
次に、表示処理の詳細について図11を参照して説明する。図11は、本実施形態に係る表示処理の詳細を示すメインフローチャートである。ゲーム装置10の電源が投入されると、ゲーム装置10の情報処理部31(CPU311)は、ROMに記憶されている起動プログラムを実行し、これによってメインメモリ32等の各ユニットが初期化される。次に、不揮発性メモリ(外部メモリ44等;コンピュータ読み取り可能な記憶媒体)に記憶されたゲームプログラム70がRAM(具体的には、メインメモリ32)に読み込まれ、情報処理部31のCPU311によって当該プログラムの実行が開始される。図11のフローチャートに示す処理は、以上の処理が完了した後に情報処理部31(CPU311又はGPU312)によって行われる。
なお、本実施形態では、加速度センサ39が検出する加速度に基づいて、重力方向を基準としたゲーム装置10の姿勢を算出した。他の実施形態では、角速度センサ46が検出する角速度に基づいて、ゲーム装置10の姿勢を算出してもよい。例えば角速度センサ46を用いて、ゲーム装置10は、重力方向に対する傾きに限らず、重力方向周りの回転に関する姿勢を算出することができ、実空間の絶対的な姿勢を算出することができる。ゲーム装置10は、角速度センサ46が検出する各軸(x、y、z軸)周りの角速度を時間で積分することによって、各軸周りの回転角を算出することができ、基本姿勢からの姿勢の変化を算出することができる。基本姿勢は、例えば、ゲーム装置10を地面に水平な面上に置いたときの姿勢である。このように、ゲーム装置10は、姿勢を検出するための手段(加速度センサ39や角速度センサ46等)が検出した値を用いて、ゲーム装置10の姿勢を算出することができる。そして、ゲーム装置10は、算出した姿勢と、マーカ51と外側撮像部23との位置関係とに基づいて、仮想キャラクタ65の姿勢を決定してもよい。
11 下側ハウジング
12 下側LCD
13 タッチパネル
14 操作ボタン
15 アナログスティック
16 LED
21 上側ハウジング
22 上側LCD
23 外側撮像部
23a 外側撮像部(左)
23b 外側撮像部(右)
24 内側撮像部
25 3D調整スイッチ
26 3Dインジケータ
28 タッチペン
31 情報処理部
311 CPU
312 GPU
32 メインメモリ
50 テーブル
51 マーカ
52 壁
54 天井
63 仮想ステレオカメラ
65 仮想キャラクタ
Claims (16)
- 情報処理装置のコンピュータを、
撮像手段によって撮像された撮像画像を逐次取得する画像取得手段、
前記撮像手段の姿勢を示す姿勢情報を取得する姿勢情報取得手段、
前記画像取得手段によって取得された撮像画像から特定対象物を検出する特定対象物検出手段、
前記特定対象物と前記撮像手段との相対的な位置・姿勢を算出する位置姿勢算出手段、
前記位置・姿勢と前記姿勢情報とに基づいて、仮想オブジェクトの表示態様、仮想オブジェクトの種類、仮想オブジェクトの数の少なくとも何れかを決定する表示決定手段、
前記位置姿勢算出手段により算出された位置・姿勢に基づいて、前記表示決定手段による決定に応じた前記仮想オブジェクトの画像を生成する画像生成手段、および、
前記仮想オブジェクトの画像を表示装置に表示させる表示制御手段、として機能させる、情報処理プログラム。 - 前記表示決定手段は、前記姿勢情報が示す所定の方向を基準とした前記特定対象物の姿勢に応じて、前記仮想オブジェクトの表示態様を決定する、請求項1に記載の情報処理プログラム。
- 前記姿勢情報取得手段は、前記姿勢情報として、前記撮像手段を基準とした座標系の所定の方向を示す姿勢情報を取得し、
前記表示決定手段は、前記位置・姿勢と前記姿勢情報取得手段が取得した姿勢情報とに基づいて、前記特定対象物を基準とした座標系の所定の方向を算出し、算出した所定の方向に基づいて、前記仮想オブジェクトの表示態様を決定する、請求項2に記載の情報処理プログラム。 - 前記表示決定手段は、
少なくとも、前記特定対象物が前記姿勢情報が示す所定の方向に対して垂直となるように実空間に配置されていることを前記算出した所定の方向が示す場合には、前記仮想オブジェクトの表示態様を第1表示態様に決定し、
少なくとも、前記特定対象物が前記姿勢情報が示す所定の方向に対して平行となるように実空間に配置されていることを前記算出した所定の方向が示す場合には、前記仮想オブジェクトの表示態様を第2表示態様に決定する、請求項3に記載の情報処理プログラム。 - 前記表示決定手段は、前記姿勢情報が示す所定の方向を基準とした前記特定対象物の姿勢に応じて、前記特定対象物に対する前記仮想オブジェクトの姿勢を決定する、請求項2から4の何れかに記載の情報処理プログラム。
- 前記表示決定手段は、
少なくとも、前記特定対象物が前記姿勢情報が示す所定の方向に対して垂直となるように実空間に配置されている場合には、前記仮想オブジェクトが前記特定対象物と垂直な姿勢となるように当該仮想オブジェクトの姿勢を決定し、
少なくとも、前記特定対象物が前記姿勢情報が示す所定の方向に対して平行となるように実空間に配置されている場合には、前記仮想オブジェクトが前記特定対象物と平行な姿勢となるように当該仮想オブジェクトの姿勢を決定する、請求項5に記載の情報処理プ
ログラム。 - 前記表示決定手段は、少なくとも前記特定対象物が前記姿勢情報が示す所定の方向に対して平行となるように実空間に配置されている場合において、前記特定対象物の少なくとも一部の面の当該面に垂直な軸周りの回転角が、第1角度の場合には、前記仮想オブジェクトの姿勢を第1姿勢に決定し、第2角度の場合には、前記仮想オブジェクトの姿勢を第2姿勢に決定する、請求項6に記載の情報処理プログラム。
- 前記所定の方向は、重力方向である、請求項2から7の何れかに記載の情報処理プログラム。
- 前記表示決定手段は、
前記特定対象物を基準とした座標系の前記所定の方向が第1の範囲である場合に、前記仮想オブジェクトの表示態様を第1態様に決定し、
前記特定対象物を基準とした座標系の前記所定の方向が所定の境界によって前記第1の範囲と分けられる第2の範囲である場合に、前記仮想オブジェクトの表示態様を第2態様に決定し、
前記第1態様から前記第2態様に切り替える場合には、前記第2態様から前記第1態様に切り替えるときと比較して、前記所定の境界を前記第1の範囲側に設定する、請求項3または請求項4に記載の情報処理プログラム。 - 前記表示制御手段は、前記撮像手段によって撮像された撮像画像または前記表示装置の画面を透過して視認される実空間と、前記表示決定手段による決定に応じた前記仮想オブジェクトの画像とを重ね合わせて、前記表示装置に表示させる、請求項1から9の何れかに記載の情報処理プログラム。
- 前記特定対象物には、前記第1姿勢を示す第1情報、および、前記第2姿勢を示す第2情報が記載されており、
前記第1情報は、ユーザが第1の方向から前記特定対象物を見た場合に正しい方向から視認可能であり、
前記第2情報は、ユーザが第2の方向から前記特定対象物を見た場合に正しい方向から視認可能である、請求項7に記載の情報処理プログラム。 - 前記姿勢情報取得手段は、前記姿勢情報として、前記情報処理装置が備える加速度センサの検出結果を取得し、
前記表示決定手段は、前記位置・姿勢と前記加速度センサの検出結果とに基づいて、仮想オブジェクトの表示態様、仮想オブジェクトの種類、仮想オブジェクトの数の少なくとも何れかを決定する、請求項1から11の何れかに記載の情報処理プログラム。 - 撮像手段によって撮像された撮像画像を逐次取得する画像取得手段と、
前記撮像手段の姿勢を示す姿勢情報を取得する姿勢情報取得手段と、
前記画像取得手段によって取得された撮像画像から特定対象物を検出する特定対象物検出手段と、
前記特定対象物と前記撮像手段との相対的な位置・姿勢を算出する位置姿勢算出手段と、
前記位置・姿勢と前記姿勢情報とに基づいて、仮想オブジェクトの表示態様、仮想オブジェクトの種類、仮想オブジェクトの数の少なくとも何れかを決定する表示決定手段と、
前記位置姿勢算出手段により算出された位置・姿勢に基づいて、前記表示決定手段による決定に応じた前記仮想オブジェクトの画像を生成する画像生成手段と、
前記仮想オブジェクトの画像を表示装置に表示させる表示制御手段とを備える、情報処理装置。 - 撮像手段によって撮像された撮像画像を逐次取得する画像取得手段と、
前記撮像手段の姿勢を示す姿勢情報を取得する姿勢情報取得手段と、
前記画像取得手段によって取得された撮像画像から特定対象物を検出する特定対象物検出手段と、
前記特定対象物と前記撮像手段との相対的な位置・姿勢を算出する位置姿勢算出手段と、
前記位置・姿勢と前記姿勢情報とに基づいて、仮想オブジェクトの表示態様、仮想オブジェクトの種類、仮想オブジェクトの数の少なくとも何れかを決定する表示決定手段と、
前記位置姿勢算出手段により算出された位置・姿勢に基づいて、前記表示決定手段による決定に応じた前記仮想オブジェクトの画像を生成する画像生成手段と、
前記仮想オブジェクトの画像を表示装置に表示させる表示制御手段とを備える、情報処理システム。 - 撮像手段によって撮像された撮像画像を逐次取得する画像取得ステップと、
前記撮像手段の姿勢を示す姿勢情報を取得する姿勢情報取得ステップと、
前記画像取得ステップで取得された撮像画像から特定対象物を検出する特定対象物検出ステップと、
前記特定対象物と前記撮像手段との相対的な位置・姿勢を算出する位置姿勢算出ステップと、
前記位置・姿勢と前記姿勢情報とに基づいて、仮想オブジェクトの表示態様、仮想オブジェクトの種類、仮想オブジェクトの数の少なくとも何れかを決定する表示決定ステップと、
前記位置姿勢算出ステップで算出された位置・姿勢に基づいて、前記表示決定ステップにおける決定に応じた前記仮想オブジェクトの画像を生成する画像生成ステップと、
前記仮想オブジェクトの画像を表示装置に表示させる表示制御ステップとを含む、情報処理方法。 - 情報処理装置とマーカを備えた情報処理システムであって、
前記情報処理装置は、
前記マーカを撮像する撮像手段と、
前記撮像手段の姿勢を検出する姿勢検出手段と、
前記撮像手段によって撮像された撮像画像を逐次取得する画像取得手段と、
前記撮像手段の姿勢を示す姿勢情報を取得する姿勢情報取得手段と、
前記画像取得手段によって取得された撮像画像から前記マーカを検出するマーカ検出手段と、
前記マーカと前記撮像手段との相対的な位置・姿勢を算出する位置姿勢算出手段と、
前記位置・姿勢と前記姿勢情報とに基づいて、仮想オブジェクトの表示態様、仮想オブジェクトの種類、仮想オブジェクトの数の少なくとも何れかを決定する表示決定手段と、
前記位置姿勢算出手段により算出された位置・姿勢に基づいて、前記表示決定手段による決定に応じた前記仮想オブジェクトの画像を生成する画像生成手段と、
前記仮想オブジェクトの画像を表示装置に表示させる表示制御手段とを備える、情報処理システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011086798A JP5702653B2 (ja) | 2011-04-08 | 2011-04-08 | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 |
EP11172664.2A EP2508233B1 (en) | 2011-04-08 | 2011-07-05 | Information processing program, information processing apparatus, information processing system, and information processing method |
US13/177,854 US9067137B2 (en) | 2011-04-08 | 2011-07-07 | Computer-readable storage medium having information processing program stored therein, information processing apparatus, information processing system, and information processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011086798A JP5702653B2 (ja) | 2011-04-08 | 2011-04-08 | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2012221259A JP2012221259A (ja) | 2012-11-12 |
JP2012221259A5 JP2012221259A5 (ja) | 2014-04-03 |
JP5702653B2 true JP5702653B2 (ja) | 2015-04-15 |
Family
ID=44508768
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011086798A Active JP5702653B2 (ja) | 2011-04-08 | 2011-04-08 | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9067137B2 (ja) |
EP (1) | EP2508233B1 (ja) |
JP (1) | JP5702653B2 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140123507A1 (en) * | 2012-11-02 | 2014-05-08 | Qualcomm Incorporated | Reference coordinate system determination |
US9280179B2 (en) * | 2012-12-11 | 2016-03-08 | Dell Products L.P. | Multi-function information handling system tablet with multi-directional cooling |
US9229477B2 (en) | 2012-12-11 | 2016-01-05 | Dell Products L.P. | Multi-function information handling system with multi-orientation stand |
JP6283168B2 (ja) * | 2013-02-27 | 2018-02-21 | 任天堂株式会社 | 情報保持媒体および情報処理システム |
JP2014191718A (ja) * | 2013-03-28 | 2014-10-06 | Sony Corp | 表示制御装置、表示制御方法および記録媒体 |
KR102086510B1 (ko) * | 2013-09-26 | 2020-04-14 | 엘지전자 주식회사 | 헤드 마운트 디스플레이 및 제어 방법 |
WO2016048960A1 (en) * | 2014-09-22 | 2016-03-31 | Huntington Ingalls Incorporated | Three dimensional targeting structure for augmented reality applications |
US20160131905A1 (en) * | 2014-11-07 | 2016-05-12 | Kabushiki Kaisha Toshiba | Electronic apparatus, method and storage medium |
US20170061700A1 (en) * | 2015-02-13 | 2017-03-02 | Julian Michael Urbach | Intercommunication between a head mounted display and a real world object |
US9964765B2 (en) * | 2015-09-11 | 2018-05-08 | The Boeing Company | Virtual display of the real-time position of a robotic device to a human operator positioned on an opposing side of an object |
JP6313507B1 (ja) * | 2017-05-19 | 2018-04-18 | 株式会社アストロスケール | 航法システム、宇宙航行体及び光学マーカ |
CN109587188B (zh) * | 2017-09-28 | 2021-10-22 | 阿里巴巴集团控股有限公司 | 确定终端设备之间相对位置关系的方法、装置及电子设备 |
CN109078329B (zh) * | 2018-07-04 | 2022-03-11 | 福建工程学院 | 重力游戏的镜像虚拟测试方法 |
US10818089B2 (en) * | 2018-09-25 | 2020-10-27 | Disney Enterprises, Inc. | Systems and methods to provide a shared interactive experience across multiple presentation devices |
US10918949B2 (en) | 2019-07-01 | 2021-02-16 | Disney Enterprises, Inc. | Systems and methods to provide a sports-based interactive experience |
CN113577765B (zh) * | 2021-08-20 | 2023-06-16 | 腾讯科技(深圳)有限公司 | 用户界面的显示方法、装置、设备及存储介质 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004287699A (ja) * | 2003-03-20 | 2004-10-14 | Tama Tlo Kk | 画像合成装置及びその合成方法 |
JP2005326275A (ja) * | 2004-05-14 | 2005-11-24 | Canon Inc | 情報処理方法および装置 |
US7991220B2 (en) * | 2004-09-01 | 2011-08-02 | Sony Computer Entertainment Inc. | Augmented reality game system using identification information to display a virtual object in association with a position of a real object |
JP3841806B2 (ja) * | 2004-09-01 | 2006-11-08 | 株式会社ソニー・コンピュータエンタテインメント | 画像処理装置および画像処理方法 |
US20070046561A1 (en) * | 2005-08-23 | 2007-03-01 | Lg Electronics Inc. | Mobile communication terminal for displaying information |
JP4660357B2 (ja) * | 2005-11-18 | 2011-03-30 | 任天堂株式会社 | 画像処理プログラムおよび画像処理装置 |
JP4739004B2 (ja) | 2005-12-15 | 2011-08-03 | キヤノン株式会社 | 情報処理装置及び情報処理方法 |
JP4926817B2 (ja) | 2006-08-11 | 2012-05-09 | キヤノン株式会社 | 指標配置情報計測装置および方法 |
JP4919887B2 (ja) * | 2007-07-09 | 2012-04-18 | 任天堂株式会社 | 画像処理プログラムおよび画像処理装置 |
JP5040796B2 (ja) * | 2008-05-09 | 2012-10-03 | 大日本印刷株式会社 | 室内調度品購入支援システム、方法、プログラム、媒体 |
TWM344176U (en) * | 2008-05-30 | 2008-11-11 | Tenx Technology Inc | Game system |
JP4834116B2 (ja) * | 2009-01-22 | 2011-12-14 | 株式会社コナミデジタルエンタテインメント | 拡張現実表示装置、拡張現実表示方法、ならびに、プログラム |
US8970690B2 (en) * | 2009-02-13 | 2015-03-03 | Metaio Gmbh | Methods and systems for determining the pose of a camera with respect to at least one object of a real environment |
US8253746B2 (en) * | 2009-05-01 | 2012-08-28 | Microsoft Corporation | Determine intended motions |
JP2011086798A (ja) | 2009-10-16 | 2011-04-28 | Panasonic Corp | 有機el素子 |
US8749557B2 (en) * | 2010-06-11 | 2014-06-10 | Microsoft Corporation | Interacting with user interface via avatar |
-
2011
- 2011-04-08 JP JP2011086798A patent/JP5702653B2/ja active Active
- 2011-07-05 EP EP11172664.2A patent/EP2508233B1/en active Active
- 2011-07-07 US US13/177,854 patent/US9067137B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP2508233B1 (en) | 2021-09-01 |
US20120256961A1 (en) | 2012-10-11 |
EP2508233A3 (en) | 2018-04-04 |
EP2508233A2 (en) | 2012-10-10 |
US9067137B2 (en) | 2015-06-30 |
JP2012221259A (ja) | 2012-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5702653B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
JP5646263B2 (ja) | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 | |
JP5689707B2 (ja) | 表示制御プログラム、表示制御装置、表示制御システム、および、表示制御方法 | |
JP5739674B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
JP4869430B1 (ja) | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 | |
JP5541974B2 (ja) | 画像表示プログラム、装置、システムおよび方法 | |
JP5739671B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、及び情報処理方法 | |
JP5814532B2 (ja) | 表示制御プログラム、表示制御装置、表示制御システム及び表示制御方法 | |
US9693039B2 (en) | Hand-held electronic device | |
JP2012243147A (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
WO2011148544A1 (ja) | 携帯型電子機器 | |
JP6021296B2 (ja) | 表示制御プログラム、表示制御装置、表示制御システム、および、表示制御方法 | |
JP6148714B2 (ja) | 携帯型電子機器 | |
JP2011258155A (ja) | 情報処理プログラム、情報処理装置、情報処理システム、及び情報処理方法 | |
JP5602702B2 (ja) | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 | |
JP5739670B2 (ja) | 画像表示プログラム、装置、システムおよび方法 | |
JP5739673B2 (ja) | 画像表示プログラム、装置、システムおよび方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140217 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140217 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141117 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141126 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150216 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150220 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5702653 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |