JP5791434B2 - 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 - Google Patents
情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 Download PDFInfo
- Publication number
- JP5791434B2 JP5791434B2 JP2011189098A JP2011189098A JP5791434B2 JP 5791434 B2 JP5791434 B2 JP 5791434B2 JP 2011189098 A JP2011189098 A JP 2011189098A JP 2011189098 A JP2011189098 A JP 2011189098A JP 5791434 B2 JP5791434 B2 JP 5791434B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- event
- distance
- virtual
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/245—Aligning, centring, orientation detection or correction of the image by locating a pattern; Special marks for positioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
Description
本発明の一構成例に係る情報処理プログラムは、撮像装置および表示装置に接続された情報処理装置のコンピュータを、画像取得手段、特定対象検出手段、距離算出手段、イベント発生手段、仮想画像生成手段、表示制御手段として機能させる。画像取得手段は、撮像装置により撮像した被写体の画像を取得する。特定対象検出手段は、画像取得手段で取得した被写体の画像から特定対象を検出する。距離算出手段は、被写体の画像から撮像装置と特定対象との距離を算出する。イベント発生手段は、距離算出手段で算出した撮像装置と特定対象との距離に応じて仮想空間内にイベントを発生する。仮想画像生成手段は、イベント発生手段で発生するイベントを仮想空間内に配置された仮想カメラで撮影することにより仮想画像を生成する。表示制御手段は、被写体の画像もしくは、表示装置の画面を透過して見える被写体に重ね合わせてユーザに視認されるように、仮想画像を表示装置に表示させる。
以下、本発明の一実施形態に係るゲーム装置について説明する。ゲーム装置10は携帯型のゲーム装置である。図1は、本発明の実施の形態に係るゲーム装置10の開状態における正面図である。図2は、本発明の実施の形態に係るゲーム装置10の閉状態における左側面図である。図3は、本発明の実施の形態に係るゲーム装置10の閉状態における正面図である。図4は、本発明の実施の形態に係るゲーム装置10の閉状態における右側面図である。図5は、本発明の実施の形態に係るゲーム装置10の閉状態における背面図である。
図1および図2〜図5に示すように、下側ハウジング11には、下側LCD(Liquid Crystal Display:液晶表示装置)12、タッチパネル13、各操作ボタン14A〜14L、アナログスティック15、LED16A〜16B、挿入口17、および、マイクロフォン用孔18が設けられている。
下側ハウジング11の内側面には、マイクロフォン用孔18が設けられている。マイクロフォン用孔18の下部には音声入力装置としてのマイク42(図6参照)が設けられている。
図1および図2に示すように、上側ハウジング21には、上側LCD(Liquid Crystal Display:液晶表示装置)22、外側撮像部23(外側撮像部(左)23aおよび外側撮像部(右)23b)、内側撮像部24、3D調整スイッチ25、および、3Dインジケータ26が設けられている。
次に、図6は、本発明の実施の形態に係るゲーム装置10の内部構成を示すブロック図である。図6を参照して、ゲーム装置10の内部の電気的構成について説明する。図6に示すように、ゲーム装置10は、上述した各部に加えて、情報処理部31、メインメモリ32、外部メモリインターフェイス(外部メモリI/F)33、データ保存用外部メモリI/F34、データ保存用内部メモリ35、無線通信モジュール36、ローカル通信モジュール37、リアルタイムクロック(RTC)38、加速度センサ39、電源回路40、およびインターフェイス回路(I/F回路)41等の電子部品を備えている。
次に、図7〜図13は、本発明の実施の形態に係るゲーム装置10のゲームプレイ中におけるゲーム画像例を示す図である。図7〜図13を参照して、ゲーム装置10において実行されるゲーム1〜ゲーム3の概要を説明する。このゲーム1〜ゲーム3は、ゲームソフトに同梱されているノートに描かれている所定の模様(文字、数字、記号、その他の図柄)のマーカ50を、ゲーム装置10の外側撮像部23で撮像しながらプレイする、拡張現実技術を利用したゲームである。
次に、上記ゲーム3を実行した場合のゲーム装置10の動作についてより詳細に説明する。
また、上記実施形態では、外側撮像部23によって撮像された被写体画像に仮想画像を合成して上側LCD22に表示している(ビデオシースルー方式)が、本発明はこれに限定されるものではない。本発明は、透過型の表示画面に仮想オブジェクトを表示し、当該透過型の表示画面を通じて見える被写体にあたかも仮想オブジェクトが実在するかのようにユーザに視認されるような光学シースルー方式のゲーム装置(たとえば、ヘッドマウントディスプレイを備えるゲーム装置)やゲームシステムにも適用できる。
Claims (12)
- 撮像装置および表示装置に接続された情報処理装置のコンピュータを、
前記撮像装置により撮像した被写体の画像を取得するための画像取得手段、
前記画像取得手段で取得した前記被写体の画像から特定対象を検出するための特定対象検出手段、
前記特定対象と前記撮像装置との位置関係を算出する位置関係算出手段、
前記位置関係に基づいて、仮想空間内に配置される仮想カメラを設定する仮想カメラ設定手段、
前記被写体の画像から前記撮像装置と前記特定対象との距離を算出するための距離算出手段、
前記距離算出手段で算出した前記撮像装置と前記特定対象との距離に応じて前記仮想空間内にオブジェクトを配置することを含むイベントを発生するためのイベント発生手段、
前記イベント発生手段で発生する前記イベントを前記仮想空間内に配置された仮想カメラで撮影することにより仮想画像を生成するための仮想画像生成手段、および
前記被写体の画像もしくは、前記表示装置の画面を透過して見える前記被写体に重ね合わせてユーザに視認されるように、前記仮想画像を前記表示装置に表示させるための表示制御手段として機能させるための情報処理プログラム。 - 前記イベント発生手段は、前記距離算出手段で算出した前記撮像装置と前記特定対象との距離が所定の距離以下になった場合、前記イベントを発生する、請求項1に記載の情報処理プログラム。
- 撮像装置および表示装置に接続された情報処理装置のコンピュータを、
前記撮像装置により撮像した被写体の画像を取得するための画像取得手段、
前記画像取得手段で取得した前記被写体の画像から特定対象を検出するための特定対象検出手段、
前記被写体の画像から前記撮像装置と前記特定対象との距離を算出するための距離算出手段、
前記距離算出手段で算出した前記撮像装置と前記特定対象との距離に応じて仮想空間内
にイベントを発生するためのイベント発生手段、
前記イベント発生手段で発生する前記イベントを前記仮想空間内に配置された仮想カメラで撮影することにより仮想画像を生成するための仮想画像生成手段、および
前記被写体の画像もしくは、前記表示装置の画面を透過して見える前記被写体に重ね合わせてユーザに視認されるように、前記仮想画像を前記表示装置に表示させるための表示制御手段として機能させ、
前記特定対象は、第1特定対象と、前記第1特定対象に内包して配置された第2特定対象とを有し、
前記イベント発生手段は、前記距離算出手段で算出した前記撮像装置と前記第1特定対象との距離が第1距離以下になった場合、第1イベントを発生し、前記距離算出手段で算出した前記撮像装置と前記第2特定対象との距離が第2距離以下になった場合、第2イベントを発生する、情報処理プログラム。 - 撮像装置および表示装置に接続された情報処理装置のコンピュータを、
前記撮像装置により撮像した被写体の画像を取得するための画像取得手段、
前記画像取得手段で取得した前記被写体の画像から特定対象を検出するための特定対象検出手段、
前記被写体の画像から前記撮像装置と前記特定対象との距離を算出するための距離算出手段、
前記距離算出手段で算出した前記撮像装置と前記特定対象との距離に応じて仮想空間内
にイベントを発生するためのイベント発生手段、
前記イベント発生手段で発生する前記イベントを前記仮想空間内に配置された仮想カメラで撮影することにより仮想画像を生成するための仮想画像生成手段、および
前記被写体の画像もしくは、前記表示装置の画面を透過して見える前記被写体に重ね合わせてユーザに視認されるように、前記仮想画像を前記表示装置に表示させるための表示制御手段として機能させ、
前記特定対象は、第1特定対象と、前記第1特定対象に内包して配置された複数の第2特定対象とを有し、
前記イベント発生手段は、複数の前記第2特定対象のうち、前記距離算出手段で算出した前記撮像装置との距離が所定の距離以下になった前記第2特定対象に応じた前記イベントを発生する、情報処理プログラム。 - 前記イベント発生手段は、前記撮像装置と前記第1特定対象との距離が第1距離以下になった場合、第1イベントを発生し、複数の前記第2特定対象のうち、前記撮像装置との距離が所定の距離以下になった場合、第2イベントを発生する、請求項4に記載の情報処理プログラム。
- 前記イベント発生手段は、前記第1特定対象が検出された場合に第1イベントを発生し、その後に、複数の前記第2特定対象のうち、前記撮像装置との距離が所定の距離以下になった場合、第2イベントを発生する、請求項4に記載の情報処理プログラム。
- 前記仮想画像生成手段は、前記イベント発生手段で発生した前記イベントとして前記仮想空間内に配置した所定形状のオブジェクトを前記仮想カメラで撮影することにより前記仮想画像を生成する、請求項1〜6のいずれか1項に記載の情報処理プログラム。
- 前記仮想画像生成手段は、前記イベント発生手段で発生した前記イベントとして前記仮想空間内に配置した板状のポリゴンにテクスチャをマッピングして、前記仮想カメラで撮影することにより前記仮想画像を生成する、請求項7に記載の情報処理プログラム。
- 前記情報処理プログラムは、前記コンピュータを、
前記被写体の画像から前記撮像装置と前記特定対象との位置関係を算出するための位置算出手段、および
前記位置算出手段で算出した前記位置関係に応じて前記仮想カメラを配置するための仮想カメラ配置手段としてさらに機能させる、請求項3〜8のいずれか1項に記載の情報処理プログラム。 - 撮像装置および表示装置に接続された情報処理装置であって、
前記撮像装置により撮像した被写体の画像を取得するための画像取得手段と、
前記画像取得手段で取得した前記被写体の画像から特定対象を検出するための特定対象
検出手段と、
前記特定対象と前記撮像装置との位置関係を算出する位置関係算出手段と、
前記位置関係に基づいて、仮想空間内に配置される仮想カメラを設定する仮想カメラ設定手段と、
前記被写体の画像から前記撮像装置と前記特定対象との距離を算出するための距離算出手段と、
前記距離算出手段で算出した前記撮像装置と前記特定対象との前記距離に応じて前記仮想空間内にオブジェクトを配置することを含むイベントを発生するためのイベント発生手段と、
前記イベント発生手段で発生する前記イベントを前記仮想空間内に配置された仮想カメラで撮影することにより仮想画像を生成するための仮想画像生成手段と、
前記被写体の画像もしくは、前記表示装置の画面を透過して見える前記被写体に重ね合わせてユーザに視認されるように、前記仮想画像を前記表示装置に表示させるための表示制御手段と
を備える情報処理装置。 - 撮像装置および表示装置に接続された情報処理装置の制御部によって処理される情報処理方法であって、
前記制御部が、前記撮像装置により撮像した被写体の画像を取得するためのステップと、
取得した前記被写体の画像から特定対象を検出するためのステップと、
前記特定対象と前記撮像装置との位置関係を算出するステップと、
前記位置関係に基づいて、仮想空間内に配置される仮想カメラを設定するステップと、
前記被写体の画像から前記撮像装置と前記特定対象との距離を算出するためのステップと、
算出した前記撮像装置と前記特定対象との前記距離に応じて前記仮想空間内にオブジェクトを配置することを含むイベントを発生するためのステップと、
発生する前記イベントを前記仮想空間内に配置された仮想カメラで撮影することにより仮想画像を生成するためのステップと、
前記被写体の画像もしくは、前記表示装置の画面を透過して見える前記被写体に重ね合わせてユーザに視認されるように、前記仮想画像を前記表示装置に表示させるためのステップと
を含む情報処理方法。 - 被写体に配置してある特定対象と、
前記被写体を撮像する撮像装置と、
前記撮像装置に接続された情報処理装置と、
前記情報処理装置に接続した表示装置と
を備える情報処理システムであって、
前記情報処理装置は、
前記撮像装置により撮像した被写体の画像を取得するための画像取得手段と、
前記画像取得手段で取得した前記被写体の画像から前記特定対象を検出するための特定対象検出手段と、
前記特定対象と前記撮像装置との位置関係を算出する位置関係算出手段と、
前記位置関係に基づいて、仮想空間内に配置される仮想カメラを設定する仮想カメラ設定手段と、
前記被写体の画像から前記撮像装置と前記特定対象との距離を算出するための距離算出手段と、
前記距離算出手段で算出した前記撮像装置と前記特定対象との前記距離に応じて前記仮想空間内にオブジェクトを配置することを含むイベントを発生するためのイベント発生手段と、
前記イベント発生手段で発生する前記イベントを前記仮想空間内に配置された仮想カメラで撮影することにより仮想画像を生成するための仮想画像生成手段と、
前記被写体の画像もしくは、前記表示装置の画面を透過して見える前記被写体に重ね合わせてユーザに視認されるように、前記仮想画像を前記表示装置に表示させるための表示制御手段と
を備える情報処理システム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011189098A JP5791434B2 (ja) | 2011-08-31 | 2011-08-31 | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 |
US13/366,833 US8553938B2 (en) | 2011-08-31 | 2012-02-06 | Information processing program, information processing system, information processing apparatus, and information processing method, utilizing augmented reality technique |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011189098A JP5791434B2 (ja) | 2011-08-31 | 2011-08-31 | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013050882A JP2013050882A (ja) | 2013-03-14 |
JP5791434B2 true JP5791434B2 (ja) | 2015-10-07 |
Family
ID=47743790
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011189098A Active JP5791434B2 (ja) | 2011-08-31 | 2011-08-31 | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8553938B2 (ja) |
JP (1) | JP5791434B2 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5791433B2 (ja) | 2011-08-31 | 2015-10-07 | 任天堂株式会社 | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 |
JP2013050883A (ja) | 2011-08-31 | 2013-03-14 | Nintendo Co Ltd | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 |
JP2016076167A (ja) | 2014-10-08 | 2016-05-12 | ソニー株式会社 | 情報処理装置および情報処理方法 |
EP3136392A1 (en) | 2015-08-25 | 2017-03-01 | Thomson Licensing | Method and system for embedding and retrieving information through marker transformation |
JP6573936B2 (ja) | 2017-06-02 | 2019-09-11 | チームラボ株式会社 | 位置測定用の端末装置,コンピュータプログラム,及びシステム |
CN108182730B (zh) * | 2018-01-12 | 2022-08-12 | 北京小米移动软件有限公司 | 虚实对象合成方法及装置 |
JP2023142255A (ja) * | 2022-03-24 | 2023-10-05 | 株式会社ポケモン | プログラム、方法、情報処理装置、システム |
CN115228092B (zh) * | 2022-09-22 | 2022-12-23 | 腾讯科技(深圳)有限公司 | 游戏战力评估方法、装置以及计算机可读存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5248806B2 (ja) * | 2007-04-25 | 2013-07-31 | キヤノン株式会社 | 情報処理装置、情報処理方法 |
JP4350773B2 (ja) * | 2007-07-25 | 2009-10-21 | 株式会社スクウェア・エニックス | 画像生成装置及び方法、並びにプログラム及び記録媒体 |
-
2011
- 2011-08-31 JP JP2011189098A patent/JP5791434B2/ja active Active
-
2012
- 2012-02-06 US US13/366,833 patent/US8553938B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2013050882A (ja) | 2013-03-14 |
US20130051616A1 (en) | 2013-02-28 |
US8553938B2 (en) | 2013-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5791433B2 (ja) | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 | |
JP5791434B2 (ja) | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 | |
US8854356B2 (en) | Storage medium having stored therein image processing program, image processing apparatus, image processing system, and image processing method | |
US9495800B2 (en) | Storage medium having stored thereon image processing program, image processing apparatus, image processing system, and image processing method | |
US9595127B2 (en) | Three-dimensional collaboration | |
JP5646263B2 (ja) | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 | |
US8830231B2 (en) | Storage medium having stored therein stereoscopic image display program, stereoscopic image display device, stereoscopic image display system, and stereoscopic image display method | |
EP2395768B1 (en) | Image display program, image display system, and image display method | |
JP5739674B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
JP5541974B2 (ja) | 画像表示プログラム、装置、システムおよび方法 | |
JP2013050883A (ja) | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 | |
US20120162384A1 (en) | Three-Dimensional Collaboration | |
JP2012058968A (ja) | プログラム、情報記憶媒体及び画像生成システム | |
US9594399B2 (en) | Computer-readable storage medium, display control apparatus, display control method and display control system for controlling displayed virtual objects with symbol images | |
US8684837B2 (en) | Information processing program, information processing system, information processing apparatus, and information processing method | |
JP2012221259A (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
JP5572532B2 (ja) | 表示制御プログラム、表示制御装置、表示制御方法および表示制御システム | |
US20130057574A1 (en) | Storage medium recorded with program, information processing apparatus, information processing system, and information processing method | |
JP5725902B2 (ja) | 画像処理プログラム、画像処理装置、画像処理方法および画像処理システム | |
JP2012221260A (ja) | 情報処理プログラム、情報処理方法、情報処理装置および情報処理システム | |
JP2012074881A (ja) | 立体視表示制御プログラム、立体視表示制御システム、立体視表示制御装置、および、立体視表示制御方法 | |
JP2012234411A (ja) | 画像生成装置、画像生成システム、画像生成プログラムおよび画像生成方法 | |
US20120306855A1 (en) | Storage medium having stored therein display control program, display control apparatus, display control method, and display control system | |
JP5739673B2 (ja) | 画像表示プログラム、装置、システムおよび方法 | |
JP5739670B2 (ja) | 画像表示プログラム、装置、システムおよび方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140729 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150421 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150507 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150701 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150721 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150804 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5791434 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |