JP2011258157A - プログラム、情報記憶媒体及び画像生成システム - Google Patents
プログラム、情報記憶媒体及び画像生成システム Download PDFInfo
- Publication number
- JP2011258157A JP2011258157A JP2010134576A JP2010134576A JP2011258157A JP 2011258157 A JP2011258157 A JP 2011258157A JP 2010134576 A JP2010134576 A JP 2010134576A JP 2010134576 A JP2010134576 A JP 2010134576A JP 2011258157 A JP2011258157 A JP 2011258157A
- Authority
- JP
- Japan
- Prior art keywords
- information
- reliability
- image
- operator
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000033001 locomotion Effects 0.000 claims abstract description 135
- 238000000034 method Methods 0.000 claims description 133
- 230000008569 process Effects 0.000 claims description 102
- 210000000988 bone and bone Anatomy 0.000 claims description 73
- 238000012545 processing Methods 0.000 claims description 69
- 238000004364 calculation method Methods 0.000 claims description 55
- 230000007423 decrease Effects 0.000 claims description 44
- 230000008859 change Effects 0.000 claims description 29
- 238000013215 result calculation Methods 0.000 claims description 13
- 230000009471 action Effects 0.000 claims description 12
- 238000013459 approach Methods 0.000 claims description 8
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 18
- 238000010586 diagram Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 15
- 230000000694 effects Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 7
- 238000013500 data storage Methods 0.000 description 7
- 210000000038 chest Anatomy 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 230000003247 decreasing effect Effects 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000003825 pressing Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000037237 body shape Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 210000000481 breast Anatomy 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 210000000610 foot bone Anatomy 0.000 description 1
- 210000003108 foot joint Anatomy 0.000 description 1
- 210000002478 hand joint Anatomy 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
Abstract
【解決手段】画像生成システムは、画像センサからの画像情報を取得する画像情報取得部と、画像センサからの画像情報に基づいて、操作者の動作を特定するスケルトン情報を取得するスケルトン情報取得部と、スケルトン情報の信頼度を表す信頼度情報を取得する信頼度情報取得部と、表示部に表示される画像を生成する画像生成部を含む。画像生成部は、表示部に表示される画像として、取得された信頼度情報に応じた画像を生成する。
【選択図】図4
Description
図1に本実施形態の画像生成システム(ゲーム装置、映像機器等)のブロック図の例を示す。なお、本実施形態の画像生成システムの構成は図1に限定されず、その構成要素(各部)の一部を省略したり、他の構成要素を追加するなどの種々の変形実施が可能である。
次に本実施形態の手法について具体的に説明する。
一般的に、ゲーム装置や、テレビや記録・再生機器等の映像機器では、コントローラ(リモコン)のボタンやレバーを用いて操作を指示する。またコントローラにモーションセンサ(6軸センサ)を設け、操作者がコントローラそのものを動かすことで操作を指示する機器も考えられる。
本実施形態では、信頼度情報に基づいて画像の表示態様を変化させている。
本実施形態では、信頼度情報に応じたオブジェクト制御を行うことができる。例えば図11(A)では、操作者は、両手を前に出して、物を持つ動作を行っている。この時、表示部190には図11(B)に示すようなゲーム画像が表示されている。HR、HLは操作者の右手、左手に対応する手オブジェクトであり、図11(A)のように操作者が物を持つ動作を行うと、その動きに連動して手オブジェクトHR、HLも移動又は動作する。そして操作者は、図11(B)の画像を見ながら、操作対象となるオブジェクトOBCをつかみ、指示された方向にオブジェクトOBCを移動する操作を行って、ミニゲームを楽しむ。
本実施形態では、信頼度情報に応じたゲーム演算処理を行うことができる。具体的には信頼度情報に応じたゲーム結果演算処理を行ったり、ゲーム進行処理を行う。
以上では本実施形態の手法をゲーム装置に適用した場合について主に説明したが、本実施形態の手法はゲーム装置以外の種々の機器に適用できる。
次に本実施形態の詳細な処理例について図20〜図23のフローチャートを用いて説明する。図20は全体的な処理を示すフローチャートである。
図23は、信頼度情報を用いたゲーム演算処理の具体例を示すフローチャートである。
CH キャラクタ(アバター)、C0〜C19 関節(骨)、
OBC〜OBH オブジェクト、
100 処理部、102 画像情報取得部、104 スケルトン情報取得部、
106 信頼度情報取得部、110 ゲーム演算部、112 オブジェクト空間設定部、
114 オブジェクト制御部、118 仮想カメラ制御部、120 画像生成部、
130 音生成部、160 操作部、170 記憶部、171 画像情報記憶部、
172 カラー画像情報記憶部、173 デプス情報記憶部、
174 スケルトン情報記憶部、175 信頼度情報記憶部、
176 オブジェクトデータ記憶部、177 モーションデータ記憶部、
178 モデルデータ記憶部、179 描画バッファ、180 情報記憶媒体、
190 表示部、192 音出力部、194 補助記憶装置、196 通信部
Claims (24)
- 画像センサからの画像情報を取得する画像情報取得部と、
前記画像センサからの前記画像情報に基づいて、操作者の動作を特定するスケルトン情報を取得するスケルトン情報取得部と、
前記スケルトン情報の信頼度を表す信頼度情報を取得する信頼度情報取得部と、
表示部に表示される画像を生成する画像生成部として、
コンピュータを機能させ、
前記画像生成部は、
前記表示部に表示される画像として、取得された前記信頼度情報に応じた画像を生成することを特徴とするプログラム。 - 請求項1において、
前記信頼度情報取得部は、
前記スケルトン情報により表されるスケルトンを構成する各骨に対して、前記各骨の情報の信頼度が関連づけられた情報を、前記信頼度情報として取得することを特徴とするプログラム。 - 請求項2において、
前記スケルトン情報は、前記各骨の位置情報を含み、
前記信頼度は、操作者の各部位と前記各骨との対応づけと、前記各骨の前記位置情報に関する信頼度であることを特徴とするプログラム。 - 請求項1乃至3のいずれかにおいて、
前記信頼度情報取得部は、
前記操作者の所定部位が前記操作者の他の部位に近づくほど、前記所定部位に対応する骨の情報の信頼度が低くなる情報を、前記信頼度情報として取得することを特徴とするプログラム。 - 請求項1乃至4のいずれかにおいて、
前記信頼度情報取得部は、
前記操作者が前記画像センサから所定距離以上離れた場合に、前記スケルトン情報の骨の情報の信頼度が低くなる情報を、前記信頼度情報として取得することを特徴とするプログラム。 - 請求項1乃至5のいずれかにおいて、
前記信頼度情報取得部は、
前記スケルトン情報に関する処理負荷が増加することで前記スケルトン情報の信頼度が低くなる情報を、前記信頼度情報として取得することを特徴とするプログラム。 - 請求項1乃至6のいずれかにおいて、
前記画像生成部は、
前記信頼度情報に基づいて、前記表示部に表示される画像の表示態様を変化させることを特徴とするプログラム。 - 請求項7において、
オブジェクトを制御するオブジェクト制御部として、
コンピュータを機能させ、
前記画像生成部は、
前記操作者の所定部位に対応する骨の情報の信頼度に基づいて、前記所定部位に対応して前記表示部に表示される前記オブジェクトの表示態様を変化させることを特徴とするプログラム。 - 請求項8において、
前記画像生成部は、
前記所定部位に対応する骨の情報の信頼度が低くなるにつれて、前記所定部位に対応する前記オブジェクトをぼかす処理、前記オブジェクトを透明に近づける処理、及び前記オブジェクトの色を変化させる処理の少なくとも1つの処理を行うことを特徴とするプログラム。 - 請求項8又は9において、
前記所定部位は前記操作者の手であり、前記オブジェクトは、前記操作者の手の動きに応じて移動又は動作する手オブジェクトであることを特徴とするプログラム。 - 請求項8又は9において、
前記オブジェクトは、前記操作者の前記所定部位の動きに応じて移動するアイコンであることを特徴とするプログラム。 - 請求項7乃至9のいずれかにおいて、
前記画像生成部は、
前記操作者の操作対象となる操作対象オブジェクトの表示態様を、前記信頼度情報に基づいて変化させることを特徴とするプログラム。 - 請求項7乃至12のいずれかにおいて、
前記画像生成部は、
前記信頼度情報により表される信頼度の変化の予測情報に基づいて、前記表示部に表示される画像の表示態様を変化させることを特徴とするプログラム。 - 請求項1乃至13のいずれかにおいて、
オブジェクトを制御するオブジェクト制御部として、
コンピュータを機能させ、
前記オブジェクト制御部は、
前記信頼度情報に応じた前記オブジェクトの制御を行うことを特徴とするプログラム。 - 請求項14において、
前記オブジェクト制御部は、
前記信頼度情報により表される信頼度が低くなった場合に、前記オブジェクトの移動及び動作の少なくとも一方を制限又は停止する制御を行うことを特徴とするプログラム。 - 請求項15において、
前記オブジェクト制御部は、
前記信頼度情報により表される信頼度が低くなったと判断された後、所定のウェイト期間の経過後に、前記オブジェクトの移動及び動作の少なくとも一方を制限又は停止する制御を行うことを特徴とするプログラム。 - 請求項1乃至16のいずれかにおいて、
ゲーム演算処理を行うゲーム演算部として、
コンピュータを機能させ、
前記ゲーム演算部は、
前記信頼度情報に応じた前記ゲーム演算処理を行うことを特徴とするプログラム。 - 請求項17において、
前記ゲーム演算部は、
前記ゲーム演算処理として、前記信頼度情報に応じたゲーム結果演算処理を行うことを特徴とするプログラム。 - 画像センサからの画像情報を取得する画像情報取得部と、
前記画像センサからの前記画像情報に基づいて、操作者の動作を特定するスケルトン情報を取得するスケルトン情報取得部と、
前記スケルトン情報の信頼度を表す信頼度情報を取得する信頼度情報取得部と、
オブジェクトを制御するオブジェクト制御部と、
表示部に表示される画像を生成する画像生成部として、
コンピュータを機能させ、
前記オブジェクト制御部は、
前記信頼度情報に応じた前記オブジェクトの制御を行うことを特徴とするプログラム。 - 画像センサからの画像情報を取得する画像情報取得部と、
前記画像センサからの前記画像情報に基づいて、操作者の動作を特定するスケルトン情報を取得するスケルトン情報取得部と、
前記スケルトン情報の信頼度を表す信頼度情報を取得する信頼度情報取得部と、
ゲーム演算処理を行うゲーム演算部と、
表示部に表示される画像を生成する画像生成部として、
コンピュータを機能させ、
前記ゲーム演算部は、
前記信頼度情報に応じた前記ゲーム演算処理を行うことを特徴とするプログラム。 - コンピュータ読み取り可能な情報記憶媒体であって、請求項1乃至20のいずれかに記載のプログラムを記憶したことを特徴とする情報記憶媒体。
- 画像センサからの画像情報を取得する画像情報取得部と、
前記画像センサからの前記画像情報に基づいて、操作者の動作を特定するスケルトン情報を取得するスケルトン情報取得部と、
前記スケルトン情報の信頼度を表す信頼度情報を取得する信頼度情報取得部と、
表示部に表示される画像を生成する画像生成部とを含み、
前記画像生成部は、
前記表示部に表示される画像として、取得された前記信頼度情報に応じた画像を生成することを特徴とする画像生成システム。 - 画像センサからの画像情報を取得する画像情報取得部と、
前記画像センサからの前記画像情報に基づいて、操作者の動作を特定するスケルトン情報を取得するスケルトン情報取得部と、
前記スケルトン情報の信頼度を表す信頼度情報を取得する信頼度情報取得部と、
オブジェクトを制御するオブジェクト制御部と、
表示部に表示される画像を生成する画像生成部とを含み、
前記オブジェクト制御部は、
前記信頼度情報に応じた前記オブジェクトの制御を行うことを特徴とする画像生成システム。 - 画像センサからの画像情報を取得する画像情報取得部と、
前記画像センサからの前記画像情報に基づいて、操作者の動作を特定するスケルトン情報を取得するスケルトン情報取得部と、
前記スケルトン情報の信頼度を表す信頼度情報を取得する信頼度情報取得部と、
ゲーム演算処理を行うゲーム演算部と、
表示部に表示される画像を生成する画像生成部とを含み、
前記ゲーム演算部は、
前記信頼度情報に応じた前記ゲーム演算処理を行うことを特徴とする画像生成システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010134576A JP5213913B2 (ja) | 2010-06-11 | 2010-06-11 | プログラム及び画像生成システム |
US13/157,953 US8520901B2 (en) | 2010-06-11 | 2011-06-10 | Image generation system, image generation method, and information storage medium |
EP11169646.4A EP2394710B1 (en) | 2010-06-11 | 2011-06-10 | Image generation system, image generation method, and information storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010134576A JP5213913B2 (ja) | 2010-06-11 | 2010-06-11 | プログラム及び画像生成システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011258157A true JP2011258157A (ja) | 2011-12-22 |
JP5213913B2 JP5213913B2 (ja) | 2013-06-19 |
Family
ID=45474225
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010134576A Active JP5213913B2 (ja) | 2010-06-11 | 2010-06-11 | プログラム及び画像生成システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5213913B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015060061A (ja) * | 2013-09-18 | 2015-03-30 | 日本コントロールシステム株式会社 | カラオケ装置、画像出力方法、およびプログラム |
JP5694581B1 (ja) * | 2014-01-22 | 2015-04-01 | 株式会社東芝 | 情報処理装置および情報処理方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10207619A (ja) * | 1997-01-22 | 1998-08-07 | Toshiba Corp | ユーザインタフェース装置及び操作範囲呈示方法 |
JP2011189066A (ja) * | 2010-03-16 | 2011-09-29 | Konami Digital Entertainment Co Ltd | ゲーム装置、ゲーム装置の制御方法、及びプログラム |
-
2010
- 2010-06-11 JP JP2010134576A patent/JP5213913B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10207619A (ja) * | 1997-01-22 | 1998-08-07 | Toshiba Corp | ユーザインタフェース装置及び操作範囲呈示方法 |
JP2011189066A (ja) * | 2010-03-16 | 2011-09-29 | Konami Digital Entertainment Co Ltd | ゲーム装置、ゲーム装置の制御方法、及びプログラム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015060061A (ja) * | 2013-09-18 | 2015-03-30 | 日本コントロールシステム株式会社 | カラオケ装置、画像出力方法、およびプログラム |
JP5694581B1 (ja) * | 2014-01-22 | 2015-04-01 | 株式会社東芝 | 情報処理装置および情報処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5213913B2 (ja) | 2013-06-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5148660B2 (ja) | プログラム、情報記憶媒体及び画像生成システム | |
EP2394710B1 (en) | Image generation system, image generation method, and information storage medium | |
US8559677B2 (en) | Image generation system, image generation method, and information storage medium | |
US8655015B2 (en) | Image generation system, image generation method, and information storage medium | |
JP2011258158A (ja) | プログラム、情報記憶媒体及び画像生成システム | |
US10864433B2 (en) | Using a portable device to interact with a virtual space | |
EP2662838B1 (en) | Apparatus and method for augmented reality | |
JP5256269B2 (ja) | データ生成装置、データ生成装置の制御方法、及びプログラム | |
EP2521097B1 (en) | System and Method of Input Processing for Augmented Reality | |
JP5081964B2 (ja) | ゲーム装置、ゲーム装置の制御方法、及びプログラム | |
TWI469813B (zh) | 在動作擷取系統中追踪使用者群組 | |
US20110185309A1 (en) | Gesture-based user interface | |
US20110305398A1 (en) | Image generation system, shape recognition method, and information storage medium | |
US20140068526A1 (en) | Method and apparatus for user interaction | |
US8684837B2 (en) | Information processing program, information processing system, information processing apparatus, and information processing method | |
JP5536510B2 (ja) | プログラム及び画像生成システム | |
JP7089113B2 (ja) | 境界設定装置、境界設定方法及びプログラム | |
JP5213913B2 (ja) | プログラム及び画像生成システム | |
JP6535699B2 (ja) | 情報処理方法、情報処理プログラム及び情報処理装置 | |
JP2012196286A (ja) | ゲーム装置、ゲーム装置の制御方法、及びプログラム | |
JP2022090965A (ja) | ゲームプログラム、ゲーム処理方法、及びゲーム装置 | |
JP2022090964A (ja) | ゲームプログラム、ゲーム処理方法、及びゲーム装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120315 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120717 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120724 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120924 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121113 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130205 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130226 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5213913 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160308 Year of fee payment: 3 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R370 | Written measure of declining of transfer procedure |
Free format text: JAPANESE INTERMEDIATE CODE: R370 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |