JPWO2021059357A1 - アニメーション制作システム - Google Patents
アニメーション制作システム Download PDFInfo
- Publication number
- JPWO2021059357A1 JPWO2021059357A1 JP2020541603A JP2020541603A JPWO2021059357A1 JP WO2021059357 A1 JPWO2021059357 A1 JP WO2021059357A1 JP 2020541603 A JP2020541603 A JP 2020541603A JP 2020541603 A JP2020541603 A JP 2020541603A JP WO2021059357 A1 JPWO2021059357 A1 JP WO2021059357A1
- Authority
- JP
- Japan
- Prior art keywords
- camera
- character
- user
- production system
- controller
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004519 manufacturing process Methods 0.000 title claims abstract description 30
- 230000004044 response Effects 0.000 claims abstract description 7
- 238000001514 detection method Methods 0.000 claims abstract description 6
- 238000013500 data storage Methods 0.000 claims description 14
- 238000010586 diagram Methods 0.000 abstract description 11
- 210000003128 head Anatomy 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 240000004050 Pentaglottis sempervirens Species 0.000 description 5
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 5
- 210000000988 bone and bone Anatomy 0.000 description 5
- 238000000034 method Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 210000003811 finger Anatomy 0.000 description 4
- 238000003825 pressing Methods 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 210000003813 thumb Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 210000004087 cornea Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
仮想空間内に配置されたキャラクタを撮影する複数の仮想的なカメラと、
ユーザが装着したヘッドマウントディスプレイおよびコントローラの少なくともいずれかから前記ユーザの入力を検出するユーザ入力検出部と、
操作対象の前記カメラの選択を受け付け、前記入力に応じて、選択された前記カメラの制御を行うカメラ制御部と、
を備えることを特徴とするアニメーション制作システム。
[項目2]
項目1に記載のアニメーション制作システムであって、
前記仮想空間内におけるキャラクタの動作を記憶する画像データ格納部をさらに備え、
前記カメラ制御部は、前記キャラクタの前記動作を再生させながら、前記カメラの制御を行うこと、
を特徴とするアニメーション制作システム。
[項目3]
項目2に記載のアニメーション制作システムであって、
操作対象の前記キャラクタの選択を受け付け、前記入力に応じて、選択された前記キャラクタを制御するキャラクタ制御部と、
前記キャラクタの動作を前記画像データ記憶部に登録する画像生成部と、
をさらに備えることを特徴とするアニメーション制作システム。
図1は、本実施形態のアニメーション制作システム300においてユーザが装着するヘッドマウントディスプレイ(HMD)に表示される仮想空間の一例を示す図である。本実施形態のアニメーション制作システム300は、仮想空間1に仮想的なキャラクタ4と仮想的なカメラ3とを配置し、カメラ3を用いてキャラクタ4を撮影することによりアニメーションを制作しようとするものである。
図2は、本発明の一実施形態に係るアニメーション制作システム300の全体構成例を示す図である。アニメーション制作システム300は、例えば、HMD110、コントローラ210及びホストコンピュータとして機能する画像生成装置310を含んで構成することができる。アニメーション制作システム300には、HMD110やコントローラ210の位置、向き及び傾き等を検出するための赤外線カメラ(図示せず)等を追加することもできる。これらの装置は、相互に、有線又は無線手段により接続することができる。例えば、各々の装置にUSBポートを備え、ケーブルで接続することで通信を確立することもできるし、他に、HDMI、有線LAN、赤外線、Bluetooth(登録商標)、WiFi(登録商標)等の有線又は無線により通信を確立することもできる。画像生成装置310は、PC、ゲーム機、携帯通信端末等、計算処理機能を有する装置であればよい。
図3は、本実施形態に係るHMD110の外観を模式的に示す図である。図4は、本実施形態に係るHMD110の機能構成例を示す図である。
図5は、本実施形態に係るコントローラ210の外観を模式的に示す図である。図6は、本実施形態に係るコントローラ210の機能構成例を示す図である。
図7は、本実施形態に係る画像生成装置310の機能構成例を示す図である。画像生成装置310としては、HMD110やコントローラ210から送信された、ユーザ入力情報やセンサ等により取得されたユーザの頭部動きやコントローラの動きや操作に関する情報を記憶し、所定の計算処理を行い、画像を生成するための機能を有する、PC、ゲーム機及び携帯通信端末等といった装置を使用することができる。画像生成装置310は、例えば、HMD110やコントローラ210等の周辺装置との有線による接続を確立するための入出力部320を備えることができ、赤外線、Bluetooth(登録商標)やWiFi(登録商標)等無線による接続を確立するための通信部330を備えることができる。入出力部320及び/又は通信部330を介して、HMD110及び/又はコントローラ210から受信された、ユーザの頭部の動きやコントローラの動きや操作に関する情報は、制御部340において、ユーザの位置、視線、姿勢等の動作、発話、操作等を含めた入力内容として検出され、ユーザの入力内容に応じて、記憶部350に格納された制御プログラムを実行することで、キャラクタ4の制御を行い、画像を生成するといった処理がなされる。制御部340は、CPUで構成することもできるが、画像処理に特化したGPUをさらに設けることで、情報処理と画像処理を分散化し、全体の処理の効率化を図ることもできる。画像生成装置310はまた、他の計算処理装置と通信を行い、他の計算処理装置に情報処理や画像処理を分担させることもできる。
アニメーション制作システム300の制御モードは、モード制御部480により設定される。なお、起動時は俯瞰モードとすることができる。また、起動時にはメニュー画面等を表示するようにしてもよい。ユーザは、制御パネル6を操作することにより、制御モードを変更することができる。図1に示すように、制御パネル6は仮想空間1に配置される。制御パネル6は、ユーザの操作により自由な位置に配置することができる。ユーザが、たとえば、指を制御パネル6の端部近傍に移動させてトリガーボタン240を押下して制御パネル6をつまみながらコントローラ210を移動させることにより、モード制御部480は、コントローラ210の移動に応じて制御パネル6を移動させることができる。制御パネル6は、キャラクタ4に憑依したユーザ(演者)からも、カメラマン2からも俯瞰視点でも、いつでも見やすい位置に置くことが好適である。これにより、ユーザはキャラクタ4に憑依した際には制御パネル6を見ながら演技してプレビューを確認できたり、俯瞰視点で背景セットを配置する時には、カメラ3に対して背景がどう見えてるかを確認しながら設置することができる。
図8は、本実施形態に係るカメラ3の撮影状況を説明する図である。図8では、ユーザの憑依対象(操作対象)がカメラマン2に設定されていることを想定している。
2 カメラマン
3 カメラ
4 キャラクタ
6 制御パネル
61 モード切替ボタン
62 カメラ画像表示部
63 カメラ切替ボタン
110 HMD
120 表示パネル
130 筐体部
140 センサ
150 光源
210 コントローラ
220 左手用コントローラ
230 右手用コントローラ
235 グリップ
240 トリガーボタン
250 赤外線LED
260 センサ
270 ジョイスティック
280 メニューボタン
300 アニメーション制作システム
310 画像生成装置
320 入出力部
330 通信部
340 制御部
350 記憶部
410 ユーザ入力検出部
420 キャラクタ制御部
430 画像生成部
440 カメラ制御部
450 キャラクタデータ格納部
460 プログラム格納部
470 画像データ格納部
480 モード制御部
510 ハンドル
520 表示部
530 レール
540 スライダ
550 録画ボタン
Claims (3)
- 仮想空間内に配置されたキャラクタを撮影する複数の仮想的なカメラと、
ユーザが装着したヘッドマウントディスプレイおよびコントローラの少なくともいずれかから前記ユーザの入力を検出するユーザ入力検出部と、
操作対象の前記カメラの選択を受け付け、前記入力に応じて、選択された前記カメラの制御を行うカメラ制御部と、
を備えることを特徴とするアニメーション制作システム。 - 請求項1に記載のアニメーション制作システムであって、
前記仮想空間内におけるキャラクタの動作を記憶する画像データ格納部をさらに備え、
前記カメラ制御部は、前記キャラクタの前記動作を再生させながら、前記カメラの制御を行うこと、
を特徴とするアニメーション制作システム。 - 請求項2に記載のアニメーション制作システムであって、
操作対象の前記キャラクタの選択を受け付け、前記入力に応じて、選択された前記キャラクタを制御するキャラクタ制御部と、
前記キャラクタの動作を前記画像データ記憶部に登録する画像生成部と、
をさらに備えることを特徴とするアニメーション制作システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023005876A JP2023052472A (ja) | 2019-09-24 | 2023-01-18 | アニメーション制作システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/037409 WO2021059357A1 (ja) | 2019-09-24 | 2019-09-24 | アニメーション制作システム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023005876A Division JP2023052472A (ja) | 2019-09-24 | 2023-01-18 | アニメーション制作システム |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021059357A1 true JPWO2021059357A1 (ja) | 2021-10-07 |
JP7218872B2 JP7218872B2 (ja) | 2023-02-07 |
JP7218872B6 JP7218872B6 (ja) | 2023-12-11 |
Family
ID=75165223
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020541603A Active JP7218872B6 (ja) | 2019-09-24 | 2019-09-24 | アニメーション制作システム |
JP2023005876A Pending JP2023052472A (ja) | 2019-09-24 | 2023-01-18 | アニメーション制作システム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023005876A Pending JP2023052472A (ja) | 2019-09-24 | 2023-01-18 | アニメーション制作システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220351440A1 (ja) |
JP (2) | JP7218872B6 (ja) |
WO (1) | WO2021059357A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018195177A (ja) * | 2017-05-19 | 2018-12-06 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
JP6481057B1 (ja) * | 2018-02-02 | 2019-03-13 | 株式会社エクシヴィ | 仮想空間におけるキャラクタの制御方法 |
-
2019
- 2019-09-24 WO PCT/JP2019/037409 patent/WO2021059357A1/ja active Application Filing
- 2019-09-24 JP JP2020541603A patent/JP7218872B6/ja active Active
- 2019-09-24 US US16/977,057 patent/US20220351440A1/en not_active Abandoned
-
2023
- 2023-01-18 JP JP2023005876A patent/JP2023052472A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018195177A (ja) * | 2017-05-19 | 2018-12-06 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
JP6481057B1 (ja) * | 2018-02-02 | 2019-03-13 | 株式会社エクシヴィ | 仮想空間におけるキャラクタの制御方法 |
Non-Patent Citations (1)
Title |
---|
KURE: "【体験レポ】誰でも簡単に映像制作ができる『映画ツクール』", MOGURAVR [ONLINE], JPN7022002800, 8 June 2017 (2017-06-08), JP, ISSN: 0004801141 * |
Also Published As
Publication number | Publication date |
---|---|
WO2021059357A1 (ja) | 2021-04-01 |
JP7218872B6 (ja) | 2023-12-11 |
US20220351440A1 (en) | 2022-11-03 |
JP7218872B2 (ja) | 2023-02-07 |
JP2023052472A (ja) | 2023-04-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7390541B2 (ja) | アニメーション制作システム | |
JP7454818B2 (ja) | アニメーション制作方法 | |
JP2023116432A (ja) | アニメーション制作システム | |
JP6964302B2 (ja) | アニメーション制作方法 | |
JP2022025467A (ja) | アニメーション制作システム | |
JP2022153476A (ja) | アニメーション制作システム | |
JP6955725B2 (ja) | アニメーション制作システム | |
JP2022025463A (ja) | アニメーション制作システム | |
JP7218872B2 (ja) | アニメーション制作システム | |
JP2022025476A (ja) | アニメーション制作システム | |
JP7218873B6 (ja) | アニメーション制作システム | |
JP7115698B2 (ja) | アニメーション制作システム | |
JP7390542B2 (ja) | アニメーション制作システム | |
JP2022025473A (ja) | 動画配信方法 | |
JP2022025469A (ja) | アニメーション制作システム | |
JP2022025475A (ja) | アニメーション制作システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200828 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211104 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20211228 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220303 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220616 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220815 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221222 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230118 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20230123 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7218872 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20230124 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230425 |
|
R154 | Certificate of patent or utility model (reissue) |
Free format text: JAPANESE INTERMEDIATE CODE: R154 |