JP2022160460A - アニメーション制作システム - Google Patents
アニメーション制作システム Download PDFInfo
- Publication number
- JP2022160460A JP2022160460A JP2022113480A JP2022113480A JP2022160460A JP 2022160460 A JP2022160460 A JP 2022160460A JP 2022113480 A JP2022113480 A JP 2022113480A JP 2022113480 A JP2022113480 A JP 2022113480A JP 2022160460 A JP2022160460 A JP 2022160460A
- Authority
- JP
- Japan
- Prior art keywords
- camera
- production system
- user
- controller
- animation production
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004519 manufacturing process Methods 0.000 title claims abstract description 31
- 238000001514 detection method Methods 0.000 claims abstract description 6
- 238000010586 diagram Methods 0.000 description 15
- 238000012545 processing Methods 0.000 description 8
- 210000003128 head Anatomy 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000013500 data storage Methods 0.000 description 6
- 230000001276 controlling effect Effects 0.000 description 4
- 210000000988 bone and bone Anatomy 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 210000003811 finger Anatomy 0.000 description 2
- 210000004247 hand Anatomy 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 210000003813 thumb Anatomy 0.000 description 2
- 210000004087 cornea Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
仮想空間内に配置されたキャラクタを撮影する仮想的なカメラと、
ユーザが装着したヘッドマウントディスプレイおよびコントローラの少なくともいずれかから前記ユーザの入力を検出するユーザ入力検出部と、
前記入力に応じて前記カメラを制御するカメラ制御部と、
を備えることを特徴とするアニメーション制作システム。
[項目2]
項目1に記載のアニメーション制作システムであって、
前記カメラの撮影方向に平行なスライダをさらに備え、
前記カメラ制御部は、前記入力に応じて前記スライダを動かし、前記スライダの位置に応じて前記カメラのズームを決定すること、
を特徴とするアニメーション制作システム。
[項目3]
項目1に記載のアニメーション制作システムであって、
前記カメラは仮想的なハンドルを備え、
前記仮想空間には、前記カメラを操作する撮影者キャラクタが配置され、
前記カメラ制御部は、前記入力に応じて前記撮影者キャラクタの手の動きを制御し、前記手の動きに応じて前記カメラの位置および撮影方向の少なくともいずれかを設定すること、
を特徴とするアニメーション制作システム。
図1は、本実施形態のアニメーション制作システム300においてユーザが装着するヘッドマウントディスプレイ(HMD)に表示される仮想空間の一例を示す図である。本実施形態のアニメーション制作システム300では、仮想空間1に仮想的なキャラクタ4と仮想的なカメラ3とを配置し、カメラ3を用いてキャラクタ4を撮影する。また、仮想空間1にはカメラマン2(撮影者キャラクタ)が配置され、カメラマン2によりカメラ3が仮想的に操作される。本実施形態のアニメーション制作システム300では、ユーザは、図1に示すように仮想空間1をTPV(Third Person View;三人称視点)で俯瞰しながらキャラクタ4やカメラ3を配置したり、カメラマン2としてFPV(First Person View;一人称視点)でキャラクタ4を撮影したり、FPVでキャラクタ4の演技を行ったりしながら、アニメーションを制作していく。また、仮想空間1内には複数のキャラクタ4(図1の例では、キャラクタ4-1およびキャラクタ4-2)を配置することができ、ユーザは、キャラクタ4に憑依しながら演技を行うことができる。複数のキャラクタ4が配置されている場合には、ユーザは、各キャラクタ4(たとえば、キャラクタ4-1および4-2)に憑依する対象を切り替えることもできる。すなわち、本実施形態のアニメーション制作システム300では、一人が何役もの役割(ロール)を果たすことができる。また、カメラマン2としてカメラ2を仮想的に操作しながら撮影を行うことができるので、自然なカメラワークを実現することが可能となり、撮影される動画の表現を豊かにすることができる。
図2は、本発明の一実施形態に係るアニメーション制作システム300の全体構成例を示す図である。アニメーション制作システム300は、例えば、HMD110、コントローラ210及びホストコンピュータとして機能する画像生成装置310を含んで構成することができる。アニメーション制作システム300には、HMD110やコントローラ210の位置、向き及び傾き等を検出するための赤外線カメラ(図示せず)等を追加することもできる。これらの装置は、相互に、有線又は無線手段により接続することができる。例えば、各々の装置にUSBポートを備え、ケーブルで接続することで通信を確立することもできるし、他に、HDMI、有線LAN、赤外線、Bluetooth(登録商標)、WiFi(登録商標)等の有線又は無線により通信を確立することもできる。画像生成装置310は、PC、ゲーム機、携帯通信端末等、計算処理機能を有する装置であればよい。
図3は、本実施形態に係るHMD110の外観を模式的に示す図である。図4は、本実施形態に係るHMD110の機能構成例を示す図である。
図5は、本実施形態に係るコントローラ210の外観を模式的に示す図である。図6は、本実施形態に係るコントローラ210の機能構成例を示す図である。
図7は、本実施形態に係る画像生成装置310の機能構成例を示す図である。画像生成装置310としては、HMD110やコントローラ210から送信された、ユーザ入力情報やセンサ等により取得されたユーザの頭部動きやコントローラの動きや操作に関する情報を記憶し、所定の計算処理を行い、画像を生成するための機能を有する、PC、ゲーム機及び携帯通信端末等といった装置を使用することができる。画像生成装置310は、例えば、HMD110やコントローラ210等の周辺装置との有線による接続を確立するための入出力部320を備えることができ、赤外線、Bluetooth(登録商標)やWiFi(登録商標)等無線による接続を確立するための通信部330を備えることができる。入出力部320及び/又は通信部330を介して、HMD110及び/又はコントローラ210から受信された、ユーザの頭部の動きやコントローラの動きや操作に関する情報は、制御部340において、ユーザの位置、視線、姿勢等の動作、発話、操作等を含めた入力内容として検出され、ユーザの入力内容に応じて、記憶部350に格納された制御プログラムを実行することで、キャラクタ4の制御を行い、画像を生成するといった処理がなされる。制御部340は、CPUで構成することもできるが、画像処理に特化したGPUをさらに設けることで、情報処理と画像処理を分散化し、全体の処理の効率化を図ることもできる。画像生成装置310はまた、他の計算処理装置と通信を行い、他の計算処理装置に情報処理や画像処理を分担させることもできる。
図8は、本実施形態に係るアニメーション制作システム300におけるカメラマン2によるカメラ3の操作を説明する図である。図8では、ユーザの憑依対象(操作対象)がカメラマン2に設定されていることを想定している。
図9は、本実施形態に係るアニメーション制作システム300の動作を説明する図である。なお、図9に示す動作は、録画中であろうとなかろうと実行することができる。
2 カメラマン
3 カメラ
4 キャラクタ
110 HMD
120 表示パネル
130 筐体部
140 センサ
150 光源
210 コントローラ
220 左手用コントローラ
230 右手用コントローラ
235 グリップ
240 トリガーボタン
250 赤外線LED
260 センサ
270 ジョイスティック
280 メニューボタン
300 アニメーション制作システム
310 画像生成装置
320 入出力部
330 通信部
340 制御部
350 記憶部
410 ユーザ入力検出部
420 キャラクタ制御部
430 画像生成部
440 カメラ制御部
450 キャラクタデータ格納部
460 プログラム格納部
470 画像データ格納部
510 ハンドル
520 表示部
530 レール
540 スライダ
550 録画ボタン
Claims (3)
- 仮想空間内に配置されたキャラクタを撮影する仮想的なカメラと、
ユーザが装着したヘッドマウントディスプレイおよびコントローラの少なくともいずれかから前記ユーザの入力を検出するユーザ入力検出部と、
前記入力に応じて前記カメラを制御するカメラ制御部と、
を備えることを特徴とするアニメーション制作システム。 - 請求項1に記載のアニメーション制作システムであって、
前記カメラの撮影方向に平行なスライダをさらに備え、
前記カメラ制御部は、前記入力に応じて前記スライダを動かし、前記スライダの位置に応じて前記カメラのズームを決定すること、
を特徴とするアニメーション制作システム。 - 請求項1に記載のアニメーション制作システムであって、
前記カメラは仮想的なハンドルを備え、
前記仮想空間には、前記カメラを操作する撮影者キャラクタが配置され、
前記カメラ制御部は、前記入力に応じて前記撮影者キャラクタの手の動きを制御し、前記手の動きに応じて前記カメラの位置および撮影方向の少なくともいずれかを設定すること、
を特徴とするアニメーション制作システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022113480A JP2022160460A (ja) | 2019-09-24 | 2022-07-14 | アニメーション制作システム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/037408 WO2021059356A1 (ja) | 2019-09-24 | 2019-09-24 | アニメーション制作システム |
JP2020541624A JP7115698B2 (ja) | 2019-09-24 | 2019-09-24 | アニメーション制作システム |
JP2022113480A JP2022160460A (ja) | 2019-09-24 | 2022-07-14 | アニメーション制作システム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020541624A Division JP7115698B2 (ja) | 2019-09-24 | 2019-09-24 | アニメーション制作システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022160460A true JP2022160460A (ja) | 2022-10-19 |
JP2022160460A5 JP2022160460A5 (ja) | 2023-08-15 |
Family
ID=75165179
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020541624A Active JP7115698B2 (ja) | 2019-09-24 | 2019-09-24 | アニメーション制作システム |
JP2022113480A Pending JP2022160460A (ja) | 2019-09-24 | 2022-07-14 | アニメーション制作システム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020541624A Active JP7115698B2 (ja) | 2019-09-24 | 2019-09-24 | アニメーション制作システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220358702A1 (ja) |
JP (2) | JP7115698B2 (ja) |
WO (1) | WO2021059356A1 (ja) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018190335A (ja) * | 2017-05-11 | 2018-11-29 | 株式会社コロプラ | 仮想空間を提供するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS59153346A (ja) * | 1983-02-21 | 1984-09-01 | Nec Corp | 音声符号化・復号化装置 |
US10712837B1 (en) * | 2018-07-30 | 2020-07-14 | David Douglas | Using geo-registered tools to manipulate three-dimensional medical images |
JP6526898B1 (ja) * | 2018-11-20 | 2019-06-05 | グリー株式会社 | 動画配信システム、動画配信方法、及び動画配信プログラム |
-
2019
- 2019-09-24 WO PCT/JP2019/037408 patent/WO2021059356A1/ja active Application Filing
- 2019-09-24 US US16/977,055 patent/US20220358702A1/en not_active Abandoned
- 2019-09-24 JP JP2020541624A patent/JP7115698B2/ja active Active
-
2022
- 2022-07-14 JP JP2022113480A patent/JP2022160460A/ja active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018190335A (ja) * | 2017-05-11 | 2018-11-29 | 株式会社コロプラ | 仮想空間を提供するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 |
Non-Patent Citations (1)
Title |
---|
"[Unite 2017 Tokyo] VR MAGIC! 〜キャラクターに命を吹き込んだこの4年間 の記録〜", YOUTUBE [ONLINE] [VIDEO], JPN7021004666, 30 May 2017 (2017-05-30), ISSN: 0005191376 * |
Also Published As
Publication number | Publication date |
---|---|
JP7115698B2 (ja) | 2022-08-09 |
US20220358702A1 (en) | 2022-11-10 |
JPWO2021059356A1 (ja) | 2021-10-07 |
WO2021059356A1 (ja) | 2021-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7390541B2 (ja) | アニメーション制作システム | |
JP7454818B2 (ja) | アニメーション制作方法 | |
JP2023116432A (ja) | アニメーション制作システム | |
US20220035154A1 (en) | Animation production system | |
JP6964302B2 (ja) | アニメーション制作方法 | |
JP2022153476A (ja) | アニメーション制作システム | |
JP2022153479A (ja) | アニメーション制作システム | |
JP2022153478A (ja) | アニメーション制作システム | |
JP7115698B2 (ja) | アニメーション制作システム | |
JP7218872B2 (ja) | アニメーション制作システム | |
JP7218873B2 (ja) | アニメーション制作システム | |
JP7390542B2 (ja) | アニメーション制作システム | |
JP2023055752A (ja) | アニメーション制作システム | |
JP2022025475A (ja) | アニメーション制作システム | |
JP2022025473A (ja) | 動画配信方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220926 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20230123 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230327 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230525 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230804 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20240109 Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240109 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20240308 |