JP7458731B2 - 画像生成システム、画像処理装置、情報処理装置、画像生成方法、及びプログラム - Google Patents
画像生成システム、画像処理装置、情報処理装置、画像生成方法、及びプログラム Download PDFInfo
- Publication number
- JP7458731B2 JP7458731B2 JP2019179295A JP2019179295A JP7458731B2 JP 7458731 B2 JP7458731 B2 JP 7458731B2 JP 2019179295 A JP2019179295 A JP 2019179295A JP 2019179295 A JP2019179295 A JP 2019179295A JP 7458731 B2 JP7458731 B2 JP 7458731B2
- Authority
- JP
- Japan
- Prior art keywords
- subject
- information
- image
- processing device
- virtual viewpoint
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 23
- 238000000034 method Methods 0.000 title claims description 8
- 238000004891 communication Methods 0.000 claims description 19
- 230000005540 biological transmission Effects 0.000 claims description 7
- 238000003384 imaging method Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 23
- 238000013500 data storage Methods 0.000 description 8
- 210000002683 foot Anatomy 0.000 description 7
- 230000004044 response Effects 0.000 description 4
- 239000013589 supplement Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 210000003371 toe Anatomy 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- Closed-Circuit Television Systems (AREA)
Description
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
2014 被写体情報生成部
2016 仮想視点映像生成部
2017 仮想視点映像出力部
202 情報処理装置
2022 カメラパス生成部
Claims (12)
- 仮想視点の移動経路に関する情報を生成する情報処理装置と、
複数の撮影装置により撮影された画像及び前記仮想視点の移動経路に基づいて仮想視点画像を生成する画像処理装置と
を備え、
前記画像処理装置は、
前記複数の撮影装置のうちの少なくとも一つの撮影装置により撮影された画像に基づいて、撮影対象領域に存在する被写体の位置を示す情報、及び前記被写体の向きを示す情報を少なくとも含む被写体情報を生成する第1の生成手段と、
前記第1の生成手段により生成された前記被写体情報を前記情報処理装置へ送信する第1の送信手段と、
前記情報処理装置から送信された前記仮想視点の移動経路に関する情報に基づいて、仮想視点画像を生成する第2の生成手段と、
を有し、
前記情報処理装置は、
前記画像処理装置から送信された前記被写体情報に基づいて、前記撮影対象領域における前記被写体の位置及び向きをユーザが認識することが可能な表示画像を表示する表示手段と、
ユーザの入力に基づいて、前記仮想視点の移動経路に関する情報を生成する第3の生成手段と、
前記第3の生成手段により生成された前記仮想視点の移動経路に関する情報を前記画像処理装置へ送信する第2の送信手段と、
を有することを特徴とする画像生成システム。 - 前記第3の生成手段は、前記表示手段により表示された前記表示画像を確認したユーザによる入力に基づいて、前記仮想視点の移動経路に関する情報を生成することを特徴とする請求項1に記載の画像生成システム。
- 前記第1の生成手段は、前記被写体の位置及び向きを示す情報に加えて、少なくとも前記被写体の個別情報を含む前記被写体情報を生成し、
前記表示手段は、前記被写体情報に基づいて、前記撮影対象領域における前記被写体の位置及び向きに加えて、前記被写体の個別情報をユーザが認識することが可能な前記表示画像を表示することを特徴とする請求項1又は2に記載の画像生成システム。 - 前記情報処理装置は、
前記被写体の個別情報に関する情報を取得する取得手段と、
前記被写体情報と、前記取得手段により取得された前記被写体の個別情報に関する情報に基づいて、前記表示画像を生成する生成手段と、
をさらに有し、
前記表示手段は、前記生成手段により生成された前記表示画像を表示することを特徴とする請求項3に記載の画像生成システム。 - 前記情報処理装置は、
前記被写体を模式的に示す画像のデータを取得する取得手段と、
前記被写体情報と、前記取得手段により取得された前記被写体を模式的に示す画像のデータに基づいて、前記表示画像を生成する生成手段と、
をさらに有し、
前記表示手段は、前記生成手段により生成された前記表示画像を表示することを特徴とする請求項3または4に記載の画像生成システム。 - 前記第1の送信手段は、前記情報処理装置と接続するための所定の通信回線のデータ伝送帯域に応じて、送信するデータ量を調整することを特徴とする請求項1から5のいずれか1項に記載の画像生成システム。
- 前記第1の送信手段は、ユーザの課金条件に応じて、前記情報処理装置と接続するための所定の通信回線において送信するデータ量を調整することを特徴とする請求項1から5のいずれか1項に記載の画像生成システム。
- 前記情報処理装置は、前記第2の送信手段により、前記画像処理装置に前記仮想視点画像の生成に関するリクエストを送信し、
前記画像処理装置は、前記リクエストに基づいて、前記第1の生成手段により前記被写体情報を生成することを特徴とする請求項1から7のいずれか1項に記載の画像生成システム。 - 前記仮想視点の移動経路に関する情報は、前記仮想視点の位置及び前記仮想視点からの視線方向を示す情報を含むことを特徴とする請求項1から8のいずれか1項に記載の画像生成システム。
- 前記第1の生成手段は、前記被写体の位置及び向きを示す情報に加えて、少なくとも前記被写体の大きさを示す情報を含む前記被写体情報を生成し、
前記表示手段は、前記被写体情報に基づいて、前記撮影対象領域における前記被写体の位置及び向きに加えて、前記被写体の大きさをユーザが認識することが可能な前記表示画像を表示することを特徴とする請求項1から9のいずれか1項に記載の画像生成システム。 - 前記被写体情報は、前記被写体の大きさを示す情報と、前記被写体の個別情報と、前記被写体の関節位置を示す情報とを含み得るものであって、
前記第1の送信手段は、ユーザの課金条件に応じて、前記被写体情報に含まれる前記被写体の大きさを示す情報と、前記被写体の個別情報と、前記被写体の関節位置を示す情報との少なくとも何れかを選択し、選択した情報を含む前記被写体情報を前記情報処理装置へ送信することを特徴とする請求項1に記載の画像生成システム。 - 仮想視点の移動経路に関する情報を生成する情報処理装置と、複数の撮影装置により撮影された画像及び前記仮想視点の移動経路に基づいて仮想視点画像を生成する画像処理装置とを備えた画像生成方法であって、
前記画像処理装置により、前記複数の撮影装置のうちの少なくとも一つの撮影装置により撮影された画像に基づいて、撮影対象領域に存在する被写体の位置を示す情報、及び前記被写体の向きを示す情報を少なくとも含む被写体情報を生成する第1の生成ステップと、
前記画像処理装置により、前記第1の生成ステップにおいて生成された前記被写体情報を前記情報処理装置へ送信する第1の送信ステップと、
前記情報処理装置により、前記画像処理装置から送信された前記被写体情報に基づいて、前記撮影対象領域における前記被写体の位置及び向きをユーザが認識することが可能な表示画像を表示する表示ステップと、
前記情報処理装置により、ユーザの入力に基づいて、前記仮想視点の移動経路に関する情報を生成する第2の生成ステップと、
前記情報処理装置により、前記第2の生成ステップにおいて生成された前記仮想視点の移動経路に関する情報を前記画像処理装置へ送信する第2の送信ステップと、
前記画像処理装置により、前記情報処理装置から送信された前記仮想視点の移動経路に関する情報に基づいて、仮想視点画像を生成する第3の生成ステップと、
を含むことを特徴とする画像生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019179295A JP7458731B2 (ja) | 2019-09-30 | 2019-09-30 | 画像生成システム、画像処理装置、情報処理装置、画像生成方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019179295A JP7458731B2 (ja) | 2019-09-30 | 2019-09-30 | 画像生成システム、画像処理装置、情報処理装置、画像生成方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021056767A JP2021056767A (ja) | 2021-04-08 |
JP7458731B2 true JP7458731B2 (ja) | 2024-04-01 |
Family
ID=75270835
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019179295A Active JP7458731B2 (ja) | 2019-09-30 | 2019-09-30 | 画像生成システム、画像処理装置、情報処理装置、画像生成方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7458731B2 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016025633A (ja) | 2014-07-24 | 2016-02-08 | ソニー株式会社 | 情報処理装置、管理装置、情報処理方法、およびプログラム |
JP2018046448A (ja) | 2016-09-15 | 2018-03-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2018207336A (ja) | 2017-06-06 | 2018-12-27 | キヤノン株式会社 | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
JP2019057070A (ja) | 2017-09-20 | 2019-04-11 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびプログラム |
JP2019152903A (ja) | 2018-02-28 | 2019-09-12 | キヤノン株式会社 | 情報処理装置およびその制御方法 |
JP2018113683A5 (ja) | 2017-12-22 | 2021-02-12 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7073092B2 (ja) | 2017-01-06 | 2022-05-23 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
-
2019
- 2019-09-30 JP JP2019179295A patent/JP7458731B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016025633A (ja) | 2014-07-24 | 2016-02-08 | ソニー株式会社 | 情報処理装置、管理装置、情報処理方法、およびプログラム |
JP2018046448A (ja) | 2016-09-15 | 2018-03-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2018207336A (ja) | 2017-06-06 | 2018-12-27 | キヤノン株式会社 | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
JP2019057070A (ja) | 2017-09-20 | 2019-04-11 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびプログラム |
JP2018113683A5 (ja) | 2017-12-22 | 2021-02-12 | ||
JP2019152903A (ja) | 2018-02-28 | 2019-09-12 | キヤノン株式会社 | 情報処理装置およびその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2021056767A (ja) | 2021-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10574889B2 (en) | Information processing device, information processing method, and program | |
US9947139B2 (en) | Method and apparatus for providing hybrid reality environment | |
US8933965B2 (en) | Method for calculating light source information and generating images combining real and virtual images | |
JP6918455B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
US20200097732A1 (en) | Markerless Human Movement Tracking in Virtual Simulation | |
US11627251B2 (en) | Image processing apparatus and control method thereof, computer-readable storage medium | |
US9392248B2 (en) | Dynamic POV composite 3D video system | |
JP2002058045A (ja) | 現実の物体をバーチャル3次元空間に登場させるためのシステム及び方法 | |
US10896322B2 (en) | Information processing device, information processing system, facial image output method, and program | |
JP2019159950A (ja) | 情報処理装置および情報処理方法 | |
CN111862348B (zh) | 视频显示方法、视频生成方法、装置、设备及存储介质 | |
US10386633B2 (en) | Virtual object display system, and display control method and display control program for the same | |
JP2020086983A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
EP4058870A1 (en) | Co-located pose estimation in a shared artificial reality environment | |
JP2019046291A (ja) | 情報処理装置および画像表示方法 | |
JP2020042407A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2021056900A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6775669B2 (ja) | 情報処理装置 | |
JP7401199B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP7458731B2 (ja) | 画像生成システム、画像処理装置、情報処理装置、画像生成方法、及びプログラム | |
JP2022073651A (ja) | 情報処理装置、情報処理方法およびプログラム | |
CN211180839U (zh) | 一种运动教学设备和运动教学系统 | |
JP6684336B1 (ja) | データ補正装置およびプログラム | |
CN105426039A (zh) | 一种推送进场图像的方法和装置 | |
JP2022171436A (ja) | 情報処理装置、情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220921 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231019 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231228 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240220 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240319 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7458731 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |