JP2019159594A - 生成装置、生成方法、及びプログラム - Google Patents
生成装置、生成方法、及びプログラム Download PDFInfo
- Publication number
- JP2019159594A JP2019159594A JP2018043459A JP2018043459A JP2019159594A JP 2019159594 A JP2019159594 A JP 2019159594A JP 2018043459 A JP2018043459 A JP 2018043459A JP 2018043459 A JP2018043459 A JP 2018043459A JP 2019159594 A JP2019159594 A JP 2019159594A
- Authority
- JP
- Japan
- Prior art keywords
- virtual viewpoint
- video data
- media file
- parameter
- viewpoint video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/51—Indexing; Data structures therefor; Storage structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/189—Recording image signals; Reproducing recorded image signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/116—Details of conversion of file system types or formats
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/21—Intermediate information storage
- H04N1/2104—Intermediate information storage for one or a few pictures
- H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/21—Intermediate information storage
- H04N1/2104—Intermediate information storage for one or a few pictures
- H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
- H04N1/2125—Display of information relating to the still picture recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N1/32128—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
Abstract
Description
[第1実施形態]
図8には、仮想視点の軌跡(図中の破線の矢印線801)を仮想視点映像に重ねて表示した場合の表示例が示されている。例えば、仮想視点パラメータ付与部105が、第二の仮想視点映像データ130、すなわち仮想視点パラメータが付与された仮想視点映像データを、不図示の表示装置に出力する。そして、不図示の表示装置が、仮想視点映像データによって示される仮想視点映像を表示する際に、該仮想視点映像データに付与された仮想視点パラメータに基づき、仮想視点の軌跡801を仮想視点映像に重ねて表示する。それにより、図8に示されるような仮想視点映像の表示を行うことが可能となる。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
104 仮想視点映像生成部
105 仮想視点パラメータ付与部
Claims (11)
- 複数のカメラでオブジェクトを複数の方向から撮影した画像データに基づいて生成される仮想視点映像データを格納したメディアファイルを生成する生成装置であって、
仮想視点映像データの生成に使用される仮想視点パラメータを取得する取得手段と、
前記取得手段により取得された仮想視点パラメータと、該仮想視点パラメータに基づいて生成された仮想視点映像データと、を格納したメディアファイルを生成する生成手段と、を有する
ことを特徴とする生成装置。 - 前記取得手段は、
仮想視点映像データが複数のフレームからなる場合には、各フレームに対応する仮想視点パラメータをそれぞれ取得する
ことを特徴とする請求項1に記載の生成装置。 - 前記メディアファイルは、静止画フォーマットのファイルであり、
前記生成手段は、
前記取得手段により取得された仮想視点パラメータを、前記メディアファイルのメタデータの領域に格納する
ことを特徴とする請求項1または請求項2に記載の生成装置。 - 前記静止画フォーマットは、Exifであり、
前記取得手段により取得された仮想視点パラメータは、前記メディアファイルのメタデータの領域のうち、Exif規格で定義されるIFD領域に格納される
ことを特徴とする請求項3に記載の生成装置。 - 前記静止画フォーマットは、Exifであり、
前記取得手段により取得された仮想視点パラメータは、前記メディアファイルのメタデータの領域のうち、Exif規格で定義されていないAPPnマーカセグメントに格納される
ことを特徴とする請求項3に記載の生成装置。 - 前記メディアファイルは、動画フォーマットのファイルであり、
前記生成手段は、
前記各フレームに対応する仮想視点パラメータを、前記メディアファイルのヘッダ領域に格納する
ことを特徴とする請求項2に記載の生成装置。 - 前記メディアファイルは、動画フォーマットのファイルであり、
前記生成手段は、
前記各フレームに対応する仮想視点映像データ及び仮想視点パラメータを、フレームの時系列順に前記メディアファイルに格納する
ことを特徴とする請求項2に記載の生成装置。 - 前記動画フォーマットは、Ogg Vorbisである
ことを特徴とする請求項6または請求項7に記載の生成装置。 - 前記仮想視点パラメータは、仮想視点の位置、姿勢、及び画角情報のうちのいずれか1つ以上を含む
ことを特徴とする請求項1から請求項8のうちのいずれか1項に記載の生成装置。 - 複数のカメラでオブジェクトを複数の方向から撮影した画像データに基づいて生成される仮想視点映像データを格納したメディアファイルを生成する生成方法であって、
仮想視点映像データの生成に使用される仮想視点パラメータを取得し、
前記取得された仮想視点パラメータと、該仮想視点パラメータに基づいて生成された仮想視点映像データと、を格納したメディアファイルを生成することを特徴とする生成方法。 - コンピュータを、請求項1から請求項9のうちのいずれか1項に記載の生成装置として機能させるためのプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018043459A JP7140517B2 (ja) | 2018-03-09 | 2018-03-09 | 生成装置、生成装置が行う生成方法、及びプログラム |
PCT/JP2018/048468 WO2019171733A1 (ja) | 2018-03-09 | 2018-12-28 | 生成装置、生成方法、及びプログラム |
US17/011,579 US11451759B2 (en) | 2018-03-09 | 2020-09-03 | Generation apparatus, generation method, and storage medium |
US17/889,429 US20220394230A1 (en) | 2018-03-09 | 2022-08-17 | Generation apparatus, generation method, and storage medium |
JP2022140511A JP7459195B2 (ja) | 2018-03-09 | 2022-09-05 | 生成装置、生成方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018043459A JP7140517B2 (ja) | 2018-03-09 | 2018-03-09 | 生成装置、生成装置が行う生成方法、及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022140511A Division JP7459195B2 (ja) | 2018-03-09 | 2022-09-05 | 生成装置、生成方法、及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2019159594A true JP2019159594A (ja) | 2019-09-19 |
JP2019159594A5 JP2019159594A5 (ja) | 2021-04-22 |
JP7140517B2 JP7140517B2 (ja) | 2022-09-21 |
Family
ID=67846029
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018043459A Active JP7140517B2 (ja) | 2018-03-09 | 2018-03-09 | 生成装置、生成装置が行う生成方法、及びプログラム |
JP2022140511A Active JP7459195B2 (ja) | 2018-03-09 | 2022-09-05 | 生成装置、生成方法、及びプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022140511A Active JP7459195B2 (ja) | 2018-03-09 | 2022-09-05 | 生成装置、生成方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (2) | US11451759B2 (ja) |
JP (2) | JP7140517B2 (ja) |
WO (1) | WO2019171733A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022090786A (ja) | 2020-12-08 | 2022-06-20 | キヤノン株式会社 | 情報処理装置、画像生成装置、画像処理システム、情報処理方法、画像生成方法及びプログラム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003242043A (ja) * | 2002-02-15 | 2003-08-29 | Oki Electric Ind Co Ltd | 再生装置およびデータ管理システムにおけるコンテンツ管理方法 |
WO2011136191A1 (ja) * | 2010-04-28 | 2011-11-03 | 富士フイルム株式会社 | 立体画像再生装置及び方法、立体撮像装置、立体ディスプレイ装置 |
WO2012105121A1 (ja) * | 2011-02-03 | 2012-08-09 | 富士フイルム株式会社 | 立体動画再生装置、立体動画再生プログラムならびにその記録媒体、立体ディスプレイ装置、立体撮像装置及び立体動画再生方法 |
JP2013172456A (ja) * | 2012-02-17 | 2013-09-02 | Samsung Electronics Co Ltd | マルチメディアコンテンツのフレーム検索方法及び装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100977193B1 (ko) * | 2002-04-25 | 2010-08-20 | 샤프 가부시키가이샤 | 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상데이터 기록 매체 |
JP4052331B2 (ja) * | 2003-06-20 | 2008-02-27 | 日本電信電話株式会社 | 仮想視点画像生成方法及び3次元画像表示方法並びに装置 |
JP2007150747A (ja) * | 2005-11-28 | 2007-06-14 | Matsushita Electric Ind Co Ltd | 受信装置及び本線映像配信装置 |
US20100223259A1 (en) * | 2007-10-05 | 2010-09-02 | Aharon Ronen Mizrahi | System and method for enabling search of content |
US8786596B2 (en) * | 2008-07-23 | 2014-07-22 | Disney Enterprises, Inc. | View point representation for 3-D scenes |
JP4737573B2 (ja) | 2009-02-05 | 2011-08-03 | 富士フイルム株式会社 | 3次元画像出力装置及び方法 |
KR101926477B1 (ko) * | 2011-07-18 | 2018-12-11 | 삼성전자 주식회사 | 콘텐츠 재생 방법 및 장치 |
JP2014215828A (ja) | 2013-04-25 | 2014-11-17 | シャープ株式会社 | 画像データ再生装置、および視点情報生成装置 |
WO2016167160A1 (ja) | 2015-04-17 | 2016-10-20 | シャープ株式会社 | データ生成装置および再生装置 |
-
2018
- 2018-03-09 JP JP2018043459A patent/JP7140517B2/ja active Active
- 2018-12-28 WO PCT/JP2018/048468 patent/WO2019171733A1/ja active Application Filing
-
2020
- 2020-09-03 US US17/011,579 patent/US11451759B2/en active Active
-
2022
- 2022-08-17 US US17/889,429 patent/US20220394230A1/en active Pending
- 2022-09-05 JP JP2022140511A patent/JP7459195B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003242043A (ja) * | 2002-02-15 | 2003-08-29 | Oki Electric Ind Co Ltd | 再生装置およびデータ管理システムにおけるコンテンツ管理方法 |
WO2011136191A1 (ja) * | 2010-04-28 | 2011-11-03 | 富士フイルム株式会社 | 立体画像再生装置及び方法、立体撮像装置、立体ディスプレイ装置 |
WO2012105121A1 (ja) * | 2011-02-03 | 2012-08-09 | 富士フイルム株式会社 | 立体動画再生装置、立体動画再生プログラムならびにその記録媒体、立体ディスプレイ装置、立体撮像装置及び立体動画再生方法 |
JP2013172456A (ja) * | 2012-02-17 | 2013-09-02 | Samsung Electronics Co Ltd | マルチメディアコンテンツのフレーム検索方法及び装置 |
Non-Patent Citations (1)
Title |
---|
平松達雄ほか: "JPEG+Exif互換形式を容器として利用する健康モニター機器のデータ取り扱い形式", 第32回医療情報学連合大会論文集 (第13回日本医療情報学会学術大会) 医療情報学 第32回 SUP, vol. 32, JPN6022013652, 14 November 2012 (2012-11-14), JP, pages 1490 - 1493, ISSN: 0004747611 * |
Also Published As
Publication number | Publication date |
---|---|
US20220394230A1 (en) | 2022-12-08 |
WO2019171733A1 (ja) | 2019-09-12 |
JP7140517B2 (ja) | 2022-09-21 |
JP2022171739A (ja) | 2022-11-11 |
US20200404240A1 (en) | 2020-12-24 |
JP7459195B2 (ja) | 2024-04-01 |
US11451759B2 (en) | 2022-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10699481B2 (en) | Augmentation of captured 3D scenes with contextual information | |
US20210224322A1 (en) | Image search system, image search method and storage medium | |
JP2019125303A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US20190155465A1 (en) | Augmented media | |
JP7459195B2 (ja) | 生成装置、生成方法、及びプログラム | |
CN109863746B (zh) | 用于数据探索的沉浸式环境系统和视频投影模块 | |
JP2005267033A (ja) | 複合現実感映像蓄積検索方法及び装置 | |
JP2014215977A (ja) | 画像処理装置、画像処理方法及びプログラム | |
Aguilar et al. | ARStudio: A low-cost virtual studio based on Augmented Reality for video production | |
JP2013214158A (ja) | 表示画像検索装置、表示制御システム、表示制御方法、およびプログラム | |
KR20130118761A (ko) | 증강 현실 생성을 위한 방법 및 시스템 | |
WO2022230715A1 (ja) | 情報処理装置、情報処理方法、及び、プログラム | |
WO2022230718A1 (ja) | 情報処理装置、情報処理方法、及び、プログラム | |
JP2019220847A (ja) | ファイル生成装置、ファイル生成方法、処理装置、処理方法、及びプログラム | |
JP7378960B2 (ja) | 画像処理装置、画像処理システム、画像生成方法、および、プログラム | |
He et al. | Mobile augmented reality collaborative real-time annotation tool for smart ubiquitous objects | |
JP2010074437A (ja) | アノテーション付与方法及び装置及びプログラム及びコンピュータ読み取り可能な記録媒体 | |
JP2017130008A (ja) | 三次元被写体形状推定装置 | |
JP2005137730A (ja) | スキャンプロトコル作成方法、スキャンプロトコル作成装置および医用画像撮影装置 | |
CN116503483A (zh) | 姿态标定方法、装置、设备、存储介质及计算机程序产品 | |
JP4070057B2 (ja) | 図書情報検索空間構築・検索装置および図書情報検索空間構築・検索プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
JP2022136864A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
Schörkhuber et al. | Intelligent film assistant for personalized video creation on mobile devices | |
JP2023010008A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
CN117132708A (zh) | 图像生成方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210309 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210309 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220412 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220606 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220809 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220908 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7140517 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |