JP2015187797A5 - - Google Patents

Download PDF

Info

Publication number
JP2015187797A5
JP2015187797A5 JP2014064975A JP2014064975A JP2015187797A5 JP 2015187797 A5 JP2015187797 A5 JP 2015187797A5 JP 2014064975 A JP2014064975 A JP 2014064975A JP 2014064975 A JP2014064975 A JP 2014064975A JP 2015187797 A5 JP2015187797 A5 JP 2015187797A5
Authority
JP
Japan
Prior art keywords
viewpoint
image data
free
data
reproduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014064975A
Other languages
Japanese (ja)
Other versions
JP2015187797A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2014064975A priority Critical patent/JP2015187797A/en
Priority claimed from JP2014064975A external-priority patent/JP2015187797A/en
Publication of JP2015187797A publication Critical patent/JP2015187797A/en
Publication of JP2015187797A5 publication Critical patent/JP2015187797A5/ja
Pending legal-status Critical Current

Links

Claims (10)

つ以上の視点から撮影された視点画像データを取得し、取得した視点画像データを使用して、任意の視点からの画像の再生を可能とした自由視点画像データを生成する画像データ生成装置であって
再生時の視点の基点となる位置を示す視点座標データを一つ以上含む自由視点メタデータと、
前記視点画像データとを含む、前記自由視点画像データを生成する画像データ生成部を具備することを特徴とする画像データ生成装置。
It acquires viewpoint image data photographed from one or more viewpoints, using the viewpoint image data acquisition, image data generation for generating free viewpoint image data which enables reproduction of an image from an arbitrary viewpoint A device ,
Free viewpoint metadata including one or more viewpoint coordinate data indicating a position serving as a base point of the viewpoint at the time of reproduction ;
An image data generation apparatus comprising: an image data generation unit that generates the free viewpoint image data including the viewpoint image data.
上記自由視点メタデータは、さらに、再生時の視点の方向の初期位置を示し、かつ視点を回転させて自由視点表示を行う際の視点の回転中心を示す回転基点データを一つ以上含むことを特徴とする請求項1に記載の画像データ生成装置。The free viewpoint metadata further includes at least one rotation base point data that indicates an initial position in the direction of the viewpoint at the time of reproduction and that indicates the rotation center of the viewpoint when the viewpoint is rotated to display the free viewpoint. The image data generation apparatus according to claim 1, wherein: 上記自由視点メタデータは、前記視点画像データに含まれる各オブジェクトの配置位置を示すオブジェクト座標データをさらに含むことを特徴とする請求項2に記載の画像データ生成装置。The image data generating apparatus according to claim 2, wherein the free viewpoint metadata further includes object coordinate data indicating an arrangement position of each object included in the viewpoint image data. 前記自由視点メタデータに含まれる、視点座標データおよび各回転基点データはそれぞれ、座標値、もしくは前記オブジェクト座標データを使用することを示す情報を格納することを特徴とする請求項に記載の画像データ生成装置。 The included in the free viewpoint metadata, according to claim 3, characterized in that storing each viewpoint coordinate data and the rotation base each data, coordinate values, or information indicating that the use of the object coordinate data Image data generation device. 前記自由視点メタデータは、強制的に、指定する視点座標データおよび回転基点データを用いた視点で表示することを指示する強制視点表示データを含み、当該強制視点表示データは、当該指定する視点座標データおよび回転基点データを直接含むか、または、前記自由視点メタデータに含まれる視点座標データおよび回転基点データを指定することを特徴とする請求項2〜4の何れか一項に記載の画像データ生成装置。 Perspective the free viewpoint metadata forcibly saw including a forced perspective display data for instructing to display the perspective with the viewpoint coordinate data and the rotation base point data to specify, the forced perspective display data, to the designated The image according to any one of claims 2 to 4 , wherein the image directly includes coordinate data and rotation base point data, or designates viewpoint coordinate data and rotation base point data included in the free viewpoint metadata. Data generator. 前記自由視点画像データは、背景をモデル化して画像データとして作成した背景モデルデータ、および、前記視点画像データにおける各オブジェクトの領域を識別するための領域画像データをさらに含むことを特徴とする請求項1〜5の何れか一項に記載の画像データ生成装置。The free viewpoint image data further includes background model data created as image data by modeling a background, and region image data for identifying a region of each object in the viewpoint image data. The image data generation device according to any one of 1 to 5. 任意の視点からの画像の再生を可能とした自由視点画像データを再生する画像データ再生装置において、
前記自由視点画像データは、再生時の視点の基点となる位置を示す視点座標データを一つ以上含む自由視点メタデータと、一つ以上の視点から撮影された視点画像データと、を含み、
前記自由視点画像データを表示する際の視点位置を、前記視点座標データに基づいて設定する視点設定と、
前記自由視点画像データから、前記視点設定部が設定した視点位置からの画像を生成する自由視点画像生成部と、を具備することを特徴とする画像データ再生装置。
In an image data reproduction apparatus for reproducing free viewpoint image data that enables reproduction of an image from an arbitrary viewpoint,
The free viewpoint image data includes free viewpoint metadata including one or more viewpoint coordinate data indicating a position serving as a base point of the viewpoint at the time of reproduction , and viewpoint image data photographed from one or more viewpoints ,
A viewpoint setting unit that sets a viewpoint position when displaying the free viewpoint image data based on the viewpoint coordinate data ;
An image data reproducing apparatus comprising: a free viewpoint image generation unit that generates an image from the viewpoint position set by the viewpoint setting unit from the free viewpoint image data .
一つ以上の視点から撮影された視点画像データを取得し、取得した該視点画像データを使用して、任意の視点からの画像の再生を可能とした自由視点画像データを生成する画像データ生成装置と、
前記画像データ生成装置が生成した自由視点画像データを再生する画像データ再生装置とを備え、
前記画像データ生成装置は、再生時の視点の基点となる位置を示す視点座標データを一つ以上含む自由視点メタデータと、前記視点画像データとを含む、前記自由視点画像データを生成し、
前記画像データ再生装置は、前記自由視点画像データを表示する際の視点位置を、前記視点座標データに基づいて設定する視点設定部と、前記自由視点画像データから、前記視点設定部が設定した視点位置からの画像を生成する自由視点画像生成部と、を具備することを特徴とする画像処理システム
Image data generation apparatus that acquires viewpoint image data captured from one or more viewpoints and generates free viewpoint image data that enables reproduction of an image from an arbitrary viewpoint using the acquired viewpoint image data When,
An image data reproduction device for reproducing the free viewpoint image data generated by the image data generation device,
The image data generation device generates the free viewpoint image data including free viewpoint metadata including one or more viewpoint coordinate data indicating a position serving as a base point of a viewpoint at the time of reproduction, and the viewpoint image data,
The image data reproduction device includes: a viewpoint setting unit that sets a viewpoint position for displaying the free viewpoint image data based on the viewpoint coordinate data; and a viewpoint set by the viewpoint setting unit from the free viewpoint image data. An image processing system comprising: a free viewpoint image generation unit that generates an image from a position .
一つ以上の視点から撮影された視点画像データを取得し、取得した該視点画像データを使用して、任意の視点からの画像の再生を可能とした自由視点画像データを生成する画像データ生成装置としてコンピュータを機能させるための画像データ生成プログラムであって、再生時の視点の基点となる位置を示す視点座標データを一つ以上含む自由視点メタデータと、前記視点画像データとを含む、前記自由視点画像データを生成する画像データ生成部としてコンピュータを機能させるための画像データ生成プログラム。Image data generation apparatus that acquires viewpoint image data captured from one or more viewpoints and generates free viewpoint image data that enables reproduction of an image from an arbitrary viewpoint using the acquired viewpoint image data As an image data generation program for causing a computer to function, the free viewpoint metadata including one or more viewpoint coordinate data indicating a position serving as a base point of a viewpoint at the time of reproduction, and the viewpoint image data An image data generation program for causing a computer to function as an image data generation unit that generates viewpoint image data. 任意の視点からの画像の再生を可能とした自由視点画像データを再生する画像データ再生装置としてコンピュータを機能させるための画像データ再生プログラムであって、前記自由視点画像データは、再生時の視点の基点となる位置を示す視点座標データを一つ以上含む自由視点メタデータと、一つ以上の視点から撮影された視点画像データと、を含み、前記自由視点画像データを表示する際の視点位置を、前記視点座標データに基づいて設定する視点設定部、および、前記自由視点画像データから、前記視点設定部が設定した視点位置からの画像を生成する自由視点画像生成部としてコンピュータを機能させるための画像データ再生プログラム。An image data reproduction program for causing a computer to function as an image data reproduction apparatus that reproduces free viewpoint image data that enables reproduction of an image from an arbitrary viewpoint, wherein the free viewpoint image data includes a viewpoint at the time of reproduction. Including free viewpoint metadata including one or more viewpoint coordinate data indicating a position serving as a base point, and viewpoint image data captured from one or more viewpoints, and the viewpoint position when the free viewpoint image data is displayed. A viewpoint setting unit that is set based on the viewpoint coordinate data, and a free viewpoint image generation unit that generates an image from the viewpoint position set by the viewpoint setting unit from the free viewpoint image data. Image data playback program.
JP2014064975A 2014-03-27 2014-03-27 Image data generation device and image data reproduction device Pending JP2015187797A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014064975A JP2015187797A (en) 2014-03-27 2014-03-27 Image data generation device and image data reproduction device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014064975A JP2015187797A (en) 2014-03-27 2014-03-27 Image data generation device and image data reproduction device

Publications (2)

Publication Number Publication Date
JP2015187797A JP2015187797A (en) 2015-10-29
JP2015187797A5 true JP2015187797A5 (en) 2017-05-18

Family

ID=54430009

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014064975A Pending JP2015187797A (en) 2014-03-27 2014-03-27 Image data generation device and image data reproduction device

Country Status (1)

Country Link
JP (1) JP2015187797A (en)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6532393B2 (en) 2015-12-02 2019-06-19 株式会社ソニー・インタラクティブエンタテインメント Display control apparatus and display control method
JP6674247B2 (en) * 2015-12-14 2020-04-01 キヤノン株式会社 Information processing apparatus, information processing method, and computer program
JP6429829B2 (en) 2016-05-25 2018-11-28 キヤノン株式会社 Image processing system, image processing apparatus, control method, and program
KR102567002B1 (en) * 2016-08-16 2023-08-14 삼성전자주식회사 Image display apparatus and operating method for the same
JP6812181B2 (en) * 2016-09-27 2021-01-13 キヤノン株式会社 Image processing device, image processing method, and program
US11398077B2 (en) 2016-10-06 2022-07-26 Sony Corporation Reproducing device, reproducing method, recording device, recording method, reproducing/recording device, and reproducing/recording method for display of a 3D model arranged in a space recreated by a free visual point moving image stream
JP6539253B2 (en) 2016-12-06 2019-07-03 キヤノン株式会社 INFORMATION PROCESSING APPARATUS, CONTROL METHOD THEREOF, AND PROGRAM
WO2018120294A1 (en) * 2016-12-30 2018-07-05 华为技术有限公司 Information processing method and device
JP6482580B2 (en) * 2017-02-10 2019-03-13 キヤノン株式会社 Information processing apparatus, information processing method, and program
JP6818606B2 (en) * 2017-03-24 2021-01-20 Kddi株式会社 Free-viewpoint image generation and display methods, devices and programs
JP6922369B2 (en) 2017-04-14 2021-08-18 富士通株式会社 Viewpoint selection support program, viewpoint selection support method and viewpoint selection support device
JP6482696B2 (en) 2017-06-23 2019-03-13 キヤノン株式会社 Display control apparatus, display control method, and program
CN110892455A (en) 2017-07-14 2020-03-17 索尼公司 Image processing apparatus, image processing method for image processing apparatus, and program
JP6991768B2 (en) 2017-07-28 2022-01-13 キヤノン株式会社 Display control device and display control method
JP7030452B2 (en) * 2017-08-30 2022-03-07 キヤノン株式会社 Information processing equipment, information processing device control methods, information processing systems and programs
JP7104504B2 (en) * 2017-10-18 2022-07-21 キヤノン株式会社 Image processing system, image processing device, image transmission method, and program
JP6419278B1 (en) 2017-09-19 2018-11-07 キヤノン株式会社 Control device, control method, and program
JP7085816B2 (en) 2017-09-26 2022-06-17 キヤノン株式会社 Information processing equipment, information providing equipment, control methods, and programs
JP2019114147A (en) 2017-12-25 2019-07-11 キヤノン株式会社 Image processing apparatus, control method for image processing apparatus, and program
JP2019125303A (en) * 2018-01-19 2019-07-25 キヤノン株式会社 Information processing device, information processing method, and program
JP7073128B2 (en) 2018-02-08 2022-05-23 キヤノン株式会社 Communication equipment, communication methods, and programs
JP7045218B2 (en) * 2018-02-28 2022-03-31 キヤノン株式会社 Information processing equipment and information processing methods, programs
JP2019179080A (en) * 2018-03-30 2019-10-17 ソニー株式会社 Information processing apparatus, information processing method, and program
WO2019231178A1 (en) * 2018-06-01 2019-12-05 엘지전자 주식회사 Method and device for transmitting and receiving metadata about plurality of viewpoints
JP7277085B2 (en) 2018-07-04 2023-05-18 キヤノン株式会社 Information processing device, information processing method and program
JP7193938B2 (en) * 2018-07-04 2022-12-21 キヤノン株式会社 Information processing device, its control method, and program
JP6632681B2 (en) * 2018-10-10 2020-01-22 キヤノン株式会社 Control device, control method, and program
JP6572368B2 (en) * 2018-11-02 2019-09-11 キヤノン株式会社 Generating apparatus, generating method, and program
US20190088005A1 (en) 2018-11-15 2019-03-21 Intel Corporation Lightweight View Dependent Rendering System for Mobile Devices
JP2020086983A (en) 2018-11-27 2020-06-04 キヤノン株式会社 Image processing device, image processing method, and program
JP2022047548A (en) * 2019-01-16 2022-03-25 ソニーグループ株式会社 Image processing device, image processing method, and program
JP7267753B2 (en) 2019-01-21 2023-05-02 キヤノン株式会社 Control device, control method, and program
GB2582315B (en) 2019-03-19 2023-05-17 Sony Interactive Entertainment Inc Method and system for generating an image
JP7336871B2 (en) * 2019-04-18 2023-09-01 日本放送協会 All-dome video processing device and program
WO2021002338A1 (en) * 2019-07-03 2021-01-07 ソニー株式会社 Information processing device, information processing method, reproduction processing device, and reproduction processing method
CN114502246A (en) * 2019-10-10 2022-05-13 索尼集团公司 Image processing apparatus, image processing method, and program
JP7423974B2 (en) 2019-10-21 2024-01-30 株式会社Jvcケンウッド Information processing system, information processing method and program
JP2020053088A (en) * 2019-12-11 2020-04-02 キヤノン株式会社 Control device, control method, and program
JP7427468B2 (en) 2020-02-18 2024-02-05 キヤノン株式会社 Information processing device, information processing method, and program
JP7301772B2 (en) * 2020-03-19 2023-07-03 富士フイルム株式会社 Display control device, display control device operation method, display control device operation program
JP7462591B2 (en) * 2020-03-26 2024-04-05 株式会社ソニー・インタラクティブエンタテインメント Display control device and display control method
US20230298260A1 (en) 2020-07-17 2023-09-21 Sony Group Corporation Image processing device, image processing method, and program
JP6986308B1 (en) * 2021-09-14 2021-12-22 株式会社ラグザ Live video transmission method for online darts games and camera system for online darts games
WO2023085139A1 (en) * 2021-11-12 2023-05-19 ソニーグループ株式会社 Data processing device, data processing method, and program
CN117857769A (en) * 2024-03-07 2024-04-09 长江龙新媒体有限公司 Self-adaptive multi-camera capturing and real-time free view video rendering method and system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4671873B2 (en) * 2006-01-23 2011-04-20 シャープ株式会社 Composite video generation system
JP5236039B2 (en) * 2010-06-01 2013-07-17 キヤノン株式会社 Video processing apparatus and control method thereof
US20140340404A1 (en) * 2011-12-16 2014-11-20 Thomson Licensing Method and apparatus for generating 3d free viewpoint video

Similar Documents

Publication Publication Date Title
JP2015187797A5 (en)
JP2015114716A5 (en)
JP2014207015A5 (en)
RU2016124468A (en) CONTROL DEVICE, METHOD OF MANAGEMENT AND COMPUTER PROGRAM
JP2016512363A5 (en)
JP2013533537A5 (en)
JP2014126889A5 (en)
JP2013533541A5 (en)
JP2012165144A5 (en)
JP2016514865A5 (en)
JP2017130793A5 (en)
JP2016518647A5 (en)
EP3131302A3 (en) Method and device for generating video content
JP2018073172A5 (en)
JP2015109649A5 (en) Generating device, reproducing device, generating method and reproducing method
JP2014082746A5 (en)
JP2016097657A5 (en)
JP2016220003A5 (en)
JP2014236866A5 (en) Information processing apparatus and display method
JP2015046707A5 (en)
JP2018082234A5 (en)
JP2014229918A5 (en)
JP2015089021A5 (en)
JP2016514307A5 (en)
JP2017086542A5 (en)