JP2011086283A - 動的レンダリング用3次元ビデオキャプチャ・ワークフロー用のシステム及び方法 - Google Patents
動的レンダリング用3次元ビデオキャプチャ・ワークフロー用のシステム及び方法 Download PDFInfo
- Publication number
- JP2011086283A JP2011086283A JP2010202315A JP2010202315A JP2011086283A JP 2011086283 A JP2011086283 A JP 2011086283A JP 2010202315 A JP2010202315 A JP 2010202315A JP 2010202315 A JP2010202315 A JP 2010202315A JP 2011086283 A JP2011086283 A JP 2011086283A
- Authority
- JP
- Japan
- Prior art keywords
- video data
- metadata
- objects
- dimensional
- rendering
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000009877 rendering Methods 0.000 title claims abstract description 44
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000012805 post-processing Methods 0.000 claims description 9
- 238000005259 measurement Methods 0.000 claims description 2
- 230000000694 effects Effects 0.000 description 21
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000010287 polarization Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013479 data entry Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 208000002173 dizziness Diseases 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000009459 flexible packaging Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 235000019640 taste Nutrition 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
Landscapes
- Engineering & Computer Science (AREA)
- Library & Information Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Processing Or Creating Images (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
【解決手段】3次元ビデオデータを生成する方法は、複数のオブジェクトを有するシーンから2次元ビデオデータを取得するステップと、シーン中のオブジェクトを識別するステップと、複数のオブジェクトの相対位置を取得するステップと、2次元ビデオデータを符号化して符号化2次元ビデオデータを生成するステップと、複数のオブジェクトの相対位置に基づいて相対位置メタデータを生成するステップと、相対位置メタデータに対する演算用に、3次元奥行き係数メタデータを提供するステップとを含む。このようにして、既存の2次元ワークフローを費用効果的な方法で利用することができ、エンドユーザは、3次元奥行き係数メタデータを調整して、特定のレンダリング環境又は個人的な視聴の好みに合わせることができる。
【選択図】図1
Description
Claims (22)
- 3次元ビデオデータを生成する方法において、
複数のオブジェクトを有するシーンから2次元ビデオデータを取得するステップと;
前記シーン中の前記複数のオブジェクトを識別するステップと;
前記複数のオブジェクトの相対位置を取得するステップと;
前記2次元ビデオデータを符号化して、符号化2次元ビデオデータを生成するステップと;
前記複数のオブジェクトの前記相対位置に基づいて、相対位置メタデータを生成するステップと;
前記相対位置メタデータに対する演算用に、3次元奥行き係数メタデータを提供するステップと;
を含む方法。 - 前記複数のオブジェクトの相対位置を取得するステップの前に、前記シーンの異なる視点に対応する追加的な2次元ビデオデータを取得するステップを更に含むことを特徴とする請求項1に記載の方法。
- 前記2次元ビデオデータを符号化するステップの前に、前記2次元ビデオデータを後処理して、後処理した2次元ビデオデータを生成するステップを更に含み、前記符号化するステップは、前記後処理した2次元ビデオデータを用いて、前記符号化2次元ビデオデータを生成することを特徴とする請求項1に記載の方法。
- 前記識別ステップが、無線IC(RFID)タグ、手動のテープ測定値、前記シーン中の識別可能なペイン参照、又はコンピュータレンダリングから自動生成した値の1つを用いることを特徴とする請求項1に記載の方法。
- 3次元モデル化アルゴリズムを、前記符号化2次元ビデオデータ、前記相対位置メタデータ、及び前記3次元奥行き係数メタデータに適用して、前記3次元ビデオデータをレンダリングするステップを更に含むことを特徴とする請求項1に記載の方法。
- 前記3次元モデル化アルゴリズムを適用するステップにおいて、前記3次元ビデオデータのレンダリング用の左画像及び右画像を計算することを特徴とする請求項5に記載の方法。
- 前記相対位置メタデータ及び前記3次元奥行き係数メタデータに3次元モデル化アルゴリズムを適用して、前記複数のオブジェクトの1つ以上をレンダリングするステップを更に含むことを特徴とする請求項1に記載の方法。
- 前記3次元奥行き係数メタデータは、前記識別した複数のオブジェクトの1つ以上の前記相対位置を、基準点に対して変化させることを特徴とする請求項1に記載の方法。
- 前記3次元奥行き係数メタデータは、前記基準点に対して負から正の範囲内であることを特徴とする請求項8に記載の方法。
- 前記基準点が、レンダリング用のディスプレイの幾何学的な平面であることを特徴とする請求項9に記載の方法。
- 前記相対位置メタデータが、前記シーン中に含まれる基準点を用いることを特徴とする請求項1に記載の方法。
- 前記相対位置メタデータが、レンダリング用のディスプレイの幾何学的な平面に対応する基準点を用いることを特徴とする請求項1に記載の方法。
- 前記相対位置メタデータが、グローバルな基準点を用いることを特徴とする請求項1に記載の方法。
- 前記相対位置メタデータが、複数の基準点を用い、これら複数の基準点の各々が、前記複数のオブジェクトの1つ以上に対応することを特徴とする請求項1に記載の方法。
- 前記3次元奥行き係数メタデータを、1つ以上のレンダリング環境に対して提供することを特徴とする請求項1に記載の方法。
- 前記1つ以上のレンダリング環境が、ホームシアター環境を含むことを特徴とする請求項15に記載の方法。
- 前記1つ以上のレンダリング環境が、公衆劇場でのレンダリングを含むことを特徴とする請求項15に記載の方法。
- 前記1つ以上のレンダリング環境が、ブルーレイ・レンダリングシステムを含むことを特徴とする請求項15に記載の方法。
- 3次元ビデオデータを生成するシステムにおいて、
このシステムがプロセッサを備え、このプロセッサは、
複数のオブジェクトを有するシーンから2次元ビデオデータを取得し;
前記シーン中の前記複数のオブジェクトを識別し;
前記複数のオブジェクトの相対位置を取得し;
前記2次元ビデオデータを符号化して、符号化2次元ビデオデータを生成し;
前記複数のオブジェクトの前記相対位置に基づいて、相対位置メタデータを生成し;
前記相対位置メタデータに対する演算用に、3次元奥行き係数メタデータを提供する
よう構成されていることを特徴とするシステム。 - 前記プロセッサが更に、前記複数のオブジェクトの相対位置を取得する前に、前記シーンの異なる視点に対応する追加的な2次元ビデオデータを取得するように構成されていることを特徴とする請求項19に記載のシステム。
- 前記プロセッサが更に、前記2次元ビデオデータを符号化する前に、前記2次元ビデオデータを後処理して、後処理した2次元ビデオデータを生成し、前記後処理した2次元ビデオデータを符号化して、前記符号化2次元ビデオデータを生成するように構成されていることを特徴とする請求項19に記載のシステム。
- 前記プロセッサが更に、3次元モデル化アルゴリズムを、前記符号化2次元ビデオデータ、前記相対位置メタデータ、及び前記3次元奥行き係数メタデータに適用して、前記3次元ビデオデータをレンダリングするように構成されていることを特徴とする請求項19に記載のシステム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US12/584,726 US8614737B2 (en) | 2009-09-11 | 2009-09-11 | System and method for three-dimensional video capture workflow for dynamic rendering |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011086283A true JP2011086283A (ja) | 2011-04-28 |
Family
ID=42830297
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010202315A Pending JP2011086283A (ja) | 2009-09-11 | 2010-09-09 | 動的レンダリング用3次元ビデオキャプチャ・ワークフロー用のシステム及び方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8614737B2 (ja) |
EP (1) | EP2309765A1 (ja) |
JP (1) | JP2011086283A (ja) |
KR (1) | KR101231160B1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020137128A (ja) * | 2019-02-25 | 2020-08-31 | 株式会社B.b.designLab | コンピュータ読取可能な非一過性の記憶媒体、Webサーバ、及び、瞳孔間のキャリブレーション方法 |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101631451B1 (ko) * | 2009-11-16 | 2016-06-20 | 엘지전자 주식회사 | 영상표시장치 및 그 동작방법 |
US8947503B2 (en) * | 2009-12-08 | 2015-02-03 | Broadcom Corporation | Method and system for processing 3-D video |
US20110199468A1 (en) * | 2010-02-15 | 2011-08-18 | Gallagher Andrew C | 3-dimensional display with preferences |
US9053562B1 (en) * | 2010-06-24 | 2015-06-09 | Gregory S. Rabin | Two dimensional to three dimensional moving image converter |
EP2418857A1 (en) * | 2010-08-12 | 2012-02-15 | Thomson Licensing | Stereoscopic menu control |
EP2432232A1 (en) * | 2010-09-19 | 2012-03-21 | LG Electronics, Inc. | Method and apparatus for processing a broadcast signal for 3d (3-dimensional) broadcast service |
JP5050094B2 (ja) * | 2010-12-21 | 2012-10-17 | 株式会社東芝 | 映像処理装置及び映像処理方法 |
KR20120119173A (ko) * | 2011-04-20 | 2012-10-30 | 삼성전자주식회사 | 3d 영상처리장치 및 그 입체감 조정방법 |
JP6001826B2 (ja) * | 2011-05-18 | 2016-10-05 | 任天堂株式会社 | 情報処理システム、情報処理装置、情報処理プログラムおよび情報処理方法 |
US9420259B2 (en) * | 2011-05-24 | 2016-08-16 | Comcast Cable Communications, Llc | Dynamic distribution of three-dimensional content |
US10445398B2 (en) * | 2012-03-01 | 2019-10-15 | Sony Corporation | Asset management during production of media |
US9317709B2 (en) | 2012-06-26 | 2016-04-19 | Google Inc. | System and method for detecting and integrating with native applications enabled for web-based storage |
WO2014007414A1 (en) * | 2012-07-06 | 2014-01-09 | Lg Electronics Inc. | Terminal for increasing visual comfort sensation of 3d object and control method thereof |
US20140062999A1 (en) * | 2012-09-05 | 2014-03-06 | Shenzhen China Star Optoelectronics Technology Co., Ltd. | Display system and display control method thereof |
US9992021B1 (en) | 2013-03-14 | 2018-06-05 | GoTenna, Inc. | System and method for private and point-to-point communication between computing devices |
US9727577B2 (en) | 2013-03-28 | 2017-08-08 | Google Inc. | System and method to store third-party metadata in a cloud storage system |
CN104345686B (zh) * | 2013-08-07 | 2016-12-28 | 中国科学院沈阳计算技术研究所有限公司 | 二维双向dexel毛坯建模方法及其加工仿真方法 |
CN105844694B (zh) * | 2015-08-24 | 2019-04-26 | 鲸彩在线科技(大连)有限公司 | 一种游戏数据生成、上传方法及装置 |
CN109078324B (zh) * | 2015-08-24 | 2022-05-03 | 鲸彩在线科技(大连)有限公司 | 一种游戏数据下载、重构方法及装置 |
CN105898280A (zh) * | 2015-12-28 | 2016-08-24 | 乐视致新电子科技(天津)有限公司 | 立体片源的播放优化方法及装置 |
US10009640B1 (en) * | 2017-05-31 | 2018-06-26 | Verizon Patent And Licensing Inc. | Methods and systems for using 2D captured imagery of a scene to provide virtual reality content |
WO2019083068A1 (ko) * | 2017-10-27 | 2019-05-02 | 한양대학교 산학협력단 | 투구 연습을 통한 3차원 정보 획득 시스템 및 카메라 파라미터 산출 방법 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000078611A (ja) * | 1998-08-31 | 2000-03-14 | Toshiba Corp | 立体映像受信装置及び立体映像システム |
JP2003187261A (ja) * | 2001-12-14 | 2003-07-04 | Canon Inc | 3次元画像生成装置、3次元画像生成方法、立体画像処理装置、立体画像撮影表示システム、立体画像処理方法及び記憶媒体 |
JP4188968B2 (ja) * | 2003-01-20 | 2008-12-03 | 三洋電機株式会社 | 立体視用映像提供方法及び立体映像表示装置 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04188968A (ja) | 1990-11-21 | 1992-07-07 | Ricoh Co Ltd | 電子スチルカメラ |
KR100496513B1 (ko) | 1995-12-22 | 2005-10-14 | 다이나믹 디지탈 텝스 리서치 피티와이 엘티디 | 영상변환방법및영상변환시스템과,부호화방법및부호화시스템 |
US6208348B1 (en) * | 1998-05-27 | 2001-03-27 | In-Three, Inc. | System and method for dimensionalization processing of images in consideration of a pedetermined image projection format |
US7116324B2 (en) * | 1998-05-27 | 2006-10-03 | In-Three, Inc. | Method for minimizing visual artifacts converting two-dimensional motion pictures into three-dimensional motion pictures |
US7102633B2 (en) * | 1998-05-27 | 2006-09-05 | In-Three, Inc. | Method for conforming objects to a common depth perspective for converting two-dimensional images into three-dimensional images |
US6515659B1 (en) * | 1998-05-27 | 2003-02-04 | In-Three, Inc. | Method and system for creating realistic smooth three-dimensional depth contours from two-dimensional images |
US7116323B2 (en) * | 1998-05-27 | 2006-10-03 | In-Three, Inc. | Method of hidden surface reconstruction for creating accurate three-dimensional images converted from two-dimensional images |
EP1578142B1 (en) | 2002-12-16 | 2014-10-08 | Sanyo Electric Co., Ltd. | Stereoscopic video creating device and stereoscopic video distributing method |
ATE515103T1 (de) * | 2004-12-16 | 2011-07-15 | St Ericsson Sa | Direktkonvertierungsvorrichtung mit kompensationsmittel für einen übertragungspfad einer drahtlosen kommunikationsvorrichtung |
US8885017B2 (en) * | 2005-07-14 | 2014-11-11 | 3Ality Digital Systems, Llc | Real-time process and technology using image processing to maintain and ensure viewer comfort during capture, live transmission, and post-production of stereoscopic 3D imagery |
SG130962A1 (en) * | 2005-09-16 | 2007-04-26 | St Microelectronics Asia | A method and system for adaptive pre-filtering for digital video signals |
DE102005046762A1 (de) | 2005-09-29 | 2007-04-05 | Siemens Ag | System und Verfahren zur Darstellung von Benutzerinformationen, insbesondere von Augmented-Reality-Informationen, mit Hilfe von in RFID-Datenspeichern hinterlegten Trackinginformationen |
US7675520B2 (en) * | 2005-12-09 | 2010-03-09 | Digital Steamworks, Llc | System, method and computer program for creating two dimensional (2D) or three dimensional (3D) computer animation from video |
US20070146360A1 (en) * | 2005-12-18 | 2007-06-28 | Powerproduction Software | System And Method For Generating 3D Scenes |
US8244025B2 (en) * | 2006-03-20 | 2012-08-14 | Siemens Energy, Inc. | Method of coalescing information about inspected objects |
US7893999B2 (en) * | 2006-05-22 | 2011-02-22 | Broadcom Corporation | Simultaneous video and sub-frame metadata capture system |
EP1887526A1 (en) * | 2006-08-11 | 2008-02-13 | Seac02 S.r.l. | A digitally-augmented reality video system |
WO2009034519A1 (en) | 2007-09-13 | 2009-03-19 | Koninklijke Philips Electronics N.V. | Generation of a signal |
WO2009083863A1 (en) | 2007-12-20 | 2009-07-09 | Koninklijke Philips Electronics N.V. | Playback and overlay of 3d graphics onto 3d video |
KR20100002032A (ko) * | 2008-06-24 | 2010-01-06 | 삼성전자주식회사 | 영상 생성 방법, 영상 처리 방법, 및 그 장치 |
US8249834B2 (en) * | 2008-08-13 | 2012-08-21 | Autodesk, Inc. | Device, system, and method of computer aided design (CAD) |
US8395651B2 (en) * | 2009-10-09 | 2013-03-12 | Cisco Technology, Inc. | System and method for providing a token in a video environment |
-
2009
- 2009-09-11 US US12/584,726 patent/US8614737B2/en active Active
-
2010
- 2010-06-18 EP EP10006316A patent/EP2309765A1/en not_active Withdrawn
- 2010-09-08 KR KR1020100087878A patent/KR101231160B1/ko not_active IP Right Cessation
- 2010-09-09 JP JP2010202315A patent/JP2011086283A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000078611A (ja) * | 1998-08-31 | 2000-03-14 | Toshiba Corp | 立体映像受信装置及び立体映像システム |
JP2003187261A (ja) * | 2001-12-14 | 2003-07-04 | Canon Inc | 3次元画像生成装置、3次元画像生成方法、立体画像処理装置、立体画像撮影表示システム、立体画像処理方法及び記憶媒体 |
JP4188968B2 (ja) * | 2003-01-20 | 2008-12-03 | 三洋電機株式会社 | 立体視用映像提供方法及び立体映像表示装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020137128A (ja) * | 2019-02-25 | 2020-08-31 | 株式会社B.b.designLab | コンピュータ読取可能な非一過性の記憶媒体、Webサーバ、及び、瞳孔間のキャリブレーション方法 |
JP7471572B2 (ja) | 2019-02-25 | 2024-04-22 | 株式会社B.b.designLab | キャリブレーションシステム、及び、キャリブレーション方法 |
Also Published As
Publication number | Publication date |
---|---|
KR101231160B1 (ko) | 2013-02-07 |
US20110063410A1 (en) | 2011-03-17 |
US8614737B2 (en) | 2013-12-24 |
KR20110028232A (ko) | 2011-03-17 |
EP2309765A1 (en) | 2011-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8614737B2 (en) | System and method for three-dimensional video capture workflow for dynamic rendering | |
RU2546546C2 (ru) | Способы и системы для представления трехмерных изображений движения с адаптивной к содержимому информацией | |
TWI445405B (zh) | 用於在三維圖像中提供隱藏字幕之系統及方法 | |
CN112585978B (zh) | 生成用于在vr中显示的复合视频流 | |
CN106303289B (zh) | 一种将真实对象与虚拟场景融合显示的方法、装置及系统 | |
RU2537800C2 (ru) | Способ и устройство для наложения трехмерной графики на трехмерное видеоизображение | |
KR101210315B1 (ko) | 3차원 비디오 위에 그래픽 객체를 오버레이하기 위한 추천 깊이 값 | |
JP6622388B2 (ja) | ビデオ画像に関連付けられているオーディオ信号を処理する方法および装置 | |
US20200389640A1 (en) | Method and device for transmitting 360-degree video by using metadata related to hotspot and roi | |
US9035942B2 (en) | Graphic image processing method and apparatus | |
JP5851625B2 (ja) | 立体視映像処理装置、立体視映像処理方法及び立体視映像処理用プログラム | |
TW201119353A (en) | Perceptual depth placement for 3D objects | |
JP2015187797A (ja) | 画像データ生成装置および画像データ再生装置 | |
US20150348273A1 (en) | Depth modification for display applications | |
JP2010258872A (ja) | 立体映像および音声記録方法、立体映像および音声再生方法、立体映像および音声記録装置、立体映像および音声再生装置、立体映像および音声記録媒体 | |
JP2015114716A (ja) | 画像データ再生装置および画像データ生成装置 | |
TW201125353A (en) | 3D screen size compensation | |
TWI735552B (zh) | 將沈浸式視訊格式化用於傳統及沈浸式顯像元件之方法、裝置及串流 | |
EP3806458A1 (en) | Method and device for transmitting and receiving metadata about plurality of viewpoints | |
JP6934052B2 (ja) | 表示制御装置、表示制御方法及びプログラム | |
US20120098944A1 (en) | 3-dimensional image display apparatus and image display method thereof | |
Grau et al. | 3D-TV R&D activities in europe | |
JP2011119926A (ja) | 映像処理装置、映像処理方法及びコンピュータプログラム | |
US20130136336A1 (en) | Image processing apparatus and controlling method for image processing apparatus | |
KR20130081569A (ko) | 3d 영상을 출력하기 위한 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120516 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120814 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121213 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20121225 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20130118 |